WO2018070255A1 - 送信装置、送信方法、受信装置および受信方法 - Google Patents

送信装置、送信方法、受信装置および受信方法 Download PDF

Info

Publication number
WO2018070255A1
WO2018070255A1 PCT/JP2017/035162 JP2017035162W WO2018070255A1 WO 2018070255 A1 WO2018070255 A1 WO 2018070255A1 JP 2017035162 W JP2017035162 W JP 2017035162W WO 2018070255 A1 WO2018070255 A1 WO 2018070255A1
Authority
WO
WIPO (PCT)
Prior art keywords
subtitle
data
bitmap
conversion
stream
Prior art date
Application number
PCT/JP2017/035162
Other languages
English (en)
French (fr)
Inventor
塚越　郁夫
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to EP17859926.2A priority Critical patent/EP3386201B1/en
Priority to CN201780004323.XA priority patent/CN108370451B/zh
Priority to JP2018517241A priority patent/JP7113746B2/ja
Priority to EP20189755.0A priority patent/EP3783902A1/en
Priority to US15/768,971 priority patent/US10757361B2/en
Publication of WO2018070255A1 publication Critical patent/WO2018070255A1/ja
Priority to US16/937,153 priority patent/US11317055B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/025—Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/20—Circuitry for controlling amplitude response
    • H04N5/202—Gamma control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/278—Subtitling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57—Control of contrast or brightness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals

Definitions

  • the present technology relates to a transmission device, a transmission method, a reception device, and a reception method, and more particularly to a transmission device that transmits subtitle information as bitmap data.
  • the color gamut of the video data is a wide color gamut (for example, ITU-R Rec Rec. Bt.2020 compliant) and the color gamut of the subtitle graphics data is a narrow color gamut (eg sRGB), the video image quality is reduced. In order to maintain high image quality, it is necessary to superimpose after the color gamut of the subtitle graphics data matches the color gamut of the video data.
  • a wide color gamut for example, ITU-R Rec Rec. Bt.2020 compliant
  • the color gamut of the subtitle graphics data is a narrow color gamut (eg sRGB)
  • HDR high dynamic range
  • SDR standard level dynamic range
  • the purpose of this technology is to reduce the processing load on the receiving side when superimposing the subtitle graphics data on the video data.
  • a video encoding unit for generating a video stream having video data
  • a subtitle encoding unit that generates a subtitle stream having bitmap data obtained by converting the graphics data of the subtitle
  • a transmission unit for transmitting a container of a predetermined format including the video stream and the subtitle stream
  • the subtitle stream is in a transmission apparatus having a bitmap conversion table including color gamut and / or luminance conversion information.
  • a video stream having video data is generated by the video encoding unit.
  • a subtitle stream having bitmap data obtained by converting subtitle graphics data is generated by the subtitle encoding unit.
  • the transmission unit transmits a container in a predetermined format including a video stream and a subtitle stream.
  • the subtitle stream has a bitmap conversion table including color gamut and / or luminance conversion information.
  • the subtitle stream may have a plurality of bitmap conversion tables with different conversion information.
  • the plurality of bitmap conversion tables may be added with the characteristic information of the subtitle graphics data and the target video data, respectively.
  • the subtitle stream has a bitmap conversion table including conversion information of color gamut and / or luminance. Therefore, on the receiving side, subtitle graphics data having characteristics suitable for the characteristics of the target video data to be superimposed can be easily obtained simply by converting the bitmap data into subtitle graphics data using the bitmap conversion table. Therefore, it is possible to reduce the processing load on the receiving side.
  • an information insertion unit that inserts characteristic information of graphics data of a subtitle before conversion into bitmap data may be further included in the subtitle stream.
  • the receiving side can easily grasp the characteristics of the graphics data of the subtitle before conversion into bitmap data.
  • a receiving unit that receives a container of a predetermined format including a video stream having video data and a subtitle stream having bitmap data obtained by converting graphics data of the subtitle;
  • the subtitle stream has a bitmap conversion table including color gamut and / or luminance conversion information. Processing for decoding the video stream to obtain target video data, processing for decoding the subtitle stream to obtain the bitmap data and the bitmap conversion table, and using the bitmap conversion table for the bitmap data
  • the receiving apparatus further includes a control unit that controls a process of converting the graphics data of the subtitle and a process of superimposing the graphics data of the subtitle on the target video data.
  • a container having a predetermined format including a video stream having video data and a subtitle stream having bitmap data obtained by converting the graphics data of the subtitle is received by the receiving unit.
  • the subtitle stream has a bitmap conversion table including color gamut and / or luminance conversion information.
  • a process of decoding the video stream to obtain target video data and a process of decoding the subtitle stream to obtain bitmap data and a bitmap conversion table are performed.
  • a process of converting the bitmap data into subtitle graphics data using a bitmap conversion table and a process of superimposing the subtitle graphics data on the target video data are performed.
  • the subtitle stream has a plurality of bitmap conversion tables having different conversion information, and in the process of converting bitmap data into graphics data of the subtitle, bitmap data among the plurality of bitmap conversion tables.
  • a bitmap conversion table adapted to the characteristics of the graphics data and the target video data of the subtitle before being converted into may be used.
  • the characteristic information of the graphics data of the subtitle before the conversion to the bitmap data is inserted into the subtitle stream, and in the process of converting the bitmap data to the graphics data of the subtitle, the bitmap data is converted to the bitmap data.
  • the characteristic of the graphics data of the subtitle before conversion may be determined based on characteristic information inserted in the subtitle stream.
  • the bitmap conversion table including the color gamut and / or luminance conversion information inserted in the subtitle stream is used. is there. Therefore, it is possible to easily obtain graphics data of a subtitle having characteristics suitable for the characteristics of the target video data to be superimposed, and to reduce the processing load.
  • the bitmap conversion table does not match the characteristics of the subtitle graphics data and target video data before conversion into bitmap data.
  • the bitmap data may be converted into subtitle graphics data in the receiver process so as to match the characteristics without using the bitmap conversion table. In this case, since it is possible to obtain the graphics data of the subtitle having characteristics suitable for the characteristics of the target video data to be superimposed, it is possible to suppress a decrease in video image quality.
  • FIG. 1 shows a configuration example of a transmission / reception system 10 as an embodiment.
  • the transmission / reception system 10 includes a transmission device 100 and a reception device 200.
  • the transmission apparatus 100 generates an MPEG2 transport stream TS as a container, and transmits the transport stream TS on a broadcast wave or a net packet.
  • the transport stream TS includes a video stream having video data (image data).
  • the transport stream TS includes a subtitle stream having bitmap data obtained by converting the graphics data of the subtitle as subtitle data (caption data).
  • This subtitle stream has a bitmap conversion table including conversion information for both color gamut and / or luminance, in this embodiment.
  • the subtitle stream has a predetermined number, that is, one or two or more bitmap conversion tables.
  • the subtitle graphics data and the target video data matching characteristic information are added to each bitmap conversion table.
  • the characteristics are a color gamut and / or a dynamic range, both characteristics in this embodiment. As a result, the receiving side can easily determine which bitmap conversion table to use.
  • the characteristic information of the graphics data of the subtitle before being converted into bitmap data is inserted into the subtitle stream.
  • the receiving side can easily grasp the characteristics of the graphics data of the subtitle before conversion into bitmap data.
  • the receiving apparatus 200 receives the transport stream TS sent from the transmitting apparatus 100.
  • the receiving apparatus 200 performs decoding processing on the video stream to obtain target video data.
  • target video data not only the video data itself sent from the transmission side but also video data obtained by performing conversion processing of the color gamut and the dynamic range as necessary can be considered.
  • the receiving apparatus 200 performs decoding processing on the subtitle stream to obtain bitmap data and a bitmap conversion table, and converts the bitmap data into graphics data of the subtitle using the bitmap conversion table.
  • bitmap conversion table suitable for the characteristics of the subtitle graphics data and target video data before conversion into bitmap data.
  • the characteristic of the graphics data of the subtitle before conversion into bitmap data is grasped from, for example, characteristic information inserted in the subtitle stream.
  • the receiving apparatus 200 superimposes the subtitle graphics data obtained by converting the bitmap data on the target video data. In this way, an image with a subtitle is displayed on the monitor by the video data on which the graphics data of the subtitle is superimposed.
  • FIG. 2 shows a configuration example of the transmission device 100.
  • the transmission apparatus 100 includes a control unit 101, a video encoder 102, a conversion unit 103, a subtitle encoder 104, a system encoder 105, and a transmission unit 106.
  • the control unit 101 includes a CPU (Central Processing Unit) and controls the operation of each unit of the transmission device 100 based on a control program.
  • the video encoder 102 performs encoding such as MPEG4-AVC or HEVC on the video data, and generates a video stream (PES stream) VS including the encoded video data.
  • PES stream video stream
  • the video data is SDR (Standard Dynamic Range) or HDR (High Dynamic Range) data, and has SDR or HDR photoelectric conversion characteristics.
  • the video encoder 102 inserts video data characteristic information, that is, meta information such as color gamut and dynamic range information, into the VUI (video usability information) area of the SPS NAL unit of the access unit (AU).
  • the conversion unit 103 converts the graphics data of the subtitle into bitmap data.
  • the graphics data of the subtitle is SDR or HDR data, and has SDR or HDR photoelectric conversion characteristics.
  • the conversion unit 103 outputs information of one or more bitmap conversion tables by referring to the HDR or SDR level assumed to be necessary on the receiving side together with the bitmap data.
  • the bitmap conversion table is a bitmap conversion table including color gamut and / or luminance conversion information.
  • this bitmap conversion table is not just for converting bitmap data into subtitle graphics data, but to match the color gamut and dynamic range of the target video data that is the video data to be superimposed. The range and luminance are also converted.
  • FIG. 3 shows a conversion target example other than the conversion from bitmap data to subtitle graphics data (Y / CbCr) in the bitmap conversion table.
  • the color gamut can be another conversion target.
  • the color gamut of the graphics data of the subtitle is BT. 709
  • the color gamut of the target video data is BT.
  • the color gamut is to be converted.
  • the graphics data of the subtitle before conversion to bitmap data is SDR and the target video data is HDR
  • the color gamut and brightness can be converted.
  • the graphics data of the subtitle before conversion into bitmap data is HDR and the target video data is SDR
  • the color gamut and luminance can be converted. If the graphics data of the subtitle before conversion to bitmap data is HDR and the target video data is HDR, there is nothing that can be converted because the color gamut and dynamic range are common.
  • the conversion unit 103 outputs information of a bitmap conversion table used in each case of (1) to (5) in FIG.
  • the graphics data of the subtitle before conversion into bitmap data is SDR and the target video data is SDR (when the color gamut is the same).
  • the graphics data of the subtitle before conversion into bitmap data is SDR and the target video data is SDR (when the color gamut is different).
  • the graphics data of the subtitle before conversion into bitmap data is SDR and the target video data is HDR.
  • the graphics data of the subtitle before conversion into bitmap data is HDR and the target video data is SDR.
  • the graphics data of the subtitle before conversion into bitmap data is HDR, and the target video data is HDR.
  • the maximum conversion functions required on the receiving side are the following first to seventh conversion functions.
  • the processing in these conversion functions is basically independent processing for each pixel.
  • the first conversion function 301 is a function for converting bitmap data into subtitle graphics data.
  • the second conversion function 302 is a function of converting the domain of the graphics data of the subtitle converted from the bitmap data from YCbCr to RGB1.
  • the third conversion function 303 is a function that performs electro-optical conversion by applying an electro-optical conversion characteristic to make the subtitle graphics data converted from the bitmap data into a luminance linear space.
  • the fourth conversion function 304 is a function for converting the luminance level in order to eliminate inconvenience due to the difference in dynamic range between the subtitle graphics data converted from the bitmap data and the target video data.
  • the fifth conversion function 305 is a function that performs color gamut conversion (RGB1 ⁇ RGB2) for matching the color gamut of the subtitle graphics data converted from the bitmap data with the color gamut of the target video data.
  • the sixth conversion function 306 is a function of performing photoelectric conversion by applying the same photoelectric conversion characteristics as the photoelectric conversion characteristics of the target video data to the subtitle graphics data in the luminance linear space.
  • the seventh conversion function 307 is a function for converting the subtitle graphics data domain from RGB2 to YCbCr.
  • the bitmap data is converted into subtitle graphics data by the first conversion function 301, and the graphics data is directly used as output graphics data.
  • the second conversion function 302 to the seventh conversion function 307 Bypassed This conversion process is exactly the same as the process that has been performed in legacy broadcasting.
  • the bitmap data is converted into subtitle graphics data by the first conversion function 301.
  • This subtitle graphics data is converted from the YCbCr domain to the RGB1 domain by the second conversion function 302.
  • the color gamut of the graphics data of the subtitle converted to the RGB1 domain is converted by the fifth conversion function 305 so as to match the color gamut of the target video data.
  • the subtitle graphics data BT. 709 is a color gamut of the target video data. Converted to fit 2020.
  • the graphics data of the subtitle subjected to the color gamut conversion is converted from the RGB2 domain to YCbCr by the seventh conversion function 307, and this graphics data becomes output graphics data.
  • the graphics data and the target video data of the subtitle before conversion to bitmap data are both SDR, the third conversion function 303, the fourth conversion function 304, and the sixth conversion function 306 are Bypassed.
  • the bitmap data is converted into subtitle graphics data by the first conversion function 301.
  • This subtitle graphics data is converted from the YCbCr domain to the RGB1 domain by the second conversion function 302.
  • the graphics data of the subtitle converted into the RGB1 domain is subjected to electro-optic conversion by applying the SDR electro-optic conversion characteristic by the third conversion function 303 to obtain a luminance linear space.
  • the graphics data of the subtitle that has been converted to the luminance linear space is subjected to luminance level conversion by the fourth conversion function 304.
  • the predetermined SDR luminance level is converted so as to become the HDR mapping reference level.
  • FIG. 6 shows the state of this luminance level conversion.
  • a solid line a indicates an SDR conversion curve.
  • a solid line b represents an HDR conversion curve.
  • a broken line c indicates a range of SDR data mapped to the HDR conversion curve.
  • the luminance value “m” of the graphics data of the SDR subtitle is treated as a mapping reference value that matches the luminance value “m” of the HDR video data.
  • the coding code value representing the luminance value “m” of the graphics data of the SDR subtitle is Q% and the coding code value representing the luminance value “m” of the HDR video data is P%, it represents Q%.
  • the graphics data of the SDR subtitle is converted so that the digital code matches the digital code indicating P%.
  • [0 ⁇ a] of the graphics data of the SDR subtitle becomes a range of [0 ⁇ a ′] of the HDR video data. This prevents the brightness of the subtitle from becoming too bright.
  • the coding bit space is the same for both SDR and HDR. Further, 0 ⁇ P ⁇ 100 and 0 ⁇ Q ⁇ 100.
  • the graphics data of the subtitle whose luminance level has been converted by the fourth conversion function 304 is converted by the fifth conversion function 305 so as to match the color gamut of the target video data.
  • the subtitle graphics data BT. 709 is a color gamut of the target video data. Converted to fit 2020.
  • the graphics data of the subtitle that has undergone color gamut conversion is photoelectrically converted by the sixth conversion function 306 using the HDR photoelectric conversion characteristics.
  • the graphics data of the subtitle has HDR photoelectric conversion characteristics like the target video data.
  • the graphics data of this subtitle is converted from the RGB2 domain to YCbCr by the seventh conversion function 307, and this graphics data becomes output graphics data.
  • the bitmap data is converted into subtitle graphics data by the first conversion function 301.
  • This subtitle graphics data is converted from the YCbCr domain to the RGB1 domain by the second conversion function 302.
  • the graphics data of the subtitle converted into the RGB1 domain is subjected to electro-optic conversion by applying the HDR electro-optic conversion characteristic by the third conversion function 303 to obtain a luminance linear space.
  • the graphics data of the subtitle that has been converted to the luminance linear space is subjected to luminance level conversion by the fourth conversion function 304.
  • the predetermined HDR luminance level is converted so as to become the SDR mapping reference level.
  • FIG. 7 shows the state of this luminance level conversion.
  • a solid line a represents an SDR conversion curve.
  • a solid line b represents an HDR conversion curve.
  • a broken line c indicates a conversion curve for the purpose of mapping the HDR conversion curve to the SDR.
  • the luminance value “m” of the graphics data of the HDR subtitle is treated as a mapping reference value that matches the luminance value “m” of the SDR video data.
  • the coding code value representing the luminance value “m” of the HDR subtitle graphics data is P% and the coding code value representing the luminance value “m” of the SDR video data is Q%, P% is represented.
  • the graphics data of the HDR subtitle is converted with a conversion curve having a tone-map characteristic as indicated by a broken line c so that the digital code matches the digital code indicating Q%.
  • [0 ⁇ b] of the graphics data of the HDR subtitle becomes [0 ⁇ a '], and the range of [0 ⁇ a] of the SDR video data without clipping. Fits in. In the figure, the coding bit space is the same for both SDR and HDR. Further, 0 ⁇ P ⁇ 100 and 0 ⁇ Q ⁇ 100.
  • the graphics data of the subtitle whose luminance level has been converted by the fourth conversion function 304 is converted by the fifth conversion function 305 so as to match the color gamut of the target video data.
  • the color gamut of 2020 is the color gamut of the target video data.
  • 709 is converted to fit 709.
  • the graphics data of the subtitle that has undergone color gamut conversion is photoelectrically converted by the sixth conversion function 306 using the SDR photoelectric conversion characteristics.
  • the graphics data of the subtitle has SDR photoelectric conversion characteristics as with the target video data.
  • the graphics data of this subtitle is converted from the RGB2 domain to YCbCr by the seventh conversion function 307, and this graphics data becomes output graphics data.
  • the bitmap data is converted into subtitle graphics data by the first conversion function 301, and the graphics data is directly used as output graphics data.
  • the second conversion function 302 to the seventh conversion function 307 Bypassed since the graphics data of the subtitle before conversion to bitmap data and the target video data are both HDR and have the same color gamut, the second conversion function 302 to the seventh conversion function 307 Bypassed.
  • the HDR characteristic of the subtitle graphics data and the target video data before conversion to bitmap data is the same.
  • the HDR characteristics of the two data it is necessary to convert the luminance level as in the cases (3) and (4).
  • the case where the HDR characteristics of the two data are different is, for example, the case where the HDR characteristic of the subtitle graphics data is PQ and the HDR characteristic of the video data is HLG.
  • the subtitle encoder 104 converts the bitmap data and display control information output from the conversion unit 103 into various segments, and the subtitle stream SS configured by PES packets in which those segments are arranged in the payload. Is generated.
  • the various segments include a newly defined WC segment (WC segment) and a rendering guide segment (Rendering_guide_segment) in addition to conventionally known segments such as DDS, PCS, RCS, ODS, and EDS.
  • the WC / segment includes information on a predetermined number of bitmap conversion tables output from the conversion unit 103.
  • the rendering guide segment includes characteristic information of graphics data of the subtitle before conversion into bitmap data, that is, meta information such as color gamut and dynamic range information.
  • FIG. 8 and 9 show a structural example (Syntax) of a WC segment
  • FIG. 10 shows contents (Semantics) of main information in the structural example.
  • An 8-bit field of “CLUT_entry_id” indicates an ID of each CLUT (bitmap conversion table).
  • the 4-bit field of “entry_CLUT_type” indicates the entry-CLUT type, that is, the display color variation, and corresponds to the range of the input bitmap data. For example, “0x1” indicates a 2-bit entry (2 bit “entry”), “0x2” indicates a 4-bit entry (4 bit “entry”), and “0x4” indicates an 8-bit entry (8 bit “entry”).
  • the 2-bit field of “output_depth” indicates the bit depth of each element of YCrCb, T that is output graphics data. For example, “1” indicates 8 bits (8 bits), “2” indicates 10 bits (10 bits), and “3” indicates 12 bits (12 bits).
  • “2-bit field of“ subtitle_dynamic_range_type ” indicates dynamic range information suitable as the dynamic range of the graphics data of the subtitle before conversion into bitmap data. For example, “1” indicates “SDR by gamma”, “2” indicates “HDR by PQ”, and “3” indicates “HDR by HLG”.
  • a 2-bit field of “subtitle_color_gamut” indicates information on a color gamut suitable as a color gamut of graphics data of a subtitle before conversion into bitmap data. For example, “1” indicates “BT.709” and “2” indicates “BT.2020”.
  • “2-bit field of“ target_video_dynamic_range_type ” indicates dynamic range information suitable as the dynamic range of the target video data. For example, “1” indicates “SDR by gamma”, “2” indicates “HDR by PQ”, and “3” indicates “HDR by HLG”.
  • a 2-bit field of “target_video_color_gamut” indicates information on a color gamut suitable as a color gamut of target video data. For example, “1” indicates “BT.709” and “2” indicates “BT.2020”.
  • FIG. 11 shows a list of examples of values of “CLUT_entry_id”, “entry_CLUT_type”, and “output_depth” and values of matching characteristic information (“subtitle_dynamic_range_type”, “subtitle_color_gamut”, “target_video_dynamic_range_type”, “target_video_color_gamut”).
  • the value of “entry_CLUT_type” is “0x4”, which indicates that the range of 8-bit entry (8-bit entry), that is, input bitmap data is 8 bits.
  • the value of “output_depth” is “2”, which indicates that the bit depth of each element of YCrCb, T, which is output graphics data, is 10 bits.
  • the compatibility characteristic information (“subtitle_dynamic_range_type”, “subtitle_color_gamut”, “target_video_dynamic_range_type”, “target_video_color_gamut”) of the bitmap conversion table (CLUT) whose “CLUT_entry_id” is “1” is (1,1 , 1, 1), indicating that this is a bitmap conversion table corresponding to the above-mentioned case (1).
  • this bitmap conversion table can be used when the dynamic range of the graphics data of the subtitle before conversion to bitmap data is “SDR by gamma” and the color gamut is “BT.709”.
  • the dynamic range of the target video data is “SDR by gamma” and the color gamut is “BT.709”.
  • the matching characteristic information (“subtitle_dynamic_range_type”, “subtitle_color_gamut”, “target_video_dynamic_range_type”, “target_video_color_gamut”) of the bitmap conversion table (CLUT) whose “CLUT_entry_id” is “2” is (1,1 , 1, 2), indicating that the bitmap conversion table corresponds to the case of (2) described above.
  • this bitmap conversion table can be used when the dynamic range of the graphics data of the subtitle before conversion to bitmap data is “SDR by gamma” and the color gamut is “BT.709”.
  • the dynamic range of the target video data is “SDR by gamma” and the color gamut is “BT.2020”.
  • the matching characteristic information (“subtitle_dynamic_range_type”, “subtitle_color_gamut”, “target_video_dynamic_range_type”, “target_video_color_gamut”) of the bitmap conversion table (CLUT) whose “CLUT_entry_id” is “3” is (1,1 , 3, 2), indicating that the bitmap conversion table corresponds to the case of (3) described above.
  • this bitmap conversion table can be used when the dynamic range of the graphics data of the subtitle before conversion to bitmap data is “SDR by gamma” and the color gamut is “BT.709”.
  • the dynamic range of the target video data is “HDR by HLG” and the color gamut is “BT.2020”.
  • the matching characteristic information (“subtitle_dynamic_range_type”, “subtitle_color_gamut”, “target_video_dynamic_range_type”, “target_video_color_gamut”) of the bitmap conversion table (CLUT) whose “CLUT_entry_id” is “4” is (2, 2 , 1, 2), indicating that the bitmap conversion table corresponds to the case of (4) described above.
  • this bitmap conversion table can be used when the dynamic range of the graphics data of the subtitle before conversion to bitmap data is “HDR by PQ” and the color gamut is “BT.2020”.
  • the dynamic range of the target video data is “SDR by gamma” and the color gamut is “BT.2020”.
  • the matching characteristic information (“subtitle_dynamic_range_type”, “subtitle_color_gamut”, “target_video_dynamic_range_type”, “target_video_color_gamut”) of the bitmap conversion table (CLUT) whose “CLUT_entry_id” is “5” is (2, 2 , 3, 2), and indicates that the bitmap conversion table corresponds to the above-described case (5) (when the HDR characteristics are different).
  • this bitmap conversion table (CLUT) can be used when the dynamic range of the graphics data of the subtitle before conversion to bitmap data is “HDR by PQ” and the color gamut is “BT.2020”.
  • the dynamic range of the target video data is “HDR by HLG” and the color gamut is “BT.2020”.
  • FIG. 12A shows a structure example (Syntax) of a rendering guide segment
  • FIG. 12B shows contents (Semantics) of main information in the structure example.
  • the 1-bit field of “rendering_conversion_guide” indicates that it is necessary to match the color gamut and dynamic range to the video when rendering the graphics data of the subtitle on the target video data. For example, “1” indicates that conversion is possible by selecting a suitable one from a plurality of bitmap conversion tables, and “0” indicates the other.
  • bitmap_data_color_gamut_information indicates the color gamut of the graphics data of the subtitle before conversion into bitmap data, and the semantics is information defined in the HEVC standard.
  • bitmap_data_dynamic range_information indicates the dynamic range of the graphics data of the subtitle before conversion into bitmap data, and the semantics is information defined in the HEVC standard.
  • the system encoder 105 generates a transport stream TS including the video stream VS generated by the video encoder 102 and the subtitle stream SS generated by the subtitle encoder 104.
  • the transmission unit 106 transmits the transport stream TS to the reception device 200 on a broadcast wave or a net packet.
  • FIG. 13 illustrates a configuration example of the transport stream TS.
  • the PES packet “Video PES1” of the video stream identified by PID1 exists.
  • the PES packet “Subtitle PES2” of the subtitle stream identified by PID2 exists.
  • the PES packet is composed of a PES header (PES header) and a PES payload (PES payload).
  • PES header PES header
  • PES payload PES payload
  • a video encoded stream is inserted into the PES payload.
  • the gamut identification information (color_primaries) and dynamic range information (transfer_characteristics) of the transmission video data are inserted into the VUI area of the SPS NAL unit of the access unit.
  • the PES packet of the subtitle stream includes the previously defined WC segment (WCS) and rendering guide segment (RGS) in addition to the previously known segments such as DDS, PCS, RCS, ODS, and EDS. Has been inserted.
  • the transport stream TS includes a PMT (Program Map Table) as PSI (Program Specific Information).
  • PSI is information describing to which program each elementary stream included in the transport stream belongs.
  • the PMT has a program loop (Program ⁇ ⁇ ⁇ loop) that describes information related to the entire program.
  • an elementary stream loop having information related to each elementary stream.
  • video ES loop video elementary stream loop
  • subtitle elementary stream loop subtitle elementary stream loop
  • video elementary stream loop information such as a stream type and PID (packet identifier) is arranged corresponding to the video stream, and a descriptor describing information related to the video stream is also provided. Be placed.
  • the value of “Stream_type” of this video stream is set to a value indicating, for example, the HEVC video stream, and the PID information indicates PID1 given to the PES packet “video PES1” of the video stream.
  • subtitle elementary stream loop In the subtitle elementary stream loop (Subtitle ES loop), information such as a stream type and a PID (packet identifier) is arranged corresponding to the subtitle stream, and a descriptor describing information related to the subtitle stream is also provided. Be placed.
  • the value of “Stream_type” of this subtitle stream is set to, for example, a value indicating a private stream, and the PID information indicates PID2 assigned to the PES packet “Subtitle PES2” of the subtitle stream.
  • the operation of the transmission device 100 shown in FIG. 2 will be briefly described.
  • the video data is supplied to the video encoder 102.
  • This video data is SDR or HDR data and has SDR or HDR photoelectric conversion characteristics.
  • the video encoder 102 performs encoding such as MPEG4-AVC or HEVC on the video data, and generates a video stream (PES stream) VS including the encoded video data.
  • PES stream video stream
  • information transfer_function
  • information color_primaries
  • Meta information is inserted.
  • the subtitle graphics data is supplied to the conversion unit 103.
  • the graphics data of this subtitle is SDR or HDR data, and has SDR or HDR photoelectric conversion characteristics.
  • the conversion unit 103 converts the subtitle graphics data into bitmap data.
  • the conversion unit 103 outputs information on one or more bitmap conversion tables that are assumed to be required on the receiving side, together with the bitmap data.
  • the bitmap conversion table is a bitmap conversion table including color gamut and / or luminance conversion information.
  • this bitmap conversion table is not merely for converting bitmap data into graphics data of a subtitle, but has a color gamut and luminance so as to match target video data that is video data to be superimposed. They are also converted.
  • bitmap data and bitmap conversion table information output from the conversion unit 103 are supplied to the subtitle encoder 104.
  • bitmap data and display control information are converted into various segments, and a subtitle stream SS composed of PES packets in which those segments are arranged in the payload is generated.
  • various segments include a newly defined WC segment (see FIG. 8-10) and a rendering guide segment (see FIG. 12). included.
  • the WC segment includes information of the bitmap conversion table.
  • the rendering guide segment includes characteristic information of graphics data of the subtitle before conversion into bitmap data, that is, meta information such as color gamut and dynamic range information.
  • the video stream VS generated by the video encoder 102 is supplied to the system encoder 105.
  • the subtitle stream SS generated by the subtitle encoder 104 is supplied to the system encoder 105.
  • a transport stream TS including the video stream VS and the subtitle stream SS is generated.
  • the transport stream TS is transmitted to the receiving apparatus 200 by the transmitting unit 106 on a broadcast wave or a net packet.
  • FIG. 14 illustrates a configuration example of the receiving device 200.
  • the receiving apparatus 200 includes a control unit 201, a receiving unit 202, a system decoder 203, a video decoder 204, a subtitle decoder 205, a conversion unit 206, and a video superimposing unit 207.
  • the receiving apparatus 200 includes a YCbCr / RGB conversion unit 212, an electro-optic conversion unit 213, a display mapping unit 214, and a CE monitor 215.
  • the control unit 201 includes a CPU (Central Processing Unit) and controls the operation of each unit of the receiving device 200 based on a control program.
  • the reception unit 202 receives the transport stream TS transmitted from the transmission device 100 on broadcast waves or net packets.
  • the system decoder 203 extracts the video stream VS and the subtitle stream SS from the transport stream TS.
  • the video decoder 204 performs a decoding process on the video stream VS extracted by the system decoder 203 to obtain target video data.
  • target video data not only the video data itself sent from the transmission side but also video data obtained by performing conversion processing of the color gamut and the dynamic range as necessary can be considered.
  • the video decoder 204 extracts a parameter set or SEI message inserted in each access unit constituting the video stream VS and sends it to the control unit 201.
  • the subtitle decoder 205 performs a decoding process on the subtitle stream SS extracted by the system decoder 203, and obtains bitmap data and a predetermined number, that is, one or more bitmap conversion table information.
  • the predetermined number of bitmap conversion table information is obtained from the above-described WC segment (see FIG. 8-10).
  • characteristic information of the graphics data of the subtitle before conversion into bitmap data that is, meta information such as color gamut and dynamic range information is extracted from the rendering guide segment (see FIG. 12). It is sent to the control unit 201.
  • the conversion unit 206 converts bitmap data into subtitle graphics data using a suitable bitmap conversion table among a predetermined number of bitmap conversion tables.
  • the conversion unit 206 converts the compatible bitmap conversion table into compatible characteristic information (“subtitle_dynamic_range_type”, “subtitle_color_gamut”, “target_video_dynamic_range_type”, “target_video_color_gamut”) added to each bitmap conversion table (see FIG. 8). ).
  • the conversion unit 206 has a dynamic range and color gamut indicated by “subtitle_dynamic_range_type” and “subtitle_color_gamut” that match the dynamic range and color gamut of the graphics data of the subtitle before conversion into bitmap data, and “target_video_dynamic_range_type”, “ Assume that the bitmap conversion table in which the dynamic range and color gamut indicated by “target_video_color_gamut” matches the dynamic range and color gamut of the target video data is matched.
  • the dynamic range and color gamut of the graphics data of the subtitle before conversion to bitmap data are converted to bitmap data extracted from the rendering guide segment (see FIG. 12) as described above. It is grasped by the characteristic information (color gamut and dynamic range information) of the graphics data of the previous subtitle.
  • FIG. 15 shows a selection example of the bitmap conversion table.
  • the illustrated example is an example in which information of five bitmap conversion tables (CLUT1-5) whose “CLUT_entry_id” shown in the example of FIG. 11 is 1-5 is included in the WC segment.
  • the dynamic range and color gamut of the graphics data of the subtitle before conversion into bitmap data are “SDR by gamma” and “BT.709”, respectively, and the dynamic range of the target video data
  • the color gamuts are “HDR by HLG” and “BT.2020”, respectively.
  • CLUT3 is selected as a suitable bitmap conversion table.
  • the conversion unit 206 includes the first conversion function 301 to the seventh conversion function 307 shown in FIG. 5 described above.
  • the conversion unit 206 uses the first conversion function 301 to the seventh conversion function 307 without using the bitmap conversion table when there is no bit map conversion table included in the WC / segment.
  • subtitle graphics data having characteristics matching the characteristics of the target video data to be superimposed is generated from the bitmap data.
  • the video superimposing unit 207 superimposes the subtitle graphics data output from the converting unit 206 on the target video data output from the video decoder 204.
  • the YCbCr / RGB conversion unit 212 converts the video data V1 ′ on which the subtitle graphics data is superimposed from the YCbCr (luminance / color difference) domain to the RGB domain. In this case, the YCbCr / RGB conversion unit 212 performs conversion using a conversion formula corresponding to the color gamut based on the color gamut identification information.
  • the electro-optic conversion unit 213 applies electro-optic conversion characteristics corresponding to the photoelectric conversion characteristics applied to the video data V1 ′ converted into the RGB domain, performs display conversion for displaying an image. Get video data.
  • the display mapping unit 214 performs display luminance adjustment on the display video data according to the maximum luminance display capability of the CE monitor 215.
  • the CE monitor 215 displays an image based on the display video data for which display brightness adjustment has been performed.
  • the CE monitor 215 includes, for example, an LCD (Liquid Crystal Display), an organic EL display (organic electroluminescence display), and the like.
  • the reception unit 202 receives the transport stream TS transmitted from the transmission device 100 on broadcast waves or net packets.
  • This transport stream TS is supplied to the system decoder 203.
  • the system decoder 203 extracts the video stream VS and the subtitle stream SS from the transport stream TS.
  • the video stream VS extracted by the system decoder 203 is supplied to the video decoder 204.
  • the video decoder 204 performs a decoding process on the video stream VS to obtain target video data.
  • target video data not only the video data itself sent from the transmission side but also video data obtained by performing conversion processing of the color gamut and the dynamic range as necessary can be considered.
  • the subtitle stream SS extracted by the system decoder 203 is supplied to the subtitle decoder 205.
  • decoding processing is performed on the subtitle stream SS, and bitmap data and a predetermined number of bitmap conversion table information are obtained. This predetermined number of bitmap conversion table information is obtained from the WC segment (see FIG. 8-10).
  • characteristic information of the graphics data of the subtitle before conversion into bitmap data that is, meta information such as color gamut and dynamic range information is extracted from the rendering guide segment (see FIG. 12). It is sent to the control unit 201.
  • the bitmap data obtained by the subtitle decoder 205 and information on a predetermined number of bitmap conversion tables are supplied to the conversion unit 206.
  • the conversion unit 206 selects a suitable bitmap conversion table from among a predetermined number of bitmap conversion tables under the control of the control unit 201.
  • the compatible bitmap conversion table is based on the compatible characteristic information (“subtitle_dynamic_range_type”, “subtitle_color_gamut”, “target_video_dynamic_range_type”, “target_video_color_gamut”) added to each bitmap conversion table (see FIG. 8). Is judged.
  • the conversion unit 206 uses the compatible bitmap conversion table to convert the bitmap data into subtitle graphics data.
  • the color gamut and dynamic range of the graphics data of the subtitle converted in this way matches the color gamut and dynamic range of the target video data obtained by the video decoder 204.
  • the conversion unit 206 when there is no matching bitmap conversion table that is sent, the necessary conversion from the first conversion function 301 to the seventh conversion function 307 (see FIG. 5) provided.
  • the function is used at the judgment on the receiver side, and subtitle graphics data having characteristics matching the characteristics of the target video data to be superimposed is generated from the bitmap data.
  • the target video data obtained by the video decoder 204 is supplied to the video superimposing unit 207. Further, the graphics data of the subtitle obtained by the conversion unit 206 is supplied to the video superimposing unit 207.
  • the video superimposing unit 207 superimposes subtitle graphics data on the target video data.
  • the graphics data of the subtitle is mixed with the video data at a predetermined ratio.
  • the mixing ratio is performed in accordance with T-Value.
  • the video data V1 ′ obtained by superimposing the subtitle graphics data obtained by the video superimposing unit 207 is converted from the YCbCr (luminance / color difference) domain to the RGB domain by the YCbCr / RGB converting unit 212, and the electro-optical converting unit. 213 is supplied.
  • the electro-optic conversion unit 213 applies electro-optic conversion characteristics corresponding to the photoelectric conversion characteristics applied to the video data V1 ′ to perform electro-optic conversion, thereby obtaining display video data for displaying an image.
  • the display video data is supplied to the display mapping unit 214.
  • display luminance adjustment is performed on the display video data in accordance with the maximum luminance display capability of the CE monitor 215 and the like.
  • the display video data whose display brightness is adjusted in this way is supplied to the CE monitor 215.
  • An image is displayed on the CE monitor 215 based on the video data for display.
  • the subtitle stream sent from the transmission side to the reception side has a bitmap conversion table including color gamut and / or luminance conversion information. Therefore, on the receiving side, subtitle graphics data having characteristics suitable for the characteristics of the target video data to be superimposed can be easily obtained simply by converting the bitmap data into subtitle graphics data using the bitmap conversion table. Therefore, it is possible to reduce the processing load on the receiving side.
  • the characteristic information of the graphics data of the subtitle before conversion into bitmap data is inserted into the subtitle stream sent from the transmission side to the reception side. Therefore, the reception side can easily grasp the characteristics of the graphics data of the subtitle before conversion into bitmap data.
  • the container is a transport stream (MPEG-2 TS)
  • MPEG-2 TS transport stream
  • the transport is not limited to the TS, and the video layer can be realized by the same method even in the case of other packets such as ISOBMFF and MMT.
  • this technique can also take the following structures.
  • a video encoding unit for generating a video stream having video data;
  • a subtitle encoding unit that generates a subtitle stream having bitmap data obtained by converting the graphics data of the subtitle;
  • a transmission unit for transmitting a container of a predetermined format including the video stream and the subtitle stream;
  • the subtitle stream has a bitmap conversion table including color gamut and / or luminance conversion information.
  • the plurality of bitmap conversion tables are respectively attached with characteristic characteristics information of subtitle graphics data and target video data.
  • apparatus (5) a video encoding step in which the video encoding unit generates a video stream having video data; A subtitle encoding step for generating a subtitle stream having bitmap data obtained by converting the subtitle graphics data;
  • the transmission unit includes a transmission step of transmitting a container in a predetermined format including the video stream and the subtitle stream;
  • the subtitle stream has a bitmap conversion table including color gamut and / or luminance conversion information.
  • a receiving unit that receives a container of a predetermined format including a video stream having video data and a subtitle stream having bitmap data obtained by converting graphics data of the subtitle,
  • the subtitle stream has a bitmap conversion table including color gamut and / or luminance conversion information. Processing for decoding the video stream to obtain target video data, processing for decoding the subtitle stream to obtain the bitmap data and the bitmap conversion table, and using the bitmap conversion table for the bitmap data
  • a receiving apparatus further comprising: a control unit that controls a process of converting to subtitle graphics data and a process of superimposing the subtitle graphics data on the target video data.
  • the subtitle stream has a plurality of bitmap conversion tables having different conversion information.
  • the bitmap data into the graphics data of the subtitle it conforms to the characteristics of the graphics data of the subtitle and the target video data before conversion to the bitmap data of the plurality of bitmap conversion tables.
  • Characteristic information of the graphics data of the subtitle before conversion into the bitmap data is inserted into the subtitle stream, In the process of converting the bitmap data into the graphics data of the subtitle, the characteristics of the graphics data of the subtitle before conversion into the bitmap data are determined based on the characteristics information inserted in the subtitle stream.
  • the receiving device according to (7).
  • the bitmap conversion table is adapted to the characteristics of the graphics data of the subtitle and the target video data before conversion to the bitmap data. If not, the bitmap data is converted into the graphics data of the subtitle so as to conform to the characteristics without using the bitmap conversion table.
  • the reception unit includes a reception step of receiving a container having a predetermined format including a video stream having video data and a subtitle stream having bitmap data obtained by converting graphics data of the subtitle.
  • the subtitle stream has a bitmap conversion table including color gamut and / or luminance conversion information.
  • the control unit decodes the video stream to obtain target video data, decodes the subtitle stream to obtain the bitmap data and the bitmap conversion table, and converts the bitmap data to the bitmap
  • a receiving method further comprising a control step of controlling a process of converting into subtitle graphics data using a table and a process of superimposing the subtitle graphics data on the target video data.
  • the main feature of this technology is that the subtitle stream sent from the transmission side to the reception side has a bitmap conversion table including color gamut and / or luminance conversion information.
  • a bitmap conversion table including color gamut and / or luminance conversion information.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Processing Of Color Television Signals (AREA)
  • Studio Circuits (AREA)

Abstract

サブタイトルのグラフィックスデータをビデオデータに重畳する際の受信側の処理負荷を軽減する。　ビデオデータを持つビデオストリームを生成する。サブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを生成する。ビデオストリームとサブタイトルストリームを含む所定フォーマットのコンテナを送信する。サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有する。受信側では、ビットマップ変換テーブルを用いてビットマップデータをサブタイトルのグラフィックスデータに変換するだけで、重畳先のターゲットビデオデータの特性に合った特性のサブタイトルのグラフィックスデータを容易に得ることができる。

Description

送信装置、送信方法、受信装置および受信方法
　本技術は、送信装置、送信方法、受信装置および受信方法に関し、詳しくは、字幕情報をビットマップデータで送信する送信装置等に関する。
　従来、例えば、ＤＶＢ（Digital Video Broadcasting）の放送などでは、サブタイトルのグラフィックスデータをビットマップデータに変換して送信する運用が行われている（例えば、特許文献１参照）。
特開２０１１－０３０１８０号公報
　従来、ビデオデータ、サブタイトルのグラフィックスデータが各々別ストリームで伝送される際、色域や輝度について両者間で顕著な違いが存在しなかった。そのため、重畳する際に特別な配慮をせず合成が行われていた。
　例えば、ビデオデータの色域が広色域（例えば、ITU-R Rec Bt.2020準拠）で、サブタイトルのグラフィックスデータの色域が狭色域（例えば、sRGB) の場合、ビデオの画品質を高画質に保つには、サブタイトルのグラフィックスデータの色域をビデオデータの色域に合わせてから重畳することが必要になる。
　また、例えば、ビデオデータがハイダイナミックレンジ（ＨＤＲ）で、サブタイトルのグラフィックスデータが標準レベルのダイナミックレンジ（ＳＤＲ）で制作されたものである場合、ビデオの画品質を高画質に保つには、サブタイトルのグラフィックスデータをビデオデータのダイナミックレンジ領域に適合させてから重畳することが必要になる。
　本技術の目的は、サブタイトルのグラフィックスデータをビデオデータに重畳する際の受信側の処理負荷を軽減することにある。
　本技術の概念は、
　ビデオデータを持つビデオストリームを生成するビデオエンコード部と、
　サブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを生成するサブタイトルエンコード部と、
　上記ビデオストリームと上記サブタイトルストリームを含む所定フォーマットのコンテナを送信する送信部を備え、
　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有する
　送信装置にある。
　本技術において、ビデオエンコード部により、ビデオデータを持つビデオストリームが生成される。サブタイトルエンコード部により、サブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームが生成される。送信部により、ビデオストリームとサブタイトルストリームを含む所定フォーマットのコンテナが送信される。
　サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有するものとされる。例えば、サブタイトルストリームは、変換情報を異にする複数のビットマップ変換テーブルを有する、ようにされてもよい。この場合、例えば、複数のビットマップ変換テーブルには、それぞれ、サブタイトルのグラフィックスデータおよびターゲットビデオデータの適合特性情報が付加される、ようにされてもよい。
　このように本技術においては、サブタイトルストリームは色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有するものである。そのため、受信側では、ビットマップ変換テーブルを用いてビットマップデータをサブタイトルのグラフィックスデータに変換するだけで、重畳先のターゲットビデオデータの特性に合った特性のサブタイトルのグラフィックスデータを容易に得ることができ、受信側の処理負荷を軽減することが可能となる。
　なお、本技術において、例えば、サブタイトルストリームに、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報を挿入する情報挿入部をさらに備える、ようにされてもよい。これにより、受信側では、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性を容易に把握可能となる。
　また、本技術の他の概念は、
　ビデオデータを持つビデオストリームとサブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有しており、
　上記ビデオストリームをデコードしてターゲットビデオデータを得る処理と、上記サブタイトルストリームをデコードして上記ビットマップデータと上記ビットマップ変換テーブルを得る処理と、該ビットマップデータを該ビットマップ変換テーブルを用いてサブタイトルのグラフィックスデータに変換する処理と、該サブタイトルのグラフィックスデータを上記ターゲットビデオデータに重畳する処理を制御する制御部をさらに備える
　受信装置にある。
　本技術において、受信部により、ビデオデータを持つビデオストリームとサブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを含む所定フォーマットのコンテナが受信される。サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有している。
　ビデオストリームをデコードしてターゲットビデオデータを得る処理と、サブタイトルストリームをデコードしてビットマップデータとビットマップ変換テーブルを得る処理が行われる。ビットマップデータをビットマップ変換テーブルを用いてサブタイトルのグラフィックスデータに変換する処理と、このサブタイトルのグラフィックスデータをターゲットビデオデータに重畳する処理が行われる。
　例えば、サブタイトルストリームは、変換情報を異にする複数のビットマップ変換テーブルを有しており、ビットマップデータをサブタイトルのグラフィックスデータに変換する処理では、複数のビットマップ変換テーブルのうちビットマップデータへの変換前のサブタイトルのグラフィックスデータおよびターゲットビデオデータの特性に適合したビットマップ変換テーブルが用いられる、ようにされてもよい。
　この場合、例えば、サブタイトルストリームに、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報が挿入されており、ビットマップデータをサブタイトルのグラフィックスデータに変換する処理では、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性はサブタイトルストリームに挿入されている特性情報に基づいて判断される、ようにされてもよい。
　このように本技術においては、ビットマップデータをサブタイトルのグラフィックスデータに変換する処理では、サブタイトルストリームに挿入されている色域および/または輝度の変換情報を含めたビットマップ変換テーブルを用いるものである。そのため、重畳先のターゲットビデオデータの特性に合った特性のサブタイトルのグラフィックスデータを容易に得ることができ、処理負荷を軽減することが可能となる。
　なお、本技術において、例えば、ビットマップデータをサブタイトルのグラフィックスデータに変換する処理では、ビットマップ変換テーブルがビットマップデータへの変換前のサブタイトルのグラフィックスデータおよびターゲットビデオデータの特性に適合しないとき、ビットマップ変換テーブルを用いずに、その特性に適合するように、受信機処理においてビットマップデータがサブタイトルのグラフィックスデータに変換される、ようにされてもよい。この場合、重畳先のターゲットビデオデータの特性に合った特性のサブタイトルのグラフィックスデータを得ることができることから、ビデオの画品質の低下を抑制し得る。
　本技術によれば、サブタイトルのグラフィックスデータをビデオデータに重畳する際の受信側の処理負荷を軽減することが可能となる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
実施の形態としての送受信システムの構成例を示すブロック図である。 送信装置の構成例を示すブロック図である。 ビットマップ変換テーブルにおけるビットマップデータからサブタイトルのグラフィックスデータ（Y/CbCr）への変換以外の他の変換対象例を示す図である。 ビットマップ変換テーブルの情報を説明するための図である。 受信側で必要となる変換機能（ビットマップ変換テーブルが持つ変換機能）の詳細を説明するための図である。 ＳＤＲからＨＤＲへの輝度レベル変換を説明するための図である。 ＨＤＲからＳＤＲへの輝度レベル変換を説明するための図である。 ＷＣ・セグメントの構造例を示す図（１/２）である。 ＷＣ・セグメントの構造例を示す図（２/２）である。 ＷＣ・セグメントの構造例における主要な情報の内容を示す図である。 「CLUT_entry_id」、「entry_CLUT_type」、「output_depth」の値の一例と、適合特性情報の値を一覧で示す図である。 レンダリング・ガイド・セグメントの構造例と、その構造例における主要な情報の内容を示す図である。 トランスポートストリームの構成例を示す図である。 受信装置の構成例を示すブロック図である。 ビットマップ変換テーブル（ＣＬＵＴ）の選択例を示す図である。
　以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
　１．実施の形態
　２．変形例
　＜１．実施の形態＞
　［送受信システムの構成例］
　図１は、実施の形態としての送受信システム１０の構成例を示している。この送受信システム１０は、送信装置１００および受信装置２００により構成されている。
　送信装置１００は、コンテナとしてのＭＰＥＧ２のトランスポートストリームＴＳを生成し、このトランスポートストリームＴＳを放送波あるいはネットのパケットに載せて送信する。このトランスポートストリームＴＳには、ビデオデータ（画像データ）を持つビデオストリームが含まれる。
　また、このトランスポートストリームＴＳには、サブタイトルデータ（字幕データ）としてサブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームが含まれる。このサブタイトルストリームは、色域および/または輝度、この実施の形態では双方の変換情報を含めたビットマップ変換テーブルを有するものとされる。
　サブタイトルストリームは、所定数、つまり１つあるいは２つ以上のビットマップ変換テーブルを有するものとされる。その場合、各ビットマップ変換テーブルには、サブタイトルのグラフィックスデータおよびターゲットビデオデータの適合特性情報が付加される。ここで、特性は、色域および/またはダイナミックレンジ、この実施の形態では双方の特性である。これにより、受信側では、いずれのビットマップ変換テーブルを使用するのか容易に判断可能となる。
　また、この実施の形態において、サブタイトルストリームに、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報が挿入される。これにより、受信側では、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性を容易に把握可能となる。
　受信装置２００は、送信装置１００から送られてくるトランスポートストリームＴＳを受信する。受信装置２００は、ビデオストリームに復号化処理を施してターゲットビデオデータを得る。この場合、ターゲットビデオデータとしては、送信側から送られてきたビデオデータそのものだけでなく、それに必要に応じて色域やダイナミックレンジの変換処理を施して得られたビデオデータも考えられる。
　また、受信装置２００は、サブタイトルストリームにデコード処理を施して、ビットマップデータおよびビットマップ変換テーブルを得、ビットマップ変換テーブルを用いてビットマップデータをサブタイトルのグラフィックスデータに変換する。ここで、変換情報を異にする複数のビットマップ変換テーブルが得られる場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータおよびターゲットビデオデータの特性に適合したビットマップ変換テーブルが用いられる。この場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性は、例えば、サブタイトルストリームに挿入されている特性情報から把握される。
　そして、受信装置２００は、ビットマップデータを変換して得られたサブタイトルのグラフィックスデータをターゲットビデオデータに重畳する。このようにサブタイトルのグラフィックスデータが重畳されたビデオデータにより、モニタには、サブタイトル付きの画像表示が行われる。
　「送信装置の構成例」
　図２は、送信装置１００の構成例を示している。この送信装置１００は、制御部１０１と、ビデオエンコーダ１０２と、変換部１０３と、サブタイトルエンコーダ１０４と、システムエンコーダ１０５と、送信部１０６を有している。
　制御部１０１は、ＣＰＵ（Central Processing Unit）を備えて構成され、制御プログラムに基づいて、送信装置１００の各部の動作を制御する。ビデオエンコーダ１０２は、ビデオデータに対して、例えば、ＭＰＥＧ４－ＡＶＣあるいはＨＥＶＣなどの符号化を施し、符号化ビデオデータを含むビデオストリーム（ＰＥＳストリーム）ＶＳを生成する。
　ここで、ビデオデータは、ＳＤＲ（Standard Dynamic Range）あるいはＨＤＲ（High Dynamic Range）のデータであり、ＳＤＲあるいはＨＤＲの光電変換特性を持たせたものである。ビデオエンコーダ１０２は、アクセスユニット（ＡＵ）のＳＰＳ ＮＡＬユニットのＶＵＩ（video usability information）の領域に、ビデオデータの特性情報、つまり色域やダイナミックレンジ情報などのメタ情報を挿入する。
　変換部１０３は、サブタイトルのグラフィックスデータをビットマップデータに変換する。ここで、サブタイトルのグラフィックスデータは、ＳＤＲあるいはＨＤＲのデータであり、ＳＤＲあるいはＨＤＲの光電変換特性を持たせたものである。変換部１０３は、ビットマップデータと共に、受信側で必要と想定されるＨＤＲあるいはＳＤＲのレベルを参照することによって、１つまたは２つ以上のビットマップ変換テーブルの情報を出力する。
　ここで、ビットマップ変換テーブルは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルである。すなわち、このビットマップ変換テーブルは、ビットマップデータを単にサブタイトルのグラフィックスデータに変換するためのものではなく、重畳先のビデオデータであるターゲットビデオデータの色域やダイナミックレンジに合うように、色域や輝度をも併せて変換するものである。
　図３は、ビットマップ変換テーブルにおけるビットマップデータからサブタイトルのグラフィックスデータ（Y/CbCr）への変換以外の変換対象例を示している。ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＳＤＲであり、ターゲットビデオデータがＳＤＲである場合は、色域が他の変換対象となり得る。例えば、サブタイトルのグラフィックスデータの色域がＢＴ．７０９で、ターゲットビデオデータの色域がＢＴ．２０２０のときには、色域が変換対象となる。
　また、ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＳＤＲであり、ターゲットビデオデータがＨＤＲである場合は、色域と輝度が変換対象となり得る。また、ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＨＤＲであり、ターゲットビデオデータがＳＤＲである場合は、色域と輝度が変換対象となり得る。なお、ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＨＤＲであり、ターゲットビデオデータがＨＤＲである場合は、色域もダイナミックレンジも共通であるので、変換対象になり得るものはない。
　この実施の形態において、変換部１０３は、図４の（１）から（５）の各場合に用いられるビットマップ変換テーブルの情報を出力する。（１）の場合は、ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＳＤＲであって、ターゲットビデオデータがＳＤＲである場合（色域が同じ場合）である。（２）の場合は、ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＳＤＲであって、ターゲットビデオデータがＳＤＲである場合（色域が異なる場合）である。
　（３）の場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＳＤＲであって、ターゲットビデオデータがＨＤＲである場合である。（４）の場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＨＤＲであって、ターゲットビデオデータがＳＤＲである場合である。（５）の場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータがＨＤＲであって、ターゲットビデオデータがＨＤＲである場合である。
　（１）から（５）の各場合における、受信側で必要となる変換機能、従ってビットマップ変換テーブルが持つ変換機能の詳細を、図５を参照して、説明する。受信側に最大で必要となる変換機能は、以下の第１から第７の変換機能である。これらの変換機能における処理は、基本的に、ピクセル毎に独立した処理となる。
　第１の変換機能３０１は、ビットマップデータをサブタイトルのグラフィックスデータに変換する機能である。第２の変換機能３０２は、ビットマップデータから変換されたサブタイトルのグラフィックスデータのドメインをＹＣｂＣｒからＲＧＢ１に変換する機能である。第３の変換機能３０３は、ビットマップデータから変換されたサブタイトルのグラフィックスデータを輝度リニア空間にするために電光変換特性を適用して電光変換をする機能である。
　第４の変換機能３０４は、ビットマップデータから変換されたサブタイトルのグラフィックスデータとターゲットビデオデータのダイナミックレンジが異なることによる不都合を解消するために輝度レベルを変換する機能である。第５の変換機能３０５は、ビットマップデータから変換されたサブタイトルのグラフィックスデータの色域をターゲットビデオデータの色域に合わせるための色域変換（ＲＧＢ１→ＲＧＢ２）をする機能である。
　第６の変換機能３０６は、輝度リニア空間にあるサブタイトルのグラフィックスデータに、ターゲットビデオデータが持つ光電変換特性と同じ光電変換特性を適用して光電変換をする機能である。第７の変換機能３０７は、サブタイトルのグラフィックスデータのドメインをＲＧＢ２からＹＣｂＣｒに変換する機能である。
　（１）の場合、第１の変換機能３０１のみが必要となる。この場合、ビットマップデータは、第１の変換機能３０１によりサブタイトルのグラフィックスデータに変換され、このグラフィックスデータがそのまま出力グラフィックスデータとなる。この場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータとターゲットビデオデータのいずれもＳＤＲで、かつ色域も同じであることから、第２の変換機能３０２から第７の変換機能３０７は、バイパスされる。この変換処理は、今までのレガシーの放送で行われている処理と全く同じである。
　（２）の場合、第１の変換機能３０１、第２の変換機能３０２、第５の変換機能３０５および第７の変換機能３０７が必要となる。この場合、ビットマップデータは、第１の変換機能３０１によりサブタイトルのグラフィックスデータに変換される。このサブタイトルのグラフィックスデータは、第２の変換機能３０２により、ＹＣｂＣｒドメインからＲＧＢ１ドメインに変換される。
　ＲＧＢ１ドメインに変換されたサブタイトルのグラフィックスデータの色域は、第５の変換機能３０５により、ターゲットビデオデータの色域に合うように変換される。例えば、サブタイトルのグラフィックスデータのＢＴ．７０９の色域が、ターゲットビデオデータの色域であるＢＴ．２０２０に合うように変換される。
　色域変換されたサブタイトルのグラフィックスデータは、第７の変換機能３０７により、ＲＧＢ２ドメインからＹＣｂＣｒに変換され、このグラフィックスデータが出力グラフィックスデータとなる。この場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータとターゲットビデオデータのいずれもＳＤＲであることから、第３の変換機能３０３、第４の変換機能３０４および第６の変換機能３０６は、バイパスされる。
　（３）の場合、第１の変換機能３０１から第７の変換機能３０７の全てが必要となる。この場合、ビットマップデータは、第１の変換機能３０１によりサブタイトルのグラフィックスデータに変換される。このサブタイトルのグラフィックスデータは、第２の変換機能３０２により、ＹＣｂＣｒドメインからＲＧＢ１ドメインに変換される。
　ＲＧＢ１ドメインに変換されたサブタイトルのグラフィックスデータは、第３の変換機能３０３により、ＳＤＲ電光変換特性を適用して電光変換されて、輝度リニア空間とされる。輝度リニア空間とされたサブタイトルのグラフィックスデータは、第４の変換機能３０４により、輝度レベル変換される。この場合、所定のＳＤＲ輝度レベルがＨＤＲのマッピング基準レベルとなるように変換される。
　図６は、この輝度レベル変換の様子を示している。この図６において、実線ａは、ＳＤＲ変換カーブを示している。実線ｂは、ＨＤＲ変換カーブを示している。破線ｃは、ＨＤＲ変換カーブにマッピングされたＳＤＲデータの範囲を示している。
　この場合、ＳＤＲのサブタイトルのグラフィックスデータの輝度値“ｍ”が、ＨＤＲのビデオデータの輝度値“ｍ”と一致するマッピング基準値として扱われる。ＳＤＲのサブタイトルのグラフィックスデータの輝度値“ｍ”を表す符号化コード値をＱ％とし、ＨＤＲのビデオデータの輝度値“ｍ”を表す符号化コード値をＰ%とすると、Ｑ％を表すデジタルコードがＰ％を示すデジタルコードと一致するように、ＳＤＲのサブタイトルのグラフィックスデータが変換される。
　このようにすることにより、ＳＤＲのサブタイトルのグラフィックスデータの［０・・ａ］は、ＨＤＲのビデオデータの［０・・ａ´］の範囲となる。これにより、サブタイトルの輝度が明るくなりすぎることなどが防止される。なお、図においては、ＳＤＲ，ＨＤＲ共に、符号化ビット空間をＮで同一としている。また、０＜Ｐ≦１００、０＜Ｑ≦１００である。
　上述したように第４の変換機能３０４で輝度レベル変換されたサブタイトルのグラフィックスデータは、第５の変換機能３０５により、ターゲットビデオデータの色域に合うように変換される。例えば、サブタイトルのグラフィックスデータのＢＴ．７０９の色域が、ターゲットビデオデータの色域であるＢＴ．２０２０に合うように変換される。
　色域変換されたサブタイトルのグラフィックスデータは、第６の変換機能３０６により、ＨＤＲ光電変換特性が適用されて光電変換される。これにより、サブタイトルのグラフィックスデータは、ターゲットビデオデータと同じく、ＨＤＲ光電変換特性を持つものとなる。このサブタイトルのグラフィックスデータは、第７の変換機能３０７により、ＲＧＢ２ドメインからＹＣｂＣｒに変換され、このグラフィックスデータが出力グラフィックスデータとなる。
　（４）の場合、上述の（３）の場合と同様に、第１の変換機能３０１から第７の変換機能３０７の全てが必要となる。この場合、ビットマップデータは、第１の変換機能３０１によりサブタイトルのグラフィックスデータに変換される。このサブタイトルのグラフィックスデータは、第２の変換機能３０２により、ＹＣｂＣｒドメインからＲＧＢ１ドメインに変換される。
　ＲＧＢ１ドメインに変換されたサブタイトルのグラフィックスデータは、第３の変換機能３０３により、ＨＤＲ電光変換特性を適用して電光変換されて、輝度リニア空間とされる。輝度リニア空間とされたサブタイトルのグラフィックスデータは、第４の変換機能３０４により、輝度レベル変換される。この場合、所定のＨＤＲ輝度レベルがＳＤＲのマッピング基準レベルとなるように変換される。
　図７は、この輝度レベル変換の様子を示している。この図７において、実線ａは、ＳＤＲ変換カーブを示している。実線ｂは、ＨＤＲ変換カーブを示している。破線ｃは、ＨＤＲ変換カーブをＳＤＲにマッピングすることを目的にする変換カーブを示している。
　この場合、ＨＤＲのサブタイトルのグラフィックスデータの輝度値“ｍ”が、ＳＤＲのビデオデータの輝度値“ｍ”と一致するマッピング基準値として扱われる。ＨＤＲのサブタイトルのグラフィックスデータの輝度値“ｍ”を表す符号化コード値をＰ％とし、ＳＤＲのビデオデータの輝度値“ｍ”を表す符号化コード値をＱ%とすると、Ｐ％を表すデジタルコードがＱ％を示すデジタルコードと一致するように、ＨＤＲのサブタイトルのグラフィックスデータが、破線ｃのようなトーンマップ（tone-map）特性を持つ変換カーブで変換される。
　このようにすることにより、ＨＤＲのサブタイトルのグラフィックスデータの［０・・ｂ］は［０・・ａ´］になり、クリッピングすること無しにＳＤＲのビデオデータの［０・・ａ］の範囲に収まる。なお、図においては、ＳＤＲ，ＨＤＲ共に、符号化ビット空間をＮで同一としている。また、０＜Ｐ≦１００、０＜Ｑ≦１００である。
　上述したように第４の変換機能３０４で輝度レベル変換されたサブタイトルのグラフィックスデータは、第５の変換機能３０５により、ターゲットビデオデータの色域に合うように変換される。例えば、サブタイトルのグラフィックスデータのＢＴ．２０２０の色域が、ターゲットビデオデータの色域であるＢＴ．７０９に合うように変換される。
　色域変換されたサブタイトルのグラフィックスデータは、第６の変換機能３０６により、ＳＤＲ光電変換特性が適用されて光電変換される。これにより、サブタイトルのグラフィックスデータは、ターゲットビデオデータと同じく、ＳＤＲ光電変換特性を持つものとなる。このサブタイトルのグラフィックスデータは、第７の変換機能３０７により、ＲＧＢ２ドメインからＹＣｂＣｒに変換され、このグラフィックスデータが出力グラフィックスデータとなる。
　（５）の場合、第１の変換機能３０１のみが必要となる。この場合、ビットマップデータは、第１の変換機能３０１によりサブタイトルのグラフィックスデータに変換され、このグラフィックスデータがそのまま出力グラフィックスデータとなる。この場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータとターゲットビデオデータのいずれもＨＤＲで、かつ色域も同じであることから、第２の変換機能３０２から第７の変換機能３０７は、バイパスされる。
　なお、図示の例では、ビットマップデータへの変換前のサブタイトルのグラフィックスデータとターゲットビデオデータのＨＤＲ特性が同一の場合を示している。双方のデータのＨＤＲ特性が異なる場合には、（３）、（４）の場合と同様に、輝度レベルの変換も必要となる。双方のデータのＨＤＲ特性が異なる場合とは、例えば、サブタイトルのグラフィックスデータのＨＤＲ特性がＰＱ、ビデオデータのＨＤＲ特性がＨＬＧの場合などである。
　図２に戻って、サブタイトルエンコーダ１０４は、変換部１０３から出力されたビットマップデータと表示制御情報を種々のセグメントに変換し、ペイロードにそれらのセグメントを配置したＰＥＳパケットで構成されるサブタイトルストリームＳＳを生成する。種々のセグメントには、従来周知のＤＤＳ、ＰＣＳ、ＲＣＳ、ＯＤＳ、ＥＤＳなどのセグメントの他に、新規定義するＷＣ・セグメント（WC segment）やレンダリング・ガイド・セグメント（Rendering_guide_segment）も含まれる。
　ＷＣ・セグメントには、変換部１０３から出力された所定数のビットマップ変換テーブルの情報が含まれる。また、レンダリング・ガイド・セグメントには、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報、つまり色域やダイナミックレンジ情報などのメタ情報が含まれる。
　図８、図９は、ＷＣ・セグメントの構造例（Syntax）を示し、図１０は、その構造例における主要な情報の内容（Semantics）を示している。「CLUT_entry_id」の８ビットフィールドは、個々のＣＬＵＴ（ビットマップ変換テーブル）のＩＤを示す。「entry_CLUT_type」の４ビットフィールドは、entry－ＣＬＵＴの種別、つまり表示色のバリエーションを示し、入力ビットマップデータのレンジに相当する。例えば、“０ｘ１”は２ビットエントリ（2bit entry）を示し、“０ｘ２”は４ビットエントリ（4bit entry）を示し、“０ｘ４”は８ビットエントリ（8bit entry）を示す。
　「output_depth」の２ビットフィールドは、出力グラフィックスデータであるＹＣｒＣｂ，Ｔの各要素のビット深度を示す。例えば、“１”は８ビット（8bit）を示し、“２”は１０ビット（10bit）を示し、“３”は１２ビット（12bit）を示す。
　「subtitle_dynamic_range_type」の２ビットフィールドは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジとして適合するダイナミックレンジの情報を示す。例えば、“１”は「ＳＤＲ　ｂｙ　ｇａｍｍａ」を示し、“２”は「ＨＤＲ　ｂｙ　ＰＱ」を示し、“３”は「ＨＤＲ　ｂｙ　ＨＬＧ」を示す。「subtitle_color_gamut」の２ビットフィールドは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの色域として適合する色域の情報を示す。例えば、“１”は「ＢＴ．７０９」を示し、“２”は「ＢＴ．２０２０」を示す。
　「target_video_dynamic_range_type」の２ビットフィールドは、ターゲットビデオデータのダイナミックレンジとして適合するダイナミックレンジの情報を示す。例えば、“１”は「ＳＤＲ　ｂｙ　ｇａｍｍａ」を示し、“２”は「ＨＤＲ　ｂｙ　ＰＱ」を示し、“３”は「ＨＤＲ　ｂｙ　ＨＬＧ」を示す。「target_video_color_gamut」の２ビットフィールドは、ターゲットビデオデータの色域として適合する色域の情報を示す。例えば、“１”は「ＢＴ．７０９」を示し、“２”は「ＢＴ．２０２０」を示す。
　このＷＣ・セグメントには、ビットマップ変換テーブル毎に、「CLUT_entry_id」、「entry_CLUT_type」、「output_depth」、「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」の各フィールドが存在し、それに続いて、入力ビットマップデータの取り得る各値に対応した変換データであるＹＣｒＣｂ，Ｔの各要素が存在する。
　図１１は、「CLUT_entry_id」、「entry_CLUT_type」、「output_depth」の値の一例と、適合特性情報（「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」）の値を一覧で示している。
　図示の例においては、「entry_CLUT_type」の値は“０ｘ４”とされており、８ビットエントリ（8bit entry）、つまり入力ビットマップデータのレンジが８ビットであることが示されている。また、図示の例においては、「output_depth」の値は“２”とされており、出力グラフィックスデータであるＹＣｒＣｂ，Ｔの各要素のビット深度が１０ビットであることが示されている。
　また、図示の例においては、「CLUT_entry_id」が“１”であるビットマップ変換テーブル（ＣＬＵＴ）の適合特性情報（「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」）は（１，１，１，１）であり、上述の（１）の場合に対応したビットマップ変換テーブルであることが示されている。
　すなわち、このビットマップ変換テーブル（ＣＬＵＴ）を用いることができるのは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジが「ＳＤＲ　ｂｙ　ｇａｍｍａ」、色域が「ＢＴ．７０９」であって、ターゲットビデオデータのダイナミックレンジが「ＳＤＲ　ｂｙ　ｇａｍｍａ」、色域が「ＢＴ．７０９」である場合である。
　また、図示の例においては、「CLUT_entry_id」が“２”であるビットマップ変換テーブル（ＣＬＵＴ）の適合特性情報（「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」）は（１，１，１，２）であり、上述の（２）の場合に対応したビットマップ変換テーブルであることが示されている。
　すなわち、このビットマップ変換テーブル（ＣＬＵＴ）を用いることができるのは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジが「ＳＤＲ　ｂｙ　ｇａｍｍａ」、色域が「ＢＴ．７０９」であって、ターゲットビデオデータのダイナミックレンジが「ＳＤＲ　ｂｙ　ｇａｍｍａ」、色域が「ＢＴ．２０２０」である場合である。
　また、図示の例においては、「CLUT_entry_id」が“３”であるビットマップ変換テーブル（ＣＬＵＴ）の適合特性情報（「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」）は（１，１，３，２）であり、上述の（３）の場合に対応したビットマップ変換テーブルであることが示されている。
　すなわち、このビットマップ変換テーブル（ＣＬＵＴ）を用いることができるのは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジが「ＳＤＲ　ｂｙ　ｇａｍｍａ」、色域が「ＢＴ．７０９」であって、ターゲットビデオデータのダイナミックレンジが「ＨＤＲ　ｂｙ　ＨＬＧ」、色域が「ＢＴ．２０２０」である場合である。
　また、図示の例においては、「CLUT_entry_id」が“４”であるビットマップ変換テーブル（ＣＬＵＴ）の適合特性情報（「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」）は（２，２，１，２）であり、上述の（４）の場合に対応したビットマップ変換テーブルであることが示されている。
　すなわち、このビットマップ変換テーブル（ＣＬＵＴ）を用いることができるのは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジが「ＨＤＲ　ｂｙ　ＰＱ」、色域が「ＢＴ．２０２０」であって、ターゲットビデオデータのダイナミックレンジが「ＳＤＲ　ｂｙ　ｇａｍｍａ」、色域が「ＢＴ．２０２０」である場合である。
　また、図示の例においては、「CLUT_entry_id」が“５”であるビットマップ変換テーブル（ＣＬＵＴ）の適合特性情報（「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」）は（２，２，３，２）であり、上述の（５）の場合（ＨＤＲ特性が異なる場合）に対応したビットマップ変換テーブルであることが示されている。
　すなわち、このビットマップ変換テーブル（ＣＬＵＴ）を用いることができるのは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジが「ＨＤＲ　ｂｙ　ＰＱ」、色域が「ＢＴ．２０２０」であって、ターゲットビデオデータのダイナミックレンジが「ＨＤＲ　ｂｙ　ＨＬＧ」、色域が「ＢＴ．２０２０」である場合である。
　図１２（ａ）は、レンダリング・ガイド・セグメントの構造例（Syntax）を示し、図１２（ｂ）は、その構造例における主要な情報の内容（Semantics）を示している。「rendering_conversion_guide」の１ビットフィールドは、サブタイトルのグラフィックスデータをターゲットビデオデータに重畳するレンダリングに際し、色域やダイナミックレンジをビデオに合わせることが必要なことを示す。例えば、“１”は複数のビットマップ変換テーブルから適合するものを選択することで変換が可能であることを示し、“０”はそれ以外を示す。
　「bitmap_data_color_gamut_information」の８ビットフィールドは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの色域を示すもので、セマンティクスはＨＥＶＣ規格で定義されている情報である。「bitmap_data_dynamic range_information」の８ビットフィールドは、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジを示すもので、セマンティクスはＨＥＶＣ規格で定義されている情報である。
　図２に戻って、システムエンコーダ１０５は、ビデオエンコーダ１０２で生成されたビデオストリームＶＳと、サブタイトルエンコーダ１０４で生成されたサブタイトルストリームＳＳを含むトランスポートストリームＴＳを生成する。送信部１０６は、このトランスポートストリームＴＳを、放送波あるいはネットのパケットに載せて、受信装置２００に送信する。
　「トランスポートストリームＴＳの構成例」
　図１３は、トランスポートストリームＴＳの構成例を示している。この構成例では、ＰＩＤ１で識別されるビデオストリームのＰＥＳパケット「Video PES1」が存在する。また、この構成例では、ＰＩＤ２で識別されるサブタイトルストリームのＰＥＳパケット「Subtitle PES2」が存在する。
　ＰＥＳパケットは、ＰＥＳヘッダ（PES header）とＰＥＳペイロード（PES payload）からなっている。ビデオストリームのＰＥＳパケットにおいて、ＰＥＳペイロードにはビデオ符号化ストリームが挿入されている。アクセスユニットのＳＰＳ ＮＡＬユニットのＶＵＩの領域に、伝送ビデオデータの色域識別情報（color_primaries）、ダイナミックレンジ情報（transfer_characteristics）が挿入される。また、サブタイトルストリームのＰＥＳパケットには、従来周知のＤＤＳ、ＰＣＳ、ＲＣＳ、ＯＤＳ、ＥＤＳなどのセグメントの他に、上述した新規定義するＷＣ・セグメント（ＷＣＳ）やレンダリング・ガイド・セグメント（ＲＧＳ）が挿入されている。
　また、トランスポートストリームＴＳには、ＰＳＩ（Program Specific Information）として、ＰＭＴ（Program Map Table）が含まれている。ＰＳＩは、トランスポートストリームに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。ＰＭＴには、プログラム全体に関連する情報を記述するプログラム・ループ（Program loop）が存在する。
　また、ＰＭＴには、各エレメンタリストリームに関連した情報を持つエレメンタリストリーム・ループが存在する。この構成例では、ビデオストリームに対応したビデオエレメンタリストリーム・ループ（video ES loop）と、サブタイトルストリームに対応したサブタイトルエレメンタリストリーム・ループ（Subtitle ES loop）が存在する。
　ビデオエレメンタリストリーム・ループ（video ES loop）には、ビデオストリームに対応して、ストリームタイプ、ＰＩＤ（パケット識別子）等の情報が配置されると共に、そのビデオストリームに関連する情報を記述するデスクリプタも配置される。このビデオストリームの「Stream_type」の値は、例えばＨＥＶＣビデオストリームを示す値に設定され、ＰＩＤ情報はビデオストリームのＰＥＳパケット「video PES1」に付与されるＰＩＤ１を示すものとされる。
　サブタイトルエレメンタリストリーム・ループ（Subtitle ES loop）には、サブタイトルストリームに対応して、ストリームタイプ、ＰＩＤ（パケット識別子）等の情報が配置されると共に、そのサブタイトルストリームに関連する情報を記述するデスクリプタも配置される。このサブタイトルストリームの「Stream_type」の値は、例えばプライベートストリームを示す値に設定され、ＰＩＤ情報はサブタイトルストリームのＰＥＳパケット「Subtitle PES2」に付与されるＰＩＤ２を示すものとされる。
　図２に示す送信装置１００の動作を簡単に説明する。ビデオデータは、ビデオエンコーダ１０２に供給される。このビデオデータは、ＳＤＲあるいはＨＤＲのデータであり、ＳＤＲあるいはＨＤＲの光電変換特性を持たせたものである。
　ビデオエンコーダ１０２では、このビデオデータに対して、例えば、ＭＰＥＧ４－ＡＶＣあるいはＨＥＶＣなどの符号化が施されて、符号化ビデオデータを含むビデオストリーム（ＰＥＳストリーム）ＶＳが生成される。このとき、アクセスユニット（ＡＵ）のＳＰＳ ＮＡＬユニットのＶＵＩの領域に、ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer_function）、ビデオデータの色域を示す情報（color_primaries）などのメタ情報が挿入される。
　また、サブタイトルのグラフィックスデータは、変換部１０３に供給される。このサブタイトルのグラフィックスデータは、ＳＤＲあるいはＨＤＲのデータであり、ＳＤＲあるいはＨＤＲの光電変換特性を持たせたものである。変換部１０３では、サブタイトルのグラフィックスデータがビットマップデータに変換される。この変換部１０３からは、ビットマップデータと共に、受信側で必要とされると想定される１つまたは２つ以上のビットマップ変換テーブルの情報が出力される。
　ここで、ビットマップ変換テーブルは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルである。すなわち、このビットマップ変換テーブルは、ビットマップデータを単にサブタイトルのグラフィックスデータに変換するためのものではなく、重畳先のビデオデータであるターゲットビデオデータに適合するように、色域や輝度をも併せて変換するものである。
　変換部１０３から出力されたビットマップデータおよびビットマップ変換テーブル情報は、サブタイトルエンコーダ１０４に供給される。サブタイトルエンコーダ１０４では、ビットマップデータと表示制御情報が種々のセグメントに変換され、ペイロードにそれらのセグメントを配置したＰＥＳパケットで構成されるサブタイトルストリームＳＳが生成される。
　種々のセグメントには、従来周知のＤＤＳ、ＰＣＳ、ＲＣＳ、ＯＤＳ、ＥＤＳなどのセグメントの他に、新規定義するＷＣ・セグメント（図８－１０参照）やレンダリング・ガイド・セグメント（図１２参照）も含まれる。ＷＣ・セグメントには、ビットマップ変換テーブルの情報が含まれる。また、レンダリング・ガイド・セグメントには、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報、つまり色域やダイナミックレンジ情報などのメタ情報が含まれる。
　ビデオエンコーダ１０２で生成されたビデオストリームＶＳは、システムエンコーダ１０５に供給される。サブタイトルエンコーダ１０４で生成されたサブタイトルストリームＳＳは、システムエンコーダ１０５に供給される。システムエンコーダ１０５では、ビデオストリームＶＳとサブタイトルストリームＳＳを含むトランスポートストリームＴＳが生成される。このトランスポートストリームＴＳは、送信部１０６により、放送波あるいはネットのパケットに載せて、受信装置２００に送信される。
　「受信装置の構成例」
　図１４は、受信装置２００の構成例を示している。この受信装置２００は、制御部２０１と、受信部２０２と、システムデコーダ２０３と、ビデオデコーダ２０４と、サブタイトルデコーダ２０５と、変換部２０６と、ビデオ重畳部２０７を有している。また、この受信装置２００は、ＹＣｂＣｒ/ＲＧＢ変換部２１２と、電光変換部２１３と、表示マッピング部２１４と、ＣＥモニタ２１５を有している。
　制御部２０１は、ＣＰＵ（Central Processing Unit）を備えて構成され、制御プログラムに基づいて、受信装置２００の各部の動作を制御する。受信部２０２は、送信装置１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームＴＳを受信する。システムデコーダ２０３は、このトランスポートストリームＴＳから、ビデオストリームＶＳとサブタイトルストリームＳＳを抽出する。
　ビデオデコーダ２０４は、システムデコーダ２０３で抽出されるビデオストリームＶＳに対して復号化処理を行って、ターゲットビデオデータを得る。この場合、ターゲットビデオデータとしては、送信側から送られてきたビデオデータそのものだけでなく、それに必要に応じて色域やダイナミックレンジの変換処理を施して得られたビデオデータも考えられる。また、ビデオデコーダ２０４は、ビデオストリームＶＳを構成する各アクセスユニットに挿入されているパラメータセットやＳＥＩメッセージを抽出し、制御部２０１に送る。
　サブタイトルデコーダ２０５は、システムデコーダ２０３で抽出されるサブタイトルストリームＳＳに対して復号化処理を行って、ビットマップデータと、所定数、つまり１つまたは２つ以上のビットマップ変換テーブル情報を得る。ここで、所定数のビットマップ変換テーブル情報は、上述のＷＣ・セグメント（図８－１０参照）から得られる。また、このとき、レンダリング・ガイド・セグメント（図１２参照）から、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報、つまり色域やダイナミックレンジの情報などのメタ情報が抽出され、制御部２０１に送られる。
　変換部２０６は、所定数のビットマップ変換テーブルのうち適合するビットマップ変換テーブルを用いて、ビットマップデータをサブタイトルのグラフィックスデータに変換する。この場合、変換部２０６は、適合するビットマップ変換テーブルを、各ビットマップ変換テーブルに付加されている適合特性情報（「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」）（図８参照）に基づいて判断する。
　変換部２０６は、「subtitle_dynamic_range_type」、「subtitle_color_gamut」で示されるダイナミックレンジ、色域がビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジ、色域と一致し、かつ「target_video_dynamic_range_type」、「target_video_color_gamut」で示されるダイナミックレンジ、色域がターゲットビデオデータのダイナミックレンジ、色域と一致するビットマップ変換テーブルを適合するものとする。
　この場合、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジ、色域は、上述したように、レンダリング・ガイド・セグメント（図１２参照）から抽出された、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報（色域やダイナミックレンジの情報）により把握される。
　図１５は、ビットマップ変換テーブルの選択例を示している。図示の例は、上述の図１１の例で示される「CLUT_entry_id」が１－５である５つのビットマップ変換テーブル（ＣＬＵＴ１－５）の情報がＷＣ・セグメントに含まれている場合の例である。また、図示の例は、ビットマップデータへの変換前のサブタイトルのグラフィックスデータのダイナミックレンジ、色域が、それぞれ、「ＳＤＲ　ｂｙ　ｇａｍｍａ」、「ＢＴ．７０９」であり、ターゲットビデオデータのダイナミックレンジ、色域が、それぞれ、「ＨＤＲ　ｂｙ　ＨＬＧ」、「ＢＴ．２０２０」である場合の例である。この場合には、図示のように、ＣＬＵＴ３が、適合するビットマップ変換テーブルとして選択される。
　なお、変換部２０６は、上述の図５に示す第１の変換機能３０１から第７の変換機能３０７を備えたものとされる。変換部２０６は、ＷＣ・セグメントに含まれているビットマップ変換テーブルに適合するものがないときは、ビットマップ変換テーブルを用いずに、第１の変換機能３０１から第７の変換機能３０７のうち必要な変換機能を使用して、ビットマップデータから重畳先のターゲットビデオデータの特性に合った特性のサブタイトルのグラフィックスデータを生成する。
　図１４に戻って、ビデオ重畳部２０７は、ビデオデコーダ２０４から出力されたターゲットビデオデータに、変換部２０６から出力されたサブタイトルのグラフィックスデータを重畳する。ＹＣｂＣｒ/ＲＧＢ変換部２１２は、サブタイトルのグラフィックスデータが重畳されたビデオデータＶ１´をＹＣｂＣｒ（輝度・色差）ドメインからＲＧＢドメインに変換する。この場合、ＹＣｂＣｒ/ＲＧＢ変換部２１２は、色域識別情報に基づいて、色域に対応した変換式を用いて変換を行う。
　電光変換部２１３は、ＲＧＢドメインに変換されたビデオデータＶ１´に、それに適用されている光電変換特性に対応した電光変換特性を適用して電光変換を行って、画像を表示するための表示用ビデオデータを得る。表示マッピング部２１４は、表示用ビデオデータに対して、ＣＥモニタ２１５の最大輝度表示能力などに応じた表示輝度調整を行う。ＣＥモニタ２１５は、表示輝度調整が行われた表示用ビデオデータに基づいて画像を表示する。このＣＥモニタ２１５は、例えば、ＬＣＤ(Liquid Crystal Display)、有機ＥＬディスプレイ（organic electroluminescence display）などで構成される。
　図１４に示す受信装置２００の動作を簡単に説明する。受信部２０２では、送信装置１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームＴＳが受信される。このトランスポートストリームＴＳは、システムデコーダ２０３に供給される。システムデコーダ２０３では、このトランスポートストリームＴＳから、ビデオストリームＶＳおよびサブタイトルストリームＳＳが抽出される。
　システムデコーダ２０３で抽出されたビデオストリームＶＳは、ビデオデコーダ２０４に供給される。ビデオデコーダ２０４では、ビデオストリームＶＳに対して復号化処理が施されて、ターゲットビデオデータが得られる。この場合、ターゲットビデオデータとしては、送信側から送られてきたビデオデータそのものだけでなく、それに必要に応じて色域やダイナミックレンジの変換処理を施して得られたビデオデータも考えられる。
　システムデコーダ２０３で抽出されたサブタイトルストリームＳＳは、サブタイトルデコーダ２０５に供給される。サブタイトルデコーダ２０５では、サブタイトルストリームＳＳに対して復号化処理が行われて、ビットマップデータと、所定数のビットマップ変換テーブルの情報が得られる。この所定数のビットマップ変換テーブル情報は、ＷＣ・セグメント（図８－１０参照）から得られる。
　また、このとき、レンダリング・ガイド・セグメント（図１２参照）から、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報、つまり色域やダイナミックレンジの情報などのメタ情報が抽出され、制御部２０１に送られる。
　サブタイトルデコーダ２０５で得られたビットマップデータと所定数のビットマップ変換テーブルの情報は、変換部２０６に供給される。変換部２０６では、制御部２０１の制御の下、所定数のビットマップ変換テーブルのうち適合するビットマップ変換テーブルが選択される。変換部２０６では、適合するビットマップ変換テーブルが、各ビットマップ変換テーブルに付加されている適合特性情報（「subtitle_dynamic_range_type」、「subtitle_color_gamut」、「target_video_dynamic_range_type」、「target_video_color_gamut」）（図８参照）に基づいて判断される。
　そして、変換部２０６では、適合ビットマップ変換テーブルが用いられて、ビットマップデータがサブタイトルのグラフィックスデータに変換される。このように変換されたサブタイトルのグラフィックスデータの色域、ダイナミックレンジは、ビデオデコーダ２０４で得られたターゲットビデオデータの色域、ダイナミックレンジに合ったものとなる。
　なお、変換部２０６では、送られてくるビットマップ変換テーブルに適合するものがないときは、備えられた第１の変換機能３０１から第７の変換機能３０７（図５参照）のうち必要な変換機能が受信機側の判断で使用され、ビットマップデータから重畳先のターゲットビデオデータの特性に合った特性のサブタイトルのグラフィックスデータが生成される。
　ビデオデコーダ２０４で得られたターゲットビデオデータは、ビデオ重畳部２０７に供給される。また、変換部２０６で得られたサブタイトルのグラフィックスデータは、ビデオ重畳部２０７に供給される。このビデオ重畳部２０７では、ターゲットビデオデータに、サブタイトルのグラフィックスデータが重畳される。この場合、サブタイトルのグラフィックスデータがビデオデータに所定の比率で混合される。ここで、混合比率に関しては、T-Valueに則して行われる。
　ビデオ重畳部２０７で得られた、サブタイトルのグラフィックスデータが重畳されたビデオデータＶ１´は、ＹＣｂＣｒ/ＲＧＢ変換部２１２において、ＹＣｂＣｒ（輝度・色差）ドメインからＲＧＢドメインに変換されて、電光変換部２１３に供給される。電光変換部２１３では、ビデオデータＶ１´に、それに適用されている光電変換特性に対応した電光変換特性が適用されて電光変換が行われ、画像を表示するための表示用ビデオデータが得られる。
　表示用ビデオデータは、表示マッピング部２１４に供給される。この表示マッピング部２１４では、表示用ビデオデータに対して、ＣＥモニタ２１５の最大輝度表示能力などに応じた表示輝度調整が行われる。このように表示輝度調整が行われた表示用ビデオデータはＣＥモニタ２１５に供給される。ＣＥモニタ２１５には、この表示用ビデオデータに基づいて画像が表示される。
　上述したように、図１に示す送受信システム１０において、送信側から受信側に送られるサブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有するものである。そのため、受信側では、ビットマップ変換テーブルを用いてビットマップデータをサブタイトルのグラフィックスデータに変換するだけで、重畳先のターゲットビデオデータの特性に合った特性のサブタイトルのグラフィックスデータを容易に得ることができ、受信側の処理負荷を軽減することが可能となる。
　また、図１に示す送受信システム１０において、送信側から受信側に送られるサブタイトルストリームに、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性情報を挿入するものである。そのため、受信側では、ビットマップデータへの変換前のサブタイトルのグラフィックスデータの特性を容易に把握可能となる。
　＜２．変形例＞
　なお、上述実施の形態において、コンテナがトランスポートストリーム（ＭＰＥＧ－２　ＴＳ）である例を示した。しかし、本技術は、トランスポートがＴＳと限定されるものではなく、他のパケット、例えばＩＳＯＢＭＦＦやＭＭＴなどの場合でも、ビデオのレイヤは同一の方法で実現できる。
　また、本技術は、以下のような構成を取ることもできる。
　（１）ビデオデータを持つビデオストリームを生成するビデオエンコード部と、
　サブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを生成するサブタイトルエンコード部と、
　上記ビデオストリームと上記サブタイトルストリームを含む所定フォーマットのコンテナを送信する送信部を備え、
　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有する
　送信装置。
　（２）上記サブタイトルストリームは、上記変換情報を異にする複数のビットマップ変換テーブルを有する
　前記（１）に記載の送信装置。
　（３）上記複数のビットマップ変換テーブルには、それぞれ、サブタイトルのグラフィックスデータおよびターゲットビデオデータの適合特性情報が付加される
　前記（２）に記載の送信装置。
　（４）上記サブタイトルストリームに、上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータの特性情報を挿入する情報挿入部をさらに備える
　前記（１）から（３）のいずれかに記載の送信装置。
　（５）ビデオエンコード部が、ビデオデータを持つビデオストリームを生成するビデオエンコードステップと、
　サブタイトルエンコード部が、サブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを生成するサブタイトルエンコードステップと、
　送信部が、上記ビデオストリームと上記サブタイトルストリームを含む所定フォーマットのコンテナを送信する送信ステップを有し、
　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有する
　送信方法。
　（６）ビデオデータを持つビデオストリームとサブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有しており、
　上記ビデオストリームをデコードしてターゲットビデオデータを得る処理と、上記サブタイトルストリームをデコードして上記ビットマップデータと上記ビットマップ変換テーブルを得る処理と、該ビットマップデータを該ビットマップ変換テーブルを用いてサブタイトルのグラフィックスデータに変換する処理と、該サブタイトルのグラフィックスデータを上記ターゲットビデオデータに重畳する処理を制御する制御部をさらに備える
　受信装置。
　（７）上記サブタイトルストリームは、上記変換情報を異にする複数のビットマップ変換テーブルを有しており、
　上記ビットマップデータを上記サブタイトルのグラフィックスデータに変換する処理では、上記複数のビットマップ変換テーブルのうち上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータおよび上記ターゲットビデオデータの特性に適合したビットマップ変換テーブルが用いられる
　前記（６）に記載の受信装置。
　（８）上記サブタイトルストリームに、上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータの特性情報が挿入されており、
　上記ビットマップデータを上記サブタイトルのグラフィックスデータに変換する処理では、上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータの特性は上記サブタイトルストリームに挿入されている特性情報に基づいて判断される
　前記（７）に記載の受信装置。
　（９）上記ビットマップデータを上記サブタイトルのグラフィックスデータに変換する処理では、上記ビットマップ変換テーブルが上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータおよび上記ターゲットビデオデータの特性に適合しないとき、上記ビットマップ変換テーブルを用いずに、上記特性に適合するように、上記ビットマップデータが上記サブタイトルのグラフィックスデータに変換される
　前記（６）から（８）のいずれかに記載の受信装置。
　（１０）受信部が、ビデオデータを持つビデオストリームとサブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信ステップを有し、
　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有しており、
　制御部が、上記ビデオストリームをデコードしてターゲットビデオデータを得る処理と、上記サブタイトルストリームをデコードして上記ビットマップデータと上記ビットマップ変換テーブルを得る処理と、該ビットマップデータを該ビットマップ変換テーブルを用いてサブタイトルのグラフィックスデータに変換する処理と、該サブタイトルのグラフィックスデータを上記ターゲットビデオデータに重畳する処理を制御する制御ステップをさらに有する
　受信方法。
　本技術の主な特徴は、送信側から受信側に送られるサブタイトルストリームが色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有するようにしたことで、受信側では、ビットマップ変換テーブルを用いてビットマップデータをサブタイトルのグラフィックスデータを変換するだけで、重畳先のターゲットビデオデータの特性に合った特性のサブタイトルのグラフィックスデータを容易に得ることができ、受信側の処理負荷を軽減することを可能にしたことである（図２、図８－９参照）。
　１０・・・送受信システム
　１００・・・送信装置
　１０１・・・制御部
　１０２・・・ビデオエンコーダ
　１０３・・・変換部
　１０４・・・サブタイトルエンコーダ
　１０５・・・システムエンコーダ
　１０６・・・送信部
　２００・・・受信装置
　２０１・・・制御部
　２０２・・・受信部
　２０３・・・システムデコーダ
　２０４・・・ビデオデコーダ
　２０５・・・サブタイトルデコーダ
　２０６・・・変換部
　２０７・・・ビデオ重畳部
　２１２・・・ＹＣｂＣｒ/ＲＧＢ変換部
　２１３・・・電光変換部
　２１４・・・表示マッピング部
　２１５・・・ＣＥモニタ

Claims (10)

  1. 　ビデオデータを持つビデオストリームを生成するビデオエンコード部と、
    　サブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを生成するサブタイトルエンコード部と、
    　上記ビデオストリームと上記サブタイトルストリームを含む所定フォーマットのコンテナを送信する送信部を備え、
    　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有する
    　送信装置。
  2. 　上記サブタイトルストリームは、上記変換情報を異にする複数のビットマップ変換テーブルを有する
    　請求項１に記載の送信装置。
  3. 　上記複数のビットマップ変換テーブルには、それぞれ、サブタイトルのグラフィックスデータおよびターゲットビデオデータの適合特性情報が付加される
    　請求項２に記載の送信装置。
  4. 　上記サブタイトルストリームに、上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータの特性情報を挿入する情報挿入部をさらに備える
    　請求項１に記載の送信装置。
  5. 　ビデオエンコード部が、ビデオデータを持つビデオストリームを生成するビデオエンコードステップと、
    　サブタイトルエンコード部が、サブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを生成するサブタイトルエンコードステップと、
    　送信部が、上記ビデオストリームと上記サブタイトルストリームを含む所定フォーマットのコンテナを送信する送信ステップを有し、
    　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有する
    　送信方法。
  6. 　ビデオデータを持つビデオストリームとサブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
    　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有しており、
    　上記ビデオストリームをデコードしてターゲットビデオデータを得る処理と、上記サブタイトルストリームをデコードして上記ビットマップデータと上記ビットマップ変換テーブルを得る処理と、該ビットマップデータを該ビットマップ変換テーブルを用いてサブタイトルのグラフィックスデータに変換する処理と、該サブタイトルのグラフィックスデータを上記ターゲットビデオデータに重畳する処理を制御する制御部をさらに備える
    　受信装置。
  7. 　上記サブタイトルストリームは、上記変換情報を異にする複数のビットマップ変換テーブルを有しており、
    　上記ビットマップデータを上記サブタイトルのグラフィックスデータに変換する処理では、上記複数のビットマップ変換テーブルのうち上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータおよび上記ターゲットビデオデータの特性に適合したビットマップ変換テーブルが用いられる
    　請求項６に記載の受信装置。
  8. 　上記サブタイトルストリームに、上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータの特性情報が挿入されており、
    　上記ビットマップデータを上記サブタイトルのグラフィックスデータに変換する処理では、上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータの特性は上記サブタイトルストリームに挿入されている特性情報に基づいて判断される
    　請求項７に記載の受信装置。
  9. 　上記ビットマップデータを上記サブタイトルのグラフィックスデータに変換する処理では、上記ビットマップ変換テーブルが上記ビットマップデータへの変換前の上記サブタイトルのグラフィックスデータおよび上記ターゲットビデオデータの特性に適合しないとき、上記ビットマップ変換テーブルを用いずに、上記特性に適合するように、上記ビットマップデータが上記サブタイトルのグラフィックスデータに変換される
    　請求項６に記載の受信装置。
  10. 　受信部が、ビデオデータを持つビデオストリームとサブタイトルのグラフィックスデータを変換して得られたビットマップデータを持つサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信ステップを有し、
    　上記サブタイトルストリームは、色域および/または輝度の変換情報を含めたビットマップ変換テーブルを有しており、
    　制御部が、上記ビデオストリームをデコードしてターゲットビデオデータを得る処理と、上記サブタイトルストリームをデコードして上記ビットマップデータと上記ビットマップ変換テーブルを得る処理と、該ビットマップデータを該ビットマップ変換テーブルを用いてサブタイトルのグラフィックスデータに変換する処理と、該サブタイトルのグラフィックスデータを上記ターゲットビデオデータに重畳する処理を制御する制御ステップをさらに有する
    　受信方法。
PCT/JP2017/035162 2016-10-11 2017-09-28 送信装置、送信方法、受信装置および受信方法 WO2018070255A1 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
EP17859926.2A EP3386201B1 (en) 2016-10-11 2017-09-28 Transmitting device, transmitting method, receiving device, and receiving method
CN201780004323.XA CN108370451B (zh) 2016-10-11 2017-09-28 发送装置、发送方法、接收装置以及接收方法
JP2018517241A JP7113746B2 (ja) 2016-10-11 2017-09-28 送信装置、送信方法、受信装置および受信方法
EP20189755.0A EP3783902A1 (en) 2016-10-11 2017-09-28 Receiving device and receiving method for subtitles
US15/768,971 US10757361B2 (en) 2016-10-11 2017-09-28 Transmission apparatus, transmission method, reception apparatus, and reception method
US16/937,153 US11317055B2 (en) 2016-10-11 2020-07-23 Transmission apparatus, transmission method, reception apparatus, and reception method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-200179 2016-10-11
JP2016200179 2016-10-11

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/768,971 A-371-Of-International US10757361B2 (en) 2016-10-11 2017-09-28 Transmission apparatus, transmission method, reception apparatus, and reception method
US16/937,153 Continuation US11317055B2 (en) 2016-10-11 2020-07-23 Transmission apparatus, transmission method, reception apparatus, and reception method

Publications (1)

Publication Number Publication Date
WO2018070255A1 true WO2018070255A1 (ja) 2018-04-19

Family

ID=61905419

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/035162 WO2018070255A1 (ja) 2016-10-11 2017-09-28 送信装置、送信方法、受信装置および受信方法

Country Status (5)

Country Link
US (2) US10757361B2 (ja)
EP (2) EP3783902A1 (ja)
JP (1) JP7113746B2 (ja)
CN (1) CN108370451B (ja)
WO (1) WO2018070255A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108370451B (zh) * 2016-10-11 2021-10-01 索尼公司 发送装置、发送方法、接收装置以及接收方法
EP3389278B1 (en) * 2016-11-22 2022-10-12 Saturn Licensing, LLC Transmitting device, transmitting method, receiving device and receiving method
BR112022019770A2 (pt) 2020-03-30 2022-11-16 Bytedance Inc Método de processamento de vídeo, aparelho para processar dados de vídeo, meios de armazenamento e de gravação não transitórios legíveis por computador
CN112235521B (zh) * 2020-09-29 2023-03-10 东软集团股份有限公司 一种实现字幕转换的方法、装置及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009094846A (ja) * 2007-10-10 2009-04-30 Panasonic Corp 映像・音声記録再生装置
JP2009147580A (ja) * 2007-12-13 2009-07-02 Sony Corp 情報処理装置および方法、プログラム、並びに情報処理システム
WO2014178286A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
WO2016132976A1 (ja) * 2015-02-17 2016-08-25 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2143092T4 (es) * 1994-12-14 2011-11-22 Koninklijke Philips Electronics N.V. Sistema de transmisión de subtítulos.
US7002605B1 (en) * 2000-07-03 2006-02-21 Alps Electric Co., Ltd. Image display apparatus for fixing luminance of blank area and varying only luminance of image
US20070121005A1 (en) * 2003-11-10 2007-05-31 Koninklijke Philips Electronics N.V. Adaptation of close-captioned text based on surrounding video content
CN100401750C (zh) 2004-01-12 2008-07-09 松下电器产业株式会社 字幕编码装置
KR100725248B1 (ko) 2005-08-25 2007-06-04 주식회사 한국스테노 시각장애인용 속기입력장치 및 방법
JP4958713B2 (ja) 2007-10-04 2012-06-20 キヤノン株式会社 動画像符号化装置及びその制御方法
US7925081B2 (en) 2007-12-12 2011-04-12 Fuji Xerox Co., Ltd. Systems and methods for human body pose estimation
JP2011030180A (ja) 2009-06-29 2011-02-10 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
KR20110018261A (ko) * 2009-08-17 2011-02-23 삼성전자주식회사 텍스트 서브타이틀 데이터 처리 방법 및 재생 장치
CN101917557B (zh) * 2010-08-10 2012-06-27 浙江大学 一种基于视频内容的动态添加字幕方法
US9443495B2 (en) * 2011-06-14 2016-09-13 Koninklijke Philips N.V. Graphics processing for high dynamic range video
JP2013066075A (ja) 2011-09-01 2013-04-11 Sony Corp 送信装置、送信方法および受信装置
DK177954B1 (en) 2013-07-04 2015-02-02 Jasopels As Apparatus for processing of pelts having helical scraping rollers
RU2654049C2 (ru) * 2013-07-19 2018-05-16 Конинклейке Филипс Н.В. Транспортировка hdr метаданных
DE202015009982U1 (de) * 2014-02-07 2022-08-02 Sony Group Corporation Übertragungsvorrichtung, Empfangsvorrichtung und Anzeigevorrichtung
JP2016048891A (ja) * 2014-08-28 2016-04-07 株式会社東芝 画像処理システム及び装置ならびに画像処理方法
JP2016081553A (ja) 2014-10-17 2016-05-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 記録媒体、再生方法、および再生装置
US10542304B2 (en) 2015-02-03 2020-01-21 Sony Corporation Transmission device, transmission method, reception device, and reception method
US10595099B2 (en) * 2015-04-05 2020-03-17 Lg Electronics Inc. Method and device for transmitting and receiving broadcast signal for broadcast service on basis of XML subtitle
CN108370451B (zh) 2016-10-11 2021-10-01 索尼公司 发送装置、发送方法、接收装置以及接收方法
EP3389278B1 (en) * 2016-11-22 2022-10-12 Saturn Licensing, LLC Transmitting device, transmitting method, receiving device and receiving method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009094846A (ja) * 2007-10-10 2009-04-30 Panasonic Corp 映像・音声記録再生装置
JP2009147580A (ja) * 2007-12-13 2009-07-02 Sony Corp 情報処理装置および方法、プログラム、並びに情報処理システム
WO2014178286A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
WO2016132976A1 (ja) * 2015-02-17 2016-08-25 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Also Published As

Publication number Publication date
CN108370451B (zh) 2021-10-01
EP3386201B1 (en) 2020-11-04
CN108370451A (zh) 2018-08-03
JPWO2018070255A1 (ja) 2019-07-25
JP7113746B2 (ja) 2022-08-05
EP3386201A4 (en) 2018-12-05
US20200358980A1 (en) 2020-11-12
US11317055B2 (en) 2022-04-26
EP3386201A1 (en) 2018-10-10
US20190281253A1 (en) 2019-09-12
US10757361B2 (en) 2020-08-25
EP3783902A1 (en) 2021-02-24

Similar Documents

Publication Publication Date Title
US20220007063A1 (en) Transmission device, transmission method, reception device, reception method, display device, and display method
US11057547B2 (en) Transmitting device, transmitting method, receiving device, and receiving method
US10542304B2 (en) Transmission device, transmission method, reception device, and reception method
US11627367B2 (en) Transmitting device, transmitting method, receiving device, and receiving method
US11317055B2 (en) Transmission apparatus, transmission method, reception apparatus, and reception method
US10735771B2 (en) Transmission device, transmission method, reception device, and reception method
US10349144B2 (en) Reception device, receiving method, transmission device, and transmitting method
JP7195925B2 (ja) 送信装置、送信方法、受信装置および受信方法
US11202087B2 (en) Transmission device, transmission method, reception device, and reception method

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 2018517241

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE