JP2020074572A - Transmission device, transmission method, reception device, and reception method - Google Patents

Transmission device, transmission method, reception device, and reception method Download PDF

Info

Publication number
JP2020074572A
JP2020074572A JP2020004923A JP2020004923A JP2020074572A JP 2020074572 A JP2020074572 A JP 2020074572A JP 2020004923 A JP2020004923 A JP 2020004923A JP 2020004923 A JP2020004923 A JP 2020004923A JP 2020074572 A JP2020074572 A JP 2020074572A
Authority
JP
Japan
Prior art keywords
data
stream
video data
transmission
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020004923A
Other languages
Japanese (ja)
Other versions
JP6958645B2 (en
Inventor
塚越　郁夫
Ikuo Tsukagoshi
郁夫 塚越
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019083495A external-priority patent/JP6658944B2/en
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2020004923A priority Critical patent/JP6958645B2/en
Publication of JP2020074572A publication Critical patent/JP2020074572A/en
Application granted granted Critical
Publication of JP6958645B2 publication Critical patent/JP6958645B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

To provide an apparatus and a method that prevent image disturbance on the receiving side when a plurality of types of transmission video data having different dynamic ranges are mixed and transmitted.SOLUTION: A service transmission system 100 performs transmission of a container having a predetermined format including a first component stream having transmission video data obtained by switching a plurality of types of transmission video data as component data, and a predetermined number of second component streams having other component data. Dynamic range information of the component data of each of the component streams is inserted into the component stream.SELECTED DRAWING: Figure 2

Description

本技術は、送信装置、送信方法、受信装置および受信方法に関し、詳しくは、ビデオストリームと共にグラフィックスデータや字幕データなどを持つ他のストリームを送信する送信装置等に関する。   The present technology relates to a transmitting device, a transmitting method, a receiving device, and a receiving method, and more particularly, to a transmitting device that transmits another stream having graphics data, subtitle data, and the like together with a video stream.

通常ダイナミックレンジの伝送ビデオデータとハイダイナミックレンジの伝送ビデオデータとが混在して送信される場合がある。以下、適宜、通常ダイナミックレンジを「ＳＤＲ」と表記すると共に、ハイダイナミックレンジを「ＨＤＲ」と表記する。この場合、通常ダイナミックレンジの伝送ビデオデータは通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換を適用して得られたものであり、ハイダイナミックレンジの伝送ビデオデータはハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換を適用して得られたものである。例えば、非特許文献１には、従来受信機による受信を考慮した、従来の光電変換特性（ガンマ特性）との互換領域を含むＨＤＲ光電変換特性（新ガンマ特性）についての記載がある。   In some cases, transmission video data having a normal dynamic range and transmission video data having a high dynamic range are mixed and transmitted. Hereinafter, the normal dynamic range is referred to as “SDR” and the high dynamic range is referred to as “HDR” as appropriate. In this case, the normal dynamic range transmission video data is obtained by applying normal dynamic range photoelectric conversion to the normal dynamic range video data, and the high dynamic range transmission video data is converted to the high dynamic range video data by the high dynamic range video data. It is obtained by applying photoelectric conversion. For example, Non-Patent Document 1 describes an HDR photoelectric conversion characteristic (new gamma characteristic) including a compatible region with a conventional photoelectric conversion characteristic (gamma characteristic), in consideration of reception by a conventional receiver.

通常ダイナミックレンジの伝送ビデオデータとハイダイナミックレンジの伝送ビデオデータの切り替えは、例えば、番組切り替えやＣＭ挿入のタイミングで発生する可能性がある。このような切り替えがある場合、受信側では電光変換特性を切り替えることが必要となるが、その切り替えに伴う画乱れが発生するか、あるいは画乱れを隠すために表示ミュートが行われる。   Switching between normal dynamic range transmission video data and high dynamic range transmission video data may occur at the timing of program switching or CM insertion, for example. In the case of such switching, it is necessary to switch the electro-optical conversion characteristics on the receiving side, but image distortion occurs due to the switching, or display mute is performed to hide the image distortion.

画乱れが顕著に知覚できる例として、放送サービスの一つとして存在する、いわゆる“ｄボタン”操作によるグラフィックス表示があげられる。この場合、番組やＣＭを跨いでグラフィックスの重畳がなされるが、小窓に表示されるビデオデータによる画像がＳＤＲからＨＤＲあるいはＨＤＲからＳＤＲに切り替わる際に、グラフィックス表示における色や明るさが変化することが起こる。   As an example in which the image disturbance can be perceived remarkably, there is a graphic display by a so-called “d button” operation, which is one of broadcasting services. In this case, the graphics are superimposed over the program or CM, but when the image based on the video data displayed in the small window is switched from SDR to HDR or from HDR to SDR, the color and brightness in the graphics display are Change happens.

Tim Borer, “Non-Linear Opto-Electrical Transfer Functions for High Dynamic Range Television”, Research & Development White Paper WHP 283, July 2014Tim Borer, “Non-Linear Opto-Electrical Transfer Functions for High Dynamic Range Television”, Research & Development White Paper WHP 283, July 2014

本技術の目的は、ダイナミックレンジを異にする複数種類の伝送ビデオデータが混在して送信される場合にあって受信側における画乱れの発生を良好に防止可能とすることにある。   An object of the present technology is to favorably prevent the occurrence of image distortion on the receiving side when a plurality of types of transmission video data having different dynamic ranges are mixedly transmitted.

本技術の概念は、
複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリームと共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームを含む所定フォーマットのコンテナを送信する送信部と、
上記各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報を挿入する情報挿入部を備える
送信装置にある。 The concept of this technology is
A container of a predetermined format including a first component stream having transmission video data obtained by switching a plurality of types of transmission video data as component data and a predetermined number of second component streams having other component data is transmitted. And a transmitter to
The transmission device includes an information insertion unit that inserts dynamic range information of the component data of each component stream into each of the component streams.

本技術において、送信部により、複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリームと共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームを含む所定フォーマットのコンテナが送信される。例えば、所定数の第２のコンポーネントストリームには、データ放送ストリームおよび/またはサブタイトルストリームが含まれる、ようにされてもよい。情報挿入部により、各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報が挿入される。   In the present technology, the transmission unit switches a plurality of types of transmission video data, and a first component stream having transmission video data obtained as component data, and a predetermined number of second component streams having other component data. A container of a predetermined format including the is transmitted. For example, the predetermined number of second component streams may include a data broadcast stream and / or a subtitle stream. The information insertion unit inserts the dynamic range information of the component data of each component stream into each component stream.

このように本技術においては、各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報を挿入するものである。そのため、受信側において各コンポーネントデータをそれぞれのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理を施した後に合成して出力データを得ることが可能となる。   As described above, in the present technology, the dynamic range information of the component data of each component stream is inserted into each component stream. Therefore, on the receiving side, it is possible to obtain the output data by performing the luminance mapping processing on the component data based on the respective dynamic range information so as to match the display performance and then synthesizing them.

この場合、この出力データに施す電光変換の特性を固定できることから、電光変換特性の切り替えに起因する画乱れの発生を防止することが可能となる。例えば、ビデオデータによる画像と共にグラフィックス表示がされるときに、ビデオデータによる画像がＳＤＲからＨＤＲあるいはＨＤＲからＳＤＲに切り換わったとしても、グラフィックス表示における色や明るさが変化することはなくなる。また、この場合、各コンポーネントデータに表示性能に合うように輝度マッピング処理が施されることから、各コンポーネントデータによる表示を常に適切な輝度状態で表示することが可能となる。   In this case, since the characteristic of the electro-optical conversion applied to this output data can be fixed, it is possible to prevent the occurrence of image disturbance due to the switching of the electro-optical conversion characteristic. For example, when graphics are displayed together with an image of video data, even if the image of video data is switched from SDR to HDR or from HDR to SDR, the color and brightness in the graphics display will not change. Further, in this case, since the brightness mapping processing is performed on each component data so as to match the display performance, it is possible to always display each component data in an appropriate brightness state.

なお、本技術において、例えば、情報挿入部は、各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータの色域情報をさらに挿入する、ようにされてもよい。この場合、受信側において各コンポーネントデータをそれぞれの色域情報に基づいて表示性能に合うように色域変換を施した後に合成して出力データを得ることが可能となり、各コンポーネントデータによる表示を常に適切な色状態で表示することが可能となる。   Note that, in the present technology, for example, the information insertion unit may further insert the color gamut information of the component data of each component stream into each component stream. In this case, on the receiving side, it is possible to obtain output data by combining each component data after performing color gamut conversion so as to match the display performance based on the respective color gamut information, and always display the component data. It is possible to display in an appropriate color state.

また、本技術において、例えば、コンテナのレイヤに、このコンテナに含まれる第１のコンポーネントストリームが持つ伝送ビデオデータの種類を示す識別情報を、切り替えタイミングより所定の時間量以上だけ前のタイミングから切り替え後の伝送ビデオデータの種類を示すように挿入する情報挿入部をさらに備える、ようにされてもよい。この場合、受信側において、切り替えタイミングより所定の時間量以上だけ前のタイミングから、伝送ビデオデータの種類の切り替えがあること、さらには切り替え後の伝送ビデオデータの種類の認識が可能となる。   Further, in the present technology, for example, in a layer of a container, identification information indicating the type of transmission video data included in the first component stream included in this container is switched from a timing that is a predetermined amount of time or more before the switching timing. It may be configured such that it further comprises an information insertion unit that is inserted so as to indicate the type of later transmitted video data. In this case, it is possible for the receiving side to recognize that the type of the transmission video data has been switched and the type of the transmission video data after the switching can be recognized from the timing that is before the switching timing by a predetermined amount of time or more.

また、本技術の他の概念は、
複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリームと共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
上記各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報が挿入されており、
上記各コンポーネントストリームをデコードして複数のコンポーネントデータを得、該得られた複数のコンポーネントデータを合成して出力データを得る処理部をさらに備え、
上記処理部は、
上記各コンポーネントデータを、それぞれのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理を施した後に合成して上記出力データを得る
受信装置にある。 In addition, another concept of the present technology is
Receives a container of a predetermined format including a first component stream having transmission video data obtained by switching a plurality of types of transmission video data as component data and a predetermined number of second component streams having other component data. Equipped with a receiver
The dynamic range information of the component data of each component stream is inserted in each of the above component streams,
Further comprising a processing unit that decodes each of the component streams to obtain a plurality of component data, synthesizes the obtained plurality of component data to obtain output data,
The processing unit is
In the receiving device, the component data is subjected to luminance mapping processing based on the respective dynamic range information so as to match the display performance and then combined to obtain the output data.

本技術において、受信部により、複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリームと共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームを含む所定フォーマットのコンテナが受信される。各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報が挿入されている。   In the present technology, the reception unit switches a plurality of types of transmission video data, and a first component stream having transmission video data obtained as component data and a predetermined number of second component streams having other component data. A container of a predetermined format containing is received. The dynamic range information of the component data of each component stream is inserted in each component stream.

処理部により、各コンポーネントストリームがデコードされて複数のコンポーネントデータが得られ、この複数のコンポーネントデータが合成されて出力データが得られる。処理部では、各コンポーネントデータが、それぞれのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理が施された後に合成されて、出力データが得られる。   The processing unit decodes each component stream to obtain a plurality of component data, and the plurality of component data are combined to obtain output data. In the processing unit, each component data is subjected to luminance mapping processing based on the respective dynamic range information so as to match the display performance, and then combined to obtain output data.

このように本技術においては、各コンポーネントデータを、それぞれのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理を施した後に合成して出力データを得るものである。そのため、この出力データに施す電光変換の特性を固定でき、電光変換特性の切り替えに起因する画乱れの発生を防止することが可能となる。また、各コンポーネントデータによる表示を常に適切な輝度状態で表示することが可能となる。   As described above, in the present technology, each component data is subjected to the luminance mapping processing so as to match the display performance based on the respective dynamic range information, and then combined to obtain the output data. Therefore, the characteristics of electro-optical conversion applied to the output data can be fixed, and it is possible to prevent the occurrence of image disturbance due to switching of electro-optical conversion characteristics. In addition, it is possible to always display each component data in an appropriate brightness state.

また、本技術において、例えば、各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータの色域情報がさらに挿入されており、処理部は、各コンポーネントデータを、それぞれの色域情報に基づいて表示性能に合うように色域変換処理を施した後に合成して出力データを得る、ようにされてもよい。この場合、各コンポーネントデータによる表示を常に適切な色状態で表示することが可能となる。   Further, in the present technology, for example, the color gamut information of the component data of each component stream is further inserted in each component stream, and the processing unit displays each component data based on the respective color gamut information. The output data may be obtained by performing the color gamut conversion processing so as to match the performance and then synthesizing them. In this case, it is possible to always display each component data in an appropriate color state.

本技術によれば、ダイナミックレンジを異にする複数種類の伝送ビデオデータが混在して送信される場合にあって受信側における画乱れの発生を良好に防止できる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。   According to the present technology, when a plurality of types of transmission video data having different dynamic ranges are mixed and transmitted, it is possible to favorably prevent the occurrence of image disturbance on the receiving side. It should be noted that the effects described in the present specification are merely examples and are not limited, and may have additional effects.

実施の形態としての送受信システムの構成例を示すブロック図である。It is a block diagram showing an example of composition of a transmitting and receiving system as an embodiment. サービス送信システムの構成例を示すブロック図である。It is a block diagram which shows the structural example of a service transmission system. 光電変換特性を説明するための図である。It is a figure for demonstrating a photoelectric conversion characteristic. 伝送ビデオデータの切り換えタイミングと、換え後の伝送ビデオデータを識別するための識別情報の挿入タイミングとの関係を説明するための図である。It is a figure for demonstrating the relationship between the switching timing of transmission video data, and the insertion timing of the identification information for identifying the transmission video data after a change. ＨＤＲ・ビデオ・デスクリプタの構造例を示す図である。It is a figure which shows the constructional example of HDR video descriptor. ＨＤＲ・ビデオ・デスクリプタの構造例における主要な情報の内容を示す図である。It is a figure which shows the content of the main information in the structural example of a HDR video descriptor. ＨＤＲ・サブタイトル・デスクリプタの構造例を示す図である。It is a figure which shows the constructional example of a HDR subtitle descriptor. ＭＰＥＧ−２ ＴＳのトランスポートストリームの構造例を示す図である。It is a figure which shows the structural example of the transport stream of MPEG-2 TS. ＭＭＴのトランスポートストリームの構造例を示す図である。It is a figure which shows the structural example of the transport stream of MMT. サービス受信機の構成例を示すブロック図である。It is a block diagram which shows the structural example of a service receiver. 表示性能がＨＤＲである場合における輝度マッピング処理の概要を示す図である。It is a figure which shows the outline | summary of the luminance mapping process in case display performance is HDR. 表示性能がＨＤＲかつ広色域である場合における画面合成処理部の構成例を示すブロック図である。It is a block diagram showing an example of composition of a screen composition processing part in case display performance is HDR and a wide color gamut. 輝度マッピング部の構成を説明するための図である。It is a figure for demonstrating the structure of a brightness mapping part. 表示性能がＨＤＲであり、入力伝送ビデオデータがＳＤＲ伝送ビデオデータである場合における輝度マッピング部について説明するための図である。It is a figure for demonstrating the brightness mapping part in case display performance is HDR and input transmission video data is SDR transmission video data. 表示性能がＨＤＲであり、入力伝送ビデオデータがＨＤＲ伝送ビデオデータである場合における輝度マッピング部について説明するための図である。It is a figure for demonstrating the brightness | luminance mapping part in case display performance is HDR and input transmission video data is HDR transmission video data. 表示性能がＳＤＲであり、入力伝送ビデオデータがＨＤＲ伝送ビデオデータである場合における輝度マッピング部について説明するための図である。It is a figure for demonstrating the brightness mapping part in case display performance is SDR and input transmission video data is HDR transmission video data. 放送サービスの一つとして存在する“ｄボタン”操作によるグラフィックス表示の例を示す図である。It is a figure which shows the example of the graphics display by the "d button" operation which exists as one of the broadcasting services.

以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．実施の形態
２．変形例 Hereinafter, modes for carrying out the invention (hereinafter, referred to as "embodiments") will be described. The description will be given in the following order.
1. Embodiment 2. Modification

＜１．実施の形態＞
［送受信システムの構成例］
図１は、実施の形態としての送受信システム１０の構成例を示している。この送受信システム１０は、サービス送信システム１００とサービス受信機２００により構成されている。サービス送信システム１００は、コンテナとしてのＭＰＥＧ−２ ＴＳ（MPEG-2 Transport Stream）あるいはＭＭＴ（MPEG Media Transport）のトランスポートストリーム（多重化ストリーム）を生成し、このトランスポートストリームを放送波あるいはネットのパケットに載せて送信する。 <1. Embodiment>
[Transmission / reception system configuration example]
FIG. 1 shows a configuration example of a transmission / reception system 10 as an embodiment. The transmission / reception system 10 includes a service transmission system 100 and a service receiver 200. The service transmission system 100 generates a transport stream (multiplexed stream) of MPEG-2 TS (MPEG-2 Transport Stream) or MMT (MPEG Media Transport) as a container, and uses this transport stream as a broadcast wave or a net. Send it in a packet.

このトランスポートストリームには、複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリーム（ビデオストリーム）と共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームが含まれる。所定数の第２のコンポーネントストリームに、例えば、データサービスストリーム（データ放送ストリーム）および/またはサブタイトルストリームが含まれ、この実施の形態ではデータ放送ストリームおよびサブタイトルストリームが含まれる。データサービスストリームは、コンポーネントデータとして、例えば、グラフィックスデータ、イメージデータなどを持つ。サブタイトルストリームは、コンポーネントデータとして、字幕データを持つ。   In this transport stream, a first component stream (video stream) having transmission video data obtained by switching a plurality of types of transmission video data as component data, and a predetermined number of second video streams having other component data are provided. The component stream of is included. The predetermined number of second component streams include, for example, a data service stream (data broadcast stream) and / or a subtitle stream, and in this embodiment, a data broadcast stream and a subtitle stream. The data service stream has, for example, graphics data, image data, etc. as component data. The subtitle stream has subtitle data as component data.

各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報が挿入される。また、各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータの色域情報が挿入される。また、トランスポートストリームに、それに含まれる第１のコンポーネントストリームが持つ伝送ビデオデータの種類を示す識別情報が、切り替えタイミングより所定の時間量以上だけ前のタイミングから切り替え後の伝送ビデオデータの種類を示すように挿入される。   The dynamic range information of the component data of each component stream is inserted into each component stream. Also, the color gamut information of the component data of each component stream is inserted into each component stream. The identification information indicating the type of the transmission video data included in the first component stream included in the transport stream indicates the type of the transmission video data after the switching from the timing before the switching timing by a predetermined time amount or more. Inserted as shown.

サービス受信機２００は、サービス送信システム１００から送信されてくる、上述のトランスポートストリーム（ＭＰＥＧ−２ ＴＳあるいはＭＭＴのトランスポートストリーム）を受信する。サービス受信機２００は、各コンポーネントストリームをデコードして複数のコンポーネントデータを得、この得られた複数のコンポーネントデータを合成して出力データを得る。   The service receiver 200 receives the above-described transport stream (MPEG-2 TS or MMT transport stream) transmitted from the service transmission system 100. The service receiver 200 decodes each component stream to obtain a plurality of component data, and combines the obtained plurality of component data to obtain output data.

この場合、各コンポーネントデータが、それぞれのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理が施された後に合成されて、出力データが得られる。さらに、この実施の形態では、各コンポーネントデータが、それぞれの色域情報に基づいて表示性能に合うように色域変換処理が施された後に合成されて、出力データが得られる。   In this case, the component data is subjected to the luminance mapping processing based on the respective dynamic range information so as to match the display performance, and then combined to obtain the output data. Further, in this embodiment, each component data is subjected to color gamut conversion processing based on each color gamut information so as to match the display performance, and then combined to obtain output data.

サービス受信機２００は、この出力データに電光変換（電光変換特性は固定）を施して表示用画像データを得、この表示用画像データによる画像表示をする。   The service receiver 200 performs electro-optical conversion (electro-electric conversion characteristics are fixed) on the output data to obtain display image data, and displays the image according to the display image data.

「サービス送信システムの構成例」
図２は、サービス送信システム１００の構成例を示している。このサービス送信システム１００は、制御部１０１と、ビデオエンコーダ１０２と、データサービスエンコーダ１０３と、静止画エンコーダ１０４と、サブタイトルエンコーダ１０５と、コンテナエンコーダ１０６と、送信部１０７を有している。 "Service transmission system configuration example"
FIG. 2 shows a configuration example of the service transmission system 100. The service transmission system 100 includes a control unit 101, a video encoder 102, a data service encoder 103, a still image encoder 104, a subtitle encoder 105, a container encoder 106, and a transmission unit 107.

制御部１０１は、ＣＰＵ（Central Processing Unit）を備えて構成され、制御プログラムに基づいて、サービス送信システム１００の各部の動作を制御する。ビデオエンコーダ１０２は、入力される伝送ビデオデータに対して、例えば、ＭＰＥＧ４−ＡＶＣあるいはＨＥＶＣなどの符号化を施して符号化ビデオデータを得、この符号化ビデオデータを含む、コンポーネントストリームとしてのビデオストリームＶＳを生成する。このビデオストリームＶＳには、コンポーネントデータとしての伝送ビデオデータが含まれている。   The control unit 101 includes a CPU (Central Processing Unit), and controls the operation of each unit of the service transmission system 100 based on a control program. The video encoder 102 obtains encoded video data by performing encoding such as MPEG4-AVC or HEVC on the input transmission video data, and a video stream as a component stream including the encoded video data. Generate VS. This video stream VS includes transmission video data as component data.

入力される伝送ビデオデータは、複数の種類の伝送ビデオデータを切り替えて得られたものである。複数の種類の伝送ビデオデータには、例えば、通常ダイナミックレンジの伝送ビデオデータとハイダイナミックレンジの伝送ビデオデータが含まれる。ここで、通常ダイナミックレンジの伝送ビデオデータは、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換を適用して得られたものである。また、ハイダイナミックレンジの伝送ビデオデータは、ハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換を適用して得られたものである。   The input transmission video data is obtained by switching a plurality of types of transmission video data. The plurality of types of transmission video data include, for example, transmission video data of normal dynamic range and transmission video data of high dynamic range. Here, the normal dynamic range transmission video data is obtained by applying normal dynamic range photoelectric conversion to normal dynamic range video data. The high dynamic range transmission video data is obtained by applying high dynamic range photoelectric conversion to the high dynamic range video data.

図３は、物理空間の線形な光の輝度を有限帯域の伝送空間に変換する際に用いられる、非線形な輝度符号値特性を表す、いわゆる光電変換特性の例を示している。この図において、横軸は入力輝度レベルを示し、縦軸は伝送符号値を示す。曲線ａは、入力輝度レベルが０〜１００％の通常ダイナミックレンジビデオデータに適用されるＳＤＲ光電変換特性の例を示している。また、曲線ｂ１は、入力輝度レベルが０〜Ｎ＊１００％のハイダイナミックレンジビデオデータに適用されるＨＤＲ光電変換特性の例（ＳＤＲ光電変換特性と互換性を持つ例）を示している。この例の場合、入力輝度レベルが互換限界値までは、ＳＤＲ光電変換特性と一致している。入力輝度レベルが互換限界値であるとき、伝送符号値は互換レベルとなる。   FIG. 3 shows an example of a so-called photoelectric conversion characteristic, which represents a nonlinear luminance code value characteristic used when converting the linear luminance of light in the physical space into a transmission space of a finite band. In this figure, the horizontal axis represents the input luminance level and the vertical axis represents the transmission code value. Curve a shows an example of SDR photoelectric conversion characteristics applied to normal dynamic range video data with an input luminance level of 0 to 100%. A curve b1 shows an example of HDR photoelectric conversion characteristics (an example having compatibility with SDR photoelectric conversion characteristics) applied to high dynamic range video data having an input luminance level of 0 to N * 100%. In this example, the input luminance level matches the SDR photoelectric conversion characteristic up to the compatibility limit value. When the input luminance level is the compatibility limit value, the transmission code value becomes the compatibility level.

また、曲線ｂ２は、入力輝度レベルが０〜Ｎ＊１００％のハイダイナミックレンジビデオデータに適用されるＨＤＲ光電変換特性の例（ＳＤＲ光電変換特性と互換性を持たない例）を示している。さらに、曲線ｂ３は、入力輝度レベルが０〜Ｍ＊１００％のハイダイナミックレンジビデオデータに適用されるＨＤＲ光電変換特性の例（ＳＤＲ光電変換特性と互換性を持たない例）を示している。ここで、Ｎ、Ｍはそれぞれ１より大きい数であり、Ｍ＜Ｎである。なお、この例ではＭ＜Ｎとしているが、一般的な場合も含めると、ｂ２とｂ３の最高輝度の関係は、Ｍ≧Ｎでもよい。   A curve b2 shows an example of the HDR photoelectric conversion characteristic applied to high dynamic range video data having an input luminance level of 0 to N * 100% (an example not compatible with the SDR photoelectric conversion characteristic). Further, a curve b3 shows an example of the HDR photoelectric conversion characteristic (an example which is not compatible with the SDR photoelectric conversion characteristic) applied to the high dynamic range video data having the input luminance level of 0 to M * 100%. Here, N and M are numbers larger than 1, respectively, and M <N. Note that, in this example, M <N, but if a general case is also included, the relationship between the maximum brightness of b2 and b3 may be M ≧ N.

図２に戻って、ビデオエンコーダ１０２には、入力される伝送ビデオデータのダイナミックレンジ情報および色域情報が入力される。ビデオエンコーダ１０２は、このダイナミックレンジ情報および色域情報を、ビデオストリームＶＳに挿入する。ここで、ダイナミックレンジ情報は、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）である。   Returning to FIG. 2, the video encoder 102 receives the dynamic range information and the color gamut information of the input transmission video data. The video encoder 102 inserts the dynamic range information and the color gamut information into the video stream VS. Here, the dynamic range information is information (transfer function) indicating an electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data.

このとき、ビデオエンコーダ１０２は、アクセスユニット（ＡＵ）のＳＰＳ ＮＡＬユニットのＶＵＩ（video usability information）の領域に、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）、伝送ビデオデータの色域情報、リファレンスレベルを示す情報などのメタ情報を挿入する。また、ビデオエンコーダ１０２は、アクセスユニット（ＡＵ）の“ＳＥＩｓ”の部分に、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）、リファレンスレベルの情報などのメタ情報を持つＳＥＩメッセージ（SEI message）を挿入する。   At this time, the video encoder 102, in the area of VUI (video usability information) of the SPS NAL unit of the access unit (AU), information (transfer function) indicating the electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data, Meta information such as color gamut information of transmission video data and information indicating a reference level is inserted. Also, the video encoder 102 includes meta information such as information (transfer function) indicating the electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data and reference level information in the “SEIs” portion of the access unit (AU). Insert an SEI message with

ここで、ＳＥＩメッセージに、電光変換特性を示す情報を持たせるのは、伝送ビデオデータがＨＤＲ伝送ビデオデータであっても、ＨＤＲ光電変換特性がＳＤＲ光電変換特性と互換性を持つ場合、ＳＰＳ ＮＡＬユニットのＶＵＩには、従来のＳＤＲ対応受信機が識別できるようにＳＤＲ光電変換特性に対応した電光変換特性（ガンマ特性）を示す情報が挿入されるので、ＨＤＲ対応受信機が受信したビデオがＨＤＲであることを識別できるためにはＶＵＩ以外の場所にＨＤＲ光電変換特性に対応した電光変換特性を示す情報が必要となるからである。   Here, the SEI message is provided with the information indicating the electro-optical conversion characteristic, even if the transmission video data is HDR transmission video data, if the HDR photoelectric conversion characteristic is compatible with the SDR photoelectric conversion characteristic, the SPS NAL Since information indicating an electro-optical conversion characteristic (gamma characteristic) corresponding to the SDR photoelectric conversion characteristic is inserted in the VUI of the unit so that the conventional SDR compatible receiver can identify the video, the video received by the HDR compatible receiver is HDR. This is because the information indicating the electro-optical conversion characteristic corresponding to the HDR photoelectric conversion characteristic is required in a place other than the VUI in order to be able to identify that.

また、ＳＥＩメッセージに、リファレンスレベルの情報を持たせるのは、伝送ビデオデータＶ１がＳＤＲ伝送ビデオデータであるとき、ＳＰＳ ＮＡＬユニットのＶＵＩにＳＤＲ光電変換特性に対応した電光変換特性（ガンマ特性）を示す情報が挿入されるが、リファレンスレベルを挿入することに関しては規格明記がないからである。   In addition, the SEI message is provided with reference level information when the transmission video data V1 is SDR transmission video data, the VUI of the SPS NAL unit is provided with an electro-optical conversion characteristic (gamma characteristic) corresponding to the SDR photoelectric conversion characteristic. This is because the information shown is inserted, but there is no standard specification regarding the insertion of the reference level.

この場合、電光変換特性を示す情報（transfer function）により、例えば、「BT.709-5 Transfer Function(SDR)」、「10bit BT.2020 Transfer Function(SDR)」、「SMPTE 2084 Transfer Function(HDR1)」、「HDR(HDR2)」などの電光変換特性が示される。なお、「HDR(HDR2)」は、“Ｈｕｍａｎ Ｖｉｓｕａｌ Ｓｙｓｔｅｍ”をサポートする特性ではなく、従来からのガンマ特性に部分的に同種の特性を有する変換特性になる。また、色域情報により、「BT.709-5」、「BT.2020」、「SMPTE 428 or XYZ」などの色域が示される。   In this case, for example, "BT.709-5 Transfer Function (SDR)", "10bit BT.2020 Transfer Function (SDR)", "SMPTE 2084 Transfer Function (HDR1)" by information indicating transfer characteristic , “HDR (HDR2)”, etc. are shown. It should be noted that "HDR (HDR2)" is not a characteristic that supports "Human Visual System", but a conversion characteristic that partially has characteristics similar to the conventional gamma characteristics. Further, the color gamut information indicates a color gamut such as "BT.709-5", "BT.2020", "SMPTE 428 or XYZ".

静止画エンコーダ１０４は、入力されるイメージデータに対して、例えば、ＪＰＥＧの符号化を施して符号化ビデオデータを得る。静止画エンコーダ１０４には、イメージデータのダイナミックレンジ情報および色域情報が入力される。静止画エンコーダ１０４は、このダイナミックレンジ情報および色域情報を、符号化データに挿入する。ここで、ダイナミックレンジ情報は、イメージデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）である。   The still image encoder 104 performs, for example, JPEG encoding on the input image data to obtain encoded video data. Dynamic range information and color gamut information of image data are input to the still image encoder 104. The still image encoder 104 inserts the dynamic range information and the color gamut information into the encoded data. Here, the dynamic range information is information (transfer function) indicating the electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the image data.

静止画エンコーダ１０４は、電光変換特性を示す情報（transfer function）に関しては、例えば、ＪＰＥＧ規格で定義されているエグジフ（Exif: Exchangeable image file format）規格で定めるガンマ・タグ（Gamma tag）の値（Value）を用いる。現状では“１６(Gamma = BT.709-5 Transfer Function(SDR))”が定義されているが、他の値に「10bit BT.2020 Transfer Function(SDR)」、「SMPTE 2084 Transfer Function(HDR1)」、「HDR(HDR2)」などを定義して用いる。   Regarding the information (transfer function) indicating the electro-optical conversion characteristics, the still image encoder 104, for example, has a gamma tag value (Gamma tag) value (Gamma tag) defined by the Exif (Exchangeable image file format) standard defined by the JPEG standard. Value) is used. Currently, "16 (Gamma = BT.709-5 Transfer Function (SDR))" is defined, but other values such as "10bit BT.2020 Transfer Function (SDR)" and "SMPTE 2084 Transfer Function (HDR1)" , “HDR (HDR2)”, etc. are defined and used.

また、静止画エンコーダ１０４は、色域情報に関しては、例えば、ＪＰＥＧ規格で定義されているエグジフ（Exif）規格で定めるカラースペース・タグ（ColorSpace tag）の値（Value）を用いる。現状では“１(sRGB = BT.709-5)”が定義されているが、他の値に「BT.2020」、「SMPTE 428 or XYZ」などを定義して用いる。   The still image encoder 104 uses, for the color gamut information, a value (Value) of a color space tag (ColorSpace tag) defined by the Exif standard defined by the JPEG standard, for example. Currently, “1 (sRGB = BT.709-5)” is defined, but other values such as “BT.2020” and “SMPTE 428 or XYZ” are defined and used.

データサービスエンコーダ１０３は、入力されるグラフィックスデータ、さらには静止画エンコーダ１０４から入力される符号化データに対してエンコード処理を施して、コンポーネントストリームとしてのデータサービスストリームＤＳを生成する。このデータサービスストリームＤＳには、コンポーネントデータとして、イメージデータおよびグラフィックスデータが含まれている。   The data service encoder 103 performs an encoding process on the input graphics data and further on the encoded data input from the still image encoder 104 to generate a data service stream DS as a component stream. The data service stream DS includes image data and graphics data as component data.

データサービスエンコーダ１０３には、グラフィックスデータのダイナミックレンジ情報および色域情報が入力される。データサービスエンコーダ１０３は、このダイナミックレンジ情報および色域情報を、データサービスストリームＤＳに挿入する。ここで、ダイナミックレンジ情報は、グラフィックスデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）である。   Dynamic range information and color gamut information of graphics data are input to the data service encoder 103. The data service encoder 103 inserts this dynamic range information and gamut information into the data service stream DS. Here, the dynamic range information is information (transfer function) indicating an electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the graphics data.

データサービスエンコーダ１０３は、電光変換特性を示す情報（transfer function）に関しては、例えば、ダイナミックレンジ情報「D_range」を拡張定義し、「BT.709-5 Transfer Function(SDR)」、「10bit BT.2020 Transfer Function(SDR)」、「SMPTE 2084 Transfer Function(HDR1)」、「HDR(HDR2)」などを示す。また、データサービスエンコーダ１０３は、色域情報に関しては、例えば、「gfx.color_management.mode」の項目を用いて、「BT.709-5」、「BT.2020」、「SMPTE 428 or XYZ」などの色域が示す。   Regarding the information (transfer function) indicating the electro-optical conversion characteristic, the data service encoder 103, for example, extends and defines the dynamic range information “D_range”, “BT.709-5 Transfer Function (SDR)”, “10-bit BT.2020”. "Transfer Function (SDR)", "SMPTE 2084 Transfer Function (HDR1)", "HDR (HDR2)", etc. Further, regarding the color gamut information, the data service encoder 103 uses, for example, the item “gfx.color_management.mode”, “BT.709-5”, “BT.2020”, “SMPTE 428 or XYZ”, etc. Indicates the color gamut of.

サブタイトルエンコーダ１０５は、入力される字幕データに対してエンコード処理を施して、コンポーネントストリームとしてのサブタイトルストリームＳＳを生成する。このサブタイトルストリームＳＳには、コンポーネントデータとして、字幕データが含まれている。詳細説明は省略するが、このサブタイトルストリームＳＳには、ＴＴＭＬ（Timed Text Markup Language）等の字幕のテキスト情報が含まれるか、あるいは字幕のビットマップデータが含まれる。   The subtitle encoder 105 performs an encoding process on the input subtitle data to generate a subtitle stream SS as a component stream. The subtitle stream SS includes subtitle data as component data. Although detailed description is omitted, the subtitle stream SS includes subtitle text information such as TTML (Timed Text Markup Language) or subtitle bitmap data.

サブタイトルエンコーダ１０５には、字幕データのダイナミックレンジ情報および色域情報が入力される。サブタイトルエンコーダ１０５は、このダイナミックレンジ情報および色域情報を、サブタイトルストリームＳＳに挿入する。   Dynamic range information and color gamut information of subtitle data are input to the subtitle encoder 105. The subtitle encoder 105 inserts this dynamic range information and color gamut information into the subtitle stream SS.

サブタイトルエンコーダ１０５は、サブタイトルストリームＳＳが字幕のテキスト情報としてのＴＴＭＬを含む場合には、例えば、ＴＴＭＬ構造のヘッダに存在するメタデータ（metadata）の要素を利用して、サブタイトルデータに係る色域識別情報およびダイナミックレンジ情報の挿入を行うか、あるいはＴＴＭＬ構造のヘッダに存在するスタイリング・エクステンション（styling extension）の要素を利用して、サブタイトルデータに係る色域識別情報およびダイナミックレンジ情報の挿入を行うか、あるいはサブタイトルストリームＳＳにサブタイトルデータに係る色域識別情報およびダイナミックレンジ情報を含むセグメントを挿入する。   When the subtitle stream SS includes TTML as subtitle text information, the subtitle encoder 105 uses the element of metadata (metadata) present in the header of the TTML structure to identify the gamut of the subtitle data. Whether to insert information and dynamic range information, or to insert gamut identification information and dynamic range information related to subtitle data using the element of styling extension existing in the header of the TTML structure Alternatively, a segment including color gamut identification information and dynamic range information related to subtitle data is inserted into the subtitle stream SS.

一方、サブタイトルエンコーダ１０５は、サブタイトルストリームＳＳが字幕のビットマップデータを含む場合には、例えば、サブタイトルストリームＳＳにサブタイトルデータに係る色域識別情報およびダイナミックレンジ情報を含むセグメントを挿入する。   On the other hand, when the subtitle stream SS includes subtitle bitmap data, the subtitle encoder 105 inserts a segment including gamut identification information and dynamic range information related to the subtitle data into the subtitle stream SS, for example.

この場合、電光変換特性を示す情報（transfer function）により、例えば、「BT.709-5 Transfer Function(SDR)」、「10bit BT.2020 Transfer Function(SDR)」、「SMPTE 2084 Transfer Function(HDR1)」、「HDR(HDR2)」などの電光変換特性が示される。なお、「HDR(HDR2)」は、ＰＱカーブではなく、いわゆるハイブリッドガンマと称されるものである。また、色域情報により、「BT.709-5」、「BT.2020」、「SMPTE 428 or XYZ」などの色域が示される。   In this case, for example, "BT.709-5 Transfer Function (SDR)", "10bit BT.2020 Transfer Function (SDR)", "SMPTE 2084 Transfer Function (HDR1)" by information indicating transfer characteristic , “HDR (HDR2)”, etc. are shown. Note that “HDR (HDR2)” is a so-called hybrid gamma, not a PQ curve. Further, the color gamut information indicates a color gamut such as "BT.709-5", "BT.2020", "SMPTE 428 or XYZ".

コンテナエンコーダ１０６は、ビデオエンコーダ１０２で生成されたビデオストリームＶＳ、データサービスエンコーダ１０３で生成されたデータサービスストリームＤＳおよびサブタイトルエンコーダ１０５で生成されたサブタイトルストリームＳＳを含むトランスポートストリーム（ＭＰＥＧ−２ ＴＳあるいはＭＭＴのトランスポートストリーム）を生成する。送信部１０７は、このトランスポートストリームを、放送波あるいはネットのパケットに載せて、サービス受信機２００に送信する。   The container encoder 106 includes a transport stream (MPEG-2 TS or MPEG-2 TS or a video stream VS generated by the video encoder 102, a data service stream DS generated by the data service encoder 103, and a subtitle stream SS generated by the subtitle encoder 105. MMT transport stream) is generated. The transmission unit 107 carries this transport stream on a broadcast wave or net packet and transmits it to the service receiver 200.

この際、コンテナエンコーダ１０６は、トランスポートストリームに、それに含まれるビデオストリームＶＳが持つ伝送ビデオデータの種類を示す識別情報を、この伝送ビデオデータの種類の切り替えタイミングより所定の時間量以上だけ前のタイミングから切り替え後の伝送ビデオデータの種類を示すように挿入する。このように識別情報の挿入が管理されることで、受信側に、伝送ビデオデータの動的な切り替えが通知される。   At this time, the container encoder 106 adds, to the transport stream, the identification information indicating the type of the transmission video data included in the video stream VS included in the transport stream before the switching timing of the type of the transmission video data by a predetermined time amount or more. It is inserted so as to indicate the type of transmission video data after switching from timing. By thus managing the insertion of the identification information, the receiving side is notified of the dynamic switching of the transmission video data.

図４は、ＳＤＲ伝送ビデオデータ（ＳＤＲサービス）とＨＤＲ伝送ビデオデータ（ＨＤＲサービス）の切り換えタイミングＳｎ（Ｓ０，Ｓ１，Ｓ２，・・・）と、切換え後の伝送ビデオデータを識別するための識別情報の挿入タイミングＴｎ（Ｔ０，Ｔ１，Ｔ２，・・・）の関係を示している。以下の（１）式を満足するように、タイミングＴｎはタイミングＳｎよりもｔ（所定の時間量）以上だけ前のタイミングとされる。なお、図示の例は、Ｓｎ−Ｔｎ ＝ ｔ （ただし、ｔは正値）である場合を示している。
Ｓｎ−Ｔｎ ≧ ｔ ・・・（１） FIG. 4 shows switching timing Sn (S0, S1, S2, ...) Between SDR transmission video data (SDR service) and HDR transmission video data (HDR service), and identification for identifying transmission video data after switching. The relationship of information insertion timing Tn (T0, T1, T2, ...) Is shown. The timing Tn is set to a timing t (predetermined amount of time) or more before the timing Sn so as to satisfy the following expression (1). The illustrated example shows a case where Sn-Tn = t (where t is a positive value).
Sn-Tn ≧ t (1)

コンテナエンコーダ１０９は、ビデオストリームＶＳに対応させて、例えば、新規定義する、ＨＤＲ・ビデオ・デスクリプタ（HDR_vido_descriptor）を挿入する。このデスクリプタは、例えば、トランスポートストリームがＭＰＥＧ−２ ＴＳのトランスポートストリームであるときには、プログラム・マップ・テーブル（ＰＭＴ：Program Map Table）の配下、あるいはインベント・インフォメーション・テーブル（ＥＩＴ：Event Information Table）の配下に挿入される。また、このデスクリプタは、トランスポートストリームがＭＭＴのトランスポートストリームであるときには、ＭＰテーブル（ＭＰＴ：MMT Package Table）の配下、あるいは、インベント・インフォメーション・テーブル（ＥＩＴ：Event Information Table）の配下に挿入される。   The container encoder 109 inserts, for example, a newly defined HDR video descriptor (HDR_vido_descriptor) in association with the video stream VS. For example, when the transport stream is an MPEG-2 TS transport stream, this descriptor is under the control of a program map table (PMT) or an event information table (EIT). Is inserted under. Further, this descriptor is inserted under an MP table (MPT: MMT Package Table) or under an event information table (EIT: Event Information Table) when the transport stream is an MMT transport stream. It

図５は、ＨＤＲ・ビデオ・デスクリプタの構造例(Syntax)を示し、図６は、その構造例における主要な情報の内容（Semantics）を示している。「descriptor_tag」の８ビットフィールドは、デスクリプタのタイプを示し、ここでは、ＨＤＲ・ビデオ・デスクリプタであることを示す。「descriptor_length」の８ビットフィールドは、デスクリプタの長さ（サイズ）を示し、デスクリプタの長さとして以降のバイト数を示す。   FIG. 5 shows a structural example (Syntax) of the HDR video descriptor, and FIG. 6 shows main information contents (Semantics) in the structural example. The 8-bit field of "descriptor_tag" indicates the type of descriptor, and here, indicates that it is an HDR video descriptor. The 8-bit field of "descriptor_length" indicates the length (size) of the descriptor, and indicates the number of subsequent bytes as the length of the descriptor.

「HDR_SDR_flag」の１ビットのフラグ情報は、対象のストリームがＨＤＲストリームであるかＳＤＲストリームであるかを示す。“１”はＨＤＲストリームであることを示し、“０”はＳＤＲストリームであることを示す。「video_characteristics_info_flag」の１ビットのフラグ情報は、特性情報があるか否かを示す。“１”は特性情報があることを示し、“０”は特性情報がないことを示す。   The 1-bit flag information of “HDR_SDR_flag” indicates whether the target stream is an HDR stream or an SDR stream. “1” indicates an HDR stream, and “0” indicates an SDR stream. The 1-bit flag information of "video_characteristics_info_flag" indicates whether or not there is characteristic information. “1” indicates that there is characteristic information, and “0” indicates that there is no characteristic information.

「video_characteristics_info_flag」が“１”であるとき、「transferfunction」、「color_space」および「referencelevel」の各８ビットフィールドが存在する。「transferfunction」の８ビットフィールドは、電光変換特性（ＥＯＴＦ特性）を示す。つまり、このフィールドは、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す。例えば、“１”は「BT.709-5 Transfer Function(SDR)」を示し、“１４”は「10bit BT.2020 Transfer Function(SDR)」を示し、“１６”は「SMPTE 2084 Transfer Function(HDR1)」を示し、“２５”は「HDR(HDR2)」を示す。なお、「HDR(HDR2)」は、ＨＤＲ電光変換特性を示すが、ＰＱカーブではなく、従来ガンマ特性と輝度・伝送特性において部分的な互換性をもつ、あるいはそれに近似する特性をもつと考えられるものである。   When "video_characteristics_info_flag" is "1", there are 8-bit fields of "transfer function", "color_space", and "reference level". An 8-bit field of "transfer function" indicates an electro-optical conversion characteristic (EOTF characteristic). That is, this field shows the electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data. For example, “1” indicates “BT.709-5 Transfer Function (SDR)”, “14” indicates “10bit BT.2020 Transfer Function (SDR)”, and “16” indicates “SMPTE 2084 Transfer Function (HDR1). ) ”And“ 25 ”indicates“ HDR (HDR2) ”. It should be noted that "HDR (HDR2)" indicates HDR electro-optical conversion characteristics, but is not considered to be a PQ curve, but is considered to have characteristics that are partially compatible with or similar to the conventional gamma characteristics and luminance / transmission characteristics. It is a thing.

「color_space」の８ビットフィールドは、色空間を示す。例えば、“１”は「BT.709-5」を示し、“９”は「BT.2020」を示し、“１０”は「SMPTE 428 or XYZ」を示す。   The 8-bit field of "color_space" indicates a color space. For example, “1” indicates “BT.709-5”, “9” indicates “BT.2020”, and “10” indicates “SMPTE 428 or XYZ”.

「referencelevel」の８ビットフィールドは、基準レベル（リファレンスレベル）を示す。この場合、基準レベルとして、最大「１」に正規化された相対範囲の中を０〜１００の値で指定した値が記述される。受信側では、この値を１００で割ったものが正規化された相対基準レベルとして認識される。「content_peak_luminance」の８ビットフィールドは、画像に含まれる伝送符号のピーク値に対応する輝度の相対値（％表現）を示す。この相対値は、例えば、後述するニー（knee）カーブを制御するために役立つ。   An 8-bit field of “reference level” indicates a reference level (reference level). In this case, as the reference level, a value designated by a value of 0 to 100 in the relative range normalized to the maximum “1” is described. On the receiving side, this value divided by 100 is recognized as a normalized relative reference level. The 8-bit field of "content_peak_luminance" indicates the relative value (% expression) of the luminance corresponding to the peak value of the transmission code included in the image. This relative value is useful, for example, for controlling the knee curve described below.

また、コンテナエンコーダ１０６は、トランスポートストリームに、それに含まれるサブタイトルストリームＳＳが持つ字幕データの種類、つまりＳＤＲデータであるかＨＤＲデータであるかを示す識別情報を、この字幕データの種類の切り替えタイミングより所定の時間量以上だけ前のタイミングから切り替え後の字幕データの種類を示すように挿入する。このように識別情報の挿入が管理されることで、受信側に、字幕データの動的な切り替えが通知される。   Further, the container encoder 106 provides the transport stream with the identification information indicating the type of subtitle data of the subtitle stream SS included in the transport stream, that is, whether it is SDR data or HDR data, at the timing of switching the type of subtitle data. It is inserted so as to indicate the type of subtitle data after switching from the timing earlier than a predetermined amount of time. By managing the insertion of the identification information in this manner, the receiving side is notified of the dynamic switching of the subtitle data.

コンテナエンコーダ１０９は、サブタイトルストリームＳＳに対応させて、例えば、新規定義する、ＨＤＲ・サブタイトル・デスクリプタ（HDR_subtitle_descriptor）を挿入する。このデスクリプタは、例えば、トランスポートストリームがＭＰＥＧ−２ ＴＳのトランスポートストリームであるときには、プログラム・マップ・テーブル（ＰＭＴ：Program Map Table）の配下に挿入される。また、このデスクリプタは、トランスポートストリームがＭＭＴのトランスポートストリームであるときには、ＭＰテーブル（ＭＰＴ：MMT Package Table）の配下に挿入される。   The container encoder 109 inserts, for example, a newly defined HDR subtitle descriptor (HDR_subtitle_descriptor) in association with the subtitle stream SS. For example, when the transport stream is an MPEG-2 TS transport stream, this descriptor is inserted under a program map table (PMT). Also, this descriptor is inserted under an MP table (MPT: MMT Package Table) when the transport stream is an MMT transport stream.

図７は、ＨＤＲ・サブタイトル・デスクリプタの構造例(Syntax)を示している。「descriptor_tag」の８ビットフィールドは、デスクリプタのタイプを示し、ここでは、ＨＤＲ・サブタイトル・デスクリプタであることを示す。「descriptor_length」の８ビットフィールドは、デスクリプタの長さ（サイズ）を示し、デスクリプタの長さとして以降のバイト数を示す。   FIG. 7 shows a structure example (Syntax) of the HDR subtitle descriptor. The 8-bit field of “descriptor_tag” indicates the type of descriptor, and here, indicates that it is an HDR / subtitle / descriptor. The 8-bit field of "descriptor_length" indicates the length (size) of the descriptor, and indicates the number of subsequent bytes as the length of the descriptor.

「HDR_SDR_flag」の１ビットのフラグ情報は、対象のストリームがＨＤＲストリームであるかＳＤＲストリームであるかを示す。“１”はＨＤＲストリームであることを示し、“０”はＳＤＲストリームであることを示す。「subtitle_characteristics_info_flag」の１ビットのフラグ情報は、特性情報があるか否かを示す。“１”は特性情報があることを示し、“０”は特性情報がないことを示す。「subtitle_characteristics_info_flag」が“１”であるとき、「transferfunction」、「color_space」および「referencelevel」の各８ビットフィールドが存在する。   The 1-bit flag information of “HDR_SDR_flag” indicates whether the target stream is an HDR stream or an SDR stream. “1” indicates an HDR stream, and “0” indicates an SDR stream. The 1-bit flag information of "subtitle_characteristics_info_flag" indicates whether or not there is characteristic information. “1” indicates that there is characteristic information, and “0” indicates that there is no characteristic information. When "subtitle_characteristics_info_flag" is "1", there are 8-bit fields of "transfer function", "color_space", and "reference level".

「transferfunction」の８ビットフィールドは、電光変換特性（ＥＯＴＦ特性）を示す。つまり、このフィールドは、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す。例えば、“１”は「BT.709-5 Transfer Function(SDR)」を示し、“１４”は「10bit BT.2020 Transfer Function(SDR)」を示し、“１６”は「SMPTE 2084 Transfer Function(HDR1)」を示し、“２５”は「HDR(HDR2)」を示す。なお、「HDR(HDR2)」は、ＨＤＲ電光変換特性を示すが、ＰＱカーブではなく、従来ガンマ特性と輝度・伝送特性において部分的な互換性をもつ、あるいはそれに近似する特性をもつと考えられるものである。   An 8-bit field of "transfer function" indicates an electro-optical conversion characteristic (EOTF characteristic). That is, this field shows the electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data. For example, “1” indicates “BT.709-5 Transfer Function (SDR)”, “14” indicates “10bit BT.2020 Transfer Function (SDR)”, and “16” indicates “SMPTE 2084 Transfer Function (HDR1). ) ”And“ 25 ”indicates“ HDR (HDR2) ”. It should be noted that "HDR (HDR2)" indicates HDR electro-optical conversion characteristics, but is not considered to be a PQ curve, but is considered to have characteristics that are partially compatible with or similar to the conventional gamma characteristics and luminance / transmission characteristics. It is a thing.

「color_space」の８ビットフィールドは、色空間を示す。例えば、“１”は「BT.709-5」を示し、“９”は「BT.2020」を示し、“１０”は「SMPTE 428 or XYZ」を示す。「referencelevel」の８ビットフィールドは、基準レベル（リファレンスレベル）を示す。この場合、基準レベルとして、最大「１」に正規化された相対範囲の中を０〜１００の値で指定した値が記述される。受信側では、この値を１００で割ったものが正規化された相対基準レベルとして認識される。   The 8-bit field of "color_space" indicates a color space. For example, “1” indicates “BT.709-5”, “9” indicates “BT.2020”, and “10” indicates “SMPTE 428 or XYZ”. An 8-bit field of “reference level” indicates a reference level (reference level). In this case, as the reference level, a value designated by a value of 0 to 100 in the relative range normalized to the maximum “1” is described. On the receiving side, this value divided by 100 is recognized as a normalized relative reference level.

図８は、ＭＰＥＧ−２ ＴＳのトランスポートストリームの構造例を示している。この構造例では、ＰＩＤ１で識別されるビデオストリームＶＳのＰＥＳパケット「Video PES」、ＰＩＤ２で識別されるサブタイトルストリームＳＳのＰＥＳパケット「Subtitle PES」が存在する他、カルーセル（carousel）方式で伝送されるデータサービスストリームＤＳが存在する。なお、サブタイトルストリームＳＳは上記のようにＰＥＳで伝送される以外にも、データサービス同様に、カルーセル方式で伝送される場合もあるが、それによってサブタイトルストリームＳＳの中身に変化はない。   FIG. 8 shows an example of the structure of an MPEG-2 TS transport stream. In this structure example, the PES packet “Video PES” of the video stream VS identified by PID1 and the PES packet “Subtitle PES” of the subtitle stream SS identified by PID2 are present, and are transmitted by the carousel method. There is a data service stream DS. Note that the subtitle stream SS may be transmitted by the carousel method as well as the data service in addition to being transmitted by the PES as described above, but this does not change the contents of the subtitle stream SS.

また、トランスポートストリームＴＳには、ＰＳＩ（Program Specific Information）として、プログラム・マップ・テーブル（ＰＭＴ：Program Map Table）が含まれている。ＰＳＩは、トランスポートストリームに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。ＰＭＴには、プログラム全体に関連する情報を記述するプログラム・ループ（Program loop）が存在する。   Further, the transport stream TS includes a program map table (PMT: Program Map Table) as PSI (Program Specific Information). The PSI is information describing which program each elementary stream included in the transport stream belongs to. In the PMT, there is a program loop that describes information related to the entire program.

ＰＭＴには、各エレメンタリストリームに関連した情報を持つエレメンタリストリーム・ループが存在する。この構造例では、ビデオストリームＶＳに対応したビデオ・エレメンタリストリーム・ループ（Video ES loop）と、サブタイトルストリームＳＳに対応したサブタイトル・エレメンタリストリーム・ループ（Subtitle ES loop）が存在する。   In the PMT, there is an elementary stream loop having information related to each elementary stream. In this structural example, there are a video elementary stream loop (Video ES loop) corresponding to the video stream VS and a subtitle elementary stream loop (Subtitle ES loop) corresponding to the subtitle stream SS.

ビデオ・エレメンタリストリーム・ループには、ビデオストリームＶＳに対応して、ストリームタイプ、ＰＩＤ（パケット識別子）等の情報が配置されると共に、そのビデオストリームＶＳに関連する情報を記述するデスクリプタも配置される。このデスクリプタの一つとして、上述した、ＨＤＲ・ビデオ・デスクリプタ（図５参照）が配置される。なお、このＨＤＲ・ビデオ・デスクリプタが、破線図示するように、イベント・インフォメーション・テーブル（ＥＩＴ：Event Information Table）の配下に配置する構造も考えられる。   In the video elementary stream loop, information such as a stream type and a PID (packet identifier) is arranged corresponding to the video stream VS, and a descriptor describing information related to the video stream VS is also arranged. It As one of the descriptors, the above-mentioned HDR video descriptor (see FIG. 5) is arranged. A structure in which the HDR video descriptor is arranged under an event information table (EIT) as shown by a broken line is also conceivable.

また、サブタイトル・エレメンタリストリーム・ループには、サブタイトルストリームＳＳに対応して、ストリームタイプ、ＰＩＤ（パケット識別子）等の情報が配置されると共に、そのビデオストリームＶＳに関連する情報を記述するデスクリプタも配置される。このデスクリプタの一つとして、上述した、ＨＤＲ・サブタイトル・デスクリプタ（図７参照）が配置される。   Further, in the subtitle elementary stream loop, information such as a stream type and a PID (packet identifier) is arranged in correspondence with the subtitle stream SS, and a descriptor describing information related to the video stream VS is also provided. Will be placed. The HDR subtitle descriptor (see FIG. 7) described above is arranged as one of the descriptors.

図９は、ＭＭＴのトランスポートストリームの構造例を示している。ＭＭＴのトランスポートストリームには、パケットタイプが“MPU”である場合、ＩＤ１で識別されるビデオストリームＶＳのＭＰＵパケット「MPU video」と、ＩＤ２で識別されるサブタイトルストリームＳＳのＭＰＵパケット「MPU subtitle」が配置される。また、このＭＭＴのトランスポートストリームには、パケットタイプが“non-timed packet”である場合、データサービスストリームＤＳが配置される。   FIG. 9 shows an example of the structure of an MMT transport stream. In the MMT transport stream, when the packet type is "MPU", the MPU packet "MPU video" of the video stream VS identified by ID1 and the MPU packet "MPU subtitle" of the subtitle stream SS identified by ID2. Are placed. Further, when the packet type is "non-timed packet", the data service stream DS is arranged in this MMT transport stream.

また、ＭＭＴのトランスポートストリームには、パケットタイプが“message”である場合、種々のメッセージパケットが配置される。このメッセージパケットの一つとしてＰＡ（Packet Access）メッセージパケットがある。ＰＡメッセージパケットには、ＭＰＴなどのテーブルが含まれている。   Further, when the packet type is “message”, various message packets are arranged in the MMT transport stream. A PA (Packet Access) message packet is one of the message packets. A table such as MPT is included in the PA message packet.

ＭＰＴには、アセットとしてのビデオストリームＶＳに対応して、アセットタイプ（Asset_type）、パケットＩＤ（Packet_id）等の情報が配置されると共に、そのビデオストリームＶＳに関連する情報を記述するデスクリプタも配置される。このデスクリプタの一つとして、上述した、ＨＤＲ・ビデオ・デスクリプタ（図５参照）が配置される。なお、このＨＤＲ・ビデオ・デスクリプタが、破線図示するように、イベント・インフォメーション・テーブル（ＥＩＴ：Event Information Table）の配下に配置する構造も考えられる。   In the MPT, information such as asset type (Asset_type) and packet ID (Packet_id) is arranged corresponding to the video stream VS as an asset, and a descriptor describing information related to the video stream VS is also arranged. It As one of the descriptors, the above-mentioned HDR video descriptor (see FIG. 5) is arranged. A structure in which the HDR video descriptor is arranged under an event information table (EIT) as shown by a broken line is also conceivable.

また、ＭＰＴには、アセットとしてのサブタイトルストリームＳＳに対応して、アセットタイプ（Asset_type）、パケットＩＤ（Packet_id）等の情報が配置されると共に、そのサブタイトルストリームＳＳに関連する情報を記述するデスクリプタも配置される。このデスクリプタの一つとして、上述した、ＨＤＲ・サブタイトル・デスクリプタ（図７参照）が配置される。   Further, in the MPT, information such as asset type (Asset_type) and packet ID (Packet_id) is arranged corresponding to the subtitle stream SS as an asset, and a descriptor describing information related to the subtitle stream SS is also provided. Will be placed. The HDR subtitle descriptor (see FIG. 7) described above is arranged as one of the descriptors.

図２に示すサービス送信システム１００の動作を簡単に説明する。ビデオエンコード１０２に伝送ビデオデータが入力されると共に、この伝送ビデオデータのダイナミックレンジ情報および色域情報が入力される。ここで、ダイナミックレンジ情報は、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）である。   The operation of the service transmission system 100 shown in FIG. 2 will be briefly described. The transmission video data is input to the video encoder 102, and the dynamic range information and the color gamut information of the transmission video data are input. Here, the dynamic range information is information (transfer function) indicating an electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data.

このように入力される伝送ビデオデータは、複数の種類の伝送ビデオデータを切り替えて得られたものである。複数の種類の伝送ビデオデータには、例えば、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換を適用して得られた通常ダイナミックレンジの伝送ビデオデータと、ハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換を適用して得られたハイダイナミックレンジの伝送ビデオデータが含まれる。   The input transmission video data is obtained by switching a plurality of types of transmission video data. Transmission video data of a plurality of types include, for example, transmission video data of normal dynamic range obtained by applying normal dynamic range photoelectric conversion to normal dynamic range video data and high dynamic range photoelectric conversion of high dynamic range video data. The transmission video data of high dynamic range obtained by applying is included.

ビデオエンコーダ１０２では、伝送ビデオデータに対して、例えば、ＭＰＥＧ４−ＡＶＣあるいはＨＥＶＣなどの符号化が施されて符号化ビデオデータが得られ、この符号化ビデオデータを含む、コンポーネントストリームとしてのビデオストリームＶＳが生成される。このビデオストリームＶＳには、コンポーネントデータとしての伝送ビデオデータが含まれている。   In the video encoder 102, for example, MPEG4-AVC or HEVC is applied to the transmission video data to obtain encoded video data, and a video stream VS as a component stream including the encoded video data is obtained. Is generated. This video stream VS includes transmission video data as component data.

また、ビデオエンコーダ１０２では、このようにビデオストリームＶＳが生成されるとき、このビデオストリームＶＳにダイナミックレンジ情報および色域情報を挿入することが行われる。この場合、アクセスユニット（ＡＵ）のＳＰＳ ＮＡＬユニットのＶＵＩ（video usability information）の領域に、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）、伝送ビデオデータの色域情報、リファレンスレベルを示す情報などのメタ情報が挿入される。また、この場合、アクセスユニット（ＡＵ）の“ＳＥＩｓ”の部分に、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）、リファレンスレベルの情報などのメタ情報を持つＳＥＩメッセージ（SEI message）が挿入される。   Further, in the video encoder 102, when the video stream VS is generated in this way, the dynamic range information and the color gamut information are inserted into this video stream VS. In this case, in the area of VUI (video usability information) of the SPS NAL unit of the access unit (AU), information (transfer function) indicating the electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data, the color of the transmission video data Meta information such as area information and information indicating a reference level is inserted. Further, in this case, the "SEIs" portion of the access unit (AU) has meta information such as information (transfer function) indicating the electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data and reference level information. A SEI message is inserted.

また、静止画エンコーダ１０４にイメージデータが入力されると共に、このイメージデータのダイナミックレンジ情報および色域情報が入力される。ここで、ダイナミックレンジ情報は、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）である。   Further, the image data is input to the still image encoder 104, and the dynamic range information and color gamut information of this image data are also input. Here, the dynamic range information is information (transfer function) indicating an electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data.

静止画エンコーダ１０４では、イメージデータに対して、例えば、ＪＰＥＧの符号化が施されて符号化ビデオデータが得られる。このとき、符号化データに、ダイナミックレンジ情報および色域情報が挿入される。この場合、電光変換特性を示す情報（transfer function）に関しては、例えば、ＪＰＥＧ規格で定義されているエグジフ（Exif: Exchangeable image file format）規格で定めるガンマ・タグ（Gamma tag）の値（Value）を用いて挿入される。また、色域情報に関しては、例えば、ＪＰＥＧ規格で定義されているエグジフ（Exif）規格で定めるカラースペース・タグ（ColorSpace tag）の値（Value）を用いて挿入される。   In the still image encoder 104, for example, JPEG encoding is performed on the image data to obtain encoded video data. At this time, the dynamic range information and the color gamut information are inserted into the encoded data. In this case, regarding the information (transfer function) indicating the light-electric conversion characteristics, for example, the value (Value) of the gamma tag (Gamma tag) defined by the Exif (Exchangeable image file format) standard defined by the JPEG standard is set. Be inserted using. The color gamut information is inserted using, for example, a value (Value) of a color space tag (ColorSpace tag) defined by the Exif standard defined by the JPEG standard.

また、データサービスエンコーダ１０３には、グラフィックスデータが入力されると共に、このグラフィックスデータのダイナミックレンジ情報および色域情報が入力される。ここで、ダイナミックレンジ情報は、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）である。このデータサービスエンコーダ１０３には、さらに、静止画エンコーダ１０４で得られた符号化データが入力される。   Further, the data service encoder 103 is input with graphics data and dynamic range information and color gamut information of this graphics data. Here, the dynamic range information is information (transfer function) indicating an electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data. The coded data obtained by the still image encoder 104 is further input to the data service encoder 103.

データサービスエンコーダ１０３では、グラフィックスデータ、さらには静止画エンコーダ１０４から入力される符号化データに対してエンコード処理が施されて、コンポーネントストリームとしてのデータサービスストリームＤＳが生成される。このデータサービスストリームＤＳには、コンポーネントデータとして、イメージデータおよびグラフィックスデータが含まれている。   In the data service encoder 103, the graphics data and further the encoded data input from the still image encoder 104 are subjected to encoding processing to generate a data service stream DS as a component stream. The data service stream DS includes image data and graphics data as component data.

また、データサービスエンコーダ１０３では、このようにデータサービスストリームＤＳが生成されるとき、このデータサービスストリームＤＳにダイナミックレンジ情報および色域情報を挿入することが行われる。この場合、電光変換特性を示す情報（transfer function）に関しては、例えば、ダイナミックレンジ情報「D_range」を拡張定義することで挿入される。また、色域情報に関しては、例えば、「gfx.color_management.mode」の項目を用いて挿入される。   Further, in the data service encoder 103, when the data service stream DS is generated in this way, the dynamic range information and the color gamut information are inserted into this data service stream DS. In this case, the information (transfer function) indicating the electro-optical conversion characteristic is inserted by, for example, expanding and defining the dynamic range information “D_range”. The color gamut information is inserted using, for example, the item "gfx.color_management.mode".

また、サブタイトルエンコーダ１０５には、字幕データが入力されると共に、この字幕データのダイナミックレンジ情報および色域情報が入力される。ここで、ダイナミックレンジ情報は、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）である。   Further, the subtitle encoder 105 is input with subtitle data as well as dynamic range information and color gamut information of this subtitle data. Here, the dynamic range information is information (transfer function) indicating an electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data.

サブタイトルエンコーダ１０５では、字幕データに対してエンコード処理が施されて、コンポーネントストリームとしてのサブタイトルストリームＳＳが生成される。このサブタイトルストリームＳＳには、コンポーネントデータとして、字幕データ（ＴＴＭＬ等の字幕のテキスト情報、あるいは字幕のビットマップデータ）が含まれている。   In the subtitle encoder 105, the subtitle data is encoded to generate a subtitle stream SS as a component stream. The subtitle stream SS includes subtitle data (subtitle text information such as TTML or subtitle bitmap data) as component data.

また、サブタイトルエンコーダ１０５では、このようにサブタイトルストリームＳＳが生成されるとき、このサブタイトルストリームＳＳにダイナミックレンジ情報および色域情報を挿入することが行われる。   Further, in the subtitle encoder 105, when the subtitle stream SS is generated in this way, the dynamic range information and the color gamut information are inserted into this subtitle stream SS.

ここで、サブタイトルストリームＳＳが字幕のテキスト情報としてのＴＴＭＬを含む場合には、例えば、ＴＴＭＬ構造のヘッダに存在するメタデータ（metadata）の要素を利用してサブタイトルデータに係る色域識別情報およびダイナミックレンジ情報が挿入される。また、サブタイトルストリームＳＳが字幕のビットマップデータを含む場合には、例えば、サブタイトルストリームＳＳにサブタイトルデータに係る色域識別情報およびダイナミックレンジ情報を含むセグメントが挿入される。   Here, when the subtitle stream SS includes TTML as the subtitle text information, for example, the gamut identification information and the dynamic information regarding the subtitle data related to the subtitle data are utilized by using the element of the metadata (metadata) existing in the header of the TTML structure. Range information is inserted. When the subtitle stream SS includes subtitle bitmap data, for example, a segment including color gamut identification information and dynamic range information related to the subtitle data is inserted into the subtitle stream SS.

ビデオエンコーダ１０２で生成されたビデオストリームＶＳ、データサービスエンコーダ１０３で生成されたデータサービスストリームＤＳおよびサブタイトルエンコーダ１０５で生成されたサブタイトルストリームＳＳは、コンテナエンコーダ１０６に供給される。コンテナエンコーダ１０６では、各ストリームを含むトランスポートストリーム（ＭＰＥＧ−２ ＴＳあるいはＭＭＴのトランスポートストリーム）が生成される。   The video stream VS generated by the video encoder 102, the data service stream DS generated by the data service encoder 103, and the subtitle stream SS generated by the subtitle encoder 105 are supplied to the container encoder 106. The container encoder 106 generates a transport stream (MPEG-2 TS or MMT transport stream) including each stream.

また、コンテナエンコーダ１０２では、このようにトランスポートストリームが生成されるとき、このトランスポートストリームに、それに含まれるビデオストリームＶＳが持つ伝送ビデオデータの種類を示す識別情報が、ビデオストリームＶＳの切り替えタイミングより所定の時間量以上だけ前のタイミングから切り替え後の伝送ビデオデータの種類を示すように挿入される。具体的には、ビデオストリームＶＳに対応して、ＨＤＲ・ビデオ・デスクリプタ（図５参照）が挿入される。また、コンテナエンコーダ１０２では、このトランスポートストリームに、さらに、サブタイトルストリームＳＳに対応して、ＨＤＲ・サブタイトル・デスクリプタ（図７参照）が挿入される。   Further, in the container encoder 102, when the transport stream is generated in this way, identification information indicating the type of transmission video data included in the video stream VS included in the transport stream is added to the transport stream at the switching timing of the video stream VS. It is inserted so as to indicate the type of the transmission video data after switching from the timing earlier than the predetermined time amount. Specifically, the HDR video descriptor (see FIG. 5) is inserted corresponding to the video stream VS. Further, in the container encoder 102, an HDR subtitle descriptor (see FIG. 7) is further inserted into this transport stream corresponding to the subtitle stream SS.

コンテナエンコーダ１０６で生成されたトランスポートストリームは、送信部１０７に供給される。このトランスポートストリームは、送信部１０７により、放送波あるいはネットのパケットに載せて、サービス受信機２００に送信される。   The transport stream generated by the container encoder 106 is supplied to the transmission unit 107. The transport stream is carried by the transmission unit 107 on a broadcast wave or a net packet and transmitted to the service receiver 200.

「サービス受信機の構成例」
図１０は、サービス受信機２００の構成例を示している。このサービス受信機２００は、制御部２０１と、受信部２０２と、コンテナデコーダ２０３と、ビデオデコーダ２０４と、データサービスデコーダ２０５と、静止画デコーダ２０６と、サブタイトルデコーダ２０７と、ＯＳＤ部２０８と、画面合成処理部２０９と、モニタ２１０を有している。 "Configuration example of service receiver"
FIG. 10 shows a configuration example of the service receiver 200. The service receiver 200 includes a control unit 201, a receiving unit 202, a container decoder 203, a video decoder 204, a data service decoder 205, a still image decoder 206, a subtitle decoder 207, an OSD unit 208, and a screen. It has a combination processing unit 209 and a monitor 210.

制御部２０１は、ＣＰＵ（Central Processing Unit）を備えて構成され、制御プログラムに基づいて、サービス受信機２００の各部の動作を制御する。受信部２０２は、サービス送信システム１００（図２参照）から放送波あるいはネットのパケットに載せて送られてくるコンテナとしてのトランスポートストリーム（ＭＰＥＧ−２ ＴＳあるいはＭＭＴのトランスポートストリーム）を受信する。コンテナデコーダ２０３は、トランスポートストリームから、ビデオストリームＶＳ、データサービスストリームＤＳおよびサブタイトルストリームＳＳを抽出する。   The control unit 201 includes a CPU (Central Processing Unit), and controls the operation of each unit of the service receiver 200 based on a control program. The receiving unit 202 receives a transport stream (MPEG-2 TS or MMT transport stream) as a container transmitted from the service transmission system 100 (see FIG. 2) in a broadcast wave or a net packet. The container decoder 203 extracts the video stream VS, the data service stream DS, and the subtitle stream SS from the transport stream.

また、コンテナデコーダ２０３は、トランスポートストリームに挿入されている種々の情報を抽出し、制御部２０１に送る。この情報には、上述した、伝送ビデオデータの識別情報が記述された、ＨＤＲ・ビデオ・デスクリプタ（図５参照）、ＨＤＲ・サブタイトル・デスクリプタ（図７参照）も含まれる。   Further, the container decoder 203 extracts various information inserted in the transport stream and sends it to the control unit 201. This information also includes the HDR video descriptor (see FIG. 5) and the HDR subtitle descriptor (see FIG. 7) in which the identification information of the transmission video data described above is described.

制御部２０１は、ＨＤＲ・ビデオ・デスクリプタの記述に基づいて、ビデオストリームＶｓに含まれる伝送ビデオデータがＳＤＲ伝送ビデオデータであるか、ＨＤＲ伝送ビデオデータであるかを認識する。上述したように、伝送ビデオデータの種類の識別情報は、この伝送ビデオデータの種類の切り替えタイミングより所定の時間量以上だけ前のタイミングから切り替え後の伝送ビデオデータの種類を示すように、トランスポートストリームに挿入されている。   The control unit 201 recognizes whether the transmission video data included in the video stream Vs is SDR transmission video data or HDR transmission video data, based on the description of the HDR video descriptor. As described above, the identification information of the type of the transmission video data indicates the type of the transmission video data after the switching from the timing before the switching timing of the type of the transmission video data by a predetermined time amount or more. It has been inserted into the stream.

また、制御部２０１は、ＨＤＲ・サブタイトル・デスクリプタの記述に基づいて、サブタイトルストリームＳＳが持つ字幕データの種類、つまりＳＤＲデータであるかＨＤＲデータであるかを認識する。上述したように、字幕データの種類の識別情報は、この字幕データの種類の切り替えタイミングより所定の時間量以上だけ前のタイミングから切り替え後の伝送ビデオデータの種類を示すように、トランスポートストリームに挿入されている。   In addition, the control unit 201 recognizes the type of subtitle data included in the subtitle stream SS, that is, whether it is SDR data or HDR data, based on the description of the HDR subtitle descriptor. As described above, the identification information of the subtitle data type is added to the transport stream so as to indicate the type of the transmission video data after the switching from the timing before the switching timing of the subtitle data type by a predetermined amount of time or more. Has been inserted.

ビデオデコーダ２０４は、コンテナデコーダ２０３で抽出されたビデオストリームＶＳに対してデコード処理を施して、伝送ビデオデータを得ると共に、この伝送ビデオデータのダイナミックレンジ情報および色域情報を得る。ここで、ダイナミックレンジ情報は、伝送ビデオデータが持つ光電変換特性に対応した電光変換特性を示す情報（transfer function）である。   The video decoder 204 performs a decoding process on the video stream VS extracted by the container decoder 203 to obtain transmission video data and also obtains dynamic range information and color gamut information of this transmission video data. Here, the dynamic range information is information (transfer function) indicating an electro-optical conversion characteristic corresponding to the photoelectric conversion characteristic of the transmission video data.

データサービスデコーダ２０５は、コンテナデコーダ２０３で抽出されたデータサービスストリームＤＳに対してデコード処理を施して、グラフィックスデータ（ビットマップデータ）を得ると共に、このグラフィックスデータのダイナミックレンジ情報および色域情報を得、さらにイメージデータに係る符号化データを得る。静止画デコーダ２０６は、データサービスデコーダ２０５で得られた符号化データに対してデコード処理を施して、イメージデータを得ると共に、このイメージデータのダイナミックレンジ情報および色域情報を得る。   The data service decoder 205 performs a decoding process on the data service stream DS extracted by the container decoder 203 to obtain graphics data (bitmap data), and the dynamic range information and color gamut information of this graphics data. And further, encoded data relating to the image data is obtained. The still image decoder 206 performs a decoding process on the encoded data obtained by the data service decoder 205 to obtain image data, and also obtains dynamic range information and color gamut information of this image data.

サブタイトルデコーダ２０７は、コンテナデコーダ２０３で抽出されたサブタイトルストリームＳＳに対してデコード処理を施して、字幕データ（ビットマップデータ）を得ると共に、この字幕データのダイナミックレンジ情報および色域情報を得る。ＯＳＤ部２０８は、ＯＳＤ（On-screen display）用のグラフィックスデータ（ビットマップデータ）を出力すると共に、このグラフィックスデータのダイナミックレンジ情報および色域情報を出力する。   The subtitle decoder 207 performs a decoding process on the subtitle stream SS extracted by the container decoder 203 to obtain subtitle data (bitmap data) and dynamic range information and color gamut information of this subtitle data. The OSD unit 208 outputs graphics data (bitmap data) for OSD (On-screen display), and also outputs dynamic range information and color gamut information of this graphics data.

画面合成処理部２０９は、ビデオデコーダ２０４で得られた伝送ビデオデータ、データサービスデコーダ２０５で得られたグラフィックスデータ、静止画デコーダ２０６で得られたイメージデータ、サブタイトルデコーダ２０７で得られた字幕データおよびＯＳＤ部２０８で得られたグラフィックスデータを合成して、モニタ２１０の表示性能に対応した表示用画像データを生成する。モニタ２１０は、ＨＤＲかつ広色域、あるいはＳＤＲかつ通常色域などの表示性能を有し、表示用画像データによる画像を表示する。   The screen compositing processing unit 209 includes transmission video data obtained by the video decoder 204, graphics data obtained by the data service decoder 205, image data obtained by the still image decoder 206, and subtitle data obtained by the subtitle decoder 207. And the graphics data obtained by the OSD unit 208 are combined to generate display image data corresponding to the display performance of the monitor 210. The monitor 210 has display performance such as HDR and wide color gamut, or SDR and normal color gamut, and displays an image based on display image data.

画面合成処理部２０９は、各データを、それぞれのデータのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理を施した後に合成する。また、画面合成処理部２０９は、各データを、それぞれのデータの色域情報に基づいて表示性能に合うように色域変換処理を施した後に合成する。   The screen synthesis processing unit 209 synthesizes each data after performing brightness mapping processing so as to match the display performance based on the dynamic range information of each data. Further, the screen compositing processing unit 209 composes each data after performing the gamut conversion processing so as to match the display performance based on the gamut information of each data.

図１１は、表示性能がＨＤＲである場合における輝度マッピング処理の概要を示している。伝送ビデオデータやイメージデータに関しては、ダイナミックレンジ情報がＨＤＲを示す場合にはデータビット表現範囲の最大値が明るさ最大レベルに対応するように輝度マッピング処理をし、ダイナミックレンジ情報がＳＤＲを示す場合にはデータビット表現範囲の最大値が明るさ基準レベルに対応するように輝度マッピング処理をする。   FIG. 11 shows an outline of the luminance mapping process when the display performance is HDR. Regarding transmission video data and image data, when the dynamic range information indicates HDR, luminance mapping processing is performed so that the maximum value of the data bit expression range corresponds to the maximum brightness level, and the dynamic range information indicates SDR. The luminance mapping processing is performed so that the maximum value of the data bit expression range corresponds to the brightness reference level.

また、グラフィックスデータや字幕データに関しては、ダイナミックレンジ情報がＨＤＲを示す場合、つまりきらめき成分を有する場合にはデータビット表現範囲の最大値が明るさ最大レベルに対応するように輝度マッピング処理をし、ダイナミックレンジ情報がＳＤＲを示す場合、つまりきらめき成分を有しない場合にはデータビット表現範囲の最大値が明るさ基準レベルに対応するように輝度マッピング処理をする。   Regarding graphics data and subtitle data, when the dynamic range information indicates HDR, that is, when it has a glitter component, luminance mapping processing is performed so that the maximum value of the data bit expression range corresponds to the maximum brightness level. When the dynamic range information indicates SDR, that is, when the flash component does not exist, the brightness mapping processing is performed so that the maximum value of the data bit expression range corresponds to the brightness reference level.

この場合、明るさ基準レベルとしては、例えば、伝送ビデオデータ、イメージデータに対応して設定された明るさ基準レベル（referencelevel）（図５参照）を使用できる他、例えば、グラフィックスデータ、字幕データに対応して設定された明るさ基準レベル（referencelevel）（図７参照）を用いることもできる。また、この場合、伝送ビデオデータ、イメージデータに関しては、伝送ビデオデータ、イメージデータに対応して設定された明るさ基準レベル（referencelevel）を用い、グラフィックスデータ、字幕データに関しては、グラフィックスデータ、字幕データに対応して設定された明るさ基準レベル（referencelevel）を用いることもできる。また、明るさ基準レベルは、１００nits（１００％輝度）でもよいが、その明るさには限定されない。例えば、明るさ基準レベルは、２００nits（２００％輝度）あるいは３００nits（３００％輝度）などと、予め設定されるものになる。   In this case, as the brightness reference level, for example, a brightness reference level (reference level) (see FIG. 5) set corresponding to the transmission video data and the image data can be used. It is also possible to use a brightness reference level (reference level) (see FIG. 7) set corresponding to the above. Further, in this case, for the transmission video data and the image data, the brightness reference level (referencelevel) set corresponding to the transmission video data and the image data is used, and for the graphics data and the subtitle data, the graphics data, It is also possible to use a brightness reference level (reference level) set corresponding to the subtitle data. The brightness reference level may be 100 nits (100% brightness), but is not limited to the brightness. For example, the brightness reference level is preset such as 200 nits (200% brightness) or 300 nits (300% brightness).

図１２は、表示性能がＨＤＲかつ広色域である場合における画面合成処理部２０９の構成例を示している。この画面合成処理部２０９は、色域変換部２１１ａ，２１１ｂ，２１１ｃ，２１１ｄと、輝度マッピング部２１２ａ，２１２ｂ，２１２ｃ，２１２ｄと、合成部２１３と、ＨＤＲ電光変換部２１４を有している。   FIG. 12 shows a configuration example of the screen compositing processing unit 209 when the display performance is HDR and a wide color gamut. The screen synthesis processing unit 209 includes color gamut conversion units 211a, 211b, 211c, 211d, luminance mapping units 212a, 212b, 212c, 212d, a synthesis unit 213, and an HDR lightning conversion unit 214.

ビデオデコーダ２０４から供給される伝送ビデオデータは、色変換部２１１ａおよび輝度マッピング部２１２ａの直列回路に供給される。色域変換部２１１ａは、色域情報に基づいて、この伝送ビデオデータの色域をディスプレイの表示性能に合った広色域に変換する。例えば、伝送ビデオデータの色域が“BT.709-5 = sRGB”であって、表示性能に合った色域が“BT.2020 = ITUR2020”であるとき、伝送ビデオデータの色域は、“BT.709-5”から“BT.2020”に変換される。なお、伝送ビデオデータの色域が表示性能に合った広色域と同じであるとき、色域変換部２１２ａは、実質的に何もせずに、入力データをそのまま出力する。   The transmission video data supplied from the video decoder 204 is supplied to the serial circuit of the color conversion unit 211a and the luminance mapping unit 212a. The color gamut conversion unit 211a converts the color gamut of this transmission video data into a wide color gamut suitable for the display performance of the display based on the color gamut information. For example, when the color gamut of transmitted video data is "BT.709-5 = sRGB" and the color gamut that matches the display performance is "BT.2020 = ITUR2020", the color gamut of transmitted video data is " Converted from "BT.709-5" to "BT.2020". When the color gamut of the transmission video data is the same as the wide color gamut that matches the display performance, the color gamut conversion unit 212a outputs the input data as it is without substantially doing anything.

輝度マッピング部２１２ａは、ダイナミックレンジ情報に基づいて、この伝送ビデオデータに、ハイダイナミックレンジの表示性能に合うように、輝度マッピングをする。輝度マッピング部２１２ａは、図１３に示すように、電光変換部（ＥＯＴＦ部）２２１と光電変換部（ＯＥＴＦ部）２２２の直列回路で構成される。   The luminance mapping unit 212a performs luminance mapping on the transmission video data based on the dynamic range information so as to match the display performance of the high dynamic range. As shown in FIG. 13, the brightness mapping section 212a is composed of a series circuit of an electro-optical conversion section (EOTF section) 221 and a photoelectric conversion section (OETF section) 222.

電光変換部（ＥＯＴＦ部）２２１では、入力される伝送ビデオデータに、この伝送ビデオデータに適用されている光電変換特性（ＯＥＴＦ特性）から、線形な光空間特性になるような変換が施される。光電変換部（ＯＥＴＦ部）２２２では、電光変換部２２１の出力データに、ＨＤＲ電光変換部２１４における電光変換特性（ＥＯＴＦ特性）とは逆の光電変換特性（ＯＥＴＦ特性）による光電変換が施される。   In the electro-optical conversion unit (EOTF unit) 221, the input transmission video data is converted from the photoelectric conversion characteristic (OETF characteristic) applied to the transmission video data so as to have a linear optical space characteristic. .. In the photoelectric conversion section (OETF section) 222, the output data of the electro-optical conversion section 221 is subjected to photoelectric conversion with a photoelectric conversion characteristic (OETF characteristic) opposite to the electro-optical conversion characteristic (EOTF characteristic) in the HDR electro-optical conversion section 214. ..

ここで、入力伝送ビデオデータがＳＤＲ伝送ビデオデータである場合について説明する。この場合、輝度マッピング部２１２ａでは、輝度マッピング処理が施されることで、ＳＤＲ伝送ビデオデータからＨＤＲ伝送ビデオデータに変換される。この場合、輝度マッピング部２１２ａは、図１４（ａ）に示すように、ＳＤＲ電光変換部２３１とＨＤＲ光電変換部２３２の直列回路で構成され、変換は明るさ基準レベルを元にＳＤＲビット空間からＨＤＲビット空間へと行われる。   Here, a case where the input transmission video data is SDR transmission video data will be described. In this case, the luminance mapping unit 212a performs luminance mapping processing to convert the SDR transmission video data into HDR transmission video data. In this case, the brightness mapping unit 212a is configured by a series circuit of the SDR light-electric conversion unit 231 and the HDR photoelectric conversion unit 232 as shown in FIG. 14A, and conversion is performed from the SDR bit space based on the brightness reference level. To the HDR bit space.

ＳＤＲ電光変換部２３１では、ＳＤＲ伝送ビデオデータに、図１４（ｂ）に矢印ａで示すＳＤＲ電光変換特性による電光変換が施される。この場合、入力されるＳＤＲ伝送ビデオデータの輝度レベル０〜１００％は、リニアな光線空間で最大１００nits（＝１００cd/m2）となる。ここで、１００nitsは基準レベルの明るさを示す。なお、基準レベルの明るさは１００nitsに限定されるものではなく、例えば、２００nitsあるいは３００nitsであってもよい。このことは、以下の他の例においても同様である。 In the SDR electro-optical conversion unit 231, the SDR transmission video data is electro-optically converted by the SDR electro-optical conversion characteristic indicated by the arrow a in FIG. In this case, the maximum luminance level of 0 to 100% of the input SDR transmission video data is 100 nits (= 100 cd / m 2 ) in the linear ray space. Here, 100 nits indicates the brightness of the reference level. The brightness of the reference level is not limited to 100 nits, and may be 200 nits or 300 nits, for example. This also applies to the other examples below.

また、ＨＤＲ光電変換部２３２では、図１４（ｃ）に矢印ｂで示すＨＤＲ光電変換特性による光電変換が施される。この場合、ＳＤＲ電光変換部２３１の出力データは、０〜Ｎ＊１００の伝送範囲のうちの０〜１００に再割り当てされる。これにより、ＳＤＲ伝送ビデオデータは当初符号化ビット幅いっぱいで表現されていたものが、ＨＤＲ伝送ビデオデータとして再割り当てされた後は伝送範囲の部分的な範囲内に集約される。   In addition, the HDR photoelectric conversion unit 232 performs photoelectric conversion according to the HDR photoelectric conversion characteristic indicated by the arrow b in FIG. In this case, the output data of the SDR light-to-electric conversion unit 231 is reallocated to 0 to 100 in the transmission range of 0 to N * 100. As a result, the SDR transmission video data, which was initially expressed in the full encoded bit width, is aggregated within a partial range of the transmission range after being reallocated as HDR transmission video data.

次に、入力伝送ビデオデータがＨＤＲ伝送ビデオデータであって、このＨＤＲ伝送ビデオデータが持つ光電変換特性（ＯＥＴＦ特性）がＨＤＲ電光変換部２１４における電光変換特性（ＥＯＴＦ特性）の逆特性に一致しない場合について説明する。なお、このＨＤＲ伝送ビデオデータが持つ光電変換特性がＨＤＲ電光変換部２１４における電光変換特性の逆特性と一致する場合には、輝度マッピング部２１２ａは、実質的に何もせずに、入力データをそのまま出力する。   Next, the input transmission video data is HDR transmission video data, and the photoelectric conversion characteristic (OETF characteristic) of the HDR transmission video data does not match the inverse characteristic of the electro-optical conversion characteristic (EOTF characteristic) in the HDR electro-optical conversion unit 214. The case will be described. If the photoelectric conversion characteristic of the HDR transmission video data matches the inverse characteristic of the electric-optical conversion characteristic of the HDR electro-optical conversion unit 214, the luminance mapping unit 212a does nothing and does not change the input data. Output.

この場合、輝度マッピング部２１２ａでは、輝度マッピング処理が施されることで、ＨＤＲ１伝送ビデオデータからＨＤＲ２伝送ビデオデータに変換される。この場合、輝度マッピング部２１２ａは、図１５（ａ）に示すように、ＨＤＲ１電光変換部２４１とＨＤＲ２光電変換部２４２の直列回路で構成される。   In this case, the luminance mapping unit 212a performs the luminance mapping process to convert the HDR1 transmission video data into the HDR2 transmission video data. In this case, the brightness mapping unit 212a is configured by a series circuit of the HDR1 electro-optical conversion unit 241 and the HDR2 photoelectric conversion unit 242 as illustrated in FIG.

ＨＤＲ１電光変換部２４１では、ＨＤＲ１伝送ビデオデータに、図１５（ｂ）に矢印ａで示すＨＤＲ１電光変換特性による電光変換が施される。この場合、入力されるＨＤＲ１伝送ビデオデータの輝度レベル０〜Ｎ＊１００％は、リニアな光線空間で最大Ｎ＊１００nits（＝Ｋ１）に対応する。   In the HDR1 electro-optical conversion unit 241, the HDR1 transmission video data is subjected to electro-optical conversion according to the HDR1 electro-optical conversion characteristic indicated by the arrow a in FIG. In this case, the brightness level 0 to N * 100% of the input HDR1 transmission video data corresponds to a maximum of N * 100 nits (= K1) in the linear ray space.

そして、この場合、図示のようにＨＤＲ１のＮ＊１００％がＨＤＲ２のＭ＊１００％よりも大きいときは、ＨＤＲ１電光変換部２４１では、さらに、電光変換入力の信号に対して、１００〜Ｎ＊１００％の輝度レベルが、ニー(knee)カーブ（図１５（ｂ）に矢印ｂで示す）によって、１００〜Ｍ＊１００％の輝度レベルとなるように輝度変換される。なお、図１５（ｂ）において、“Ｋ１”はＮ＊１００％に対応した輝度値［nits］を示し、“Ｋ２”はＭ＊１００％に対応した輝度値［nits］を示している。なお、図示は省略するが、ＨＤＲ１のＮ＊１００％がＨＤＲ２のＭ＊１００％以下である場合には、このような輝度変換はされない。   Then, in this case, when N * 100% of HDR1 is larger than M * 100% of HDR2 as illustrated, the HDR1 electro-optical conversion unit 241 further sets 100 to N * for the signal of the electro-optical conversion input. The brightness level of 100% is converted to a brightness level of 100 to M * 100% by a knee curve (indicated by an arrow b in FIG. 15B). In FIG. 15B, “K1” indicates the brightness value [nits] corresponding to N * 100%, and “K2” indicates the brightness value [nits] corresponding to M * 100%. Although illustration is omitted, when N * 100% of HDR1 is M * 100% or less of HDR2, such luminance conversion is not performed.

また、ＨＤＲ光電変換部２４２では、図１５（ｃ）に矢印ｃで示すＨＤＲ２光電変換特性による光電変換が施される。この場合、ＨＤＲ電光変換部２４１の出力データが、０〜Ｍ＊１００の伝送範囲の全体に再割り当てされる。   Further, the HDR photoelectric conversion unit 242 performs photoelectric conversion according to the HDR2 photoelectric conversion characteristic indicated by the arrow c in FIG. In this case, the output data of the HDR electro-optical conversion unit 241 is reallocated to the entire transmission range of 0 to M * 100.

図１２に戻って、静止画デコーダ２０６から供給されるイメージデータは、色変換部２１１ｂおよび輝度マッピング部２１２ｂの直列回路に供給される。色域変換部２１１ｂは、色域情報に基づいて、このイメージデータの色域を表示性能に合った広色域に変換する。輝度マッピング部２１２ｂは、ダイナミックレンジ情報に基づいて、このイメージデータに、ハイダイナミックレンジの表示性能に合うように、輝度マッピングをする。なお、色変換部２１１ｂ、輝度マッピング部２１２ｂの詳細については、上述の伝送ビデオデータに対応した色変換部２１１ａ、輝度マッピング部２１２ａと同様であるので、省略する。   Returning to FIG. 12, the image data supplied from the still image decoder 206 is supplied to the series circuit of the color conversion unit 211b and the luminance mapping unit 212b. The color gamut conversion unit 211b converts the color gamut of this image data into a wide color gamut suitable for display performance based on the color gamut information. The brightness mapping unit 212b performs brightness mapping on the image data based on the dynamic range information so as to match the display performance of the high dynamic range. The details of the color conversion unit 211b and the luminance mapping unit 212b are the same as those of the color conversion unit 211a and the luminance mapping unit 212a corresponding to the above-described transmission video data, and thus will be omitted.

また、サブタイトルエンコーダ２０７から供給される字幕データは、色変換部２１１ｃおよび輝度マッピング部２１２ｃの直列回路に供給される。色域変換部２１１ｃは、色域情報に基づいて、この字幕データの色域を表示性能に合った広色域に変換する。輝度マッピング部２１２ｃは、ダイナミックレンジ情報に基づいて、この字幕データに、ハイダイナミックレンジの表示性能に合うように、輝度マッピングをする。なお、色変換部２１１ｃ、輝度マッピング部２１２ｃの詳細については、上述の伝送ビデオデータに対応した色変換部２１１ａ、輝度マッピング部２１２ａと同様であるので、省略する。   Further, the subtitle data supplied from the subtitle encoder 207 is supplied to the series circuit of the color conversion unit 211c and the luminance mapping unit 212c. The color gamut conversion unit 211c converts the color gamut of the subtitle data into a wide color gamut suitable for display performance based on the color gamut information. The brightness mapping unit 212c performs brightness mapping on the subtitle data based on the dynamic range information so as to match the display performance of the high dynamic range. The details of the color conversion unit 211c and the luminance mapping unit 212c are the same as those of the color conversion unit 211a and the luminance mapping unit 212a corresponding to the above-mentioned transmission video data, and therefore will be omitted.

また、データサービスデコーダ２０５あるいはＯＳＤ部２０８から供給されるグラフィックスデータは、色変換部２１１ｄおよび輝度マッピング部２１２ｄの直列回路に供給される。色域変換部２１１ｄは、色域情報に基づいて、このグラフィックスデータの色域を表示性能に合った広色域に変換する。輝度マッピング部２１２ｄは、ダイナミックレンジ情報に基づいて、このグラフィックスデータに、ハイダイナミックレンジの表示性能に合うように、輝度マッピングをする。なお、色変換部２１１ｄ、輝度マッピング部２１２ｄの詳細については、上述の伝送ビデオデータに対応した色変換部２１１ａ、輝度マッピング部２１２ａと同様であるので、省略する。   Also, the graphics data supplied from the data service decoder 205 or the OSD unit 208 is supplied to the series circuit of the color conversion unit 211d and the luminance mapping unit 212d. The color gamut conversion unit 211d converts the color gamut of the graphics data into a wide color gamut suitable for display performance based on the color gamut information. The brightness mapping unit 212d performs brightness mapping on the graphics data based on the dynamic range information so as to match the display performance of the high dynamic range. The details of the color conversion unit 211d and the luminance mapping unit 212d are the same as those of the color conversion unit 211a and the luminance mapping unit 212a corresponding to the above-mentioned transmission video data, and therefore will be omitted.

色域変換および輝度マッピングの処理が行われた伝送ビデオデータ、イメージデータ、字幕データおよびグラフィックデータは合成部２１３に供給される。合成部２１３は、詳細説明は省略するが、画面構成情報に基づいて、各データを合成する。この合成部２１３の出力データは、ＨＤＲ光電変換部２１４に供給される。このＨＤＲ光電変換部２１４は、合成部２１３の出力データにＨＤＲ電光変換特性による電光変換を施し、ＨＤＲかつ広色域の表示性能に対応した表示用画像データを得る。   The transmission video data, the image data, the subtitle data, and the graphic data that have been subjected to the color gamut conversion and the luminance mapping processing are supplied to the combining unit 213. Although the detailed description is omitted, the synthesizing unit 213 synthesizes each data based on the screen configuration information. The output data of the combining unit 213 is supplied to the HDR photoelectric conversion unit 214. The HDR photoelectric conversion unit 214 performs electro-optical conversion on the output data of the synthesizing unit 213 according to HDR electro-optical conversion characteristics, and obtains display image data corresponding to HDR and wide color gamut display performance.

なお、上述ではモニタ２１０がＨＤＲかつ広色域の表示性能を有し、画面合成処理部２０９でＨＤＲかつ広色域の表示性能に対応した表示用画像データを得る例について説明した。モニタ２１０がＳＤＲかつｓＲＧＢ等の通常色域の表示性能を有する場合、画面合成処理部２０９は、ＳＤＲかつ通常色域の表示性能に対応した表示用画像データを得るように構成される。   In the above description, the monitor 210 has HDR and wide color gamut display performance, and the screen synthesis processing unit 209 obtains the display image data corresponding to the HDR and wide color gamut display performance. When the monitor 210 has the display performance of the SDR and the normal color gamut such as sRGB, the screen synthesis processing unit 209 is configured to obtain the display image data corresponding to the display performance of the SDR and the normal color gamut.

この場合、図１２に示す画面合成処理部２０９において、各色域変換部では、色域情報に基づいて、各データの色域を表示性能に合った通常色域に変換することが行われる。また、図１２に示す画面合成処理部２０９において、各輝度マッピング部では、ダイナミックレンジ情報に基づいて、各データに、通常ダイナミックレンジの表示性能に合うように、輝度マッピングが行われる。なお、図１２に示す画面合成処理部２０９において、ＨＤＲ電光変換部２１４は、ＳＤＲ電光変換部となる。   In this case, in the screen compositing processing unit 209 shown in FIG. 12, each color gamut conversion unit converts the color gamut of each data into a normal color gamut suitable for display performance based on the color gamut information. In the screen synthesis processing unit 209 shown in FIG. 12, each brightness mapping unit performs brightness mapping on each data based on the dynamic range information so as to match the display performance of the normal dynamic range. In addition, in the screen synthesis processing unit 209 shown in FIG. 12, the HDR electro-optical conversion unit 214 becomes an SDR electro-optical conversion unit.

ここで、入力伝送ビデオデータがＨＤＲ伝送ビデオデータである場合について説明する。この場合、輝度マッピング部では、輝度マッピング処理が施されることで、ＨＤＲ伝送ビデオデータからＳＤＲ伝送ビデオデータに変換される。この場合、輝度マッピング部は、図１６（ａ）に示すように、ＨＤＲ電光変換部２５１とＳＤＲ光電変換部２５２の直列回路で構成される。   Here, a case where the input transmission video data is HDR transmission video data will be described. In this case, the luminance mapping unit performs luminance mapping processing to convert the HDR transmission video data into the SDR transmission video data. In this case, the brightness mapping unit is composed of a series circuit of an HDR electro-optical conversion unit 251 and an SDR photoelectric conversion unit 252, as shown in FIG.

ＨＤＲ電光変換部２５１では、ＨＤＲ伝送ビデオデータに、図１６（ｂ）に矢印ａで示すＨＤＲ電光変換特性による電光変換が施される。この場合、入力されるＨＤＲ伝送ビデオデータの輝度レベル０〜Ｎ＊１００％は、リニアな光線空間で最大Ｎ＊１００nits（＝１００cd/m2）となる。 In the HDR electro-optical conversion unit 251, the HDR transmission video data is subjected to electro-optical conversion according to the HDR electro-optical conversion characteristic indicated by the arrow a in FIG. In this case, the brightness level 0 to N * 100% of the input HDR transmission video data is a maximum of N * 100 nits (= 100 cd / m 2 ) in the linear light space.

そして、この場合、ＨＤＲ電光変換部２５１では、さらに、電光変換入力の信号に対して、１００％より低いＰ％の輝度レベルからＮ＊１００％の輝度レベルまでが、ニー(knee)カーブ（図１６（ｂ）に矢印ｂで示す）によって、ＳＤＲ ＯＥＴＦの１００％の伝送範囲以下の輝度レベルとなるように輝度変換される。   Then, in this case, in the HDR electro-optical conversion unit 251, further, for the signal of the electro-optical conversion input, from the brightness level of P% lower than 100% to the brightness level of N * 100%, a knee curve (Fig. 16 (b) indicated by an arrow b), the luminance conversion is performed so that the luminance level is equal to or lower than the transmission range of 100% of SDR OETF.

また、ＳＤＲ光電変換部２５２では、図１６（ｃ）に矢印ｃで示すＳＤＲ光電変換特性による光電変換が施される。この場合、ＨＤＲ電光変換部２５１の出力データが、０〜１００の伝送範囲の全体に再割り当てされる。   Also, in the SDR photoelectric conversion unit 252, photoelectric conversion is performed according to the SDR photoelectric conversion characteristic indicated by the arrow c in FIG. In this case, the output data of the HDR electro-optical conversion unit 251 is reallocated to the entire transmission range of 0 to 100.

図１０に示すサービス受信機２００の動作を簡単に説明する。受信部２０２では、サービス送信システム１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリーム（ＭＰＥＧ−２ ＴＳあるいはＭＭＴのトランスポートストリーム）が受信される。このトランスポートストリームは、コンテナデコーダ２０３に供給される。コンテナデコーダ２０３では、トランスポートストリームから、ビデオストリームＶＳ、データサービスストリームＤＳおよびサブタイトルストリームＳＳが抽出される。   The operation of the service receiver 200 shown in FIG. 10 will be briefly described. The receiving unit 202 receives a transport stream (MPEG-2 TS or MMT transport stream) sent from the service transmission system 100 in a broadcast wave or a net packet. This transport stream is supplied to the container decoder 203. The container decoder 203 extracts the video stream VS, the data service stream DS, and the subtitle stream SS from the transport stream.

また、コンテナデコーダ２０３では、コンテナとしてのトランスポートストリームに挿入されている種々の情報が抽出され、制御部２０１に送られる。この情報には、上述した、ＨＤＲ・ビデオ・デスクリプタ（図５参照）、ＨＤＲ・サブタイトル・デスクリプタ（図７参照）も含まれる。   Further, the container decoder 203 extracts various kinds of information inserted in the transport stream as the container and sends the extracted information to the control unit 201. This information also includes the HDR video descriptor (see FIG. 5) and the HDR subtitle descriptor (see FIG. 7) described above.

制御部２０１では、ＨＤＲ・ビデオ・デスクリプタの記述に基づいて、ビデオストリームＶｓに含まれる伝送ビデオデータがＳＤＲ伝送ビデオデータであるか、ＨＤＲ伝送ビデオデータであるかなどが認識される。また、制御部２０１では、ＨＤＲ・サブタイトル・デスクリプタの記述に基づいて、サブタイトルストリームＳＳが持つ字幕データの種類、つまりＳＤＲデータであるかＨＤＲデータであるかなどが認識される。   The control unit 201 recognizes whether the transmission video data included in the video stream Vs is SDR transmission video data, HDR transmission video data, or the like, based on the description of the HDR video descriptor. Further, the control unit 201 recognizes the type of subtitle data included in the subtitle stream SS, that is, whether it is SDR data or HDR data, based on the description of the HDR / subtitle / descriptor.

コンテナデコーダ２０３で抽出されたビデオストリームＶＳは、ビデオデコーダ２０４に供給される。ビデオデコーダ２０４では、ビデオストリームＶＳに対してデコード処理が施され、伝送ビデオデータが得られると共に、この伝送ビデオデータのダイナミックレンジ情報および色域情報が得られる。   The video stream VS extracted by the container decoder 203 is supplied to the video decoder 204. The video decoder 204 performs a decoding process on the video stream VS to obtain transmission video data, and also obtains dynamic range information and color gamut information of the transmission video data.

また、コンテナデコーダ２０３で抽出されたデータサービスストリームＤＳは、データサービスデコーダ２０５に供給される。データサービスデコーダ２０５では、データサービスストリームＤＳに対してデコード処理が施され、グラフィックスデータ（ビットマップデータ）が得られると共に、このグラフィックスデータのダイナミックレンジ情報および色域情報が得られ、さらにイメージデータに係る符号化データが得られる。   The data service stream DS extracted by the container decoder 203 is supplied to the data service decoder 205. In the data service decoder 205, decoding processing is performed on the data service stream DS to obtain graphics data (bitmap data), dynamic range information and color gamut information of this graphics data, and an image. Encoded data related to the data is obtained.

データサービスデコーダ２０５で得られたイメージデータに係る符号化データは、静止画デコーダ２０６に供給される。静止画デコーダ２０６では、符号化データに対してデコード処理が施され、イメージデータが得られると共に、このイメージデータのダイナミックレンジ情報および色域情報が得られる。   The encoded data related to the image data obtained by the data service decoder 205 is supplied to the still image decoder 206. The still image decoder 206 performs a decoding process on the encoded data to obtain image data, and also obtains dynamic range information and color gamut information of this image data.

また、コンテナデコーダ２０３で抽出されたサブタイトルストリームＳＳは、サブタイトルデコーダ２０７に供給される。サブタイトルデコーダ２０７では、サブタイトルストリームＳＳに対してデコード処理が施され、字幕データ（ビットマップデータ）が得られると共に、この字幕データのダイナミックレンジ情報および色域情報が得られる。   Further, the subtitle stream SS extracted by the container decoder 203 is supplied to the subtitle decoder 207. The subtitle decoder 207 performs a decoding process on the subtitle stream SS to obtain subtitle data (bitmap data) and dynamic range information and color gamut information of the subtitle data.

ビデオデコーダ２０４で得られた伝送ビデオデータ、データサービスデコーダ２０５で得られたグラフィックスデータ、静止画デコーダ２０６で得られたイメージデータ、サブタイトルデコーダ２０７で得られた字幕データおよびＯＳＤ部２０８で得られたグラフィックスデータは、それぞれのダイナミックレンジ情報および色域情報と共に、画面合成処理部２０９に供給される。   Transmission video data obtained by the video decoder 204, graphics data obtained by the data service decoder 205, image data obtained by the still image decoder 206, subtitle data obtained by the subtitle decoder 207, and the OSD unit 208. The graphics data is supplied to the screen compositing processing unit 209 together with the respective dynamic range information and color gamut information.

画面合成処理部２０９では、各データが合成されて、モニタ２１０の表示性能に対応した表示用画像データが生成される。この場合、各データは、それぞれのデータの色域情報に基づいて表示性能に合うように色域変換処理が施され、さらに、それぞれのデータのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理が施された後に、合成される。画面合成処理部２０９で生成された表示用画像データはモニタ２１０に供給され、このモニタ２１０に表示用画像データによる画像が表示される。   The screen synthesis processing unit 209 synthesizes the respective data to generate display image data corresponding to the display performance of the monitor 210. In this case, each data is subjected to color gamut conversion processing based on the color gamut information of each data so as to match the display performance, and further, based on the dynamic range information of each data, the luminance to match the display performance. After the mapping process is performed, they are combined. The display image data generated by the screen synthesis processing unit 209 is supplied to the monitor 210, and an image based on the display image data is displayed on the monitor 210.

上述したように、図１に示す送受信システム１０において、サービス送信システム１００は、各コンポーネントストリーム（ビデオストリームＶＳ、データサービスストリームＤＳ、サブタイトルストリームＳＳ）に、それぞれのコンポーネントストリームが持つコンポーネントデータ（伝送ビデオデータ、イメージデータ、グラフィックスデータ、字幕データ）のダイナミックレンジ情報を挿入する。そのため、受信側において各コンポーネントデータをそれぞれのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理を施した後に合成して出力データを得ることが可能となる。   As described above, in the transmission / reception system 10 shown in FIG. 1, the service transmission system 100 uses the component data (transmission video) of each component stream (video stream VS, data service stream DS, subtitle stream SS) in each component stream. Data, image data, graphics data, caption data) dynamic range information is inserted. Therefore, on the receiving side, it is possible to obtain the output data by performing the luminance mapping processing on the component data based on the respective dynamic range information so as to match the display performance and then synthesizing them.

この場合、この出力データに施す電光変換の特性を固定できることから（図１２のＨＤＲ電光変換部２１４参照）、電光変換特性の切り替えに起因する画乱れの発生を防止することが可能となる。例えば、ビデオデータによる画像と共にグラフィックス表示がされるときに、ビデオデータによる画像がＳＤＲからＨＤＲあるいはＨＤＲからＳＤＲに切り換わったとしても、グラフィックス表示における色や明るさが変化することはなくなる。また、この場合、各コンポーネントデータに表示性能に合うように輝度マッピング処理が施されることから、各コンポーネントデータによる表示を常に適切な輝度状態で表示することが可能となる。   In this case, since the characteristic of the electro-optical conversion applied to the output data can be fixed (see the HDR electro-optical conversion unit 214 in FIG. 12), it is possible to prevent the occurrence of image disturbance due to the switching of the electro-optical conversion characteristic. For example, when graphics are displayed together with an image of video data, even if the image of video data is switched from SDR to HDR or from HDR to SDR, the color and brightness in the graphics display will not change. Further, in this case, since the brightness mapping processing is performed on each component data so as to match the display performance, it is possible to always display each component data in an appropriate brightness state.

例えば、図１７（ａ），（ｂ）は、放送サービスの一つとして存在する、いわゆる“ｄボタン”操作によるグラフィックス表示の例を示している。右上の小窓に伝送ビデオデータによる動画像が表示され、左下にイメージデータによる静止画像が表示されている。   For example, FIGS. 17 (a) and 17 (b) show an example of graphics display by a so-called "d button" operation, which exists as one of broadcasting services. A moving image based on the transmitted video data is displayed in the small window on the upper right, and a still image based on the image data is displayed on the lower left.

図１７（ａ）は、伝送ビデオデータがＳＤＲ伝送ビデオデータであるかＨＤＲ伝送ビデオデータであるかによって伝送ビデオデータに施す電光変換の特性を切り替える場合の例である。この場合には、ＳＤＲの画像表示時とＨＤＲの画像表示時の切替えの際にグラフィックス表示の色や輝度が影響される。   FIG. 17A shows an example in which the characteristics of electro-optical conversion applied to transmission video data are switched depending on whether the transmission video data is SDR transmission video data or HDR transmission video data. In this case, the color and brightness of the graphics display are affected when switching between the SDR image display and the HDR image display.

図１７（ｂ）は、本技術のように、伝送ビデオデータがＳＤＲ伝送ビデオデータであるかＨＤＲ伝送ビデオデータであるかによらずに伝送ビデオデータに施す電光変換の特性を固定とする場合の例である。この場合には、ＳＤＲの画像表示時とＨＤＲの画像表示時の切替えの際にグラフィックス表示の色や輝度が影響されるということがなくなる。   FIG. 17B shows a case where the characteristic of electro-optical conversion applied to transmission video data is fixed regardless of whether the transmission video data is SDR transmission video data or HDR transmission video data as in the present technology. Here is an example. In this case, the color and brightness of the graphics display are not affected when switching between the SDR image display and the HDR image display.

また、図１に示す送受信システム１０において、サービス送信システム１００は、各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータの色域情報を挿入する。そのため、受信側において各コンポーネントデータをそれぞれの色域情報に基づいて表示性能に合うように色域変換を施した後に合成して出力データを得ることが可能となり、各コンポーネントデータによる表示を常に適切な色状態で表示することが可能となる。   In the transmission / reception system 10 shown in FIG. 1, the service transmission system 100 inserts the color gamut information of the component data of each component stream into each component stream. Therefore, on the receiving side, it is possible to obtain output data by performing color gamut conversion on each component data based on the respective color gamut information so as to match the display performance, and then obtaining output data. It is possible to display in various color states.

＜２．変形例＞
なお、上述実施の形態においては、サービス送信システム１００およびサービス受信機２００により構成される送受信システム１０を示したが、本技術を適用し得る送受信システムの構成は、これに限定されるものではない。例えば、サービス受信機２００が、例えば、ＨＤＭＩ（High-Definition Multimedia Interface）などのデジタルインタフェースで接続されたセットトップボックス（ＳＴＢ）およびモニタからなる構成であってもよい。なお、「ＨＤＭＩ」は、登録商標である。 <2. Modification>
Although the transmission / reception system 10 including the service transmission system 100 and the service receiver 200 has been described in the above embodiment, the configuration of the transmission / reception system to which the present technology can be applied is not limited to this. .. For example, the service receiver 200 may be configured to include a set top box (STB) and a monitor that are connected by a digital interface such as HDMI (High-Definition Multimedia Interface). “HDMI” is a registered trademark.

また、上述実施の形態においては、コンテナがＭＰＥＧ−２ ＴＳ（MPEG-2 Transport Stream）あるいはＭＭＴ（MPEG Media Transport）のトランスポートストリームである例を示した。しかし、本技術を適用し得るコンテナは、これに限定されるものではなく、ＭＰ４などの他のフォーマットのコンテナであってもよい。   Further, in the above-described embodiment, an example in which the container is a transport stream of MPEG-2 TS (MPEG-2 Transport Stream) or MMT (MPEG Media Transport) has been shown. However, the container to which the present technology can be applied is not limited to this, and may be a container of another format such as MP4.

また、本技術は、以下のような構成を取ることもできる。
（１）複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリームと共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームを含む所定フォーマットのコンテナを送信する送信部と、
上記各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報を挿入する情報挿入部を備える
送信装置。
（２）上記情報挿入部は、
上記各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータの色域情報をさらに挿入する
前記（１）に記載の送信装置。
（３）上記コンテナのレイヤに、該コンテナに含まれる上記第１のコンポーネントストリームが持つ伝送ビデオデータの種類を示す識別情報を、切り替えタイミングより所定の時間量以上だけ前のタイミングから切り替え後の伝送ビデオデータの種類を示すように挿入する情報挿入部をさらに備える
前記（１）または（２）に記載の送信装置。
（４）上記所定数の第２のコンポーネントストリームには、データ放送ストリームおよび/またはサブタイトルストリームが含まれる
前記（１）から（３）のいずれかに記載の送信装置。
（５）送信部により、複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリームと共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームを含む所定フォーマットのコンテナを送信する送信ステップと、
上記各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報を挿入する情報挿入ステップを有する
送信方法。
（６）複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリームと共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームを含む所定フォーマットのコンテナを受信する受信部を備え、
上記各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報が挿入されており、
上記各コンポーネントストリームをデコードして複数のコンポーネントデータを得、該得られた複数のコンポーネントデータを合成して出力データを得る処理部をさらに備え、
上記処理部は、
上記各コンポーネントデータを、それぞれのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理を施した後に合成して上記出力データを得る
受信装置。
（７）上記各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータの色域情報がさらに挿入されており、
上記処理部は、
上記各コンポーネントデータを、それぞれの色域情報に基づいて表示性能に合うように色域変換処理を施した後に合成して上記出力データを得る
前記（６）に記載の受信装置。
（８）受信部により、複数の種類の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つ第１のコンポーネントストリームと共に、他のコンポーネントデータを持つ所定数の第２のコンポーネントストリームを含む所定フォーマットのコンテナを受信する受信ステップを有し、
上記各コンポーネントストリームに、それぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報が挿入されており、
上記各コンポーネントストリームをデコードして複数のコンポーネントデータを得、該得られた複数のコンポーネントデータを合成して出力データを得る処理ステップをさらに有し、
上記処理ステップでは、
上記各コンポーネントデータを、それぞれのダイナミックレンジ情報に基づいて表示性能に合うように輝度マッピング処理を施した後に合成して上記出力データを得る
受信方法。 Further, the present technology may also be configured as below.
(1) A predetermined format including a first component stream having transmission video data obtained by switching a plurality of types of transmission video data as component data and a predetermined number of second component streams having other component data. A transmitter that sends the container,
A transmitting device comprising an information insertion unit that inserts dynamic range information of component data of each component stream into each of the component streams.
(2) The information insertion part is
The transmission device according to (1), wherein the color gamut information of the component data of each component stream is further inserted into each of the component streams.
(3) In the layer of the container, the identification information indicating the type of the transmission video data included in the first component stream included in the container is transmitted after switching from a timing that is a predetermined time amount or more before the switching timing. The transmission device according to (1) or (2), further including an information insertion unit that is inserted to indicate the type of video data.
(4) The transmission device according to any one of (1) to (3), wherein the predetermined number of second component streams includes a data broadcast stream and / or a subtitle stream.
(5) With the first component stream having the transmission video data obtained by switching the plurality of types of transmission video data as component data by the transmission unit, a predetermined number of second component streams having other component data are provided. A sending step of sending a container in a predetermined format including:
A transmission method comprising an information insertion step of inserting dynamic range information of component data of each component stream into each of the component streams.
(6) A predetermined format including a first component stream having transmission video data obtained by switching a plurality of types of transmission video data as component data and a predetermined number of second component streams having other component data. It has a receiving unit that receives the container,
The dynamic range information of the component data of each component stream is inserted in each of the above component streams,
Further comprising a processing unit that decodes each of the component streams to obtain a plurality of component data, synthesizes the obtained plurality of component data to obtain output data,
The processing unit is
A receiving apparatus that obtains the output data by performing a luminance mapping process on the respective component data so as to match the display performance based on the respective dynamic range information and then synthesizing the component data.
(7) The color gamut information of the component data of each component stream is further inserted in each of the above component streams,
The processing unit is
The receiving device according to (6), wherein the component data is subjected to color gamut conversion processing based on the color gamut information so as to match display performance, and then combined to obtain the output data.
(8) The receiving unit generates a predetermined number of second component streams having other component data together with the first component stream having the transmission video data obtained by switching the plurality of types of transmission video data as component data. A receiving step of receiving a container of a predetermined format including
The dynamic range information of the component data of each component stream is inserted in each of the above component streams,
Further comprising a processing step of decoding each of the component streams to obtain a plurality of component data, synthesizing the obtained plurality of component data to obtain output data,
In the above processing step,
A receiving method for obtaining the output data by subjecting each of the component data to a luminance mapping process based on respective dynamic range information so as to match display performance and then synthesizing the components.

本技術の主な特徴は、各コンポーネントストリームにそれぞれのコンポーネントストリームが持つコンポーネントデータのダイナミックレンジ情報を挿入して送信することで、受信側における電光変換の特性の固定を可能とし、電光変換特性の切り替えに起因する画乱れの発生を防止可能としたことである（図２参照）。   The main feature of this technology is that by inserting the dynamic range information of the component data of each component stream into each component stream and transmitting it, it is possible to fix the characteristics of the electrical-optical conversion on the receiving side, and That is, it is possible to prevent the occurrence of image disturbance due to switching (see FIG. 2).

１０・・・送受信システム
１００・・・サービス送信システム
１０１・・・制御部
１０２・・・ビデオエンコーダ
１０３・・・データサービスエンコーダ
１０４・・・静止画エンコーダ
１０５・・・サブタイトルエンコーダ
１０６・・・コンテナエンコーダ
１０７・・・送信部
２００・・・サービス受信機
２０１・・・制御部
２０２・・・受信部
２０３・・・コンテナデコーダ
２０４・・・ビデオデコーダ
２０５・・・データサービスデコーダ
２０６・・・静止画デコーダ
２０７・・・サブタイトルデコーダ
２０８・・・ＯＳＤ部
２０９・・・画面合成処理部
２１０・・・モニタ
２１１ａ，２１１ｂ，２１１ｃ，２１１ｄ・・・色域変換部
２１２ａ，２１２ｂ，２１２ｃ，２１２ｄ・・・輝度マッピング部
２１３・・・合成部
２１４・・・ＨＤＲ電光変換部
２２１・・・電光変換部（ＥＯＴＦ部）
２２２・・・光電変換部（ＯＥＴＦ部）
２３１・・・ＳＤＲ電光変換部
２３２・・・ＨＤＲ光電変換部
２４１・・・ＨＤＲ１電光変換部
２４２・・・ＨＤＲ２光電変換部
２５１・・・ＨＤＲ電光変換部
２５２・・・ＳＤＲ光電変換部 10 ... Transmission / reception system 100 ... Service transmission system 101 ... Control unit 102 ... Video encoder 103 ... Data service encoder 104 ... Still image encoder 105 ... Subtitle encoder 106 ... Container Encoder 107 ... Transmission unit 200 ... Service receiver 201 ... Control unit 202 ... Reception unit 203 ... Container decoder 204 ... Video decoder 205 ... Data service decoder 206 ... Stationary Image decoder 207 ... Subtitle decoder 208 ... OSD unit 209 ... Screen synthesis processing unit 210 ... Monitor 211a, 211b, 211c, 211d ... Color gamut conversion unit 212a, 212b, 212c, 212d ... -Brightness mapping unit 213 ... Synthesis unit 214 ... HDR electro-optical conversion unit 221 ... electro-optical conversion unit (EOTF unit)
222 ... Photoelectric conversion part (OETF part)
231 ... SDR electro-optical conversion unit 232 ... HDR photoelectric conversion unit 241 ... HDR1 electro-optical conversion unit 242 ... HDR2 photoelectric conversion unit 251 ... HDR electro-optical conversion unit 252 ... SDR photoelectric conversion unit

Claims (4)

ダイナミックレンジを異にする複数の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つビデオストリームと、他のコンポーネントデータの符号化データを含む所定フォーマットのコンテナを送信する送信部と、
上記コンテナのレイヤに、該コンテナに含まれる上記ビデオストリームが持つ伝送ビデオデータのダイナミックレンジ情報を、切り替えタイミングより所定の時間量だけ前のタイミングから切り替え後の伝送ビデオデータのダイナミックレンジを示すように挿入する情報挿入部を備える
送信装置。 A video stream having transmission video data obtained by switching a plurality of transmission video data having different dynamic ranges as component data, and a transmission unit for transmitting a container of a predetermined format including encoded data of other component data,
In the layer of the container, the dynamic range information of the transmission video data included in the video stream included in the container is displayed so as to indicate the dynamic range of the transmission video data after switching from the timing before the switching timing by a predetermined time amount. A transmission device including an information insertion unit to be inserted. 送信部により、ダイナミックレンジを異にする複数の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つビデオストリームと、他のコンポーネントデータの符号化データを含む所定フォーマットのコンテナを送信する送信ステップと、
上記コンテナのレイヤに、該コンテナに含まれる上記ビデオストリームが持つ伝送ビデオデータのダイナミックレンジ情報を、切り替えタイミングより所定の時間量だけ前のタイミングから切り替え後の伝送ビデオデータのダイナミックレンジを示すように挿入する情報挿入ステップを有する
送信方法。 The transmitting unit transmits a video stream having transmission video data obtained by switching a plurality of transmission video data having different dynamic ranges as component data and a container of a predetermined format including encoded data of other component data. A send step,
In the layer of the container, the dynamic range information of the transmission video data included in the video stream included in the container is displayed so as to indicate the dynamic range of the transmission video data after switching from the timing before the switching timing by a predetermined time amount. A transmission method having an information insertion step of inserting. ダイナミックレンジを異にする複数の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つビデオストリームと、他のコンポーネントデータの符号化データを含む所定フォーマットのコンテナを受信する受信部と、
上記コンテナのレイヤに、該コンテナに含まれる上記ビデオストリームが持つ伝送ビデオデータのダイナミックレンジ情報が、切り替えタイミングより所定の時間量だけ前のタイミングから切り替え後の伝送ビデオデータのダイナミックレンジを示すように挿入されており、
上記ビデオストリームおよび上記符号化データをデコードして複数のコンポーネントデータを得、該得られた複数のコンポーネントデータを合成して出力データを得る処理部を備える
受信装置。 A video stream having transmission video data obtained by switching a plurality of transmission video data having different dynamic ranges as component data, and a receiving unit for receiving a container of a predetermined format including encoded data of other component data,
In the layer of the container, the dynamic range information of the transmission video data included in the video stream included in the container indicates the dynamic range of the transmission video data after switching from the timing before the switching timing by a predetermined time amount. Has been inserted,
A receiving device including a processing unit that decodes the video stream and the encoded data to obtain a plurality of component data, and combines the obtained plurality of component data to obtain output data. 受信部により、ダイナミックレンジを異にする複数の伝送ビデオデータを切り替えて得られた伝送ビデオデータをコンポーネントデータとして持つビデオストリームと、他のコンポーネントデータの符号化データを含む所定フォーマットのコンテナを受信する受信ステップと、
上記コンテナのレイヤに、該コンテナに含まれる上記ビデオストリームが持つ伝送ビデオデータのダイナミックレンジ情報が、切り替えタイミングより所定の時間量だけ前のタイミングから切り替え後の伝送ビデオデータのダイナミックレンジを示すように挿入されており、
上記ビデオストリームおよび上記符号化データをデコードして複数のコンポーネントデータを得、該得られた複数のコンポーネントデータを合成して出力データを得る処理ステップを有する
受信方法。 The receiving unit receives a video stream having transmission video data obtained by switching a plurality of transmission video data having different dynamic ranges as component data and a container of a predetermined format including encoded data of other component data. A receiving step,
In the layer of the container, the dynamic range information of the transmission video data included in the video stream included in the container indicates the dynamic range of the transmission video data after switching from the timing before the switching timing by a predetermined time amount. Has been inserted,
A receiving method comprising a processing step of decoding the video stream and the encoded data to obtain a plurality of component data, and synthesizing the obtained plurality of component data to obtain output data.
JP2020004923A 2019-04-25 2020-01-16 Transmitter, transmitter, receiver and receiver Active JP6958645B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020004923A JP6958645B2 (en) 2019-04-25 2020-01-16 Transmitter, transmitter, receiver and receiver

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019083495A JP6658944B2 (en) 2019-04-25 2019-04-25 Transmitting device, transmitting method, receiving device and receiving method
JP2020004923A JP6958645B2 (en) 2019-04-25 2020-01-16 Transmitter, transmitter, receiver and receiver

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019083495A Division JP6658944B2 (en) 2019-04-25 2019-04-25 Transmitting device, transmitting method, receiving device and receiving method

Publications (2)

Publication Number Publication Date
JP2020074572A true JP2020074572A (en) 2020-05-14
JP6958645B2 JP6958645B2 (en) 2021-11-02

Family

ID=70610313

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020004923A Active JP6958645B2 (en) 2019-04-25 2020-01-16 Transmitter, transmitter, receiver and receiver

Country Status (1)

Country Link
JP (1) JP6958645B2 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014528182A (en) * 2011-06-14 2014-10-23 コーニンクレッカ フィリップス エヌ ヴェ Graphic processing for high dynamic range video
WO2014178286A1 (en) * 2013-04-30 2014-11-06 ソニー株式会社 Transmission device, transmission method, receiving device, and receiving method
JP2015008361A (en) * 2013-06-24 2015-01-15 ソニー株式会社 Reproducing apparatuses, reproducing method and recording medium
WO2015007910A1 (en) * 2013-07-19 2015-01-22 Koninklijke Philips N.V. Hdr metadata transport
JP2016111692A (en) * 2014-12-03 2016-06-20 パナソニックＩｐマネジメント株式会社 Data generation method, data reproduction method, data generation device and data reproduction device
JP2018530237A (en) * 2015-09-23 2018-10-11 アリス エンタープライジズ エルエルシーＡｒｒｉｓ Ｅｎｔｅｒｐｒｉｓｅｓ Ｌｌｃ Transmission of high dynamic range and wide color gamut content in transport streams

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014528182A (en) * 2011-06-14 2014-10-23 コーニンクレッカ フィリップス エヌ ヴェ Graphic processing for high dynamic range video
WO2014178286A1 (en) * 2013-04-30 2014-11-06 ソニー株式会社 Transmission device, transmission method, receiving device, and receiving method
JP2015008361A (en) * 2013-06-24 2015-01-15 ソニー株式会社 Reproducing apparatuses, reproducing method and recording medium
WO2015007910A1 (en) * 2013-07-19 2015-01-22 Koninklijke Philips N.V. Hdr metadata transport
JP2016111692A (en) * 2014-12-03 2016-06-20 パナソニックＩｐマネジメント株式会社 Data generation method, data reproduction method, data generation device and data reproduction device
JP2018530237A (en) * 2015-09-23 2018-10-11 アリス エンタープライジズ エルエルシーＡｒｒｉｓ Ｅｎｔｅｒｐｒｉｓｅｓ Ｌｌｃ Transmission of high dynamic range and wide color gamut content in transport streams

Also Published As

Publication number Publication date
JP6958645B2 (en) 2021-11-02

Similar Documents

Publication Publication Date Title
US11916594B2 (en) Transmission apparatus, transmission method, reception apparatus, and reception method
CN111343460B (en) Receiving device, display equipment and receiving method
JP7396401B2 (en) Transmitting device, transmitting method, receiving device and receiving method
JP7384234B2 (en) Transmitting device, transmitting method, receiving device and receiving method
KR102477041B1 (en) Transmission device, transmission method, reception device and reception method
US11317170B2 (en) Transmission device, transmission method, reception device, and reception method
CN108476330B (en) Transmission device, transmission method, reception device, and reception method
JP6958645B2 (en) Transmitter, transmitter, receiver and receiver
JP6658944B2 (en) Transmitting device, transmitting method, receiving device and receiving method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200116

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210302

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210506

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210907

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210920

R151 Written notification of patent or utility model registration

Ref document number: 6958645

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151