JP6861873B2 - Video playback method - Google Patents

Video playback method Download PDF

Info

Publication number
JP6861873B2
JP6861873B2 JP2020105443A JP2020105443A JP6861873B2 JP 6861873 B2 JP6861873 B2 JP 6861873B2 JP 2020105443 A JP2020105443 A JP 2020105443A JP 2020105443 A JP2020105443 A JP 2020105443A JP 6861873 B2 JP6861873 B2 JP 6861873B2
Authority
JP
Japan
Prior art keywords
brightness
luminance
graphic
value
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020105443A
Other languages
Japanese (ja)
Other versions
JP2020162160A (en
Inventor
孝介 八木
孝介 八木
伸夫 竹下
伸夫 竹下
島田 昌明
昌明 島田
智 岸上
智 岸上
由則 渡辺
由則 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2020105443A priority Critical patent/JP6861873B2/en
Publication of JP2020162160A publication Critical patent/JP2020162160A/en
Priority to JP2021054700A priority patent/JP7069378B2/en
Application granted granted Critical
Publication of JP6861873B2 publication Critical patent/JP6861873B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本願明細書に開示される技術は、映像再生方法に関するものである。 The technique disclosed in the present specification relates to a video reproduction method.

映像コンテンツの高品質化に伴い、映像機器でも解像度だけでなく、色域および輝度域の拡大が行われている。また、従来からの相対輝度ベースの輝度曲線のほか、絶対輝度ベースの輝度曲線も採用されるようになってきた。 With the improvement of the quality of video contents, not only the resolution but also the color gamut and the brightness range are being expanded in the video equipment. Further, in addition to the conventional relative brightness-based brightness curve, an absolute brightness-based brightness curve has also been adopted.

たとえば、Ultra HD Blu−ray(登録商標)では、SMPTE ST2084で定義された絶対輝度ベースの輝度曲線を用いてコード化がなされており、輝度範囲としては0.005nitsから10000nitsの広輝度域の表現範囲を有している。 For example, Ultra HD Blu-ray (registered trademark) is coded using an absolute luminance-based luminance curve defined in SMPTE ST2084, and represents a wide luminance range of 0.005 to 10000 nits as a luminance range. Has a range.

ここで、輝度曲線はコード値と輝度とを結びつけるEOTF(Electro−Optical Transfer Function)を示すものとする。 Here, it is assumed that the brightness curve indicates an EOTF (Electro-Optical Transfer Function) that connects the code value and the brightness.

民生用表示装置としては、上記の輝度範囲を表現することは困難であるため、輝度域を調整し、表示装置の表示可能な範囲で表示することとなる。 Since it is difficult for a consumer display device to express the above-mentioned luminance range, the luminance range is adjusted to display within the displayable range of the display device.

たとえば、1000nitsまで表示可能な表示装置に4000nitsまで使用した映像コンテンツを表示する場合には、映像の輝度範囲を4000nitsから1000nitsとなるように輝度範囲の切り詰める、あるいは輝度変換関数による輝度範囲圧縮を行う。 For example, when displaying video content using up to 4000 nits on a display device capable of displaying up to 1000 nits, the brightness range of the image is truncated from 4000 nits to 1000 nits, or the brightness range is compressed by a brightness conversion function. ..

輝度範囲の変換方法には、輝度曲線を切り替える方法と、輝度のコード値を輝度情報に変換した上で輝度変換関数の処理を行う方法とがある。しかしながら、これらは手順が異なるだけで生じる効果としては同一であるため、特に言及しない限り、本明細書内ではこれらの手法を同一のものとして扱うものとする。 There are two methods for converting the luminance range: a method of switching the luminance curve and a method of converting the luminance code value into the luminance information and then processing the luminance conversion function. However, since they are the same in terms of the effect produced only by different procedures, these methods are treated as the same in the present specification unless otherwise specified.

この輝度域の調整は、再生装置内で行う場合と表示装置内で行う場合とがある。 The adjustment of the luminance range may be performed in the reproduction device or in the display device.

輝度範囲の調整を効率よく行うために、ヒント情報として映像コンテンツに各種のメタデータを追加することも行われている。メタデータとしては、たとえば、コンテンツ内の最大ピーク輝度、1フレーム平均輝度の最大値、輝度を優先するか階調を優先するかの情報、または、状況に応じた輝度曲線選択情報などが考えられる。 In order to efficiently adjust the brightness range, various metadata are added to the video content as hint information. As the metadata, for example, the maximum peak brightness in the content, the maximum value of the average brightness of one frame, information on whether to prioritize brightness or gradation, or brightness curve selection information according to the situation can be considered. ..

これらのメタデータは、コンテンツ全体で変化しない静的メタデータと、シーンごとあるいはフレームごとに最適なヒント情報を与える動的メタデータとに分類される。 These metadata are classified into static metadata that does not change throughout the content and dynamic metadata that gives optimal hint information for each scene or frame.

たとえば、Ultra HD Blu−ray(登録商標)では、SMPTE ST2086で定義されたメタデータを静的メタデータとして採用し、そのほかに技術ベンダーで定義された動的メタデータも使用されている。 For example, Ultra HD Blu-ray® employs the metadata defined in SMPTE ST2086 as static metadata, as well as dynamic metadata defined by technology vendors.

メタデータの利用方法としては、再生装置内で利用される場合と、表示装置に送られて表示装置内で利用される場合と、それら両方の組み合わせの場合とがある。 As a method of using the metadata, there are a case where it is used in a reproduction device, a case where it is sent to a display device and used in a display device, and a case where both are combined.

Blu−ray Disc(登録商標)などのコンテンツでは、メニューまたは字幕などのグラフィック機能を有しており、必要に応じてコンテンツ映像に合成されて表示される。グラフィックの合成は通常再生装置内で行われ、表示装置にコンテンツ映像と合成された状態で伝送されて表示されることとなる。表示装置内で輝度調整が行われる場合、合成されたグラフィック部分も輝度調整の影響を受けることになる。 Content such as Blu-ray Disc (registered trademark) has a graphic function such as a menu or subtitles, and is combined with the content video and displayed as needed. The graphics are usually combined in the playback device, and are transmitted and displayed on the display device in a state of being combined with the content video. When the brightness is adjusted in the display device, the synthesized graphic portion is also affected by the brightness adjustment.

これらの輝度調整技術にはさまざまな方法が提案されており、たとえば、特許文献1および特許文献2にも当該技術が開示されている。 Various methods have been proposed for these luminance adjusting techniques, and for example, the techniques are also disclosed in Patent Document 1 and Patent Document 2.

国際公開第2016/103968号International Publication No. 2016/103968 国際公開第2016/038950号International Publication No. 2016/038950

Blu−ray Disc(登録商標)などの、グラフィックをコンテンツ映像に合成してから表示装置に伝送する方式では、動的メタデータ制御によってグラフィックの輝度が揺らいでしまうという問題があった。 In a method such as Blu-ray Disc (registered trademark), in which a graphic is combined with a content image and then transmitted to a display device, there is a problem that the brightness of the graphic fluctuates due to dynamic metadata control.

本願明細書に開示される技術は、以上に記載されたような問題を解決するためになされたものであり、グラフィックの輝度の変化を抑制する技術を提供することを目的とするものである。 The technique disclosed in the present specification has been made to solve the above-mentioned problems, and an object thereof is to provide a technique for suppressing a change in the brightness of a graphic.

本願明細書に開示される技術の第1の態様は、映像コンテンツ媒体から映像ストリームと、メニューまたは字幕を含むグラフィック情報とを読み出して再生する映像再生方法であり、輝度調整手段として、変化しない調整値を使用する静的メタデータ方式と、変化する調整値を使用する動的メタデータ方式とを備え、グラフィック合成の際に前記輝度調整手段を切り替えて使用し、前記映像コンテンツ媒体から読み出されたグラフィック遷移時間情報を、前記輝度調整手段を切り替える際の遷移時間として使用する。 The first aspect of the technique disclosed in the present specification is a video reproduction method of reading and reproducing a video stream and graphic information including menus or subtitles from a video content medium, and as a brightness adjusting means, adjustment that does not change. It is provided with a static metadata method that uses a value and a dynamic metadata method that uses a changing adjustment value, and the brightness adjustment means is switched and used at the time of graphic composition, and is read from the video content medium. The graphic transition time information is used as the transition time when switching the brightness adjusting means.

本願明細書に開示される技術の第1の態様によれば、グラフィックの輝度の変化を抑制することができる。 According to the first aspect of the technique disclosed in the present specification, the change in the brightness of the graphic can be suppressed.

本願明細書に開示される技術に関する目的と、特徴と、局面と、利点とは、以下に示される詳細な説明と添付図面とによって、さらに明白となる。 The objectives, features, aspects and advantages of the technology disclosed herein will be further clarified by the detailed description and accompanying drawings set forth below.

実施の形態1を示す模式図である。It is a schematic diagram which shows Embodiment 1. FIG. 輝度調整曲線の例(表示最大輝度1000nitsの場合)を示す図である。It is a figure which shows the example of the luminance adjustment curve (in the case of display maximum luminance 1000 nits). 輝度調整曲線の例(表示最大輝度400nitsの場合)を示す図である。It is a figure which shows the example of the luminance adjustment curve (in the case of display maximum luminance 400 nits). 輝度調整曲線の合成を示す模式図である。It is a schematic diagram which shows the composition of the luminance adjustment curve. 実施の形態2を示す模式図である。It is a schematic diagram which shows the second embodiment. 輝度調整曲線の例(グラフィック輝度閾値300nits、表示最大輝度1000nitsの場合)を示す図である。It is a figure which shows the example of the luminance adjustment curve (in the case of graphic luminance threshold value of 300 nits, display maximum luminance 1000 nits). 輝度調整曲線の例(グラフィック輝度閾値300nits、表示最大輝度400nitsの場合)を示す図である。It is a figure which shows the example of the luminance adjustment curve (in the case of graphic luminance threshold value of 300 nits, display maximum luminance 400 nits). グラフィック輝度閾値による制御の例を示す図である。It is a figure which shows the example of the control by a graphic luminance threshold. グラフィック輝度閾値による制御の例(閾値を2つもつ場合)を示す図である。It is a figure which shows the example of the control by a graphic luminance threshold (when it has two thresholds). 実施の形態3を示す模式図である。It is a schematic diagram which shows Embodiment 3. 動的メタデータによる輝度調整の例を示す図である。It is a figure which shows the example of brightness adjustment by dynamic metadata. 輝度切替遷移時間の格納場所の例を示す図である。It is a figure which shows the example of the storage place of the luminance switching transition time. グラフィック輝度閾値、輝度切替遷移時間の格納場所の例を示す図である。It is a figure which shows the example of the storage place of a graphic luminance threshold value, and a luminance switching transition time.

以下、添付される図面を参照しながら実施の形態について説明する。 Hereinafter, embodiments will be described with reference to the attached drawings.

なお、図面は概略的に示されるものであり、説明の便宜のため、適宜、構成の省略、または、構成の簡略化がなされるものである。また、異なる図面にそれぞれ示される構成などの大きさおよび位置の相互関係は、必ずしも正確に記載されるものではなく、適宜変更され得るものである。 It should be noted that the drawings are shown schematically, and for convenience of explanation, the configuration is omitted or the configuration is simplified as appropriate. Further, the interrelationship between the sizes and positions of the configurations and the like shown in different drawings is not always accurately described and can be changed as appropriate.

また、以下に示される説明では、同様の構成要素には同じ符号を付して図示し、それらの名称と機能とについても同様のものとする。したがって、それらについての詳細な説明を、重複を避けるために省略する場合がある。 Further, in the description shown below, similar components are illustrated with the same reference numerals, and their names and functions are also the same. Therefore, detailed description of them may be omitted to avoid duplication.

<実施の形態1>
以下、本実施の形態に関する映像コンテンツ媒体および映像再生装置について説明する。
<Embodiment 1>
Hereinafter, the video content medium and the video playback device according to the present embodiment will be described.

グラフィックの有無によるコンテンツ映像の輝度変化は、視聴者に違和感を抱かせる。たとえば、メニューのオン/オフ、または、字幕の有無などのタイミングで急に背景となるコンテンツ映像の輝度が変化した場合などである。 The change in brightness of the content image depending on the presence or absence of graphics makes the viewer feel uncomfortable. For example, when the brightness of the background content image suddenly changes at the timing of turning on / off the menu or the presence / absence of subtitles.

以下の実施の形態では、グラフィックなしの場合に適用される通常の動的メタデータ処理と、グラフィック有りの場合に適用されるメタデータ処理との切り替えに遷移時間を設けて、コンテンツ映像の急な輝度変化を避け、違和感を軽減しようとする技術について説明する。 In the following embodiment, a transition time is provided for switching between the normal dynamic metadata processing applied when there is no graphic and the metadata processing applied when there is a graphic, and the content image is suddenly set. A technique for avoiding changes in brightness and reducing discomfort will be described.

図1は再生装置1000と表示装置2000の模式図である。図1に例示されるように、映像ストリームであるコンテンツ映像データ1110、メニューまたは字幕などのグラフィック情報であるグラフィックデータ1120、制御情報である動的メタデータ1130、および、制御情報である静的メタデータ1140、グラフィック遷移時間情報である輝度切替遷移時間1150は、たとえば、映像コンテンツ媒体としての光ディスクに格納されており、再生装置1000によって読み込まれる。 FIG. 1 is a schematic view of a reproduction device 1000 and a display device 2000. As illustrated in FIG. 1, content video data 1110 which is a video stream, graphic data 1120 which is graphic information such as menus or subtitles, dynamic metadata 1130 which is control information, and static metadata which is control information. The data 1140 and the brightness switching transition time 1150, which is the graphic transition time information, are stored in, for example, an optical disk as a video content medium, and are read by the playback device 1000.

グラフィック合成部1200は、コンテンツ映像データ1110とグラフィックデータ1120との合成を行って、グラフィックを含む映像データを作成する。グラフィックデータは、映像データの形で与えられる場合と、コンテンツ内に格納されたプログラムまたはコマンドリストによって動的に生成される場合と、それらの組み合わせによって生成される場合とがある。 The graphic synthesizing unit 1200 synthesizes the content video data 1110 and the graphic data 1120 to create video data including graphics. The graphic data may be given in the form of video data, may be dynamically generated by a program or command list stored in the content, or may be generated by a combination thereof.

グラフィックデータは、たとえば字幕用データであり、また、たとえばポップアップメニューなどであり、コンテンツ再生の進行あるいはユーザーの操作によって表示および非表示が切り替わることがある。 The graphic data is, for example, subtitle data, for example, a pop-up menu, etc., and may be displayed or hidden depending on the progress of content playback or a user operation.

コンテンツ映像データ1110およびグラフィックデータ1120は、圧縮化または多重化などの処理を行った形で格納されており、実際に合成を行う前にはデコード処理または描画処理などを行って映像に戻しておく必要があるが、ここでは簡単のため説明を省略している。 The content video data 1110 and the graphic data 1120 are stored in a form that has been subjected to processing such as compression or multiplexing, and are returned to the video by performing decoding processing or drawing processing before actually performing the composition. It is necessary, but the explanation is omitted here for the sake of simplicity.

動的メタデータ1130は、コンテンツ映像データ1110と時間同期的に結びついており、コンテンツ映像データ1110を含む多重化ストリーム内あるいは別ストリームとして格納されている。 The dynamic metadata 1130 is time-synchronized with the content video data 1110 and is stored in or as a separate stream in the multiplexed stream containing the content video data 1110.

静的メタデータ1140は、たとえばSMPTE ST2086で定義されたメタデータのセットであり、コンテンツ全体の最大輝度を表すMaxCLL、および、1画面内平均値の最大値を示すMaxFALLなどの値を格納している。図12においては、静的メタデータ3100に、コンテンツ最大輝度(MaxCLL)3110と、コンテンツのフレーム平均輝度最大値(MaxFALL)3120とが、輝度遷移時間3130とともに格納されていることが示されている。 The static metadata 1140 is, for example, a set of metadata defined by SMPTE ST2086, and stores values such as MaxCLL indicating the maximum brightness of the entire content and MaxFALL indicating the maximum value of the average value in one screen. There is. In FIG. 12, it is shown that the content maximum luminance (MaxCLL) 3110 and the content frame average luminance maximum value (MaxFALL) 3120 are stored together with the luminance transition time 3130 in the static metadata 3100. ..

輝度切替遷移時間1150は、輝度域調整を切り替える際の遷移時間を格納している。輝度切替遷移時間1150は、光ディスクなどに格納する際に図12の輝度遷移時間3130で示されるように、他の静的メタデータと同じ位置に格納しておくことができ、それを読み出して使用する。また、輝度切替遷移時間1150は、再生装置1000内および表示装置2000内に、設定値としてあらかじめ格納しておくこともできる。 The brightness switching transition time 1150 stores the transition time when switching the brightness range adjustment. The luminance switching transition time 1150 can be stored at the same position as other static metadata as shown by the luminance transition time 3130 in FIG. 12 when stored on an optical disk or the like, and is read out and used. To do. Further, the luminance switching transition time 1150 can be stored in advance as a set value in the reproduction device 1000 and the display device 2000.

グラフィック有無通知部1300は、現在グラフィック表示が行われているかどうかを判断して、表示装置2000に送出する。 The graphic presence / absence notification unit 1300 determines whether or not the graphic display is currently being performed, and sends the graphic display to the display device 2000.

これらのデータは、たとえばHDMI(登録商標)などのインターフェースを通して表示装置2000に送られる。動的メタデータ1130、静的メタデータ1140および輝度切替遷移時間1150は、InfoFrameと呼ばれる映像データとは別系統のデータとして送られる。または、動的メタデータ1130、静的メタデータ1140および輝度切替遷移時間1150は、映像信号に重畳して表示装置2000に送られることもある。なお、グラフィック有無通知部1300で作成された通知データの送出も同様である。 These data are sent to the display device 2000 through an interface such as HDMI®. The dynamic metadata 1130, the static metadata 1140, and the luminance switching transition time 1150 are sent as data of a system different from the video data called InfoFrame. Alternatively, the dynamic metadata 1130, the static metadata 1140, and the luminance switching transition time 1150 may be superimposed on the video signal and sent to the display device 2000. The same applies to the transmission of the notification data created by the graphic presence / absence notification unit 1300.

リニア変換部2100は、標準輝度曲線2500の変換曲線に従い、コンテンツ映像データを、コード値からコンテンツ輝度値を表すリニア値に変換する。輝度調整部2200は、表示装置の特性に合わせてコンテンツ輝度値を実際に表示する輝度に変換する。表示部2300は、輝度調整部2200で調整された輝度値でコンテンツの映像を表示する。 The linear conversion unit 2100 converts the content video data from the code value to the linear value representing the content brightness value according to the conversion curve of the standard brightness curve 2500. The brightness adjusting unit 2200 converts the content brightness value into the brightness to be actually displayed according to the characteristics of the display device. The display unit 2300 displays the image of the content with the brightness value adjusted by the brightness adjustment unit 2200.

表示装置特性値は、たとえば表示部2300で表示可能な輝度範囲、シネマモードまたはスポーツモードなどの画質調整値、または、表示装置周辺の環境光情報などである。輝度調整曲線作成部2400は、表示装置特性値2600、動的メタデータ1130、静的メタデータ1140および輝度切替遷移時間1150を用いて、状況に適した輝度調整曲線を作成し、輝度調整部2200を制御する。 The display device characteristic value is, for example, a brightness range that can be displayed on the display unit 2300, an image quality adjustment value such as a cinema mode or a sports mode, or ambient light information around the display device. The brightness adjustment curve creation unit 2400 creates a brightness adjustment curve suitable for the situation by using the display device characteristic value 2600, the dynamic metadata 1130, the static metadata 1140, and the brightness switching transition time 1150, and the brightness adjustment unit 2200. To control.

図2を用いて、輝度調整部2200および輝度調整曲線作成部2400の動作を説明する。図2に示されているのは、表示部2300の最大表示輝度が1000nitsの場合の例である。簡単のため輝度調整曲線が直線として描画されているが、実際には人間の視覚特性を考慮した曲線を利用することが多い。 The operation of the luminance adjusting unit 2200 and the luminance adjusting curve creating unit 2400 will be described with reference to FIG. FIG. 2 shows an example in which the maximum display brightness of the display unit 2300 is 1000 nits. For the sake of simplicity, the brightness adjustment curve is drawn as a straight line, but in reality, a curve that takes into consideration human visual characteristics is often used.

図2の横軸は、映像データのコンテンツ輝度値の絶対値表現である。ST2084で表現された映像データの場合、輝度範囲は最大10000nitsまで表現可能である。 The horizontal axis of FIG. 2 is an absolute value representation of the content luminance value of the video data. In the case of the video data represented by ST2084, the brightness range can be represented up to 10000 nits.

図2の縦軸は、実際に画面に表示する表示輝度値である。表示部2300が10000nitsまで表示可能な理想的な表示装置である場合、コンテンツ輝度値と表示輝度値とは同一となる。つまり、図2中の1:1を示す直線Nが輝度調整曲線となり、変化させる必要はない。 The vertical axis of FIG. 2 is the display luminance value actually displayed on the screen. When the display unit 2300 is an ideal display device capable of displaying up to 10000 nits, the content luminance value and the display luminance value are the same. That is, the straight line N showing 1: 1 in FIG. 2 becomes the luminance adjustment curve, and it is not necessary to change it.

実際の表示部2300では、10000nits全てを表示できるわけではない。現時点で市販されているテレビでは、普及機で400nits以下、高輝度対応を特徴とする高級機であっても1000nits前後である。 The actual display unit 2300 cannot display all 10000 nits. The TVs on the market at the present time are 400 nits or less for popular machines, and about 1000 nits even for high-end machines characterized by high brightness.

コンテンツ輝度値をそのまま表示しようとした場合、輝度調整曲線Bで示したように、最大表示輝度まではコンテンツ輝度値に忠実であり、最大表示輝度以上になるとクリップされて、全て最大表示輝度として表示されることになる。この場合、最大表示輝度を超える高輝度部分の映像は損なわれてしまうことになる。 When trying to display the content brightness value as it is, as shown by the brightness adjustment curve B, it is faithful to the content brightness value up to the maximum display brightness, and when it exceeds the maximum display brightness, it is clipped and all are displayed as the maximum display brightness. Will be done. In this case, the image of the high-luminance portion exceeding the maximum display brightness is damaged.

そこで、コンテンツ輝度の最大値を用いて輝度調整曲線を変化させることが行われる。つまり、コンテンツ輝度の最大値が1000nits以下の場合には輝度調整曲線Bを、1500nitsの場合には輝度調整曲線Cを、2000nitsの場合には輝度調整曲線Dをそれぞれ使用する。 Therefore, the brightness adjustment curve is changed by using the maximum value of the content brightness. That is, when the maximum value of the content brightness is 1000 nits or less, the brightness adjustment curve B is used, when it is 1500 nits, the brightness adjustment curve C is used, and when it is 2000 nits, the brightness adjustment curve D is used.

この輝度調整曲線を作成する際の基準に、コンテンツ全体での最大輝度値を用いるのが静的メタデータ制御であり、シーンごとフレームごとの最大輝度値を用いるのが動的メタデータ制御である。 Static metadata control uses the maximum brightness value for the entire content as a reference when creating this brightness adjustment curve, and dynamic metadata control uses the maximum brightness value for each frame for each scene. ..

ここでは、輝度調整曲線の作成にコンテンツの最大輝度値を用いているように説明しているが、実際にはコンテンツの平均輝度値、高輝度および低輝度のうちどちらを重視するか、画質モードの設定、または、環境光などを考慮して、輝度調整曲線を作成する。 Here, it is explained that the maximum brightness value of the content is used to create the brightness adjustment curve, but in reality, which of the average brightness value, the high brightness and the low brightness of the content is emphasized, the image quality mode. Create a brightness adjustment curve in consideration of the settings or ambient light.

静的メタデータ制御の場合、コンテンツ映像の再生中最初から最後まで輝度調整曲線が変化しない。コンテンツの最大輝度値が2000nitsであれば、輝度調整曲線Dをコンテンツ全体に適用することになる。そのため、再生中に本来の映像にない輝度の変化は発生しない。 In the case of static metadata control, the brightness adjustment curve does not change from the beginning to the end during playback of the content video. If the maximum luminance value of the content is 2000 bits, the luminance adjustment curve D is applied to the entire content. Therefore, there is no change in brightness that is not present in the original video during playback.

一方、高輝度シーンが一部にしか存在しない場合でも、コンテンツ全体の輝度を下げて再生するため、全体の印象が暗くなってしまう。また、輝度域の圧縮率が高いため、輝度の階調を損なう可能性が高くなってしまう。 On the other hand, even if a high-brightness scene exists only in a part of the content, the brightness of the entire content is lowered and the content is reproduced, so that the overall impression becomes dark. In addition, since the compression rate in the luminance region is high, there is a high possibility that the gradation of luminance is impaired.

動的メタデータ制御の場合、コンテンツ映像の再生中に、たとえばシーンごとに輝度調整曲線を変化させる。再生中のシーンが1000nits以下であれば輝度調整曲線Bを、2000nitsまで使用しているシーンには輝度調整曲線Dをそれぞれ適用する。それぞれのシーンに応じて最適な輝度調整曲線を使用するため、輝度の階調を損なう可能性を低くすることができる。 In the case of dynamic metadata control, the brightness adjustment curve is changed for each scene, for example, during playback of the content video. If the scene being played is 1000 nits or less, the brightness adjustment curve B is applied, and if the scene is used up to 2000 nits, the brightness adjustment curve D is applied. Since the optimum brightness adjustment curve is used for each scene, the possibility of impairing the gradation of brightness can be reduced.

一方で、シーンごとに基準となる明るさが変化してしまう。たとえば、同じ風景であっても画角内に太陽が写っている場合には全体が暗く、太陽が写っていない場合には全体が明るく表示されてしまう。 On the other hand, the standard brightness changes for each scene. For example, even in the same landscape, if the sun is reflected within the angle of view, the whole is dark, and if the sun is not reflected, the whole is displayed bright.

通常のシーンであれば、このような輝度の変化はあまり問題にならない。人間の視覚も状況に合わせて変化しているため、シーンが変わった場合に画像の輝度が変化しても違和感は小さい。 In a normal scene, such a change in brightness does not matter much. Since human vision also changes according to the situation, there is little discomfort even if the brightness of the image changes when the scene changes.

字幕またはポップアップメニューなどのグラフィックが表示されている場合には、動的メタデータ制御による輝度変化が問題となる。グラフィックはシーンとは無関係に表示されるため、ユーザーはシーンに係らず同じ輝度で表示されることを期待しており、動的メタデータ制御による輝度調整曲線の変化でグラフィック部分の輝度が変化することには、違和感が大きい。 When graphics such as subtitles or pop-up menus are displayed, the change in brightness due to dynamic metadata control becomes a problem. Since the graphic is displayed independently of the scene, the user expects it to be displayed with the same brightness regardless of the scene, and the brightness of the graphic part changes due to the change of the brightness adjustment curve by dynamic metadata control. There is a great sense of discomfort in that.

図2では、グラフィックがコンテンツ輝度値200nitsで描画されている場合の例を示している。輝度調整曲線Bの場合、コンテンツ輝度値と同じ200nitsの表示輝度値となるが、映像の変化で輝度調整曲線Dに切り替わった場合、グラフィックが変化していないにもかかわらず表示輝度値は200nitsよりも小さな値に変化してしまう。 FIG. 2 shows an example in which the graphic is drawn with a content luminance value of 200 nits. In the case of the brightness adjustment curve B, the display brightness value is 200 nits, which is the same as the content brightness value, but when the brightness adjustment curve D is switched to due to a change in the image, the display brightness value is 200 nits even though the graphic has not changed. Also changes to a small value.

この変化は、表示部2300の最大表示輝度が低い場合には顕著になる。図3は、最大表示輝度が400nitsの場合の例である。最大表示輝度にあわせて輝度調整曲線も変わっており、輝度調整曲線Ax、輝度調整曲線Bx、輝度調整曲線Cxおよび輝度調整曲線Dxとなっている。 This change becomes remarkable when the maximum display brightness of the display unit 2300 is low. FIG. 3 is an example when the maximum display brightness is 400 nits. The brightness adjustment curve is also changed according to the maximum display brightness, and is a brightness adjustment curve Ax, a brightness adjustment curve Bx, a brightness adjustment curve Cx, and a brightness adjustment curve Dx.

200nitsでグラフィックが描画されている場合に、コンテンツの最大輝度が400nitsから2000nitsに変化すると輝度調整曲線は輝度調整曲線Axから輝度調整曲線Dxに変化し、200nitsで描画されているグラフィック部分は、200nitsよりも小さな値に変化してしまう。 When the graphic is drawn at 200 nits, when the maximum brightness of the content changes from 400 nits to 2000 nits, the brightness adjustment curve changes from the brightness adjustment curve Ax to the brightness adjustment curve Dx, and the graphic part drawn at 200 nits is 200 nits. It changes to a smaller value than.

このようなグラフィック部分の輝度変化を防ぐ方法として、グラフィックが表示される際には動的メタデータ制御を行わず輝度変換曲線を固定する方法が考えられる。たとえば、グラフィック表示がオンになった場合には動的メタデータ制御から静的メタデータ制御に切り替え、グラフィック表示がオフになった場合には静的メタデータ制御から動的メタデータ制御に切り替える。あるいは、グラフィック表示がオンになる場合にその時点の動的メタデータ制御で作成された輝度変換曲線に固定して、その後動的メタデータの値を反映しないように制御し、グラフィック表示がオフになる場合に以降に再び動的メタデータの値を反映する動的メタデータ制御を行う。 As a method of preventing such a change in the brightness of the graphic portion, a method of fixing the brightness conversion curve without performing dynamic metadata control when the graphic is displayed can be considered. For example, when graphic display is turned on, it switches from dynamic metadata control to static metadata control, and when graphic display is turned off, it switches from static metadata control to dynamic metadata control. Alternatively, when the graphic display is turned on, it is fixed to the brightness conversion curve created by the dynamic metadata control at that time, and then controlled so that the value of the dynamic metadata is not reflected, and the graphic display is turned off. If this happens, the dynamic metadata control that reflects the dynamic metadata value is performed again.

このように、輝度変換曲線の制御をグラフィックの有無に応じて変更することで、グラフィック表示中のグラフィック部分の輝度の変化を抑制することが可能である。一方で、グラフィックの有無に応じて輝度変換曲線が変化してしまうため、再生中のシーンとは無関係な輝度変化がコンテンツ映像に発生してしまい別の違和感を発生させることになる。 In this way, by changing the control of the luminance conversion curve according to the presence or absence of the graphic, it is possible to suppress the change in the luminance of the graphic portion during the graphic display. On the other hand, since the luminance conversion curve changes depending on the presence or absence of the graphic, the luminance change irrelevant to the scene being played occurs in the content video, which causes another discomfort.

本実施の形態では、グラフィックの有無に応じて輝度曲線の制御を切り替える方式で発生する切替時の違和感を、遷移時間を設けることで軽減する方法について説明する。 In the present embodiment, a method of reducing the discomfort at the time of switching generated by the method of switching the control of the luminance curve according to the presence or absence of the graphic by providing a transition time will be described.

図1の再生装置1000は、図12の光ディスク上のプレイリストデータ3000に格納されている輝度遷移時間3130を読み出し、輝度切替遷移時間1150として使用する。 The reproduction device 1000 of FIG. 1 reads out the luminance transition time 3130 stored in the playlist data 3000 on the optical disc of FIG. 12 and uses it as the luminance switching transition time 1150.

再生装置1000は、HDMI(登録商標)等のインターフェースを通して表示装置2000に輝度切替遷移時間1150を送出する。表示装置2000は、輝度切替遷移時間1150を受け取ると、輝度調整曲線作成部2400で使用するパラメーターのひとつとして設定する。動的メタデータ1130および静的メタデータ1140も同様に、輝度調整曲線作成部2400に送られる。 The reproduction device 1000 sends a luminance switching transition time 1150 to the display device 2000 through an interface such as HDMI (registered trademark). When the display device 2000 receives the brightness switching transition time 1150, the display device 2000 sets it as one of the parameters used by the brightness adjustment curve creation unit 2400. The dynamic metadata 1130 and the static metadata 1140 are also sent to the luminance adjustment curve creation unit 2400.

利用者の操作あるいは再生の進行により、字幕またはメニューなどのグラフィックが表示する場合、グラフィック有無通知部1300によって、再生装置1000から表示装置2000にグラフィック表示の通知を行う。 When a graphic such as a subtitle or a menu is displayed due to the user's operation or the progress of playback, the graphic presence / absence notification unit 1300 notifies the display device 2000 of the graphic display from the playback device 1000.

グラフィック表示の通知は、インターフェースにグラフィック表示を示すフラグを設けることによって通知することができる。また、グラフィック表示の通知は、HDMI(登録商標)インターフェースに定義されているHDRタイプを示すフラグを切り替えることによって、通知することもできる。あるいは、グラフィック表示の通知は、動的メタデータの送信を止めることによって、表示装置2000側で検知することもできる。 The notification of the graphic display can be notified by setting a flag indicating the graphic display on the interface. The graphic display notification can also be notified by switching the flag indicating the HDR type defined in the HDMI (registered trademark) interface. Alternatively, the notification of the graphic display can be detected on the display device 2000 side by stopping the transmission of the dynamic metadata.

輝度調整曲線作成部2400は、グラフィック有無通知部1300からの通知によってグラフィックが表示されることを検知すると、動的メタデータ処理を止めて、固定的な輝度調整曲線に差し替えて輝度調整部2200に送出するようにする。 When the brightness adjustment curve creation unit 2400 detects that the graphic is displayed by the notification from the graphic presence / absence notification unit 1300, the brightness adjustment curve creation unit 2400 stops the dynamic metadata processing and replaces it with a fixed brightness adjustment curve to the brightness adjustment unit 2200. Send it out.

固定的な輝度調整曲線とは、たとえば静的メタデータ1140を用いて作成された輝度調整曲線を示す。この際、単純に処理を切り替えると、たとえば図2の輝度調整曲線Bから輝度調整曲線Dへの切替が発生し、再生中のコンテンツ映像の輝度がシーンとは無関係に突然低くなってしまう。そこで、輝度切替遷移時間1150で指定された時間をかけて連続的に使用する輝度調整曲線を変化させるようにする。 The fixed luminance adjustment curve refers to a luminance adjustment curve created using, for example, static metadata 1140. At this time, if the processing is simply switched, for example, the brightness adjustment curve B in FIG. 2 is switched to the brightness adjustment curve D, and the brightness of the content image being played is suddenly lowered regardless of the scene. Therefore, the brightness adjustment curve used continuously is changed over the time specified by the brightness switching transition time 1150.

図4は、表示装置内でのメタデータ処理切り替えの模式図である。コンテンツ映像用輝度調整曲線2410は、たとえば動的メタデータ1130を使用した輝度曲線調整であり、コンテンツ映像に適した輝度調整曲線である。グラフィック用輝度調整曲線2420は、たとえば静的メタデータ1140のみを用いた輝度調整曲線であり、輝度の変化しないグラフィックに適した輝度調整曲線である。 FIG. 4 is a schematic diagram of metadata processing switching in the display device. The brightness adjustment curve 2410 for the content image is, for example, a brightness curve adjustment using the dynamic metadata 1130, and is a brightness adjustment curve suitable for the content image. The graphic brightness adjustment curve 2420 is, for example, a brightness adjustment curve using only static metadata 1140, and is a brightness adjustment curve suitable for graphics in which the brightness does not change.

静的メタデータ1140は、事前に輝度調整曲線作成部2400に格納されている。出力映像に適用される輝度調整曲線は、これらの輝度調整曲線を合成部2430において合成比αで合成されたものとなる。グラフィック用輝度調整として、静的メタデータではなく閾値以下では輝度調整値が同一となるように動的メタデータを使用することもできる。 The static metadata 1140 is stored in the luminance adjustment curve creation unit 2400 in advance. The luminance adjustment curve applied to the output video is obtained by synthesizing these luminance adjustment curves in the compositing unit 2430 with a compositing ratio α. As the brightness adjustment for graphics, dynamic metadata can be used so that the brightness adjustment values are the same below the threshold value instead of the static metadata.

切替時には、合成部2430において、たとえば合成比αを輝度切替遷移時間1150で指定された時間をかけて0から1に連続的に変化させることによって、スムーズな切替を行うことができる。 At the time of switching, smooth switching can be performed, for example, by continuously changing the synthesis ratio α from 0 to 1 over the time specified by the luminance switching transition time 1150 in the synthesis unit 2430.

グラフィックが非表示に切り替わる場合も同様である。グラフィック有無通知部1300がグラフィック非表示を通知すると、輝度調整曲線作成部2400は、動的メタデータ制御を再開する。この際、輝度切替遷移時間で指定された時間をかけて合成比αを1から0に連続的に変化させることによって、スムーズに動的メタデータ制御に移行することができる。 The same applies when the graphic is hidden. When the graphic presence / absence notification unit 1300 notifies that the graphic is not displayed, the luminance adjustment curve creation unit 2400 resumes the dynamic metadata control. At this time, by continuously changing the composition ratio α from 1 to 0 over a time specified by the luminance switching transition time, it is possible to smoothly shift to the dynamic metadata control.

このようにして、グラフィック表示時の輝度調整曲線切替による違和感を軽減することが可能となる。 In this way, it is possible to reduce the discomfort caused by switching the brightness adjustment curve during graphic display.

上記の実施の形態では、単純にグラフィックの有無で輝度調整曲線作成部2400の動作を切り替えるようにしたが、字幕などのように短時間で表示および非表示を繰り返すグラフィックの場合には、時間的に近接したグラフィックを一群のグラフィックとみなし、個々のグラフィックのオンおよびオフでは、輝度調整曲線作成部2400の動作切替を行わせない方法を採用することもできる。 In the above embodiment, the operation of the luminance adjustment curve creating unit 2400 is simply switched depending on the presence or absence of the graphic, but in the case of a graphic such as a subtitle that is repeatedly displayed and hidden in a short time, it is temporal. It is also possible to regard the graphics close to the graphic as a group of graphics and adopt a method in which the operation switching of the luminance adjustment curve creating unit 2400 is not performed when the individual graphics are turned on and off.

<実施の形態2>
本実施の形態に関する映像コンテンツ媒体および映像再生装置について説明する。以下の説明においては、以上に記載された実施の形態で説明された構成要素と同様の構成要素については同じ符号を付して図示し、その詳細な説明については適宜省略するものとする。以下に示されるのは、実施の形態1の変形例である。
<Embodiment 2>
The video content medium and the video playback device according to the present embodiment will be described. In the following description, components similar to the components described in the above-described embodiments will be illustrated with the same reference numerals, and detailed description thereof will be omitted as appropriate. Shown below is a modified example of the first embodiment.

グラフィック輝度閾値以下では共通の値を有し、かつ、グラフィック輝度閾値以上で異なる値を有する輝度調整曲線を使用することで、動的メタデータ制御を行う際にも、グラフィック輝度閾値以下では輝度変化のない輝度調整を行うことが考えられる。 By using a brightness adjustment curve that has a common value below the graphic brightness threshold and has different values above and below the graphic brightness threshold, the brightness changes below the graphic brightness threshold even when dynamic metadata control is performed. It is conceivable to perform brightness adjustment without threshold.

グラフィック輝度閾値をグラフィックで使用する最大輝度値よりも大きな値とすることで、動的メタデータ制御時にもグラフィックの輝度揺らぎを抑制することができる。 By setting the graphic luminance threshold value to a value larger than the maximum luminance value used in the graphic, it is possible to suppress the luminance fluctuation of the graphic even during dynamic metadata control.

一方で、閾値以下の輝度範囲では実質静的メタデータ制御となってしまい、階調が損なわれてしまうことになる。そのため、閾値ありの輝度調整曲線と閾値なしの輝度調整曲線とを併用し、切り替えて使用することが考えられる。この場合にも、実施の形態1の場合と同様に、切替時にシーンと無関係な輝度変化が発生することになる。本実施の形態では、閾値を有する輝度変換曲線の切替時に発生する輝度変化の違和感を軽減する方法について説明する。 On the other hand, in the brightness range below the threshold value, substantially static metadata control is performed, and the gradation is impaired. Therefore, it is conceivable to use the brightness adjustment curve with the threshold value and the brightness adjustment curve without the threshold value in combination and switch between them. Also in this case, as in the case of the first embodiment, the brightness change irrelevant to the scene occurs at the time of switching. In the present embodiment, a method for reducing the discomfort of the luminance change that occurs when the luminance conversion curve having a threshold value is switched will be described.

図5は、本実施の形態を説明する模式図であり、1161、1162は第1輝度閾値と第2輝度閾値であり、1151、1152は第1輝度切替遷移時間と第2輝度切替遷移時間である。 FIG. 5 is a schematic diagram illustrating the present embodiment, 1161 and 1162 are the first luminance threshold and the second luminance threshold, and 1151 and 1152 are the first luminance switching transition time and the second luminance switching transition time. is there.

ここでは、グラフィック輝度閾値と輝度切替遷移時間とはそれぞれ2つ用いて説明するが、それぞれ1つであってもよく、また2つ以上であってもかまわない。輝度閾値調整部1500は、状況に応じてグラフィック輝度閾値を調整する。輝度閾値調整部1500で調整されたグラフィック輝度閾値は、表示装置2000に送られる。 Here, the graphic luminance threshold value and the luminance switching transition time will be described using two each, but each may be one or two or more. The brightness threshold value adjusting unit 1500 adjusts the graphic brightness threshold value according to the situation. The graphic luminance threshold value adjusted by the luminance threshold value adjusting unit 1500 is sent to the display device 2000.

図6は、本実施の形態において用いられる輝度調整曲線の例である。図中のグラフィック輝度閾値は第1輝度閾値1161として説明されるが、第2輝度閾値1162の場合でも同様である。 FIG. 6 is an example of the brightness adjustment curve used in the present embodiment. The graphic luminance threshold in the figure is described as the first luminance threshold 1161, but the same applies to the case of the second luminance threshold 1162.

輝度調整曲線作成部2401は、第1輝度閾値1161を受け取った場合には、第1輝度閾値1161で設定された輝度以下では同値となり(図中のz)、それ以上ではコンテンツ輝度に応じて異なる値(図中のb、cまたはd)をとる輝度調整曲線を作成する。 When the brightness adjustment curve creation unit 2401 receives the first brightness threshold value 1161, the brightness becomes the same value below the brightness set by the first brightness threshold value 1161 (z in the figure), and differs depending on the content brightness above that value. Create a luminance adjustment curve that takes a value (b, c or d in the figure).

図6では、表示部2300の最大表示輝度が1000nitsの場合の例を示している。図7では、表示部2300の最大表示輝度が400nitsの場合の例を示している(図7中のzx、ax、bx、cxおよびdxを参照)。 FIG. 6 shows an example when the maximum display brightness of the display unit 2300 is 1000 nits. FIG. 7 shows an example when the maximum display brightness of the display unit 2300 is 400 nits (see zx, ax, bx, cx and dx in FIG. 7).

このようにして、第1輝度閾値1161で設定した輝度より高輝度の領域では、動的メタデータ制御を行いつつ、第1輝度閾値1161より低輝度の領域では、輝度調整による輝度の揺らぎを抑制することができる。 In this way, while dynamic metadata control is performed in the region having a brightness higher than the brightness set by the first luminance threshold 1161, the fluctuation of the luminance due to the luminance adjustment is suppressed in the region having a luminance lower than the first luminance threshold 1161. can do.

閾値を有さない輝度調整曲線と閾値を有する輝度調整曲線とを切り替える場合の映像輝度変化による違和感を軽減するため、グラフィック輝度閾値を連続的に変化させるようにする。 In order to reduce the discomfort due to the change in the image brightness when switching between the brightness adjustment curve having no threshold value and the brightness adjustment curve having a threshold value, the graphic brightness threshold value is continuously changed.

輝度閾値調整部1500は、グラフィック有無通知部1300から第1輝度閾値1161を適用する状態となった通知を受け取ると、第1輝度閾値1161と第1輝度切替遷移時間1151とを用いて表示装置2000に送出するグラフィック輝度閾値を作成する。 When the brightness threshold value adjusting unit 1500 receives a notification from the graphic presence / absence notification unit 1300 that the first brightness threshold value 1161 is applied, the brightness threshold value adjusting unit 1500 uses the first brightness threshold value 1161 and the first brightness switching transition time 1151 to display the display device 2000. Create a graphic brightness threshold to send to.

グラフィックは、コンテンツ再生の進行あるいはユーザーの操作によって表示および非表示が切り替わることがある。 The graphic may be displayed or hidden depending on the progress of content playback or the user's operation.

図8は、輝度閾値調整部1500から送出されるグラフィック輝度閾値の例である。第1輝度閾値1161が適用されない状態では、輝度閾値調整部1500が送出するグラフィック輝度閾値は0である。グラフィックが表示されるなど第1輝度閾値1161が適用される状態になると、輝度閾値調整部1500は、第1輝度切替遷移時間1151で指定された時間で連続的に送出するグラフィック輝度閾値の値を増加させ、第1輝度閾値1161で指定された値が送出するグラフィック輝度閾値となるようにする。 FIG. 8 is an example of the graphic brightness threshold value transmitted from the brightness threshold value adjusting unit 1500. When the first luminance threshold 1161 is not applied, the graphic luminance threshold sent by the luminance threshold adjusting unit 1500 is 0. When the first luminance threshold 1161 is applied, such as when a graphic is displayed, the luminance threshold adjusting unit 1500 sets the value of the luminance threshold continuously transmitted at the time specified by the first luminance switching transition time 1151. The value is increased so that the value specified by the first luminance threshold 1161 becomes the transmitted graphic luminance threshold.

グラフィックが表示されなくなるなど輝度閾値調整部1500が適用されない状態になると、輝度閾値調整部1500は、送出するグラフィック輝度閾値を、第1輝度閾値1161で指定された値から0に第1輝度切替遷移時間1151で指定された時間をかけて連続的に減少させる。 When the luminance threshold value adjusting unit 1500 is not applied, such as when the graphic is no longer displayed, the luminance threshold value adjusting unit 1500 sets the transmitted graphic luminance threshold value to 0 from the value specified by the first luminance threshold value 1161 for the first luminance switching transition. It is continuously reduced over the time specified by time 1151.

このようにして、連続的に輝度曲線の切替を行うことによって、輝度の変化がスムーズになり違和感を軽減することができる。 By continuously switching the brightness curve in this way, the change in brightness becomes smooth and the sense of incongruity can be reduced.

異なる値を有する2つのグラフィック輝度閾値を使用すると、便利な場合がある。たとえば、字幕とポップアップメニューとで異なる輝度範囲のグラフィックを用いる場合などである。 It may be convenient to use two graphic brightness thresholds with different values. For example, when using graphics with different brightness ranges for subtitles and pop-up menus.

図9は、2つのグラフィック輝度閾値を用いた場合の例である。第1輝度閾値1161と第2輝度閾値1162とが単独で適用される場合はこれまでの説明と同様である。第1輝度閾値1161と第2輝度閾値1162との両方が適用される場合には、輝度閾値調整部1500はグラフィック輝度閾値の高いほうの値を送出する。 FIG. 9 is an example when two graphic luminance thresholds are used. When the first luminance threshold value 1161 and the second luminance threshold value 1162 are applied independently, the same as the above description. When both the first luminance threshold 1161 and the second luminance threshold 1162 are applied, the luminance threshold adjusting unit 1500 sends out the higher value of the graphic luminance threshold.

第1輝度閾値1161が第2輝度閾値1162よりも大きいものとして説明する。第1輝度閾値1161が適用されるグラフィックが表示されると、第1輝度切替遷移時間1151で指定された時間で第1輝度閾値1161に切り替わり、その状態から第2輝度閾値1162が適用されるグラフィックが表示されると、第2輝度切替遷移時間1152で指定された時間で第2輝度閾値1162に切り替わる。これは、グラフィックが表示されなくなる場合にも同様である。 The first luminance threshold 1161 will be described as being larger than the second luminance threshold 1162. When the graphic to which the first luminance threshold 1161 is applied is displayed, the luminance threshold is switched to the first luminance threshold 1161 at the time specified by the first luminance switching transition time 1151, and the second luminance threshold 1162 is applied from that state. Is displayed, the process switches to the second luminance threshold value 1162 at the time specified by the second luminance switching transition time 1152. This is also the case when the graphic disappears.

輝度閾値調整部1500は、適用可能なグラフィック輝度閾値のうち最大のものを送出するグラフィック輝度閾値とするため、設定値の大きい第2輝度閾値1162を適用するグラフィックが表示されている間に、設定値の小さい第1輝度閾値1161を適用するグラフィックの表示および非表示が行われても、輝度閾値調整部1500が送出するグラフィック輝度閾値は変化しない。 Since the brightness threshold value adjusting unit 1500 sets the maximum applicable graphic brightness threshold value as the graphic brightness threshold value, it is set while the graphic to which the second brightness threshold value 1162 having a large set value is applied is displayed. Even if the graphic to which the first brightness threshold 1161 having a small value is applied is displayed or hidden, the graphic brightness threshold sent by the brightness threshold adjusting unit 1500 does not change.

図13では、静的メタデータ3100に、コンテンツ最大輝度(MaxCLL)3110と、コンテンツのフレーム平均輝度最大値(MaxFALL)3120と、第1輝度遷移時間3131と、第2輝度遷移時間3132と、第1輝度閾値3141と、第2輝度閾値3142とが格納されていることが示されている。 In FIG. 13, the static metadata 3100 includes the maximum luminance (MaxCLL) 3110, the maximum frame average luminance (MaxFALL) 3120 of the content, the first luminance transition time 3131, the second luminance transition time 3132, and the second. It is shown that the 1-luminance threshold 3141 and the 2nd luminance threshold 3142 are stored.

なお、ここでは、第1輝度切替遷移時間1151と第2輝度切替遷移時間1152との2種類の時間を持たせるようにしたが、輝度切替遷移時間を1つにし、第1輝度閾値1161と第2輝度閾値1162とを同じ時間で切り替えてもよい。 Here, although two types of time, the first luminance switching transition time 1151 and the second luminance switching transition time 1152, are provided, the luminance switching transition time is set to one, and the first luminance threshold value 1161 and the first luminance threshold value 1161 are provided. The two luminance thresholds 1162 may be switched at the same time.

このようにして、閾値を有する輝度調整曲線を使用する場合にも、遷移時間を設けることでグラフィックの表示状態変化による輝度の変化の違和感を軽減することができる。 In this way, even when the brightness adjustment curve having a threshold value is used, it is possible to reduce the discomfort of the change in brightness due to the change in the display state of the graphic by providing the transition time.

ここでは、輝度閾値調整部1500が再生装置1000側にあるものとして説明したが、表示装置2000側のたとえば輝度調整曲線作成部2401に輝度閾値調整部1500を備えることも可能である。 Here, the brightness threshold value adjusting unit 1500 has been described as being on the reproduction device 1000 side, but it is also possible to provide the brightness threshold value adjustment unit 1500 on the display device 2000 side, for example, the brightness adjustment curve creation unit 2401.

この場合、第1輝度閾値1161、第2輝度閾値1162、第1輝度切替遷移時間1151および第2輝度切替遷移時間1152は、あらかじめ表示装置2000に送付しておく。 In this case, the first luminance threshold 1161, the second luminance threshold 1162, the first luminance switching transition time 1151 and the second luminance switching transition time 1152 are sent to the display device 2000 in advance.

<実施の形態3>
本実施の形態に関する映像コンテンツ媒体および映像再生装置について説明する。以下の説明においては、以上に記載された実施の形態で説明された構成要素と同様の構成要素については同じ符号を付して図示し、その詳細な説明については適宜省略するものとする。
<Embodiment 3>
The video content medium and the video playback device according to the present embodiment will be described. In the following description, components similar to the components described in the above-described embodiments will be illustrated with the same reference numerals, and detailed description thereof will be omitted as appropriate.

実施の形態1では、表示装置側で遷移時間に応じた合成比を調整できるものとして説明されたが、変形例として、再生装置側でグラフィック遷移時間の処理を行う例を以下説明する。 In the first embodiment, it has been described that the composition ratio can be adjusted according to the transition time on the display device side, but as a modification, an example in which the graphic transition time is processed on the playback device side will be described below.

図10は、再生装置側で動的メタデータを用いたグラフィック遷移時間の処理を行う例である。ここでは、動的メタデータと静的メタデータとを切り替える場合の例を説明する。動的メタデータ調整部1400は動的メタデータの調整を行い、表示装置2000の輝度調整曲線作成部2402に送出する。 FIG. 10 shows an example in which the graphic transition time is processed using the dynamic metadata on the playback device side. Here, an example of switching between dynamic metadata and static metadata will be described. The dynamic metadata adjustment unit 1400 adjusts the dynamic metadata and sends it to the brightness adjustment curve creation unit 2402 of the display device 2000.

ここでは、グラフィック表示時には動的メタデータの値を静的メタデータの値に固定し、実質的に静的メタデータ制御に切り替えるようにしている。このようにすることで、単純に動的メタデータ制御と静的メタデータ制御を切り替える場合と異なり、連続的なメタデータ制御の切替が可能となる。 Here, when the graphic is displayed, the value of the dynamic metadata is fixed to the value of the static metadata, and the control is substantially switched to the static metadata control. By doing so, it is possible to continuously switch the metadata control, unlike the case of simply switching between the dynamic metadata control and the static metadata control.

図11は、この例での動的メタデータの例である。動的CLLは、動的メタデータ1130に含まれるシーンごとあるいはフレームごとのピーク輝度値である。MaxCLLは、静的メタデータ1140に含まれるコンテンツ全体を通してのピーク輝度値である。実際には、輝度調整曲線はピーク輝度値以外の情報も含めて作成されるためピーク輝度値以外の制御も行う必要があるが、ここでは代表としてピーク輝度値についてのみ説明する。 FIG. 11 is an example of dynamic metadata in this example. The dynamic CLL is a peak luminance value for each scene or frame included in the dynamic metadata 1130. MaxCLL is the peak luminance value throughout the content contained in the static metadata 1140. Actually, since the brightness adjustment curve is created including information other than the peak brightness value, it is necessary to perform control other than the peak brightness value, but here, only the peak brightness value will be described as a representative.

通常のコンテンツ映像再生時には、動的メタデータ調整部1400は、動的メタデータ1130のピーク輝度情報をそのまま表示装置2000に伝送する。図11で、動的CLLとして表されている実線の折れ線部分に該当する。 At the time of normal content video reproduction, the dynamic metadata adjustment unit 1400 transmits the peak luminance information of the dynamic metadata 1130 to the display device 2000 as it is. In FIG. 11, it corresponds to a solid line polygonal line portion represented as a dynamic CLL.

グラフィック有無通知部1300からグラフィック表示の通知を受けると、輝度切替遷移時間1150で指定された時間で、連続的に静的メタデータ1140に含まれるMaxCLLの値まで変化させる(図中のttで示される部分)。 When the graphic display notification is received from the graphic presence / absence notification unit 1300, the MaxCLL value included in the static metadata 1140 is continuously changed at the time specified by the luminance switching transition time 1150 (indicated by tt in the figure). Part).

本来の動的メタデータは、図中の破線の折れ線部分になるが、グラフィックが表示されている間は表示装置2000に送出される動的メタデータは実線で示される値となる。 The original dynamic metadata is the broken line portion of the broken line in the figure, but the dynamic metadata sent to the display device 2000 is the value shown by the solid line while the graphic is displayed.

表示装置2000では、動的メタデータ調整部1400から受け取った動的メタデータの値で輝度調整曲線を作成するため、動的メタデータの値を固定することでグラフィック部分の輝度揺らぎを抑制することができる。 In the display device 2000, since the brightness adjustment curve is created by the value of the dynamic metadata received from the dynamic metadata adjustment unit 1400, the brightness fluctuation of the graphic part is suppressed by fixing the value of the dynamic metadata. Can be done.

このように、動的メタデータの値を再生装置1000側で調整することにより、動的メタデータ制御の仕組みを使って実質的に静的メタデータ制御を行えるとともに、遷移時間を設けて切替に伴う違和感を軽減することが可能となる。 In this way, by adjusting the value of the dynamic metadata on the playback device 1000 side, it is possible to substantially perform static metadata control using the dynamic metadata control mechanism, and it is possible to switch by providing a transition time. It is possible to reduce the discomfort that accompanies it.

グラフィックを表示する際には、本来の動的メタデータのピーク輝度情報を無視し、一時的に静的メタデータのMaxCLLの値を動的メタデータのピーク輝度情報として表示装置に伝送することによって、グラフィック部の輝度揺らぎを抑制することができる。この際、直前の動的メタデータのピーク輝度情報からMaxCLL値への変化を指定されたグラフィック遷移時間かけて行うことによって、コンテンツ映像の急激な輝度変化を避けることができる。 When displaying the graphic, the peak brightness information of the original dynamic metadata is ignored, and the MaxCLL value of the static metadata is temporarily transmitted to the display device as the peak brightness information of the dynamic metadata. , Brightness fluctuation of the graphic part can be suppressed. At this time, by performing the change from the peak brightness information of the immediately preceding dynamic metadata to the MaxCLL value over the specified graphic transition time, it is possible to avoid a sudden change in the brightness of the content image.

このように、コンテンツに対応したグラフィック遷移時間を輝度調整方式の切替時に適用することによって、グラフィックのオン時およびオフ時にも、違和感の少ない視聴環境を提供することができる。 In this way, by applying the graphic transition time corresponding to the content at the time of switching the brightness adjustment method, it is possible to provide a viewing environment with less discomfort even when the graphic is on and off.

以上に記載された実施の形態では、それぞれの構成要素の寸法、形状、相対的配置関係または実施の条件などについても記載する場合があるが、これらはすべての局面において例示であって、本願明細書に記載されたものに限られることはないものとする。 In the embodiments described above, the dimensions, shapes, relative arrangement relationships, conditions of implementation, etc. of the respective components may also be described, but these are examples in all aspects and are described in the present specification. It is not limited to what is stated in the document.

したがって、例示されていない無数の変形例、および、均等物が、本願明細書に開示される技術の範囲内において想定される。たとえば、少なくとも1つの構成要素を変形する場合、追加する場合または省略する場合、さらには、少なくとも1つの実施の形態における少なくとも1つの構成要素を抽出し、他の実施の形態の構成要素と組み合わせる場合が含まれるものとする。 Therefore, innumerable variations and equivalents not exemplified are envisioned within the scope of the techniques disclosed herein. For example, when transforming, adding or omitting at least one component, or when extracting at least one component in at least one embodiment and combining it with the components of another embodiment. Shall be included.

1000 再生装置、1110 コンテンツ映像データ、1120 グラフィックデータ、1130 動的メタデータ、1140,3100 静的メタデータ、1150 輝度切替遷移時間、1151 第1輝度切替遷移時間、1152 第2輝度切替遷移時間、1500 輝度閾値調整部、1161,3141 第1輝度閾値、1162,3142 第2輝度閾値、1200 グラフィック合成部、1300 グラフィック有無通知部、1400 動的メタデータ調整部、2000 表示装置、2100 リニア変換部、2200 輝度調整部、2300 表示部、2400,2401,2402 輝度調整曲線作成部、2410 コンテンツ映像用輝度調整曲線、2420 グラフィック用輝度調整曲線、2430 合成部、2500 標準輝度曲線、2600 表示装置特性値、3000 プレイリストデータ、3110 コンテンツ最大輝度(MaxCLL)、3120 コンテンツのフレーム平均輝度最大値(MaxFALL)、3130 輝度遷移時間、3131 第1輝度遷移時間、3132 第2輝度遷移時間、Ax,B,Bx,C,Cx,D,Dx 輝度調整曲線。 1000 playback device, 1110 content video data, 1120 graphic data, 1130 dynamic metadata, 1140, 3100 static metadata, 1150 brightness switching transition time, 1151 first brightness switching transition time, 1152 second brightness switching transition time, 1500 Luminance threshold adjustment unit, 1161,3141 1st brightness threshold, 1162,3142 2nd brightness threshold, 1200 graphic synthesis unit, 1300 graphic presence / absence notification unit, 1400 dynamic metadata adjustment unit, 2000 display device, 2100 linear conversion unit, 2200 Luminance adjustment unit, 2300 display unit, 2400, 2401,402 Brightness adjustment curve creation unit, 2410 Luminance adjustment curve for content video, 2420 Luminance adjustment curve for graphics, 2430 Synthesis unit, 2500 Standard brightness curve, 2600 Display device characteristic value, 3000 Playlist data, 3110 content maximum brightness (MaxCLL), 3120 content frame average brightness maximum value (MaxFALL), 3130 brightness transition time, 3131 first brightness transition time, 3132 second brightness transition time, Ax, B, Bx, C , Cx, D, Dx Luminance adjustment curve.

Claims (1)

映像コンテンツ媒体から映像ストリームと、メニューまたは字幕を含むグラフィック情報とを読み出して再生する映像再生方法であり、
輝度調整手段として、変化しない調整値を使用する静的メタデータ方式と、変化する調整値を使用する動的メタデータ方式とを備え、
グラフィック合成の際に前記輝度調整手段を切り替えて使用し、
前記映像コンテンツ媒体から読み出されたグラフィック遷移時間情報を、前記輝度調整手段を切り替える際の遷移時間として使用する、
映像再生方法。
It is a video playback method that reads and plays a video stream and graphic information including menus or subtitles from a video content medium.
As the brightness adjustment means, a static metadata method that uses an adjustment value that does not change and a dynamic metadata method that uses an adjustment value that changes are provided.
When synthesizing graphics, the brightness adjustment means is switched and used.
The graphic transition time information read from the video content medium is used as the transition time when switching the luminance adjusting means.
Video playback method.
JP2020105443A 2020-06-18 2020-06-18 Video playback method Active JP6861873B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020105443A JP6861873B2 (en) 2020-06-18 2020-06-18 Video playback method
JP2021054700A JP7069378B2 (en) 2020-06-18 2021-03-29 Video content medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020105443A JP6861873B2 (en) 2020-06-18 2020-06-18 Video playback method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018148146A Division JP2019040659A (en) 2018-08-07 2018-08-07 Video content medium

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021054700A Division JP7069378B2 (en) 2020-06-18 2021-03-29 Video content medium

Publications (2)

Publication Number Publication Date
JP2020162160A JP2020162160A (en) 2020-10-01
JP6861873B2 true JP6861873B2 (en) 2021-04-21

Family

ID=72640072

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020105443A Active JP6861873B2 (en) 2020-06-18 2020-06-18 Video playback method
JP2021054700A Active JP7069378B2 (en) 2020-06-18 2021-03-29 Video content medium

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021054700A Active JP7069378B2 (en) 2020-06-18 2021-03-29 Video content medium

Country Status (1)

Country Link
JP (2) JP6861873B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021119663A (en) * 2020-06-18 2021-08-12 三菱電機株式会社 Video reproduction method and video content medium

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022054899A (en) 2020-09-28 2022-04-07 キヤノン株式会社 Communication device, communication method, and program

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9830722B2 (en) * 2012-08-10 2017-11-28 Mitsubishi Electric Corporation Image processing device, display device, image processing method, display method, and image processing program
EP3678359A1 (en) * 2014-05-16 2020-07-08 Panasonic Intellectual Property Management Co., Ltd. Converting method and converting apparatus
EP3193326B1 (en) * 2014-09-11 2019-05-15 Sony Corporation Image-processing device, and image-processing method
EP3255892B1 (en) * 2015-02-03 2021-12-29 Sony Group Corporation Transmitting device, transmitting method, receiving device, and receiving method
JP6320946B2 (en) * 2015-02-05 2018-05-09 三菱電機株式会社 Video playback apparatus and method
JP6584000B2 (en) * 2015-08-24 2019-10-02 シャープ株式会社 Receiving apparatus, receiving method, and program
JP6861873B2 (en) 2020-06-18 2021-04-21 三菱電機株式会社 Video playback method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021119663A (en) * 2020-06-18 2021-08-12 三菱電機株式会社 Video reproduction method and video content medium
JP7069378B2 (en) 2020-06-18 2022-05-17 三菱電機株式会社 Video content medium

Also Published As

Publication number Publication date
JP2020162160A (en) 2020-10-01
JP2021119663A (en) 2021-08-12
JP7069378B2 (en) 2022-05-17

Similar Documents

Publication Publication Date Title
US10582177B2 (en) Playback method according to function of playback device
JP6573238B2 (en) Display device, conversion device, display method, and computer program
JP6279694B2 (en) Graphic processing for high dynamic range video
WO2015198560A1 (en) Data output device, data output method, and data generation method
JP7069378B2 (en) Video content medium
WO2015198552A1 (en) Content data generating method, video stream transmission method and video display method
JP6407496B1 (en) Video playback device
JP6425813B2 (en) Video playback apparatus and video playback method
JP6731627B2 (en) Method Performed on Playback Device and Playback Device
JP2017139511A (en) Content data generation method, image stream transmission method, and image display method
JP2019040659A (en) Video content medium
JP6643669B2 (en) Display device and display method
JP2021153299A (en) Playback unit

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200618

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210302

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210330

R150 Certificate of patent or registration of utility model

Ref document number: 6861873

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250