JP6980833B2 - Display device and display method - Google Patents

Display device and display method Download PDF

Info

Publication number
JP6980833B2
JP6980833B2 JP2020076529A JP2020076529A JP6980833B2 JP 6980833 B2 JP6980833 B2 JP 6980833B2 JP 2020076529 A JP2020076529 A JP 2020076529A JP 2020076529 A JP2020076529 A JP 2020076529A JP 6980833 B2 JP6980833 B2 JP 6980833B2
Authority
JP
Japan
Prior art keywords
image
display
data
sdr
luminance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020076529A
Other languages
Japanese (ja)
Other versions
JP2020118990A (en
Inventor
雅泰 佐藤
弘文 占部
丈人 福島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2016068433A external-priority patent/JP6700908B2/en
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2020076529A priority Critical patent/JP6980833B2/en
Publication of JP2020118990A publication Critical patent/JP2020118990A/en
Application granted granted Critical
Publication of JP6980833B2 publication Critical patent/JP6980833B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

本発明は、表示装置及び表示方法に関する。 The present invention relates to a display device and a display method.

近年、画像制作の分野において、従来のダイナミックレンジよりも広いダイナミックレンジを有する画像データ（静止画や動画の画像データ）が扱われる機会が増している。以後、従来のダイナミックレンジを「ＳＤＲ（スタンダードダイナミックレンジ）」と記載し、ＳＤＲよりも広いダイナミックレンジを「ＨＤＲ（ハイダイナミックレンジ）」と記載する。そして、ＨＤＲ画像データをＳＤＩ（Ｓｅｒｉａｌ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ）ケーブルで伝送するための規格（例えばＳＭＰＴＥ（米国映画テレビ技術者協会）により標準化されたＳＴ２０８４など）が提案されている。ＨＤＲ画像を高輝度で表示するための技術も提案されている。ＨＤＲ画像データは、ＨＤＲを有する画像データであり、ＨＤＲ画像は、ＨＤＲ画像データに基づく画像である。 In recent years, in the field of image production, there are increasing opportunities to handle image data (image data of still images and moving images) having a wider dynamic range than the conventional dynamic range. Hereinafter, the conventional dynamic range will be referred to as "SDR (standard dynamic range)", and the dynamic range wider than SDR will be referred to as "HDR (high dynamic range)". Then, a standard for transmitting HDR image data by an SDI (Serial Digital Interface) cable (for example, ST2084 standardized by SMPTE (Society of Motion Picture and Television Engineers)) has been proposed. A technique for displaying an HDR image with high brightness has also been proposed. The HDR image data is image data having HDR, and the HDR image is an image based on the HDR image data.

一方、放送の分野では、ＳＤＲ画像データの放送が主流である。ＳＤＲ画像データは、ＳＤＲを有する画像データである。そして、全ての表示装置がＨＤＲに対応しているわけではなく、ＨＤＲに対応していない表示装置もある。そのため、ＨＤＲ画像データとＳＤＲ画像データとの両方が生成されることがある。ＨＤＲ画像データとＳＤＲ画像データとの生成方法として、撮影によりＨＤＲ画像データを生成し、ＨＤＲ画像データに基づくグレーディング作業によりＳＤＲ画像データを生成する方法がある。そして、グレーディング作業では、ＨＤＲ画像とＳＤＲ画像とを同時に確認したいというニーズがある。そのため、グレーディング作業では、ＨＤＲ画像とＳＤＲ画像との両方が表示装置で表示されることがある。ＳＤＲ画像は、ＳＤＲ画像データに基づく画像である。 On the other hand, in the field of broadcasting, broadcasting of SDR image data is the mainstream. The SDR image data is image data having SDR. And not all display devices are compatible with HDR, and some display devices are not compatible with HDR. Therefore, both HDR image data and SDR image data may be generated. As a method of generating HDR image data and SDR image data, there is a method of generating HDR image data by shooting and generating SDR image data by grading work based on the HDR image data. In the grading work, there is a need to check the HDR image and the SDR image at the same time. Therefore, in the grading work, both the HDR image and the SDR image may be displayed on the display device. The SDR image is an image based on the SDR image data.

ＨＤＲ画像データのダイナミックレンジは広いため、１０００［ｃｄ／ｍ２］などの高い表示輝度でＨＤＲ画像が表示されることが好ましい。表示輝度は、画面の輝度である。また、ＨＤＲ画像の表示輝度に比べ低い表示輝度（１００［ｃｄ／ｍ２］など）でＳＤＲ画像が表示することが好ましい。表示輝度の制御方法として、バックライトユニットの発光輝度を制御する方法がある。具体的には、バックライトユニットの発光輝度を高めることにより表示輝度を高め、且つ、バックライトユニットの発光輝度を低減することにより表示輝度を低減する方法がある。バックライトユニットの発光輝度は、バックライトユニットから発せられた光の輝度である。 Since the dynamic range of the HDR image data is wide, it is preferable that the HDR image is displayed with a high display brightness such as 1000 [cd / m 2]. The display brightness is the brightness of the screen. Further, it is preferable that the SDR image is displayed at a display brightness lower than the display brightness of the HDR image (100 [cd / m 2] or the like). As a display brightness control method, there is a method of controlling the emission brightness of the backlight unit. Specifically, there is a method of increasing the display brightness by increasing the emission brightness of the backlight unit and reducing the display brightness by reducing the emission brightness of the backlight unit. The emission brightness of the backlight unit is the brightness of the light emitted from the backlight unit.

そして、ＨＤＲ画像の表示領域に対応する領域と、ＳＤＲ画像の表示領域に対応する領域とで個別にバックライトユニットの発光輝度が制御されれば、高輝度なＨＤＲ画像と、低輝度なＳＤＲ画像との表示を１台の表示装置で実現することができる。画像の表示領域は、画面の領域であり、画像が表示される領域である。しかしながら、バックライトユニットの発光輝度を部分的に変更可能にする構成を採用すると、コストが大幅に増加する。 If the emission brightness of the backlight unit is individually controlled in the area corresponding to the display area of the HDR image and the area corresponding to the display area of the SDR image, the high-brightness HDR image and the low-brightness SDR image are obtained. Can be realized with one display device. The image display area is an area of the screen, and is an area in which the image is displayed. However, if a configuration that allows the emission brightness of the backlight unit to be partially changed is adopted, the cost increases significantly.

表示輝度の制御に関する技術として、特許文献１に開示の技術がある。特許文献１に開示の技術では、画面を構成する複数のブロックのそれぞれについて、そのブロックに対応する画像データが当該ブロックに対応する補正データで補正される。しかしながら、特許文献１に開示の技術は、表示画像（画面に表示された画像）の輝度むらを低減する技術であり、特許文献１に開示の技術を用いても、ＨＤＲ画像とＳＤＲ画像とのそれぞれを好ましい輝度（適切な輝度）で表示することはできない。 As a technique for controlling display luminance, there is a technique disclosed in Patent Document 1. In the technique disclosed in Patent Document 1, the image data corresponding to each of the plurality of blocks constituting the screen is corrected by the correction data corresponding to the block. However, the technique disclosed in Patent Document 1 is a technique for reducing the luminance unevenness of the displayed image (the image displayed on the screen), and even if the technique disclosed in Patent Document 1 is used, the HDR image and the SDR image can be used. It is not possible to display each with a preferable brightness (appropriate brightness).

特開平５−３００４５３号公報Japanese Unexamined Patent Publication No. 5-300453

本発明は、複数の画像を画面に表示する際に各画像を好ましい輝度で表示することを、簡易な構成で実現することができる技術を提供することを目的とする。 An object of the present invention is to provide a technique capable of displaying each image with preferable brightness when displaying a plurality of images on a screen with a simple configuration.

本発明の第１の態様は、
画像データを取得する入力部と、
前記画像データを補正する補正部と、
前記画像データに基づいて画面に画像を表示する表示部と、
を有し、
前記補正部は、前記画面にＳＤＲ画像及びＨＤＲ画像を並べて表示する場合に、前記ＳＤＲ画像の表示輝度の上限のほうが前記ＨＤＲ画像の表示輝度の上限よりも低くなるように、前記画像データを前記ＳＤＲ画像のデータに補正し、
前記ＳＤＲ画像及び前記ＨＤＲ画像は同じ被写体の画像である
ことを特徴とする表示装置である。
本発明の第２の態様は、
画像データを取得する入力部と、
前記画像データを補正する補正部と、
前記画像データに基づいて画面に画像を表示する表示部と、
を有し、
前記補正部は、前記画面にＳＤＲ画像及びＨＤＲ画像を並べて表示する場合に、前記ＳＤＲ画像の表示輝度の上限のほうが前記ＨＤＲ画像の表示輝度の上限よりも低くなるように、前記画像データを前記ＳＤＲ画像のデータに補正し、
前記ＳＤＲ画像のデータは、前記ＨＤＲ画像のデータに対応する前記画像データから生成されたデータである
ことを特徴とする表示装置である。
本発明の第３の態様は、
画像データを取得する入力部と、
前記画像データを補正する補正部と、
前記画像データに基づいて画面に画像を表示する表示部と、
を有し、
前記補正部は、ＳＤＲ画像を前記画面に表示し且つＨＤＲ画像を前記画面に表示しない第１の場合における前記ＳＤＲ画像の表示輝度の上限が第１輝度になり、且つ、ＳＤＲ画像及びＨＤＲ画像を前記画面に表示する第２の場合における前記ＳＤＲ画像の表示輝度の上限が前記第１輝度よりも低い第２輝度になるように、前記画像データを前記ＳＤＲ画像のデータに補正する
ことを特徴とする表示装置である。
The first aspect of the present invention is
An input unit to get the picture Zode over data,
A correction unit that corrects the image Zode over data,
A display unit for displaying the images on the screen based on the image Zode over data,
Have,
When the SDR image and the HDR image are displayed side by side on the screen, the correction unit displays the image data so that the upper limit of the display brightness of the SDR image is lower than the upper limit of the display brightness of the HDR image. Correct to SDR image data and
The display device is characterized in that the SDR image and the HDR image are images of the same subject.
The second aspect of the present invention is
Input section to acquire image data and
A correction unit that corrects the image data,
A display unit that displays an image on the screen based on the image data,
Have,
When the SDR image and the HDR image are displayed side by side on the screen, the correction unit displays the image data so that the upper limit of the display brightness of the SDR image is lower than the upper limit of the display brightness of the HDR image. Correct to SDR image data and
The data of the SDR image is data generated from the image data corresponding to the data of the HDR image.
It is a display device characterized by this.
A third aspect of the present invention is
An input unit to get the picture Zode over data,
A correction unit that corrects the image Zode over data,
A display unit for displaying the images on the screen based on the image Zode over data,
Have,
The correction unit sets the upper limit of the display luminance of the SDR image to the first luminance in the first case where the SDR image is displayed on the screen and the HDR image is not displayed on the screen, and the SDR image and the HDR image are displayed. as the upper limit of the display luminance of the SDR image in the second case to be displayed on the screen is a second luminance lower than the first luminance, and characterized in that to correct the image data into data of the SDR image It is a display device to display.

本発明の第４の態様は、
画像データを取得する入力ステップと、
前記画像データを補正する補正ステップと、
前記画像データに基づいて画面に画像を表示する表示ステップと、
を有し、
前記補正ステップでは、前記画面にＳＤＲ画像及びＨＤＲ画像を並べて表示する場合に、前記ＳＤＲ画像の表示輝度の上限のほうが前記ＨＤＲ画像の表示輝度の上限よりも低くなるように、前記画像データを前記ＳＤＲ画像のデータに補正し、
前記ＳＤＲ画像及び前記ＨＤＲ画像は同じ被写体の画像である
ことを特徴とする表示方法である。
本発明の第５の態様は、
画像データを取得する入力ステップと、
前記画像データを補正する補正ステップと、
前記画像データに基づいて画面に画像を表示する表示ステップと、
を有し、
前記補正ステップでは、前記画面にＳＤＲ画像及びＨＤＲ画像を並べて表示する場合に、前記ＳＤＲ画像の表示輝度の上限のほうが前記ＨＤＲ画像の表示輝度の上限よりも低くなるように、前記画像データを前記ＳＤＲ画像のデータに補正し、
前記ＳＤＲ画像のデータは、前記ＨＤＲ画像のデータに対応する前記画像データから生成されたデータである
ことを特徴とする表示方法である。
本発明の第６の態様は、
画像データを取得する入力ステップと、
前記画像データを補正する補正ステップと、
前記画像データに基づいて画面に画像を表示する表示ステップと、
を有し、
前記補正ステップでは、ＳＤＲ画像を前記画面に表示し且つＨＤＲ画像を前記画面に表示しない第１の場合における前記ＳＤＲ画像の表示輝度の上限が第１輝度になり、且つ、ＳＤＲ画像及びＨＤＲ画像を前記画面に表示する第２の場合における前記ＳＤＲ画像の表示輝度の上限が前記第１輝度よりも低い第２輝度になるように、前記画像データを前記ＳＤＲ画像のデータに補正する
ことを特徴とする表示方法である。
 A fourth aspect of the present invention is
An input step to get the picture Zode over data,
A correction step of correcting the image Zode over data,
A display step of displaying the images on the screen based on the image Zode over data,
Have,
Wherein the correction step, to display side by side SDR image and HDR image on the screen, the so towards the upper limit of the display luminance of the SDR image is lower than the upper limit of the display luminance of the HDR image, the said image data Correct to SDR image data and
The display method is characterized in that the SDR image and the HDR image are images of the same subject.
A fifth aspect of the present invention is
Input steps to get image data and
A correction step for correcting the image data and
A display step for displaying an image on the screen based on the image data,
Have,
In the correction step, when the SDR image and the HDR image are displayed side by side on the screen, the image data is displayed so that the upper limit of the display brightness of the SDR image is lower than the upper limit of the display brightness of the HDR image. Correct to SDR image data and
The data of the SDR image is data generated from the image data corresponding to the data of the HDR image.
It is a display method characterized by that.
A sixth aspect of the present invention is
An input step to get the picture Zode over data,
A correction step of correcting the image Zode over data,
A display step of displaying the images on the screen based on the image Zode over data,
Have,
In the correction step, the upper limit of the display luminance of the SDR image in the first case where the SDR image is displayed on the screen and the HDR image is not displayed on the screen is the first luminance, and the SDR image and the HDR image are displayed. as the upper limit of the display luminance of the SDR image in the second case to be displayed on the screen is a second luminance lower than the first luminance, and characterized in that to correct the image data into data of the SDR image It is a display method to be displayed.

本発明の第７の態様は、上述した表示方法の各ステップをコンピュータに実行させることを特徴とするプログラムである。 A seventh aspect of the present invention is a program comprising causing a computer to execute each step of the display method described above.

本発明によれば、複数の画像を画面に表示する際に各画像を好ましい輝度で表示することを、簡易な構成で実現することができる。 According to the present invention, when displaying a plurality of images on a screen, it is possible to display each image with preferable brightness with a simple configuration.

実施例１に係る表示装置の構成の一例を示すブロック図A block diagram showing an example of the configuration of the display device according to the first embodiment. 実施例１に係る階調特性とダイナミックレンジとの関係の一例を示す図The figure which shows an example of the relationship between the gradation characteristic and the dynamic range which concerns on Example 1. 実施例１に係る表示画像の一例を示す図The figure which shows an example of the display image which concerns on Example 1. 実施例１に係る表示装置の処理フローの一例を示すフローチャートA flowchart showing an example of the processing flow of the display device according to the first embodiment. 実施例１に係る階調値と表示輝度との関係の一例を示す図The figure which shows an example of the relationship between the gradation value and the display luminance which concerns on Example 1. 実施例２に係る規格輝度と表示輝度との関係の一例を示す図The figure which shows an example of the relationship between the standard luminance and display luminance which concerns on Example 2. 実施例２に係る表示装置の構成の一例を示すブロック図A block diagram showing an example of the configuration of the display device according to the second embodiment. 実施例３に係る表示装置の構成の一例を示すブロック図A block diagram showing an example of the configuration of the display device according to the third embodiment. 実施例４に係る表示装置の構成の一例を示すブロック図A block diagram showing an example of the configuration of the display device according to the fourth embodiment. 実施例４に係る表示輝度の一例を示す図The figure which shows an example of the display luminance which concerns on Example 4.

＜実施例１＞
以下、本発明の実施例１について説明する。なお、本実施例に係る画像処理装置が表示装置に設けられている例を以下で説明するが、画像処理装置は、表示装置とは別体の装置であってもよい。画像処理装置としては、例えば、パーソナルコンピュータ（ＰＣ）などを使用することができる。また、表示装置が液晶表示装置である例を以下で説明するが、表示装置は液晶表示装置に限られない。例えば、表示パネルと、表示パネルに光を照射する発光部と、を有する他の表示装置が使用されてもよい。表示パネルは、発光部からの光を透過することにより画面に画像を表示する。具体的には、ＭＥＭＳ（Ｍｉｃｒｏ Ｅｌｅｃｔｒｏ Ｍｅｃｈａｎｉｃａｌ Ｓｙｓｔｅｍ）シャッターを有するＭＥＭＳシャッター方式表示装置、プロジェクター、等が使用されてもよい。有機ＥＬ表示装置、プラズマ表示装置、等の自発光型の表示装置が使用されてもよい。 <Example 1>
Hereinafter, Example 1 of the present invention will be described. Although an example in which the image processing device according to the present embodiment is provided in the display device will be described below, the image processing device may be a device separate from the display device. As the image processing device, for example, a personal computer (PC) or the like can be used. Further, an example in which the display device is a liquid crystal display device will be described below, but the display device is not limited to the liquid crystal display device. For example, another display device having a display panel and a light emitting unit that irradiates the display panel with light may be used. The display panel displays an image on the screen by transmitting light from the light emitting unit. Specifically, a MEMS shutter type display device having a MEMS (Micro Electrical System) shutter, a projector, or the like may be used. A self-luminous display device such as an organic EL display device or a plasma display device may be used.

図１は、本実施例に係る表示装置１００の構成の一例を示すブロック図である。表示装置１００は、画像入力部１０１、画像処理部１０４、輝度補正部１０５、画像レイアウト部１０６、表示部１０７、ＣＰＵ１０８、ＵＩ（ユーザインターフェース）部１０９、表示制御部１１０、表示判断部１１１、及び、補正情報生成部１１２を有する。 FIG. 1 is a block diagram showing an example of the configuration of the display device 100 according to the present embodiment. The display device 100 includes an image input unit 101, an image processing unit 104, a brightness correction unit 105, an image layout unit 106, a display unit 107, a CPU 108, a UI (user interface) unit 109, a display control unit 110, a display determination unit 111, and the like. , Has a correction information generation unit 112.

画像入力部１０１は、表示装置１００の外部から画像データ（入力画像データ）を取得し、入力画像データを画像処理部１０４へ出力する。画像入力部１０１は、例えば、ＳＤＩ入力端子と処理回路とを有する。ＳＤＩ入力端子は、ＳＤＩ（Ｓｅｒｉａｌ Ｄｉｇｉｔａｌ Ｉｎｔｅｒｆａｃｅ）規格に準じた入力端子であり、処理回路は、ＳＤＩ入力端子に入力された画像データに所定の処理を施し、所定の処理が施された後の画像データを画像処理部１０４へ出力する。所定の処理は、例えば、画像データのデータフォーマットを、表示装置１００の内部で処理可能なデータフォーマットへ変換する処理である。 The image input unit 101 acquires image data (input image data) from the outside of the display device 100, and outputs the input image data to the image processing unit 104. The image input unit 101 has, for example, an SDI input terminal and a processing circuit. The SDI input terminal is an input terminal conforming to the SDI (Serial Digital Interface) standard, and the processing circuit performs predetermined processing on the image data input to the SDI input terminal, and the image after the predetermined processing is performed. The data is output to the image processing unit 104. The predetermined process is, for example, a process of converting the data format of the image data into a data format that can be processed inside the display device 100.

本実施例では、画像入力部１０１は、第１入力部１０２と第２入力部１０３とを有する。第１入力部１０２と第２入力部１０３とのそれぞれは、入力画像データを取得し、入力画像データを画像処理部１０４へ出力する。以後、第１入力部１０２によって取得された入力画像データを「第１入力画像データ」と記載し、第２入力部１０３によって取得された入力画像データを「第２入力画像データ」と記載する。第１入力画像データは、第２入力画像データと同じであってもよいし、異なっていてもよい。 In this embodiment, the image input unit 101 has a first input unit 102 and a second input unit 103. Each of the first input unit 102 and the second input unit 103 acquires input image data and outputs the input image data to the image processing unit 104. Hereinafter, the input image data acquired by the first input unit 102 will be referred to as "first input image data", and the input image data acquired by the second input unit 103 will be referred to as "second input image data". The first input image data may be the same as or different from the second input image data.

画像処理部１０４は、表示制御部１１０により設定された階調特性情報（階調特性に関する情報）に基づいて、階調特性情報に関連した階調特性に入力画像データの階調特性を変換する。それにより、変換画像データが生成される。画像処理部１０４は、変換画像データを輝度補正部１０５へ出力する。例えば、階調特性情報に対応する変換情報を用いて、入力画像データの階調特性が変換される。階調特性は、階調値と輝度との対応関係に関する特性である。変換情報は、入力画像データの階調値と、入力画像データの階調値を変換画像データの階調値へ補正する変換補正値または変換画像データの階調値との対応関係を示す情報（１次元のルックアップテーブル、関数、等）である。 The image processing unit 104 converts the gradation characteristic of the input image data into the gradation characteristic related to the gradation characteristic information based on the gradation characteristic information (information about the gradation characteristic) set by the display control unit 110. .. As a result, converted image data is generated. The image processing unit 104 outputs the converted image data to the luminance correction unit 105. For example, the gradation characteristic of the input image data is converted by using the conversion information corresponding to the gradation characteristic information. The gradation characteristic is a characteristic related to the correspondence between the gradation value and the brightness. The conversion information is information indicating the correspondence between the gradation value of the input image data and the conversion correction value for correcting the gradation value of the input image data to the gradation value of the converted image data or the gradation value of the converted image data ( One-dimensional lookup table, function, etc.).

本実施例では、第１入力画像データに対応する階調特性情報である第１特性情報と、第２入力画像データに対応する階調特性情報である第２特性情報とを個別に設定することができる。画像処理部１０４に第１入力画像データが入力された場合には、画像処理部１０４は、第１特性情報に基づいて第１入力画像データの階調特性を変換することにより第１変換画像データを生成し、第１変換画像データを輝度補正部１０５へ出力する。画像処理部１０４に第２入力画像データが入力された場合には、画像処理部１０４は、第２特性情報に基づいて第２入力画像データの階調特性を変換することにより第２変換画像データを生成し、第２変換画像データを輝度補正部１０５へ出力する。 In this embodiment, the first characteristic information, which is the gradation characteristic information corresponding to the first input image data, and the second characteristic information, which is the gradation characteristic information corresponding to the second input image data, are individually set. Can be done. When the first input image data is input to the image processing unit 104, the image processing unit 104 converts the gradation characteristics of the first input image data based on the first characteristic information, thereby converting the first converted image data. Is generated, and the first converted image data is output to the brightness correction unit 105. When the second input image data is input to the image processing unit 104, the image processing unit 104 converts the gradation characteristics of the second input image data based on the second characteristic information, thereby converting the second converted image data. Is generated, and the second converted image data is output to the brightness correction unit 105.

輝度補正部１０５は、後述する補正情報生成部１１２により生成された補正情報を用いて変換画像データを補正することにより、補正画像データを生成する。そして、輝度補正部１０５は、補正画像データを画像レイアウト部１０６へ出力する。本実施例では、補正情報は、変換画像データの各階調値を補正画像データの階調値へ補正する輝度補正値（変換画像データの取り得る複数の階調値の間で共通の１つの輝度補正値）である。補正情報として、変換画像データの階調値と、変換画像データの階調値を補正画像データの階調値へ補正する輝度補正値または補正画像データの階調値との対応関係を示す情報（１次元のルックアップテーブル、関数、等）を使用することもできる。輝度補正値は、階調値に乗算するゲイン値、階調値に加算するオフセット値、等である。 The luminance correction unit 105 generates corrected image data by correcting the converted image data using the correction information generated by the correction information generation unit 112, which will be described later. Then, the luminance correction unit 105 outputs the corrected image data to the image layout unit 106. In this embodiment, the correction information is a brightness correction value for correcting each gradation value of the converted image data to the gradation value of the corrected image data (one brightness common among a plurality of possible gradation values of the converted image data). Correction value). As the correction information, information indicating the correspondence between the gradation value of the converted image data and the brightness correction value for correcting the gradation value of the converted image data to the gradation value of the corrected image data or the gradation value of the corrected image data ( You can also use one-dimensional lookup tables, functions, etc.). The luminance correction value is a gain value to be multiplied by the gradation value, an offset value to be added to the gradation value, and the like.

本実施例では、第１変換画像データに対応する補正情報である第１補正情報と、第２変換画像データに対応する補正情報である第２補正情報とを個別に決定することができる。輝度補正部１０５に第１変換画像データが入力された場合には、輝度補正部１０５は、第１補正情報を用いて第１変換画像データを補正することにより第１補正画像データを生成し、第１補正画像データを画像レイアウト部１０６へ出力する。輝度補正部１０５に第２変換画像データが入力された場合には、輝度補正部１０５は、第２補正情報を用いて第２変換画像データを補正することにより第２補正画像データを生成し、第２補正画像データを画像レイアウト部１０６へ出力する。 In this embodiment, the first correction information, which is the correction information corresponding to the first converted image data, and the second correction information, which is the correction information corresponding to the second converted image data, can be individually determined. When the first converted image data is input to the brightness correction unit 105, the brightness correction unit 105 generates the first corrected image data by correcting the first converted image data using the first correction information. The first corrected image data is output to the image layout unit 106. When the second converted image data is input to the brightness correction unit 105, the brightness correction unit 105 generates the second corrected image data by correcting the second converted image data using the second correction information. The second corrected image data is output to the image layout unit 106.

画像レイアウト部１０６は、表示制御部１１０により設定されたレイアウト情報に基づいて、補正画像データに基づく画像である補正画像を配置するレイアウト処理を行うことにより、表示画像データを生成する。第１補正画像データのみが画像レイアウト部１０６に入力された場合には、画像レイアウト部１０６は、第１補正画像データに基づく画像である第１補正画像を配置するレイアウト処理を行うことにより、表示画像データを生成する。第２補正画像データのみが画像レイアウト部１０６に入力された場合には、画像レイアウト部１０６は、第２補正画像データに基づく画像である第２補正画像を配置するレイアウト処理を行うことにより、表示画像データを生成する。そして、第１補正画像データと第２補正画像データとが画像レイアウト部１０６に入力された場合には、画像レイアウト部１０６は、第１補正画像と第２補正画像とを配置するレイアウト処理を行うことにより、表示画像データを生成する。画像レイアウト部１０６は、表示画像データを表示部１０７へ出力する。レイアウト情報は、補正画像の表示領域を示す情報である。画像の表示領域は、画面の領域であり、画像が表示される領域である。レイアウト情報として、例えば、表示領域の代表座標（始点座標、終点座標、中心座標、等）、表示領域の始点座標と表示領域の終点座標との組み合わせ、表示領域の代表座標と表示領域のサイズ（幅と高さ）との組み合わせ、等が使用される。 The image layout unit 106 generates display image data by performing layout processing for arranging a corrected image, which is an image based on the corrected image data, based on the layout information set by the display control unit 110. When only the first corrected image data is input to the image layout unit 106, the image layout unit 106 displays by performing layout processing for arranging the first corrected image which is an image based on the first corrected image data. Generate image data. When only the second corrected image data is input to the image layout unit 106, the image layout unit 106 displays by performing layout processing for arranging the second corrected image which is an image based on the second corrected image data. Generate image data. When the first corrected image data and the second corrected image data are input to the image layout unit 106, the image layout unit 106 performs layout processing for arranging the first corrected image and the second corrected image. By doing so, display image data is generated. The image layout unit 106 outputs the display image data to the display unit 107. The layout information is information indicating a display area of the corrected image. The image display area is an area of the screen, and is an area in which the image is displayed. As layout information, for example, the representative coordinates of the display area (start point coordinates, end point coordinates, center coordinates, etc.), the combination of the start point coordinates of the display area and the end point coordinates of the display area, the representative coordinates of the display area and the size of the display area ( Width and height) combinations, etc. are used.

表示部１０７は、表示制御部１１０により設定された輝度情報（表示輝度に関する情報）に基づいて、表示画像データに基づく画像を表示する。表示輝度は、画面の輝度である。表示部１０７の解像度（画面解像度）は特に限定されないが、本実施例では、表示部１０７は、水平方向４１９０画素×垂直方向２１６０画素の解像度を有する。本実施例では、表示部１０７は、バックライトユニット（発光部）と液晶パネル（表示パネル）とを有する。バックライトユニットは、輝度情報に応じた発光輝度で発光し、液晶パネルに光を照射する。バックライトユニットの発光輝度は、バックライトユニットから発せられた光の輝度である。本実施例では、表示輝度の上限（上限表示輝度）に関する情報が輝度情報として使用される。そして、バックライトユニットは、ＨＤＲ画像が表示される領域とＳＤＲ画像が表示される領域とを含む液晶パネル全体（表示パネル全体；画面全体）の領域に対して、輝度情報に関連した表示輝度（上限表示輝度）に対応する発光輝度で発光する。輝度情報に関連した表示輝度（上限表示輝度）に対応する発光輝度とは、例えば、上限表示輝度と同じ発光輝度、または、上限表示輝度よりも高い発光輝度である。具体的には
、表示部１０７に入力される階調値の上限に対応する表示輝度が、輝度情報に関連した表示輝度（上限表示輝度）に一致するように、バックライトユニットの発光輝度が制御される。液晶パネルは、表示画像データに応じた透過率で、バックライトユニットからの光を透過する。それにより、表示画像データに基づく画像が表示される。 The display unit 107 displays an image based on the display image data based on the luminance information (information about the display luminance) set by the display control unit 110. The display brightness is the brightness of the screen. The resolution (screen resolution) of the display unit 107 is not particularly limited, but in this embodiment, the display unit 107 has a resolution of 4190 pixels in the horizontal direction × 2160 pixels in the vertical direction. In this embodiment, the display unit 107 has a backlight unit (light emitting unit) and a liquid crystal panel (display panel). The backlight unit emits light with a light emission brightness according to the brightness information, and irradiates the liquid crystal panel with light. The emission brightness of the backlight unit is the brightness of the light emitted from the backlight unit. In this embodiment, information regarding the upper limit of the display luminance (upper limit display luminance) is used as the luminance information. Then, the backlight unit has a display luminance (display brightness related to the luminance information) with respect to the region of the entire liquid crystal panel (entire display panel; entire screen) including the region where the HDR image is displayed and the region where the SDR image is displayed. It emits light with the emission brightness corresponding to the upper limit display brightness). The emission luminance corresponding to the display luminance (upper limit display luminance) related to the luminance information is, for example, the emission luminance same as the upper limit display luminance or the emission luminance higher than the upper limit display luminance. Specifically, the emission brightness of the backlight unit is controlled so that the display brightness corresponding to the upper limit of the gradation value input to the display unit 107 matches the display brightness (upper limit display brightness) related to the brightness information. Will be done. The liquid crystal panel transmits light from the backlight unit at a transmittance according to the display image data. As a result, an image based on the displayed image data is displayed.

なお、輝度情報に関連した表示輝度は、上限表示輝度に限られない。また、表示部１０７の構成は上記構成に限られない。例えば、表示部１０７は、自発光型の表示パネルであってもよい。表示部１０７が自発光型の表示パネルである場合には、例えば、輝度情報に応じて、表示部１０７に入力される階調値と、表示輝度との対応関係が変更される。具体的には、表示部１０７に入力される階調値の上限に対応する表示輝度が、輝度情報に関連した表示輝度（上限表示輝度）に一致するように、表示部１０７に入力される階調値と、表示輝度との対応関係が変更される。 The display brightness related to the brightness information is not limited to the upper limit display brightness. Further, the configuration of the display unit 107 is not limited to the above configuration. For example, the display unit 107 may be a self-luminous display panel. When the display unit 107 is a self-luminous display panel, for example, the correspondence between the gradation value input to the display unit 107 and the display luminance is changed according to the luminance information. Specifically, the floor input to the display unit 107 so that the display brightness corresponding to the upper limit of the gradation value input to the display unit 107 matches the display brightness (upper limit display brightness) related to the luminance information. The correspondence between the adjustment price and the display brightness is changed.

ＣＰＵ１０８は、不図示の不揮発性メモリに格納されたプログラムに従い、表示装置１００の動作を制御する。 The CPU 108 controls the operation of the display device 100 according to a program stored in a non-volatile memory (not shown).

ＵＩ部１０９は、表示装置１００に対するユーザ操作を受け付け、行われたユーザ操作に応じた処理を行う。ＵＩ部１０９としては、例えば、表示装置１００の筺体に設けられたボタン、リモートコントローラ、キーボード、マウス、等が使用される。本実施例では、ＵＩ部１０９は、表示輝度（上限表示輝度）を指定するユーザ操作、変換画像データの階調特性を指定するユーザ操作、等を受け付ける。ユーザが指定可能な階調特性は特に限定されないが、本実施例では、ユーザは、ガンマ２．２特性、ガンマ２．６特性、ＨＬＧ（Ｈｙｂｒｉｄ Ｌｏｇ Ｇａｍｍａ）特性、及び、ＰＱ特性のいずれかを指定することができる。また、ユーザは、第１変換画像データの階調特性と、第２変換画像データの階調特性とを個別に指定することができる。 The UI unit 109 receives a user operation on the display device 100 and performs processing according to the performed user operation. As the UI unit 109, for example, a button, a remote controller, a keyboard, a mouse, etc. provided on the housing of the display device 100 are used. In this embodiment, the UI unit 109 accepts a user operation for designating the display luminance (upper limit display luminance), a user operation for specifying the gradation characteristic of the converted image data, and the like. The gradation characteristics that can be specified by the user are not particularly limited, but in this embodiment, the user has one of gamma 2.2 characteristics, gamma 2.6 characteristics, HLG (Hybrid Log Gamma) characteristics, and PQ characteristics. Can be specified. Further, the user can individually specify the gradation characteristic of the first converted image data and the gradation characteristic of the second converted image data.

ガンマ２．２特性はガンマ値＝２．２の階調特性であり、ガンマ２．６特性はガンマ値＝２．６の階調特性である。ガンマ２．２特性、ガンマ２．６特性、等は「ガンマ特性」と呼ばれ、ガンマ特性へ階調特性を変換する処理は「ガンマ補正」、「ガンマ変換」、等と呼ばれる。ＨＬＧ（Ｈｙｂｒｉｄ Ｌｏｇ Ｇａｍｍａ）特性は、輝度の増加に対して階調値が対数的に増加する階調特性であるＬｏｇ特性と、ガンマ特性とを組み合わせた階調特性である。ＰＱ特性は、ＳＭＰＴＥ（米国映画テレビ技術者協会）により標準化された規格であるＳＴ２０８４に対応する階調特性である。 The gamma 2.2 characteristic is a gradation characteristic with a gamma value = 2.2, and the gamma 2.6 characteristic is a gradation characteristic with a gamma value = 2.6. The gamma 2.2 characteristic, gamma 2.6 characteristic, etc. are called "gamma characteristic", and the process of converting the gradation characteristic to the gamma characteristic is called "gamma correction", "gamma conversion", etc. The HLG (Hybrid Log Gamma) characteristic is a gradation characteristic that combines a Log characteristic, which is a gradation characteristic in which the gradation value increases logarithmically with an increase in luminance, and a gamma characteristic. The PQ characteristic is a gradation characteristic corresponding to ST2084, which is a standard standardized by SMPTE (Society of Motion Picture and Television Engineers).

本実施例では、階調特性に対応するダイナミックレンジが、ＨＤＲ（ハイダイナミックレンジ）とＳＤＲ（スタンダードダイナミックレンジ）との２種類のダイナミックレンジのいずれかに分類される。具体的には、図２に示すように、ガンマ２．２特性に対応するダイナミックレンジとガンマ２．６特性に対応するダイナミックレンジとは、ＳＤＲに分類される。そして、ＨＬＧ特性に対応するダイナミックレンジとＰＱ特性に対応するダイナミックレンジとは、ＨＤＲに分類される。ＳＤＲは、これまで広く利用されてきたダイナミックレンジであり、ＨＤＲは、ＳＤＲよりも広いダイナミックレンジである。また、本実施例では、ＨＤＲ（第１のダイナミックレンジ）を有する画像データを「ＨＤＲ画像データ（第１画像データ）」と記載し、ＨＤＲ画像データ（第１画像データ）に基づく画像を「ＨＤＲ画像（第１画像）」と記載する。そして、本実施例では、ＳＤＲ（第２のダイナミックレンジ）を有する画像データを「ＳＤＲ画像データ（第２画像データ）」と記載し、ＳＤＲ画像データ（第２画像データ）に基づく画像を「ＳＤＲ画像（第２画像）」と記載する。 In this embodiment, the dynamic range corresponding to the gradation characteristic is classified into one of two types of dynamic ranges, HDR (high dynamic range) and SDR (standard dynamic range). Specifically, as shown in FIG. 2, the dynamic range corresponding to the gamma 2.2 characteristic and the dynamic range corresponding to the gamma 2.6 characteristic are classified into SDR. The dynamic range corresponding to the HLG characteristic and the dynamic range corresponding to the PQ characteristic are classified into HDR. SDR is a dynamic range that has been widely used so far, and HDR is a wider dynamic range than SDR. Further, in this embodiment, the image data having HDR (first dynamic range) is described as "HDR image data (first image data)", and the image based on the HDR image data (first image data) is referred to as "HDR". Image (first image) ". In this embodiment, the image data having SDR (second dynamic range) is described as "SDR image data (second image data)", and the image based on the SDR image data (second image data) is referred to as "SDR". Image (second image) ".

上述したように、ユーザによって指定されるガンマ２．２特性、ガンマ２．６特性、ＨＬＧ特性、ＰＱ特性、等の階調特性は、変換画像データの階調特性である。そのため、本
実施例では、ＨＤＲ画像データとＳＤＲ画像データとは、画像処理部１０４により生成される画像データである。なお、第１のダイナミックレンジはＨＤＲに限られないし、第２のダイナミックレンジはＳＤＲに限られない。第２のダイナミックレンジが第１のダイナミックレンジよりも狭ければ、第１のダイナミックレンジと第２のダイナミックレンジとはどのようなダイナミックレンジであってもよい。 As described above, the gradation characteristics such as the gamma 2.2 characteristic, the gamma 2.6 characteristic, the HLG characteristic, and the PQ characteristic specified by the user are the gradation characteristics of the converted image data. Therefore, in this embodiment, the HDR image data and the SDR image data are image data generated by the image processing unit 104. The first dynamic range is not limited to HDR, and the second dynamic range is not limited to SDR. As long as the second dynamic range is narrower than the first dynamic range, the first dynamic range and the second dynamic range may be any dynamic range.

ＵＩ部１０９は、上限表示輝度を指定するユーザ操作に応じて輝度情報を取得（生成）し、不図示の揮発性メモリに輝度情報を記録し、表示制御部１１０に対して所定の輝度設定通知（上限表示輝度が指定された旨の通知）を行う。また、ＵＩ部１０９は、変換画像データの階調特性を指定するユーザ操作に応じて階調特性情報を取得（生成）し、不図示の揮発性メモリに階調特性情報を記録し、表示制御部１１０に対して所定の特性設定通知（階調特性が指定された旨の通知）を行う。なお、輝度情報が揮発性メモリに記録された後には、上限表示輝度が変更された場合に限って、輝度情報の記録（更新）と所定の輝度設定通知（輝度情報が更新された旨の通知）とが行われてもよい。また、階調特性情報が揮発性メモリに記録された後には、変換画像データの階調特性が変更された場合に限って、階調特性情報の記録（更新）と所定の特性設定通知（階調特性情報が更新された旨の通知）とが行われてもよい。 The UI unit 109 acquires (generates) the luminance information according to the user operation for designating the upper limit display luminance, records the luminance information in a volatile memory (not shown), and notifies the display control unit 110 of the predetermined luminance setting. (Notification that the upper limit display brightness has been specified) is performed. Further, the UI unit 109 acquires (generates) the gradation characteristic information according to the user operation for designating the gradation characteristic of the converted image data, records the gradation characteristic information in a volatile memory (not shown), and controls the display. A predetermined characteristic setting notification (notification that the gradation characteristic is specified) is given to the unit 110. After the luminance information is recorded in the volatile memory, only when the upper limit display luminance is changed, the luminance information is recorded (updated) and the predetermined luminance setting notification (notification that the luminance information is updated). ) And may be done. Further, after the gradation characteristic information is recorded in the volatile memory, only when the gradation characteristic of the converted image data is changed, the gradation characteristic information is recorded (updated) and the predetermined characteristic setting notification (floor). Notification that the key characteristic information has been updated) may be performed.

表示制御部１１０は、ＵＩ部１０９による特性設定通知に応じて、揮発性メモリから階調特性情報を読み出し、読み出した階調特性情報を画像処理部１０４に対して設定する。また、表示制御部１１０は、ＵＩ部１０９による輝度設定通知に応じて、揮発性メモリから輝度情報を読み出し、読み出した輝度情報を表示部１０７に対して設定する。また、表示制御部１１０は、入力画像データの数に応じたレイアウト情報を、画像レイアウト部１０６に対して設定する。例えば、入力画像データの数が１つである場合には、画面の中央部、画面の全領域、等を補正画像の表示領域として示すレイアウト情報が設定される。入力画像データの数が２つである場合には、第１補正画像と第２補正画像が左右に並べて表示されるように、左右に並んだ表示領域を示すレイアウト情報が設定される。図３は、入力画像データの数が２つである場合の表示画像（画面に表示された画像）の一例を示す。図３の例では、第１補正画像１２０が左側に表示されており、第２補正画像１２１が右側に表示されている。なお、表示領域を指定するユーザ操作に応じて、指定された表示領域を示すレイアウト情報が生成されてもよい。 The display control unit 110 reads out the gradation characteristic information from the volatile memory in response to the characteristic setting notification by the UI unit 109, and sets the read gradation characteristic information in the image processing unit 104. Further, the display control unit 110 reads the luminance information from the volatile memory in response to the luminance setting notification by the UI unit 109, and sets the read luminance information in the display unit 107. Further, the display control unit 110 sets layout information according to the number of input image data to the image layout unit 106. For example, when the number of input image data is one, layout information indicating the central portion of the screen, the entire area of the screen, etc. as the display area of the corrected image is set. When the number of input image data is two, layout information indicating the horizontally arranged display areas is set so that the first corrected image and the second corrected image are displayed side by side. FIG. 3 shows an example of a display image (image displayed on the screen) when the number of input image data is two. In the example of FIG. 3, the first corrected image 120 is displayed on the left side, and the second corrected image 121 is displayed on the right side. Note that layout information indicating the designated display area may be generated according to the user operation for designating the display area.

表示判断部１１１は、ＨＤＲ画像とＳＤＲ画像とが表示部１０７（画面）に表示されるか否かを判断し、判断結果を補正情報生成部１１２へ出力する。判断方法は特に限定されないが、本実施例では、表示判断部１１１は、画像処理部１０４に設定されている階調特性情報に基づいて、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示されるか否かを判断する。具体的には、複数の入力画像データが表示装置１００に入力されており、且つ、ＨＤＲに対応する階調特性情報と、ＳＤＲに対応する階調特性情報との両方が設定されている場合に、表示判断部１１１は、ＨＤＲ画像とＳＤＲ画像とが表示される、と判断する。そして、それ以外の場合に、表示判断部１１１は、ＨＤＲ画像とＳＤＲ画像の一方のみが表示される、と判断する。ＨＤＲに対応する階調特性情報は、ＨＬＧ特性、ＰＱ特性、等に対応する階調特性情報である。ＳＤＲに対応する階調特性情報は、ガンマ２．２特性、ガンマ２．６特性、等に対応する階調特性情報である。なお、表示判断部１１１は、ユーザ操作に応じて、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示されるか否かを判断してもよい。具体的には、ＨＤＲ画像とＳＤＲ画像とを表示部１０７に表示させる表示モードを指定するユーザ操作がなされたか否かを検知して、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示されるか否かを判断してもよい。また、複数の画像を表示する表示モードにおいて、ＨＤＲ画像とＳＤＲ画像とを含む画像の表示を指定するユーザ操作がなされたか否かを検知して、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示されるか否かを判断してもよい。 The display determination unit 111 determines whether or not the HDR image and the SDR image are displayed on the display unit 107 (screen), and outputs the determination result to the correction information generation unit 112. The determination method is not particularly limited, but in the present embodiment, the display determination unit 111 displays the HDR image and the SDR image on the display unit 107 based on the gradation characteristic information set in the image processing unit 104. Judge whether or not. Specifically, when a plurality of input image data are input to the display device 100 and both the HDR-corresponding gradation characteristic information and the SDR-corresponding gradation characteristic information are set. , The display determination unit 111 determines that the HDR image and the SDR image are displayed. Then, in other cases, the display determination unit 111 determines that only one of the HDR image and the SDR image is displayed. The gradation characteristic information corresponding to HDR is gradation characteristic information corresponding to HLG characteristics, PQ characteristics, and the like. The gradation characteristic information corresponding to the SDR is the gradation characteristic information corresponding to the gamma 2.2 characteristic, the gamma 2.6 characteristic, and the like. The display determination unit 111 may determine whether or not the HDR image and the SDR image are displayed on the display unit 107 according to the user operation. Specifically, whether or not a user operation for specifying a display mode for displaying the HDR image and the SDR image on the display unit 107 has been performed is detected, and whether the HDR image and the SDR image are displayed on the display unit 107. You may decide whether or not. Further, in the display mode for displaying a plurality of images, it is detected whether or not a user operation for designating the display of the image including the HDR image and the SDR image has been performed, and the HDR image and the SDR image are displayed on the display unit 107. You may decide whether or not to do so.

補正情報生成部１１２は、表示判断部１１１の判断結果に基づいて補正情報を生成し、生成した補正情報を輝度補正部１０５へ出力する。補正情報とその生成方法とは特に限定されないが、本実施例では、補正情報として、変換画像データの取り得る複数の階調値の間で共通の１つの輝度補正値が生成（決定）される。また、本実施例では、輝度補正値として、階調値に乗算するゲイン値が生成される。 The correction information generation unit 112 generates correction information based on the determination result of the display determination unit 111, and outputs the generated correction information to the luminance correction unit 105. The correction information and the method of generating the correction information are not particularly limited, but in the present embodiment, one luminance correction value common to a plurality of possible gradation values of the converted image data is generated (determined) as the correction information. .. Further, in this embodiment, a gain value to be multiplied by the gradation value is generated as the luminance correction value.

本実施例では、ＨＤＲ画像とＳＤＲ画像との両方が表示される、と判断された場合に、補正情報生成部１１２は、以下の条件１，２が満たされるように、第１補正情報（第１輝度補正値）と第２補正情報（第２輝度補正値）とを決定する。

条件１：輝度情報に関連した表示輝度に従ってＨＤＲ画像が表示される。
条件２：輝度情報に関連した表示輝度よりも低い表示輝度に従ってＳＤＲ画像が表示される。
In this embodiment, when it is determined that both the HDR image and the SDR image are displayed, the correction information generation unit 112 determines the first correction information (first correction information) so that the following conditions 1 and 2 are satisfied. 1) the brightness correction value) and the second correction information (the second brightness correction value) are determined.

Condition 1: The HDR image is displayed according to the display luminance related to the luminance information.
Condition 2: The SDR image is displayed according to the display luminance lower than the display luminance associated with the luminance information.

具体的には、補正情報生成部１１２は、ＳＤＲ画像データである変換画像データを補正する輝度補正値を、表示部１０７に設定されている輝度情報（上限表示輝度）に基づいて算出する。より具体的には、補正情報生成部１１２は、輝度補正値を、以下の式１を用いて算出する。式１において、「表示ガンマ」は、表示部１０７（液晶パネル）のガンマ値である。表示ガンマの値は特に限定されないが、本実施例では、表示ガンマの値は２．２である。

輝度補正値
＝（１００［ｃｄ／ｍ２］／上限表示輝度［ｃｄ／ｍ２］）１／表示ガンマ
・・・（式１）
Specifically, the correction information generation unit 112 calculates the luminance correction value for correcting the converted image data, which is the SDR image data, based on the luminance information (upper limit display luminance) set in the display unit 107. More specifically, the correction information generation unit 112 calculates the luminance correction value using the following equation 1. In Equation 1, the "display gamma" is the gamma value of the display unit 107 (liquid crystal panel). The value of the display gamma is not particularly limited, but in this embodiment, the value of the display gamma is 2.2.

Luminance correction value = (100 [cd / m 2 ] / upper limit display brightness [cd / m 2 ]) 1 / display gamma
... (Equation 1)

上述したように、本実施例では、バックライトユニットは、輝度情報に関連した表示輝度（上限表示輝度）に対応する発光輝度で発光する。そのため、式１で算出された輝度補正値を使用することにより、所定の表示輝度（１００［ｃｄ／ｍ２］）に従ってＳＤＲ画像が表示されるように、ＳＤＲ画像データが補正される。具体的には、ＳＤＲ画像の表示輝度の上限が１００［ｃｄ／ｍ２］と一致するように、ＳＤＲ画像データが補正される。なお、所定の表示輝度は１００［ｃｄ／ｍ２］に限られない。 As described above, in the present embodiment, the backlight unit emits light with the emission luminance corresponding to the display luminance (upper limit display luminance) related to the luminance information. Therefore, by using the luminance correction value calculated by the equation 1, the SDR image data is corrected so that the SDR image is displayed according to a predetermined display luminance (100 [cd / m 2]). Specifically, the SDR image data is corrected so that the upper limit of the display brightness of the SDR image matches 100 [cd / m 2]. The predetermined display brightness is not limited to 100 [cd / m 2].

そして、補正情報生成部１１２は、ＨＤＲ画像データである変換画像データを補正する輝度補正値として、１を出力する。輝度補正値＝１が使用された場合には、補正画像データとして、変換画像データと同じ画像データが得られる。そのため、本実施例では、ＨＤＲ画像データである変換画像データからは、当該変換画像データと同じ補正画像データが生成される。即ち、ＨＤＲ画像データは補正されない。その結果、輝度情報に関連した表示輝度に従ってＨＤＲ画像が表示される。具体的には、上限が輝度情報に関連した表示輝度と一致するような表示輝度で、ＨＤＲ画像が表示される。
Then, the correction information generation unit 112 outputs 1 as a luminance correction value for correcting the converted image data which is the HDR image data. When the luminance correction value = 1 is used, the same image data as the converted image data can be obtained as the corrected image data. Therefore, in this embodiment, the same corrected image data as the converted image data is generated from the converted image data which is the HDR image data. That is, the HDR image data is not corrected . As a result, HDR image is displayed according to the display luminance in relation to the luminance information. Specifically, the HDR image is displayed with a display luminance such that the upper limit matches the display luminance related to the luminance information.

また、本実施例では、ＨＤＲ画像とＳＤＲ画像の一方のみが表示される、と判断された場合には、補正情報生成部１１２は、第１輝度補正値および第２輝度補正値として、１を出力する。なお、輝度補正値＝１の場合には、変換画像データの補正（変換画像データの各階調値に輝度補正値を乗算する処理）は省略され、変換画像データが補正画像データとして使用されてもよい。また、ＨＤＲ画像とＳＤＲ画像が表示される場合において、ＳＤＲ画像データだけでなく、ＨＤＲ画像データがさらに補正されてもよい。 Further, in the present embodiment, when it is determined that only one of the HDR image and the SDR image is displayed, the correction information generation unit 112 sets 1 as the first luminance correction value and the second luminance correction value. Output. When the brightness correction value = 1, the correction of the converted image data (the process of multiplying each gradation value of the converted image data by the brightness correction value) is omitted, and even if the converted image data is used as the corrected image data. good. Further, when the HDR image and the SDR image are displayed, not only the SDR image data but also the HDR image data may be further corrected.

表示装置１００の処理フローの一例について、図４のフローチャートを用いて説明する。図４のフローチャートが開始されるタイミングは特に限定されない。例えば、図４のフローチャートは、ＵＩ部１０９から表示制御部１１０への通知（輝度設定通知、特性設定通知、等）が行われたことをトリガとして開始される。 An example of the processing flow of the display device 100 will be described with reference to the flowchart of FIG. The timing at which the flowchart of FIG. 4 is started is not particularly limited. For example, the flowchart of FIG. 4 is started with the notification (brightness setting notification, characteristic setting notification, etc.) from the UI unit 109 to the display control unit 110 as a trigger.

まず、表示判断部１１１は、画像処理部１０４に設定されている階調特性情報に基づいて、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示されるか否かを判断する（Ｓ１０１）。例えば、第１入力画像データと第２入力画像データが表示装置１００に入力され、第１特性情報がＨＬＧ特性に対応し、且つ、第２特性情報がガンマ２．２特性に対応する場合に、ＨＤＲ画像とＳＤＲ画像とが表示される、と判断される。 First, the display determination unit 111 determines whether or not the HDR image and the SDR image are displayed on the display unit 107 based on the gradation characteristic information set in the image processing unit 104 (S101). For example, when the first input image data and the second input image data are input to the display device 100, the first characteristic information corresponds to the HLG characteristic, and the second characteristic information corresponds to the gamma 2.2 characteristic. It is determined that the HDR image and the SDR image are displayed.

ＨＤＲ画像とＳＤＲ画像とが表示される、と判断された場合には（Ｓ１０１：Ｙｅｓ）、補正情報生成部１１２は、式１を用いて、ＳＤＲ画像に対応する輝度補正値を算出する（Ｓ１０２）。また、補正情報生成部１１２は、ＨＤＲ画像に対応する輝度補正値として１を採用する。例えば、第１特性情報がＨＬＧ特性に対応し、第２特性情報がガンマ２．２特性に対応し、且つ、輝度情報（上限表示輝度）が４００［ｃｄ／ｍ２］である場合には、第１輝度補正値として１が採用される。そして、第２輝度補正値として０．５３（＝（１／４００）１／２．２）が算出される。その後、Ｓ１０３へ処理が進められる。 When it is determined that the HDR image and the SDR image are displayed (S101: Yes), the correction information generation unit 112 calculates the luminance correction value corresponding to the SDR image using Equation 1 (S102). ). Further, the correction information generation unit 112 adopts 1 as the luminance correction value corresponding to the HDR image. For example, when the first characteristic information corresponds to the HLG characteristic, the second characteristic information corresponds to the gamma 2.2 characteristic, and the luminance information (upper limit display luminance) is 400 [cd / m 2 ]. 1 is adopted as the first luminance correction value. Then, 0.53 (= (1/400) 1 / 2.2 ) is calculated as the second luminance correction value. After that, the process proceeds to S103.

ＨＤＲ画像とＳＤＲ画像の一方のみが表示される、と判断された場合には（Ｓ１０１：Ｎｏ）、補正情報生成部１１２は、第１輝度補正値と第２輝度補正値との両方として、１を採用する（Ｓ１０３）。その後、Ｓ１０４へ処理が進められる。
When it is determined that only one of the HDR image and the SDR image is displayed (S101: No), the correction information generation unit 112 sets 1 as both the first luminance correction value and the second luminance correction value. (S103). Thereafter, the process proceeds to S10 4.

その後、補正情報生成部１１２は、採用（算出）した輝度補正値を、輝度補正部１０５に対して設定する（Ｓ１０４）。 After that, the correction information generation unit 112 sets the adopted (calculated) luminance correction value for the luminance correction unit 105 (S104).

図５（Ａ），５（Ｂ）は、変換画像データ（または入力画像データ）の階調値と、表示装置１００の表示輝度との対応関係の一例を示す図である。図５（Ａ）は、輝度補正値＝１を用いた場合の例を示し、図５（Ｂ）は、式１により算出された輝度補正値を用いた場合の例を示す。画像データのビット数は特に限定されないが、図５（Ａ），５（Ｂ）の例では、画像データの階調値は８ビットの値（０〜２５５）である。また、輝度情報に関連した上限表示輝度は特に限定されないが、図５（Ａ），５（Ｂ）の例では、輝度情報に関連した上限表示輝度は４００［ｃｄ／ｍ２］である。 5 (A) and 5 (B) are diagrams showing an example of the correspondence between the gradation value of the converted image data (or the input image data) and the display luminance of the display device 100. FIG. 5A shows an example when the luminance correction value = 1 is used, and FIG. 5B shows an example when the luminance correction value calculated by the equation 1 is used. The number of bits of the image data is not particularly limited, but in the examples of FIGS. 5A and 5B, the gradation value of the image data is an 8-bit value (0 to 255). Further, the upper limit display brightness related to the luminance information is not particularly limited, but in the example of FIGS. 5A and 5B, the upper limit display luminance related to the luminance information is 400 [cd / m 2 ].

図５（Ａ）に示すように、輝度補正値＝１が使用された場合には、変換画像データの取り得る階調値の上限（２５５）に対応する表示輝度が４００［ｃｄ／ｍ２］に一致するように、変換画像データが補正されて表示される。上述したように、ＨＤＲ画像とＳＤＲ画像が表示される場合に、ＨＤＲ画像については、輝度補正値＝１が使用される。そのため、ＨＤＲ画像は、上限が４００［ｃｄ／ｍ２］に一致するような表示輝度で表示される。 As shown in FIG. 5A, when the luminance correction value = 1 is used, the display luminance corresponding to the upper limit (255) of the possible gradation values of the converted image data is 400 [cd / m 2 ]. The converted image data is corrected and displayed so as to match. As described above, when the HDR image and the SDR image are displayed, the luminance correction value = 1 is used for the HDR image. Therefore, the HDR image is displayed with a display luminance such that the upper limit corresponds to 400 [cd / m 2].

図５（Ｂ）に示すように、式１により算出された輝度補正値が使用された場合には、変換画像データの取り得る階調値の上限（２５５）に対応する表示輝度が１００［ｃｄ／ｍ２］に一致するように、変換画像データが補正されて表示される。上述したように、ＨＤＲ画像とＳＤＲ画像が表示される場合に、ＳＤＲ画像については、式１により算出された輝度補正値が使用される。そのため、ＳＤＲ画像は、上限が１００［ｃｄ／ｍ２］に一致するような表示輝度で表示される。 As shown in FIG. 5B, when the luminance correction value calculated by Equation 1 is used, the display luminance corresponding to the upper limit (255) of the possible gradation values of the converted image data is 100 [cd. The converted image data is corrected and displayed so as to match [/ m 2]. As described above, when the HDR image and the SDR image are displayed, the luminance correction value calculated by Equation 1 is used for the SDR image. Therefore, the SDR image is displayed with a display luminance such that the upper limit corresponds to 100 [cd / m 2].

以上述べたように、本実施例によれば、輝度情報が取得され、第１画像と第２画像とが表示部（画面）に表示される場合に、ＳＤＲ画像データ（第２画像データ）が補正される。具体的には、輝度情報に関連した表示輝度に従って第１画像が表示され、且つ、輝度情
報に関連した表示輝度よりも低い表示輝度に従って第２画像が表示されるように、ＳＤＲ画像データ（第２画像データ）が補正される。それにより、複数の画像を表示部に表示する際に各画像を好ましい輝度で表示することを、簡易な構成で実現することができる。具体的には、バックライトユニットの発光輝度を部分的に変更可能にする構成、表示部に入力される階調値と、表示輝度との対応関係を部分的に変更可能にする構成、等を採用せずに、画像処理により、各画像を好ましい輝度で表示することができる。 As described above, according to the present embodiment, when the luminance information is acquired and the first image and the second image are displayed on the display unit (screen), the SDR image data (second image data) is obtained. It will be corrected. Specifically, the SDR image data (third) so that the first image is displayed according to the display luminance related to the luminance information and the second image is displayed according to the display luminance lower than the display luminance related to the luminance information. 2 Image data) is corrected. As a result, when displaying a plurality of images on the display unit, it is possible to display each image with preferable brightness with a simple configuration. Specifically, a configuration that makes it possible to partially change the emission brightness of the backlight unit, a configuration that makes it possible to partially change the correspondence between the gradation value input to the display unit and the display brightness, and the like. Instead of adopting it, each image can be displayed with a preferable brightness by image processing.

なお、本実施例では、１つまたは２つの画像が画面に表示される例を説明したが、画面に表示される画像の数は３つ以上であってもよい。また、本実施例では、表示装置に入力される画像データの最大数が２つである場合の例を説明したが、当該最大数は、１つであってもよいし、３つ以上であってもよい。また、本実施例では、１つの入力画像データから１つの変換画像データが生成される例を説明したが、１つの入力画像データから、階調特性が互いに異なる複数の変換画像データが生成されてもよい。 In this embodiment, an example in which one or two images are displayed on the screen has been described, but the number of images displayed on the screen may be three or more. Further, in this embodiment, an example in which the maximum number of image data input to the display device is two has been described, but the maximum number may be one or three or more. You may. Further, in this embodiment, an example in which one converted image data is generated from one input image data has been described, but a plurality of converted image data having different gradation characteristics are generated from one input image data. May be good.

＜実施例２＞
以下、本発明の実施例２について説明する。実施例１では、所定の表示輝度（１００［ｃｄ／ｍ２］）に従ってＳＤＲ画像が表示されるようにＳＤＲ画像データが補正される例を説明した。本実施例では、実施例１とは異なる方法でＳＤＲ画像データを補正する例を説明する。なお、以下では、実施例１と異なる構成や処理について説明し、実施例１と同様の構成や処理についての説明は省略する。 <Example 2>
Hereinafter, Example 2 of the present invention will be described. In Example 1, an example in which the SDR image data is corrected so that the SDR image is displayed according to a predetermined display luminance (100 [cd / m 2]) has been described. In this embodiment, an example of correcting the SDR image data by a method different from that of the first embodiment will be described. In the following, a configuration and processing different from those of the first embodiment will be described, and a description of the same configuration and processing as that of the first embodiment will be omitted.

ＳＴ２０８４の規定では、ＨＤＲ画像の輝度の上限は１００００［ｃｄ／ｍ２］である。しかし、表示装置の表示輝度には制限があり、表示輝度の上限が１００００［ｃｄ／ｍ２］よりも低い表示装置がある。そのような表示装置では、１００００［ｃｄ／ｍ２］よりも低い表示輝度に関連した輝度情報が取得され、１００００［ｃｄ／ｍ２］よりも低い表示輝度に従ってＨＤＲ画像が表示される。 According to the regulations of ST2084, the upper limit of the brightness of the HDR image is 10000 [cd / m 2 ]. However, there is a limit to the display brightness of the display device, and there is a display device in which the upper limit of the display brightness is lower than 10000 [cd / m 2]. In such a display device, luminance information related to the display brightness lower than 10000 [cd / m 2 ] is acquired, and the HDR image is displayed according to the display brightness lower than 10000 [cd / m 2].

図６は、規格で定められた輝度（規格輝度）と、表示装置の表示輝度との対応関係の一例を示す。図６では、規格輝度の上限が１２００［ｃｄ／ｍ２］であり、表示輝度の上限が６００［ｃｄ／ｍ２］である。この場合には、図６に示すように、画像（ＨＤＲ画像）の各規格輝度は、規格輝度の１／２の表示輝度で表示される。例えば、規格輝度＝１２００［ｃｄ／ｍ２］は、表示輝度＝６００［ｃｄ／ｍ２］で表示される。そして、規格輝度の上限が１２００［ｃｄ／ｍ２］であるＨＤＲ画像と、ＳＤＲ画像とをユーザが確認する場合には、表示輝度比（ＨＤＲ画像の輝度：ＳＤＲ画像の輝度）＝１２００：１００＝１２：１で、ＨＤＲ画像とＳＤＲ画像とが表示されることが好ましい。
FIG. 6 shows an example of the correspondence between the luminance (standard luminance) defined by the standard and the display luminance of the display device. In FIG. 6, the upper limit of the standard luminance is 1200 [cd / m 2 ], and the upper limit of the display luminance is 600 [cd / m 2 ]. In this case, as shown in FIG. 6, each standard luminance of the image (HDR image) is displayed with a display luminance of 1/2 of the standard luminance. For example, the standard luminance = 1200 [cd / m 2 ] is displayed with the display luminance = 600 [cd / m 2 ]. Then, the HDR image maximum standard luminance is 1200 [cd / m 2], when the SDR image user confirms the display luminance ratio (the HDR image luminance: luminance of the SDR image) = 1200: 100 It is preferable that the HDR image and the SDR image are displayed at = 12: 1.

そこで、本実施例では、ＨＤＲ画像とＳＤＲ画像とが表示部に表示される場合に、ＨＤＲ画像の表示輝度と、ＳＤＲ画像の表示輝度との比が所定比となるように、少なくともＳＤＲ画像データを補正する。その結果、規格輝度よりも低い表示輝度でＨＤＲ画像が表示される場合に、ＨＤＲ画像の輝度低下率（規格輝度に対する表示輝度（ＨＤＲ画像の表示輝度）の割合）でＳＤＲ画像の表示輝度も低下される。 Therefore, in this embodiment, when the HDR image and the SDR image are displayed on the display unit, at least the SDR image data is set so that the ratio between the display brightness of the HDR image and the display brightness of the SDR image becomes a predetermined ratio. To correct. As a result, when the HDR image is displayed with a display brightness lower than the standard brightness, the display brightness of the SDR image is also reduced by the brightness reduction rate of the HDR image (the ratio of the display brightness (display brightness of the HDR image) to the standard brightness). Will be done.

図７は、本実施例に係る表示装置２００の構成の一例を示すブロック図である。図７において、実施例１（図１）と同じ機能部には、実施例１と同じ符号が付されている。表示装置２００は、画像入力部１０１、画像処理部１０４、輝度補正部１０５、画像レイアウト部１０６、表示部１０７、ＣＰＵ１０８、ＵＩ部１０９、表示制御部１１０、表示判断部１１１、及び、補正情報生成部２０１を有する。以下では、輝度情報に関連した上限表示輝度が６００［ｃｄ／ｍ２］であり、且つ、ＨＤＲ画像の規格輝度と、表示装置２００の表示輝度との対応関係が図６に示す対応関係である場合の例を説明する。 FIG. 7 is a block diagram showing an example of the configuration of the display device 200 according to the present embodiment. In FIG. 7, the same functional units as those in the first embodiment (FIG. 1) are designated by the same reference numerals as those in the first embodiment. The display device 200 includes an image input unit 101, an image processing unit 104, a brightness correction unit 105, an image layout unit 106, a display unit 107, a CPU 108, a UI unit 109, a display control unit 110, a display determination unit 111, and correction information generation. It has a unit 201. In the following, the upper limit display luminance related to the luminance information is 600 [cd / m 2 ], and the correspondence between the standard luminance of the HDR image and the display luminance of the display device 200 is the correspondence relationship shown in FIG. An example of the case will be described.

補正情報生成部２０１は、実施例１の補正情報生成部１１２と同様に、表示判断部１１１の判断結果に基づいて補正情報を生成し、生成した補正情報を輝度補正部１０５へ出力する。本実施例では、ＨＤＲ画像とＳＤＲ画像との両方が表示される、と判断された場合に、ＨＤＲ画像の表示輝度：ＳＤＲ画像の表示輝度＝１２：１（所定比）となるように、補正情報が生成される。補正情報とその生成方法とは特に限定されないが、本実施例では、補正情報生成部２０１は、実施例１の方法で算出した輝度補正値に、輝度情報に関連した上限表示輝度と上限規格輝度（規格輝度の上限）との比がさらに乗算される。それにより、ＳＤＲ画像に対応する輝度補正値が算出される。また、実施例１と同様に、ＨＤＲ画像に対応する輝度補正値として、１が採用される。 Similar to the correction information generation unit 112 of the first embodiment, the correction information generation unit 201 generates correction information based on the judgment result of the display determination unit 111, and outputs the generated correction information to the luminance correction unit 105. In this embodiment, when it is determined that both the HDR image and the SDR image are displayed, the display brightness of the HDR image: the display brightness of the SDR image = 12: 1 (predetermined ratio) is corrected. Information is generated. The correction information and the method of generating the correction information are not particularly limited, but in the present embodiment, the correction information generation unit 201 adds the brightness correction value calculated by the method of the first embodiment to the upper limit display luminance and the upper limit standard luminance related to the luminance information. The ratio with (upper limit of standard brightness) is further multiplied. As a result, the luminance correction value corresponding to the SDR image is calculated. Further, as in the first embodiment, 1 is adopted as the luminance correction value corresponding to the HDR image.

上限規格輝度は、ＨＤＲ画像のデータフォーマットに応じて決まる。表示装置２００では、例えば、ユーザにより指定された階調特性（ＨＤＲ画像に対応する変換画像データの階調特性）に応じて、上限規格輝度が決定されて使用される。具体的には、階調特性と上限規格輝度との対応関係が予め定められており、指定された階調特性に対応する上限規格輝度が選択されて使用される。例えば、ＨＬＧ特性が指定された場合には上限規格輝度＝１２００［ｃｄ／ｍ２］が使用され、ＰＱ特性が指定された場合には上限規格輝度＝１００００［ｃｄ／ｍ２］が使用される。 The upper limit standard luminance is determined according to the data format of the HDR image. In the display device 200, for example, the upper limit standard luminance is determined and used according to the gradation characteristic (gradation characteristic of the converted image data corresponding to the HDR image) specified by the user. Specifically, the correspondence relationship between the gradation characteristic and the upper limit standard luminance is predetermined, and the upper limit standard luminance corresponding to the designated gradation characteristic is selected and used. For example, when the HLG characteristic is specified, the upper limit standard brightness = 1200 [cd / m 2 ] is used, and when the PQ characteristic is specified, the upper limit standard brightness = 10000 [cd / m 2 ] is used. ..

例えば、補正情報生成部２０１は、ＳＤＲ画像に対応する輝度補正値を、以下の式２を用いて算出する。

輝度補正値
＝（（１００／上限表示輝度）×（上限表示輝度／上限規格輝度））１／表示ガンマ
・・・（式２）
For example, the correction information generation unit 201 calculates the luminance correction value corresponding to the SDR image using the following equation 2.

Brightness correction value = ((100 / upper limit display brightness) x (upper limit display brightness / upper limit standard brightness)) 1 / display gamma
... (Equation 2)

式２は、以下の式３のように簡略化することができる。つまり、本実施例では、ＳＤＲ画像に対応する輝度補正値を、上限規格輝度に基づいて算出することができる。

輝度補正値＝（１００／上限規格輝度）１／表示ガンマ ・・・（式３）
Equation 2 can be simplified as in Equation 3 below. That is, in this embodiment, the luminance correction value corresponding to the SDR image can be calculated based on the upper limit standard luminance.

Luminance correction value = (100 / upper limit standard brightness) 1 / Display gamma ... (Equation 3)

上記処理により、ＨＤＲ画像の表示輝度は変更されず、ＳＤＲ画像の表示輝度は１／１２倍の表示輝度に低減される。その結果、上限が６００［ｃｄ／ｍ２］と一致するような表示輝度でＨＤＲ画像が表示され、上限が５０（＝６００／１２）［ｃｄ／ｍ２］と一致するような表示輝度でＳＤＲ画像が表示される。つまり、表示輝度比（ＨＤＲ画像の輝度：ＳＤＲ画像の輝度）＝１２：１で、ＨＤＲ画像とＳＤＲ画像とが表示される。なお、所定比は１２：１に限られない。 By the above processing, the display brightness of the HDR image is not changed, and the display brightness of the SDR image is reduced to 1/12 times the display brightness. As a result, the HDR image is displayed with a display brightness that matches the upper limit of 600 [cd / m 2 ], and the SDR has a display brightness that matches the upper limit of 50 (= 600/12) [cd / m 2]. The image is displayed. That is, the HDR image and the SDR image are displayed with the display luminance ratio (the luminance of the HDR image: the luminance of the SDR image) = 12: 1. The predetermined ratio is not limited to 12: 1.

以上述べたように、本実施例によれば、ＨＤＲ画像の表示輝度と、ＳＤＲ画像の表示輝度との比が所定比となるように、ＳＤＲ画像データ（第２画像データ）が補正される。それにより、複数の画像を表示部に表示する際に各画像を好ましい輝度比で表示することを、簡易な構成で実現することができる。 As described above, according to the present embodiment, the SDR image data (second image data) is corrected so that the ratio between the display luminance of the HDR image and the display luminance of the SDR image becomes a predetermined ratio. Thereby, when displaying a plurality of images on the display unit, it is possible to realize that each image is displayed at a preferable luminance ratio with a simple configuration.

＜実施例３＞
以下、本発明の実施例３について説明する。なお、以下では、実施例１と異なる構成や処理について説明し、実施例１と同様の構成や処理についての説明は省略する。本実施例の構成は、実施例２の構成に組み合わせることもできる。実施例１では、輝度情報と階調特性情報がユーザ操作に応じて取得される例を説明した。本実施例では、輝度情報と階調特性情報が入力画像データのメタデータに含まれており、メタデータから輝度情報と階調
特性情報が取得される例を説明する。 <Example 3>
Hereinafter, Example 3 of the present invention will be described. In the following, a configuration and processing different from those of the first embodiment will be described, and a description of the same configuration and processing as that of the first embodiment will be omitted. The configuration of the present embodiment can also be combined with the configuration of the second embodiment. In the first embodiment, an example in which the luminance information and the gradation characteristic information are acquired according to the user operation has been described. In this embodiment, the brightness information and the gradation characteristic information are included in the metadata of the input image data, and an example in which the brightness information and the gradation characteristic information are acquired from the metadata will be described.

図８は、本実施例に係る表示装置４００の構成の一例を示すブロック図である。図８において、実施例１（図１）と同じ機能部には、実施例１と同じ符号が付されている。表示装置４００には、画像出力装置３００と特性情報変更装置３１０とが接続されている。また、画像出力装置３００と特性情報変更装置３１０とは互いに接続されている。装置間の接続方法は特に限定されないが、本実施例では、ＳＤＩケーブルを用いて複数の装置が互いに接続される。 FIG. 8 is a block diagram showing an example of the configuration of the display device 400 according to the present embodiment. In FIG. 8, the same functional units as those in the first embodiment (FIG. 1) are designated by the same reference numerals as those in the first embodiment. An image output device 300 and a characteristic information changing device 310 are connected to the display device 400. Further, the image output device 300 and the characteristic information changing device 310 are connected to each other. The connection method between the devices is not particularly limited, but in this embodiment, a plurality of devices are connected to each other by using an SDI cable.

画像出力装置３００は、画像データを出力する。画像出力装置３００は、ＨＤＲ画像データを出力することができる。画像出力装置３００としては、デジタルカメラ、レコーダ、ＰＣ、等を使用することができる。本実施例では、輝度情報と階調特性情報を含むメタデータが画像データに付加され、メタデータが付加された後の画像データが画像出力装置３００から出力される。本実施例では、画像データとしてＳＤＩ信号が画像出力装置３００から出力され、メタデータはＳＤＩ信号のアンシラリー領域に付加される。メタデータに含まれた輝度情報は、例えば、メタデータに含まれた階調特性情報に対応する上限規格輝度に関する情報、画像出力装置３００から出力される画像データの規格輝度の最大輝度に関する情報、等である。 The image output device 300 outputs image data. The image output device 300 can output HDR image data. As the image output device 300, a digital camera, a recorder, a PC, or the like can be used. In this embodiment, metadata including brightness information and gradation characteristic information is added to the image data, and the image data after the metadata is added is output from the image output device 300. In this embodiment, the SDI signal is output from the image output device 300 as image data, and the metadata is added to the ancillary region of the SDI signal. The brightness information included in the metadata is, for example, information on the upper limit standard brightness corresponding to the gradation characteristic information included in the metadata, information on the maximum brightness of the standard brightness of the image data output from the image output device 300, and the like. And so on.

画像出力装置３００から出力される画像データの階調特性は特に限定されないが、本実施例では、ＰＱ特性を有するＨＤＲ画像データが画像出力装置３００から出力される例を説明する。また、本実施例では、ＰＱ特性に関する階調特性情報が上記ＨＤＲ画像データのメタデータに含められる例を説明する。即ち、本実施例では、画像出力装置３００から出力される画像データの階調特性に関する階調特性情報が、画像出力装置３００から出力される画像データのメタデータに含められる。なお、画像出力装置３００から出力された画像データの階調特性は、当該画像データのメタデータに含められた階調特性情報に関連した階調特性と異なっていてもよい。 The gradation characteristics of the image data output from the image output device 300 are not particularly limited, but in this embodiment, an example in which HDR image data having PQ characteristics is output from the image output device 300 will be described. Further, in this embodiment, an example in which gradation characteristic information regarding PQ characteristics is included in the metadata of the HDR image data will be described. That is, in this embodiment, the gradation characteristic information regarding the gradation characteristic of the image data output from the image output device 300 is included in the metadata of the image data output from the image output device 300. The gradation characteristic of the image data output from the image output device 300 may be different from the gradation characteristic related to the gradation characteristic information included in the metadata of the image data.

特性情報変更装置３１０は、画像出力装置３００から出力された画像データに対して、メタデータに含まれている階調特性情報を変更する処理を施し、処理が施された後の画像データを出力する。特性情報変更装置３１０としては、ＰＣなどを使用することができる。なお、特性情報変更装置３１０は、画像出力装置３００に設けられていてもよい。 The characteristic information changing device 310 performs a process of changing the gradation characteristic information included in the metadata on the image data output from the image output device 300, and outputs the processed image data. do. As the characteristic information changing device 310, a PC or the like can be used. The characteristic information changing device 310 may be provided in the image output device 300.

特性情報変更装置３１０から出力される画像データの階調特性は特に限定されない。本実施例では、特性情報変更装置３１０は、画像出力装置３００から出力された画像データ（ＰＱ特性を有するＨＤＲ画像データ）を、ガンマ２．２特性を有するＳＤＲ画像データに変換する。特性情報変更装置３１０は、ガンマ２．２特性に関する階調特性情報を含むメタデータを、上記ＳＤＲ画像データに付加する。そして、特性情報変更装置３１０は、得られたＳＤＲ画像データ（ガンマ２．２特性を有し、且つ、ガンマ２．２特性に関する階調特性情報を含むメタデータが付加されたＳＤＲ画像データ）を出力する。即ち、本実施例では、特性情報変更装置３１０から出力される画像データの階調特性に関する階調特性情報が、特性情報変更装置３１０から出力される画像データのメタデータに含められる。なお、特性情報変更装置３１０から出力された画像データの階調特性は、当該画像データのメタデータに含められた階調特性情報に関連した階調特性と異なっていてもよい。また、特性情報変更装置３１０に入力された画像データの階調特性を変換する処理は行われなくてもよい。 The gradation characteristics of the image data output from the characteristic information changing device 310 are not particularly limited. In this embodiment, the characteristic information changing device 310 converts the image data (HDR image data having PQ characteristics) output from the image output device 300 into SDR image data having gamma 2.2 characteristics. The characteristic information changing device 310 adds metadata including gradation characteristic information regarding the gamma 2.2 characteristic to the SDR image data. Then, the characteristic information changing device 310 feeds the obtained SDR image data (SDR image data having gamma 2.2 characteristics and to which metadata including gradation characteristic information regarding the gamma 2.2 characteristics is added). Output. That is, in this embodiment, the gradation characteristic information regarding the gradation characteristic of the image data output from the characteristic information changing device 310 is included in the metadata of the image data output from the characteristic information changing device 310. The gradation characteristic of the image data output from the characteristic information changing device 310 may be different from the gradation characteristic related to the gradation characteristic information included in the metadata of the image data. Further, the process of converting the gradation characteristic of the image data input to the characteristic information changing device 310 may not be performed.

表示装置４００は、画像入力部４０１、画像処理部１０４、輝度補正部１０５、画像レイアウト部１０６、表示部１０７、ＣＰＵ１０８、ＵＩ部１０９、表示制御部４０２、表示判断部１１１、及び、補正情報生成部１１２を有する。 The display device 400 includes an image input unit 401, an image processing unit 104, a brightness correction unit 105, an image layout unit 106, a display unit 107, a CPU 108, a UI unit 109, a display control unit 402, a display determination unit 111, and correction information generation. It has a part 112.

画像入力部４０１は、実施例１の画像入力部１０１と同様に、表示装置４００の外部から画像データ（入力画像データ）を取得し、入力画像データを画像処理部１０４へ出力する。さらに、画像入力部４０１は、取得した画像データに付加されているメタデータを、表示制御部４０２へ出力する。本実施例では、画像入力部４０１は、第１入力部４０３と第２入力部４０４とを有する。第１入力部４０３は、画像出力装置３００から出力された画像データ（第１入力画像データ）を取得し、第１入力画像データを画像処理部１０４へ出力する。さらに、第１入力部４０３は、第１入力画像データに付加されているメタデータを表示制御部４０２へ出力する。第２入力部４０４は、特性情報変更装置３１０から出力された画像データ（第２入力画像データ）を取得し、第２入力画像データを画像処理部１０４へ出力する。さらに、特性情報変更装置３１０は、第２入力画像データに付加されているメタデータを表示制御部４０２へ出力する。 Similar to the image input unit 101 of the first embodiment, the image input unit 401 acquires image data (input image data) from the outside of the display device 400 and outputs the input image data to the image processing unit 104. Further, the image input unit 401 outputs the metadata added to the acquired image data to the display control unit 402. In this embodiment, the image input unit 401 has a first input unit 403 and a second input unit 404. The first input unit 403 acquires the image data (first input image data) output from the image output device 300, and outputs the first input image data to the image processing unit 104. Further, the first input unit 403 outputs the metadata added to the first input image data to the display control unit 402. The second input unit 404 acquires the image data (second input image data) output from the characteristic information changing device 310, and outputs the second input image data to the image processing unit 104. Further, the characteristic information changing device 310 outputs the metadata added to the second input image data to the display control unit 402.

表示制御部４０２は、実施例１の表示制御部１１０と同様に、階調特性情報の設定、輝度情報の設定、及び、レイアウト情報の設定を行う。但し、本実施例では、表示制御部４０２は、画像入力部４０１から出力されたメタデータから階調特性情報と輝度情報を取得する。そして、表示制御部４０２は、メタデータから取得された階調特性情報を画像処理部１０４に対して設定し、メタデータから取得された輝度情報を表示部１０７に対して設定する。具体的には、第１入力部４０３から出力されたメタデータに含まれている階調特性情報が、第１特性情報として設定され、第２入力部４０４から出力されたメタデータに含まれている階調特性情報が、第２特性情報として設定される。そして、第１入力部４０３から出力されたメタデータに含まれている輝度情報が設定される。第２入力部４０４から出力されたメタデータに含まれている輝度情報が設定されてもよい。 Similar to the display control unit 110 of the first embodiment, the display control unit 402 sets the gradation characteristic information, the luminance information, and the layout information. However, in this embodiment, the display control unit 402 acquires the gradation characteristic information and the luminance information from the metadata output from the image input unit 401. Then, the display control unit 402 sets the gradation characteristic information acquired from the metadata to the image processing unit 104, and sets the luminance information acquired from the metadata to the display unit 107. Specifically, the gradation characteristic information included in the metadata output from the first input unit 403 is set as the first characteristic information and is included in the metadata output from the second input unit 404. The gradation characteristic information is set as the second characteristic information. Then, the luminance information included in the metadata output from the first input unit 403 is set. Luminance information included in the metadata output from the second input unit 404 may be set.

なお、実施例１と同様に、ユーザ操作に応じて階調特性情報が取得されてもよい。その場合には、メタデータから取得された階調特性情報と、ユーザ操作に応じて取得された階調特性情報との一方が設定される。例えば、メタデータから階調特性情報が取得された場合には、ユーザ操作に応じて階調特性情報が取得されたか否かに拘らず、メタデータから取得された階調特性情報が設定される。そして、メタデータから階調特性情報が取得されなかった場合には、ユーザ操作に応じて取得された階調特性情報が設定される。ユーザ操作に応じて階調特性情報が取得された場合に、メタデータから階調特性情報が取得されたか否かに拘らず、ユーザ操作に応じて取得された階調特性情報が設定されてもよい。第１特性情報と第２特性情報との一方が、メタデータから取得された階調特性情報であり、他方が、ユーザ操作に応じて取得された階調特性情報であってもよい。また、１つの入力画像データのメタデータに複数の階調特性情報が含まれており、当該複数の階調特性情報が設定され、当該複数の階調特性情報にそれぞれ対応する複数の変換画像データが生成されてもよい。 As in the first embodiment, the gradation characteristic information may be acquired according to the user operation. In that case, one of the gradation characteristic information acquired from the metadata and the gradation characteristic information acquired according to the user operation is set. For example, when the gradation characteristic information is acquired from the metadata, the gradation characteristic information acquired from the metadata is set regardless of whether or not the gradation characteristic information is acquired according to the user operation. .. Then, when the gradation characteristic information is not acquired from the metadata, the acquired gradation characteristic information is set according to the user operation. When the gradation characteristic information is acquired according to the user operation, regardless of whether the gradation characteristic information is acquired from the metadata, even if the gradation characteristic information acquired according to the user operation is set. good. One of the first characteristic information and the second characteristic information may be the gradation characteristic information acquired from the metadata, and the other may be the gradation characteristic information acquired according to the user operation. Further, a plurality of gradation characteristic information is included in the metadata of one input image data, the plurality of gradation characteristic information is set, and a plurality of converted image data corresponding to the plurality of gradation characteristic information respectively. May be generated.

また、実施例１と同様に、ユーザ操作に応じて輝度情報が取得されてもよい。その場合には、メタデータから取得された輝度情報と、ユーザ操作に応じて取得された輝度情報との一方が設定される。例えば、メタデータから輝度情報が取得された場合には、ユーザ操作に応じて輝度情報が取得されたか否かに拘らず、メタデータから取得された輝度情報が設定される。そして、メタデータから輝度情報が取得されなかった場合には、ユーザ操作に応じて取得された輝度情報が設定される。ユーザ操作に応じて輝度情報が取得された場合に、メタデータから輝度情報が取得されたか否かに拘らず、ユーザ操作に応じて取得された輝度情報が設定されてもよい。また、メタデータに含まれている輝度情報に関連した上限表示輝度での表示を表示装置が行えない場合に、表示装置の取り得る表示輝度（表示輝度の上限）に関する情報へ、メタデータに含まれている輝度情報が補正され、補正後の輝度情報が設定されてもよい。輝度情報と階調特性情報の一方がメタデータから取得され、他方がユーザ操作に応じて取得されてもよい。 Further, as in the first embodiment, the luminance information may be acquired according to the user operation. In that case, one of the luminance information acquired from the metadata and the luminance information acquired according to the user operation is set. For example, when the luminance information is acquired from the metadata, the luminance information acquired from the metadata is set regardless of whether or not the luminance information is acquired according to the user operation. Then, when the luminance information is not acquired from the metadata, the acquired luminance information is set according to the user operation. When the luminance information is acquired according to the user operation, the acquired luminance information may be set regardless of whether or not the luminance information is acquired from the metadata. In addition, when the display device cannot display at the upper limit display brightness related to the brightness information included in the metadata, the information regarding the display brightness (upper limit of the display brightness) that the display device can take is included in the metadata. The brightness information that has been corrected may be corrected, and the corrected brightness information may be set. One of the luminance information and the gradation characteristic information may be acquired from the metadata, and the other may be acquired according to the user operation.

なお、入力画像データの階調特性が、設定された階調特性情報に関連した階調特性と一致する場合には、入力画像データと同じ画像データが変換画像データとして得られる。そのため、その場合には、画像処理部１０４において、入力画像データの階調特性を変換する処理が省略されてもよい。但し、入力画像データで想定されている表示ガンマが表示部１０７の表示ガンマと異なる場合がある。その場合には、入力画像データの階調特性が、設定された階調特性情報に関連した階調特性と一致していても、入力画像データで想定されている表示ガンマを表示部１０７の表示ガンマに合わせる画像処理が必要となる。 When the gradation characteristic of the input image data matches the gradation characteristic related to the set gradation characteristic information, the same image data as the input image data is obtained as the converted image data. Therefore, in that case, the image processing unit 104 may omit the process of converting the gradation characteristics of the input image data. However, the display gamma assumed in the input image data may be different from the display gamma of the display unit 107. In that case, even if the gradation characteristic of the input image data matches the gradation characteristic related to the set gradation characteristic information, the display gamma assumed in the input image data is displayed on the display unit 107. Image processing to match the gamma is required.

以上述べたように、本実施例によれば、入力画像データのメタデータから輝度情報と階調特性情報が取得される。それにより、輝度情報と階調特性情報を得るためのユーザ操作が不要となり、ユーザの負荷を低減することができる。また、本実施例によれば、実施例１と同様に、複数の画像を表示部に表示する際に各画像を好ましい輝度で表示することを、簡易な構成で実現することができる。メタデータに含まれている情報（輝度情報と階調特性情報）は、画像の確認時に使用すべき情報である可能性が高い。そのため、本実施例によれば、複数の画像を表示部に表示する際に各画像を好ましい輝度でより確実に表示することができる。 As described above, according to the present embodiment, the luminance information and the gradation characteristic information are acquired from the metadata of the input image data. As a result, the user operation for obtaining the luminance information and the gradation characteristic information becomes unnecessary, and the load on the user can be reduced. Further, according to the present embodiment, similarly to the first embodiment, when displaying a plurality of images on the display unit, it is possible to realize that each image is displayed with a preferable brightness with a simple configuration. The information contained in the metadata (luminance information and gradation characteristic information) is likely to be information that should be used when confirming the image. Therefore, according to the present embodiment, when displaying a plurality of images on the display unit, each image can be displayed more reliably with preferable brightness.

なお、本実施例では、メタデータがＳＤＩ信号のアンシラリー領域に付加される例を説明したが、これに限られない。例えば、ＨＤＭＩ（登録商標；Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）のＩｎｆｏＦｒａｍｅにメタデータが付加されてもよい。 In this embodiment, an example in which metadata is added to the ancillary region of the SDI signal has been described, but the present invention is not limited to this. For example, metadata may be added to the InfoFrame of HDMI (registered trademark; High Definition Multimedia Interface).

＜実施例４＞
以下、本発明の実施例４について説明する。実施例１では、ＨＤＲ画像の表示輝度に拘らず所定の表示輝度（１００［ｃｄ／ｍ２］）に従ってＳＤＲ画像が表示される例を説明した。しかし、１００００［ｃｄ／ｍ２］のような高輝度でＨＤＲ画像が表示される場合に１００［ｃｄ／ｍ２］でＳＤＲ画像が表示されると、ＨＤＲ画像とＳＤＲ画像との間の表示輝度の差が大きすぎることにより、ＳＤＲ画像が見づらくなる。そこで、本実施例では、輝度情報に関連した表示輝度が所定の閾値以上であるか否かに応じてＳＤＲ画像の表示輝度を切り替える例を説明する。なお、以下では、実施例１と異なる構成や処理について説明し、実施例１と同様の構成や処理についての説明は省略する。本実施例の構成は、実施例３の構成に組み合わせることもできる。 <Example 4>
Hereinafter, Example 4 of the present invention will be described. In Example 1, an example in which an SDR image is displayed according to a predetermined display brightness (100 [cd / m 2]) regardless of the display brightness of the HDR image has been described. However, when the HDR image is displayed with high brightness such as 10000 [cd / m 2 ] and the SDR image is displayed at 100 [cd / m 2 ], the display brightness between the HDR image and the SDR image is displayed. If the difference between the two is too large, the SDR image becomes difficult to see. Therefore, in this embodiment, an example of switching the display luminance of the SDR image according to whether or not the display luminance related to the luminance information is equal to or higher than a predetermined threshold value will be described. In the following, a configuration and processing different from those of the first embodiment will be described, and a description of the same configuration and processing as that of the first embodiment will be omitted. The configuration of this embodiment can also be combined with the configuration of Example 3.

図９は、本実施例に係る表示装置５００の構成の一例を示すブロック図である。図９において、実施例１（図１）と同じ機能部には、実施例１と同じ符号が付されている。表示装置５００は、画像入力部１０１、画像処理部１０４、輝度補正部１０５、画像レイアウト部１０６、表示部１０７、ＣＰＵ１０８、ＵＩ部１０９、表示制御部１１０、表示判断部１１１、及び、補正情報生成部５０１を有する。 FIG. 9 is a block diagram showing an example of the configuration of the display device 500 according to the present embodiment. In FIG. 9, the same functional units as those in the first embodiment (FIG. 1) are designated by the same reference numerals as those in the first embodiment. The display device 500 includes an image input unit 101, an image processing unit 104, a brightness correction unit 105, an image layout unit 106, a display unit 107, a CPU 108, a UI unit 109, a display control unit 110, a display determination unit 111, and correction information generation. It has a part 501.

補正情報生成部５０１は、実施例１の補正情報生成部１１２と同様に、表示判断部１１１の判断結果と輝度情報とに基づいて補正情報を生成し、生成した補正情報を輝度補正部１０５へ出力する。但し、本実施例では、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示され、且つ、輝度情報に関連した表示輝度（上限表示輝度）が所定の閾値よりも低い場合に、所定の表示輝度に従ってＳＤＲ画像が表示されるように、補正情報が生成される。そして、本実施例では、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示され、且つ、上限表示輝度が所定の閾値以上である場合に、ＨＤＲ画像の表示輝度とＳＤＲ画像の表示輝度との比が所定比となるように、補正情報が生成される。具体的には、実施例１と同様に、ＨＤＲ画像に対応する輝度補正値として、１が採用される。そして、ＳＤＲ画像に対応する輝度補正値が以下の方法で算出される。なお、補正情報とその生成方法とは特に限定されない。 Similar to the correction information generation unit 112 of the first embodiment, the correction information generation unit 501 generates correction information based on the judgment result of the display determination unit 111 and the luminance information, and transfers the generated correction information to the luminance correction unit 105. Output. However, in this embodiment, when the HDR image and the SDR image are displayed on the display unit 107 and the display brightness (upper limit display brightness) related to the luminance information is lower than the predetermined threshold value, the display luminance is adjusted according to the predetermined luminance. Correction information is generated so that the SDR image is displayed. Then, in this embodiment, the HDR image and the SDR image is displayed on the display unit 107, and, in case the upper limit display luminance Ru der than a predetermined threshold value, the display luminance of the display brightness and SDR image HDR image Correction information is generated so that the ratio of is a predetermined ratio. Specifically, as in the first embodiment, 1 is adopted as the luminance correction value corresponding to the HDR image. Then, the luminance correction value corresponding to the SDR image is calculated by the following method. The correction information and its generation method are not particularly limited.

まず、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示され、且つ、上限表示輝度が所定の閾値よりも低い場合について説明する。この場合には、所定の表示輝度に従ってＳＤＲ画像が表示されるように、ＳＤＲ画像に対応する輝度補正値が算出される。所定の閾値と所定の表示輝度とは特に限定されないが、本実施例では、所定の閾値が１０００［ｃｄ／ｍ２］であり、且つ、所定の表示輝度が１００［ｃｄ／ｍ２］である例を説明する。本実施例では、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示され、且つ、上限表示輝度が１０００［ｃｄ／ｍ２］よりも低い場合に、実施例１の式１を用いて、ＳＤＲ画像に対応する輝度補正値が算出される。 First, a case where the HDR image and the SDR image are displayed on the display unit 107 and the upper limit display brightness is lower than a predetermined threshold value will be described. In this case, the brightness correction value corresponding to the SDR image is calculated so that the SDR image is displayed according to the predetermined display brightness. The predetermined threshold value and the predetermined display brightness are not particularly limited, but in this embodiment, the predetermined threshold value is 1000 [cd / m 2 ] and the predetermined display brightness is 100 [cd / m 2 ]. An example will be described. In this embodiment, when the HDR image and the SDR image are displayed on the display unit 107 and the upper limit display brightness is lower than 1000 [cd / m 2 ], the SDR image is used by using the formula 1 of the first embodiment. The brightness correction value corresponding to is calculated.

次に、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示され、且つ、上限表示輝度が所定の閾値以上である場合について説明する。この場合には、ＨＤＲ画像の表示輝度とＳＤＲ画像の表示輝度との比が所定比となるように、ＳＤＲ画像に対応する輝度補正値が生成される。所定比は特に限定されないが、本実施例では、所定比（ＨＤＲ画像の表示輝度：ＳＤＲ画像の表示輝度）が１：１０である例を説明する。本実施例では、ＨＤＲ画像とＳＤＲ画像とが表示部１０７に表示され、且つ、上限表示輝度が所定の閾値以上である場合に、以下の式４を用いて、ＳＤＲ画像に対応する輝度補正値が算出される。

輝度補正値＝（１／１０）１／表示ガンマ ・・・（式４）
Next, a case where the HDR image and the SDR image are displayed on the display unit 107 and the upper limit display brightness is equal to or higher than a predetermined threshold value will be described. In this case, the luminance correction value corresponding to the SDR image is generated so that the ratio between the display luminance of the HDR image and the display luminance of the SDR image becomes a predetermined ratio. The predetermined ratio is not particularly limited, but in this embodiment, an example in which the predetermined ratio (display brightness of HDR image: display brightness of SDR image) is 1:10 will be described. In this embodiment, when the HDR image and the SDR image are displayed on the display unit 107 and the upper limit display brightness is equal to or higher than a predetermined threshold value, the luminance correction value corresponding to the SDR image is used by using the following equation 4. Is calculated.

Luminance correction value = (1/10) 1 / Display gamma ... (Equation 4)

図１０は、ＨＤＲ画像の表示輝度の上限と、ＳＤＲ画像の表示輝度の上限との対応関係の一例を示す。本実施例の上記方法によれば、ＨＤＲ画像の表示輝度の上限が１０００［ｃｄ／ｍ２］よりも低い場合に、上限が１００［ｃｄ／ｍ２］と一致するような表示輝度でＳＤＲ画像が表示される。そして、ＨＤＲ画像の表示輝度の上限が１０００［ｃｄ／ｍ２］以上である場合に、ＨＤＲ画像の表示輝度の１／１０の表示輝度でＳＤＲ画像が表示される。 FIG. 10 shows an example of the correspondence between the upper limit of the display luminance of the HDR image and the upper limit of the display luminance of the SDR image. According to the above method of this embodiment, when the upper limit of the display brightness of the HDR image is lower than 1000 [cd / m 2 ], the SDR image has a display brightness that matches the upper limit of 100 [cd / m 2]. Is displayed. Then, when the upper limit of the display luminance of the HDR image is 1000 [cd / m 2 ] or more, the SDR image is displayed at the display luminance of 1/10 of the display luminance of the HDR image.

以上述べたように、本実施例によれば、輝度情報に関連した表示輝度が所定の閾値以上であるか否かに応じてＳＤＲ画像の表示輝度が切り替えられる。それにより、実施例１，２と同様に、複数の画像を表示部に表示する際に各画像を好ましい輝度で表示することを、簡易な構成で実現することができると共に、ＳＤＲ画像の視認性の低下を抑制することができる。 As described above, according to the present embodiment, the display brightness of the SDR image is switched depending on whether or not the display brightness related to the brightness information is equal to or higher than a predetermined threshold value. As a result, as in the first and second embodiments, when displaying a plurality of images on the display unit, it is possible to display each image with preferable brightness with a simple configuration, and the visibility of the SDR image. Can be suppressed.

＜その他の実施例＞
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。 <Other Examples>
The present invention supplies a program that realizes one or more functions of the above-described embodiment to a system or device via a network or storage medium, and one or more processors in the computer of the system or device reads and executes the program. It can also be realized by the processing to be performed. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

１００，２００，４００，５００：表示装置 １０５：輝度補正部 １０９：ＵＩ部
１１０，４０２：表示制御部 １１２，２０１，５０１：補正情報生成部 100, 200, 400, 500: Display device 105: Luminance correction unit 109: UI unit 110, 402: Display control unit 112, 201, 501: Correction information generation unit

Claims (20)

画像データを取得する入力部と、
前記画像データを補正する補正部と、
前記画像データに基づいて画面に画像を表示する表示部と、
を有し、
前記補正部は、前記画面にＳＤＲ画像及びＨＤＲ画像を並べて表示する場合に、前記ＳＤＲ画像の表示輝度の上限のほうが前記ＨＤＲ画像の表示輝度の上限よりも低くなるように、前記画像データを前記ＳＤＲ画像のデータに補正し、
前記ＳＤＲ画像及び前記ＨＤＲ画像は同じ被写体の画像である
ことを特徴とする表示装置。 An input unit to get the picture Zode over data,
A correction unit that corrects the image Zode over data,
A display unit for displaying the images on the screen based on the image Zode over data,
Have,
When the SDR image and the HDR image are displayed side by side on the screen, the correction unit displays the image data so that the upper limit of the display brightness of the SDR image is lower than the upper limit of the display brightness of the HDR image. Correct to SDR image data and
A display device characterized in that the SDR image and the HDR image are images of the same subject. 画像データを取得する入力部と、
前記画像データを補正する補正部と、
前記画像データに基づいて画面に画像を表示する表示部と、
を有し、
前記補正部は、前記画面にＳＤＲ画像及びＨＤＲ画像を並べて表示する場合に、前記ＳＤＲ画像の表示輝度の上限のほうが前記ＨＤＲ画像の表示輝度の上限よりも低くなるように、前記画像データを前記ＳＤＲ画像のデータに補正し、
前記ＳＤＲ画像のデータは、前記ＨＤＲ画像のデータに対応する前記画像データから生成されたデータである
ことを特徴とする表示装置。 An input unit to get the picture Zode over data,
A correction unit that corrects the image Zode over data,
A display unit for displaying the images on the screen based on the image Zode over data,
Have,
When the SDR image and the HDR image are displayed side by side on the screen, the correction unit displays the image data so that the upper limit of the display brightness of the SDR image is lower than the upper limit of the display brightness of the HDR image. Correct to SDR image data and
The display device, characterized in that the data of the SDR image is data generated from the image data corresponding to the data of the HDR image. 画像データを取得する入力部と、
前記画像データを補正する補正部と、
前記画像データに基づいて画面に画像を表示する表示部と、
を有し、
前記補正部は、ＳＤＲ画像を前記画面に表示し且つＨＤＲ画像を前記画面に表示しない第１の場合における前記ＳＤＲ画像の表示輝度の上限が第１輝度になり、且つ、ＳＤＲ画像及びＨＤＲ画像を前記画面に表示する第２の場合における前記ＳＤＲ画像の表示輝度の上限が前記第１輝度よりも低い第２輝度になるように、前記画像データを前記ＳＤＲ画像
のデータに補正する
ことを特徴とする表示装置。 An input unit to get the picture Zode over data,
A correction unit that corrects the image Zode over data,
A display unit for displaying the images on the screen based on the image Zode over data,
Have,
The correction unit sets the upper limit of the display luminance of the SDR image to the first luminance in the first case where the SDR image is displayed on the screen and the HDR image is not displayed on the screen, and the SDR image and the HDR image are displayed. as the upper limit of the display luminance of the SDR image in the second case to be displayed on the screen is a second luminance lower than the first luminance, and characterized in that to correct the image data into data of the SDR image Display device. 前記ＨＤＲ画像のデータに対応する前記画像データは、ＰＱ特性又はＨＬＧ特性を持つことを特徴とする請求項１乃至３のいずれか１項に記載の表示装置。 The display device according to any one of claims 1 to 3, wherein the image data corresponding to the HDR image data has PQ characteristics or HLG characteristics. 前記ＳＤＲ画像及び前記ＨＤＲ画像は動画である
ことを特徴とする請求項１乃至４のいずれか１項に記載の表示装置。 The display device according to any one of claims 1 to 4, wherein the SDR image and the HDR image are moving images. 前記補正部は、前記画像データの階調特性が前記表示装置に設定されている階調特性と等しい場合に、前記画像データを補正せず、The correction unit does not correct the image data when the gradation characteristic of the image data is equal to the gradation characteristic set in the display device.
前記表示部は、補正されていない前記画像データを前記ＨＤＲ画像のデータとして用いるThe display unit uses the uncorrected image data as the HDR image data.
ことを特徴とする請求項１乃至５のいずれか１項に記載の表示装置。The display device according to any one of claims 1 to 5, wherein the display device is characterized by the above. 前記補正部は、前記表示部の表示ガンマに基づいて、前記画像データを補正し、The correction unit corrects the image data based on the display gamma of the display unit.
前記表示部は、補正されている前記画像データを前記ＨＤＲ画像のデータとして用いることを特徴とする請求項１乃至５のいずれか１項に記載の表示装置。The display device according to any one of claims 1 to 5, wherein the display unit uses the corrected image data as data of the HDR image. 前記表示部は、液晶パネルを有する
ことを特徴とする請求項１乃至７のいずれか１項に記載の表示装置。 The display device according to any one of claims 1 to 7, wherein the display unit has a liquid crystal panel. 前記表示部は、前記液晶パネルと、前記液晶パネルを照明するバックライトユニットと、を有し、
前記バックライトユニットは、前記画面に前記ＳＤＲ画像及び前記ＨＤＲ画像を並べて表示する場合に、前記液晶パネルの前記ＳＤＲ画像を表示する領域と前記液晶パネルの前記ＨＤＲ画像を表示する領域とを、同じ輝度で照明する
ことを特徴とする請求項８に記載の表示装置。 The display unit includes the liquid crystal panel and a backlight unit that illuminates the liquid crystal panel.
When the SDR image and the HDR image are displayed side by side on the screen, the backlight unit has the same area for displaying the SDR image on the liquid crystal panel and the area for displaying the HDR image on the liquid crystal panel. The display device according to claim 8 , wherein the display device is illuminated with brightness. 前記液晶パネルの前記ＳＤＲ画像を表示する領域は、前記画面に前記ＳＤＲ画像及び前記ＨＤＲ画像を並べて表示する場合に、前記補正部で補正された前記ＳＤＲ画像のデータに応じた透過率で、前記バックライトユニットからの光を透過する
ことを特徴とする請求項９に記載の表示装置。 The area for displaying the SDR image on the liquid crystal panel has a transmittance corresponding to the data of the SDR image corrected by the correction unit when the SDR image and the HDR image are displayed side by side on the screen. The display device according to claim 9 , wherein the light from the backlight unit is transmitted. 前記表示部は、自発光型の表示パネルを有する
ことを特徴とする請求項１乃至７のいずれか１項に記載の表示装置。 The display device according to any one of claims 1 to 7, wherein the display unit has a self-luminous display panel. 前記ＳＤＲ画像及び前記ＨＤＲ画像を並べて前記画面に表示する場合における前記ＨＤＲ画像の表示輝度の上限は、前記表示装置の表示輝度の上限と等しい
ことを特徴とする請求項１乃至１１のいずれか１項に記載の表示装置。 One of claims 1 to 11 , wherein the upper limit of the display luminance of the HDR image when the SDR image and the HDR image are displayed side by side on the screen is equal to the upper limit of the display luminance of the display device. The display device described in the section. 前記表示装置の表示輝度の上限を指定するユーザ操作を受け付けるＵＩ部を有することを特徴とする請求項１乃至１２のいずれか１項に記載の表示装置。 The display device according to any one of claims 1 to 12, wherein the display device has a UI unit that accepts a user operation for designating an upper limit of the display brightness of the display device. 前記補正部は、前記第２の場合に前記画像データを前記ＳＤＲ画像のデータに補正することを特徴とする請求項３に記載の表示装置。 Wherein the correction unit includes a display device according to the image data in the previous case Symbol second to claim 3, characterized in that to correct the data of the SDR image. 前記ＳＤＲ画像のデータに対応する前記画像データは、ガンマ２．２特性又はガンマ２．６特性を持つ
ことを特徴とする請求項１乃至１４のいずれか１項に記載の表示装置。 The display device according to any one of claims 1 to 14, wherein the image data corresponding to the data of the SDR image has a gamma 2.2 characteristic or a gamma 2.6 characteristic. 前記入力部は、ＳＤＩ入力端子を有し、
前記画像のデータは、ＳＤＩ信号である
ことを特徴とする請求項１乃至１５のいずれか１項に記載の表示装置。 The input unit has an SDI input terminal and has an SDI input terminal.
The display device according to any one of claims 1 to 15, wherein the image data is an SDI signal. 画像データを取得する入力ステップと、
前記画像データを補正する補正ステップと、
前記画像データに基づいて画面に画像を表示する表示ステップと、
を有し、
前記補正ステップでは、前記画面にＳＤＲ画像及びＨＤＲ画像を並べて表示する場合に、前記ＳＤＲ画像の表示輝度の上限のほうが前記ＨＤＲ画像の表示輝度の上限よりも低くなるように、前記画像データを前記ＳＤＲ画像のデータに補正し、
前記ＳＤＲ画像及び前記ＨＤＲ画像は同じ被写体の画像である
ことを特徴とする表示方法。 An input step to get the picture Zode over data,
A correction step of correcting the image Zode over data,
A display step of displaying the images on the screen based on the image Zode over data,
Have,
Wherein the correction step, to display side by side SDR image and HDR image on the screen, the so towards the upper limit of the display luminance of the SDR image is lower than the upper limit of the display luminance of the HDR image, the said image data Correct to SDR image data and
A display method characterized in that the SDR image and the HDR image are images of the same subject. 画像データを取得する入力ステップと、
前記画像データを補正する補正ステップと、
前記画像データに基づいて画面に画像を表示する表示ステップと、
を有し、
前記補正ステップでは、前記画面にＳＤＲ画像及びＨＤＲ画像を並べて表示する場合に、前記ＳＤＲ画像の表示輝度の上限のほうが前記ＨＤＲ画像の表示輝度の上限よりも低くなるように、前記画像データを前記ＳＤＲ画像のデータに補正し、
前記ＳＤＲ画像のデータは、前記ＨＤＲ画像のデータに対応する前記画像データから生成されたデータである
ことを特徴とする表示方法。 An input step to get the picture Zode over data,
A correction step of correcting the image Zode over data,
A display step of displaying the images on the screen based on the image Zode over data,
Have,
Wherein the correction step, to display side by side SDR image and HDR image on the screen, the so towards the upper limit of the display luminance of the SDR image is lower than the upper limit of the display luminance of the HDR image, the said image data Correct to SDR image data and
A display method characterized in that the data of the SDR image is data generated from the image data corresponding to the data of the HDR image. 画像データを取得する入力ステップと、
前記画像データを補正する補正ステップと、
前記画像データに基づいて画面に画像を表示する表示ステップと、
を有し、
前記補正ステップでは、ＳＤＲ画像を前記画面に表示し且つＨＤＲ画像を前記画面に表示しない第１の場合における前記ＳＤＲ画像の表示輝度の上限が第１輝度になり、且つ、ＳＤＲ画像及びＨＤＲ画像を前記画面に表示する第２の場合における前記ＳＤＲ画像の表示輝度の上限が前記第１輝度よりも低い第２輝度になるように、前記画像データを前記ＳＤＲ画像のデータに補正する
ことを特徴とする表示方法。 An input step to get the picture Zode over data,
A correction step of correcting the image Zode over data,
A display step of displaying the images on the screen based on the image Zode over data,
Have,
In the correction step, the upper limit of the display luminance of the SDR image in the first case where the SDR image is displayed on the screen and the HDR image is not displayed on the screen is the first luminance, and the SDR image and the HDR image are displayed. as the upper limit of the display luminance of the SDR image in the second case to be displayed on the screen is a second luminance lower than the first luminance, and characterized in that to correct the image data into data of the SDR image Display method to be displayed. 請求項１７乃至１９のいずれか１項に記載の表示方法の各ステップをコンピュータに実行させるためのプログラム。 Program for executing the steps of the display method according to the computer in any one of claims 1 7 to 19.
JP2020076529A 2016-03-30 2020-04-23 Display device and display method Active JP6980833B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020076529A JP6980833B2 (en) 2016-03-30 2020-04-23 Display device and display method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016068433A JP6700908B2 (en) 2016-03-30 2016-03-30 Display device and display method
JP2020076529A JP6980833B2 (en) 2016-03-30 2020-04-23 Display device and display method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2016068433A Division JP6700908B2 (en) 2016-03-30 2016-03-30 Display device and display method

Publications (2)

Publication Number Publication Date
JP2020118990A JP2020118990A (en) 2020-08-06
JP6980833B2 true JP6980833B2 (en) 2021-12-15

Family

ID=78870870

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020076529A Active JP6980833B2 (en) 2016-03-30 2020-04-23 Display device and display method

Country Status (1)

Country Link
JP (1) JP6980833B2 (en)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4192418B2 (en) * 2000-10-27 2008-12-10 ソニー株式会社 Image processing apparatus and method, and recording medium
JP2007288555A (en) * 2006-04-18 2007-11-01 Pioneer Electronic Corp Device and method for adjusting image
JP5284710B2 (en) * 2008-07-24 2013-09-11 パナソニック株式会社 Video display device
JP2017169097A (en) * 2016-03-17 2017-09-21 シャープ株式会社 Receiving device, display control method, and program
JP2017175422A (en) * 2016-03-24 2017-09-28 シャープ株式会社 Image display device and television apparatus

Also Published As

Publication number Publication date
JP2020118990A (en) 2020-08-06

Similar Documents

Publication Publication Date Title
JP6700908B2 (en) Display device and display method
JP6381215B2 (en) Image processing apparatus, image processing method, display apparatus, display apparatus control method, and program
US11410343B2 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
JP6700880B2 (en) Information processing apparatus and information processing method
JP6659178B2 (en) Image processing apparatus and image processing method
US11107439B2 (en) Image processing apparatus, method of controlling image processing apparatus, and storage medium
US10255883B2 (en) Image processing apparatus, method for controlling the same, display apparatus, and storage medium
JP5089783B2 (en) Image processing apparatus and control method thereof
JP6617432B2 (en) Image processing apparatus and program
US10504486B2 (en) Display apparatus and control method thereof
US20190287450A1 (en) Display apparatus and control method thereof
US11315290B2 (en) Image processing apparatus and image processing method
JP4710403B2 (en) Vehicular image generation apparatus and method
US20150235618A1 (en) Image processing apparatus capable of inputting image data
US10721432B2 (en) Image capturing apparatus connectable to display apparatus, display apparatus connectable to external apparatus, and image processing apparatus performing image processing
JP6980833B2 (en) Display device and display method
JP6548516B2 (en) IMAGE DISPLAY DEVICE, IMAGE PROCESSING DEVICE, CONTROL METHOD OF IMAGE DISPLAY DEVICE, AND CONTROL METHOD OF IMAGE PROCESSING DEVICE
JP5655335B2 (en) Image processing apparatus, image display apparatus, and program
JP2015139131A (en) Image processing device, image processing method and program
US10277826B2 (en) Image processing apparatus and image processing method
JP2014219724A (en) Image processor, method for controlling image processor, and program
US11545058B2 (en) Electronic device and control method for electronic device
US11869174B2 (en) Image processing apparatus, display apparatus, image processing method, and non-transitory computer readable medium
JP5527990B2 (en) Display control apparatus and display control method
US20190114994A1 (en) Image processing apparatus, image processing method, and non-transitory computer readable medium

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200525

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200525

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210329

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210406

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210524

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211019

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211117

R151 Written notification of patent or utility model registration

Ref document number: 6980833

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151