JP6659178B2 - Image processing apparatus and image processing method - Google Patents

Image processing apparatus and image processing method Download PDF

Info

Publication number
JP6659178B2
JP6659178B2 JP2017228015A JP2017228015A JP6659178B2 JP 6659178 B2 JP6659178 B2 JP 6659178B2 JP 2017228015 A JP2017228015 A JP 2017228015A JP 2017228015 A JP2017228015 A JP 2017228015A JP 6659178 B2 JP6659178 B2 JP 6659178B2
Authority
JP
Japan
Prior art keywords
image data
input image
color
luminance
gradation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017228015A
Other languages
Japanese (ja)
Other versions
JP2018146949A (en
Inventor
雅泰 佐藤
雅泰 佐藤
弘文 占部
弘文 占部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to US15/903,310 priority Critical patent/US10542187B2/en
Priority to EP18159108.2A priority patent/EP3370413A1/en
Priority to CN201810172210.7A priority patent/CN108597474A/en
Publication of JP2018146949A publication Critical patent/JP2018146949A/en
Priority to US16/731,191 priority patent/US10944889B2/en
Application granted granted Critical
Publication of JP6659178B2 publication Critical patent/JP6659178B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Image Processing (AREA)

Description

本発明は、画像処理装置および画像処理方法に関する。   The present invention relates to an image processing device and an image processing method.

画像制作などの分野において、広いダイナミックレンジを有する画像データが扱われる機会が増している。ここで、ダイナミックレンジは、輝度に関する輝度関連値のレンジである。広いダイナミックレンジは「HDR(High Dynamic Range)」などと呼ばれ、HDRに比べ狭いダイナミックレンジは「SDR(Standard Dynamic Range)」などと呼ばれる。そして、HDRを有する画像データは「HDR画像データ」などと呼ばれ、SDRを有する画像データは「SDR画像データ」などと呼ばれる。   In fields such as image production, opportunities for handling image data having a wide dynamic range are increasing. Here, the dynamic range is a range of luminance-related values relating to luminance. A wide dynamic range is called “HDR (High Dynamic Range)” or the like, and a dynamic range narrower than HDR is called “SDR (Standard Dynamic Range)” or the like. The image data having HDR is called “HDR image data” and the like, and the image data having SDR is called “SDR image data” and the like.

また、SDI(Serial Digital Interface)ケーブルなどのケーブルを用いて伝送可能なHDR画像データの規格化が進められている。例えば、SMPTE(米国映画テレビ技術者協会)により標準化されたST2084などが提案されている。HDR画像データに基づく画像(HDR画像)を高輝度で表示するための技術も提案されている。   Also, the standardization of HDR image data that can be transmitted using a cable such as an SDI (Serial Digital Interface) cable is in progress. For example, ST2084 standardized by SMPTE (American Movie and Television Engineers Association) has been proposed. A technique for displaying an image (HDR image) based on HDR image data with high luminance has also been proposed.

ST2084は、人間の視覚特性に基づく階調特性であり、HDR画像データの輝度を絶対輝度で定義する。ST2084では、10000cd/mまでの絶対輝度が扱われる。しかしながら、一般的な表示装置は、数百〜数千cd/mまでの輝度しか表示できず、10000cd/mの輝度を表示することはできない。 ST2084 is a gradation characteristic based on human visual characteristics, and defines the luminance of the HDR image data as absolute luminance. In ST2084, the absolute luminance up to 10000 cd / m 2 is handled. However, a general display device, only can display luminance to hundreds to thousands cd / m 2, it is not possible to display the luminance of 10000 cd / m 2.

そこで、HDR画像データのダイナミックレンジの一部を、表示装置で好適に表示するレンジ(1000cd/mまでの絶対輝度のレンジ、2000cd/mまでの絶対輝度のレンジ、等)として設定可能な表示装置が提案されている。以後、このような機能を「HDR設定機能」と記載し、HDR設定機能によって設定されたレンジを「設定HDR」と記載する。HDR設定機能を有する表示装置では、設定HDRが、HDR画像データの規格(階調特性)に準じた階調性で表示される。例えば、HDR画像データの規格がST2084である場合には、設定HDRが、ST2084で定義された絶対輝度で表示される。そして、設定HDRに属する複数の輝度関連値の最大値よりも大きい輝度関連値は、白飛びで表示される。 Therefore, a part of the dynamic range of the HDR image data can be set as a range suitable for display on a display device (an absolute luminance range up to 1000 cd / m 2 , an absolute luminance range up to 2000 cd / m 2 , and the like). A display device has been proposed. Hereinafter, such a function is referred to as “HDR setting function”, and the range set by the HDR setting function is referred to as “setting HDR”. In a display device having an HDR setting function, the set HDR is displayed with a gradation characteristic conforming to the standard (gradation characteristics) of the HDR image data. For example, when the standard of the HDR image data is ST2084, the setting HDR is displayed with the absolute luminance defined in ST2084. Then, a luminance-related value that is larger than the maximum value of the plurality of luminance-related values belonging to the set HDR is displayed in whiteout.

また、HDR画像データの方式(規格;階調特性)として、HDR画像データの輝度を絶対輝度で定義する方式の他に、HDR画像データの輝度を相対輝度で定義する方式も提案されている。   As a method (standard; gradation characteristics) of HDR image data, a method of defining the luminance of HDR image data by relative luminance in addition to the method of defining the luminance of HDR image data by absolute luminance has been proposed.

画像制作などにおいて、入力画像データの輝度分布を確認したいというニーズがある。入力画像データの輝度分布を確認するためのアシスト機能として、入力画像データの輝度階調値に応じた色に入力画像データの色を変換する機能がある。色の変換は「色の着色」とも言え、このようなアシスト機能は「色変換機能」、「着色機能」、等とも言える。色変換機能によって色が変換された後の画像データに基づく画像を表示することにより、ユーザは、入力画像データの輝度階調値を色で確認することができる。   In image production and the like, there is a need to check the luminance distribution of input image data. As an assist function for confirming the luminance distribution of the input image data, there is a function of converting the color of the input image data into a color corresponding to the luminance gradation value of the input image data. Color conversion can also be referred to as "color coloring", and such an assist function can be referred to as "color conversion function", "coloring function", and the like. By displaying an image based on the image data whose color has been converted by the color conversion function, the user can confirm the luminance gradation value of the input image data by color.

図8は、入力画像データの輝度階調値と、色変換機能における変換後の色との対応関係の一例を示す。図8は、入力画像データの輝度階調値が10ビットの値(0〜1023)である場合の例を示す。図8の例では、入力画像データのダイナミックレンジ(輝度階調
値のレンジ)を構成する6つのレンジに6つ色がそれぞれ対応付けられている。
FIG. 8 shows an example of a correspondence relationship between a luminance gradation value of input image data and a color after conversion by the color conversion function. FIG. 8 shows an example where the luminance gradation value of the input image data is a 10-bit value (0 to 1023). In the example of FIG. 8, six colors are respectively associated with six ranges forming a dynamic range (range of luminance gradation values) of input image data.

色変換機能に関する技術は、例えば、特許文献1に開示されている。特許文献1に開示の技術では、輝度レベル(輝度階調値)が所定値以上である画像領域でゼブラパターンが表示される。   A technique relating to the color conversion function is disclosed in, for example, Patent Document 1. According to the technique disclosed in Patent Literature 1, a zebra pattern is displayed in an image region in which a luminance level (luminance gradation value) is equal to or more than a predetermined value.

特開2014−167609号公報JP 2014-167609 A

上述したように、従来の色変換機能では、入力画像データの輝度階調値に応じた色に入力画像データの色が変換される。そのため、従来の色変換機能を用いたとしても、入力画像データの階調特性で定義された絶対輝度、入力画像データの階調特性で定義された相対輝度、等をユーザが把握することはできない。ユーザは、100cd/m、200cd/m、等の区切りとなる複数の絶対輝度の分布を把握することもできない。 As described above, in the conventional color conversion function, the color of the input image data is converted into a color corresponding to the luminance gradation value of the input image data. Therefore, even when the conventional color conversion function is used, the user cannot grasp the absolute luminance defined by the gradation characteristics of the input image data, the relative luminance defined by the gradation characteristics of the input image data, and the like. . The user, 100cd / m 2, 200cd / m 2, can not be grasped plurality of distribution of absolute luminance as a separator and the like.

また、HDRに属する複数の輝度関連値の最大値に近い輝度関連値が表示に使用されないことがあるが、従来の色変換機能では、表示に使用されない輝度関連値も色変換処理(色変換機能の処理)の対象とされる。その結果、輝度関連値の分布の確認が困難となる。そのような課題を解決するための方法として、HDRを設定HDRまで狭め、且つ、設定HDRを有する画像データの輝度階調値に応じた色に当該画像データの色を変換する方法が考えられる。しかしながら、そのような方法では、ユーザは、HDRに属し且つ設定HDRに属さない輝度関連値の分布を確認できない。   In some cases, a luminance-related value close to the maximum value of a plurality of luminance-related values belonging to HDR is not used for display. Process). As a result, it becomes difficult to confirm the distribution of the luminance-related values. As a method for solving such a problem, a method of narrowing the HDR to the set HDR and converting the color of the image data into a color corresponding to the luminance gradation value of the image data having the set HDR can be considered. However, in such a method, the user cannot confirm the distribution of the luminance-related values belonging to the HDR and not belonging to the set HDR.

本発明は、入力画像データの輝度分布をより好適に表示することを可能にする技術を提供することを目的とする。   SUMMARY OF THE INVENTION It is an object of the present invention to provide a technique capable of more appropriately displaying a luminance distribution of input image data.

本発明の第1の態様は、
輝度レベルと色との対応関係を示す情報に基づいて入力画像データの色を変換して、変換画像データを生成する変換手段と、
前記入力画像データの階調特性を設定する設定手段と、
を備え、
前記変換手段は、
前記設定手段が設定した階調特性が、第1のダイナミックレンジに対応する第1の階調特性である場合、前記入力画像データの階調値を前記輝度レベルとして用いた第1の対応関係を示す情報に基づいて、前記入力画像データの色を変換し、
前記設定手段が設定した階調特性が、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジに対応し且つ前記入力画像データの階調値に絶対輝度を対応付けた第2の階調特性である場合、前記入力画像データの階調値に対応付けられた前記絶対輝度を前記輝度レベルとして用いた第2の対応関係を示す情報に基づいて、前記入力画像データの色を変換し、
前記設定手段が設定した階調特性が、前記第1のダイナミックレンジよりも広い第3のダイナミックレンジに対応し且つ前記入力画像データの階調値に相対輝度を対応付けた第3の階調特性である場合、前記入力画像データの階調値に対応付けられた前記相対輝度を前記輝度レベルとして用いた第3の対応関係を示す情報に基づいて、前記入力画像データの色を変換する
ことを特徴とする画像処理装置である
A first aspect of the present invention provides:
Conversion means for converting the color of the input image data based on information indicating the correspondence between the luminance level and the color to generate converted image data;
Setting means for setting tone characteristics of the input image data;
With
The conversion means,
When the gradation characteristic set by the setting unit is a first gradation characteristic corresponding to a first dynamic range, a first correspondence using a gradation value of the input image data as the luminance level is set. Based on the information shown, convert the color of the input image data,
A second gradation characteristic in which the gradation characteristic set by the setting means corresponds to a second dynamic range wider than the first dynamic range, and the absolute value is associated with a gradation value of the input image data. In the case of, the color of the input image data is converted based on information indicating a second correspondence relationship using the absolute luminance associated with the gradation value of the input image data as the luminance level,
A third gradation characteristic in which the gradation characteristic set by the setting means corresponds to a third dynamic range wider than the first dynamic range, and a relative luminance is associated with a gradation value of the input image data; In the case of, converting the color of the input image data based on information indicating a third correspondence using the relative luminance associated with the gradation value of the input image data as the luminance level. It is an image processing apparatus characterized by the following .

本発明の第の態様は、
輝度レベルと色との対応関係を示す情報に基づいて入力画像データの色を変換して、変換画像データを生成する変換工程と、
前記入力画像データの階調特性を設定する設定工程と、
有し
前記変換工程では、
前記設定工程で設定した階調特性が、第1のダイナミックレンジに対応する第1の階調特性である場合、前記入力画像データの階調値を前記輝度レベルとして用いた第1の対応関係を示す情報に基づいて、前記入力画像データの色を変換し、
前記設定工程で設定した階調特性が、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジに対応し且つ前記入力画像データの階調値に絶対輝度を対応付けた第2の階調特性である場合、前記入力画像データの階調値に対応付けられた前記絶対輝度を前記輝度レベルとして用いた第2の対応関係を示す情報に基づいて、前記入力画像データの色を変換し、
前記設定工程で設定した階調特性が、前記第1のダイナミックレンジよりも広い第3のダイナミックレンジに対応し且つ前記入力画像データの階調値に相対輝度を対応付けた第3の階調特性である場合、前記入力画像データの階調値に対応付けられた前記相対輝度を前記輝度レベルとして用いた第3の対応関係を示す情報に基づいて、前記入力画像データの色を変換する
ことを特徴とする画像処理方法である
A second aspect of the present invention provides:
A conversion step of converting the color of the input image data based on information indicating the correspondence between the luminance level and the color to generate converted image data;
A setting step of setting a gradation characteristic of the input image data,
Has ,
In the conversion step,
When the gradation characteristic set in the setting step is a first gradation characteristic corresponding to a first dynamic range, a first correspondence relationship using a gradation value of the input image data as the luminance level is set. Based on the information shown, convert the color of the input image data,
A second gradation characteristic in which the gradation characteristic set in the setting step corresponds to a second dynamic range wider than the first dynamic range, and the absolute luminance is associated with a gradation value of the input image data. In the case of, the color of the input image data is converted based on information indicating a second correspondence relationship using the absolute luminance associated with the gradation value of the input image data as the luminance level,
A third gradation characteristic in which the gradation characteristic set in the setting step corresponds to a third dynamic range wider than the first dynamic range, and a relative luminance is associated with a gradation value of the input image data. In the case of, converting the color of the input image data based on information indicating a third correspondence using the relative luminance associated with the gradation value of the input image data as the luminance level. This is a featured image processing method .

本発明の第3の態様は、上述した画像処理方法の各工程をコンピュータに実行させるためのプログラムである。 A third aspect of the present invention is a program for causing a computer to execute each step of the above-described image processing method.

本発明によれば、入力画像データの輝度分布をより好適に表示することが可能となる。   According to the present invention, it is possible to more appropriately display the luminance distribution of input image data.

本実施形態に係る表示装置の構成例Configuration example of the display device according to the present embodiment 本実施形態に係るレンジ変換処理の一例Example of range conversion processing according to the present embodiment 本実施形態に係る色変換パラメータ生成部の処理フローの一例An example of a processing flow of the color conversion parameter generation unit according to the present embodiment 本実施形態に係る対応関係(絶対輝度と色の対応関係)の一例An example of the correspondence (correspondence between absolute luminance and color) according to the present embodiment 本実施形態に係る色変換処理部の処理結果の一例An example of a processing result of the color conversion processing unit according to the present embodiment 本実施形態に係る対応関係(相対輝度と色の対応関係)の一例An example of the correspondence (correspondence between relative luminance and color) according to the present embodiment 本実施形態に係る対応関係(絶対輝度と色の対応関係)の一例An example of the correspondence (correspondence between absolute luminance and color) according to the present embodiment 本実施形態に係る対応関係(輝度階調値と色の対応関係)の一例Example of Correspondence (Correspondence between Brightness Tone Value and Color) According to the Present Embodiment

以下、本発明の実施形態について説明する。なお、以下では、本実施形態に係る画像処理装置を有する表示装置の例を説明する。表示装置は、例えば、液晶表示装置、有機EL(Electro Luminescence)表示装置、プラズマ表示装置、MEMS(Micro Electro Mechanical System)シャッタ方式表示装置、等である。なお、画像処理装置は表示装置とは別体の装置であってもよい。表示装置とは別体の画像処理装置は、例えば、パーソナルコンピュータ(PC)、再生装置(例えば、ブルーレイプレーヤ)、サーバ装置、等である。   Hereinafter, embodiments of the present invention will be described. Hereinafter, an example of a display device having the image processing device according to the present embodiment will be described. The display device is, for example, a liquid crystal display device, an organic EL (Electro Luminescence) display device, a plasma display device, a MEMS (Micro Electro Mechanical System) shutter type display device, or the like. Note that the image processing device may be a device separate from the display device. The image processing device separate from the display device is, for example, a personal computer (PC), a reproducing device (for example, a Blu-ray player), a server device, or the like.

図1は、本実施形態に係る表示装置100の構成例を示す。表示装置100は、画像入力部101、画像処理部102、色変換処理部103、表示部104、CPU105、UI(ユーザインターフェース)部106、及び、色変換パラメータ生成部107を有する。   FIG. 1 shows a configuration example of a display device 100 according to the present embodiment. The display device 100 includes an image input unit 101, an image processing unit 102, a color conversion processing unit 103, a display unit 104, a CPU 105, a UI (user interface) unit 106, and a color conversion parameter generation unit 107.

画像入力部101は、画像データ(入力画像データ)を取得し、入力画像データを画像処理部102へ出力する。本実施形態では、画像入力部101は、表示装置100(画像処理装置)の外部から入力画像データを取得する。具体的には、画像入力部101は、SDI規格に準じたSDI入力端子を有しており、表示装置100の外部からSDI入力端子を介してSDI信号を取得する。そして、画像入力部101は、表示装置100の内部で処理可能なデータフォーマットを有する画像データにSDI信号を変換し、変換後の画像データを画像処理部102へ出力する。本実施形態では、入力画像データの階調値は、10ビットの値(0〜1023)である。   The image input unit 101 acquires image data (input image data) and outputs the input image data to the image processing unit 102. In the present embodiment, the image input unit 101 acquires input image data from outside the display device 100 (image processing device). Specifically, the image input unit 101 has an SDI input terminal conforming to the SDI standard, and acquires an SDI signal from outside the display device 100 via the SDI input terminal. The image input unit 101 converts the SDI signal into image data having a data format that can be processed inside the display device 100, and outputs the converted image data to the image processing unit 102. In the present embodiment, the gradation value of the input image data is a 10-bit value (0 to 1023).

なお、入力画像データの取得方法は特に限定されない。例えば、画像データを記憶する記憶部を表示装置100(画像処理部)が有しており、画像入力部101が記憶部から画像データ(入力画像データ)を読み出してもよい。画像入力部101に入力される画像信号はSDI信号でなくてもよい。入力画像データのビット数(ビット深度)は、10ビットより多くても少なくてもよい。   Note that a method for acquiring input image data is not particularly limited. For example, the display device 100 (image processing unit) may include a storage unit that stores image data, and the image input unit 101 may read image data (input image data) from the storage unit. The image signal input to the image input unit 101 need not be an SDI signal. The number of bits (bit depth) of the input image data may be more or less than 10 bits.

画像処理部102は、表示装置100(画像処理装置)に対するユーザ操作(ユーザか
らの指示)に応じて、入力画像データの階調特性を決定する(特性決定処理)。ここで、ユーザ操作は、例えば、階調特性を指定するユーザ操作である。画像処理部102は、決定した階調特性に少なくとも基づく画像処理を、画像入力部101から出力された入力画像データに施す。それにより、処理画像データが生成される。そして、画像処理部102は、処理画像データを、色変換処理部103へ出力する。階調特性は、例えば、画像データの階調値を変換する階調変換処理における、変換前の階調値と変換後の階調値との対応関係に関連した特性である。本実施形態では、ガンマ2.2、SMPTE ST.2084(PQ、Perceptual Quantization)、及び、Logの3種類の階調特性のいずれかが、入力画像データの階調特性として決定される。なお、対応する階調特性は、上述の階調特性に限らない。例えば、ARIB STD−B67で規定されたHybrid Log−Gamma(HLG)であってもよい。以降、「階調特性がST2084である」ということは、階調特性が、SMPTE ST.2084で定義されたPQであることを意味する。
The image processing unit 102 determines a gradation characteristic of input image data in response to a user operation (an instruction from a user) on the display device 100 (image processing device) (characteristic determination processing). Here, the user operation is, for example, a user operation for specifying a gradation characteristic. The image processing unit 102 performs image processing based on at least the determined gradation characteristic on the input image data output from the image input unit 101. Thereby, processed image data is generated. Then, the image processing unit 102 outputs the processed image data to the color conversion processing unit 103. The gradation characteristic is, for example, a characteristic related to a correspondence between a gradation value before conversion and a gradation value after conversion in a gradation conversion process for converting a gradation value of image data. In the present embodiment, gamma 2.2, SMPTE ST. 2084 (PQ, Perceptual Quantization) and one of three types of Log gradation characteristics are determined as the gradation characteristics of the input image data. Note that the corresponding gradation characteristics are not limited to the above-described gradation characteristics. For example, it may be Hybrid Log-Gamma (HLG) specified in ARIB STD-B67. Hereinafter, “the gradation characteristic is ST2084” means that the gradation characteristic is SMPTE ST. It means the PQ defined in 2084.

広いダイナミックレンジは「HDR(High Dynamic Range)」などと呼ばれ、HDRに比べ狭いダイナミックレンジは「SDR(Standard Dynamic Range)」などと呼ばれる。ダイナミックレンジは、輝度に関する輝度関連値(輝度レベル)のレンジである。輝度関連値(輝度レベル)は、輝度階調値(Y値)、絶対輝度、相対輝度、等である。そして、HDRを有する画像データは「HDR画像データ」などと呼ばれ、SDRを有する画像データは「SDR画像データ」などと呼ばれる。ガンマ2.2はSDRに対応する階調特性であり、ST2084とLogはHDRに対応する階調特性である。   A wide dynamic range is called “HDR (High Dynamic Range)” or the like, and a dynamic range narrower than HDR is called “SDR (Standard Dynamic Range)” or the like. The dynamic range is a range of a luminance-related value (luminance level) relating to luminance. The luminance related value (luminance level) is a luminance gradation value (Y value), an absolute luminance, a relative luminance, or the like. The image data having HDR is called “HDR image data” and the like, and the image data having SDR is called “SDR image data” and the like. Gamma 2.2 is a gradation characteristic corresponding to SDR, and ST2084 and Log are gradation characteristics corresponding to HDR.

ST2084は、入力画像データの画素値(階調値)に絶対輝度が対応付けられた階調特性であり、Logは、入力画像データの画素値に相対輝度(相対的な輝度レベル)が対応付けられた階調特性である。換言すれば、ST2084は、入力画像データの輝度を絶対輝度で定義する階調特性であり、Logは、入力画像データの輝度を相対輝度で定義する階調特性である。また、HLGは、入力画像データの輝度を相対輝度で定義する階調特性である。画素値への相対輝度の対応付けは、画素値への輝度レベルの間接的な対応付けとも言える。階調特性としてHLGを用いる場合、以降の階調特性がLogである場合と同様の処理を行うとする。   ST2084 is a gradation characteristic in which absolute luminance is associated with a pixel value (tone value) of input image data, and Log is a relative luminance (relative luminance level) associated with a pixel value of input image data. This is the obtained gradation characteristic. In other words, ST2084 is a gradation characteristic that defines the luminance of the input image data by absolute luminance, and Log is a gradation characteristic that defines the luminance of the input image data by relative luminance. HLG is a gradation characteristic that defines the luminance of input image data as relative luminance. The association of the relative luminance with the pixel value can be said to be an indirect association of the luminance level with the pixel value. When HLG is used as the gradation characteristic, the same processing as when the gradation characteristic is Log is performed.

ST2084、Log、等のように、画素値に輝度(絶対輝度または相対輝度)が対応付けられている場合には、階調特性として、画像データの画素値と画像データの輝度との対応関係に関連した特性を使用することができる。具体的には、階調特性の情報として、画像データの画素値と画像データの輝度との対応関係を示す情報(関数、テーブル、等)を使用することができる。このような情報は、「EOTF(Electro−optical transfer function)」などと呼ばれる。   When luminance (absolute luminance or relative luminance) is associated with the pixel value as in ST2084, Log, etc., the correspondence between the pixel value of the image data and the luminance of the image data is represented as a gradation characteristic. Relevant properties can be used. Specifically, information (function, table, etc.) indicating the correspondence between the pixel value of the image data and the luminance of the image data can be used as the information of the gradation characteristics. Such information is called "EOTF (Electro-optical transfer function)" or the like.

画像処理部102によって行われる画像処理は、階調変換処理、レンジ変換処理、等を含む。階調変換処理は、決定された階調特性に応じて入力画像データの階調値を変換する処理である。例えば、階調変換処理では、決定された階調特性に対応する所定のLUT(Look Up Table)を用いて入力画像データの階調値が変換される。階調変換処理では、所定のLUTとして、1DLUT(1次元のLUT)などが使用される。所定のLUTの代わりに所定の関数が使用されてもよい。   The image processing performed by the image processing unit 102 includes a gradation conversion process, a range conversion process, and the like. The gradation conversion process is a process of converting the gradation value of the input image data according to the determined gradation characteristics. For example, in the gradation conversion process, the gradation value of the input image data is converted using a predetermined LUT (Look Up Table) corresponding to the determined gradation characteristic. In the gradation conversion processing, a 1DLUT (one-dimensional LUT) or the like is used as a predetermined LUT. A predetermined function may be used instead of the predetermined LUT.

レンジ変換処理は、入力画像データのダイナミックレンジの少なくとも一部が好適に表示可能となるように、当該入力画像データ(入力画像データの階調値)を補正する処理である。本実施形態では、入力画像データの階調特性がST2084である場合と、入力画像データの階調特性がLogである場合とにおいて、レンジ変換処理が行われる。   The range conversion process is a process of correcting the input image data (gradation value of the input image data) so that at least a part of the dynamic range of the input image data can be appropriately displayed. In the present embodiment, range conversion processing is performed when the gradation characteristic of the input image data is ST2084 and when the gradation characteristic of the input image data is Log.

本実施形態では、画像処理部102は、表示装置100(画像処理装置)に対するユーザ操作に応じて、入力画像データのダイナミックレンジの少なくとも一部を、指定表示レンジとして決定する。具体的には、画像処理部102は、ユーザ操作に応じて、指定表示レンジに属する複数の輝度関連値の最大値を決定する(第1閾値決定処理)。それにより、入力画像データのダイナミックレンジに属する複数の輝度関連値の最小値から、決定された最大値(指定表示レンジに属する複数の輝度関連値の最大値)までのレンジが、指定表示レンジとして使用される。そして、レンジ変換処理では、指定表示レンジ(決定された最大値)に基づいて入力画像データが補正される。それにより、後述する色変換処理が行われない場合において、指定表示レンジが、入力画像データの規格(階調特性)に準じた階調性で表示される。そして、オーバーレンジ画素が、所定の色で表示される。オーバーレンジ画素は、指定表示レンジに属する複数の輝度関連値の最大値よりも高い(大きい)輝度関連値を有する画素である。例えば、そのような輝度関連値は白色で表示される(白飛び)。   In the present embodiment, the image processing unit 102 determines at least a part of the dynamic range of the input image data as the designated display range according to a user operation on the display device 100 (image processing device). Specifically, the image processing unit 102 determines the maximum value of a plurality of luminance-related values belonging to the designated display range according to a user operation (first threshold value determination processing). Thereby, the range from the minimum value of the plurality of luminance-related values belonging to the dynamic range of the input image data to the determined maximum value (the maximum value of the plurality of luminance-related values belonging to the designated display range) is set as the designated display range. used. In the range conversion process, the input image data is corrected based on the designated display range (the determined maximum value). As a result, when the later-described color conversion process is not performed, the designated display range is displayed with a gradation characteristic according to the standard (gradation characteristics) of the input image data. Then, the overrange pixels are displayed in a predetermined color. An over-range pixel is a pixel having a luminance-related value higher (greater) than the maximum value of a plurality of luminance-related values belonging to the designated display range. For example, such a luminance-related value is displayed in white (whiteout).

ここで、入力画像データの階調特性がST2084であり、且つ、指定表示レンジに属する複数の絶対輝度の最大輝度が1000cd/mである場合を考える。ST2084では、0〜10000cd/mの絶対輝度が定義されている。なお、本実施形態では、0〜1000cd/mの表示輝度(画面の輝度)を実現することができる。この場合には、1000cd/m以下の絶対輝度(ST2084で定義された絶対輝度)がそのままの輝度で表示され、且つ、1000cd/mよりも高い絶対輝度が1000cd/mで表示されるように、入力画像データが補正される(図2(A))。次に、入力画像データの階調特性がST2084であり、且つ、指定表示レンジに属する複数の絶対輝度の最大輝度が10000cd/mである場合を考える。この場合には、0〜10000cd/mの絶対輝度(ST2084で定義された絶対輝度)を含むレンジが0〜1000cd/mの表示輝度を含むレンジに圧縮されて表示されるように、入力画像データが補正される(図2(B))。 Here, it is assumed that the gradation characteristic of the input image data is ST2084 and the maximum luminance of a plurality of absolute luminances belonging to the designated display range is 1000 cd / m 2 . In ST2084, an absolute luminance of 0 to 10000 cd / m 2 is defined. In the present embodiment, a display luminance (screen luminance) of 0 to 1000 cd / m 2 can be realized. In this case, 1000 cd / m 2 or less of absolute luminance (absolute brightness defined in ST2084) is displayed as it luminance, and the absolute luminance are displayed in 1000 cd / m 2 higher than 1000 cd / m 2 Thus, the input image data is corrected (FIG. 2A). Next, consider a case where the gradation characteristic of the input image data is ST2084 and the maximum luminance of a plurality of absolute luminances belonging to the designated display range is 10000 cd / m 2 . In this case, the input is performed such that the range including the absolute luminance of 0 to 10000 cd / m 2 (the absolute luminance defined in ST2084) is compressed and displayed in the range including the display luminance of 0 to 1000 cd / m 2. The image data is corrected (FIG. 2B).

なお、入力画像データの階調特性の決定方法は特に限定されない。例えば、入力画像データの階調特性に関連した特性情報が、入力画像データに付加されたメタデータに含まれていてもよい。そして、画像処理部102が、入力画像データのメタデータから取得した特性情報に応じて、入力画像データの階調特性を判断してもよい(特性判断処理)。画像処理部102が、入力画像データの種類(医療用画像、イラスト画像、風景画、等)に応じて、入力画像データの階調特性を自動で決定してもよい。画像処理部102が、表示装置100(画像処理装置)の使用環境に応じて、入力画像データの階調特性を自動で決定してもよい。表示装置100の使用環境は、表示装置100の温度、表示装置100の周囲の明るさ、等である。   The method for determining the gradation characteristics of the input image data is not particularly limited. For example, characteristic information related to the gradation characteristics of the input image data may be included in the metadata added to the input image data. Then, the image processing unit 102 may determine the gradation characteristics of the input image data according to the characteristic information acquired from the metadata of the input image data (characteristic determination processing). The image processing unit 102 may automatically determine the gradation characteristics of the input image data according to the type of the input image data (medical image, illustration image, landscape image, etc.). The image processing unit 102 may automatically determine the gradation characteristics of the input image data according to the use environment of the display device 100 (image processing device). The use environment of the display device 100 is the temperature of the display device 100, the brightness around the display device 100, and the like.

特性情報として、例えば、上記階調変換処理における変換前の階調値と変換後の階調値との対応関係を示す情報を使用することができる。特性情報として、入力画像データに既に施されている階調変換処理における、変換前の階調値と変換後の階調値との対応関係を示す情報を使用することもできる。ST2084、Log、等のように、画素値に輝度(絶対輝度または相対輝度)が対応付けられている場合には、特性情報として、画像データの画素値と画像データの輝度との対応関係を示す情報を使用することもできる。EOTFでは、入力値が画素値であり、出力値が輝度である。これに対し、入力値が輝度であり、且つ、出力値が画素値である情報(関数、テーブル、等)は、「OETF(Opto−electronic transfer function)」などと呼ばれる。画素値に輝度が対応付けられている場合には、特性情報として、EOTF、OETF、等を使用することもできる。   As the characteristic information, for example, information indicating the correspondence between the gradation value before conversion and the gradation value after conversion in the gradation conversion processing can be used. As the characteristic information, it is also possible to use information indicating the correspondence between the gradation value before conversion and the gradation value after conversion in the gradation conversion processing already performed on the input image data. When luminance (absolute luminance or relative luminance) is associated with the pixel value as in ST2084, Log, etc., the correspondence between the pixel value of the image data and the luminance of the image data is indicated as the characteristic information. Information can also be used. In EOTF, an input value is a pixel value, and an output value is luminance. On the other hand, information (a function, a table, or the like) in which the input value is luminance and the output value is a pixel value is called “OETF (Opto-electronic transfer function)” or the like. When the luminance is associated with the pixel value, EOTF, OETF, or the like can be used as the characteristic information.

また、指定表示レンジ(指定表示レンジに属する複数の輝度関連値の最大値)の決定方法は特に限定されない。例えば、指定表示レンジを示すレンジ情報が、入力画像データのメタデータに含まれていてもよい。そして、画像処理部102が、レンジ情報に応じて、指定表示レンジを判断してもよい。画像処理部102が、入力画像データの種類に応じて、指定表示レンジを自動で決定してもよい。画像処理部102が、表示装置100(画像処理装置)の使用環境に応じて、指定表示レンジを自動で決定してもよい。   Further, the method of determining the designated display range (the maximum value of the plurality of luminance-related values belonging to the designated display range) is not particularly limited. For example, range information indicating the designated display range may be included in the metadata of the input image data. Then, the image processing unit 102 may determine the designated display range according to the range information. The image processing unit 102 may automatically determine the designated display range according to the type of the input image data. The image processing unit 102 may automatically determine the designated display range according to the use environment of the display device 100 (image processing device).

また、入力画像データの階調特性、入力画像データのダイナミックレンジ、表示輝度のレンジ、画像処理部102によって行われる画像処理、輝度関連値、等は特に限定されない。例えば、提案されている種々の階調特性を入力画像データの階調特性として使用することができる。表示輝度のレンジは、0〜1000cd/mの表示輝度のレンジより狭くても広くてもよい。入力画像データの階調特性がST2084である場合と、入力画像データの階調特性がLogである場合との少なくとも一方において、レンジ変換処理が行われなくてもよい。入力画像データの階調特性がガンマ2.2である場合にレンジ変換処理が行われてもよい。画像処理部102は階調変換処理を省略してもよい。入力画像データとして、画像処理部102の階調変換処理が施された後の画像データが取得されてもよい。 Further, the gradation characteristics of the input image data, the dynamic range of the input image data, the range of the display luminance, the image processing performed by the image processing unit 102, the luminance-related values, and the like are not particularly limited. For example, various proposed gradation characteristics can be used as the gradation characteristics of the input image data. The display luminance range may be narrower or wider than the display luminance range of 0 to 1000 cd / m 2 . Range conversion processing may not be performed in at least one of the case where the gradation characteristic of the input image data is ST2084 and the case where the gradation characteristic of the input image data is Log. Range conversion processing may be performed when the gradation characteristic of the input image data is gamma 2.2. The image processing unit 102 may omit the gradation conversion processing. As the input image data, image data that has been subjected to the gradation conversion processing of the image processing unit 102 may be obtained.

色変換処理部103は、色変換パラメータ生成部107によって生成された色変換パラメータを用いて、画像処理部102から出力された処理画像データの色を変換する(色変換処理)。それにより、表示画像データ(変換画像データ)が生成される。色変換処理部103は、表示画像データを表示部104へ出力する。色の変換は「色の着色」とも言え、色変換処理は「着色処理」とも言える。色変換パラメータは、例えば、処理画像データの各画素について変換色(色変換処理における変換後の色)を示すテーブルである。なお、色変換処理部103は、処理画像データではなく入力画像データに色変換処理を施すことにより、表示画像データを生成してもよい。   The color conversion processing unit 103 converts the color of the processed image data output from the image processing unit 102 using the color conversion parameters generated by the color conversion parameter generation unit 107 (color conversion processing). Thereby, display image data (converted image data) is generated. The color conversion processing unit 103 outputs display image data to the display unit 104. Color conversion can also be referred to as "color coloring", and color conversion processing can also be referred to as "coloring processing". The color conversion parameter is, for example, a table indicating a conversion color (a color after conversion in the color conversion process) for each pixel of the processed image data. Note that the color conversion processing unit 103 may generate display image data by performing color conversion processing on input image data instead of processed image data.

表示部104は、色変換処理部103から出力された表示画像データに基づいて画面に画像を表示する。表示部104として、自発光型の表示パネル、発光部と変調パネルの組み合わせ、等を使用することができる。自発光型の表示パネルは、表示画像データに基づいて発光することにより、画面に画像を表示する。発光部は、変調パネルに光を照射する。変調パネルは、発光部から発せられた光を表示画像データに基づいて変調(透過、反射、等)することにより、画面に画像を表示する。発光部の発光(発光輝度、発光色、等)が表示画像データに基づいて制御されてもよい。透過型の液晶表示装置では、発光部は「バックライトユニット」などと呼ばれ、変調パネルは「液晶パネル」などと呼ばれる。バックライトユニットは、液晶パネルの背面に光を照射する。液晶パネルは、バックライトユニットから発せられた光を透過することにより、画面に画像を表示する。   The display unit 104 displays an image on a screen based on the display image data output from the color conversion processing unit 103. As the display unit 104, a self-luminous display panel, a combination of a light-emitting unit and a modulation panel, or the like can be used. The self-luminous display panel displays an image on a screen by emitting light based on display image data. The light emitting unit emits light to the modulation panel. The modulation panel displays an image on a screen by modulating (transmitting, reflecting, etc.) the light emitted from the light emitting unit based on the display image data. Light emission (light emission luminance, light emission color, etc.) of the light emitting unit may be controlled based on the display image data. In a transmissive liquid crystal display device, the light emitting unit is called a "backlight unit" or the like, and the modulation panel is called a "liquid crystal panel" or the like. The backlight unit emits light to the back of the liquid crystal panel. The liquid crystal panel displays an image on a screen by transmitting light emitted from the backlight unit.

CPU105は、表示装置100(表示装置100の各機能部)の動作を制御する。例えば、表示装置100は、プログラムを記憶する記憶部(不揮発性メモリなど)を有しており、CPU105は、プログラムを記憶部から読み出して実行することにより、表示装置100の動作を制御する。   The CPU 105 controls the operation of the display device 100 (each functional unit of the display device 100). For example, the display device 100 has a storage unit (such as a non-volatile memory) that stores a program, and the CPU 105 controls the operation of the display device 100 by reading out the program from the storage unit and executing the program.

UI部106は、表示装置100(画像処理装置)に対するユーザ操作を受け付ける。そして、UI部106は、行われたユーザ操作に応じた操作信号を、表示装置100の他の機能部(画像処理部102、色変換処理部103、CPU105、色変換パラメータ生成部107、等)へ出力する。UI部106は、例えば、表示装置100に設けられたボタン、表示部104に設けられたタッチパネル、等である。表示装置100に対して着脱可能な操作部(コントローラ、キーボード、マウス、等)がUI部106として用いられてもよい。   The UI unit 106 receives a user operation on the display device 100 (image processing device). Then, the UI unit 106 transmits an operation signal corresponding to the performed user operation to another functional unit of the display device 100 (the image processing unit 102, the color conversion processing unit 103, the CPU 105, the color conversion parameter generation unit 107, and the like). Output to The UI unit 106 is, for example, a button provided on the display device 100, a touch panel provided on the display unit 104, or the like. An operation unit (a controller, a keyboard, a mouse, or the like) detachable from the display device 100 may be used as the UI unit 106.

UI部106は、例えば、特性設定操作、レンジ設定操作、色変換設定操作、等のユーザ操作を受け付ける。特性設定操作は、入力画像データの階調特性を決定するためのユーザ操作である。例えば、特性設定操作は、階調特性を指定するユーザ操作、表示装置100(画像処理装置)の動作モードを指定するユーザ操作、等である。レンジ設定操作は、指定表示レンジを決定するためのユーザ操作である。例えば、レンジ設定操作は、指定表示レンジを指定するユーザ操作、指定表示レンジに属する複数の輝度関連値の最大値を指定するユーザ操作、表示装置100の動作モードを指定するユーザ操作、等である。色変換設定操作は、色変換処理を実行するか否かを決定するためのユーザ操作である。例えば、色変換設定操作は、色変換処理を実行するか否かを指定するユーザ操作、表示装置100の動作モードを指定するユーザ操作、等である。   The UI unit 106 receives, for example, user operations such as a characteristic setting operation, a range setting operation, and a color conversion setting operation. The characteristic setting operation is a user operation for determining the gradation characteristics of the input image data. For example, the characteristic setting operation is a user operation for specifying a gradation characteristic, a user operation for specifying an operation mode of the display device 100 (image processing device), or the like. The range setting operation is a user operation for determining the designated display range. For example, the range setting operation is a user operation of specifying a specified display range, a user operation of specifying a maximum value of a plurality of luminance-related values belonging to the specified display range, a user operation of specifying an operation mode of the display device 100, and the like. . The color conversion setting operation is a user operation for determining whether to execute a color conversion process. For example, the color conversion setting operation is a user operation for specifying whether or not to execute the color conversion process, a user operation for specifying an operation mode of the display device 100, and the like.

本実施形態では、色変換処理を実行するか否かの設定を「フォルスカラー設定」と記載する。色変換パラメータ生成部107は、色変換設定操作に応じて、フォルスカラー設定の状態をオン状態とオフ状態の間で切り替える。オン状態は、色変換処理を実行する状態であり、オフ状態は、色変換処理を実行しない状態である。そのため、フォルスカラー設定の状態を選択することにより、色変換処理を実行するか否かを選択することができる。例えば、色変換処理部103、色変換パラメータ生成部107、または、それらの両方が、色変換設定操作に応じて、フォルスカラー設定の状態を選択する。   In the present embodiment, the setting of whether or not to execute the color conversion processing is referred to as “false color setting”. The color conversion parameter generation unit 107 switches the state of the false color setting between the on state and the off state according to the color conversion setting operation. The ON state is a state where the color conversion processing is executed, and the OFF state is a state where the color conversion processing is not executed. Therefore, by selecting the state of the false color setting, it is possible to select whether or not to execute the color conversion processing. For example, the color conversion processing unit 103, the color conversion parameter generation unit 107, or both of them select a false color setting state according to the color conversion setting operation.

なお、指定表示レンジに属する複数の輝度関連値の最大値を指定するレンジ設定操作において、輝度関連値の種類は特に限定されない。例えば、入力画像データの階調特性によらず、最大値を輝度階調値で指定するユーザ操作が、レンジ設定操作として行われてもよい。但し、利便性などの観点から、入力画像データの階調特性に応じた種類の輝度階調値を指定するユーザ操作が、レンジ設定操作として行われることが好ましい。例えば、入力画像データの階調特性がST2084である場合には、絶対輝度を指定するユーザ操作がレンジ設定操作として行われることが好ましい。入力画像データの階調特性がLogである場合には、相対輝度を指定するユーザ操作がレンジ設定操作として行われることが好ましい。   In the range setting operation for specifying the maximum value of the plurality of luminance-related values belonging to the specified display range, the type of the luminance-related value is not particularly limited. For example, a user operation of designating the maximum value as a luminance gradation value regardless of the gradation characteristics of the input image data may be performed as the range setting operation. However, from the viewpoint of convenience or the like, it is preferable that the user operation of designating a type of luminance gradation value according to the gradation characteristics of the input image data is performed as a range setting operation. For example, when the gradation characteristic of the input image data is ST2084, it is preferable that the user operation for specifying the absolute luminance is performed as a range setting operation. When the gradation characteristic of the input image data is Log, it is preferable that the user operation for specifying the relative luminance is performed as a range setting operation.

色変換パラメータ生成部107は、入力画像データの輝度関連値(輝度レベル)と色変換処理の変換色との対応関係を示す情報、及び、入力画像データに基づいて、色変換パラメータを生成する。例えば、上述したように、色変換パラメータとして、各画素の変換色を示すテーブルが生成される。そして、色変換パラメータ生成部107は、生成した色変換パラメータを、色変換処理部103へ出力する。それにより、色変換処理では、上記対応関係に基づいて処理画像データの色が変換される。本実施形態では、色変換パラメータ生成部107は、決定された入力画像データの階調特性に応じた対応関係を使用する。それにより、入力画像データの輝度分布をより好適に表示することが可能となる。例えば、入力画像データの階調特性がガンマ2.2である場合には、入力画像データの輝度階調値に変換色が対応付けられた対応関係が使用される。入力画像データの階調特性がST2084である場合には、入力画像データの絶対輝度に変換色が対応付けられた対応関係が使用される。そして、入力画像データの階調特性がLogである場合には、入力画像データの相対輝度に変換色が対応付けられた対応関係が使用される。すなわち、色変換パラメータ生成部107は、階調特性に応じて、輝度レベルと変換色との対応関係を切り換える。   The color conversion parameter generation unit 107 generates a color conversion parameter based on the input image data and information indicating the correspondence between the luminance related value (luminance level) of the input image data and the conversion color of the color conversion processing. For example, as described above, a table indicating a conversion color of each pixel is generated as a color conversion parameter. Then, the color conversion parameter generation unit 107 outputs the generated color conversion parameters to the color conversion processing unit 103. Thereby, in the color conversion process, the color of the processed image data is converted based on the correspondence. In the present embodiment, the color conversion parameter generation unit 107 uses the correspondence according to the determined gradation characteristics of the input image data. This makes it possible to more appropriately display the luminance distribution of the input image data. For example, when the gradation characteristic of the input image data is gamma 2.2, a correspondence relationship in which the conversion color is associated with the luminance gradation value of the input image data is used. If the gradation characteristic of the input image data is ST2084, a correspondence relationship in which the conversion color is associated with the absolute luminance of the input image data is used. When the gradation characteristic of the input image data is Log, a correspondence relationship in which the conversion color is associated with the relative luminance of the input image data is used. That is, the color conversion parameter generation unit 107 switches the correspondence between the luminance level and the conversion color according to the gradation characteristics.

なお、入力画像データの階調特性は、色変換パラメータ生成部107によって決定されてもよい。画像処理部102と色変換パラメータ生成部107のそれぞれにおいて入力画像データの階調特性が決定(判断)されてもよい。同様に、指定表示レンジ(指定表示レンジに属する複数の輝度関連値の最大値)は、色変換パラメータ生成部107によって決定されてもよい。画像処理部102と色変換パラメータ生成部107のそれぞれにおいて
指定表示レンジが決定されてもよい。
Note that the gradation characteristics of the input image data may be determined by the color conversion parameter generation unit 107. The gradation characteristics of the input image data may be determined (determined) in each of the image processing unit 102 and the color conversion parameter generation unit 107. Similarly, the designated display range (the maximum value of the plurality of luminance-related values belonging to the designated display range) may be determined by the color conversion parameter generation unit 107. The designated display range may be determined in each of the image processing unit 102 and the color conversion parameter generation unit 107.

色変換パラメータ生成部107の処理フローの一例について、図3のフローチャートを用いて説明する。   An example of the processing flow of the color conversion parameter generation unit 107 will be described with reference to the flowchart in FIG.

まず、S101にて、色変換パラメータ生成部107は、フォルスカラー設定の状態がオン状態であるか否かを判断する。フォルスカラー設定の状態がオフ状態である場合には(S101:No)、S102へ処理が進められ、フォルスカラー設定の状態がオン状態である場合には(S101:Yes)、S103へ処理が進められる。   First, in S101, the color conversion parameter generation unit 107 determines whether the false color setting state is the ON state. If the false color setting is in the off state (S101: No), the process proceeds to S102. If the false color setting is in the on state (S101: Yes), the process proceeds to S103. Can be

S102にて、色変換パラメータ生成部107は、入力画像データの輝度関連値と変換色との対応関係のパターンとして、「着色なし」を選択する。   In S102, color conversion parameter generation section 107 selects “no coloring” as the pattern of the correspondence between the luminance-related value of the input image data and the conversion color.

S103にて、色変換パラメータ生成部107は、入力画像データの階調特性がHDRに対応しているか否かを判断する。入力画像データの階調特性がHDRに対応していない場合には(S103:No)、S107へ処理が進められ、入力画像データの階調特性がHDRに対応している場合には(S103:Yes)、S104へ処理が進められる。具体的には、入力画像データの階調特性がガンマ2.2である場合には、入力画像データの階調特性がSDRに対応していると判断され、S107へ処理が進められる。入力画像データの階調特性がST2084またはLogである場合には、入力画像データの階調特性がHDRに対応していると判断され、S104へ処理が進められる。   In S103, the color conversion parameter generation unit 107 determines whether or not the gradation characteristics of the input image data correspond to HDR. If the gradation characteristics of the input image data do not support HDR (S103: No), the process proceeds to S107, and if the gradation characteristics of the input image data support HDR (S103: Yes), the process proceeds to S104. Specifically, when the gradation characteristic of the input image data is gamma 2.2, it is determined that the gradation characteristic of the input image data corresponds to SDR, and the process proceeds to S107. If the gradation characteristic of the input image data is ST2084 or Log, it is determined that the gradation characteristic of the input image data corresponds to HDR, and the process proceeds to S104.

S107にて、色変換パラメータ生成部107は、入力画像データの輝度関連値と変換色との対応関係のパターンとして、「パターンC」を選択する。   In S107, color conversion parameter generation section 107 selects “pattern C” as the pattern of the correspondence between the luminance-related value of the input image data and the converted color.

S104にて、色変換パラメータ生成部107は、入力画像データの階調特性で絶対輝度が定義されているか否かを判断する。入力画像データの階調特性で絶対輝度が定義されている場合には(S104:Yes)、S105へ処理が進められる。入力画像データの階調特性で絶対輝度が定義されておらず、且つ、入力画像データの階調特性で相対輝度が定義されている場合には(S104:No)、S106へ処理が進められる。具体的には、入力画像データの階調特性がST2084である場合には、S105へ処理が進められ、入力画像データの階調特性がLogである場合には、S106へ処理が進められる。   In S104, color conversion parameter generation section 107 determines whether or not absolute luminance is defined by the gradation characteristics of the input image data. If the absolute luminance is defined by the gradation characteristics of the input image data (S104: Yes), the process proceeds to S105. If the absolute luminance is not defined by the gradation characteristics of the input image data and the relative luminance is defined by the gradation characteristics of the input image data (S104: No), the process proceeds to S106. Specifically, if the gradation characteristic of the input image data is ST2084, the process proceeds to S105, and if the gradation characteristic of the input image data is Log, the process proceeds to S106.

S105にて、色変換パラメータ生成部107は、入力画像データの輝度関連値と変換色との対応関係のパターンとして、「パターンA」を選択する。S106にて、色変換パラメータ生成部107は、入力画像データの輝度関連値と変換色との対応関係のパターンとして、「パターンB」を選択する。   In S105, the color conversion parameter generation unit 107 selects “pattern A” as the pattern of the correspondence between the luminance-related value of the input image data and the conversion color. In S106, color conversion parameter generation section 107 selects “pattern B” as the pattern of the correspondence between the luminance-related value of the input image data and the converted color.

「着色なし」が選択された場合には、色変換パラメータ生成部107は、処理画像データの色を変換しない色変換パラメータを生成する。その結果、色変換処理部103において、処理画像データと等しい表示画像データが、色変換処理によって生成される。処理画像データの色を変換しない色変換パラメータは、「変換後の色が変換前の色と等しい色変換パラメータ」とも言える。なお、フォルスカラー設定の状態がオフ状態である場合には、色変換パラメータの生成が省略されてもよい。そして、色変換処理部103が、色変換処理を省略して、処理画像データを表示画像データとして出力してもよい。   When “no coloring” is selected, the color conversion parameter generation unit 107 generates a color conversion parameter that does not convert the color of the processed image data. As a result, in the color conversion processing unit 103, display image data equal to the processed image data is generated by the color conversion processing. A color conversion parameter that does not convert the color of the processed image data can also be referred to as a “color conversion parameter in which the color after conversion is equal to the color before conversion”. If the false color setting is in the off state, the generation of the color conversion parameter may be omitted. Then, the color conversion processing unit 103 may omit the color conversion processing and output the processed image data as the display image data.

本実施形態では、画像処理部102の画像処理により、オーバーレンジ画素の色が、所定の色(例えば白色)に変換される。オーバーレンジ画素は、指定表示レンジに属する複数の輝度関連値の最大値よりも高い(大きい)輝度関連値を有する画素である。そして、「着色なし」が選択された場合には、処理画像データの色は変換されず、オーバーレンジ
画素の色が上記所定の色に維持される。一方で、「パターンA」、「パターンB」、及び、「パターンC」のいずれかが選択された場合には、入力画像データの輝度関連値と変換色との対応関係に基づいて処理画像データの色が変換される。そのため、オーバーレンジ画素も、入力画像データの輝度関連値と変換色との対応関係に基づく色に変換される。
In the present embodiment, the color of the overrange pixel is converted into a predetermined color (for example, white) by the image processing of the image processing unit 102. An over-range pixel is a pixel having a luminance-related value higher (greater) than the maximum value of a plurality of luminance-related values belonging to the designated display range. Then, when "no coloring" is selected, the color of the processed image data is not converted, and the color of the overranged pixel is maintained at the predetermined color. On the other hand, when any one of “pattern A”, “pattern B”, and “pattern C” is selected, the processing image data is processed based on the correspondence between the luminance-related value of the input image data and the conversion color. Is converted. Therefore, the overrange pixels are also converted into colors based on the correspondence between the luminance-related values of the input image data and the conversion colors.

「パターンA」が選択された場合には、色変換パラメータ生成部107は、指定表示レンジ(指定表示レンジに属する複数の絶対輝度の最大輝度)に応じて、図4(A),4(B)に示すような対応関係を決定して使用する。   When “pattern A” is selected, the color conversion parameter generation unit 107 determines whether the color conversion parameter generation unit 107 is in accordance with the designated display range (the maximum luminance of a plurality of absolute luminances belonging to the designated display range). ) Is determined and used.

図4(A)は、指定表示レンジに属する複数の絶対輝度の最大輝度が10000cd/mである場合の例を示す。即ち、図4(A)の例では、指定表示レンジは、ST2084で定義された0〜10000cd/mの全ての絶対輝度を含む。 FIG. 4A shows an example in which the maximum luminance of a plurality of absolute luminances belonging to the designated display range is 10,000 cd / m 2 . That is, in the example of FIG. 4A, the designated display range includes all the absolute luminances of 0 to 10000 cd / m 2 defined in ST2084.

図4(A)の対応関係では、絶対輝度の複数のレンジ(色変換レンジ)に複数の変換色がそれぞれ対応付けられている。例えば、95〜105cd/mの絶対輝度が属する色変換レンジには、モノクロ色(グレー色)が対応付けられている。そのため、95〜105cd/mの絶対輝度を有する部分(画素)の色は、色変換処理により、モノクロ色に変換される。そして、995〜1005cd/mの絶対輝度が属する色変換レンジには、緑色が対応付けられている。また、図4(A)の対応関係では、複数の色変換レンジが互いに離れており、2つの色変換レンジの間に、変換色が対応付けられていないレンジ(非色変換レンジ)が存在する。色変換処理において、非色変換レンジに属する絶対輝度を有する画素の色は変換されない。 In the correspondence shown in FIG. 4A, a plurality of conversion colors are respectively associated with a plurality of ranges (color conversion ranges) of the absolute luminance. For example, a monochrome color (gray color) is associated with a color conversion range to which an absolute luminance of 95 to 105 cd / m 2 belongs. Therefore, the color of a portion (pixel) having an absolute luminance of 95 to 105 cd / m 2 is converted to a monochrome color by a color conversion process. Green is associated with the color conversion range to which the absolute luminance of 999 to 1005 cd / m 2 belongs. In the correspondence shown in FIG. 4A, a plurality of color conversion ranges are separated from each other, and a range (a non-color conversion range) to which no conversion color is associated exists between the two color conversion ranges. . In the color conversion processing, the color of the pixel having the absolute luminance belonging to the non-color conversion range is not converted.

図4(A)の対応関係が使用されることにより、色変換レンジに属する絶対輝度の分布が、色で表示される。上述したように、図4(A)の対応関係では、複数の色変換レンジが互いに離れている。そのため、色変換レンジに属する絶対輝度の分布が、等高線のような態様で表示される。   By using the correspondence shown in FIG. 4A, the distribution of the absolute luminance belonging to the color conversion range is displayed in color. As described above, in the correspondence shown in FIG. 4A, a plurality of color conversion ranges are separated from each other. Therefore, the distribution of the absolute luminance belonging to the color conversion range is displayed in a form like a contour line.

図4(B)は、指定表示レンジに属する複数の絶対輝度の最大輝度が1500cd/mである場合の例を示す。即ち、図4(B)の例では、指定表示レンジは、0〜1500cd/mの絶対輝度を含み、1500cd/mよりも高い絶対輝度を含まない。 FIG. 4B illustrates an example in which the maximum luminance of a plurality of absolute luminances belonging to the designated display range is 1500 cd / m 2 . That is, in the example of FIG. 4 (B), the specified display range includes the absolute luminance of 0~1500cd / m 2, it does not include a high absolute luminance than 1500 cd / m 2.

図4(B)の対応関係では、指定表示レンジに対して、図4(A)と同じ設定(色変換レンジ、非色変換レンジ、色変換レンジと変換色の対応付け)がされている。そのため、図4(B)の対応関係を用いた場合には、指定表示レンジに属する絶対輝度を有する画素に対する色変換処理の結果として、図4(A)の対応関係を用いた場合と同じ結果が得られる。   In the correspondence shown in FIG. 4B, the same setting (color conversion range, non-color conversion range, correspondence between color conversion range and conversion color) is made for the designated display range as in FIG. 4A. Therefore, when the correspondence shown in FIG. 4B is used, as a result of the color conversion processing on the pixels having the absolute luminance belonging to the designated display range, the same result as when the correspondence shown in FIG. Is obtained.

また、図4(B)の対応関係では、非指定表示レンジに、複数の色変換レンジにそれぞれ対応する複数の変換色とは異なる変換色が対応付けられている。具体的には、非指定表示レンジに、赤色が対応付けられている。そのため、非指定表示レンジに属する絶対輝度を有する画素の色は、色変換処理により、赤色に変換される。非指定表示レンジは、指定表示レンジの外側のレンジである。図4(B)の例では、非指定表示レンジは、1500cd/m(指定表示レンジに属する複数の絶対輝度の最大輝度)よりも高い絶対輝度のレンジである。 In the correspondence shown in FIG. 4B, a conversion color different from the plurality of conversion colors respectively corresponding to the plurality of color conversion ranges is associated with the non-designated display range. Specifically, a red color is associated with the non-designated display range. Therefore, the color of the pixel having the absolute luminance belonging to the non-designated display range is converted to red by the color conversion processing. The non-designated display range is a range outside the designated display range. In the example of FIG. 4B, the non-designated display range is a range of absolute luminance higher than 1500 cd / m 2 (the maximum luminance of a plurality of absolute luminances belonging to the designated display range).

このように、パターンAが選択された場合には、絶対輝度に変換色が対応付けられた対応関係が使用され、絶対輝度に基づく色変換処理が行われる。それにより、入力画像データの絶対輝度(絶対輝度の分布)を色で好適に表示することができる。その結果、ユーザは、入力画像データの絶対輝度を色で容易に把握することができる。例えば、図4(A)
,(B)の例では、色変換レンジの中心である絶対輝度は、キリの良い絶対輝度(100cd/m、200cd/m、400cd/m、1000cd/m、2000cd/m、4000cd/m、等)である。そのため、キリの良い絶対輝度を色で好適に表示することができる。その結果、ユーザは、キリの良い絶対輝度を色で容易に把握することができる。100cd/m、200cd/m、400cd/m、1000cd/m、2000cd/m、及び、4000cd/mは、入力画像データの取り得る絶対輝度の範囲を構成する複数の分割範囲の複数の境界とも言える。そして、複数の色変換レンジは、上記複数の境界をそれぞれ含む複数の境界領域とも言える。
As described above, when the pattern A is selected, the correspondence in which the conversion color is associated with the absolute luminance is used, and the color conversion processing based on the absolute luminance is performed. Thereby, the absolute luminance (distribution of the absolute luminance) of the input image data can be suitably displayed in color. As a result, the user can easily grasp the absolute luminance of the input image data by color. For example, FIG.
, (B), the absolute luminance at the center of the color conversion range is a sharp absolute luminance (100 cd / m 2 , 200 cd / m 2 , 400 cd / m 2 , 1000 cd / m 2 , 2000 cd / m 2 , 4000 cd / m 2 , etc.). Therefore, it is possible to preferably display sharp absolute brightness in color. As a result, the user can easily grasp the sharp absolute brightness by color. 100cd / m 2, 200cd / m 2, 400cd / m 2, 1000cd / m 2, 2000cd / m 2 and,, 4000 cd / m 2, a plurality of division areas constituting the range of absolute luminance may take the input image data Can be called multiple boundaries. The plurality of color conversion ranges can be said to be a plurality of boundary regions each including the plurality of boundaries.

また、図4(A),4(B)の対応関係では複数の色変換レンジが互いに離れており、色変換レンジに属する絶対輝度の分布が等高線のような態様で表示される。それにより、非色変換レンジの画像領域について、ユーザは、処理画像(処理画像データによって表された画像)を確認することができる。即ち、ユーザは、輝度分布の確認と処理画像の確認とを同時に行うことができる。   In the correspondence shown in FIGS. 4A and 4B, a plurality of color conversion ranges are separated from each other, and the distribution of absolute luminance belonging to the color conversion range is displayed in a form like a contour line. This allows the user to check the processed image (the image represented by the processed image data) for the image area in the non-color conversion range. That is, the user can simultaneously check the luminance distribution and the processed image.

また、非指定表示レンジには、複数の色変換レンジにそれぞれ対応する複数の変換色とは異なる変換色が対応付けられている。そのため、非指定表示レンジの画像領域は、色変換レンジの画像領域とは異なる色で表示される。それにより、ユーザは、非指定表示レンジの画像領域と色変換レンジの画像領域とを容易に区別して把握することができる。   Further, a conversion color different from the plurality of conversion colors respectively corresponding to the plurality of color conversion ranges is associated with the non-designated display range. Therefore, the image area in the non-designated display range is displayed in a different color from the image area in the color conversion range. Thereby, the user can easily distinguish and grasp the image area of the non-designated display range and the image area of the color conversion range.

なお、非指定表示レンジにおいて、絶対輝度(輝度関連値)の連続的な変化に応じて変換色の輝度が連続的に変化してもよい。そのようにすれば、非指定表示レンジに属する絶対輝度を有する画素の色は、色変換処理により、絶対輝度の連続的な変化に応じて輝度が連続的に変化する色に変換される。その結果、非指定表示レンジの画像領域では、変換色での表示として、絶対輝度の連続的な変化に応じて変換色の輝度が連続的に変化するグラデーション表示が行われる。上記グラデーション表示によれば、ユーザは、非指定表示レンジの画像領域における絶対輝度の分布を容易に把握することができる。   In the non-designated display range, the luminance of the converted color may change continuously according to the continuous change of the absolute luminance (luminance-related value). By doing so, the color of the pixel having the absolute luminance belonging to the non-designated display range is converted by the color conversion processing into a color whose luminance changes continuously according to the continuous change of the absolute luminance. As a result, in the image area of the non-designated display range, gradation display in which the luminance of the conversion color continuously changes according to the continuous change of the absolute luminance is performed as the display in the conversion color. According to the gradation display, the user can easily grasp the distribution of the absolute luminance in the image area of the non-designated display range.

なお、図4(A),4(B)の色変換レンジは10cd/m分の幅を有するが、色変換レンジの位置、色変換レンジの幅、色変換レンジの数、等は特に限定されない。また、色変換レンジ、非指定表示レンジ、等に対応付けられる色も特に限定されない。但し、他の色変換処理で使用されない色が変換色として使用されることが好ましい。 Although the color conversion ranges in FIGS. 4A and 4B have a width of 10 cd / m 2 , the position of the color conversion range, the width of the color conversion range, the number of the color conversion ranges, and the like are particularly limited. Not done. In addition, colors associated with the color conversion range, the non-designated display range, and the like are not particularly limited. However, it is preferable that a color not used in other color conversion processing is used as a conversion color.

なお、色変換レンジに属する絶対輝度を有する画素が入力画像データに含まれていない場合には、当該色変換レンジに対応する変換色への変換は行われない。そのため、複数の色変換レンジのそれぞれについて、入力画像データにおいて、色変換レンジに属する輝度関連値を有する画素の数が所定数以上となるように、色変換パラメータ生成部107が、複数の色変換レンジを決定することが好ましい。例えば、色変換パラメータ生成部107が、色変換レンジに属する輝度関連値を有する画素の数が所定数以上となるように、色変換レンジの中心、色変換レンジの幅、等の少なくともいずれかを初期値から調整することが好ましい。   If a pixel having an absolute luminance belonging to the color conversion range is not included in the input image data, the conversion to the conversion color corresponding to the color conversion range is not performed. Therefore, for each of the plurality of color conversion ranges, the color conversion parameter generation unit 107 performs the plurality of color conversions so that the number of pixels having a luminance-related value belonging to the color conversion range is equal to or greater than a predetermined number. Preferably, the range is determined. For example, the color conversion parameter generation unit 107 determines at least one of the center of the color conversion range, the width of the color conversion range, and the like so that the number of pixels having a luminance-related value belonging to the color conversion range is equal to or greater than a predetermined number. It is preferable to adjust from the initial value.

また、変換色が等しく、且つ、各々のサイズが所定サイズ以下である複数の画像領域が、ノイズのように点在することがある(図5(A))。そのため、点在する複数の画像領域を繋ぐ線状の画像領域の色が複数の画像領域の変換色と同じ色となるように、色変換処理部103が複数の画像領域の間の画像領域の色をさらに変換することが好ましい(図5(B))。図5(A)において、点在する複数の画素301は、色変換処理によって同じ色に変換された複数の画素である。複数の画素301の間の画素の色がさらに変換されることにより、ノイズのような表示を抑制することができ、画素301と同じ色の画像領域として、図5(B)の線状領域(線状の画像領域)302を表示することができる。なお
、所定サイズは1画素分のサイズであってもよいし、複数画素分のサイズであってもよい。
In addition, a plurality of image areas having the same converted color and each having a size equal to or smaller than a predetermined size may be scattered like noise (FIG. 5A). Therefore, the color conversion processing unit 103 converts the image area between the plurality of image areas so that the color of the linear image area connecting the plurality of scattered image areas becomes the same color as the conversion color of the plurality of image areas. It is preferable to further convert the color (FIG. 5B). In FIG. 5A, a plurality of scattered pixels 301 are a plurality of pixels that have been converted into the same color by the color conversion processing. By further converting the color of the pixel between the plurality of pixels 301, display such as noise can be suppressed, and as an image region of the same color as the pixel 301, the linear region (FIG. 5B) (A linear image area) 302 can be displayed. The predetermined size may be a size for one pixel or a size for a plurality of pixels.

「パターンB」が選択された場合には、色変換パラメータ生成部107は、指定表示レンジ(指定表示レンジに属する複数の相対輝度の最大輝度)に応じて、図6(A),6(B)に示すような対応関係を決定する。   When “pattern B” is selected, the color conversion parameter generation unit 107 determines whether the color conversion parameter generation unit 107 is in accordance with the designated display range (the maximum luminance of a plurality of relative luminances belonging to the designated display range). ) Is determined.

図6(A)は、指定表示レンジに属する複数の相対輝度の最大輝度が1600%である場合の例を示す。Logでは、0〜1600%の相対輝度が定義されている。即ち、図6(A)の例では、指定表示レンジは、Logで定義された0〜1600%の全ての相対輝度を含む。   FIG. 6A shows an example in which the maximum luminance of a plurality of relative luminances belonging to the designated display range is 1600%. In the Log, a relative luminance of 0 to 1600% is defined. That is, in the example of FIG. 6A, the designated display range includes all the relative luminances of 0 to 1600% defined by Log.

図6(A)の対応関係では、相対輝度の複数のレンジ(色変換レンジ)に複数の変換色がそれぞれ対応付けられている。例えば、0〜100%の相対輝度が属する色変換レンジには、モノクロ色が対応付けられている。換言すれば、100%以下(閾値以下)の相対輝度のレンジには、モノクロ色が対応付けられている。そして、400〜800%の相対輝度が属する色変換レンジには、緑色が対応付けられている。   In the correspondence shown in FIG. 6A, a plurality of conversion colors are respectively associated with a plurality of ranges (color conversion ranges) of relative luminance. For example, a monochrome color is associated with a color conversion range to which a relative luminance of 0 to 100% belongs. In other words, a monochrome color is associated with a range of relative luminance of 100% or less (below a threshold). Green is associated with the color conversion range to which the relative luminance of 400 to 800% belongs.

図6(B)は、指定表示レンジに属する複数の相対輝度の最大輝度が400%である場合の例を示す。即ち、図6(B)の例では、指定表示レンジは、0〜400%の相対輝度を含み、400%よりも高い相対輝度を含まない。図6(B)の対応関係では、非指定表示レンジに、複数の色変換レンジにそれぞれ対応する複数の変換色とは異なる変換色が対応付けられている。具体的には、非指定表示レンジに、赤色が対応付けられている。そのため、非指定表示レンジに属する絶対輝度を有する画素の色は、色変換処理により、赤色に変換される。図6(B)の例では、非指定表示レンジは、400%(指定表示レンジに属する複数の相対輝度の最大輝度)よりも高い相対輝度のレンジである。   FIG. 6B shows an example in which the maximum luminance of a plurality of relative luminances belonging to the designated display range is 400%. That is, in the example of FIG. 6B, the designated display range includes a relative luminance of 0 to 400% and does not include a relative luminance higher than 400%. In the correspondence shown in FIG. 6B, a conversion color different from the plurality of conversion colors respectively corresponding to the plurality of color conversion ranges is associated with the non-designated display range. Specifically, a red color is associated with the non-designated display range. Therefore, the color of the pixel having the absolute luminance belonging to the non-designated display range is converted to red by the color conversion processing. In the example of FIG. 6B, the non-designated display range is a range of relative luminance higher than 400% (maximum luminance of a plurality of relative luminances belonging to the designated display range).

パターンAが選択された場合には、図4(A),4(B)に示すように、色変換レンジの位置(中心)は、指定表示レンジに依存せずに、固定である。そして、色変換レンジの数は、指定表示レンジに応じて変化する。一方で、指定表示レンジに依存して相対輝度の色が変化しても、ユーザは、相対輝度を容易に把握することができる。そのため、パターンBが選択された場合には、図6(A),6(B)に示すように、色変換パラメータ生成部107は、指定表示レンジ(指定表示レンジに属する複数の相対輝度の最大輝度)に応じて、少なくとも色変換レンジの位置を変更する。図6(A),6(B)の例では、複数の色変換レンジの数、複数の色変換レンジと複数の変換色との関係、等が維持されるように、指定表示レンジに応じて、色変換レンジの位置と色変換レンジの幅とが変更される。即ち、図6(A),6(B)の例では、指定表示レンジに応じて、複数の色変換レンジが全体的に圧縮されたり伸張されたりする。   When the pattern A is selected, as shown in FIGS. 4A and 4B, the position (center) of the color conversion range is fixed without depending on the designated display range. Then, the number of color conversion ranges changes according to the designated display range. On the other hand, even if the color of the relative luminance changes depending on the designated display range, the user can easily grasp the relative luminance. Therefore, when the pattern B is selected, as shown in FIGS. 6A and 6B, the color conversion parameter generation unit 107 sets the designated display range (the maximum of a plurality of relative luminances belonging to the designated display range). At least the position of the color conversion range is changed according to the luminance. 6A and 6B, the number of the plurality of color conversion ranges, the relationship between the plurality of color conversion ranges and the plurality of conversion colors, and the like are maintained according to the designated display range. , The position of the color conversion range and the width of the color conversion range are changed. That is, in the examples of FIGS. 6A and 6B, a plurality of color conversion ranges are compressed or expanded as a whole according to the designated display range.

このように、パターンBが選択された場合には、相対輝度に変換色が対応付けられた対応関係が使用され、相対輝度に基づく色変換処理が行われる。それにより、入力画像データの相対輝度(相対輝度の分布)を色で好適に表示することができる。その結果、ユーザは、入力画像データの相対輝度を色で容易に把握することができる。本実施形態では、複数の色変換レンジの数、複数の色変換レンジと複数の色との関係、等が維持されるため、相対輝度をより好適に表示することができ、ユーザは相対輝度をより好適に把握することができる。また、非指定表示レンジの画像領域では、色変換レンジの画像領域とは異なる色の表示が行われる。それにより、ユーザは、非指定表示レンジの画像領域と色変換レンジの画像領域とを容易に区別して把握することができる。   In this manner, when the pattern B is selected, the correspondence in which the conversion color is associated with the relative luminance is used, and the color conversion processing based on the relative luminance is performed. Thereby, the relative luminance (distribution of the relative luminance) of the input image data can be suitably displayed in color. As a result, the user can easily grasp the relative luminance of the input image data by color. In the present embodiment, since the number of the plurality of color conversion ranges, the relationship between the plurality of color conversion ranges and the plurality of colors, and the like are maintained, the relative luminance can be more appropriately displayed, and the user can reduce the relative luminance. It can be grasped more suitably. In the image area of the non-designated display range, a different color is displayed than in the image area of the color conversion range. Thereby, the user can easily distinguish and grasp the image area of the non-designated display range and the image area of the color conversion range.

なお、レンジ(色変換レンジと非指定表示レンジの少なくとも一方)において、相対輝
度(輝度関連値)の連続的な変化に応じて変換色の輝度が連続的に変化してもよい。そのようにすれば、上記レンジの画像領域において、変換色での表示として、相対輝度の連続的な変化に応じて変換色の輝度が連続的に変化するグラデーション表示を行うことができる。その結果、ユーザは、上記レンジの画像領域における相対輝度の分布を容易に把握することができる。
Note that, in the range (at least one of the color conversion range and the non-designated display range), the luminance of the converted color may change continuously according to the continuous change of the relative luminance (luminance-related value). By doing so, a gradation display in which the luminance of the converted color continuously changes according to the continuous change of the relative luminance can be performed as the display of the converted color in the image area of the range. As a result, the user can easily grasp the distribution of the relative luminance in the image area of the range.

「パターンC」が選択された場合には、色変換パラメータ生成部107は、図8に示すような対応関係を決定する。図8の対応関係では、輝度階調値の複数のレンジ(色変換レンジ)に複数の変換色がそれぞれ対応付けられている。例えば、0〜171の輝度階調値が属する色変換レンジには、モノクロ色が対応付けられている。そして、512〜683の輝度階調値が属する色変換レンジには、緑色が対応付けられている。   When “pattern C” is selected, the color conversion parameter generation unit 107 determines the correspondence as shown in FIG. In the correspondence shown in FIG. 8, a plurality of conversion colors are respectively associated with a plurality of ranges (color conversion ranges) of luminance gradation values. For example, a monochrome color is associated with a color conversion range to which a luminance gradation value of 0 to 171 belongs. Green is associated with the color conversion range to which the luminance gradation values of 512 to 683 belong.

このように、パターンCが選択された場合には、輝度階調値に変換色が対応付けられた対応関係が使用され、輝度階調値に基づく色変換処理が行われる。それにより、入力画像データの輝度階調値(輝度階調値の分布)を色で好適に表示することができる。その結果、ユーザは、入力画像データの輝度階調値を色で容易に把握することができる。   As described above, when the pattern C is selected, the correspondence in which the conversion color is associated with the luminance gradation value is used, and the color conversion processing based on the luminance gradation value is performed. Thereby, the luminance gradation value (distribution of the luminance gradation value) of the input image data can be suitably displayed in color. As a result, the user can easily grasp the luminance gradation value of the input image data by color.

なお、レンジ(色変換レンジなど)において、輝度階調値(輝度関連値)の連続的な変化に応じて変換色の輝度が連続的に変化してもよい。そのようにすれば、上記レンジの画像領域において、変換色での表示として、輝度階調値の連続的な変化に応じて変換色の輝度が連続的に変化するグラデーション表示を行うことができる。その結果、ユーザは、上記レンジの画像領域における相対輝度の分布を容易に把握することができる。   Note that, in a range (such as a color conversion range), the luminance of the converted color may change continuously according to a continuous change in the luminance gradation value (luminance-related value). By doing so, a gradation display in which the luminance of the converted color continuously changes according to the continuous change of the luminance gradation value can be performed as the display of the converted color in the image area of the above range. As a result, the user can easily grasp the distribution of the relative luminance in the image area of the range.

なお、図6(A),6(B),8の対応関係では、非色変換レンジが設定されておらず、連続する複数の色変換レンジが設定されているが、これに限られない。例えば、入力画像データの階調特性がガンマ2.2である場合と、入力画像データの階調特性がLogである場合との少なくとも一方において、互いに離れた複数の色変換レンジが設定されてもよい。また、入力画像データの階調特性がST2084である場合において、連続する複数の色変換レンジが設定されてもよい。   6A, 6B, and 8, a non-color conversion range is not set and a plurality of continuous color conversion ranges are set, but the present invention is not limited to this. For example, a plurality of color conversion ranges separated from each other are set in at least one of the case where the gradation characteristic of the input image data is gamma 2.2 and the case where the gradation characteristic of the input image data is Log. Good. Further, when the gradation characteristic of the input image data is ST2084, a plurality of continuous color conversion ranges may be set.

また、入力画像データの階調特性がガンマ2.2である場合において、指定表示レンジ(指定表示レンジに属する複数の輝度階調値の最大値)が決定されてもよい。そして、非指定表示レンジに、複数の色変換レンジにそれぞれ対応する複数の変換色とは異なる変換色が対応付けられてもよい。非指定表示レンジにおいて、輝度階調値の連続的な変化に応じて変換色の輝度が連続的に変化してもよい。入力画像データの階調特性がガンマ2.2である場合と、入力画像データの階調特性がST2084である場合との少なくとも一方において、色変換レンジの位置、色変換レンジの幅、等が指定表示レンジに依存してもよい。入力画像データの階調特性がガンマ2.2である場合と、入力画像データの階調特性がLogである場合との少なくとも一方において、色変換レンジの位置、色変換レンジの幅、等が指定表示レンジに依存しなくてもよい。入力画像データの階調特性がガンマ2.2である場合と、入力画像データの階調特性がLogである場合との少なくとも一方において、色変換レンジの数などが指定表示レンジに依存してもよい。   Further, when the gradation characteristic of the input image data is gamma 2.2, the designated display range (the maximum value of a plurality of luminance gradation values belonging to the designated display range) may be determined. Then, a conversion color different from the plurality of conversion colors respectively corresponding to the plurality of color conversion ranges may be associated with the non-designated display range. In the non-designated display range, the luminance of the converted color may continuously change according to the continuous change of the luminance gradation value. In at least one of the case where the gradation characteristic of the input image data is gamma 2.2 and the case where the gradation characteristic of the input image data is ST2084, the position of the color conversion range, the width of the color conversion range, and the like are designated. It may depend on the display range. In at least one of the case where the gradation characteristic of the input image data is gamma 2.2 and the case where the gradation characteristic of the input image data is Log, the position of the color conversion range, the width of the color conversion range, and the like are specified. It does not have to depend on the display range. In at least one of the case where the gradation characteristic of the input image data is gamma 2.2 and the case where the gradation characteristic of the input image data is Log, even if the number of color conversion ranges depends on the designated display range. Good.

また、非色変換レンジとして、閾値よりも低い輝度関連値のレンジが設定されてもよい。例えば、入力画像データの階調特性がST2084である場合と、入力画像データの階調特性がLogである場合との少なくとも一方において、SDRに対応するレンジが非色変換レンジとして設定されてもよい。具体的には、入力画像データの階調特性がST2084である場合において、0〜100cd/mの絶対輝度のレンジが、SDRに対応する非色変換レンジとして設定されてもよい。入力画像データの階調特性がLogである場合において、0〜100%の相対輝度のレンジが、SDRに対応する非色変換レンジとし
て設定されてもよい。
Further, a range of a luminance-related value lower than the threshold may be set as the non-color conversion range. For example, the range corresponding to SDR may be set as the non-color conversion range in at least one of the case where the gradation characteristic of the input image data is ST2084 and the case where the gradation characteristic of the input image data is Log. . Specifically, when the gradation characteristic of the input image data is ST2084, the range of the absolute luminance of 0 to 100 cd / m 2 may be set as the non-color conversion range corresponding to SDR. When the gradation characteristic of the input image data is Log, a range of 0-100% relative luminance may be set as a non-color conversion range corresponding to SDR.

また、色変換パラメータ生成部107は、表示装置100(画像処理装置)に対するユーザ操作に応じて、非色変換レンジを決定してもよい。例えば、色変換パラメータ生成部107は、ユーザ操作に応じて上記閾値を決定してもよい(第2閾値決定処理)。非色変換レンジ、閾値、等を決定するためのユーザ操作は、例えば、輝度関連値を指定するユーザ操作である。輝度関連値を指定する指定するユーザ操作において、輝度関連値の種類は特に限定されない。例えば、入力画像データの階調特性によらず、輝度階調値を指定するユーザ操作が、非色変換レンジ、閾値、等を決定するための上記ユーザ操作として行われてもよい。但し、利便性などの観点から、入力画像データの階調特性に応じた種類の輝度階調値を指定するユーザ操作が、非色変換レンジ、閾値、等を決定するための上記ユーザ操作として行われることが好ましい。   Further, the color conversion parameter generation unit 107 may determine a non-color conversion range according to a user operation on the display device 100 (image processing device). For example, the color conversion parameter generation unit 107 may determine the threshold value according to a user operation (second threshold value determination processing). The user operation for determining the non-color conversion range, the threshold, and the like is, for example, a user operation for specifying a luminance-related value. In the user operation of designating the luminance-related value, the type of the luminance-related value is not particularly limited. For example, irrespective of the gradation characteristics of the input image data, a user operation for specifying a luminance gradation value may be performed as the user operation for determining a non-color conversion range, a threshold, and the like. However, from the viewpoint of convenience or the like, a user operation for specifying a luminance gradation value of a type corresponding to the gradation characteristics of input image data is performed as the above-mentioned user operation for determining a non-color conversion range, a threshold, and the like. Preferably.

図7(A)〜7(C)は、パターンAの対応関係の他の例を示す。図7(A)の例では、指定表示レンジは、ST2084で定義された0〜10000cd/mの全ての絶対輝度を含む。図7(A)の対応関係では、絶対輝度の複数のレンジ(色変換レンジ)に複数の変換色がそれぞれ対応付けられている。図7(A)の対応関係では、絶対輝度の連続的な変化に応じて輝度が連続的に変化する変換色が、色変換レンジに対応付けられている。例えば、0〜100cd/mの絶対輝度が属する色変換レンジには、絶対輝度の連続的な変化に応じて輝度が連続的に変化するモノクロ色が対応付けられている。そして、400〜1000cd/mの絶対輝度が属する色変換レンジには、絶対輝度の連続的な変化に応じて輝度が連続的に変化する緑色が対応付けられている。そのため、色変換レンジの画像領域において、変換色での表示として、絶対輝度の連続的な変化に応じて変換色の輝度が連続的に変化するグラデーション表示が行われる。 7A to 7C show another example of the correspondence relationship of the pattern A. FIG. In the example of FIG. 7A, the designated display range includes all the absolute luminances of 0 to 10000 cd / m 2 defined in ST2084. In the correspondence shown in FIG. 7A, a plurality of conversion colors are respectively associated with a plurality of ranges (color conversion ranges) of the absolute luminance. In the correspondence shown in FIG. 7A, a conversion color whose luminance changes continuously according to a continuous change of the absolute luminance is associated with a color conversion range. For example, the color conversion range to which the absolute luminance of 0 to 100 cd / m 2 belongs is associated with a monochrome color whose luminance changes continuously according to the continuous change of the absolute luminance. The color conversion range to which the absolute luminance of 400 to 1000 cd / m 2 belongs is associated with a green color whose luminance changes continuously according to the continuous change of the absolute luminance. For this reason, in the image area of the color conversion range, as the display of the converted color, a gradation display in which the luminance of the converted color continuously changes according to the continuous change of the absolute luminance is performed.

図7(B)の例では、指定表示レンジは、0〜1500cd/mの絶対輝度を含み、1500cd/mよりも高い絶対輝度を含まない。そして、非指定表示レンジは、1500cd/mよりも高い絶対輝度のレンジである。図7(B)の対応関係では、指定表示レンジに対して、図7(A)と同じ設定(色変換レンジ、色変換レンジと変換色の対応付け)がされている。即ち、色変換レンジの位置は、指定表示レンジに依存せずに、固定であり、色変換レンジの数は、指定表示レンジに応じて変化する。非指定表示レンジには、複数の色変換レンジにそれぞれ対応する複数の変換色とは異なる変換色が対応付けられている。非指定表示レンジにも、絶対輝度の連続的な変化に応じて輝度が連続的に変化する変換色が対応付けられている。具体的には、非指定表示レンジに、絶対輝度の連続的な変化に応じて輝度が連続的に変化する赤色が対応付けられている。 In the example of FIG. 7 (B), the specified display range includes the absolute luminance of 0~1500cd / m 2, it does not include a high absolute luminance than 1500 cd / m 2. The non-designated display range is a range having an absolute luminance higher than 1500 cd / m 2 . In the correspondence shown in FIG. 7B, the same setting (color conversion range, correspondence between the color conversion range and the converted color) is made for the designated display range as in FIG. 7A. That is, the position of the color conversion range is fixed without depending on the designated display range, and the number of the color conversion ranges changes according to the designated display range. Conversion colors different from the plurality of conversion colors respectively corresponding to the plurality of color conversion ranges are associated with the non-designated display range. The non-designated display range is also associated with a conversion color whose luminance continuously changes according to a continuous change of the absolute luminance. More specifically, the non-designated display range is associated with a red color whose luminance continuously changes according to a continuous change of the absolute luminance.

図7(C)の例では、0〜100cd/mの絶対輝度のレンジが、SDRに対応する非色変換レンジとして設定されている。それ以外は、図7(B)と同じである。つまり、色変換レンジの位置は、閾値よりも低い輝度関連値のレンジである非色変換レンジに依存せずに、固定であり、色変換レンジの数は、当該非色変換レンジに応じて変化する。 In the example of FIG. 7C, the range of the absolute luminance of 0 to 100 cd / m 2 is set as the non-color conversion range corresponding to SDR. Otherwise, it is the same as FIG. 7 (B). In other words, the position of the color conversion range is fixed without depending on the non-color conversion range which is a range of the luminance-related value lower than the threshold, and the number of the color conversion ranges changes according to the non-color conversion range. I do.

なお、図7(A)〜7(C)の絶対輝度の代わりに相対輝度を用いた対応関係が、パターンBの対応関係として使用されてもよい。図7(A)〜7(C)の絶対輝度の代わりに輝度階調値を用いた対応関係が、パターンCの対応関係として使用されてもよい。   Note that the correspondence using the relative luminance instead of the absolute luminance in FIGS. 7A to 7C may be used as the correspondence of the pattern B. 7A to 7C may be used as the correspondence of the pattern C instead of using the absolute luminance in FIG.

以上述べたように、本実施形態によれば、輝度関連値と変換色の対応関係として、入力画像データの階調特性に応じた対応関係が使用される。それにより、入力画像データの輝度分布をより好適に表示することが可能となる。   As described above, according to the present embodiment, as the correspondence between the luminance-related value and the converted color, the correspondence corresponding to the gradation characteristics of the input image data is used. This makes it possible to more appropriately display the luminance distribution of the input image data.

なお、上述した実施形態の各機能部は、個別のハードウェアであってもよいし、そうで
なくてもよい。2つ以上の機能部の機能が、共通のハードウェアによって実現されてもよい。1つの機能部の複数の機能のそれぞれが、個別のハードウェアによって実現されてもよい。1つの機能部の2つ以上の機能が、共通のハードウェアによって実現されてもよい。また、各機能部は、ハードウェアによって実現されてもよいし、そうでなくてもよい。例えば、装置が、プロセッサと、制御プログラムが格納されたメモリとを有していてもよい。そして、装置が有する少なくとも一部の機能部の機能が、プロセッサがメモリから制御プログラムを読み出して実行することにより実現されてもよい。
Note that each functional unit in the above-described embodiment may be individual hardware or may not be. The functions of two or more functional units may be realized by common hardware. Each of a plurality of functions of one functional unit may be realized by individual hardware. Two or more functions of one functional unit may be realized by common hardware. Further, each functional unit may or may not be realized by hardware. For example, the device may have a processor and a memory in which a control program is stored. Then, the functions of at least some of the functional units of the device may be realized by the processor reading out the control program from the memory and executing the control program.

なお、上述した実施形態はあくまで一例であり、本発明の要旨の範囲内で実施形態の構成を適宜変形したり変更したりすることにより得られる構成も、本発明に含まれる。   The above-described embodiment is merely an example, and the present invention includes a configuration obtained by appropriately modifying or changing the configuration of the embodiment within the scope of the present invention.

<その他の実施形態>
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
<Other embodiments>
The present invention supplies a program for realizing one or more functions of the above-described embodiments to a system or an apparatus via a network or a storage medium, and one or more processors in a computer of the system or the apparatus read and execute the program. This process can be realized. Further, it can be realized by a circuit (for example, an ASIC) that realizes one or more functions.

103:色変換処理部 107:色変換パラメータ生成部   103: color conversion processing unit 107: color conversion parameter generation unit

Claims (29)

輝度レベルと色との対応関係を示す情報に基づいて入力画像データの色を変換して、変換画像データを生成する変換手段と、
前記入力画像データの階調特性を設定する設定手段と、
を備え、
前記変換手段は、
前記設定手段が設定した階調特性が、第1のダイナミックレンジに対応する第1の階調特性である場合、前記入力画像データの階調値を前記輝度レベルとして用いた第1の対応関係を示す情報に基づいて、前記入力画像データの色を変換し、
前記設定手段が設定した階調特性が、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジに対応し且つ前記入力画像データの階調値に絶対輝度を対応付けた第2の階調特性である場合、前記入力画像データの階調値に対応付けられた前記絶対輝度を前記輝度レベルとして用いた第2の対応関係を示す情報に基づいて、前記入力画像データの色を変換し、
前記設定手段が設定した階調特性が、前記第1のダイナミックレンジよりも広い第3のダイナミックレンジに対応し且つ前記入力画像データの階調値に相対輝度を対応付けた第3の階調特性である場合、前記入力画像データの階調値に対応付けられた前記相対輝度を前記輝度レベルとして用いた第3の対応関係を示す情報に基づいて、前記入力画像データの色を変換する
ことを特徴とする画像処理装置。
Conversion means for converting the color of the input image data based on information indicating the correspondence between the luminance level and the color to generate converted image data;
Setting means for setting tone characteristics of the input image data;
With
The conversion means,
When the gradation characteristic set by the setting unit is a first gradation characteristic corresponding to a first dynamic range, a first correspondence using a gradation value of the input image data as the luminance level is set. Based on the information shown, convert the color of the input image data,
A second gradation characteristic in which the gradation characteristic set by the setting means corresponds to a second dynamic range wider than the first dynamic range, and the absolute value is associated with a gradation value of the input image data. In the case of, the color of the input image data is converted based on information indicating a second correspondence relationship using the absolute luminance associated with the gradation value of the input image data as the luminance level,
A third gradation characteristic in which the gradation characteristic set by the setting means corresponds to a third dynamic range wider than the first dynamic range, and a relative luminance is associated with a gradation value of the input image data; In the case of, converting the color of the input image data based on information indicating a third correspondence using the relative luminance associated with the gradation value of the input image data as the luminance level. Characteristic image processing device.
前記設定手段は、ユーザが入力した指示に応じて、階調特性を設定する
ことを特徴とする請求項1に記載の画像処理装置。
The image processing apparatus according to claim 1, wherein the setting unit sets a gradation characteristic according to an instruction input by a user.
前記設定手段は、前記入力画像データに付加されたメタデータに基づいて、階調特性を設定する
ことを特徴とする請求項1に記載の画像処理装置。
The image processing apparatus according to claim 1, wherein the setting unit sets a gradation characteristic based on metadata added to the input image data.
前記対応関係を示す情報は、輝度レベルの複数の範囲のそれぞれに対して、異なる色を対応付けた情報であって、
前記変換手段は、前記複数の範囲のそれぞれについて、前記入力画像データの、当該範囲の輝度レベルを有する部分の色を、前記対応関係を示す情報において当該範囲に対応付けられた色に変換する
ことを特徴とする請求項1〜3のいずれか1項に記載の画像処理装置。
The information indicating the correspondence is information in which different colors are associated with each of a plurality of ranges of luminance levels,
The conversion unit converts, for each of the plurality of ranges, a color of a portion of the input image data having a luminance level of the range into a color associated with the range in the information indicating the correspondence relationship. The image processing apparatus according to claim 1, wherein:
前記変換手段は、前記入力画像データのうち輝度レベルが第1閾値以下である領域を、モノクロに変換する
ことを特徴とする請求項1〜4のいずれか1項に記載の画像処理装置。
The image processing apparatus according to claim 1, wherein the conversion unit converts an area of the input image data whose luminance level is equal to or less than a first threshold to monochrome.
前記変換手段は、前記入力画像データのうち、輝度レベルが第2閾値よりも高い領域を、所定の色に変換し、
前記第2閾値は、前記第1閾値よりも高い
ことを特徴とする請求項5に記載の画像処理装置。
The conversion unit converts an area of the input image data whose luminance level is higher than a second threshold into a predetermined color,
The image processing apparatus according to claim 5, wherein the second threshold is higher than the first threshold.
前記第2閾値は、ユーザによって指定された輝度レベルである
ことを特徴とする請求項6に記載の画像処理装置。
The image processing apparatus according to claim 6, wherein the second threshold is a luminance level specified by a user.
前記変換手段は、前記入力画像データのうち、輝度レベルが第2閾値よりも高い領域を、所定の色に変換する
ことを特徴とする請求項1〜4のいずれか1項に記載の画像処理装置。
5. The image processing apparatus according to claim 1, wherein the conversion unit converts an area of the input image data whose luminance level is higher than a second threshold into a predetermined color. 6. apparatus.
前記第2閾値は、ユーザによって指定された輝度レベルである
ことを特徴とする請求項8に記載の画像処理装置。
The image processing apparatus according to claim 8, wherein the second threshold is a luminance level specified by a user.
前記設定された階調特性で、前記入力画像データを変換する階調変換手段をさらに備える
ことを特徴とする請求項1〜9のいずれか1項に記載の画像処理装置。
The image processing apparatus according to claim 1, further comprising: a gradation conversion unit configured to convert the input image data with the set gradation characteristics.
前記第1の対応関係を示す情報、前記第2の対応関係を示す情報、および前記第3の対応関係を示す情報のうち少なくとも1つは、前記入力画像データの取り得る輝度レベルの範囲を構成する複数の分割範囲のそれぞれに対して、異なる色を対応付けたものである
ことを特徴とする請求項1〜10のいずれか1項に記載の画像処理装置。
At least one of the information indicating the first correspondence, the information indicating the second correspondence, and the information indicating the third correspondence constitutes a range of possible brightness levels of the input image data. The image processing apparatus according to claim 1, wherein a different color is associated with each of the plurality of divided ranges.
前記第1の対応関係を示す情報、前記第2の対応関係を示す情報、および前記第3の対応関係を示す情報のうち少なくとも1つは、前記入力画像データの取り得る輝度レベルの範囲を構成する複数の分割範囲の複数の境界をそれぞれ含む複数の境界領域それぞれに対して、異なる色を対応付けたものである
ことを特徴とする請求項1〜10のいずれか1項に記載の画像処理装置。
At least one of the information indicating the first correspondence, the information indicating the second correspondence, and the information indicating the third correspondence constitutes a range of possible brightness levels of the input image data. The image processing according to any one of claims 1 to 10, wherein different colors are associated with a plurality of boundary areas each including a plurality of boundaries of the plurality of divided ranges. apparatus.
前記第2の階調特性は、ST.2084で規定されたPQ特性である
ことを特徴とする請求項1〜12のいずれか1項に記載の画像処理装置。
The second gradation characteristic is described in ST. The image processing apparatus according to claim 1, wherein the image processing apparatus has a PQ characteristic defined in 2084.
前記第3の階調特性は、ARIB STD−B67で規定されたHLG特性である
ことを特徴とする請求項1〜13のいずれか1項に記載の画像処理装置。
14. The image processing apparatus according to claim 1, wherein the third gradation characteristic is an HLG characteristic defined by ARIB STD-B67.
輝度レベルと色との対応関係を示す情報に基づいて入力画像データの色を変換して、変換画像データを生成する変換工程と、
前記入力画像データの階調特性を設定する設定工程と、
を有し、
前記変換工程では、
前記設定工程で設定した階調特性が、第1のダイナミックレンジに対応する第1の階調特性である場合、前記入力画像データの階調値を前記輝度レベルとして用いた第1の対応関係を示す情報に基づいて、前記入力画像データの色を変換し、
前記設定工程で設定した階調特性が、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジに対応し且つ前記入力画像データの階調値に絶対輝度を対応付けた第2の階調特性である場合、前記入力画像データの階調値に対応付けられた前記絶対輝度を前記輝度レベルとして用いた第2の対応関係を示す情報に基づいて、前記入力画像データの色を変換し、
前記設定工程で設定した階調特性が、前記第1のダイナミックレンジよりも広い第3のダイナミックレンジに対応し且つ前記入力画像データの階調値に相対輝度を対応付けた第3の階調特性である場合、前記入力画像データの階調値に対応付けられた前記相対輝度を前記輝度レベルとして用いた第3の対応関係を示す情報に基づいて、前記入力画像データの色を変換する
ことを特徴とする画像処理方法。
A conversion step of converting the color of the input image data based on information indicating the correspondence between the luminance level and the color to generate converted image data;
A setting step of setting a gradation characteristic of the input image data,
Has,
In the conversion step,
When the gradation characteristic set in the setting step is a first gradation characteristic corresponding to a first dynamic range, a first correspondence relationship using a gradation value of the input image data as the luminance level is set. Based on the information shown, convert the color of the input image data,
A second gradation characteristic in which the gradation characteristic set in the setting step corresponds to a second dynamic range wider than the first dynamic range, and the absolute luminance is associated with a gradation value of the input image data. In the case of, the color of the input image data is converted based on information indicating a second correspondence relationship using the absolute luminance associated with the gradation value of the input image data as the luminance level,
A third gradation characteristic in which the gradation characteristic set in the setting step corresponds to a third dynamic range wider than the first dynamic range, and a relative luminance is associated with a gradation value of the input image data. In the case of, converting the color of the input image data based on information indicating a third correspondence using the relative luminance associated with the gradation value of the input image data as the luminance level. Characteristic image processing method.
前記設定工程では、ユーザが入力した指示に応じて、階調特性を設定する
ことを特徴とする請求項15に記載の画像処理方法。
16. The image processing method according to claim 15, wherein, in the setting step, a gradation characteristic is set according to an instruction input by a user.
前記設定工程では、前記入力画像データに付加されたメタデータに基づいて、階調特性を設定する
ことを特徴とする請求項15に記載の画像処理方法。
16. The image processing method according to claim 15, wherein in the setting step, a gradation characteristic is set based on metadata added to the input image data.
前記対応関係を示す情報は、輝度レベルの複数の範囲のそれぞれに対して、異なる色を対応付けた情報であって、
前記変換工程では、前記複数の範囲のそれぞれについて、前記入力画像データの、当該範囲の輝度レベルを有する部分の色を、前記対応関係を示す情報において当該範囲に対応付けられた色に変換する
ことを特徴とする請求項15〜17のいずれか1項に記載の画像処理方法。
The information indicating the correspondence is information in which different colors are associated with each of a plurality of ranges of luminance levels,
In the conversion step, for each of the plurality of ranges, a color of a portion of the input image data having a luminance level of the range is converted into a color associated with the range in the information indicating the correspondence relationship. The image processing method according to any one of claims 15 to 17, wherein:
前記変換工程では、前記入力画像データのうち輝度レベルが第1閾値以下である領域を、モノクロに変換する
ことを特徴とする請求項15〜18のいずれか1項に記載の画像処理方法。
19. The image processing method according to claim 15, wherein, in the conversion step, an area of the input image data whose luminance level is equal to or less than a first threshold is converted to monochrome.
前記変換工程では、前記入力画像データのうち、輝度レベルが第2閾値よりも高い領域を、所定の色に変換し、
前記第2閾値は、前記第1閾値よりも高い
ことを特徴とする請求項19に記載の画像処理方法。
In the conversion step, of the input image data, a region whose luminance level is higher than a second threshold value is converted into a predetermined color,
The image processing method according to claim 19, wherein the second threshold is higher than the first threshold.
前記第2閾値は、ユーザによって指定された輝度レベルである
ことを特徴とする請求項20に記載の画像処理方法。
The image processing method according to claim 20, wherein the second threshold is a luminance level specified by a user.
前記変換工程では、前記入力画像データのうち、輝度レベルが第2閾値よりも高い領域を、所定の色に変換する
ことを特徴とする請求項15〜18のいずれか1項に記載の画像処理方法。
The image processing according to any one of claims 15 to 18, wherein in the conversion step, an area of the input image data having a luminance level higher than a second threshold is converted into a predetermined color. Method.
前記第2閾値は、ユーザによって指定された輝度レベルである
ことを特徴とする請求項22に記載の画像処理方法。
23. The image processing method according to claim 22, wherein the second threshold is a luminance level specified by a user.
前記設定された階調特性で、前記入力画像データを変換する階調変換工程をさらに有する
ことを特徴とする請求項15〜23のいずれか1項に記載の画像処理方法。
24. The image processing method according to claim 15, further comprising a gradation conversion step of converting the input image data with the set gradation characteristics.
前記第1の対応関係を示す情報、前記第2の対応関係を示す情報、および前記第3の対応関係を示す情報のうち少なくとも1つは、前記入力画像データの取り得る輝度レベルの範囲を構成する複数の分割範囲のそれぞれに対して、異なる色を対応付けたものである
ことを特徴とする請求項15〜24のいずれか1項に記載の画像処理方法。
At least one of the information indicating the first correspondence, the information indicating the second correspondence, and the information indicating the third correspondence constitutes a range of possible brightness levels of the input image data. 25. The image processing method according to claim 15, wherein different colors are associated with each of the plurality of divided ranges.
前記第1の対応関係を示す情報、前記第2の対応関係を示す情報、および前記第3の対応関係を示す情報のうち少なくとも1つは、前記入力画像データの取り得る輝度レベルの範囲を構成する複数の分割範囲の複数の境界をそれぞれ含む複数の境界領域それぞれに対して、異なる色を対応付けたものである
ことを特徴とする請求項15〜24のいずれか1項に記載の画像処理方法。
At least one of the information indicating the first correspondence, the information indicating the second correspondence, and the information indicating the third correspondence constitutes a range of possible brightness levels of the input image data. The image processing according to any one of claims 15 to 24, wherein a different color is associated with each of a plurality of boundary regions including a plurality of boundaries of the plurality of divided ranges. Method.
前記第2の階調特性は、ST.2084で規定されたPQ特性である
ことを特徴とする請求項15〜26のいずれか1項に記載の画像処理方法。
The second gradation characteristic is described in ST. The image processing method according to any one of claims 15 to 26, wherein the PQ characteristic is defined by 2084.
前記第3の階調特性は、ARIB STD−B67で規定されたHLG特性である
ことを特徴とする請求項15〜27のいずれか1項に記載の画像処理方法。
The image processing method according to any one of claims 15 to 27, wherein the third gradation characteristic is an HLG characteristic defined by ARIB STD-B67.
請求項15〜28のいずれか1項に記載の画像処理方法の各工程をコンピュータに実行させるためのプログラム。 A program for causing a computer to execute each step of the image processing method according to any one of claims 15 to 28.
JP2017228015A 2017-03-01 2017-11-28 Image processing apparatus and image processing method Active JP6659178B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
US15/903,310 US10542187B2 (en) 2017-03-01 2018-02-23 Image processing apparatus and image processing method
EP18159108.2A EP3370413A1 (en) 2017-03-01 2018-02-28 Image processing apparatus and image processing method
CN201810172210.7A CN108597474A (en) 2017-03-01 2018-03-01 Image processing equipment, image processing method and computer-readable medium
US16/731,191 US10944889B2 (en) 2017-03-01 2019-12-31 Image processing apparatus and image processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017038271 2017-03-01
JP2017038271 2017-03-01

Publications (2)

Publication Number Publication Date
JP2018146949A JP2018146949A (en) 2018-09-20
JP6659178B2 true JP6659178B2 (en) 2020-03-04

Family

ID=63590018

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017228015A Active JP6659178B2 (en) 2017-03-01 2017-11-28 Image processing apparatus and image processing method

Country Status (2)

Country Link
JP (1) JP6659178B2 (en)
CN (1) CN108597474A (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7341656B2 (en) * 2018-12-11 2023-09-11 キヤノン株式会社 Image processing device, control method, program, and storage medium
JP6808762B2 (en) * 2019-01-07 2021-01-06 キヤノン株式会社 Information processing device and information processing method
JP7373299B2 (en) * 2019-04-26 2023-11-02 キヤノン株式会社 Image processing device and its control method
CN114258564A (en) * 2019-07-16 2022-03-29 惠普发展公司, 有限责任合伙企业 Selecting color calibration profile data from display memory
JP7271490B2 (en) * 2020-12-07 2023-05-11 キヤノン株式会社 Information processing device and information processing method

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100457534B1 (en) * 2002-09-13 2004-11-17 삼성전자주식회사 Apparatus and method for adjusting brightness and color temperature
JP2004147229A (en) * 2002-10-25 2004-05-20 Sony Corp Image display controller, image display control method, color imaging apparatus and view finder
JP4387183B2 (en) * 2003-12-26 2009-12-16 京セラ株式会社 Digital camera
JP2006115249A (en) * 2004-10-15 2006-04-27 Pentax Corp Exposure device
WO2008064349A1 (en) * 2006-11-22 2008-05-29 Nik Software, Inc. Method for dynamic range editing
US8743291B2 (en) * 2011-04-12 2014-06-03 Dolby Laboratories Licensing Corporation Quality assessment for images that have extended dynamic ranges or wide color gamuts
EP2707868B1 (en) * 2011-05-10 2024-04-03 Koninklijke Philips N.V. High dynamic range image signal generation and processing
JP6420540B2 (en) * 2013-02-04 2018-11-07 キヤノン株式会社 Image processing apparatus, control method therefor, program, and storage medium
EP3145167B1 (en) * 2014-05-16 2020-04-01 Panasonic Intellectual Property Management Co., Ltd. Conversion method and conversion device
EP4089627A3 (en) * 2015-01-30 2022-12-28 InterDigital VC Holdings, Inc. A method and apparatus of encoding and decoding a color picture

Also Published As

Publication number Publication date
JP2018146949A (en) 2018-09-20
CN108597474A (en) 2018-09-28

Similar Documents

Publication Publication Date Title
JP6659178B2 (en) Image processing apparatus and image processing method
JP6700908B2 (en) Display device and display method
JP6614859B2 (en) Display device, display device control method, image processing device, program, and recording medium
JP5897159B2 (en) Display device and control method thereof
US10944889B2 (en) Image processing apparatus and image processing method
US11107439B2 (en) Image processing apparatus, method of controlling image processing apparatus, and storage medium
JP6700880B2 (en) Information processing apparatus and information processing method
TWI545963B (en) Gamut mapping method and the related device thereof
JP5387713B2 (en) Image adjustment apparatus, image adjustment system, and program
US10255883B2 (en) Image processing apparatus, method for controlling the same, display apparatus, and storage medium
US10504486B2 (en) Display apparatus and control method thereof
WO2017037997A1 (en) Display apparatus, method for controlling the same, program, and storage medium
US11574607B2 (en) Display device and control method of display device
US11508335B2 (en) Display apparatus and display method with brightness conversion
KR102533723B1 (en) Electric device and control method thereof
KR102301925B1 (en) Tone mapping method and display device using the same
JP6548516B2 (en) IMAGE DISPLAY DEVICE, IMAGE PROCESSING DEVICE, CONTROL METHOD OF IMAGE DISPLAY DEVICE, AND CONTROL METHOD OF IMAGE PROCESSING DEVICE
JP2018116256A (en) Display device and display method
US20190114994A1 (en) Image processing apparatus, image processing method, and non-transitory computer readable medium
JP6980833B2 (en) Display device and display method
US11869174B2 (en) Image processing apparatus, display apparatus, image processing method, and non-transitory computer readable medium
JP2019041363A (en) Display device and control method thereof, storage medium, program
JP2017125875A (en) Image display device and control method thereof
JP2021099420A (en) Display device
WO2018131357A1 (en) Display device and display method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180904

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181030

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20181116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190319

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190409

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190806

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190819

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200204

R151 Written notification of patent or utility model registration

Ref document number: 6659178

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151