JP7138935B2 - Hdr映像をsdr映像に変換するhdr広色域映像変換装置及びhdr広色域映像変換方法 - Google Patents
Hdr映像をsdr映像に変換するhdr広色域映像変換装置及びhdr広色域映像変換方法 Download PDFInfo
- Publication number
- JP7138935B2 JP7138935B2 JP2018197390A JP2018197390A JP7138935B2 JP 7138935 B2 JP7138935 B2 JP 7138935B2 JP 2018197390 A JP2018197390 A JP 2018197390A JP 2018197390 A JP2018197390 A JP 2018197390A JP 7138935 B2 JP7138935 B2 JP 7138935B2
- Authority
- JP
- Japan
- Prior art keywords
- hdr
- color gamut
- color
- processing
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 80
- 238000006243 chemical reaction Methods 0.000 title claims description 49
- 238000013507 mapping Methods 0.000 claims description 156
- 238000012545 processing Methods 0.000 claims description 125
- 210000003127 knee Anatomy 0.000 claims description 14
- 238000010586 diagram Methods 0.000 description 17
- 238000004364 calculation method Methods 0.000 description 11
- 239000003086 colorant Substances 0.000 description 7
- 238000004519 manufacturing process Methods 0.000 description 7
- 230000009466 transformation Effects 0.000 description 7
- 238000011156 evaluation Methods 0.000 description 5
- 238000012546 transfer Methods 0.000 description 4
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000004321 preservation Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 101000819111 Homo sapiens Trans-acting T-cell-specific transcription factor GATA-3 Proteins 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004737 colorimetric analysis Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000003623 enhancer Substances 0.000 description 1
- 102000050891 human GATA3 Human genes 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 238000011282 treatment Methods 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Processing Of Color Television Signals (AREA)
- Color Image Communication Systems (AREA)
Description
本実施形態では、ハイダイナミックレンジ(HDR)広色域映像を標準ダイナミックレンジ(SDR)狭色域映像へ変換するための色再現性を考慮した色域トーンマッピング処理を提案する。トーンマッピング処理の結果の輝度値Yと入力HDR画像におけるxy値に対して、色域マッピング処理を行う。色域マッピングはHDR拡張したhdr-CIELAB表色系に基づいたhdr-CIELUV表色系において、色相毎に明度を保存して、彩度に対してソフトクリップ処理をする。実際の計算は、3次元ルックアップテーブル(3DLUT)補間により行い、トーンマッピング処理によるガマット誤差を回避しつつ、入力HDR画像における色相を厳密に保持する色域マッピングを可能とする。
・トーンマッピング処理の結果の輝度値Yと入力HDR画像におけるxy値を入力とする色域マッピング処理において、入力画像における色域を斜交座標系により表現することから、入力xy値に忠実な色域マッピンク処理が可能となる。
・トーンマッピング処理の結果の輝度値Yと入力HDR画像におけるxy値を入力とする色域マッピング処理において、入力画像における色域を斜交座標系により表現することから、3DLUTを効率的に生成することが可能となる。
・トーンマッピング処理の結果の輝度値Yと入力HDR画像におけるxy値を入力とする色域マッピング処理において、3DLUT内部では、xyY値をHDR拡張したhdr-CIELUV表色系に変換し、明度L*を保存して、色差u*,v*を色相毎に彩度をソフトクリップ/ソフトニー処理するものとできる。
・RGB→xyY変換、および輝度値Yに対するトーンマッピング処理を行う。
・トーンマッピング処理結果の輝度値Yと、入力HDR画像におけるxy値を入力として、入力色域を斜交座標系で表現して、明度保存色域マッピング処理の予め計算した結果を格納する3次元ルックアップテーブルを用いて補間処理するものとできる。
・トーンマッピング処理結果の輝度値Yと、入力HDR画像におけるxy値の上位ビットを入力として、入力色域を斜交座標系で表現するための、明度保存色域マッピング処理結果を格納した3次元ルックアップテーブルを読み出すためのアドレス計算部(xy値に対する直交座標→斜交座標変換部)を備えるものとできる。
・明度保存色域マッピング処理結果を格納した3次元ルックアップテーブルの読み出し結果と、入力xyY値の下位ビット入力を用いて(xy値に関しては、斜交座標系に変換したx' y'値)、補間計算を行う補間計算部を備えるものとできる。
図1は、色域トーンマッピング処理概要を説明するブロック図である。図1に示すように、HDR広色域映像入力(BT.2020 HDR OETF YCbCr)の輝度色差YCbCrをRGBに変換する(YCbCr→RGB)。そして、光電気伝達関数(OETF)により、ダイナミックレンジを圧縮されているため、電気光伝達関数(EOTF)により、リニアRGB(Linear RGB)にレベル逆変換する。さらに、RGB表色系からXYZ表色系、そして、xyY表色系に変換した後、輝度値Yをトーンマッピング処理する(Tone Mapping)。トーンマッピング処理の結果、輝度値YはSDR変換される。色を表すxy値は直交座標から斜交座標へ変換する(Orthog→Obliq)。
(概要)
ハイダイナミックレンジ(HDR)広色域映像を標準ダイナミックレンジ(SDR)狭色域映像へ変換するために色再現性を考慮した色域トーンマッピング処理を行う。トーンマッピング(TM)処理の結果の輝度値Yと入力HDR画像におけるxy値に対して、色域マッピング処理を行う。色域マッピング処理では、均等色空間であるCIELUV表色系をHDR拡張したhdr-CIELUV表色系において、色相毎に明度を保存して、彩度に対してソフトクリップ処理する明度保存色域マッピング処理を3次元ルックアップテーブル(3DLUT)補間により計算する。色域トーンマッピング処理における色再現性と3DLUTサイズによる補間精度を評価する。
次世代テレビ放送としての4K/8K(スーパーハイビジョン[11])超高精細映像は、解像度だけではなく、広色域、高フレームレート、高ビット深度がITU-R勧告BT.2020(Recommendation ITU-R BT.2020-2, Parameter values for ultra-high definition television systems for production and international programme exchange (10/2015))として規定されている。映像の明るさを拡張するハイダイナミックレンジ(HDR)も、拡張された信号レベルを圧縮するための非線形の伝達関数がITU-R勧告BT.2100(Recommendation ITU-R BT.2100-1, Image parameter values for high dynamic range television for use in production and international programme exchange (06/2017))として規定された。
(2.1 CIELAB表色系)
XYZ表色系、xy色度図は測色の基礎として用いられているが[4],[3]、色空間内における距離と実際の色の変化が場所によって大きく異なっている。そこで、均等色空間として、CIEL*a*b*(CIELAB)表色系(日本工業規格JIS Z8781-4:2013, 測色-第4部:CIE1976 L*a*b*色空間,Colorimetry-Part4: CIE 1976 L*a*b* Colour space)が考えられた[15]。CIELAB表色系における2色の色差を知るには、2色の座標のユークリッド距離を求めればよい。XYZ表色系におけるXYZ値からCIELAB表色系におけるL*a*b*値への変換式は次のようになる[15]。
xy色度図に次のような平面射影変換を施すことにより、均等な色空間に近付ける。
FairchildとChenは、CIELAB表色系における非線形変換関数(4)をミカエリス-メンテン関数(Michaelis-Menten, M-M)と呼ばれるべき乗関数で近似することにより、HDR拡張した[2]。
HDR画像をSDR画像に変換するトーンマッピング処理として、本書面では、輝度値Yに対して、ReinhardグローバルTM処理[13],[14]を用いる。
色域マッピング(Gamut Mapping, GM)[3],[10]とは、より広い色域を持つ色空間における画素値を、より狭い色域の色空間の画素値へ変換する技術である。色域マッピングの要件としては、
・より狭い色域(ここでは、BT.709色空間)内部の色は変化しない
・空間的なディテールの損失、明るさやコントラストの変化、彩度の低下がない
・明度、彩度、色相の明らかな不連続性がない
・数学的に定義可能な変換である
すべての処理は、予め計算した結果を3DLUTに格納して、xyY入力値に応じて読み出した結果を四面体・立方体補間[6]することにより計算する。このとき、アフィン変換された座標系である「斜交座標系(oblique coordinate system)」[5]により、xy色度図における色域領域を表現することから、3DLUTを効率的に生成することが可能となる(付録C)。
図8は、hdr-CIELUV表色系における明度に対する色域限界彩度値の結果であり、上段からそれぞれ色相hが、0,90,180,270度の場合を示す。同図下段は、色相に対する最大彩度値のプロットである。明度に対する色域限界彩度値は、RGB表色系におけるRGB値がSDRの場合に[0,1]区間、HDRの場合に[0,12]区間に存在する様、二分探索により決定した[9]。
ハイダイナミックレンジ(HDR)広色域映像を標準ダイナミックレンジ(SDR)狭色域映像へ変換するために色再現性を考慮した色域トーンマッピング処理を行った。ReinhardグローバルTM処理の結果の輝度値Yと人力HDR画像におけるxy値に対して、色域マッピング処理を行った。色域マッピング処理では、均等色空間であるCIELUV表色系をHDR拡張したhdr-CIELUV表色系において、色相毎に明度を保存して、彩度に対してソフトクリップ処理する明度保存色域マッピング処理を3次元ルックアップテーブル(3DLUT)補間により計算した。色域トーンマッピング処理における色再現性と3DLUTサイズによる補間精度を評価した。
Claims (8)
- HDR映像をSDR映像に変換するHDR広色域映像変換装置において、
入力HDR画像におけるYxy表色系画像データの輝度値Yをトーンマッピング(TM)処理して輝度値Y’として出力するトーンマッピング処理部と、
前記トーンマッピング処理部から出力された輝度値Y’と前記入力HDR画像における色域xyを斜交座標系に変換したx’y’値と、を三次元ルックアップテーブル(3DLUT)を用いて、色域マッピング処理して、RGBデータとして出力する色域マッピング処理部と、を備える
ことを特徴とするHDR広色域映像変換装置。 - 請求項1に記載のHDR広色域映像変換装置において、
前記色域マッピング処理部は、前記3DLUTにおいて、前記入力HDR画像におけるYxy表色系画像データをHDR拡張したhdr-CIELAB表色系に基づいたhdr-CIELUV表色系に変換して、色相毎に、明度L*を維持して色差u*v*に対して彩度をソフトクリップ/ソフトニー処理をする明度保存色域マッピング処理を行う
ことを特徴とするHDR広色域映像変換装置。 - 請求項1または請求項2に記載のHDR広色域映像変換装置において、
前記色域マッピング処理部は、前記3DLUTを用いた補間処理をして前記TM処理に起因するガマット誤差を補正する
ことを特徴とするHDR広色域映像変換装置。 - 請求項1乃至請求項3のいずれか一項に記載のHDR広色域映像変換装置において、
前記トーンマッピング処理部は、画面全体に対して、一様なレベル変換を行うグローバルトーンマッピング(TM)処理を遂行する
ことを特徴とするHDR広色域映像変換装置。 - HDR映像をSDR映像に変換するHDR広色域映像変換方法において、
入力HDR画像におけるYxy表色系画像データの輝度値Yをトーンマッピング(TM)処理して輝度値Y’として出力するトーンマッピング処理工程と、
前記トーンマッピング処理工程で出力された輝度値Y’と前記入力HDR画像における色域xyを斜交座標系に変換したx’y’値と、を三次元ルックアップテーブル(3DLUT)を用いて、色域マッピング処理して、RGBデータとして出力する色域マッピング処理工程と、を有する
ことを特徴とするHDR広色域映像変換方法。 - 請求項5に記載のHDR広色域映像変換方法において、
前記色域マッピング処理工程は、前記3DLUTにおいて、前記入力HDR画像におけるYxy表色系画像データをHDR拡張したhdr-CIELAB表色系に基づいたhdr-CIELUV表色系に変換して、色相毎に、明度L*を維持して色差u*v*に対して彩度をソフトクリップ/ソフトニー処理をする明度保存色域マッピング処理を行う
ことを特徴とするHDR広色域映像変換方法。 - 請求項5または請求項6に記載のHDR広色域映像変換方法において、
前記色域マッピング処理工程は、前記3DLUTを用いた補間処理をして前記TM処理に起因するガマット誤差を補正する
ことを特徴とするHDR広色域映像変換方法。 - 請求項5乃至請求項7のいずれか一項に記載のHDR広色域映像変換方法において、
前記トーンマッピング処理工程は、画面全体に対して、一様なレベル変換を行うグローバルトーンマッピング(TM)処理を遂行する
ことを特徴とするHDR広色域映像変換方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018197390A JP7138935B2 (ja) | 2018-10-19 | 2018-10-19 | Hdr映像をsdr映像に変換するhdr広色域映像変換装置及びhdr広色域映像変換方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018197390A JP7138935B2 (ja) | 2018-10-19 | 2018-10-19 | Hdr映像をsdr映像に変換するhdr広色域映像変換装置及びhdr広色域映像変換方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020065220A JP2020065220A (ja) | 2020-04-23 |
JP7138935B2 true JP7138935B2 (ja) | 2022-09-20 |
Family
ID=70387627
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018197390A Active JP7138935B2 (ja) | 2018-10-19 | 2018-10-19 | Hdr映像をsdr映像に変換するhdr広色域映像変換装置及びhdr広色域映像変換方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7138935B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7434064B2 (ja) | 2020-05-28 | 2024-02-20 | 日本放送協会 | 彩度補正装置、映像信号変換装置及びプログラム |
CN112561839B (zh) * | 2020-12-02 | 2022-08-19 | 北京有竹居网络技术有限公司 | 视频裁剪方法、装置、存储介质及电子设备 |
CN115631250B (zh) * | 2021-08-10 | 2024-03-29 | 荣耀终端有限公司 | 图像处理方法与电子设备 |
CN114693567B (zh) * | 2022-05-30 | 2022-09-20 | 深圳思谋信息科技有限公司 | 图像颜色调整方法、装置、计算机设备和存储介质 |
CN115174881B (zh) * | 2022-07-15 | 2024-02-13 | 深圳市火乐科技发展有限公司 | 色域映射方法、装置、投影设备及存储介质 |
CN116167950B (zh) * | 2023-04-26 | 2023-08-04 | 镕铭微电子(上海)有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015111959A (ja) | 2010-08-25 | 2015-06-18 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 画像のダイナミックレンジの拡大 |
JP2017092920A (ja) | 2015-11-17 | 2017-05-25 | 株式会社朋栄 | 最適色域マッピング処理方法 |
WO2017158463A1 (en) | 2016-03-14 | 2017-09-21 | Koninklijke Philips N.V. | Saturation processing specification for dynamic range mappings |
WO2017203942A1 (ja) | 2016-05-25 | 2017-11-30 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
JP2018093530A (ja) | 2014-05-28 | 2018-06-14 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | Hdr画像をエンコードするための方法及び装置、並びに、斯様なエンコードされた画像の使用のための方法及び装置 |
JP2018525883A (ja) | 2015-06-30 | 2018-09-06 | トムソン ライセンシングThomson Licensing | カラー・ピクチャを符号化および復号する方法およびデバイス |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2947015B2 (ja) * | 1993-03-31 | 1999-09-13 | 松下電器産業株式会社 | 色変換装置及び色変換方法 |
-
2018
- 2018-10-19 JP JP2018197390A patent/JP7138935B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015111959A (ja) | 2010-08-25 | 2015-06-18 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 画像のダイナミックレンジの拡大 |
JP2018093530A (ja) | 2014-05-28 | 2018-06-14 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | Hdr画像をエンコードするための方法及び装置、並びに、斯様なエンコードされた画像の使用のための方法及び装置 |
JP2018525883A (ja) | 2015-06-30 | 2018-09-06 | トムソン ライセンシングThomson Licensing | カラー・ピクチャを符号化および復号する方法およびデバイス |
JP2017092920A (ja) | 2015-11-17 | 2017-05-25 | 株式会社朋栄 | 最適色域マッピング処理方法 |
WO2017158463A1 (en) | 2016-03-14 | 2017-09-21 | Koninklijke Philips N.V. | Saturation processing specification for dynamic range mappings |
WO2017203942A1 (ja) | 2016-05-25 | 2017-11-30 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2020065220A (ja) | 2020-04-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7138935B2 (ja) | Hdr映像をsdr映像に変換するhdr広色域映像変換装置及びhdr広色域映像変換方法 | |
KR102377807B1 (ko) | 높은 동적 범위 및 넓은 컬러 영역 시퀀스들의 코딩에서의 컬러 볼륨 변환들 | |
JP6876007B2 (ja) | Hdr信号の変換用の方法及び装置 | |
Saravanan | Color image to grayscale image conversion | |
JP6582062B2 (ja) | 画素の前処理および符号化 | |
US10750146B2 (en) | High dynamic range color conversion correction | |
JP2004192614A (ja) | 画像処理装置および画像処理方法並びにプログラムおよび記録媒体 | |
JP6619994B2 (ja) | 最適色域マッピング処理方法 | |
JP2018026798A (ja) | ソース色域外の入力色を有するlutを使用して画像のソース色をマッピングする方法 | |
JP5833049B2 (ja) | 画像処理方法、画像処理装置および画像処理プログラム | |
WO2009093294A1 (ja) | 画像信号処理装置及び画像信号処理プログラム | |
CN107925778B (zh) | 像素预处理和编码 | |
CN110612717A (zh) | 色相改变色域映射 | |
JP7278096B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2007142494A (ja) | 画像処理装置および方法、並びにプログラム | |
JP6784643B2 (ja) | 映像信号変換装置およびそのプログラム、ならびに、映像表示装置 | |
US10602109B2 (en) | Method and arrangements for HDR encoding | |
JP6860415B2 (ja) | 映像信号変換装置、ダイナミックレンジ変換装置およびそれらのプログラム | |
JP5494249B2 (ja) | 画像処理装置、撮像装置及び画像処理プログラム | |
KR20160058153A (ko) | 압축된 및 압축해제된 디지털 이미지들 및 비디오의 디스플레이에서 가시적 결함들을 감소시키기 위한 시스템 및 방법 | |
US9742963B2 (en) | Color rendering on a hue plane | |
US11769464B2 (en) | Image processing | |
Vandenberg et al. | A survey on 3d-lut performance in 10-bit and 12-bit hdr bt. 2100 pq | |
JP5267803B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
McElvain et al. | High-Accuracy Digital Camera Color Transforms for Wide-Gamut Workflows |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210914 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220812 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220818 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220831 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7138935 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |