JP2021506001A - 改良された高ダイナミックレンジビデオ色再マッピング - Google Patents
改良された高ダイナミックレンジビデオ色再マッピング Download PDFInfo
- Publication number
- JP2021506001A JP2021506001A JP2020530505A JP2020530505A JP2021506001A JP 2021506001 A JP2021506001 A JP 2021506001A JP 2020530505 A JP2020530505 A JP 2020530505A JP 2020530505 A JP2020530505 A JP 2020530505A JP 2021506001 A JP2021506001 A JP 2021506001A
- Authority
- JP
- Japan
- Prior art keywords
- brightness
- color
- luminance
- image
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013507 mapping Methods 0.000 claims abstract description 81
- 238000004364 calculation method Methods 0.000 claims abstract description 28
- 239000003086 colorant Substances 0.000 claims description 71
- 238000000034 method Methods 0.000 claims description 39
- 241000282414 Homo sapiens Species 0.000 claims description 22
- 238000003672 processing method Methods 0.000 claims description 9
- 238000012937 correction Methods 0.000 claims description 8
- 238000011156 evaluation Methods 0.000 claims description 8
- 230000036961 partial effect Effects 0.000 claims description 8
- 238000004321 preservation Methods 0.000 claims description 6
- 230000000717 retained effect Effects 0.000 claims description 2
- 238000012986 modification Methods 0.000 abstract description 4
- 230000004048 modification Effects 0.000 abstract description 4
- 230000006870 function Effects 0.000 description 97
- 238000012545 processing Methods 0.000 description 47
- 241000023320 Luma <angiosperm> Species 0.000 description 33
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 33
- 230000008859 change Effects 0.000 description 16
- 238000006243 chemical reaction Methods 0.000 description 16
- 230000006399 behavior Effects 0.000 description 14
- 238000004891 communication Methods 0.000 description 12
- 230000007246 mechanism Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 11
- 230000000694 effects Effects 0.000 description 10
- 238000004422 calculation algorithm Methods 0.000 description 9
- 230000002441 reversible effect Effects 0.000 description 9
- 230000009467 reduction Effects 0.000 description 8
- 238000009877 rendering Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 7
- 239000011651 chromium Substances 0.000 description 7
- 230000001419 dependent effect Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000010191 image analysis Methods 0.000 description 6
- 241000282412 Homo Species 0.000 description 5
- VYZAMTAEIAYCRO-UHFFFAOYSA-N Chromium Chemical compound [Cr] VYZAMTAEIAYCRO-UHFFFAOYSA-N 0.000 description 4
- 230000006978 adaptation Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000002829 reductive effect Effects 0.000 description 4
- 229920006395 saturated elastomer Polymers 0.000 description 4
- 238000003860 storage Methods 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 238000005282 brightening Methods 0.000 description 3
- 230000000670 limiting effect Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 230000001052 transient effect Effects 0.000 description 3
- 230000004438 eyesight Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000000844 transformation Methods 0.000 description 2
- 101100502320 Arabidopsis thaliana FAD4 gene Proteins 0.000 description 1
- 208000019300 CLIPPERS Diseases 0.000 description 1
- 241001050985 Disco Species 0.000 description 1
- 241001061106 Sargocentron rubrum Species 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 229910052804 chromium Inorganic materials 0.000 description 1
- 208000021930 chronic lymphocytic inflammation with pontine perivascular enhancement responsive to steroids Diseases 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013479 data entry Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000004880 explosion Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 238000013441 quality evaluation Methods 0.000 description 1
- 238000013442 quality metrics Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000004575 stone Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/643—Hue control means, e.g. flesh tone control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Of Color Television Signals (AREA)
- Image Processing (AREA)
- Picture Signal Circuits (AREA)
Abstract
Description
Cb_out=Sm*Cb_in;Cr_out=Sm*Cr_in。ルマは、したがって、この処理により影響されないので、変化しない。しかしながら、色の輝度は、ルマの非定常輝度特性により、変化する(多くの状況で、これは、色処理システムのユーザにより問題として認識されないが、幾つかのより厳格なシナリオでは認識される)。しかしながら、ルマ部分のみが変化することは、しかしながら、一定の色の色度の振る舞いをもたらさない。これは、CbCr成分が、誤った輝度、したがって異なる彩度の色に対応するからである。しかし、これは、ルマ(又は輝度に基づく処理では輝度、例えば線形YCbCr空間、又は後述する非線形トポロジに組み込まれた線形バージョン、等)における同様の差だけCbCr係数を反対に操作することにより比較的容易に修正できる。
同じ輝度変化は、代替として、他のべき乗関数に基づく導出色表現、例えばY’_HDR=gNL*Y’_nrm;Cb_HDR=gNL*Cb_nrm;Cr_HDR=gNL*Cr_nrmでも実装できる。これにより、Cb及びCrは、R’G’B’に基づくそれらの通常の式に従い定義される。つまり、このような例では、SDR色度であるが1に正規化される。このテキストでは、「’」は、私たちがべき乗1/2に基づく量(つまり、非線形ルマの典型的なRec.709定義)を有することを示し、「’」が無いことは、標準的に通常の線形の色成分を示し、「’’」は、色成分のまた別の可能なHDR定義を示し、R’’は標準的にR’’=OETF_PQ(R)を示す。熟練した読者は、定義されたシステムにおいて、対応するCb及びCrが定義されることを理解できる。
前記入力輝度の輝度マッピング関数(FLM)の出力を該入力輝度により除算した分割として乗算係数(gL)を計算することにより:gL=FLM(L)/L、前記乗算係数を計算するよう構成される利得計算ユニット(514)であって、前記乗算係数は、対応する中間出力輝度になるように前記入力輝度をどのように調整するかを示す前記輝度マッピング関数に基づき、前記入力画像の画像ピクセルのいかなる入力色の前記入力輝度について定められる、利得計算ユニット(514)と、
前記中間出力輝度が前記入力色の色度において全範囲上限境界のどれだけ上であるかを示すオーバーフロー指標(T)を計算するよう構成されるオーバーフロー計算機(612)であって、前記中間出力輝度は、前記乗算係数(gL)を前記入力色に適用することにより得られる、オーバーフロー計算機(612)と、
前記オーバーフロー指標が閾(G)より大きい場合に、より低い代替利得係数(Fl(gL))を決定するよう構成され、その他の場合に、元の利得係数を保つよう構成され、これらのうちの1つを最終利得係数(gF)として出力するよう構成される利得係数変更ユニット(603)と、
前記入力色(R’G’B’_nrm)を前記最終利得係数(gF)により乗算して、前記出力輝度を有する出力色(R’G’B’_HDR)を取得する乗算器(530)と、
を含む、ことを特徴とする。
このような仕様は、何らかの最悪の場合の色に基づき決定でき、他の色が次に同様に扱われる。
画像ソース1202から入力画像を受信する入力と、
入力画像を出力画像として符号化し及び少なくとも1つの輝度マッピング関数F_Ltを符号化するエンコーダと、
を含み、エンコーダは、ビデオの画像の色特性を分析して、請求項1に記載の輝度プロセッサにより適用されるべき閾Gを決定するよう構成される画像評価プロセッサを含み、エンコーダは、閾Gをメタデータとして出力するよう構成されることを特徴とする。上述(及び後述)した種類の輝度プロセッサは、例えば、人間が彼の選択肢がデコーダ側においてどのように見えるかを知ることを助けるために含まれてよいが、必ずしも自動エンコーダに含まれる必要はなくてよい(自動画像分析はパラメータの1つ以上の候補選択肢、例えば最適G閾から生じる1つ以上の画像に対して、例えば入力のコントラスト、テクスチャメトリック、等のような幾つかの画像品質メトリックとテストされた候補出力画像と比較することにより、実行されることがある場合)。
画像ソース1202から入力画像を受信する入力と、
入力画像を出力画像として及び少なくとも1つの輝度マッピング関数(F_Lt)を符号化するエンコーダと、 を含んでよく、エンコーダは、ビデオの画像の色特性を分析し、パラメータ:(a)最適閾の使用について与えられた例(ここでは、色をそのままにする、及び対応する色の非理想性による軽減アルゴリズムを最適に適用し始める)に従う閾G、関数FADAP、クリッピングパラメータVmx、及び彩度低下に対して調整することにより処理されるべき分割及び調整量を示す分数値rho、のうちの少なくとも1つを決定する画像評価プロセッサ1210を含み、エンコーダは、少なくとも1つのパラメータのようなメタデータを出力するよう構成されることを特徴とする。したがって、受信機の輝度プロセッサは、対応する再グレーディングを適用できる。
入力画像及び輝度マッピング関数FLMを受信する入力と、
閾Gの値を受信するよう構成される第2入力と、
請求項1乃至7のいずれか一項に記載の輝度プロセッサ501であって、輝度マッピング関数FLM及び閾Gを用いて出力画像を計算し、入力画像の輝度を変更して出力画像を生成するよう構成される、輝度プロセッサ501と、
出力画像を出力する出力と、
を含む高ダイナミックレンジビデオデコーダ。
入力輝度の関数である乗算係数gL及び輝度マッピング関数FLMを計算するステップと、
入力画像の前記ピクセルの色の3つの赤、緑、及び青色成分のうちの最大の1つである強度値Vを計算するステップであって、これらの成分は線形赤、緑、及び青色成分又は該線形赤、緑、及び青色成分の累乗である、ステップと、
出力輝度が全範囲上限境界にどれくらい近いかを示すオーバーフロー指標Tを計算するよう構成されるステップと、
オーバーフロー指標が閾Gより大きい場合に代替利得係数F1(gL)を決定するよう構成され、その他の場合に元の利得係数を保持するよう構成され、最終利得係数gFとしてこれらのうちの1つを出力するよう構成されるステップと、
最終利得係数gFにより前記入力色(R’G’B’_nrm)を乗算して、出力輝度を有する出力色(R’G’B’_HDR)を取得するステップと、を含む。
前記入力輝度の輝度マッピング関数(FLM)の出力を該入力輝度により除算した分割として乗算係数(gL)を計算することにより:gL=FLM(L)/L、前記乗算係数を計算するステップであって、前記乗算係数は、中間出力輝度になるように前記入力輝度をどのように調整するかを示す前記輝度マッピング関数に基づき、前記入力画像の画像ピクセルのいかなる入力色の前記入力輝度について定められる、ステップと、
前記中間出力輝度が前記入力色の色度において全範囲上限境界のどれだけ上であるかを示すオーバーフロー指標(T)を計算するステップであって、前記中間出力輝度は、前記乗算係数(gL)を前記入力色に適用することにより得られる、ステップと、
前記オーバーフロー指標が閾(G)より大きい場合に、より低い代替利得係数(Fl(gL))を決定し、その他の場合に、元の利得係数を保ち、これらのうちの1つを最終利得係数(gF)として出力するステップと、
前記入力色(R’G’B’_nrm)を前記最終利得係数(gF)により乗算して、前記出力輝度を有する出力色(R’G’B’_HDR)を取得するステップと、
を含む輝度処理方法。
コンテンツ生成側からいかなる接続されたネットワークを介して、教示されたパラメータ:(a)閾Gであって、閾Gより上では再決定処理が開始し、再決定された色は出力全範囲の中に押し込められ(squeeze)なければならない、閾G、(b)g係数決定を行うために望ましい特定関数FADAPの形状のパラメータ符号化(又はそのいかなる等価なもの、例えば強度値Vの関数)、(c)クリッピングパラメータVmxであって、クリッピングパラメータVmxは最も違反している色、つまり全範囲の一番上より遙かに上に含まれる、したがって、全範囲の範囲内に再マッピングすることが最も困難な色のクリッピング量を依然として可能にする、クリッピングパラメータVmx、(d)2つの部分的再マッピング方針への分割の使用を可能にする分数値rhoであって、該方針の一方はピクセル輝度を再計算し、他方はピクセル彩度を再計算する、分数値rho、のうちの少なくとも1つを受信するステップと、
該少なくとも1つのパラメータを輝度計算において適用するステップと、を含む方法。
画像高さにより乗算された画像幅のピクセル色を有するセットと、
ピクセル色の輝度から出力輝度をどのように計算するかを定める少なくとも1つの輝度マッピング関数と、
パラメータ:(a)閾G、(b)クリッピングパラメータVmx、(c)分数値rho、のうちの少なくとも1つと、を含む信号。
画像高さにより乗算された画像幅のピクセル色を有するセットと、
ピクセル色の輝度から出力輝度をどのように計算するかを定める少なくとも1つの輝度マッピング関数と、を含み、関数FADAPを更に含む、信号。
sqrt(power(K;2)+power(L;2)
=approximately max(K,L):max(K,L)>4*min(K,L)の場合
=approximately(7/8)*max(K,L)+(1/2)*max(K,L)):その他の場合。
R_out=gL*R_in;G_out=gL*G_in;B_out=gL*B_inの場合、max(R_out,G_out,B_out)=gl*V_in
したがって、これは、実際には、VのgL*(入力)値の値である。Vは、図6の502により計算され、監視のための基準であり、乗算器602による例示的な実施形態で計算され、結果はTest値Tと呼ばれる。
この場合、特定の色について、出力色の元のgL係数によりマッピングするとき、T値が例えば1.3である場合、gL/1.3である異なるgFによる同じ入力色(及びそのV値)のマッピングは、1に正確にマッピングすることが実際に分かる(1.8にマッピングする別の色についてgF/1.8を適用することは、同じである、等)。
A(T)=(T>G?)1/{1+[(Vmx−1)/(Vmx−G)]*(T−G)}:1 (式4)
T=Vmxである場合、A(T)は1/Vmxになる、等が分かる。
部分マッピング計算機903は、ここで、減衰係数Arhoを決定し、乗算器902においてgLにより乗算して、部分輝度調整のための適切な最終gFを取得する。部分輝度調整は、乗算器910により、彩度低下器911による後の彩度低下ステップで中間輝度Liにならなければならに輝度と一緒にRGBの3色に対して実行される。彩度係数決定ユニット901は、彩度プロセッサ911のために、例えば式5に従い必要な彩度係数S(V,Y,Arem)を決定でき、それを輝度保存彩度低下において式7に従い適用する。
これらの出力色成分は、したがって、例えばHDR入力画像色から導出されたSDR色(又はMDR色)に対して適正な色成分である。
・画像ソース12020から入力画像を受信する入力と、
・入力画像を出力画像及び少なくとも1つの輝度マッピング関数(F_Lt)として符号化するエンコーダと、
・ビデオの画像の色特性を分析して、パラメータ:(a)閾Gであって、閾Gより上では何らかの代替の最終利得gFが使用されるべきであると示し、閾Gの下では、オブジェクト又はピクセル輝度分布が特定である場合に、現在画像のダイナミックレンジ再グレーディングのために輝度マッピング関数FILMに対応する元の利得が適することを示す、閾G、(b)画像のより明るい色が処理されるべき代替の利得を決定するために使用可能な関数FADAP、(c)クリッピングパラメータであって、該クリッピングパラメータから(輝度再グレーディング後の)入力輝度クリッピングが許可されることを示すが、色度保存クリッピングである(そのような効果が望ましい場合)、クリッピングパラメータ、及び(d)分数値rhoであって、暗くすることにより処理されるべき全範囲に向かう補正間隔の再度低下に対する分離を決定する、例えば輝度距離の40%が最終gFの適用後に残っており、少なくともピクセルの入力色の色調の保存を保証するために彩度低下により処理されるべきである、分数値rho、のうちの少なくとも1つを決定するよう構成される画像評価プロセッサ1210を含み、エンコーダは、この少なくとも1つのパラメータをメタデータとして出力するよう構成される。
Claims (14)
- 輝度プロセッサであって、第1ピーク明度(PB_HDR)により特徴付けられる第1輝度ダイナミックレンジを有する入力画像(MAST_HDR)の空間的に配置されたピクセルの入力輝度(L)から、第2ピーク明度(PB_LDR;PB_MDR)により特徴付けられる第2輝度ダイナミックレンジを有する出力画像(Im_LDR;Im3000ニト)のピクセルの出力輝度を計算するよう構成され、前記輝度プロセッサは、
前記入力輝度の輝度マッピング関数(FLM)の出力を該入力輝度により除算した分割として乗算係数(gL)を計算することにより:gL=FLM(L)/L、前記乗算係数を計算するよう構成される利得計算ユニットであって、前記乗算係数は、対応する中間出力輝度になるように前記入力輝度をどのように調整するかを示す前記輝度マッピング関数に基づき、前記入力画像の画像ピクセルのいかなる入力色の前記入力輝度について定められる、利得計算ユニットと、
前記中間出力輝度が前記入力色の色度において全範囲上限境界のどれだけ上であるかを示すオーバーフロー指標(T)を計算するよう構成されるオーバーフロー計算機であって、前記中間出力輝度は、前記乗算係数(gL)を前記入力色に適用することにより得られる、オーバーフロー計算機と、
前記オーバーフロー指標が閾(G)より大きい場合に、より低い代替利得係数(Fl(gL))を決定するよう構成され、その他の場合に、元の利得係数を保つよう構成され、これらのうちの1つを最終利得係数(gF)として出力するよう構成される利得係数変更ユニットと、
前記入力色(R’G’B’_nrm)を前記最終利得係数(gF)により乗算して、前記出力輝度を有する出力色(R’G’B’_HDR)を取得する乗算器と、
を含む輝度プロセッサ。 - コンテンツの生成側からネットワークを介して前記閾(G)を受信するよう構成されるデータ受信手段、を含む請求項1に記載の輝度プロセッサ。
- コンテンツの生成側からネットワークを介して、前記代替利得係数を決定するための関数(FADAP)を受信するよう構成されるデータ受信手段、を含む請求項1又は2に記載の輝度プロセッサ。
- コンテンツの生成側からネットワークを介して、クリッピングパラメータ(Vmx)を受信するよう構成されるデータ受信手段を含み、前記クリッピングパラメータは、色が全範囲上限境界のどれだけ上であるかを示し、前記クリッピングパラメータは前記色の赤、緑、及び青色成分のうちの最大のものとして定められ、該クリッピングパラメータより上にある色輝度について、色調保存色クリッピングが可能であることを指定する、請求項1乃至3のいずれかいっこうに記載の輝度プロセッサ。
- 部分マッピング計算機であって、実現可能な全範囲内の色に到達する必要のある、前記全範囲境界に向かう前記入力色の補正の第1小部分を決定するよう構成され、前記補正の第1小部分は、最終的な乗算係数(gF)による乗算により処理され、彩度計算を駆動する彩度乗数(S)を決定する補正の残りの第2小部分を決定するよう構成される、部分マッピング計算機、を含む請求項1乃至4のいずれか一項に記載の輝度プロセッサ。
- コンテンツの生成側からネットワークを介して、補正の前記第1及び第2小部分を決定する小部分値(rho)を受信するよう構成されるデータ受信手段、を含む請求項5に記載の輝度プロセッサ。
- 前記オーバーフロー指標(T)は、前記乗算係数(gL)により乗算されたピクセル色の赤、緑、及び青色成分のうちの最高値として計算される、請求項1乃至6のいずれか一項に記載の輝度プロセッサ。
- 高ダイナミックレンジビデオエンコーダであって、
画像ソースから入力画像を受信する入力と、
前記入力画像を出力画像として符号化し、少なくとも1つの輝度マッピング関数(F_Lt)を符号化するよう構成されるエンコーダと、
を含み、
前記エンコーダは、前記ビデオの画像の色特性を分析して、請求項1に記載の輝度プロセッサにより適用されるべき閾(G)を決定するよう構成される画像評価プロセッサを含み、前記エンコーダは、該閾(G)をメタデータとして出力するよう構成される、高ダイナミックレンジビデオエンコーダ。 - 高ダイナミックレンジビデオ符号化システムであって、
人間の色クレーダーが請求項1に記載の前記閾(G)の値を指定することを可能にするユーザインタフェースと、
請求項1に記載の輝度プロセッサであって、前記人間の色グレーダにより指定された前記閾(G)の値を受信し及びい使用するよう更に構成され、前記輝度プロセッサの前記出力画像を表示するためにディスプレイに接続される、輝度プロセッサと、
を含み、前記高ダイナミックレンジビデオ符号化システムは、前記閾(G)を符号化し及び出力するよう構成されるエンコーダを更に含む、高ダイナミックレンジビデオ符号化システム。 - 高ダイナミックレンジビデオデコーダであって、
入力画像及び輝度マッピング関数(FLM)を受信する入力と、
閾(G)の値を受信するよう構成される第2入力と、
請求項1乃至7のいずれか一項に記載の輝度プロセッサであって、前記輝度マッピング関数(FLM)及び前記閾(G)を用いて出力画像を計算し、前記入力画像の輝度を変更して出力画像を生成するよう構成される、輝度プロセッサと、
前記出力画像を出力する出力と、
を含む高ダイナミックレンジビデオデコーダ。 - 輝度処理方法であって、第1ピーク明度(PB_HDR)により特徴付けられる第1輝度ダイナミックレンジを有する入力画像(MAST_HDR)の空間的に配置されたピクセルの入力輝度から、第2ピーク明度(PB_LDR;PB_MDR)により特徴付けられる第2輝度ダイナミックレンジを有する出力画像(Im_LDR;Im3000ニト)のピクセルの出力輝度を計算し、前記方法は、
前記入力輝度の輝度マッピング関数(FLM)の出力を該入力輝度により除算した分割として乗算係数(gL)を計算することにより:gL=FLM(L)/L、前記乗算係数を計算するステップであって、前記乗算係数は、中間出力輝度になるように前記入力輝度をどのように調整するかを示す前記輝度マッピング関数に基づき、前記入力画像の画像ピクセルのいかなる入力色の前記入力輝度について定められる、ステップと、
前記中間出力輝度が前記入力色の色度において全範囲上限境界のどれだけ上であるかを示すオーバーフロー指標(T)を計算するステップであって、前記中間出力輝度は、前記乗算係数(gL)を前記入力色に適用することにより得られる、ステップと、
前記オーバーフロー指標が閾(G)より大きい場合に、より低い代替利得係数(Fl(gL))を決定し、その他の場合に、元の利得係数を保ち、これらのうちの1つを最終利得係数(gF)として出力するステップと、
前記入力色(R’G’B’_nrm)を前記最終利得係数(gF)により乗算して、前記出力輝度を有する出力色(R’G’B’_HDR)を取得するステップと、
を含む輝度処理方法。 - コンテンツの生成側からいかなる接続されたネットワークを介して、前記出力色にの計算に適用すべき前記閾(G)を受信するステップ、を含む請求項11に記載の輝度処理方法。
- コンテンツの生成側からいかなる接続されたネットワークを介して、前記代替利得係数を決定するための関数(FADAP)を受信するステップ、を含む請求項11又は12に記載の輝度処理方法。
- HDR画像信号であって、
ピクセル色を含む画像と、
ピクセル色の輝度から出力輝度をどのように計算するかを定める少なくとも1つの輝度マッピング関数(FLM)と、
請求項1に記載の輝度プロセッサがその出力色の計算において使用すべき閾(G)と、
を含む信号。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP17206169.9A EP3496028A1 (en) | 2017-12-08 | 2017-12-08 | Improved high dynamic range video color remapping |
EP17206169.9 | 2017-12-08 | ||
PCT/EP2018/083856 WO2019110752A1 (en) | 2017-12-08 | 2018-12-06 | Improved high dynamic range video color remapping |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021506001A true JP2021506001A (ja) | 2021-02-18 |
JP2021506001A5 JP2021506001A5 (ja) | 2021-04-01 |
JP7381463B2 JP7381463B2 (ja) | 2023-11-15 |
Family
ID=60629574
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020530505A Active JP7381463B2 (ja) | 2017-12-08 | 2018-12-06 | 改良された高ダイナミックレンジビデオ色再マッピング |
Country Status (8)
Country | Link |
---|---|
US (2) | US11170478B2 (ja) |
EP (2) | EP3496028A1 (ja) |
JP (1) | JP7381463B2 (ja) |
KR (1) | KR102614452B1 (ja) |
CN (1) | CN111699507B (ja) |
BR (1) | BR112020011172A2 (ja) |
MX (1) | MX2020005813A (ja) |
WO (1) | WO2019110752A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10645358B2 (en) * | 2018-02-20 | 2020-05-05 | Gopro, Inc. | Saturation management for luminance gains in image processing |
US10970828B2 (en) * | 2018-12-21 | 2021-04-06 | Ricoh Company, Ltd. | Image processing apparatus, image processing system, image processing method, and recording medium |
US11232607B2 (en) * | 2020-01-24 | 2022-01-25 | Adobe Inc. | Adding color to digital images |
EP3873096A1 (en) | 2020-02-25 | 2021-09-01 | Koninklijke Philips N.V. | Improved hdr color processing for saturated colors |
US11651472B2 (en) | 2020-10-16 | 2023-05-16 | Electronics And Telecommunications Research Institute | Method for processing immersive video and method for producing immersive video |
CN113271449B (zh) * | 2021-07-21 | 2021-09-28 | 北京小鸟科技股份有限公司 | 多种hdr视频的转换系统、方法、设备 |
CN116029914B (zh) * | 2022-07-27 | 2023-10-20 | 荣耀终端有限公司 | 图像处理方法与电子设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017102606A1 (en) * | 2015-12-17 | 2017-06-22 | Koninklijke Philips N.V. | Dynamic range coding for images and video |
WO2017157977A1 (en) * | 2016-03-18 | 2017-09-21 | Koninklijke Philips N.V. | Encoding and decoding hdr videos |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7009627B2 (en) * | 2001-11-21 | 2006-03-07 | Canon Kabushiki Kaisha | Display apparatus, and image signal processing apparatus and drive control apparatus for the same |
US7773158B2 (en) * | 2005-10-12 | 2010-08-10 | Panasonic Corporation | Visual processing device, display device, and integrated circuit |
TWI314424B (en) * | 2006-06-23 | 2009-09-01 | Marketech Int Corp | System and method for image signal contrast adjustment and overflow compensation |
US9417479B2 (en) * | 2011-05-13 | 2016-08-16 | Samsung Display Co., Ltd. | Method for reducing simultaneous contrast error |
US8896641B2 (en) * | 2011-06-01 | 2014-11-25 | Lg Display Co., Ltd. | Organic light emitting diode display device and method of driving the same |
JP5966658B2 (ja) * | 2012-06-22 | 2016-08-10 | ソニー株式会社 | 表示装置、画像処理装置、および表示方法 |
US10075728B2 (en) * | 2012-10-01 | 2018-09-11 | Inria Institut National De Recherche En Informatique Et En Automatique | Method and device for motion information prediction refinement |
KR102105645B1 (ko) | 2012-10-08 | 2020-05-04 | 코닌클리케 필립스 엔.브이. | 색상 제한들을 통한 루미넌스 변화 이미지 처리 |
US10194162B2 (en) | 2013-07-18 | 2019-01-29 | Koninklijke Philips N.V. | Methods and apparatuses for creating code mapping functions for encoding an HDR image, and methods and apparatuses for use of such encoded images |
CN106464892B (zh) * | 2014-05-28 | 2019-07-02 | 皇家飞利浦有限公司 | 用于对hdr图像进行编码的方法和装置以及用于使用这样的编码图像的方法和装置 |
TR201808347T4 (tr) * | 2014-10-10 | 2018-07-23 | Koninklijke Philips Nv | Dinamik erim eşleştirmelerine yönelik doyma işleminin belirtimi. |
JP6619813B2 (ja) | 2014-12-11 | 2019-12-11 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 特定のディスプレイに対する高ダイナミックレンジ画像の最適化 |
WO2017019818A1 (en) * | 2015-07-28 | 2017-02-02 | Vid Scale, Inc. | High dynamic range video coding architectures with multiple operating modes |
EP3220349A1 (en) * | 2016-03-16 | 2017-09-20 | Thomson Licensing | Methods, apparatus, and systems for extended high dynamic range ("hdr") hdr to hdr tone mapping |
JP6637396B2 (ja) * | 2016-08-31 | 2020-01-29 | 株式会社ジャパンディスプレイ | 表示装置、電子機器及び表示装置の駆動方法 |
EP3493150A1 (en) * | 2017-11-30 | 2019-06-05 | InterDigital VC Holdings, Inc. | Tone mapping adaptation for saturation control |
-
2017
- 2017-12-08 EP EP17206169.9A patent/EP3496028A1/en not_active Withdrawn
-
2018
- 2018-12-06 WO PCT/EP2018/083856 patent/WO2019110752A1/en unknown
- 2018-12-06 MX MX2020005813A patent/MX2020005813A/es unknown
- 2018-12-06 EP EP18811314.6A patent/EP3721405B1/en active Active
- 2018-12-06 CN CN201880088920.XA patent/CN111699507B/zh active Active
- 2018-12-06 US US16/770,133 patent/US11170478B2/en active Active
- 2018-12-06 KR KR1020207019674A patent/KR102614452B1/ko active IP Right Grant
- 2018-12-06 JP JP2020530505A patent/JP7381463B2/ja active Active
- 2018-12-06 BR BR112020011172-4A patent/BR112020011172A2/pt unknown
-
2021
- 2021-10-27 US US17/511,718 patent/US20220124293A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017102606A1 (en) * | 2015-12-17 | 2017-06-22 | Koninklijke Philips N.V. | Dynamic range coding for images and video |
WO2017157977A1 (en) * | 2016-03-18 | 2017-09-21 | Koninklijke Philips N.V. | Encoding and decoding hdr videos |
Also Published As
Publication number | Publication date |
---|---|
MX2020005813A (es) | 2020-08-20 |
CN111699507A (zh) | 2020-09-22 |
EP3721405C0 (en) | 2024-03-06 |
US20220124293A1 (en) | 2022-04-21 |
EP3721405A1 (en) | 2020-10-14 |
US11170478B2 (en) | 2021-11-09 |
BR112020011172A2 (pt) | 2020-11-17 |
KR102614452B1 (ko) | 2023-12-14 |
KR20200097307A (ko) | 2020-08-18 |
RU2020122004A (ru) | 2022-01-10 |
US20200357100A1 (en) | 2020-11-12 |
CN111699507B (zh) | 2024-06-18 |
WO2019110752A1 (en) | 2019-06-13 |
EP3721405B1 (en) | 2024-03-06 |
JP7381463B2 (ja) | 2023-11-15 |
EP3496028A1 (en) | 2019-06-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11533516B2 (en) | Methods and apparatuses for encoding an HDR images, and methods and apparatuses for use of such encoded images | |
US10182247B2 (en) | HDR image encoding and decoding methods and devices | |
JP7381463B2 (ja) | 改良された高ダイナミックレンジビデオ色再マッピング | |
RU2642335C2 (ru) | Обработка изображений с изменением яркости при цветовых ограничениях | |
JP6495552B2 (ja) | 画像及びビデオのためのダイナミックレンジ符号化 | |
CN109219961B (zh) | 对hdr视频进行编码和解码的方法和装置 | |
RU2640750C2 (ru) | Устройство и способ для преобразования динамического диапазона изображений | |
US11741873B2 (en) | Adjustment of display optimization behaviour for HDR images | |
RU2782432C2 (ru) | Улучшенное повторное отображение цвета видео с высоким динамическим диапазоном |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200610 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211203 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221025 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230124 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230314 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230608 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230627 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230908 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230919 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231010 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231102 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7381463 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |