JP6800896B2 - ビデオコーディングのためにハイダイナミックレンジおよび広色域ビデオデータを処理すること - Google Patents
ビデオコーディングのためにハイダイナミックレンジおよび広色域ビデオデータを処理すること Download PDFInfo
- Publication number
- JP6800896B2 JP6800896B2 JP2017563300A JP2017563300A JP6800896B2 JP 6800896 B2 JP6800896 B2 JP 6800896B2 JP 2017563300 A JP2017563300 A JP 2017563300A JP 2017563300 A JP2017563300 A JP 2017563300A JP 6800896 B2 JP6800896 B2 JP 6800896B2
- Authority
- JP
- Japan
- Prior art keywords
- video data
- fcc
- chromaticity
- chromaticity component
- format video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 38
- 238000000034 method Methods 0.000 claims description 120
- 230000003044 adaptive effect Effects 0.000 claims description 62
- 238000007781 pre-processing Methods 0.000 claims description 45
- 230000002441 reversible effect Effects 0.000 claims description 34
- 230000006870 function Effects 0.000 claims description 31
- 238000012546 transfer Methods 0.000 claims description 29
- 230000008569 process Effects 0.000 claims description 22
- 230000011664 signaling Effects 0.000 claims description 5
- 238000006243 chemical reaction Methods 0.000 description 78
- 230000033001 locomotion Effects 0.000 description 70
- 239000000523 sample Substances 0.000 description 58
- 230000006835 compression Effects 0.000 description 46
- 238000007906 compression Methods 0.000 description 46
- 238000013139 quantization Methods 0.000 description 38
- 241000023320 Luma <angiosperm> Species 0.000 description 25
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 25
- 238000012805 post-processing Methods 0.000 description 24
- 239000013598 vector Substances 0.000 description 23
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 21
- 230000006837 decompression Effects 0.000 description 19
- 230000009466 transformation Effects 0.000 description 19
- 238000003860 storage Methods 0.000 description 18
- 230000005540 biological transmission Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 10
- 230000000007 visual effect Effects 0.000 description 8
- 238000013500 data storage Methods 0.000 description 7
- 238000006073 displacement reaction Methods 0.000 description 7
- 239000003086 colorant Substances 0.000 description 6
- 230000002123 temporal effect Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 230000002457 bidirectional effect Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000007667 floating Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 238000000844 transformation Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000002408 directed self-assembly Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000012432 intermediate storage Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 239000013074 reference sample Substances 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Processing Of Color Television Signals (AREA)
Description
Y=Y (1)
Y=Y (4)
Y’=TF(Y) (7)
α”=TF(α’) (8)
β”=TF(β’) (9)
式(7)〜(9)中で、Y、α’およびβ’は、上記の式(4)〜(6)中で生成される信号を表し、ここで、TF()は、伝達関数を示す。
Y’=TF(Y) (10)
以下に本願の出願当初の特許請求の範囲に記載された発明を付記する。
[C1] ビデオデータを処理する方法であって、
圧縮解除されたフラクショナル色度座標(FCC)フォーマットビデオデータを取得するために、1つまたは複数の逆適応伝達関数(TF)を使用して圧縮されたFCCフォーマットビデオデータを逆圧縮することと、
逆調整されたFCCフォーマットビデオデータを取得するために、前記圧縮解除されたFCCフォーマットビデオデータの対応する輝度成分に基づいて前記圧縮解除されたFCCフォーマットビデオデータの色度成分を逆調整することと、
ハイダイナミックレンジ(HDR)および広色域(WCG)ビデオデータを取得するために、前記FCCフォーマットから色表現フォーマットに前記逆調整されたFCCフォーマットビデオデータの前記色度成分を変換することと
を備える方法。
[C2] ビデオデータを処理する前記方法が、前記FCCフォーマットビデオデータをビデオ復号した後にビデオデータを後処理する方法を備え、
前記方法が、
アップサンプリングされ圧縮されたFCCフォーマットビデオデータを取得するために、前記圧縮されたFCCフォーマットビデオデータの色度成分をアップサンプリングすることと、
前記圧縮されたFCCフォーマットビデオデータを取得するために、前記アップサンプリングされ圧縮されたFCCフォーマットビデオデータを逆量子化することと
をさらに備える、
C1に記載の方法。
[C3] 前記色表現フォーマットが、RGB色空間またはXYZ色空間のうちの1つを備え、
前記FCCフォーマットビデオデータが、前記HDRおよびWCGビデオデータに基づいて適応されるFCC色空間またはYu’v’色空間を備える、
C1に記載の方法。
[C4] 前記圧縮解除されたFCCフォーマットビデオデータの前記色度成分を逆調整することは、前記圧縮解除されたFCCフォーマットビデオデータのサンプルの前記輝度成分がしきい値よりも小さいとき、前記圧縮解除されたFCCフォーマットビデオデータの前記サンプルの前記色度成分を、前記圧縮解除されたFCCフォーマットビデオデータに関連するビットストリーム中でシグナリングされる値に設定することによって、前記圧縮解除されたFCCフォーマットビデオデータの前記サンプルの前記対応する色度成分を逆調整することを備える、C1に記載の方法。
[C5] 前記しきい値が、前記HDRおよびWCGビデオデータの統計値に基づいて導出されるかまたは固定される、C4に記載の方法。
[C6] 前記圧縮解除されたFCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記圧縮解除されたFCCフォーマットビデオデータが、第2の色度成分を備え、
前記圧縮解除されたFCCフォーマットビデオデータの前記色度成分を逆調整することが、前記第1の色度成分と前記第2の色度成分との両方を一緒に逆調整することまたは前記第1の色度成分と前記第2の色度成分との各々を別個に調整することのうちの1つを備える、
C1に記載の方法。
[C7] 前記圧縮されたFCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記圧縮されたFCCフォーマットビデオデータが、第2の色度成分を備え、
1つまたは複数の逆適応TFを使用して前記圧縮されたFCCフォーマットビデオデータの前記色度成分を逆圧縮することが、前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に同じ逆適応TFを適用すること、または前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に異なる逆適応TFを適用することのうちの1つを備える、
C1に記載の方法。
[C8] 前記圧縮されたFCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記圧縮されたFCCフォーマットビデオデータが、第2の色度成分を備え、
前記圧縮されたFCCフォーマットビデオデータを逆圧縮することが、
逆対数様TFを前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に適用すること、または
前記圧縮されたFCCフォーマットビデオデータの輝度成分だけに逆対数様TFを適用し、前記圧縮解除した輝度成分のレベルに応じて、前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分とに逆適応線形TFを適用すること
のうちの1つを備える、1つまたは複数の逆適応TFを使用して前記圧縮されたFCCフォーマットビデオデータを逆圧縮することを備える、
C1に記載の方法。
[C9] 前記逆調整されたFCCフォーマットビデオデータの前記色度成分を第2の色表現フォーマットに変換することと、
前記HDRおよびWCGビデオデータを取得するために、前記第2の色表現フォーマットの前記色度成分を第1の色表現フォーマットに変換することと
をさらに備える、C1に記載の方法。
[C10] ビデオデータを処理する方法であって、
色表現フォーマットとフラクショナル色度座標(FCC)フォーマットとの間でハイダイナミックレンジ(HDR)および広色域(WCG)ビデオデータの色度成分を変換することと、
調整されたFCCフォーマットビデオデータを取得するために、前記FCCフォーマットビデオデータの対応する輝度成分に基づいて前記FCCフォーマットビデオデータの色度成分を調整することと、
圧縮されたFCCフォーマットビデオデータを取得するために、1つまたは複数の適応伝達関数(TF)を使用して前記FCCフォーマットビデオデータを圧縮することと
を備える方法。
[C11] 量子化されたFCCフォーマットビデオデータを取得するために、前記圧縮されたFCCフォーマットビデオデータを量子化することと、
符号化されるべき前処理されたビデオデータを取得するために、前記量子化されたFCCフォーマットビデオデータをサブサンプリングすることと
をさらに備える、C10に記載の方法。
[C12] 前記色表現フォーマットが、RGB色空間またはXYZ色空間のうちの1つを備え、
前記FCCフォーマットビデオデータが、前記HDRおよびWCGビデオデータに基づいて適応されるFCC色空間またはYu’v’色空間を備える、
C10に記載の方法。
[C13] 前記FCCフォーマットビデオデータが範囲を超えるのを防止するために前記FCCフォーマットビデオデータを処理することをさらに備える、C10に記載の方法。
[C14] 前記FCCフォーマットビデオデータの色度成分を調整することは、前記FCCフォーマットビデオデータのサンプルの輝度成分がしきい値よりも小さいとき、
黒またはグレーに対応する値として前記FCCフォーマットビデオデータの前記色度成分を設定すること、または
前記FCCフォーマットビデオデータの前記サンプルの前記色度成分のある範囲内の隣接サンプルの色度成分の平均として前記サンプルの前記色度成分を設定すること
のうちの1つを実行することに少なくとも部分的によってFCCフォーマットビデオデータの前記サンプルの対応する色度成分を調整することを備える、C10に記載の方法。
[C15] 前記しきい値が、前記HDRおよびWCGビデオデータの統計値に基づいて導出されるかまたは固定される、C14に記載の方法。
[C16] 前記FCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記FCCフォーマットビデオデータが、第2の色度成分を備え、
前記FCCフォーマットビデオデータの前記色度成分を調整することが、前記第1の色度成分と前記第2の色度成分との両方を一緒に調整することまたは前記第1の色度成分と前記第2の色度成分との各々を別個に調整することのうちの1つを備える、
C10に記載の方法。
[C17] 前記FCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記FCCフォーマットビデオデータが、第2の色度成分を備え、
1つまたは複数の適応TFを使用して前記FCCフォーマットビデオデータの前記調整された色度成分を圧縮することが、前記FCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に同じTFを適用すること、または前記FCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に異なるTFを適用することのうちの1つを備える、
C10に記載の方法。
[C18] 前記FCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記FCCフォーマットビデオデータが、第2の色度成分を備え、
1つまたは複数の適応TFを使用して前記FCCフォーマットビデオデータの前記調整された色度成分を圧縮することが、
前記FCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に対数様TFを適用すること、または
前記FCCフォーマットビデオデータの輝度成分だけに対数様TFを適用し、前記輝度成分のレベルに応じて、前記FCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分とに適応線形TFを適用すること
のうちの1つを備える、
C10に記載の方法。
[C19] ビデオデータを処理する前記方法が、ビデオ符号化のためにビデオデータを前処理する方法を備え、前記方法が、
ビデオエンコーダにおいて前記適応TFおよび前記色度成分調整のための関連するパラメータと前記FCCフォーマットビデオデータとを推定することと、
符号化ビットストリーム中で前記ビデオエンコーダからビデオデコーダに前記FCCフォーマットビデオデータおよび関連するパラメータをシグナリングすることと
をさらに備える、C10に記載の方法。
[C20] ビデオデータを処理する前記方法が、ビデオ符号化のためにビデオデータを前処理する方法を備え、前記方法が、
第1の色表現フォーマットから第2の色表現フォーマットに前記HDRおよびWCGビデオデータの前記色度成分を変換することと、
前記第2の色表現フォーマットの前記色度成分を前記FCCフォーマットビデオデータに変換することと、
量子化されたFCCフォーマットビデオデータを生成するために、前記圧縮されたFCCフォーマットビデオデータを量子化することと、
ビデオ符号化されるべき前処理されたビデオデータを取得するために、前記量子化されたFCCフォーマットビデオデータをダウンサンプリングすることと
を備える、C10に記載の方法。
[C21] ビデオデータを処理するように構成されたデバイスであって、
圧縮されたフラクショナル色度座標(FCC)フォーマットビデオデータを記憶するように構成されたメモリと、
圧縮解除されたFCCフォーマットビデオデータを取得するために、1つまたは複数の逆適応伝達関数(TF)を使用して前記圧縮されたFCCフォーマットビデオデータを逆圧縮することと、
逆調整されたFCCフォーマットビデオデータを取得するために、前記圧縮解除されたFCCフォーマットビデオデータの対応する輝度成分に基づいて前記圧縮解除されたFCCフォーマットビデオデータの色度成分を逆調整することと、
ハイダイナミックレンジ(HDR)および広色域(WCG)ビデオデータを取得するために、前記FCCフォーマットから色表現フォーマットに前記逆調整されたFCCフォーマットビデオデータの前記色度成分を変換することと
を行うように構成されたプロセッサと
を備えるデバイス。
[C22] 前記圧縮されたFCCフォーマットビデオデータを取得するために、ビットストリームをビデオ復号するように構成されたビデオデコーダ、
ここにおいて、前記プロセッサが、
アップサンプリングされ圧縮されたFCCフォーマットビデオデータを取得するために、前記圧縮されたFCCフォーマットビデオデータの色度成分をアップサンプリングすることと、
前記圧縮されたFCCフォーマットビデオデータを取得するために、前記アップサンプリングされ圧縮されたFCCフォーマットビデオデータを逆量子化することと
を行うようにさらに構成された、
をさらに備える、C21に記載のデバイス。
[C23] 前記色表現フォーマットが、RGB色空間またはXYZ色空間のうちの1つを備え、
前記FCCフォーマットビデオデータが、前記HDRおよびWCGビデオデータに基づいて適応されるFCC色空間またはYu’v’色空間を備える、
C21に記載のデバイス。
[C24] 前記プロセッサが、前記圧縮解除されたFCCフォーマットビデオデータのサンプルの前記輝度成分がしきい値よりも小さいとき、前記圧縮解除されたFCCフォーマットビデオデータの前記サンプルの前記色度成分を、前記圧縮解除されたFCCフォーマットビデオデータに関連するビットストリーム中でシグナリングされる値に設定することによって、前記圧縮解除されたFCCフォーマットビデオデータの前記サンプルの前記対応する色度成分を調整することを行うように構成された、C21に記載のデバイス。
[C25] 前記しきい値が、前記HDRおよびWCGビデオデータの統計値に基づいて導出されるかまたは固定される、C24に記載のデバイス。
[C26] 前記圧縮されたFCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記圧縮されたFCCフォーマットビデオデータが、第2の色度成分を備え、
前記プロセッサが、
前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に逆対数様TFを適用すること、または
前記圧縮されたFCCフォーマットビデオデータの輝度成分だけに逆対数様TFを適用し、前記輝度成分のレベルに応じて、前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分とに逆適応線形TFを適用すること
のうちの1つを実行するように構成された、
C21に記載のデバイス。
[C27] ビデオデータを処理するように構成されたデバイスであって、
ハイダイナミックレンジ(HDR)および広色域(WCG)ビデオデータを記憶するように構成されたメモリと、
色表現フォーマットとフラクショナル色度座標(FCC)フォーマットとの間でHDRおよびWCGビデオデータの色度成分を変換することと、
調整されたFCCフォーマットビデオデータを取得するために、前記FCCフォーマットビデオデータの対応する輝度成分に基づいて前記FCCフォーマットビデオデータの色度成分を調整することと、
圧縮されたFCCフォーマットビデオデータを取得するために、1つまたは複数の適応伝達関数(TF)を使用して前記FCCフォーマットビデオデータを圧縮することと
を行うように構成されたプロセッサと
を備えるデバイス。
[C28] 前記プロセッサが、
量子化されたFCCフォーマットビデオデータを取得するために、前記圧縮されたFCCフォーマットビデオデータを量子化することと、
符号化されるべき前処理されたビデオデータを取得するために、前記量子化されたFCCフォーマットビデオデータをサブサンプリングすることと
を行うようにさらに構成された、C27に記載のデバイス。
[C29] 前記適応TFおよび前記調整のための関連するパラメータと前記圧縮されたFCCフォーマットビデオデータとを推定することと、
符号化ビットストリーム中で前記ビデオエンコーダからビデオデコーダに前記圧縮されたFCCフォーマットビデオデータおよび前記関連するパラメータをシグナリングすることと
を行うように構成されたビデオエンコーダをさらに備える、C27に記載のデバイス。
[C30] 前記プロセッサが、
第1の色表現フォーマットから第2の色表現フォーマットに前記HDRおよびWCGビデオデータの前記色度成分を変換することと、
前記第2の色表現フォーマットの前記色度成分を前記FCCフォーマットビデオデータに変換することと、
量子化されたFCCフォーマットビデオデータを生成するために、前記圧縮されたFCCフォーマットビデオデータを量子化することと、
ビデオ符号化されるべき前処理されたビデオデータを取得するために、前記量子化されたFCCフォーマットビデオデータをダウンサンプリングすることと
を行うようにさらに構成された、C27に記載のデバイス。
Claims (15)
- ビデオデータを処理する方法であって、
圧縮解除されたフラクショナル色度座標(FCC)フォーマットビデオデータを取得するために、1つまたは複数の逆適応伝達関数(TF)を使用して、圧縮されたFCCフォーマットビデオデータを逆圧縮することと、
逆調整されたFCCフォーマットビデオデータを取得するために、前記圧縮解除されたFCCフォーマットビデオデータの対応する輝度成分がしきい値よりも低いとき、前記圧縮解除されたFCCフォーマットビデオデータの色度成分を逆調整することと、ここにおいて、前記色度成分を逆調整することは、前記色度成分を、前記圧縮解除されたFCCフォーマットビデオデータに関連するビットストリーム中でシグナリングされる値に設定することを備える、
ハイダイナミックレンジ(HDR)および広色域(WCG)ビデオデータを取得するために、前記逆調整されたFCCフォーマットビデオデータの前記色度成分を色表現フォーマットに変換することと
を備える方法。 - 前記圧縮されたFCCフォーマットビデオデータをビデオ復号することと、
アップサンプリングされ圧縮されたFCCフォーマットビデオデータを取得するために、前記復号され圧縮されたFCCフォーマットビデオデータの色度成分をアップサンプリングすることと、
前記圧縮されたFCCフォーマットビデオデータを取得するために、前記アップサンプリングされ圧縮されたFCCフォーマットビデオデータを逆量子化することと
をさらに備える、請求項1に記載の方法。 - 前記色表現フォーマットが、RGB色空間またはXYZ色空間のうちの1つを備え、 前記圧縮されたFCCフォーマットビデオデータが、前記HDRおよびWCGビデオデータに基づいて適応されるFCC色空間またはYu’v’色空間を備える、または
前記しきい値が、前記HDRおよびWCGビデオデータの統計値に基づいて導出されるかまたは固定される、または
前記逆調整されたFCCフォーマットビデオデータの前記色度成分を第2の色表現フォーマットに変換することと、前記HDRおよびWCGビデオデータを取得するために、前記第2の色表現フォーマットの前記色度成分を第1の色表現フォーマットに変換することと、をさらに備える、
請求項1に記載の方法。 - 前記圧縮解除されたFCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記圧縮解除されたFCCフォーマットビデオデータが、第2の色度成分を備え、
前記圧縮解除されたFCCフォーマットビデオデータの前記色度成分を逆調整することが、前記第1の色度成分と前記第2の色度成分との両方を一緒に逆調整することまたは前記第1の色度成分と前記第2の色度成分との各々を別個に調整することのうちの1つを備える、
請求項1に記載の方法。 - 前記圧縮されたFCCフォーマットビデオデータの色度成分が、第1の色度成分および第2の色度成分を備え、
1つまたは複数の逆適応TFを使用して前記圧縮されたFCCフォーマットビデオデータを逆圧縮することが、前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に同じ逆適応TFを適用すること、または前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に異なる逆適応TFを適用することのうちの1つを備える、
請求項1に記載の方法。 - 前記圧縮されたFCCフォーマットビデオデータの色度成分が、第1の色度成分および第2の色度成分を備え、
前記圧縮されたFCCフォーマットビデオデータを逆圧縮することが、1つまたは複数の逆適応TFを使用して前記圧縮されたFCCフォーマットビデオデータを逆圧縮することを備え、ここにおいて、前記1つまたは複数の逆適応TFを使用することが、
逆対数様TFを前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に適用すること、または
前記圧縮されたFCCフォーマットビデオデータの輝度成分だけに逆対数様TFを適用し、前記圧縮解除した輝度成分のレベルに応じて、前記圧縮されたFCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分とに逆適応線形TFを適用すること
のうちの1つを備える、
請求項1に記載の方法。 - ビデオデータを処理する方法であって、
フラクショナル色度座標(FCC)フォーマットビデオデータを取得するために、色表現フォーマットとFCCフォーマットとの間でハイダイナミックレンジ(HDR)および広色域(WCG)ビデオデータの色度成分を変換することと、
調整されたFCCフォーマットビデオデータを取得するために、前記FCCフォーマットビデオデータの対応する輝度成分がしきい値よりも低いとき、前記FCCフォーマットビデオデータの色度成分を調整することと、ここにおいて、前記色度成分を調整することは、黒またはグレーに対応する値に前記色度成分を設定すること、または、前記色度成分のある範囲内の隣接サンプルの色度成分の平均に前記色度成分を設定すること、を備え、前記しきい値が、前記HDRおよびWCGビデオデータの統計値に基づいて導出されるかまたは固定される、
圧縮されたFCCフォーマットビデオデータを取得するために、1つまたは複数の適応伝達関数(TF)を使用して、前記調整されたFCCフォーマットビデオデータを圧縮することと、
を備える方法。 - 量子化されたFCCフォーマットビデオデータを取得するために、前記圧縮されたFCCフォーマットビデオデータを量子化することと、
符号化されるべき前処理されたビデオデータを取得するために、前記量子化されたFCCフォーマットビデオデータをサブサンプリングすることと
をさらに備える、請求項7に記載の方法。 - 前記色表現フォーマットが、RGB色空間またはXYZ色空間のうちの1つを備え、前記FCCフォーマットビデオデータが、前記HDRおよびWCGビデオデータに基づいて適応されるFCC色空間またはYu’v’色空間を備える、または
前記FCCフォーマットビデオデータが範囲を超えるのを防止するために前記FCCフォーマットビデオデータを処理することをさらに備える、または
ビデオエンコーダにおいて推定される前記適応TFおよび前記色度成分調整のための関連するパラメータと前記FCCフォーマットビデオデータとを指定することと、符号化ビットストリーム中で前記ビデオエンコーダからビデオデコーダに前記FCCフォーマットビデオデータおよび関連するパラメータをシグナリングすることと、をさらに備える、
請求項7に記載の方法。 - 前記FCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記FCCフォーマットビデオデータが、第2の色度成分を備え、
前記FCCフォーマットビデオデータの前記色度成分を調整することが、前記第1の色度成分と前記第2の色度成分との両方を一緒に調整することまたは前記第1の色度成分と前記第2の色度成分との各々を別個に調整することのうちの1つを備える、
請求項7に記載の方法。 - 前記FCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記FCCフォーマットビデオデータが、第2の色度成分を備え、
1つまたは複数の適応TFを使用して、前記FCCフォーマットビデオデータの前記調整された色度成分を圧縮することが、前記FCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に同じTFを適用すること、または前記FCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に異なるTFを適用することのうちの1つを備える、
請求項7に記載の方法。 - 前記FCCフォーマットビデオデータの前記色度成分が、第1の色度成分を備え、
前記FCCフォーマットビデオデータが、第2の色度成分を備え、
1つまたは複数の適応TFを使用して、前記FCCフォーマットビデオデータの前記調整された色度成分を圧縮することが、
前記FCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分との各々に対数様TFを適用すること、または、
前記FCCフォーマットビデオデータの輝度成分だけに対数様TFを適用し、前記輝度成分のレベルに応じて、前記FCCフォーマットビデオデータの前記第1の色度成分と前記第2の色度成分とに適応線形TFを適用すること
のうちの1つを備える、請求項7に記載の方法。 - ビデオデータを処理する前記方法が、ビデオ符号化のためにビデオデータを前処理する方法を備え、前記方法が、
第1の色表現フォーマットから第2の色表現フォーマットに前記HDRおよびWCGビデオデータの前記色度成分を変換することと、
前記第2の色表現フォーマットの前記色度成分を前記FCCフォーマットビデオデータに変換することと、
量子化されたFCCフォーマットビデオデータを生成するために、前記圧縮されたFCCフォーマットビデオデータを量子化することと、
ビデオ符号化されるべき前処理されたビデオデータを取得するために、前記量子化されたFCCフォーマットビデオデータをダウンサンプリングすることと
を備える、請求項7に記載の方法。 - ビデオデータを処理するように構成されたデバイスであって、
圧縮されたフラクショナル色度座標(FCC)フォーマットビデオデータを記憶するように構成されたメモリと、
圧縮解除されたFCCフォーマットビデオデータを取得するために、1つまたは複数の逆適応伝達関数(TF)を使用して、前記圧縮されたFCCフォーマットビデオデータを逆圧縮することと、
逆調整されたFCCフォーマットビデオデータを取得するために、前記圧縮解除されたFCCフォーマットビデオデータの対応する輝度成分がしきい値よりも低いとき、前記圧縮解除されたFCCフォーマットビデオデータの色度成分を逆調整することと、ここにおいて、前記色度成分を逆調整することは、前記色度成分を、前記圧縮解除されたFCCフォーマットビデオデータに関連するビットストリーム中でシグナリングされる値に設定することを備える、
ハイダイナミックレンジ(HDR)および広色域(WCG)ビデオデータを取得するために、前記逆調整されたFCCフォーマットビデオデータの前記色度成分を色表現フォーマットに変換することと
を行うように構成されたプロセッサと
を備えるデバイス。 - ビデオデータを処理するように構成されたデバイスであって、
ハイダイナミックレンジ(HDR)および広色域(WCG)ビデオデータを記憶するように構成されたメモリと、
フラクショナル色度座標(FCC)フォーマットビデオデータを取得するために、色表現フォーマットとFCCフォーマットとの間でHDRおよびWCGビデオデータの色度成分を変換することと、
調整されたFCCフォーマットビデオデータを取得するために、前記FCCフォーマットビデオデータの対応する輝度成分がしきい値よりも低いとき、前記FCCフォーマットビデオデータの色度成分を調整することと、ここにおいて、前記色度成分を調整することは、黒またはグレーに対応する値に前記色度成分を設定すること、または、前記色度成分のある範囲内の隣接サンプルの色度成分の平均に前記色度成分を設定すること、を備え、前記しきい値が、前記HDRおよびWCGビデオデータの統計値に基づいて導出されるかまたは固定される、
圧縮されたFCCフォーマットビデオデータを取得するために、1つまたは複数の適応伝達関数(TF)を使用して、前記調整されたFCCフォーマットビデオデータを圧縮することと
を行うように構成されたプロセッサと
を備えるデバイス。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201562172724P | 2015-06-08 | 2015-06-08 | |
US62/172,724 | 2015-06-08 | ||
US15/176,014 | 2016-06-07 | ||
US15/176,014 US10397585B2 (en) | 2015-06-08 | 2016-06-07 | Processing high dynamic range and wide color gamut video data for video coding |
PCT/US2016/036488 WO2016200977A1 (en) | 2015-06-08 | 2016-06-08 | Processing high dynamic range and wide color gamut video data for video coding |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018524871A JP2018524871A (ja) | 2018-08-30 |
JP2018524871A5 JP2018524871A5 (ja) | 2019-06-27 |
JP6800896B2 true JP6800896B2 (ja) | 2020-12-16 |
Family
ID=57452647
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017563300A Active JP6800896B2 (ja) | 2015-06-08 | 2016-06-08 | ビデオコーディングのためにハイダイナミックレンジおよび広色域ビデオデータを処理すること |
Country Status (7)
Country | Link |
---|---|
US (2) | US10397585B2 (ja) |
EP (1) | EP3304911A1 (ja) |
JP (1) | JP6800896B2 (ja) |
KR (1) | KR102670598B1 (ja) |
CN (2) | CN107710758B (ja) |
TW (1) | TW201711473A (ja) |
WO (1) | WO2016200977A1 (ja) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10244245B2 (en) * | 2015-06-08 | 2019-03-26 | Qualcomm Incorporated | Content-adaptive application of fixed transfer function to high dynamic range (HDR) and/or wide color gamut (WCG) video data |
US10284863B2 (en) | 2015-06-08 | 2019-05-07 | Qualcomm Incorporated | Adaptive constant-luminance approach for high dynamic range and wide color gamut video coding |
US10397585B2 (en) | 2015-06-08 | 2019-08-27 | Qualcomm Incorporated | Processing high dynamic range and wide color gamut video data for video coding |
JP6532962B2 (ja) * | 2015-06-09 | 2019-06-19 | 華為技術有限公司Huawei Technologies Co.,Ltd. | 画像符号化方法、画像復号方法、符号化デバイス、および復号デバイス |
US10116938B2 (en) * | 2015-07-22 | 2018-10-30 | Arris Enterprises Llc | System for coding high dynamic range and wide color gamut sequences |
JP6416060B2 (ja) * | 2015-09-02 | 2018-10-31 | 株式会社東芝 | 画像圧縮装置、画像伸張装置および画像伝送システム |
AU2015261734A1 (en) * | 2015-11-30 | 2017-06-15 | Canon Kabushiki Kaisha | Method, apparatus and system for encoding and decoding video data according to local luminance intensity |
CN105472366B (zh) * | 2015-12-07 | 2016-11-02 | 京东方科技集团股份有限公司 | 基于心理视觉调制的图像处理方法、装置及显示设备 |
US10257394B2 (en) | 2016-02-12 | 2019-04-09 | Contrast, Inc. | Combined HDR/LDR video streaming |
US10264196B2 (en) | 2016-02-12 | 2019-04-16 | Contrast, Inc. | Systems and methods for HDR video capture with a mobile device |
JP7081835B2 (ja) | 2016-08-09 | 2022-06-07 | コントラスト, インコーポレイテッド | 車両制御のためのリアルタイムhdrビデオ |
JP6822121B2 (ja) * | 2016-12-19 | 2021-01-27 | ソニー株式会社 | 画像処理装置、画像処理方法及びプログラム |
WO2018190446A1 (ko) * | 2017-04-13 | 2018-10-18 | 삼성전자 주식회사 | 영상 처리 방법 및 장치 |
US9986200B1 (en) * | 2017-05-11 | 2018-05-29 | Novatek Microelectronics Corp. | Method and video conversion system of updating video setting |
US10873763B2 (en) * | 2017-06-02 | 2020-12-22 | Apple Inc. | Video compression techniques for high dynamic range data |
TWI650998B (zh) * | 2017-12-15 | 2019-02-11 | 晨星半導體股份有限公司 | 應用在機上盒的格式轉換電路及相關的方法 |
TWI633537B (zh) * | 2018-02-12 | 2018-08-21 | 友達光電股份有限公司 | 影像優化方法 |
US11153579B2 (en) * | 2018-03-23 | 2021-10-19 | Qualcomm Incorporated | Deriving dynamic range adjustment (DRA) parameters for video coding |
US10951888B2 (en) | 2018-06-04 | 2021-03-16 | Contrast, Inc. | Compressed high dynamic range video |
US11423514B2 (en) * | 2018-08-14 | 2022-08-23 | Contrast, Inc. | Image processing noise reduction |
CN113994689A (zh) * | 2019-03-20 | 2022-01-28 | 威诺瓦国际有限公司 | 信号增强编码中的残差滤波 |
CN112434781A (zh) * | 2019-08-26 | 2021-03-02 | 上海寒武纪信息科技有限公司 | 用于处理数据的方法、装置以及相关产品 |
WO2023144091A1 (en) * | 2022-01-31 | 2023-08-03 | Interdigital Vc Holdings France, Sas | Method for limiting effects of quantization in a color gamut modification process applied to a video content |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62220087A (ja) | 1986-03-20 | 1987-09-28 | Minolta Camera Co Ltd | 色ノイズ抑制装置 |
DE3629396C2 (de) * | 1986-08-29 | 1993-12-23 | Agfa Gevaert Ag | Verfahren zur elektronischen Bildverarbeitung |
GB9024978D0 (en) * | 1990-11-16 | 1991-01-02 | Rank Cintel Ltd | Digital mirror spatial light modulator |
US7567722B2 (en) | 2005-03-22 | 2009-07-28 | Qualcomm Incorporated | Dynamically scaled file encoding |
US9179046B1 (en) * | 2006-04-28 | 2015-11-03 | Ambarella, Inc. | Camera with high-quality still capture during continuous video capture |
US8498332B2 (en) * | 2006-09-21 | 2013-07-30 | Qualcomm Incorporated | Chroma supression features |
US7692562B1 (en) | 2006-10-18 | 2010-04-06 | Hewlett-Packard Development Company, L.P. | System and method for representing digital media |
JP5589006B2 (ja) * | 2009-03-13 | 2014-09-10 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 高ダイナミックレンジ、視覚ダイナミックレンジ及び広色域のビデオの階層化圧縮 |
CN101778246B (zh) * | 2010-01-29 | 2014-04-02 | 华为终端有限公司 | 多画面视频图像处理方法和装置 |
US9807401B2 (en) * | 2011-11-01 | 2017-10-31 | Qualcomm Incorporated | Transform unit partitioning for chroma components in video coding |
US9129445B2 (en) | 2012-03-14 | 2015-09-08 | Dolby Laboratories Licensing Corporation | Efficient tone-mapping of high-bit-depth video to low-bit-depth display |
JP5977565B2 (ja) * | 2012-04-16 | 2016-08-24 | オリンパス株式会社 | 画像処理装置 |
CN102761745B (zh) | 2012-07-12 | 2015-07-22 | 国家计算机网络与信息安全管理中心 | 解码方法和解码设备 |
CN104583876A (zh) | 2012-08-24 | 2015-04-29 | 佳能株式会社 | 黄色调色剂和黄色调色剂的制造方法 |
KR102157032B1 (ko) | 2013-02-21 | 2020-09-18 | 돌비 레버러토리즈 라이쎈싱 코오포레이션 | 고 동적 범위 비디오에 대한 디스플레이 관리 |
JP6038360B2 (ja) * | 2013-06-17 | 2016-12-07 | ドルビー ラボラトリーズ ライセンシング コーポレイション | エンハンストダイナミックレンジ信号の階層符号化のための適応的再構成 |
CN104519370B (zh) | 2013-09-29 | 2018-06-08 | 中国电信股份有限公司 | 一种视频流的拼接方法和系统 |
WO2015052935A1 (en) | 2013-10-11 | 2015-04-16 | Sharp Kabushiki Kaisha | Color information and chromaticity signaling |
US9544560B2 (en) | 2015-01-09 | 2017-01-10 | Vixs Systems, Inc. | Dynamic range converter with generic architecture and methods for use therewith |
WO2016172394A1 (en) * | 2015-04-21 | 2016-10-27 | Arris Enterprises Llc | Adaptive perceptual mapping and signaling for video coding |
US10284863B2 (en) | 2015-06-08 | 2019-05-07 | Qualcomm Incorporated | Adaptive constant-luminance approach for high dynamic range and wide color gamut video coding |
US10397585B2 (en) | 2015-06-08 | 2019-08-27 | Qualcomm Incorporated | Processing high dynamic range and wide color gamut video data for video coding |
US10116938B2 (en) | 2015-07-22 | 2018-10-30 | Arris Enterprises Llc | System for coding high dynamic range and wide color gamut sequences |
-
2016
- 2016-06-07 US US15/176,014 patent/US10397585B2/en active Active
- 2016-06-08 EP EP16730661.2A patent/EP3304911A1/en not_active Withdrawn
- 2016-06-08 CN CN201680031281.4A patent/CN107710758B/zh not_active Expired - Fee Related
- 2016-06-08 JP JP2017563300A patent/JP6800896B2/ja active Active
- 2016-06-08 KR KR1020177034949A patent/KR102670598B1/ko active IP Right Grant
- 2016-06-08 TW TW105118292A patent/TW201711473A/zh unknown
- 2016-06-08 CN CN201910859786.5A patent/CN110933431B/zh active Active
- 2016-06-08 WO PCT/US2016/036488 patent/WO2016200977A1/en active Search and Examination
-
2019
- 2019-07-09 US US16/506,723 patent/US10666957B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20190335184A1 (en) | 2019-10-31 |
US20160360213A1 (en) | 2016-12-08 |
KR102670598B1 (ko) | 2024-05-29 |
US10666957B2 (en) | 2020-05-26 |
CN110933431A (zh) | 2020-03-27 |
CN107710758B (zh) | 2020-01-10 |
WO2016200977A1 (en) | 2016-12-15 |
JP2018524871A (ja) | 2018-08-30 |
CN110933431B (zh) | 2023-09-15 |
EP3304911A1 (en) | 2018-04-11 |
US10397585B2 (en) | 2019-08-27 |
KR20180017009A (ko) | 2018-02-20 |
CN107710758A (zh) | 2018-02-16 |
TW201711473A (zh) | 2017-03-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6800896B2 (ja) | ビデオコーディングのためにハイダイナミックレンジおよび広色域ビデオデータを処理すること | |
JP6780054B2 (ja) | マルチレイヤビデオコーディングにおける3次元ルックアップテーブルベースの色域スケーラビリティ | |
CN111194551B (zh) | 利用内容自适应空间变化量化的视频译码 | |
TWI755363B (zh) | 用於高動態範圍及廣色域視訊寫碼之補充增強資訊(sei)訊息 | |
JP7369124B2 (ja) | 結合されたピクセル/変換ベースの量子化を用いたビデオコーディングのための量子化パラメータ制御 | |
TWI654875B (zh) | 於多層視訊寫碼中用於色彩色域可擴展性之3d查找表之發信色彩值 | |
CN107690808B (zh) | 可缩放视频译码中色域缩放性参数及表的推导 | |
US20160309154A1 (en) | Dynamic range adjustment for high dynamic range and wide color gamut video coding | |
JP2018525862A (ja) | 高ダイナミックレンジ及び広色域のビデオコード化のための適応一定輝度アプローチ | |
JP2021510964A (ja) | ビデオコーディングのための等しいレンジおよび他のdraパラメータのためのシグナリング機構 | |
JP6768516B2 (ja) | 色域スケーラビリティのための3d色予測のために参照レイヤを信号伝達すること | |
TWI765903B (zh) | 用於循環樣本處理之視訊寫碼工具 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190521 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190521 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200318 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200421 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200603 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201027 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201125 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6800896 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |