JP7418478B2 - クロマ残差スケーリングのためのシンタックス要素 - Google Patents
クロマ残差スケーリングのためのシンタックス要素 Download PDFInfo
- Publication number
- JP7418478B2 JP7418478B2 JP2021576244A JP2021576244A JP7418478B2 JP 7418478 B2 JP7418478 B2 JP 7418478B2 JP 2021576244 A JP2021576244 A JP 2021576244A JP 2021576244 A JP2021576244 A JP 2021576244A JP 7418478 B2 JP7418478 B2 JP 7418478B2
- Authority
- JP
- Japan
- Prior art keywords
- luma
- block
- chroma
- video
- samples
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 241000023320 Luma <angiosperm> Species 0.000 claims description 358
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical group COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims description 358
- 238000000034 method Methods 0.000 claims description 210
- 230000008569 process Effects 0.000 claims description 44
- 238000012545 processing Methods 0.000 claims description 30
- 238000006243 chemical reaction Methods 0.000 claims description 13
- 230000009466 transformation Effects 0.000 claims description 12
- 230000015654 memory Effects 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 7
- 238000012935 Averaging Methods 0.000 claims description 6
- 230000006978 adaptation Effects 0.000 claims 4
- 239000000523 sample Substances 0.000 description 88
- 238000005192 partition Methods 0.000 description 43
- 239000013598 vector Substances 0.000 description 37
- 238000013507 mapping Methods 0.000 description 35
- 230000001419 dependent effect Effects 0.000 description 28
- 230000006870 function Effects 0.000 description 25
- 238000009795 derivation Methods 0.000 description 16
- 238000004590 computer program Methods 0.000 description 12
- 230000000007 visual effect Effects 0.000 description 12
- 230000009977 dual effect Effects 0.000 description 9
- 239000013074 reference sample Substances 0.000 description 9
- 238000001914 filtration Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 8
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 6
- 230000003044 adaptive effect Effects 0.000 description 5
- 230000002457 bidirectional effect Effects 0.000 description 5
- 238000010276 construction Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000012821 model calculation Methods 0.000 description 4
- 230000011664 signaling Effects 0.000 description 4
- 230000002123 temporal effect Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000013515 script Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 239000011449 brick Substances 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 238000012886 linear function Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000010187 selection method Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- IESVDEZGAHUQJU-ZLBXKVHBSA-N 1-hexadecanoyl-2-(4Z,7Z,10Z,13Z,16Z,19Z-docosahexaenoyl)-sn-glycero-3-phosphocholine Chemical compound CCCCCCCCCCCCCCCC(=O)OC[C@H](COP([O-])(=O)OCC[N+](C)(C)C)OC(=O)CC\C=C/C\C=C/C\C=C/C\C=C/C\C=C/C\C=C/CC IESVDEZGAHUQJU-ZLBXKVHBSA-N 0.000 description 1
- 241001502919 Gambusia luma Species 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
- H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/96—Tree coding, e.g. quad-tree coding
Description
本出願は、2019年6月22日に出願された国際特許出願第PCT/CN2019/092433号の優先権および利益を主張する、2020年6月22日に出願された国際特許出願第PCT/CN2020/097374号に基づくものである。全ての上記の特許出願は、その全体が、ここにおいて参照により包含されている。
2.1.1 HEVC/H.265におけるイントラ予測
イントラ予測では、事前に考慮されたカラーチャネルで再構成されたサンプルを用いて、所与のトランスフォームブロック(transform block、TB)サンプルを作成する。イントラ予測モードはルマチャンネルとクロマチャンネルに対して別々に信号化(signaled)され、クロマチャンネルイントラ予測モードは'DM_CHROMA'モードを介してルマチャンネルイントラ予測モードに任意的に依存している。イントラ予測モードは、予測ブロック(prediction block、PB)レベルで信号化されるが、CUについて残差クワッドツリー階層に従って、イントラ予測プロセスがTBレベルで適用され、それにより、1つのTBのコード化がCU内の次のTBのコード化に影響することができ、そして、従って、基準値(reference values)として使用されるサンプルまでの距離を短縮している。
2.2.1 VVCコーディングアーキテクチャ
HEVCを超える将来のビデオコーディング技術を探求するため、共同ビデオ探査チーム(joint video explore team、JVET)が、2015年にVCEGとMPEGの共同によって設立された。JVETミーティングは、現在、四半期に1回開催されており、そして、新たなコーディング標準は、HEVCと比較して50%のビットレート低減を目指している。新たなビデオコーディング標準は、2018年4月のJVET会議でバーサタイルビデオコーディング(Versatile Video Coding、VVC)として正式に命名され、そして、VVCテストモデル(VTM)の最初のバージョンが、その時にリリースされた。VVC標準化に寄与する継続的な努力が行われているため、JVET会議のたびに新たなコーディング技術がVVC標準に採用されている。VVC作業原案(working draft)および試験モデルVTMが、次いで、毎回会議後に更新されている。VVCプロジェクトは、現在、2020年7月の会議で技術的完成(FDIS)を目指している。
ルマ成分(luma component)およびクロマ成分(chroma component)は、Iスライスに対して別々のパーティションツリーを有し得る。別々のツリーパーティションは、CTUレベルではなく、64×64ブロックレベル未満である。VTMソフトウェアでは、デュアルツリーのオンとオフを制御するSPSフラグが存在している。
2.2.3.1 67個のイントラ予測モード
自然のビデオにおいて提示された任意のエッジ方向をキャプチャするために、VTM4における方向イントラモードの数は、HEVCで使用されるように、33個から65個に拡張されている。HEVCには無い新たな方向モードは、図2において赤い点線の矢印として示されており、そして、平面モードおよびDCモードは同じままである。これらのより密度が高い方向イントラ予測モードは、全てのブロックサイズについて、および、ルマとクロマイントラ予測の両方について適用される。
クロスコンポーネント冗長性を低減するために、クロスコンポーネント線形モデル(CCLM)予測モードがVTM4において使用され、以下の線形モデルを使用することによって、同じCUの再構成ルマサンプルに基づいて、クロマサンプルが予測される。
predC(i,j)=α・recL’(i,j)+β
ここで、predC(i,j)は、CU内の予測クロマサンプルを表し、そして、recL’(i,j)は、ダウンサンプリングされた同じCUの再構成ルマサンプルを表す。線形モデルパラメータであるαおよびβは、2個のサンプルからのルマ値とクロマ値との間の関係から導出され、それらは、ダウンサンプリングされた隣接するルマサンプルのセット内で最小サンプル値および最大サンプルを有するルマサンプルであり、そして、それらに対応するクロマサンプルである。線形モデルパラメータαおよびβは、以下の式に従って獲得される。
DivTable[]={0、7、6、5、5、4、4、3、2、2、1、1、1、1、0}
以下の仕様は、JVET-M1001の修正作業原案およびJVET-N0271における採択に基づくものである。採用されたJVET-N0220の変更点は、太字および下線で示されている。
VTM4は、HEVCとは異なる多くのイントラコーディングツールを含む。例えば、以下の特徴が、ブロックツリー構造の上のVVCテストモデル3に含まれている。
・ワイドアングルモード拡張を伴う67個のイントラモード
・ブロックサイズおよびモード依存4タップ補間フィルタ
・位置依存型イントラ予測結合(position dependent intra prediction combination、PDPC)
・クロスコンポーネント線形モデルイントラ予測
・多基準線(multi-reference line)イントラ予測
・イントラサブパーティション
2.2.4.1 インター予測とイントラ予測の結合(combined inter and intra prediction、CIIP)
VTM4では、CUがマージモードでコード化されるとき、かつ、CUが少なくとも64個のルマサンプル(すなわち、CU幅×CU高さが64以上)を含む場合、現在CUに結合された結合インター/イントラ予測(CIIP)モードが適用されるかを示すために追加フラグが信号化される。
VTM4は、HEVCとは異なる多くのコーディングツールを含んでいる。例えば、以下の特徴が、ブロックツリー構造の上のVVCテストモデル3に含まれている。
・アフィン運動インター予測
・サブブロックベースの時間的動きベクトル予測
・適応動きベクトル分解能(resolution)
・時間的動き予測のための8×8ブロックベースの動き圧縮
・高精度(1/16 pel)動きベクトルストレージ、および、ルマ成分について8タップ補間フィルタとクロマ成分について4タップ補間フィルタも用いた動き補正
・三角形パーティション
・イントラ予測とインター予測の結合
・MVDとのマージ(MMVD)
・対称MVDコーディング
・双方向の光学的フロー
・デコーダ側の動きベクトル精緻化
・双予測(bi-predictive)加重平均
VTM4には、合計3個のループ内フィルタ(in-loop filter)が存在する。デブロッキングフィルタおよびSAO(HEVCにおける2つのループフィルタ)の他に、適応ループフィルタ(adaptive loop filter、ALF)がVTM4において適用される。VTM4におけるフィルタリングプロセスの順序は、デブロッキングフィルタ、SAO、そしてALFである。
VTM4では、クロマスケーリングを用いたルママッピング(LMCS)と呼ばれるコーディングツールが、ループフィルタの前に新たな処理ブロックとして追加されている。LMCSは2個の主要なコンポーネントを有している。1)適応区分(piecewise)線形モデルに基づくルマ成分のループ内マッピング、2)クロマ成分に対して、ルマ依存クロマ残差スケーリングが適用されること、である。図4は、デコーダの視点からのLMCSアーキテクチャを示している。図4における点線のブロックは、マップされたドメイン内で処理が適用されるところを示しており、そして、これらは、逆量子化、逆変換、ルマ・イントラ予測、および、ルマ予測をルマ残差と共に加算すること、を含む。図におけるシェーディングされていないブロックは、処理が元の(すなわち、マップされていない)ドメインにおいて適用されるところを示しており、そして、これらは、デブロッキング、ALF、およびSAOといったループフィルタ、動き補償予測、クロマ・イントラ予測、クロマ予測をクロマ残差と共に加算すること、および、参照ピクチャとしてデコードされた画像のストレージ、を含む。図4においてクロスハッチでシェーディングされたブロックは、新たなLMCS機能ブロックであり、ルマ信号の順方向(forward)および逆方向(inverse)マッピング、並びに、ルマ依存クロマスケーリングプロセスを含んでいる。VVCにおける他のツールと同様に、LMCSは、SPSフラグを使用してシーケンスレベルでイネーブル/ディセーブルされ得る。
ルマ成分のループ内マッピングは、圧縮効率を改善するために、ダイナミックレンジにわたりコードワードを再配分することによって入力信号のダイナミックレンジを調整する。ルママッピングは、フォワードマッピング関数、FwdMap、および、対応する逆マッピング関数、InvMapを利用する。FwdMap関数は、16個の等しい区分を有する区分線形モデル(piecewise linear model)を使用して信号化される。InvMap関数は、信号化される必要はなく、そして、代わりにFwdMap関数から派生する。
1) OrgCW=64
2) i=0:16の場合、InputPivot[i]=i*OrgCW
3) i=0:16の場合、MappedPivot[i]は次のように計算される。
MappedPivot[0]=0;
for(i=0;i<16;i++)
MappedPivot[i+1]=MappedPivot[i]+SignalledCW[i]
ここで、SignaledCW[i]は、i番目のピースについて信号化されたコードワードの数である。
FwdMap(Ypred)=((b2-b1)/(a1-a2))*(Ypred-a1)+b1
クロマ残差スケーリングは、ルマ信号と対応するクロマ信号との間の相互作用を補償するように設計されている。クロマ残差スケーリングがイネーブルであるか否かは、また、タイルグループレベルでも信号化される。ルママッピングがイネーブルされており、かつ、デュアルツリーパーティション(分離クロマツリーとしても知られている)が現在タイルグループに適用されていない場合、ルマ依存クロマ残差スケーリングがイネーブルされているか否かを示すために、追加的なフラグが信号化される。ルママッピングが使用されない場合、または、デュアルツリーパーティションが現在タイルグループで使用される場合、ルマ依存クロマ残差スケーリングはディセーブルされる。さらに、ルマ依存クロマ残差スケーリングは、面積が4以下のクロマブロックについて、常にディスプレイされている。
1)InvMap関数に基づいて、avgY’が属する区分線形モデルのインデックスを求める。
2)CScaleinv=cScaleInv[YIdx] ここで、cScaleInv[]は、事前に計算された16ピースのLUTである。
現在ブロックが、イントラ、CIIP、またはイントラブロックコピー(IBC、別名、現在参照ピクチャ(current picture referencing)またはCPR)モードとしてコード化される場合、avgY’は、イントラ、CIIP、または、IBC予測ルマ値の平均として計算され、そうでなければ、avgY’は、フォワードマッピングされたインター予測ルマ値の平均として計算される(図4)。サンプルベースで実行される、ルママッピングとは異なり、CScaleinvは、クロマブロック全体について定数値である。クロマ残差スケーリングは、以下のように適用される。
エンコーダ側:CResScale=CRes*CScale=CRes/CScaleInv
デコーダ側:CRes=CResScale/CScale=CResScale*CScaleInv
以下の仕様は、JVET-M1001の修正作業原案およびJVET-N0220の採択に基づくものである。採用されたJVET-N0220の変更点は、太字および下線で示されている。
現在のLMCS/CCLMの設計には、以下といった問題があり得る。
1.LMCSコーディングツールにおいて、クロマ残差スケーリング因子は、共配置されたルマ予測ブロックの平均値によって導出され、これは、LMCSクロマ残差スケーリングにおけるクロマサンプルの処理のための待ち時間(latency)となる。
a)シングル/共有ツリーの場合、待ち時間は、(a)利用可能なルマブロック全体の全ての予測サンプルを待つこと、および、(b)(a)によって得られた全てのルマ予測サンプルを平均化すること、によって引き起こされる。
b)デュアル/分離ツリーの場合、Iスライスではルマ成分とクロマ成分の分離ブロックパーティション構造がイネーブルになっているため、待ち時間はさらに悪くなる。従って、1個のクロマブロックが複数のルマブロックに対応し、1個の4×4クロマブロックが64×64ルマブロックに対応し得る。従って、最悪の場合は、64×64ルマブロック全体の全ての予測サンプルが利用可能になるまで、現在の4×4クロマブロックのクロマ残差スケーリング因子を待つ必要があり得る。一言で言えば、デュアル/分離ツリーにおける待ち時間の問題は、はるかに深刻であろう。
2.CCLMコーディングツールにおいて、イントラクロマ予測のためのCCLMモデル計算はルマブロックおよびクロマブロックの両方の左と上の参照サンプルに依存する。そして、クロマブロックに対するCCLM予測は、同一CUに係る共に配置(collocated)されたルマ再構成サンプルに依存する。これは、デュアル/分離ツリーにおいて高い待ち時間を引き起こす。
・デュアル/分離ツリーの場合、1個の4×4クロマブロックは、64×64ルマブロックに対応し得る。従って、最悪の場合、現在クロマブロックのCCLMプロセスは、対応する64×64ルマブロック全体が再構成されるまで待つ必要がり得る。この待ち時間の問題は、デュアル/分離ツリーにおけるLMCSクロマスケーリングと同様である。
この問題に取り組むために、ルマ依存クロマ残差スケーリング、CCLM、および、異なる色成分からの情報に依存する他のコーディングツールにおけるクロスコンポーネント依存性を除去/低減/制限するためのいくつかの方法が提案されている。
LMCSのクロマスケーリング待ち時間の除去およびCCLMのモデル計算
1.インターコード化ブロックに対して、参照フレーム内の現在ブロックの1つまたは複数の参照サンプルを用いて、LMCSモードにおけるクロマ残差スケーリング因子を導出することができることが提案されている。
a)一例において、参照ルマサンプルは、クロマ残差スケーリング因子を導出するために直接使用され得る。
i.代替的に、補間は、まず、参照サンプルに適用され得る。そして、補間されたサンプルは、クロマ残差スケーリング因子を導出するために使用され得る。
ii.代替的に、異なる参照フレーム内の参照サンプルを使用して、クロマ残差スケーリング因子の導出に使用される最終参照サンプルを導出することができる。
1)一例において、双予測コード化ブロックに対して、上記の方法が適用されてよい。
iii.一例において、参照サンプルの強度は、クロマ残差スケーリング因子を導出するために使用される前に、再形成ドメインに変換されてよい。
iv.一例において、基準サンプルの線形結合を使用して、クロマ残差スケーリング因子を導出することができる。
1)例えば、a×S+bを用いてクロマ残差スケーリング因子を導出することができる。ここで、Sは参照サンプル、aおよびbはパラメータである。一例において、aおよびbは、局所照明補償(localized illuminate compensation)によって導出されてよい。
b)一例において、参照フレーム内の参照ルマサンプルの位置は、現在ブロックの動きベクトルに依存し得る。
i.一例において、参照サンプルは、参照ピクチャ内にあり、現在ルマブロックと同じ幅および高さを持つ参照ルマブロックに属する。参照ピクチャ内の参照ルマサンプルの位置は、現在ピクチャ内の対応するルマサンプルの位置として計算され、動きベクトルが加算される。
ii.一例において、参照ルマサンプルの位置は、参照フレーム内の対応するルマサンプルと呼ばれる、現在ルマブロックおよび現在ブロックの動きベクトルの左上(または中央、または右下)サンプルの位置によって導出される。
1)一例において、整数(integer)動きベクトルを使用して、参照フレーム内の対応するルマサンプルを導出することができる。一例において、1個のブロックに関連する動きベクトルは、ゼロに近づくように丸められるか、または、整数の動きベクトルを導出するためにゼロから丸められる。
2)代替的に、分数(fractional)動きベクトルを使用して、参照フレーム内の対応するルマサンプルを導出することができ、その結果、補間プロセスは、分数参照サンプルを導出するために必要とされ得る。
iii.代替的に、参照ルマサンプルの位置は、現在ルマブロックの左上(または中央、または右下)サンプルの位置によって導出される。
iv.代替的に、クロマ残差スケーリング因子を計算するために、参照フレーム内の事前に定義された位置で複数の対応するルマサンプルが選択(picked)されてよい。
c)一例において、複数参照ルマサンプルの中央値または平均値を使用して、クロマ残差スケーリング因子を導出することができる。
d)一例において、事前に定義された参照フレーム内の参照ルマサンプルを使用して、クロマ残差スケーリング因子を導出することができる。
i.一例において、事前に定義された参照フレームは、参照ピクチャリスト0の0に等しい参照インデックスを有するフレームであってよい。
ii.代替的に、事前に定義された参照フレームの参照インデックス及び/又は参照ピクチャリストは、シーケンス/ピクチャ/タイルグループ/スライス/タイル/CTU行/ビデオユニットレベルで信号化することができる。
iii.代替的に、複数の参照フレーム内の参照ルマサンプルを導出し、平均値または重み付け平均値を使用して、クロマ残差スケーリング因子を得ることができる。
2.LMCSモードにおけるルマサンプルからクロマ残差スケーリング因子を導出するか否か、および、導出する方法は、現在ブロックが双予測を適用するか否かに依存し得ることが提案されている。
a)一例において、クロマ残差スケーリング因子は、各予測方向に対して個別に導出される。
3.LMCSモードにおけるルマサンプルからクロマ残差スケーリング因子を導出するか否か、および、導出する方法は、現在ブロックがサブブロックベースの予測を適用するか否かに依存し得ることが提案されている。
a)一例において、サブブロックベースの予測はアフィン予測である。
b)一例において、サブブロックベースの予測は代替時間動きベクトル予測(Alternative Temporal Motion Vector Prediction、ATMVP)である。
c)一例において、クロマ残差スケーリング因子は、各サブブロックに対して個別に導出される。
d)一例において、クロマ残差スケーリング因子は、たとえそれがサブブロックによって予測されるとしても、ブロック全体に対して導出される。
i.一例において、1個の選択されたサブブロック(例えば、左上のサブブロック)の動きベクトルを使用して、黒丸(bullet)1に記載されるように、現在ブロックの参照サンプルを識別することができる。
4.クロマ残差スケーリング因子を導出するために使用されるルマ予測値は、最終ルマ予測値の代わりに中間ルマ予測値であり得ることが提案されている。
a)一例において、双方向の光学的フロー(Bi-Directional Optical Flow、BDOF、別名BIO)のプロセス前のルマ予測値を使用して、クロマ残差スケーリング因子を導出することができる。
b)一例において、デコーダ側動きベクトル精緻化(DMVR)のプロセス前のルマ予測値を使用して、クロマ残差スケーリング因子を導出することができる。
c)一例において、LICのプロセス前のルマ予測値を使用して、クロマ残差スケーリング因子を導出することができる。
d)一例において、JVET-N0236で提案されているように、予測精緻化光学的フロー(Prediction Refinement Optical Flow、PROF)のプロセス前のルマ予測値を用いて、クロマ残差スケーリング因子を導出することができる。
5.中間動きベクトルは、参照サンプルを同定するために使用され得る。
a)一例において、BDOF又は/及びDMVR又は/及び他のDMVD法のプロセス前の動きベクトルを使用して、参照サンプルを同定することができる。
b)一例において、JVET-N0236で提案されているように、予測精緻化光学的フロー(PROF)のプロセスの前の動きベクトルを使用して、参照サンプルを同定することができる。
6.現在ブロックがインターモードでコード化されている場合は、上記の方法が適用可能である。
7.IBCコーディングブロックに対して、現在フレームの参照ブロックにおける1つまたは複数の参照サンプルが、LMCSモードにおけるクロマ残差スケーリング因子を導出するために使用され得ることが提案されている。ブロックIBCコード化される場合、用語「動きベクトル(“motion vector”)」は、参照ピクチャが現在ピクチャとして設定されている、「ブロックベクトル(“block vector”)」とも呼ばれる。
a)一例において、参照サンプルは、現在ピクチャ内にあり、現在ブロックと同じ幅および高さを有する参照ブロックに属する。参照サンプルの位置は、その対応するサンプルの位置として、動きベクトルを加算して計算され得る。
b)一例において、参照ルマサンプルの位置は、動きベクトルを加算する現在ルマブロックの左上(または中央、または右下)サンプルの位置によって導出される。
c)代替的に、参照ルマサンプルの位置は、現在ブロックのブロックベクトルを加算する現在ルマブロックの左上(または中央、または右下)サンプルの位置によって導出され得る。
d)代替的に、現在ルマブロックの参照領域内の事前に定義された位置で複数の対応するルマサンプルを選択(pick)して、クロマ残差スケーリング因子を計算しすることができる。
e)一例において、複数の対応するルマサンプルが、クロマ残差スケーリング因子を導出する関数を用いて計算されてよい。
i.例えば、複数の対応するルマサンプルの中央値または平均値を計算して、クロマ残差スケーリング因子を導出することができる。
f)一例において、参照サンプルの強度は、クロマ残差スケーリング因子を導出するために使用される前に、再形成ドメインに変換されてよい。
i.代替的に、参照サンプルの強度は、クロマ残差スケーリング因子を導出するために使用される前に、元のドメインに変換されてよい
8.現在フレーム内の現在ルマブロックの特定された位置に置かれた1つまたは複数の予測/再構成されたサンプルが、LMCSモードにおける現在クロマブロックに対するクロマ残差スケーリング因子を導出するために使用され得ることが提案されている。
a)一例において、現在ブロックがインターコード化される場合、現在ルマブロックの中心に位置するルマ予測(または再構成)サンプルが、クロマ残差スケーリング因子を導出するために選択され得る。
b)一例において、第1のM×Nルマ予測(または再構成)サンプルの平均値は、クロマ残差スケーリング因子を導出するために選択されてよく、ここで、M×Nは、共配置されたルマブロックサイズの幅より小さくてよい。
9.CCLMモデルを計算するために用いるプロシージャの全部または一部は、LMCSモードにおける現在クロマブロックのクロマ残差スケーリング因子の導出に使用できることが提案されている。
a)一例において、CCLMモデルパラメータ導出プロセスにおける共配置されたルマブロックの隣接するルマサンプルの識別された位置に置かれた参照サンプルが、クロマ残差スケーリング因子を導出するために利用され得る。
i.一例において、これらの参照サンプルを直接使用することができる。
ii.代替的に、ダウンサンプリングがこれらの参照サンプルに適用されてよく、そして、ダウンサンプリングした参照サンプルが適用され得る。
b)一例において、CCLMモデル計算のために選択されたS個の参照サンプルのうちK個を、LMCSモードにおけるクロマ残差スケーリング因子の導出のために使用することができる。例えば、Kは1、Sは4である。
c)一例において、CCLMモードにおける共配置されたルマブロックの参照サンプルの平均/最小/最大値を、LMCSモードにおけるクロマ残差スケーリング因子の導出に使用することができる。
10.クロマ残差スケーリング因子の導出のためのサンプルの選択方法は、現在ブロックの符号化情報に依存し得る。
a)コード化された情報は、QP、コーディングモード、POC、イントラ予測モード、動き情報、などを含み得る。
b)一例として、IBCコード化ブロックまたは非IBCコード化ブロックでは、サンプルの選択方法が異なってよい。
c)一例において、サンプルの選択方法は、参照ピクチャと現在ピクチャとの間のPOC距離といった参照ピクチャ情報に基づいて異なってよい。
11.CCLMのクロマ残差スケーリング因子及び/又はモデル計算は、共配置されたルマブロックの左上サンプルをカバーする対応するルマブロックの隣接するサンプルに依存し得ることが提案されている。この発明において、「コーディングブロック(“coding block”)」とは、HEVC仕様またはVVC作業原案に規定されるCU/TU/PUといったビデオコーディングを指すことができる。
a)「対応するルマ・コーディングブロック(“corresponding luma coding block”)」は、共配置されたルマ・コーディングブロックの左上の位置をカバーするコーディングブロックとして定義され得る。
i.図5は、デュアルツリーの場合のイントラコード化クロマブロックについて、クロマ成分のCTUパーティションは、ルマ成分のCTUパーティションとは異なってよい、一例を示している。まず、現在クロマブロックの共配置されたルマブロックの左上サンプルをカバーする「対応するルマ・コーディングブロック」が検索される。次いで、「対応するルマ・コーディングブロック」のブロックサイズ情報を用いて、「対応するルマ・コーディングブロック」の左上サンプルを導出することにより、共配置されたルマブロックの左上サンプルをカバーする「対応するルマ・コーディングブロック」の左上サンプルが(x=32,y=16)に配置される。
b)一例において、ブロックサイズ、及び/又はブロックパーティション、及び/又はブロックコーディネーションは、共配置されたルマ・コーディングブロックの左上サンプルをカバーする「対応するルマ・コーディングブロック」のロケーションを導出するために必要とされ得る。
i.一例において、ブロックサイズ、及び/又はブロックパーティション、及び/又はブロックコーディネーションが、ルマコンポーネントなどの特定の色コンポーネントの各ブロックに対して格納されてよい。
ii.一例において、「対応するルマ・コーディングブロック」および現在ブロックは、常に同じCTUまたはCTU行内に存在し得る。従って、ブロックサイズ/パーティション/位置/コーディネーションのストレージがラインバッファに存在しないことがある。
c)一例において、「対応するルマ・コーディングブロック」内にない再構成されたサンプルを使用して、CCLMのクロマ残差スケーリング因子及び/又はモデル計算を導出することができる。
i.一例において、「対応するルマ・コーディングブロック」に隣接する再構成されたサンプルを使用して、CCLMのクロマ残差スケーリング因子及び/又はモデル計算を導出することができる。
1)一例において、左に隣接する列及び/又は「対応するルマ・コーディングブロック」の上の隣接する行に位置するN個のサンプルを使用して、クロマ残差スケーリング因子及び/又はCCLMのモデル計算を導出することができる。ここで、N=1....2W+2H、WおよびHは「対応するルマ・コーディングブロック」の幅および高さである。
a)「対応するルマ・コーディングブロック」の左上サンプルが(xCb,yCb)であると仮定すると、一例において、上の隣接するルマサンプルは(xCb+W/2,yCb-1)、または(xCb-1,yCb-1)に配置され得る。別の例では、左に隣接するルマサンプルが(xCb+W-1,yCb-1)に配置され得る。
b)一例において、隣接するサンプルの位置は、固定されてよく、かつ/あるいは、事前に定義されたチェック順序であってよい。
2)一例において、N個の隣接するサンプルのうちの1個を選択して、クロマ残差スケーリング因子及び/又はCCLMのモデル計算を導出することができる。N=3、そして、3個の隣接するサンプル(xCb-1、yCb-H-1)、(xCb+W/2、yCb-1)、(xCb-1、yCb-1)のチェック順序を仮定すると、チェックリスト内で最初に利用可能な隣接するサンプルがクロマ残差スケーリング因子を導出するために選択され得る。
3)一例において、「対応するルマ・コーディングブロック」の左に隣接する列及び/又は上に隣接する行に位置するN個のサンプルの中央値または平均値を使用して、クロマ残差スケーリング因子及び/又はCCLMのモデル計算を導出することができる。ここで、N=1....2W+2H、WおよびHは「対応するルマ・コーディングブロック」の幅および高さである。
d)一例において、クロマ残差スケーリングを実行するか否かは、対応するルマブロックの「利用可能な“available”」隣接するサンプルに依存し得る。
i.一例において、隣接するサンプルの「利用可能性“availability”」は、現在ブロック/サブブロックのコーディングモード、及び/又は、隣接するサンプルのコーディングモードに依存し得る。
1)一例において、インターモードでコード化されたブロックについて、イントラモード、又は/及びIBCモード、又は/及びCIIPモード、又は/及びLICモードでコード化された隣接するサンプルは、「利用不可(“unavailable”)」とみなされ得る。
2)一例において、インターモードでコード化されたブロックについて、隣接するサンプルは、拡散フィルタ、又は/及び双方向フィルタ、又は/及びアダマール変換(Hadamard transform)フィルタを使用し、「利用不可」とみなされ得る。
ii.一例において、隣接するサンプルの「利用可能性」は、現在ピクチャ/タイル/タイルグループ/VPDU/スライスの幅及び/又は高さに依存し得る。
1)一例において、隣接するブロックが現在ピクチャの外側に位置する場合、それは「利用不可」として扱われる。
iii.一例において、「利用可能な」隣接するサンプルがない場合、クロマ残差スケーリングが禁止され得る。
iv.一例において、「利用可能な」隣接するサンプルの数がK個(K>=1)より小さい場合、クロマ残差スケーリングが禁止され得る。
v.代替的に、利用不可の隣接するサンプルは、クロマ残差スケーリングが常に適用され得るように、デフォルトの固定値、またはパディング、または置換によって満たされ(filled)得る。
1)一例において、隣接するサンプルが利用可能でない場合、1<<(bitDepth-1)によって満たされ得る。ここで、bitDepthはルマ/クロマ成分のサンプルのビット深度を指定する。
2)代替的に、隣接するサンプルが利用可能でない場合は、左/右/上/下の隣接に位置する周囲のサンプルからパディングすることによって満たされ得る。
3)代替的に、隣接するサンプルが利用可能でない場合、事前に定義されたチェック順序で最初に利用可能な隣接するサンプルによって置き換えられてよい。
4)代替的に、隣接するサンプルが利用可能でない場合、事前に定義されたフィルタされ/マップされた値によって満たされ得る(例えば、1<<(bitDepth-1)のフィルタされ/マップされた値であり、ここで、bitDepthは、ルマ/クロマ成分のサンプルのビット深度を指定する)。
a)一例において、フィルタリング/マッピングプロセスは、LMCSのフォワードマッピングのLUTインデックス化であってよい。
e)一例において、クロマ残差スケーリングを実行するか否か、および、どのように実行するかは、現在ブロックのコーディングモード、及び/又は、隣接ブロックのコーディングモードに依存し得る。
i.「現在ブロック(“current block”)」は、現在クロマブロック、または共配置されたルマブロック、または共配置されたクロマブロックの少なくとも1つのサンプルをカバーする対応するルマブロックを指し得る。「隣接ブロック(“neighbor blocks”)」(隣接または非隣接)は、現在クロマブロックに隣接するクロマブロック、または現在ルマブロックに隣接するルマブロックを指し得る。
ii.一例において、1個のルマ隣接ブロックのコーディングモードは、現在ブロックの左上の座標に対して相対的に(-1,-1)といった所与の位置をカバーするように利用され得る。
iii.一例において、複数の隣接ブロックのコーディングモードが利用され、現在ブロックの左上の座標に対する(x,-1)(例えば、xが、0...ブロックの幅マイナス1)、及び/又は、現在ブロックの左上の座標に対する(-1,y)(例えば、yが-1...ブロックの高さマイナス1)といった、複数の位置をカバーする。
iv.一例において、隣接するブロックの再構成が、X-コード化されるように、現在のスライス/タイルグループのサンプルにアクセスすることを必要とする場合、クロマ残差スケーリングはディセーブルにされる。
1)例えば、モードXはイントラモードであってよい。
2)例えば、モードXはCIIPモードであってよい。
3)例えば、モードXはIBCモードであってよい。
4)一例において、現在ブロックがCIIPコードではなくインターコードであり、かつ、対応するルマブロックに隣接する隣接ブロックがモードXでコード化されている場合、クロマ残差スケーリングはディセーブルにされる。
v.一例において、1個の隣接するブロックの再構成が、X-コード化されるように、現在のスライス/タイルグループのサンプルにアクセスすることを必要とする場合、デフォルト値を使用して、クロマ残差スケーリング因子を導出することができる。
1)例えば、モードXはイントラモードであってよい。
2)例えば、モードXはCIIPモードであってよい。
3)例えば、モードXはIBCモードであってよい。
4)一例において、現在ブロックが、インターコード化され、かつ、CIIPコード化されており、そして、対応するルマブロックの隣接ブロックがモードXでコード化されている場合には、クロマ残差スケーリング因子を導出するためにデフォルト値が使用され得る。
5)一例において、デフォルト値は、ルマ/クロマサンプルのビット深度に依存し得る。
6)一例において、デフォルト値は、フィルタされ/マップされた値1<<(bitDepth-1)に設定され得る。ここで、bitDepthは、ルマ/クロマ成分のサンプルのビット深度を指定する。一例において、フィルタリング/マッピングプロセスは、LMCSのフォワードマッピングのLUTインデックス化であり得る。
f)一例において、「対応するルマ・コーディングブロック」に隣接するフィルタされ/マップされた、再構成されたサンプルは、CCLMのクロマ残差スケーリング因子及び/又はモデル計算を導出するために使用され得る。
i.一例において、フィルタリング/マッピングプロセスは、イントラブロックのための参照スムージング(smoothing)フィルタリング、双方向フィルタといったポストフィルタリング、アダマール変換ベースのフィルタ、再形成ドメインのフォワードマッピング、などを含み得る。
12.固定値を用いて、現在のスライス/タイルグループにおけるクロマブロック数(CUまたはTUといったもの)のクロマ残差スケーリング因子を導出することが提案されている。
a)一例において、N個のクロマブロックについてクロマ残差スケーリング因子は、固定値によって導出することができる。ここで、Nは、1...現在スライス/タイルグループにおけるクロマブロックの総数、である。
b)一例において、固定値を使用して、その値が属する区分線形モデルのインデックスを見つけることができ、そして、次いで、クロマ残差スケーリング因子を導出された区分インデックスから計算することができる。一例において、固定値はルマサンプルの内部ビット深度に依存し得る。
c)一例において、固定値は、クロマ残差スケーリング因子を表すために直接使用されてよい。
d)一例において、固定値及び/又は固定クロマ残差スケーリング因子は、画像/スライス/タイルグループのタイプ(例えば、I、またはP、またはBスライス)、及び/又は、ブロックのコード化モード(例えば、イントラモードまたはインターモード)に依存し得る。
e)一例において、固定値は、異なる画像/スライス/タイルグループ/タイルに対して異なってよい。
f)一例において、固定クロマ残差スケーリング因子を用いて、LMCS中のクロマ残差を直接スケーリングすることができる。
i.一例において、固定クロマ残差スケーリング因子は、DPS/SPS/PPS/VPS/APS/スライスヘッダ/タイルグループヘッダといったビデオユニットで信号化することができる。
ii.一例において、画像/スライス/タイルグループ/タイルの固定クロマ残差スケーリング因子は、画像/スライス/タイルグループ/タイルにおけるルマサンプルの再形成のためのマッピング関数(例えば、区分線形関数)に依存し得る。
1)一例において、固定クロマ残差スケーリング因子は、JVET-M1001-v7で定義されているアレイInvScaleCoeff[]及び/又はアレイScaleCoeff[]に依存し得る。
a)例えば、画像/スライス/タイルグループ/タイルの固定クロマ残差スケーリング因子によって依存されるアレイInvScaleCoeff[]及び/又はアレイScaleCoeff[]を使用して、画像/スライス/タイルグループ/タイルのルマサンプルを再形成することができる。
2)一例において、固定クロマ残差スケーリング因子は、ルマサンプルを再形成するために使用される区分線形関数の全てのスケーリング因子の中の最小/最大/中央/平均値によって導出され得る。
a)例えば、固定クロマ残差スケーリング因子は、InvascaleCoeff[i]の最小/最大/中央/平均値によって導出され得る。ここで、iは、最小インデックス(JVET-M1001-v7のlmcs_min_bin_idxといったもの)から最大インデックス(JVET-M1001-v7のLmcsMaxBinIdxといったもの)までである。
i.例えば、固定クロマ残差スケーリング因子は、InvascaleCoeff[i]の最小/最大/中央/平均値と等しくてよい。ここで、iは、最小インデックス(JVET-M1001-v7で定義されるlmcs_min_bin_idxといったもの)から最大インデックス(JVET-M1001-v7で定義されるLmcsMaxBinIdxといったもの)までである。
ii.代替的に、固定クロマ残差スケーリング因子は、InvascaleCoeff[i]の最小/最大/中央/平均値によって導出され得る。ここで、iは、最小インデックス(例えば、0)から最大インデックス(例えば、15)までであり、そして、JVET-M1001-v7で定義されるlmcsCW[i]は、0に等しくない。
g)一例において、固定値が、クロマスケーリング因子を導出するために区分関数インデックスを表すために使用され得る。
i.一例において、固定値は、DPS/SPS/PPS/VPS/APS/スライスヘッダ/タイルグループヘッダといった、ビデオユニットで信号化され得る。
ii.一例において、固定値は、区分関数インデックスを識別するために使用される、ルマサンプル強度を表すことができ、そして、識別された区分関数インデックスは、クロマスケーリング因子を見つけるためにさらに使用される。一例において、固定値は0、または(1<<lumaBitDepth)-1、または1<<(lumaBitDepth-1)に等しくてよく、ここで、lumaBitDepthはルマサンプルのビット深度を示す。
1)一例において、固定値が区分関数の入力範囲にあれば、区分関数が識別される。
2)一例において、固定値が区分関数の出力範囲にあれば、区分関数が識別される。
iii.一例において、固定値は、クロマスケーリング因子を見つけるために使用され得る、固定区分関数インデックスを表すことができる。
1)一例において、固定値は、LMCS構築プロセスで使用される最小ビンインデックス(例えば、lmcs_min_bin_idx)と等しくてよい。
2)一例において、固定値は、LMCS構築プロセスで使用される最大ビンインデックス(例えば、LmcsMaxBinIdx)と等しくてよい。
3)一例において、固定値は、LMCS構築プロセスで使用される最大ビンインデックスおよび最小ビンインデックスの平均と等しくてよい。
クロマ残差スケーリング及び/又はCCLMが適用されるか否かの制限(restriction)
13.クロマ残差スケーリングまたはCCLMが適用されるか否かは、対応するルマブロック及び/又は共配置されたルマブロックのパーティションに依存し得ることが提案されている。
a)一例において、クロスコンポーネント情報でツールをイネーブルまたはディセーブルするか否かは、共配置されたルマ(例えば、Y成分またはG成分)ブロック内のCU/PU/TUの数に依存し得る。
i.一例において、連結されたルマ(例えば、Y成分またはG成分)ブロック内のCU/PU/TUの数が数の閾値を超える場合、そうしたツールはディセーブルされることがある。
ii.代替的に、クロスコンポーネント情報でツールをイネーブルするか、または、ディセーブルするかは、パーティションツリーの深さに依存し得る。
1)一例において、共配置されたルマブロック内のCUの四分木深さ最大値(または最小、または平均、または他のバリエーション)が閾値を超える場合、そうしたツールはディセーブルされ得る。
2)一例において、共配置されたルマブロック内のCUのBT及び/又はTT深さの最大値(または最小、平均、または他のバリエーション)が閾値を超える場合、そうしたツールはディセーブルされ得る。
iii.代替的に、さらに、クロスコンポーネント情報を有するツールをイネーブルまたはディセーブルするか否かは、クロマブロックのブロックディメンション(block dimension)に依存し得る。
iv.代替的に、さらに、クロスコンポーネント情報を有するツールをイネーブルまたはディセーブルするか否かは、共配置されたルマが複数のVPDU/事前に定義された領域サイズにわたるか否かに依存し得る。
v.上記の説明における閾値は、固定数であってよく、または信号化されてよく、または標準的なプロファイル/レベル/層に依存してよい。
b)一例において、現在クロマブロックの共配置されたルマブロックが複数のパーティションによって分割される場合(例えば、図7)、クロマ残差スケーリング及び/又はCCLMが禁止され得る。
i.代替的に、現在クロマブロックの共配置されたルマブロックが分割されていない場合(例えば、1つのCU/TU/PU内)、クロマ残差スケーリング及び/又はCCLMが適用されてよい。
c)一例において、現在クロマブロックの共配置されたルマブロックがM個以上のCU/PU/TUを含む場合、クロマ残差スケーリング及び/又はCCLMが禁止され得る。
i.一例において、Mは、1より大きい整数であり得る。
ii.一例において、Mは、それがCCLMであるか、クロマ残差スケーリングプロセスであるかに依存し得る。
iii.Mは固定数であってよく、または、信号であってよく、もしくは、標準プロファイル/レベル/階層に依存してよい。
d)共配置されたルマブロック内の上述のCUは、共配置されたルマブロック内の全てのCUであると解釈され得る。代替的に、共配置されたルマブロック内のCUは、共配置されたルマブロックの境界に沿ったCUといった、共配置されたルマブロック内の部分的なCUと解釈され得る。
e)共配置されたルマブロック内の上述のCUは、サブCUまたはサブブロックであると解釈され得る。
i.例えば、サブCUまたはサブブロックは、ATMVPで使用され得る。
ii.例えば、サブCUまたはサブブロックは、アフィン予測で使用され得る。
iii.例えば、サブCUまたはサブブロックは、イントラ・サブパーティション(Intra Sub-Partitions、ISP)モードで使用され得る。
f)一例において、共配置されたルマブロックの左上のルマサンプルをカバーするCU/PU/TUが事前に定義されたルマブロックサイズより大きい場合、クロマ残差スケーリング及び/又はCCLMが禁止され得る。
i.一例が図8に示されており、共配置されたルマブロックは32×32であるが、64×64に等しいサイズの対応するルマブロック内にあるため、事前に定義されたルマブロックサイズが32×64である場合、クロマ残差スケーリング及び/又はCCLMが、このア場合には禁止され得る。
ii.代替的に、共配置された現在クロマブロックが分割されておらず、そして、共配置されたルマブロックの左上のルマサンプルをカバーする対応するルマブロックが、事前に定義された境界ボックス内に完全に含まれている場合、現在クロマブロックのクロマ残差スケーリング及び/又はCCLMが適用され得る。境界ボックスは、図9に示されるように、WxHで示される幅Wおよび高さHを有する長方形として定義され得る。ここで、対応するルマブロックは幅32および高さ64を有し、境界ボックスは幅40および高さ70を有する。
1)一例において、境界ボックスのサイズW×Hは、CTU幅及び/又は高さに従って、または、CU幅及び/又は高さに従って、もしくは、任意の値に従って定義され得る。
g)一例において、現在クロマブロックの共配置されたルマブロックが複数のパーティションで分割されている場合、LMCSモードでクロマ残差スケーリング因子を導出するためには、共配置されたルマブロックの事前に定義されたパーティション内の予測サンプル(または再構成されたサンプル)のみが使用される。
i.一例において、共配置されたルマブロックの最初のパーティションにおける全ての予測サンプル(または再構成サンプル)の平均が、LMCSモードにおけるクロマ残差スケーリング因子を導出するために使用される。
ii.代替的に、共配置されたルマブロックの最初のパーティションにおける左上の予測サンプル(または再構成サンプル)を用いて、LMCSモードにおけるクロマ残差スケーリング因子を導出する。
iii.代替的に、共配置されたルマブロックの最初のパーティションにおける中心予測サンプル(または再構成サンプル)を用いて、LMCSモードにおけるクロマ残差スケーリング因子を導出する。
h)CCLMおよびLMCSといったクロスコンポーネントツールを適用するか否か、また、どのように適用するかは、共配置されたルマブロックの少なくとも1個のサンプルをカバーする1つまたは複数のルマCUのコーディングモードに依存し得ることが提案されている。
i.例えば、共配置されたルマブロックの少なくとも1つのサンプルをカバーする1つまたは複数のルマCUがアフィンモードでコード化される場合、クロスコンポーネントツールはディセーブルされる。
ii.例えば、共配置されたルマブロックの少なくとも1つのサンプルをカバーする1つまたは複数のルマCUが双予測でコード化される場合、クロスコンポーネントツールはディセーブルされる。
iii.例えば、共配置されたルマブロックの少なくとも1つのサンプルをカバーする1つまたは複数のルマCUがBDOFでコード化される場合、クロスコンポーネントツールはディセーブルされる。
iv.例えば、共配置されたルマブロックの少なくとも1つのサンプルをカバーする1つまたは複数のルマCUがDMVRでコード化される場合、クロスコンポーネントツールはディセーブルされる。
v.例えば、共配置されたルマブロックの少なくとも1つのサンプルをカバーする1つまたは複数のルマCUがJVET-N0217で提案されているマトリックスアフィン予測モードでコード化される場合、クロスコンポーネントツールはディセーブルされる。
vi.例えば、共配置されたルマブロックの少なくとも1つのサンプルをカバーする1つまたは複数のルマCUがインターモードでコード化される場合、クロスコンポーネントツールはディセーブルされる。
vii.例えば、共配置されたルマブロックの少なくとも1つのサンプルをカバーする1つまたは複数のルマCUがISPモードでコード化される場合、クロスコンポーネントツールはディセーブルされる。
viii.一例において、「共配置されたルマブロックの少なくとも1つのサンプルをカバーする1つまたは複数のルマCU」は、対応するルマブロックを参照することができる。
i)CCLM/LMCSが禁止されている場合、CCLM/LMCSの使用の指示の信号化を省略することができる。
j)この開示において、CCLMは、LMモード、LM-Tモード、およびLM-Lモードを含む、CCLMの任意のバリアントモードを指し得る。
14.CCLMおよびLMCSといったクロスコンポーネントツールをクロマブロックの一部に適用するか否か、および、適用する方法が提案されている。
a)一例においては、クロマサブブロックレベルでCCLMおよびLMCSといったクロスコンポーネントツールを適用するか否か、および、適用する方法である。
i.一例において、クロマサブブロックは、クロマCU内の2×2または4×4ブロックとして定義される。
ii.一例として、クロマサブブロックについて、現在クロマCUの対応するルマコーディングブロックが、サブブロックの対応するブロックの全てのサンプルをカバーする場合、CCLMが適用され得る。
iii.一例として、クロマサブブロックについて、対応するブロックの全てのサンプルが現在クロマCUの対応するルマコーディングブロックによってカバーされていない場合、CCLMは適用されない。
iv.一例において、CCLMまたはLMCSのパラメータは、サブブロックをクロマCUとして扱うように、各クロマサブブロックに対して導出される。
v.一例において、CCLMまたはLMCSがクロマサブブロックに適用される場合、共配置されたブロックのサンプルが使用され得る。
15.CCLMといったクロスコンポーネントツールを適用するか否か、および、どのように適用するかは、ブロックディメンション、及び/又はパーティション情報、及び/又はパーティション構造タイプ(例えば、デュアルツリーまたはシングルツリー)に依存することが提案されている。
a)一例において、CCLM、はクロマデュアルツリーパーティションに対してディセーブルされ得る。
b)一例において、CCLMは、ブロックディメンションに応じて条件的にディセーブルされ得る。
i.一例として、現在ブロックディメンションがWB×HBであるとすると、WB、HB、と、2個の整数T1およびT2との間の関係に応じて、以下のCCLMがディセーブルされ得る。
1)一例において、WB≧T1かつHB≧T2の場合、CCLMがディセーブルされ得る。例えば、T1=T2=8。
2)一例において、WB* HB>=T1の場合、CCLMがディセーブルされ得る。例えば、T1=64。
3)一例において、Min(WB,HB)>=T1の場合、CCLMがディセーブルされ得る。例えば、T1=8。
4)一例において、Max(WB,HB)>=T1の場合、CCLMがディセーブルされ得る。例えば、T1=8。
5)一例において、WB<=T1かつB<=T2の場合、CCLMがディセーブルされ得る。例えば、T1=T2=16。
6)一例において、WB*HB<=T1の場合、CCLMがディセーブルされ得る。例えば、T1=4096。
7)一例において、Min(WB,HB)<=T1の場合、CCLMがディセーブルされ得る。例えば、T1=64。
8)一例において、Max(WB,HB)<=T1の場合、CCLMがディセーブルされ得る。例えば、T1=64。
c)一例において、CCLMは、ブロックディメンション及び/又はパーティション情報によって制限され得る。
i.一例において、ディメンションがWB×HBのクロマブロックについて、以下の条件の1つまたは複数が満たされる場合、CCLMはディセーブルされる。例えば、WB=HB=32である。以下の黒丸(bullet)では、共配置されたルマブロックディメンションは(sh×WB)×(sv×HB)であり得る。ここで、shおよびsvは、スケーリング因子(factor)である。例えば、カラーフォーマットが4:2:0の場合、sh=sv=2である。
1)現在クロマブロックは水平分割を伴うリーフノードにあり、そして、共配置されたルマブロックは垂直分割を伴うリーフノードにある
a)一例において、現在クロマブロックはSPLIT_TT_HORモードで分割され、そして、共配置されたルマブロックはSPLIT_TT_VERモードで分割される。
b)一例において、現在クロマブロックはSPLIT_TT_HORモードで分割され、そして、共配置されたルマブロックはSPLIT_BT_VERモードで分割される。
c)一例において、現在クロマブロックはSPLIT_BT_HORモードで分割され、そして、共配置されたルマブロックはSPLIT_TT_VERモードで分割される。
d)一例において、現在クロマブロックはSPLIT_BT_HORモードで分割され、そして、共配置されたルマブロックはSPLIT_BT_VERモードで分割される。
2)現在クロマブロックは垂直分割を伴うリーフノードにあり、そして、共配置されたルマブロックは水平分割を伴うリーフノードにある
a)一例において、現在クロマブロックはSPLIT_TT_VERモードで分割され、そして、共配置されたルマブロックはSPLIT_TT_HORモードで分割される。
b)一例において、現在クロマブロックはSPLIT_TT_VERモードで分割され、そして、共配置されたルマブロックはSPLIT_BT_HORモードで分割される。
c)一例において、現在クロマブロックはSPLIT_BT_VERモードで分割され、そして、共配置されたルマブロックはSPLIT_TT_HORモードで分割される。
d)一例において、現在クロマブロックはSPLIT_BT_VERモードで分割され、そして、共配置されたルマブロックはSPLIT_BT_HORモードで分割される。
d)一例において、ブロックに対してCCLMがディセーブルされている場合、CCLMに関連するシンタックス要素は、ブロック内で信号化されなくてよい。
i.代替的に、ブロックに対してCCLMがディセーブルされている場合、CCLMに関連するシンタックス要素は信号化されてよいが、CCLMモードは、適合ビットストリームでブロック内で使用されるべきではない。
ii.代替的に、ブロックに対してCCLMがディセーブルされている場合、CCLMに関連するシンタックス要素は信号化されてよい。CCLMモードが信号化される場合、プレーナまたはDCといったデフォルトモードが適用され得る。
LMCSモードにおけるクロマ残差スケーリングの適用性
16.ルマ依存クロマ残差スケーリングを適用できるか否かは、JVET-M1001で指定されるタイルグループヘッダに加えて、他のシンタックスレベルで信号化され得ることが提案されている。
a)例えば、chroma_residual_scale_flagは、シーケンスレベル(例えば、SPSにおいて)、画像レベル(例えば、PPSまたはピクチャヘッダにおいて)、スライスレベル(例えば、スライスヘッダ)、タイルレベル、CTU行(row)レベル、CTUレベル、CUレベルで信号化され得る。chroma_residual_scale_flagが1に等しいことは、信号化シンタックスレベル以下のCUに対してクロマ残差スケーリングがイネーブルされることを指定する。chroma_residual_scale_flagが0に等しいことは、信号化シンタックスレベル以下でクロマ残差スケーリングがイネーブルされないことを指定する。chroma_residual_scale_flagが存在しない場合、0に等しいと推定される。
b)一例において、クロマ残差スケーリングがパーティションノードレベルで制約(constrained)されている場合の、chroma_residual_scale_flagは、信号化されず、そして、パーティションノードでカバーされているCUに対して0であると推定され得る。一例において、パーティションノードは、CTUであってよい(CTUは、四分木パーティションのルートノードとして扱われる)。
c)一例において、クロマ残差スケーリングが、クロマブロックサイズについて32×32以下に制約されている場合、chroma_residual_scale_flagは、32×32以下であるクロマブロックサイズに対して0であると推定され、そして、信号化されなくてよい。
CCLMモードの適用性
17.CCLMモードを適用できるか否かは、JVET-M1001で指定されるspsレベルに加えて、他のシンタックスレベルで信号化することができることが提案されている。
a)例えば、画像レベル(例えば、PPSまたは画像ヘッダにおいて)、スライスレベル(例えば、スライスヘッダにおいて)、タイルグループレベル(例えば、タイルグループヘッダにおいて)、タイルレベル、CTU行レベル、CTUレベル、CUレベルで、信号化され得る。
b)一例において、CCLMが適用できない場合、cclm_flagは信号化されず、そして、0であると推定され得る。
i.一例において、クロマ残差スケーリングが、クロマブロックサイズについて8×8以下に制約されている場合、cclm_flagは、8×8以下であるクロマブロックサイズに対して0であると推定され、そして、信号化されなくてよい。
イントラモードおよびインターモードに対するクロマ残差スケーリング因子の導出の統一
18.クロマ残差スケーリング因子は、ルマブロックの符号化/復号化の後で導出され、そして、以降のコード化ブロックのために保管され、かつ、使用され得る。
a)一例において、ルマブロック内の、所定の予測サンプル、又は/及び中間予測サンプル、又は/及び再構成サンプル、又は/及びループフィルタリング前(例えば、デブロッキングフィルタ、又は/及びSAOフィルタ、又は/及び双方向フィルタ、又は/及びアダマール変換フィルタ、又は/及びALFフィルタによって処理される前)の再構成サンプルがクロマ残差スケーリング因子の導出のために使用され得る。
i.例えば、ルマブロックの底(bottom)の行又は/及び右(right)の列における部分的サンプルが、クロマ残差スケーリング因子の導出のために使用され得る。
b)シングルツリーの場合、イントラモード、又は/及びIBCモード、又は/及びインターモードでコード化されたブロックを符号化する場合、導出された隣接ブロックのクロマ残差スケーリング因子が、現在ブロックのスケーリング因子を導出するために使用され得る。
i.一例において、所定の隣接するブロックを順番にチェックされ、そして、最初(first)の利用可能なクロマ残差スケーリング因子が現在ブロックに使用され得る。
ii.一例において、所定の隣接するブロックが順番にチェックされてよく、そして、スケーリング因子は、最初のK個の利用可能な隣接クロマ残差スケーリング因子に基づいて導出され得る。
iii.一例において、インターモード又は/及びCIIPモードでコード化されたブロックについて、隣接するブロックが、イントラモード、又は/及びIBCモード、又は/及びCIIPモードでコード化される場合、隣接するブロックのクロマ残差スケーリング因子は「利用不可(“unavailable”)」とみなされ得る。
iv.一例において、隣接するブロックは、左(または左上)→上(または右上)の順序でチェックされ得る。
1)代替的に、隣接するブロックは、上(または右上)→左(または左上)の順序でチェックされ得る。
c)別個のツリーの場合、クロマブロックを符号化するとき、対応するルマブロックが最初に識別され得る。次いで、隣接ブロック(例えば、対応するルマブロック)の導出されたクロマ残差スケーリング因子が、現在ブロックのスケーリング因子を導出するために使用され得る。
i.一例において、所定の隣接するブロックが順番にチェックされ、そして、最初の利用可能なクロマ残差スケーリング因子が現在ブロックに使用され得る。
ii.一例において、所定の隣接するブロックが順番にチェックされてよく、そして、スケーリング因子は、最初のK個の利用可能な隣接クロマ残差スケーリング因子に基づいて導出され得る。
d)隣接ブロックは、事前に定義された順序でチェックされ得る。
i.一例において、隣接するブロックは、左(または左上)→右の上(または右の上)の順序でチェックされ得る。
ii.一例において、隣接するブロックは、上(または右上)→左(または左上)の順序でチェックされ得る。
iii.一例において、隣接するブロックは、左下→左→右上→上→左上の順序でチェックされ得る。
iv.一例において、隣接するブロックは、左→上→右上→左下→左上の順序でチェックされ得る。
e)一例において、クロマ残差スケーリングを適用するか否かは、隣接するブロックの「利用可能性“availability”」に依存し得る。
i.一例において、「利用可能な“available”」隣接ブロックが存在しない場合、クロマ残差スケーリングが禁止され得る。
ii.一例において、「利用可能な」隣接ブロックの数がK個(K>=1)より小さい場合、クロマ残差スケーリングは許容されない。
iii.代替的に、「利用可能な」隣接ブロックが存在しない場合、クロマ残差スケーリング因子はデフォルト値によって導出され得る。
1)一例において、デフォルト値1<<(BitDepth-1)を使用して、クロマ残差スケーリング因子を導出することができる。
f)一例において、現在クロマブロックのクロマ残差スケーリング因子は、保管され、そして、以降のコード化ブロックについて使用され得る。
g)一例において、クロマ残差スケーリング因子のストレージは、ラインバッファから除去されてよい。
i.一例において、現在ブロックおよびアクセスされる隣接する(隣接または非隣接)ブロックが異なる領域内にある場合、そのクロマ残差スケーリング因子は「利用不可」とみなされ、そして、現在ブロックのクロマ残差スケーリング因子の導出のために使用され得ない。
1)領域は、スライス、タイル、タイルグループ、CTU行、またはCTU、であり得る。
2)代替的に、そのクロマ残差スケーリング因子は、そうした場合にデフォルト値として考慮され得る。
3)代替的に、クロマ残差スケーリングは、そうした場合には適用できない。
h)一例において、現在クロマブロックのクロマ残差スケーリング因子は、オンザフライで更新され、そして、以降のブロックのスケーリング因子導出のために履歴テーブルに保管され得る。
i.履歴テーブルは、先入れ先出し(first-in first-out、FIFO)方式で更新され得る。
ii.クロマブロックの復号化/符号化の後で、クロマ残差スケーリング因子が導出され(例えば、ルマ値に従って)、そして、FIFO履歴テーブルに保管され得る。
iii.一例において、FIFO履歴テーブルは、多くとも1項目を含むことができる。この場合、導出された最新の復号化ブロックのクロマ残差スケーリング因子が、現在ブロックに使用される。
iv.一例において、履歴テーブルは、画像、スライス、タイルグループ、タイル、CTU行、CTUの符号化/復号化の前にリフレッシュされる。
1)一例において、デフォルトのクロマ残差スケーリング因子は、履歴テーブルがリフレッシュされるときに履歴テーブルに入力され得る。
2)一例において、FIFO履歴テーブルが更新されるとき、履歴テーブルは空(empty)に設定される。
クロマ残差スケーリングのための新たなシンタックス要素
19.クロマ残差スケーリングプロセスで使用されるスケーリング因子を導出するために、1つまたは複数の新しいシンタックス要素が信号化され得ることが提案されている。
a)一例において、シンタックス要素は、LMCSコーディングツールのクロマ残差スケーリングのために、LMCS APSデータ(VVC仕様におけるlmcs_data()といったもの)に追加され得る。
b)一例において、シンタックス要素は、SPS/スライスヘッダ/タイルグループヘッダ/PPS/ピクチャヘッダ/ブリック(brick)/CTU行/CTU/CU、等に追加され得る。
i.シンタックス要素がビデオユニット内で信号化される場合、それらはビデオユニットに関連付けられた全てのブロックにおけるスケーリング因子を制御することができる。例えば、それらがスライスヘッダ内で信号化される場合、それらは、スライス内の全てのブロックにおけるスケーリング因子を制御することができる。
1)代替的に、シンタックス要素がビデオユニット内で信号化される場合、それらは、ビデオユニットに関連するいくつかのブロックにおけるスケーリング因子を制御することができる。
c)一例において、新たなシンタックス要素、すなわち、例えばlmcs_crs_fixed_bin_idxは、クロマ残差スケーリングのためのクロマスケーリング因子を導出するためにコード化され得る。
i.一例において、lmcs_crs_fixed_bin_idxを使用して、スケーリング因子を導出するために使用される代表的なルマ値を提示することができる。
ii.代替的に、ルックアップテーブルChromaScaleCoeffのインデックスであるといった、スケーリング因子を導出するために使用されるインデックスを提示するように、lmcs_crs_fixed_bin_idxが使用され得る。
iii.代替的に、さらに、lmcs_crs_fixed_bin_idxの値は[k0,k1]の範囲内にあるとする。一例において、lmcs_crs_fixed_bin_idxの範囲は、クロマスケーリング構築プロセスを用いたルママッピングにおける最小(例えば、lmcs_min_bin_idx)及び/又は最大ビンインデックスの範囲に等しく設定され得る、例えば[0,15]。
1)一例において、lmcs_crs_fixed_bin_idxは、適合(conformance)ビットストリーム内の有効な範囲にあることを要する。
2)一例において、lmcs_crs_fixed_bin_idxは、有効な範囲になければならないようにコード化される。
iv.代替的に、さらに、lmcs_crs_fixed_bin_idxは、固定長、端数処理された単項(truncated unary)、単項、指数ゴロム(exp-golomb)コードでコード化されてよい。
v.代替的に、さらに、lmcs_crs_fixed_bin_idxは、オフセットが予測として0または1に設定されているクロマスケーリング構築プロセス(例えば、(lmcs_min_bin_idx+lmcs_max_bin_idx+offset)>>1)を伴うルママッピングにおいて使用される最小および最大ビンインデックスの平均を使用するように、予測的にコード化されてよい。代替的に、lmcs_min_bin_idxまたはlmcs_max_bin_idxが、予測として使用されてよい。
vi.代替的に、さらに、lmcs_crs_fixed_bin_idxは条件的にコード化される。
1)一例において、現在のカラーフォーマットが4:0:0でない場合である。
2)一例において、別個の平面コーディングがディセーブルされている場合である。
3)一例において、ChromaArrayTypeが0に等しくない場合である。
4)一例において、クロマ残差スケーリングがイネーブルされている場合である。
d)一例において、新しいシンタックス要素によって導出された固定クロマスケーリング因子が、同じLMCSモデルを共有する全てのクロマ残差スケーリングブロックに使用されてよい。
i.一例において、lmcs_crs_fixed_bin_idxによってインデックス付けされた固定クロマスケーリング因子が、一旦IDR/CRA/IRAPピクチャに計算され、そして、IDR/CRA/IRAPピクチャの全てのブロックに対して使用される。
ii.一例において、lmcs_crs_fixed_bin_idxによってインデックス付けされた固定クロマスケーリング因子が、一旦IDR/CRA/IRAPピクチャに計算され、そして、次のIDR/CRA/IRAPピクチャの前のインターコード化ピクチャの全てのブロックに対して使用される。
図10は、ビデオ処理装置1000のブロック図である。装置1000は、ここにおいて記載される1つ以上の方法を実装するために使用され得る。装置1000は、スマートフォン、タブレット、コンピュータ、モノのインターネット(IoT)受信機、などで具体化することができる。装置1000は、1つ以上のプロセッサ1002、1つ以上のメモリ1004、およびビデオ処理ハードウェア1006を含み得る。プロセッサ1002は、本文書に記載される1つ以上の方法(方法800および900を含むが、これらに限定されない)を実装するように構成され得る。メモリ(複数のメモリ)1004は、ここにおいて記載される方法および技術を実施するために使用されるデータおよびコードを保管するために使用され得る。ビデオ処理ハードウェア1006は、ハードウェア回路において、本文書に記載されるいくつかの技術を実装するために使用され得る。
Claims (13)
- ビデオデータを処理する方法であって、
ビデオの現在クロマビデオブロックと前記ビデオのビットストリームとの間の変換の最中に、前記現在クロマビデオブロックのクロマ残差サンプルにスケーリングプロセスが適用されることを決定するステップと、
前記クロマ残差サンプルに前記スケーリングプロセスを適用することにより、前記変換を実行するステップと、を含み、
前記スケーリングプロセスにおいて、前記クロマ残差サンプルは、前記現在クロマビデオブロックを再構成するために使用される前に、少なくとも1つのスケーリング因子に基づいてスケーリングされ、
1つ以上のシンタックス要素、および、区分線形モデルのピースを識別するビンインデックスが、前記少なくとも1つのスケーリング因子を導出するために使用され、かつ、前記1つ以上のシンタックス要素は、条件付きで前記ビットストリーム内に含まれ、
前記1つ以上のシンタックス要素は、前記ビットストリームにおける適応パラメータセットに含まれており、
前記ビンインデックスは、
前記現在クロマビデオブロックの左上サンプルに対応するルマサンプルに基づいて決定される、ビデオユニットの1つ以上の隣接するルマブロックの利用可能性を検査するステップと、
前記1つ以上の隣接するルマブロックの利用可能性に基づいて、前記ビデオユニットの隣接するルマサンプルを検索するか否かを決定するステップであり、前記1つ以上の隣接するルマブロックは前記隣接するルマサンプルを構成する、ステップと、
前記隣接するサンプルが利用可能な場合に、端数処理ベースの平均演算によって、前記隣接するルマサンプルを使用して、計算された平均ルマ変数に基づいてビンインデックスを導出するステップと、
によって導出される、
方法。 - 前記ビンインデックスの値は、k0からk1までの範囲内にあり、
k0およびk1は整数である、
請求項1に記載の方法。 - 前記ビンインデックスの値は、0から15までの範囲内にある、
請求項2に記載の方法。 - 前記ビデオユニットの前記1つ以上の隣接するルマブロックの利用可能性を検査する際に、
前記1つ以上の隣接するルマブロックの第1の隣接するルマブロック、および、異なるビデオ領域に配置されている前記ビデオユニットに応答して、
前記第1の隣接するルマブロックは利用不可として扱われ、かつ、前記ビデオ領域は、コードツリーユニットまたはコーディングツリーユニット行のうち少なくとも1つを含む、
請求項1に記載の方法。 - 前記スケーリングプロセスを選択的にイネーブルまたはディセーブルすることを示すシンタックス要素は、前記ビットストリームに含まれる場合に、現在クロマビデオブロックに関連する画像レベルに含まれる、
請求項1に記載の方法。 - 前記1つ以上のシンタックス要素は、前記区分線形モデルの各ピースに対するルマ値を表すために使用される、
請求項1乃至5いずれか一項に記載の方法。 - 前記1つ以上のシンタックス要素は、前記区分線形モデルの各ピースの表現に加えられたルマ値を表すに使用される、
請求項1乃至6いずれか一項に記載の方法。 - 前記ビデオのカラーフォーマットが4:0:0でない場合に、前記1つ以上のシンタックス要素は、前記ビットストリームに含まれている、
請求項1乃至7いずれか一項に記載の方法。 - 前記変換は、前記現在クロマビデオブロックを前記ビットストリームへエンコーディングすること、を含む、
請求項1乃至8いずれか一項に記載の方法。 - 前記変換は、前記ビットストリームから前記現在クロマビデオブロックをデコーディングすることを含む、
請求項1乃至8いずれか一項に記載の方法。 - プロセッサ、および、命令を含む非一的な時メモリを備えるビデオデータを処理するための装置であって、前記命令が前記プロセッサによって実行されると、前記プロセッサに、
ビデオの現在クロマビデオブロックと前記ビデオのビットストリームとの間の変換の最中に、前記現在クロマビデオブロックのクロマ残差サンプルにスケーリングプロセスが適用されることを決定し、かつ、
前記クロマ残差サンプルに前記スケーリングプロセスを適用することにより、前記変換を実行する、ようにさせ、
前記スケーリングプロセスにおいて、前記クロマ残差サンプルは、前記現在クロマビデオブロックを再構成するために使用される前に、少なくとも1つのスケーリング因子に基づいてスケーリングされ、
1つ以上のシンタックス要素、および、区分線形モデルのピースを識別するビンインデックスが、前記少なくとも1つのスケーリング因子を導出するために使用され、かつ、前記1つ以上のシンタックス要素は、条件付きで前記ビットストリーム内に含まれ、
前記1つ以上のシンタックス要素は、前記ビットストリームにおける適応パラメータセットに含まれており、
前記ビンインデックスは、
前記現在クロマビデオブロックの左上サンプルに対応するルマサンプルに基づいて決定される、ビデオユニットの1つ以上の隣接するルマブロックの利用可能性を検査するステップと、
前記1つ以上の隣接するルマブロックの利用可能性に基づいて、前記ビデオユニットの隣接するルマサンプルを検索するか否かを決定するステップであり、前記1つ以上の隣接するルマブロックは前記隣接するルマサンプルを構成する、ステップと、
前記隣接するサンプルが利用可能な場合に、端数処理ベースの平均演算によって、前記隣接するルマサンプルを使用して、計算された平均ルマ変数に基づいてビンインデックスを導出するステップと、
によって導出される、
装置。 - 命令を保管している非一時的なコンピュータで読取り可能な記憶媒体であって、前記命令が実行されると、プロセッサに、
ビデオの現在クロマビデオブロックと前記ビデオのビットストリームとの間の変換の最中に、前記現在クロマビデオブロックのクロマ残差サンプルにスケーリングプロセスが適用されることを決定し、かつ、
前記クロマ残差サンプルに前記スケーリングプロセスを適用することにより、前記変換を実行する、ようにさせ、
前記スケーリングプロセスにおいて、前記クロマ残差サンプルは、前記現在クロマビデオブロックを再構成するために使用される前に、少なくとも1つのスケーリング因子に基づいてスケーリングされ、
1つ以上のシンタックス要素、および、区分線形モデルのピースを識別するビンインデックスが、前記少なくとも1つのスケーリング因子を導出するために使用され、かつ、前記1つ以上のシンタックス要素は、条件付きで前記ビットストリーム内に含まれ、
前記1つ以上のシンタックス要素は、前記ビットストリームにおける適応パラメータセットに含まれており、
前記ビンインデックスは、
前記現在クロマビデオブロックの左上サンプルに対応するルマサンプルに基づいて決定される、ビデオユニットの1つ以上の隣接するルマブロックの利用可能性を検査するステップと、
前記1つ以上の隣接するルマブロックの利用可能性に基づいて、前記ビデオユニットの隣接するルマサンプルを検索するか否かを決定するステップであり、前記1つ以上の隣接するルマブロックは前記隣接するルマサンプルを構成する、ステップと、
前記隣接するサンプルが利用可能な場合に、端数処理ベースの平均演算によって、前記隣接するルマサンプルを使用して、計算された平均ルマ変数に基づいてビンインデックスを導出するステップと、
によって導出される、
非一時的なコンピュータで読取り可能な記憶媒体。 - ビデオ処理装置によって実行される方法であって、前記方法は、
ビデオの現在クロマビデオブロックについて、前記現在クロマビデオブロックのクロマ残差サンプルにスケーリングプロセスが適用されることを決定するステップと、
前記クロマ残差サンプルに前記スケーリングプロセスを適用することにより、ビットストリームを生成するステップと、を含み、
前記スケーリングプロセスにおいて、前記クロマ残差サンプルは、前記現在クロマビデオブロックを再構成するために使用される前に、少なくとも1つのスケーリング因子に基づいてスケーリングされ、
1つ以上のシンタックス要素、および、区分線形モデルのピースを識別するビンインデックスが、前記少なくとも1つのスケーリング因子を導出するために使用され、かつ、前記1つ以上のシンタックス要素は、条件付きで前記ビットストリーム内に含まれ、
前記1つ以上のシンタックス要素は、前記ビットストリームにおける適応パラメータセットに含まれており、
前記ビンインデックスは、
前記現在クロマビデオブロックの左上サンプルに対応するルマサンプルに基づいて決定される、ビデオユニットの1つ以上の隣接するルマブロックの利用可能性を検査するステップと、
前記1つ以上の隣接するルマブロックの利用可能性に基づいて、前記ビデオユニットの隣接するルマサンプルを検索するか否かを決定するステップであり、前記1つ以上の隣接するルマブロックは前記隣接するルマサンプルを構成する、ステップと、
前記隣接するサンプルが利用可能な場合に、端数処理ベースの平均演算によって、前記隣接するルマサンプルを使用して、計算された平均ルマ変数に基づいてビンインデックスを導出するステップと、
によって導出される、
方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2019092433 | 2019-06-22 | ||
CNPCT/CN2019/092433 | 2019-06-22 | ||
PCT/CN2020/097374 WO2020259427A1 (en) | 2019-06-22 | 2020-06-22 | Syntax element for chroma residual scaling |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022539008A JP2022539008A (ja) | 2022-09-07 |
JP7418478B2 true JP7418478B2 (ja) | 2024-01-19 |
Family
ID=74059905
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021576244A Active JP7418478B2 (ja) | 2019-06-22 | 2020-06-22 | クロマ残差スケーリングのためのシンタックス要素 |
Country Status (6)
Country | Link |
---|---|
US (2) | US11924472B2 (ja) |
EP (1) | EP3973707A4 (ja) |
JP (1) | JP7418478B2 (ja) |
KR (1) | KR20220024006A (ja) |
CN (2) | CN117478908A (ja) |
WO (1) | WO2020259427A1 (ja) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7277599B2 (ja) | 2019-03-08 | 2023-05-19 | 北京字節跳動網絡技術有限公司 | 映像処理におけるモデルベース再整形に対する制約 |
WO2020211868A1 (en) | 2019-04-18 | 2020-10-22 | Beijing Bytedance Network Technology Co., Ltd. | Reduction of latency in cross component mode |
CN117579841A (zh) | 2019-04-23 | 2024-02-20 | 北京字节跳动网络技术有限公司 | 降低跨分量依赖性的方法 |
KR102641796B1 (ko) | 2019-05-08 | 2024-03-04 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 교차-성분 코딩의 적용가능성에 대한 조건들 |
EP3977728A4 (en) * | 2019-06-21 | 2022-08-17 | Huawei Technologies Co., Ltd. | METHOD AND APPARATUS FOR ENCODING VIDEO AND STILL IMAGES USING ADAPTIVE RESIDUAL BLOCK SHAPE RESAMPLING |
JP7305810B2 (ja) * | 2019-06-24 | 2023-07-10 | エルジー エレクトロニクス インコーポレイティド | ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング |
CN114097232A (zh) * | 2019-06-25 | 2022-02-25 | 交互数字Vc控股法国有限公司 | 用于译码/解码图片数据的方法和装置 |
WO2021006582A1 (ko) | 2019-07-05 | 2021-01-14 | 엘지전자 주식회사 | 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩 |
CN114391258B (zh) | 2019-07-05 | 2023-07-18 | Lg电子株式会社 | 基于亮度映射的视频或图像编码 |
KR20220017425A (ko) | 2019-07-05 | 2022-02-11 | 엘지전자 주식회사 | 루마 샘플들의 맵핑 및 크로마 샘플들의 스케일링 기반 비디오 또는 영상 코딩 |
CN117395396A (zh) | 2019-07-07 | 2024-01-12 | 北京字节跳动网络技术有限公司 | 色度残差缩放的信令通知 |
KR20220088680A (ko) * | 2019-08-06 | 2022-06-28 | 오피 솔루션즈, 엘엘씨 | 프레임 타입에 기반한 적응적 해상도 관리의 묵시적 시그널링 |
CN112788345B (zh) * | 2019-11-11 | 2023-10-24 | 腾讯美国有限责任公司 | 视频数据解码方法、装置、计算机设备和存储介质 |
US11425405B2 (en) * | 2019-11-15 | 2022-08-23 | Qualcomm Incorporated | Cross-component adaptive loop filter in video coding |
WO2021100450A1 (ja) * | 2019-11-21 | 2021-05-27 | 日本放送協会 | イントラ予測装置、画像符号化装置、画像復号装置、及びプログラム |
US20230069089A1 (en) * | 2021-08-31 | 2023-03-02 | Mediatek Inc. | Video decoder with hardware shared between different processing circuits and associated video decoding method |
US20230103405A1 (en) * | 2021-10-04 | 2023-04-06 | Tencent America LLC | Method and apparatus for intra block copy prediction with sample padding |
Family Cites Families (107)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2051524A1 (en) | 2007-10-15 | 2009-04-22 | Panasonic Corporation | Image enhancement considering the prediction error |
US9571856B2 (en) | 2008-08-25 | 2017-02-14 | Microsoft Technology Licensing, Llc | Conversion operations in scalable video encoding and decoding |
WO2011126272A2 (en) | 2010-04-05 | 2011-10-13 | Samsung Electronics Co., Ltd. | Method and apparatus for encoding video by using dynamic-range transformation, and method and apparatus for decoding video by using dynamic-range transformation |
KR101540899B1 (ko) | 2010-04-09 | 2015-07-30 | 미쓰비시덴키 가부시키가이샤 | 화상 부호화 장치 |
CN106231328B (zh) | 2010-04-13 | 2020-06-12 | Ge视频压缩有限责任公司 | 解码器、解码方法、编码器以及编码方法 |
CN103238320B (zh) | 2010-09-30 | 2016-06-01 | 三星电子株式会社 | 通过使用平滑插值滤波器对图像进行插值的方法和装置 |
WO2012090504A1 (en) | 2010-12-28 | 2012-07-05 | Panasonic Corporation | Methods and apparatuses for coding and decoding video stream |
WO2012175003A1 (en) | 2011-06-20 | 2012-12-27 | Mediatek Singapore Pte. Ltd. | Method and apparatus of chroma intra prediction with reduced line memory |
KR20130058524A (ko) | 2011-11-25 | 2013-06-04 | 오수미 | 색차 인트라 예측 블록 생성 방법 |
JP5375938B2 (ja) | 2011-12-14 | 2013-12-25 | ソニー株式会社 | 復号装置及び方法 |
CN103227917B (zh) | 2012-01-31 | 2016-12-14 | 华为技术有限公司 | 解码方法和装置 |
CN104471940B (zh) | 2012-04-16 | 2017-12-15 | 联发科技(新加坡)私人有限公司 | 色度帧内预测方法及装置 |
GB2501535A (en) | 2012-04-26 | 2013-10-30 | Sony Corp | Chrominance Processing in High Efficiency Video Codecs |
CN111629208B (zh) | 2012-07-02 | 2021-12-21 | 韩国电子通信研究院 | 图像编码/解码方法和非暂时性计算机可读记录介质 |
US9854259B2 (en) | 2012-07-09 | 2017-12-26 | Qualcomm Incorporated | Smoothing of difference reference picture |
US9350899B2 (en) | 2012-09-14 | 2016-05-24 | Qualcomm Incorporated | Methods and device for efficient resampling and resizing of digital images |
AU2012232992A1 (en) | 2012-09-28 | 2014-04-17 | Canon Kabushiki Kaisha | Method, apparatus and system for encoding and decoding the transform units of a coding unit |
GB2513111A (en) | 2013-04-08 | 2014-10-22 | Sony Corp | Data encoding and decoding |
US9503733B2 (en) | 2013-04-10 | 2016-11-22 | ARRIS Enterprises, LLC | Re-sampling with phase offset adjustment for luma and chroma to signal adaptive filters in scalable video coding |
EP3598751B1 (en) | 2013-06-28 | 2024-04-10 | Velos Media International Limited | Methods and devices for emulating low-fidelity coding in a high-fidelity coder |
US9648330B2 (en) | 2013-07-15 | 2017-05-09 | Qualcomm Incorporated | Inter-color component residual prediction |
MY178305A (en) | 2013-10-11 | 2020-10-07 | Vid Scale Inc | High level syntax for hevc extensions |
US9648332B2 (en) | 2013-10-28 | 2017-05-09 | Qualcomm Incorporated | Adaptive inter-color component residual prediction |
US10397607B2 (en) | 2013-11-01 | 2019-08-27 | Qualcomm Incorporated | Color residual prediction for video coding |
WO2015100522A1 (en) | 2013-12-30 | 2015-07-09 | Mediatek Singapore Pte. Ltd. | Methods for inter-component residual prediction |
US20180176588A1 (en) | 2014-03-14 | 2018-06-21 | Samsung Electronics Co., Ltd. | Scalable video encoding/decoding method and apparatus |
US9930348B2 (en) | 2014-03-14 | 2018-03-27 | Qualcomm Incorporated | Coefficient level coding in a video coding process |
US10142642B2 (en) | 2014-06-04 | 2018-11-27 | Qualcomm Incorporated | Block adaptive color-space conversion coding |
US20150373350A1 (en) | 2014-06-20 | 2015-12-24 | Qualcomm Incorporated | Temporal motion vector prediction (tmvp) indication in multi-layer codecs |
US10200700B2 (en) | 2014-06-20 | 2019-02-05 | Qualcomm Incorporated | Cross-component prediction in video coding |
RU2017112309A (ru) | 2014-09-12 | 2018-10-12 | Вид Скейл, Инк. | Межкомпонентная декорреляция для видеокодирования |
EP3198874A4 (en) | 2014-10-28 | 2018-04-04 | MediaTek Singapore Pte Ltd. | Method of guided cross-component prediction for video coding |
US9998742B2 (en) | 2015-01-27 | 2018-06-12 | Qualcomm Incorporated | Adaptive cross component residual prediction |
DE202016009102U1 (de) | 2015-02-19 | 2022-04-22 | Magic Pony Technology Limited | Verbesserung visueller Daten mittels gestufter Faltungen |
GB201603144D0 (en) | 2016-02-23 | 2016-04-06 | Magic Pony Technology Ltd | Training end-to-end video processes |
US10015491B2 (en) | 2015-04-06 | 2018-07-03 | Dolby Laboratories Licensing Corporation | In-loop block-based image reshaping in high dynamic range video coding |
CN107852512A (zh) | 2015-06-07 | 2018-03-27 | 夏普株式会社 | 基于亮度转换函数或视频色彩分量值的优化视频编码的系统及方法 |
US10609395B2 (en) | 2015-07-28 | 2020-03-31 | Vid Scale, Inc. | High dynamic range video coding architectures with multiple operating modes |
WO2017053432A1 (en) | 2015-09-21 | 2017-03-30 | Vid Scale, Inc. | Inverse reshaping for high dynamic range video coding |
US20170105014A1 (en) | 2015-10-08 | 2017-04-13 | Qualcomm Incorporated | Luma-driven chroma scaling for high dynamic range and wide color gamut contents |
WO2017059926A1 (en) | 2015-10-09 | 2017-04-13 | Telefonaktiebolaget Lm Ericsson (Publ) | Cross component prediction in video coding |
US20170150186A1 (en) | 2015-11-25 | 2017-05-25 | Qualcomm Incorporated | Flexible transform tree structure in video coding |
WO2017138352A1 (en) | 2016-02-08 | 2017-08-17 | Sharp Kabushiki Kaisha | Systems and methods for transform coefficient coding |
GB2548358A (en) | 2016-03-15 | 2017-09-20 | Nokia Technologies Oy | A method, an apparatus and a computer program product for coding a 360-degree panoramic images and video |
EP3433833B1 (en) | 2016-03-23 | 2021-07-07 | Dolby Laboratories Licensing Corporation | Encoding and decoding reversible production-quality single-layer video signals |
WO2017164297A1 (ja) | 2016-03-25 | 2017-09-28 | パナソニックIpマネジメント株式会社 | 信号依存型適応量子化を用いて動画像を符号化及び復号するための方法及び装置 |
US10645403B2 (en) | 2016-05-19 | 2020-05-05 | Dolby Laboratories Licensing Corporation | Chroma reshaping for high dynamic range images |
EP3459248A1 (en) | 2016-05-19 | 2019-03-27 | Dolby Laboratories Licensing Corporation | Chroma reshaping for high dynamic range images |
CA3025490A1 (en) | 2016-05-28 | 2017-12-07 | Mediatek Inc. | Method and apparatus of current picture referencing for video coding using affine motion compensation |
US10484712B2 (en) | 2016-06-08 | 2019-11-19 | Qualcomm Incorporated | Implicit coding of reference line index used in intra prediction |
CN113453000B (zh) | 2016-07-22 | 2024-01-12 | 夏普株式会社 | 使用自适应分量缩放对视频数据进行编码的系统和方法 |
US10390015B2 (en) | 2016-08-26 | 2019-08-20 | Qualcomm Incorporated | Unification of parameters derivation procedures for local illumination compensation and cross-component linear model prediction |
US10419757B2 (en) | 2016-08-31 | 2019-09-17 | Qualcomm Incorporated | Cross-component filter |
US10575028B2 (en) | 2016-09-09 | 2020-02-25 | Dolby Laboratories Licensing Corporation | Coding of high dynamic range video using segment-based reshaping |
JP2018056685A (ja) | 2016-09-27 | 2018-04-05 | 株式会社ドワンゴ | 画像符号化装置、画像符号化方法、及び画像符号化プログラム、並びに、画像復号装置、画像復号方法、及び画像復号プログラム |
CN109804625A (zh) * | 2016-10-04 | 2019-05-24 | 韩国电子通信研究院 | 对图像编码/解码的方法和装置及存储比特流的记录介质 |
US10477240B2 (en) | 2016-12-19 | 2019-11-12 | Qualcomm Incorporated | Linear model prediction mode with sample accessing for video coding |
WO2018116925A1 (ja) | 2016-12-21 | 2018-06-28 | シャープ株式会社 | イントラ予測画像生成装置、画像復号装置、および画像符号化装置 |
US20180199062A1 (en) | 2017-01-11 | 2018-07-12 | Qualcomm Incorporated | Intra prediction techniques for video coding |
US11025903B2 (en) | 2017-01-13 | 2021-06-01 | Qualcomm Incorporated | Coding video data using derived chroma mode |
US10694181B2 (en) | 2017-01-27 | 2020-06-23 | Qualcomm Incorporated | Bilateral filters in video coding with reduced complexity |
EP3386198A1 (en) | 2017-04-07 | 2018-10-10 | Thomson Licensing | Method and device for predictive picture encoding and decoding |
US11190799B2 (en) | 2017-06-21 | 2021-11-30 | Lg Electronics Inc. | Intra-prediction mode-based image processing method and apparatus therefor |
WO2019006300A1 (en) | 2017-06-29 | 2019-01-03 | Dolby Laboratories Licensing Corporation | INTEGRATED IMAGE REMODELING AND VIDEO CODING |
JP7167923B2 (ja) | 2017-09-15 | 2022-11-09 | ソニーグループ株式会社 | 画像処理装置および方法 |
JP2021010046A (ja) | 2017-10-06 | 2021-01-28 | シャープ株式会社 | 画像符号化装置及び画像復号装置 |
US20190116376A1 (en) | 2017-10-12 | 2019-04-18 | Qualcomm Incorporated | Motion vector predictors using affine motion model in video coding |
CN111713108B (zh) | 2018-02-14 | 2023-10-20 | 杜比实验室特许公司 | 在视频编码中利用率失真优化进行图像再成形 |
US11190790B2 (en) | 2018-04-01 | 2021-11-30 | Lg Electronics Inc. | Parallel processing method for color component of video signal, and device therefor |
CN109005408B (zh) | 2018-08-01 | 2020-05-29 | 北京奇艺世纪科技有限公司 | 一种帧内预测方法、装置及电子设备 |
GB2590844B (en) | 2018-08-17 | 2023-05-03 | Beijing Bytedance Network Tech Co Ltd | Simplified cross component prediction |
CN110896479B (zh) | 2018-09-12 | 2023-10-03 | 北京字节跳动网络技术有限公司 | 单行交叉分量线性模型预测模式 |
WO2020084510A1 (en) | 2018-10-23 | 2020-04-30 | Beijing Bytedance Network Technology Co., Ltd. | Adaptive control point selection for affine coding |
KR20230158645A (ko) | 2018-11-05 | 2023-11-20 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 리파인먼트를 이용한 인터 예측을 위한 보간 |
CN113039791B (zh) | 2018-11-06 | 2024-02-23 | 北京字节跳动网络技术有限公司 | 帧内预测的参数推导中的复杂度降低 |
KR20230170146A (ko) | 2018-12-07 | 2023-12-18 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 컨텍스트 기반 인트라 예측 |
CN113273213A (zh) * | 2018-12-31 | 2021-08-17 | 韩国电子通信研究院 | 图像编码/解码方法和设备以及存储比特流的记录介质 |
CN113994668A (zh) | 2019-02-01 | 2022-01-28 | 北京字节跳动网络技术有限公司 | 基于环路整形的滤波过程 |
SG11202109131PA (en) | 2019-02-22 | 2021-09-29 | Huawei Tech Co Ltd | Method and apparatus for affine based inter prediction of chroma subblocks |
KR102628086B1 (ko) | 2019-02-22 | 2024-01-23 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 인트라 예측을 위한 이웃 샘플 선택 |
CN115967810A (zh) | 2019-02-24 | 2023-04-14 | 抖音视界有限公司 | 对视频数据进行编解码的方法、设备及计算机可读介质 |
CN113545056A (zh) | 2019-02-28 | 2021-10-22 | 交互数字Vc控股公司 | 用于图片编码和解码的方法及设备 |
EP3703366A1 (en) * | 2019-02-28 | 2020-09-02 | InterDigital VC Holdings, Inc. | Method and device for picture encoding and decoding |
EP3935847A4 (en) * | 2019-03-04 | 2022-12-07 | Alibaba Group Holding Limited | METHOD AND SYSTEM FOR PROCESSING VIDEO CONTENT |
WO2020177702A1 (en) | 2019-03-04 | 2020-09-10 | Beijing Bytedance Network Technology Co., Ltd. | Two-level signaling of filtering information in video processing |
US20200288126A1 (en) * | 2019-03-08 | 2020-09-10 | Qualcomm Incorporated | Reshaping filter average calculation for video coding |
US20200288159A1 (en) | 2019-03-08 | 2020-09-10 | Qualcomm Incorporated | Combined residual coding in video coding |
JP7277599B2 (ja) | 2019-03-08 | 2023-05-19 | 北京字節跳動網絡技術有限公司 | 映像処理におけるモデルベース再整形に対する制約 |
CN117499644A (zh) | 2019-03-14 | 2024-02-02 | 北京字节跳动网络技术有限公司 | 环路整形信息的信令和语法 |
CN113796074A (zh) | 2019-03-25 | 2021-12-14 | 联发科技股份有限公司 | 用于视频编解码的量化矩阵计算和表示的方法和装置 |
WO2020204413A1 (ko) * | 2019-04-03 | 2020-10-08 | 엘지전자 주식회사 | 복원 픽처를 수정하는 비디오 또는 영상 코딩 |
WO2020211868A1 (en) | 2019-04-18 | 2020-10-22 | Beijing Bytedance Network Technology Co., Ltd. | Reduction of latency in cross component mode |
WO2020216175A1 (en) | 2019-04-20 | 2020-10-29 | Beijing Bytedance Network Technology Co., Ltd. | Signaling of syntax elements for joint coding of chrominance residuals |
CN117579841A (zh) | 2019-04-23 | 2024-02-20 | 北京字节跳动网络技术有限公司 | 降低跨分量依赖性的方法 |
CN111866510A (zh) | 2019-04-30 | 2020-10-30 | 华为技术有限公司 | 视频序列的帧内预测方法及装置 |
KR102641796B1 (ko) * | 2019-05-08 | 2024-03-04 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 교차-성분 코딩의 적용가능성에 대한 조건들 |
US11930191B2 (en) * | 2019-05-16 | 2024-03-12 | Lg Electronics Inc. | Luma mapping—and chroma scaling-based video or image coding |
US11388406B2 (en) | 2019-05-20 | 2022-07-12 | Dolby Laboratories Licensing Corporation | Piece-wise-linear mapping for in-loop reshaping in image coding |
JP2021002780A (ja) * | 2019-06-21 | 2021-01-07 | シャープ株式会社 | 動画像復号装置および動画像符号化装置 |
CN117395396A (zh) | 2019-07-07 | 2024-01-12 | 北京字节跳动网络技术有限公司 | 色度残差缩放的信令通知 |
CN117579816A (zh) * | 2019-07-11 | 2024-02-20 | 北京字节跳动网络技术有限公司 | 用于视频编解码中的帧内块复制的比特流一致性约束 |
US11601657B2 (en) | 2020-04-02 | 2023-03-07 | Qualcomm Incorporated | LUMA mapping with chroma scaling (LMCS) in video coding |
WO2021201515A1 (ko) | 2020-04-02 | 2021-10-07 | 엘지전자 주식회사 | Hls를 시그널링하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 컴퓨터 판독 가능한 기록 매체 |
US11375212B2 (en) | 2020-04-18 | 2022-06-28 | Qualcomm Incorporated | Flexible chroma processing for dynamic range adjustment |
US20230214959A1 (en) | 2020-06-15 | 2023-07-06 | Sony Group Corporation | Information processing apparatus, information processing method, and information processing program |
US20210400257A1 (en) | 2020-06-18 | 2021-12-23 | Lg Electronics Inc. | Image encoding/decoding method and apparatus for signaling high level information for tool control based on colour representation format, and computer-readable recording medium strong bitstream |
WO2022115698A1 (en) * | 2020-11-30 | 2022-06-02 | Beijing Dajia Internet Information Technology Co., Ltd. | Chroma coding enhancement in cross-component sample adaptive offset |
-
2020
- 2020-06-22 WO PCT/CN2020/097374 patent/WO2020259427A1/en unknown
- 2020-06-22 CN CN202311527547.2A patent/CN117478908A/zh active Pending
- 2020-06-22 CN CN202080045462.9A patent/CN113994697A/zh active Pending
- 2020-06-22 EP EP20832921.9A patent/EP3973707A4/en active Pending
- 2020-06-22 KR KR1020217040624A patent/KR20220024006A/ko unknown
- 2020-06-22 JP JP2021576244A patent/JP7418478B2/ja active Active
-
2021
- 2021-12-09 US US17/546,621 patent/US11924472B2/en active Active
-
2023
- 2023-04-04 US US18/295,568 patent/US20230308691A1/en active Pending
Non-Patent Citations (2)
Title |
---|
Benjamin Bross et al.,"Versatile Video Coding (Draft 5)",[JVET-N 1001-v8] (version 8),Joint Video Experts Team (JVET),2019年06月11日,pp. 24,40-43,47,80,85-86,102,268-269,271 |
LU, Taoran et al.,"CE12:Mapping functions Test CE12-1 and CE12-2",[JVET-M0427-v3](version 3),Joint Video Experts Team(JVET),2019年01月15日,pp.1-24 |
Also Published As
Publication number | Publication date |
---|---|
CN113994697A (zh) | 2022-01-28 |
US20220109885A1 (en) | 2022-04-07 |
KR20220024006A (ko) | 2022-03-03 |
CN117478908A (zh) | 2024-01-30 |
US11924472B2 (en) | 2024-03-05 |
EP3973707A4 (en) | 2022-08-31 |
JP2022539008A (ja) | 2022-09-07 |
WO2020259427A1 (en) | 2020-12-30 |
US20230308691A1 (en) | 2023-09-28 |
EP3973707A1 (en) | 2022-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7418478B2 (ja) | クロマ残差スケーリングのためのシンタックス要素 | |
JP7460748B2 (ja) | クロマ残差スケーリングのシグナリング | |
JP7302009B2 (ja) | クロスコンポーネントモードの利用可能性に対する制約 | |
JP7407206B2 (ja) | クロスコンポーネントコーディングの適用条件 | |
JP7317991B2 (ja) | クロスコンポーネント依存性を低減するための方法 | |
US11683476B2 (en) | Size restriction for intra-block copy virtual buffer | |
US20230247192A1 (en) | Setting intra-block copy virtual buffer based on virtual pipeline data unit | |
JPWO2020216246A5 (ja) | ||
KR102660738B1 (ko) | 크로마 잔차 스케일링의 시그널링 | |
KR102660668B1 (ko) | 크로스 컴포넌트 의존성 감소를 위한 방법들 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211221 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230519 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230905 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230925 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231212 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240109 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7418478 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |