JP2023501192A - クロス成分適応ループフィルタ - Google Patents
クロス成分適応ループフィルタ Download PDFInfo
- Publication number
- JP2023501192A JP2023501192A JP2022525117A JP2022525117A JP2023501192A JP 2023501192 A JP2023501192 A JP 2023501192A JP 2022525117 A JP2022525117 A JP 2022525117A JP 2022525117 A JP2022525117 A JP 2022525117A JP 2023501192 A JP2023501192 A JP 2023501192A
- Authority
- JP
- Japan
- Prior art keywords
- video
- alf
- unit
- samples
- boundaries
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 83
- 238000000034 method Methods 0.000 claims abstract description 368
- 238000001914 filtration Methods 0.000 claims abstract description 134
- 230000008569 process Effects 0.000 claims abstract description 57
- 238000003672 processing method Methods 0.000 claims abstract description 35
- 238000006243 chemical reaction Methods 0.000 claims abstract description 33
- 238000012545 processing Methods 0.000 claims description 234
- 241000023320 Luma <angiosperm> Species 0.000 claims description 43
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims description 43
- 239000011449 brick Substances 0.000 claims description 30
- 230000009466 transformation Effects 0.000 claims description 17
- 230000002123 temporal effect Effects 0.000 claims description 14
- 238000005192 partition Methods 0.000 claims description 7
- 238000012986 modification Methods 0.000 claims description 6
- 230000004048 modification Effects 0.000 claims description 6
- 238000009795 derivation Methods 0.000 claims description 5
- 230000001131 transforming effect Effects 0.000 claims description 4
- 230000033001 locomotion Effects 0.000 description 66
- 238000005516 engineering process Methods 0.000 description 28
- 239000000872 buffer Substances 0.000 description 27
- 230000000007 visual effect Effects 0.000 description 26
- 239000013598 vector Substances 0.000 description 17
- 230000011664 signaling Effects 0.000 description 14
- 238000004590 computer program Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 12
- 230000015654 memory Effects 0.000 description 9
- 238000013139 quantization Methods 0.000 description 9
- 238000003860 storage Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 7
- 208000031212 Autoimmune polyendocrinopathy Diseases 0.000 description 6
- 230000006978 adaptation Effects 0.000 description 6
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 239000010432 diamond Substances 0.000 description 6
- 238000013461 design Methods 0.000 description 5
- 238000000638 solvent extraction Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 3
- 229910003460 diamond Inorganic materials 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- QNRATNLHPGXHMA-XZHTYLCXSA-N (r)-(6-ethoxyquinolin-4-yl)-[(2s,4s,5r)-5-ethyl-1-azabicyclo[2.2.2]octan-2-yl]methanol;hydrochloride Chemical compound Cl.C([C@H]([C@H](C1)CC)C2)CN1[C@@H]2[C@H](O)C1=CC=NC2=CC=C(OCC)C=C21 QNRATNLHPGXHMA-XZHTYLCXSA-N 0.000 description 2
- 235000019395 ammonium persulphate Nutrition 0.000 description 2
- 238000000261 appearance potential spectroscopy Methods 0.000 description 2
- 230000002146 bilateral effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000000844 transformation Methods 0.000 description 2
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 1
- 241001502919 Gambusia luma Species 0.000 description 1
- 108010063123 alfare Proteins 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 229910052799 carbon Inorganic materials 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/96—Tree coding, e.g. quad-tree coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
パリ条約に基づく適用可能な特許法および/または規則に基づいて、本願は、2019年11月4日出願の国際特許出願第PCT/CN2019/115321号の優先権および利益を適時に主張することを目的とする。法に基づくすべての目的のために、上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
映像コーディング規格は、主に周知のITU-TおよびISO/IEC規格の開発によって発展してきた。ITU-TはH.261とH.263を作り、ISO/IECはMPEG-1とMPEG-4 Visualを作り、両団体はH.262/MPEG-2 VideoとH.264/MPEG-4 AVC(Advanced Video Coding)とH.265/HEVC規格を共同で作った。H.262以来、映像コーディング規格は、時間予測と変換コーディングが利用されるハイブリッド映像コーディング構造に基づく。HEVCを超えた将来の映像コーディング技術を探索するため、2015年には、VCEGとMPEGが共同でJVET(Joint Video Exploration Team)を設立した。それ以来、多くの新しい方法がJVETによって採用され、JEM(Joint Exploration Mode)と呼ばれる参照ソフトウェアに組み込まれてきた。2018年4月には、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)の間にJoint Video Expert Team(JVET)が発足し、HEVCと比較して50%のビットレート削減を目標にVVC規格の策定に取り組んでいる。
色空間は、カラーモデル(又はカラーシステム)としても知られ、色の範囲を数字のタプル(tuple)として簡単に記述する抽象的な数学モデルであり、典型的には3又は4つの値又は色成分(例えばRGB)である。基本的には、色空間は座標系とサブ空間とを合成したものである。
3つのY’CbCr成分の各々は、同じサンプルレートを有し、従って、クロマサブサンプリングは存在しない。この方式は、ハイエンドフィルムスキャナ及び映画のポストプロダクションに用いられることがある。
2つのクロマ成分は、輝度のサンプルレートの半分でサンプリングされ、水平クロマ解像度は半分にされる。これにより、視覚的にほとんどまたは全く差がなく、非圧縮の映像信号の帯域幅を1/3に低減することができる。
4:2:0では、水平サンプリングは4:1:1に比べて2倍になるが、このスキームではCb及びCrチャネルを各1行おきのラインでのみサンプリングするので、垂直解像度は半分になる。従って、データレートは同じである。Cb及びCrはそれぞれ水平及び垂直方向の両方に2倍ずつサブサンプリングされる。異なる水平及び垂直位置を有する4:2:0スキームの3つの変形がある。
● MPEG-2において、Cb及びCrは水平方向に共座している。Cb、Crは垂直方向の画素間に位置する(格子間に位置する)。
● JPEG/JFIF、H.261、及びMPEG-1において、Cb及びCrは、交互の輝度サンプルの中間に間欠的に位置する。
● 4:2:0 DVにおいて、Cb及びCrは、水平方向に共座している。垂直方向には、それらは交互に共座している。
separate_colour_plane_flagの値に基づいて、変数ChromaArrayTypeの値は、以下のように割り当てられる。
- separate_colour_plane_flagが0に等しい場合、ChromaArrayTypeはchroma_format_idcに等しく設定される。
- そうでない場合(separate_colour_plane_flagが1に等しい)、ChromaArrayTypeは0に設定される。
図1は、3つのインループフィルタリングブロック、すなわちデブロッキングフィルタ(DF)、サンプル適応オフセット(SAO)およびALFを含むVVCのエンコーダブロック図の例を示す。DF(予め定義されたフィルタを使用する)とは異なり、SAOおよびALFは、現在のピクチャのオリジナルサンプルを利用し、それぞれ、オフセットを追加することにより、および、有限インパルス応答(FIR)フィルタを適用することにより、オフセットおよびフィルタ係数を信号通知するコード化側情報を用いて、元のサンプルと再構成サンプルとの間の平均二乗誤差を低減する。ALFは、各ピクチャの最後の処理ステージに位置し、前のステージで生成されたアーチファクトを捕捉し、修正しようとするツールと見なすことができる。
JEMにおいて、ブロックに基づくフィルタ適応を用いたジオメトリ変換に基づく適応ループフィルタ(GALF)が適用される。輝度成分は、局所勾配の方向および働きに基づいて、2×2ブロックごとに25個のフィルタのうち1つを選択する。
JEMにおいて、輝度成分として、最大3つの菱形フィルタ形状(図2に示す)を選択することができる。図2は、3つのGALFフィルタ形状、すなわち5×5菱形、7×7菱形、9×9菱形(左側から右側へ)を示す。輝度成分に使用されるフィルタ形状を示すために、ピクチャレベルでインデックスが信号通知される。
各2×2ブロックを25個のクラスのうちの1つに分類する。分類インデックスCは、その方向性DおよびアクティビティA^の量子化値に基づいて、以下のように導出される。
C=5D+A^ (1)
それぞれの2×2ブロックをフィルタリングする前に、そのブロックに対して計算された勾配値に基づいて、フィルタ係数f(k,l)に対して、回転、又は対角線及び垂直方向の反転等の幾何学的変換を施す。これは、これらの変換をフィルタサポート領域内のサンプルに適用することに等しい。その考えは、ALFが適用される異なるブロックを、それらの方向性を揃えることによって、より類似させることである。
対角線:fD(k,l)=f(l,k),
垂直方向の反転:fV(k,l)=f(k,K-l-1), (9)
回転:fR(k,l)=f(K-l-1,k)
この場合、Kはフィルタのサイズであり、0≦k,l≦K-1が係数座標であり、位置(0,0)は左上隅にあり、位置(K-1,K-1)は右下隅にある。この変換は、そのブロックに対して計算された勾配値に基づいて、フィルタ係数f(k,l)に適用される。変換と4方向の4つの勾配との関係を表1にまとめる。
JEMにおいて、GALFフィルタパラメータは、第1のCTUのために、すなわち、スライスヘッダの後且つ第1のCTUのSAOパラメータの前に信号通知される。最大25組の輝度フィルタ係数を信号通知することができる。ビットオーバーヘッドを低減するために、異なる分類のフィルタ係数をマージすることができる。また、参照ピクチャのGALF係数を記憶し、現在のピクチャのGALF係数として再利用することができる。現在のピクチャは、参照ピクチャのために記憶されたGALF係数を使用し、GALF係数の信号通知を迂回することを選択してもよい。この場合、1つの参照ピクチャへのインデックスのみが通知され、記憶されている指定された参照ピクチャのGALF係数が現在のピクチャに継承される。
デコーダ側において、1つのブロックに対してGALFが有効化されると、このブロック内のそれぞれのサンプルR(i,j)がフィルタリングされ、その結果、以下に示すように、サンプル値R’(i,j)が得られる。ここで、Lは、フィルタ長を表し、fm,nは、フィルタ係数を表し、f(k,l)は、復号化されたフィルタ係数を表す。
2.4.1. フィルタリング再定式化
式(11)は、コーディング効率に影響を及ぼすことなく、以下の式で再定式化することができる。
上記(13)のフィルタ式を使用することで、単純なクリッピング関数を使用して、近傍のサンプル値(I(x+i,y+j))が現在のサンプル値(I(x,y))のフィルタリングと異なり過ぎている場合に、その影響を低減することで、非線形性を容易に導入し、ALFをより効率的にする。
ハードウェアおよび組み込みソフトウェアにおいて、ピクチャに基づく処理は、その高いピクチャバッファ要件のために、実際には受け入れられない。オンチップピクチャバッファの使用は非常に高価であり、オフチップピクチャバッファの使用は、外部メモリアクセス、電力消費、およびデータアクセス待ち時間を大幅に増加させる。そのため、実際の製品において、DF、SAO、ALFを画像に基づく復号からLCUに基づく復号に変更することになる。DF、SAO、ALFにLCUに基づく処理を使用する場合、複数のLCUを並列処理するために、LCUパイプライン方式を用いたラスタスキャンでLCUごとに全体の復号処理を行うことができる。この場合、1つのLCU行を処理するには上側LCU行からのピクセルが必要であるので、DF、SAO、およびALFのためにラインバッファが必要である。オフチップラインバッファ(例えば、DRAM)を使用する場合、外部メモリの帯域幅および消費電力が増大し、オンチップラインバッファ(例えば、SRAM)を使用する場合、チップ面積が増大する。従って、ラインバッファは既にピクチャバッファよりも遥かに小さいが、ラインバッファを低減することが依然として望ましい。
- ラインK-N(水平DFピクセル):4ライン
- ラインD-J(SAOフィルタリングされたピクセル):7ライン
- ラインJとラインKとの間のSAOエッジオフセット分類子値:0.25ライン
図5Aおよび図5Bは、仮想境界がCTU境界の4ライン上にある場合(N=4)について、修正されたブロック分類を示す。図5Aは、ラインGで始まる4×4ブロックの分類を示し、図5Bは、ラインKで始まる4×4ブロックの分類を示す。図5Aに示すように、ラインGで始まる4×4ブロックの場合、ブロック分類は、ラインE~Jのみを使用する。しかし、ラインJに属するサンプルのラプラシアン勾配計算は、下にもう1つのライン(ラインK)を必要とする。従って、ラインKはラインJとパディングされる。
図6A~6Cに示すように、フィルタを切り捨てたバージョンは、仮想境界に近いラインに属する輝度サンプルをフィルタリングするために用いられる。図6Aは、仮想境界(VB)の上/下にある(辺ごとに)パディングされるべき1つの必要なラインを示し、図6Bは、VBの上/下にある(辺ごとに)パディングされるべき2つの必要なラインを示し、図6Cは、VBの上/下にある(辺ごとに)パディングされるべき3つの必要なラインを示す。図6Aから6Cにおいて、VBは灰色のラインで表される。図6Aについて例えば、図3で示されたラインMをフィルタリングする場合、即ち、7×7菱形サポートの中心サンプルがラインMにある場合、VBより上の1つのラインに接近することが必要である。この場合、VBより上のサンプルは、VBより下の右下サンプルからコピーされ、例えば、実線のP0サンプルは、上の破線位置にコピーされる。対称的に、実線のP3サンプルもまた、その位置に対するサンプルが利用可能でも、右下の破線の位置にコピーされる。コピーされたサンプルは、輝度フィルタリング処理にのみ用いられる。
CTBに対して非線形ALFが無効である場合、例えば、式(14)におけるクリッピングパラメータk(i,j)が(1<<Bitdepth)に等しい場合、パディング処理は、フィルタ係数を修正(別称、modified-coeff based ALF,MALF)によって置き換えることができる。例えば、ラインL/Iにおけるサンプルをフィルタリングするとき、フィルタ係数c5がc5’に修正され、このケースでは、図8で実線P0Aから破線P0Aへ、実線P3Bから破線P3Bへの輝度サンプルをコピーする必要がない。この場合、二面パディングおよびMALFは、フィルタリングされる現在のサンプルが(x,y)に位置すると仮定して、同じ結果を生成する。
現在のVVCにおけるGALFの設計は、JEMにおける設計に比べ、以下のような大きな変化を有している。
1)適応フィルタ形状は除去される。輝度成分に対しては7×7のフィルタ形状のみが許容され、色度成分に対しては5×5のフィルタ形状のみが許容される。
2)ALFフィルタ係数は、ALF適応パラメータ集合(ALF Adaptation Parameter Set、APS)において信号通知される。
3)非線形ALFを適用してもよい。
4)CTUごとに、色成分ごとに1つのビットフラグが、ALFが有効であるか無効であるかを信号通知される。
5)クラスインデックスの計算は、2×2ではなく、4×4のレベルで行われる。また、JVET-L0147で提案されているように、ALF分類のためのサブサンプリングされたラプラシアン計算方法が利用される。具体的には、1つのブロック内のサンプルごとに水平/垂直/45対角線/135度勾配を計算する必要がない。その代わりに、1:2サブサンプリングが利用される。
VVC草案の最新バージョンにおいて、ALFパラメータは、適応パラメータ集合(Adaptation Parameter Set、APS)において信号通知されてもよく、各CTUによって適応的に選択されてもよい。1つのAPSにおいて、最大25組の輝度フィルタ係数およびクリッピング値インデックス、並びに最大8組のクロマフィルタ係数およびクリッピング値インデックスを信号通知することができる。ビットオーバーヘッドを低減するために、輝度成分の異なる分類のフィルタ係数をマージすることができる。スライスヘッダにおいて、現在のスライスに使用されるAPSのインデックスが信号通知される。
各APS RBSPは、それが参照される前に復号化処理で利用できるか、それを参照する符号化スライスNALユニットのTemporalId以下のTemporalIdを持つ少なくとも一つのアクセスユニット内に含まれるか、外部手段を通じて提供されるものとする。
aspLayerIdをAPS NALユニットのnuh_layer_idとする。aspLayerIdに等しいnuh_layer_idを持つレイヤが独立レイヤである(即ち、vps_independent_layer_flag[GeneralLayerIdx[aspLayerId]])が1に等しい)場合、APS RBSPを含むAPS NALユニットは、それを参照するコーディングスライスNALユニットのnuh_layer_idに等しいnuh_lay_idを持つものとする。それ以外の場合、APS RBSPを含むAPS NALユニットは、それを参照する符号化スライスNALユニットのnuh_layer_idに等しいか、またはそれを参照するコーディングスライスNALユニットを含むレイヤの直接依存レイヤのnuh_layer_idに等しいnuh_layer_idを有しているものとする。
アクセスユニット内において、adaption_parameter_set_idの特定の値と、aps_params_typeの特定の値を持つすべてのAPS NALユニットは、同じコンテンツを有している。
adaptation_parameter_set_idは、他の構文要素が参照するAPSの識別子を提供する。
aps_params_typeがALF_APSまたはSCALING_APSに等しい場合、adaptation_parameter_set_idの値は0~7の範囲に含まれるものとする。
aps_params_typeがLMCS_APSと等しい場合、adaptation_parameter_set_idの値は0~3の範囲に含まれるものとする。
aps_params_typeは、表3に示されるように、APSにおいて実行されるAPSパラメータのタイプを指定する。aps_params_typeが1(LMCS_APS)である場合、adaptation_parameter_set_idの値は、0以上3以下の範囲内にあるものとする。
注2- APS NALユニット(adaption_parameter_set_idの特定の値とaps_params_typeの特定の値を有する)は、ピクチャ間で共有することができ、ピクチャ内の異なるスライスは、異なるALF APSを参照することができる。
aps_extension_flag=0の場合、APS RBSP構文構造にaps_extension_data_flag構文要素が存在しないことを示す。aps_extension_flag=1の場合、APS RBSP構文構造にaps_extension_data_flag構文要素が存在することを示す。
aps_extension_data_flagは任意の値を有することができる。その存在および値は、本明細書バージョンで特定された特徴に対するのデコーダの適合性に影響を与えない。本明細書バージョンに準拠するデコーダは、すべてのaps_extension_data_flag構文要素を無視しなければならない。
alf_luma_filter_signal_flag=1は、輝度フィルタセットが信号通知されることを示す。alf_luma_filter_signal_flag=0は、輝度フィルタセットは信号通知されないことを示す。
alf_chroma_filter_signal_flagが1に等しい場合、クロマフィルタが信号通知されることを示す。alf_chroma_filter_signal_flagが0に等しい場合、クロマフィルタが信号通知されないことを示す。ChromaArrayTypeが0に等しい場合、alf_chroma_filter_signal_flagは0に等しい。
異なる適応ループフィルタの数を規定する変数NumAlfFiltersは、25に設定される。
alf_luma_clip_flag=0は、線形適応ループフィルタリングが輝度成分に適用されることを規定する。alf_luma_clip_flag=1は、非線形適応ループフィルタリングが輝度成分に適用され得ることを規定する。
alf_luma_num_filters_signalled_minus1プラス1は、輝度係数を信号通知することができる適応ループフィルタクラスの数を規定する。alf_luma_num_filters_signalled_minus1の値は、0~NumAlfFilters-1の範囲内にあるものとする。
alf_luma_coeff_delta_idx[filtIdx]は、filtIdxが示すフィルタクラスのための、0からNumAlfFilters-1までの範囲にわたる、信号通知される適応ループフィルタ輝度係数デルタのインデックスを規定する。alf_luma_coeff_delta_idx[filtIdx]が存在しない場合、それは0であると推論される。alf_luma_coeff_delta_idx[filtIdx]の長さは、Ceil(Log2(alf_luma_num_filters_signalled_minus1+1)ビットである。
1に等しいalf_luma_coeff_signalled_flag equalは、alf_luma_coeff_flag[sfIdx]が信号通知されることを示す。0に等しいalf_luma_coeff_signalled_flagは、alf_luma_coeff_flag[sfIdx]が信号通知されないことを示す。
alf_luma_coeff_flag[sfIdx]=1は、sfIdxで示される輝度フィルタの係数が信号通知されることを規定する。alf_luma_coeff_flag[sfIdx]=0は、sfIdxで示される輝度フィルタのすべてのフィルタ係数が0に等しく定する。存在しない場合、alf_luma_coeff_flag[sfIdx]は1に等しく設定される。
alf_luma_coeff_abs[sfIdx][j]は、sfIdxで示される信号輝度フィルタのj番目の係数の絶対値を規定する。alf_luma_coeff_abs[sfIdx][j]が存在しない場合、それは0に等しいと推論される。
exp-Golomb二値化uek(v)の次数kは3に等しく設定される。
alf_luma_coeff_sign[sfIdx][j]は、sfIdxが示すフィルタのj番目の輝度係数の符号を以下のように規定する。
- alf_luma_coeff_sign[sfIdx][j]が0に等しい場合、対応する輝度フィルタ係数は正の値を有する。
- そうでない場合(alf_luma_coeff_sign[sfIdx][j]=1)、対応する輝度フィルタ係数は負の値を有する。
alf_luma_coeff_sign[sfIdx][j]が存在しない場合、それは0に等しいと推論される。
sfIdx=0..alf_luma_num_filters_signalled_minus1,j=0..11の変数filtCoeff[sfIdx][j]は、次のように初期化される。
filtCoeff[sfIdx][j]=alf_luma_coeff_abs[sfIdx][j]*(1-2 * alf_luma_coeff_sign[sfIdx][j]) (7-47)
要素AlfCoeffL[adaptation_parameter_set_id][filtIdx][j]を有する輝度フィルタ係数AlfCoeffL[adaptation_parameter_set_id]、(但し、filtIdx=0..NumAlfFilters-1、j=0..11)は以下のように導出される。
AlfCoeffL[adaptation_parameter_set_id][filtIdx][j]=filtCoeff[alf_luma_coeff_delta_idx[filtIdx]][j] (7-48)
固定フィルタ係数AlfFixFiltCoeff[i][j](但しi=0..64、j=0..11)、およびのAlfClassToFiltMap[m][n](但しm=0..15、n=0..24)をフィルタマッピングするクラスは、以下のように導出される。
{
{0,0,2,-3,1,-4,1,7,-1,1,-1,5}
{0,0,0,0,0,-1,0,1,0,0,-1,2}
{0,0,0,0,0,0,0,1,0,0,0,0}
{0,0,0,0,0,0,0,0,0,0,-1,1}
{2,2,-7,-3,0,-5,13,22,12,-3,-3,17}
{-1,0,6,-8,1,-5,1,23,0,2,-5,10}
{0,0,-1,-1,0,-1,2,1,0,0,-1,4}
{0,0,3,-11,1,0,-1,35,5,2,-9,9}
{0,0,8,-8,-2,-7,4,4,2,1,-1,25}
{0,0,1,-1,0,-3,1,3,-1,1,-1,3}
{0,0,3,-3,0,-6,5,-1,2,1,-4,21}
{-7,1,5,4,-3,5,11,13,12,-8,11,12}
{-5,-3,6,-2,-3,8,14,15,2,-7,11,16}
{2,-1,-6,-5,-2,-2,20,14,-4,0,-3,25}
{3,1,-8,-4,0,-8,22,5,-3,2,-10,29}
{2,1,-7,-1,2,-11,23,-5,0,2,-10,29}
{-6,-3,8,9,-4,8,9,7,14,-2,8,9}
{2,1,-4,-7,0,-8,17,22,1,-1,-4,23}
{3,0,-5,-7,0,-7,15,18,-5,0,-5,27}
{2,0,0,-7,1,-10,13,13,-4,2,-7,24}
{3,3,-13,4,-2,-5,9,21,25,-2,-3,12}
{-5,-2,7,-3,-7,9,8,9,16,-2,15,12}
{0,-1,0,-7,-5,4,11,11,8,-6,12,21}
{3,-2,-3,-8,-4,-1,16,15,-2,-3,3,26}
{2,1,-5,-4,-1,-8,16,4,-2,1,-7,33}
{2,1,-4,-2,1,-10,17,-2,0,2,-11,33}
{1,-2,7,-15,-16,10,8,8,20,11,14,11}
{2,2,3,-13,-13,4,8,12,2,-3,16,24}
{1,4,0,-7,-8,-4,9,9,-2,-2,8,29}
{1,1,2,-4,-1,-6,6,3,-1,-1,-3,30}
{-7,3,2,10,-2,3,7,11,19,-7,8,10}
{0,-2,-5,-3,-2,4,20,15,-1,-3,-1,22}
{3,-1,-8,-4,-1,-4,22,8,-4,2,-8,28}
{0,3,-14,3,0,1,19,17,8,-3,-7,20}
{0,2,-1,-8,3,-6,5,21,1,1,-9,13}
{-4,-2,8,20,-2,2,3,5,21,4,6,1}
{2,-2,-3,-9,-4,2,14,16,3,-6,8,24}
{2,1,5,-16,-7,2,3,11,15,-3,11,22}
{1,2,3,-11,-2,-5,4,8,9,-3,-2,26}
{0,-1,10,-9,-1,-8,2,3,4,0,0,29}
{1,2,0,-5,1,-9,9,3,0,1,-7,20}
{-2,8,-6,-4,3,-9,-8,45,14,2,-13,7}
{1,-1,16,-19,-8,-4,-3,2,19,0,4,30}
{1,1,-3,0,2,-11,15,-5,1,2,-9,24}
{0,1,-2,0,1,-4,4,0,0,1,-4,7}
{0,1,2,-5,1,-6,4,10,-2,1,-4,10}
{3,0,-3,-6,-2,-6,14,8,-1,-1,-3,31}
{0,1,0,-2,1,-6,5,1,0,1,-5,13}
{3,1,9,-19,-21,9,7,6,13,5,15,21}
{2,4,3,-12,-13,1,7,8,3,0,12,26}
{3,1,-8,-2,0,-6,18,2,-2,3,-10,23}
{1,1,-4,-1,1,-5,8,1,-1,2,-5,10}
{0,1,-1,0,0,-2,2,0,0,1,-2,3}
{1,1,-2,-7,1,-7,14,18,0,0,-7,21}
{0,1,0,-2,0,-7,8,1,-2,0,-3,24}
{0,1,1,-2,2,-10,10,0,-2,1,-7,23}
{0,2,2,-11,2,-4,-3,39,7,1,-10,9}
{1,0,13,-16,-5,-6,-1,8,6,0,6,29}
{1,3,1,-6,-4,-7,9,6,-3,-2,3,33}
{4,0,-17,-1,-1,5,26,8,-2,3,-15,30}
{0,1,-2,0,2,-8,12,-6,1,1,-6,16}
{0,0,0,-1,1,-4,4,0,0,0,-3,11}
{0,1,2,-8,2,-6,5,15,0,2,-7,9}
{1,-1,12,-15,-7,-2,3,6,6,-1,7,30}
}, (7-49)
{
{8,2,2,2,3,4,53,9,9,52,4,4,5,9,2,8,10,9,1,3,39,39,10,9,52}
{11,12,13,14,15,30,11,17,18,19,16,20,20,4,53,21,22,23,14,25,26,26,27,28,10}
{16,12,31,32,14,16,30,33,53,34,35,16,20,4,7,16,21,36,18,19,21,26,37,38,39}
{35,11,13,14,43,35,16,4,34,62,35,35,30,56,7,35,21,38,24,40,16,21,48,57,39}
{11,31,32,43,44,16,4,17,34,45,30,20,20,7,5,21,22,46,40,47,26,48,63,58,10}
{12,13,50,51,52,11,17,53,45,9,30,4,53,19,0,22,23,25,43,44,37,27,28,10,55}
{30,33,62,51,44,20,41,56,34,45,20,41,41,56,5,30,56,38,40,47,11,37,42,57,8}
{35,11,23,32,14,35,20,4,17,18,21,20,20,20,4,16,21,36,46,25,41,26,48,49,58}
{12,31,59,59,3,33,33,59,59,52,4,33,17,59,55,22,36,59,59,60,22,36,59,25,55}
{31,25,15,60,60,22,17,19,55,55,20,20,53,19,55,22,46,25,43,60,37,28,10,55,52}
{12,31,32,50,51,11,33,53,19,45,16,4,4,53,5,22,36,18,25,43,26,27,27,28,10}
{5,2,44,52,3,4,53,45,9,3,4,56,5,0,2,5,10,47,52,3,63,39,10,9,52}
{12,34,44,44,3,56,56,62,45,9,56,56,7,5,0,22,38,40,47,52,48,57,39,10,9}
{35,11,23,14,51,35,20,41,56,62,16,20,41,56,7,16,21,38,24,40,26,26,42,57,39}
{33,34,51,51,52,41,41,34,62,0,41,41,56,7,5,56,38,38,40,44,37,42,57,39,10}
{16,31,32,15,60,30,4,17,19,25,22,20,4,53,19,21,22,46,25,55,26,48,63,58,55}
}, (7-50)
alf_luma_clip_idx[sfIdx][j]は、sfIdxが示す信号通知された輝度フィルタのj番目の係数を乗じる前に使用するクリッピング値のクリッピングインデックスを規定する。alf_luma_clip_idx[sfIdx][j](但しsfIdx=0..alf_luma_num_filters_signalled_minus1かつj=0..11)の値は、0~3の範囲内とすることがビットストリーム適合性の要件である。
輝度フィルタクリッピング値AlfClipL[adaptation_parameter_set_id](但し要素AlfClipL[adaptation_parameter_set_id][filtIdx][j]であり、filtIdx=0..NumAlfFilters-1およびj=0..11)は、BitDepthYに等しく設定されているbitDepthおよびalf_luma_clip_idx[alf_luma_coeff_delta_idx[filtIdx]][j]に等しく設定されているclipIdxに依存して表4で規定されているように導出される。
alf_chroma_num_alt_filters_minus1プラス1は、クロマ成分のための代替フィルタの数を規定する。
alf_chroma_clip_flag[altIdx]=0は、インデックスaltIdxを有するクロマフィルタを使用する場合、クロマ成分に対して線形適応ループフィルタリングを適用することを規定し、alf_chroma_clip_flag[altIdx]=1は、インデックスaltIdxを有するクロマフィルタを使用する場合、クロマ成分に対して非線形適応ループフィルタリングを適用することを規定する。存在しない場合、alf_chroma_clip_flag[altIdx]は0に等しいと推論される。
alf_chroma_coeff_abs[altIdx][j]は、インデックスaltIdxを有する代替クロマフィルタに対するj番目のクロマフィルタ係数の絶対値を規定する。alf_chroma_coeff_abs[altIdx][j]が存在しない場合、それは0に等しいと推論される。alf_chroma_coeff_abs[altIdx][j]の値が0~27-1の範囲内(両端を含む)であることが、ビットストリーム適合性の要件である。
exp-Golomb二値化uek(v)の次数kは3に等しく設定される。
alf_chroma_coeff_sign[altIdx][j]は、インデックスaltIdxを有する代替クロマフィルタのj番目のクロマフィルタ係数の符号を以下のように規定する。
- alf_chroma_coeff_sign[altIdx][j]が0に等しい場合、対応するクロマフィルタ係数は正の値を有する。
- そうでない場合(alf_chroma_coeff_sign[altIdx][j]=1)、対応するクロマフィルタ係数は負の値を有する。
alf_chroma_coeff_sign[altIdx][j]が存在しない場合、それは0に等しいと推論される。
AlfCoeffC[adaptation_parameter_set_id][altIdx][j]を要素とするクロマフィルタ係数AlfCoeffC[adaptation_parameter_set_id][altIdx](但しaltIdx=0..alf_chroma_num_alt_filters_minus1,j=0..5とする)は、以下のように導出する。
AlfCoeffC[adaptation_parameter_set_id][altIdx][j]=alf_chroma_coeff_abs[altIdx][j]*(1-2*alf_chroma_coeff_sign[altIdx][j]) (7-51)
AlfCoeffC[adaptation_parameter_set_id][altIdx][j]の値(但し、altIdx=0..alf_chroma_num_alt_filters_minus1,j=0..5)が-27-1~27-1の範囲内にあることは、ビットストリーム適合性の要件である。
alf_chroma_clip_idx[altIdx][j]は、インデックスaltIdxを有する代替クロマフィルタのj番目の係数を乗じる前に使用するクリッピング値のクリッピングインデックスを規定する。alf_chroma_clip_idx[altIdx][j]の値(但し、altIdx=0..alf_chroma_num_alt_filters_minus1,j=0..5である)が、0~3の範囲内にあることは、ビットストリーム適合性の要件である。
要素AlfClipC[adaptation_parameter_set_id][altIdx][j]を有するクロマフィルタクリッピング値AlfClipC[adaptation_parameter_set_id][altIdx](但し、altIdx=0..alf_chroma_num_alt_filters_minus1,j=0..5)は、BitDepthCと等しく設定されているbitDepthおよびalf_chroma_clip_idx[altIdx][j]と等しく設定されているclipIdxに依存して、表4で規定されているように導出される。
VTM6において、ALFフィルタパラメータは、適応パラメータセット(APS)において信号通知される。1つのAPSにおいて、最大25組の輝度フィルタ係数およびクリッピング値インデックス、並びに最大8組のクロマフィルタ係数およびクリッピング値インデックスを信号通知することができる。ビットオーバーヘッドを低減するために、輝度成分の異なる分類のフィルタ係数をマージすることができる。スライスヘッダにおいて、現在のスライスに使用されるAPSのインデックスが信号通知される。
1. ALFが輝度CTBに適用されるかどうか。そうである場合、ステップ2に進む。そうでない場合、さらなる信号通知は必要とされない。
2. 現在のスライスに使用されているALF APSの数をチェックし、それをnumALFAPSで表す。
3. numALFAPSが0に等しい場合、固定フィルタのインデックス(例えば、alf_luma_fixed_filter_idx)が信号通知される。そうでない場合、以下が適用される。
- 1つ目のALF APSから予測されたものであるかどうかを示すためのフラグを信号通知する。
- そうでない場合、ステップ4に進む。そうでない場合には、輝度CTBのためのALFパラメータの信号通知は停止される。
4. numALFAPSが1よりも大きい場合、それがALF APSから予測されたものであるかどうかを示すためのフラグを信号通知する。
- 大きくない場合、固定フィルタのインデックスを信号通知する。
- 大きい場合、かつnumALFAPSが2よりも大きい場合、ALF APSのインデックスから1を引いたものを、端数を切り捨てた単項信号通知する。
1. Cb/Cr CTBにALFを適用するかどうか。そうである場合、ステップ2に進む。そうでない場合、さらなる信号通知は必要とされない。
2. i番目のALF APSに関連付けられたフィルタのインデックスを信号通知する。ここで、APSインデックスは、スライスヘッダにおいて信号通知される。
クロス成分適応ループフィルタ(CC-ALF)は、輝度サンプル値を用いて各クロマ成分を微調整する。基本的に、CC-ALFは、CC-ALFが適用される場合、輝度サンプルをフィルタリングすることによりクロマサンプルごとの補正を行う。それはループフィルタステップとして適用される。このツールは、ビットストリームにおける情報によって制御され、この情報は、(a)クロマ成分ごとのフィルタ係数と、(b)サンプルブロックのためのフィルタの適用を制御するマスクとを含む。
(x,y)は、微調整されたクロマ成分iの位置である。
(xC,yC)は、(x,y)に基づく輝度位置である。
Siは、クロマ成分iのための輝度におけるフィルタサポートである。
ci(x0,y0)は、フィルタ係数を表す。
● 輝度平面とクロマ平面との間の空間拡大縮小率に基づいて、サポート領域の中心となる輝度位置(xC,yC)を計算する。
● すべてのフィルタ係数はAPSで送信され、8ビットのダイナミックレンジを有する。
● スライスヘッダにおいて、APSが参照されてもよい。
● スライスのクロマ成分ごとに使用されるCC-ALF係数も、時間的サブレイヤに対応するバッファに記憶される。これらの時間的サブレイヤフィルタ係数セットの再利用は、スライスレベルフラグを使用して容易になる。
● CC-ALFフィルタの適用は、可変ブロックサイズで制御され、サンプルのブロックごとに受信されたコンテキスト符号化フラグによって信号通知される。ブロックサイズは、CC-ALF有効化フラグと共に、クロマ成分ごとにスライスレベルで受信される。
● 水平方向の仮想境界のための境界パディングは、繰り返しを利用する。残りの境界については、通常のALFと同じタイプのパディングを使用する。
JVET-P0080に比べ、CC-ALFの設計を簡単にするために、以下のような新しい態様を提案する。
- 複雑性低減
o 図11に示すように、フィルタ形状を3×4菱形に変化させ、フィルタ演算における乗数を低減する。
o CC-ALF係数の6ビットまでのダイナミックレンジを制限
o クロマALFと乗数の共用を許可する。
- ALFとの位置合わせ
o フィルタの選択をCTUレベルでの信号通知に制限
o 時間レイヤ係数バッファの除去
o ALF仮想境界における対称ライン選択の使用
太字の下線付きテキストは、既存の標準への変更案を示す。
alf_ctb_cross_component_cr_idc[xCtb>>CtbLog2SizeY][yCtb>>>CtbLog2SizeY]が0に等しい場合、クロス成分CrフィルタがCr色成分サンプルのブロックの輝度位置(xCtb,yCtb)に適用されていないことを示す。alf_cross_component_cr_idc[xCtb>>CtbLog2SizeY][yCtb>>CtbLog2SizeY]が0に等しくない場合、alf_cross_component_cr_idc[xCtb>>CtbLog2SizeY][yCtb>>CtbLog2SizeY]-thクロス成分CrフィルタがCr色成分サンプルのブロックの輝度位置(xCtb,yCtb)に適用されていることを示す。
2.10.1. ピクチャをサブピクチャ、スライス、タイルに分割
この従属節では、ピクチャをサブピクチャ、スライス、およびタイルにどのように分割するかを規定する。
ALF仮想境界に使用されるパディング法は、「二面パディング」または「ミラーリングパディング(mirrored padding)」と呼ばれてもよく、ここで、(i,j)に位置する1つのサンプルにパディングを行う場合、図6および図7に示すように、サンプルが利用可能でも、同じフィルタ係数を共有する(m,n)に位置する対応するサンプルにもパディングを行う。
1. CC-ALFで使用されるパディング方法は、非線形ALFで使用されるパディング方法と完全には整合していない。
2. CC-ALFのオン/オフ制御はCTBレベルにある。すなわち、それが有効化されている場合、CTB内のすべてのクロマサンプルは、1つのクロマサンプルに対応するフィルタリングされた輝度サンプルから導出オフセットを加えることによって修正されるものとする。
3. CC-ALFおよびクロマALFの両方を適用したクロマサンプルごとに、3段階(クロマALFフィルタリング、CC-ALFオフセット導出、および最終的なクロマサンプルを導出するためのクロマフィルタサンプルの微調整)から少なくとも3つのクリッピング演算が必要である。具体的には、以下の3つのステージを説明する。
a. クロマALF処理において、フィルタリングされたクロマサンプルをクリップする。すなわち、
sumchromaALF=curr+(sumchromaALF+64)>>7) (8-1290)
alfPicture[xCtbC+x][yCtbC+y]=Clip3(0,(1<<BitDepthC)-1,sumchromaALF) (8-1291)
ここで、「curr」は、フィルタリングされる前のクロマサンプルを表し、「sumchromaALF」は、クロマALFフィルタサポートでクリッピングされたクロマサンプルの差分にクロマALFフィルタ係数を掛けた合計を表す。
b. 導出オフセット(sumで示される)を輝度ビット深度に応じた範囲にクリップする、すなわち、
sum=Clip3(-(1<<(BitDepthC-1)),(1<<(BitDepthC-1))-1,sum) (8-1292)
ここで、「sum」は、CC-ALFフィルタサポートにおける輝度サンプルにCC-ALFフィルタ係数を掛けた合計を表す。
c. フィルタリングされたクロマサンプルに導出オフセットを追加した後、最終的に微調整されたクロマサンプルをクリップする。
sum=alfPicture[xCtbC+x][yCtbC+y]+(sum+64)>>(7+(BitDepthY-BitDepthC)) (8-1293)
ccAlfPicture[xCtbC+x][yCtbC+y]=Clip3(0,(1<<BitDepthC)-1,sum) (8-1294)
ここで、「alfPicture[xCtbC+x][yCtbC+y]」は、chroma ALFでフィルタされた後のクロマサンプルを表し(ステージaの出力)、「sum」はCC-ALFフィルタサポートにおける輝度サンプルにCC-ALFフィルタ係数を掛けた合計を表し(ステージbの出力)、ccAlfPictureは最終的に微調整されたクロマサンプルを表している(ステージcの出力、最終ステージ)。
4. 式(8-1293)に示すように、ステージbの出力、即ち、可変の合計は、64と等しいオフセットで丸められるが、(BitDepthY-BitDepthC)を考慮しない。(BitDepthY-BitDepthC)が0に等しくない場合、丸めオフセットは最適ではない。
以下に詳述する実施形態の詳細は、一般的な概念を説明するための例であると考えられるべきである。これらの実施形態は狭義に解釈されるべきではない。さらに、これらの実施形態は、任意の方法で組み合わせることができる。
1. CC-ALFにおいて、「利用不可」のサンプルをパディングする方法は、ALFに使用されるものと同じ規則に従うことができる。
a. 1つの例において、「ミラーリングパディング」は、CC-ALFにおけるALF仮想境界における「利用不可」のサンプルのパディングのために適用され得る。
b. 1つの例において、「繰り返しパディング」は、CC-ALFにおけるスライス/タイル/ブリック/サブピクチャ/ピクチャ/360度仮想境界における「利用不可」のサンプルをパディングするために適用され得る。
c. 一例において、「繰り返しパディング」は、CC-ALFにおけるALF仮想境界を除くすべての境界に適用されてもよい。
i. あるいは、すべての境界に「繰り返しパディング」を適用してもよい。
ii. あるいは、すべての水平境界に「繰り返しパディング」を適用してもよい。
iii. あるいは、すべての垂直境界に「繰り返しパディング」を適用してもよい。
iv. あるいは、すべての水平境界に「ミラーリングパディング」を適用してもよい。
v. あるいは、すべての垂直境界に「ミラーリングパディング」を適用してもよい。
vi. あるいは、すべての境界に「ミラーリングパディング」を適用してもよい。
d. 一例において、「繰り返しパディング」は、「ALF処理ユニット」若しくはCTU、または「狭ALF処理ユニット」若しくは「基本ALF処理ユニット」(以下で定義される)またはこれらのすべての処理ユニットとは異なる映像領域に適用されてもよい。
e. 繰り返しパディングをどのように適用するかは、隣接サンプルが異なる隣接スライス内にあるかどうかに依存し、ここで、現在のスライスはラスタ走査スライスであってもよく、および/または隣接するスライスはラスタ走査スライスであってもよい。
i. 一例において、ラスタ走査スライスにおけるサンプルの場合、「繰り返しパディング」は、「ALF処理ユニット」に適用されてもよい。例えば、隣接する「利用不可」のサンプルは、現在の「ALF処理ユニット」中でその最も近いサンプルでパディングされる。例えば、図17に示すように、現在の「ALF処理ユニット」の左側の隣接サンプルは「利用不可」であり、かつ、現在の「ALF処理ユニット」におけるその最も近いサンプルから「利用不可」のサンプルをそれぞれパディングする。
2. 処理ユニット(例えば、ALF処理ユニットまたは/および狭ALF処理ユニットまたは/およびCTU)の利用不可の隣接サンプルは、ALFまたは/およびCC-ALFにおいて、以下のように、予め定義された順にパディングされてもよい。
a. 処理ユニットの上側の隣接サンプルが利用不可の場合、これらサンプルは処理ユニットの最上行でパディングされてもよい。
i. あるいは、さらに、左上の隣接サンプルは、処理ユニットの左最上サンプルでパディングされてもよい。
ii. あるいは、さらに、右上の隣接サンプルは、処理ユニットの右最上サンプルでパディングされてもよい。
b. 処理ユニットの下側の隣接サンプルが利用不可の場合、処理ユニットの最下行でパディングすることができる。
i. あるいは、さらに、左最下の隣接サンプルは、処理ユニットの左下サンプルでパディングされてもよい。
ii. あるいは、さらに、右下の隣接サンプルは、処理ユニットの右最下サンプルでパディングされてもよい。
c. 処理ユニットの左側の隣接サンプルが利用不可の場合、処理ユニットの左側の列でパディングしてもよい。
d. 処理ユニットの右側の隣接サンプルが利用不可の場合、処理ユニットの右側の列でパディングしてもよい。
e. 処理ユニットの左側の隣接サンプルおよび上側の隣接サンプルが利用可能であり、処理ユニットの左上の隣接サンプルが利用不可の場合、上側の隣接サンプルを使用して、処理ユニットの左上の隣接サンプルをパディングすることができる。
i. 代替的に、左側の隣接サンプルを使用して、処理ユニットの左上の隣接サンプルをパディングしてもよい。
f. 処理ユニットの左上および上側の隣接サンプルが利用不可で、処理ユニットの左側の隣接サンプルが利用可能の場合、左側の隣接サンプルを使用して、処理ユニットの左上の隣接サンプルをパディングすることができる。
g. 処理ユニットの左上および左側の隣接サンプルが利用不可で、処理ユニットの上側の隣接サンプルが利用可能の場合、上側の隣接サンプルを使用して処理ユニットの左上の隣接サンプルをパディングすることができる。
h. 処理ユニットの右側の隣接サンプルおよび下側の隣接サンプルが利用可能で、処理ユニットの右下の隣接サンプルが利用不可の場合、下側の隣接サンプルを使用して、処理ユニットの右下の隣接サンプルをパディングすることができる。
i. あるいは、右側の隣接サンプルを使用して、処理ユニットの右下の隣接サンプルをパディングすることができる。
i. 処理ユニットの右下および下側の隣接サンプルが利用不可で、処理ユニットの右側の隣接サンプルが利用可能の場合、右側の隣接サンプルを用いて処理ユニットの右下の隣接サンプルをパディングすることができる。
j. 処理ユニットの右下および右側の隣接サンプルが利用不可で、処理ユニットの下側の隣接サンプルが利用可能の場合、下側の隣接サンプルを使用して、処理ユニットの右下の隣接サンプルをパディングすることができる。
k. 処理ユニットの右上および右側の隣接サンプルが利用不可で、処理ユニットの上側の隣接サンプルが利用可能の場合、上側の隣接サンプルを使用して処理ユニットの右上の隣接サンプルをパディングすることができる。
l. 処理ユニットの右上および上側の隣接サンプルが利用不可で、処理ユニットの右側の隣接サンプルが利用可能の場合、右側の隣接サンプルを使用して、処理ユニットの右上の隣接サンプルをパディングすることができる。
m. 処理ユニットの左下および左側の隣接サンプルが利用不可で、処理ユニットの下側の隣接サンプルが利用可能の場合、下側の隣接サンプルを使用して、処理ユニットの左下の隣接サンプルをパディングすることができる。
n. 処理ユニットの左下および下側の隣接サンプルが利用不可で、処理ユニットの左側の隣接サンプルが利用可能の場合、左側の隣接サンプルを使用して、処理ユニットの左下の隣接サンプルをパディングすることができる。
o. 処理ユニットは、ctuUpで表されるCTUのN(Nは整数であり、例えば、N=4)行と、ctuUpの下にあるctuDownで表されるCTUのCtbSize-M(Mは整数であり、例えば、M=N)行とを含んでもよい。処理ユニットの隣接サンプルが利用可能かどうかをチェックするとき、隣接サンプルとctuDownとの関係を考慮してもよい。
i. 一例において、隣接サンプルがctuDownと異なる映像ユニット内にあり(例えば、隣接サンプルおよびctuDownは、異なるブリック/タイル/スライス/サブピクチャに属する、またはそれらが360度の仮想境界の異なる側にある)、そのような映像ユニットをまたぐフィルタリングが許可されない場合、隣接サンプルは「利用不可」と見なされる。
ii. あるいは、隣接サンプルの可用性をチェックするために、隣接サンプルとctuUpとの関係を考慮してもよい。
3. ラスタ走査スライスにおける「利用不可」のサンプルは、CC-ALFまたは/およびALFにおいて予め定義された順にパディングされてもよい。現在のCTUは、現在のスライスにある。
a. 一例において、上側CTUおよび左側CTUが現在のスライスと同じスライス内にあり、左上CTUが現在のスライスと異なるスライス内にある場合、左上CTUにおける「利用不可」の隣接サンプルは、現在のCTUの上側CTUにおいてその最も近い隣接サンプルでパディングされる。一例を図18に示す。
i. あるいは、左上CTUにおける「利用不可」の隣接サンプルは、現在のCTUの左側CTUにおいてその最も近い隣接サンプルでパディングされる。
b. 一例において、下側CTUおよび右側CTUが現在のスライスと同じスライス内にあり、右下CTUが現在のスライスとは異なるスライス内にある場合、右下CTUにおける「利用不可」の隣接サンプルが、現在のCTUの下側CTUにおいてその最も近い隣接サンプルとパディングされる。一例を図18に示す。
i. あるいは、右下CTUの「利用不可」の隣接サンプルは、現在のCTUの右側CTUにおいてその最も近い隣接サンプルでパディングされる。
4. 処理ユニット(例えば、ALF処理ユニット、または/および狭ALF処理ユニット、または/およびCTU)は、1つ以上のブリック/スライス/タイル/サブピクチャ境界または/および360度仮想境界が交差する場合であって、そのような境界をまたぐフィルタリングが許可されていない場合、複数の処理ユニットに(水平または/および垂直に)分割されてもよい。
a. あるいは、さらに、分割処理は、処理ユニットが任意のブリック/スライス/タイル/サブピクチャ境界または/および360度仮想境界または/およびALF仮想境界と交差しなくなるまで、再帰的に行われてもよく、そのような境界をまたぐフィルタリング処理が許可されず、例えば、そのような境界のみを処理ユニットの境界とすることができる。以下、このような処理ユニットを「基本ALF処理ユニット」と呼ぶ。「基本ALF処理ユニット」は、「ALF処理ユニット」がそのような境界のいずれかで交差しなければ、「ALF処理ユニット」であってもよい。
b. あるいは、さらに、このような分割処理が完成した後に、ALF処理または/およびCC-ALF処理を行い、例えば、「基本ALF処理ユニット」においてALF処理または/およびCC-ALFを行う。
c. あるいは、上記のパディング方法は、「基本ALF処理ユニット」上で行われてもよい。
d. 「基本ALF処理ユニット」を生成する際に、異なる水平方向の境界を予め定義された順序でチェックしてもよい。
i. 一例において、チェック順は、ALF仮想境界、360度仮想境界、そしてブリック/スライス/タイル/サブピクチャ境界であるCTU境界である。
ii. 一例において、チェック順は、360度仮想境界、ALF仮想境界、そしてブリック/スライス/タイル/サブピクチャ境界であるCTU境界である。
iii. 一例において、「基本ALF処理ユニット」を形成する際に、最上境界および最下境界に異なるチェック順を用いてもよい。
a) 例えば、最上境界の場合、チェック順は、ALF仮想境界、360度仮想境界、そしてブリック/スライス/タイル/サブピクチャ境界であるCTU境界である。
b) 例えば、最下境界の場合、チェック順は、360度仮想境界、ALF仮想境界、そしてブリック/スライス/タイル/サブピクチャ境界であるCTU境界である。
e. 「基本ALF処理ユニット」を生成する際に、異なる垂直方向の境界を予め定義された順にチェックしてもよい。
i .一例において、チェック順は、360度仮想境界、そしてブリック/スライス/タイル/サブピクチャ境界であるCTU境界である。
ii. 一例において、チェック順は、ブリック/スライス/タイル/サブピクチャ境界、そして360度仮想境界であるCTU境界である。
iii. 一例において、「基本ALF処理ユニット」を生成する際に、左境界および右境界に対して異なるチェック順を用いてもよい。
5. そのような境界をまたぐフィルタリング処理が許可されていない場合、ALFまたは/およびCC-ALF処理を映像ユニット境界でのサンプルに対して、無効とすることが提案されている。
a. 一例において、サンプルのALFまたは/およびCC-ALF処理に少なくともN(Nは整数)個の「利用不可」のサンプルが含まれている場合、このサンプルに対してALFまたは/およびCC-ALF処理はスキップされる。例えば、N=1または2または3等である。
b. 一例において、サンプルが水平映像ユニット境界にあり、そのような境界をまたぐフィルタリング処理は許可されず、サンプルと映像ユニット境界との垂直距離がM個のサンプル以下である場合、このサンプルに対してALFまたは/およびCC-ALFはスキップされる。例えば、M=0または1または2または3である。
c. 一例において、サンプルが垂直映像ユニット境界にあり、そのような境界をまたぐフィルタリング処理が許可されず、サンプルと映像ユニット境界との水平距離がM個のサンプル以下である場合、サンプルに対してALFまたは/およびCC-ALFはスキップされる。例えば、M=0または1または2または3である。
6. CTBと異なる映像領域に対して、ALFまたは/およびCC-ALFのオン/オフ制御を決定してもよいことが提案される。
a. 一例において、映像領域は、「ALF処理ユニット」または「狭ALF処理ユニット」または「ベーシックALF処理ユニット」である。
b. 1つの例において、オン/オフ制御は、映像領域に対して明確に信号通知されてもよい。
c. 一例において、オン/オフ制御は、映像領域に対して暗黙的に導出されてもよい。
7. CC-ALFの信号通知されたオン/オフ制御フラグは、第1の映像ユニット(例えば、CTB)に関連付けられ得るが、第1の映像ユニット内のサンプルについては、信号通知されたフラグがCC-ALFが有効とされていることを伝える場合でも、CC-ALFは依然として無効にされてもよい。
a. 1つの例において、第1の映像ユニット内のサンプルのためにCC-ALFを有効にするかまたは無効にするかは、サンプルの位置に依存し得る。
b. 一例において、第1の映像ユニット内のサンプルのためにCC-ALFを有効にするかまたは無効にするかは、CC-ALF処理に含まれる輝度サンプルに依存し得る。
c. 1つの例において、第1の映像ユニット内のサンプルのためにCC-ALFを有効にするかまたは無効にするかは、現在のサンプルおよびその隣接サンプル、例えば、それらの差に依存し得る。
d. 一例において、第1の映像ユニット内のサンプルのためにCC-ALFを有効にするかまたは無効にするかは、導出オフセットに依存し得る。
i. 一例において、導出オフセットが閾値よりも大きい(または小さくない)場合、オフセットは廃棄されてもよく、即ち、CC-ALFは無効にされる(オフセットが0にリセットされる場合に等しい)。
ii. 一例において、導出オフセットが閾値よりも小さい(または超えない)場合、オフセットは廃棄されてもよく、即ち、CC-ALFが無効にされる(オフセットが0にリセットされる場合に等しい)。
e. 一例において、第1の映像ユニット内のサンプルのためにCC-ALFを有効にするかまたは無効にするかは、クロマサンプルおよび/または隣接ブロックを含むブロックのコード化情報に依存しうる。
8. そこで、クリッピング処理の段階を3(セクション3の3項の箇条書きで記載)から1または2に減らすことが提案されている。
a. 一例において、CC-ALFが有効にされる場合、クロマALFフィルタリング処理におけるクリッピング処理は省略される。
b. 一例において、CC-ALF処理における導出オフセットのクリッピング処理は省略される。
c. 一例において、上記2つの方法は両方とも適用される。
9. CC-ALF処理における導出オフセットのクリッピング範囲は、[-(1<(BitDepthC-1)),(1<(BitDepthC-1))-1](両端を含む)の範囲とは異なって設定されてもよい。
a. 一例において、より小さな範囲を利用してもよい。
b. 一例において、この範囲はビット深度から独立してもよい。
c. 一例において、この範囲は、第1の映像領域から別の映像領域に適応的に変更されてもよい。
d. 一例において、この範囲は、クロマALF処理に用いられる非線形クリッピング範囲(例えば、式(14)におけるk(i,j))から導出されてもよい。
10. 導出オフセット(例えば、セクション3の箇条書き中のsum)は、固定値(即ち、64)ではなく、ビット深度に応じた値に丸めオフセットにより丸められてもよい。
a. 一例において、丸めオフセットは、第1の色成分(例えば、Y)と第2の色成分(例えば、CbrまたはCr)とのビット深度差に依存してもよい。
i. 代替的に、それはまた、CC-ALFフィルタ係数のビット深さに依存してもよい。
ii. 一例において、丸めオフセットは、(1<<(K-1+(BitDepthY-BitDepthC)))に設定されてもよく、KはCC-ALFフィルタ係数のビット深度を表し、BitDepthYおよびBitDepthCはそれぞれ輝度成分およびクロマ成分のビット深度を表す。
b. 一例において、式(8-1293)を置き換えるために、以下を適用してもよい。削除されたテキストには二重括弧で囲んだ印が付けられている(例えば、[[a]]は文字「a」の削除を意味する)。
sum=alfPicture[xCtbC+x][yCtbC+y]+(sum+Off[[64]])>>(7+(BitDepthY-BitDepthC)) (8-1293)
ccAlfPicture[xCtbC+x][yCtbC+y]=Clip3(0,(1<<BitDepthC)-1,sum’) (8-1294)
ここで、Offは、(1<(6+(BitDepthY-BitDepthC))に等しく設定される。
11. クロマALFおよびCC-ALFを共同して最適化することが提案されている。
a. 一例において、CTBまたは映像領域に対してクロマALFおよびCC-ALFの両方が有効にされる場合、CC-ALFがクロマALFの後に適用される場合、CC-ALF処理においてのみ、クリッピング演算(例えば、クロマALFまたは/およびCC-ALFにより生成されたクロマサンプルを、クロマビット深度に依存し得る所定の範囲内にクリップする)が適用されてもよい。
b. 一例において、CTBまたは映像領域に対してクロマALFおよびCC-ALFの両方が有効にされる場合、CC-ALFがクロマALFの前に適用される場合、ALF処理においてのみ、クリッピング演算(例えば、クロマALFまたは/およびCC-ALFにより生成されたクロマサンプルを、クロマビット深度に依存し得る所定の範囲内にクリップする)が適用されてもよい。
12. 第1の色成分におけるサンプルSをS=S+Dとして修正し、ここで、Dは、例えばCC-ALFのような、第2の色成分情報を用いた適応ループフィルタリング方法により導出オフセットであり、適応的にクリッピングされ得る。例えば、Sは、S=S+Clip3(Dlow、Dhigh、D)として修正されてもよく、Dlowおよび/またはDhighは、異なるサンプルごとに異なってもよい。
a. 例えば、Dlowおよび/またはDhighは、エンコーダからデコーダに信号通知されてもよい。
b. 例えば、Sの値に基づいてDlowおよび/またはDhighを導出してもよい。
c. 例えば、Sの位置に基づいてDlowおよび/またはDhighを導出してもよい。
d. 例えば、Dlowおよび/またはDhighの複数の候補に信号通知してもよく、または予め定義してもよい。選択された候補は、エンコーダから信号通知されてもよいし、デコーダにおいて導出されてもよい。
13. 第1サブピクチャの第1サンプルSに対するCC-ALFを、第2サブピクチャのサンプルに依存し得るものとして、次に、第1サブピクチャおよび/または第2のサブピクチャに対してサブピクチャをまたぐループフィルタリングが許可されるかどうかによって、SがCC-ALFによってフィルタリングされるかどうかを決定する。(例えば、第1のサブピクチャおよび/または第2のサブピクチャのloop_filter_across_subpic_enabled_flag)。
a. 一例において、サブピクチャをまたぐループフィルタが第1のサブピクチャに対して許可されない場合、SはCC-ALFによってフィルタリングされない。
b. 一例において、サブピクチャをまたぐループフィルタが第2のサブピクチャに対して許可されない場合、SはCC-ALFによってフィルタリングされない。
c. 一例において、第1のサブピクチャおよび第2のサブピクチャに対してサブピクチャをまたぐループフィルタが許可されない場合、SはCC-ALFによってフィルタリングされない。
d. 一例において、第1のサブピクチャまたは第2のサブピクチャに対してサブピクチャをまたぐループフィルタが許可されない場合、SはCC-ALFによってフィルタリングされない。
14. 上記方法を適用するかどうかおよび/またはどのように適用するかは、以下に列挙される1つ以上の条件に基づくことができる。
a. 映像コンテンツ(例えば、スクリーンコンテンツまたは自然コンテンツ)
b. 一例において、デフォルトモードは、DPS/SPS/VPS/PPS/APS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/最大コーディングユニット(LCU)/コーディングユニット(CU)/LCU行/LCUグループ/TU/PUブロック/映像コーディングユニットにおいて信号通知されてもよい。
c. CU/PU/TU/ブロック/映像コーディングユニットの位置
d. 現在のブロックおよび/またはその近傍のブロックの復号化情報
i. 現在のブロックおよび/またはその近傍のブロックのブロック寸法/ブロック形状
e. カラーフォーマットの表示(例えば、4:2:0、4:4:4、RGB、YUV等)
f. コーディングツリー構造(例えば、デュアルツリーまたはシングルツリー)
g. スライス/タイルグループのタイプおよび/またはピクチャのタイプ
h. 色成分(例えば、輝度成分および/またはクロマ成分にのみ適用されてもよい)。
i. 時間レイヤID
j. 標準のプロファイル/レベル/ティア
本明細書では、VVC草案におけるテキストの変更を、下線を引いた太いフォントで示す。
図19Aは、映像処理装置1900のブロック図である。装置1900は、本明細書に記載の方法の1つ以上を実装するために使用してもよい。装置1900は、スマートフォン、タブレット、コンピュータ、モノのインターネット(IoT)受信機等に実施されてもよい。装置1900は、1つ以上のプロセッサ1902と、1つ以上のメモリ1904と、映像処理ハードウェア1906と、を含んでもよい。1つまたは複数のプロセッサ1902は、本明細書に記載される1つ以上の方法を実装するように構成されてもよい。メモリ(複数可)1904は、本明細書で説明される方法および技術を実装するために使用されるデータおよびコードを記憶するために使用してもよい。映像処理ハードウェア1906を使用して、ハードウェア回路において、本明細書に記載されるいくつかの技術を実装してもよく、一部又は全部がプロセッサ1902の一部(例えば、グラフィックプロセッサコアGPU又は他の信号処理回路)であってもよい。
sum=alfPicture[xCtbC+x][yCtbC+y]+(sum+Off)>>(7+(BitDepthY-BitDepthC))ccAlfPicture[xCtbC+x][yCtbC+y]=Clip3(0,(1<<BitDepthC)-1,sum)において、Offは、(1<(6+(BitDepthY-BitDepthC))に等しく設定され、alfPicture[xCtbC+x][yCtbC+y]は、第1のクリッピング演算を適用した後のクロマサンプルを表し、sumは、第2のクリッピング演算を適用した後のCC-ALFフィルタサポートの輝度サンプルにCC-ALFフィルタ係数を掛けた合計を表し、ccAlfPictureは第3のクリッピング演算を適用した後の最終的に微調整されたクロマサンプルを表す。
sum=alfPicture[xCtbC+x][yCtbC+y]+(sum+Off)>>(7+(BitDepthY-BitDepthC))およびccAlfPicture[xCtbC+x][yCtbC+y]=Clip3(0,(1<<BitDepthC)-1,sum)であり、ここでOffは、(1<(6+(BitDepthY-BitDepthC))に等しく設定され、alfPicture[xCtbC+x][yCtbC+y]は、第1のクリッピング演算を適用した後のクロマサンプルを表し、sumは、第2のクリッピング演算を適用した後のCC-ALFフィルタサポートの輝度サンプルにCC-ALFフィルタ係数を掛けた合計を表し、ccAlfPictureは第3のクリッピング演算を適用した後の最終的に微調整されたクロマサンプルを表し、BitDepthCとBitDepthYはそれぞれ輝度成分とクロマ成分のビット深度を表す、項目66に記載の方法。
本願は、2019年11月4日出願の国際特許出願第PCT/CN2019/115321号の優先権と利益を主張する、2020年11月4日出願の国際特許出願第PCT/CN2020/126332号に基づく。前述のすべての特許出願は、その全体が参照により本明細書に組み込まれる。
Claims (92)
- 1つ以上の映像ブロックを含む映像の現在の映像ユニットと前記映像のビットストリーム表現との変換のために、規則に従って、前記現在の映像ユニットの少なくともいくつかの映像ブロックにクロス成分適応ループフィルタリング(CC-ALF)ツールを適用する間に、利用不可のサンプルをパディングするために使用されるパディング処理を決定することと、この決定することに基づいて前記変換を行うことと、を含む映像処理方法であって、
前記規則は、前記現在の映像ユニットの1つ以上の映像ブロックに適応ループフィルタリング(ALF)を適用する間に、前記パディング処理はまた利用不可のサンプルをパディングするために使用されることを規定する、映像処理方法。 - 前記ALFツールは、前記現在の映像ユニットの色成分に適用され、前記ALFツールは、前記現在の映像ユニットの前記色成分によって提供される情報を使用して、前記色成分のサンプル値を補正することを含む、請求項1に記載の方法。
- 前記CC-ALFツールは、前記現在の映像ユニットの第1の色成分に適用され、前記現在の映像ユニットの第2の成分のサンプル値を使用して、前記現在の映像ユニットの第1の成分のサンプル値を補正することを含む、請求項1~2のいずれか1項以上に記載の方法。
- 前記現在の映像ユニットは、スライス、タイル、ブリック、サブピクチャ、ピクチャ、または360度の仮想境界で囲まれた360度の仮想ピクチャに対応する、請求項1~3のいずれか1項以上に記載の方法。
- 前記パディング処理は、前記CC-ALFツールの前記使用に関連付けられた1つ以上のALF仮想境界において、前記利用不可のサンプルに適用されるミラーリングパディング(mirrored padding)に対応する、請求項1~4のいずれか1項以上に記載の方法。
- 前記パディング処理は、スライス、タイル、ブリック、ピクチャ、サブピクチャ、または前記CC-ALFの前記使用に関連付けられた360度仮想境界のうちの1つにおいて前記利用不可のサンプルに適用される繰り返しパディングに対応する、請求項1~4のいずれか1項以上に記載の方法。
- 前記パディング処理は、前記CC-ALFの前記使用に関連付けられた1つ以上のALF仮想境界を除き、1つ以上の境界に適用される繰り返しパディングに対応する、請求項1~4のいずれか1項以上に記載の方法。
- 前記1つ以上の境界は、すべての境界、水平境界、または垂直境界のうちの1つを含む、請求項7に記載の方法。
- 前記パディング処理は、前記CC-ALFの前記使用に関連付けられた1つ以上のALF仮想境界を除き、1つ以上の境界にミラーリングパディングを適用することに対応する、請求項1~4のいずれか1項以上に記載の方法。
- 前記1つ以上の境界は、すべての境界、水平境界、または垂直境界のうちの1つを含む、請求項9に記載の方法。
- 前記現在の映像ユニットは、ALF処理ユニット、コーディングツリーユニット(CTU)、または基本ALF処理ユニットに対応する、請求項1~10のいずれか1項以上に記載の方法。
- 前記ALF処理ユニットは、2つの水平方向の境界および2つの垂直方向の境界で囲まれた1つのユニットを定義する、請求項11に記載の方法。
- 前記2つの水平境界は、2つのALF仮想境界、または1つのALF仮想境界うちの1つと、ピクチャ/スライス/タイル/ブリック/サブピクチャ境界または360度仮想境界のうちの1つの境界とを含む、請求項11に記載の方法。
- 前記基本ALF処理ユニットは、ALF処理ユニット、CTU、または狭ALF処理ユニットを再帰的に分割することに基づいて生成され、前記基本ALF処理ユニットの境界が、ブリック/スライス/タイル/サブピクチャ境界、および/または360度仮想境界、および/または境界をまたぐフィルタリングが許可されないALF仮想境界で交差しない、請求項11に記載の方法。
- 前記パディング処理は、前記現在の映像ユニットの隣接サンプルが異なる隣接スライスにあるかどうかに基づく繰り返しパディングに対応する、請求項1~4のいずれか1項以上に記載の方法。
- 前記現在の映像ユニットの現在のスライスがラスタスキャンスライスであり、前記現在のスライスの前記隣接スライスもラスタスキャンスライスである、請求項15に記載の方法。
- 前記現在の映像ユニットはALF処理ユニットであり、利用不可のサンプルを前記ALF処理ユニットにおけるその最も近いサンプルを使用してパディングする、請求項15~16のいずれか1項以上に記載の方法。
- 映像の映像ユニットと前記映像のビットストリーム表現との変換を行うことを含み、
前記変換中、適応ループフィルタリング(ALF)処理またはクロス成分適応ループフィルタリング(CC-ALF)処理の適用において、規則に従って、前記映像ユニットの利用不可のサンプルを予め定義されたパディング順序でパディングする、映像処理方法。 - 前記映像ユニットは、処理ユニットに対応し、前記規則は、前記映像ユニットの前記利用不可のサンプルをパディングするための前記予め定義されたパディング順序を規定する、請求項18に記載の方法。
- 前記予め定義されたパディング順序は、前記映像ユニットの少なくとも1つの行または少なくとも1つの列を使用して前記利用不可のサンプルをパディングすることを含み、前記少なくとも1つの行または前記少なくとも1つの列の位置が、前記利用不可のサンプルの位置に基づいて決定される、請求項18に記載の方法。
- 前記予め定義されたパディング順序は、前記映像ユニットの少なくとも1つのサンプルを使用して前記利用不可のサンプルをパディングすることを含み、前記少なくとも1つのサンプルの位置が、前記利用不可のサンプルの位置に基づいて決定される、請求項18に記載の方法。
- 前記映像ユニットの少なくとも1つの隣接サンプルの可用性が、前記1つ以上の隣接サンプルと前記映像領域に関連付けられたパラメータ(ctuDownまたはctuUp)との関係に基づいて決定され、前記映像領域は、コーディングツリーユニット(CTU)のN個の行に対応する前記ctuUPと、前記CTUの「CtbSize-M」行に対応する前記ctuDownとを含む処理ユニットに対応し、このときMは整数である、請求項18に記載の方法。
- 隣接サンプルが前記ctuDownと異なる第2の映像ユニットにある場合、前記規則は、前記第2の映像ユニットをまたぐフィルタリングを許可しないことを規定する、請求項22に記載の方法。
- 前記映像ユニットは、ラスタスキャンスライスに含まれる現在のコーディングツリーユニットに対応し、前記規則は、前記映像ユニットの前記利用不可のサンプルをパディングするための前記予め定義されたパディング順序を規定する、請求項18に記載の方法。
- 前記予め定義されたパディング順序は、ラスタスキャンスライス内の上側CTUに位置するその最も近い隣接サンプルを使用して、前記ラスタスキャンスライスとは異なるスライス内の左上CTUに位置する前記利用不可のサンプルをパディングすることを含む、請求項18に記載の方法。
- 前記予め定義されたパディング順序は、ラスタスキャンスライス内の左側CTUに位置するその最も近い隣接サンプルを使用して、前記ラスタスキャンスライスとは異なるスライス内の左上CTUに位置する前記利用不可サンプルをパディングすることを含む、請求項18に記載の方法。
- 前記予め定義されたパディング順序は、ラスタスキャンスライス内の下側CTUに位置するその最も近い隣接サンプルを使用して、前記ラスタスキャンスライスとは異なるスライス内の右下CTUに位置する前記利用不可のサンプルをパディングすることを含む、請求項18に記載の方法。
- 前記予め定義されたパディング順序は、ラスタスキャンスライス内の右側CTUに位置するその最も近い隣接サンプルを使用して、前記ラスタスキャンスライスとは異なるスライス内の右下CTUに位置する前記利用不可のサンプルをパディングすることを含む、請求項18に記載の方法。
- 適応ループフィルタ(ALF)の適用が有効とされた映像の映像領域に対して、前記映像領域は映像ユニットの境界と交差していることを決定することと、前記映像と前記映像のビットストリーム表現との変換を行うこととを含む映像処理方法であって、
前記変換のために、前記映像領域は、前記映像領域が前記映像ユニットの前記境界と交差していることに起因して、規則に従って複数のパーティションに分割される、映像処理方法。 - 前記境界をまたぐフィルタリング処理は許可されない、請求項29に記載の方法。
- 前記映像領域は、ALF処理ユニット、狭ALF処理ユニット、またはコーディングツリーユニットに対応する、請求項29に記載の方法。
- 前記映像ユニットは、ブリック、スライス、タイル、サブピクチャ、または360度仮想ピクチャに対応する、請求項29に記載の方法。
- 前記規則は、前記映像領域が前記映像ユニットの前記境界をまたがなくなるまで再帰的に前記映像領域を分割することをさらに規定する、請求項29に記載の方法。
- 前記フィルタリング処理は、ALF処理またはCC-ALF処理に対応し、前記規則は、前記映像領域を分割する分割処理が終了した後に前記フィルタリング処理を行うことをさらに規定する、請求項29または30に記載の方法。
- 少なくとも1つのサンプルをパディングするために使用されるパディング処理は、前記映像領域が前記映像ユニットの前記境界をまたがなくなるまで、前記映像領域を分割した後に得られる基本ALF処理ユニットに対して行われる、請求項29に記載の方法。
- 前記規則は、前記映像領域が前記映像ユニットの前記境界をまたがなくなるまで前記映像領域を分割した後に得られる基本ALF処理ユニットを生成するように、異なる水平境界を予め定義された順序でチェックすることを規定する、請求項29に記載の方法。
- 前記予め定義された順序は、ALF仮想境界、360度仮想境界、および前記映像ユニットの境界であるコーディングツリーユニット(CTU)境界である、請求項36に記載の方法。
- 前記予め定義された順序は、360度仮想境界、ALF仮想境界、および前記映像ユニットの境界であるコーディングツリーユニット(CTU)境界である、請求項36に記載の方法。
- 前記規則は、前記映像ユニットの最上境界および最下境界に対して異なる予め定義された順序を規定する、請求項36に記載の方法。
- 前記規則は、前記映像領域が前記映像ユニットの前記境界をまたがなくなるまで前記映像領域を分割した後に得られる基本ALF処理ユニットを生成するように、異なる垂直境界を予め定義された順序でチェックすることを規定する、請求項29に記載の方法。
- 前記予め定義された順序は、360度仮想境界、および前記映像ユニットの境界であるコーディングツリーユニット(CTU)境界である、請求項40に記載の方法。
- 前記予め定義された順序は、前記映像ユニットのコーディングツリーユニット(CTU)境界および360度仮想境界である、請求項40に記載の方法。
- 前記規則は、前記映像ユニットの左境界および右境界に対して異なる予め定義された順序を規定する、請求項40に記載の方法。
- 規則に従って、映像の映像ユニットと前記映像のビットストリーム表現との変換を行うことを含む映像処理方法であって、
前記規則は、前記映像ユニットの境界に位置するサンプルに対する適応ループフィルタリング(ALF)および/またはクロス成分適応ループフィルタリング(CC-ALF)の適用は、境界をまたぐフィルタリング処理が許可されていない場合、許可されないことを規定する、映像処理方法。 - 前記ALFおよび/または前記CC-ALFに関連付けられた少なくともN個の隣接サンプルが利用不可と決定されると、前記ALFおよび/または前記CC-ALFの適用が無効にされ、このときNが整数である、請求項44に記載の方法。
- 前記映像ユニットの前記境界は水平境界であり、前記サンプルと前記映像ユニットの前記水平境界との垂直距離がM個のサンプル以下であると決定されると、前記ALFおよび/または前記CC-ALFの適用が無効にされ、このときMが整数である、請求項44に記載の方法。
- 前記映像ユニットの前記境界は垂直境界であり、前記サンプルと前記映像ユニットの垂直境界との水平距離がM個のサンプル以下であると決定されると、前記ALFおよび/または前記CC-ALFの適用が無効にされ、このときMが整数である、請求項44に記載の方法。
- 映像の映像ユニットと前記映像のビットストリーム表現との変換を行うことを含む映像処理方法であって、
前記ビットストリーム表現はフォーマット規則に準拠し、
前記映像領域はコーディングツリーブロックとは異なり、
前記フォーマット規則は適応ループフィルタリング(ALF)ツールおよび/またはクロス成分適応ループフィルタリング(CC-ALF)ツールの前記映像領域に対する適用可能性を示す前記ビットストリーム表現に構文要素が含まれるかどうかを規定する、映像処理方法。 - 前記映像領域は、ALF処理ユニットに対応する、請求項48に記載の方法。
- 前記ALFツールおよび/または前記CC-ALFツールの前記適用可能性は、前記ビットストリーム表現において明確に示される、請求項48に記載の方法。
- 前記ALFツールおよび/または前記CC-ALFツールの前記適用可能性は、導出される、請求項48に記載の方法。
- 映像の映像ユニットと前記映像のビットストリーム表現との変換のために、規則に従って、クロス成分適応ループフィルタリング(CC-ALF)ツールの前記映像ユニットのサンプルに対する適用可能性を決定することと、この決定することに従って変換を行うことを含む映像処理方法であって、
前記ビットストリーム表現は前記CC-ALFが前記映像ユニットに利用可能であるという指示を含み、前記規則は前記指示をオーバライドする1つ以上の条件を規定する、映像処理方法。 - 前記1つ以上の条件は、前記映像ユニットに対する前記サンプルの空間位置を含む、請求項52に記載の方法。
- 前記1つ以上の条件は、前記CC-ALFにおいて使用される輝度サンプル値を含む、請求項52に記載の方法。
- 前記1つ以上の条件は、前記サンプルとその隣接サンプルとのサンプル値の差を含む、請求項52に記載の方法。
- 前記1つ以上の条件は、クロマサンプルに対応するフィルタリングされた輝度サンプルを使用して導出されたオフセットの値と閾値との関係を含む、請求項52に記載の方法。
- 前記1つ以上の条件は、クロマサンプルを含むブロックおよび/または前記ブロックの隣接ブロックのコード化情報を含む、請求項52に記載の方法。
- 規則に従って、映像の映像ユニットと前記映像のビットストリーム表現との変換を行うことを含み、
前記規則は、前記変換の際に使用される演算が、クロマ適応ループフィルタリング(ALF)に対応する第1のクリッピング演算、クロス成分適応ループフィルタリング(CC-ALF)オフセット導出に対応する第2のクリッピング演算、および最終的なクロマサンプル値を導出するためのクロマフィルタリングされたサンプルの微調整に対応する第3のクリッピング演算を含む3つのクリッピング演算のうちの少なくとも1つを省略することを規定する、映像処理方法。 - 前記規則は、前記CC-ALFを適用することが有効にされた場合、前記第1のクリッピング演算を省略することを規定する、請求項58に記載の方法。
- 前記規則は、前記CC-ALFを適用することが無効にされた場合、前記第2のクリッピング演算を省略することを規定する、請求項58に記載の方法。
- 前記規則は、前記第1のクリッピング演算および前記第2のクリッピング演算を省略することを規定する、請求項58に記載の方法。
- 映像の第1の映像ユニットと前記映像のビットストリーム表現との変換のために、規則に従って、クロス成分適応ループフィルタリング(CC-ALF)オフセットを決定することと、この決定することに基づいて前記変換を行うこととを含む映像処理方法であって、
前記規則は、前記CC-ALFオフセットを、[-(1<<(BitDepthC-1)),(1<<(BitDepthC-1))-1]と表される第2の範囲と異なる第1の範囲にクリッピングすることを規定し、BitDepthCはビット深度値である、映像処理方法。 - 前記第1の範囲は、前記ビット深度値への依存性を欠く、請求項62に記載の方法。
- 第2の映像ユニットに関連付けられた第3の範囲が、前記第1の映像ユニットに関連付けられた前記第1の範囲とは異なるように定義される、請求項62に記載の方法。
- 前記第1の範囲は、クロマALFフィルタリングに対応する別のクリッピング演算で使用される非線形クリッピング範囲から導出される、請求項62に記載の方法。
- 映像の第1の映像ユニットと映像のビットストリーム表現との変換のために、規則に従ってクロス成分適応ループフィルタリング(CC-ALF)オフセットを導出することと、前記CC-ALFオフセットを使用して前記変換を行うこととを含む映像処理方法であって、
前記規則は、固定値の代わりに、ビット深度値に基づいて丸めオフセットで前記CC-ALFオフセットを丸めることを規定する、映像処理方法。 - 前記丸めオフセットは、第1の色成分と第2の色成分とのビット深度差に依存する、請求項66に記載の方法。
- 前記CC-ALFオフセットは、次の式を用いて丸められる:
sum=alfPicture[xCtbC+x][yCtbC+y]+(sum+Off)>>(7+(BitDepthY-BitDepthC)) and ccAlfPicture[xCtbC+x][yCtbC+y]=Clip3(0,(1<<BitDepthC)-1,sum)、ここでOffは、(1<(6+(BitDepthY-BitDepthC))に等しく設定され、alfPicture[xCtbC+x][yCtbC+y]は、前記第1のクリッピング演算を適用した後のクロマサンプルを表し、sumは、前記第2のクリッピング演算を適用した後のCC-ALFフィルタサポート中の輝度サンプルにCC-ALFフィルタ係数を掛けた合計を表し、ccAlfPictureは前記第3のクリッピング演算を適用した後の最終的に微調整されたクロマサンプルを表し、BitDepthCとBitDepthYはそれぞれ輝度成分、クロマ成分のビット深度を表す、請求項66に記載の方法。 - 規則に従って、映像の映像ユニットと前記映像のビットストリーム表現との変換を行うことを含む映像処理方法であって、
前記規則は、前記映像ユニットのサンプルに適用されるクロマ適応ループフィルタリング(ALF)処理および/またはクロス成分適応ループフィルタリング(CC-ALF)処理中に使用される1つ以上の処理ステップが同じであることを規定する、映像処理方法。 - 前記変換は、予め定義された範囲内にある前記クロマサンプルをもたらす前記クロマALF処理および/または前記CC-ALF処理によって生成されたクロマサンプルをクリッピングするためのクリッピング演算を含む、請求項69に記載の方法。
- 前記予め定義された範囲は、クロマビット深度値に少なくとも部分的に基づいている、請求項70に記載の方法。
- 前記クリッピング演算は、前記CC-ALF処理が前記クロマALF処理の後に適用される場合、前記CC-ALF処理中のみ適用される、請求項70に記載の方法。
- 前記CC-ALF処理が前記クロマALF処理の前に適用される場合、前記クリッピング演算は前記クロマALF処理中のみ適用される、請求項70に記載の方法。
- 規則に従って、映像の映像ユニットと前記映像のビットストリーム表現との変換を行うことを含み、
前記規則は、変換中に、前記映像ユニットの第2の色成分の情報を使用して修正を加えることによって、前記映像ユニットの第1の色成分のサンプルの値を修正することを規定し、前記修正は、前記映像ユニットのための適応ループフィルタリング(ALF)処理で使用される1つ以上のパラメータに基づく、映像処理方法。 - 適応ループフィルタリング処理で使用される前記1つ以上のパラメータは、クリッピングパラメータであり、第1のサンプル値に使用される前記クリッピングパラメータは、第2のサンプル値に使用されるクリッピングパラメータとは異なり、前記第1のサンプル値および前記第2のサンプル値は前記映像ユニット中に含まれる、請求項74に記載の方法。
- 前記クリッピングパラメータは、最小クリッピング値および最大クリッピング値を有する範囲内にあるように定義される、請求項75に記載の方法。
- 前記最小クリッピング値および/または前記最大クリッピング値は、前記ビットストリーム表現において明確に信号通知される、請求項76に記載の方法。
- 前記最小クリッピング値および/または前記最大クリッピング値は、前記サンプルの値に部分的に基づいている、請求項76に記載の方法。
- 前記最小クリッピング値および/または前記最大クリッピング値は、前記映像ユニットに対する前記サンプルの前記値の空間的位置に部分的に基づいている、請求項76に記載の方法。
- 前記最小クリッピング値および/または前記最大クリッピング値は、信号通知されるかまたは予め定義される、請求項76に記載の方法。
- 前記最小クリッピング値および/または前記最大クリッピング値は、他のパラメータから導出される、請求項76に記載の方法。
- 映像の第1のサブピクチャと前記映像のビットストリーム表現との変換のために、クロス成分ループフィルタリング(CC-ALF)が、規則に基づいて前記第1のサブピクチャのサンプルに適用可能であるかどうかを決定することと、前記決定に基づいて前記変換を行うことを含む映像処理方法であって、
前記サンプルに対する前記CC-ALFは第2のサブピクチャからのサンプルを使用し、
前記規則は前記第1のサブピクチャおよび/または前記第2のサブピクチャに対して、サブピクチャの境界をまたぐループフィルタリングが許可されているかどうかに基づく、映像処理方法。 - 前記サブピクチャ境界をまたぐ前記ループフィルタリングが前記第1のサブピクチャに対して許可されない場合、前記サンプルに対して前記CC-ALFをスキップする、請求項82に記載の方法。
- 前記サブピクチャ境界をまたぐ前記ループフィルタリングが前記第2のサブピクチャに対して許可されない場合、前記第1のサンプルに対して前記CC-ALFをスキップする、請求項82に記載の方法。
- 前記サブピクチャ境界をまたぐ前記ループフィルタリングが前記第1のサブピクチャおよび/または前記第2のサブピクチャに対して許可されない場合、前記第1のサンプルに対して前記CC-ALFをスキップする、請求項82に記載の方法。
- 前記サブピクチャ境界をまたぐ前記ループフィルタリングが許可されるかどうかが、前記第1のサブピクチャおよび/または前記第2のサブピクチャに関連付けられたフラグに基づく、請求項82~84のいずれか1項以上に記載の方法。
- 前記方法は、1)映像コンテンツのタイプ、2)シーケンスパラメータセット(SPS)、映像パラメータセット(VPS)、ピクチャパラメータセット(PPS)、依存性パラメータセット(DPS)、適応パラメータセット(APS)、ピクチャヘッダ、スライスヘッダ、タイルグループヘッダ、最大コーディングユニット(LCU)、コーディングユニット(CU)、LCU行、LCUグループ、変換ユニット(TU)、予測ユニット(PU)ブロック、または映像コーディングユニットで信号通知されたメッセージ、3)CU、PU、TU、ブロック、または映像コーディングユニットの位置、4)現在のブロックおよび/または隣接ブロックの復号化情報、5)前記現在のブロックおよび/または前記隣接ブロックの寸法または形状、6)色フォーマットの指示、7)コーディングツリー構造、8)スライスタイプ、タイルグループタイプ、および/またはピクチャタイプ、9)色成分のタイプ、10)時間層識別子、11)標準のプロファイル/レベル/ティアのうちの少なくとも1つにさらに基づいた、先の請求項のいずれかに記載の方法。
- 前記変換は、前記映像を前記ビットストリーム表現に符号化することを含む、請求項1~87のいずれかに記載の方法。
- 前記変換は、前記ビットストリーム表現から前記映像を復号することを含む、請求項1~87のいずれかに記載の方法。
- 請求項1~89のいずれか1項以上に記載の方法を実装するように構成されたプロセッサを備える映像処理装置。
- 実行されると、プロセッサに、請求項1から89のいずれか1つ以上に記載の方法を実装させるプログラムコードを格納するコンピュータ可読媒体。
- 上述した方法のいずれかに従って生成されたコーディング表現またはビットストリーム表現を記憶する、コンピュータ可読媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023200063A JP2024020545A (ja) | 2019-11-04 | 2023-11-27 | クロス成分適応ループフィルタ |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNPCT/CN2019/115321 | 2019-11-04 | ||
CN2019115321 | 2019-11-04 | ||
PCT/CN2020/126332 WO2021088835A1 (en) | 2019-11-04 | 2020-11-04 | Cross-component adaptive loop filter |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023200063A Division JP2024020545A (ja) | 2019-11-04 | 2023-11-27 | クロス成分適応ループフィルタ |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023501192A true JP2023501192A (ja) | 2023-01-18 |
JP7401666B2 JP7401666B2 (ja) | 2023-12-19 |
Family
ID=75849458
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022525117A Active JP7401666B2 (ja) | 2019-11-04 | 2020-11-04 | クロス成分適応ループフィルタ |
JP2023200063A Pending JP2024020545A (ja) | 2019-11-04 | 2023-11-27 | クロス成分適応ループフィルタ |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023200063A Pending JP2024020545A (ja) | 2019-11-04 | 2023-11-27 | クロス成分適応ループフィルタ |
Country Status (7)
Country | Link |
---|---|
US (2) | US20220272335A1 (ja) |
EP (1) | EP4042685A4 (ja) |
JP (2) | JP7401666B2 (ja) |
KR (1) | KR20220088427A (ja) |
CN (1) | CN115428449A (ja) |
BR (1) | BR112022008487A2 (ja) |
WO (1) | WO2021088835A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7393550B2 (ja) | 2019-12-11 | 2023-12-06 | 北京字節跳動網絡技術有限公司 | クロス成分適応ループフィルタリングのためのサンプルパディング |
KR20230029670A (ko) | 2020-06-30 | 2023-03-03 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 적응적 루프 필터링을 위한 경계 위치 |
US11838522B2 (en) * | 2020-12-29 | 2023-12-05 | Tencent America LLC | Method and apparatus for video coding |
US11683530B2 (en) * | 2021-03-19 | 2023-06-20 | Tencent America LLC | Adaptive non-linear mapping for sample offset |
US20230007305A1 (en) * | 2021-06-28 | 2023-01-05 | Tencent America LLC | Subpicture partitioning and scaling window information |
WO2023213298A1 (en) * | 2022-05-05 | 2023-11-09 | Beijing Bytedance Network Technology Co., Ltd. | Filter shape switch for adaptive loop filter in video coding |
WO2024039088A1 (ko) * | 2022-08-18 | 2024-02-22 | 현대자동차주식회사 | 비선형 교차 성분 관계에 기반하는 cc-alf를 이용하는 비디오 코딩을 위한 방법 및 장치 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9525884B2 (en) * | 2010-11-02 | 2016-12-20 | Hfi Innovation Inc. | Method and apparatus of slice boundary filtering for high efficiency video coding |
US20130128986A1 (en) | 2011-11-23 | 2013-05-23 | Mediatek Inc. | Method and Apparatus of Slice Boundary Padding for Loop Filtering |
US10721469B2 (en) * | 2017-11-28 | 2020-07-21 | Qualcomm Incorporated | Line buffer reduction for adaptive loop filtering in video coding |
CN109600611B (zh) * | 2018-11-09 | 2021-07-13 | 北京达佳互联信息技术有限公司 | 环路滤波方法、环路滤波装置、电子设备和可读介质 |
US11910024B2 (en) * | 2019-03-11 | 2024-02-20 | Qualcomm Incorporated | Boundary handling for adaptive loop filtering |
US20220248006A1 (en) * | 2019-06-17 | 2022-08-04 | Electronics And Telecommunications Research Institute | Adaptive in-loop filtering method and apparatus |
MX2022000987A (es) * | 2019-07-25 | 2022-10-28 | Hfi Innovation Inc | Metodo y aparato de filtrado de bucle adaptativo de componentes cruzados con limite virtual para codificacion de video. |
US11197030B2 (en) * | 2019-08-08 | 2021-12-07 | Panasonic Intellectual Property Corporation Of America | System and method for video coding |
US11533491B2 (en) * | 2019-08-28 | 2022-12-20 | Qualcomm Incorporated | Picture and sub-picture boundary processing for combined bilateral filter and Hadamard transform domain filter as in-loop filters |
US11303890B2 (en) * | 2019-09-05 | 2022-04-12 | Qualcomm Incorporated | Reusing adaptive loop filter (ALF) sub-picture boundary processing for raster-scan slice boundaries |
US11451834B2 (en) * | 2019-09-16 | 2022-09-20 | Tencent America LLC | Method and apparatus for cross-component filtering |
US11425405B2 (en) * | 2019-11-15 | 2022-08-23 | Qualcomm Incorporated | Cross-component adaptive loop filter in video coding |
-
2020
- 2020-11-04 KR KR1020227013426A patent/KR20220088427A/ko unknown
- 2020-11-04 WO PCT/CN2020/126332 patent/WO2021088835A1/en unknown
- 2020-11-04 EP EP20886017.1A patent/EP4042685A4/en active Pending
- 2020-11-04 BR BR112022008487A patent/BR112022008487A2/pt unknown
- 2020-11-04 JP JP2022525117A patent/JP7401666B2/ja active Active
- 2020-11-04 CN CN202080077079.1A patent/CN115428449A/zh active Pending
-
2022
- 2022-05-03 US US17/735,435 patent/US20220272335A1/en active Pending
-
2023
- 2023-11-22 US US18/518,024 patent/US20240129462A1/en active Pending
- 2023-11-27 JP JP2023200063A patent/JP2024020545A/ja active Pending
Non-Patent Citations (3)
Title |
---|
ANDREY NORKIN, ET AL.: ""BoG report on CE5 loop filtering related contributions"", DOCUMENT: JVET-P1033-V2, [ONLINE], vol. JVET-P1033 (version 2), JPN6023017031, 11 October 2019 (2019-10-11), pages 1 - 2, ISSN: 0005054987 * |
CHIA-YANG TSAI, ET AL.: ""AHG6: ALF with modified padding process"", DOCUMENT: JCTVC-J0050, [ONLINE], vol. JCTVC-J0050 (version 2), JPN6023017033, 10 July 2012 (2012-07-10), pages 1 - 8, ISSN: 0005054986 * |
KIRAN MISRA, ET AL.: ""CE5-2.1, CE5-2.2: Cross Component Adaptive Loop Filter"", DOCUMENT: JVET-P0080, [ONLINE], vol. JVET-P0080 (version 1), JPN6023017032, 18 September 2019 (2019-09-18), pages 1 - 7, ISSN: 0005054985 * |
Also Published As
Publication number | Publication date |
---|---|
CN115428449A (zh) | 2022-12-02 |
US20240129462A1 (en) | 2024-04-18 |
JP2024020545A (ja) | 2024-02-14 |
WO2021088835A1 (en) | 2021-05-14 |
US20220272335A1 (en) | 2022-08-25 |
EP4042685A4 (en) | 2023-03-08 |
KR20220088427A (ko) | 2022-06-27 |
JP7401666B2 (ja) | 2023-12-19 |
BR112022008487A2 (pt) | 2022-09-20 |
EP4042685A1 (en) | 2022-08-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7389251B2 (ja) | 輝度の差分を用いるクロスコンポーネント適応ループフィルタ | |
JP7401666B2 (ja) | クロス成分適応ループフィルタ | |
JP2022529479A (ja) | クロミナンス残差の結合符号化のための構文要素の信号通知 | |
US11671594B2 (en) | Selective application of sample padding in adaptive loop filtering | |
WO2021088951A1 (en) | Quantization properties of adaptive in-loop color-space transform for video coding | |
US20220295054A1 (en) | Sample Offset with Predefined Filters | |
WO2021170036A1 (en) | Methods and apparatuses of loop filter parameter signaling in image or video processing system | |
KR20220106216A (ko) | 비디오 필터링을 위한 방법 및 장치 | |
JP2022550337A (ja) | 異なるビデオユニット間の適応ループフィルタリング | |
KR20220166354A (ko) | 비디오 필터링을 위한 방법 및 장치 | |
JP2023506009A (ja) | クロス成分適応ループフィルタリングのためのサンプルパディング | |
JP7473680B2 (ja) | クロスコンポーネント予測のための利用制約 | |
US11706461B2 (en) | Method and apparatus for video coding | |
WO2024002168A1 (en) | Padding methods for adaptive loop filter in video coding | |
KR20240006655A (ko) | 일반화된 샘플 오프셋의 적응적 적용 | |
WO2023086214A1 (en) | Generalized sample offset |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220516 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220516 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230509 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230809 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231107 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231207 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7401666 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |