JP7389251B2 - 輝度の差分を用いるクロスコンポーネント適応ループフィルタ - Google Patents
輝度の差分を用いるクロスコンポーネント適応ループフィルタ Download PDFInfo
- Publication number
- JP7389251B2 JP7389251B2 JP2022525484A JP2022525484A JP7389251B2 JP 7389251 B2 JP7389251 B2 JP 7389251B2 JP 2022525484 A JP2022525484 A JP 2022525484A JP 2022525484 A JP2022525484 A JP 2022525484A JP 7389251 B2 JP7389251 B2 JP 7389251B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- alf
- component
- chroma
- filter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003044 adaptive effect Effects 0.000 title claims description 86
- 238000000034 method Methods 0.000 claims description 358
- 238000012545 processing Methods 0.000 claims description 112
- 238000001914 filtration Methods 0.000 claims description 88
- 238000006243 chemical reaction Methods 0.000 claims description 32
- 238000003860 storage Methods 0.000 claims description 12
- 230000015654 memory Effects 0.000 claims description 6
- 230000009466 transformation Effects 0.000 description 51
- 230000011664 signaling Effects 0.000 description 31
- 230000008569 process Effects 0.000 description 25
- 230000006978 adaptation Effects 0.000 description 18
- 238000005516 engineering process Methods 0.000 description 16
- 239000013598 vector Substances 0.000 description 16
- 238000010586 diagram Methods 0.000 description 11
- 238000004590 computer program Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000006872 improvement Effects 0.000 description 9
- 230000002123 temporal effect Effects 0.000 description 9
- 238000012937 correction Methods 0.000 description 8
- 230000007717 exclusion Effects 0.000 description 8
- 238000003672 processing method Methods 0.000 description 8
- 241000023320 Luma <angiosperm> Species 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 7
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 7
- 238000013139 quantization Methods 0.000 description 7
- 229910052799 carbon Inorganic materials 0.000 description 6
- 230000004913 activation Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 5
- 229910003460 diamond Inorganic materials 0.000 description 5
- 239000010432 diamond Substances 0.000 description 5
- 238000000844 transformation Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000009795 derivation Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- QNRATNLHPGXHMA-XZHTYLCXSA-N (r)-(6-ethoxyquinolin-4-yl)-[(2s,4s,5r)-5-ethyl-1-azabicyclo[2.2.2]octan-2-yl]methanol;hydrochloride Chemical compound Cl.C([C@H]([C@H](C1)CC)C2)CN1[C@@H]2[C@H](O)C1=CC=NC2=CC=C(OCC)C=C21 QNRATNLHPGXHMA-XZHTYLCXSA-N 0.000 description 2
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000012886 linear function Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 101150114515 CTBS gene Proteins 0.000 description 1
- UORJNBVJVRLXMQ-UHFFFAOYSA-N aprobarbital Chemical compound C=CCC1(C(C)C)C(=O)NC(=O)NC1=O UORJNBVJVRLXMQ-UHFFFAOYSA-N 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000011282 treatment Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
本願は、2019年10月29日出願の国際特許出願第PCT/CN2019/113955号の優先権および利益を主張する、2020年10月29日出願の国際特許出願第PCT/CN2020/124701号に基づく。上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
本明細書は、映像符号化技術に関する。具体的には、画像/映像符号化におけるクロスコンポーネント適応ループフィルタに関する。HEVCのような既存の映像符号化規格に適用してもよいし、規格(Versatile Video Coding)を確定させるために適用してもよい。本発明は、将来の映像符号化規格または映像コーデックにも適用可能である。
映像符号化規格は、主に周知のITU-TおよびISO/IEC規格の開発によって発展してきた。ITU-TはH.261とH.263を作り、ISO/IECはMPEG-1とMPEG-4 Visualを作り、両団体はH.262/MPEG-2 VideoとH.264/MPEG-4 AVC(Advanced Video Coding)とH.265/HEVC規格を共同で作った。H.262以来、映像符号化規格は、時間予測と変換符号化が利用されるハイブリッド映像符号化構造に基づく。HEVCを超えた将来の映像符号化技術を探索するため、2015年には、VCEGとMPEGが共同でJVET(Joint Video Exploration Team)を設立した。それ以来、多くの新しい方法がJVETによって採用され、JEM(Joint Exploration Mode)と呼ばれる参照ソフトウェアに組み込まれてきた。2018年4月には、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)の間にJVET(Joint Video Expert Team)が発足し、HEVCと比較して50%のビットレート削減を目標にVVC規格の策定に取り組んでいる。
色空間は、カラーモデル(又はカラーシステム)としても知られ、色の範囲を数字のタプルとして簡単に記述する抽象的な数学モデルであり、典型的には3又は4つの値又は色成分(例えば、RGB)である。基本的には、色空間は座標系とサブ空間とを合成したものである。
YCbCr、Y’CbCr、またはY Pb/Cb Pr/Crは、YCBCRまたはY’CBCRとも呼ばれ、映像およびデジタル写真システムのカラー画像パイプラインの一部として使用される色空間のファミリーである。Y’は輝度成分であり、CBおよびCRは青色差および赤色差のクロマ成分である。(素数を有する)Y’はYとは区別され、Yは輝度であり、ガンマ補正されたRGB原色に基づいて光強度が非線形に符号化されることを意味する。
3つのY’CbCr成分の各々は、同じサンプルレートを有し、従って、クロマサブサンプリングは存在しない。この方式は、ハイエンドフィルムスキャナおよび映画のポストプロダクションに用いられることがある。
2つのクロマ成分は、輝度のサンプルレートの半分でサンプリングされ、水平クロマ解像度は半分にされる。これにより、視覚的にほとんど又は全く差がなく、非圧縮の映像信号の帯域幅を1/3に縮小する。
4:2:0では、水平サンプリングは4:1:1に比べて2倍になるが、このスキームではCbおよびCrチャネルをそれぞれ1行おきのラインでのみサンプリングするので、垂直解像度は半分になる。従って、データレートは同じである。CbおよびCrはそれぞれ水平および垂直方向の両方に2倍ずつサブサンプリングされる。異なる水平および垂直位置を有する4:2:0スキームの3つの変形がある。
●MPEG-2において、CbおよびCrは水平方向に共座している。Cb、Crは垂直方向の画素間に位置する(格子間に位置する)。
●JPEG/JFIF、H.261、およびMPEG-1において、CbおよびCrは、交互の輝度サンプルの中間の格子間に位置する。
●4:2:0 DVにおいて、CbおよびCrは、水平方向に共座している。垂直方向には、それらは交互に共座している。
separate_colour_plane_flagの値に基づいて、変数ChromaArrayTypeの値は、以下のように割り当てられる。
-separate_colour_plane_flagが0に等しい場合、ChromaArrayTypeはchroma_format_idcに等しく設定される。
-そうでない場合(separate_colour_plane_flagが1に等しい)、ChromaArrayTypeは0に等しく設定される。
図1は、3つのインループフィルタリングブロック、すなわちDF(Deblocking Filter)、SAO(Sample Adaptive Offset)、およびALFを含むVVCのエンコーダブロック図の例を示す。予め定義されたフィルタを用いるDFとは異なり、SAOおよびALFは、現在のピクチャのオリジナルサンプルを利用し、それぞれ、オフセットおよびフィルタ係数を信号通知するコーディングされた側情報を用いて、オフセットを追加することにより、および、FIR(Finite Impulse Response)フィルタを適用することにより、元のサンプルと再構成サンプルとの間の平均二乗誤差を低減する。ALFは、各ピクチャの最後の処理段階に位置し、前の段階で生成されたアーチファクトを捕捉し、修正しようとするツールと見なすことができる。
JEMにおいて、ブロックに基づくフィルタ適応を用いたGALF(Geometry Transformation-based Adaptive Loop Filter)が適用される。輝度成分は、局所勾配の方向およびアクティビティに基づいて、2×2ブロックごとに25個のフィルタのうち1つが選択される。
JEMにおいて、輝度成分に対し、最大3つの菱形フィルタ形状(図2に示す)を選択することができる。輝度成分に使用されるフィルタ形状を示すために、ピクチャレベルでインデックスが信号通知される。
各2×2のブロックを25個のクラスのうちの1つに分類する。分類インデックスCは、その方向性DおよびアクティビティA^の量子化値に基づいて、以下のように導出される。
それぞれの2×2のブロックをフィルタリングする前に、そのブロックに対して計算された勾配値に基づいて、フィルタ係数f(k,l)に対して、ローテーション、又は対角線および垂直方向の反転等の幾何学的変換が適用される。これは、これらの変換をフィルタサポート領域内のサンプルに適用することに等しい。その考えは、ALFが適用される異なるブロックを、それらの方向性を揃えることによって、より類似させることである。
JEMにおいて、GALFフィルタパラメータは、第1のCTUのために、すなわち、スライスヘッダの後且つ第1のCTUのSAOパラメータの前に信号通知される。最大25組の輝度フィルタ係数を信号通知することができる。ビットオーバーヘッドを低減するために、異なる分類のフィルタ係数をマージすることができる。また、参照ピクチャのGALF係数を記憶し、現在のピクチャのGALF係数として再利用することができる。現在のピクチャは、参照ピクチャのために記憶されたGALF係数を使用し、GALF係数の信号通知を回避することを選択してもよい。この場合、1つの参照ピクチャへのインデックスのみが通知され、指定された参照ピクチャの記憶されたGALF係数が現在のピクチャに継承される。
デコーダ側において、ブロックに対してGALFが有効化されると、ブロック内のそれぞれのサンプルR(i,j)がフィルタリングされ、その結果、以下に示すように、サンプル値R’(i,j)が得られる。ここで、Lは、フィルタ長を表し、fm,nは、フィルタ係数を表し、f(k,l)は、復号化されたフィルタ係数を表す。
2.4.1.フィルタリング再形成
式(11)は、コーディング効率に影響を及ぼすことなく、以下の式で再定式化することができる。
上記(13)のフィルタ式を使用することで、近傍のサンプル値が現在のサンプル値のフィルタリングと異なり過ぎている場合に、単純なクリッピング関数を使用して、その影響を低減することで、非線形性を容易に導入し、ALFをより効率的にする。
現在のVVCにおけるGALFの設計は、JEMにおける設計に比べ、以下のような大きな変化を有している。
1)適応フィルタ形状は除去される。輝度成分に対しては7×7のフィルタ形状のみが許容され、クロマ成分に対しては5×5のフィルタ形状のみが許容される。
2)ALFフィルタ係数は、ALF APS(Adaptation Parameter Set)において信号通知される。
3)非線形ALFが適用されてもよい。
4)CTUごとに、ALFが有効化されるか無効化されるかについて、色成分ごとの1つのビットフラグが信号通知される。
5)クラスインデックスの計算は、2×2ではなく、4×4のレベルで行われる。また、JVET-L0147で提案されているように、ALF分類のためのサブサンプリングされたラプラシアン計算方法が利用される。具体的には、1つのブロック内のサンプルごとに水平/垂直/45対角線/135度勾配を計算する必要がない。その代わりに、1:2サブサンプリングが利用される。
VVCドラフトの最新バージョンにおいて、ALFパラメータは、APS(Adaptation Parameter Set)において信号通知されてもよく、各CTUによって適応的に選択されてもよい。1つのAPSにおいて、最大25組の輝度フィルタ係数およびクリッピング値インデックス、並びに最大8組のクロマフィルタ係数およびクリッピング値インデックスを信号通知することができる。ビットオーバーヘッドを低減するために、輝度成分の異なる分類のフィルタ係数をマージすることができる。スライスヘッダにおいて、現在のスライスに使用されるAPSのインデックスが信号通知される。
各APS RBSPは、それが参照される前に、復号処理に使用可能であり、それを参照する、または外部手段によって提供される符号化されたスライスNALユニットのTemporalId以下のTemporalIdを有する少なくとも1つのアクセスユニットに含まれる。
aspLayerIdをAPS NALユニットのnuh_layer_idとする。aspLayerIdに等しいnuh_layer_idを有する層が独立層である(すなわち、vps_independent_layer_flag[GeneralLayerIdx[aspLayerId]]が1に等しい)場合、APS RBSPを含むAPS NALユニットは、それを参照するコーディングされたスライスNALユニットのnuh_layer_idに等しいnuh_layer_idを有するものとする。そうでない場合、APS RBSPを含むAPS NALユニットは、それを参照するコーディングされたスライスNALユニットのnuh_layer_idと等しいか、またはそれを参照するコーディングされたスライスNALユニットを含む層の直接依存層のnuh_layer_idと等しいnuh_layer_idを有するものとする。
アクセスユニット内でadatation_parameter_set_idの特定の値およびaps_params_typeの特定の値を有するすべてのAPS NALユニットは、同じコンテンツを有するものとする。
aps_params_typeがALF_APSまたはSCALING_APSに等しい場合、adaptation_parameter_set_idの値は0~7の範囲にあるものとする。
aps_params_typeがLMCS_APSに等しい場合、adaptation_parameter_set_idの値は0~3の範囲にあるものとする。
aps_params_typeは、表7-2に示されるように、APSにおいて実行されるAPSパラメータのタイプを指定する。aps_params_typeが1(LMCS_APS)に等しい場合、adaptation_parameter_set_idの値は0~3の範囲にあるものとする。
注2-APS NALユニット(adaption_parameter_set_idの特定の値およびaps_params_typeの特定の値を有する)は、ピクチャ間で共有されてもよく、ピクチャ内の異なるスライスは、異なるALF APSを参照することができる。
0に等しいaps_extension_flagは、APS RBSP構文構造にaps_extension_data_flag構文要素が存在しないことを規定する。1に等しいaps_extension_flagは、APS RBSP構文構造にaps_extension_data_flag構文要素が存在することを規定する。
aps_extension_data_flagは任意の値を有してよい。その存在および値は、本仕様のこのバージョンで規定されたプロファイルへのデコーダの適合性に影響を与えない。本仕様のこのバージョンに準拠するデコーダは、すべてのaps_extension_data_flag構文要素を無視するものとする。
1に等しいalf_luma_filter_signal_flagは、輝度フィルタセットが信号通知されることを規定する。0に等しいalf_luma_filter_signal_flagは、輝度フィルタセットが信号通知されないことを規定する。
1に等しいalf_chroma_filter_signal_flagは、クロマフィルタが信号通知されることを規定する。0に等しいalf_chroma_filter_signal_flagは、クロマフィルタが信号通知されないことを規定する。ChromaArrayTypeが0に等しい場合、alf_chroma_filter_signal_flagは0に等しい。
異なる適応ループフィルタの数を指定する変数NumAlfFiltersは、25に等しく設定される。
0に等しいalf_luma_clip_flagは、線形適応ループフィルタリングが輝度成分に適用されることを規定する。1に等しいalf_luma_clip_flagは、非線形適応ループフィルタリングが輝度成分に適用されてよいことを規定する。
alf_luma_num_filters_signalled_minus1+1は、輝度係数を信号通知することができる適応ループフィルタクラスの数を規定する。alf_luma_num_filters_signalled_minus1の値は、0~NumAlfFilters-1の範囲にあるものとする。
alf_luma_coeff_delta_idx[filtIdx]は、0からNumAlfFilters-1までの範囲にあるfiltIdxが示すフィルタクラスのための、信号通知される適応ループフィルタの輝度係数デルタのインデックスを規定する。alf_luma_coeff_delta_idx[filtIdx]が存在しない場合、それは0に等しいと推論される。alf_luma_coeff_delta_idx[filtIdx]の長さは、Ceil(Log2(alf_luma_num_filters_signalled_minus1+1)ビットである。
1に等しいalf_luma_coeff_flag[sfIdx]は、sfIdxで示される輝度フィルタの係数が信号通知されることを規定する。0に等しいalf_luma_coeff_flag[sfIdx]は、sfIdxで示される輝度フィルタのすべてのフィルタ係数が0に設定されることを規定する。存在しない場合、alf_luma_coeff_flag[sfIdx]は1に等しく設定される。
alf_luma_coeff_abs[sfIdx][j]は、sfIdxで示される信号輝度フィルタのj番目の係数の絶対値を規定する。alf_luma_coeff_abs[sfIdx][j]が存在しない場合、それは0に等しいと推論される。
指数ゴロム二値化uek(v)の次数kは3に等しく設定される。
-alf_luma_coeff_sign[sfIdx][j]が0に等しい場合、対応する輝度フィルタ係数は正の値を有する。
-そうでない場合(alf_luma_coeff_sign[sfIdx][j]が1に等しい)、対応する輝度フィルタ係数は負の値を有する。
alf_luma_coeff_sign[sfIdx][j]が存在しない場合、それは0に等しいと推論される。
filtCoeff[sfIdx][j]=alf_luma_coeff_abs[sfIdx][j]*(1-2*alf_luma_coeff_sign[sfIdx][j]) (7-47)
AlfCoeffL[adaptation_parameter_set_id][filtIdx][j]=filtCoeff[alf_luma_coeff_delta_idx[filtIdx]][j] (7-48)
AlfFixFiltCoeff=
{
{0,0,2,-3,1,-4,1,7,-1,1,-1,5}
{0,0,0,0,0,-1,0,1,0,0,-1,2}
{0,0,0,0,0,0,0,1,0,0,0,0}
{0,0,0,0,0,0,0,0,0,0,-1,1}
{2,2,-7,-3,0,-5,13,22,12,-3,-3,17}
{-1,0,6,-8,1,-5,1,23,0,2,-5,10}
{0,0,-1,-1,0,-1,2,1,0,0,-1,4}
{0,0,3,-11,1,0,-1,35,5,2,-9,9}
{0,0,8,-8,-2,-7,4,4,2,1,-1,25}
{0,0,1,-1,0,-3,1,3,-1,1,-1,3}
{0,0,3,-3,0,-6,5,-1,2,1,-4,21}
{-7,1,5,4,-3,5,11,13,12,-8,11,12}
{-5,-3,6,-2,-3,8,14,15,2,-7,11,16}
{2,-1,-6,-5,-2,-2,20,14,-4,0,-3,25}
{3,1,-8,-4,0,-8,22,5,-3,2,-10,29}
{2,1,-7,-1,2,-11,23,-5,0,2,-10,29}
{-6,-3,8,9,-4,8,9,7,14,-2,8,9}
{2,1,-4,-7,0,-8,17,22,1,-1,-4,23}
{3,0,-5,-7,0,-7,15,18,-5,0,-5,27}
{2,0,0,-7,1,-10,13,13,-4,2,-7,24}
{3,3,-13,4,-2,-5,9,21,25,-2,-3,12}
{-5,-2,7,-3,-7,9,8,9,16,-2,15,12}
{0,-1,0,-7,-5,4,11,11,8,-6,12,21}
{3,-2,-3,-8,-4,-1,16,15,-2,-3,3,26}
{2,1,-5,-4,-1,-8,16,4,-2,1,-7,33}
{2,1,-4,-2,1,-10,17,-2,0,2,-11,33}
{1,-2,7,-15,-16,10,8,8,20,11,14,11}
{2,2,3,-13,-13,4,8,12,2,-3,16,24}
{1,4,0,-7,-8,-4,9,9,-2,-2,8,29}
{1,1,2,-4,-1,-6,6,3,-1,-1,-3,30}
{-7,3,2,10,-2,3,7,11,19,-7,8,10}
{0,-2,-5,-3,-2,4,20,15,-1,-3,-1,22}
{3,-1,-8,-4,-1,-4,22,8,-4,2,-8,28}
{0,3,-14,3,0,1,19,17,8,-3,-7,20}
{0,2,-1,-8,3,-6,5,21,1,1,-9,13}
{-4,-2,8,20,-2,2,3,5,21,4,6,1}
{2,-2,-3,-9,-4,2,14,16,3,-6,8,24}
{2,1,5,-16,-7,2,3,11,15,-3,11,22}
{1,2,3,-11,-2,-5,4,8,9,-3,-2,26}
{0,-1,10,-9,-1,-8,2,3,4,0,0,29}
{1,2,0,-5,1,-9,9,3,0,1,-7,20}
{-2,8,-6,-4,3,-9,-8,45,14,2,-13,7}
{1,-1,16,-19,-8,-4,-3,2,19,0,4,30}
{1,1,-3,0,2,-11,15,-5,1,2,-9,24}
{0,1,-2,0,1,-4,4,0,0,1,-4,7}
{0,1,2,-5,1,-6,4,10,-2,1,-4,10}
{3,0,-3,-6,-2,-6,14,8,-1,-1,-3,31}
{0,1,0,-2,1,-6,5,1,0,1,-5,13}
{3,1,9,-19,-21,9,7,6,13,5,15,21}
{2,4,3,-12,-13,1,7,8,3,0,12,26}
{3,1,-8,-2,0,-6,18,2,-2,3,-10,23}
{1,1,-4,-1,1,-5,8,1,-1,2,-5,10}
{0,1,-1,0,0,-2,2,0,0,1,-2,3}
{1,1,-2,-7,1,-7,14,18,0,0,-7,21}
{0,1,0,-2,0,-7,8,1,-2,0,-3,24}
{0,1,1,-2,2,-10,10,0,-2,1,-7,23}
{0,2,2,-11,2,-4,-3,39,7,1,-10,9}
{1,0,13,-16,-5,-6,-1,8,6,0,6,29}
{1,3,1,-6,-4,-7,9,6,-3,-2,3,33}
{4,0,-17,-1,-1,5,26,8,-2,3,-15,30}
{0,1,-2,0,2,-8,12,-6,1,1,-6,16}
{0,0,0,-1,1,-4,4,0,0,0,-3,11}
{0,1,2,-8,2,-6,5,15,0,2,-7,9}
{1,-1,12,-15,-7,-2,3,6,6,-1,7,30}
}, (7-49)
AlfClassToFiltMap=
{
{8,2,2,2,3,4,53,9,9,52,4,4,5,9,2,8,10,9,1,3,39,39,10,9,52}
{11,12,13,14,15,30,11,17,18,19,16,20,20,4,53,21,22,23,14,25,26,26,27,28,10}
{16,12,31,32,14,16,30,33,53,34,35,16,20,4,7,16,21,36,18,19,21,26,37,38,39}
{35,11,13,14,43,35,16,4,34,62,35,35,30,56,7,35,21,38,24,40,16,21,48,57,39}
{11,31,32,43,44,16,4,17,34,45,30,20,20,7,5,21,22,46,40,47,26,48,63,58,10}
{12,13,50,51,52,11,17,53,45,9,30,4,53,19,0,22,23,25,43,44,37,27,28,10,55}
{30,33,62,51,44,20,41,56,34,45,20,41,41,56,5,30,56,38,40,47,11,37,42,57,8}
{35,11,23,32,14,35,20,4,17,18,21,20,20,20,4,16,21,36,46,25,41,26,48,49,58}
{12,31,59,59,3,33,33,59,59,52,4,33,17,59,55,22,36,59,59,60,22,36,59,25,55}
{31,25,15,60,60,22,17,19,55,55,20,20,53,19,55,22,46,25,43,60,37,28,10,55,52}
{12,31,32,50,51,11,33,53,19,45,16,4,4,53,5,22,36,18,25,43,26,27,27,28,10}
{5,2,44,52,3,4,53,45,9,3,4,56,5,0,2,5,10,47,52,3,63,39,10,9,52}
{12,34,44,44,3,56,56,62,45,9,56,56,7,5,0,22,38,40,47,52,48,57,39,10,9}
{35,11,23,14,51,35,20,41,56,62,16,20,41,56,7,16,21,38,24,40,26,26,42,57,39}
{33,34,51,51,52,41,41,34,62,0,41,41,56,7,5,56,38,38,40,44,37,42,57,39,10}
{16,31,32,15,60,30,4,17,19,25,22,20,4,53,19,21,22,46,25,55,26,48,63,58,55}
}, (7-50)
alf_luma_clip_idx[sfIdx][j]は、sfIdxで示される信号通知された輝度フィルタのj番目の係数を乗じる前に使用するクリップ値のクリッピングインデックスを規定する。alf_luma_clip_idx[sfIdx][j](但し、sfIdx=0…alf_luma_num_filters_signalled_minus1,j=0…11)の値は、0~3の範囲にあることがビットストリーム適合性の要件である。
要素AlfClipL[adaptation_parameter_set_id][filtIdx][j]を有する輝度フィルタクリッピング値AlfClipL[adaptation_parameter_set_id](但しfiltIdx=0…NumAlfFilters-1,j=0…11)は、BitDepthYに等しく設定されているbitDepthおよびalf_luma_clip_idx[alf_luma_coeff_delta_idx[filtIdx]][j]に等しく設定されているclipIdxに応じて表7-4で規定されているように導出される。
0に等しいalf_chroma_clip_flag[altIdx]は、インデックスaltIdxを有するクロマフィルタを使用する場合、クロマ成分に対して線形適応ループフィルタリングを適用することを規定し、1に等しいalf_chroma_clip_flag[altIdx]は、インデックスaltIdxを有するクロマフィルタを使用する場合、クロマ成分に対して非線形適応ループフィルタリングを適用することを規定する。存在しない場合、alf_chroma_clip_flag[altIdx]は0に等しいと推論される。
alf_chroma_coeff_abs[altIdx][j]は、インデックスaltIdxを有する代替クロマフィルタに対するj番目のクロマフィルタ係数の絶対値を規定する。alf_chroma_coeff_abs[altIdx][j]が存在しない場合、それは0に等しいと推論される。alf_chroma_coeff_abs[altIdx][j]の値は、0~27-1の範囲にあることがビットストリーム適合性の要件である。
指数ゴロム二値化uek(v)の次数kは3に等しく設定される。
-alf_chroma_coeff_sign[altIdx][j]が0に等しい場合、対応するクロマフィルタ係数は正の値を有する。
-そうでない場合(alf_chroma_coeff_sign[altIdx][j]が1に等しい)、対応するクロマフィルタ係数は負の値を有する。
alf_chroma_coeff_sign[altIdx][j]が存在しない場合、それは0に等しいと推論される。
要素AlfCoeffC[adaptation_parameter_set_id][altIdx][j]を有するクロマフィルタ係数AlfCoeffC[adaptation_parameter_set_id][altIdx](但し、altIdx=0…alf_chroma_num_alt_filters_minus1,j=0…5)は、以下のように導出される。
AlfCoeffC[adaptation_parameter_set_id][altIdx][j]=alf_chroma_coeff_abs[altIdx][j]*(1-2*alf_chroma_coeff_sign[altIdx][j]) (7-51)
alf_chroma_clip_idx[altIdx][j]は、代替クロマフィルタのj番目の係数にインデックスaltIdxを乗じる前に使用するクリップ値のクリッピングインデックスを指定する。alf_chroma_clip_idx[altIdx][j](但し、altIdx=0…alf_chroma_num_alt_filters_minus1,j=0…5である)の値は、0~3の範囲内にあることがビットストリーム適合性の要件である。
VTM6において、ALFフィルタパラメータは、APS(Adaptation Paramter Set)において信号通知される。1つのAPSにおいて、最大25組の輝度フィルタ係数およびクリッピング値インデックス、および最大8組のクロマフィルタ係数およびクリッピング値インデックスを信号通知することができる。ビットオーバーヘッドを低減するために、輝度成分に対する異なる分類のフィルタ係数をマージすることができる。スライスヘッダにおいて、現在のスライスに使用されるAPSのインデックスが信号通知される。
具体的には、以下が適用される。
1.ALFが輝度CTBに適用されるかどうか。適用される場合、ステップ2に進む。適用されない場合、さらなる信号通知は必要とされない。
2.現在のスライスに使用されているALF APSの数をチェックし、それをnumALFAPSで表す。
3.numALFAPSが0に等しい場合、固定フィルタのインデックス(例えば、alf_luma_fixed_filter_idx)が信号通知される。そうでない場合、以下が適用される。
-第1のALF APSから予測されたかどうかを示すフラグを信号通知する。
-予測されていない場合、ステップ4に進む。予測されている場合、輝度CTBのためのALFパラメータの信号通知は停止される。
4.numALFAPSが1よりも大きい場合、それがALF APSから予測されたものであるかどうかを示すためのフラグを信号通知する。
-大きくない場合、固定フィルタのインデックスを信号通知する。
-大きい場合かつnumALFAPSが2よりも大きい場合、ALF APSのインデックスから1を引いたものを、トランケイテッドユーナリー(truncated unary)とともに信号通知する。
1.Cb/Cr CTBにALFを適用するかどうか。適用される場合、ステップ2に進む。適用されない場合、さらなる信号通知は必要とされない。
2.i番目のALF APSに関連付けられたフィルタのインデックスを信号通知する。ここで、APSインデックスは、スライスヘッダにおいて信号通知される。
CC-ALF(Cross-Component Adaptive Loop Filter)は、輝度サンプル値を用いて各クロマ成分を改善する。基本的に、CC-ALFが適用される場合、CC-ALFは、輝度サンプルをフィルタリングすることによりクロマサンプルごとに補正を生成する。それはループフィルタステップとして適用される。ツールは、ビットストリームにおける情報によって制御され、この情報は、(a)クロマ成分ごとのフィルタ係数、および(b)サンプルブロックのためのフィルタの適用を制御するマスクの両方を含む。
(x,y)は、改善されるクロマ成分iの位置
(xC,yC)は、(x,y)に基づく輝度位置
Siは、クロマ成分iのための輝度のフィルタサポート
ci(x0,y0)は、フィルタ係数。
●輝度平面とクロマ平面との間の空間スケーリング要素に基づいて、サポート領域が中心となる輝度位置(xC,yC)を計算する。
●すべてのフィルタ係数はAPSで送信され、8ビットのダイナミックレンジを有する。
●スライスヘッダにおいて、APSが参照されてもよい。
●スライスのクロマ成分ごとに使用されるCC-ALF係数も、時間的サブレイヤに対応するバッファに記憶される。これらの時間的サブレイヤフィルタ係数セットの再利用は、スライスレベルフラグを使用して容易になる。
●CC-ALFフィルタの適用は、可変ブロックサイズで制御され、サンプルのブロックごとに受信されたコンテキストコーディングされたフラグによって信号通知される。ブロックサイズは、CC-ALF有効化フラグと共に、クロマ成分ごとにスライスレベルで受信される。
●横方向の仮想境界のための境界パディングは、繰り返しを利用する。残りの境界については、通常のALFと同じタイプのパディングを使用する。
JVET-P0080に比べ、CC-ALFの設計を簡単にするために、以下のような新しい態様を提案する。
-複雑性低減
○図5に示すように、フィルタの形状を3×4の菱形に変更し、フィルタ演算における乗数を低減する。
○CC-ALF係数の6ビットまでのダイナミックレンジを制限する。
○クロマALFと乗数の共用を許可する。
-ALFとの位置合わせ
○フィルタの選択をCTUレベルの信号通知に制限する。
○時間層係数バッファを除去する。
○ALF仮想境界における対称線選択を使用する。
7.3.6 スライスヘッダ構文
7.3.6.1 一般スライスセグメントヘッダ構文
現在のCC-ALF設計において、以下のような問題がある。
1.輝度情報を利用してクロマサンプルを改善する1つのCC-ALFモードのみが適用され、柔軟性に欠ける。
2.同じSPSフラグが、非線形ALFおよびCC-ALFの使用を制御するために使用される。非線形ALFと分けてCC-ALFをOFFにすることはできない。
3.CC-ALFの信号通知は、妥当でない非線形ALFフラグ(すなわち、slice_alf_enabled_flag)から独立している。
4.各CTBに対し、CC-ALFフィルタ1つのみ(Cbに対するalf_ctb_cross_component_cb_idc、またはCrに対するalf_ctb_cross_component_cr_idcによって示される)が許可され、ローカルな特徴を取得できなかった。
5.SAOなどの他のフィルタが、クロマサンプルを改善できる一方、CC-ALFは、輝度情報を利用してクロマサンプルを改善する。同じクロマサンプルを繰り返し改善すると、大きな歪みが生じる可能性がある。
6.1つのCTBに対して、CC-ALFおよびクロマALFフィルタリング処理の入力は同じであり、即ち、SAO処理の後の再構成サンプルである。CC-ALFとクロマALFフィルタリング処理との間の相互作用は考慮されていない。
以下に列記される実施形態は、一般的な概念を説明するための例であると考えられるべきである。これら項目は狭い意味で解釈されるべきではない。さらに、これらの項目は、任意の方法で組み合わせることができる。
1.CC-ALFは、第1の成分がCb/Crであり、第2の成分がYである場合を除外する第2の成分においてサンプルをフィルタリングすることによって、第1の成分におけるサンプルを補正する場合にまで拡張されてもよい。
a.あるいは、さらに、色成分が適用されたCC-ALFの指示を信号通知してもよい。
b.一例において、第1の色成分は、YCbCRフォーマットのYであってもよいし、RGBフォーマットのGであってもよい。
c.一例において、第1の色成分は、YCbCRフォーマットのCbであってもよいし、RGBフォーマットのBであってもよい。
d.一例において、第1の色成分は、YCbCRフォーマットのCrであってもよいし、RGBフォーマットのRであってもよい。
e.一例において、第2の色成分は、YCbCRフォーマットのYであってもよいし、RGBフォーマットのGであってもよい。
f.一例において、第2の色成分は、YCbCRフォーマットのCbであってもよいし、RGBフォーマットのBであってもよい。
g.一例において、第2の色成分は、YCbCRフォーマットのCrであってもよいし、RGBフォーマットのRであってもよい。
a.一例において、第1の成分からサンプルの補正を計算する場合、第2の成分および第3の成分からのサンプルがフィルタリングされてもよく、第1の成分は第2および第3の成分と異なる。
i.一例において、第1の成分は、YCbCrフォーマットのCbであり、第2の成分および第3の成分はそれぞれ、YおよびCrである。
ii.一例において、第1の成分は、YCbCrフォーマットのCrであり、第2の成分および第3の成分はそれぞれ、YおよびCbである。
iii.一例において、第1の成分は、YCbCrフォーマットのYであり、第2の成分および第3の成分はそれぞれ、CbおよびCrである。
iv.一例において、第1の成分は、RGBフォーマットのGであり、第2の成分および第3の成分はそれぞれ、RおよびBである。
v.一例において、第1の成分は、RGBフォーマットのBであり、第2の成分および第3の成分はそれぞれ、RおよびGである。
vi.一例において、第1の成分は、RGBフォーマットのRであり、第2の成分および第3の成分はそれぞれ、GおよびBである。
b.あるいは、第1の成分からサンプルの補正を計算する場合、第2の成分および第3の成分からのサンプルがフィルタリングされてもよく、第1の成分は第2の成分または第3の成分のどちらかと同じである。
i.一例において、第1の成分は、YCbCrフォーマットのCbであり、第2の成分および第3の成分はそれぞれ、CbおよびYである。
ii.一例において、第1の成分は、YCbCrフォーマットのCbであり、第2の成分および第3の成分はそれぞれ、CbおよびCrである。
iii.一例において、第1の成分は、YCbCrフォーマットのCrであり、第2の成分および第3の成分はそれぞれ、CrおよびYである。
iv.一例において、第1の成分は、YCbCrフォーマットのCrであり、第2の成分および第3の成分はそれぞれ、CrおよびCbである。
v.一例において、第1の成分は、YCbCrフォーマットのYであり、第2の成分および第3の成分はそれぞれ、YおよびCbである。
vi.一例において、第1の成分は、YCbCrフォーマットのYであり、第2の成分および第3の成分はそれぞれ、YおよびCrである。
vii.一例において、第1の成分は、RGBフォーマットのGであり、第2の成分および第3の成分はそれぞれ、GおよびRである。
viii.一例において、第1の成分は、RGBフォーマットのGであり、第2の成分および第3の成分はそれぞれ、GおよびBである。
ix.一例において、第1の成分は、RGBフォーマットのBであり、第2の成分および第3の成分はそれぞれ、BおよびRである。
x.一例において、第1の成分は、RGBフォーマットのBであり、第2の成分および第3の成分はそれぞれ、BおよびGである。
xi.一例において、第1の成分は、RGBフォーマットのRであり、第2の成分および第3の成分はそれぞれ、RおよびGである。
xii.一例において、第1の成分は、RGBフォーマットのRであり、第2の成分および第3の成分はそれぞれ、RおよびBである。
c.一例において、第1の成分からサンプルの補正を計算する場合、3つの成分からのサンプルがフィルタリングされてもよい。
i.一例において、第1の成分は、YCbCrフォーマットのCb、またはCr、またはYである。
ii.一例において、第1の成分は、RGBフォーマットのG、またはR、またはBである。
iii.一例において、3つの成分は、YCbCrフォーマットのY、Cb、およびCrである。
iv.一例において、3つの成分は、RGBフォーマットのR、G、およびBである。
d.一例において、第1/第2/第3の成分の指示、および/または、1つのオフセット導出のためにいくつの成分をフィルタリングする必要があるかは、エンコーダからデコーダに信号通知されてもよいし、予め定義されてもよい。
3.CC-ALF処理のために映像ユニット(例えば、スライス/ピクチャ)が2以上のALF APSを参照してよい。すなわち、映像ユニットにおける少なくとも第1のサンプルに対して、第1のALF APSにおけるCC-ALFフィルタが利用されてもよく、一方、映像ユニットにおける少なくとも第2のサンプルに対して第2のALF APSにおけるCC-ALFフィルタを利用してもよい。
a.一例において、参照されるALF APSの数は、コーディングされてもよい。
b.一例において、ALF APSのインデックスは、コーディングされてもよい。
c.一例において、輝度ALFフィルタが参照するのと同じALF APSのセットが、CC-ALFに対して利用されてもよい。
i.あるいは、さらに、CC-ALFフィルタを導出するために使用されるALF APSを信号通知する必要がない。
d.一例において、輝度ALFが参照するALF APSのサブセットまたはスーパーセットが、CC-ALFに対して利用されてもよい。
i.あるいは、さらに、CC-ALFフィルタと輝度ALFフィルタを導出するために使用されるALF APSの差異が信号通知されてもよい。
a.一例において、複数のCC-ALFフィルタの指示は、映像エリア(例えば、CTB/CU/CB/PU/PB、CTB行)において信号通知されてもよい。
i.一例において、指示は、1つのALF APSにおける選択されたCC-ALFフィルタインデックスを含んでもよい。
ii.あるいは、指示は、選択されたCC-ALFフィルタインデックス、および、CC-ALFフィルタが関連付けられているALF APSのインデックスを含んでもよい。
iii.あるいは、指示は、APSにおいて信号通知されない選択された固定CC-ALFフィルタを含んでもよい。
a)あるいは、固定CC-ALFフィルタを予め定義しておき、選択されたCC-ALFフィルタを予測する/選択されたCC-ALFフィルタとしてブロックに継承させるために利用してもよい。
iv.一例において、映像エリアは映像領域と同じである。
v.あるいは、映像エリアは、映像領域よりも大きくてもよいし(例えば、スライス)、小さくてもよい(例えば、CU)。
b.一例において、クロマサンプルは複数のセットに分類されてもよく、CC-ALFフィルタをどのように選択するかは、分類結果に依存してもよい。
i.一例において、2つのクロマ成分が、独立して分類を導出してもよい。
a)一例において、クロマ成分の分類処理は、クロマ成分のためのクロマサンプル情報に依存してもよい。
ii.一例において、2つのクロマ成分が、連帯して分類を導出してもよい。
a)一例において、2つの対応するクロマブロック(CbおよびCr)の分類処理は、2つのブロック内のクロマサンプルに依存してもよい。
iii.一例において、クロマ成分に対する分類処理は、輝度色成分の情報に依存してもよい。
a)一例において、同じクラスインデックスは、クロマブロックおよびその対応する輝度ブロックに設定されてもよい。
iv.一例において、1または複数のクロマ成分の分類処理は、2つ以上の成分(Y+Cb+Cr、Y+Cb、Y+Crなど)に基づく連帯決定に依存してもよい。
v.一例において、クロマサンプルは、輝度ALFにおける輝度サンプルの対応する分類に続いて、複数のセットに分類されてもよい。
vi.あるいは、さらに、分類インデックスに従ってCC-ALFフィルタをどのように選択するかに関する指示を信号通知してもよく、例えば、分類インデックスごとのCC-ALFフィルタインデックスが信号通知されてもよい。
5.クロマサンプルを改善するために使用される前に、改善(例えば、導出されたオフセット)を修正することが提案される。
a.一例において、導出されたオフセットは、所与の範囲にクリップされてもよい。
i.一例において、オフセットをクリップするかどうか、および/または、どのようにクリップするかは、エンコーダからデコーダに信号通知してもよい。
a.一例において、Offset1はOffset2に等しい。
b.一例において、Offset1にOffset2を加えたものは、0に等しくてもよい。
c.一例において、Offset2は、Offset1の線形関数として導出されてもよく、例えば、Offset2はa*Offset1+bに等しい。
d.一例において、クリッピング動作は、Offset1からOffset2を導出するために用いられてもよい。
e.一例において、Offset2は、オフセット1および連帯CbおよびCrモードのスライスレベル符号フラグ(例えば、slice_joint_cbcr_sign_flag)に基づいて導出されてもよい。
i.一例において、slice_joint_cbcr_sign_flagが0である場合、offset2は、offset1に等しく設定されてもよい。
a)あるいは、一例において、slice_joint_cbcr_sign_flagが1である場合、offset2は、-offset1に等しく設定されてもよい。
f.一例において、2つの対応するクロマサンプル(例えば、CbおよびCr)のために、1つのCC-ALFフィルタのセットが使用されてもよい。
i.あるいは、さらに、2つのクロマ成分に対し、CC-ALFフィルタの指示は、2回ではなく1回だけ信号通知してもよい。
g.あるいは、さらに、クロマ成分に対するオフセットの補正をさらに信号通知または導出してもよい。
i.一例において、輝度サンプルから導出されたオフセット(Oで表される)は、第1のクロマ成分(例えば、Cb)の1つのサンプルを改善するために直接的に使用されてもよく、OおよびOの補正は、共に、第2のクロマ成分(例えば、Cr)の1つのサンプルを改善するために使用されてもよい。
a.一例において、サブブロック内のすべてのクロマサンプルに対して、オフセット導出処理を、1回だけ呼び出してもよい。
b.一例において、サブブロック内のクロマサンプルに対し、同じオフセットが利用されてもよい。
i.あるいは、少なくとも第2の色成分から導出されたオフセットはさらに修正されてもよく、例えば、少なくとも第2の色成分から導出されたオフセットは内部オフセットとして設定されてもよく、サブブロックにおけるサンプルの最終オフセットを内部オフセットから導出してもよい。
c.一例において、サブブロックの寸法は、M×N(例えば、2×2;2×1,1×2)に設定されてよい。
d.一例において、サブブロックの寸法は、色フォーマット(例えば、4:4:4または4:2:0)に依存してもよい。
e.一例において、サブブロックの寸法は、異なるブロック(例えば、CTB)において異なってもよい。
f.一例において、サブブロックの寸法は、異なる色成分において異なってもよい。
g.一例において、CC-ALFフィルタサポート領域は、サブブロックの寸法に依存してもよい。
h.一例において、サブブロックサイズおよび/またはCC-ALF起動の粒度は、映像ユニットにおいて信号通知されてもよい。
a.一例において、輝度サンプルの差は、フィルタサポート(領域)における1つの輝度サンプルと対応する輝度サンプルとの間の差として定義されてもよい。クロマサンプル座標を(x,y)で示すと仮定する。
i.一例において、対応する輝度サンプルは、4:4:4フォーマットにおける(x,y)に位置する輝度サンプルである。
ii.一例において、対応する輝度サンプルは、非4:4:4フォーマットにおける(2x,2y)に位置する輝度サンプルである。
iii.一例において、対応する輝度サンプルは、4:2:0フォーマットにおける(2x,2y)および(2x,2y+1)に位置する2つのサンプルの関数(例えば、平均)として導出される。
iv.一例において、式(18)におけるフィルタリング処理は、以下のように書き換えられてもよい。
(x,y)は、改善されているクロマ成分iの位置である。
(xC,yC)は、(x,y)に基づく輝度位置である。
Siは、クロマ成分iのための輝度のフィルタサポートである。
ci(x0,y0)はフィルタ係数を表す。
なお、対応するサンプルが(xC,yC)として定義される場合、x0およびy0の両方が0に等しい際には、これらはSiから除外される。
b.あるいは、さらに、輝度サンプル差は、使用する前に、クリッピングするなど、さらに修正されてもよい。
i.一例において、式(18)におけるフィルタリング処理は、以下のように書き換えられてもよい。
(x,y)は、改善されているクロマ成分iの位置である。
(xC,yC)は、(x,y)に基づく輝度位置である。
Siは、クロマ成分iのための輝度のフィルタサポートである。
ci(x0,y0)はフィルタ係数を表す。
なお、対応するサンプルが(xC,yC)として定義される場合、x0およびy0の両方が0に等しい際には、これらはSiから除外され、関数Clipは(x0,y0)に依存してもよい。
ii.一例において、クリッピングを行うかどうか、および/または、どのようにクリッピングを行うかは、信号通知されてもよい。
iii.一例において、クリッピングパラメータは、デコーダに信号通知されてもよい。
a)あるいは、さらに、輝度ALF処理におけるクリッピングパラメータの信号通知方法が、CC-ALFにおけるクリッピングパラメータを信号通知するために用いられてもよい。
iv.一例において、輝度ALF処理において使用されるクリッピングパラメータ(利用可能である場合)は、CC-ALFにおいて再使用されてもよい。
9.一例において、APSがCC-ALFに関連する情報を含むかどうかを示すために、APSにおいて少なくとも1つの構文要素が信号通知される。
a.一例において、CC-ALFに関連する情報を含むAPSは、新しいAPSタイプとしてマークされてもよい。
b.CbおよびCr CC-ALFフィルタの信号通知の指示(例えば、alf_cross_component_cb_filter_signal_flagおよびalf_cross_component_cr_filter_signal_flag)、1つの構文要素(例えば、alf_cross_conponent_filter_signal_flagによって示される)と連帯してコーディングされてもよい。
i.あるいは、構文要素は非バイナリ値であってもよい。
a.一例において、コーディングツールXは、以下であってもよい。
i.クロマ成分に対するSAO
ii.LMCSにおけるクロマ残差スケーリング
iii.クロマ成分のデブロッキング
iv.クロマ成分のALF
b.一例において、CC-ALF関連サイド情報の信号通知は、コーディングツールXを有効化/無効化するという条件チェックに従っててもよい。
c.一例において、コーディングツールX関連サイド情報の信号通知は、CC-ALFを有効化/無効化するという条件チェックに従ってもよい。
d.一例において、コーディングツール(CC-ALFまたはXのいずれか)が無効化された場合、対応するサイド情報は信号通知されない。
e.CC-ALFおよびコーディングツールXが排他的に使用されるかどうかの決定は、シーケンス全体に対して、またはピクチャ全体に対して、またはスライス全体に対して、またはタイル、サブピクチャ、CTB、コーディングブロック等の領域に対して行われてもよい。
a.一例において、ALFパラメータが輝度成分のために信号通知されない場合、CC-ALFは強制的に無効化される。
i.あるいは、CC-ALF関連サイド情報の信号通知は、輝度成分(例えば、alf_luma_filter_signal_flag)に対するALFの使用の条件チェックに従ってもよい。
ii.あるいは、さらに、ALFパラメータが信号通知されない場合、CC-ALF関連サイド情報の信号通知は省略されてもよい。
b.一例において、輝度成分に対してALFが無効化されている場合、CC-ALFは無効化されることを強制される。
i.あるいは、さらに、CC-ALF関連サイド情報(例えば、slice_cross_component_alf_cb_enabled_flag、slice_cross_component_alf_cr_enabled_flag、alf_ctb_cross_component_cb_idc、またはalf_ctb_cross_component_cr_idc)の信号通知は、輝度成分(例えば、slice_alf_enabled_flag、またはalf_ctb_flag)に対するALFの使用の条件チェックに従ってもよい。
ii.あるいは、さらに、CC-ALF関連サイド情報の信号通知が省略されてもよい。
a.一例において、CC-ALF関連情報(例えば、slice_cross_component_alf_cb_enabled_flag、slice_cross_component_alf_cr_enabled_flag)の信号通知は、利用可能なALF APSの数が0に等しくないという条件チェックに従う。あるいは、CC-ALF関連情報の信号通知は、利用可能なALF APSの数が0よりも大きいという条件チェックに従う。
b.一例において、利用可能なALF APSの数量が0に等しい場合、CC-ALF関連情報(例えば、slice_cross_component_alf_cb_enabled_flag、slice_cross_component_alf_cr_enabled_flag)の信号通知は省略されてもよい。
c.あるいは、適合ビットストリームは、CC-ALFおよび/またはALFに対する信号通知されたAPSインデックスが、送信されたALF APSの数以上であることを満たすものとする。
d.あるいは、適合ビットストリームは、CC-ALFおよび/またはALFに対する信号通知されたAPSインデックスが、1つの利用可能なALF APSを参照することを満たすものとする。
e.あるいは、CC-ALFの使用を信号通知するかどうかは、CC-ALF情報を含む利用可能なALF APSの数に依存してもよい。
13.CC-ALFは、ブロックの予測ステージにおいて適用されてよい。
a.一例において、エンコーダ側において、予測誤差は、オリジナルブロックおよびCC-ALFフィルタリングされた結果、例えば、オリジナル信号とCC-ALFフィルタリングされた結果との間の差に基づいて生成されてもよい。
b.一例において、エンコーダ側において、予測誤差は、オリジナルブロック、所与の予測モードに従う予測ブロック、CC-ALFフィルタリングされた結果(例えば、オリジナル信号から予測信号を減算したものからCC-ALFフィルタリングされた結果を減算したものに設定される)に基づき生成されてもよい。
c.一例において、デコーダ側において、ブロックの再構成は、CC-ALFフィルタリングされた結果および残差に依存してもよい。
d.一例において、デコーダ側において、ブロックの再構成は、CC-ALFフィルタリングされた結果、残差、およびイントラ/インター/他のコーディングモードから生成された予測ブロックに依存してもよい。
e.一例において、上記例は、ブロック内の部分サンプルについては有効化されるが、残りのサンプルについては無効化されてもよい。
i.一例において、部分サンプルは、最初のN個の行/列におけるサンプルを表してもよい。
ii.一例において、部分サンプルは、最後のN個の行/列におけるサンプルを表してもよい。
iii.一例において、Nは、CC-ALFにおいて使用されるフィルタ形状に依存してもよい。
a.一例において、CC-ALFは、すべてのインループフィルタの前に適用されてもよい。
b.一例において、CC-ALFは、ブロックの再構成の後に適用されてもよく、フィルタリングされた再構成ブロックは、次のブロックを予測するために利用されてもよい。
c.一例において、CC-ALFは、SAOの前に適用されてもよい。
a.一例において、ALFの有効化に従って、CC-ALFの使用の指示が条件付きで信号通知されてもよい。
b.一例において、CC-ALFの使用の指示は、クロマ色フォーマットおよび/または別個のプレーンコーディング有効化フラグに従って、条件付きで信号通知されてもよい。
c.一例において、スライス/CTB/CTUにおけるCC-ALFの使用の指示は、映像ユニットに対してCC-ALFのチェックが有効化されているという条件に従ってもよい。
d.一例において、CC-ALFを有効化してよいかどうかを示すために、SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダにおいて構文要素(例えば、フラグ)が信号通知されてもよい。
i.あるいは、さらに、映像ユニットに対してALFが有効化されている場合にのみ(例えば、sps_alf_enabled_flagが1に等しい場合にのみ)、構文要素はコーディングされてもよい。
ii.あるいは、さらに、構文要素は、映像ユニットに対してALFが有効化されており、ChromaArrayTypeが0に等しくない場合にのみ(例えば、sps_alf_enabled_flagが1に等しく、ChromaArrayTypeはゼロではない場合にのみ)コーディングされてもよい。
a.一例において、輝度成分に対してALFが無効化された場合、CC-ALFは、明確に信号通知されることなく同様に無効化される。
a.一例において、M×Nの領域のクロマALFフィルタリング処理に起因するフィルタリングされたサンプルは、M×Nの領域のクロマ成分のCC-ALFに入力される前に、さらに修正されてもよい。
b.一例において、第1のM×Nの領域に対するクロマALFフィルタリング処理および/またはCC-ALFに起因するフィルタリングされたサンプルは、第2のM×Nの領域への入力として利用されてもよい。
c.一例において、まずM×Nの領域におけるクロマ成分のCC-ALFが行われ、次にM×Nの領域におけるクロマ成分のALFが行われてよい。
i.一例において、1つのM×Nの領域に対し、クロマALFフィルタリング処理の入力は、CC-ALFの出力であってもよい。
ii.一例において、M×Nの領域のサンプルは、M×Nの領域のクロマ成分のALFに入力される前に、CC-ALFにより修正されてしまってもよい。
d.一例において、M×Nの領域は、CTBであってもよい。
e.一例において、M×Nの領域は、CTBより小さくてもよい。
i.一例において、M×Nの領域は、1つのサンプルであってもよい。
f.順序は、VPS/DPS/SPS/PPS/ピクチャヘッダ/スライスヘッダなどで、エンコーダからデコーダに信号通知されてもよい。
a.一例において、構文要素の値は非バイナリであってもよい。
i.一例において、Kに等しい構文の値は、所与の色成分に対して非線形ALFおよびCC-ALFの両方が無効化されていることを示す。
ii.一例において、Lに等しい構文の値は、所与の色成分に対して非線形ALFおよびCC-ALFの両方が有効化されていることを示す。
iii.一例において、Mに等しい構文の値は、所与の色成分に対してCC-ALFが無効化されている間、非線形ALFのみが有効化されていることを示す。
iv.一例において、Nに等しい構文の値は、所与の色成分に対して非線形ALFが無効化されている間、CC-ALFのみが有効化されていることを示す。
v.上記例において、K,L,M,Nは、4つの整数値であり、例えば、K=0,L=3,M=1、N=2である。
b.構文要素の値は、固定長、ユーナリー(unary)、トランケイテッドユーナリー(truncated unary)、k次EG等の2値化方法でコーディングされてもよい。
a.映像コンテンツ(例えば、スクリーンコンテンツまたは自然コンテンツ)
b.一例において、デフォルトモードは、DPS/SPS/VPS/PPS/APS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU(Largest Coding Unit)/CU(Coding Unit)/LCU行/LCUグループ/TU/PUブロック/映像符号化ユニットにおいて信号通知されてもよい。
c.CU/PU/TU/ブロック/映像コーディングユニットの位置
d.現在のブロックおよび/またはその近傍のブロックの復号化情報
i.現在のブロックおよび/またはその近傍のブロックのブロック寸法/ブロック形状
e.カラーフォーマットの指示(例えば、4:2:0、4:4:4、RGB、YUV等)
f.コーディングツリー構造(例えば、デュアルツリーまたはシングルツリー)
g.スライス/タイルグループのタイプおよび/またはピクチャのタイプ
h.色成分(例えば、輝度成分および/またはクロマ成分にのみ適用されてもよい)。
i.時間層ID
j.標準のプロファイル/レベル/層
Claims (11)
- 映像データの処理の方法であって、
映像の映像領域と、前記映像のビットストリームとの間の変換のために、前記映像領域のクロマサンプルにクロスコンポーネントフィルタ処理を適用することを判定することであって、前記クロスコンポーネントフィルタ処理において、前記クロマサンプルは、輝度サンプルの差にフィルタリング係数を適用することに基づいて改善される、ことと、
前記判定することに基づいて、前記変換を実行することと、
を有し、
各輝度サンプルの差は、フィルタサポート領域における輝度サンプルの値と、前記クロマサンプルの対応する輝度サンプルの値との間の差に対応する、方法。 - 前記対応する輝度サンプルは、4:4:4フォーマットにある前記映像領域に対する(x,y)に位置し、
(x,y)は、前記クロマサンプルの座標を示す、
請求項1に記載の方法。 - 前記対応する輝度サンプルは、4:2:0フォーマットにある前記映像領域に対する(2x,2y)に位置し、
(x,y)は、前記クロマサンプルの座標を示す、
請求項1に記載の方法。 - 前記対応する輝度サンプルは、4:2:2フォーマットにある前記映像領域に対する(2x,2y)に位置し、
(x,y)は、前記クロマサンプルの座標を示す、
請求項1に記載の方法。 - 前記クロスコンポーネントフィルタ処理の利用の指示は、適応ループフィルタツールが有効か否かに基づいて、SPS(Sequence Parameter Set)レベルにおけるビットストリームに条件付きで含まれる、請求項1から4のいずれか一項に記載の方法。
- 前記指示は、クロマカラーフォーマットに更に基づいて、前記ビットストリームに条件付きで含まれる、請求項5に記載の方法。
- 前記変換は、前記映像を前記ビットストリームに符号化することを含む、請求項1から6のいずれか一項に記載の方法。
- 前記変換は、前記映像を前記ビットストリームから復号化することを含む、請求項1から6のいずれか一項に記載の方法。
- プロセッサと、命令を有する非一時的メモリを有する、映像データを処理するための装置であって、
前記命令は、前記プロセッサによって実行された際に、前記プロセッサに、
映像の映像領域と、前記映像のビットストリームとの間の変換のために、前記映像領域のクロマサンプルにクロスコンポーネントフィルタ処理を適用することを判定することであって、前記クロスコンポーネントフィルタ処理において、前記クロマサンプルは、輝度サンプルの差にフィルタリング係数を適用することに基づいて改善される、ことと、
前記判定に基づいて、前記変換を実行することと、
を行わせ、
各輝度サンプルの差は、フィルタサポート領域における輝度サンプルの値と、前記クロマサンプルの対応する輝度サンプルの値との間の差に対応する、装置。 - プロセッサに、
映像の映像領域と、前記映像のビットストリームとの間の変換のために、前記映像領域のクロマサンプルにクロスコンポーネントフィルタ処理を適用することを判定することであって、前記クロスコンポーネントフィルタ処理において、前記クロマサンプルは、輝度サンプルの差にフィルタリング係数を適用することに基づいて改善される、ことと、
前記判定に基づいて、前記変換を実行することと、
を行わせ、
各輝度サンプルの差は、フィルタサポート領域における輝度サンプルの値と、前記クロマサンプルの対応する輝度サンプルの値との間の差に対応する、命令を格納した非一時的コンピュータ可読記憶媒体。 - 映像のビットストリームを格納するための方法であって、
映像の映像領域に対し、前記映像領域のクロマサンプルにクロスコンポーネントフィルタ処理を適用することを判定することであって、前記クロスコンポーネントフィルタ処理において、前記クロマサンプルは、輝度サンプルの差にフィルタリング係数を適用することに基づいて改善される、ことと、
前記判定することに基づいて、前記ビットストリームを生成することと、
非一時的コンピュータ可読記録媒体に前記ビットストリームを格納することと、
を有し、
各輝度サンプルの差は、フィルタサポート領域における輝度サンプルの値と、前記クロマサンプルの対応する輝度サンプルの値との間の差に対応する、方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2019113955 | 2019-10-29 | ||
CNPCT/CN2019/113955 | 2019-10-29 | ||
PCT/CN2020/124701 WO2021083258A1 (en) | 2019-10-29 | 2020-10-29 | Cross-component adaptive loop filter using luma differences |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022554308A JP2022554308A (ja) | 2022-12-28 |
JP7389251B2 true JP7389251B2 (ja) | 2023-11-29 |
Family
ID=75714833
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022525484A Active JP7389251B2 (ja) | 2019-10-29 | 2020-10-29 | 輝度の差分を用いるクロスコンポーネント適応ループフィルタ |
JP2022525485A Active JP7389252B2 (ja) | 2019-10-29 | 2020-10-29 | クロスコンポーネント適応ループフィルタ |
JP2022525482A Active JP7485761B2 (ja) | 2019-10-29 | 2020-10-29 | クロスコンポーネント適応ループフィルタの信号通知 |
JP2023186875A Pending JP2024010138A (ja) | 2019-10-29 | 2023-10-31 | クロスコンポーネント適応ループフィルタ |
Family Applications After (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022525485A Active JP7389252B2 (ja) | 2019-10-29 | 2020-10-29 | クロスコンポーネント適応ループフィルタ |
JP2022525482A Active JP7485761B2 (ja) | 2019-10-29 | 2020-10-29 | クロスコンポーネント適応ループフィルタの信号通知 |
JP2023186875A Pending JP2024010138A (ja) | 2019-10-29 | 2023-10-31 | クロスコンポーネント適応ループフィルタ |
Country Status (6)
Country | Link |
---|---|
US (4) | US11736697B2 (ja) |
EP (3) | EP4042684A4 (ja) |
JP (4) | JP7389251B2 (ja) |
KR (3) | KR20220084059A (ja) |
CN (4) | CN114846793A (ja) |
WO (3) | WO2021083257A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021061493A1 (en) * | 2019-09-24 | 2021-04-01 | Futurewei Technologies, Inc. | Temporal identifier constraints for sei messages |
WO2021083257A1 (en) | 2019-10-29 | 2021-05-06 | Beijing Bytedance Network Technology Co., Ltd. | Cross-component adaptive loop filter |
US11425405B2 (en) * | 2019-11-15 | 2022-08-23 | Qualcomm Incorporated | Cross-component adaptive loop filter in video coding |
US20230023387A1 (en) * | 2019-12-17 | 2023-01-26 | Telefonaktiebolaget Lm Ericsson (Publ) | Low complexity image filter |
GB2590636B (en) * | 2019-12-20 | 2024-01-10 | Canon Kk | High level syntax for video coding and decoding |
EP4087243A4 (en) * | 2019-12-31 | 2023-09-06 | SZ DJI Technology Co., Ltd. | LOOP FILTRATION METHOD AND APPARATUS |
US11595676B2 (en) * | 2020-09-16 | 2023-02-28 | Tencent America LLC | Method and apparatus for video coding |
US11778177B2 (en) | 2020-12-23 | 2023-10-03 | Qualcomm Incorporated | Adaptive loop filter with fixed filters |
US20220279176A1 (en) * | 2021-02-26 | 2022-09-01 | Alibaba Group Holding Limited | Directional cross component filter for video coding |
US11683530B2 (en) * | 2021-03-19 | 2023-06-20 | Tencent America LLC | Adaptive non-linear mapping for sample offset |
KR20230170072A (ko) * | 2021-05-26 | 2023-12-18 | 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 | 교차-컴포넌트 샘플 적응적 오프셋에서의 코딩 강화 |
KR20230002091A (ko) * | 2021-06-29 | 2023-01-05 | 주식회사 케이티 | 화면내 예측 기반의 비디오 신호 부호화/복호화 방법 및 장치, 그리고 비트스트림을 저장한 기록 매체 |
US11863775B2 (en) * | 2021-07-21 | 2024-01-02 | Tencent America LLC | Cross-component transform coefficient level reconstruction |
CN116456086A (zh) * | 2022-01-07 | 2023-07-18 | 腾讯科技(深圳)有限公司 | 环路滤波方法、视频编解码方法、装置、介质及电子设备 |
WO2024006231A1 (en) * | 2022-06-28 | 2024-01-04 | Beijing Dajia Internet Information Technology Co., Ltd. | Methods and apparatus on chroma motion compensation using adaptive cross-component filtering |
WO2024039088A1 (ko) * | 2022-08-18 | 2024-02-22 | 현대자동차주식회사 | 비선형 교차 성분 관계에 기반하는 cc-alf를 이용하는 비디오 코딩을 위한 방법 및 장치 |
Family Cites Families (92)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7136417B2 (en) | 2002-07-15 | 2006-11-14 | Scientific-Atlanta, Inc. | Chroma conversion optimization |
US7397515B2 (en) | 2004-01-30 | 2008-07-08 | Broadcom Corporation | Method and system for cross-chrominance removal using motion detection |
EP2396966B1 (en) * | 2009-02-10 | 2018-09-05 | Lattice Semiconductor Corporation | Block noise detection and filtering |
CN103748884A (zh) | 2011-08-30 | 2014-04-23 | 索尼公司 | 图像处理装置和图像处理方法 |
US9185404B2 (en) * | 2011-10-07 | 2015-11-10 | Qualcomm Incorporated | Performing transform dependent de-blocking filtering |
US9807403B2 (en) * | 2011-10-21 | 2017-10-31 | Qualcomm Incorporated | Adaptive loop filtering for chroma components |
US9247258B2 (en) | 2011-10-26 | 2016-01-26 | Qualcomm Incorporated | Unified design for picture partitioning schemes |
US9077998B2 (en) | 2011-11-04 | 2015-07-07 | Qualcomm Incorporated | Padding of segments in coded slice NAL units |
US9414054B2 (en) * | 2012-07-02 | 2016-08-09 | Microsoft Technology Licensing, Llc | Control and use of chroma quantization parameter values |
CN104769950B (zh) | 2012-09-28 | 2018-11-13 | Vid拓展公司 | 用于视频编码中的色度信号增强的交叉平面滤波 |
EP2941871A2 (en) | 2013-01-07 | 2015-11-11 | VID SCALE, Inc. | Enhanced deblocking filters for video coding |
US9578339B2 (en) | 2013-03-05 | 2017-02-21 | Qualcomm Incorporated | Parallel processing for video coding |
US9503733B2 (en) * | 2013-04-10 | 2016-11-22 | ARRIS Enterprises, LLC | Re-sampling with phase offset adjustment for luma and chroma to signal adaptive filters in scalable video coding |
US9686561B2 (en) * | 2013-06-17 | 2017-06-20 | Qualcomm Incorporated | Inter-component filtering |
US9578328B2 (en) | 2013-07-15 | 2017-02-21 | Qualcomm Incorporated | Cross-layer parallel processing and offset delay parameters for video coding |
KR102135997B1 (ko) | 2013-09-27 | 2020-07-20 | 퀄컴 인코포레이티드 | 심도 인트라 예측 모드들에 대한 잔차 코딩 |
US20150271515A1 (en) * | 2014-01-10 | 2015-09-24 | Qualcomm Incorporated | Block vector coding for intra block copy in video coding |
US9628822B2 (en) * | 2014-01-30 | 2017-04-18 | Qualcomm Incorporated | Low complexity sample adaptive offset encoding |
US20150264099A1 (en) * | 2014-03-14 | 2015-09-17 | Sharp Laboratories Of America, Inc. | Systems and methods for constraining a bitstream |
US9807406B2 (en) | 2014-03-17 | 2017-10-31 | Qualcomm Incorporated | Picture flushing and decoded picture buffer parameter inference for multi-layer bitstreams |
US10200700B2 (en) | 2014-06-20 | 2019-02-05 | Qualcomm Incorporated | Cross-component prediction in video coding |
US20150382016A1 (en) * | 2014-06-27 | 2015-12-31 | Mitsubishi Electric Research Laboratories, Inc. | Method for Processing Multi-Component Video and Images |
KR102051193B1 (ko) | 2014-09-12 | 2019-12-02 | 브이아이디 스케일, 인크. | 비디오 코딩을 위한 성분간 탈상관 |
US20160105685A1 (en) * | 2014-10-08 | 2016-04-14 | Qualcomm Incorporated | Boundary filtering and cross-component prediction in video coding |
CA2964324C (en) | 2014-10-28 | 2020-01-21 | Mediatek Singapore Pte. Ltd. | Method of guided cross-component prediction for video coding |
US9591325B2 (en) | 2015-01-27 | 2017-03-07 | Microsoft Technology Licensing, Llc | Special case handling for merged chroma blocks in intra block copy prediction mode |
US10057574B2 (en) | 2015-02-11 | 2018-08-21 | Qualcomm Incorporated | Coding tree unit (CTU) level adaptive loop filter (ALF) |
US20170006283A1 (en) | 2015-06-30 | 2017-01-05 | Microsoft Technology Licensing, Llc | Computationally efficient sample adaptive offset filtering during video encoding |
EP4404572A2 (en) * | 2015-07-08 | 2024-07-24 | InterDigital Madison Patent Holdings, SAS | Enhanced chroma coding using cross plane filtering |
WO2017045101A1 (en) | 2015-09-14 | 2017-03-23 | Mediatek Singapore Pte. Ltd. | Advanced deblocking filter in video coding |
US10531111B2 (en) | 2015-11-06 | 2020-01-07 | Microsoft Technology Licensing, Llc | Flexible reference picture management for video encoding and decoding |
EP3403406A1 (en) * | 2016-01-15 | 2018-11-21 | VID SCALE, Inc. | System and method for enhanced motion compensation using adaptive filtering |
US11563938B2 (en) | 2016-02-15 | 2023-01-24 | Qualcomm Incorporated | Geometric transforms for filters for video coding |
US10419755B2 (en) * | 2016-05-16 | 2019-09-17 | Qualcomm Incorporated | Confusion of multiple filters in adaptive loop filtering in video coding |
TWI775760B (zh) | 2016-07-08 | 2022-09-01 | 美商Vid衡器股份有限公司 | 使用幾何投影360度視訊編碼 |
US20180041778A1 (en) | 2016-08-02 | 2018-02-08 | Qualcomm Incorporated | Geometry transformation-based adaptive loop filtering |
US10419757B2 (en) * | 2016-08-31 | 2019-09-17 | Qualcomm Incorporated | Cross-component filter |
US20180184127A1 (en) | 2016-12-22 | 2018-06-28 | Qualcomm Incorporated | Determining neighboring samples for bilateral filtering in video coding |
US10506230B2 (en) | 2017-01-04 | 2019-12-10 | Qualcomm Incorporated | Modified adaptive loop filter temporal prediction for temporal scalability support |
WO2018191224A1 (en) | 2017-04-11 | 2018-10-18 | Vid Scale, Inc. | 360-degree video coding using face continuities |
US10778974B2 (en) | 2017-07-05 | 2020-09-15 | Qualcomm Incorporated | Adaptive loop filter with enhanced classification methods |
US10728573B2 (en) | 2017-09-08 | 2020-07-28 | Qualcomm Incorporated | Motion compensated boundary pixel padding |
JP7343487B2 (ja) | 2017-09-20 | 2023-09-12 | ヴィド スケール インコーポレイテッド | 360度ビデオ符号化におけるフェイス不連続の処理 |
WO2019066384A1 (ko) * | 2017-09-26 | 2019-04-04 | 삼성전자 주식회사 | 크로스-성분 예측에 의한 비디오 복호화 방법 및 장치, 크로스-성분 예측에 의한 비디오 부호화 방법 및 장치 |
US10965941B2 (en) | 2017-10-09 | 2021-03-30 | Qualcomm Incorporated | Position-dependent prediction combinations in video coding |
CN117041536A (zh) | 2017-11-01 | 2023-11-10 | Vid拓展公司 | 用于简化视频译码中的自适应环路滤波器的方法 |
US11425418B2 (en) | 2017-11-01 | 2022-08-23 | Vid Scale, Inc. | Overlapped block motion compensation |
CN107801024B (zh) | 2017-11-09 | 2019-07-12 | 北京大学深圳研究生院 | 一种用于帧内预测的边界滤波方法 |
US10721469B2 (en) | 2017-11-28 | 2020-07-21 | Qualcomm Incorporated | Line buffer reduction for adaptive loop filtering in video coding |
CN111713111B (zh) | 2017-12-19 | 2024-04-09 | Vid拓展公司 | 用于360度视频译码的面不连续性滤波 |
CN111527751A (zh) | 2017-12-29 | 2020-08-11 | 夏普株式会社 | 用于在用于视频编码的图片的边界处划分视频块的系统和方法 |
WO2020053805A1 (en) | 2018-09-12 | 2020-03-19 | Beijing Bytedance Network Technology Co., Ltd. | Single-line cross component linear model prediction mode |
US10972729B2 (en) | 2018-01-20 | 2021-04-06 | Qualcomm Incorporated | Deblocking filter selection and application in video coding |
US20190238845A1 (en) | 2018-01-26 | 2019-08-01 | Qualcomm Incorporated | Adaptive loop filtering on deblocking filter results in video coding |
CN113573057B (zh) | 2018-02-01 | 2023-07-18 | 寰发股份有限公司 | 具有视频数据自适应量化的视频编码或解码方法和装置 |
CN110337811A (zh) | 2018-02-14 | 2019-10-15 | 北京大学 | 运动补偿的方法、装置和计算机系统 |
GB2571314A (en) * | 2018-02-23 | 2019-08-28 | Canon Kk | Methods and devices for linear component sample prediction using a double classification |
US10708592B2 (en) | 2018-04-02 | 2020-07-07 | Qualcomm Incorporated | Deblocking filter for video coding and processing |
US20190306502A1 (en) | 2018-04-02 | 2019-10-03 | Qualcomm Incorporated | System and method for improved adaptive loop filtering |
WO2019194647A1 (ko) * | 2018-04-06 | 2019-10-10 | 가온미디어 주식회사 | 필터 정보 기반의 적응적 루프 필터링 방법, 그를 이용한 영상 부호화 및 복호화 방법 |
CN116347109A (zh) | 2018-08-17 | 2023-06-27 | 北京字节跳动网络技术有限公司 | 一种处理视频数据的方法和装置 |
CN116055732A (zh) | 2018-09-14 | 2023-05-02 | 华为技术有限公司 | 视频译码方法,设备以及非瞬时性计算机可读介质 |
CN110971931A (zh) | 2018-09-30 | 2020-04-07 | 北京微播视界科技有限公司 | 视频水印添加方法、装置、电子设备及存储介质 |
CN112868240B (zh) | 2018-10-23 | 2023-06-30 | 北京字节跳动网络技术有限公司 | 并置的局部照明补偿和修改的帧间预测编解码 |
WO2020094067A1 (en) | 2018-11-06 | 2020-05-14 | Beijing Bytedance Network Technology Co., Ltd. | Simplified parameter derivation for intra prediction |
CN113170122B (zh) | 2018-12-01 | 2023-06-27 | 北京字节跳动网络技术有限公司 | 帧内预测的参数推导 |
JP7317965B2 (ja) | 2018-12-07 | 2023-07-31 | 北京字節跳動網絡技術有限公司 | コンテキストベースのイントラ予測 |
WO2020125796A1 (en) | 2018-12-22 | 2020-06-25 | Beijing Bytedance Network Technology Co., Ltd. | Two step cross-component prediction mode based on multiple parameter |
KR20240056798A (ko) | 2019-01-09 | 2024-04-30 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 비디오 코딩의 서브 픽처 식별자 시그널링 |
CN113383554B (zh) | 2019-01-13 | 2022-12-16 | 北京字节跳动网络技术有限公司 | LUT和共享Merge列表之间的交互 |
CN113439437B (zh) | 2019-02-22 | 2023-11-24 | 北京字节跳动网络技术有限公司 | 用于帧内预测的邻近样点选择 |
BR112021015017B1 (pt) | 2019-02-24 | 2022-07-26 | Bytedance Inc. | Método e aparelho para codificar dados de vídeo, e, mídia de armazenamento |
WO2020176635A1 (en) | 2019-02-27 | 2020-09-03 | Futurewei Technologies, Inc. | Adaptation parameter set identifier value spaces in video coding |
WO2020177663A1 (en) | 2019-03-02 | 2020-09-10 | Beijing Bytedance Network Technology Co., Ltd. | Restrictions on partition structures |
JP7519373B2 (ja) | 2019-03-11 | 2024-07-19 | 華為技術有限公司 | エンコーダ、デコーダ及び対応する方法 |
CN113574889B (zh) | 2019-03-14 | 2024-01-12 | 北京字节跳动网络技术有限公司 | 环路整形信息的信令和语法 |
CN113767631B (zh) | 2019-03-24 | 2023-12-15 | 北京字节跳动网络技术有限公司 | 用于帧内预测的参数推导中的条件 |
EP3925215A4 (en) | 2019-03-24 | 2022-08-17 | Beijing Bytedance Network Technology Co., Ltd. | ADAPTABLE MULTIPARAMETER LOOP FILTERING IN VIDEO PROCESSING |
EP3928524A4 (en) | 2019-04-15 | 2022-06-22 | Beijing Bytedance Network Technology Co., Ltd. | TIME PREDICTION OF PARAMETERS IN A NONLINEAR ADAPTIVE LOOP FILTER |
CN113767623B (zh) | 2019-04-16 | 2024-04-02 | 北京字节跳动网络技术有限公司 | 用于视频编解码的自适应环路滤波 |
US11197030B2 (en) | 2019-08-08 | 2021-12-07 | Panasonic Intellectual Property Corporation Of America | System and method for video coding |
GB2586484B (en) * | 2019-08-20 | 2023-03-08 | Canon Kk | A filter |
US11234010B2 (en) * | 2019-08-28 | 2022-01-25 | Qualcomm Incorporated | Cross-component adaptive loop filtering for video coding |
WO2021040480A1 (ko) | 2019-08-29 | 2021-03-04 | 엘지전자 주식회사 | 인루프 필터링 기반 영상 코딩 장치 및 방법 |
CA3152954A1 (en) | 2019-08-29 | 2021-03-04 | Lg Electronics Inc. | Apparatus and method for image coding based on filtering |
CN114600466A (zh) * | 2019-08-29 | 2022-06-07 | Lg电子株式会社 | 基于交叉分量滤波的图像编码设备和方法 |
EP4024858A4 (en) | 2019-08-29 | 2023-10-04 | LG Electronics Inc. | APPARATUS AND METHOD FOR IMAGE CODING BASED ON CROSS-COMPONENT ADAPTIVE LOOP FILTERING |
US11202068B2 (en) | 2019-09-16 | 2021-12-14 | Mediatek Inc. | Method and apparatus of constrained cross-component adaptive loop filtering for video coding |
CN114450963A (zh) * | 2019-09-18 | 2022-05-06 | 松下电器(美国)知识产权公司 | 用于视频编码的系统和方法 |
WO2021061814A1 (en) | 2019-09-23 | 2021-04-01 | Vid Scale, Inc. | Joint component video frame filtering |
WO2021083257A1 (en) | 2019-10-29 | 2021-05-06 | Beijing Bytedance Network Technology Co., Ltd. | Cross-component adaptive loop filter |
US11265558B2 (en) | 2019-11-22 | 2022-03-01 | Qualcomm Incorporated | Cross-component adaptive loop filter |
-
2020
- 2020-10-29 WO PCT/CN2020/124700 patent/WO2021083257A1/en unknown
- 2020-10-29 JP JP2022525484A patent/JP7389251B2/ja active Active
- 2020-10-29 KR KR1020227013595A patent/KR20220084059A/ko active IP Right Grant
- 2020-10-29 CN CN202080076586.3A patent/CN114846793A/zh active Pending
- 2020-10-29 CN CN202080076672.4A patent/CN114631313A/zh active Pending
- 2020-10-29 WO PCT/CN2020/124705 patent/WO2021083259A1/en unknown
- 2020-10-29 CN CN202311591061.5A patent/CN117528097A/zh active Pending
- 2020-10-29 CN CN202080076587.8A patent/CN115244924A/zh active Pending
- 2020-10-29 WO PCT/CN2020/124701 patent/WO2021083258A1/en unknown
- 2020-10-29 EP EP20882124.9A patent/EP4042684A4/en active Pending
- 2020-10-29 EP EP20881603.3A patent/EP4035363A4/en active Pending
- 2020-10-29 JP JP2022525485A patent/JP7389252B2/ja active Active
- 2020-10-29 KR KR1020227013598A patent/KR20220083715A/ko active IP Right Grant
- 2020-10-29 JP JP2022525482A patent/JP7485761B2/ja active Active
- 2020-10-29 KR KR1020227013600A patent/KR20220084060A/ko active IP Right Grant
- 2020-10-29 EP EP20882345.0A patent/EP4042692A4/en active Pending
-
2022
- 2022-04-29 US US17/732,692 patent/US11736697B2/en active Active
- 2022-04-29 US US17/732,777 patent/US11622115B2/en active Active
- 2022-04-29 US US17/732,743 patent/US11722674B2/en active Active
-
2023
- 2023-08-21 US US18/453,041 patent/US20230396773A1/en active Pending
- 2023-10-31 JP JP2023186875A patent/JP2024010138A/ja active Pending
Non-Patent Citations (1)
Also Published As
Publication number | Publication date |
---|---|
US20220272348A1 (en) | 2022-08-25 |
KR20220083715A (ko) | 2022-06-20 |
EP4042692A1 (en) | 2022-08-17 |
EP4035363A1 (en) | 2022-08-03 |
US11736697B2 (en) | 2023-08-22 |
WO2021083259A1 (en) | 2021-05-06 |
WO2021083258A1 (en) | 2021-05-06 |
CN117528097A (zh) | 2024-02-06 |
JP2022554309A (ja) | 2022-12-28 |
KR20220084059A (ko) | 2022-06-21 |
JP7389252B2 (ja) | 2023-11-29 |
JP7485761B2 (ja) | 2024-05-16 |
EP4035363A4 (en) | 2022-11-30 |
KR20220084060A (ko) | 2022-06-21 |
US11722674B2 (en) | 2023-08-08 |
WO2021083257A1 (en) | 2021-05-06 |
US20220272389A1 (en) | 2022-08-25 |
US20220264106A1 (en) | 2022-08-18 |
US11622115B2 (en) | 2023-04-04 |
CN114631313A (zh) | 2022-06-14 |
EP4042684A1 (en) | 2022-08-17 |
EP4042692A4 (en) | 2022-11-30 |
EP4042684A4 (en) | 2022-11-30 |
US20230396773A1 (en) | 2023-12-07 |
JP2022554307A (ja) | 2022-12-28 |
JP2024010138A (ja) | 2024-01-23 |
CN115244924A (zh) | 2022-10-25 |
CN114846793A (zh) | 2022-08-02 |
JP2022554308A (ja) | 2022-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7389251B2 (ja) | 輝度の差分を用いるクロスコンポーネント適応ループフィルタ | |
JP7401666B2 (ja) | クロス成分適応ループフィルタ | |
WO2020253864A1 (en) | Selective enablement of adaptive in-loop color-space transform in video coding | |
US11539970B2 (en) | Position-based coefficients scaling | |
JP7479457B2 (ja) | ビデオ・データを処理する方法、装置及び記憶媒体 | |
US20240179308A1 (en) | Advanced Fusion Mode For Adaptive Loop Filter In Video Coding | |
US20240179310A1 (en) | Fusion Mode For Adaptive Loop Filter In Video Coding | |
WO2024002168A1 (en) | Padding methods for adaptive loop filter in video coding | |
WO2023051560A1 (en) | Method, apparatus, and medium for video processing | |
WO2023051561A1 (en) | Method, apparatus, and medium for video processing | |
WO2024094071A1 (en) | Using side information for adaptive loop filter in video coding |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220513 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220513 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230425 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230707 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231017 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231116 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7389251 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |