JP2022527012A - 映像符号化のためのｏｎ適応ループフィルタリング - Google Patents

Abstract

【要約】
適応ループフィルタリングのためのデバイス、システムおよび方法が記載される。例示の態様において、映像処理方法は、映像の現在の映像ブロックに対して、フィルタ係数を使用し、少なくとも１つの中間結果を伴う２つ以上の演算を含むフィルタリング処理を行うことと、前記少なくとも１つの中間結果にクリッピング演算を適用することと、前記少なくとも１つの中間結果に基づいて、前記現在の映像ブロックと前記映像のビットストリーム表現との間での変換を行うこととを含み、前記少なくとも１つの中間結果は、前記フィルタ係数の重み付けの合計と、前記現在の映像ブロックの現在のサンプルと前記現在のサンプルの近傍のサンプルとの間の差とに基づく。
【選択図】図１１Ａ

Description

関連出願の相互参照
パリ条約に基づく適用可能な特許法および／または規則に基づいて、本願は、２０１９年４月１６日出願の国際特許出願第ＰＣＴ／ＣＮ２０１９／０８２８５５号の優先権および利益を適時に主張することを目的とする。米国法に基づくすべての目的のために、上記出願の開示全体は、本明細書の開示の一部として参照により援用される。

この特許文献は、映像符号化技術、デバイスおよびシステムに関する。

映像圧縮の進歩にもかかわらず、デジタル映像は、依然として、インターネット及び他のデジタル通信ネットワークにおいて最大の帯域幅の使用量を占めている。映像を受信及び表示することが可能である接続されたユーザ機器の数が増加するにつれ、デジタル映像の使用に対する帯域幅需要は増大し続けることが予測される。

デジタル映像符号化に関し、具体的には、映像符号化のための適応ループフィルタリングに関するデバイス、システム、および方法について記載する。記載された方法は、既存の映像符号化規格（例えば、高効率映像符号化（ＨＥＶＣ））および将来の映像符号化規格（例えば、汎用映像符号化（ＶＶＣ））、又はコーデックの両方に適用され得る。

映像符号化規格は、主に周知のＩＴＵ－ＴおよびＩＳＯ／ＩＥＣ規格の開発によって発展してきた。ＩＴＵ－ＴはＨ．２６１とＨ．２６３を作り、ＩＳＯ／ＩＥＣはＭＰＥＧ－１とＭＰＥＧ－４ Ｖｉｓｕａｌを作り、両団体はＨ．２６２／ＭＰＥＧ－２ ＶｉｄｅｏとＨ．２６４／ＭＰＥＧ－４ ＡＶＣ（Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）とＨ．２６５／ＨＥＶＣ規格を共同で作った。Ｈ．２６２以来、映像符号化規格は、時間予測と変換符号化が利用されるハイブリッド映像符号化構造に基づく。ＨＥＶＣを超えた将来の映像符号化技術を探索するため、２０１５年には、ＶＣＥＧとＭＰＥＧが共同でＪＶＥＴ（Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅａｍ）を設立した。それ以来、多くの新しい方法がＪＶＥＴによって採用され、ＪＥＭ（Ｊｏｉｎｔ Ｅｘｐｌｏｒａｔｉｏｎ Ｍｏｄｅ）と呼ばれる参照ソフトウェアに組み込まれてきた。２０１８年４月には、ＶＣＥＧ（Ｑ６／１６）とＩＳＯ／ＩＥＣ ＪＴＣ１ ＳＣ２９／ＷＧ１１（ＭＰＥＧ）の間にＪｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｅｒｔ Ｔｅａｍ（ＪＶＥＴ）が発足し、ＨＥＶＣと比較して５０％のビットレート削減を目標にＶＶＣ規格の策定に取り組んでいる。

１つの代表的な態様において、開示される技術は、映像処理の方法を提供するために使用してもよい。この方法は、映像の現在の映像ブロックに対して、フィルタ係数を使用し、少なくとも１つの中間結果を伴う２つ以上の演算を含むフィルタリング処理を行うことと、前記少なくとも１つの中間結果にクリッピング演算を適用することと、前記少なくとも１つの中間結果に基づいて、前記現在の映像ブロックと前記映像のビットストリーム表現との間での変換を行うこととを含み、前記少なくとも１つの中間結果は、前記フィルタ係数の重み付けの合計と、前記現在の映像ブロックの現在のサンプルと前記現在のサンプルの近傍のサンプルとの間の差とに基づく。

別の代表的な態様では、開示される技術は、映像処理の方法を提供するために使用してもよい。この方法は、映像の現在の映像ブロックを前記映像のビットストリーム表現に符号化することであって、前記現在の映像ブロックは、適応ループフィルタ（ＡＬＦ）で符号化される、符号化することと、時間的適応フィルタの１つ以上のセットの可用性または使用に基づいて、前記ビットストリーム表現における前記時間的適応フィルタの前記１つ以上のセット内の時間的適応フィルタのセットの指示を選択的に含むことと、を含む。

さらに別の代表的な態様では、開示される技術は、映像処理の方法を提供するために使用してもよい。この方法は、映像のビットストリーム表現における時間的適応フィルタのセットの指示に基づいて、適応ループフィルタ（ＡＬＦ）で符号化される映像の現在の映像ブロックに適用可能な時間的適応フィルタの前記セットを備える１つ以上のセットの前記時間的適応フィルタの可用性または使用を判定することと、前記判定することに基づいて、時間的適応フィルタの前記セットを選択的に適用することによって、前記ビットストリーム表現から復号化された現在の映像ブロックを生成することと、を含む。

さらに別の代表的な態様では、開示される技術は、映像処理の方法を提供するために使用してもよい。この方法は、適応ループフィルタで符号化された現在の映像ブロックに対して、利用可能な時間的ＡＬＦ係数セットに基づいて、時間的適応ループフィルタリング（ＡＬＦ）係数セットの数を判定することであって、前記利用可能な時間的ＡＬＦ係数セットは、前記判定する前に符号化または復号化されており、前記ＡＬＦ係数セットの数は、前記現在の映像ブロックを構成するタイルグループ、タイル、スライス、ピクチャ、符号化ツリーブロック（ＣＴＢ）、または映像ユニットに使用される、判定することと、時間的ＡＬＦ係数セットの前記数に基づいて、前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現の間での変換を行うことと、を含む。

さらに別の代表的な態様では、開示される技術は、映像処理の方法を提供するために使用してもよい。この方法は、映像の現在の映像ブロックと前記映像のビットストリーム表現との間での変換のために、前記映像の映像領域のヘッダにおける適応ループフィルタリング（ＡＬＦ）の指示が、前記ビットストリーム表現に関連付けられた適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットにおけるＡＬＦの指示と等しいことを判定することと、前記変換を行うことと、を含む。

さらに別の代表的な態様では、開示される技術は、映像処理の方法を提供するために使用してもよい。この方法は、現在の映像ブロックと前記映像のビットストリーム表現との間での変換のために、前記映像の映像領域で使用される適応ループフィルタのタイプに基づいて、非線形適応ループフィルタリング（ＡＬＦ）動作を選択的に有効化することと、前記選択的に有効化した後に、前記変換を行うことを含む。

さらに別の代表的な態様において、上記方法は、処理装置が実行可能なコードの形式で実施され、コンピュータ可読プログラム媒体に記憶される。

さらに別の代表的な態様において、上述した方法を行うように構成された、または動作可能なデバイスが開示される。この装置は、この方法を実装するようにプログラムされた処理装置を含んでもよい。

さらに別の代表的な態様において、映像デコーダ装置は、本明細書で説明されるような方法を実装してもよい。

開示される技術の上記および他の態様および特徴は、図面、説明および特許請求の範囲でより詳細に説明される。

映像符号化のためのエンコーダブロック図の例を示す。 形状変換に基づく適応ループフィルタ（ＧＡＬＦ）フィルタ形状の例を示す。 形状変換に基づく適応ループフィルタ（ＧＡＬＦ）フィルタ形状の例を示す。 形状変換に基づく適応ループフィルタ（ＧＡＬＦ）フィルタ形状の例を示す。 ＧＡＬＦエンコーダ決定のためのフローグラフの例を示す。 適応ループフィルタ（ＡＬＦ）分類のための例示的なサブサンプリングされたラプラシアン計算を示す。 適応ループフィルタ（ＡＬＦ）分類のための例示的なサブサンプリングされたラプラシアン計算を示す。 適応ループフィルタ（ＡＬＦ）分類のための例示的なサブサンプリングされたラプラシアン計算を示す。 適応ループフィルタ（ＡＬＦ）分類のための例示的なサブサンプリングされたラプラシアン計算を示す。 輝度フィルタの形状の例を示す。 ワイド映像グラフィックアレイ（ＷＶＧＡ）シーケンスの領域分割の例を示す。 再整形を伴う復号化の流れの例示的なフロー図を示す。 双方向オプティカルフロー（ＢＩＯ）アルゴリズムで使用されるオプティカルフローの軌跡の例を示す。 ブロック拡張なしの双方向オプティカルフロー（ＢＩＯ）アルゴリズムを使用した例示的なスナップショットを示す。 ブロック拡張なしの双方向オプティカルフロー（ＢＩＯ）アルゴリズムを使用した例示的なスナップショットを示す。 オプティカルフローを用いた予測微調整（ＰＲＯＦ）の例を示す。 本開示の技術による適応ループフィルタリング方法の一例を示すフロー図である。 本開示の技術による適応ループフィルタリング方法の一例を示すフロー図である。 本開示の技術による適応ループフィルタリング方法の一例を示すフロー図である。 本開示の技術による適応ループフィルタリング方法の一例を示すフロー図である。 本開示の技術による適応ループフィルタリング方法の一例を示すフロー図である。 本開示の技術による適応ループフィルタリング方法の一例を示すフロー図である。 本特許明細書に記載されるビジュアルメディアの復号化又はビジュアルメディアの符号化技術を実現するためのハードウェアプラットフォームの一例を示すブロック図である。 開示された技術を実装することができる例示的な映像処理システムを示すブロック図である。

より高い解像度の映像の需要が増大しているため、近代技術において、映像符号化法および技術は、遍在している。ビデオコーデックは、一般的に、デジタル映像を圧縮又は展開する電子回路又はソフトウェアを含み、より高い符号化効率を提供するように絶えず改良されている。ビデオコーデックは、非圧縮映像を圧縮フォーマットに変換する、又はその逆である。映像の品質、映像を表現するために使用されるデータの数（ビットレートで決まる）、エンコーディングおよびデコーディングアルゴリズムの複雑性、データの損失およびエラーに対する敏感さ、編集のしやすさ、ランダムアクセス、およびエンドツーエンドの遅延（待ち時間）の間には複雑な関係がある。この圧縮フォーマットは、通常、標準的な映像圧縮仕様、例えば、高効率映像符号化（ＨＥＶＣ）規格（Ｈ．２６５またはＭＰＥＧ－Ｈ Ｐａｒｔ ２としても知られている）、完成させるべき汎用映像符号化（ＶＶＣ）規格、または他の現在のおよび／または将来の映像符号化基準に準拠する。

いくつかの実施形態において、将来の映像符号化技術は、共同探索モデル（ＪＥＭ）として知られる参照ソフトウェアを使用して探索される。ＪＥＭでは、サブブロックベースの予測は、アフィン予測、代替時間的動きベクトル予測（ＡＴＭＶＰ）、空間的－時間的動きベクトル予測（ＳＴＭＶＰ）、双方向オプティカルフロー（ＢＩＯ）、フレームレートアップ変換（ＦＲＵＣ）、ローカル適応動きベクトル解像度（ＬＡＭＶＲ）、オーバーラップブロック動き補償（ＯＢＭＣ）、ローカル照明補償（ＬＩＣ）、デコーダ側動きベクトル改良（ＤＭＶＲ）などの、いくつかの符号化ツールで適用されている。

開示される技術の実施形態は、ランタイム性能を向上させるために、既存の映像符号化規格（例えば、ＨＥＶＣ、Ｈ．２６５）および将来の規格に適用されてもよい。本明細書では、説明の可読性を向上させるために章の見出しを使用しており、説明または実施形態（および／または実装形態）をそれぞれの章のみに限定するものではない。

１． 色空間およびクロマサブサンプリングの実施例
色空間はカラーモデル（またはカラーシステム）としても知られ、色の範囲を数字のタプル（ｔｕｐｌｅ）として簡単に記述する抽象的な数学モデルであり、一般的に、３または４つの値または色成分（例えばＲＧＢ）である。基本的には、色空間は座標系とサブ空間とを精緻化したものである。

映像圧縮の場合、最も頻繁に使用される色空間は、ＹＣｂＣｒおよびＲＧＢである。

ＹＣｂＣｒ、Ｙ’ＣｂＣｒ、またはＹ Ｐｂ／Ｃｂ Ｐｒ／Ｃｒは、ＹＣＢＣＲまたはＹ’ＣＢＣＲとも呼ばれ、映像およびデジタル写真システムのカラー画像パイプラインの一部として使用される色空間のファミリーである。Ｙ’は輝度成分であり、ＣＢおよびＣＲは青色差および赤色差クロマ成分である。Ｙ’（素数を有する）はＹとは区別され、Ｙは輝度であり、ガンマ補正されたＲＧＢ原色に基づいて光強度が非線形に符号化されることを意味する。

クロマサブサンプリングは、人間の視覚システムが、輝度よりも色差の方が知覚が低いことを利用して、輝度情報よりもクロマ情報の方が解像度が低くなるように実装して画像を符号化する方法である。

１．１ ４：４：４ カラーフォーマット
３つのＹ’ＣｂＣｒ成分の各々は、同じサンプルレートを有し、従って、クロマサブサンプリングは存在しない。このスキームは、ハイエンドのフィルムスキャナおよび映画のポストプロダクションに使用されることがある。

１．２ ４：２：２ カラーフォーマット
２つのクロマ成分は、輝度のサンプルレートの半分でサンプリングされ、例えば、水平クロマ解像度が半分にされる。これにより、視覚的にほとんどまたは全く差がなく、非圧縮の映像信号の帯域幅を１／３に低減することができる。

１．３ ４：２：０ カラーフォーマット
４：２：０では、水平サンプリングは４：１：１に比べて２倍になるが、このスキームではＣｂおよびＣｒチャネルを各１行おきのラインでのみサンプリングするので、垂直解像度は半分になる。従って、データレートは同じである。ＣｂおよびＣｒはそれぞれ水平および垂直方向の両方向に２倍にサブサンプリングされる。異なる水平および垂直位置を有する４：２：０スキームの３つの変形がある。

○ ＭＰＥＧ－２において、ＣｂおよびＣｒは水平方向に共座している。Ｃｂ、Ｃｒは垂直方向の画素間に位置する（格子間に位置する）。

○ ＪＰＥＧ／ＪＦＩＦにおいて、Ｈ．２６１、およびＭＰＥＧ－１、Ｃｂ、およびＣｒは、交互の輝度サンプルの中間の格子間に位置する。

○ ４：２：０ ＤＶにおいて、ＣｂおよびＣｒは、水平方向に共座している。垂直方向において、それらは交互に並ぶ線上に共座している。

２ 典型的な映像コーデックの符号化フローの例
図１は、３つのインループフィルタリングブロック、すなわち非ブロック化フィルタ（ＤＦ）、サンプル適応オフセット（ＳＡＯ）およびＡＬＦを含むＶＶＣのエンコーダブロック図の例を示す。ＤＦ（予め規定されたフィルタを使用する）とは異なり、ＳＡＯおよびＡＬＦは、現在の画像のオリジナルサンプルを利用し、オフセットを追加し、且つ有限インパルス応答（ＦＩＲ）フィルタを適用することによって、オフセットおよびフィルタ係数を信号通知する符号化側情報とともに、元のサンプルと再構成サンプルとの間の平均二乗誤差をそれぞれ低減する。ＡＬＦは、各ピクチャの最後の処理ステージに位置し、前のステージで生成されたアーチファクトを捕捉し、修正しようとするツールと見なすことができる。

３ ＪＥＭにおける形状変換に基づく適応ループフィルタの例
ＪＥＭにおいて、ブロックに基づくフィルタ適応「３」を用いた形状変換に基づく適応ループフィルタ（ＧＡＬＦ）が適用される。輝度成分は、局所勾配の方向および働きに基づいて、２×２ブロックごとに２５個のフィルタのうち１つを選択する。

３．１ フィルタ形状の例
本願において、輝度成分として、最大３つのダイヤモンドフィルタ形状（図２Ａ、図２Ｂ、図２Ｃにそれぞれ示すように、５×５ダイヤモンド、７×７ダイヤモンド、９×９ダイヤモンド）を選択することができる。輝度成分に使用されるフィルタ形状を示すために、ピクチャレベルでインデックスが信号通知される。１つのピクチャにおけるクロマ成分に対して、５×５ダイヤモンド形状が常に使用される。

３．１．１ ブロック区分
各２×２ブロックを２５個のクラスのうちの１つに分類する。分類インデックスＣは、その方向性ＤおよびアクティビティＡ＾の量子化値に基づいて、以下のように導出される。

ＤおよびＡ＾を計算するために、まず、１－Ｄラプラシアンを使用して、水平、垂直および２つの対角線方向の勾配を計算する。

ｉおよびｊは、２×２ブロックの左上のサンプルの座標を表し、Ｒ（ｉ，ｊ）は、座標（ｉ，ｊ）において再構成されたサンプルを示す。
そして、水平方向および垂直方向の勾配のＤ最大値およびＤ最小値を以下のように設定する。

および２つの対角線方向の勾配の最大値および最小値は、以下のように設定される。

指向性Ｄの値を導出するために、これらの値を互いに且つ２つの閾値ｔ_１およびｔ_２と比較する。
ステップ１．

の両方が真である場合、０に設定される。
ステップ２．

の場合、ステップ３から続け、あるいは、ステップ４から続ける。
ステップ３．

である場合、Ｄは２に設定され、あるいは、Ｄは１に設定される。
ステップ４．

である場合、Ｄは４に設定され、あるいは、Ｄは３に設定される。
アクティビティ値Ａは、以下のように計算される。

Ａをさらに０～４の範囲に量子化し、量子化された値をＡ＾とする。
ピクチャにおける両クロマ成分に対して、分類方法は適用されず、即ち、単一のＡＬＦ係数のセットが各クロマ成分に対して適用される。

３．１．２ フィルタ係数の幾何学的変換
各２×２輝度ブロックをフィルタリングする前に、そのブロックに対して計算された勾配値に基づいて、フィルタ係数ｆ（ｋ，ｌ）に回転または対角線および垂直方向の反転等の幾何学的変換を施す。これは、これらの変換をフィルタ支持領域内のサンプルに適用することに等しい。その考えは、ＡＬＦが適用される異なるブロックを、それらの方向性を揃えることによって、より類似させることである。

対角線、垂直方向の反転および回転を含む３つの幾何学的変換を紹介する。

ここで、Ｋはフィルタのサイズであり、０≦ｋ，ｌ≦Ｋ－１が係数座標であり、位置（０，０）は左上隅にあり、位置（Ｋ－１，Ｋ－１）は右下隅にある。この変換は、そのブロックに対して計算された勾配値に基づいて、フィルタ係数ｆ（ｋ，ｌ）に適用される。変換と４方向の４つの勾配との関係を表１にまとめる。

３．１．３ フィルタパラメータの信号通知
ＪＥＭにおいて、ＧＡＬＦフィルタパラメータは、第１のＣＴＵのために、すなわち、スライスヘッダの後且つ第１のＣＴＵのＳＡＯパラメータの前に信号通知される。最大２５組の輝度フィルタ係数を信号通知することができる。ビットオーバーヘッドを低減するために、異なる分類のフィルタ係数をマージすることができる。また、参照ピクチャのＧＡＬＦ係数を記憶し、現在のピクチャのＧＡＬＦ係数として再利用することができる。現在のピクチャは、参照ピクチャのために記憶されたＧＡＬＦ係数を使用し、ＧＡＬＦ係数信号通知を回避することを選択してもよい。この場合、１つの参照ピクチャへのインデックスのみが信号通知され、記憶されている示された参照ピクチャのＧＡＬＦ係数が現在のピクチャに継承される。

ＧＡＬＦ時間的予測をサポートするために、ＧＡＬＦフィルタセットの候補リストが保持される。新しいシーケンスを復号化する開始時は、候補リストは空である。１つのピクチャを復号化した後、対応するフィルタのセットを候補リストに加えてもよい。候補リストのサイズが最大許容値（すなわち、現在のＪＥＭでは６）に達すると、新しい１組のフィルタが、最も古いセットを復号化の順序に上書きし、すなわち、先入れ先出し（ＦＩＦＯ）規則を適用して候補リストを更新する。重複を回避するために、対応するピクチャがＧＡＬＦ時間的予測を使用しない場合、１つのセットのみをリストに追加することができる。時間的スケーラビリティをサポートするために、複数のフィルタセットの候補リストがあり、各候補リストは１つの時間層に関連付けられる。具体的には、時間層インデックス（ＴｅｍｐＩｄｘ）が割り当てられた各アレイは、ＴｅｍｐＩｄｘが小さい、前回復号化されたピクチャのフィルタセットを構成してもよい。例えば、ｋ番目の配列は、ｋに等しいＴｅｍｐＩｄｘに関連付けられるように割り当てられ、それは、ＴｅｍｐＩｄｘがｋ以下のピクチャからのフィルタセットのみを含む。特定のピクチャを符号化した後、このピクチャに関連付けられたフィルタセットを使用して、等しいまたはより高いＴｅｍｐＩｄｘに関連付けられた配列を更新する。

ＧＡＬＦ係数の時間的予測は、信号通知オーバーヘッドを最小限に抑えるために、インター符号化されたフレームに使用される。イントラフレームの場合、時間的予測は利用できず、各クラスに１組の１６個の固定フィルタが割り当てられる。固定フィルタの使用を示すために、各クラスのためのフラグが信号通知され、必要に応じて、選択された固定フィルタのインデックスが信号通知される。所与のクラスに対して固定フィルタを選択した場合でも、このクラスに対して適応フィルタｆ（ｋ，ｌ）の係数を送信することができ、この場合、再構成画像に適用されるフィルタの係数は両方の係数セットの合計となる。

輝度成分のフィルタリング処理は、ＣＵレベルで制御することができる。ＧＡＬＦがＣＵの輝度成分に適用されるかどうかを示すために、１つのフラグが信号通知される。クロマ成分の場合、ＧＡＬＦが適用されるかどうかは、ピクチャレベルでのみ示す。

３．１．４ フィルタリング処理
デコーダ側において、１つのブロックに対してＧＡＬＦが有効化されると、このブロック内の各サンプルＲ（ｉ，ｊ）がフィルタリングされ、その結果、以下に示すように、サンプル値Ｒ’（ｉ，ｊ）が得られる。ここで、Ｌは、フィルタ長を表し、ｆ_ｍ，ｎは、フィルタ係数を表し、ｆ（ｋ，ｌ）は、復号化されたフィルタ係数を表す。

３．１．５ エンコーダ側フィルタパラメータの判定処理
図３には、ＧＡＬＦのための全体的なエンコーダ決定処理が示されている。各ＣＵの輝度サンプルに対して、エンコーダは、ＧＡＬＦが適用され、かつ適切な信号通知フラグがスライスヘッダに含まれているか否かを決定する。クロマサンプルの場合、フィルタを適用する決定は、ＣＵレベルではなくピクチャレベルに基づいて行われる。さらに、ピクチャのためのクロマＧＡＬＦは、このピクチャのために輝度ＧＡＬＦが有効化されている場合にのみチェックされる。

４ ＶＶＣにおける形状変換に基づく適応ループフィルタの例
現在のＶＶＣにおけるＧＡＬＦの設計は、ＪＥＭにおける設計に比べ、以下のような大きな変化を有している。
１）適応フィルタ形状を除去する。輝度成分に対しては７×７フィルタ形状のみが許可され、クロマ成分に対しては５×５フィルタ形状のみが許可される。
２）ＡＬＦパラメータの時間的予測および固定フィルタからの予測は、両方とも除去される。
３）各ＣＴＵに対して、ＡＬＦが有効化されるかまたは無効化されるかどうかに関わらず、１ビットのフラグが信号通知される。
４）クラスインデックスの計算は、２×２の代わりに、４×４レベルで行われる。また、ＪＶＥＴ－Ｌ０１４７で提案されているように、ＡＬＦ分類のためのサブサンプリングされたラプラシアン計算方法が利用される。具体的には、１つのブロック内の各サンプルごとに水平／垂直／４５対角線／１３５度勾配を計算する必要がない。その代わりに、１：２サブサンプリングが利用される。

５ ＡＶＳ２における領域に基づく適応ループフィルタの例
ＡＬＦは、インループフィルタリングの最終段階である。この処理には２つの段階がある。第１の段階は、フィルタ係数の導出である。フィルタ係数をトレーニングするために、エンコーダは、再構成された輝度成分の画素を１６個の領域に分類し、ｗｉｅｎｅｒ－ｈｏｐｆ方程式を使用して、カテゴリ毎に１つのフィルタ係数のセットをトレーニングし、元のフレームと再構成されたフレームとの間の平均二乗誤差を最小限に抑える。これらの１６個のフィルタ係数のセット間の冗長性を低減するために、エンコーダは、ひずみ率性能に基づいてそれらを適応的にマージする。その最大値において、１６個の異なるフィルタセットを輝度成分に割り当てることができ、１つのフィルタセットのみをクロミナンス成分に割り当てることができる。第２の段階は、フレームレベルおよびＬＣＵレベルの両方を含むフィルタ決定である。まず、エンコーダは、フレームレベル適応ループフィルタリングを行うかどうかを決定する。フレームレベルＡＬＦがオンである場合、エンコーダは、ＬＣＵレベルＡＬＦを行うかどうかをさらに決定する。

５．１ フィルタ形状
ＡＶＳ－２に適応されたフィルタ形状は、７×７の十字形であり、輝度成分およびクロマ成分の両方について図５に示すように、３×３の正方形を重ね合わせたものである。図５中の四角はそれぞれサンプルに対応する。従って、合計１７個のサンプルを使用して、位置Ｃ８のサンプルのためのフィルタリングされた値を導出する。係数を送信するオーバーヘッドを考慮して、点対称フィルタは、９つの係数だけを残して、｛Ｃ０，Ｃ１，・・・，Ｃ８｝を利用し、これにより、フィルタリングにおけるフィルタ係数の数を半分に減らすと共に乗算の数を減らす。この点対称フィルタは、１つのフィルタリングされたサンプルの計算の半分を減らすこともでき、例えば、１つのフィルタリングされたサンプルに対して９回の乗算および１４回の加算演算のみを行う。

５．２ 領域別適応マージ
異なる符号化エラーに適応するために、ＡＶＳ－２は、輝度成分のために、領域に基づく複数の適応ループフィルタを採用する。輝度成分は、図６に示すように、各基本領域が最大符号化ユニット（ＬＣＵ）の境界に位置合わせされた１６個の略等分したサイズの基本領域に分割され、領域毎に１つのウィーナーフィルタを導出する。より多くのフィルタを使用するほど、より多くの歪みが低減されるが、これらの係数を符号化するために使用されるビットは、フィルタの数とともに増加する。最良のレートひずみ率を実現するために、これらの領域を、同じフィルタ係数を共有する、より少なく、より大きい領域にマージすることができる。マージ処理を簡単にするために、各領域には、画像の前置相関に基づいて修正されたヒルベルト順に従ってインデックスが割り当てられる。ひずみ率コストに基づいて、インデックスが連続する２つの領域をマージすることができる。

領域間のマッピング情報は、デコーダに信号通知されるべきである。ＡＶＳ－２において、基本領域の数はマージ結果を示すために使用され、フィルタ係数はその領域の順に従って順次圧縮される。例えば、｛０，１｝、｛２，３，４｝、｛５，６，７，８，９｝および左側の基本領域をそれぞれ１つの領域にマージする場合、このマージマップを表すために３つの整数のみを符号化する（即ち、２，３，５）。

５．３ 副情報の信号通知
複数のスイッチフラグも使用される。シーケンス切替フラグａｄａｐｔｉｖｅ＿ｌｏｏｐ＿ｆｉｌｔｅｒ＿ｅｎａｂｌｅは、シーケンス全体に適応ループフィルタを適用するかどうかを制御するために使用するフラグである。画像切り替えフラグｐｉｃｔｕｒｅ＿ａｌｆ＿ｅｎｂｌｅ［ｉ］、は、対応するｉ番目の画像成分に対してＡＬＦを適用するかどうかを制御する。ｐｉｃｔｕｒｅ＿ａｌｆ＿ｅｎｂｌｅ［ｉ］が有効になっている場合にのみ、その色成分に対応するＬＣＵレベルのフラグおよびフィルタ係数を送信する。ＬＣＵレベルフラグ、ｌｃｕ＿ａｌｆ＿ｅｎａｂｌｅ［ｋ］、は、対応するｋ番目のＬＣＵに対してＡＬＦが有効化されるかどうかを制御し、スライスデータにインターリーブされる。異なるレベルの調整済みフラグの決定はすべて、ひずみ率コストに基づく。柔軟性が高いので、ＡＬＦは、符号化効率をさらに有意に向上させる。

いくつかの実施形態において、輝度成分のために、１６個までのフィルタ係数のセットが存在可能である。

いくつかの実施形態において、各クロマ成分（ＣｂとＣｒ）に対して１つのフィルタ係数セットを送信してもよい。

６ ＶＴＭ－４におけるＧＡＬＦ
ＶＴＭ４．０において、適応ループフィルタのフィルタリング処理は、以下のように行う。

ここで、サンプルＩ（ｘ＋ｉ，ｙ＋ｊ）は入力サンプルであり、Ｏ（ｘ，ｙ）はフィルタリングされた出力サンプル（即ち、フィルタ結果）であり、ｗ（ｉ，ｊ）はフィルタ係数を表す。実際において、ＶＴＭ４．０は、固定小数点精度計算のために整数演算を使用して実装される。

ここで、Ｌはフィルタ長を表し、ｗ（ｉ，ｊ）は固定小数点精度におけるフィルタ係数である。

７ 非線形適応ループフィルタリング（ＡＬＦ）
７．１ フィルタリングの再形成
式（１１）は、符号化効率に影響を及ぼすことなく、以下の式で再定式化することができる。

ここで、ｗ（ｉ，ｊ）は、式（１１）におけるフィルタ係数と同じである［例外ｗ（０，０）、式（１３）においては１に等しいが、式（１１）において、

に等しい］。

７．２ 修正されたフィルタ
上記（１３）のフィルタ式を使用することで、単純なクリッピング関数を使用して、近傍のサンプル値（Ｉ（ｘ＋ｉ，ｙ＋ｊ））が現在のサンプル値（Ｉ（ｘ，ｙ））のフィルタリングと異なり過ぎている場合に、その影響を低減することで、非線形性を容易に導入し、ＡＬＦをより効率的にする。

この提案において、ＡＬＦフィルタは、以下のように修正される。

ここで、Ｋ（ｄ，ｂ）＝ｍｉｎ（ｂ，ｍａｘ（－ｂ，ｄ））はクリッピング関数であり、ｋ（ｉ，ｊ）はクリッピングパラメータであり、これは（ｉ，ｊ）フィルタ係数に依存する。エンコーダは、最適化を行い、最良のｋ（ｉ，ｊ）を見出す。

ＪＶＥＴ－Ｎ０２４２の実装形態において、１つのＡＬＦフィルタごとにクリッピングパラメータｋ（ｉ，ｊ）を指定し、１つのフィルタ係数ごとに１つのクリッピング値を信号通知する。これは、１つの輝度フィルタ当たりビットストリームにおいて、最大１２個のクリッピング値を信号通知することができ、クロマフィルタに対しては最大６個のクリッピング値を信号通知することができることを意味する。

信号通知コストおよびエンコーダの複雑性を制限するために、クリッピング値の評価は、小さなセットの可能な値に限定する。本提案では、ＩＮＴＥＲおよびＩＮＴＲＡタイルグループに対して同じ４つの固定値のみを使用する。

局所的な差の分散は、輝度の場合、クロマの場合よりも大きいことが多いので、輝度フィルタおよびクロマフィルタの２つの異なるセットを使用する。各セットに最大サンプル値（ここでは、１０ビットのビット深度の場合、１０２４）を含め、必要でない場合、クリッピングを無効にすることができる。

ＪＶＥＴ－Ｎ０２４２試験に使用したクリッピング値のセットを表２に示す。４つの値は、対数ドメインにおいて、輝度についてのサンプル値（１０ビットで符号化される）の全範囲を、およびクロマについての４～１０２４の範囲をほぼ等分することによって選択された。

より正確には、クリッピング値の輝度テーブルは、以下の式によって得られた。

同様に、クリッピング値のクロマテーブルは、以下の式に従って取得される。

選択されたクリッピング値は、上記表２のクリッピング値のインデックスに対応するゴロム符号化方式を使用して、「ａｌｆ＿ｄａｔａ」構文要素に符号化される。この符号化方式は、フィルタインデックスの符号化方式と同じである。

８ ＪＶＥＴ－Ｎ０４１５におけるＣＴＵに基づくＡＬＦ
スライスレベルの時間的フィルタ。 ＶＴＭ４には適応パラメータセット（ＡＰＳ）が採用された。各ＡＰＳは、１つのセットの信号通知されたＡＬＦフィルタを含み、最大３２個のＡＰＳがサポートされる。本提案では、スライスレベルの時間的フィルタを試験する。１つのタイルグループは、ＡＰＳからのＡＬＦ情報を再利用することにより、オーバーヘッドを低減することができる。ＡＰＳは、先入れ先出し（ＦＩＦＯ）バッファとして更新される。

ＣＴＢに基づくＡＬＦ。 輝度成分のために、ＡＬＦが輝度ＣＴＢに適用される場合、１６個の固定された、５個の時間的な、または１つの信号通知されたフィルタセットの中からの選択が示される。フィルタセットインデックスのみが信号通知される。１つのスライスに対して、２５個のフィルタからなる１つの新しいセットのみを信号通知することができる。１つのスライスに対して新しいセットが信号通知された場合、同じスライス内のすべての輝度ＣＴＢはそのセットを共有する。固定フィルタセットを使用して新しいスライスレベルフィルタセットを予測することができ、これを輝度ＣＴＢの候補フィルタセットとして使用できる。フィルタの数は合計６４個である。

クロマ成分の場合、ＡＬＦをクロマＣＴＢに適用する時に、１つのスライスに対して新しいフィルタを信号通知する場合、ＣＴＢはこの新しいフィルタを使用し、そうでない場合、時間スケーラビリティ制約を満たす最も新しい時間的クロマフィルタを適用する。

スライスレベルの時間的フィルタとして、ＡＰＳは、先入れ先出し（ＦＩＦＯ）バッファとして更新される。

仕様
ＪＶＥＴ－Ｋ１００１－ｖ６に基づいて、｛｛ｆｉｘｅｄ ｆｉｌｔｅｒ｝｝，［［ｔｅｍｐｏｒａｌ ｆｉｌｔｅｒｓ］］、［［ｔｅｍｐｏｒａｌ ｆｉｌｔｅｒｓ］］および（（ＣＴＢ－ｂａｓｅｄ ｆｉｌｔｅｒ ｉｎｄｅｘ））を使用して、すなわち、２重大括弧、２重角括弧、および２重丸括弧を使って修正する。

７．３．３．２ 適応ループフィルタデータ構文

７．３．４．２ 符号化ツリーユニット構文

７．４．４．２ 適応ループフィルタデータ意味論
（（ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａ））が１である場合、新しい輝度フィルタセットが信号通知されることを示す。ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａが０である場合、新しい輝度フィルタセットが信号通知されないことを示す。存在しない場合、０である。
｛｛ａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇ｝｝が１である場合、適応ループフィルタに信号通知するのに固定フィルタセットを使用することを示す。ａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇが０である場合、適応ループフィルタを信号通知するのに固定フィルタ使用ないことを示す。
｛｛ａｌｆ＿ｌｕｍａ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｓｅｔ＿ｉｎｄｅｘ｝｝は、固定フィルタセットインデックスを示す。それは０．．．１５であり得る。
｛｛ａｌｆ＿ｌｕｍａ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｕｓａｇｅ＿ｐａｔｔｅｒｎ｝｝が０である場合、新しいフィルタすべてが固定フィルタを使用することを示す。ａｌｆ＿ｌｕｍａ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｕｓａｇｅ＿ｐａｔｔｅｒｎが１である場合、新しいフィルタのうちいくつかが、固定フィルタを使用し、それ以外は使用しないことを示す。
｛｛ａｌｆ＿ｌｕｍａ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｕｓａｇｅ［ｉ］｝｝が１である場合、ｉ番目のフィルタは固定フィルタを使用することを示す。ａｌｆ＿ｌｕｍａ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｕｓａｇｅ［ｉ］が０である場合、ｉ番目のフィルタは、固定フィルタを使用しないことを示す。存在しない場合、１と推測される。
（（ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａ））が１である場合、新しいクロマフィルタが信号通知されることを示す。ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが０である場合、新しいクロマフィルタが信号通知されないことを示す。
（（（ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａ））は、現在のスライスに使用できる利用可能な時間的フィルタセットの数を示す。この数は０．．．５であり得る。存在しない場合、０である。
変数ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｆｉｌｔｅｒ＿ｓｅｔｓは、１６＋ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａ＋ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａとして導出される。

（（ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａが１の場合は、下記の処理））
ｓｉｇＦｉｌｔＩｄｘ＝０．．ａｌｆ＿ｌｕｍａ＿ｎｕｍ＿ｆｉｌｔｅｒｓ＿ｓｉｇｎａｌｌｅｄ＿ｍｉｎｕｓ１，ｊ＝０．．１１を有する変数フィルタＣｏｅｆｆｉｃｉｅｎｔｓ［ｓｉｇＦｉｌｔＩｄｘ］［ｊ］は、次のように初期化される。
ｆｉｌｔｅｒＣｏｅｆｆｉｃｉｅｎｔｓ［ｓｉｇＦｉｌｔＩｄｘ］［ｊ］＝ａｌｆ＿ｌｕｍａ＿ｃｏｅｆｆ＿ｄｅｌｔａ＿ａｂｓ［ｓｉｇＦｉｌｔＩｄｘ］［ｊ］＊（１－２＊ａｌｆ＿ｌｕｍａ＿ｃｏｅｆｆ＿ｄｅｌｔａ＿ｓｉｇｎ［ｓｉｇＦｉｌｔＩｄｘ］［ｊ］） （７－５０）
ａｌｆ＿ｌｕｍａ＿ｃｏｅｆｆ＿ｄｅｌｔａ＿ｐｒｅｄｉｃｔｉｏｎ＿ｆｌａｇが１である場合、ｓｉｇＦｉｌｔＩｄｘ＝１．．ａｌｆ＿ｌｕｍａ＿ｎｕｍ＿ｆｉｌｔｅｒｓ＿ｓｉｇｎａｌｌｅｄ＿ｍｉｎｕｓ１およびｊ＝０．．１１を有するｆｉｌｔｅｒＣｏｅｆｆｉｃｉｅｎｔｓ［ｓｉｇＦｉｌｔＩｄｘ］［ｊ］は、次のように修正される。
ｆｉｌｔｅｒＣｏｅｆｆｉｃｉｅｎｔｓ［ｓｉｇＦｉｌｔＩｄｘ］［ｊ］＋＝ｆｉｌｔｅｒＣｏｅｆｆｉｃｉｅｎｔｓ［ｓｉｇＦｉｌｔＩｄｘ－１］［ｊ］ （７－５１）
ｆｉｌｔＩｄｘ＝０．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１，ｊ＝０．．１１の要素ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［ｊ］を有する輝度フィルタ係数ＡｌｆＣｏｅｆｆ_Ｌは、以下のように導出される。
ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［ｊ］＝ｆｉｌｔｅｒＣｏｅｆｆｉｃｉｅｎｔｓ［ａｌｆ＿ｌｕｍａ＿ｃｏｅｆｆ＿ｄｅｌｔａ＿ｉｄｘ［ｆｉｌｔＩｄｘ］］［ｊ］ （７－５２）
｛｛ａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇが１で、ａｌｆ＿ｌｕｍａ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｕｓａｇｅ［ｆｉｌｔｉｄｘ］が１の場合、以下が適用される。
ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［ｊ］＝ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［ｊ］＋ＡｌｆＦｉｘｅｄＦｉｌｔｅｒＣｏｅｆｆ［ＡｌｆＣｌａｓｓＴｏＦｉｌｔｅｒＭａｐｐｉｎｇ［ａｌｆ＿ｌｕｍａ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｉｎｄｅｘ］［ｆｉｌｔｉｄｘ］］［ｊ］｝｝
ｆｉｌｔＩｄｘ＝０．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１に対する最後のフィルタ係数ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［１２］は、以下のように導出される。
ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［１２］＝１２８－Σ_ｋ（ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［ｋ］＜＜１），ｗｉｔｈ ｋ＝０．．１１ （７－５３）
ｆｉｌｔＩｄｘ＝０．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１，ｊ＝０．．１１の場合、ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［ｊ］の値は、－２^７～２^７－１の範囲内とし、ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［１２］の値は、０～２^８－１の範囲内とすることが、ビットストリーム適合性の要件である。

（（輝度フィルタ係数））ｆｉｌｔＳｅｔＩｄｘ＝０．．１５、ｆｉｌｔＳｅｔＩｄｘ＝０．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１、ｊ＝０．．１２の場合、要素ＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}［ｆｉｌｔＳｅｔＩｄｘ］［ｆｉｌｔＩｄｘ］［ｊ］を有するＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}は、下記のようにして導出される。
ＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}［ｆｉｌｔＳｅｔＩｄｘ］［ｆｉｌｔＩｄｘ］［ｊ］＝｛｛ＡｌｆＦｉｘｅｄＦｉｌｔｅｒＣｏｅｆｆ［ＡｌｆＣｌａｓｓＴｏＦｉｌｔｅｒＭａｐｐｉｎｇ［｝｝ｆｉｌｔＳｅｔＩｄｘ｛｛］［ｆｉｌｔｉｄｘ］］［ｊ］｝｝

（（輝度フィルタ係数））ｆｉｌｔＳｅｔＩｄｘ＝１６，ｆｉｌｔＳｅｔＩｄｘ＝０．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１およびｊ＝０．．１２を有するＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ} ｗｉｔｈ ｅｌｅｍｅｎｔｓ ＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}［ｆｉｌｔＳｅｔＩｄｘ］［ｆｉｌｔＩｄｘ］［ｊ］は次のようにして導出される。
変数ｃｌｏｓｅｓｔ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘは、－１に初期化される。Ｔｉｄは、現在のスライスの時間層インデックスである。
（（ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａが１ならば））
ＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}［１６］［ｆｉｌｔＩｄｘ］［ｊ］＝ＡｌｆＣｏｅｆｆ_Ｌ［ｆｉｌｔＩｄｘ］［ｊ］
（（そうでない場合は、以下の処理が呼び出される））。
ｆｏｒ（ｉ＝Ｔｉｄ；ｉ＞＝０；ｉ－－）
｛
ｆｏｒ（ｋ＝０；ｋ＜ｔｅｍｐ＿ｓｉｚｅ＿Ｌ；ｋ＋＋）
｛
ｉｆ（ｔｅｍｐ_{Ｔｉｄ＿Ｌ}［ｋ］＝＝ｉ）
｛
ｃｌｏｓｅｓｔ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘ ｉｓ ｓｅｔ ａｓ ｋ；
ｂｒｅａｋ；
｝
｝
｝
ＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}［１６］［ｆｉｌｔＩｄｘ］［ｊ］＝Ｔｅｍｐ_Ｌ［ｃｌｏｓｅｓｔ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘ］［ｆｉｌｔＩｄｘ］［ｊ］

（（輝度フィルタ係数））ｆｉｌｔＳｅｔＩｄｘ＝１７．．ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｆｉｌｔｅｒ＿ｓｅｔｓ－１，ｆｉｌｔＳｅｔＩｄｘ＝０．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１ ａｎｄ ｊ＝０．．１２の場合、要素ＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}［ｆｉｌｔＳｅｔＩｄｘ］［ｆｉｌｔＩｄｘ］［ｊ］，を有するＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}は、次のように導出される。
ｉ＝１７；
ｆｏｒ（ｋ＝０；ｋ＜ｔｅｍｐ＿ｓｉｚｅ＿Ｌ ａｎｄ ｉ＜ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｆｉｌｔｅｒ＿ｓｅｔｓ；ｊ＋＋）
｛
（もしｔｅｍｐ_{Ｔｉｄ＿Ｌ}［ｋ］＜＝Ｔｉｄ、かつｋがｃｌｏｓｅｓｔ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘに等しくない場合）
｛
ＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}［ｉ］［ｆｉｌｔＩｄｘ］［ｊ］＝Ｔｅｍｐ_Ｌ［ｋ］［ｆｉｌｔＩｄｘ］［ｊ］；
ｉ＋＋；
｝
｝


｛｛ＡｌｆＦｉｘｅｄＦｉｌｔｅｒＣｏｅｆｆ｝｝［６４］［１３］＝
｛
｛０，０，２，－３，１，－４，１，７，－１，１，－１，５，１１２｝，
｛０，０，０，０，０，－１，０，１，０，０，－１，２，１２６｝，
｛０，０，０，０，０，０，０，１，０，０，０，０，１２６｝，
｛０，０，０，０，０，０，０，０，０，０，－１，１，１２８｝，
｛２，２，－７，－３，０，－５，１３，２２，１２，－３，－３，１７，３４｝，
｛－１，０，６，－８，１，－５，１，２３，０，２，－５，１０，８０｝，
｛０，０，－１，－１，０，－１，２，１，０，０，－１，４，１２２｝，
｛０，０，３，－１１，１，０，－１，３５，５，２，－９，９，６０｝，
｛０，０，８，－８，－２，－７，４，４，２，１，－１，２５，７６｝，
｛０，０，１，－１，０，－３，１，３，－１，１，－１，３，１２２｝，
｛０，０，３，－３，０，－６，５，－１，２，１，－４，２１，９２｝，
｛－７，１，５，４，－３，５，１１，１３，１２，－８，１１，１２，１６｝，
｛－５，－３，６，－２，－３，８，１４，１５，２，－７，１１，１６，２４｝，
｛２，－１，－６，－５，－２，－２，２０，１４，－４，０，－３，２５，５２｝，
｛３，１，－８，－４，０，－８，２２，５，－３，２，－１０，２９，７０｝，
｛２，１，－７，－１，２，－１１，２３，－５，０，２，－１０，２９，７８｝，
｛－６，－３，８，９，－４，８，９，７，１４，－２，８，９，１４｝，
｛２，１，－４，－７，０，－８，１７，２２，１，－１，－４，２３，４４｝，
｛３，０，－５，－７，０，－７，１５，１８，－５，０，－５，２７，６０｝，
｛２，０，０，－７，１，－１０，１３，１３，－４，２，－７，２４，７４｝，
｛３，３，－１３，４，－２，－５，９，２１，２５，－２，－３，１２，２４｝，
｛－５，－２，７，－３，－７，９，８，９，１６，－２，１５，１２，１４｝，
｛０，－１，０，－７，－５，４，１１，１１，８，－６，１２，２１，３２｝，
｛３，－２，－３，－８，－４，－１，１６，１５，－２，－３，３，２６，４８｝，
｛２，１，－５，－４，－１，－８，１６，４，－２，１，－７，３３，６８｝，
｛２，１，－４，－２，１，－１０，１７，－２，０，２，－１１，３３，７４｝，
｛１，－２，７，－１５，－１６，１０，８，８，２０，１１，１４，１１，１４｝，
｛２，２，３，－１３，－１３，４，８，１２，２，－３，１６，２４，４０｝，
｛１，４，０，－７，－８，－４，９，９，－２，－２，８，２９，５４｝，
｛１，１，２，－４，－１，－６，６，３，－１，－１，－３，３０，７４｝，
｛－７，３，２，１０，－２，３，７，１１，１９，－７，８，１０，１４｝，
｛０，－２，－５，－３，－２，４，２０，１５，－１，－３，－１，２２，４０｝，
｛３，－１，－８，－４，－１，－４，２２，８，－４，２，－８，２８，６２｝，
｛０，３，－１４，３，０，１，１９，１７，８，－３，－７，２０，３４｝，
｛０，２，－１，－８，３，－６，５，２１，１，１，－９，１３，８４｝，
｛－４，－２，８，２０，－２，２，３，５，２１，４，６，１，４｝，
｛２，－２，－３，－９，－４，２，１４，１６，３，－６，８，２４，３８｝，
｛２，１，５，－１６，－７，２，３，１１，１５，－３，１１，２２，３６｝，
｛１，２，３，－１１，－２，－５，４，８，９，－３，－２，２６，６８｝，
｛０，－１，１０，－９，－１，－８，２，３，４，０，０，２９，７０｝，
｛１，２，０，－５，１，－９，９，３，０，１，－７，２０，９６｝，
｛－２，８，－６，－４，３，－９，－８，４５，１４，２，－１３，７，５４｝，
｛１，－１，１６，－１９，－８，－４，－３，２，１９，０，４，３０，５４｝，
｛１，１，－３，０，２，－１１，１５，－５，１，２，－９，２４，９２｝，
｛０，１，－２，０，１，－４，４，０，０，１，－４，７，１２０｝，
｛０，１，２，－５，１，－６，４，１０，－２，１，－４，１０，１０４｝，
｛３，０，－３，－６，－２，－６，１４，８，－１，－１，－３，３１，６０｝，
｛０，１，０，－２，１，－６，５，１，０，１，－５，１３，１１０｝，
｛３，１，９，－１９，－２１，９，７，６，１３，５，１５，２１，３０｝，
｛２，４，３，－１２，－１３，１，７，８，３，０，１２，２６，４６｝，
｛３，１，－８，－２，０，－６，１８，２，－２，３，－１０，２３，８４｝，
｛１，１，－４，－１，１，－５，８，１，－１，２，－５，１０，１１２｝，
｛０，１，－１，０，０，－２，２，０，０，１，－２，３，１２４｝，
｛１，１，－２，－７，１，－７，１４，１８，０，０，－７，２１，６２｝，
｛０，１，０，－２，０，－７，８，１，－２，０，－３，２４，８８｝，
｛０，１，１，－２，２，－１０，１０，０，－２，１，－７，２３，９４｝，
｛０，２，２，－１１，２，－４，－３，３９，７，１，－１０，９，６０｝，
｛１，０，１３，－１６，－５，－６，－１，８，６，０，６，２９，５８｝，
｛１，３，１，－６，－４，－７，９，６，－３，－２，３，３３，６０｝，
｛４，０，－１７，－１，－１，５，２６，８，－２，３，－１５，３０，４８｝，
｛０，１，－２，０，２，－８，１２，－６，１，１，－６，１６，１０６｝，
｛０，０，０，－１，１，－４，４，０，０，０，－３，１１，１１２｝，
｛０，１，２，－８，２，－６，５，１５，０，２，－７，９，９８｝，
｛１，－１，１２，－１５，－７，－２，３，６，６，－１，７，３０，５０｝，
｝；
｛｛ＡｌｆＣｌａｓｓＴｏＦｉｌｔｅｒＭａｐｐｉｎｇ｝｝［１６］［２５］＝
｛
｛８，２，２，２，３，４，５３，９，９，５２，４，４，５，９，２，８，１０，９，１，３，３９，３９，１０，９，５２｝，
｛１１，１２，１３，１４，１５，３０，１１，１７，１８，１９，１６，２０，２０，４，５３，２１，２２，２３，１４，２５，２６，２６，２７，２８，１０｝，
｛１６，１２，３１，３２，１４，１６，３０，３３，５３，３４，３５，１６，２０，４，７，１６，２１，３６，１８，１９，２１，２６，３７，３８，３９｝，
｛３５，１１，１３，１４，４３，３５，１６，４，３４，６２，３５，３５，３０，５６，７，３５，２１，３８，２４，４０，１６，２１，４８，５７，３９｝，
｛１１，３１，３２，４３，４４，１６，４，１７，３４，４５，３０，２０，２０，７，５，２１，２２，４６，４０，４７，２６，４８，６３，５８，１０｝，
｛１２，１３，５０，５１，５２，１１，１７，５３，４５，９，３０，４，５３，１９，０，２２，２３，２５，４３，４４，３７，２７，２８，１０，５５｝，
｛３０，３３，６２，５１，４４，２０，４１，５６，３４，４５，２０，４１，４１，５６，５，３０，５６，３８，４０，４７，１１，３７，４２，５７，８｝，
｛３５，１１，２３，３２，１４，３５，２０，４，１７，１８，２１，２０，２０，２０，４，１６，２１，３６，４６，２５，４１，２６，４８，４９，５８｝，
｛１２，３１，５９，５９，３，３３，３３，５９，５９，５２，４，３３，１７，５９，５５，２２，３６，５９，５９，６０，２２，３６，５９，２５，５５｝，
｛３１，２５，１５，６０，６０，２２，１７，１９，５５，５５，２０，２０，５３，１９，５５，２２，４６，２５，４３，６０，３７，２８，１０，５５，５２｝，
｛１２，３１，３２，５０，５１，１１，３３，５３，１９，４５，１６，４，４，５３，５，２２，３６，１８，２５，４３，２６，２７，２７，２８，１０｝，
｛５，２，４４，５２，３，４，５３，４５，９，３，４，５６，５，０，２，５，１０，４７，５２，３，６３，３９，１０，９，５２｝，
｛１２，３４，４４，４４，３，５６，５６，６２，４５，９，５６，５６，７，５，０，２２，３８，４０，４７，５２，４８，５７，３９，１０，９｝，
｛３５，１１，２３，１４，５１，３５，２０，４１，５６，６２，１６，２０，４１，５６，７，１６，２１，３８，２４，４０，２６，２６，４２，５７，３９｝，
｛３３，３４，５１，５１，５２，４１，４１，３４，６２，０，４１，４１，５６，７，５，５６，３８，３８，４０，４４，３７，４２，５７，３９，１０｝，
｛１６，３１，３２，１５，６０，３０，４，１７，１９，２５，２２，２０，４，５３，１９，２１，２２，４６，２５，５５，２６，４８，６３，５８，５５｝，｝；

（（ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが１である場合、次の処理）。
ｊ＝０．．５の場合、クロマフィルタ係数ＡｌｆＣｏｅｆｆ_Ｃ［ｊ］は、以下のように導出される。
ＡｌｆＣｏｅｆｆ_Ｃ［ｊ］＝ａｌｆ＿ｃｈｒｏｍａ＿ｃｏｅｆｆ＿ａｂｓ［ｊ］＊（１－２＊ａｌｆ＿ｃｈｒｏｍａ＿ｃｏｅｆｆ＿ｓｉｇｎ［ｊ］） （７－５７）
ｊ＝６の場合の最後のフィルタ係数は、以下のように導出される。
ＡｌｆＣｏｅｆｆ_Ｃ［６］＝１２８－Σ_ｋ（ＡｌｆＣｏｅｆｆ_Ｃ［ｋ］＜＜１），ｗｉｔｈ ｋ＝０．．５ （７－５８）
ｆｉｌｔＩｄｘ＝０．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１，ｊ＝０．．５の場合、ＡｌｆＣｏｅｆｆ_Ｃ［ｊ］の値は、－２^７～２^７－１の範囲内とし、ＡｌｆＣｏｅｆｆ_Ｃ［６］の値は、０～２^８－１の範囲内とすることが、ビットストリーム適合性の要件である。
そうでない場合、（（（ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａ ｉｓ ０）））以下が呼び出される。
ｆｏｒ（ｉ＝Ｔｉｄ；ｉ＞＝０；ｉ－－）
｛
ｆｏｒ（ｋ＝０；ｋ＜ｔｅｍｐ＿ｓｉｚｅ＿Ｃ；ｋ＋＋）
｛
ｉｆ（ｔｅｍｐ_{Ｔｉｄ＿Ｃ}［ｋ］＝＝ｉ）
｛
ｃｌｏｓｅｓｔ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘ ｉｓ ｓｅｔ ａｓ ｋ；
ｂｒｅａｋ；
｝
｝
｝
ｊ＝０．．６の場合、クロマフィルタ係数ＡｌｆＣｏｅｆｆ_Ｃ［ｊ］は、以下のように導出される。
ＡｌｆＣｏｅｆｆ_Ｃ［ｊ］＝Ｔｅｍｐ_Ｃ［ｃｌｏｓｅｓｔ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘ］［ｊ］

７．４．５．２ 符号化ツリーユニット構文
（（ａｌｆ＿ｌｕｍａ＿ｃｔｂ＿ｆｉｌｔｅｒ＿ｓｅｔ＿ｉｎｄｅｘ［ｘＣｔｂ＞＞Ｌｏｇ２ＣｔｂＳｉｚｅ］［ｙＣｔｂ＞＞Ｌｏｇ２ＣｔｂＳｉｚｅ］））は、位置（ｘＣｔｂ，ｙＣｔｂ））における輝度ＣＴＢのフィルタセットインデックスを指定する。
（（（ａｌｆ＿ｕｓｅ＿ｎｅｗ＿ｆｉｌｔｅｒ））が１である場合、ａｌｆ＿ｌｕｍａ＿ｃｔｂ＿ｆｉｌｔｅｒ＿ｓｅｔ＿ｉｎｄｅｘ［ｘＣｔｂ＞＞Ｌｏｇ２ＣｔｂＳｉｚｅ］［ｙＣｔｂ＞＞Ｌｏｇ２ＣｔｂＳｉｚｅ］は１６であることを示す。ａｌｆ＿ｕｓｅ＿ｎｅｗ＿ｆｉｌｔｅｒが０である場合、ａｌｆ＿ｌｕｍａ＿ｃｔｂ＿ｆｉｌｔｅｒ＿ｓｅｔ＿ｉｎｄｅｘ［ｘＣｔｂ＞＞Ｌｏｇ２ＣｔｂＳｉｚｅ］［ｙＣｔｂ＞＞Ｌｏｇ２ＣｔｂＳｉｚｅ］は１６に等しくないことを示す。
（（ａｌｆ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ））が１である場合、固定フィルタセットの１つを使用することを示し、ａｌｆ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒが０である場合、現在の輝度ＣＴＢは固定フィルタセットを使用しないことを示す。
（（（ａｌｆ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｉｎｄｅｘ））は、固定フィルタセットのインデックスを示し、このインデックスは０～１５までとすることができる。
（（（ａｌｆ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘ））は、時間的フィルタセットインデックスを示し、これは、０からａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａ－１とすることができる。

［［８．５．１ 一般］］
１． ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１である場合、以下が適用される。
－ ［［８．５．４．５項に規定された時間的フィルタ更新処理が呼び出される。］］
－ ８．５．４．１項で規定された適応ループフィルタ処理は、再構成されたピクチャサンプルアレイＳ_Ｌ、Ｓ_ＣｂおよびＳ_Ｃｒを入力とし、サンプル適応オフセット後の修正された再構成されたピクチャサンプルアレイＳ’_Ｌ、Ｓ’_ＣｂおよびＳ’_Ｃｒが、出力として呼び出される。
－ 配列Ｓ’_Ｌ、Ｓ’_Ｃｂ、Ｓ’_Ｃｒは、それぞれ配列Ｓ_Ｌ、Ｓ_Ｃｂ、Ｓ_Ｃｒ（復号化されたピクチャを表す）に割り当てられている。
－ ［［８．５．４．６項で規定された時間的フィルタ更新処理が呼び出される。］］


（（８．５．４．２ 輝度サンプルのための符号化ツリーブロックフィルタリング処理））
－ ｆｉｌｔＩｄｘ［ｘ］［ｙ］で指定されたフィルタに対応する輝度フィルタ係数の配列ｆ［ｊ］は，ｊ＝０．．１２として以下のように導出される。
ｆ［ｊ］＝（（ＡｌｆＣｏｅｆｆ_{ＬｕｍａＡｌｌ}））［ａｌｆ＿ｌｕｍａ＿ｃｔｂ＿ｆｉｌｔｅｒ＿ｓｅｔ＿ｉｎｄｅｘ［ｘＣｔｂ＞＞Ｌｏｇ２ＣｔｂＳｉｚｅ］［ｙＣｔｂ＞＞Ｌｏｇ２ＣｔｂＳｉｚｅ］］］［ｆｉｌｔＩｄｘ［ｘ］［ｙ］］［ｊ］ （８－７３２）
［［８．５．４．５ 時間的フィルタ更新］］
以下の条件のいずれかが真である場合、
－ 現在のピクチャはＩＤＲピクチャである。
－ 現在のピクチャはＢＬＡ画像である。
－ 復号化の順序では、現在のピクチャは、ＰＯＣが前回の復号化されたＩＲＡＰピクチャのＰＯＣよりも大きい１つ目のピクチャ、すなわち先頭ピクチャの後ろかつ後続ピクチャの後ろにあるピクチャである。

次に、ｔｅｍｐ＿ｓｉｚｅ＿Ｌおよびｔｅｍｐ＿ｓｉｚｅ＿Ｃを０に設定する。
［［８．５．４．６ 時間的フィルタの更新］］
ｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１であり、ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａが１である場合、以下が適用される。
輝度時間的フィルタバッファサイズ、ｔｅｍｐ＿ｓｉｚｅ＿Ｌ＜５の場合、ｔｅｍｐ＿ｓｉｚｅ＿Ｌ＝ｔｅｍｐ＿ｓｉｚｅ＿Ｌ＋１である。
ｉ＝ｔｅｍｐ＿ｓｉｚｅ＿Ｌ－１．．．１，ｊ＝０．．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１，ｋ＝０．．．１２の場合、Ｔｅｍｐ_Ｌ［ｉ］［ｊ］［ｋ］は、次のように更新される。
Ｔｅｍｐ_Ｌ［ｉ］［ｊ］［ｋ］＝Ｔｅｍｐ_Ｌ［ｉ－１］［ｊ］［ｋ］
ｊ＝０．．．ＮｕｍＡｌｆＦｉｌｔｅｒｓ－１、ｋ＝０．．１２の場合、Ｔｅｍｐ_Ｌ［０］［ｊ］［ｋ］は、次のように更新される。
Ｔｅｍｐ_Ｌ［０］［ｊ］［ｋ］＝ＡｌｆＣｏｅｆｆ_Ｌ［ｊ］［ｋ］
ｉ＝ｔｅｍｐ＿ｓｉｚｅ＿Ｌ－１．．．１の場合、Ｔｅｍｐ_{Ｔｉｄ＿Ｌ}［ｉ］は、次のように更新される。
Ｔｅｍｐ_{Ｔｉｄ＿Ｌ}［ｉ］＝Ｔｅｍｐ_{Ｔｉｄ＿Ｌ}［ｉ－１］
Ｔｅｍｐ_{Ｔｉｄ＿Ｌ}［０］を現在のスライスの時間層インデックスＴｉｄとして設定する。

ａｌｆ＿ｃｈｒｏｍａ＿ｉｄｘが０でなく、ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが１の場合、以下が適用される。
ｉ＝ｔｅｍｐ＿ｓｉｚｅ＿ｃ－１．．．１、ｊ＝０．．．６のＴｅｍｐ_ｃ［ｉ］［ｊ］は、次のように更新される。
Ｔｅｍｐ_ｃ［ｉ］［ｊ］＝Ｔｅｍｐ_ｃ［ｉ－１］［ｊ］
ｊ＝０．．．６の場合、Ｔｅｍｐ_ｃ［０］［ｊ］は、次のように更新される。
Ｔｅｍｐ_ｃ［０］［ｊ］＝ＡｌｆＣｏｅｆｆ_Ｃ［ｊ］
ｉ＝ｔｅｍｐ＿ｓｉｚｅ＿Ｃ－１．．．１の場合、Ｔｅｍｐ_{Ｔｉｄ＿Ｃ}［ｉ］は、次のように更新される。
Ｔｅｍｐ_{Ｔｉｄ＿Ｃ}［ｉ］＝Ｔｅｍｐ_{Ｔｉｄ＿Ｃ}［ｉ－１］
Ｔｅｍｐ_{Ｔｉｄ＿Ｃ}［０］を現在のスライスのＴｉｄとして設定する。

９． ＪＶＥＴ－Ｍ０４２７におけるインループリシェイプ（ＩＬＲ）
インループリシェイプ（ＩＬＲ）の基本的な考えは、元の（第１のドメインにおける）信号（予測／再構成信号）を第２のドメイン（リシェイプされたドメイン）に変換することである。

インループ輝度リシェイパは、１対のルックアップテーブル（ＬＵＴ）として実装されるが、信号通知されたＬＵＴから他方を計算することができるので、２つのＬＵＴのうちの一方のみを信号通知する必要がある。各ＬＵＴは、１次元１０ビット１０２４エントリマッピングテーブル（１Ｄ－ＬＵＴ）である。１つのＬＵＴは、フォワードＬＵＴ、ＦｗｄＬＵＴであり、これは、入力輝度コード値Ｙ_ｉを変更された値Ｙ_ｒ：Ｙ_ｒ＝ＦｗｄＬＵＴ［Ｙ_ｉ］にマッピングする。他方のＬＵＴは、逆ＬＵＴ、ＩｎｖＬＵＴであり、変更されたコード値Ｙ_ｒをＹ＾_ｉ：Ｙ＾_ｉ＝ＩｎｖＬＵＴ［Ｙ_ｒ］にマッピングする。（Ｙ＾_ｉはＹ_ｉの再構成値を表す）。

９．１ ＰＷＬモデル
概念的には、区分線形（ＰＷＬ）は、以下のように実装される。

ｘ１、ｘ２を２つの入力支点とし、ｙ１、ｙ２を１つのピースに対応する出力支点とする。ｘ１とｘ２との間の任意の入力値ｘに対する出力値ｙは、以下の式によって補間することができる

ｙ＝（（ｙ２－ｙ１）／（ｘ２－ｘ１））＊（ｘ－ｘ１）＋ｙ１

固定点実装では、この式は、以下のように書き換えることができる。

ｙ＝（（ｍ＊ｘ＋２ＦＰ＿ＰＲＥＣ－１）＞＞ＦＰ＿ＰＲＥＣ）＋ｃ

ここで、ｍはスカラーであり、ｃはオフセットであり、ＦＰ＿ＰＲＥＣは精度を規定するための定数である。

なお、ＣＥ－１２ソフトウェアでは、ＰＷＬモデルは、１０２４エントリのＦｗｄＬＵＴマッピングテーブルおよびＩｎｖＬＵＴマッピングテーブルを予め計算するために使用されるが、ＰＷＬモデルは、ＬＵＴを予め計算することなく、実装において同一のマッピング値をオンザフライで計算することも可能にする。

９．２ 第４回ＶＶＣ協議におけるＣＥ１２－２のテスト
９．２．１ 輝度のリシェイプ
インループ輝度リシェイプのテスト２（すなわち、提案におけるＣＥ－１２ー２）は、より複雑性低いパイプラインを提供し、且つインタースライス再構成におけるブロック単位のイントラ予測のための復号化待ち時間を排除する。イントラ予測は、インタースライスおよびイントラスライスの両方のために、リシェイプされたドメインにおいて行われる。

イントラ予測は、スライスタイプにかかわらず、常にリシェイプされたドメインで行われる。このような構成によれば、前回のＴＵ再構成を行った直後にイントラ予測を開始することができる。このような構成は、スライスに依存する代わりに、イントラモードのための統一された処理を提供することもできる。図７は、ＣＥ１２－２の方式に基づく復号化処理を示すブロック図である。

ＣＥ１２－２は、１６個の区分線形（ＰＷＬ）モデルをＣＥ１２－１の３２個のＰＷＬモデルの代わりに使用して輝度およびクロマ残差スケーリングを行ってもよい。

ＣＥ－１２ー２におけるインループ輝度リシェイパを用いたインタースライス再構成（薄い影が付けられたブロックは、リシェイプされたドメインにおける信号を示す。輝度残差、輝度内予測、および輝度内再構成）

９．２．２ 輝度依存クロマ残差スケーリング
輝度依存クロマ残差スケーリングは、固定小数点整数演算で実装される乗算処理である。クロマ残差スケーリングは、輝度信号のクロマ信号との相互作用を補償する。ＴＵレベルでクロマ残差スケーリングを適用する。具体的には、対応する輝度予測ブロックの平均値を利用する。

この平均値は、ＰＷＬモデルにおけるインデックスを特定するために使用される。このインデックスは、スケーリング係数ｃＳｃａｌｅＩｎｖを特定する。クロマ残差にその数を乗算する。

なお、クロマスケーリング係数は、再構成された輝度値ではなく、フォワードマップされた予測輝度値から算出される。

９．２．３ ＩＬＲ副情報の信号通知
パラメータは（現在）タイルグループヘッダ（ＡＬＦに類似）で送信される。これらは、４０～１００ビットを要すると報告されている。
以下の規格は、ＪＶＥＴ－Ｌ１００１のバージョン９に基づいている。追加された構文は黄色で強調表示されている。
７．３．２．１におけるシーケンスパラメータセットＲＢＳＰ構文

７．３．３．１におけるタイルグループヘッダ構文

新しい構文表タイルグループリシェイパを追加する。

｛｛一般的に、シーケンスパラメータセットＲＢＳＰの意味論では、次の意味論を追加する。｝｝
ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１と等しい場合は、符号化映像シーケンス（ＣＶＳ）においてリシェイパが使用されていることを規定している。ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０と等しい場合は、ＣＶＳにおいてリシェイパが使用されていないことを規定している。

｛｛タイルグループヘッダ構文において、以下の意味論を追加する。｝｝
ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇが１と等しい場合は、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（）がタイルグループ内に存在することを規定している。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇが０と等しい場合は、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（）がタイルグループヘッダに存在しないことを規定している。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇが存在しない場合は、０に等しいと推論される。
ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１と等しい場合は、現在のタイルグループに対してリシェイパが有効になっていることを規定している。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇが０と等しい場合は、現在のタイルグループに対してリシェイパが有効になっていないことを規定している。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇが存在しない場合、０であると推論される。
ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇが１と等しい場合は、現在のタイルグループに対してクロマ残差スケーリングを有効であることを規定している。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇが０と等しい場合は、現在のタイルグループに対してクロマ残差スケーリングが有効でないことを規定している。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇが存在しない場合は、０であると推測される。

｛｛ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（）構文を追加する｝｝
ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘは、最小のビン（またはピース）インデックスを、リシェイパ構築処理に使用するように規定している。ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘの値が０～ＭａｘＢｉｎＩｄｘの範囲内にあるものとする。ＭａｘＢｉｎＩｄｘの値は１５と等しいとする。
ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｄｅｌｔａ＿ｍａｘ＿ｂｉｎ＿ｉｄｘは、最大許容ビン（またはピース）インデックスＭａｘＢｉｎＩｄｘから最大ビンインデックスを引いたものが、リシェイパ構築処理で使用されることを規定している。ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｍａｘ＿ｂｉｎ＿ｉｄｘの値は、ＭａｘＢｉｎＩｄｘ－ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｄｅｌｔａ＿ｍａｘ＿ｂｉｎ＿ｉｄｘに等しく設定される。
ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ ｂｉｎ＿ｄｅｌｔａ＿ａｂｓ＿ｃｗ＿ｐｒｅｃ＿ｍｉｎｕｓ１＋１は、構文ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ａｂｓ＿ＣＷ［ｉ］の表現に使用するビット数を規定している。
ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ａｂｓ＿ＣＷ［ｉ］は、ｉ番目のビンの絶対デルタコード名値を規定する。
ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ｓｉｇｎ＿ＣＷ＿ｆｌａｇ［ｉ］は、ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ａｂｓ＿ＣＷ［ｉ］のサインを次のように記述する。
－ ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ｓｉｇｎ＿ＣＷ＿ｆｌａｇ［ｉ］が０と等しい場合、対応する変数ＲｓｐＤｅｌｔａＣＷ［ｉ］は正の値である。
－ そうでない場合（ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ｓｉｇｎ＿ＣＷ＿ｆｌａｇ［ｉ］が０と等しくない）、対応する変数ＲｓｐＤｅｌｔａＣＷ［ｉ］は負の値である。
ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ｓｉｇｎ＿ＣＷ＿ｆｌａｇ［ｉ］が存在しない場合、０に等しいと推測される。
変数ＲｓｐＤｅｌｔａＣＷ［ｉ］＝（１ ２＊ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ｓｉｇｎ＿ＣＷ［ｉ］）＊ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｂｉｎ＿ｄｅｌｔａ＿ａｂｓ＿ＣＷ［ｉ］；
変数ＲｓｐＣＷ［ｉ］は、以下のステップとして導出される。
変数ＯｒｇＣＷは、（１＜＜ＢｉｔＤｅｐｔｈ_Ｙ）／（ＭａｘＢｉｎＩｄｘ＋１）に等しく設定される。
－ Ｉｆ ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＜＝ｉ＜＝ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ
ＲｓｐＣＷ［ｉ］＝ＯｒｇＣＷ＋ＲｓｐＤｅｌｔａＣＷ［ｉ］．
－ そうでない場合、ＲｓｐＣＷ［ｉ］＝０である。
ＢｉｔＤｅｐｔｈ_Ｙの値が１０に等しい場合、ＲｓｐＣＷ［ｉ］の値は、３２～２＊ＯｒｇＣＷ＿１の範囲内にくる。
ｉが０～ＭａｘＢｉｎＩｄｘ＋１の範囲にある変数ＩｎｐｕｔＰｉｖｏｔ［ｉ］は、以下のように導出される。
ＩｎｐｕｔＰｉｖｏｔ［ｉ］＝ｉ＊ＯｒｇＣＷ
ｉが０～ＭａｘＢｉｎＩｄｘ＋１の範囲にあり、変数ＳｃａｌｅＣｏｅｆ［ｉ］およびＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］がそれぞれ０～ＭａｘＢｉｎＩｄｘの範囲にあり、ｉが０～ＭａｘＢｉｎＩｄｘの範囲にある変数ＲｅｓｈａｐｅＰｉｖｏｔ［ｉ］は、以下のように導出される。
ｓｈｉｆｔＹ＝１４
ＲｅｓｈａｐｅＰｉｖｏｔ［０］＝０；
ｆｏｒ（ｉ＝０；ｉ＜＝ＭａｘＢｉｎＩｄｘ；ｉ＋＋）｛
ＲｅｓｈａｐｅＰｉｖｏｔ［ｉ＋１］＝ＲｅｓｈａｐｅＰｉｖｏｔ［ｉ］＋ＲｓｐＣＷ［ｉ］
ＳｃａｌｅＣｏｅｆ［ｉ］＝（ＲｓｐＣＷ［ｉ］＊（１＜＜ｓｈｉｆｔＹ）＋（１＜＜（Ｌｏｇ２（ＯｒｇＣＷ）－１）））＞＞（Ｌｏｇ２（ＯｒｇＣＷ））
ｉｆ（ＲｓｐＣＷ［ｉ］＝＝０）
ＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］＝０
ｅｌｓｅ
ＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］＝ＯｒｇＣＷ＊（１＜＜ｓｈｉｆｔＹ）／ＲｓｐＣＷ［ｉ］
｝

ｉが０～ＭａｘＢｉｎＩｄｘの範囲内にある変数ＣｈｒｏｍａＳｃａｌｅＣｏｅｆ［ｉ］は、以下のように導出される。
ＣｈｒｏｍａＲｅｓｉｄｕａｌＳｃａｌｅＬｕｔ［６４］＝｛１６３８４，１６３８４，１６３８４，１６３８４，１６３８４，１６３８４，１６３８４，８１９２，８１９２，８１９２，８１９２，５４６１，５４６１，５４６１，５４６１，４０９６，４０９６，４０９６，４０９６，３２７７，３２７７，３２７７，３２７７，２７３１，２７３１，２７３１，２７３１，２３４１，２３４１，２３４１，２０４８，２０４８，２０４８，１８２０，１８２０，１８２０，１６３８，１６３８，１６３８，１６３８，１４８９，１４８９，１４８９，１４８９，１３６５，１３６５，１３６５，１３６５，１２６０，１２６０，１２６０，１２６０，１１７０，１１７０，１１７０，１１７０，１０９２，１０９２，１０９２，１０９２，１０２４，１０２４，１０２４，１０２４｝；

ｓｈｉｆｔＣ＝１１
－ ｉｆ（ＲｓｐＣＷ［ｉ］＝＝０）
ＣｈｒｏｍａＳｃａｌｅＣｏｅｆ［ｉ］＝（１＜＜ｓｈｉｆｔＣ）
－ Ｏｔｈｅｒｗｉｓｅ（ＲｓｐＣＷ［ｉ］！＝０），ＣｈｒｏｍａＳｃａｌｅＣｏｅｆ［ｉ］＝ＣｈｒｏｍａＲｅｓｉｄｕａｌＳｃａｌｅＬｕｔ［ＲｓｐＣＷ［ｉ］＞＞１］

９．２．４ ＩＬＲの使用方法
エンコーダ側では、まず、各ピクチャ（またはタイルグループ）をリシェイプされたドメインに変換する。そして、すべての符号化処理は、リシェイプされたドメインで行われる。イントラ予測の場合、近傍のブロックはリシェイプされたドメインにあり、インター予測の場合、まず、参照ブロック（復号化ピクチャバッファからの元のドメインから生成される）をリシェイプされたドメインに変換する。そして、残差を生成し、ビットストリームに符号化する。

ピクチャ全体（またはタイルグループ）の符号化／復号化が終わった後、リシェイプされたドメインのサンプルを元のドメインに変換し、次いで、非ブロック化フィルタおよび他のフィルタを適用する。

以下の場合、予測信号へのフォワードリシェイプは無効化される。

○ 現在のブロックはイントラ符号化されている

○ 現在のブロックはＣＰＲ（現在のピクチャを参照し、別名イントラブロックコピー、ＩＢＣ）として符号化される。

○ 現在のブロックは、結合されたインターイントラモード（ＣＩＩＰ）として符号化され、イントラ予測ブロックのためにフォワードリシェイプは無効化される。

１０ 双方向オプティカルフロー（ＢＤＯＦ）
１０．１ ＢＩＯの概要と分析
ＢＩＯにおいて、まず、動き補償を行い、現在のブロックの（各予測方向における）第１の予測を生成する。第１の予測は、ブロック内の各サブブロックまたは画素の空間的勾配、時間的勾配、およびオプティカルフローを導出するために用いられ、これらを使用して第２の予測、例えば、サブブロックまたは画素の最終予測を生成する。以下、その詳細を説明する。

双方向オプティカルフロー（ＢＩＯ）方法は、双方向予測のためにブロック単位の動き補償の上で実行されるサンプル単位の動きの改良である。いくつかの実施例において、サンプルレベルの動きの改良は、シグナリングを用いない。

ブロック動き補償後の基準ｋ（ｋ＝０，１）からの輝度をＩ^（ｋ）とし、

をそれぞれＩ^（ｋ）勾配の水平成分、垂直成分とする。オプティカルフローが有効であると仮定すると、動きベクトルフィールド（ｖ_ｘ,ｖ_ｙ）は、以下の式によって求められる。

このオプティカルフロー方程式を各サンプルの動き軌跡に対してエルミート補間によって組み合わせることにより、両端にある両機能値Ｉ^（ｋ）および導関数

に合致する固有の３次多項式が得られる。ｔ＝０におけるこの多項式の値は、ＢＩＯ次式のような、ＢＩＯ予測となる。

図８は、双方向オプティカルフロー（ＢＩＯ）法におけるオプティカルフローの軌跡の一例を示す。ここで、τ_０およびτ_１は、参照フレームまでの距離を示す。距離τ_０，τ_１は、Ｒｅｆ_０およびＲｅｆ_１のＰＯＣ：τ_０＝ＰＯＣ（ｃｕｒｒｅｎｔ）－ＰＯＣ（Ｒｅｆ_０），τ_１＝ＰＯＣ（ｃｕｒｒｅｎｔ）－ＰＯＣ（Ｒｅｆ_１）に基づいて算出される。両方の予測が同じ時間方向から来たものである場合（両方とも過去から来たものであるか、または両方とも将来から来たものである場合）、符号が異なる（即ち、τ_０・τ_１＜０）。このケースでは、予測が同じ時刻（例えば、τ_０≠τ_１）からのものでない場合、ＢＩＯが適用される。

動きベクトルフィールド（ｖ_ｘ，ｖ_ｙ）は、点ＡおよびＢにおける値の差Δを最小化することによって判定される。図８は、動き軌跡と参照フレーム平面の交差における例を示す。モデルは、Δに対するローカルテーラー展開の第１の線形項のみを以下のように使用する。

上記式におけるすべての値は、（ｉ’,ｊ’）として表されるサンプル位置に依存する。動きがローカル周辺エリアにおいて一貫していると仮定すると、Δは、現在の予測点（ｉ,ｊ）を中心とする（２Ｍ＋１）×（２Ｍ＋１）個の正方形窓Ωの内側で最小化することができる。式中、Ｍは２に等しい。

この最適化問題に対して、ＪＥＭは、まず垂直方向に最小化し、次に水平方向に最小化する簡単なアプローチを使用する。その結果、以下のようになる。

ここで

ゼロまたは非常に小さな数値での除算を回避するために、式（１５）および式（１６）において、正則化パラメータｒおよびｍを導入する。式中、

ここで、ｄは映像サンプルのビット深度である。

バイオメモリアクセスを通常の双方向予測動き補償と同じにするために、現在のブロック内の位置について、すべての予測値および勾配値

を計算する。図９Ａは、ステップ９００の外部におけるアクセス位置を例示している。図９Ａに示すとおり、式（１７）において、予測ブロックの境界上の現在の予測点を中心とする（２Ｍ＋１）×（２Ｍ＋１）個の正方形窓Ωは、ブロックの外側の位置にアクセスする必要がある。ＪＥＭにおいて、ブロックの外部の

の値はブロックの内部で最も近い利用可能な数値に等しくなるように設定される。例えば、これは、図９Ｂに示すように、パディング領域９０１として実装することができる。

ＢＩＯを用いることで、サンプル毎に動きフィールドを改良することができる。計算の複雑性を低減するために、ＪＥＭではブロックに基づくＢＩＯの設計が用いられている。動きの改良は、４×４ブロックに基づいて計算することができる。ブロックに基づくＢＩＯにおいて、４×４ブロックにおけるすべてのサンプルの、式（１７）におけるｓ_ｎの値を統合し、次いで、この統合したｓ_ｎの値を使用して、４×４ブロックのためのＢＩＯ動きベクトルオフセットを導出する。具体的には、ブロックに基づくＢＩＯ導出には、以下の式を用いることができる。

式中、ｂ_ｋは、予測ブロックのｋ番目の４×４ブロックに属するサンプルのセットを表し、式（１５）および式（１６）におけるｓ_ｎを（（ｓ_ｎ，ｂｋ）＞＞４）に置き換え、関連する動きベクトルオフセットを導出する。

シナリオによってはＢＩＯのＭＶレジメンがノイズや不規則な動きで信頼できない場合がある。従って、ＢＩＯにおいて、ＭＶレジメンの大きさは閾値にクリップされる。閾値は、現在のピクチャの参照ピクチャがすべて一方向からのものであるか否かに基づいて判定される。例えば、現在のピクチャのすべての参照ピクチャが一方向からのものである場合、閾値を１２×２^１４－ｄに設定し、そうでない場合、閾値を１２×２^１３－ｄに設定する。

ＢＩＯの勾配は、ＨＥＶＣ動き補償処理（例えば、２Ｄ分離可能有限インパルス応答（ＦＩＲ））に準拠した演算を使用して、動き補償補間と同時に計算してもよい。いくつかの実施形態において、前記２Ｄ分離可能なＦＩＲのための入力は、ブロック動きベクトルの端数部分に従って、動き補償処理および端数位置（ｆｒａｃＸ，ｆｒａｃＹ）のためのものと同じ参照フレームサンプルである。水平方向勾配

の場合、まず、信号は、デスケーリングシフトｄ－８で、端数位置ｆｒａｃＹに対応するＢＩＯｆｉｌｔｅｒＳを使用して垂直方向に補間される。次に、１８－ｄによるデスケーリングシフトで端数位置ｆｒａｃＸｗｉｔｈに対応する、水平方向に勾配フィルタＢＩＯｆｉｌｔｅｒＧを適用する。垂直方向勾配

の場合、デスケーリングシフトｄ－８で、端数位置ｆｒａｃＹに対応するＢＩＯｆｉｌｔｅｒＧを使用して勾配フィルタを垂直方向に適用する。そして、１８－ｄによるデスケーリングシフトで端数位置ｆｒａｃＸに対応する水平方向のＢＩＯｆｉｌｔｅｒＳを使用して信号の移動を行う。適度な複雑性を保持するために、勾配計算ＢＩＯｆｉｌｔｅｒＧおよび信号変位ＢＩＯｆｉｌｔｅｒＦのための補間フィルタの長さはより短くてもよい（例えば６タップ）。表２は、ＢＩＯにおけるブロック動きベクトルの異なる端数位置の勾配計算に使用できる例示的なフィルタを示す。表３は、ＢＩＯにおける予測信号の生成に使用できる例示的な補間フィルタを示す。

本ＪＥＭにおいて、２つの予測が異なる参照ピクチャからのものである場合、ＢＩＯをすべての双方向予測ブロックに適用することができる。ＣＵのローカル照明補償（ＬＩＣ）を有効にすると、ＢＩＯを無効にすることができる。

いくつかの実施形態において、ＯＢＭＣは、通常のＭＣ処理の後、１つのブロックに適用される。計算の複雑性を低減するために、ＯＢＭＣ処理中にＢＩＯを適用しなくてもよい。つまり、ＢＩＯは、それ自身のＭＶを使用する場合、１つのブロックのＭＣ処理において適用され、ＯＢＭＣ処理において近傍のブロックのＭＶを使用する場合、ＭＣ処理においては適用されない。

１１ ＪＶＥＴ－Ｎ０２３６におけるオプティカルフロー（ＰＲＯＦ）による予測微調整
本寄稿では、オプティカルフローを用いたサブブロックに基づくアフィン動き補償予測を微調整する方法を提案している。サブブロックに基づくアフィン動き補償を行った後、オプティカルフロー方程式で導出された差を加算することで、予測サンプルを微調整し、これをオプティカルフロー予測微調整（ＰＲＯＦ）と呼ぶ。提案した方法は、メモリアクセス帯域幅を増大させることなく、画素レベルの粒度におけるインター予測を実現することができる。

動き補償の粒度をより細かくするために、本寄稿では、オプティカルフローを用いたサブブロックに基づくアフィン動き補償予測を微調整する方法を提案している。サブブロックに基づくアフィン動き補償を行った後、オプティカルフロー方程式で導出された差を加算することで、輝度予測サンプルを微調整する。提案されたＰＲＯＦは、以下の４つのステップとして説明する。

ステップ１）サブブロックに基づくアフィン動き補償を行い、サブブロック予測Ｉ（ｉ，ｊ）を生成する。

ステップ２）３タップフィルタ［－１，０，１］を使用して、個々のサンプル位置において、サブブロック予測の空間的勾配ｇ_ｘ（ｉ，ｊ）およびｇ_ｙ（ｉ，ｊ）を算出する。

サブブロック予測は、勾配計算のために各側で１つの画素だけ拡張される。メモリの帯域幅および複雑性を低減するために、拡大された境界上の画素は、参照ピクチャにおける最も近い整数画素位置からコピーされる。従って、パディング領域のための追加の補間が回避される。

ステップ３）オプティカルフロー方程式によって輝度予測の微調整を計算する。

ここで、Δｖ（ｉ，ｊ）は、図１０に示すように、（ｉ，ｊ）によって表される、サンプル位置ｖ（ｉ，ｊ）について算出された画素ＭＶと、画素（ｉ，ｊ）が属するサブブロックＭＶのサブブロックＭＶとの差分である。

サブブロック中心に対するアフィンモデルパラメータおよび画素位置は、サブブロックからサブブロックに変化しないので、第１のサブブロックについてΔｖ（ｉ，ｊ）を計算し、同じＣＵにおける他のサブブロックに再利用することができる。画素位置からサブブロックの中心までの水平および垂直オフセットをｘ、ｙとすると、Δｖ（ｘ，ｙ）は、以下の式で導出することができる。

４パラメータアフィンモデルの場合、

６パラメータアフィンモデルの場合、

ここで、（ｖ_０ｘ，ｖ_０ｙ）、（ｖ_１ｘ，ｖ_１ｙ）、（ｖ_２ｘ，ｖ_２ｙ）は、左上、右上、左下の制御点動きベクトルであり、ｗ、ｈは、ＣＵの幅および高さである。

ステップ４）最後に、輝度予測の微調整がサブブロック予測Ｉ（ｉ，ｊ）に加えられる。最終予測Ｉ’は、次式のように生成される。

１２ 既存の実装形態の欠点
ＪＶＥＴ－Ｎ０２４２の設計における非線形ＡＬＦ（ＮＬＡＬＦ）には、以下の問題がある。

（１）ＮＬＡＬＦでは、多くのクリッピング演算が必要である。

（２）ＣＴＵに基づくＡＬＦで、ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａが０である場合、利用可能な時間的輝度フィルタはない。しかしながら、ａｌｆ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘは、引き続き信号通知してもよい。

（３）ＣＴＵに基づくＡＬＦにおいて、ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが０である場合、クロマ成分のために新しいフィルタは信号通知されず、時間的クロマフィルタが使用されると仮定される。しかしながら、時間的クロマフィルタが利用可能であることは保証されていない。

（４）ＣＴＵに基づくＡＬＦにおいて、ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａは、利用可能な時間的フィルタセットよりも大きくてもよい。

１３ 映像符号化のための適応ループフィルタリングのための例示的な方法
本開示の技術の実施形態は、既存の実装の欠点を克服し、それにより、より高い符号化効率を有する映像符号化を提供する。開示される技術に基づいた適応ループフィルタリングのための技術は、既存のおよび将来の映像符号化規格の両方を向上させることができ、様々な実施形態のために以下の例で解明される。以下に提供される開示される技術の例は、一般的な概念を説明するものであり、限定するものと解釈されるべきではない。一例において、明確に示されていない限り、逆に示されていない限り、これらの例に記載されている様々な特徴を組み合わせることができる。
１． サンプル差をクリッピングする代わりに、フィルタリング処理中の中間結果にクリッピング演算を適用することが提案される。フィルタリング処理に利用される現在のサンプルの近傍のサンプル（隣接または非隣接）を、Ｎ（Ｎ≧１）個のグループに分類してもよい。
ａ． 一例において、１つのグループに対して１つ又は複数の中間結果を計算し、この１つまたは複数の中間結果に対してクリッピングを行ってもよい。
ｉ． 例えば、１つのグループについて、まず各近傍の画素と現在の画素との間の差を計算し、次に、これらの差を、対応するＡＬＦ係数を使用して重み平均してもよい（ｗＡｖｇＤｉｆｆと表記する）。グループに対してｗＡｖｇＤｉｆｆに対して１回クリッピングを行ってもよい。
ｂ． 異なるグループに対して異なるクリッピングパラメータを使用してもよい。
ｃ． 一例において、クリッピングは、サンプル差を乗算した、フィルタ係数の最終的な重み付けの合計に適用される。
ｉ． 例えば、Ｎ＝１であり、クリッピングは、Ｋ（ｄ，ｂ）＝ｍｉｎ（ｂ，ｍａｘ（－ｂ，ｄ））がクリッピング関数であり、ｋがクリッピングパラメータである場合、以下のように行ってもよい。

１）さらに、代替的に、重み付けの合計は、次のようになる。

をさらに整数値に丸めてもよく、例えば、丸めて、あるいは丸めないでシフトしてもよい。
２． １つのサンプルをフィルタリングするとき、Ｎ（Ｎ＞１）個の近傍のサンプルが１つのフィルタ係数を共有する場合、Ｎ個の近傍の画素すべてに対してクリッピング（例えば、非線形ＡＬＦによって必要とされる）を１回行ってもよい。
ａ． 例えば、Ｉ（ｘ＋ｉ１，ｙ＋ｊ１）とＩ（ｘ＋ｉ２，ｙ＋ｊ２）が１つのフィルタ係数ｗ（ｉ１，ｊ１）（または／および１つのクリッピングパラメータｋ（ｉ１，ｊ１））を共有する場合、クリッピングは以下のように１回行ってもよい。

を使用して、式（１４）における

を置き換えてもよい。

ｉ． 一例において、ｉ１およびｉ２は、対称的な位置にあってもよい。また、ｊ１およびｊ２は、対称的な位置にあってもよい。
１． 一例において、ｉ１は（－ｉ２）に等しく、ｊ１は（－ｊ２）に等しい。
ｉｉ． 一例において、（ｘ＋ｉ１，ｙ＋ｊ１）と（ｘ，ｙ）との間の距離と、（ｘ＋ｉ２，ｊ＋ｊ２）と（ｘ，ｙ）との間の距離とは、同じであってもよい。
ｉｉｉ． ブレット２に開示された方法は、フィルタ形状が対称モードにある場合に有効化される。
ｉｖ． さらに、代替的に、Ｉ（ｘ＋ｉ１，ｙ＋ｊ１）に関連付けられたクリッピングパラメータを、ＣｌｉｐＰａｒａｍと呼ばれるビットストリームから信号通知／導出してもよく、上述のｋ（ｉ１，ｊ１）を、例えば２＊ＣｌｉｐＰａｒａｍのような信号通知されたクリッピングパラメータから導出する。
ｂ． 例えば、（ｉ，ｊ）∈Ｃが１つのフィルタ係数ｗ１（または／および１つのクリッピングパラメータｋ１）を共有し、ＣがＮ個の要素を含む場合、クリッピングは以下のように１回行われてもよい。

ここで、ｋ１は、Ｃに関連付けられたクリッピングパラメータであり、ｃｌｉｐＶａｌｕｅ＊ｗ１は、式（１４）における以下の項目を置き換えるために使用してもよい。

ｉ． さらに、代替的に、Ｉ（ｘ＋ｉ，ｙ＋ｊ）に関連付けられたクリッピングパラメータを、ＣｌｉｐＰａｒａｍと呼ばれるビットストリームから信号通知／導出してもよく、ｋ１を、例えばＮ＊ＣｌｉｐＰａｒａｍのような信号通知されたクリッピングパラメータから導出する。
ｉｉ． 代替的に、

を右シフトしてからクリップしてもよい。
ｃ． 一例において、クリッピングは、Ｎ個の近傍のサンプルのＭ１（Ｍ１＜＝Ｎ）に対して１回行ってもよい。
ｄ． 一例において、Ｎ個の近傍のサンプルをＭ２個のグループに分類し、各グループに対して１回クリッピングを行ってもよい。
ｅ． 一例において、この方法は、特定のまたはすべての色成分に適用してもよい。
ｉ． 例えば、輝度成分に適用してもよい。
ｉｉ． 例えば、Ｃｂおよび／またはＣｒ成分に適用してもよい。
３． 本開示では、入力をｍｉｎおよびｍａｘを含む［ｍｉｎ，ｍａｘ］の範囲にクリップするクリッピング関数Ｋ（ｍｉｎ，ｍａｘ，ｉｎｐｕｔ）を使用してもよい。
ａ． 一例において、入力を、ｍｉｎおよびｍａｘを除く範囲（ｍｉｎ，ｍａｘ）にクリップするクリッピング関数Ｋ（ｍｉｎ，ｍａｘ，ｉｎｐｕｔ）を、上記黒丸に使用してもよい。
ｂ． 一例において、上記黒丸において、ｍａｘを含むがｍｉｎを含まない範囲（ｍｉｎ，ｍａｘ）にあるように入力をクリップするクリッピング関数Ｋ（ｍｉｎ，ｍａｘ，ｉｎｐｕｔ）を使用してもよい。
ｃ． 一例において、上記黒丸において、ｍｉｎを含むがｍａｘを含まない範囲［ｍｉｎ，ｍａｘ］にあるように入力をクリップするクリッピング関数Ｋ（ｍｉｎ，ｍａｘ，ｉｎｐｕｔ）を使用してもよい。
４． 時間的ＡＬＦ係数セットが利用できない（例えば、前にＡＬＦ係数が符号化／復号化されていない、または符号化／復号化されたＡＬＦ係数が「利用不可能」とマークされている）場合、どの時間的ＡＬＦ係数セットが使用されるかを示す信号通知を省略してもよい。
ａ． 一例において、時間的ＡＬＦ係数セットが利用不可能な場合、ＣＴＢ／ブロック／タイルグループ／タイル／スライス／ピクチャに対して新しいＡＬＦ係数も固定ＡＬＦ係数も使用されない場合、ＣＴＢ／ブロック／タイルグループ／タイル／スライス／ピクチャに対してＡＬＦが許可されないと推測される。
ｉ． さらに、代替的に、この場合、ＣＴＢ／ブロック／タイルグループ／タイル／スライス／ピクチャに対してＡＬＦが適用されることが示されてもよいとしても（例えば、ＣＴＵ／ブロックに対してａｌｆ＿ｃｔｂ＿ｆｌａｇが真）、ＡＬＦは、ＣＴＢ／ブロック／タイルグループ／タイル／スライス／ピクチャに対して最終的に許可されないと推測されてもよい。
ｂ． 一例において、時間的ＡＬＦ係数セットが利用不可能な場合、適合ビットストリームにおけるＣＴＢ／ブロック／タイルグループ／タイル／スライス／ピクチャのために、新しいＡＬＦ係数または固定ＡＬＦ係数等のみを使用するように指示されてもよい。
ｉ． 例えば、ａｌｆ＿ｕｓｅ＿ｎｅｗ＿ｆｉｌｔｅｒまたはａｌｆ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒのいずれかが真であるとする。
ｃ． 一例において、時間的ＡＬＦ係数セットが利用不可能な場合、ＡＬＦの採用が指示されているＣＴＢ／ブロック／タイルグループ／タイル／スライス／ピクチャに対して、新規のＡＬＦ係数も固定のＡＬＦ係数も使用することが示されていない、という条件が満たされた場合、そのビットストリームは不適合ビットストリームと見なされる。
ｉ． 例えば、ａｌｆ＿ｕｓｅ＿ｎｅｗ＿ｆｉｌｔｅｒおよびａｌｆ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒの両方が偽であるビットストリームは、不適合ビットストリームと見なされる。
ｄ． 一例において、ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａが０である場合、ａｌｆ＿ｔｅｍｐｏｒａｌ＿ｉｎｄｅｘは信号通知されなくてもよい。
ｅ． 提案した方法は、異なる色成分に対して異なる方法で適用されてもよい。
５． １つのタイルグループ／タイル／スライス／ピクチャ／ＣＴＢ／ブロック／映像ユニットに対して何個の時間的ＡＬＦ係数セットを使用できるかは、使用可能な時間的ＡＬＦ係数セット（ＡＬＦ_ａｖａｉと示す）、例えば、「利用可能」とマークされた前に符号化／復号化されたＡＬＦ係数セットに依存してもよい。
ａ． 一例において、１つのタイルグループ／タイル／スライス／ピクチャ／ＣＴＢ／ブロックに対してＡＬＦ_ａｖａｉ以下の時間的ＡＬＦ係数セットを使用できる。
ｂ． １つのタイルグループ／タイル／スライス／ピクチャ／ＣＴＢ／ブロックに対して、Ｎ＞＝０として、ｍｉｎ（Ｎ，ＡＬＦ_ａｖａｉ）個以下の時間的ＡＬＦ係数セットを使用できる。例えば、Ｎ＝５である。
６． 新しいＡＬＦ係数セットは、符号化／復号化された後、“利用可能”とマークしてもよい。一方、すべての“利用可能な”ＡＬＦ係数セットは、イントラランダムアクセスポイント（ＩＲＡＰ）アクセスユニットまたは／およびＩＲＡＰピクチャ、または／および瞬時復号化リフレッシュ（ＩＤＲ）アクセスユニットまたは／およびＩＤＲピクチャに遭遇したときに、すべて“利用不可能”とマークしてもよい。
ａ． “利用可能な”ＡＬＦ係数セットは、後続の符号化ピクチャ／タイル／タイルグループ／スライス／ＣＴＢ／ブロックのための時間的ＡＬＦ係数セットとして使用してもよい。
ｂ． “利用可能な”ＡＬＦ係数セットは、Ｎに等しい最大サイズ（Ｎ＞０）の１つのＡＬＦ係数セットリストに保持してもよい。
ｉ． ＡＬＦ係数セットリストは、先入れ先出し順に保持してもよい。
ｃ． “利用不可能”とマークされている場合、関連するＡＬＦ ＡＰＳ情報をビットストリームから削除するか、または他のＡＬＦ ＡＰＳ情報に置き換える。
７． 各時間層に１つのＡＬＦ係数セットリストを保持してもよい。
８． Ｋ個の近傍の時間層に対して１つのＡＬＦ係数セットリストを保持してもよい。
９． 前のピクチャからの予測（表示順）のみを行うかどうかに基づいて、異なるピクチャごとに異なるＡＬＦ係数セットリストを保持してもよい。
ａ． 例えば、１つのＡＬＦ係数セットリストは、前のピクチャのみから予測されたピクチャに対して保持してもよい。
ｂ． 例えば、前のピクチャおよび後のピクチャの両方から予測されたピクチャに対して、１つのＡＬＦ係数セットリストを保持してもよい。
１０． ＡＬＦ係数セットリストは、ＩＲＡＰアクセスユニットおよび／またはＩＲＡＰピクチャおよび／またはＩＤＲアクセスユニットおよび／またはＩＤＲピクチャに遭遇した後、空にしてもよい。
１１． 異なる色成分に対して異なるＡＬＦ係数セットリストを保持してもよい。
ａ． 一例において、１つのＡＬＦ係数セットリストは、輝度成分のために保持される。
ｂ． 一例において、Ｃｂおよび／またはＣｒ成分のために、１つのＡＬＦ係数セットリストが保持される。
１２． １つのＡＬＦ係数セットリストを保持してもよいが、異なるピクチャ／タイルグループ／タイル／スライス／ＣＴＵに対して、リストにおけるエントリに異なるインデックス（または優先順位）を割り当ててもよい。
ａ． 一例において、ＡＬＦ係数セットには、現在のピクチャ／タイルグループ／タイル／スライス／ＣＴＵとの間の上り絶対時間層差のための上りインデックスが割り当てられてもよい。
ｂ． 一例において、ＡＬＦ係数セットは、現在のピクチャ／タイルグループ／タイル／スライス／ＣＴＵとの間に昇順絶対ＰＯＣ（ピクチャオーダカウント）差の昇順インデックスを割り当てられてもよい。
ｃ． 一例において、現在のピクチャ／タイルグループ／タイル／スライス／ＣＴＵによって許可されるＫ個のＡＬＦ係数セットが存在し、これらのＫ個のＡＬＦ係数セットは、最小のインデックスを有するＫ個のＡＬＦ係数セットであってもよい。
ｄ． 一例において、現在のピクチャ／タイルグループ／タイル／スライス／ＣＴＵがどの時間的ＡＬＦ係数セットを使用するかの指示は、リストにおける元のエントリインデックスの代わりに、割り当てられたインデックスに依存してもよい。
１３． ＡＬＦで使用される近傍のサンプルは、Ｋ（Ｋ＞＝１）個のグループに分類されてもよく、各グループに１つのクリッピングパラメータのセットが信号通知されてもよい。
１４． クリッピングパラメータは、特定のまたは全ての固定ＡＬＦフィルタセットに対して予め規定されてもよい。
ａ． 代替的に、現在のタイルグループ／スライス／ピクチャ／タイルによって使用される特定のまたはすべての固定フィルタセットに対して、クリッピングパラメータを信号通知してもよい。
ｉ． 一例において、クリッピングパラメータは、特定の色成分（例えば、輝度成分）についてのみ信号通知してもよい。
ｂ． 代替的に、固定ＡＬＦフィルタセットを使用する場合、クリッピングを行わなくてもよい。
ｉ． 一例において、クリッピングは、特定の色成分に対して行われてもよく、他の色成分に対して行われなくてもよい。
１５． クリッピングパラメータはＡＬＦ係数と共に記憶されてもよく、符号化されたＣＴＵ／ＣＵ／タイル／タイルグループ／スライス／ピクチャをフォローすることで継承してもよい。
ａ． 一例において、ＣＴＵ／ＣＵ／タイル／タイルグループ／スライス／ピクチャが時間的ＡＬＦ係数セットを使用する場合、対応するＡＬＦクリッピングパラメータを使用してもよい。
ｉ． 一例において、クリッピングパラメータは、特定の色成分（例えば、輝度成分）についてのみ継承してもよい。
ｂ． 代替的に、ＣＴＵ／ＣＵ／タイル／タイルグループ／スライス／ピクチャが時間的ＡＬＦ係数セットを使用する場合、クリッピングパラメータを信号通知してもよい。
ｉ． 一例において、クリッピングパラメータは、特定の色成分（例えば、輝度成分）についてのみ信号通知してもよい。
ｃ． 一例において、クリッピングパラメータは、特定の色成分に対して継承されてもよく、他の色成分に対して信号通知してもよい。
ｄ． 一例において、時間的ＡＬＦ係数セットが使用される場合、クリッピングは行われない。
ｉ． 一例において、クリッピングは、特定の色成分に対して行われてもよく、他の色成分に対して行われなくてもよい。
１６． 非線形ＡＬＦを使用するかどうかは、ＡＬＦフィルタセットのタイプ（例えば、固定ＡＬＦフィルタセット、時間的ＡＬＦフィルタセット、または信号通知ＡＬＦ係数セット）に依存してもよい。
ａ． 一例において、現在のＣＴＵが固定ＡＬＦフィルタセットまたは時間的ＡＬＦフィルタセット（別名、前に信号通知されたフィルタセットが使用される）を使用する場合、非線形ＡＬＦは、現在のＣＴＵに使用されなくてもよい。
ｂ． 一例において、ａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇが１である場合、現在のスライス／タイルグループ／タイル／ＣＴＵに対して非線形ＡＬＦを使用してもよい。
１７． 非線形ＡＬＦクリッピングパラメータは、ＡＬＦフィルタセットの種類（例えば、固定ＡＬＦフィルタセット、時間的ＡＬＦフィルタセット、または信号通知されたＡＬＦ係数セット）に基づいて、条件付きで信号通知してもよい。
ａ． 一例において、非線形ＡＬＦクリッピングパラメータは、すべてのＡＬＦフィルタセットに対して信号通知してもよい。
ｂ． 一例において、非線形ＡＬＦクリッピングパラメータは、信号通知されたＡＬＦフィルタ係数セットに対してのみ信号通知してもよい。
ｃ． 一例において、非線形ＡＬＦクリッピングパラメータは、固定ＡＬＦフィルタ係数セットに対してのみ信号通知してもよい。

上述した例は、以下に説明する方法、例えば、方法１１１０，１１２０，１１３０，１１４０，１１５０および１１６０のコンテキストに含まれてもよく、これらの方法は、映像デコーダおよび／または映像エンコーダにおいて実装されてもよい。

図１１Ａは、例示的な映像処理方法のフローチャートを示す。方法１１１０は、動作１１１２において、映像の現在の映像ブロックに対して、フィルタ係数を使用し、少なくとも１つの中間結果を伴う２つ以上の演算を含むフィルタリング処理を行うことを含む。

方法１１１０は、動作１１１４において、前記少なくとも１つの中間結果にクリッピング演算を適用することを含む。

方法１１１０は、動作１１１６において、少なくとも１つの中間結果に基づいて、前記現在の映像ブロックと前記映像のビットストリーム表現との間での変換を行うこととを含む。いくつかの実施形態において、前記少なくとも１つの中間結果は、前記フィルタ係数の重み付けの合計と、前記現在の映像ブロックの現在のサンプルと前記現在のサンプルの近傍のサンプルとの間の差とに基づく。

図１１Ｂは、例示的な映像処理方法のフローチャートを示す。方法１１２０は、動作１１２２において、映像の現在の映像ブロックを映像のビットストリーム表現に符号化することを含み、現在の映像ブロックは、適応ループフィルタ（ＡＬＦ）で符号化される。

方法１１２０は、動作１１２４において、時間的適応フィルタの１つ以上の集合の可用性または使用に基づいて、前記ビットストリーム表現における前記時間的適応フィルタの前記１つ以上の集合内の時間的適応フィルタの集合の指示を選択的に含むことと、を含む。

図１１Ｃは、例示的な映像処理方法のフローチャートを示す。この方法１１３０は、動作１１３２において、映像のビットストリーム表現における時間的適応フィルタのセットの指示に基づいて、適応ループフィルタ（ＡＬＦ）で符号化される映像の現在の映像ブロックに適用可能な時間的適応フィルタの前記セットを備える１つ以上のセットの前記時間的適応フィルタの可用性または使用を判定することを含む。

方法１１３０は、動作１１３４において、前記判定することに基づいて、時間的適応フィルタの前記セットを選択的に適用することによって、前記ビットストリーム表現から復号化された現在の映像ブロックを生成することを含む。

図１１Ｄは、例示的な映像処理方法のフローチャートを示す。この方法１１４０は、動作１１４２において、適応ループフィルタで符号化された現在の映像ブロックに対して、利用可能な時間ＡＬＦ係数セットに基づいて、時間的適応ループフィルタリング（ＡＬＦ）係数セットの数を判定することを含み、前記利用可能な時間ＡＬＦ係数セットは、前記判定する前に符号化または復号化されており、前記ＡＬＦ係数セットの数は、前記現在の映像ブロックを構成するタイルグループ、タイル、スライス、ピクチャ、符号化ツリーブロック（ＣＴＢ）、または映像ユニットに使用される。

方法１１４０は、動作１１４４において、時間的ＡＬＦ係数セットの前記数に基づいて、前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現の間での変換を行うことを含む。

図１１Ｅは、例示的な映像処理方法のフローチャートを示す。この方法１１５０は、動作１１５２において、映像の現在の映像ブロックと前記映像のビットストリーム表現との間での変換のために、前記映像の映像領域のヘッダにおける適応ループフィルタリング（ＡＬＦ）の指示が、前記ビットストリーム表現に関連付けられた適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットにおけるＡＬＦの指示と等しいことを判定することを含む。

方法１１５０は、動作１１５４において、変換を行うことを含む。

図１１Ｆは、例示的な映像処理方法のフローチャートを示す。この方法１１６０は、動作１１６２において、現在の映像ブロックと前記映像のビットストリーム表現との間での変換のために、前記映像の映像領域で使用される適応ループフィルタのタイプに基づいて、非線形適応ループフィルタリング（ＡＬＦ）動作を選択的に有効化することを含む。

この方法１１６０は、動作１１６４において、前記選択的に有効化した後に、前記変換を行うことを含む。

１０ 開示される技術の例示的な実装形態
１０．１ 実施形態＃１
輝度およびクロマそれぞれについて１つのＡＬＦ係数セットリストが保持され、２つのリストのサイズがそれぞれｌｕｍａＡＬＦＳｅｔＳｉｚｅおよびｃｈｒｏｍａＡＬＦＳｅｔＳｉｚｅであるとする。ＡＬＦ係数セットリストの最大サイズは、それぞれｌｕｍａＡＬＦＳｅｔＭａｘ（例えば、ｌｕｍａＡＬＦＳｅｔＭａｘが５に等しい）およびｃｈｒｏｍａＡＬＦＳｅｔＭａｘ（例えば、ｃｈｒｏｍａＡＬＦＳｅｔＭａｘが５に等しい）である。

新規に追加された部品は、二重の太い大括弧で囲まれ、即ち、｛｛ａ｝｝は、“ａ”が追加されており、且つ、削除された部品は、二重の角括弧で囲まれ、即ち、［［ａ］］は、“ａ”が削除されていることを意味する。
７．３．３．２ 適応ループフィルタデータ構文

７．３．４．２ 符号化ツリーユニット構文

ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａが１に等しい場合、新しい輝度フィルタセットが信号通知されることを指定する。ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａが０に等しい場合、新しい輝度フィルタセットが信号通知されないことを示す。存在しない場合、０である。
ａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇが１に等しい場合、適応ループフィルタに信号通知するのに固定フィルタセットを使用することを示す。ａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇが０に等しい場合、適応ループフィルタを信号通知するのに固定フィルタ使用ないことを示す。
ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａは、現在のスライスに使用できる利用可能な時間的フィルタセットの数を示す。この数は０［［５］］｛｛ｌｕｍａＡＬＦＳｅｔＳｉｚｅ｝｝であり得る。存在しない場合、０である。
｛｛ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａが０のとき、ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａまたはａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇのどちらかが１にならなければならないという制約がある。｝｝
ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが１に等しい場合、新しいクロマフィルタが信号通知されることを指定する。ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが０に等しい場合、新しいクロマフィルタが信号通知されないことを示す。
｛｛ｃｈｒｏｍａＡＬＦＳｅｔＳｉｚｅが０の時にａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが１にならないといけないという制約がある。｝｝

１０．２ 実施形態＃２
輝度およびクロマそれぞれについて１つのＡＬＦ係数セットリストが保持され、２つのリストのサイズがそれぞれｌｕｍａＡＬＦＳｅｔＳｉｚｅおよびｃｈｒｏｍａＡＬＦＳｅｔＳｉｚｅであるとする。ＡＬＦ係数セットリストの最大サイズは、それぞれｌｕｍａＡＬＦＳｅｔＭａｘ（例えば、ｌｕｍａＡＬＦＳｅｔＭａｘが５に等しい）およびｃｈｒｏｍａＡＬＦＳｅｔＭａｘ（例えば、ｃｈｒｏｍａＡＬＦＳｅｔＭａｘが５に等しい）である。

新規に追加された部品は、二重の太い大括弧で囲まれ、即ち、｛｛ａ｝｝は、“ａ”が追加されており、且つ、削除された部品は、二重の角括弧で囲まれ、即ち、［［ａ］］は、“ａ”が削除されていることを意味する。
７．３．３．２ 適応ループフィルタデータ構文

７．３．４．２ 符号化ツリーユニット構文

ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａが１に等しい場合、新しい輝度フィルタセットが信号通知されることを指定する。ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａが０に等しい場合、新しい輝度フィルタセットが信号通知されないことを示す。存在しない場合、０である。
ａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇが１に等しい場合、適応ループフィルタに信号通知するのに固定フィルタセットを使用することを示す。ａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇが０に等しい場合、適応ループフィルタを信号通知するのに固定フィルタ使用ないことを示す。
ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａは、現在のスライスに使用できる利用可能な時間的フィルタセットの数を示し、この数は０［［５］］｛｛ｌｕｍａＡＬＦＳｅｔＳｉｚｅ｝｝であり得る。存在しない場合、０である。
｛｛ａｌｆ＿ｎｕｍ＿ａｖａｉｌａｂｌｅ＿ｔｅｍｐｏｒａｌ＿ｆｉｌｔｅｒ＿ｓｅｔｓ＿ｌｕｍａが０のとき、ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｌｕｍａまたはａｌｆ＿ｌｕｍａ＿ｕｓｅ＿ｆｉｘｅｄ＿ｆｉｌｔｅｒ＿ｆｌａｇのどちらかが１にならなければならないという制約がある。｝｝
ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが１に等しい場合、新しいクロマフィルタが信号通知されることを指定する。ａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが０に等しい場合、新しいクロマフィルタが信号通知されないことを示す。
｛｛ｃｈｒｏｍａＡＬＦＳｅｔＳｉｚｅが０の時にａｌｆ＿ｓｉｇｎａｌ＿ｎｅｗ＿ｆｉｌｔｅｒ＿ｃｈｒｏｍａが１にならないといけないという制約がある。｝｝

いくつかの実施形態において、下記のような技術的解決策を実装することができる。

Ａ１．映像の現在の映像ブロックに対して、フィルタ係数を使用し、少なくとも１つの中間結果を伴う２つ以上の演算を含むフィルタリング処理を行うことと、前記少なくとも１つの中間結果にクリッピング演算を適用することと、前記少なくとも１つの中間結果に基づいて、前記現在の映像ブロックと前記映像のビットストリーム表現との間での変換を行うこととを含み、前記少なくとも１つの中間結果は、前記フィルタ係数の重み付けの合計と、前記現在の映像ブロックの現在のサンプルと前記現在のサンプルの近傍のサンプルとの間の差とに基づく、映像処理方法。

Ａ２．前記現在のサンプルに対して、前記現在のサンプルの近傍のサンプルを複数のグループに分類することをさらに含み、前記複数のグループの各々における中間結果に異なるパラメータを使用して前記クリッピング演算を適用する、解決策Ａ１に記載の方法。

Ａ３．前記少なくとも１つの中間結果は、前記現在のサンプルと前記複数のグループの各々における前記近傍のサンプルとの間の差の重み付け平均を含む、解決策Ａ２に記載の方法。

Ａ４．前記現在の映像ブロックのサンプルの複数の近傍のサンプルが１つのフィルタ係数を共有し、前記複数の近傍のサンプルの各々に１回の前記クリッピング演算を適用する、解決策Ａ１に記載の方法。

Ａ５．前記複数の近傍のサンプルのうちの少なくとも２つのサンプルの位置が、前記現在の映像ブロックの前記サンプルに対して対称である、解決策Ａ４に記載の方法。

Ａ６．前記フィルタリング処理に関連付けられたフィルタ形状が対称モードである、解決策Ａ４またはＡ５に記載の方法。

Ａ７．前記クリッピング演算の１つ以上のパラメータが前記ビットストリーム表現で信号通知される解決策Ａ４～Ａ６のいずれかに記載の方法。

Ａ８．前記現在の映像ブロックのサンプルがＮ個の近傍のサンプルを含み、前記Ｎ個の近傍のサンプルのＭ１個の近傍のサンプルにクリッピング演算を１回適用し、Ｍ１およびＮは正の整数であり、Ｍ１≦Ｎである、解決策Ａ１に記載の方法。

Ａ９．前記現在の映像ブロックのサンプルに対して、前記サンプルのＮ個の近傍のサンプルをＭ２個のグループに分類することをさらに含み、前記クリッピング演算は、前記Ｍ２個のグループの各々に１回適用され、Ｍ２およびＮは、正の整数である、解決策Ａ１に記載の方法。

Ａ１０．前記クリッピング演算は、前記現在の映像ブロックに関連付けられた輝度成分に適用される、解決策Ａ１に記載の方法。

Ａ１１．前記クリッピング演算は、現在の映像ブロックに関連付けられたＣｂ成分またはＣｒ成分に適用される、解決策Ａ１に記載の方法。

Ａ１２．前記クリッピング演算は、Ｋ（ｍｉｎ，ｍａｘ，ｉｎｐｕｔ）として定義され、式中、ｉｎｐｕｔは、前記クリッピング演算への入力であり、ｍｉｎは、前記クリッピング演算の出力の公称最小値であり、ｍａｘは、前記クリッピング演算の出力の公称最大値である、解決策Ａ１～Ａ１１のいずれかに記載の方法。

Ａ１３．前記クリッピング演算の出力の実際の最大値が前記公称最大値よりも小さく、かつ前記クリッピング演算の出力の実際の最小値が前記公称最小値よりも大きい、解決策Ａ１２に記載の方法。

Ａ１４．前記クリッピング演算の出力の実際の最大値が前記公称最大値と等しく、かつ前記クリッピング演算の出力の実際の最小値が前記公称最小値よりも大きい、解決策Ａ１２に記載の方法。

Ａ１５．前記クリッピング演算の出力の実際の最大値が前記公称最大値よりも小さく、かつ前記クリッピング演算の出力の実際の最小値が前記公称最小値と等しい、解決策Ａ１２に記載の方法。

Ａ１６．前記クリッピング演算の出力の実際の最大値が前記公称最大値と等しく、かつ前記クリッピング演算の出力の実際の最小値が前記公称最小値と等しい、解決策Ａ１２に記載の方法。

Ａ１７．前記フィルタリング処理は、複数のＡＬＦフィルタ係数セットで構成される適応ループフィルタリング（ＡＬＦ）処理を含む、解決策Ａ１に記載の方法。

Ａ１８．前記複数のＡＬＦフィルタ係数セットのうちの１つ以上のＡＬＦフィルタ係数セットに対して、前記クリッピング演算のための少なくとも１つのパラメータを予め規定する、解決策Ａ１７に記載の方法。

Ａ１９．前記現在の映像ブロックを構成するタイルグループ、スライス、ピクチャまたはタイルのビットストリーム表現において、前記クリッピング演算のための少なくとも１つのパラメータを信号通知する、解決策Ａ１７に記載の方法。

Ａ２０．前記少なくとも１つのパラメータは、現在の映像ブロックに関連付けられた１つ以上の色成分のみに対して信号通知される、解決策Ａ１９に記載の方法。

Ａ２１．前記複数のＡＬＦフィルタ係数セットのうちの少なくとも１つと、前記クリッピング演算のための１つ以上のパラメータとが、同じ記憶位置に記憶され、かつ、前記複数のＡＬＦフィルタ係数セットのうちの前記少なくとも１つ以上または、前記１つ以上のパラメータが、前記現在の映像ブロックを含む符号化ツリーユニット（ＣＴＵ）、符号化ユニット（ＣＵ）、タイル、タイルグループ、スライス、またはピクチャによって継承される、解決策Ａ１７に記載の方法。

Ａ２２．前記クリッピング演算は、現在の映像ブロックを構成するＣＴＵ、ＣＵ、タイル、タイルグループ、スライス、またはピクチャのフィルタリング処理に時間的ＡＬＦ係数セットを使用すると判定された場合、複数のＡＬＦフィルタ係数セットの時間的ＡＬＦ係数セットに対応する１つ以上のパラメータを使用するように構成される、解決策Ａ２１に記載の方法。

Ａ２３．時間的ＡＬＦ係数セットに対応する１つ以上のパラメータは、現在の映像ブロックに関連付けられた１つ以上の色成分に対してのみ使用される、解決策Ａ２２に記載の方法。

Ａ２４．前記複数のＡＬＦフィルタ係数セットの時間的ＡＬＦ係数セットに対応する１つ以上のパラメータは、時間的ＡＬＦ係数セットが、現在の映像ブロックを構成する前記ＣＴＵ、前記ＣＵ、前記タイル、前記タイルグループ、前記スライス、または前記ピクチャのフィルタリング処理で使用されていると判定されたときに、前記ビットストリーム表現で信号通知される、解決策Ａ２１に記載の方法。

Ａ２５．前記時間的ＡＬＦ係数セットに対応する前記１つ以上のパラメータは、前記現在の映像ブロックに関連付けられた１つ以上の色成分に対してのみ信号通知される、解決策Ａ２４に記載の方法。

Ａ２６．前記現在の映像ブロックに関連付けられた第１の色成分のための前記１つ以上のパラメータの第１のセットのパラメータを信号通知し、前記現在の映像ブロックに関連付けられた第２の色成分のための前記１つ以上のパラメータの第２のセットのパラメータを継承する、解決策Ａ２１に記載の方法。

Ａ２７．前記変換は、前記ビットストリーム表現から前記現在のブロックを生成する、解決策Ａ１～Ａ２６のいずれかに記載の方法。

Ａ２８．前記変換は、前記現在の映像ブロックから前記ビットストリーム表現を生成することを含む、解決策Ａ１～Ａ２６のいずれかに記載の方法。

Ａ２９．処理装置と、その処理装置に命令が記憶された非一時的メモリとを備える装置であって、命令が処理装置によって実装されることにより、処理装置に、解決策Ａ１～Ａ２８のいずれかに記載の方法を実施させる映像システムの装置。

Ａ３０．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラム製品であって、解決策Ａ１～Ａ２８のいずれかに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラム製品。

いくつかの実施形態において、下記のような技術的解決策を実装することができる。

Ｂ１．映像の現在の映像ブロックを前記映像のビットストリーム表現に符号化することであって、前記現在の映像ブロックは、適応ループフィルタ（ＡＬＦ）で符号化される、符号化することと、時間的適応フィルタの１つ以上のセットの可用性または使用に基づいて、前記ビットストリーム表現における前記時間的適応フィルタの前記１つ以上のセット内の時間的適応フィルタのセットの指示を選択的に含むことと、を含む、映像処理方法。

Ｂ２．前記時間的適応フィルタのセットが利用不可能な場合、前記セットの指示を前記ビットストリーム表現から排除する、解決策Ｂ１に記載の方法。

Ｂ３．前記時間的適応フィルタのセットが利用不可能な場合、前記セットの指示を前記ビットストリーム表現に含める、解決策Ｂ１またはＢ２に記載の方法。前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でない場合、この指示はビットストリーム表現から除外される、解決策Ｂ１～Ｂ３のいずれかに記載の方法。

Ｂ４．前記１つ以上の時間的適応フィルタのセットの各々が、１つのフィルタインデックスに関連付けられる、解決策Ｂ１～Ｂ３のいずれかに記載の方法。

Ｂ５．前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でない場合、固定フィルタを使用する指示は真に等しいものとする、解決策Ｂ１～Ｂ３のいずれかに記載の方法。

Ｂ６．前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でない場合、時間的適応フィルタを使用する指示は偽に等しいものとする、解決策Ｂ１～Ｂ３のいずれかに記載の方法。

Ｂ７．前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でない場合、固定フィルタのインデックスの指示がビットストリーム表現に含まれる、解決策Ｂ１～Ｂ３のいずれかに記載の方法。

Ｂ８．映像のビットストリーム表現における時間的適応フィルタのセットの指示に基づいて、適応ループフィルタ（ＡＬＦ）で符号化される映像の現在の映像ブロックに適用可能な時間的適応フィルタの前記セットを備える１つ以上のセットの前記時間的適応フィルタの可用性または使用を判定することと、前記判定することに基づいて、時間的適応フィルタの前記セットを選択的に適用することによって、前記ビットストリーム表現から復号化された現在の映像ブロックを生成することと、を含む、映像処理方法。

Ｂ９．前記時間的適応フィルタのセットが利用不可能な場合、前記生成は、前記時間的適応フィルタのセットを適用せずに行われる、解決策Ｂ８に記載の方法。

Ｂ１０．前記時間的適応フィルタのセットが利用不可能な場合、前記生成を行うことは、前記時間的適応フィルタのセットを適用することを含む、解決策Ｂ８またはＢ９に記載の方法。

Ｂ１１．前記１つ以上の時間的適応フィルタのセットが１つの適応パラメータセット（ＡＰＳ）に含まれ、前記指示が１つのＡＰＳインデックスである、解決策Ｂ１～Ｂ１０のいずれかに記載の方法。

Ｂ１２．異なる方向の勾配計算に基づいて、１つ以上の時間的適応フィルタのセットのうちの少なくとも１つの時間的適応フィルタのためのフィルタインデックスを判定することをさらに含む、解決策Ｂ１～Ｂ１０のいずれかに記載の方法。

Ｂ１３．前記時間的適応フィルタの１つ以上のセットのいずれも利用可能でなく、かつ新しいＡＬＦ係数セットおよび固定ＡＬＦ係数セットが、前記現在の映像ブロックを構成する符号化ツリーブロック（ＣＴＢ）、ブロック、タイルグループ、タイル、スライス、またはピクチャにおいて使用されないことを判定することと、前記判定に基づいて、適応ループフィルタリングが無効であると推論することと、をさらに含む、解決策Ｂ１～Ｂ１１のいずれかに記載の方法。

Ｂ１４．前記ビットストリーム表現は、前記１つ以上のセットの時間的適応フィルタの少なくとも１つが利用不可能であることに呼応して、新しいＡＬＦ係数セットの使用の第１の指示と、固定ＡＬＦ係数セットの使用の第２の指示とを含み、第１の指示と第２の指示のうちの１つが正確に前記ビットストリーム表現において真である、解決策Ｂ１～Ｂ１１のいずれかに記載の方法。

Ｂ１５．前記ビットストリーム表現は、前記ＡＬＦの演算に関連付けられたフォーマット規則に準拠する、解決策Ｂ１４に記載の方法。

Ｂ１６．前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でないことに呼応して、前記ビットストリーム表現は、前記ＡＬＦが有効化されていること、および新しいＡＬＦ係数セットおよび固定ＡＬＦ係数セットが、前記現在の映像ブロックを構成する符号化ツリーブロック（ＣＴＢ）、ブロック、タイルグループ、タイル、スライス、またはピクチャにおいて使用されないことを示す指示を含む、解決策Ｂ１～Ｂ１１のいずれかに記載の方法。

Ｂ１７．前記ビットストリーム表現は、前記ＡＬＦの動作に関連付けられたフォーマット規則に準拠しない、解決策Ｂ１６に記載の方法。

Ｂ１８．前記ＡＬＦが、現在の映像ブロックに関連付けられた１つ以上の色成分に適用される、解決策Ｂ１～Ｂ１７のいずれかに記載の方法。

Ｂ１９．適応ループフィルタで符号化された現在の映像ブロックに対して、利用可能な時間的ＡＬＦ係数セットに基づいて、時間的適応ループフィルタリング（ＡＬＦ）係数セットの数を判定することであって、前記利用可能な時間的ＡＬＦ係数セットは、前記判定する前に符号化または復号化されており、前記ＡＬＦ係数セットの数は、前記現在の映像ブロックを構成するタイルグループ、タイル、スライス、ピクチャ、符号化ツリーブロック（ＣＴＢ）、または映像ユニットに使用される、判定することと、時間的ＡＬＦ係数セットの前記数に基づいて、前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現の間での変換を行うことと、を含む、映像処理方法。

Ｂ２０．時間的ＡＬＦ係数セットの数の最大数が、利用可能な時間的ＡＬＦ係数セットの数に等しく設定される、解決策Ｂ１９に記載の方法。

Ｂ２１．前記時間的ＡＬＦ係数セットの数は、利用可能な時間的ＡＬＦ係数セットの数と予め規定された数Ｎとのうちの小さい方に等しく設定され、ここで、Ｎは整数であり、Ｎ≧０である、解決策Ｂ２０に記載の方法。

Ｂ２２．Ｎ＝５である、解決策Ｂ２１に記載の方法。

Ｂ２３．映像の現在の映像ブロックと映像のビットストリーム表現との間での変換の一部として、１つ以上の新しい適応ループフィルタリング（ＡＬＦ）係数セットを処理することであって、現在の映像ブロックが適応ループフィルタで符号化される、処理することと、前記処理の後に、この１つ以上の新しいＡＬＦ係数セットを利用可能なＡＬＦ係数セットとして指定することと、を含む、映像処理方法。

Ｂ２４．イントラランダムアクセスポイント（ＩＲＡＰ）アクセスユニット、ＩＲＡＰ ピクチャ、瞬時復号化リフレッシュ（ＩＤＲ）アクセスユニット、またはＩＤＲ ピクチャに遭遇することと、前記遭遇したことに基づいて、前記利用可能なＡＬＦ係数セットを、利用不可能なＡＬＦ係数セットとして指定することと、をさらに含む解決策Ｂ２３に記載の方法。

Ｂ２５．前記利用可能なＡＬＦ係数セットのうちの少なくとも１つは、前記現在の映像ブロックの後続の映像ブロックのための時間的ＡＬＦ係数セットである、解決策Ｂ２３またはＢ２４に記載の方法。

Ｂ２６．前記利用可能なＡＬＦ係数セットが、最大サイズがＮであるＡＬＦ係数セットリストに保持され、ここで、Ｎが整数である、解決策Ｂ２３～Ｂ２５のいずれかに記載の方法。

Ｂ２７．前記ＡＬＦ係数セットリストは、先入れ先出し（ＦＩＦＯ）の順序で保持される、解決策Ｂ２６に記載の方法であって、方法。

Ｂ２８．前記現在の映像ブロックに関連付けられた各時間層に１つのＡＬＦ係数セットリストを保持する、解決策Ｂ１～Ｂ２７のいずれかに記載の方法。

Ｂ２９．前記現在の映像ブロックに関連付けられたＫ個の近傍の時間層ごとに１つのＡＬＦ係数セットリストを保持する、解決策Ｂ１～Ｂ２７のいずれかに記載の方法。

Ｂ３０．前記現在の映像ブロックを含む現在のピクチャのために第１のＡＬＦ係数セットリストを保持し、前記現在のピクチャの後続のピクチャのために第２のＡＬＦ係数セットリストを保持する、解決策Ｂ１～Ｂ２７のいずれかに記載の方法。

Ｂ３１．前記現在のピクチャに基づいて、前記現在のピクチャに続く前記ピクチャ画像を予測し、前記第１のＡＬＦ係数セットリストが前記第２のＡＬＦ係数セットリストと同じである、解決策Ｂ３０に記載の方法。

Ｂ３２．前記現在のピクチャに続く前記ピクチャおよび前記現在のピクチャの前のピクチャに基づいて、現在のピクチャを予測し、前記第１のＡＬＦ係数セットリストが前記第２のＡＬＦ係数セットリストと同じである、解決策Ｂ３０に記載の方法。

Ｂ３３．イントラランダムアクセスポイント（ＩＲＡＰ）アクセスユニット、ＩＲＡＰ ピクチャ、瞬時復号化リフレッシュ（ＩＤＲ）アクセスユニット、またはＩＤＲピクチャに遭遇することと、前記遭遇した後に、１つ以上のＡＬＦ係数セットリストを空にすること、をさらに含む解決策Ｂ２３に記載の方法。

Ｂ３４．現在の映像ブロックに関連付けられた異なる色成分について、異なるＡＬＦ係数セットリストを保持する、解決策Ｂ２３に記載の方法。

Ｂ３５．前記異なる色成分は、輝度成分、Ｃｒ成分、およびＣｂ成分のうちの１つ以上を含む、解決策Ｂ３４に記載の方法。

Ｂ３６．複数のピクチャ、タイルグループ、タイル、スライス、または符号化ツリーユニット（ＣＴＵ）に対して１つのＡＬＦ係数セットリストを保持し、前記１つのＡＬＦ係数セットリストのインデックス付けは、前記複数のピクチャ、タイルグループ、タイル、スライス、または符号化ツリーユニット（ＣＴＵ）の各々に対して異なる、解決策Ｂ２３に記載の方法。

Ｂ３７．前記インデックス付けは、昇順であり、前記現在の映像ブロックに関連付けられた第１の時間層インデックスと、前記現在の映像ブロックを構成する現在のピクチャ、タイルグループ、タイル、スライス、または符号化ツリーユニット（ＣＴＵ）に関連付けられた第２の時間層インデックスとに基づいている、解決策Ｂ３６に記載の方法。

Ｂ３８．前記インデックス付けは、昇順であり、前記現在の映像ブロックに関連付けられたピクチャオーダカウント（ＰＯＣ）と、前記現在の映像ブロックを構成する現在のピクチャ、タイルグループ、タイル、スライス、または符号化ツリーユニット（ＣＴＵ）に関連付けられた第２のＰＯＣとに基づいている、解決策Ｂ３６に記載の方法。

Ｂ３９．前記インデックス付けは、前記利用可能なＡＬＦ係数セットに割り当てられる最小のインデックスを含む、解決策Ｂ３６に記載の方法。

Ｂ４０．前記変換は、クリッピング演算を含み、前記方法は、現在の映像ブロックのサンプルに対して、前記サンプルの近傍のサンプルを複数のグループに分類することと、ビットストリーム表現で信号通知された単一のパラメータのセットを使用して、前記複数のグループの各々についてのクリッピング演算を行うことと、をさらに含む、解決策Ｂ２３に記載の方法。

Ｂ４１．前記変換は、クリッピング演算を含み、前記クリッピング演算のための１つのパラメータのセットが、前記１つ以上の新しいＡＬＦ係数セットに対して予め規定される、解決策Ｂ２３に記載の方法。

Ｂ４２．前記変換は、クリッピング演算を含み、前記クリッピング演算のための１つのパラメータのセットが、前記１つ以上の新しいＡＬＦ係数セットに対して前記ビットストリーム表現で信号通知される、解決策Ｂ２３に記載の方法。

Ｂ４３．映像の現在の映像ブロックと前記映像のビットストリーム表現との間での変換のために、前記映像の映像領域のヘッダにおける適応ループフィルタリング（ＡＬＦ）の指示が、前記ビットストリーム表現に関連付けられた適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットにおけるＡＬＦの指示と等しいことを判定することと、前記変換を行うことと、を含む、映像処理方法。

Ｂ４４．前記映像領域は１つのピクチャである、解決策Ｂ４３に記載の方法。

Ｂ４５．前記映像領域は１つのスライスである、解決策Ｂ４３に記載の方法。

Ｂ４６．現在の映像ブロックと前記映像のビットストリーム表現との間での変換のために、前記映像の映像領域で使用される適応ループフィルタのタイプに基づいて、非線形適応ループフィルタリング（ＡＬＦ）動作を選択的に有効化することと、前記選択的に有効化した後に、前記変換を行うことを含む、映像処理方法。

Ｂ４７．前記映像領域は符号化ツリーユニット（ＣＴＵ）であり、前記適応ループフィルタのタイプが固定ＡＬＦセットまたは時間的ＡＬＦセットを含むと判定されると、前記非線形ＡＬＦ動作は無効化される、解決策Ｂ４６に記載の方法。

Ｂ４８．前記映像領域は、スライス、タイルグループ、タイルまたは符号化ツリーユニット（ＣＴＵ）であり、前記非線形ＡＬＦ動作は、前記適応ループフィルタのタイプが固定ＡＬＦセットを含むと判定されると、有効化される、解決策Ｂ４６に記載の方法。

Ｂ４９．前記非線形ＡＬＦ動作のためのビットストリーム表現において、１つ以上のクリッピングパラメータを選択的に信号通知することをさらに含む、解決策Ｂ４６に記載の方法。

Ｂ５０．前記１つ以上のクリッピングパラメータが信号通知される、解決策Ｂ４９に記載の方法。

Ｂ５１．前記１つ以上のクリッピングパラメータは、前記ビットストリーム表現で信号通知されるＡＬＦフィルタ係数セットに対して信号通知される、解決策Ｂ４９に記載の方法。

Ｂ５２．前記適応ループフィルタのタイプが固定ＡＬＦセットを含むと判定されると、前記１つ以上のクリッピングパラメータが信号通知される、解決策Ｂ４９に記載の方法。

Ｂ５３．前記変換は、前記ビットストリーム表現から前記現在のブロックを生成する、解決策Ｂ１９～Ｂ５２のいずれかに記載の方法。

Ｂ５４．前記変換は、前記現在の映像ブロックから前記ビットストリーム表現を生成することを含む、解決策Ｂ１９～Ｂ５２のいずれかに記載の方法。

Ｂ５５．処理装置と、その処理装置に命令が記憶された非一時的メモリとを備える装置であって、命令が処理装置によって実装されることにより、処理装置に、解決策Ｂ１～Ａ５４のいずれかに記載の方法を実施させる映像システムの装置。

Ｂ５６．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラム製品であって、解決策Ｂ１～Ｂ５４のいずれかに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラム製品。

いくつかの実施形態において、下記のような技術的解決策を実装することができる。

Ｃ１．現在の映像ブロックに対して、少なくとも１つの中間結果を伴う２つ以上の演算を含むフィルタリング処理を行うことと、前記少なくとも１つの中間結果にクリッピング演算を適用することと、前記フィルタリング演算に基づいて、前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との間での変換を行うこと、を含む映像処理方法。

Ｃ２．前記現在の映像ブロックのサンプルに対して、前記サンプルのうちの近傍のサンプルを複数のグループに分類することをさらに含み、前記複数のグループの各々における中間結果に異なるパラメータを使用して前記クリッピング演算を適用する、解決策Ｃ１に記載の方法。

Ｃ３．前記少なくとも１つの中間結果は、前記現在のサンプルと前記複数のグループの各々における前記近傍のサンプルとの間の差の重み付け平均を含む、解決策Ｃ２に記載の方法。

Ｃ４．前記フィルタリング処理は、フィルタ係数を使用し、前記少なくとも１つの中間結果は、前記フィルタ係数と、前記現在のサンプルと前記近傍のサンプルとの間の差との重み付けの合計を含む、解決策Ｃ２に記載の方法。

Ｃ５．前記現在の映像ブロックのサンプルのうちの複数の近傍のサンプルがフィルタ係数を共有し、前記複数の近傍のサンプルの各々に１回のクリッピング演算を適用する、解決策Ｃ１に記載の方法。

Ｃ６．前記フィルタリング演算に関連付けられたフィルタ形状が対称モードである、解決策Ｃ５に記載の方法。

Ｃ７．前記クリッピング演算の１つ以上のパラメータが前記ビットストリーム表現で信号通知される解決策Ｃ５またはＣ６に記載の方法。

Ｃ８．前記クリッピング演算は、Ｋ（ｍｉｎ，ｍａｘ，ｉｎｐｕｔ）として定義され、式中、ｉｎｐｕｔは、前記クリッピング演算への入力であり、ｍｉｎは、前記クリッピング演算の出力の公称最小値であり、ｍａｘは、前記クリッピング演算の出力の公称最大値である、解決策Ｃ１～Ｃ７のいずれかに記載の方法。

Ｃ９．前記クリッピング演算の出力の実際の最大値が前記公称最大値よりも小さく、かつ前記クリッピング演算の出力の実際の最小値が前記公称最小値よりも大きい、解決策Ｃ８に記載の方法。

Ｃ１０．前記クリッピング演算の出力の実際の最大値が前記公称最大値と等しく、かつ前記クリッピング演算の出力の実際の最小値が前記公称最小値よりも大きい、解決策Ｃ８に記載の方法。

Ｃ１１．前記クリッピング演算の出力の実際の最大値が前記公称最大値よりも小さく、かつ前記クリッピング演算の出力の実際の最小値が前記公称最小値と等しい、解決策Ｃ８に記載の方法。

Ｃ１２．前記クリッピング演算の出力の実際の最大値が前記公称最大値と等しく、かつ前記クリッピング演算の出力の実際の最小値が前記公称最小値と等しい、解決策Ｃ８に記載の方法。

Ｃ１３．時間的適応ループフィルタリング係数セットが利用不可能であることに基づいて、前記ビットストリーム表現が前記時間的適応ループフィルタリング係数セットの指示を省略するような前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との間での変換を行うことを含む、映像処理方法。

Ｃ１４．現在の映像ブロックを構成する符号化ツリーブロック（ＣＴＢ）、ブロック、タイルグループ、タイル、スライス、またはピクチャにおいて、新しい適応ループフィルタリング（ＡＬＦ）係数および固定ＡＬＦ係数を使用しないことを判定することと、適応ループフィルタリングが無効化されていることを推測することをさらに含む、解決策Ｃ１３に記載の方法。

Ｃ１５．適合ビットストリームは、新しい適応ループフィルタリング（ＡＬＦ）係数の指示または固定ＡＬＦ係数の指示を含む、解決策Ｃ１３に記載の方法。

Ｃ１６．現在の映像ブロックに対して、利用可能な時間的ＡＬＦ係数セットに基づいて、１つ以上の時間的適応ループフィルタリング（ＡＬＦ）係数セットの数を判定することであって、前記利用可能な時間的ＡＬＦ係数セットは、前記判定する前に符号化または復号化されている、判定することと、前記１つ以上の時間的ＡＬＦ係数セットに基づいて、前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現の間での変換を行うことと、を含む、映像処理方法。

Ｃ１７．前記１つ以上の時間的ＡＬＦ係数セットの最大数がＡＬＦ_{ａｖａｉｌａｂｌｅ}である、解決策１６に記載の方法。

Ｃ１８．前記１つ以上の時間的ＡＬＦ係数セットの数は、ｍｉｎ（Ｎ，ＡＬＦ_{ａｖａｉｌａｂｌｅ}）であり、ここで、Ｎは整数であり、Ｎ≧０である、解決策Ｃ１７に記載の方法。

Ｃ１９．Ｎ＝５である、解決策Ｃ１８に記載の方法。

Ｃ２０．現在の映像ブロックに対して、１つ以上の新しい適応ループフィルタリング（ＡＬＦ）係数セットを処理することと、この処理の後に、前記１つ以上の新しいＡＬＦ係数セットを利用可能なＡＬＦ係数セットに指定することと、利用可能なＡＬＦ係数セットに基づいて、前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現との間での変換を行うステップとを含む、映像処理方法。

Ｃ２１．イントラランダムアクセスポイント（ＩＲＡＰ）アクセスユニット、ＩＲＡＰピクチャ、瞬時復号化リフレッシュ（ＩＤＲ）アクセスユニット、またはＩＤＲピクチャに遭遇することと、前記利用可能なＡＬＦ係数セットを、利用不可能なＡＬＦ係数セットとして指定することと、をさらに含む解決策Ｃ２０に記載の方法。

Ｃ２２．前記利用可能なＡＬＦ係数セットは、前記現在の映像ブロックの後続の映像ブロックのための時間的ＡＬＦ係数セットである、解決策Ｃ２０またはＣ２１に記載の方法。

Ｃ２３．前記利用可能なＡＬＦ係数セットが、最大サイズがＮであるＡＬＦ係数セットリストに保持され、ここで、Ｎが整数である、解決策Ｃ２０～Ｃ２２のいずれかに記載の方法。

Ｃ２４．前記ＡＬＦ係数セットリストは、先入れ先出し（ＦＩＦＯ）の順序で保持される、解決策Ｃ２３に記載の方法であって、方法。

Ｃ２５．前記現在の映像ブロックに関連付けられた各時間層に１つのＡＬＦ係数セットリストを保持する、解決策Ｃ１３～Ｃ２４のいずれかに記載の方法。

Ｃ２６．前記現在の映像ブロックに関連付けられたＫ個の近傍の時間層ごとに１つのＡＬＦ係数セットリストを保持する、解決策Ｃ１３～Ｃ２４のいずれかに記載の方法。

Ｃ２７．前記現在の映像ブロックを含む現在のピクチャのために第１のＡＬＦ係数セットリストを保持し、前記現在のピクチャの後続のピクチャのために第２のＡＬＦ係数セットリストを保持する、解決策Ｃ１３～Ｃ２４のいずれかに記載の方法。

Ｃ２８．前記現在のピクチャに基づいて、前記現在のピクチャに続く前記ピクチャ画像を予測し、前記第１のＡＬＦ係数セットリストが前記第２のＡＬＦ係数セットリストと同じである、解決策Ｃ２７に記載の方法。

Ｃ２９．イントラランダムアクセスポイント（ＩＲＡＰ）アクセスユニット、ＩＲＡＰ ピクチャ、瞬時復号化リフレッシュ（ＩＤＲ）アクセスユニット、またはＩＤＲ ピクチャに遭遇することと、前記遭遇した後に、１つ以上のＡＬＦ係数セットリストを空にすること、をさらに含む解決策Ｃ２０に記載の方法。

Ｃ３０．現在の映像ブロックの異なる色成分について、異なるＡＬＦ係数セットリストを保持する、解決策Ｃ２０に記載の方法。

Ｃ３１．処理装置と、その処理装置に命令が記憶された非一時的メモリとを備える装置であって、命令が処理装置によって実装されることにより、処理装置に、解決策Ｃ１～Ｃ３０のいずれかに記載の方法を実施させる映像システムの装置。

Ｃ３２．非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラム製品であって、解決策Ｃ１～Ｃ３０のいずれかに記載の方法を実行するためのプログラムコードを含む、コンピュータプログラム製品。

図１２は、映像処理装置１２００のブロック図である。装置１２００は、本明細書に記載の方法の１つ以上を実装するために使用してもよい。装置１２００は、スマートフォン、タブレット、コンピュータ、ＩｏＴ（モノのインターネット）受信機等により実施されてもよい。装置１２００は、１つ以上の処理装置１２０２と、１つ以上のメモリ１２０４と、映像処理ハードウェア１２０６と、を含んでもよい。１つまたは複数の処理装置１２０２は、本明細書に記載される１つ以上の方法（方法１１００および１１５０を含むが、これに限定されない）を実装するように構成されてもよい。メモリ（複数可）１２０４は、本明細書で説明される方法および技術を実装するために使用されるデータおよびコードを記憶するために使用してもよい。映像処理ハードウェア１２０６は、本明細書に記載される技術をハードウェア回路にて実装するために使用してもよい。

いくつかの実施形態において、映像符号化法は、図１２を参照して説明したように、ハードウェアプラットフォームに実装される装置を使用して実施してもよい。

開示される技術のいくつかの実施形態は、映像処理ツールまたはモードを有効化するように決定または判定することを含む。一例において、映像処理ツールまたはモードが有効化される場合、エンコーダは、１つの映像ブロックを処理する際にこのツールまたはモードを使用するまたは実装するが、このツールまたはモードの使用に基づいて、結果として得られるビットストリームを必ずしも修正しなくてもよい。すなわち、映像のブロックから映像のビットストリーム表現への変換は、決定または判定に基づいて映像処理ツールまたはモードが有効化される場合に、この映像処理ツールまたはモードを使用する。別の例において、映像処理ツールまたはモードが有効化される場合、デコーダは、ビットストリームが映像処理ツールまたはモードに基づいて修正されたことを知って、ビットストリームを処理する。すなわち、決定または判定に基づいて有効化された映像処理ツールまたはモードを使用して、映像のビットストリーム表現から映像のブロックへの変換を行う。

開示される技術のいくつかの実施形態は、映像処理ツールまたはモードを無効化するように決定または判定することを含む。一例において、映像処理ツールまたはモードが無効にされている場合、エンコーダは、映像のブロックを映像のビットストリーム表現に変換する際に、このツールまたはモードを使用しない。別の例において、映像処理ツールまたはモードが無効にされている場合、デコーダは、決定または判定に基づいて有効化された映像処理ツールまたはモードを使用してビットストリームが修正されていないことを知って、ビットストリームを処理する。

図１３は、本明細書で開示される様々な技術が実装され得る例示的な映像処理システム１３００を示すブロック図である。様々な実装形態は、システム１３００のモジュールの一部又は全部を含んでもよい。システム１３００は、映像コンテンツを受信するための入力ユニット１３０２を含んでもよい。映像コンテンツは、未加工又は非圧縮フォーマット、例えば、８又は１０ビットのマルチモジュール画素値で受信されてもよく、又は圧縮又は符号化フォーマットで受信されてもよい。入力ユニット１３０２は、ネットワークインターフェース、周辺バスインターフェース、又は記憶インターフェースを表してもよい。ネットワークインターフェースの例は、イーサネット（登録商標）、パッシブ光ネットワーク（ＰＯＮ）等の有線インターフェース、およびＷｉ－Ｆｉ（登録商標）またはセルラーインターフェース等の無線インターフェースを含む。

システム１３００は、本明細書に記載される様々な符号化又は符号化方法を実装することができる符号化モジュール１３０４を含んでもよい。符号化モジュール１３０４は、入力ユニット１３０２からの映像の平均ビットレートを符号化モジュール１３０４の出力に低減し、映像の符号化表現を生成してもよい。従って、この符号化技術は、映像圧縮または映像コード変換技術と呼ばれることがある。符号化モジュール１３０４の出力は、モジュール１３０６によって表されるように、記憶されてもよいし、接続された通信を介して送信されてもよい。入力ユニット１３０２において受信された、記憶された又は通信された映像のビットストリーム（又は符号化）表現は、モジュール１３０８によって使用されて、表示インターフェースユニット１３１０に送信される画素値又は表示可能な映像を生成してもよい。ビットストリーム表現からユーザが見ることができる映像を生成する処理は、映像伸張（映像展開）と呼ばれることがある。さらに、特定の映像処理動作を“符号化”動作又はツールと呼ぶが、符号化ツール又は動作は、エンコーダ及びそれに対応する、復号化の結果を逆にする復号化ツール又は動作が、デコーダによって行われることが理解されよう。

周辺バスインターフェースユニットまたは表示インターフェースユニットの例は、ユニバーサルシリアルバス（ＵＳＢ）または高精細マルチメディアインターフェース（ＨＤＭＩ（登録商標））またはディスプレイポート等を含んでもよい。ストレージインターフェースの例は、シリアルアドバンスドテクノロジーアタッチメント（ＳＡＴＡ）、ＰＣＩ、ＩＤＥインターフェース等を含む。本明細書に記載される技術は、携帯電話、ノートパソコン、スマートフォン、又はデジタルデータ処理及び／又は映像表示を実施可能な他のデバイス等の様々な電子デバイスに実施されてもよい。

以上、説明の目的で本開示の技術の特定の実施形態を説明したが、本発明の範囲から逸脱することなく様々な修正が可能であることは、理解されるであろう。従って、本開示の技術は、添付の特許請求の範囲による場合を除き、限定されない。

本特許明細書に記載された主題および機能操作の実装形態は、本明細書に開示された構造およびその構造的等価物を含め、様々なシステム、デジタル電子回路、またはコンピュータソフトウェア、ファームウェア、若しくはハードウェアで実施されてもよく、またはそれらの１つ以上の組み合わせで実施してもよい。本明細書に記載された主題の実装形態は、１つ以上のコンピュータプログラム製品、すなわち、データ処理装置によって実行されるため、又はデータ処理装置の操作を制御するために、有形で非可搬性のコンピュータ可読媒体上に符号化されたコンピュータプログラム命令の１つ以上のモジュールとして実装することができる。このコンピュータ可読媒体は、機械可読記憶装置、機械可読記憶基板、メモリデバイス、機械可読伝播信号をもたらす物質の組成物、又はこれらの１つ以上の組み合わせであってもよい。“データ処理ユニット”又は“データ処理装置”という用語は、例えば、プログラマブル処理装置、コンピュータ、又は複数の処理装置若しくはコンピュータを含め、データを処理するためのすべての装置、デバイス、および機械を含む。この装置は、ハードウェアの他に、当該コンピュータプログラムの実行環境を作るコード、例えば、処理装置ファームウェア、プロトコルスタック、データベース管理システム、オペレーティングシステム、またはこれらの１つ以上の組み合わせを構成するコードを含むことができる。

コンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、スクリプト、またはコードとも呼ばれる）は、コンパイルされた言語または解釈された言語を含む任意の形式のプログラミング言語で記述することができ、また、それは、スタンドアロンプログラムとして、またはコンピューティング環境で使用するのに適したモジュール、成分、サブルーチン、または他のユニットとして含む任意の形式で展開することができる。コンピュータプログラムは、必ずしもファイルシステムにおけるファイルに対応するとは限らない。プログラムは、他のプログラムまたはデータを保持するファイルの一部（例えば、マークアップ言語文書に格納された１つ以上のスクリプト）に記録されていてもよいし、当該プログラム専用の単一のファイルに記憶されていてもよいし、複数の調整ファイル（例えば、１つ以上のモジュール、サブプログラム、またはコードの一部を格納するファイル）に記憶されていてもよい。１つのコンピュータプログラムを、１つのサイトに位置する１つのコンピュータ、または複数のサイトに分散され通信ネットワークによって相互接続される複数のコンピュータで実行させるように展開することも可能である。

本明細書に記載された処理およびロジックフローは、入力データ上で動作し、出力を生成することによって機能を実行するための１つ以上のコンピュータプログラムを実行する１つ以上のプログラマブル処理装置によって行うことができる。処理およびロジックフローはまた、特定用途のロジック回路、例えば、ＦＰＧＡ（フィールドプログラマブルゲートアレイ）またはＡＳＩＣ（特定用途向け集積回路）によって行うことができ、装置はまた、特別目的のロジック回路として実装することができる。

コンピュータプログラムの実行に適した処理装置は、例えば、汎用および専用マイクロ処理装置の両方、並びに任意の種類のデジタルコンピュータの任意の１つ以上の処理装置を含む。一般的に、処理装置は、読み出し専用メモリ又はランダムアクセスメモリ又はその両方から命令及びデータを受信する。コンピュータの本質的な要素は、命令を実行するためのプロセッサと、命令およびデータを記憶するための１つ以上の記憶装置とである。一般的に、コンピュータは、データを記憶するための１つ以上の大容量記憶デバイス、例えば、磁気、光磁気ディスク、または光ディスクを含んでもよく、またはこれらの大容量記憶デバイスからデータを受信するか、またはこれらにデータを転送するように動作可能に結合されてもよい。しかしながら、コンピュータは、このようなデバイスを有する必要はない。コンピュータプログラム命令およびデータを記憶するのに適したコンピュータ可読媒体は、あらゆる形式の不揮発性メモリ、媒体、およびメモリデバイスを含み、例えば、ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュメモリデバイス等の半導体メモリデバイスを含む。処理装置およびメモリは、特定用途のロジック回路によって補完されてもよく、または特定用途のロジック回路に組み込まれてもよい。

本特許明細書は多くの詳細を含むが、これらは、任意の発明の範囲又は特許請求の範囲を限定するものと解釈されるべきではなく、むしろ、特定の発明の特定の実施形態に特有であり得る特徴の説明と解釈されるべきである。本特許文献において別個の実施形態の文脈で説明されている特定の特徴は、１つの例において組み合わせて実装してもよい。逆に、１つの例のコンテキストで説明された様々な特徴は、複数の実施形態において別個にまたは任意の適切なサブコンビネーションで実装してもよい。さらに、特徴は、特定の組み合わせで作用するものとして上記に記載され、最初にそのように主張されていてもよいが、主張された組み合わせからの１つ以上の特徴は、場合によっては、組み合わせから抜粋されることができ、主張された組み合わせは、サブコンビネーションまたはサブコンビネーションのバリエーションに向けられてもよい。

同様に、動作は図面において特定の順番で示されているが、これは、所望の結果を達成するために、このような動作が示された特定の順番でまたは連続した順番で行われること、または示された全ての動作が行われることを必要とするものと理解されるべきではない。また、本特許明細書に記載されている例における様々なシステムの構成要素の分離は、全ての実施形態においてこのような分離を必要とするものと理解されるべきではない。

いくつかの実装形態および例のみが記載されており、この特許文献に記載され図示されているコンテンツに基づいて、他の実施形態、拡張および変形が可能である。

関連出願の相互参照
本願は、２０１９年４月１６日出願の国際特許出願第ＰＣＴ／ＣＮ２０１９／０８２８５５号の優先権と利益を主張する、２０２０年４月１６日出願の国際特許出願第ＰＣＴ／ＣＮ２０２０／０８５０７５号に基づく。米国法に基づくすべての目的のために、上記出願の開示全体は、本明細書の開示の一部として参照により援用される。

Claims (56)

1. 映像の現在の映像ブロックを前記映像のビットストリーム表現に符号化することであって、前記現在の映像ブロックは、適応ループフィルタ（ＡＬＦ）で符号化される、符号化することと、
   時間的適応フィルタの１つ以上のセットの可用性または使用に基づいて、前記ビットストリーム表現における前記時間的適応フィルタの前記１つ以上のセット内の時間的適応フィルタのセットの指示を選択的に含むことと、を含む、
   映像処理方法。
2. 前記時間的適応フィルタの前記セットが利用不可能な場合、前記セットの前記指示を前記ビットストリーム表現から排除する、請求項１に記載の方法。
3. 前記時間的適応フィルタの前記セットが利用不可能な場合、前記セットの前記指示を前記ビットストリーム表現に含める、請求項１または２に記載の方法。
   前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でない場合、前記指示は前記ビットストリーム表現から除外される、請求項１～３のいずれかに記載の方法。
4. 前記１つ以上の時間的適応フィルタのセットの各々が、１つのフィルタインデックスに関連付けられる、請求項１～３のいずれかに記載の方法。
5. 前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でない場合、固定フィルタを使用する指示は真に等しいものとする、請求項１～３のいずれかに記載の方法。
6. 前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でない場合、時間的適応フィルタを使用する指示は偽に等しいものとする、請求項１～３のいずれかに記載の方法。
7. 前記１つ以上の時間的適応フィルタのセットのいずれも利用可能でない場合、固定フィルタのインデックスの指示が前記ビットストリーム表現に含まれる、請求項１～３のいずれかに記載の方法。
8. 映像のビットストリーム表現における時間的適応フィルタのセットの指示に基づいて、適応ループフィルタ（ＡＬＦ）で符号化される前記映像の現在の映像ブロックに適用可能な前記時間的適応フィルタの前記セットを備える前記時間的適応フィルタの１つ以上のセットの可用性または使用を判定することと、
   前記判定することに基づいて、前記時間的適応フィルタの前記セットを選択的に適用することによって、前記ビットストリーム表現から復号化された現在の映像ブロックを生成することと、を含む、
   映像処理方法。
9. 前記時間的適応フィルタの前記セットが利用不可能な場合、前記生成することは、前記時間的適応フィルタの前記セットを適用せずに行われる、請求項８に記載の方法。
10. 前記時間的適応フィルタの前記セットが利用不可能な場合、前記生成を行うことは、前記時間的適応フィルタの前記セットを適用することを含む、請求項８または９に記載の方法。
11. 前記時間的適応フィルタの前記１つ以上のセットが適応パラメータセット（ＡＰＳ）に含まれ、前記指示がＡＰＳインデックスである、請求項１～１０のいずれかに記載の方法。
12. 異なる方向の勾配計算に基づいて、前記時間的適応フィルタの前記１つ以上のセットのうちの少なくとも１つのためのフィルタインデックスを判定することをさらに含む、請求項１～１０のいずれかに記載の方法。
13. 前記時間的適応フィルタの前記１つ以上のセットのいずれも利用可能でなく、かつ新しいＡＬＦ係数セットおよび固定ＡＬＦ係数セットが、前記現在の映像ブロックを構成する符号化ツリーブロック（ＣＴＢ）、ブロック、タイルグループ、タイル、スライス、またはピクチャにおいて使用されないことを判定することと、
    前記判定することに基づいて、適応ループフィルタリングが無効であると推論することと、をさらに含む、
    請求項１～１１のいずれかに記載の方法。
14. 前記ビットストリーム表現は、前記時間的適応フィルタの前記１つ以上のセットの少なくとも１つが利用不可能であることに呼応して、新しいＡＬＦ係数セットの使用の第１の指示と、固定ＡＬＦ係数セットの使用の第２の指示とを含み、前記第１の指示と前記第２の指示のうちの１つが正確に前記ビットストリーム表現において真である、請求項１～１１のいずれかに記載の方法。
15. 前記ビットストリーム表現は、前記ＡＬＦの動作に関連付けられたフォーマット規則に準拠する、請求項１４に記載の方法。
16. 前記時間的適応フィルタの前記１つ以上のセットのいずれも利用可能でないことに呼応して、前記ビットストリーム表現は、前記ＡＬＦが有効化されていること、および新しいＡＬＦ係数セットおよび固定ＡＬＦ係数セットが、前記現在の映像ブロックを構成する符号化ツリーブロック（ＣＴＢ）、ブロック、タイルグループ、タイル、スライス、またはピクチャにおいて使用されないことの指示を含む、請求項１～１１のいずれかに記載の方法。
17. 前記ビットストリーム表現は、前記ＡＬＦの動作に関連付けられたフォーマット規則に準拠しない、請求項１６に記載の方法。
18. 前記ＡＬＦが、前記現在の映像ブロックに関連付けられた１つ以上の色成分に適用される、請求項１～１７のいずれかに記載の方法。
19. 適応ループフィルタで符号化された現在の映像ブロックに対して、利用可能な時間的ＡＬＦ係数セットに基づいて、時間的適応ループフィルタリング（ＡＬＦ）係数セットの数を判定することであって、前記利用可能な時間的ＡＬＦ係数セットは、前記判定することの前に符号化または復号化されており、前記ＡＬＦ係数セットの数は、前記現在の映像ブロックを構成するタイルグループ、タイル、スライス、ピクチャ、符号化ツリーブロック（ＣＴＢ）、または映像ユニットに使用される、判定することと、
    前記時間的ＡＬＦ係数セットの前記数に基づいて、前記現在の映像ブロックと前記現在の映像ブロックのビットストリーム表現の間での変換を行うことと、を含む、
    映像処理方法。
20. 時間的ＡＬＦ係数セットの数の最大数が、利用可能な時間的ＡＬＦ係数セットの数に等しく設定される、請求項１９に記載の方法。
21. 前記時間的ＡＬＦ係数セットの数は、利用可能な時間的ＡＬＦ係数セットの数と予め規定された数Ｎとのうちの小さい方に等しく設定され、ここで、Ｎは整数であり、Ｎ≧０である、請求項２０に記載の方法。
22. Ｎ＝５である、請求項２１に記載の方法。
23. 映像の現在の映像ブロックと前記映像のビットストリーム表現との間での変換の一部として、１つ以上の新しい適応ループフィルタリング（ＡＬＦ）係数セットを処理することであって、前記現在の映像ブロックが適応ループフィルタで符号化される、処理することと、
    前記処理することの後に、前記１つ以上の新しいＡＬＦ係数セットを利用可能なＡＬＦ係数セットとして指定することと、を含む、
    映像処理方法。
24. イントラランダムアクセスポイント（ＩＲＡＰ）アクセスユニット、ＩＲＡＰピクチャ、瞬時復号化リフレッシュ（ＩＤＲ）アクセスユニット、またはＩＤＲピクチャに遭遇することと、
    前記遭遇することに基づいて、前記利用可能なＡＬＦ係数セットを、利用不可能なＡＬＦ係数セットとして指定することと、
    をさらに含む請求項２３に記載の方法。
25. 前記利用可能なＡＬＦ係数セットのうちの少なくとも１つは、前記現在の映像ブロックの後続の映像ブロックのための時間的ＡＬＦ係数セットである、請求項２３または２４に記載の方法。
26. 前記利用可能なＡＬＦ係数セットが、最大サイズがＮであるＡＬＦ係数セットリストに保持され、ここで、Ｎが整数である、請求項２３～２５のいずれかに記載の方法。
27. 前記ＡＬＦ係数セットリストは、先入れ先出し（ＦＩＦＯ）の順序で保持される、請求項２６に記載の方法。
28. 前記現在の映像ブロックに関連付けられた各時間層に１つのＡＬＦ係数セットリストを保持する、請求項１～２７のいずれかに記載の方法。
29. 前記現在の映像ブロックに関連付けられたＫ個の近傍の時間層ごとに１つのＡＬＦ係数セットリストを保持する、請求項１～２７のいずれかに記載の方法。
30. 前記現在の映像ブロックを含む現在のピクチャのために第１のＡＬＦ係数セットリストを保持し、前記現在のピクチャの後続のピクチャのために第２のＡＬＦ係数セットリストを保持する、請求項１～２７のいずれかに記載の方法。
31. 前記現在のピクチャに基づいて、前記現在のピクチャに続く前記ピクチャ画像を予測し、前記第１のＡＬＦ係数セットリストが前記第２のＡＬＦ係数セットリストと同じである、請求項３０に記載の方法。
32. 前記現在のピクチャに続く前記ピクチャおよび前記現在のピクチャの前のピクチャに基づいて、現在のピクチャを予測し、前記第１のＡＬＦ係数セットリストが前記第２のＡＬＦ係数セットリストと同じである、請求項３０に記載の方法。
33. イントラランダムアクセスポイント（ＩＲＡＰ）アクセスユニット、ＩＲＡＰピクチャ、瞬時復号化リフレッシュ（ＩＤＲ）アクセスユニット、またはＩＤＲピクチャに遭遇することと、
    前記遭遇することの後に、１つ以上のＡＬＦ係数セットリストを空にすること、をさらに含む、
    請求項２３に記載の方法。
34. 前記現在の映像ブロックに関連付けられた異なる色成分について、異なるＡＬＦ係数セットリストを保持する、請求項２３に記載の方法。
35. 前記異なる色成分は、輝度成分、Ｃｒ成分、およびＣｂ成分のうちの１つ以上を含む、請求項３４に記載の方法。
36. 複数のピクチャ、タイルグループ、タイル、スライス、または符号化ツリーユニット（ＣＴＵ）に対して１つのＡＬＦ係数セットリストを保持し、前記１つのＡＬＦ係数セットリストのインデックス付けは、前記複数のピクチャ、タイルグループ、タイル、スライス、または符号化ツリーユニット（ＣＴＵ）の各々に対して異なる、請求項２３に記載の方法。
37. 前記インデックス付けは、昇順であり、前記現在の映像ブロックに関連付けられた第１の時間層インデックスと、前記現在の映像ブロックを構成する現在のピクチャ、タイルグループ、タイル、スライス、または符号化ツリーユニット（ＣＴＵ）に関連付けられた第２の時間層インデックスとに基づいている、請求項３６に記載の方法。
38. 前記インデックス付けは、昇順であり、前記現在の映像ブロックに関連付けられたピクチャオーダカウント（ＰＯＣ）と、前記現在の映像ブロックを構成する現在のピクチャ、タイルグループ、タイル、スライス、または符号化ツリーユニット（ＣＴＵ）に関連付けられた第２のＰＯＣとに基づいている、請求項３６に記載の方法。
39. 前記インデックス付けは、前記利用可能なＡＬＦ係数セットに割り当てられる最小のインデックスを含む、請求項３６に記載の方法。
40. 前記変換は、クリッピング演算を含み、前記方法は、
    前記現在の映像ブロックのサンプルに対して、前記サンプルの近傍のサンプルを複数のグループに分類することと、
    前記複数のグループの各々についての前記クリッピング演算のために、前記ビットストリーム表現で信号通知された単一のパラメータのセットを使用することと、をさらに含む、
    請求項２３に記載の方法。
41. 前記変換は、クリッピング演算を含み、前記クリッピング演算のためのパラメータのセットが、前記１つ以上の新しいＡＬＦ係数セットに対して予め規定される、請求項２３に記載の方法。
42. 前記変換は、クリッピング演算を含み、前記クリッピング演算のためのパラメータのセットが、前記１つ以上の新しいＡＬＦ係数セットに対して前記ビットストリーム表現で信号通知される、請求項２３に記載の方法。
43. 映像の現在の映像ブロックと前記映像のビットストリーム表現との間での変換のために、前記映像の映像領域のヘッダにおける適応ループフィルタリング（ＡＬＦ）の指示が、前記ビットストリーム表現に関連付けられた適応パラメータセット（ＡＰＳ）ネットワーク抽象化層（ＮＡＬ）ユニットにおけるＡＬＦの指示と等しいことを判定することと、
    前記変換を行うことと、を含む、
    映像処理方法。
44. 前記映像領域は、ピクチャである、請求項４３に記載の方法。
45. 前記映像領域は、スライスである、請求項４３に記載の方法。
46. 映像の現在の映像ブロックと前記映像のビットストリーム表現との間での変換のために、前記映像の映像領域で使用される適応ループフィルタのタイプに基づいて、非線形適応ループフィルタリング（ＡＬＦ）動作を選択的に有効化することと、
    前記選択的に有効化することの後に、前記変換を行うことを含む、
    映像処理方法。
47. 前記映像領域は符号化ツリーユニット（ＣＴＵ）であり、前記適応ループフィルタの前記タイプが固定ＡＬＦセットまたは時間的ＡＬＦセットを含むと判定されると、前記非線形ＡＬＦ動作は無効化される、請求項４６に記載の方法。
48. 前記映像領域は、スライス、タイルグループ、タイルまたは符号化ツリーユニット（ＣＴＵ）であり、前記非線形ＡＬＦ動作は、前記適応ループフィルタの前記タイプが固定ＡＬＦセットを含むと判定されると、有効化される、請求項４６に記載の方法。
49. 前記ビットストリーム表現において、前記非線形ＡＬＦ動作のために１つ以上のクリッピングパラメータを選択的に信号通知することをさらに含む、請求項４６に記載の方法。
50. 前記１つ以上のクリッピングパラメータが信号通知される、請求項４９に記載の方法。
51. 前記１つ以上のクリッピングパラメータは、前記ビットストリーム表現で信号通知されるＡＬＦフィルタ係数セットに対して信号通知される、請求項４９に記載の方法。
52. 前記適応ループフィルタの前記タイプが固定ＡＬＦセットを含むと判定されると、前記１つ以上のクリッピングパラメータが信号通知される、請求項４９に記載の方法。
53. 前記変換は、前期ビットストリーム表現から現在の映像ブロックを生成する、請求項１９～５２のいずれかに記載の方法。
54. 前記変換は、現在の映像ブロックから前記ビットストリーム表現を生成する、請求項１９～５２のいずれかに記載の方法。
55. 処理装置と、命令を搭載した非一時的メモリとを備え、前記処理装置が実行すると、前記命令は、前記処理装置に、請求項１～５４のいずれか１項以上に記載の前記方法を実装する、映像システムにおける装置。
56. 非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラム製品であって、請求項１～５４のいずれか１つ以上に記載の前記方法を実行するためのプログラムコードを含む、コンピュータプログラム製品。

Images