JP2022513433A - 画像をデブロッキングするための方法及び装置 - Google Patents

Abstract

異なる実装が説明され、特に、画像をデブロッキングするための方法を含む、映像符号化及び復号化のための実装が提示される。一実装によれば、画像をデブロッキングするための方法では、サンプルの第１のブロックとサンプルの第２のブロックとの間の少なくとも１つの境界が決定され、第１のブロックの予測モード及び第２のブロックの予測モードのうちの少なくとも１つに従って境界強度が決定され、境界強度に従って、少なくとも１つの境界に隣接した第１及び第２のブロックのサンプルがフィルタリングされる。有利に、第１のブロックの予測モードが重み付き予測モードである場合には、境界強度は、第１のブロックの重み付き予測モードに従ってサンプルの第１のブロックを予測する際に用いられるサンプルの相対的重みにさらに依存し、第２のブロックについても同様である。

Description

技術分野
本実施形態のうちの少なくとも１つは、概して、例えば、映像符号化又は復号化のための方法又は装置に関し、より詳細には、画像をデブロッキングするための方法又は装置に関する。

背景
１つ以上の実装の技術分野は、概して、映像圧縮に関する。少なくともいくつかの実施形態は、ＨＥＶＣ（ＨＥＶＣは、「ＩＴＵのＩＴＵ－Ｔ Ｈ．２６５電気通信標準化部門（１０／２０１４）、シリーズＨ：視聴覚及びマルチメディアシステム、視聴覚サービスのインフラストラクチャ － 動画像のコーディング、高効率ビデオコーディング、勧告ＩＴＵ－Ｔ Ｈ．２６５」に記載されたＨ．２６５及びＭＰＥＧ－Ｈ Ｐａｒｔ２としても知られる、高効率ビデオコーディング（High Efficiency Video Coding）を指す）などの既存の映像圧縮システムと比べて、又はＶＶＣ（多用途ビデオコーディング（Versatile Video Coding）、ＪＶＥＴ、ジョイントビデオエクスパーツチーム（Joint Video Experts Team）によって開発されている新たな規格）などの開発中の映像圧縮システムと比べて、圧縮効率を改善することに関する。

高い圧縮効率を達成するために、画像及び映像符号化方式は、通例、画像の分割、動きベクトル予測を含む、予測、並びに映像内容における空間及び時間冗長性を活用するための変換を採用する。概して、イントラ又はインター予測が、フレーム内若しくはフレーム間相関を利用するために用いられ、次に、しばしば、予測誤差又は予測残差と示される、元の画像と予測された画像との間の差が周波数領域の係数に変換され、係数が量子化され、エントロピー符号化される。映像を再構成するために、圧縮されたデータは、エントロピー復号化、逆量子化、逆変換、及び予測に対応する逆のプロセスによって復号化される。

ＨＥＶＣ又はＶＶＣなどのコーデックでは、デブロッキングフィルタ（deblocking filter）ＤＢＦが、ピクチャが再構成された後に適用され、ブロックエッジ付近のサンプル値を平滑化することによってブロッキングアーチファクトを低減することを目的とする。デブロッキングフィルタは、ルマサンプルのうちの少なくとも４つのサンプルに等しいサイズの伝統的な正方形又は矩形ブロック分割形状を用いて定義される。次に、デブロッキングフィルタ強度の決定のために用いられるべき動きベクトル、参照インデックス、及び参照デブロッキングサンプルの選択が遂行される。例えば、Norkinらは、「HEVC Deblocking Filter」（IEEE Transactions on Circuits and Systems for Video Technology, vol.22 No12, Dec. 2012）においてデブロッキングの原理を説明している。

最新のビデオコーデックのアプローチでは、予測サンプルが、非正方形又は非矩形ブロック（例えば、三角形）の組み合わせ、及び／又は不等の（例えば、ＣＵレベル重みを用いた双方向予測（Bi-prediction with CU level Weights）ＢＣＷとも称される、一般化双方向予測（Generalized bi-prediction）ＧＢｉ）、及び／又は空間的に可変の重み付け（例えば、多重仮説又は組み合わせインターマージ・イントラ予測（Combined Inter merge Intra Prediction）ＣＩＩＰ）の組み合わせを用いて構築される、新たな符号化（予測）モードが考慮される。それゆえ、ブロッキングアーチファクトを依然として効率的に低減するためにデブロッキングフィルタプロセスをこのような符号化モードに適応させることが望まれる。

概要
本発明の目的は、従来技術の不利点のうちの少なくとも１つを克服することである。

この目的のために、少なくとも１つの実施形態の一般的態様によれば、画像の部分をデブロッキングするための方法が提示される。本方法は、サンプルの第１のブロックとサンプルの第２のブロックとの間の少なくとも１つの境界を決定することであって、第１のブロック及び第２のブロックが、フィルタリングするべき画像の部分に属する、決定することと、第１のブロックの予測モード及び第２のブロックの予測モードのうちの少なくとも１つに従って境界強度を決定することと、境界強度に従って少なくとも１つの境界をフィルタリングすること、すなわち、少なくとも１つの境界に隣接した第１及び第２のブロックのサンプルをフィルタリングすることと、を含む。第１のブロックの予測モードが重み付き予測モードである場合には、境界強度は、第１のブロックの重み付き予測モードに従ってサンプルの第１のブロックを予測する際に用いられるサンプルの相対的重みにさらに依存する。当然、同じことが第２のブロックにも区別なく当てはまる：第２のブロックの予測モードが重み付き予測モードである場合には、境界強度は、第２のブロックの重み付き予測モードに従ってサンプルの第２のブロックを予測する際に用いられるサンプルの相対的重みにさらに依存する。重み付き予測モードは、第１の予測モードを用いて決定された第１の予測因子及び第２の予測モードを用いて決定された第２の予測因子の重み付き組み合わせから予測が得られる符号化モードである。

少なくとも１つの実施形態の別の一般的態様によれば、画像符号化においてブロックを符号化するための方法が提示される。本方法は、画像部分を再構成することと、デブロッキング方法の実施形態のうちの任意のものに従って、再構成された画像部分をフィルタリングすることと、を含む。

少なくとも１つの実施形態の別の一般的態様によれば、画像のブロックを復号化するための方法であって、画像の部分を復号化することと、デブロッキング方法の実施形態のうちの任意のものに従って、復号化された画像部分をフィルタリングすることと、を含む、方法が提示される。

少なくとも１つの実施形態の別の一般的態様によれば、映像符号化のための装置であって、符号化方法の実施形態のうちの任意のものを実施するための手段を備える、装置が提示される。

少なくとも１つの実施形態の別の一般的態様によれば、映像復号化のための装置であって、復号化方法の実施形態のうちの任意のものを実施するための手段を備える、装置が提示される。

少なくとも１つの実施形態の別の一般的態様によれば、映像符号化のための装置であって、１つ以上のプロセッサと、少なくとも１つのメモリとを備える、装置が提供される。１つ以上のプロセッサは、符号化方法の実施形態のうちの任意のものを実施するように構成されている。

少なくとも１つの実施形態の別の一般的態様によれば、映像復号化のための装置であって、１つ以上のプロセッサと、少なくとも１つのメモリとを備える、装置が提供される。１つ以上のプロセッサは、復号化方法の実施形態のうちの任意のものを実施するように構成されている。

少なくとも１つの実施形態の別の一般的態様によれば、重み付き予測モードは、一般化双方向予測、符号化ユニットレベル重みを用いた双方向予測、イントラ及びインター予測されたサンプルを組み合わせた、又はインター及びインター予測されたサンプルを組み合わせた多重仮説予測、インターマージ及びイントラ予測されたサンプルを組み合わせた組み合わせインターマージ・イントラ予測、ブロックの幾何学的分割に応じたインター予測されたサンプルを組み合わせた幾何学的予測、ブロックの対角エッジに沿ったインター予測されたサンプルを組み合わせた三角形予測のうちの１つである。

少なくとも１つの実施形態の別の一般的態様によれば、第１のブロックの重み付き予測モードに従ってサンプルの第１のブロックを予測することは、第１のブロックのサンプルを、第１の予測モードを用いて決定された第１の予測因子及び第２の予測モードを用いて決定された第２の予測因子の重み付き組み合わせとして予測することを含み、第１のブロックのサンプルは、第１の予測因子の重みがレベルを上回る場合には、境界強度を決定するために第１の予測モードを用いるものとして考慮される。

少なくとも１つの実施形態の別の一般的態様によれば、第１の予測モードは１イントラ予測（one intra prediction）モードであり、第１のブロックのサンプルは、境界強度を決定するためにイントラ予測モードを用いるものとして考慮される。一変形例では、第１の予測モードはイントラ平面予測モード（intra planar prediction mode）であり、第１のブロックのサンプルは、境界強度を決定するためにイントラ予測モードを用いるものとして考慮される。一変形例では、イントラ予測モードの場合には、境界強度は強に設定される。

少なくとも１つの実施形態の別の一般的態様によれば、第１の予測モードは１インター予測モードであり、第１のブロックのサンプルは、境界強度を決定するためにインター予測モードを用いるものとして考慮される。一変形例では、第１の予測モードはインター双方向予測モードであり、第１のブロックのサンプルは、境界強度を決定するためにインター双方向予測モードを用いるものとして考慮される。別の変形例では、第１の予測モードはインター単方向予測モードであり、第１のブロックのサンプルは、境界強度を決定するためにインター単方向予測モードを用いるものとして考慮される。

少なくとも１つの実施形態の別の一般的態様によれば、ＢＳの決定におけるレベルは０に設定される。

少なくとも１つの実施形態の別の一般的態様によれば、境界強度は、同じ相対的重みを共有するブロックのサンプルのグループのために決定され、サンプルのグループは、ブロックの少なくとも１つのサンプル、４ｘ４のサンプル、最大全てのサンプルを含む。

少なくとも１つの実施形態の別の一般的態様によれば、上述の説明のうちの任意のものの方法又は装置に従って生成されたデータ内容を包含する非一時的コンピュータ可読媒体が提示される。

少なくとも１つの実施形態の別の一般的態様によれば、上述の説明のうちの任意のものの方法又は装置に従って生成された映像データを含む信号又はビットストリームが提供される。

本実施形態のうちの１つ以上はまた、コンピュータ可読記憶媒体であって、上述された方法のうちの任意のものに従って映像データをデブロッキング、符号化、又は復号化するための命令がその上に記憶された、コンピュータ可読記憶媒体を提供する。本実施形態はまた、コンピュータ可読記憶媒体であって、上述された方法に従って生成されたビットストリームがその上に記憶された、コンピュータ可読記憶媒体を提供する。本実施形態はまた、上述された方法に従って生成されたビットストリームを伝送するための方法及び装置を提供する。本実施形態はまた、上述された方法のうちの任意のものを遂行するための命令を含むコンピュータプログラム製品を提供する。

図面の簡単な説明
図１ａは、復号器アーキテクチャ内のループ内ポストフィルタリング段階の例示的なフローチャートを示す。 図１ｂは、デブロッキングフィルタの前（左）及び後（右）の復号化された画像の一例を示す。 図２は、サンプルの２つのブロック（右）の間のブロッキングアーチファクトを有するブロック境界サンプル（左）の一例を示す。 図３は、特定の実施形態に係るデブロッキングフィルタの方法における境界強度（ＢＳ（Boundary Strength））パラメータの決定の例示的なフローチャートを示す。 図４は、特定の実施形態に係るデブロッキングフィルタの方法におけるフィルタ強度（ＦＳ（Filter Strength））の決定の例示的なフローチャートを示す。 図５は、インター及びイントラモードの組み合わせの場合の多重仮説予測の一例を示す。 図６は、非矩形分割（上）の一例、及び三角形分割に関連付けられたオーバーラップブロック動き補償の対角重み付け（下）の一例を示す。 図７は、特定の実施形態に係る三角形論理分割（左）及び混合マップ（右）の一例を示す。 図８は、少なくとも１つの実施形態の一般的態様に係る画像の部分をデブロッキングするための方法の一例を示す。 図９は、特定の実施形態に係るデブロッキングフィルタの方法における境界強度の決定のフローチャートを示す。 図１０は、特定の実施形態に係るデブロッキングフィルタの方法における境界強度（ＢＳ）パラメータの決定において用いられるＣＵパラメータの記憶の２つのフローチャートを示す。 図１１は、実施形態の様々な態様が実施され得る映像符号器の一実施形態のブロック図を示す。 図１２は、実施形態の様々な態様が実施され得る映像復号器の一実施形態のブロック図を示す。 図１３は、実施形態の様々な態様が実施され得る例示的な装置のブロック図を示す。

詳細な説明
図及び説明は、本原理の明確な理解のために関連する要素を例示するために単純化されており、その一方で、分かりやすくする目的のために、典型邸な符号化及び／又は復号化デバイスにおいて見出される多くの他の要素を排除していることを理解されたい。用語、第１及び第２は本明細書において様々な要素を記述するために用いられ得るが、これらの要素はこれらの用語によって限定されるべきではないことが理解されるであろう。これらの用語は、単に、１つの要素を別のものと区別するために用いられるにすぎない。

様々な実施形態が画像の符号化／復号化に関して説明される。それらは、スライス又はタイル、タイルグループ、或いは画像の全シーケンスなどの、画像の部分を符号化／復号化するために適用され得る。

様々な方法が上述されており、方法の各々は、上述の方法を達成するための１つ以上のステップ又はアクションを含む。方法の適切な動作のためにステップ又はアクションの特定の順序が必要とされない限り、特定のステップ及び／又はアクションの順序及び／又は使用は変更されるか、又は組み合わせられてもよい。

少なくともいくつかの実施形態は、ブロックが以下の３つの予測モードのうちの１つを用いて符号化された場合に、デブロッキングフィルタＤＢＦを適応させることに関する：
・ 一般化双方向予測（ＧＢｉ）、又はＣＵレベル重みを用いた双方向予測（ＢＣＷ）、
・ 多重仮説（ＭＨ（Multi-Hypothesis））、又は組み合わせインターマージ・イントラ予測ＣＩＩＰと呼ばれる単純化されたバージョン、
・ 幾何学又は三角形モード。

有利に、本原理は、非正方形又は非矩形ブロックがサポートされており、及び／又は可変重み付けを有するブロックの組み合わせがサポートされているブロックベースのビデオコーデックにおいてＤＢＦの意図及び効率を維持することによって、従来技術の方法の効率を増大させる。

以下において、デブロッキング方法のための一般的実施形態が開示され、デブロッキングフィルタが適応させられる少なくとも３つの予測モードが開示される。次に、変更されたデブロッキングフィルタのいくつかの実施形態が開示される

デブロッキング方法のための一般的実施形態、及びデブロッキングフィルタが適応させられる例示的な予測モード
伝統的な映像符号化方式は、再構成された画像の質を改善するためのループ内フィルタリングプロセスを含む。ループ内フィルタリングは、デブロッキングフィルタリング（ＤＢＦ（Deblocking Filtering））、ＨＥＶＣにおけるサンプルアダプティブオフセット（ＳＡＯ（Sample Adaptive Offset））フィルタリング、及び／又はウィーナフィルタなどの適応ループフィルタリング（Adaptive Loop Filtering）ＡＬＦなどの、いくつかのフィルタリングプロセスを含むことができる。これらのフィルタは、この順序で、又は異なる順序で連続的に適用され得る。図１ａは、復号器アーキテクチャ内のループ内ポストフィルタリング段階の例示的なフローチャートを示す。通例、デブロッキングフィルタ（ＤＢＦ）は符号化アーチファクト低減ポストフィルタ（２０）のうちの１つであり、ブロックサンプルが再構成された（１０）後に適用される。ポストフィルタリングされたピクチャは表示することができ、場合によっては、動き補償された予測を構築するべく用いられるために復号化ピクチャバッファ（３０）内に記憶される。有利に、同じループ内ポストフィルタリングが、符号器内でも、時間予測において用いられる再構成された画像のために用いられる。

図１ｂは、デブロッキングフィルタの前（左）及びデブロッキングフィルタの後（右）の復号化された画像の一例を示す。デブロッキングフィルタは、ピクチャが再構成された（１０）後に適用される。それは、図１ｂ上に示されるように、ブロックエッジ付近のサンプル値を平滑化することによって、ブロッキングアーチファクトを低減することを目的とする。

図２は、サンプルの２つのブロックＰ及びＱ（右）の間のブロッキングアーチファクトを有するブロック境界サンプル（左）の一例を示す。サンプルＰ＝｛ｐ０，ｐ１，ｐ２，ｐ３｝及びＱ＝｛ｑ０，ｑ１，ｑ２，ｑ３｝は２つの隣接したブロックＰ及びＱに属する。サンプルは、図２の右側に示されるとおりの正方形４ｘ４ブロックＰ及びＱに属し、ここで、サンプルＰ＝｛ｐ０_ｉ，ｐ１_ｉ，ｐ２_ｉ，ｐ３_ｉ｝における第２の添字ｉは４Ｘ４ブロックにおける行添字である。概して、アーチファクトの視認性は、図２の左側に示されるとおりのサンプル値Ｐ及びＱの間の相対差に比例する。それが、ＤＢＦフィルタリングがブロックエッジにわたってサンプル平滑化Ｓを遂行する理由である。平滑化／フィルタリング関数Ｓのパラメータは以下のとおりである：
－ 境界強度（ＢＳ）＝｛０－弱、１－普通、又は２－強｝
－ ブロックＰ、Ｑのサンプル値

正方形ブロックのためのＤＢＦパラメータの決定は、鉛直（別に、水平）境界の各側の行（又は列）サンプルのセット｛ｐ３_ｉ，ｐ２_ｉ，ｐ１_ｉ，ｐ０_ｉ，ｑ０_ｉ，ｑ１_ｉ，ｑ２_ｉ，ｑ３_ｉ｝ごとに実施される。

図３は、特定の実施形態に係るデブロッキングフィルタの方法における境界強度（ＢＳ）パラメータの決定の例示的なフローチャート３００を示す。｛ＭＶｉ_Ｘ，ｒｅｆ－ｉ_Ｘ｝を、ブロックＸ（Ｘ＝Ｐ又はＱ）のためのリスト「ｉ」のための動きベクトル（motion vector）ＭＶ値及び参照インデックスを表すものとする。慣例により、ブロックＸがリスト０を用いて単方向に予測される場合には、このとき、｛ＭＶ０_Ｘは０に設定され、ｒｅｆ－０_Ｘは「－１」に設定される｝。別に、ブロックＸがリスト１を用いて単方向に予測される場合には、このとき、｛ＭＶ１_Ｘは０に設定され、ｒｅｆ－１_Ｘは「－１」に設定される｝。

境界強度ＢＳの決定３００はいくつかのブロックパラメータに依存し、連続したチェックによるものになる。例えば、チェックは以下のとおりである：
－ （３０５）：Ｐ又はＱがイントラである（さもなければ、インターとして考慮される）。チェックの結果がいいえになった場合には、次に、Ｐ及びＱブロックの両方が、関連動きベクトル及び参照インデックスピクチャを用いて、インター予測され、さらなるチェックが、ＢＳを決定するために処理される。Ｐ又はＱがイントラである場合には、チェックの結果ははいになり、ＢＳは２－強に設定される。
－ （３１０）：Ｐ又はＱが、０でない係数を有し、境界がトランスフォーム境界である。
－ （３２０）：Ｐ及びＱが異なる参照インデックスを有する。それゆえ、非限定例によれば、Ｐが双方向予測され（｛ＭＶ０_Ｐ，ｒｅｆ－０_Ｐ｝，｛ＭＶ１_Ｐ，ｒｅｆ－１_Ｐ｝）、Ｑが単方向予測される｛ＭＶ０_Ｑ，ｒｅｆ－０_Ｑ｝場合には、このとき、以下のとおりであるかどうかをチェックする：
ｒｅｆ－０_Ｐ≠ｒｅｆ－０_Ｑ且つｒｅｆ－１_Ｐ≠ｒｅｆ－０_Ｑ （チェック１）
－ （３３０）：Ｐ及びＱが異なる参照数を有する（単方向又は双方向予測）。一変形例では、（３３０）は存在せず、単方向において、欠けた参照のＭＶ値は、０であると推論される。
－ （３４０）：同じ参照を有するＰ及びＱの動きベクトルが異なる値を有する。それゆえ、非限定例によれば、Ｐが双方向予測され（｛ＭＶ０_Ｐ，ｒｅｆ－０_Ｐ｝，｛ＭＶ１_Ｐ，ｒｅｆ－１_Ｐ｝）、Ｑが単方向予測される｛ＭＶ０_Ｑ，ｒｅｆ－０_Ｑ｝場合には、このとき、以下のとおりであるかどうかをチェックする：
ｒｅｆ－０_Ｐ＝ｒｅｆ－０_Ｑ且つ｜ＭＶ０_Ｐ－ＭＶ０_Ｑ｜＞閾値であるかどうか
又はｒｅｆ－１_Ｐ＝ｒｅｆ－０_Ｑ且つ｜ＭＶ１_Ｐ－ＭＶ０_Ｑ｜＞閾値であるかどうか （チェック２）
当業者は、（チェック２）の上記の式から、２つの双方向予測されるブロック又は２つの単方向予測されるブロックの場合のチェックを曖昧さなく導出するであろう。

ルマサンプルのブロックの場合には、１又は２に等しいＢＳを有するブロック境界のみがフィルタリングされる。クロマサンプルのブロックの場合には、２に等しいＢＳを有するブロック境界のみがフィルタリングされる。

図４は、特定の実施形態に係るデブロッキングフィルタの方法におけるフィルタ強度の決定の例示的なフローチャートを示す。それゆえ、ＢＳが決定される仕方（３００）とは独立して、追加の試験（４１５）が、所定の閾値βと比べた重み付きサンプル値の絶対差の結合を含む条件のセットに基づいて、フィルタリングが適用されるか否かを決定する：
｜ｐ２_０－２ｐ１_０＋ｐ０_０｜＋｜ｐ２_３－２ｐ１_３＋ｐ０_３｜＋｜ｑ２_０－２ｑ１_０＋ｑ０_０｜＋｜ｑ２_３－２ｑ１_３＋ｑ０_３｜＞β （式１）

フィルタが適用される場合には、フィルタリングプロセス（４３０）が、サンプル値（４１０、サンプル値にアクセスする）に依存して図２の境界の各側におけるＰ、Ｑサンプルのうちの１つ以上を変更する。フィルタリングプロセスの強度（普通又は強）は、所定の閾値と比べた重み付きサンプル値の絶対差の組み合わせを含む条件のセットに基づいて、境界の各側のサンプルの行（別に、列）ごとに決定される（４２０）。いくつかの閾値は量子化パラメータ（ＱＰ（quantization parameter））の関数である（４４０）。

ブロック境界の各側において（４３０）によって変更されるサンプルの数はフィルタ強度に依存する。フィルタ強度が強いほど、ブロック境界の各側の多くの画素に影響を及ぼす。

これより、ブロック内の不等又は空間的に可変の重みを有する重み付き予測を含み、デブロッキングフィルタが適応させられる少なくとも３つの新たな予測モードが開示される。

デブロッキングフィルタが適応させられる第１の予測モード：一般化双方向予測（ＧＢＩ）
双方向予測の場合には、２つの予測ブロックが計算され、重み付き合計と組み合わせられ、次式のように最終ブロック予測を得る：
Ｐ_ＧＢＩ＝（（（１＜＜ｇｓ）－ｇｗ_１）．Ｐ_０＋ｇｗ_１．Ｐ_１）＞＞ｇｓ （式２）

ＶＶＣ参照ソフトウェア（ＶＴＭ）において、用いるべき重みは、値が表１に示されている「ｇｂｉインデックス」を用いてＣＵごとに符号化される。

以下において、重みの対｛１／２；１／２｝はデフォルト重みと呼ばれることになる。

デブロッキングフィルタが適応させられる第２の予測モード：多重仮説
多重仮説（Multi Hypothesis）ＭＨの一般概念は、マージモード（マージ候補のリスト｛参照インデックス、動き値｝が構築され、動き補償されたインター予測のための動き情報を取得するために、１つの候補を識別するマージインデックスが信号で通信される）において遂行されるインター予測Ｐ０（単方向又は双方向予測され得る）を、イントラ予測（ＭＨ－インター－イントラ）又は別のインター予測（ＭＨ－インター－インター：例えば、単方向予測ＡＭＶＰ、スキップ及びマージ）のうちの一方である別の予測Ｐ１と組み合わせることである。最終予測は、マージインデックス付き予測、及び他の予測モード（イントラ又はインター）によって生成された予測の重み付き平均であり、この場合、組み合わせに依存して異なる重みが適用される。

図５は、インター及びイントラモードの組み合わせＭＨ－インター－イントラの場合の多重仮説予測の一例を示す。イントラ予測モードは信号で通信される（それは古典的予測モードの部分セット（例えば４）であることができる）。重みｗ＿ｉｎｔｒａ（ｙ）は、領域がイントラ参照サンプルから遠くなるにつれて徐々に減少する。非限定例によれば、現在のブロックは、同じ重み付けを共有する４つの等面積領域に分けられる。（ｗ０＝ｗ＿ｉｎｔｒａ_ｉ，ｗ１＝ｗ＿ｉｎｔｅｒ_ｉ）と表される各重みセット（ここで、ｉは１～４であり、（ｗ＿ｉｎｔｒａ_１，ｗ＿ｉｎｔｅｒ_１）＝（６，２）、（ｗ＿ｉｎｔｒａ_２，ｗ＿ｉｎｔｅｒ_２）＝（５，３）、（ｗ＿ｉｎｔｒａ_３，ｗ＿ｉｎｔｅｒ_３）＝（３，５）、及び（ｗ＿ｉｎｔｒａ_４，ｗ＿ｉｎｔｅｒ_４）＝（２，６））が、イントラ鉛直方向予測のための図５の例に示されるように、対応する領域に適用される。ＤＣ又は平面モードが選択されるか、或いはＣＵの幅又は高さが４よりも小さいときには、等しい重みが適用される。換言すれば、予測Ｐ１のイントラ予測モードがＤＣ又は平面モードであるときには、現在のブロックの任意のサンプルの予測において用いられる相対的重みは、ｗ０＝ｗ＿ｉｎｔｒａ＝１／２及びｗ１＝ｗ＿ｉｎｔｅｒ＝１／２である。したがって、等しい重みの１つの領域のみが存在する（ｉ＝１）。ＶＶＣにおいて定義された符号化モード、組み合わせインターマージ・イントラ予測ＣＩＩＰは、マージモードにおいて遂行されるインター予測Ｐ０（単方向又は双方向予測され得る）を、等しい重み１／２を有する平面イントラ予測である別の予測Ｐ１と組み合わせるＭＨ－インター－イントラの特定例である。

インター及びインターモードの組み合わせＭＨ－インター－インターの場合の多重仮説予測の別の例によれば、重みはデフォルトのもの（１／２；１／２）である。ＭＨ－インター－インターモードの他の変形例によれば、インターモードのうちの１つ又は２つは双方向予測であり｛２つのＭＶ、２つの参照｝、これにより、サンプル予測の構築は最大４つの動き補償の計算を必要とする。

デブロッキングフィルタが適応させられる第３の予測モード：幾何学的分割
幾何学的（例えば、三角形）モードは、符号化前にピクチャをブロックに分割するためのさらなる柔軟性を可能にする。図６は、非矩形分割（上）の一例、及び三角形分割に関連付けられたオーバーラップブロック動き補償の対角重み付け（下）の一例を示す。図６の上の２つの左側の例は三角形分割を表し、図６の上の４つの右側の例は幾何学的分割のより一般的な方式を表す。例えば、図６の下側に示される対角エッジに沿って、オーバーラップ境界を混合したときには、さらなる符号化性能が得られる。したがって、ブロックの対角線上に位置する４の重み係数を有するルマサンプルは１／２（Ｗ_１＝Ｗ_２＝４／８＝１／２）の等しい重みを用い、その一方で、２の重み係数を有するブロックの対角線に隣接したルマサンプルは（Ｗ_１＝２／８＝１／４及びＷ_２＝６／８＝３／４）の重みを用いる。変形例によっては、この重み付けプロセスは、ＧＢＩ又は局部照明補償（Local Illumination Compensation）ＬＩＣなどの他の重み付けと縦続接続し、実施の複雑さを増大させる。

三角形分割の場合には、サンプルを２つのグループに分けることができる：
－ 単方向動き補償（Ｐ０又はＰ１）を用いて予測されるサンプル
－ 双方向予測動き補償、単方向予測Ｐ０及び単方向予測Ｐ１の混合を用いて予測されるサンプル。

以前に説明されたように、重み付き予測を用いる少なくともシーセス（theses）３つの符号化モードは、デブロッキングフィルタにおいて境界強度又はフィルタ強度を査定する際に問題を生じさせる。

新たな予測モードに適応させられた、変更されたデブロッキングフィルタのいくつかの実施形態
本原理の少なくとも１つの実施形態は、ブロックが、非正方形又は非矩形ブロック（例えば、三角形）の組み合わせ、及び／又は不等（例えば、ＧＢｉ）及び／又は空間的に可変の重み付け（例えば、ＭＨ）の組み合わせを用いて符号化される場合には、デブロッキングフィルタＤＢＦを変更することに関する。有利に、三角形分割のために、又はより一般的には、幾何学的分割のために示されるとおりの、非正方形又は非矩形ブロックは、図７上に示されるとおりの空間的に可変の重み付けを有する２つの予測の組み合わせとして考慮される。

有利に、少なくとも１つの実施形態では、ＤＢＦプロセス（フィルタ強度の導出及びフィルタリング）は、元のＤＢＦの意図及び効率を保つように変更され、それゆえ、従来技術の方法と比べてその効率を増大させる。

図８は、少なくとも１つの実施形態の一般的態様に係る画像の部分をデブロッキングするための方法の一例を示す。予備的ステップＳ１１０によれば、２つの隣接ブロックに関する情報にアクセスする。２つの隣接ブロックは、後に、第１のブロックＰ及び第２のブロックＱと呼ばれ、それらは制限なく交換可能である。用語、第１及び第２は、本明細書において、２つのブロックを記述するために用いられ得るが、これらの２つのブロックはこれらの用語によって限定されるべきではない。これらの用語は、単に、１つの要素を別のものと区別するために用いられるにすぎない。第１のブロックＰ及び第２のブロックＱは、フィルタリングするべき画像の部分に属する。サンプルのブロックは、非限定例によれば、符号化ユニット又は変換ユニットのうちの一方である。第１のステップＳ１２０において、サンプルの第１のブロックＰとサンプルの第２のブロックＱとの間の少なくとも１つの境界を決定する。特定の実施形態では、フラグＥｄｇｅＦｌａｇは、ＤＢＦを用いてフィルタリングするべき境界におけるサンプルのために１に設定され、フラグＥｄｇｅＦｌａｇは、ＤＢＦを用いてフィルタリングされるべきでないサンプルのために０に設定される。ＤＢＦを用いてフィルタリングされるべきでないサンプルは、画像の境界における、又はスライスの境界におけるサンプル、或いはブロック、例えば、符号化ユニット又は変換ユニットの内部の（境界サンプルでない）サンプルを含む。境界は、水平境界（水平エッジ）又は鉛直境界（鉛直エッジ）のいずれかである。ステップＳ１３０において、ＤＢＦの少なくとも１つのパラメータを決定する。以前に示されたように、ＤＢＦの少なくとも１つのパラメータは、フィルタの境界強度ＢＳ、及びフィルタ強度ＦＳを含む。境界強度ＢＳは、弱（ＢＳ＝０）、普通（ＢＳ＝１）、又は強（ＢＳ＝２）の値の間で選択される。フィルタ強度ＦＳは、フィルタを適用するか否かに関し、ブロック境界の各側の大なり小なりの画素に影響を及ぼす決定プロセスの結果を参照する。決定プロセスは、第１のブロックＰ及び第２のブロックＱのサンプルの値に関する少なくとも１つの条件を含む。ステップＳ１４０において、第１のブロックの予測モード及び第２のブロックの予測モードのうちの少なくとも１つに従って境界強度ＢＳを決定する。有利に、境界強度ＢＳは、第１の予測を第２の予測と組み合わせた重み付き予測モードである予測モードのために適応させられる。特定の特徴によれば、第１のブロックの予測モードが重み付き予測モードである場合には、境界強度ＢＳは、第１のブロックの重み付き予測モードに従ってサンプルの第１のブロックを予測する際に用いられるサンプルの相対的重みにさらに依存する。特定の特徴によれば、重み付き予測モードは、符号化ユニットレベル重みを用いた双方向予測ＢＣＷとも称される一般化双方向予測ＧＢｉ、イントラ及びインター予測されたサンプルを組み合わせた（ＭＨ－インター－イントラ）、又はインター及びインター予測されたサンプルを組み合わせた（ＭＨ－インター－インター）多重仮説予測、インターマージ及びイントラ予測されたサンプルを組み合わせた組み合わせインターマージ・イントラ予測、ブロックの幾何学的分割に応じたインター予測されたサンプルを組み合わせた幾何学的予測、ブロックの対角エッジに沿ったインター予測されたサンプルを組み合わせた三角形予測を含む、以前に説明された符号化モードのうちの１つである。以下において、ＢＳを決定するための様々な実施形態が説明される。特定の実施形態によれば、第１のブロックの重み付き予測モードに従ってサンプルの第１のブロックを予測することは、第１のブロックのサンプルを、第１の予測モードを用いて決定された第１の予測因子Ｐ０及び第２の予測モードを用いて決定された第２の予測因子Ｐ１の重み付き組み合わせ（ｗ０、ｗ１＝１－ｗ０）として予測することを含み、第１のブロックのサンプルは、第１の予測因子の重みｗ０がレベルを上回る場合には、境界強度を決定するために第１の予測モードを用いるものとして考慮される。他の特定の実施形態によれば、第１の予測因子の重みｗ０を有するブロック内のサンプルの数がレベルを上回り、ＢＳにおいて第１のブロックのために用いるべきモードを決定する。特定の変形例によれば、レベルは０に設定される。別の特定の変形例によれば、境界強度は、同じ相対的重みを共有するブロックのサンプルのグループのために決定される。非限定例によれば、サンプルのグループは、ブロックの１つのサンプル、又は４ｘ４のサンプル、及び最大全てのサンプルを含む。次に、ステップＳ１６０において、決定された境界強度ＢＳに従ってＤＢＦフィルタリングプロセスを境界に沿って第１及び第２のブロックに適用する。

以前のアプローチでは、１つの矩形又は正方形ブロックのためのＤＢＦパラメータの選定は、図２上に示されるとおりの鉛直（別に、水平）境界の各側の行（又は列）サンプルのセット｛ｐ_３ｉ，ｐ_２ｉ，ｐ_１ｉ，ｐ_０ｉ，ｑ_０ｉ，ｑ_１ｉ，ｑ_２ｉ，ｑ_３ｉ｝ごとに実施される。しかし、実施を容易にするには、一般的には、例えば、４ｘ４サブブロックなどのサンプルのグループごとにＤＢＦパラメータを管理／設定することが好ましい。

したがって、以下において、現在のブロックのためのＤＢＦパラメータが、サイズ４ｘ４のサブブロックのサンプルのグループごとに設定される場合の実施形態が説明される。しかし、本原理は、４ｘ４サブブロックのためのＤＢＦパラメータを決定することに限定されない。当業者は、以下の例から、他のサイズのための、又はさらに、単一の行（若しくは、単一の列）ごとのパラメータを直接に推論するであろう。次に、ブロックはサブブロックのセットに分割され、１つの行（別に、列）内のサンプル値に関連するＤＢＦパラメータ（例えば、フィルタリング強度）を除いて、同じＤＢＦパラメータ（例えば、ＢＳ）がサブブロックの全てのサンプルのために導出される。

図７は、特定の実施形態に係る三角形論理分割（左）及び混合マップ（右）の一例を示す。例えば、三角形などの非矩形分割の場合には、１つのサブブロックのいくつかのサンプルは単方向予測を用いて予測され、他のものは双方向予測（２つの単方向予測の混合）を用いて予測されることが起こり得る。図７の左側において、サブブロックｓｂ２は、単方向予測を用いて予測されるサブブロックを示し、その一方で、サブブロックｓｂ３は、双方向予測を用いて予測されるサブブロックを示す。この場合、ＢＳの選定がサンプルごとに個々に行われる場合には、ステップ３２０、３３０、３４０が異なる結果を与え得るため、ＢＳはサンプルごとに異なり得る。

以下において、我々は、サンプル（ｘ）ごとに、第１の予測因子ブロックＰ０及び第２の予測因子ブロックＰ１にそれぞれ関連付けられた混合重みｗ０（ｘ）及びｗ１（ｘ）を包含する２つの混合マップを各サブブロックに関連付けることになる。このマップの目的は、実施形態の説明を容易にすることであり、このとき、それは、仮想的なものであってもよく、つまり、それは計算されるか、又はメモリシステム内に記憶されなくてもよい。伝統的な双方向予測の場合には、２つのマップは均一であり、１／２に等しい。ＧＢｉの場合には、２つのマップは均一であり、例えば、それぞれ３／８及び５／８に等しい。ＭＨの場合には、例えば、ｗ０（ｘ）＝ｗ＿ｉｎｔｒａ（ｘ）及びｗ１（ｘ）＝ｗ＿ｉｎｔｅｒ（ｘ）である。

画像の部分をデブロッキングするための一般的方法において用いられる境界強度ＢＳを決定するためのいくつかの実施形態が説明される。実施形態は、いくつかの実施形態の任意の組み合わせに従って共に配列され得る。

デブロッキングフィルタの第１の実施形態
第１の実施形態は、デブロッキングフィルタであって、境界強度が、サンプルの数、及び双方向予測若しくは重み付き双方向予測において用いられるサンプルの相対的重みに適応させられる、デブロッキングフィルタを備える。本実施形態は、境界の一方の側の１つのサブブロックが幾何学的分割又はＧＢｉを用いる場合に、有利にうまく適応させられる。

所与のサブブロックのために、図３のプロセス３２０は以下のように変更される：
ａ） サブブロック内の少なくとも１つのサンプルが双方向予測される場合には、このとき、サブブロックは、（例えば、図７の右側の混合マップに係るｓｂ２及びｓｂ３のように）ＢＳの決定のために双方向予測されるものとして考慮される。
ｂ） 一変形例では、サブブロック内の双方向予測を用いるサンプルの相対数が閾値を上回る場合には、このとき、サブブロックは、ＢＳの決定のために双方向予測されるものとして考慮される（例えば、図７の右側の混合マップに係る、１４個の双方向予測されるサンプルを有するｓｂ３は、双方向予測されるものとして考慮され、その一方で、図７の右側の混合マップに係る３つの双方向予測されるサンプルを有するｓｂ２は、単方向予測されるものとして考慮される）。
ｃ） 一変形例では、サブブロック内の双方向予測されるサンプルの数の計算は、１つの混合重み（ｗ０（ｘ）又はｗ１（ｘ））が閾値又はレベル（例えば、ｔｈ＝１／４）を下回るサンプルを除外する。これらのサンプルは、単方向予測されるものとして考慮される。
ｄ） 一変形例では、ｎ０を、予測のために参照０を用いるサンプルの相対数を表すものとし、ｎ１を、予測のために参照１を用いるサンプルの相対数とし、ｎ０／（ｎ０＋ｎ１）及びｎ１／（ｎ０＋ｎ１）が閾値を上回る場合には、このとき、サブブロックは、ＢＳの決定のために双方向予測されるものとして考慮される。

非限定的な値によれば、ｂ）、ｃ）及びｄ）において、閾値又はレベルは０である。

有利に、閾値は、例えば、ブロックのサイズ及び分割の種類によってインデックス付けされたルックアップ表の内部にハードコードされる。

デブロッキングフィルタの第２の実施形態
第２の実施形態は、デブロッキングフィルタであって、境界強度が、インター及びイントラ予測されるサンプルを組み合わせる際に、或いはインター及びインター予測されるサンプルを組み合わせる際に用いられるサンプルの相対的重みに局所的に適応させられる、デブロッキングフィルタを備える。本実施形態は、境界の一方の側の１つのサブブロックがＭＨを用いる場合に、有利にうまく適応させられる。

ＭＨ－インター－イントラを用いるサブブロックを考慮すると：
ａ） ｗ＿ｉｎｔｒａ（ｘ）が閾値／レベルを上回るブロックの区域はイントラとして考慮される。例えば、図５のＭＨ－インター－イントラの例の場合には、最初の３つの上の区域はイントラとして考慮される。
ｂ） ｗ＿ｉｎｔｅｒ（ｘ）が閾値／レベルを上回るブロックの区域はインターとして考慮される。インター予測が双方向予測（又は単方向）である場合には、区域は双方向予測（別に、単方向）と考慮される。例えば、図５のＭＨ－インター－イントラの例の場合には、最後の下の区域（ｗ＿ｉｎｔｅｒ（ｘ）＝６／８）はインターとして考慮される。

以前と同様に、一変形例では、閾値又はレベルは０であることに留意されたい。

加えて、一変形例では、閾値は、ブロックのサイズ、及び用いられるイントラ方向によってインデックス付けされたルックアップ表の内部にハードコードされる。

それゆえ、ａ）によれば、第１の予測モードが１イントラ予測モードである場合、及び第１の予測因子の重み（ｗ＿ｉｎｔｒａ（ｘ））がレベルを上回る場合には、第１のブロックのサンプルは、境界強度を決定するためにイントラ予測モードを用いるものとして考慮される。特に、これは、方向性イントラ予測（例えば、図５上に示されるとおりの鉛直イントラ予測）、及びＤＣ若しくは平面などの非方向性モードを含む、イントラ予測モードのうちの任意のものに適用される。加えて、平面又はＤＣモードの場合には、等しい重みがブロックの区域全体のために適用され、ブロックの区域全体のための同じイントラ予測モードをもたらす。元のＤＢＦの意図によれば、第１のブロックＰ又は第２のブロックＱがイントラである場合には、ＢＳは強に設定され（ＢＳ＝２）、それゆえ、第１の予測モードが１イントラ予測モードである場合、及び第１の予測因子の重み（ｗ＿ｉｎｔｒａ（ｘ））がレベルを上回る場合には、境界強度は強に設定される。ＣＩＩＰ（ＭＨ－インター－イントラ、ここで、イントラは平面である）に対応する特定の変形例では、ＢＳはブロックのために強に設定される（ＢＳ＝２）。

加えて、ｂ）によれば、第１の予測モードが１インター予測モードである場合、及び第１の予測因子の重み（ｗ＿ｉｎｔｅｒ（ｘ））がレベルを上回る場合には、第１のブロックのサンプルは、境界強度を決定するためにインター予測モードを用いるものとして考慮される。特に、これは、単方向及び双方向インター予測を含むインター予測モードのうちの任意のものに適用される。したがって、第１の予測モードがインター双方向予測モードである場合には、このとき、第１のブロックのサンプルは、境界強度を決定するためにインター双方向予測モードを用いるものとして考慮され、別に、第１の予測モードがインター単方向予測モードである場合には、第１のブロックのサンプルは、境界強度を決定するためにインター単方向予測モードを用いるものとして考慮される。次に、参照インデックス及び動きベクトルの差に関する、異なる種々のチェックが、双方向又は単方向インター予測モードに従って処理される。

Ｐ０が双方向予測され、Ｐ１が単方向予測される、ＭＨ－インター－インターを用いるサブブロックを考慮すると：
ｃ） ｗ０（ｘ）が閾値／レベルを上回るブロックの区域は、双方向予測されるものとして考慮され、その一方で、ｗ１（ｘ）が閾値を上回るブロックの区域は、単方向予測されるものとして考慮される。
ｄ） 一変形例では、少なくともＰ０又はＰ１が双方向予測され、｛ｗ０（ｘ）；ｗ１（ｘ）｝が閾値を上回る場合には、このとき、チェック１及びチェック２は以下のように変更される：
（ｉ；ｊ）の全ての対の値について： ｒｅｆ－ｉ_Ｐ≠ｒｅｆ－ｊ_Ｑであるかどうか （チェック１）
ｒｅｆ－ｉ_Ｐ＝ｒｅｆ－ｊ_Ｑである１つの対の値（ｉ；ｊ）について： ｜ＭＶｉ_Ｐ－ＭＶｊ_Ｑ｜＞閾値であるかどうか （チェック２）
（ｉ；ｊ）は、ｒｅｆ－ｉ_Ｐ＞＝０及びｒｅｆ－ｊ_Ｑ＞＝０などである

以前と同様に、一変形例では、閾値又はレベルは０であることに留意されたい。

有利に、閾値は、ブロックのサイズ及び分割の種類によってインデックス付けされたルックアップ表の内部にハードコードされ得る。

デブロッキングフィルタの第３の実施形態
第３の実施形態は、デブロッキングフィルタであって、境界強度が、予測において用いられるサンプルの重みに適応させられる、デブロッキングフィルタを備える。本実施形態は、境界の一方の側の１つのサブブロックが一般化双方向予測ＧＢｉ又はＢＣＷを用いる場合に、有利にうまく適応させられる。

参照０及び参照１に関連付けられたＧＢｉ重み（ｗ０（ｘ）；ｗ１（ｗ））がデフォルトでないサブブロックを考慮すると：
ａ） ｗ０（ｘ）又はｗ１（ｘ）が閾値を下回る場合には、このとき、ブロックは、ステップ（３２０、３３０）において単方向予測｛ＭＶ１、ｒｅｆ－１｝（又は別に、ＭＶ０、ｒｅｆ－０）として考慮され、｛ＭＶ１、ｒｅｆ－１｝（又は別に、ＭＶ０、ｒｅｆ－０）のみが（３４０）において用いられる。

デブロッキングフィルタの第４の実施形態
第４の実施形態は、デブロッキングフィルタであって、動きベクトルが、境界強度を決定するためにＰＯＣ差を用いて正規化される、デブロッキングフィルタを備える。第１のブロックＰ及び第２のブロックＱが異なる参照インデックスを有する場合には、試験（３２０）は「偽」に推論され、（３４０）のために、Ｑ（又はＰ）のＭＶ値はＰ（又は別に、Ｑ）と同じＰＯＣに再スケーリングされる。

デブロッキングフィルタの第５の実施形態
第５の実施形態は、デブロッキングフィルタであって、境界強度を決定することが、境界におけるブロックのうちの１つの符号化モードがＭＨ、ＧＢｉ、双方向予測のうちの少なくとも１つであるかどうかに関する試験（追加条件）を含む、デブロッキングフィルタを備える。

図９は、第５の実施形態に係るデブロッキングフィルタの方法における境界強度の決定のフローチャートを示す。ＢＳの決定（３００）は、第１のブロックＰ又は第２のブロックＱの符号化モード（ＸＸ）に関する追加条件（３１５）を含むように変更される。ＢＳの決定が、図３において説明される方式に従う場合には、この追加条件は、図９における１つの非限定例に示されるとおりの条件（３１０、３２０、３３０、３４０）の前／後／間に配置され得る。非限定例によれば、ＸＸは、ＭＨ、及び／又はＧＢｉ、及び／又は双方向予測である。他の非限定例によれば、第１のブロックＰ又は第２のブロックＱの符号化モード（ＸＸ）を決定することは、第１、第２、又は第３の実施形態のために説明された変形例のうちの任意のものに適合する。例えば、ブロックの符号化モードは、サンプルの数、及び双方向予測において用いられるサンプルの相対的重みに基づいて決定され、ブロックの符号化モードは、ＭＨにおいて用いられるサンプルの相対的重みに基づいて決定される。符号化モードがイントラと決定された場合には、ＢＳは２に設定される。

デブロッキングフィルタの第６の実施形態
第６の実施形態は、符号器／復号器であって、符号化パラメータが、（境界強度パラメータの決定における）デブロッキングフィルタにおける後の使用のために復号化／再構成時に変更され、記憶される、符号器／復号器を備える。図１０は、特定の実施形態に係るデブロッキングフィルタの方法における境界強度（ＢＳ）パラメータの決定において用いられるＣＵパラメータの記憶の２つのフローチャートを示す。図１０の左側及び右側の画像の部分をデブロッキングするための方法５００は符号器又は復号器のループ内フィルタリングにおいて実施される。本方法は、ＢＳの決定のステップ３３０及びフィルタＤＢＦの適用のステップ４００を含む。

図１０の左側に表された一実施形態では、ＢＳパラメータの決定は、ＣＵ（又は部分ＣＵ）パラメータ（例えば、Ｐ、Ｑモード、参照インデックス、ＭＶ値）の部分セットに依存し、以前に示された実施形態に従って変更される。図１０の右側に表される別の実施形態では、ＢＳパラメータ３００の決定は変更されないが、ＣＵ（又は部分ＣＵ）パラメータのこの部分セットのうちのいくつかは、現在のＣＵ（別に、部分ＣＵ）を復号化し（５１０）、再構成する（５２０）ためのそれらの使用後に変更され（５３０）、他のプロセス（例えば、ＤＢＦプロセス）によって利用可能になるために記憶される。ＣＵパラメータのこの部分セットの変更は、他の復号化されたＣＵパラメータ５１５の関数である。したがって、この関数は、ＢＳ（３００の出力）の値を、ＣＵ（又は部分ＣＵ）パラメータの復号化された部分セット以外のパラメータに依存させることを可能にする。

例えば、符号化モードがＭＨ－インター－イントラである場合、及びｗ＿ｉｎｔｒａ（ｘ）が閾値を上回る場合には、このとき、符号化モードは記憶前にイントラとして変更され、これにより、３００において、ＢＳは、イントラ予測モードに対応する強（ＢＳ＝２）に設定される。このように、ＭＨ－インター－イントラ又はＣＩＩＰに関して説明された第２の実施形態の変形例ａ）と同じ挙動が得られる。

別の例では、サブブロック内の双方向予測を用いるサンプルの相対数が閾値を上回る場合には、このとき、サブブロック符号化モードは記憶前に双方向予測されるものとして変更され、これにより、ステップ３００において、現在のＣＵは、双方向予測されるものとして設定され、第１の実施形態の変形例ｂ）において説明されるものと同じ挙動が得られる。

一変形例では、後の使用のために記憶されたこれらの変更されたＣＵ（又は部分ＣＵ）パラメータは、他のＣＵ（又は部分ＣＵ）によってＤＢＦとは別のプロセスのために用いられる。例えば、変更されたＭＶ値は、後に、時間動き予測（例えば、ＡＴＭＶＰ）のために用いられ得る。

追加的な実施形態及び情報
本出願は、ツール、特徴、実施形態、モデル、アプローチ等を含む、種々の態様を説明する。これらの態様のうちの多くは特異的に説明され、少なくとも、個々の特徴を示すために、しばしば、限定と思われるかもしれない仕方で説明される。しかし、これは、説明を明快にする目的のためのものであり、それらの態様の適用又は範囲を限定しない。実際に、異なる態様の全ては、さらなる態様をもたらすよう組み合わせられ、交換され得る。さらに、態様は、以前の出願において説明された態様とも組み合わせられ、交換され得る。

本出願において説明され、企図される態様は多くの異なる形態で実施され得る。以下の図１１、図１２、及び図１３はいくつかの実施形態を提供するが、他の実施形態も企図され、図１１、図１２、及び図１３における説明は実装の広さを限定しない。態様のうちの少なくとも１つは、概して、映像符号化及び復号化に関し、少なくとも１つの他の態様は、概して、生成又は符号化されたビットストリームを伝送することに関する。これら及び他の態様は、方法、装置、上述された方法のうちのいずれかに従って映像データを符号化若しくは復号化するための命令が記憶されたコンピュータ可読記憶媒体、及び／又は上述された方法のうちのいずれかに従って生成されたビットストリームが記憶されたコンピュータ可読記憶媒体として実施され得る。

本出願において、用語「再構成される（reconstructed）」及び「復号化される（decoded）」は互換的に使用され得、用語「画素」及び「サンプル」は互換的に使用され得、用語「画像」、「ピクチャ」、及び「フレーム」は互換的に使用され得る。通常、必ずしもそうとは限らないが、用語「再構成される」は符号器側において使用され、その一方で、「復号化される」は復号器側において使用される。

様々な方法が本明細書において説明されており、方法の各々は、上述の方法を達成するための１つ以上のステップ又はアクションを含む。方法の適切な動作のためにステップ又はアクションの特定の順序が必要とされない限り、特定のステップ及び／又はアクションの順序及び／又は使用は変更されるか、又は組み合わせられてもよい。

本出願において説明される様々な方法及び他の態様は、図１１及び図１２に示されるとおりの映像符号器１００及び復号器２００のモジュール、例えば、ループ内フィルタ（１６５、２６５）を変更するために用いることができる。さらに、本態様はＶＶＣ又はＨＥＶＣに限定されず、例えば、既存のものであるのか、又は将来開発されるものであるのかにかかわらず、他の規格及び勧告、並びに任意のこのような規格及び勧告（ＶＶＣ及びＨＥＶＣを含む）の拡張に適用することができる。別段の指示がないか、又は技術的に除外されない限り、本出願において説明される態様は、個々に、又は組み合わせて用いることができる。

本出願においては、様々な数値、例えば、ＤＢＦパラメータが推定されるサブブロックのサイズ４ｘ４が用いられる。特定の値は例示目的のためのものであり、説明される態様はこれらの特定の値に限定されない。

図１１は符号器１００を示す。この符号器１００の変形例が企図されるが、以下においては、明快にする目的のために、符号器１００は、全ての予想される変形例を説明することなく説明される。

符号化される前に、映像シーケンスは、符号化前処理（１０１）、例えば、色変換を入力カラーピクチャに適用すること（例えば、ＲＧＢ４：４：４からＹＣｂＣｒ４：２：０への変換）、又は圧縮に対してより弾力的な信号分布を得るために、入力ピクチャ成分のリマッピングを遂行すること（例えば、色成分のうちの１つのヒストグラム等化を用いる）を経てもよい。メタデータを前処理に関連付け、ビットストリームに添付することができる。

符号器１００では、ピクチャが、以下において説明されるように、符号器要素によって符号化される。符号化されるべきピクチャは分割され（１０２）、例えば、ＣＵのユニットで処理される。各ユニットは、例えば、イントラモード又はインターモードのいずれかを用いて符号化される。ユニットがイントラモードで符号化されるときには、それはイントラ予測（１６０）を遂行する。インターモードでは、動き推定（１７５）及び補償（１７０）が遂行される。符号器は、ユニットを符号化するためにイントラモード又はインターモードのうちのどちらのものを用いるべきかを決定し（１０５）、例えば、予測モードフラグによって、イントラ／インターの決定を指示する。例えば、予測ブロックを元の画像ブロックから減算すること（１１０）によって、予測残差が算出される。

次に、予測残差は変換され（１２５）、量子化される（１３０）。量子化変換係数、並びに動きベクトル及び他の構文要素は、ビットストリームを出力するためにエントロピー符号化される（１４５）。符号器は変換を飛ばし、量子化を、変換されていない残差信号に直接適用することができる。符号器は変換及び量子化の両方を迂回することができ、すなわち、残差は、変換又は量子化プロセスの適用を行わずに直接符号化される。

符号器は、さらなる予測のための参照を提供するために、符号化されたブロックを復号化する。量子化変換係数は逆量子化され（１４０）、予測残差を復号化するために逆変換される（１５０）。復号化された予測残差及び予測ブロックを組み合わせ（１５５）、画像ブロックが再構成される。符号化アーチファクトを低減するべく、例えば、デブロッキング／ＳＡＯ（サンプルアダプティブオフセット）フィルタリングを遂行するためのループ内フィルタ（１６５）が、再構成されたピクチャに適用される。フィルタリングされた画像は参照ピクチャバッファ（１８０）において記憶される。

図１２は映像復号器２００のブロック図を示す。復号器２００では、ビットストリームが、以下において説明されるように、復号器要素によって復号化される。映像復号器２００は、概して、図１１において説明されたとおりの符号化パスと逆の復号化パスを遂行する。符号器１００も、概して、映像データを符号化する部分として映像復号化を遂行する。

具体的には、復号器の入力は、映像符号器１００によって生成され得る、映像ビットストリームを含む。ビットストリームは、まず、変換係数、動きベクトル、及び他の符号化された情報を取得するために、エントロピー復号化される（２３０）。ピクチャ分割情報は、ピクチャがどのように分割されているのかを指示する。したがって、復号器は、復号化されたピクチャ分割情報に従ってピクチャを分割し得る（２３５）。変換係数は逆量子化され（２４０）、予測残差を復号化するために逆変換される（２５０）。復号化された予測残差及び予測ブロックを組み合わせ（２５５）、画像ブロックが再構成される。予測ブロックはイントラ予測（２６０）又は動き補償予測（すなわち、インター予測）（２７５）から取得され得る（２７０）。ループ内フィルタ（２６５）が、再構成された画像に適用される。フィルタリングされた画像は参照ピクチャバッファ（２８０）において記憶される。

復号化されたピクチャは、復号化後処理（２８５）、例えば、逆色変換（例えば、ＹＣｂＣｒ４：２：０からＲＧＢ４：４：４への変換）、又は符号化前処理（１０１）において遂行されたリマッピングプロセスの逆を遂行する逆リマッピングをさらに経ることができる。復号化後処理は、符号化前処理において導出され、ビットストリームに含めて信号で通信されたメタデータを用いることができる。

図１３は、様々な態様及び実施形態が実施されるシステムの一例のブロック図を示す。システム１０００は、以下において説明される様々な構成要素を含むデバイスとして具体化され得、本文書において説明される態様のうちの１つ以上を遂行するように構成されている。このようなデバイスの例としては、限定するものではないが、パーソナルコンピュータ、ラップトップコンピュータ、スマートフォン、タブレットコンピュータ、デジタルマルチメディアセットトップボックス、デジタルテレビ受信器、パーソナルビデオ録画システム、接続された家庭電化製品、及びサーバなどの、様々な電子デバイスが挙げられる。システム１０００の要素は、単独で、又は組み合わせて、単一の集積回路（ＩＣ（integrated circuit））、複数のＩＣ、及び／又は個別構成要素において具体化され得る。例えば、少なくとも１つの実施形態では、システム１０００の処理及び符号器／復号器要素は複数のＩＣ及び／又は個別構成要素にわたって分散している。様々な実施形態では、システム１０００は、例えば、通信バスを介して、又は専用入力及び／又は出力ポートを通じて、１つ以上の他のシステム、又は他の電子デバイスに通信可能に結合されている。様々な実施形態では、システム１０００は、本文書において説明される態様のうちの１つ以上を実施するように構成されている。

システム１０００は、少なくとも１つのプロセッサ１０１０であって、例えば、本文書において説明される様々な態様を実施するためのそれにロードされた命令を実行するように構成された、少なくとも１つのプロセッサ１０１０を含む。プロセッサ１０１０は、組み込みメモリ、入出力インターフェース、及び当技術分野において知られているとおりの様々な他の回路機構を含むことができる。システム１０００は少なくとも１つのメモリ１０２０（例えば、揮発性メモリデバイス、及び／又は不揮発性メモリデバイス）を含む。システム１０００は、限定するものではないが、電気的消去可能プログラマブルリードオンリーメモリ（ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory））、リードオンリーメモリ（ＲＯＭ(Read-Only Memory））、プログラマブルリードオンリーメモリ（ＰＲＯＭ（Programmable Read-Only Memory））、ランダムアクセスメモリ（ＲＡＭ（Random Access Memory））、ダイナミックランダムアクセスメモリ（ＤＲＡＭ（Dynamic Random Access Memory））、スタティックランダムアクセスメモリ（ＳＲＡＭ（Static Random Access Memory））、フラッシュ、磁気ディスクドライブ、及び／又は光ディスクドライブを含む、不揮発性メモリ及び／又は揮発性メモリを含むことができる、記憶デバイス１０４０を含む。記憶デバイス１０４０は、非限定例として、内部記憶デバイス、付属の記憶デバイス（着脱式及び非着脱式記憶デバイスを含む）、及び／又はネットワークアクセス可能記憶デバイスを含むことができる。

システム１０００は、例えば、符号化された映像又は復号化された映像を提供するためにデータを処理するように構成された符号器／復号器モジュール１０３０を含み、符号器／復号器モジュール１０３０はそれ自体のプロセッサ及びメモリを含むことができる。符号器／復号器モジュール１０３０は、符号化及び／又は復号化機能を遂行するためにデバイス内に含まれ得るモジュールを表す。周知のとおり、デバイスは符号化及び復号化モジュールのうちの一方又は両方を含むことができる。加えて、符号器／復号器モジュール１０３０はシステム１０００の別個の要素として実施され得るか、又は当業者に周知のように、ハードウェア及びソフトウェアの組み合わせとしてプロセッサ１０１０内に組み込まれ得る。

本文書において説明される様々な態様を遂行するためにプロセッサ１０１０又は符号器／復号器１０３０上にロードされるべきプログラムコードは、記憶デバイス１０４０内に記憶され、その後、プロセッサ１０１０による実行のためにメモリ１０２０上にロードされ得る。様々な実施形態によれば、プロセッサ１０１０、メモリ１０２０、記憶デバイス１０４０、及び符号器／復号器モジュール１０３０のうちの１つ以上は、本文書において説明されるプロセスの遂行の最中に様々な項目のうちの１つ以上を記憶することができる。このような記憶される項目は、限定するものではないが、入力映像、復号化された映像、若しくは復号化された映像の部分、ビットストリーム、行列、変数、並びに式、公式、演算、及び動作論理の処理からの中間若しくは最終結果を含むことができる。

実施形態によっては、プロセッサ１０１０及び／又は符号器／復号器モジュール１０３０の内部のメモリは、命令を記憶するため、及び符号化若しくは復号化の最中に必要とされる処理のための作業メモリを提供するために用いられる。しかし、他の実施形態では、処理デバイス（例えば、処理デバイスはプロセッサ１０１０又は符号器／復号器モジュール１０３０のどちらかであることができる）の外部のメモリがこれらの機能のうちの１つ以上のために用いられる。外部メモリは、メモリ１０２０及び／又は記憶デバイス１０４０、例えば、動的揮発性メモリ及び／又は不揮発性フラッシュメモリであることができる。いくつかの実施形態では、外部の不揮発性フラッシュメモリが、例えば、テレビのオペレーティングシステムを記憶するために用いられる。少なくとも１つの実施形態では、ＲＡＭなどの高速な外部の動的揮発性メモリが、ＭＰＥＧ－２（ＭＰＥＧはムービングピクチャーエクスパーツグループ（Moving Picture Experts Group）を指し、ＭＰＥＧ－２はＩＳＯ／ＩＥＣ１３８１８とも称され、１３８１８－１はＨ．２２２としても知られ、１３８１８－２はＨ．２６２としても知られる）、ＨＥＶＣ（ＨＥＶＣは、Ｈ．２６５及びＭＰＥＧ－Ｈ Ｐａｒｔ２としても知られる、高効率ビデオコーディング（High Efficiency Video Coding）を指す）、又はＶＶＣ（多用途ビデオコーディング（Versatile Video Coding）、ＪＶＥＴ、ジョイントビデオエクスパーツチーム（Joint Video Experts Team）によって開発されている新たな規格）などのための、映像符号化及び復号化動作のための作業メモリとして用いられる。

システム１０００の要素への入力は、ブロック１１３０において指示されるように、様々な入力デバイスを通じて提供され得る。このような入力デバイスは、限定するものではないが、（ｉ）放送業者によって、例えば、空中で伝送されたＲＦ信号を受信する無線周波数（ＲＦ（radio frequency））部分、（ｉｉ）コンポーネント（ＣＯＭＰ（Component））入力端子（若しくはＣＯＭＰ入力端子のセット）、（ｉｉｉ）ユニバーサルシリアルバス（ＵＳＢ（Universal Serial Bus））入力端子、及び／又は（ｉｖ）高精細マルチメディアインターフェース（ＨＤＭＩ（High Definition Multimedia Interface））入力端子を含む。図１３に示されていない、他の例は複合映像を含む。

様々な実施形態では、ブロック１１３０の入力デバイスは、当技術分野において知られているように、関連付けられたそれぞれの入力処理要素を有する。例えば、ＲＦ部分は、（ｉ）所望の周波数を選択し（信号を選択する、又は信号を周波数の帯域に帯域制限するとも言及される）、（ｉｉ）選択された信号をダウンコンバートし、（ｉｉｉ）（例えば）特定の実施形態においてチャネルと称され得る信号周波数帯域を選択するために、周波数のより狭い帯域に再び帯域制限し、（ｉｖ）ダウンコンバートされ、帯域制限された信号を復調し、（ｖ）誤り訂正を遂行し、（ｖｉ）データパケットの所望のストリームを選択するべく多重分離するために適した要素に関連付けられ得る。様々な実施形態のＲＦ部分は、これらの機能を遂行するための１つ以上の要素、例えば、周波数セレクタ、信号セレクタ、帯域制限器、チャネルセレクタ、フィルタ、ダウンコンバータ、復調器、誤り訂正器、及びデマルチプレクサを含む。ＲＦ部分は、例えば、受信信号をより低い周波数（例えば、中間周波数若しくはベースバンド付近の周波数）へ、又はベースバンドへダウンコンバートすることを含む、これらの機能のうちの様々なものを遂行するチューナを含むことができる。１つのセットトップボックスの実施形態では、ＲＦ部分及びその関連入力処理要素は、有線（例えば、ケーブル）媒体を通じて伝送されたＲＦ信号を受信し、フィルタリングし、ダウンコンバートし、所望の周波数帯域へ再びフィルタリングすることによって周波数選択を遂行する。様々な実施形態は、上述の（及び他の）要素の順序を並べ替え、これらの要素のうちのいくつかを除去し、及び／又は同様の、若しくは異なる機能を遂行する他の要素を追加する。要素を追加することは、例えば、増幅器及びアナログ－デジタル変換器を挿入するなど、要素を既存の要素の間に挿入することを含むことができる。様々な実施形態では、ＲＦ部分はアンテナを含む。

加えて、ＵＳＢ及び／又はＨＤＭＩ端子は、ＵＳＢ及び／又はＨＤＭＩ接続を通じてシステム１０００を他の電子デバイスに接続するためのそれぞれのインターフェースプロセッサを含むことができる。入力処理の様々な態様、例えば、リード・ソロモン誤り訂正は、例えば、必要に応じて、別個の入力処理ＩＣ内、又はプロセッサ１０１０内で実施され得ることを理解されたい。同様に、ＵＳＢ又はＨＤＭＩインターフェース処理の態様は、必要に応じて、別個のインターフェースＩＣ内、又はプロセッサ１０１０内で実施され得る。復調され、誤り訂正され、多重分離されたストリームは、例えば、出力デバイス上における提示のために必要に応じてデータストリームを処理するためにメモリ及び記憶要素と組み合わせて動作する、プロセッサ１０１０、及び符号器／復号器１０３０を含む、様々な処理要素に提供される。

システム１０００の様々な要素は一体ハウジング内に提供され得る。一体ハウジング内において、様々な要素は、好適な接続機構、例えば、ＩＣ間（Ｉ２Ｃ）バス、配線、及びプリント回路板を含む、当技術分野において知られているとおりの内部バスを用いて相互接続され、それらの間でデータを伝送することができる。

システム１０００は、通信チャネル１０６０を介した他のデバイスとの通信を可能にする通信インターフェース１０５０を含む。通信インターフェース１０５０は、限定するものではないが、通信チャネル１０６０を通じてデータを伝送及び受信するように構成されたトランシーバを含むことができる。通信インターフェース１０５０は、限定するものではないが、モデム又はネットワークカードを含むことができ、通信チャネル１０６０は、例えば、有線及び／又は無線媒体の形で実施され得る。

データは、様々な実施形態では、Wi-Fiネットワーク、例えばＩＥＥＥ８０２．１１（ＩＥＥＥは、Institute of Electrical and Electronics Engineers（米国電気電子技術者協会）を指す）などの無線ネットワークを用いて、システム１０００へストリーミングされるか、又は他の仕方で提供される。これらの実施形態のWi-Fi信号は、Wi-Fi通信のために適応させられた通信チャネル１０６０及び通信インターフェース１０５０を通じて受信される。これらの実施形態の通信チャネル１０６０は、通例、ストリーミングアプリケーション及び他のオーバーザトップ通信を可能にするためのインターネットを含む外部ネットワークへのアクセスを提供するアクセスポイント又はルータに接続される。他の実施形態は、入力ブロック１１３０のＨＤＭＩ接続を通じてデータを配信するセットトップボックスを用いて、ストリーミングされたデータをシステム１０００に提供する。さらに他の実施形態は、入力ブロック１１３０のＲＦ接続を用いて、ストリーミングされたデータをシステム１０００に提供する。以上において指示されたように、様々な実施形態は非ストリーミング方式でデータを提供する。加えて、様々な実施形態はWi-Fi以外の無線ネットワーク、例えば、セルラーネットワーク又はBluetoothネットワークを用いる。

システム１０００は、ディスプレイ１１００、スピーカ１１１０、及び他の周辺デバイス１１２０を含む、様々な出力デバイスへ出力信号を提供することができる。様々な実施形態のディスプレイ１１００は、例えば、タッチスクリーンディスプレイ、有機発光ダイオード（ＯＬＥＤ（organic light-emitting diode））ディスプレイ、曲面ディスプレイ、及び／又は折り畳み式ディスプレイのうちの１つ以上を含む。ディスプレイ１１００は、テレビ、タブレット、ラップトップ、セルフォン（携帯電話）、又は他のデバイスのためのものであることができる。ディスプレイ１１００はまた、（例えば、スマートフォンの場合のように）他の構成要素と統合されるか、又は別個のもの（例えば、ラップトップのための外部モニタ）であることができる。他の周辺デバイス１１２０は、実施形態の様々な例では、独立型デジタルビデオディスク（若しくはデジタル多目的ディスク）（両方の用語に対して、ＤＶＲ）、ディスクプレーヤ、ステレオシステム、及び／又は照明システムのうちの１つ以上を含む。様々な実施形態は、システム１０００の出力に基づく機能を提供する１つ以上の周辺デバイス１１２０を用いる。例えば、ディスクプレーヤは、システム１０００の出力を再生する機能を遂行する。

様々な実施形態では、制御信号は、ＡＶ．Ｌｉｎｋ、家電制御（ＣＥＣ（Consumer Electronics Control））、又はユーザの介入を用いる、又は用いないデバイス対デバイス制御を可能にする他の通信プロトコルなどの信号方式を用いて、システム１０００と、ディスプレイ１１００、スピーカ１１１０、又は他の周辺デバイス１１２０との間で通信される。出力デバイスは、それぞれのインターフェース１０７０、１０８０、及び１０９０を通じた専用接続を介してシステム１０００に通信可能に結合され得る。代替的に、出力デバイスは、通信インターフェース１０５０を介した通信チャネル１０６０を用いてシステム１０００に接続され得る。ディスプレイ１１００及びスピーカ１１１０は、例えば、テレビなどの電子デバイス内でシステム１０００の他の構成要素と共に単一のユニットに統合され得る。様々な実施形態では、ディスプレイインターフェース１０７０は、例えば、タイミングコントローラ（Ｔ Ｃｏｎ）チップなどの、ディスプレイドライバを含む。

例えば、入力１１３０のＲＦ部分が別個のセットトップボックスの部分である場合には、ディスプレイ１１００及びスピーカ１１１０は、代替的に、他の構成要素のうちの１つ以上とは別個であることができる。ディスプレイ１１００及びスピーカ１１１０が外部構成要素である様々な実施形態では、出力信号は、例えば、ＨＤＭＩポート、ＵＳＢポート、又はＣＯＭＰ出力を含む、専用出力接続を介して提供され得る。

実施形態は、プロセッサ１０１０によって実施されるコンピュータソフトウェアによって、又はハードウェアによって、或いはハードウェア及びソフトウェアの組み合わせによって実施され得る。非限定例として、実施形態は１つ以上の集積回路によって実施され得る。メモリ１０２０は、技術環境に適した任意の種類のものであり得、非限定例として、光メモリデバイス、磁気メモリデバイス、半導体ベースのメモリデバイス、固定式メモリ、及び着脱式メモリなどの、任意の好適なデータ記憶技術を用いて実施され得る。プロセッサ１０１０は、技術環境に適した任意の種類のものであることができ、マイクロプロセッサ、汎用コンピュータ、専用コンピュータ、及びマルチコアアーキテクチャに基づくプロセッサのうちの１つ以上を非限定例として包含することができる。

様々な実装は復号化を含む。「復号化」は、本出願において使用されるとき、表示のために適した最終出力を生成するために、例えば、受信された符号化シーケンスに対して遂行されるプロセスの全て又は部分を包含することができる。様々な実施形態では、このようなプロセスは、復号器によって通例遂行されるプロセス、例えば、エントロピー復号化、逆量子化、逆変換、及び差動復号化のうちの１つ以上を含む。様々な実施形態では、このようなプロセスはまた、又は代替的に、本出願において説明される様々な実装の復号器によって遂行されるプロセス、例えば、ピクチャを再構成し、デブロッキングフィルタのパラメータを決定し、次に、決定されたデブロッキングフィルタパラメータを用いて、再構成されたピクチャをフィルタリングすることを含む。

さらなる例として、一実施形態では「復号化」はエントロピー復号化のみを指し、別の実施形態では「復号化」は差動復号化のみを指し、別の実施形態では「復号化」はエントロピー復号化及び差動復号化の組み合わせを指す。表現「復号化プロセス」が、動作の部分セットを特定的に指すことを意図されているのか、それともより広い復号化プロセスを全体的に指すことを意図されているのかは、具体的記述の文脈に基づいて明らかになり、当業者によって十分理解されると考えられる。

様々な実装は符号化を含む。「復号化」に関する上述の説明と類似した形で、「符号化」は、本出願において使用されるとき、符号化ビットストリームを生成するために、例えば、入力映像シーケンスに対して遂行されるプロセスの全て又は部分を包含することができる。様々な実施形態では、このようなプロセスは、符号器によって通例遂行されるプロセス、例えば、分割、差動符号化、変換、量子化、及びエントロピー符号化のうちの１つ以上を含む。様々な実施形態では、このようなプロセスはまた、又は代替的に、本出願において説明される様々な実装の符号器によって遂行されるプロセス、例えば、符号化されたピクチャを再構成し、デブロッキングフィルタのパラメータを決定し、次に、決定されたデブロッキングフィルタパラメータを用いて、再構成されたピクチャをフィルタリングすることを含む。

さらなる例として、一実施形態では、「符号化」はエントロピー符号化のみを指し、別の実施形態では、「符号化」は差動符号化のみを指し、別の実施形態では、「符号化」は差動符号化及びエントロピー符号化の組み合わせを指す。表現「符号化プロセス」が、動作の部分セットを特定的に指すことを意図されているのか、それともより広い符号化プロセスを全体的に指すことを意図されているのかは、具体的記述の文脈に基づいて明らかになり、当業者によって十分理解されると考えられる。

本明細書において用いられるとおりの構文要素は、例えば、記述用語であることに留意されたい。それゆえ、それらは他の構文要素名の使用を妨げない。

図がフロー図として提示されるときには、それは、対応する装置のブロック図も提供することを理解されたい。同様に、図がブロック図として提示されるときには、それは、対応する方法／プロセスのフロー図も提供することを理解されたい。

本明細書において説明されている実装及び態様は、例えば、方法又はプロセス、装置、ソフトウェアプログラム、データストリーム、或いは信号の形で実施され得る。たとえ、単一の形の実装との関連で説明されているのみである場合でも（例えば、方法として説明されているのみである場合でも）、説明されている特徴の実装は他の形（例えば、装置又はプログラム）でも実施され得る。装置は、例えば、適切なハードウェア、ソフトウェア、及びファームウェアの形で実施され得る。方法は、例えば、例として、コンピュータ、マイクロプロセッサ、集積回路、又はプログラム可能論理デバイスを含む、概して処理デバイスを指す、プロセッサの形で実施され得る。プロセッサはまた、例えば、コンピュータ、携帯電話、ポータブル／パーソナルデジタルアシスタント（portable/personal digital assistant）（「ＰＤＡ」）、及びエンドユーザ間の情報の通信を促進する他のデバイスなどの、通信デバイスを含む。

「一実施形態（one embodiment）」、又は「一実施形態（an embodiment）」、又は「一実装（one implementation）」、又は「一実装（an implementation）」、並びに他のそれらの変形への言及は、実施形態に関連して説明される特定の特徴、構造、特性等が少なくとも１つの実施形態に含まれることを意味する。それゆえ、本出願全体を通して様々な場所において出現する、表現「一実施形態では（in one embodiment）」、又は「一実施形態では（in an embodiment）」、又は「一実装では（in one embodiment）」、又は「一実装では（in an implementation）」、また、任意の他の変形の出現は、必ずしも全て同じ実施形態に言及しているわけではない。

加えて、本出願は、様々な情報を「決定すること」に言及する場合がある。情報を決定することは、例えば、情報を推定すること、情報を算出すること、情報を予測すること、又は情報をメモリから取り込むことのうちの１つ以上を含むことができる。

さらに、本出願は、様々な情報に「アクセスすること」に言及する場合がある。情報にアクセスすることは、例えば、情報を受信すること、情報を（例えば、メモリから）取り込むこと、情報を記憶すること、情報を移すこと、情報をコピーすること、情報を算出すること、情報を決定すること、情報を予測すること、又は情報を推定することのうちの１つ以上を含むことができる。

加えて、本出願は、様々な情報を「受信すること」に言及する場合がある。受信することは、「アクセスすること」と同様に、幅広い用語であることが意図される。情報を受信することは、例えば、情報にアクセスすること、又は情報を（例えば、メモリから）取り込むことのうちの１つ以上を含むことができる。さらに、「受信すること」は、通例、例えば、情報を記憶すること、情報を処理すること、情報を伝送すること、情報を移すこと、情報をコピーすること、情報を消去すること、情報を算出すること、情報を決定すること、情報を予測すること、又は情報を推定することなどの動作の最中に何らかの形で含まれる。

例えば、「Ａ／Ｂ」、「Ａ及び／又はＢ」及び「Ａ及びＢのうちの少なくとも一方」の場合における、以下の「／」、「及び／又は」、及び「～のうちの少なくとも一方」のうちのいずれかの使用は、第１の列挙された選択肢（Ａ）のみの選択、或いは第２の列挙された選択肢（Ｂ）のみの選択、或いは両方の選択肢（Ａ及びＢ）の選択を包含することが意図されることを理解されたい。さらなる例として、「Ａ、Ｂ、及び／又はＣ」及び「Ａ、Ｂ、及びＣのうちの少なくとも１つ」の場合には、このような表現法は、第１の列挙された選択肢（Ａ）のみの選択、或いは第２の列挙された選択肢（Ｂ）のみの選択、或いは第３の列挙された選択肢（Ｃ）のみの選択、或いは第１及び第２の列挙された選択肢（Ａ及びＢ）のみの選択、或いは第１及び第３の列挙された選択肢（Ａ及びＣ）のみの選択、或いは第２及び第３の列挙された選択肢（Ｂ及びＣ）のみの選択、或いは全ての３つの選択肢（Ａ及びＢ及びＣ）の選択を包含することが意図される。これは、本技術分野及び関連技術分野における当業者に明らかであるように、列挙されたとおりの数の項目のために拡張され得る。

また、本明細書で使用するとき、単語「信号で通信する（signal）」は、とりわけ、何らかのものを、対応する復号器に指示することを指す。例えば、特定の実施形態では、符号器は、アーチファクト除去フィルタリングにおけるデブロッキングフィルタのための複数のパラメータのうちの特定のものを信号で通信する。このように、一実施形態では、同じパラメータが符号器側及び復号器側の両方において用いられる。それゆえ、例えば、符号器は特定のパラメータを復号器へ伝送することができ（明示的な信号通信）、これにより、復号器は同じ特定のパラメータを用いることができる。逆に、復号器が特定のパラメータ及び他のものをすでに有する場合には、このとき、信号通信は、単に、復号器が特定のパラメータを知り、選択することを可能にするために、伝送を行わずに用いることができる（暗黙的な信号通信）。任意の実際の関数の伝送を回避することによって、様々な実施形態においてビット節約が実現される。信号通信は種々の仕方で達成され得ることを理解されたい。例えば、様々な実施形態では、１つ以上の構文要素、フラグなどが、情報を対応する復号器へ信号で通信するために用いられる。上述のことは単語「signal」の動詞の形態に関連するが、単語「signal」は本明細書において名詞として使用することもできる。

当業者には明らかであろうように、実装は、例えば、記憶又は伝送され得る情報を搬送するためにフォーマットされた種々の信号を生成することができる。情報は、例えば、方法を遂行するための命令、又は上述の実装のうちの１つによって生成されたデータを含むことができる。例えば、信号は、上述の実施形態のビットストリームを搬送するためにフォーマットされ得る。このような信号は、例えば、（例えば、スペクトルの無線周波数部分を使用する）電磁波として、又はベースバンド信号としてフォーマットされ得る。フォーマッティングは、例えば、データストリームを符号化し、符号化されたデータストリームを用いて搬送波を変調することを含むことができる。信号が搬送する情報は、例えば、アナログ又はデジタル情報であることができる。信号は、周知のように、種々の異なる有線又は無線リンクを通じて伝送され得る。信号はプロセッサ可読媒体上に記憶され得る。

我々は多数の実施形態を記載している。これらの実施形態の特徴は、様々なクレームカテゴリ及びタイプにわたって、単独で、又は任意の組み合わせで提供され得る。さらに、実施形態は、以下の特徴、デバイス、又は態様のうちの１つ以上を、様々なクレームカテゴリ及びタイプにわたって、単独で、又は任意の組み合わせで含むことができる：
・ 復号器及び／又は符号器において適用されるデブロッキングフィルタプロセスを変更する、
・ 復号器及び／又は符号器においていくつかの高度なデブロッキングフィルタを可能にする、
・ 信号通信内に、復号器が、用いるべきデブロッキングフィルタプロセスを識別することを可能にする構文要素を挿入する、
・ これらの構文要素に基づいて、復号器において適用するべきデブロッキングフィルタを選択する、
・ 復号器及び／又は符号器におけるデブロッキングフィルタパラメータを適応させる、
・ 境界におけるブロックが、非正方形又は非矩形ブロックの組み合わせ、及び／又は不等及び／又は空間的に可変の重み付けの組み合わせである場合には、デブロッキングフィルタの境界強度を適応させる、
・ 境界におけるブロックが、非正方形又は非矩形ブロックの組み合わせ、及び／又は不等及び／又は空間的に可変の重み付けの組み合わせである場合には、デブロッキングフィルタのフィルタ強度を適応させる、
・ 各サンプルの予測において用いられる重み付き組み合わせを表現するブロックのサンプルごとの混合マップを決定する、
・ 境界強度を、サンプルの数に、及び／又は双方向予測において用いられるサンプルの重みに適応させる、
・ 境界強度を、インター及びイントラ予測されたサンプルを組み合わせる際に、又はインター及びインター予測されたサンプルを組み合わせる際に用いられるサンプルの相対的重みに適応させる、
・ 境界強度を、予測において用いられるサンプルの重みに適応させる、
・ 境界強度を決定するためにレファンス（refence）フレームのＰＯＣ差を用いて動きベクトルを正規化する、
・ 境界強度を決定することが、境界におけるブロックのうちの１つの予測モードがＭＨ、ＧＢｉ、又は双方向予測のうちの少なくとも１つであるかどうかに関する試験を含む、
・ 符号化パラメータを変更し、変更されたパラメータを、デブロッキングフィルタにおける後の（例えば、境界強度パラメータの決定の際の）使用のために記憶する、
・ 上述された構文要素、又はそれらの変形のうちの１つ以上を含むビットストリーム又は信号、
・ 上述された実施形態のうちの任意のものに従って生成された情報を伝達する構文を含むビットストリーム又は信号、
・ 信号通信内に、復号器がデブロッキングフィルタを、符号器によって用いられるものに対応する仕方で適応させることを可能にする構文要素を挿入する、
・ 上述された構文要素、又はそれらの変形のうちの１つ以上を含むビットストリーム又は信号を作成し、及び／又は伝送し、及び／又は受信し、及び／又は復号化する、
・ 上述された実施形態のうちの任意のものに従って作成し、及び／又は伝送し、及び／又は受信し、及び／又は復号化する、
・ 上述された実施形態のうちの任意のものに係る方法、プロセス、装置、命令を記憶する媒体、データを記憶する媒体、又は信号、
・ 上述された実施形態のうちの任意のものに従ってデブロッキングフィルタパラメータの適応を遂行するＴＶ、セットトップボックス、セルフォン、タブレット、又は他の電子デバイス、
・ 上述された実施形態のうちの任意のものに従ってデブロッキングフィルタパラメータの適応を遂行し、得られた画像を（例えば、モニタ、スクリーン、又は他の種類のディスプレイを用いて）表示するＴＶ、セットトップボックス、セルフォン、タブレット、又は他の電子デバイス、
・ 符号化された画像を含む信号を受信するためのチャネルを（例えば、チューナを用いて）選択し、上述された実施形態のうちの任意のものに従ってデブロッキングフィルタパラメータの適応を遂行するＴＶ、セットトップボックス、セルフォン、タブレット、又は他の電子デバイス、
・ 符号化された画像を含む無線信号を（例えば、アンテナを用いて）受信し、上述された実施形態のうちの任意のものに従ってデブロッキングフィルタパラメータの適応を遂行するＴＶ、セットトップボックス、セルフォン、タブレット、又は他の電子デバイス。

Claims (16)

1. 画像の部分をデブロッキングするための方法であって、前記方法が、
   サンプルの第１のブロックとサンプルの第２のブロックとの間の少なくとも１つの境界を決定すること（Ｓ１２０）であって、前記第１のブロック及び第２のブロックが画像の前記部分に属する、決定すること（Ｓ１２０）と、
   前記第１のブロックの予測モード及び前記第２のブロックの予測モードのうちの少なくとも１つに従って境界強度を決定すること（Ｓ１４０）と、
   前記境界強度に従って前記少なくとも１つの境界に隣接した前記第１のブロック及び前記第２のブロックのサンプルをフィルタリングすること（Ｓ１６０）と、
   を含み、
   前記第１のブロックの前記予測モードが重み付き予測モードである場合には、前記境界強度が、前記第１のブロックの前記重み付き予測モードに従ってサンプルの前記第１のブロックを予測する際に用いられるサンプルの相対的重みにさらに依存する、方法。
2. 画像の部分をデブロッキングするための装置であって、前記装置が少なくとも１つのプロセッサを備え、前記少なくとも１つのプロセッサが、
   サンプルの第１のブロックとサンプルの第２のブロックとの間の少なくとも１つの境界を決定することであって、前記第１のブロック及び第２のブロックが画像の前記部分に属する、決定することと、
   前記第１のブロックの予測モード及び前記第２のブロックの予測モードのうちの少なくとも１つに従って境界強度を決定することと、
   前記境界強度に従って前記少なくとも１つの境界に隣接した前記第１のブロック及び前記第２のブロックのサンプルをフィルタリングすることと、
   を行うように構成されており、
   前記第１のブロックの前記予測モードが重み付き予測モードである場合には、前記境界強度が、前記第１のブロックの前記重み付き予測モードに従ってサンプルの前記第１のブロックを予測する際に用いられるサンプルの相対的重みにさらに依存する、装置。
3. 重み付き予測モードが、一般化双方向予測、符号化ユニットレベル重みを用いた双方向予測、イントラ及びインター予測されたサンプルを組み合わせた、又はインター及びインター予測されたサンプルを組み合わせた多重仮説予測、インターマージ及びイントラ予測されたサンプルを組み合わせた組み合わせインターマージ・イントラ予測、ブロックの幾何学的分割に応じたインター予測されたサンプルを組み合わせた幾何学的予測、ブロックの対角エッジに沿ったインター予測されたサンプルを組み合わせた三角形予測のうちの１つである、請求項１に記載の方法、又は請求項２に記載の装置。
4. 前記第１のブロックの前記重み付き予測モードに従ってサンプルの前記第１のブロックを予測することが、前記第１のブロックのサンプルを、第１の予測モードを用いて決定された第１の予測因子及び第２の予測モードを用いて決定された第２の予測因子の重み付き組み合わせとして予測することを含み、前記第１のブロックの前記サンプルが、第１の予測因子の前記重みがレベルを上回る場合には、前記境界強度を決定するために前記第１の予測モードを用いるものとして考慮される、請求項１又は３に記載の方法、又は請求項２又は３に記載の装置。
5. 前記第１の予測モードが１イントラ予測モードであり、前記第１のブロックの前記サンプルが、前記境界強度を決定するためにイントラ予測モードを用いるものとして考慮される、請求項４に記載の方法、又は請求項４に記載の装置。
6. 前記第１の予測モードがイントラ平面予測モードであり、前記第１のブロックの前記サンプルが、前記境界強度を決定するためにイントラ予測モードを用いるものとして考慮される、請求項５に記載の方法、又は請求項５に記載の装置。
7. 前記境界強度が強に設定される、請求項５又は６に記載の方法、又は請求項５又は６に記載の装置。
8. 前記第１の予測モードが１インター予測モードであり、前記第１のブロックの前記サンプルが、前記境界強度を決定するためにインター予測モードを用いるものとして考慮される、請求項４に記載の方法、又は請求項４に記載の装置。
9. 前記第１の予測モードがインター双方向予測モードであり、前記第１のブロックの前記サンプルが、前記境界強度を決定するためにインター双方向予測モードを用いるものとして考慮されるか、又は前記第１の予測モードがインター単方向予測モードであり、前記第１のブロックの前記サンプルが、前記境界強度を決定するためにインター単方向予測モードを用いるものとして考慮される、請求項８に記載の方法、又は請求項８に記載の装置。
10. 前記レベルが０に設定される、請求項４～９のいずれか一項に記載の方法、又は請求項４～９のいずれか一項に記載の装置。
11. 前記境界強度が、同じ相対的重みを共有する前記ブロックのサンプルのグループのために決定され、サンプルの前記グループが、前記ブロックの少なくとも１つのサンプル、最大で全てのサンプルを含む、請求項１、３～１０のいずれか一項に記載の方法、又は請求項２～１０のいずれか一項に記載の装置。
12. 画像を復号化するための方法であって、
    － 画像部分の部分を復号化することと、
    － 請求項１又は３～１１のいずれか一項に記載のデブロッキング方法に従って、前記復号化された画像部分をフィルタリングすることと、
    を含む、方法。
13. 画像を符号化するための方法であって、
    － 画像部分を再構成することと、
    － 請求項１又は３～１１のいずれか一項に記載のデブロッキング方法に従って、前記再構成された画像部分をフィルタリングすることと、
    を含む、方法。
14. 画像を復号化するための装置であって、前記装置が１つ以上のプロセッサを備え、前記１つ以上のプロセッサが、
    － 画像部分の部分を復号化することと、
    － 請求項１又は３～１１のいずれか一項に記載のデブロッキング方法に従って、前記復号化された画像部分をフィルタリングすることと、
    を遂行するように構成されている、装置。
15. 画像を符号化するための装置であって、前記装置が１つ以上のプロセッサを備え、前記１つ以上のプロセッサが、
    － 画像部分を再構成することと、
    － 請求項１又は３～１１のいずれか一項に記載のデブロッキング方法に従って、前記再構成された画像部分をフィルタリングすることと、
    を遂行するように構成されている、装置。
16. コンピュータプログラムであって、前記コンピュータプログラムが１つ又はいくつかのプロセッサによって実行されたときに、請求項１、２又は５～１１のいずれか一項に記載の方法を遂行するためのソフトウェアコード命令を含む、コンピュータプログラム。
    

Images