JP2011509053A - パラメトリックフィルタリングを使用したビデオ符号化及び復号化方法及び装置 - Google Patents

Abstract

ビデオ符号化の方法及び装置が提供される。当該方法を使用して、ビデオエンコーダ１００は、少なくとも１つのリファレンスピクチャのフィルタリングを実行して少なくとも１つのフィルタリングされたリファレンスピクチャを生成し３１０、少なくとも１つのフィルタリングされたリファレンスピクチャを使用してピクチャを予測的に符号化する３１５。例示的な実施の形態では、フィルタリングは、パラメトリックフィルタリングを使用して行われる。

Description

本発明は、ビデオ符号化及び復号化に関し、より詳細には、パラメトリックフィルタリングを使用したビデオ符号化方法及び装置に関する。
本出願は、2008年1月7日に提出された米国特許仮出願61/019525（代理人No.PU080001）の利益を特許請求するものであり、この米国特許仮出願は、その完全な形で引用により組み込まれる。

最新のビデオ符号化スキームでは、時間の冗長度を利用するため、ブロックに基づく動き補償された予測（MCP）が使用される。多視点映像符号化（MVC）シナリオにおけるビュー間符号化について、視差補償予測（DCP：Disparity Compensated Prediction）を実行し、これによりビュー間の冗長度を利用するため、ブロックマッチング手順を適用することもできる。多視点映像符号化（MVC）は、多視点系列の符号化について圧縮のフレームワークである。多視点映像符号化（MVC）系列は、異なる視点からの同じシーンを捕捉する２以上のビデオ系列のセットである。

しかし、フォーカスの変化、モノスコピックビデオにおけるモーションブラー、多視点映像符号化における異なるビューにわたるイルミネーション及び／又はフォーカスのミスマッチのような、トランスレーショナルな変位を超えるビデオコンテンツにおけるミスマッチが存在する。さらに、示されるミスマッチは、あるビデオフレームの異なる部分がリファレンスとして使用される１以上のフレームにおける対応する領域に関して異なるタイプの変化を受けるように、局所化される場合がある。たとえば、（多視点映像符号化において利用される）カメラのうちで異質のカメラのセッティングにより、異なるタイプのぼやけ／鮮鋭さのミスマッチは、異なる奥行きの被写体に関連される。モノスコピックビデオにおけるモーションブラーに関して、異なる方向で動いている被写体は、方向性のぼやけとなる。これらノン・トランスレーショナルなミスマッチは、動き補償予測／視差補償予測の符号化効率を低下させる。

ビデオコンテンツにおけるミスマッチに関する事前の情報なしに、２パス符号化スキームを利用することができ、このスキームでは、初期サーチ及びフィルタ予測は、はじめに、現在のフレームとリファレンスフレームとの間の差に基づいてフィルタを適応的に設計するために実行される。予測されるフィルタを使用して新たなリファレンスが形成されるので、先に記載された２パス符号化スキームにより、高い符号化効率が達成される。しかし、このスキームで符号化される各フレームについてフィルタ係数を送信するので、係るスキームは、符号化の複雑さを大幅に増加させ、オーバヘッドを増加させる。

ビデオ符号化の環境では、リファレンスフレームのフィルタリングアプローチが提案され、このアプローチでは、符号化効率を改善するため、新たなリファレンスフレームが生成される。

フォーカスの切り替え及び／又はカメラのパニングについて、ぼやけ補償と呼ばれる技術が提案され、この技術では、ビデオ符号化のためにぼやけたリファレンスフレームを生成するため、固定されたセットのぼやけ（ロウパス）フィルタが使用される。この技術は、我々が考慮するシナリオについて２つの問題点を有する。第一に、フレームレベルでのみフィルタ選択が行われ、すなわち、あるフレームの異なる部分に異なるフィルタを使用することは考慮されない。第二に、この方法は、非常に制限された予め定義されたフィルタのセット（ロウパスのみ）に依存する。

ビデオコンテンツにおける実際のミスマッチを更に効率的に捕らえるため、適応型のリファレンスフィルタリングアプローチを以前に提案しており、このアプローチは、２パス符号化スキームである。たとえば、あるフレームをビュー間予測で符号化するため、最初の視差の予測をはじめに実行することが提案された。視差フィールドをシーンの奥行きの予測として利用することで、ビデオフレームは、異なるシーンの奥行きのレベルに対応する領域に分割される。それぞれの奥行きのレベルについて、空間フィルタは、残差のエネルギーを最小にするために現在のフレームとリファレンスフレームとの間の差に基づいて適応的に設計される。係るデザインアプローチは、異なるビューにわたり示される奥行きに依存するフォーカスのミスマッチに対処することができる。予測されたフィルタは、リファレンスフレームに適用され、フィルタリングされたリファレンスが形成される。それぞれのブロックについて、エンコーダは、最も低いレート−歪みコスト（RDコスト）を与える（フィルタリングされたか、フィルタリングされていない）予測子を選択し、したがって最も高い符号化効率が補償される。この適応的なリファレンスフィルタリング（ARF）方法では、オーバヘッド（フレーム毎のフィルタ係数）は、固定されたフィルタセットのアプローチと比較したときに大きい。更に重要なことには、この２パス方法は、符号化の複雑度を大幅に増加させる。ミスマッチに関する事前知識を有さない場合、更なるステップ（初期サーチ及びフィルタ予測）が必要である。

従来技術のこれらの課題及び問題点、並びに他の課題及び問題点は、本発明の原理により対処され、ビデオ符号化及び復号化方法及び装置に向けられる。

本発明の態様によれば、装置が提供され、当該装置は、あるピクチャを符号化するエンコーダを含む。このエンコーダは、少なくとも１つのリファレンスピクチャのフィルタリングを実行して、少なくとも１つのフィルタリングされたリファレンスピクチャを得て、少なくとも１つのフィルタリングされたリファレンスピクチャを使用してピクチャを予測的に符号化する。

本発明の別の態様によれば、方法が提供され、当該方法は、あるピクチャを符号化するステップを含む。符号化ステップは、少なくとも１つのリファレンスピクチャのフィルタリングを実行して、少なくとも１つのフィルタリングされたリファレンスピクチャを得るステップ、及び少なくとも１つのフィルタリングされたリファレンスピクチャを使用してピクチャを予測的に符号化するステップを含む。

本発明のさらに別の態様によれば、装置が提供され、本装置は、あるピクチャを復号化するデコーダを含む。デコーダは、少なくとも１つのリファレンスピクチャのフィルタリングを実行して、少なくとも１つのフィルタリングされたリファレンスピクチャを得て、少なくとも１つのフィルタリングされたリファレンスピクチャを使用して、ピクチャを予測的に復号化する。

本発明の更に別の態様によれば、方法が提供され、本方法は、あるピクチャを復号化するステップを含む。この復号化ステップは、少なくとも１つのリファレンスピクチャのフィルタリングを実行して、少なくとも１つのフィルタリングされたリファレンスピクチャを得るステップ、少なくとも１つのフィルタリングされたリファレンスピクチャを使用してピクチャを予測的に復号化するステップを含む。

本発明のこれらの態様、特徴及び利点、並びに他の態様、特徴及び利点は、添付図面と共に読まれることとなる例示的な実施の形態の以下の詳細な説明から明らかとなるであろう。

本発明は、以下の添付図面に従って良好に理解される。
本発明の実施の形態に係る、本発明が適用される例示的な多視点映像符号化（MVC）エンコーダのブロック図である。 本発明の実施の形態に係る、本発明が適用される例示的な多視点映像符号化（MVC）デコーダのブロック図である。 本発明の実施の形態に係る、デフォルトのパラメトリックフィルタセットを使用した例示的なビデオ符号化の方法のフローダイアグラムである。 本発明の実施の形態に係る、パラメトリックフィルタセットの適応的な選択を使用した例示的なビデオ符号化方法のフローダイアグラムである。 本発明の実施の形態に係る、デフォルトのパラメトリックフィルタセットを使用した例示的なビデオ復号化方法のフローダイアグラムである。 本発明の実施の形態に係る、パラメトリックフィルタセットの適応的な選択を使用した例示的なビデオ復号化方法のフローダイアグラムである。

本発明は、パラメトリックフィルタリングを使用したビデオ符号化の方法及び装置に向けられる。

本実施の形態の記載は、本発明を例示するものである。したがって、当業者であれば、本実施の形態では記載又は図示されないが、本発明を実現し、本発明の範囲及び精神に含まれる様々なアレンジメントを創作するであろうことが理解される。

本実施の形態で引用される全ての例及び条件付き言語は、当該技術分野を促進するために本発明者により寄与される本発明及び概念の理解において読者を支援する教育的な目的が意図され、係る特に参照される例及び条件に限定されるものではないと解釈されるべきである。

さらに、本発明及び本発明の特定の例の原理、態様及び実施の形態を参照する全ての説明は、本発明の構造的及び機能的に等価な概念の両者を包含することが意図される。さらに、係る等価な概念は現在知られている等価な概念と同様に、将来において開発される等価な概念、すなわち構造に関わらずに同じ機能を実行する開発されたエレメントの両者を含むことが意図される。

したがって、たとえば、本実施の形態で与えられるブロック図は本発明を実施する例示的な回路の概念図を表すことが当業者により理解されるであろう。同様に、フローチャート、フローダイアグラム、状態遷移図、擬似コード等は、コンピュータ読み取り可能な媒体で実質的に表され、明示的に図示されないコンピュータ又はプロセッサにより実行される様々なプロセスを表すことが理解されるであろう。

図示される様々なエレメントの機能は、専用のハードウェアの使用と同様に、適切なソフトウェアと関連してソフトウェアを実行可能なハードウェアを通して提供される場合がある。プロセッサにより提供されたとき、１つの専用プロセッサにより、１つの共有プロセッサにより、又はそのうちの幾つかが共有される複数の個々のプロセッサにより、機能が提供される場合がある。さらに、用語「プロセッサ」又は「コントローラ」の明示的な使用は、ソフトウェアを実行可能なハードウェアを排他的に示すものと解釈されるべきではなく、限定されるものではないが、デジタルシグナルプロセッサ（DSP）ハードウェア、ソフトウェアを記憶するリードオンリメモリ（ROM）、ランダムアクセスメモリ（RAM）、及び不揮発性ストレージを暗黙的に含む場合がある。

コンベンショナル及び／又はカスタムな他のハードウェアが含まれる場合がある。同様に、図示されるスイッチは、概念的なものである。それらの機能は、プログラムロジックの動作を通して、専用ロジックを通して、プログラム制御と専用ロジックの相互作用を通して、又は手動により実行される場合があり、特定の技術は、文脈からより詳細に理解されるように実現者により選択可能である。

特許請求の範囲では、特定の機能を実行する手段として表現されるエレメントは、ａ）その機能を実行する回路素子の組み合わせ、ｂ）その機能を実行するためのそのソフトウェアを実行する適切な回路と組み合わされるファームウェア、マイクロプロセッサを含む任意の形態におけるソフトウェアを含めて、その機能を実行する任意の方法を包含することが意図される。係る請求項により定義される本発明は、様々な引用される手段により提供される機能が請求項が求めるやり方で結合され、纏められるという事実にある。したがって、それらの機能を提供することができる任意の手段は、本実施の形態で図示されるものに等価であると見なされる。

本発明の「１実施の形態」又は「実施の形態」に対する明細書における参照は、本発明の他の変形例と同様に、実施の形態に関連して記載される特定の特徴、構造、特性等は、本発明の少なくとも１つの実施の形態に含まれることを意味する。したがって、明細書を通して様々な位置に現れるフレーズ「１実施の形態では」、「実施の形態では」、及び他の変形の出現は、必ずしも同じ実施の形態を全て参照するものではない。

以下の「／」、「及び／又は」、「少なくとも１つの」の任意の使用は、たとえば、「Ａ／Ｂ」、「Ａ及び／又はＢ」及び「Ａ及びＢの少なくとも１つ」のケースにおいて、最初に列挙されたオプションＡのみの選択、第二に列挙されたオプションＢのみの選択、或いは両方のオプションＡ及びＢの選択を包含することが意図される。更なる例として、「Ａ、Ｂ及び／又はＣ」及び「Ａ、Ｂ及びＣの少なくとも１つ」のケースでは、係るフレーズは、第一の列挙されたオプションのみの選択、又は第二に列挙されたＢのみの選択、第三に列挙されたオプションＣのみの選択、或いは、第一及び第二に列挙されたオプション（Ａ及びＢ）の選択、或いは、第一及び第三に列挙されたオプション（Ａ及びＣ）のみの選択、或いは、第二及び第三に列挙されたオプション（Ｂ及びＣ）のみの選択、或いは、全ての３つのオプション（Ａ及びＢ及びＣ）の選択を包含することが意図される。これは、当業者により容易に理解されるように、列挙される多数の項目に関して拡張される場合がある。

さらに、本実施の形態で交換可能に使用されるように、「クロスビュー“cross-view”」及び「ビュー間“inter-view”」の両者は、現在のビュー以外のビューに属するピクチャを示す。

本発明の１以上の実施の形態は、MPEG-4AVC規格の多視点映像符号化の拡張に関して本実施の形態で記載されるが、本発明は、この拡張及び／又はこの規格のみに限定されるものではなく、したがって、他のビデオ符号化規格、勧告及び拡張に関して利用される場合があることを理解されたい。

図１を参照して、例示的な多視点映像符号化（MVC）エンコーダは、参照符号１００により示される。エンコーダ１００は、変換器１１０の入力と接続される出力を有する結合器１０５を含む。変換器１１０の出力は、量子化器１１５の入力と接続される。量子化器１１５の出力は、エントロピーコーダ１２０の入力及び逆量子化器１２５の入力と接続される。逆量子化器１２５の出力は、逆変換器１３０の入力と接続される。逆量子化器１３０の出力は、結合器１３５の第一の非反転入力に接続される。結合器１３５の出力は、イントラ予測器１４５の入力及びデブロッキングフィルタ１５０の入力と接続される。デブロッキングフィルタ１５０の出力は、（ビューｉ用の）リファレンスピクチャストア１５５の入力と接続される。リファレンスピクチャストア１５５の出力は、動き補償器１７５の第一の入力及び動き予測器１８０の第一の入力と接続される。動き予測器１８０の出力は、動き補償器１７５の第二の入力と接続される。

（他のビュー用の）リファレンスピクチャストア１６０の出力は、視差／イルミネーション予測器１７０の第一の入力、及び視差／イルミネーション補償器１６５の第一の入力と接続される。視差／イルミネーション予測器１７０の出力は、視差／イルミネーション補償器１６５の第二の入力と接続される。

エントロピーデコーダ１２０の出力は、エンコーダ１００の出力として利用可能である。結合器１０５の非反転入力は、エンコーダ１００の入力として利用可能であり、視差／イルミネーション予測器１７０の第二の入力、動き予測器１８０の第二の入力と接続される。スイッチ１８５の出力は、結合器１３５の第二の非反転入力、及び結合器１０５の反転入力と接続される。スイッチ１８５は、動き補償器１７５の出力と接続される第一の入力、視差／イルミネーション補償器１６５の出力と接続される第二の入力、及びイントラ予測器１４５の出力と接続される第二の入力を含む。

モード判定モジュール１４０は、どの入力がスイッチ１８５により選択されるかを制御するスイッチ１８５に接続される出力を有する。

図２を参照して、例示的な多視点映像符号化（MVC）デコーダは、参照符号２００により示される。デコーダ２００は、逆量子化器２１０の入力に接続される出力を有するエントロピーデコーダ２０５を含む。逆量子化器の出力は、逆変換器２１５の入力に接続される。逆変換器２１５の出力は、結合器２２０の第一の非反転入力と接続される。結合器２２０の出力は、デブロッキングフィルタ２２５の入力及びイントラ予測器２３０の入力と接続される。デブロッキングフィルタ２２５の出力は、（ビューｉ用の）リファレンスピクチャストア２４０の入力と接続される。リファレンスピクチャストア２４０の出力は、動き補償器２３５の第一の入力と接続される。

（他のビュー用の）リファレンスピクチャストア２４５の出力は、視差／イルミネーション補償器２５０の第一の入力と接続される。

エントロピーコーダ２０５の入力は、残差のビットストリームを受信するため、デコーダ２００への入力として利用可能である。さらに、モードモジュール２６０の入力は、どの入力がスイッチ２５５により選択されるかを制御するコントロールシンタックスを受信するため、デコーダ２００への入力として利用可能である。さらに、動き補償器２３５の第二の入力は、動きベクトルを受信するため、デコーダ２００の入力として利用可能である。また、視差／イルミネーション補償器２５０の第二の入力は、視差ベクトル及びイルミネーション補償シンタックスを受信するため、デコーダ２００への入力として利用可能である。

スイッチ２５５の出力は、結合器２２０の第二の非反転入力に接続される。スイッチ２５５の第一の入力は、視差／イルミネーション補償器２５０の出力と接続される。スイッチ２５５の第二の入力は、動き補償器２３５の出力と接続される。スイッチ２５５の第三の入力は、イントラ予測器２３０の出力と接続される。モードモジュール２６０の出力は、どの入力がスイッチ２５５により選択されるかを制御するスイッチ２５５と接続される。デブロッキングフィルタ２２５の出力は、デコーダの出力として利用可能である。

上述されたように、本発明は、パラメトリックフィルタリングを使用したビデオ符号化の方法及び装置に向けられる。

非常に制限された予め定義されたフィルタセット（ロウパスのみ）に依存するぼやけ補償の上述された従来技術と対照的に、本発明によれば、補償されるべきミスマッチの特性に基づいて設計される予め定義されるフィルタセットが提供される。係るミスマッチの可能性のある例は、多視点映像符号化（MVC）のビュー間予測におけるフォーカスミスマッチ、及びモノスコピックビデオにおける方向性のモーションブラーである。したがって、実施の形態では、フォーカスミスマッチを補償するために高周波のエンハンスメントフィルタを含み、別の又は同じ実施の形態では、モーションブラーを補償するために方向性フィルタを含む。多数のパラメトリックフィルタは、局所化された補償を適用することができるように、本発明のアプローチでサポートすることができる。先のタイプの不整合（フォーカスミスマッチ及びモーションブラー）は、例示のために言及され、したがって本発明はこれらのタイプのミスマッチのみに限定されるものではないことを理解されたい。すなわち、本実施の形態で提供される本発明の教示が与えられると、当業者であれば、本発明の精神を維持しつつ、本発明が適用される様々なタイプのミスマッチを容易に理解されるであろう。

したがって、本発明に係るビデオ符号化のパラメトリックフィルタリングは、ミスマッチの特性を有利に利用する。実施の形態では、ビデオ系列を符号化する前に、パラメトリックフィルタのセットが設計される（予め定義されたフィルタセット）。これらのパラメトリックフィルタは、フォーカスの切り替わり向けのアイソトロピックフィルタ及びモーションブラー向けの方向性フィルタのような、補償されるべきターゲットミスマッチの情報に基づいて設計される。したがって、本発明の実施の形態は、特定用途向けの予め定義されたフィルタセットを提供可能である。多数のパラメトリックフィルタは、局所的なミスマッチを補償するために設計される。目標とされるミスマッチが存在する場合、パラメトリックフィルタを適用して符号化効率を改善することで、新たなリファレンスフレームを生成することができる。なお、パラメトリックフィルタは事前に設計されるが、それらを使用すべきか否か、どのフィルタを使用すべきかに関する判定、及び新たなリファレンスフレームを生成するためのフィルタの順序付けは、ミスマッチの推定に基づいて適応的に決定される。したがって、本発明の実施の形態は、ビデオコンテンツで示されるミスマッチを更に効率的に捕捉する一方で、（符号化されるべきそれぞれのフレームの初期サーチによりフィルタを推定する）リファレンスフィルタリングを利用する他の方法に比較して、複雑度を低減することができる。ミスマッチの特性に従ってフィルタがパラメータ化され、符号化の判定が適応的に行われるので、符号化効率が改善される。すなわち、オーバヘッドを非常に小さく保持する一方で（それぞれのフレームについて１つのフィルタセットの代わりに予め定義されたフィルタセット）、高い符号化効率を達成することができる。これは、ミスマッチの特性を利用することでフィルタがパラメータ化され、ビデオフレーム間の推定される差に対して選択が適応的なためである。

したがって、本発明の１以上の実施の形態によれば、ミスマッチの特性に基づいてパラメトリックフィルタを設計する方法及び装置が開示され、ここで、パラメトリックフィルタは、（たとえばフォーカスの切り替わり及び／又はモーションブラーのような）同じカテゴリのミスマッチに苦しむビデオ系列に適用される。新たな符号化スキームは、現在のフレームとリファレンスフレームとの間の差に従って利用されるべきパラメトリックフィルタが設計／選択される一方で、適応型リファレンスフィルタリング（ARF）におけるような２パス符号化を実行するのを回避する。たとえば、フィルタの構造を固定することができ、フィルタのパラメータを調節することができ、これにより、フィルタをロウパス、バンドパス及び／又はハイパスフィルタに切り替えることができる。マルチパラメトリックフィルタは、あるフレーム内での局所化された及び／又は異なるタイプのミスマッチを補償するために構築される。フィルタのセットを設計した後、フィルタはエンコーダにとって利用可能となり、これにより、エンコーダは、それらを使用して、高い符号化効率のために新たなフィルタリングされたリファレンスフレームを生成することができる（特定用途向け予め定義されたフィルタセット）。

［MVCビュー間予測におけるフォーカスミスマッチ向けパラメトリックフィルタリング］多視点映像符号化では、多数のカメラにより同時に捕捉されるビデオデータが符号化される。異なるカメラからのそれぞれのビデオをビューと呼ぶ。ビュー間予測は、リファレンスとして他のビューからのフレームを使用して、あるフレームを符号化することを示す。異なるビューからのフレームは、異機種のカメラ設定及び／又は異なる撮影位置／向きによる、フォーカスミスマッチを示す場合がある。異なるカメラにより捕捉される画像において示される差は、フォーカス設定のミスマッチ及び被写体の奥行きの観点で表すことができることが示される。

ミスマッチは、空間領域において円形対称であるぼやけ（ロウパス）／鮮鋭度（エンハンスメント）フィルタとして表現される光学的伝達関数における差を招く。所与のビューのペアについて、切り替えのタイプ（ロウパス、エンハンスメント等）及び程度は、そのシーンにおける奥行きの構成に関連される。パラメトリックフィルタは、広範囲の係るフォーカスミスマッチをカバーすることが解釈される。幾つかの例は、以下の表において以下に要約される。表１Ａ及び表１Ｂは、３×３及び５×５の対称な制約をそれぞれもつパラメトリックフィルタを示す。表２Ａ及び表２Ｂは、３×３及び５×５の垂直／水平態様の制約をそれぞれもつパラメトリックフィルタを示す。

なお、ひし形状のパラメトリックフィルタは、先のフィルタの特別なケースとして考えられる。たとえば、５×５垂直／水平フィルタにおいてｇ＝ｈ＝ｉ＝０を強制する場合、表３に示されるような以下のひし形の形状を得る。

パラメータの値（フィルタ係数）を変えることで、ビュー間予測における可能性のあるミスマッチを補償するため、異なる周波数応答をもつフィルタを生成することができる。１実施の形態では、フォーカスミスマッチをもつ系列について予測誤差を最小にするパラメトリックフィルタを予測及び収集することでフィルタのセットを構築し、収集されたパラメトリックフィルタを幾つかの代表的なフィルタに分類／クラスタリングする。その後、得られたフィルタのセットは、多視点映像符号化のビュー間予測におけるフォーカスミスマッチを補償するために使用されるパラメトリックフィルタとしての役目を果たす。別の実施の形態では、パラメトリックフィルタのセットの構造を固定し、オンザフライでそれぞれのパラメトリックフィルタのパラメータを予測する。

予め定義されたフィルタのセットは、多視点映像を符号化するとき、エンコーダのオプションを提供する。フォーカス設定の差及びシーンの奥行きの構成に依存して、画像は、異なるタイプのフォーカスミスマッチを示す。したがって、多視点映像の符号化されたビューについて、必ずしも全てのパラメトリックフィルタを使用する必要はない。以下は、全てのパラメトリックフィルタが使用される必要がないときの幾つかの例を与える。

（１）あるビューがリファレンスのために使用されるビューと比較したときにフォーカスのミスマッチを有さない場合、符号化効率が保持されつつ、フィルタリングアプローチは必要ではない。
（２）所定のタイプのみのフォーカスのミスマッチが符号化されているビューに存在するとき、幾つかのパラメトリックフィルタは、符号化の改善を提供しないので、ブロックに基づく補償により殆ど選択されない。これらのパラメトリックフィルタをフィルタリストから除くことで、そこから選択するのに少ないフィルタリングされたリファレンスを有するので、リファレンスインデックスにシグナルを伝達するのに費やされるビットレートを節約することができる。
（３）類似のタイプのミスマッチが存在するとしても、そのシーンにおけるミスマッチの構成は異なる可能性がある。たとえば、あるシーンは、被写体のほんの一部がロウパスフィルタリングを必要とするエンハンスメントを大部分が必要とする被写体を有する一方で、別のシーンでは、より大きな部分が平滑化される（ロウパスフィルタリングされる）必要がある。パラメトリックフィルタの順序は、これに応じて変更されるべきである。最も大きい支配的なミスマッチフィルタをリストの最初に配置することで、シグナリングのビットレートが更に低減される。

これらを考慮して、符号化効率を改善するため、１以上の実施の形態によれば、それぞれのビューについて、どのパラメトリックフィルタが含まれるべきか及び含まれるフィルタの順序付けを適応的に判定する予測技術を提案する。

［フォーカスミスマッチ予測：実施の形態I］
（たとえばフォーカス設定及びアパーチャサイズのような）カメラ設定が利用可能である場合、画像形成システムの特性（すなわち光学的伝達関数）を導出することができる。光学的伝達関数と結合される（たとえば、自由な視点のテレビジョンシステムにおいて）立体情報が利用可能であるとき、どの種類のミスマッチが画像に存在するかを知ることができる。所与のビューについて、予め定義されたフィルタセットから、先の情報に基づいて画像で示されるミスマッチのタイプをカバーするパラメトリックフィルタが選択される。立体情報により、シーンの奥行きの構成を知ることができ、結果的に、どのタイプのミスマッチがより支配的かを知ることができる。

［フォーカスミスマッチ予測：実施の形態II］
カメラパラメータが利用可能である（したがって、光学的伝達関数が既知である）が、立体情報が利用可能でない（すなわち、立体情報は使用のために現在利用可能である）とき、奥行きを近似的に計算するため、予測が実行される。たとえば、カメラと相対的な撮影の位置との間の間隔が知られる場合、推定される視差は、シーンにおける異なる被写体の実際の奥行きを調べるために使用される。すなわち、多視点カメラパラメータが与えられると、可能性のあるタイプのフォーカスミスマッチを識別するため、（たとえばサーチにより）視差の予測を実行する。所与のビューについて、係る予測の後、予め定義されたフィルタのセットから、考慮しているミスマッチのタイプをカバーするパラメトリックフィルタが選択される。視差の予測は、シーンの奥行きの構成を示し、結果的に、どのタイプのミスマッチがより支配的かを示す。選択されたフィルタの順序付けは、これに応じて決定される。

［フォーカスミスマッチの予測：実施の形態III］
多視点カメラパラメータが完全に利用可能でないとき、画像におけるミスマッチを推定するため、適応型のリファレンスフィルタリングに類似した手順が使用される。符号化されるべき所与のビューについて、フレームは、視差ベクトルの分類に基づいて異なる奥行きレベルに分割される。次いで、それぞれの奥行きレベルにおける全てのブロックについて、２次元（２Ｄ）最小平均平方誤差フィルタが推定される。これら推定されたフィルタは、どのタイプのフォーカスミスマッチがリファレンスビューに比較して現在のビューにあるかを示す。次いで、推定されたフィルタは、予め定義されたセットにおけるパラメトリックフィルタと比較される。推定されたフィルタに対する最も高い相関を有する予め定義されたセットにおけるフィルタは、新たなリファレンスフレームを生成するため、現在のビューのための更なる符号化オプションとしての役割を果たすために選択される。選択されたパラメトリックフィルタの順序付けは、分類及び相関の分析に基づいて決定される。

これらの方法の様々な実施の形態では、視差予測（実施の形態II及びIII）及びフィルタ推定（実施の形態III）は、所与のビューの幾つかの前のフレームにおいて実行され、次いで、選択されたパラメトリックフィルタは、残りのフレームに適用される。他の実施の形態では、（たとえば１０番目のフレーム毎にといった）所定の特定のタイムスタンプで推定が実行され、選択されたパラメトリックフィルタは、ミスマッチ−推定のタイムスタンプ間のフレームに適用される。

［ビデオ符号化における方向性のモーションブラー用のパラメトリックフィルタリング］
以下、方向性のモーションブラーにパラメトリックフィルタリングを適用する考えを説明する。パラメトリックフィルタは、モーションブラーを補償するために構築される。動きはビデオコンテンツにおける異なる方向で生じる可能性があるので、フィルタは、以下に例示される方向性でパラメータ化される。

フィルタのセットを構築した後、エンコーダは、モーションブラーのミスマッチの推定を実行することで、フィルタのセットのうちのどれを使用すべきか及びフィルタの順序を選択する。実施の形態では、モーションブラーのミスマッチの推定は、可能性のあるモーションブラーの方向を識別するため、動き予測により実行される。別の実施の形態では、ビデオフレームで示されるモーションブラーを捕捉するフィルタを推定するため、適応型のリファレンスフィルタリングに類似したプロセスを適用する。次いで、推定されたフィルタに最も高い相関を示す予め定義されたセットからのフィルタは、新たなリファレンスフレームを生成するために選択される。

［パラメトリックフィルタリングのシグナリング］
フィルタセットはミスマッチの特性を利用することで予め定義されるので、全体の系列について、せいぜい一度だけ係数が送信される必要がある。さらに、エンコーダ及びデコーダの両者に共通する辞書として予め定義されたフィルタのセットが構築される場合、フィルタ係数を送信する必要がない。

係数が一度送信される場合について、係数が送信される順序は、それらのデフォルトの順序と考えられ、係数が固定されたセットである場合において、デフォルトの順序は、それらから確立される。

これらのフィルタをそれらのデフォルトの順序で使用するのを望むとき、更なるシンタックスが必要とされない。ひとたびリファレンスピクチャリストが確立されると、フィルタは、それらのデフォルトの順序で適用される。それぞれのリストにおいてＮ個のフィルタが存在するが、リファレンスリストにＭ＜Ｎ個のリファレンスピクチャのみが存在する場合、最初のＭ個のフィルタが利用される。

フレームは予め定義されたセットから異なる数のパラメトリックフィルタを使用し（エンコーダがフィルタリングを適用しないと判定した場合には０）、且つ順序は異なるという事実のため、これらのケースについて係る情報をデコーダに提供することが必要となる。ここで、選択されたフィルタのシグナリングに関してパラメトリックフィルタリングを使用した、多視点映像符号化のビュー間予測の例を示す。

予め定義されたセットに４つのパラメトリックフィルタが存在し、ｆ１〜ｆ４として示され、ｆ１，ｆ２，ｆ３，ｆ４のデフォルトの順序で示されるとする。５つのビューＶ０〜Ｖ４は、ＩＢＰＢＰ構造をもつビュー間予測を使用して符号化される。

この例では、Ｖ１について、デコーダは、このＢのビューがパラメトリックフィルタリング（filter_flag=1）で符号化されたことを知る。フラグは、高水準のシンタックスとして送信され、たとえば、限定されるものではないが、ＰＰＳ，ＳＰＳ，ＮＡＬユニットヘッダ及び／又はスライスヘッダに存在する。このフラグの１実施の形態は、表６に示されており、この表６は、スライスヘッダシンタックスを示す。

表５に示されるように、Ｖ１について、List_0について３つのフィルタ及びList_1について１つのフィルタが存在する。フィルタの順序は、List_0におけるリファレンス（全体で４：３つがフィルタリングされ、１つがフィルタリングされない）がｆ３によるフィルタリングされたリファレンス、ｆ４によるフィルタリングされたリファレンス、フィルタリングされないリファレンス、及びｆ１によるフィルタリングされたリファレンスに対応することを示し、List_1におけるフィルタリングされたリファレンスのみがｆ２により生成され、これは、List_1におけるフィルタリングされないリファレンスの後に配置されることを示す。

この例では、それぞれのリストにおけるフィルタの数は異なり、更に、フィルタの順序も変更される。デコーダがこのことを知るため、再び順序付けされているリファレンスピクチャについて、どのフィルタインデックスを使用すべきかを示すリファレンスピクチャリストの再順序付け（RPLR）コマンドと共に更なるシンタックスを送信することが提案される。表７は、リファレンスピクチャリストの再順序付けコマンドを示す。

Ｖ２は、パラメトリックフィルタリング（filter_flag=1）で符号化され、ｆ３，ｆ１による２つのフィルタリングされたリファレンスが存在する。リファレンスの順序付けは、ｆ３によるフィルタリング、フィルタリングされない、ｆ１によるフィルタリングに対応する。List_0におけるフィルタの数についてシンタックスが存在しない。それは、このビューがＰビューであることをビットストリームが示し、したがって全てのフィルタがList_0のためであることを示すことによる。Ｖ４に関して、filter_flag=0は、パラメトリックフィルタリングを適用することなしに符号化されることを示す。

図３を参照して、デフォルトパラメトリックフィルタセットを使用したビデオ符号化の例示的な方法は、参照符号３００により示される。

本方法３００は、開始ブロック３０５を含み、このブロックは、機能ブロック３１０に制御を移す。機能ブロック３１０は、（デフォルトの順序で）予め定義されたパラメトリックフィルタセットを使用してフィルタリングされたリファレンスを生成し、機能ブロック３１５に制御を移す。機能ブロック３１５は、フィルタリングされないリファレンス及びフィルタリングされたリファレンスにより現在のフレームを符号化し、終了ブロック３９９に制御を移す。

図４を参照して、パラメトリックフィルタセットの適応的な選択を使用したビデオ符号化の例示的な方法は、参照符号４００により示される。

本方法４００は、開始ブロック４０５を含み、このブロックは、機能ブロック４１０に制御を移す。機能ブロック４１０は、カメラパラメータ、及び／又は、カメラ設定、及び／又は、奥行き／視差／動き情報に基づくミスマッチの予測を実行し、及び／又は、たとえばfilter_flag（０又は１）の値、フィルタの数、及びフィルタの順序を決定するフィルタ予測を実行し（後者は、予め定義されたセットとの比較を実行することを含む）、判定ブロック４１５に制御を移す。判定ブロック４１５は、filter_flagが１に等しいか否かを判定する。filter_flagが１に等しい場合、機能ブロック４２０に制御を移す。さもなければ、機能ブロック４３０に制御を移す。

機能ブロック４２０は、（機能ブロック４１０について、決定された順序と数による）フィルタリングされたリファレンスを生成し、機能ブロック４２５に制御を移す。機能ブロック４２５は、フィルタリングされないリファレンス及びフィルタリングされたリファレンスにより現在のフレームを符号化し、終了ブロック４９９に制御を移す。

機能ブロック４３０は、現在のフレームを符号化し、終了ブロック４９９に制御を移す。

図５を参照して、デフォルトパラメトリックフィルタセットを使用したビデオ復号化の例示的な方法は、参照符号５００により示される。

本方法５００は、開始ブロック５０５を含み、このブロックは、機能ブロック５１０に制御を移す。機能ブロック５１０は、予め定義されたフィルタ係数に基づいてフィルタリングされたリファレンスを生成し、機能ブロック５１５に制御を移す。機能ブロック５１５は、フィルタリングされないリファレンス及びフィルタリングされたリファレンスで現在のフレームをデコードし、終了ブロック５９９に制御を移す。

図６を参照して、パラメトリックフィルタセットの適応的な選択を使用したビデオ復号化の例示的な方法は、参照符号６００により示される。

本方法６００は、開始ブロック６０５を含み、このブロックは、判定ブロック６１５に制御を移す。判定ブロック６１５は、filter_flagが１に等しいか否かを判定する。filter_flagが１に等しい場合、機能ブロック６２０に制御を移す。さもなければ、機能ブロック６３５に制御を移す。

機能ブロック６２０は、予め定義されたフィルタセットから選択されたフィルタの数をデコードし、フィルタの順序をデコードし、機能ブロック６２５に制御を移す。機能ブロック６２５は、デコードされた数のフィルタ及びフィルタの順序に基づいてフィルタリングされたリファレンスを生成し、機能ブロック６３０に制御を移す。機能ブロック６３０は、フィルタリングされたリファレンス及びフィルタリングされないリファレンスにより現在のフレームをデコードし、終了ブロック６９９に制御を移す。

機能ブロック６３５は、現在のフレームをデコードし、終了ブロック６９９に制御を移す。

以下、本発明の多数の付随する利点／特徴の幾つかに関する説明が与えられ、そのうちの幾つかは先に説明された。たとえば、１つの利点／特徴は、あるピクチャを符号化するエンコーダを有する装置である。エンコーダは、少なくとも１つのリファレンスピクチャのパラメトリックフィルタリングを実行し、少なくとも１つのフィルタリングされたリファレンスピクチャをそれぞれ取得し、少なくとも１つのフィルタリングされたリファレンスピクチャを使用してピクチャをそれぞれ符号化する。

別の利点／特徴は、上述されたエンコーダを有する装置であり、パラメトリックフィルタリングのために使用されるパラメトリックフィルタの少なくとも１つのセットは、ピクチャ又は該ピクチャが属するビデオ系列を符号化する前に予め定義される。

更に別の利点／特徴は、少なくとも１セットのパラメトリックフィルタが上述されたように予め定義される、エンコーダを有する装置であり、少なくとも１つの予め定義されたセットのパラメトリックフィルタは、ピクチャと少なくとも１つのリファレンスピクチャとの間の期待されるミスマッチに基づいて推定される。

更に別の利点／特徴は、少なくとも１つの予め定義されたセットのパラメトリックフィルタが上述されたように予測される、エンコーダを有する装置であり、少なくとも１つの予め定義されたセットのパラメトリックフィルタの係数は、期待されるミスマッチを補償するフィルタのグループを推定すること、及び推定されたフィルタのグループの少なくとも１部を分類することに基づいて計算される。

さらに、別の利点／特徴は、少なくとも１セットのパラメトリックフィルタが上述されたように予め定義される、エンコーダを有する装置であり、エンコーダは、少なくとも１つの予め定義されたフィルタセットから少なくとも１セットのパラメトリックフィルタを選択して、パラメトリックフィルタリングのために使用し、少なくとも１つの選択されたセットにおけるフィルタの順序を更に選択する。

さらに、別の利点／特徴は、上述されたように、少なくとも１セットのパラメトリックフィルタを選択し、フィルタの順序を更に選択するエンコーダを有する装置であり、少なくとも１つの選択されたセットのパラメトリックフィルタのうちの少なくとも１つ、及び少なくとも１つの選択されたセットにおけるフィルタの順序付けは、ピクチャと少なくとも１つのリファレンスピクチャとの間のミスマッチの推定に基づいて選択される。

また、別の利点／特徴は、上述されたミスマッチの推定に基づいて選択するエンコーダを有する装置であり、ピクチャは、多視点映像コンテンツの少なくとも２つのビューのうちの少なくとも１つのビューに対応し、推定は、多視点ビデオコンテンツを捕捉するために使用される少なくとも２つのカメラのカメラパラメータ及びカメラ設定の少なくとも１つに基づく。

さらに、別の利点／特徴は、上述されたミスマッチの推定に基づいて選択するエンコーダを有する装置であり、推定は、動き情報、奥行き情報、動きサーチ及び視差のサーチのうちの少なくとも１つに基づく。

さらに、別の利点／特徴は、上述されたミスマッチの推定に基づいて選択するエンコーダを有する装置であり、推定は、異なるタイプのミスマッチをもつ領域にピクチャを分割することで実行される。

さらに、別の利点／特徴は、上述されたように、少なくとも１セットのパラメトリックフィルタを選択し、フィルタの順序を更に選択するエンコーダを有する装置であり、パラメトリックフィルタリングを実行することで得られる少なくとも１つのフィルタリングされたリファレンスピクチャは、選択及びシグナリングをエンコードするための異なるリファレンスインデックスと関連付けされる。

また、別の利点／特徴は、上述されたように、少なくとも１セットのパラメトリックフィルタを選択し、フィルタの順序を更に選択するエンコーダを有する装置であり、エンコーダは、少なくとも１つの選択されたセットのパラメトリックフィルタ及びリファレンスピクチャの順序付けを結果的に得られるビットストリームで伝送し、対応するデコーダによるピクチャの再構成を可能にする。

本発明のこれらの特徴及び利点、並びに他の特徴及び利点は、本実施の形態の教示に基づいて当業者により容易に確かめられる場合がある。本発明の教示は様々な形態のハードウェア、ソフトウェア、ファームウェア、特定用途向けプロセッサ又はその組み合わせで実現される場合がある。

より好ましくは、本発明の教示は、ハードウェアとソフトウェアの組み合わせとして実現される。さらに、ソフトウェアは、プログラムストレージユニットで実現されるアプリケーションプログラムとして実現される場合がある。アプリケーションプログラムは、適切なアーキテクチャを有するコンピュータにアップロードされ、該コンピュータにより実行される場合がある。好ましくは、コンピュータは、１以上の中央処理ユニット（CPU）、ランダムアクセスメモリ（RAM）、及び入力／出力（I/O）インタフェースのようなハードウェアを有するコンピュータプラットフォームで実現される。コンピュータプラットフォームは、オペレーティングシステム及びマイクロ命令を含む場合がある。本実施の形態で記載される様々なプロセス及び機能は、CPUにより実行される、マイクロ命令コードの一部又はアプリケーションプログラムの一部、或いはその組み合わせの何れかである場合がある。さらに、様々な他の周辺装置は、更なるデータストレージユニット及びプリンティングユニットのようなコンピュータプラットフォームに接続される場合がある。

添付図面に示されるシステム構成要素及び方法の幾つかはソフトウェアで好ましくは実現されるので、システム構成要素間又はプロセス機能ブロック間の実際の接続は、本発明がプログラムされるやり方に依存して異なる場合がある。本実施の形態の教示が与えられると、当業者であれば、本発明のこれらの実現又はコンフィギュレーション及び類似の実現又はコンフィギュレーションを創作することができるであろう。

例示的な実施の形態は添付図面を参照して記載されたが、本発明はそれら正確な実施の形態に限定されるものではなく、様々な変形及び変更は本発明の精神又は範囲から逸脱することなしに当業者により実施される場合があることを理解されたい。全ての係る変形及び変更は、特許請求の範囲で述べられるように、本発明の範囲に含まれることが意図される。

Claims (40)

1. ピクチャを符号化するエンコーダを有する装置であって、
   前記エンコーダは、少なくとも１つのリファレンスピクチャをフィルタリングして、少なくともフィルタリングされたリファレンスピクチャを生成し、前記少なくとも１つのフィルタリングされたリファレンスピクチャを使用して前記ピクチャを予測的に符号化する、
   ことを特徴とする装置。
2. 前記フィルタリングに使用される少なくとも１セットのパラメトリックフィルタは、前記ピクチャ又は前記ピクチャが属するビデオ系列を符号化する前に予め定義される、
   請求項１記載の装置。
3. 前記少なくとも１つの予め定義されたセットのパラメトリックフィルタは、前記ピクチャと前記少なくとも１つのリファレンスピクチャとの間の期待されるミスマッチに基づいて推定される、
   請求項２記載の装置。
4. 前記少なくとも１つの予め定義されたセットのパラメトリックフィルタの係数は、前記期待されるミスマッチを補償するフィルタのグループを推定すること、及び前記推定されたフィルタのグループの少なくとも１部を分類することに基づいて計算される、
   請求項３記載の装置。
5. 前記エンコーダは、前記パラメトリックフィルタリングで使用するため、前記少なくとも１つの予め定義されたフィルタのセットから少なくとも１セットのパラメトリックフィルタを選択する、
   請求項２記載の装置。
6. 前記少なくとも１つの選択されたセットのパラメトリックフィルタの少なくとも１つ及び前記少なくとも１つの選択されたセットにおけるフィルタの順序は、前記ピクチャと前記少なくとも１つのリファレンスピクチャとの間のミスマッチの推定に基づいて選択される、
   請求項５記載の装置。
7. 前記ピクチャは、多視点映像コンテンツの少なくとも２つのビューのうちの少なくとも１つのビューに対応し、前記推定は、前記多視点映像コンテンツを捕捉するために使用される少なくとも２つのカメラのカメラパラメータ及びカメラ設定の少なくとも１つに基づく、
   請求項６記載の装置。
8. 前記推定は、動き情報、奥行き情報、動きサーチ及び視差サーチの少なくとも１つに基づく、
   請求項６記載の装置。
9. 前記推定は、前記ピクチャを異なるタイプのミスマッチをもつ領域に分割することで実行される、
   請求項６記載の装置。
10. 前記パラメトリックフィルタリングを実行することで得られる前記少なくとも１つのフィルタリングされたリファレンスピクチャは、符号化の選択及びシグナリングのための異なるリファレンスインデックスと関連付けられる、
    請求項５記載の装置。
11. 前記エンコーダは、前記少なくとも１つの選択されたセットのパラメトリックフィルタ及びリファレンスピクチャの順序を結果として得られるビットストリームで伝送し、対応するデコーダによるピクチャの再構成を可能にする、
    請求項５記載の装置。
12. ピクチャを符号化する方法であって、
    少なくとも１つのリファレンスピクチャをフィルタリングして、少なくとも１つのフィルタリングされたリファレンスピクチャを生成するステップと、
    前記少なくとも１つのフィルタリングされたリファレンスピクチャを使用して前記ピクチャを予測的に符号化するステップと、
    を含むことを特徴とする方法。
13. 前記フィルタリングで使用される少なくとも１セットのパラメトリックフィルタは、前記ピクチャ又は前記ピクチャが属するビデオ系列を符号化する前に予め定義される、
    請求項１２記載の方法。
14. 前記少なくとも１つの予め定義されたセットのパラメトリックフィルタは、前記ピクチャと前記少なくとも１つのリファレンスピクチャとの間の期待されるミスマッチに基づいて推定される、
    請求項１３記載の方法。
15. 前記少なくとも１つの予め定義されたセットのパラメトリックフィルタの係数は、前記期待されるミスマッチを補償するフィルタのグループを推定すること、及び推定されたフィルタのグループの少なくとも１部を分類することに基づいて計算される、
    請求項１４記載の方法。
16. 前記符号化するステップは、前記パラメトリックフィルタリングで使用するため、前記少なくとも１つの予め定義されたフィルタのセットから少なくとも１セットのパラメトリックフィルタを選択するステップ、及び前記少なくとも１つの選択されたセットにおけるフィルタの順序を選択するステップを含む、
    請求項１４記載の方法。
17. 前記少なくとも１つの選択されたセットのパラメトリックフィルタの少なくとも１つ及び前記少なくとも１つの選択されたセットにおけるフィルタの順序は、前記ピクチャと前記少なくとも１つのリファレンスピクチャとの間のミスマッチの推定に基づいて選択される、
    請求項１６記載の方法。
18. 前記ピクチャは、多視点映像コンテンツの少なくとも２つのビューのうちの少なくとも１つに対応し、前記推定は、前記多視点映像コンテンツを捕捉するために使用される少なくとも２つのカメラのカメラパラメータ及びカメラ設定の少なくとも１つに基づく、
    請求項１７記載の方法。
19. 前記推定は、動き情報、奥行き情報、動きサーチ、及び視差サーチのうちの少なくとも１つに基づく、
    請求項１７記載の方法。
20. 前記推定は、前記ピクチャを異なるタイプのミスマッチをもつ領域に分割することで実行される、
    請求項１７記載の方法。
21. 前記パラメトリックフィルタリングを実行することで得られる前記少なくとも１つのフィルタリングされたリファレンスピクチャは、符号化の選択及びシグナリングのための異なるリファレンスインデックスと関連される、
    請求項１０記載の方法。
22. 対応するデコーダによるピクチャの再構成を可能にするため、前記少なくとも１つの選択されたセットのパラメトリックフィルタ及びリファレンスピクチャの順序を結果として得られるビットストリームで伝送するステップを更に含む、
    請求項１６記載の方法。
23. ピクチャを復号化するデコーダを有する装置であって、
    前記デコーダは、少なくとも１つのリファレンスピクチャをフィルタリングして少なくとも１つのフィルタリングされたリファレンスピクチャを生成し、前記少なくとも１つのフィルタリングされたリファレンスピクチャを使用して前記ピクチャを予測的に復号化する、
    ことを特徴とする装置。
24. 前記フィルタリングを実行する少なくとも１セットのパラメトリックフィルタは、前記ピクチャと前記少なくとも１つのリファレンスピクチャとの間の期待されるミスマッチに基づいて予め定義される、
    請求項２３記載の装置。
25. 前記デコーダは、前記パラメトリックフィルタリングで使用するため、前記少なくとも１つの予め定義されたフィルタのセットから少なくとも１セットのパラメトリックフィルタを決定し、更に、前記少なくとも１つの決定されたセットにおけるフィルタの順序を決定する、
    請求項２４記載の装置。
26. 前記パラメトリックフィルタリングで使用する前記少なくとも１つの決定されたセットのパラメトリックフィルタは、少なくとも１つの高水準のシンタックスエレメントから決定される、
    請求項２５記載の装置。
27. 前記少なくとも１つの決定されたセットにおけるフィルタの順序付けは、少なくとも１つの高水準のシンタックスエレメントと前記少なくとも１つの決定されたセットにおけるフィルタの受信の順序との少なくとも１つから決定される、
    請求項２５記載の装置。
28. 前記パラメトリックフィルタリングを実行することで得られる前記少なくとも１つのフィルタリングされたリファレンスピクチャは、復号化の選択のための異なるリファレンスインデックスと関連付けされる、
    請求項２５記載の装置。
29. 前記デコーダは、結果として得られるビットストリームから前記少なくとも１つの決定されたセットのパラメトリックフィルタとリファレンスピクチャの順序付けを決定して、前記ピクチャを再構成する、
    請求項２５記載の装置。
30. 前記リファレンスピクチャの順序付けは、少なくとも１つの高水準のシンタックスエレメントから決定される、
    請求項２９記載の装置。
31. ピクチャを復号化する方法であって、
    少なくとも１つのリファレンスピクチャをフィルタリングして少なくとも１つのフィルタリングされたリファレンスピクチャを生成するステップと、
    前記少なくとも１つのフィルタリングされたリファレンスピクチャを使用して前記ピクチャを予測的に復号化するステップと、
    ことを特徴とする方法。
32. 前記フィルタリングのための少なくとも１セットのパラメトリックフィルタは、前記ピクチャと前記少なくとも１つのリファレンスピクチャとの間の期待されるミスマッチに基づいて予め定義される、
    請求項３１記載の方法。
33. 前記復号化するステップは、前記パラメトリックフィルタリングで使用するため、前記少なくとも１つの予め定義されたフィルタのセットから少なくとも１セットのパラメトリックフィルタを決定するステップと、前記少なくとも１つの決定されたセットにおけるフィルタの順序を決定するステップとを含む、
    請求項３２記載の方法。
34. 前記パラメトリックフィルタリング向けに使用する前記少なくとも１つの決定されたセットのパラメトリックフィルタは、少なくとも１つの高水準のシンタックスエレメントから決定される、
    請求項３３記載の方法。
35. 前記少なくとも１つの決定されたセットにおけるフィルタの順序付けは、少なくとも１つの高水準のシンタックスエレメントと前記少なくとも１つの決定されたセットにおけるフィルタの受信の順序との少なくとも１つから決定される、
    請求項３３記載の方法。
36. 前記パラメトリックフィルタリングを実行することで得られる前記少なくとも１つのフィルタリングされたリファレンスピクチャは、復号化の選択のための異なるリファレンスインデックスと関連付けされる、
    請求項３３記載の方法。
37. 前記復号化するステップは、前記ピクチャを含むビットストリームから前記少なくとも１つの決定されたセットのパラメトリックフィルタとリファレンスピクチャの順序付けを決定するステップを含む、
    請求項３３記載の方法。
38. 前記リファレンスピクチャの順序付けは、少なくとも１つの高水準のシンタックスエレメントから決定される、
    請求項３７記載の方法。
39. ビデオ符号化のためのビデオ信号構造であって、
    少なくとも１つのリファレンスピクチャにパラメトリックフィルタリングを施して少なくとも１つのフィルタリングされたリファレンスピクチャを生成し、前記少なくとも１つのフィルタリングされたリファレンスピクチャを使用してピクチャを予測的に符号化することで符号化されるピクチャを含む、
    ことを特徴とするビデオ信号構造。
40. ビデオ信号データを有するコンピュータ読み取り可能な記憶媒体であって、
    少なくとも１つのリファレンスピクチャにパラメトリックフィルタリングを施して少なくとも１つのフィルタリングされたリファレンスピクチャを生成し、前記少なくとも１つのフィルタリングされたリファレンスピクチャを使用してピクチャを予測的に符号化することで符号化されるピクチャを含む、
    ことを特徴とするコンピュータ読み取り可能な記録媒体。

Images