JP2009522971A

JP2009522971A - 拡張可能ビデオ符号化のための切換型フィルタアップサンプリング機構

Info

Publication number: JP2009522971A
Application number: JP2008549940A
Authority: JP
Inventors: ネジブアマル; マルタカルツェウィッツ; ジャスティンリッジ; シァンリンワン
Original assignee: Nokia Oyj
Current assignee: Nokia Oyj
Priority date: 2006-01-10
Filing date: 2007-01-09
Publication date: 2009-06-11
Also published as: TW200737982A; KR20080092425A; EP1974548A2; EP1974548A4; US20070217502A1; WO2007080477A2; WO2007080477A3; CN101502118A

Abstract

【課題】拡張可能ビデオ符号化（ＳＶＣ）における空間拡張容易性に関する技術を提供する。
【解決手段】拡張可能ビデオ符号化のための改善された切換型フィルタアップサンプリング機構。本発明のフィルタ切換機構は、フィルタの各々の最高性能を協調方式で利用する。本発明の切換処理は、より多くのフィルタ選択へ一般化することができ、フィルタ選択の自由度及び柔軟性が加わることで計算の複雑性を軽減する可能性がある。
【選択図】図３

Description

本発明は、一般的に、ビデオ符号化の分野に関する。より具体的には、本発明は、拡張可能ビデオ符号化（ＳＶＣ）における空間拡張容易性に関する。

本節は、特許請求の範囲に説明した本発明に対する背景又は関連状況を提供することを目的とする。本明細書の説明は、探求される概念を含むが、必ずしも以前に考案されるか又は探求されたものとは限らない。従って、本明細書において特に指示されない限り、本節に説明される内容は、本出願における説明及び特許請求の範囲に対する従来技術ではなく、かつ本節に含まれることで従来技術とは認められない。

デジタルビデオは、一定のレート（例えば、１５又は３０画像／秒）で生成された画像の順序付けられたシーケンスを含む。従って、それがもたらす未加工ビデオデータ量は非常に膨大である。その結果として、格納又は送信前にビデオデータを効率的に符号化するためにビデオ圧縮が特に必要である。圧縮処理は、より少ないビットで表現することができるコンパクトなフォーマットへのビデオデータの可逆変換である。

ビデオ符号化は、一般的に、フレーム内又はフレーム間符号化に関してビデオシーケンスにおける固有の空間的及び時間的冗長を利用する。フレーム間符号化中、符号化器は、現在のフレームの隣接フレームに基づいて現在のフレームを予測することにより連続的なビデオフレーム間の時間的冗長を低減するように試みる。イントラ予測において、フレームを構成しているブロックをそれらの隣接ブロックから予測することにより空間的冗長は低減される。予測後、予測フレームと元のフレームの間の差である残余フレームが一部のサポートパラメータと並んで生成される。この残余フレームは、多くの場合、送信前に圧縮され、この場合は、「離散コサイン変換（ＤＣＴ）」のような変換が適用され、その後にＨｕｆｆｍａｎ符号化のような可変長符号化方法が続く。

様々な用途及び伝送帯域幅に対するより高い柔軟性及び適応性を可能にするために、拡張可能ビデオ符号化は、基本（シングルレイヤ）ビデオ符号化をマルチレイヤビデオ符号化に拡張する。基本的に、基部レイヤが、様々な空間、時間、画質解像度において異なる増強レイヤと共に符号化される。フレーム間及びフレーム内予測技術に加えて、拡張可能ビデオ符号化は、レイヤ間の冗長性を利用して下位レイヤからの情報を再利用するレイヤ間予測機構を発展させる。

再構成された低空間解像度の基部レイヤから高空間解像度の増強レイヤへの情報の再利用という目的において、基部レイヤの画像のアップサンプリングが必要である。アップサンプリング処理は、有限インパルス応答フィルタを用いてピクセル値を補間し、より高い解像度の画像を生成する段階を含む。補間された画像の画質、及び従って予測の忠実度は、明らかにアップサンプリングフィルタの選択により影響される。図１は、この条件の実施例を示しており、簡単な二項補間（すなわち、アップサンプリング）が示されている。アップサンプリングフィルタの選択は、圧縮される増強レイヤの画質全体において重要な役割を果たす。現在、ＳＶＣでの利用が考えられる従来からの公知の２つの代替フィルタ、すなわち、ＡＶＣフィルタと最適フィルタがある。最適フィルタは、ＡＶＣフィルタと比べてより低いビットレートで相対的に良好に機能するが、より高いビットレートでは性能が低下する。

ＪＶＴのＭＰＥＧの「拡張可能ビデオ符号化」プロジェクトは、現在開発段階にあるＨ．２６４／ＡＶＣの拡張可能な延長である。対応する基準符号化器については、「ＩＳＯ／ＩＥＣＪＴＣ１／ＳＣ２９／ＷＧ１１」の「共同拡張可能ビデオモデルＪＳＶＭ−４ＡｎｎｅｘＧの試案」、ＪＶＴ文書ＪＶＴ−Ｑ２０１、Ｐｏｚｎａｎ、２００５年７月に説明されており、この内容全体は引用により本明細書に組み込まれている。現在のＪＳＶＭにおいて、基部レイヤフレームのアップサンプリングは、高度ビデオ符号化方式（ＡＶＣ）フィルタを用いて実行される。更に、ＡＶＣフィルタの代わりに新しい最適フィルタが提案されている。このようなフィルタについては、例えば、ＡｎｄｒｅｗＳｅｇａｌｌ著「空間拡張容易性のためのアップサンプリング／ダウンサンプリングの適応研究」、ＪＶＴ−Ｑ０８３、ニース、フランス、２００５年１０月（引用により本明細書に組み込まれている）に説明されている。これらの競合フィルタの各々は、ある一定のビットレートでは比較的良好な性能を生むが、他のビットレートでは性能が低下する。

現在のＪＳＶＭソフトウエアにおいては、フィルタタップ［００１０―５０２０３２２００−５０１００］／３２を有するＡＶＣフィルタを利用して、基部レイヤフレームをアップサンプリングする。ＡＶＣフィルタの代替として、基部レイヤＱＰに応じて変化するフィルタタップ（例えば、ＱＰ＿ｂａｓｅ＝２０の時にタップは［０３３−８−８２１４２２１−８−８３３０］／３２により与えられる）を有する最適フィルタが、補間された画像の画質を更に高めるために提案されている。しかし、この代替フィルタにより得られる増強は、低ビットレートの場合に限定される。更に、高ビットレートでは、性能の低下が観測される。

「ＩＳＯ／ＩＥＣＪＴＣ１／ＳＣ２９／ＷＧ１１」、「共同拡張可能ビデオモデルＪＳＶＭ−４ＡｎｎｅｘＧの試案」、ＪＶＴ文書ＪＶＴ−Ｑ２０１、Ｐｏｚｎａｎ、２００５年７月ＡｎｄｒｅｗＳｅｇａｌｌ著「空間拡張容易性のためのアップサンプリング／ダウンサンプリングの適応研究」、ＪＶＴ−Ｑ０８３、ニース、フランス、２００５年１０月

本発明は、拡張可能ビデオ符号化で使用するために既存の基部レイヤ画像のアップサンプリングシステムを強化する。本発明は、フィルタ切換機構を利用してフィルタの各々の最高性能を協調方式で利用することを含む。本発明の切換処理をより多くのフィルタ選択へと一般化し、フィルタ選択の自由度及び柔軟性が加わることで計算の複雑性を軽減することができる。基部レイヤの量子化パラメータ（ＱＰ）（ＱＰ＿ｂａｓｅ）が固定の場合には、本発明は、ＱＰベースの切換、レート歪みベースの切換、又はフィルタトレーニングベースの切換を用いて実施することができる。復号器側において基部レイヤＱＰ（ＱＰ＿ｂａｓｅ）が正確には分からない場合には、切換処理は、シーケンスレベル又はフレームレベルのいずれかにおけるＱＰ閾値に基づいて実施することができる。

性能の観点からは、本発明により、符号化器は、一部の代替フィルタの利点を協調様式で組み合わせることができる。この性能の利点が図２に示されている。本発明のシステム及び方法は、適切な切換決定により関連フィルタの集約的な性能改善を得ることができる。

更に、データレートとは無関係に単一のフィルタを使用すると、（最適フィルタの場合のような）適正な性能を得るにはより多くのフィルタタップが必要になる場合があるので、より少ない数のタップを有するフィルタを採用する切換型フィルタ機構を用いることにより、アップサンプリング作業の計算の複雑性を低減することができる。本発明は、あらゆる一般的なプログラミング言語、例えば、Ｃ／Ｃ＋＋、又はアセンブリ言語を用いてソフトウエアで直接実施することができる。本発明はまた、ハードウエアで実施することも、消費者装置で使用することもできる。

本発明のこれら又は他の利点及び特徴、並びにその作動の編成及び様式は、以下に示すいくつかの図面にわたって同じ要素が同じ数字を有する添付図面を参照して以下の詳細説明を読めば明らかになるであろう。

本発明は、拡張可能ビデオ符号化で使用するために既存の基部レイヤ画像のアップサンプリング機構を強化するものである。本発明は、フィルタ切換機構を利用してフィルタの各々の最高性能を協調方式で利用することを含む。本発明の切換処理をより多くのフィルタ選択へと一般化し、フィルタ選択の自由度及び柔軟性が加わることで計算の複雑性を軽減することができる。

本発明の本質を理解するために、低空間解像度レイヤ（本明細書では空間基部レイヤと呼ぶ）、できればそれと並んで関連の細粒度ＳＮＲ（ＦＧＳ）増強可能レイヤを考慮することが有用である。より高い空間解像度を得るために基部レイヤ解像度をアップサンプリングする（例えば、ＱＣＩＦ解像度をアップサンプリングしてＣＩＦ解像度を得る）際に、本発明は、様々なアップサンプリングフィルタの切換機構を提供する。これらの機構の一部は、復号器側において低空間解像度レイヤがアップサンプリングされる実効ＱＰが正確には分からない場合を対象とする。他の機構は、この実効ＱＰが正確に既知である場合に利用される。

ＳＶＣにおいて、空間拡張容易性は、下位空間レイヤの解像度のアップサンプリングを必要とするので、この信号を利用して上位空間レイヤを予測することができる。上述のように、現在は、符号化が行われる画質レベル（ビットレート）とは無関係に単一のフィルタが使用されている。しかし、２つのフィルタは、異なるビットレートで異なる性能上の長所を有する場合がある。候補であるフィルタの最高性能を利用するために、本発明は、異なるアップサンプリングフィルタ間で切換を行う処理を用いる。

本発明を詳細に説明するために、下位空間レイヤ（基部レイヤ）のケースをできればその様々なＦＧＳレイヤと関連して以下のように説明する。アップサンプリングは、固定の下位空間レイヤＱＰで、又は例えば下位空間がＦＧＳレイヤを持たない時には任意の下位空間レイヤＱＰで行うことができる。既知の基部レイヤＱＰ及び未知の基部レイヤＱＰによる以下の説明は、切換型アップサンプリング処理を実施するための２つの基本的なシナリオである。

レート歪みベースの切換：基本的に、符号化される各増強レイヤフレームに関して、符号化器は、アップサンプリングフィルタ候補の各々を用いて、対応する再構成された基部レイヤフレームをアップサンプリングする。アップサンプリングされた結果のフレームを別々に利用して増強レイヤフレームを符号化する。その後、アップサンプリングフィルタの各々に関連するレート歪み損失が計算される。最も少ないレート歪み損失（従って、その対応する増強レイヤ符号化ビットストリーム）を生じたフィルタが、最良（すなわち、最終）候補として選択される。選択されたフィルタのインデックスがビットストリーム内に符号化される。このような符号化は、フレーム毎ベース、マクロブロック毎又は他の定期的ベースで実行することができる。一部の場合には、信号伝達は、スペクトル組成のようなビデオシーケンスの時間的に変化する特性に対して、１つのマクロブロックと隣接マクロブロックの間のスペクトル差のような空間的に変化する特性に対して、又は基部レイヤＱＰ値などのビットストリーム内に以前に符号化された他の情報に対して調整することができる。このような調整は、フィルタインデックスのエントロピー符号化のコンテキストを選択する段階を含むことができる。また、例えば、フィルタインデックスが既知の隣接マクロブロックのスペクトル特性に類似するなどの一部の状況においては、１つのマクロブロックのスペクトル特性は、フィルタインデックスを符号化しないことも含むことができる。

ＱＰベースの切換：先の切換が、特定の増強レイヤフレームのための最良候補を選択するためにアップサンプリングフィルタの各々に対応する符号化処理の最終結果に依存するのに対して、ＱＰベースの切換システムは、ＱＰ閾値に応じて候補の中から最良のフィルタを選択する。基本的に、ＱＰ＿ｂａｓｅ及びＱＰ＿ｅｎｈａｎｃｅに関して１つ又はそれよりも多くの所定の一定ＱＰ閾値が設定されており、図４に示されているタイプのＱＰグリッドを生成する。ＱＰグリッドの各セルは、アップサンプリングフィルタ選択に対応する。従って、ＱＰ＿ｂａｓｅ及びＱＰ＿ｅｎｈａｎｃｅの組合せがグリッド上で交わる場所に応じて、符号化器は、１つのアップサンプリングフィルタを選択する。ＱＰ閾値セットは、ビットストリーム内に符号化される。多くの場合、ＱＰ閾値セットはシーケンスベースで固定であるが、別の場合には、閾値は、定期的に又は特定のタイプのフレーム（例えば、イントラフレーム）に関して符号化され、これらの有無は、フラグビットにより通知することができる。更に別の拡張では、例えば、ＱＰ閾値を差動的に符号化することにより隣接するＱＰ閾値間の相関関係を利用するような方法で、ＱＰ閾値自体の符号化が実行される。

フィルタトレーニングベースの切換：フィルタトレーニングベースの切換において、符号化器は、例えば、（限定ではないが）元の増強解像度フレームとアップサンプリングされたフレームとの間の誤差信号を最適化することにより最適フィルタ係数セットを計算する。トレーニングは、基部レイヤＱＰ値及び増強レイヤＱＰ値の組合せに対して別々に実行することができ、又はＱＰ値の組合せを「クラス」にグループ分けして各「クラス」毎にトレーニングを別々に実行することができる。トレーニングは、一般的に、フレーム毎ベースで実行されると予想されるが、同様のタイプのフレーム群又はフレーム集合（例えば、Ｉフレーム又はＰフレームセット）のような他の間隔にわたってトレーニングを実行することもできる。次に、これがもたらすフィルタタップが、ビットストリーム内に符号化される。これは、シーケンスベース、フレームベース、又は他の定期的間隔で実行することができる。これはまた、（スライスタイプのような）スライスヘッダ内のフィールドによりトリガすることができ、又はビットストリーム内に以前に符号化された情報に基づいて条件付きで符号化することができる。

復号器がビットストリームを復号することになるＦＧＳレイヤが未知の場合、上述の切換機構は修正される。異なるフィルタ選択間のＱＰベースの切換が、２つの変形、すなわち、シーケンスレベルにおけるＱＰベースの切換とフレームレベルにおけるＱＰベースの切換とで利用される。

シーケンスレベルにおけるＱＰベースの切換方法の場合、符号化器は、ＱＰ＿ｂａｓｅ及びＱＰ＿ｅｎｈａｎｃｅの閾値セットを（明らかにシーケンスレベルで）通知する。「既知の基部レイヤＱＰ」の場合と同様に、これらの閾値に基づいて、ＱＰグリッドが形成される。このＱＰグリッドを用いて、ＱＰ＿ｂａｓｅ及びＱＰ＿ｅｎｈａｎｃｅの所定の組合せを１つのアップサンプリングフィルタ選択にマップする。「既知の基部レイヤＱＰ」シナリオとは異なり、アップサンプリングが実行される低解像度空間レイヤのＦＧＳレイヤがコーデックの両側間で異なる場合には、符号化器及び復号器は、異なるアップサンプリングフィルタを使用することができる。

フレームレベルにおけるＱＰベースの切換方法の場合、増強レイヤＱＰ（ＱＰ＿ＱＰ＿ｅｎｈａｎｃｅ）は、符号化器及び復号器の両方に対して既知であるので、符号化器は、ＱＰ＿ｂａｓｅのみの閾値セットをフレームベースで通知する。従って、復号器は、ＱＰ＿ｂａｓｅのみの領域を設定し、これらの領域をアップサンプリングのベクトルにマップする。（復号器が低空間レイヤ解像度をアップサンプリングすることになる）実効ＱＰがＱＰ区域上のどこに収まるかに応じて、復号器は、アップサンプリングフィルタを選択する。

性能の観点からは、本発明により、符号化器は、いくつかの代替フィルタの利点を協調様式で組み合わせることができる。本発明は、適切な切換決定により関連フィルタの集約的な性能改善を得ることができる。簡単な実施例として、図３は、ＡＶＣフィルタと最適フィルタの間のレート歪みベースの切換決定を用いたフットボールシーケンス（１５フィート／秒で）に関する本発明の性能を示している。基部レイヤ解像度は、ＱＣＩＦ（１７３ｘ１４４）であり、増強レイヤ解像度は、ＣＩＦ（３５２ｘ２８８）である。更に、データレートとは無関係に単一のフィルタを使用すると、（最適フィルタの場合のような）適正な性能を得るには、より多くのフィルタタップが必要になる場合があるので、より少ない数のタップを有するフィルタを採用する切換型フィルタ機構を用いることにより、アップサンプリング作業の計算の複雑性を低減することができる。

図５は、ネットワークを通じて通信することができる複数の通信装置を含む本発明を利用することができるシステム１０を示している。システム１０は、以下に限定されるものではないが、移動電話ネットワーク、無線「ローカルエリアネットワーク（ＬＡＮ）」、Ｂｌｕｅｔｏｏｔｈパーソナルエリアネットワーク、「イーサネット（登録商標）」ＬＡＮ、トークンリングＬＡＮ、広域ネットワーク、「インターネット」、その他を含む有線又は無線ネットワークのあらゆる組合せを含むことができる。システム１０は、有線及び無線の両方の通信装置を含むことができる。

例証のために、図５に示されているシステム１０は、移動電話ネットワーク１１及び「インターネット」２８を含む。「インターネット」２８への接続は、以下に限定されるものではないが、長距離無線接続、短距離無線接続、並びに限定ではないが電話回線、ケーブル回線、電力線などを含む様々な有線接続を含むことができる。

システム１０の例示的な通信装置は、以下に限定されるものではないが、移動電話１２、ＰＤＡと移動電話の組合せ１４、ＰＤＡ１６、統合メッセージング装置（ＩＭＤ）１８、デスクトップコンピュータ２０、及びノートブックコンピュータ２２を含むことができる。通信装置は、固定型か、又は移動中の個人が携行する際には移動型とすることができる。通信装置はまた、以下に限定されるものではないが、自動車、トラック、タクシー、バス、船、飛行機、自転車、オートバイ、その他を含む輸送手段内に配置することができる。通信装置の一部又は全ては、通話及びメッセージを送受信し、基地局２４への無線接続２５を通じてサービスプロバイダと通信することができる。基地局２４は、移動電話ネットワーク１１と「インターネット」２８の間の通信を可能にするネットワークサーバ２６に接続することができる。システム１０は、更に別の通信装置及び異なるタイプの通信装置を含むことができる。

通信装置は、以下に限定されるものではないが、「符号分割多元接続（ＣＤＭＡ）」、「移動通信システム（ＧＳＭ）」、「ユニバーサル移動通信システム（ＵＭＴＳ）」、「時分割多元接続（ＴＤＭＡ）」、「周波数分割多元接続（ＦＤＭＡ）」、「伝送制御プロトコル／インターネットプロトコル（ＴＣＰ／ＩＰ）」、「ショートメッセージングサービス（ＳＭＳ）」、「マルチメディアメッセージングサービス（ＭＭＳ）」、電子メール、「インスタントメッセージサービス（ＩＭＳ）」、Ｂｌｕｅｔｏｏｔｈ、「ＩＥＥＥ８０２．１１」、その他を含む様々な伝送技術を用いて通信することができる。通信装置は、以下に限定されるものではないが、無線、赤外線、レーザ、及びケーブル接続などを含む様々な媒体を用いて通信することができる。

図６及び７は、本発明を実施することができる１つの代表的な移動電話１２を示している。しかし、本発明は、１つの特定のタイプの移動電話１２又は他の電子装置に限定されるものではない点を理解すべきである。図６及び７の移動電話１２は、ハウジング３０、液晶ディスプレイの形式のディスプレイ３２、キーパッド３４、マイクロフォン３６、受話口３８、バッテリ４０、赤外線ポート４２、アンテナ４４、本発明の一実施形態によるＵＩＣＣ形式のスマートカード４６、カード読取器４８、無線インタフェース回路５２、コーデック回路５４、コントローラ５６、及びメモリ５８を含む。個々の回路及び要素は、当業技術において、例えば、Ｎｏｋｉａ系列の移動電話において公知の全てのタイプである。

本発明は、方法段階の一般的関連で説明されており、これは、一実施形態では、ネットワーク化された環境でコンピュータにより実行されるプログラムコードのようなコンピュータ実行可能命令を含むプログラム製品により実施することができるものである。一般的に、プログラムモジュールは、特定のタスクを実行するか又は特定の抽象データ型を実施するルーチン、プログラム、オブジェクト、構成要素、データ構造、その他を含む。コンピュータ実行可能命令、関連するデータ構造、及びプログラムモジュールは、本明細書に開示する方法段階を実行するためのプログラムコードの実施例を表している。このような実行可能命令又は関連するデータ構造の特定の順序は、このような各段階に説明される機能を実施するための対応する作用の例を表している。

本発明のソフトウエア及びウェブ実施例は、規則ベースの論理と、様々なデータベース検索段階、相関付け段階、比較段階、及び決定段階を達成する他の論理とを有する標準プログラミング技術で達成することができると考えられる。本明細書及び特許請求の範囲で使用される「構成要素」及び「モジュール」という用語は、ソフトウエアコードの１つ又はそれよりも多くの行を用いた実施、及び／又はハードウエア実装、及び／又は手動入力を受けるための機器を包含するものである点にも注意すべきである。

符号化及び復号化に関して、本明細書に説明したテキスト及び実施例は、特に符号化処理について説明しているが、当業者が、同じ概念及び原理を対応する復号化処理にも当て嵌めることができ、その逆もあることを容易に理解すると考えられる点を理解すべきである。更に、復号されるビットストリームは、仮想的にあらゆるタイプのネットワーク内に配置された遠隔装置から受信することができる点に注意すべきである。更に、ビットストリームは、ローカルハードウエア又はソフトウエアから受信することができる。

本発明の実施形態の以上の説明は、例証及び説明目的のためのものである。これは、網羅的であることを意図したものではなく、又は本発明を開示された厳密な形式に限定するものではなく、修正及び変形は、上述の教示に照らして可能であり、又は本発明の実施から得ることができる。想定する特定の用途に好適である場合に当業者が様々な実施形態及び様々な修正を用いて本発明を利用することを可能にするために、実施形態は、本発明の原理及びその実際的な応用を説明するように選択かつ説明したものである。

上位空間レイヤフレームを獲得するための基部レイヤ空間解像度の二項補間の実施例を示す図である。ＡＶＣ及び最適フィルタを用いる切換機構の性能を示す図である。本発明によるアップサンプリングフィルタ切換機構を示す図である。ＧＰグリッドの形成及びフィルタマッピングを示す図である。本発明を実施することができるシステムの概略図である。本発明の実施で使用することができる移動電話の斜視図である。図６の移動電話の電話回路の概略図である。

符号の説明

１フィルタ１
２フィルタ２
ＭフィルタＭ

Claims

再構成されたより低い空間解像度レイヤからの情報をより高い空間解像度増強レイヤ内へ再利用する方法であって、
再構成されたより低い空間解像度レイヤを設ける段階と、
空間解像度増強レイヤを設けるために、前記再構成されたより低い空間解像度レイヤをアップサンプリングする段階と、
を含み、
前記再構成されたより低い空間解像度レイヤを前記アップサンプリングする段階は、該再構成されたより低い空間解像度レイヤを濾過するために、所定の切換処理に従って複数のフィルタ間で切り換える段階を含む、
ことを特徴とする方法。
前記所定の切換処理は、より低い空間解像度レイヤの量子化パラメータが、前記アップサンプリングする段階が行われることになる復号器において既知であるか否かに基づいていることを特徴とする請求項１に記載の方法。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において既知であり、
前記切換処理は、符号化器に対して、
前記低空間解像度レイヤの量子化パラメータ及び前記高空間解像度増強レイヤの量子化パラメータに対する１組の閾値を利用して、複数のフィルタ候補の中からフィルタを選択させ、かつ
前記閾値に対する１組の値をシーケンスレベルで前記復号器に通知させる、
ことを含む量子化パラメータベースの切換処理を含む、
ことを特徴とする請求項２に記載の方法。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において既知であり、
前記切換処理は、符号化器に対して、
レート歪み損失を用いて、フィルタ候補の索引付けされた組からフィルタを選択させ、かつ
前記選択されたフィルタをフレームベースで前記復号器にビットストリームで通知させる、
ことを含むレート歪みベース切換処理を含む、
ことを特徴とする請求項２に記載の方法。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において既知であり、
前記切換処理は、符号化器に対して、
複数のフィルタタップをもたらすように１組の最適フィルタ係数を計算させ、かつ
前記複数のフィルタタップをフレームベースで前記復号器にビットストリームで通知させる、
ことを含むフィルタトレーニングベース切換処理を含む、
ことを特徴とする請求項２に記載の方法。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において未知であり、
前記切換処理は、シーケンスレベルの量子化パラメータ閾値に基づいている、
ことを特徴とする請求項２に記載の方法。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において未知であり、
前記切換処理は、フレームレベルの量子化パラメータ閾値に基づいている、
ことを特徴とする請求項２に記載の方法。
前記切換処理は、前記符号化器に対して、復号処理の低空間解像度レイヤ量子化パラメータに基づいてフィルタのベクトルを選択するのに前記復号器によって使用するための該低空間解像度レイヤ量子化パラメータに対する１組の閾値を通知させることを特徴とする請求項７に記載の方法。
前記低空間解像度レイヤは、基部レイヤを含むことを特徴とする請求項１に記載の方法。
再構成されたより低い空間解像度レイヤからの情報をより高い空間解像度増強レイヤ内へ再利用するためにコンピュータ可読媒体上に含まれるコンピュータプログラム製品であって、
再構成されたより低い空間解像度レイヤを設けるためのコンピュータコードと、
空間解像度増強レイヤを設けるために、前記再構成されたより低い空間解像度レイヤをアップサンプリングするためのコンピュータコードと、
を含み、
前記再構成されたより低い空間解像度レイヤの前記アップサンプリングは、該再構成されたより低い空間解像度レイヤを濾過するための所定の切換処理に従った複数のフィルタ間の切り換えを含む、
ことを特徴とする製品。
前記所定の切換処理は、より低い空間解像度レイヤの量子化パラメータが、前記アップサンプリングが行われることになる復号器において既知であるか否かに基づいていることを特徴とする請求項１０に記載のコンピュータプログラム製品。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において既知であり、
前記切換処理は、符号化器に対して、
前記低空間解像度レイヤの量子化パラメータ及び前記高空間解像度増強レイヤの量子化パラメータに対する１組の閾値を利用して、複数のフィルタ候補の中からフィルタを選択させ、かつ
前記閾値に対する１組の値をシーケンスレベルで前記復号器に通知させる、
ことを含む量子化パラメータベースの切換処理を含む、
ことを特徴とする請求項１１に記載のコンピュータプログラム製品。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において既知であり、
前記切換処理は、符号化器に対して、
レート歪み損失を用いて、フィルタ候補の索引付けされた組からフィルタを選択させ、かつ
前記選択されたフィルタをフレームベースで前記復号器にビットストリームで通知させる、
ことを含むレート歪みベース切換処理を含む、
ことを特徴とする請求項１１に記載のコンピュータプログラム製品。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において既知であり、
前記切換処理は、符号化器に対して、
複数のフィルタタップをもたらすように１組の最適フィルタ係数を計算させ、かつ
前記複数のフィルタタップをフレームベースで前記復号器にビットストリームで通知させる、
ことを含むフィルタトレーニングベース切換処理を含む、
ことを特徴とする請求項１１に記載のコンピュータプログラム製品。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において未知であり、
前記切換処理は、シーケンスレベルの量子化パラメータ閾値に基づいている、
ことを特徴とする請求項１１に記載のコンピュータプログラム製品。
前記低空間解像度レイヤの量子化パラメータは、前記復号器において未知であり、
前記切換処理は、フレームレベルの量子化パラメータ閾値に基づいている、
ことを特徴とする請求項１１に記載のコンピュータプログラム製品。
前記切換処理は、符号化器に対して、復号処理の低空間解像度レイヤ量子化パラメータに基づいてフィルタのベクトルを選択するのに前記復号器によって使用するための該低空間解像度レイヤ量子化パラメータに対する１組の閾値を通知させる段階を含むことを特徴とする請求項１６に記載のコンピュータプログラム製品。
前記低空間解像度レイヤは、基部レイヤを含むことを特徴とする請求項１０に記載のコンピュータプログラム製品。
再構成されたより低い空間解像度レイヤからの情報をより高い空間解像度増強レイヤ内へ再利用するように構成された復号器であって、
プロセッサと、
前記プロセッサと通信可能に接続され、かつ
再構成されたより低い空間解像度レイヤを設けるためのコンピュータコード、及び
空間解像度増強レイヤを設けるために、前記再構成されたより低い空間解像度レイヤをアップサンプリングするためのコンピュータコード、
を含むメモリユニットと、
を含み、
前記再構成されたより低い空間解像度レイヤの前記アップサンプリングは、該再構成されたより低い空間解像度レイヤを濾過するための所定の切換処理に従った複数のフィルタ間の切り換えを含む、
ことを特徴とする復号器。
前記所定の切換処理は、より低い空間解像度レイヤの量子化パラメータが、前記アップサンプリングが行われることになる復号器において既知であるか否かに基づいていることを特徴とする請求項１９に記載の電子装置。
前記低空間解像度レイヤの量子化パラメータは、復号器において既知であり、
前記切換処理は、量子化パラメータベースの切換処理を含み、該量子化パラメータベースの切換処理は、
前記低空間解像度レイヤの量子化パラメータ及び前記高空間解像度増強レイヤの量子化パラメータに対する１組の閾値を利用して、複数のフィルタ候補の中からフィルタを選択し、かつ
前記閾値に対する１組の値をシーケンスレベルで復号器に通知する、
符号化器に基づいている、
ことを特徴とする請求項２０に記載の電子装置。
前記低空間解像度レイヤの量子化パラメータは、復号器において既知であり、
前記切換処理は、レート歪みベースの切換処理を含み、該レート歪みベースの切換処理は、
レート歪み損失を用いて、フィルタ候補の索引付けされた組からフィルタを選択し、かつ
前記選択されたフィルタをフレームベースで復号器にビットストリームで通知する、
符号化器に基づいている、
ことを特徴とする請求項２０に記載の電子装置。
前記低空間解像度レイヤの量子化パラメータは、復号器において既知であり、
前記切換処理は、フィルタトレーニングベースの切換処理を含み、該フィルタトレーニングベースの切換処理は、
複数のフィルタタップをもたらすように１組の最適フィルタ係数を計算し、かつ
前記複数のフィルタタップをフレームベースで復号器にビットストリームで通知する、
符号化器に基づいている、
ことを特徴とする請求項２０に記載の電子装置。
前記低空間解像度レイヤの量子化パラメータは、復号器において未知であり、
前記切換処理は、シーケンスレベルの量子化パラメータ閾値に基づいている、
ことを特徴とする請求項２０に記載の電子装置。
前記低空間解像度レイヤの量子化パラメータは、復号器において未知であり、
前記切換処理は、フレームレベルの量子化パラメータ閾値に基づいている、
ことを特徴とする請求項２０に記載の電子装置。
前記低空間解像度レイヤは、基部レイヤを含むことを特徴とする請求項１９に記載の電子装置。