JP2009525637A - ビデオ符号化器及びビデオ復号化器における削減分解能更新モード及び計算量スケーラビリティのための条件付き予測の方法及び装置 - Google Patents

Abstract

ビデオ符号化器及びビデオ復号化器における削減分解能更新モード及び計算量スケーラビリティの条件付き予測の方法及び装置を提供する。特定のピクチャが最終的に復号化される際に削減分解能更新モードにおける低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器（１００）を含む。条件付きイントラ予測処理は、削減分解能更新モードにおけるアーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、アーチファクトを削減する。

Description

（関連出願との相互参照）
本出願は、その内容全体を本明細書及び特許請求の範囲に援用する西暦２００６年１月３１日付出願の米国仮出願第６０／７６４，２５３号の利益を主張する。

本願の原理は、一般に、ビデオ符号化及びビデオ復号化に関し、特に、ビデオ符号化器及びビデオ復号化器における削減分解能更新モード及び計算量スケーラビリティのための条件付き予測の方法及び装置に関する。

サイマルキャスト符号化のビットレートのペナルティを負うことなく、広範囲にわたるユーザ装置のサポートをブロ―ドキャスト・ビデオ・アプリケーションが提供することが望ましい。ビデオ復号化は、計算量の多い処理であり、計算量は、符号化ビデオの分解能に大きく依存する。低電力のポータブル装置は通常、非常に厳密な計算量の制約、及び低分解能のディスプレイを有する。別々の分解能に対応する２つ以上のビデオ・ビットストリームのサイマルキャスト・ブロードキャストは、より低い分解能の装置の計算量要件に対応するために使用することが可能であるが、本発明による計算量スケーラブルなシステムよりも高い合計ビットレートを必要とする。よって、高いビデオ符号化ビットレート効率を維持しながら、計算量スケーラブル復号化器を可能にする解決策に対する必要性が存在している。

ＭＰＥＧ−２標準及びＭＰＥＧ−４標準のスケーラビリティ・プロファイルにおけるＳＮＲスケーラビリティ、空間スケーラビリティ、時間スケーラビリティ及び細粒度スケーラビリティを含むスケーラビリティの種々の多くの手法が広く研究され、標準化されている。スケーラビリティ符号化における研究の多くは、制限された帯域幅を低分解能レイヤが有するビットレート・スケーラビリティを目的としている。図１に示すように、通常の空間スケーラビリティ・システムは全体を参照符号１００で示す。システム１００は、ビデオ系列を受信する計算量スケーラブル・ビデオ符号化器１１０を含む。計算量スケーラブル・ビデオ符号化器１１０の第１の出力は、低帯域ネットワーク１２０、及び多重化器１３０の第１の入力と信号通信で接続される。計算量スケーラブル・ビデオ符号化器１１０の第２の出力は、多重化器１３０の第２の入力と信号通信で接続される。低帯域ネットワーク１２０の出力は低分解能復号化器１４０の入力と信号通信で接続される。多重化器１３０の出力は、高帯域ネットワーク１５０の入力と信号通信で接続される。高帯域ネットワーク１５０の出力は、逆多重化器１６０の入力と信号通信で接続される。逆多重化器１６０の第１の出力は高分解能復号化器１７０の第１の入力と信号通信で接続され、逆多重化器１６０の第２の出力は高分解能復号化器１７０の第２の入力と信号通信で接続される。低分解能復号化器１４０の出力は、ベース・レイヤ・ビットストリームの場合、システム１００の出力として利用可能であり、高分解能復号化器１７０の出力は、スケーラブルなビットストリームの場合、システム１００の出力として利用可能である。

符号化器及び復号化器の計算量がかなり増加し、スケーラブル符号化器の符号化効率が通常、非スケーラブル符号化器の符号化効率をずっと下回るので、スケーラブル符号化は実際には広く採用されている訳でない。

空間スケーラブル符号化器及び復号化器は通常、通常の高分解能符号化器／復号化器に存在する機能に対して更なる機能を高分解能スケーラブル符号化器／復号化器が提供することを必要とする。ＭＰＥＧ−２空間スケーラブル符号化器では、予測が低分解能参照ピクチャから行われるか、又は高分解能参照ピクチャから行われるかを決定する。ＭＰＥＧ−２空間スケーラブル復号化器は、低分解能参照ピクチャからの予測、又は高分解能ピクチャからの予測ができなければならない。２つの参照ピクチャ記憶装置組（低分解能ピクチャの場合の１つの参照ピクチャ記憶装置、及び高分解能ピクチャの場合の別の参照ピクチャ記憶装置）が、ＭＰＥＧ−２空間スケーラブル符号化器によって必要である。図２は、従来技術による、２つのレイヤをサポートする低計算量空間スケーラブル符号化器２００のブロック図を示す。図３は、従来技術による、２つのレイヤをサポートする低計算量空間スケーラブル復号化器３００のブロック図を示す。

図２を参照すれば、２つのレイヤをサポートする空間スケーラブル・ビデオ符号化器は全体を参照符号２００で示す。ビデオ符号化器２００は、高分解能入力ビデオ系列を受け取るためのダウンサンプラ２１０を含む。ダウンサンプラ２１０は、低分解能非スケーラブル符号化器２１２と信号通信で結合され、低分解能非スケーラブル符号化器２１２は同様に、低分解能フレーム記憶装置２１４と信号通信で結合される。低分解能非スケーラブル符号化器２１２は、低分解能ビットストリームを出力し、低分解能非スケーラブル復号化器２２０と信号通信で更に結合される。

低分解能非スケーラブル復号化器２２０は、アップサンプラ２３０と信号通信で結合される。アップサンプラ２３０は同様に、スケーラブル高分解能符号化器２４０と信号通信で結合される。スケーラブル高分解能符号化器２４０は、高分解能入力ビデオ系列を更に受信し、高分解能フレーム記憶装置２５０と信号通信で結合され、高分解能スケーラブル・ビットストリームを出力する。低分解能非スケーラブル符号化器２１２の出力及びスケーラブル高分解能符号化器２４０の出力は、空間スケーラブル・ビデオ符号化器２００の出力として利用可能である。

よって、高分解能入力ビデオ系列を低計算量符号化器２００によって受信し、ダウンサンプリングして、低分解能ビデオ系列を生成する。低分解能ビデオ系列は、非スケーラブル低分解能ビデオ圧縮符号化器を使用して符号化され、低分解能ビットストリームが作成される。低分解能ビットストリームは、非スケーラブル低分解能ビデオ圧縮復号化器を使用して復号化される。この機能は符号化器内で行うことができる。復号化低分解能系列はアップサンプリングされ、２つの入力のうちの１つとして、スケーラブル高分解能符号化器のうちの１つに供給される。スケーラブル高分解能符号化器は、ビデオを符号化して高分解能スケーラブル・ビットストリームを生成する。

図３に移れば、２つのレイヤをサポートする空間スケーラブル・ビデオ復号化器は全体を参照符号３００で示す。ビデオ復号化器３００は、低分解能ビットストリームを受信する低分解能復号化器３６０を含む。低分解能復号化器３６０は、低分解能フレーム記憶装置３６２と信号通信で結合され、低分解能ビデオ系列を出力する。低分解能復号化器３６０は、アップサンプラ３７０と信号通信で更に結合される。アップサンプラ３７０は同様に、スケーラブル高分解能復号化器３８０と信号通信で結合される。

スケーラブル高分解能復号化器３８０は、高分解能フレーム記憶装置３９０と信号通信で更に結合される。スケーラブル高分解能復号化器３８０は、高分解能スケーラブル・ビットストリームを受信し、高分解能ビデオ系列を出力する。低分解能復号化器３６０の出力、及びスケーラブル高分解能復号化器の出力は、空間スケーラブル・ビデオ復号化器３００の出力として利用可能である。

よって、高分解能スケーラブル・ビットストリーム及び低分解能ビットストリームが低計算量復号化器３００によって受信される。低分解能ビットストリームは、低分解能フレーム記憶装置を利用する非スケーラブル低分解能ビデオ圧縮復号化器を使用して復号化される。復号化低分解能ビデオは、アップサンプリングされ、次いで高分解能スケーラブル復号化器に入力される。高分解能スケーラブル復号化器は、高分解能フレーム記憶装置の組を利用し、高分解能出力ビデオ系列を生成する。

図４に移れば、非スケーラブル・ビデオ符号化器の全体を参照符号４００で示す。ビデオ符号化器４００への入力は、合成器４１０の非反転入力と信号通信で接続される。合成器４１０の出力は、変換器／量子化器４２０と信号通信で接続される。変換器／量子化器４２０の出力はエントロピ符号化器４４０と信号通信で接続される。エントロピ符号化器４４０の出力は符号化器４００の出力として利用可能である。

変換器／量子化器４２０の出力は、逆変換器／量子化器４５０と信号通信で更に接続される。逆変換器／量子化器４５０の出力は、デブロック・フィルタ４６０の入力と信号通信で接続される。デブロック・フィルタ４６０の出力は、参照ピクチャ記憶装置４７０と信号通信で接続される。参照ピクチャ記憶装置４７０の第１の出力は動き推定器４８０の第１の入力と信号通信で接続される。符号化器４００への入力は、動き推定器４８０の第２の入力と信号通信で更に接続される。動き推定器４８０の出力は、動き補償器４９０の第１の入力と信号通信で接続される。参照ピクチャ記憶装置４７０の第２の出力は、動き補償器４９０の第２の入力と信号通信で接続される。動き補償器４９０の出力は、合成器４１０の反転入力と信号通信で接続される。

図５に移れば、非スケーラブル・ビデオ復号化器全体を参照符号５００で示す。ビデオ復号化器５００は、ビデオ系列を受信するエントロピ復号化器５１０を含む。エントロピ復号化器５１０の第１の出力は、逆量子化器及び／又は変換器５２０の入力と信号通信で接続される。逆量子化器／変換器５２０の出力は、合成器５４０の第１の非反転入力と信号通信で接続される。

合成器５４０の出力はデブロック・フィルタ５９０の入力と信号通信で接続される。デブロック・フィルタ５９０の出力は、参照ピクチャ記憶装置５５０の入力と信号通信で接続される。参照ピクチャ記憶装置５５０の出力は、動き補償器５６０の第１の入力と信号通信で接続される。動き補償器５６０の出力は、合成器５４０の第２の非反転入力と信号通信で接続される。エントロピ復号化器５１０の第２の出力は、動き補償器５６０の第２の入力と信号通信で接続される。デブロック・フィルタ５９０の出力はビデオ復号化器５００の出力として利用可能である。

削減分解能更新（ＲＲＵ）モードを使用するためにＨ．２６４／ＭＰＥＧ ＡＶＣを拡張させるということが提案されている。ＲＲＵモードは、フル分解能ピクチャの動き推定及び補償を行いながら、符号化する対象の残差マクロブロック（ＭＢ）の数を削減することにより、低ビットレートでの符号化効率を向上させる。図６に移れば、削減分解能更新（ＲＲＵ）ビデオ符号化器の全体を参照符号６００で示す。ビデオ符号化器６００への入力は、合成器６１０の非反転入力と信号通信で接続される。合成器６１０の出力は、ダウンサンプラ６１２の入力と信号通信で接続される。変換器／量子化器６２０の入力は、ダウンサンプラ６１２の出力、又は合成器６１０の出力と信号通信で接続される。変換器／量子化器６２０の出力は、エントロピ符号化器６４０と信号通信で接続される。エントロピ符号化器６４０の出力は、ビデオ符号化器６００の出力として利用可能である。

変換器／量子化器６２０の出力は、逆変換器／量子化器６５０の入力と信号通信で更に接続される。逆変換器／量子化器６５０の出力は、アップサンプラ６５５の入力と信号通信で接続される。デブロック・フィルタ６６０の入力は、逆変換器／量子化器６５０の出力、又はアップサンプラ６５５の入力と信号通信で接続される。デブロック・フィルタ６６０の出力は、参照ピクチャ記憶装置６７０の入力と信号通信で接続される。参照ピクチャ記憶装置６７０の第１の出力は、動き推定器６８０の第１の入力と信号通信で接続される。符号化器６００への入力は、動き推定器６８０の第２の入力と信号通信で更に接続される。動き推定器６８０の出力は、動き補償器６９０の第１の入力と信号通信で接続される。参照ピクチャ記憶装置６７０の第２の出力は、動き補償器６９０の第２の入力と信号通信で接続される。動き補償器６９０の出力は、合成器６１０の反転入力と信号通信で接続される。

図７に移れば、削減分解能更新（ＲＲＵ）ビデオ復号化器の全体を参照符号７００で示す。ビデオ復号化器７００は、ビデオ系列を受信するエントロピ復号化器７１０を含む。エントロピ復号化器７１０の出力は、逆量子化器／変換器７２０の入力と信号通信で接続される。逆量子化器／変換器７２０の出力は、アップサンプラ７２２の入力と信号通信で接続される。アップサンプラ７２２の出力は、合成器７４０の第１の入力と信号通信で接続される。

合成器７４０の出力は、デブロック・フィルタ７９０と信号通信で接続される。デブロック・フィルタ７９０の出力は、フル分解能参照ピクチャ記憶装置７５０の入力と信号通信で接続される。デブロック・フィルタ７９０の出力は、ビデオ復号化器７００の出力としても利用可能である。フル分解能参照ピクチャ記憶装置７５０の出力は、動き補償器７６０と信号通信で接続される。動き補償器７６０は、合成器７４０の第２の入力と信号通信で接続される。

ＲＲＵ概念を使用して計算量スケーラブル・コデックを設計することが提案されている。別々の２つのレベルの復号化器の計算量及び分解能をサポートするシステムに対応する例がある。低分解能復号化器は、より小さな表示サイズを有し、非常に厳密な復号化器の計算量の制約を有する。フル分解能復号化器はより大きな表示サイズを有し、より厳密でないが、なお重要な復号化器の計算量の制約を有する。ブロードキャスト・システム又はマルチキャスト・システムは２つのビットストリーム（ビットレートＢＲ_ｂａｓｅのベース・レイヤ、及びビットレートＢＲ_{ｅｎｈａｎ}のエンハンスメント・レイヤ）を送信する。２つのビットストリームは、一緒に多重化し、単一の伝送ストリームにおいて送出することができる。図８に移れば、計算量スケーラビリティ・ブロードキャスト・システムの全体を参照符号８００で示す。計算量スケーラビリティ・ブロードキャスト・システム８００は、計算量スケーラブル・ビデオ符号化器８１０並びに低分解能復号化器８５０及びフル分解能復号化器８７０を含む。計算量スケーラブル・ビデオ符号化器８１０の第１の出力は、多重化器８２０の第１の入力と信号通信で接続される。計算量スケーラブル・ビデオ符号化器８１０の第２の出力は、多重化器８２０の第２の入力と信号通信で接続される。多重化器８２０の出力は、ネットワーク８３０と信号通信で接続される。ネットワーク８３０の出力は、第１の逆多重化器８４０の入力、及び第２の逆多重化器８５０の入力と信号通信で接続される。第１の逆多重化器８４０の出力は、低分解能復号化器８５０の入力と信号通信で接続される。第２の逆多重化器８６０の第１の出力は、フル分解能復号化器８７０の第１の入力と信号通信で接続される。第２の逆多重化器８６０の第２の出力は、フル分解能復号化器８７０の第２の入力と信号通信で接続される。低分解能復号化器８５０の出力は、ベース・レイヤ・ビットストリームの場合、システム８００の出力として利用可能であり、フル分解能復号化器８７０の出力は、スケーラブル・ビットストリームの場合、システム８００の出力として利用可能である。

低分解能復号化器８５０は、ベース・レイヤ・ビットストリームのみを処理し、フル分解能復号化器８７０は、ベース・レイヤ・ビットストリーム及びエンハンスメント・レイヤ・ビットストリームを処理する。ＲＲＵは、復号化器において種々の計算量で低分解能系列及び高分解能系列に復号化することが可能なベース・レイヤにおいて使用される。エンハンスメント・レイヤ・ビットストリームは、ベース・レイヤ・ビットストリームの復号化の結果に付加される（フル分解能動き補償の場合と同様）対象のフル分解能エラー信号を含む。エンハンスメント・レイヤのビットレートはベース・レイヤのビットレートよりも低くなり得る。これは、ベース・レイヤのビットレートが通常、エンハンスメント・レイヤのビットレートと比較して小さい通常の空間スケーラビリティの場合と異なる。フル分解能エラー信号は必ずしも、符号化マクロブロック又はスライス／ピクチャ全てについて送出される訳でない。

従来技術の前述並びに他の欠点及び不利点は本願の原理によって解決される。本願の原理は、ビデオ符号化器及びビデオ復号化器における削減分解能更新モード及び計算量スケーラビリティの条件付き予測のための方法及び装置に関する。

本願の原理の一局面によれば、ビデオ系列を符号化するスケーラブル計算量ビデオ符号化器を提供する。スケーラブル計算量ビデオ符号化器は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を含む。条件付きイントラ予測処理は、削減分解能更新モードにおけるアーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、アーチファクトを削減する。

本願の原理の別の局面によれば、ビデオ系列のスケーラブル計算量ビデオ符号化の方法を提供する。この方法は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する工程を含む。条件付きイントラ予測処理は、削減分解能更新モードにおけるアーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、アーチファクトを削減する。

本願の原理の更に別の局面によれば、ビデオ・ビットストリームを復号化するスケーラブル計算量ビデオ復号化器を提供する。スケーラブル計算量ビデオ復号化器は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理に基づいて生成される、ブロックのイントラ・モード予測を使用して、ビデオ・ビットストリーム内の特定のピクチャにおけるブロックを復号化する復号化器を含む。条件付きイントラ予測処理は、削減分解能更新モードにおけるアーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、アーチファクトを削減する。

本願の原理の更なる局面によれば、ビデオ・ビットストリームのスケーラブル計算量ビデオ復号化の方法を提供する。この方法は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理に基づいて生成される、ブロックのイントラ・モード予測を使用して、ビデオ・ビットストリーム内の特定のピクチャにおけるブロックを復号化する工程を含む。条件付きイントラ予測処理は、削減分解能更新モードにおけるアーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、アーチファクトを削減する。

本願の原理の更に別の局面によれば、ビデオ系列を符号化するスケーラブル計算量ビデオ符号化器を提供する。スケーラブル計算量ビデオ符号化器は、削減分解能更新モードにおいてブロックの低分解能イントラ・モード予測を生成することにより、高分解能でビデオ系列における特定の高分解能ピクチャにおけるブロックを符号化する符号化器を含む。

本願の原理の更に別の局面によれば、ビデオ系列のスケーラブル計算量ビデオ符号化の方法を提供する。方法は、削減分解能更新モードにおいてブロックの低分解能イントラ・モード予測を生成することにより、高分解能でビデオ系列における特定の高分解能ピクチャにおけるブロックを符号化する工程を含む。

本願の原理の更なる局面によれば、ビデオ・ビットストリームを復号化するスケーラブル計算量ビデオ復号化器を提供する。スケーラブル計算量ビデオ復号化器は、修正イントラ予測処理を行って、低分解能で削減分解能更新ブロックを再構成し、再構成削減分解能更新ブロックを高分解能にアップサンプリングすることにより、高分解能でビデオ・ビットストリーム内の特定のピクチャにおける削減分解能更新ブロックを復号化する復号化器を含む。

本願の原理の別の局面によれば、ビデオ・ビットストリームのスケーラブル計算量ビデオ復号化の方法を提供する。方法は、修正イントラ予測処理を行って、低分解能で削減分解能更新ブロックを再構成し、再構成削減分解能更新ブロックを高分解能にアップサンプリングすることにより、高分解能でビデオ・ビットストリーム内の特定のピクチャにおける削減分解能更新ブロックを復号化する工程を含む。

本願の原理の更に別の局面によれば、ビデオ系列を符号化するスケーラブル計算量ビデオ符号化器を提供する。スケーラブル計算量ビデオ符号化器は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を含む。符号化器は、ビデオ系列から符号化された低分解能ビットストリーム、及びビデオ系列から符号化されたダウンサンプリングされたソース系列のそれぞれの品質に基づいて、修正イントラ予測処理の符号化決定を行う。

本願の原理の更なる局面によれば、ビデオ系列のスケーラブル計算量ビデオ符号化の方法を提供する。この方法は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する工程を含む。符号化する工程は、ビデオ系列から符号化された低分解能ビットストリーム、及びビデオ系列から符号化されたダウンサンプリングされたソース系列のそれぞれの品質に基づいて修正イントラ予測処理の符号化決定を行う。

本願の原理の更に別の局面によれば、ビデオ系列を符号化するスケーラブル計算量ビデオ符号化器を提供する。スケーラブル計算量ビデオ符号化器は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を含む。符号化器は、ビデオ系列から符号化された高分解能ビットストリーム及び低分解能ビットストリームのそれぞれの品質に基づいて修正イントラ予測処理の符号化決定を行う。

本願の原理の更に別の局面によれば、ビデオ系列のスケーラブル計算量ビデオ符号化の方法を提供する。この方法は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する工程を含む。符号化する工程は、ビデオ系列から符号化された高分解能ビットストリーム及び低分解能ビットストリームのそれぞれの品質に基づいて修正イントラ予測処理の符号化決定を行う。

本願の原理の前述並びに他の局面、特徴及び利点は、添付図面に関して検討するものとする、以下の、例示的な実施例の詳細な説明から明らかになるであろう。

本願の原理は、例示的な図によって、より深く理解することができる。

本願の原理は、ビデオ符号化器及びビデオ復号化器における削減分解能更新モード及び計算量スケーラビリティのための条件付き予測の方法及び装置に関する。

本明細書は、本願の原理を例証する。よって、本明細書及び特許請求の範囲に明記又は明示されていないが、本願の原理を実施し、その趣旨及び範囲の範囲内に含まれる種々の構成を当業者が考え出すことができるであろう。

本明細書記載の例及び条件付き文言は全て、本願の原理、及び当該技術分野を促進するために本発明者が寄与する概念の理解を手助けするという教示の目的のためであることが意図されており、前述の具体的に記載された例及び条件に限定されるものでないと解されるものとする。

更に、本願の原理の原理、局面及び実施例、並びにその具体例を記載した、本明細書及び特許請求の範囲内の提示は全て、その構造的な均等物及び機能的な均等物を包含することが意図されている。更に、現在知られている均等物、及び、将来において開発される均等物（構造に係わらず、同じ機能を行う、開発される何れかの構成要素）を前述の均等物が含むことが意図されている。

よって、例えば、本明細書記載のブロック図が、本願の原理を実施する例証的な回路の概念図を表すことが当業者によって認識されるであろう。同様に、コンピュータ又はプロセッサを明示しているか否かに係わらず、コンピュータ読み取り可能な媒体において実質的に表し、よって、コンピュータ又はプロセッサによって実行することができる種々の処理を、何れかのフローチャート、フロー図、状態遷移図、疑似コード等が表すことが認識されるであろう。

図に示す種々の構成要素の機能は、専用ハードウェア、並びに適切なソフトウェアと関連してソフトウェアを実行することができるハードウェアを使用することによって提供することができる。プロセッサによって提供される場合、機能は、単一の専用プロセッサ、単一の共有プロセッサ、又は一部は共有され得る複数の個々のプロセッサによって備えることができる。更に、「プロセッサ」又は「コントローラ」の語を明示的に用いていることは、ソフトウェアを実行することができるハードウェアを排他的に表すと解されないものとし、ディジタル信号プロセッサ（「ＤＳＰ」）ハードウェア、ソフトウェアを記憶するリード・オンリー・メモリ（「ＲＯＭ」）、ランダム・アクセス・メモリ（「ＲＡＭ」）、及び不揮発性記憶装置を限定なしで暗黙的に含み得る。

他のハードウェア（通常のハードウェア及び／又はカスタム）も含むことができる。同様に、図に示すスイッチは何れも、概念的なものに過ぎない。その機能は、プログラム・ロジックの処理によって、専用ロジックによって、プログラム制御と専用ロジックとの相互作用によって行うことができ、又は手作業によっても行うことができる。具体的な手法は、意味合いから、より具体的に理解されるように実施者によって選択可能である。

本願の特許請求の範囲では、特定された機能を行う手段として記載された構成要素は何れも、前述の機能を行う何れかの手段（例えば、ａ）その機能を行う回路要素の組み合わせ、ｂ）何れかの形態のソフトウェア（よって、上記ソフトウェアを実行して上記機能を行うために適切な回路と組み合わせた、ファームウェア、マイクロコード等を含む）を含む）を包含することが意図されている。前述の特許請求の範囲記載の本願の原理は、特許請求の範囲が要求するやり方で、記載された種々の手段によって提供される機能が組み合わせられ、集約されることにある。よって、前述の機能を提供することが可能な如何なる手段も、本明細書及び特許請求の範囲記載のものと均等であるものとする。

本明細書において本願の原理の「ｏｎｅ ｅｍｂｏｄｉｍｅｎｔ」又は「ａｎ ｅｍｂｏｄｉｍｅｎｔ」に言及していることは、実施例に関して説明する特定の特徴、構造又は特性等が本願の原理の少なくとも１つの実施例に含まれていることを意味している。よって、本明細書を通して種々の箇所に存在している句「ｉｎ ｏｎｅ ｅｍｂｏｄｉｍｅｎｔ」又は「ｉｎ ａ ｅｍｂｏｄｉｍｅｎｔ」は必ずしもその全てが同じ実施例を表している訳でない。

図９に移れば、本願の原理を適用することができる例示的な低分解能計算量スケーラブル・ビデオ復号化器の全体を参照符号９００によって示す。ビデオ復号化器９００は、ビデオ系列を受け取るためのエントロピ復号化器９１０を含む。エントロピ復号化器９１０の第１の出力は、逆量子化器／変換器９２０の入力と信号通信で接続される。逆量子化器／変換器９２０の出力は、合成器９４０の第１の非反転入力と信号通信で接続される。

合成器９４０の出力は、デブロック・フィルタ９９０の入力と信号通信で接続される。デブロック・フィルタ９９０の出力は、参照ピクチャ記憶装置９５０の入力と信号通信で接続される。デブロック・フィルタ９９０の出力は、ビデオ復号化器９００の出力としても利用可能である。参照ピクチャ記憶装置９５０の出力は、動き補償器９６０の第１の入力と信号通信で接続される。動き補償器９６０の出力は、合成器９４０の第２の非反転入力と信号通信で接続される。エントロピ復号化器９１０の第２の出力は、動きベクトル（ＭＶ）分解能削減器９９９の入力と信号通信で接続される。ＭＶ分解能削減器９９９の出力は、動き補償器９６０の第２の入力と信号通信で接続される。

復号化器９００では、ベース・レイヤ・ビットストリームはエントロピ復号化される。動きベクトルは、低分解能に対応する精度に精度を削減するよう丸められる。この低分解能スケーラブル復号化器の計算量は、非スケーラブル復号化器の計算量と非常に近い。動きベクトルのスケーリングが、非常に低い計算量を有するからである。低分解能とフル分解能との間で各寸法における分解能比において２の係数が使用された場合、システムにおいて選択されるのが切り上げであるか又は切り下げであることに応じて丸めを右シフトのみ、又は加算及び右シフトで実現することが可能である。

図１０に移れば、本願の原理を適用することができる例示的な高分解能計算量スケーラブル・ビデオ復号化器１０００の全体を参照符号１０００によって示す。ビデオ復号化器１０００は、ベース・レイヤ・ビットストリームを受け取るための第１のエントロピ復号化器１００５を含む。第１のエントロピ復号化器１００５の出力は、第１の逆量子化器／変換器１０１０の入力と信号通信で接続される。第１の逆量子化器／変換器１０１０の出力は、アップサンプラ１０１５の入力と信号通信で接続される。アップサンプラ１０１５の出力は、第１の合成器１０２０の第１の入力と信号通信で接続される。

第１の合成器１０２０の出力は、第２の合成器１０２５の第１の入力と信号通信で接続される。フル分解能参照ピクチャ記憶装置１０３０の出力は、動き補償器１０３５の第１の入力と信号通信で接続される。（動きベクトル（ＭＶ）１００５を出力するための）エントロピ復号化器の第２の出力は、動き補償器１０３５の第２の入力と信号通信で接続される。動き補償器１０３５の出力は、第１の合成器１０２０の第２の入力と信号通信で接続される。

第２エントロピ復号化器１０４０の入力は、エンハンスド・レイヤ・ビットストリームを受け取るためのものである。第２のエントロピ復号化器１０４０の出力は、第２の逆量子化器／変換器１０４５の入力と信号通信で接続される。第２の逆量子化器／変換器１０４５の出力は、第２の合成器１０２５の第２の入力と信号通信で接続される。

デブロック・フィルタ１０５０への入力は、第１の合成器１０２０の出力、又は第２の合成器１０２５の出力と信号通信で接続される。デブロック・フィルタ１０５０の出力は、フル分解能参照ピクチャ記憶装置１０３０の入力と信号通信で接続される。デブロック・フィルタ１０５０の出力は、ビデオ復号化器１０００の出力として利用可能である。

ベース・レイヤ・ビットストリームを処理する、復号化器１０００の部分は、ＲＲＵ復号化器と同様である。エントロピ復号化、逆量子化、及び逆変換後、残差がアップサンプリングされる。動き補償をフル分解能参照ピクチャに施してフル分解能予測を生成し、アップサンプリングされた残差が予測に付加される。フル分解能エラー信号は、エンハンスメント・レイヤ・ビットストリームに存在している場合、エントロピ復号化され、逆量子化・変換され、次いで、ＲＲＵ再構成信号に付加される。次いで、デブロッキング・フィルタが施される。

図１１に移れば、本願の原理を適用することができる例示的な計算量スケーラブル・ビデオ符号化器の全体を参照符号１１００で示す。ビデオ符号化器１１００への入力は、第１の合成器１１０５の非反転入力と信号通信で接続される。第１の合成器１１０５の出力は、ダウンサンプラ１１１２の入力と信号通信で接続される。ダウンサンプラ１１１２の出力は、第１の変換器／量子化器１１１５の入力と信号通信で接続される。第１の変換器／量子化器１１１５の出力は、第１のエントロピ符号化器１１２０の入力と信号通信で接続される。第１のエントロピ符号化器１１２０の出力は、ベース・レイヤ・ビットストリームの場合、符号化器１１００の出力として利用可能である。

第１の変換器／量子化器１１１５の出力は、第１の逆変換器／量子化器１１２５の入力と信号通信で更に接続される。第１の逆変換器／量子化器１１２５の出力は、アップサンプラ１１５５の入力と信号通信で接続される。アップサンプラ１１５５の出力は、第２の合成器１１６０の反転入力、第３の合成器１１６５の第１の非反転入力、及びスイッチ１１９１の入力と信号通信で接続される。

ビデオ符号化器１１００への入力は、第２の合成器１１６０の非反転入力と信号通信で更に接続される。第２の合成器１１６０の出力は、スイッチ１１６２の入力と信号通信で接続される。スイッチ１１６２の出力は、第２の変換器／量子化器１１７０への入力と信号通信で接続される。第２の変換器／量子化器１１７０の出力は、第２のエントロピ符号化器１１７５の入力と信号通信で接続される。第２のエントロピ符号化器１１７５の出力は、エンハンスド・レイヤ・ビットストリームの場合、符号化器１１００の出力として利用可能である。第２の変換器／量子化器１１７０の出力は、第２の逆変換器／量子化器１１８０の入力と信号通信で更に接続される。第２の逆変換器／量子化器１１８０の出力は、第３の合成器１１６５の第２の非反転入力と信号通信で接続される。

ビデオ符号化器１１００への入力は、動き推定器１１８５の第１の入力と信号通信で更に接続される。動き推定器１１８５の出力は、動き補償器１１９０の第１の入力と信号通信で接続される。動き補償器１１９０の出力は、第１の合成器１１０５の反転入力と信号通信で接続される。フル分解能参照ピクチャ記憶装置１１９２の第１の出力は、動き推定器１１８５の第２の入力と信号通信で接続される。フル分解能参照ピクチャ記憶装置１１９２の第２の出力は、動き補償器１１９０の第２の入力と信号通信で接続される。フル分解能参照ピクチャ記憶装置１１９２の入力は、デブロック・フィルタ１１９５の出力と信号通信で接続される。デブロック・フィルタ１１９５の入力は、スイッチ１１９１の出力と信号通信で接続される。スイッチ１１９１の別の入力は、第３の合成器１１６５の出力と信号通信で接続される。

符号化器１１００は、低分解能ビデオ品質よりもフル分解能ビデオ品質を最適化しようとするものである。動き推定は、フル分解能ビデオ・ピクチャに対して行われる。入力ピクチャからの動き補償予測の減算後、予測残差がダウンサンプリングされる。ＲＲＵコデックと違って、ダウンサンプリングはピクチャ全てに施され、よって、低分解能復号化器は常に、復号化する対象のピクチャを有し得る。ダウンサンプリングされた残差は、変換され、量子化され、エントロピ符号化される。これは、ベース・レイヤ・ビットストリームを形成する。逆量子化器及び逆変換が施され、次いで、符号化残差は、フル分解能に戻されるようアップサンプリングされる。符号化器１１００は、ピクチャ又はスライスのエンハンスメント・レイヤ・フル分解能エラー信号を送出するか否かを選ぶことが可能である。一般に、エンハンスメント・レイヤ・フル分解能エラー信号は、Ｉスライス全てについて符号化され、復号化アップサンプルをフル分解能入力ピクチャから減算した場合のエラー信号の振幅に基づいてＰ及びＢのスライスについて任意的に送出することが可能である。エンハンスメント・レイヤ・フル分解能エラー信号を符号化する場合、符号化ベース・レイヤのアップサンプリングされた符号化ピクチャが入力フル分解能ピクチャから減算される。この差を次いで、量子化し、変換し、エントロピ符号化してエンハンスメント・レイヤ・ビットストリームを形成する。エンハンスメント・レイヤ・ビットストリームは、イントラ符号化スライスのみを含むとみなし得る。

本願の原理によれば、ビデオ符号化及び復号化のイントラ予測処理に影響を及ぼす特定の制約をもたらすことにより、計算量スケーラブル復号化器の主観的品質を更に向上させる。

ＲＲＵモードに元々提案されたイントラ予測手法は、符号化性能の点で効率的であるが、ＲＲＵスライスが計算量スケーラビリティ・システムにおいて考慮に入れられる場合、激しいアーチファクトを受け得ることが明らかになった。前述のアーチファクトは主に、低計算量復号化器及び高計算量復号化器において、特に方向性予測モードの場合に、イントラ予測処理において隣接画素が考慮に入れられるやり方による。図１２に移れば、高計算量復号化器の予側子画素の全体を参照符号１２００で示す。予測子画像１２００は、画素Ｃ０−Ｃ１５、Ｘ、及びＲ０−Ｒ８を含む。図１３に移れば、低計算量復号化器の予側子画素の全体を参照符号１３００で示す。予測子画素１３００は、画素ｃ０−ｃ７、ｘ、及びｒ０−ｒ３を含む。元のＲＲＵ実現形態の場合、イントラ予測の予測画素間のばらつきは、元の分解能のビデオと比較して、低計算量復号化器の場合にずっと大きい。従来の手法の高分解能復号化器においてこのばらつきが考慮に入れられなかったことを考えれば、このことは基本的に、イントラ方向性モードにおいて、直ちに影響を及ぼす。例えば、垂直左予測の第１のサンプル（ａ００）の場合、高計算量のものについては、サンプルＣ０及びＣ１が考慮に入れられた一方、低計算量サンプルｂ００は、サンプルｃ０及びｃ１から予測された。しかし、ｃ１は、サンプルＣ２及びＣ３と、ずっと高い関係を有する。例えば、ｃ１がエッジに対応する場合、これは、この予測の特性をかなり変えることが可能であり、よって、復号化低計算量系列内にアーチファクトを潜在的にもたらし得る。別の方向性予測モードによる何れかの他の予測サンプルを平均化する場合、同様な問題が生じる。

この問題を避ける最も単純な解決策は、イントラ符号化の場合、方向性モード全てを禁止することであるが、このことは効率の点で、最善の解決策でないことがあり得る。その代わりに、高計算量復号化系列と低計算量復号化系列との間の前述の関係を考慮に入れるよう、高計算量復号化器のＲＲＵスライスのイントラ予測を修正することを提案する。

特に、元のフル分解能サンプルをまずダウンサンプリングし（図１２）、次いで、前述の新たなサンプルに基づいて低分解能予測を作成する（図１３）ことにより、高計算量復号化器の予測を実行することを提案する。後に、この低分解能予測は、フル分解能に（例えば、ゼロ次ホ―ルドを使用して）アップサンプリングされ、予測に使用される。ダウンサンプリングは、種々の手法を使用して行うことが可能である。例えば、奇数の予測サンプルのみを保持してもよく（ｘ＝Ｘ、ｃ１＝Ｃ１、ｃ３＝Ｃ３、ｃ５＝Ｃ５、ｃ７＝Ｃ７、ｃ９＝Ｃ９、ｃ１１＝Ｃ１１、ｃ１３＝Ｃ１３、ｃ１５＝Ｃ１５、ｒ１＝Ｒ１、ｒ３＝Ｒ３、ｒ５＝Ｒ５及びｒ７＝Ｒ７）、偶数サンプルを保持してもよく、単純平均を行ってもよい（ｃ１＝（Ｃ０＋Ｃ１）＞＞１、ｃ３＝（Ｃ２＋Ｃ３）＞＞１、ｃ５＝（Ｃ４＋Ｃ５）＞＞１、ｃ７＝（Ｃ６＋Ｃ７）＞＞１、ｃ９＝（Ｃ８＋Ｃ９）＞＞１、ｃ１１＝（Ｃ１０＋Ｃ１１）＞＞１、ｃ１３＝（Ｃ１２＋Ｃ１３）＞＞１、ｃ１５＝（Ｃ１４＋Ｃ１５）＞＞１、ｒ１＝（Ｒ０＋Ｒ１）＞＞１、ｒ３＝（Ｒ２＋Ｒ３）＞＞１、ｒ５＝（Ｒ４＋Ｒ５）＞＞１及びｒ７＝（Ｒ６＋Ｒ７）＞＞１）。

性能を向上させるために、別の実施例では、奇数サンプルが奇数位置に考慮され、偶数サンプルが偶数位置に考慮される。

この手法は特定の場合、低分解能復号化器の主観的品質を向上させることが可能であるが、高分解能復号化器の性能を損なうこともあり得る。したがって、「ｒｒｕ＿ｃｏｍｐｌｅｘｉｔｙ＿ｃｏｎｓｔｒａｉｎｅｄ＿ｆｌａｇ」と呼ばれる新たなパラメータを導入することにより、スライス・ヘッダ・レベル又はマクロブロック・レベルで、高水準構文を使用してこの手法を示すことを提案する。このパラメータがイネーブルされた場合、高計算量復号化器内のイントラブロックの予測は前述のように行われる。対照的に、このパラメータがディセーブルされた場合、予測は従来の手法と同様に行われる。このパラメータを考慮に入れることにより、低分解能復号化器と高分解能復号化器との間の性能トレードオフが生じ得る。

低計算量復号化器の品質は、低計算量復号化系列の品質に基づいて、特にイントラ・モードに関して、符号化中に特定の決定を行うことによって向上させることが可能である。より具体的には、通常、モード決定は、元のソース画像と比較した歪み基準を考慮に入れることによって行われる。特に一般的な手法には、ラグランジュ最適化（すなわち、Ｊ＝Ｄ＋λ^＊Ｒの計算。ここで、Ｄは歪みであり、Ｒは現在のデータの符号化に必要なビットであり、λはラグランジュ乗算子である）の使用がある。低計算量復号化器の品質を向上させるための単純な手法には、例えば、元のビデオ系列のダウンサンプリングされたバージョンを「ソース」として考慮に入れることにより、低計算量復号化器についてのみ、歪みを考慮に入れるということがある。低計算量復号化器及び高計算量復号化器の品質を向上させる改良手法には、両方の場合に、品質における影響を考慮に入れるということがある。したがって、本願では、Ｄ＝ａ^＊Ｄ_Ｈ＋ｂ^＊Ｄ_Ｌにより、歪みＤを計算することを提案する。ここで、Ｄ_Ｈは高計算量復号化器の歪みであり、Ｄ_Ｌは、低計算量復号化器の、ダウンサンプリングされたソースに基づいた歪みであり、ａ及びｂは、高計算量復号化器と低計算量復号化器との間の品質のトレードオフを可能にする重み付けパラメータである。

図１４に移れば、削減分解能更新（ＲＲＵ）モードの条件付きイントラ予測を使用してマクロブロックを符号化する例示的な方法の全体を参照符号１４００で示す。条件付きイントラ予測は、ＲＲＵモードの特定の予測モードを禁止して、ピクチャが最終的に復号化された際にＲＲＵモードにおける低分解能及び高分解能のアーチファクトを削減する。

方法１４００は開始ブロック１４０５を含み、開始ブロック１４０５は、機能ブロック１４１０及び機能ブロック１４１５に制御を渡す。

機能ブロック１４１０は、全てのモードにより、ＲＲＵモードについて現在のマクロブロックのイントラ予測を検査し、歪み尺度Ｊ１を計算し、制御を決定ブロック１４２０に渡す。

機能ブロック１４１５は、特定の予測モードの使用を禁止することにより、ＲＲＵモードについて現在のマクロブロックのイントラ予測を検査し、歪み尺度Ｊ２を計算し、決定ブロック１４２０に制御を渡す。

決定ブロック１４２０は、歪み尺度Ｊ１が歪み尺度Ｊ２よりも少ないか否かを判定する。肯定の場合、制御は機能ブロック１４２５に渡される。さもなければ、制御は機能ブロック１４３５に渡される。

機能ブロック１４２５は、１に等しくなるようにｒｒｕ＿ｃｏｍｐｌｅｘｉｔｙ＿ｃｏｎｓｔｒａｉｎｅｄ＿ｆｌａｇをセットし、制御を機能ブロック１４３０に渡す。機能ブロック１４３０は、現在のＲＲＵマクロブロックを符号化し、終了ブロック１４９９に制御を渡す。

機能ブロック１４３５は、ゼロに等しくなるようにｒｒｕ＿ｃｏｍｐｌｅｘｉｔｙ＿ｃｏｎｓｔｒａｉｎｅｄ＿ｆｌａｇをセットし、機能ブロック１４３０に制御を渡す。

図１５に移れば、削減分解能更新（ＲＲＵ）モードの条件付きイントラ予測を使用してマクロブロックを復号化する例示的な方法の全体を参照符号１５００で示す。条件付きイントラ予測は、ＲＲＵモードについて特定の予測モードを禁止して、ピクチャが最終的に復号化された際にＲＲＵモードにおける低分解能及び高分解能のアーチファクトを削減する。

方法１５００は開始ブロック１５０５を含み、開始ブロック１５０５は機能ブロック１５１０に制御を渡す。機能ブロック１５１０は、現在のＲＲＵマクロブロックのビットストリームを解析し、決定ブロック１５１５に制御を渡す。決定ブロック１５１５は、ｒｒｕ＿ｃｏｍｐｌｅｘｉｔｙ＿ｃｏｎｓｔｒａｉｎｅｄ＿ｆｌａｇが１に等しいか否かを判定する。肯定の場合、制御は機能ブロック１５２０に渡される。さもなければ、制御は機能ブロック１５２５に渡される。

機能ブロック１５２０は、特定の予測モードを禁止することにより、条件付きイントラ予測により、ＲＲＵマクロブロックを復号化し、制御を終了ブロック１５９９に渡す。

機能ブロック１５２５は、イントラ予測により、ＲＲＵマクロブロックを復号化し、制御を終了ブロック１５９９に渡す。

図１６に移れば、削減分解能更新（ＲＲＵ）モードの修正イントラ予測を使用して高分解能でビデオ系列における高分解能ピクチャのマクロブロックを符号化する例示的な方法の全体を参照符号１６００で示す。

方法１６００は開始ブロック１６０５を含み、開始ブロック１６０５は制御を機能ブロック１６１０及び機能ブロック１６１５に渡す。機能ブロック１６１０は、全てのモードにより、ＲＲＵモードについてイントラ予測を検査し、歪み尺度Ｊ１を計算し、制御を決定ブロック１６３５に渡す。

機能ブロック１６１５は、ピクチャ内のＲＲＵマクロブロックをダウンサンプリングし、機能ブロック１６２０に制御を渡す。機能ブロック１６２０はイントラ予測を行い、機能ブロック１６２５に制御を渡す。機能ブロック１６２５は、再構成マクロブロックをアップサンプリングし、機能ブロック１６３０に制御を渡す。機能ブロック１６３０は、歪み尺度Ｊ２を計算し、決定ブロック１６３５に制御を渡す。

決定ブロック１６３５は、歪み尺度Ｊ２が歪み尺度Ｊ１よりも少ないか否かを判定する。肯定の場合、制御は機能ブロック１６４０に渡される。さもなければ、制御は機能ブロック１６４５に渡される。

機能ブロック１６４０は、１に等しくなるようにｒｒｕ＿ｃｏｍｐｌｅｘｉｔｙ＿ｃｏｎｓｔｒａｉｎｅｄ＿ｆｌａｇをセットし、制御を機能ブロック１６５０に渡す。機能ブロック１６５０は、現在のＲＲＵマクロブロックを符号化し、終了ブロック１６９９に制御を渡す。

機能ブロック１６４５は、ゼロに等しくなるようにｒｒｕ＿ｃｏｍｐｌｅｘｉｔｙ＿ｃｏｎｓｔｒａｉｎｅｄ＿ｆｌａｇをセットし、機能ブロック１６５０に制御を渡す。

図１７に移れば、削減分解能更新（ＲＲＵ）モードの修正イントラ予測を使用して高分解能でビデオ・ビットストリームにおける高分解能ピクチャのマクロブロックを復号化する例示的な方法の全体を参照符号１７００で示す。

方法１７００は開始ブロック１７０５を含み、開始ブロック１７０５は制御を機能ブロック１７１０に渡す。機能ブロック１７１０は、現在のＲＲＵマクロブロックのビットストリームを解析し、決定ブロック１７１５に制御を渡す。

決定ブロック１７１５は、ｒｒｕ＿ｃｏｍｐｌｅｘｉｔｙ＿ｃｏｎｓｔｒａｉｎｅｄ＿ｆｌａｇが１に等しいか否かを判定する。肯定の場合、制御は機能ブロック１７２０に渡される。さもなければ、制御は機能ブロック１７３０に渡される。

機能ブロック１７２０は、ダウンサンプリングされたＲＲＵマクロブロックをイントラ予測によって復号化し、機能ブロック１７２５に制御を渡す。機能ブロック１７２５は、ダウンサンプリングされたＲＲＵマクロブロックをアップサンプリングし、終了ブロック１７９９に制御を渡す。

機能ブロック１７３０は、イントラ予測により、ＲＲＹマクロブロックを復号化し、終了ブロック１７９９に制御を渡す。

図１８に移れば、削減分解能更新（ＲＲＵ）モードの特定のイントラ・モード決定を使用してビデオ系列内の特定のピクチャにおけるマクロブロックを符号化する例示的な方法の全体を参照符号１８００で示す。修正イントラ予測処理の決定は、ビデオ系列から符号化された低分解能ビットストリーム、及びビデオ系列から符号化されたダウンサンプリングされたソース系列のそれぞれの品質に基づく。

方法１８００は開始ブロック１８０５を含み、開始ブロック１８０５は機能ブロック１８１０に制御を渡す。機能ブロック１８１０は、イントラ予測（予測の決定は、低分解能ビットストリーム、及びダウンサンプリングされたソース系列のそれぞれの品質に基づく）を行い、制御を機能ブロック１８１５に渡す。機能ブロック１８１５は、現在のＲＲＵマクロブロックを符号化し、制御を終了ブロック１８９９に渡す。
図１９に移れば、削減分解能更新（ＲＲＵ）モードの特定のイントラ・モード決定を使用してビデオ系列内の特定のピクチャにおけるマクロブロックを符号化する例示的な方法の全体を参照符号１９００で示す。修正イントラ予測処理の決定は、ビデオ系列から符号化された低分解能ビットストリーム、及びビデオ系列から符号化された高分解能ビットストリームのそれぞれの品質に基づく。

方法１９００は開始ブロック１９０５を含み、開始ブロック１９０５は機能ブロック１９１０に制御を渡す。機能ブロック１９１０は、イントラ予測（予測の決定は、低分解能ビットストリーム及び高分解能ビットストリームそれぞれの品質に基づく）を行い、制御を機能ブロック１９１５に渡す。機能ブロック１９１５は、現在のＲＲＵマクロブロックを符号化し、制御を終了ブロック１９９９に渡す。

次に、一部は前述した本発明の多くの付随的な利点／特徴の一部を説明する。例えば、一利点／構成は、ビデオ系列を符号化するスケーラブル計算量ビデオ符号化器であり、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能のアーチファクトを削減する条件付きイントラ予測処理を使用してブロックのイントラ・モ―ド予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を含む。条件付きイントラ予測処理は、削減分解能更新モードにおけるアーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、アーチファクトを削減する。別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、アーチファクトの発生と関連付けられ、条件付きイントラ予測処理によって使用が禁止される特定の予測モードには、方向性イントラ予測モードが含まれる。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つを使用してブロックの条件付きイントラ予測処理の使用を示す。

更に、別の利点／構成は、ビデオ系列を符号化するスケーラブル計算量ビデオ符号化器であり、スケーラブル計算量ビデオ符号化器は、削減分解能更新モードにおいてブロックの低分解能イントラ・モード予測を生成することにより、高分解能でビデオ系列内の特定の高分解能ピクチャにおけるブロックを符号化する符号化器を含む。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は高分解能でブロックをダウンサンプリングして、ダウンサンプリングされたブロックを取得し、ダウンサンプリングされたブロックに基づいて低分解能イントラ予測を生成し、低分解能イントラ予測、及び低分解能イントラ予測と、ダウンサンプリングされたブロックとの間の残差を使用して低分解能でブロックを再構成し、再構成ブロックを高分解能にアップサンプリングする。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は、ブロック内の予測サンプル位置によるダウンサンプリングのために、ブロックに対応する少なくとも１つの元の高分解能サンプルを符号化器が選択する。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は、少なくとも１つの元の高分解能サンプルの平均化及びフィルタリングのうちの少なくとも１つにより、ダウンサンプリングを行う。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は、修正イントラ予測処理を使用して、ブロックの低分解能イントラ・モード予測を生成し、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つを使用して修正イントラ予測処理の使用を示す。

更に、別の利点／構成は、ビデオ系列を符号化するスケーラブル計算量ビデオ符号化器であり、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用してブロックのイントラ・モ―ド予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を含む。符号化器は、ビデオ系列から符号化された低分解能ビットストリーム、及びビデオ系列から符号化されたダウンサンプリングされたソース系列のそれぞれの品質に基づいて修正イントラ予測処理の符号化決定を行う。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は、ラグランジュ最適化手法を使用してそれぞれの品質を評価する。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は、修正イントラ予測処理の符号化決定の実施に使用される低分解能ビットストリーム及びダウンサンプリングされたソース系列の重み付けされた歪み値を判定する。
更に、別の利点／構成は、ビデオ系列を符号化するスケーラブル計算量ビデオ符号化器であり、スケーラブル計算量ビデオ符号化器は、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用してブロックのイントラ・モ―ド予測を生成することにより、ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を含む。符号化器は、ビデオ系列から符号化された高分解能ビットストリーム及び低分解能ビットストリームのそれぞれの品質に基づいて修正イントラ予測処理の符号化決定を行う。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は、ラグランジュ最適化手法を使用してそれぞれの品質を評価する。更に、別の利点／構成は、前述のスケーラブル計算量ビデオ符号化器であり、符号化器は、修正イントラ予測処理の符号化決定の実施に使用する高分解能ビットストリーム及び低分解能ビットストリームの重み付け歪み値を判定する。

本願の原理の前述並びに他の構成及び利点は、本明細書及び特許請求の範囲記載の教示に基づいて当業者によって容易に確認することができる。本願の原理の教示は、ハードウェア、ソフトウェア、ファームウェア、特定用途向プロセッサ、又はこれらの組み合わせの種々の形態で実現することができる。

最も好ましくは、本願の原理の教示はハードウェア及びソフトウェアの組み合わせとして実現される。更に、ソフトウェアは、プログラム記憶装置上に有形に実施されたアプリケーション・プログラムとして実現することができる。アプリケーション・プログラムは、何れかの適切なアーキテクチャを備えるマシンにアップロードすることができ、前述のマシンによって実行することができる。好ましくは、マシンは、ハードウェア（１つ又は複数の中央処理装置（「ＣＰＵ」）、ランダム・アクセス・メモリ（「ＲＡＭ」）や入出力（「Ｉ／Ｏ」）インタフェースなど）を有するコンピュータ・プラットフォーム上に実現される。コンピュータ・プラットフォームは、オペレーティング・システム及びマイクロ命令コードも含み得る。本明細書及び特許請求の範囲記載の種々の処理及び機能は、ＣＰＵによって実行することができる、マイクロ命令コードの一部若しくはアプリケーション・プログラムの一部、又はそれらの何れかの組み合わせであり得る。更に、更なるデータ記憶装置や印刷装置などの種々の他の周辺装置をコンピュータ・プラットフォームに接続することができる。

更に、添付図面に表した構成システム部分及び構成方法の一部は好ましくはソフトウェアで実現されるので、システム構成部分間又は処理機能ブロック間の実際の接続は、本願の原理がプログラムされるやり方によって変わり得る。本明細書及び特許請求の範囲に記載の教示を前提とすれば、当業者は、本願の原理の前述及び同様の実現形態又は構成を考え出すことができるであろう。

添付図面を参照して例証的な実施例を本明細書及び特許請求の範囲において説明してきたが、本願の原理は前述のまさにその実施例に限定されるものでなく、本願の原理の範囲又は趣旨から逸脱しない限り、当業者によって種々の変更及び修正を行うことができる。前述の変更及び修正は全て、特許請求の範囲記載の本願の原理の範囲内に含まれることが意図されている。

従来技術による、通常の空間スケーラビリティ・システムを示すブロック図である。 従来技術による、２つのレイヤをサポートする空間スケーラブル符号化器を示すブロック図である。 従来技術による、２つのレイヤをサポートする空間スケーラブル復号化器を示すブロック図である。 従来技術による、Ｈ．２６４／ＭＰＥＧ ＡＶＣ標準において使用される通常の非スケーラブル・ビデオ符号化器を示すブロック図である。 従来技術による、Ｈ．２６４／ＭＰＥＧ ＡＶＣに使用される通常の非スケーラブル・ビデオ復号化器を示すブロック図である。 従来技術による、削減分解能更新（ＲＲＵ）ビデオ符号化器を示すブロック図である。 従来技術による、削減分解能更新（ＲＲＵ）ビデオ復号化器を示すブロック図である。 従来技術による、計算量スケーラビリティ・ブロードキャスト・システムを示すブロック図である。 本願の原理の実施例による、本発明を施すことができる低分解能計算量スケーラブル・ビデオ復号化器を示すブロック図である。 本発明の原理の実施例による、本発明を適用することができる高分解能計算量スケーラブル・ビデオ復号化器を示すブロック図である。 本発明の原理の実施例による、本発明を適用することができる計算量スケーラブル・ビデオ符号化器を示すブロック図である。 本願の原理の実施例による、高計算量復号化器の例示的な予測子画素を示す図である。 本願の原理の実施例による、低計算量復号化器の例示的な予測子画素を示す図である。 本願の原理の実施例による、削減分解能更新（ＲＲＵ）モ―ドの条件付きイントラ予測を使用してマクロブロックを符号化する例示的な方法を示すフロー図である。 本願の原理の実施例による、削減分解能更新（ＲＲＵ）モ―ドの条件付きイントラ予測を使用してマクロブロックを復号化する例示的な方法を示すフロー図である。 本願の原理の実施例による、削減分解能更新（ＲＲＵ）モ―ドの修正イントラ予測を使用して高分解能でビデオ系列内の高分解能ピクチャのマクロブロックを符号化する例示的な方法を示すフロー図である。 本願の原理の実施例による、削減分解能更新（ＲＲＵ）モ―ドの修正イントラ予測を使用して高分解能でビデオ・ビットストリーム内の高分解能ピクチャのマクロブロックを復号化する例示的な方法を示すフロー図である。 本願の原理の実施例による、削減分解能更新（ＲＲＵ）モードの修正イントラ予測処理を使用してビデオ系列内の特定のピクチャにおけるマクロブロックを符号化する例示的な方法を示すフロー図である。 本願の原理の実施例による、削減分解能更新（ＲＲＵ）モ―ドの修正イントラ予測処理を使用してビデオ系列内の特定のピクチャにおけるマクロブロックを符号化する例示的な方法を示すフロー図である。

Claims (42)

1. ビデオ系列をスケーラブル符号化する装置であって、
   特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、前記ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を備え、
   前記条件付きイントラ予測処理は、前記削減分解能更新モードにおける前記アーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、前記アーチファクトを削減する装置。
2. 請求項１記載の装置であって、前記アーチファクトの前記発生に関連付けられ、前記条件付きイントラ予測処理により、使用が禁止された特定の予測モードは、方向性イントラ予測モードを含む装置。
3. 請求項１記載の装置であって、前記符号化器は、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つを使用して前記ブロックの前記条件付きイントラ予測処理の使用を示す装置。
4. ビデオ系列をスケーラブル計算量ビデオ符号化する方法であって、
   特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、前記ビデオ系列内の特定のピクチャにおけるブロックを符号化する工程を含み、
   前記条件付きイントラ予測処理は、前記削減分解能更新モードにおける前記アーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、前記アーチファクトを削減する方法。
5. 請求項４記載の方法であって、前記アーチファクトの前記発生に関連付けられ、前記条件付きイントラ予測処理により、使用が禁止された前記特定の予測モードは、方向性イントラ予測モードを含む方法。
6. 請求項４記載の方法であって、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つを使用して前記ブロックの前記条件付きイントラ予測処理の使用を示す工程を更に含む方法。
7. ビデオ・ビットストリームをスケーラブル復号化する装置であって、
   特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理に基づいて生成されるブロックのイントラ・モード予測を使用して前記ビデオ・ビットストリーム内の特定のピクチャにおけるブロックを復号化する復号化器を備え、
   前記条件付きイントラ予測処理は、前記削減分解能更新モードにおける前記アーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、前記アーチファクトを削減する装置。
8. 請求項７記載の装置であって、前記アーチファクトの前記発生に関連付けられ、前記条件付きイントラ予測処理により、使用が禁止された前記特定の予測モードは、方向性イントラ予測モードを含む装置。
9. 請求項７記載の装置であって、前記復号化器は、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つに基づいて前記ブロックの前記条件付きイントラ予測処理の使用を判定する装置。
10. ビデオ・ビットストリームをスケーラブル計算量ビデオ復号化する方法であって、
    特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理に基づいて生成されるブロックのイントラ・モード予測を使用して前記ビデオ・ビットストリーム内の特定のピクチャにおけるブロックを復号化する工程を含み、
    前記条件付きイントラ予測処理は、前記削減分解能更新モードにおける前記アーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、前記アーチファクトを削減する方法。
11. 請求項１０記載の方法であって、前記アーチファクトの前記発生に関連付けられ、前記条件付きイントラ予測処理により、使用が禁止された前記特定の予測モードは、方向性イントラ予測モードを含む方法。
12. 請求項１０記載の方法であって、前記復号化する工程は、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つに基づいて前記ブロックの前記条件付きイントラ予測処理の使用を判定する方法。
13. ビデオ符号化のためのビデオ信号構造であって、
    特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することによって符号化された、ビデオ系列内の特定のピクチャにおけるブロックを含み、
    前記条件付きイントラ予測処理は、前記削減分解能更新モードにおける前記アーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、前記アーチファクトを削減するビデオ信号構造。
14. ビデオ信号データを符号化させた記憶媒体であって、特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいて低分解能及び高分解能の場合のアーチファクトを削減する条件付きイントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することによって符号化された、ビデオ系列内の特定のピクチャにおけるブロックを含み、
    前記条件付きイントラ予測処理は、前記削減分解能更新モードにおける前記アーチファクトの発生に関連付けられた特定の予測モードの使用を禁止することにより、前記アーチファクトを削減する記憶媒体。
15. ビデオ系列をスケーラブル符号化する装置であって、
    削減分解能更新モードにおいてブロックの低分解能イントラ・モード予測を生成することにより、高分解能で前記ビデオ系列における特定の高分解能ピクチャのブロックを符号化する符号化器を備える装置。
16. 請求項１５記載の装置であって、前記符号化器は前記高分解能で前記ブロックをダウンサンプリングして、ダウンサンプリングされたブロックを取得し、前記ダウンサンプリングされたブロックに基づいて前記低分解能イントラ予測を生成し、前記低分解能イントラ予測、及び、前記低分解能イントラ予測と、前記ダウンサンプリングされたブロックとの間の残差を使用して低分解能で前記ブロックを再構成し、前記再構成ブロックを前記高分解能にアップサンプリングする装置。
17. 請求項１６記載の装置であって、前記符号化器は、前記ブロック内の予測サンプル位置によってダウンサンプリングするために前記ブロックに対応する少なくとも１つの元の高分解能サンプルを選択する装置。
18. 請求項１７記載の装置であって、前記符号化器は、前記少なくとも１つの元の高分解能サンプルの平均化及びフィルタリングのうちの少なくとも１つにより、前記ダウンサンプリングを行う装置。
19. 請求項１５記載の装置であって、前記符号化器は、修正イントラ予測処理を使用して、前記ブロックの低分解能イントラ・モード予測を生成し、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つを使用して前記修正イントラ予測処理の使用を示す装置。
20. ビデオ系列をスケーラブル計算量ビデオ符号化する方法であって、
    削減分解能更新モードにおいてブロックの低分解能イントラ・モード予測を生成することにより、高分解能で前記ビデオ系列における特定の高分解能ピクチャのブロックを符号化する工程を含む方法。
21. 請求項２０記載の方法であって、前記符号化する工程は前記高分解能で前記ブロックをダウンサンプリングして、ダウンサンプリングされたブロックを取得し、前記ダウンサンプリングされたブロックに基づいて低分解能イントラ予測を生成し、前記低分解能イントラ予測、及び、前記低分解能イントラ予測と、ダウンサンプリングされたブロックとの間の残差を使用して低分解能で前記ブロックを再構成し、前記再構成ブロックを前記高分解能にアップサンプリングする方法。
22. 請求項２１記載の方法であって、前記符号化する工程は、前記ブロック内の予測サンプル位置によってダウンサンプリングするために前記ブロックに対応する少なくとも１つの元の高分解能サンプルを選択する方法。
23. 請求項２２記載の方法であって、前記符号する工程は、少なくとも１つの元の高分解能サンプルの平均化及びフィルタリングのうちの少なくとも１つにより、前記ダウンサンプリングを行う方法。
24. 請求項２１記載の方法であって、前記符号化する工程は、修正イントラ予測処理を使用して、前記ブロックの前記低分解能イントラ・モード予測を生成し、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つを使用して前記修正イントラ予測処理の使用を示す方法。
25. ビデオ・ビットストリームをスケーラブル復号化する装置であって、
    修正イントラ予測処理を行って、低分解能で削減分解能更新ブロックを再構成し、前記再構成削減分解能更新ブロックを高分解能にアップサンプリングすることにより、高分解能で前記ビデオ・ビットストリーム内の特定のピクチャにおける削減分解能更新ブロックを復号化する復号化器を備える装置。
26. 請求項２７記載の装置であって、前記復号化器は、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つに基づいて前記削減分解能更新ブロックの前記修正イントラ予測処理の使用を判定する装置。
27. ビデオ・ビットストリームをスケーラブル計算量ビデオ復号化する方法であって、
    修正イントラ予測処理を行って、低分解能で削減分解能更新ブロックを再構成し、前記再構成削減分解能更新ブロックを高分解能にアップサンプリングすることにより、高分解能でビデオ・ビットストリーム内の特定のピクチャにおける削減分解能更新ブロックを復号化する工程を含む方法。
28. 請求項２７記載の方法であって、前記復号化する工程は、ブロックレベルの構文、スライスレベルの構文、及び高水準構文のうちの少なくとも１つに基づいて前記ブロックの前記修正イントラ予測処理の使用を判定する方法。
29. ビデオ符号化のためのビデオ信号構造であって、
    削減分解能更新モードにおいてブロックの低分解能イントラ・モード予測を生成することにより、高分解能で符号化された、ビデオ系列内の特定の高分解能ピクチャにおけるブロックを含むビデオ信号構造。
30. ビデオ信号データを符号化させた記憶媒体であって、
    削減分解能更新モードにおいてブロックの低分解能イントラ・モード予測を生成することにより、高分解能で符号化された、ビデオ系列内の特定の高分解能ピクチャにおけるブロックを含む記憶媒体。
31. ビデオ系列をスケーラブル符号化する装置であって、
    特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、前記ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を備え、
    前記符号化器は、前記ビデオ系列から符号化された低分解能ビットストリーム及び前記ビデオ系列から符号化されたダウンサンプリングされたソース系列のそれぞれの品質に基づいて前記修正イントラ予測処理の符号化決定を行う装置。
32. 請求項３１記載の装置であって、前記符号化器は、ラグランジュ最適化手法を使用して前記それぞれの品質を評価する装置。
33. 請求項３１記載の装置であって、前記符号化器は、前記修正イントラ予測処理の前記符号化決定を行うために使用される前記低分解能ビットストリーム及び前記ダウンサンプリングされたソース系列の重み付けされた歪み値を求める装置。
34. ビデオ系列をスケーラブル計算量ビデオ符号化する方法であって、
    特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、前記ビデオ系列内の特定のピクチャにおけるブロックを符号化する工程を含み、
    前記符号化する工程は、前記ビデオ系列から符号化された低分解能ビットストリーム及び前記ビデオ系列から符号化されたダウンサンプリングされたソース系列のそれぞれの品質に基づいて前記修正イントラ予測処理の符号化決定を行う方法。
35. 請求項３４記載の方法であって、前記符号化する工程は、ラグランジュ最適化手法を使用して前記それぞれの品質を評価する方法。
36. 請求項３４記載の方法であって、前記符号化する工程は、前記修正イントラ予測処理の前記符号化決定を行うために使用される前記低分解能ビットストリーム及び前記ダウンサンプリングされたソース系列の重み付けされた歪み値を求める方法。
37. ビデオ系列をスケーラブル符号化する装置であって、
    特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、前記ビデオ系列内の特定のピクチャにおけるブロックを符号化する符号化器を備え、
    前記符号化器は、前記ビデオ系列から符号化された高分解能ビットストリーム及び低分解能ビットストリームそれぞれの品質に基づいて前記修正イントラ予測処理の符号化決定を行う装置。
38. 請求項３７記載の装置であって、前記符号化器は、ラグランジュ最適化手法を使用して前記それぞれの品質を評価する装置。
39. 請求項３７記載の装置であって、前記符号化器は、前記修正イントラ予測処理の前記符号化決定を行うために使用される前記高分解能ビットストリーム及び前記低分解能ビットストリームの重み付けされた歪み値を求める装置。
40. ビデオ系列のスケーラブル計算量ビデオ符号化のための方法であって、
    特定のピクチャが最終的に復号化される際に削減分解能更新モードにおいてアーチファクトを削減する修正イントラ予測処理を使用して、ブロックのイントラ・モード予測を生成することにより、前記ビデオ系列内の特定のピクチャにおけるブロックを符号化する工程を含み、
    前記符号化する工程は、前記ビデオ系列から符号化された高分解能ビットストリーム及び低分解能ビットストリームそれぞれの品質に基づいて前記修正イントラ予測処理の符号化決定を行う方法。
41. 請求項４０記載の方法であって、前記符号化する工程は、ラグランジュ最適化手法を使用して前記それぞれの品質を評価する方法。
42. 請求項４０記載の方法であって、前記符号化する工程は、前記修正イントラ予測処理の前記符号化決定を行うために使用される前記高分解能ビットストリーム及び前記低分解能ビットストリームの重み付けされた歪み値を求める方法。

Images