JP6573879B2 - ビデオ情報のスケーラブルコーディングのためのデバイスおよび方法 - Google Patents

Description

[0001]本開示は、ビデオコーディングおよび圧縮の分野に関し、詳細には、スケーラブルビデオコーディング（ＳＶＣ：scalable video coding）、マルチビュービデオコーディング（ＭＶＣ：multiview video coding）、または３Ｄビデオコーディング（３ＤＶ）に関する。

[0002]デジタルビデオ機能は、デジタルテレビジョン、デジタルダイレクトブロードキャストシステム、ワイヤレスブロードキャストシステム、携帯情報端末（ＰＤＡ）、ラップトップまたはデスクトップコンピュータ、デジタルカメラ、デジタル記録デバイス、デジタルメディアプレーヤ、ビデオゲームデバイス、ビデオゲームコンソール、セルラー電話または衛星無線電話、ビデオ遠隔会議デバイスなどを含む、広範囲にわたるデバイスに組み込まれ得る。デジタルビデオデバイスは、ＭＰＥＧ−２、ＭＰＥＧ−４、ＩＴＵ−Ｔ Ｈ．２６３、ＩＴＵ−Ｔ Ｈ．２６４／ＭＰＥＧ−４，Ｐａｒｔ１０，アドバンストビデオコーディング（ＡＶＣ：Advanced Video Coding）、現在開発中の高効率ビデオコーディング（ＨＥＶＣ：High Efficiency Video Coding）規格によって定義された規格、およびそのような規格の拡張に記載されているビデオ圧縮技法など、ビデオ圧縮技法を実装する。ビデオデバイスは、そのようなビデオコーディング技法を実装することによって、デジタルビデオ情報をより効率的に送信、受信、符号化、復号、および／または記憶し得る。

[0003]ビデオ圧縮技法は、ビデオシーケンスに固有の冗長性を低減または除去するために空間的（イントラピクチャ（intra-picture））予測および／または時間的（ピクチャ間（inter-picture））予測を実行する。ブロックベースのビデオコーディングの場合、ビデオスライス（たとえば、ビデオフレーム、ビデオフレームの一部分など）が、ツリーブロック、コーディングユニット（ＣＵ：coding unit）および／またはコーディングノードと呼ばれることもあるビデオブロックに区分され得る。ピクチャのイントラコード化（Ｉ）スライス中のビデオブロックは、同じピクチャ中の隣接するブロック内の参照サンプルに対する空間的予測を使用して符号化される。ピクチャのインターコード化（ＰまたはＢ）スライス中のビデオブロックは、同じピクチャ中の隣接するブロック中の参照サンプルに対する空間的予測、または他の参照ピクチャ中の参照サンプルに対する時間的予測を使用し得る。ピクチャはフレームと呼ばれることがあり、参照ピクチャは参照フレームと呼ばれることがある。

[0004]空間的予測または時間的予測は、コーディングされるべきブロックに関する予測ブロックを生じる。残差データは、コーディングされるべき元のブロックと予測ブロックとの間のピクセル差分を表す。インターコード化ブロックは、予測ブロックを形成する参照サンプルのブロックを指す動きベクトルと、コード化ブロックと予測ブロックとの間の差分を示す残差データとに従って符号化される。イントラコード化ブロックは、イントラコーディングモードと残差データとに従って符号化される。さらなる圧縮のために、残差データは、ピクセル領域から変換領域に変換されて、残差変換係数が得られ得、その残差変換係数は、次いで量子化され得る。量子化変換係数は、最初は２次元アレイで構成され、変換係数の１次元ベクトルを生成するために走査され得、なお一層の圧縮を達成するために、エントロピー符号化が適用され得る。

[0005]スケーラブルビデオコーディング（ＳＶＣ）は、参照レイヤ（ＲＬ：reference layer）と呼ばれることがあるベースレイヤ（ＢＬ：base layer）と、１つまたは複数のスケーラブルエンハンスメントレイヤ（ＥＬ：enhancement layer）とが使用されるビデオコーディングを指す。ＳＶＣでは、ベースレイヤは、ベースレベルの品質でビデオデータを搬送することができる。１つまたは複数のエンハンスメントレイヤは、たとえば、より高い空間的レベル、時間的レベル、および／または信号対雑音（ＳＮＲ：signal-to-noise）レベルをサポートするために追加のビデオデータを搬送することができる。エンハンスメントレイヤは、前に符号化されたレイヤに対して定義され得る。たとえば、最下位レイヤはＢＬとして働き得、最上位レイヤはＥＬとして働き得る。中間レイヤは、ＥＬまたはＲＬのいずれか、あるいはその両方として働き得る。たとえば、中間にあるレイヤは、ベースレイヤまたは介在エンハンスメントレイヤ（intervening enhancement layer）など、それの下のレイヤのためのＥＬであり、同時に、それの上の１つまたは複数のエンハンスメントレイヤのためのＲＬとして働き得る。同様に、ＨＥＶＣ規格のマルチビューまたは３Ｄ拡張では、複数のビューがあり得、１つのビューの情報は、別のビューの情報（たとえば、動き推定、動きベクトル予測および／または他の冗長）をコーディング（たとえば、符号化または復号）するために利用され得る。

[0006]ＳＶＣでは、エンハンスメントレイヤ中の現在ブロックは、参照レイヤから導出された情報を使用してコーディング（たとえば、符号化または復号）され得る。たとえば、エンハンスメントレイヤ中の現在ブロックは、参照レイヤ中のコロケートされたブロックの情報（たとえば、テクスチャ情報または動き情報）を使用してコーディングされ得る（本開示で使用する「コロケートされる（co-located）」という用語は、現在ブロック、たとえば、現在コーディングされているブロックと同じ画像に対応する、別のレイヤ中のブロックを指すことがある）。いくつかの実装形態では、特定の参照レイヤがエンハンスメントレイヤをコーディングするために使用されるかどうかが、フラグまたはシンタックス要素としてシグナリングされ得る。フラグまたはシンタックス要素が、特定の参照レイヤがエンハンスメントレイヤをコーディングするために使用されることを示す場合、特定の参照ピクチャ中のどんな種類の情報がエンハンスメントレイヤをコーディングするために使用されるか、すなわち、テクスチャ（ピクセル）情報、動き情報、またはその両方、を示すために、別のフラグまたはシンタックス要素がさらにシグナリングされ得る。

[0007]場合によっては、参照レイヤ中の情報の一部分が、エンハンスメントレイヤをコーディングする際に使用するために利用可能でないことがある。たとえば、いくつかの実装形態では、参照レイヤが非ＨＥＶＣコーデックを使用してコーディングされる場合、参照レイヤの動き情報は、エンハンスメントレイヤをコーディングするためにＨＥＶＣコーデックにとって利用可能でないことがある。そのような場合、エンハンスメントレイヤは、依然として参照レイヤのテクスチャ情報を使用してコーディングされ得るが、参照レイヤの動き情報は、エンハンスメントレイヤをコーディングするために使用され得ない。

[0008]参照レイヤをコーディングするために使用されるコーデックのタイプへの、参照レイヤ中のいくつかのタイプの情報の利用可能性のこの依存を活用することによって、どんなタイプの情報が参照レイヤから導出されるかを決定するために実行される処理の一部が省略され得（たとえば、情報が利用不可能である場合、その情報がエンハンスメントレイヤをコーディングするために使用されるかどうかをチェックする必要がない）、したがって、コーディング効率が改善され、および／または計算の複雑さが低減されることになる。

[0009]本開示のシステム、方法およびデバイスは、それぞれいくつかの発明的態様を有し、それらのうちの単一の態様が、本明細書で開示する望ましい属性を単独で担当するとは限らない。

[0010]一態様では、ビデオ情報をコーディングするように構成された装置は、メモリと、メモリと通信しているプロセッサとを含む。メモリは、参照レイヤとエンハンスメントレイヤとに関連付けられたビデオ情報を記憶するように構成され、参照レイヤは参照レイヤ（ＲＬ）コーデックに関連付けられ、エンハンスメントレイヤはエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられる。プロセッサは、参照レイヤに関連付けられたＲＬコーデックが特定のタイプのコーデックであるかどうかを決定することと、ＲＬコーデックが特定のタイプのコーデックであると決定したことに応答して、ビデオビットストリーム中で、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することと、を行うように構成される。プロセッサはビデオ情報を符号化または復号し得る。

[0011]一態様では、ビデオ情報をコーディング（たとえば、符号化または復号）する方法は、参照レイヤに関連付けられた参照レイヤ（ＲＬ）コーデックが特定のタイプのコーデックであるかどうかを決定することと、ＲＬコーデックが特定のタイプのコーデックであると決定したことに応答して、ビデオビットストリーム中で、参照レイヤの動き情報がエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられたエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することと、を備える。

[0012]一態様では、非一時的コンピュータ可読媒体は、実行されたとき、装置にプロセスを実行させるコードを備える。プロセスは、参照レイヤとエンハンスメントレイヤとに関連付けられたビデオ情報を記憶することと、参照レイヤが参照レイヤ（ＲＬ）コーデックに関連付けられ、エンハンスメントレイヤがエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられ、参照レイヤに関連付けられたＲＬコーデックが特定のタイプのコーデックであるかどうかを決定することと、ＲＬコーデックが特定のタイプのコーデックであると決定したことに応答して、ビデオビットストリーム中で、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することと、を含む。

[0013]一態様では、ビデオ情報をコーディングするように構成されたビデオコーディングデバイスは、参照レイヤとエンハンスメントレイヤとに関連付けられたビデオ情報を記憶するための手段と、参照レイヤが参照レイヤ（ＲＬ）コーデックに関連付けられ、エンハンスメントレイヤがエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられ、参照レイヤに関連付けられたＲＬコーデックが特定のタイプのコーデックであるかどうかを決定するための手段と、ＲＬコーデックが特定のタイプのコーデックであると決定したことに応答して、ビデオビットストリーム中で、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理するための手段と、を備える。

[0014]図１Ａは、本開示で説明する態様による技法を利用し得る例示的なビデオ符号化および復号システムを示すブロック図である。 [0015]図１Ｂは、本開示で説明する態様による技法を実行し得る別の例示的なビデオ符号化および復号システムを示すブロック図である。 [0016]図２Ａは、本開示で説明する態様による技法を実装し得るビデオエンコーダの一例を示すブロック図である。 [0017]図２Ｂは、本開示で説明する態様による技法を実装し得るビデオエンコーダの一例を示すブロック図である。 [0018]図３Ａは、本開示で説明する態様による技法を実装し得るビデオデコーダの一例を示すブロック図である。 [0019]図３Ｂは、本開示で説明する態様による技法を実装し得るビデオデコーダの一例を示すブロック図である。 [0020]図４は、本開示の一実施形態による、ビデオ情報をコーディングする方法を示すフローチャートを示す。 [0021]図５は、本開示の別の実施形態による、ビデオ情報をコーディングする方法を示すフローチャートを示す。

[0022]本明細書で説明するいくつかの実施形態は、ＨＥＶＣ（高効率ビデオコーディング）など、アドバンストビデオコーデックのコンテキストにおけるスケーラブルビデオコーディングのためのレイヤ間予測に関する。より詳細には、本開示は、ＨＥＶＣのスケーラブルビデオコーディング（ＳＶＣ）拡張におけるレイヤ間予測の性能の改善のためのシステムおよび方法に関する。

[0023]以下の説明では、いくつかの実施形態に関係するＨ．２６４／ＡＶＣ技法について説明し、ＨＥＶＣ規格および関係する技法についても説明する。いくつかの実施形態について、ＨＥＶＣおよび／またはＨ．２６４規格のコンテキストにおいて本明細書で説明するが、本明細書で開示するシステムおよび方法が任意の好適なビデオコーディング規格に適用可能であり得ることを、当業者は諒解されよう。たとえば、本明細書で開示する実施形態は、以下の規格、すなわち、ＩＴＵ−Ｔ Ｈ．２６１、ＩＳＯ／ＩＥＣ ＭＰＥＧ−１ Ｖｉｓｕａｌ、ＩＴＵ−Ｔ Ｈ．２６２またはＩＳＯ／ＩＥＣ ＭＰＥＧ−２ Ｖｉｓｕａｌ、ＩＴＵ−Ｔ Ｈ．２６３、ＩＳＯ／ＩＥＣ ＭＰＥＧ−４ Ｖｉｓｕａｌ、およびそれのスケーラブルビデオコーディング（ＳＶＣ）拡張とマルチビュービデオコーディング（ＭＶＣ）拡張とを含む、（ＩＳＯ／ＩＥＣ ＭＰＥＧ−４ ＡＶＣとしても知られる）ＩＴＵ−Ｔ Ｈ．２６４のうちの１つまたは複数に適用可能であり得る。

[0024]ＨＥＶＣは、概して、多くの点で、前のビデオコーディング規格のフレームワークに従う。ＨＥＶＣにおける予測のユニットは、いくつかの前のビデオコーディング規格におけるユニット（たとえば、マクロブロック）とは異なる。事実上、マクロブロックの概念は、いくつかの前のビデオコーディング規格において理解されているように、ＨＥＶＣ中に存在しない。マクロブロックは、考えられる利益の中でも、高いフレキシビリティを与え得る、４分木方式に基づく階層構造と置き換えられ得る。たとえば、ＨＥＶＣ方式内で、３つのタイプのブロック、コーディングユニット（ＣＵ）、予測ユニット（ＰＵ：Prediction Unit）、および変換ユニット（ＴＵ：Transform Unit）が定義される。ＣＵは領域スプリッティング（region splitting）の基本ユニットを指し得る。ＣＵはマクロブロックの概念に類似すると見なされ得るが、それは、最大サイズを制限せず、コンテンツ適応性を改善するために４つの等しいサイズのＣＵへの再帰的スプリッティングを可能にし得る。ＰＵはインター／イントラ予測の基本ユニットと見なされ得、それは、不規則な画像パターンを効果的にコーディングするために、単一のＰＵ中に複数の任意の形状区分を含んでいることがある。ＴＵは変換の基本ユニットと見なされ得る。それは、ＰＵとは無関係に定義され得るが、それのサイズは、ＴＵが属するＣＵに制限され得る。３つの異なる概念へのブロック構造のこの分離は、各々がそれの役割に従って最適化されることを可能にし得、それによりコーディング効率が改善され得る。

[0025]単に説明の目的で、本明細書で開示するいくつかの実施形態は、ただ２つのレイヤ（たとえば、ベースレイヤなどの下位レイヤ（a lower layer）、およびエンハンスメントレイヤなどの上位レイヤ（a higher layer））を含む例を用いて説明する。そのような例は、複数のベースレイヤおよび／またはエンハンスメントレイヤを含む構成に適用可能であり得ることを理解されたい。さらに、説明を簡単にするために、以下の開示は、いくつかの実施形態に関して「フレーム」または「ブロック」という用語を含む。ただし、これらの用語は限定的なものではない。たとえば、以下で説明する技法は、ブロック（たとえば、ＣＵ、ＰＵ、ＴＵ、マクロブロックなど）、スライス、フレームなど、任意の好適なビデオユニットとともに使用され得る。

ビデオコーディング規格
[0026]ビデオ画像、ＴＶ画像、静止画像、あるいはビデオレコーダまたはコンピュータによって生成された画像など、デジタル画像は、水平ラインおよび垂直ラインで構成されたピクセルまたはサンプルからなり得る。単一の画像中のピクセルの数は一般に数万個である。各ピクセルは、一般に、ルミナンス情報とクロミナンス情報とを含んでいる。圧縮なしに、画像エンコーダから画像デコーダに搬送されるべき情報の量は、リアルタイム画像送信を不可能にするほど非常に大きい。送信されるべき情報の量を低減するために、ＪＰＥＧ、ＭＰＥＧおよびＨ．２６３規格など、いくつかの異なる圧縮方法が開発された。

[0027]ビデオコーディング規格は、ＩＴＵ−Ｔ Ｈ．２６１と、ＩＳＯ／ＩＥＣ ＭＰＥＧ−１ Ｖｉｓｕａｌと、ＩＴＵ−Ｔ Ｈ．２６２またはＩＳＯ／ＩＥＣ ＭＰＥＧ−２ Ｖｉｓｕａｌと、ＩＴＵ−Ｔ Ｈ．２６３と、ＩＳＯ／ＩＥＣ ＭＰＥＧ−４ Ｖｉｓｕａｌと、それのスケーラブルビデオコーディング（ＳＶＣ）およびマルチビュービデオコーディング（ＭＶＣ）拡張を含む（ＩＳＯ／ＩＥＣ ＭＰＥＧ−４ ＡＶＣとしても知られる）ＩＴＵ−Ｔ Ｈ．２６４とを含む。

[0028]さらに、新しいビデオコーディング規格、すなわち、高効率ビデオコーディング（ＨＥＶＣ）が、ＩＴＵ−Ｔビデオコーディングエキスパートグループ（ＶＣＥＧ：Video Coding Experts Group）とＩＳＯ／ＩＥＣモーションピクチャエキスパートグループ（ＭＰＥＧ：Motion Picture Experts Group）とのジョイントコラボレーションチームオンビデオコーディング（ＪＣＴ−ＶＣ：Joint Collaboration Team on Video Coding）によって開発されている。ＨＥＶＣドラフト１０についての完全引用は、文書ＪＣＴＶＣ−Ｌ１００３、Ｂｒｏｓｓら、「High Efficiency Video Coding (HEVC) Text Specification Draft 10」、ＩＴＵ−Ｔ ＳＧ１６ ＷＰ３およびＩＳＯ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１のジョイントコラボレーティブチームオンビデオコーディング（ＪＣＴ−ＶＣ：Joint Collaborative Team on Video Coding）、第１２回会合：ジュネーブ、スイス、２０１３年１月１４日〜２０１３年１月２３日である。ＨＥＶＣのマルチビュー拡張、すなわち、ＭＶ−ＨＥＶＣ、およびＳＨＶＣと称されるＨＥＶＣのスケーラブル拡張も、それぞれＪＣＴ−３Ｖ（ＩＴＵ−Ｔ／ＩＳＯ／ＩＥＣジョイントコラボレーティブチームオン３Ｄビデオコーディング拡張開発）およびＪＣＴ−ＶＣによって開発されている。

[0029]添付の図面を参照しながら新規のシステム、装置、および方法の様々な態様について以下でより十分に説明する。ただし、本開示は、多くの異なる形態で実施され得、本開示全体にわたって提示する任意の特定の構造または機能に限定されるものと解釈されるべきではない。むしろ、これらの態様は、本開示が周到で完全になり、本開示の範囲を当業者に十分に伝えるために与えるものである。本明細書の教示に基づいて、本開示の範囲は、本開示の他の態様とは無関係に実装されるにせよ、本開示の他の態様と組み合わせて実装されるにせよ、本明細書で開示する新規のシステム、装置、および方法のいかなる態様をもカバーするものであることを、当業者なら諒解されたい。たとえば、本明細書に記載される態様をいくつ使用しても、装置は実装され得、または方法は実施され得る。さらに、本開示の範囲は、本明細書に記載する本開示の様々な態様に加えてまたはそれらの態様以外に、他の構造、機能、または構造および機能を使用して実施されるそのような装置または方法をカバーするものとする。本明細書で開示するどの態様も請求項の１つまたは複数の要素によって実施され得ることを理解されたい。

[0030]本明細書では特定の態様について説明するが、これらの態様の多くの変形および置換は本開示の範囲内に入る。好適な態様のいくつかの利益および利点について説明するが、本開示の範囲は特定の利益、使用、または目的に限定されるものではない。むしろ、本開示の態様は、様々なワイヤレス技術、システム構成、ネットワーク、および伝送プロトコルに広く適用可能であるものとし、それらのいくつかを例として、図および好適な態様についての以下の説明において示す。発明を実施するための形態および図面は、本開示を限定するものではなく説明するものにすぎず、本開示の範囲は添付の特許請求の範囲およびそれの均等物によって定義される。

[0031]添付の図面は例を示している。添付の図面中の参照番号によって示される要素は、以下の説明における同様の参照番号によって示される要素に対応する。本開示では、序数語（たとえば、「第１の」、「第２の」、「第３の」など）で始まる名前を有する要素は、必ずしもそれらの要素が特定の順序を有することを暗示するとは限らない。むしろ、そのような序数語は、同じまたは同様のタイプの異なる要素を指すために使用されるにすぎない。

ビデオコーディングシステム
[0032]図１Ａは、本開示で説明する態様による技法を利用し得る例示的なビデオコーディングシステム１０を示すブロック図である。本明細書で使用し説明する「ビデオコーダ」という用語は、総称的にビデオエンコーダとビデオデコーダの両方を指す。本開示では、「ビデオコーディング」または「コーディング」という用語は、ビデオ符号化とビデオ復号とを総称的に指すことがある。

[0033]図１Ａに示されているように、ビデオコーディングシステム１０は、宛先モジュール１４によって後で復号されるべき符号化されたビデオデータを生成するソースモジュール１２を含む。図１Ａの例では、ソースモジュール１２と宛先モジュール１４とは別々のデバイス上にあり、詳細には、ソースモジュール１２はソースデバイスの一部であり、宛先モジュール１４は宛先デバイスの一部である。ただし、ソースモジュール１２および宛先モジュール１４は、図１Ｂの例に示されているように、同じデバイス上にあるかまたはそれの一部であり得ることに留意されたい。

[0034]もう一度図１Ａを参照すると、ソースモジュール１２および宛先モジュール１４は、デスクトップコンピュータ、ノートブック（たとえば、ラップトップ）コンピュータ、タブレットコンピュータ、セットトップボックス、いわゆる「スマート」フォンなどの電話ハンドセット、いわゆる「スマート」パッド、テレビジョン、カメラ、ディスプレイデバイス、デジタルメディアプレーヤ、ビデオゲームコンソール、ビデオストリーミングデバイスなどを含む、広範囲にわたるデバイスのいずれかを備え得る。場合によっては、ソースモジュール１２および宛先モジュール１４はワイヤレス通信のために装備され得る。

[0035]宛先モジュール１４は、リンク１６を介して、復号されるべき符号化されたビデオデータを受信し得る。リンク１６は、ソースモジュール１２から宛先モジュール１４に符号化されたビデオデータを移動することが可能な任意のタイプの媒体またはデバイスを備え得る。図１Ａの例では、リンク１６は、ソースモジュール１２が符号化されたビデオデータをリアルタイムで宛先モジュール１４に直接送信することを可能にするための通信媒体を備え得る。符号化されたビデオデータは、ワイヤレス通信プロトコルなどの通信規格に従って変調され、宛先モジュール１４に送信され得る。通信媒体は、無線周波数（ＲＦ）スペクトルあるいは１つまたは複数の物理伝送線路など、任意のワイヤレスまたはワイヤード通信媒体を備え得る。通信媒体は、ローカルエリアネットワーク、ワイドエリアネットワーク、またはインターネットなどのグローバルネットワークなど、パケットベースのネットワークの一部を形成し得る。通信媒体は、ルータ、スイッチ、基地局、またはソースモジュール１２から宛先モジュール１４への通信を可能にするために有用であり得る任意の他の機器を含み得る。

[0036]代替的に、符号化されたデータは出力インターフェース２２から随意のストレージデバイス３１に出力され得る。同様に、符号化されたデータは入力インターフェース２８によってストレージデバイス３１からアクセスされ得る。ストレージデバイス３１は、ハードドライブ、フラッシュメモリ、揮発性または不揮発性メモリ、あるいは符号化されたビデオデータを記憶するための任意の他の好適なデジタル記憶媒体など、様々な分散されたまたはローカルにアクセスされるデータ記憶媒体のいずれかを含み得る。さらなる一例では、ストレージデバイス３１は、ソースモジュール１２によって生成された符号化されたビデオを保持し得るファイルサーバまたは別の中間ストレージデバイスに対応し得る。宛先モジュール１４は、ストリーミングまたはダウンロードを介してストレージデバイス３１から記憶されたビデオデータにアクセスし得る。ファイルサーバは、符号化されたビデオデータを記憶し、その符号化されたビデオデータを宛先モジュール１４に送信することが可能な任意のタイプのサーバであり得る。例示的なファイルサーバとしては、（たとえば、ウェブサイトのための）ウェブサーバ、ＦＴＰサーバ、ネットワーク接続ストレージ（ＮＡＳ）デバイス、またはローカルディスクドライブを含む。宛先モジュール１４は、インターネット接続を含む任意の標準データ接続を通して符号化されたビデオデータにアクセスし得る。これは、ファイルサーバ上に記憶された符号化されたビデオデータにアクセスするのに好適であるワイヤレスチャネル（たとえば、Ｗｉ−Ｆｉ（登録商標）接続）、ワイヤード接続（たとえば、ＤＳＬ、ケーブルモデムなど）、またはその両方の組合せを含み得る。ストレージデバイス３１からの符号化されたビデオデータの送信は、ストリーミング送信、ダウンロード送信、またはその両方の組合せであり得る。

[0037]本開示の技法はワイヤレス適用例または設定に限定されない。本技法は、オーバージエアテレビジョン放送、ケーブルテレビジョン送信、衛星テレビジョン送信、たとえばインターネットを介したストリーミングビデオ送信（たとえば、動的適応ストリーミングオーバーＨＴＴＰ（ＤＡＳＨ：dynamic adaptive streaming over HTTP）など）、データ記憶媒体に記憶するためのデジタルビデオの符号化、データ記憶媒体に記憶されたデジタルビデオの復号、または他の適用例など、様々なマルチメディア適用例のいずれかをサポートするビデオコーディングに適用され得る。いくつかの例では、ビデオコーディングシステム１０は、ビデオストリーミング、ビデオ再生、ビデオブロードキャスティング、および／またはビデオテレフォニーなどの適用例をサポートするために、一方向または二方向ビデオ送信をサポートするように構成され得る。

[0038]図１Ａの例では、ソースモジュール１２は、ビデオソース１８と、ビデオエンコーダ２０と、出力インターフェース２２とを含む。場合によっては、出力インターフェース２２は、変調器／復調器（モデム）および／または送信機を含み得る。ソースモジュール１２において、ビデオソース１８は、ビデオキャプチャデバイス、たとえばビデオカメラ、以前にキャプチャされたビデオを含んでいるビデオアーカイブ、ビデオコンテンツプロバイダからビデオを受信するためのビデオフィードインターフェース、および／またはソースビデオとしてコンピュータグラフィックスデータを生成するためのコンピュータグラフィックスシステムなどのソース、あるいはそのようなソースの組合せを含み得る。一例として、ビデオソース１８がビデオカメラである場合、ソースモジュール１２および宛先モジュール１４は、図１Ｂの例に示されているように、いわゆるカメラフォンまたはビデオフォンを形成し得る。ただし、本開示で説明する技法は、概してビデオコーディングに適用可能であり得、ワイヤレスおよび／またはワイヤード適用例に適用され得る。

[0039]キャプチャされたビデオ、以前にキャプチャされたビデオ、またはコンピュータ生成されたビデオは、ビデオエンコーダ２０によって符号化され得る。符号化されたビデオデータは、ソースモジュール１２の出力インターフェース２２を介して宛先モジュール１４に直接送信され得る。符号化されたビデオデータはまた（または代替的に）、復号および／または再生のための宛先モジュール１４または他のデバイスによる後のアクセスのためにストレージデバイス３１上に記憶され得る。

[0040]図１Ａの例では、宛先モジュール１４は、入力インターフェース２８と、ビデオデコーダ３０と、ディスプレイデバイス３２とを含む。場合によっては、入力インターフェース２８は受信機および／またはモデムを含み得る。宛先モジュール１４の入力インターフェース２８は、リンク１６を介して符号化されたビデオデータを受信し得る。リンク１６を介して通信された、またはストレージデバイス３１上に提供された符号化されたビデオデータは、ビデオデータを復号する際に、ビデオデコーダ３０などのビデオデコーダが使用するための、ビデオエンコーダ２０によって生成された様々なシンタックス要素を含み得る。そのようなシンタックス要素は、通信媒体上で送信された、記憶媒体上に記憶された、またはファイルサーバ記憶された符号化されたビデオデータに含まれ得る。

[0041]ディスプレイデバイス３２は、宛先モジュール１４と一体化されるかまたはその外部にあり得る。いくつかの例では、宛先モジュール１４は、一体型ディスプレイデバイスを含み、また、外部のディスプレイデバイスとインターフェースするように構成され得る。他の例では、宛先モジュール１４はディスプレイデバイスであり得る。概して、ディスプレイデバイス３２は、復号されたビデオデータをユーザに対して表示し、液晶ディスプレイ（ＬＣＤ）、プラズマディスプレイ、有機発光ダイオード（ＯＬＥＤ）ディスプレイ、または別のタイプのディスプレイデバイスなど、様々なディスプレイデバイスのいずれかを備え得る。

[0042]関係する態様では、図１Ｂは例示的なビデオ符号化および復号システム１０’を示し、ここにおいて、ソースモジュール１２および宛先モジュール１４はデバイスまたはユーザデバイス１１上にあるかまたはそれの一部である。デバイス１１は、「スマート」フォンなどの電話ハンドセットであり得る。デバイス１１は、ソースモジュール１２および宛先モジュール１４と動作可能に通信している随意のコントローラ／プロセッサモジュール１３を含み得る。図１Ｂのシステム１０’は、ビデオエンコーダ２０と出力インターフェース２２との間のビデオ処理ユニット２１をさらに含み得る。いくつかの実装形態では、図１Ｂに示されているように、ビデオ処理ユニット２１は別個のユニットであるが、他の実装形態では、ビデオ処理ユニット２１は、ビデオエンコーダ２０および／またはプロセッサ／コントローラモジュール１３の一部分として実装され得る。システム１０’はまた、ビデオシーケンス中の関心があるオブジェクトを追跡することができる随意のトラッカ２９を含み得る。追跡されるべきオブジェクトまたは関心は、本開示の１つまたは複数の態様に関して説明する技法によってセグメント化され得る。関係する態様では、トラッキングは、単独でまたはトラッカ２９とともに、ディスプレイデバイス３２によって実行され得る。図１Ｂのシステム１０’およびそれの構成要素は、場合によっては図１Ａのシステム１０およびそれの構成要素と同様である。

[0043]ビデオエンコーダ２０およびビデオデコーダ３０は、現在開発中の高効率ビデオコーディング（ＨＥＶＣ）規格など、ビデオ圧縮規格に従って動作し得、ＨＥＶＣテストモデル（ＨＭ）に準拠し得る。代替的に、ビデオエンコーダ２０およびビデオデコーダ３０は、代替的にＭＰＥＧ−４，Ｐａｒｔ１０，アドバンストビデオコーディング（ＡＶＣ）と呼ばれるＩＴＵ−Ｔ Ｈ．２６４規格など、他のプロプライエタリ規格または業界規格、あるいはそのような規格の拡張に従って動作し得る。ただし、本開示の技法は、いかなる特定のコーディング規格にも限定されない。ビデオ圧縮規格の他の例としてはＭＰＥＧ−２およびＩＴＵ−Ｔ Ｈ．２６３がある。

[0044]図１Ａおよび図１Ｂの例には示されていないが、ビデオエンコーダ２０およびビデオデコーダ３０は、それぞれオーディオエンコーダおよびデコーダと統合され得、共通のデータストリームまたは別個のデータストリーム中のオーディオとビデオの両方の符号化を処理するために、適切なＭＵＸ−ＤＥＭＵＸユニット、または他のハードウェアおよびソフトウェアを含み得る。適用可能な場合、いくつかの例では、ＭＵＸ−ＤＥＭＵＸユニットは、ＩＴＵ Ｈ．２２３マルチプレクサプロトコル、またはユーザデータグラムプロトコル（ＵＤＰ）などの他のプロトコルに準拠し得る。

[0045]ビデオエンコーダ２０およびビデオデコーダ３０はそれぞれ、１つまたは複数のマイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、ディスクリート論理、ソフトウェア、ハードウェア、ファームウェアなど、様々な好適なエンコーダ回路のいずれか、またはそれらの任意の組合せとして実装され得る。本技法が部分的にソフトウェアで実装されるとき、デバイスは、ソフトウェアのための命令を好適な非一時的コンピュータ可読媒体に記憶し、本開示の技法を実行するために１つまたは複数のプロセッサを使用してハードウェアでその命令を実行し得る。ビデオエンコーダ２０およびビデオデコーダ３０の各々は１つまたは複数のエンコーダまたはデコーダ中に含まれ得、そのいずれかが、それぞれのデバイスにおいて複合エンコーダ／デコーダ（コーデック）の一部として統合され得る。

ビデオコーディングプロセス
[0046]上記で手短に述べたように、ビデオエンコーダ２０はビデオデータを符号化する。ビデオデータは１つまたは複数のピクチャを備え得る。ピクチャの各々は、ビデオの一部を形成する静止画像である。いくつかの事例では、ピクチャはビデオ「フレーム」と呼ばれることがある。ビデオエンコーダ２０がビデオデータを符号化するとき、ビデオエンコーダ２０はビットストリームを生成し得る。ビットストリームは、ビデオデータのコード化表現を形成するビットのシーケンスを含み得る。ビットストリームはコード化ピクチャと関連データとを含み得る。コード化ピクチャはピクチャのコード化表現である。

[0047]ビットストリームを生成するために、ビデオエンコーダ２０は、ビデオデータ中の各ピクチャに対して符号化演算を実行し得る。ビデオエンコーダ２０がピクチャに対して符号化演算を実行するとき、ビデオエンコーダ２０は、一連のコード化ピクチャと関連データとを生成し得る。関連データは、ビデオパラメータセット（ＶＰＳ：video parameter set）と、シーケンスパラメータセットと、ピクチャパラメータセットと、適応パラメータセットと、他のシンタックス構造とを含み得る。シーケンスパラメータセット（ＳＰＳ：sequence parameter set）は、ピクチャの０個以上のシーケンスに適用可能なパラメータを含んでいることがある。ピクチャパラメータセット（ＰＰＳ：picture parameter set）は、０個以上のピクチャに適用可能なパラメータを含み得る。適応パラメータセット（ＡＰＳ：adaptation parameter set）は、０個以上のピクチャに適用可能なパラメータを含み得る。ＡＰＳ中のパラメータは、ＰＰＳ中のパラメータよりも変化する可能性が高いパラメータであり得る。

[0048]コード化ピクチャを生成するために、ビデオエンコーダ２０は、ピクチャを等しいサイズのビデオブロックに区分し得る。ビデオブロックはサンプルの２次元アレイであり得る。ビデオブロックの各々はツリーブロックに関連付けられる。いくつかの事例では、ツリーブロックは、最大コーディングユニット（ＬＣＵ：largest coding unit）と呼ばれることがある。ＨＥＶＣのツリーブロックは、Ｈ．２６４／ＡＶＣなど、以前の規格のマクロブロックに広い意味で類似し得る。しかしながら、ツリーブロックは、必ずしも特定のサイズに限定されるとは限らず、１つまたは複数のコーディングユニット（ＣＵ）を含み得る。ビデオエンコーダ２０は、４分木区分（quadtree partitioning）を使用して、ツリーブロックのビデオブロックを、ＣＵに関連付けられたビデオブロックに区分し得、したがって「ツリーブロック」という名前がある。

[0049]いくつかの例では、ビデオエンコーダ２０はピクチャを複数のスライスに区分し得る。スライスの各々は整数個のＣＵを含み得る。いくつかの事例では、スライスは整数個のツリーブロックを備える。他の事例では、スライスの境界はツリーブロック内にあり得る。

[0050]ピクチャに対して符号化演算を実行することの一部として、ビデオエンコーダ２０は、ピクチャの各スライスに対して符号化演算を実行し得る。ビデオエンコーダ２０がスライスに対して符号化演算を実行するとき、ビデオエンコーダ２０は、スライスに関連付けられた符号化データを生成し得る。スライスに関連付けられた符号化データは「コード化スライス」と呼ばれることがある。

[0051]コード化スライスを生成するために、ビデオエンコーダ２０は、スライス中の各ツリーブロックに対して符号化演算を実行し得る。ビデオエンコーダ２０がツリーブロックに対して符号化演算を実行するとき、ビデオエンコーダ２０はコード化ツリーブロックを生成し得る。コード化ツリーブロックは、ツリーブロックの符号化バージョンを表すデータを備え得る。

[0052]ビデオエンコーダ２０がコード化スライスを生成するとき、ビデオエンコーダ２０は、ラスタ走査順序に従って、スライス中のツリーブロックに対して符号化演算を実行し得る（たとえば、そのツリーブロックを符号化し得る）。たとえば、ビデオエンコーダ２０は、スライス中のツリーブロックの一番上の行にわたって左から右に進み、次いでツリーブロックの次の下の行にわたって左から右に進み、以下同様に進む順序で、ビデオエンコーダ２０がスライス中のツリーブロックの各々を符号化するまで、スライスのツリーブロックを符号化し得る。

[0053]ラスタ走査順序に従ってツリーブロックを符号化した結果として、所与のツリーブロックの上および左のツリーブロックは符号化されていることがあるが、所与のツリーブロックの下および右のツリーブロックはまだ符号化されていない。したがって、ビデオエンコーダ２０は、所与のツリーブロックを符号化するとき、所与のツリーブロックの上および左のツリーブロックを符号化することによって生成された情報にアクセスすることが可能であり得る。しかしながら、ビデオエンコーダ２０は、所与のツリーブロックを符号化するとき、所与のツリーブロックの下および右のツリーブロックを符号化することによって生成された情報にアクセスすることができないことがある。

[0054]コード化ツリーブロックを生成するために、ビデオエンコーダ２０は、ツリーブロックのビデオブロックに対して４分木区分を再帰的に実行して、ビデオブロックを徐々により小さいビデオブロックに分割し得る。より小さいビデオブロックの各々は異なるＣＵに関連付けられ得る。たとえば、ビデオエンコーダ２０は、ツリーブロックのビデオブロックを４つの等しいサイズのサブブロックに区分し、サブブロックのうちの１つまたは複数を、４つの等しいサイズのサブサブブロックに区分し得、以下同様である。区分されたＣＵは、それのビデオブロックが、他のＣＵに関連付けられたビデオブロックに区分された、ＣＵであり得る。区分されていないＣＵは、それのビデオブロックが、他のＣＵに関連付けられたビデオブロックに区分されていない、ＣＵであり得る。

[0055]ビットストリーム中の１つまたは複数のシンタックス要素は、ビデオエンコーダ２０がツリーブロックのビデオブロックを区分し得る最大の回数を示し得る。ＣＵのビデオブロックは形状が正方形であり得る。ＣＵのビデオブロックのサイズ（たとえば、ＣＵのサイズ）は、８×８ピクセルから、最大６４×６４以上のピクセルをもつツリーブロックのビデオブロックのサイズ（たとえば、ツリーブロックのサイズ）までに及び得る。

[0056]ビデオエンコーダ２０は、ｚ走査順序に従って、ツリーブロックの各ＣＵに対して符号化演算を実行し得る（たとえば、各ＣＵを符号化し得る）。言い換えれば、ビデオエンコーダ２０は、左上のＣＵと、右上のＣＵと、左下のＣＵと、次いで右下のＣＵとを、その順序で符号化し得る。ビデオエンコーダ２０が、区分されたＣＵに対して符号化演算を実行するとき、ビデオエンコーダ２０は、ｚ走査順序に従って、区分されたＣＵのビデオブロックのサブブロックに関連付けられたＣＵを符号化し得る。言い換えれば、ビデオエンコーダ２０は、左上のサブブロックに関連付けられたＣＵと、右上のサブブロックに関連付けられたＣＵと、左下のサブブロックに関連付けられたＣＵと、次いで右下のサブブロックに関連付けられたＣＵとを、その順序で符号化し得る。

[0057]ｚ走査順序に従ってツリーブロックのＣＵを符号化した結果として、所与のＣＵの上、左上、右上、左、および左下のＣＵは符号化されていることがある。所与のＣＵの下および右のＣＵはまだ符号化されていない。したがって、ビデオエンコーダ２０は、所与のＣＵを符号化するとき、所与のＣＵに隣接するいくつかのＣＵを符号化することによって生成された情報にアクセスすることが可能であり得る。しかしながら、ビデオエンコーダ２０は、所与のＣＵを符号化するとき、所与のＣＵに隣接する他のＣＵを符号化することによって生成された情報にアクセスすることができないことがある。

[0058]ビデオエンコーダ２０が、区分されていないＣＵを符号化するとき、ビデオエンコーダ２０は、ＣＵのために１つまたは複数の予測ユニット（ＰＵ）を生成し得る。ＣＵのＰＵの各々は、ＣＵのビデオブロック内の異なるビデオブロックに関連付けられ得る。ビデオエンコーダ２０は、ＣＵの各ＰＵのための予測ビデオブロックを生成し得る。ＰＵの予測ビデオブロックはサンプルのブロックであり得る。ビデオエンコーダ２０は、イントラ予測またはインター予測を使用して、ＰＵのための予測ビデオブロックを生成し得る。

[0059]ビデオエンコーダ２０がイントラ予測を使用してＰＵの予測ビデオブロックを生成するとき、ビデオエンコーダ２０は、ＰＵに関連付けられたピクチャの復号サンプルに基づいて、ＰＵの予測ビデオブロックを生成し得る。ビデオエンコーダ２０がイントラ予測を使用してＣＵのＰＵの予測ビデオブロックを生成する場合、ＣＵはイントラ予測されたＣＵである。ビデオエンコーダ２０がインター予測を使用してＰＵの予測ビデオブロックを生成するとき、ビデオエンコーダ２０は、ＰＵに関連付けられたピクチャ以外の１つまたは複数のピクチャの復号サンプルに基づいて、ＰＵの予測ビデオブロックを生成し得る。ビデオエンコーダ２０がインター予測を使用してＣＵのＰＵの予測ビデオブロックを生成する場合、ＣＵはインター予測されたＣＵである。

[0060]さらに、ビデオエンコーダ２０がインター予測を使用してＰＵのための予測ビデオブロックを生成するとき、ビデオエンコーダ２０はＰＵの動き情報を生成し得る。ＰＵの動き情報は、ＰＵの１つまたは複数の参照ブロックを示し得る。ＰＵの各参照ブロックは参照ピクチャ内のビデオブロックであり得る。参照ピクチャはＰＵに関連付けられたピクチャ以外のピクチャであり得る。いくつかの事例では、ＰＵの参照ブロックはＰＵの「参照サンプル」と呼ばれることもある。ビデオエンコーダ２０は、ＰＵの参照ブロックに基づいて、ＰＵのための予測ビデオブロックを生成し得る。

[0061]ビデオエンコーダ２０がＣＵの１つまたは複数のＰＵのための予測ビデオブロックを生成した後、ビデオエンコーダ２０は、ＣＵのＰＵのための予測ビデオブロックに基づいて、ＣＵの残差データを生成し得る。ＣＵの残差データは、ＣＵのＰＵのための予測ビデオブロック中のサンプルと、ＣＵの元のビデオブロック中のサンプルとの間の差を示し得る。

[0062]さらに、区分されていないＣＵに対して符号化演算を実行することの一部として、ビデオエンコーダ２０は、ＣＵの残差データに対して再帰的な４分木区分を実行して、ＣＵの残差データを、ＣＵの変換ユニット（ＴＵ）に関連付けられた残差データの１つまたは複数のブロック（たとえば、残差ビデオブロック）に区分し得る。ＣＵの各ＴＵは異なる残差ビデオブロックに関連付けられ得る。

[0063]ビデオエンコーダ２０は、ＴＵに関連付けられた変換係数ブロック（たとえば、変換係数のブロック）を生成するために、ＴＵに関連付けられた残差ビデオブロックに１つまたは複数の変換を適用し得る。概念的に、変換係数ブロックは変換係数の２次元（２Ｄ）行列であり得る。

[0064]変換係数ブロックを生成した後、ビデオエンコーダ２０は、変換係数ブロックに対して量子化プロセスを実行し得る。量子化は、概して、変換係数を表すために使用されるデータの量をできるだけ低減するために変換係数が量子化され、さらなる圧縮を実現する処理を指す。量子化プロセスは、変換係数の一部または全部に関連付けられたビット深度を低減し得る。たとえば、量子化中にｎビットの変換係数がｍビットの変換係数に切り捨てられることがあり、ここで、ｎはｍよりも大きい。

[0065]ビデオエンコーダ２０は、各ＣＵを量子化パラメータ（ＱＰ：quantization parameter）値に関連付け得る。ＣＵに関連付けられたＱＰ値は、ビデオエンコーダ２０が、ＣＵに関連付けられた変換係数ブロックをどのように量子化するかを決定し得る。ビデオエンコーダ２０は、ＣＵに関連付けられたＱＰ値を調整することによって、ＣＵに関連付けられた変換係数ブロックに適用される量子化の程度を調整し得る。

[0066]ビデオエンコーダ２０が変換係数ブロックを量子化した後、ビデオエンコーダ２０は、量子化された変換係数ブロック中で変換係数を表すシンタックス要素のセットを生成し得る。ビデオエンコーダ２０は、これらのシンタックス要素のうちのいくつかに、コンテキスト適応型バイナリ算術コーディング（ＣＡＢＡＣ：Context Adaptive Binary Arithmetic Coding）演算などのエントロピー符号化演算を適用し得る。コンテンツ適応型可変長コーディング（ＣＡＶＬＣ：content adaptive variable length coding）、確率間隔区分エントロピー（ＰＩＰＥ：probability interval partitioning entropy）コーディング、または他のバイナリ算術コーディングなど、他のエントロピーコーディング技法も使用され得る。

[0067]ビデオエンコーダ２０によって生成されるビットストリームは、一連のネットワークアブストラクションレイヤ（ＮＡＬ：Network Abstraction Layer）ユニットを含み得る。ＮＡＬユニットの各々は、ＮＡＬユニット中のデータのタイプの指示と、データを含んでいるバイトとを含んでいるシンタックス構造であり得る。たとえば、ＮＡＬユニットは、ビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセット、コード化スライス、補足エンハンスメント情報（ＳＥＩ：supplemental enhancement information）、アクセスユニット区切り文字、フィラーデータ、または別のタイプのデータを表すデータを含み得る。ＮＡＬユニット中のデータは様々なシンタックス構造を含み得る。

[0068]ビデオデコーダ３０は、ビデオエンコーダ２０によって生成されたビットストリームを受信し得る。ビットストリームは、ビデオエンコーダ２０によって符号化されたビデオデータのコード化表現を含み得る。ビデオデコーダ３０がビットストリームを受信するとき、ビデオデコーダ３０は、ビットストリームに対してパース演算を実行し得る。ビデオデコーダ３０がパース演算を実行するとき、ビデオデコーダ３０は、ビットストリームからシンタックス要素を抽出し得る。ビデオデコーダ３０は、ビットストリームから抽出されたシンタックス要素に基づいて、ビデオデータのピクチャを再構成し得る。シンタックス要素に基づいてビデオデータを再構成するためのプロセスは、一般に、シンタックス要素を生成するためにビデオエンコーダ２０によって実行されるプロセスとは逆であり得る。

[0069]ビデオデコーダ３０がＣＵに関連付けられたシンタックス要素を抽出した後、ビデオデコーダ３０は、シンタックス要素に基づいて、ＣＵのＰＵのための予測ビデオブロックを生成し得る。さらに、ビデオデコーダ３０は、ＣＵのＴＵに関連付けられた変換係数ブロックを逆量子化し得る。ビデオデコーダ３０は、変換係数ブロックに対して逆変換を実行して、ＣＵのＴＵに関連付けられた残差ビデオブロックを再構成し得る。予測ビデオブロックを生成し、残差ビデオブロックを再構成した後、ビデオデコーダ３０は、予測ビデオブロックと残差ビデオブロックとに基づいて、ＣＵのビデオブロックを再構成し得る。このようにして、ビデオデコーダ３０は、ビットストリーム中のシンタックス要素に基づいて、ＣＵのビデオブロックを再構成し得る。

ビデオエンコーダ
[0070]図２Ａは、本開示で説明する態様による技法を実装し得るビデオエンコーダの一例を示すブロック図である。ビデオエンコーダ２０は、ＨＥＶＣの場合など、ビデオフレームの単一のレイヤを処理するように構成され得る。さらに、ビデオエンコーダ２０は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。一例として、予測処理ユニット１００は、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。別の実施形態では、ビデオエンコーダ２０は、本開示で説明する技法のいずれかまたはすべてを実行するように構成された随意のレイヤ間予測ユニット１２８を含む。他の実施形態では、レイヤ間予測は予測処理ユニット１００（たとえば、インター予測ユニット１２１および／またはイントラ予測ユニット１２６）によって実行され得、その場合、レイヤ間予測ユニット１２８は省略され得る。ただし、本開示の態様はそのように限定されない。いくつかの例では、本開示で説明する技法は、ビデオエンコーダ２０の様々な構成要素間で共有され得る。いくつかの例では、追加または代替として、プロセッサ（図示せず）が、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。

[0071]説明の目的で、本開示では、ＨＥＶＣコーディングのコンテキストにおいてビデオエンコーダ２０について説明する。しかしながら、本開示の技法は、他のコーディング規格または方法にも適用可能であり得る。図２Ａに示された例はシングルレイヤコーデックのためのものである。しかしながら、図２Ｂに関してさらに説明するように、ビデオエンコーダ２０の一部または全部はマルチレイヤコーデックの処理のために複製され得る。

[0072]ビデオエンコーダ２０は、ビデオスライス内のビデオブロックのイントラコーディングおよびインターコーディングを実行し得る。イントラコーディングは、所与のビデオフレームまたはピクチャ内のビデオの空間的冗長性を低減または除去するために空間的予測に依拠する。インターコーディングは、ビデオシーケンスの隣接するフレームまたはピクチャ内のビデオにおける時間的冗長性を低減または除去するために時間的予測に依拠する。イントラモード（Ｉモード）は、いくつかの空間ベースのコーディングモードのいずれかを指し得る。単方向予測（Ｐモード）または双方向予測（Ｂモード）などのインターモードは、いくつかの時間ベースのコーディングモードのいずれかを指し得る。

[0073]図２Ａの例では、ビデオエンコーダ２０は複数の機能構成要素を含む。ビデオエンコーダ２０の機能構成要素は、予測処理ユニット１００と、残差生成ユニット１０２と、変換処理ユニット１０４と、量子化ユニット１０６と、逆量子化ユニット１０８と、逆変換ユニット１１０と、再構成ユニット１１２と、フィルタユニット１１３と、復号ピクチャバッファ１１４と、エントロピー符号化ユニット１１６とを含む。予測処理ユニット１００は、インター予測ユニット１２１と、動き推定ユニット１２２と、動き補償ユニット１２４と、イントラ予測ユニット１２６と、レイヤ間予測ユニット１２８とを含む。他の例では、ビデオエンコーダ２０は、より多数の、より少数の、または異なる機能構成要素を含み得る。さらに、動き推定ユニット１２２と動き補償ユニット１２４とは、高度に統合され得るが、図２Ａの例では、説明の目的で別々に表されている。

[0074]ビデオエンコーダ２０はビデオデータを受信し得る。ビデオエンコーダ２０は、様々なソースからビデオデータを受信し得る。たとえば、ビデオエンコーダ２０は、（たとえば、図１Ａまたは図１Ｂに示された）ビデオソース１８、または別のソースからビデオデータを受信し得る。ビデオデータは一連のピクチャを表し得る。ビデオデータを符号化するために、ビデオエンコーダ２０は、ピクチャの各々に対して符号化演算を実行し得る。ピクチャに対して符号化演算を実行することの一部として、ビデオエンコーダ２０は、ピクチャの各スライスに対して符号化演算を実行し得る。スライスに対して符号化演算を実行することの一部として、ビデオエンコーダ２０は、スライス中のツリーブロックに対して符号化演算を実行し得る。

[0075]ツリーブロックに対して符号化演算を実行することの一部として、予測処理ユニット１００は、ツリーブロックのビデオブロックに対して４分木区分を実行して、ビデオブロックを徐々により小さいビデオブロックに分割し得る。より小さいビデオブロックの各々は、異なるＣＵに関連付けられ得る。たとえば、予測処理ユニット１００は、ツリーブロックのビデオブロックを４つの等しいサイズのサブブロックに区分し、サブブロックの１つまたは複数を、４つの等しいサイズのサブサブブロックに区分し得、以下同様である。

[0076]ＣＵに関連付けられたビデオブロックのサイズは、８×８サンプルから、最大６４×６４以上のサンプルをもつツリーブロックのサイズまでに及び得る。本開示では、「Ｎ×Ｎ（NxN）」および「Ｎ×Ｎ（N by N）」は、垂直寸法および水平寸法に関するビデオブロックのサンプル寸法、たとえば、１６×１６（16x16）サンプルまたは１６×１６（16 by 16）サンプルを指すために互換的に使用され得る。概して、１６×１６ビデオブロックは、垂直方向に１６個のサンプルを有し（ｙ＝１６）、水平方向に１６個のサンプルを有する（ｘ＝１６）。同様に、Ｎ×Ｎブロックは、概して、垂直方向にＮ個のサンプルを有し、水平方向にＮ個のサンプルを有し、ここで、Ｎは非負整数値を表す。

[0077]さらに、ツリーブロックに対して符号化演算を実行することの一部として、予測処理ユニット１００は、ツリーブロック用の階層的な４分木データ構造を生成し得る。たとえば、ツリーブロックは、４分木データ構造のルートノードに対応し得る。予測処理ユニット１００が、ツリーブロックのビデオブロックを４つのサブブロックに区分する場合、ルートノードは、４分木データ構造中に４つの子ノードを有する。子ノードの各々は、サブブロックのうちの１つに関連付けられたＣＵに対応する。予測処理ユニット１００が、サブブロックのうちの１つを４つのサブサブブロックに区分する場合、サブブロックに関連付けられたＣＵに対応するノードは、サブサブブロックのうちの１つに関連付けられたＣＵに各々が対応する、４つの子ノードを有し得る。

[0078]４分木データ構造の各ノードは、対応するツリーブロックまたはＣＵのシンタックスデータ（たとえば、シンタックス要素）を含み得る。たとえば、４分木の中のノードは、そのノードに対応するＣＵのビデオブロックが４つのサブブロックに区分される（たとえば、スプリットされる）かどうかを示すスプリットフラグを含み得る。ＣＵのためのシンタックス要素は、再帰的に定義され得、ＣＵのビデオブロックがサブブロックにスプリットされるかどうかに依存し得る。それのビデオブロックが区分されていないＣＵは、４分木データ構造におけるリーフノードに対応し得る。コード化ツリーブロックは、対応するツリーブロック用の４分木データ構造に基づくデータを含み得る。

[0079]ビデオエンコーダ２０は、ツリーブロックの区分されていない各ＣＵに対して符号化演算を実行し得る。ビデオエンコーダ２０が、区分されていないＣＵに対して符号化演算を実行するとき、ビデオエンコーダ２０は、区分されていないＣＵの符号化表現を表すデータを生成する。

[0080]ＣＵに対して符号化演算を実行することの一部として、予測処理ユニット１００は、ＣＵの１つまたは複数のＰＵの中で、ＣＵのビデオブロックを区分し得る。ビデオエンコーダ２０およびビデオデコーダ３０は、様々なＰＵサイズをサポートし得る。特定のＣＵのサイズが２Ｎ×２Ｎであると仮定すると、ビデオエンコーダ２０およびビデオデコーダ３０は、２Ｎ×２ＮまたはＮ×ＮのＰＵサイズと、２Ｎ×２Ｎ、２Ｎ×Ｎ、Ｎ×２Ｎ、Ｎ×Ｎ、２Ｎ×ｎＵ、ｎＬ×２Ｎ、ｎＲ×２Ｎ、または同様の対称ＰＵサイズでのインター予測とをサポートし得る。ビデオエンコーダ２０およびビデオデコーダ３０は、２Ｎ×ｎＵ、２Ｎ×ｎＤ、ｎＬ×２Ｎ、およびｎＲ×２ＮのＰＵサイズに対する非対称区分をもサポートし得る。いくつかの例では、予測処理ユニット１００は、ＣＵのビデオブロックの辺に直角に接触しない境界に沿って、ＣＵのＰＵの間でＣＵのビデオブロックを区分するように、幾何学的な区分を実行し得る。

[0081]インター予測ユニット１２１はＣＵの各ＰＵに対してインター予測を実行し得る。インター予測は時間的圧縮を実現し得る。ＰＵに対してインター予測を実行するために、動き推定ユニット１２２はＰＵの動き情報を生成し得る。動き補償ユニット１２４は、動き情報と、ＣＵに関連付けられたピクチャ以外のピクチャ（たとえば、参照ピクチャ）の復号サンプルと基づくＰＵのための予測ビデオブロックを生成し得る。本開示では、動き補償ユニット１２４によって生成された予測ビデオブロックは、インター予測ビデオブロックと呼ばれることがある。

[0082]スライスは、Ｉスライス、Ｐスライス、またはＢスライスであり得る。動き推定ユニット１２２および動き補償ユニット１２４は、ＰＵがＩスライス中にあるか、Ｐスライス中にあるか、Ｂスライス中にあるかに応じて、ＣＵのＰＵに対して異なる演算を実行し得る。Ｉスライス中では、すべてのＰＵがイントラ予測される。したがって、ＰＵがＩスライス中にある場合、動き推定ユニット１２２および動き補償ユニット１２４は、ＰＵに対してインター予測を実行しない。

[0083]ＰＵがＰスライス中にある場合、ＰＵを含んでいるピクチャは、「リスト０」と呼ばれる参照ピクチャのリストに関連付けられる。リスト０中の参照ピクチャの各々は、他のピクチャのインター予測に使用され得るサンプルを含んでいる。動き推定ユニット１２２が、Ｐスライス中のＰＵに関して動き推定演算を実行するとき、動き推定ユニット１２２は、ＰＵのための参照ブロックについて、リスト０中の参照ピクチャを探索し得る。ＰＵの参照ブロックは、ＰＵのビデオブロック中のサンプルに最も密接に対応するサンプルのセット、たとえば、サンプルのブロックであり得る。動き推定ユニット１２２は、様々なメトリクスを使用して、参照ピクチャ中のサンプルのセットがどの程度密接にＰＵのビデオブロック中のサンプルに対応するかを決定し得る。たとえば、動き推定ユニット１２２は、絶対差分和（ＳＡＤ：sum of absolute difference）、２乗差分和（ＳＳＤ：sum of square difference）、または他の差分メトリックによって、参照ピクチャ中のサンプルのセットがどの程度密接にＰＵのビデオブロック中のサンプルに対応するかを決定し得る。

[0084]Ｐスライス中のＰＵの参照ブロックを識別した後、動き推定ユニット１２２は、参照ブロックを含んでいる、リスト０中の参照ピクチャを示す参照インデックスと、ＰＵと参照ブロックとの間の空間的変位を示す動きベクトルとを生成し得る。様々な例において、動き推定ユニット１２２は動きベクトルを異なる精度に生成し得る。たとえば、動き推定ユニット１２２は、１／４サンプル精度、１／８サンプル精度、または他の分数のサンプル精度で動きベクトルを生成し得る。分数のサンプル精度の場合、参照ブロック値は、参照ピクチャ中の整数位置のサンプル値から補間され得る。動き推定ユニット１２２は、ＰＵの動き情報として、参照インデックスと動きベクトルとを出力し得る。動き補償ユニット１２４は、ＰＵの動き情報によって識別された参照ブロックに基づいて、ＰＵの予測ビデオブロックを生成し得る。

[0085]ＰＵがＢスライス中にある場合、ＰＵを含んでいるピクチャは、「リスト０」および「リスト１」と呼ばれる参照ピクチャの２つのリストに関連付けられ得る。いくつかの例では、Ｂスライスを含んでいるピクチャは、リスト０とリスト１の組合せである、リストの組合せに関連付けられ得る。

[0086]さらに、ＰＵがＢスライス中にある場合、動き推定ユニット１２２は、ＰＵについての単方向予測または双方向予測を実行し得る。動き推定ユニット１２２が、ＰＵについての単方向予測を実行するとき、動き推定ユニット１２２は、ＰＵのための参照ブロックについて、リスト０またはリスト１の参照ピクチャを探索し得る。動き推定ユニット１２２は、次いで、参照ブロックを含んでいる、リスト０またはリスト１中の参照ピクチャを示す参照インデックスと、ＰＵと参照ブロックとの間の空間的変位を示す動きベクトルとを生成し得る。動き推定ユニット１２２は、ＰＵの動き情報として、参照インデックスと、予測方向インジケータと、動きベクトルとを出力し得る。予測方向インジケータは、参照インデックスが、リスト０中の参照ピクチャを示すか、リスト１中の参照ピクチャを示すかを示し得る。動き補償ユニット１２４は、ＰＵの動き情報によって示された参照ブロックに基づいて、ＰＵの予測ビデオブロックを生成し得る。

[0087]動き推定ユニット１２２が、ＰＵについての双方向予測を実行するとき、動き推定ユニット１２２は、ＰＵのための参照ブロックについて、リスト０中の参照ピクチャを探索し得、また、ＰＵのための別の参照ブロックについて、リスト１中の参照ピクチャを探索し得る。動き推定ユニット１２２は、次いで、参照ブロックを含んでいる、リスト０およびリスト１中の参照ピクチャを示す参照インデックスと、参照ブロックとＰＵの間の空間的変位を示す動きベクトルとを生成し得る。動き推定ユニット１２２は、ＰＵの動き情報としてＰＵの参照インデックスと動きベクトルとを出力し得る。動き補償ユニット１２４は、ＰＵの動き情報によって示された参照ブロックに基づいて、ＰＵの予測ビデオブロックを生成し得る。

[0088]いくつかの例では、動き推定ユニット１２２は、ＰＵの動き情報のフルセットをエントロピー符号化ユニット１１６に出力しない。そうではなく、動き推定ユニット１２２は、別のＰＵの動き情報を参照して、ＰＵの動き情報をシグナリングし得る。たとえば、動き推定ユニット１２２は、ＰＵの動き情報が、隣接するＰＵの動き情報と十分に類似していると決定し得る。この例では、動き推定ユニット１２２は、ＰＵに関連付けられたシンタックス構造において、ＰＵが隣接するＰＵと同じ動き情報を有することをビデオデコーダ３０に示す値を示し得る。別の例では、動き推定ユニット１２２は、ＰＵに関連付けられたシンタックス構造において、隣接するＰＵと動きベクトル差分（ＭＶＤ：motion vector difference）とを識別し得る。動きベクトル差分は、ＰＵの動きベクトルと、示される隣接するＰＵの動きベクトルとの間の差分を示す。ビデオデコーダ３０は、示される隣接するＰＵの動きベクトルと、動きベクトル差分とを使用して、ＰＵの動きベクトルを決定し得る。第２のＰＵの動き情報をシグナリングするときに第１のＰＵの動き情報を参照することによって、ビデオエンコーダ２０は、より少数のビットを使用して、第２のＰＵの動き情報をシグナリングすることが可能であり得る。

[0089]図４および図５に関して以下でさらに説明するように、予測処理ユニット１００は、図４および図５に示されている方法を実行することによってＰＵ（または任意の他の参照レイヤブロックおよび／またはエンハンスメントレイヤブロックまたはビデオユニット）をコーディング（たとえば、符号化または復号）するように構成され得る。たとえば、（たとえば、動き推定ユニット１２２および／または動き補償ユニット１２４を介した）インター予測ユニット１２１、イントラ予測ユニット１２６、またはレイヤ間予測ユニット１２８は、一緒にまたは別々に、図４および図５に示されている方法を実行するように構成され得る。

[0090]ＣＵに対して符号化演算を実行することの一部として、イントラ予測ユニット１２６は、ＣＵのＰＵに対してイントラ予測を実行し得る。イントラ予測は空間的圧縮を実現し得る。イントラ予測ユニット１２６がＰＵに対してイントラ予測を実行するとき、イントラ予測ユニット１２６は、同じピクチャ中の他のＰＵの復号サンプルに基づいて、ＰＵの予測データを生成し得る。ＰＵの予測データは、予測ビデオブロックと様々なシンタックス要素とを含み得る。イントラ予測ユニット１２６は、Ｉスライス、Ｐスライス、およびＢスライス中のＰＵに対してイントラ予測を実行し得る。

[0091]ＰＵに対してイントラ予測を実行するために、イントラ予測ユニット１２６は、複数のイントラ予測モードを使用して、ＰＵの予測データの複数のセットを生成し得る。イントラ予測ユニット１２６が、イントラ予測モードを使用してＰＵに関する予測データのセットを生成するとき、イントラ予測ユニット１２６は、イントラ予測モードに関連付けられた方向および／または勾配で、隣接するＰＵのビデオブロックからＰＵのビデオブロックにわたって、サンプルを延ばし得る。隣接するＰＵは、ＰＵ、ＣＵ、およびツリーブロックについて左から右、上から下の符号化順序を仮定すると、ＰＵの上、右上、左上、または左にあり得る。イントラ予測ユニット１２６は、ＰＵのサイズに応じて、様々な数のイントラ予測モード、たとえば、３３個の方向性イントラ予測モードを使用し得る。

[0092]予測処理ユニット１００は、ＰＵについての、動き補償ユニット１２４によって生成された予測データ、またはＰＵについての、イントラ予測ユニット１２６によって生成された予測データの中から、ＰＵの予測データを選択し得る。いくつかの例では、予測処理ユニット１００は、予測データのセットのレート／ひずみメトリックに基づいて、ＰＵのための予測データを選択する。

[0093]予測処理ユニット１００が、イントラ予測ユニット１２６によって生成された予測データを選択する場合、予測処理ユニット１００は、ＰＵの予測データを生成するために使用されたイントラ予測モード、たとえば、選択されたイントラ予測モードをシグナリングし得る。予測処理ユニット１００は、選択されたイントラ予測モードを様々な方法でシグナリングし得る。たとえば、選択されたイントラ予測モードは、隣接するＰＵのイントラ予測モードと同じであることがあり得る。言い換えれば、隣接するＰＵのイントラ予測モードは現在のＰＵに対して最確モード（most probable mode）であり得る。したがって、予測処理ユニット１００は、選択されたイントラ予測モードが隣接するＰＵのイントラ予測モードと同じであることを示すための、シンタックス要素を生成し得る。

[0094]上記で説明したように、ビデオエンコーダ２０はレイヤ間予測ユニット１２８を含み得る。レイヤ間予測ユニット１２８は、ＳＶＣにおいて利用可能である１つまたは複数の異なるレイヤ（たとえば、ベースレイヤまたは参照レイヤ）を使用して現在ブロック（たとえば、ＥＬ中の現在ブロック）を予測するように構成される。そのような予測はレイヤ間予測と呼ばれることがある。レイヤ間予測ユニット１２８は、レイヤ間冗長性を低減するために予測方法を利用し、それによって、コーディング効率を改善し、計算リソース要件を低減する。レイヤ間予測のいくつかの例としては、レイヤ間イントラ予測、レイヤ間動き予測、およびレイヤ間残差予測がある。レイヤ間イントラ予測は、ベースレイヤ中のコロケートブロックの再構成を使用してエンハンスメントレイヤ中の現在ブロックを予測する。レイヤ間動き予測は、ベースレイヤの動き情報を使用してエンハンスメントレイヤ中の動作を予測する。レイヤ間残差予測は、ベースレイヤの残差を使用してエンハンスメントレイヤの残差を予測する。レイヤ間予測方式の各々について、より詳細に以下で説明する。

[0095]予測処理ユニット１００がＣＵのＰＵの予測データを選択した後、残差生成ユニット１０２は、ＣＵのビデオブロックからＣＵのＰＵの予測ビデオブロックを差し引くこと（たとえば、マイナス符号によって示される）によって、ＣＵの残差データを生成し得る。ＣＵの残差データは、ＣＵのビデオブロック中のサンプルの異なるサンプル成分に対応する、２Ｄ残差ビデオブロックを含み得る。たとえば、残差データは、ＣＵのＰＵの予測ビデオブロック中のサンプルのルミナンス成分と、ＣＵの元のビデオブロック中のサンプルのルミナンス成分との間の差分に対応する、残差ビデオブロックを含み得る。さらに、ＣＵの残差データは、ＣＵのＰＵの予測ビデオブロック中のサンプルのクロミナンス成分と、ＣＵの元のビデオブロック中のサンプルのクロミナンス成分との間の差分に対応する、残差ビデオブロックを含み得る。

[0096]予測処理ユニット１００は、４分木区分を実行して、ＣＵの残差ビデオブロックをサブブロックに区分し得る。各分割されていない残差ビデオブロックは、ＣＵの異なるＴＵに関連付けられ得る。ＣＵのＴＵに関連付けられた残差ビデオブロックのサイズおよび位置は、ＣＵのＰＵに関連付けられたビデオブロックのサイズおよび位置に基づくことも基づかないこともある。「残差４分木」（ＲＱＴ：residual quad tree）として知られる４分木構造は、残差ビデオブロックの各々に関連付けられたノードを含み得る。ＣＵのＴＵはＲＱＴのリーフノードに対応し得る。

[0097]変換処理ユニット１０４は、ＴＵに関連付けられた残差ビデオブロックに１つまたは複数の変換を適用することによって、ＣＵの各ＴＵのための１つまたは複数の変換係数ブロックを生成し得る。変換係数ブロックの各々は、変換係数の２Ｄ行列であり得る。変換処理ユニット１０４は、ＴＵに関連付けられた残差ビデオブロックに様々な変換を適用し得る。たとえば、変換処理ユニット１０４は、離散コサイン変換（ＤＣＴ）、方向性変換、または概念的に同様の変換を、ＴＵに関連付けられた残差ビデオブロックに適用し得る。

[0098]変換処理ユニット１０４が、ＴＵに関連付けられた変換係数ブロックを生成した後、量子化ユニット１０６は、変換係数ブロック中の変換係数を量子化し得る。量子化ユニット１０６は、ＣＵに関連付けられたＱＰ値に基づいて、ＣＵのＴＵに関連付けられた変換係数ブロックを量子化し得る。

[0099]ビデオエンコーダ２０は、様々な方法でＱＰ値をＣＵに関連付け得る。たとえば、ビデオエンコーダ２０は、ＣＵに関連付けられたツリーブロックに対してレートひずみ分析を実行し得る。レートひずみ分析では、ビデオエンコーダ２０は、ツリーブロックに対して符号化演算を複数回実行することによって、ツリーブロックの複数のコード化表現を生成し得る。ビデオエンコーダ２０がツリーブロックの異なる符号化表現を生成するとき、ビデオエンコーダ２０は、異なるＱＰ値をＣＵに関連付け得る。ビデオエンコーダ２０は、最小のビットレートおよびひずみメトリックを有するツリーブロックのコード化表現で所与のＱＰ値がＣＵに関連付けられるとき、所与のＱＰ値がＣＵに関連付けられることをシグナリングし得る。

[00100]逆量子化ユニット１０８および逆変換ユニット１１０は、それぞれ、変換係数ブロックに逆量子化と逆変換とを適用して、変換係数ブロックから残差ビデオブロックを再構成し得る。再構成ユニット１１２は、再構成された残差ビデオブロックを、予測処理ユニット１００によって生成された１つまたは複数の予測ビデオブロックからの対応するサンプルに追加して、ＴＵに関連付けられた再構成されたビデオブロックを生成し得る。このようにＣＵの各ＴＵのためのビデオブロックを再構成することによって、ビデオエンコーダ２０は、ＣＵのビデオブロックを再構成し得る。

[00101]再構成ユニット１１２がＣＵのビデオブロックを再構成した後、フィルタユニット１１３は、ＣＵに関連付けられたビデオブロックにおけるブロッキングアーティファクトを低減するためにデブロッキング演算を実行し得る。１つまたは複数のデブロッキング演算を実行した後、フィルタユニット１１３は、復号ピクチャバッファ１１４にＣＵの再構成されたビデオブロックを記憶し得る。動き推定ユニット１２２および動き補償ユニット１２４は、再構成されたビデオブロックを含んでいる参照ピクチャを使用して、後続ピクチャのＰＵに対してインター予測を実行し得る。さらに、イントラ予測ユニット１２６は、復号ピクチャバッファ１１４中の再構成されたビデオブロックを使用して、ＣＵと同じピクチャの中の他のＰＵに対してイントラ予測を実行し得る。

[00102]エントロピー符号化ユニット１１６は、ビデオエンコーダ２０の他の機能構成要素からデータを受信し得る。たとえば、エントロピー符号化ユニット１１６は、量子化ユニット１０６から変換係数ブロックを受信し得、予測処理ユニット１００からシンタックス要素を受信し得る。エントロピー符号化ユニット１１６がデータを受信するとき、エントロピー符号化ユニット１１６は、１つまたは複数のエントロピー符号化演算を実行して、エントロピー符号化されたデータを生成し得る。たとえば、ビデオエンコーダ２０は、コンテキスト適応型可変長コーディング（ＣＡＶＬＣ）演算、ＣＡＢＡＣ演算、変数間（Ｖ２Ｖ：variable-to-variable）レングスコーディング演算、シンタックスベースコンテキスト適応型バイナリ算術コーディング（ＳＢＡＣ：syntax-based context-adaptive binary arithmetic coding）演算、確率間隔区分エントロピー（ＰＩＰＥ）コーディング演算、または別のタイプのエントロピー符号化演算をデータに対して実行し得る。エントロピー符号化ユニット１１６は、エントロピー符号化されたデータを含むビットストリームを出力し得る。

[00103]データに対してエントロピー符号化演算を実行することの一部として、エントロピー符号化ユニット１１６は、コンテキストモデルを選択し得る。エントロピー符号化ユニット１１６がＣＡＢＡＣ演算を実行している場合、コンテキストモデルは、特定の値を有する特定のビンの確率の推定値を示し得る。ＣＡＢＡＣのコンテキストでは、「ビン」という用語は、シンタックス要素の２値化されたバージョンのビットを指すために使用される。

マルチレイヤビデオエンコーダ
[00104]図２Ｂは、本開示で説明する態様による技法を実装し得るマルチレイヤビデオエンコーダ２３の一例を示すブロック図である。ビデオエンコーダ２３は、ＳＨＶＣおよびマルチビューコーディングの場合など、マルチレイヤビデオフレームを処理するように構成され得る。さらに、ビデオエンコーダ２３は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。

[00105]ビデオエンコーダ２３はビデオエンコーダ２０Ａとビデオエンコーダ２０Ｂとを含み、それらの各々はビデオエンコーダ２０として構成され得、ビデオエンコーダ２０に関して上記で説明した機能を実行し得る。さらに、参照番号の再利用によって示されるように、ビデオエンコーダ２０Ａおよび２０Ｂは、ビデオエンコーダ２０としてシステムとサブシステムとのうちの少なくともいくつかを含み得る。ビデオエンコーダ２３は、２つのビデオエンコーダ２０Ａおよび２０Ｂを含むものとして示されているが、ビデオエンコーダ２３は、そのようなものとして限定されず、任意の数のビデオエンコーダ２０レイヤを含み得る。いくつかの実施形態では、ビデオエンコーダ２３はアクセスユニット中の各ピクチャまたはフレームについてビデオエンコーダ２０を含み得る。たとえば、５つのピクチャを含むアクセスユニットは、５つのエンコーダレイヤを含むビデオエンコーダによって処理または符号化され得る。いくつかの実施形態では、ビデオエンコーダ２３は、アクセスユニット中のフレームよりも多くのエンコーダレイヤを含み得る。いくつかのそのような場合では、ビデオエンコーダレイヤのいくつかは、いくつかのアクセスユニットを処理するときに非アクティブであり得る。

[00106]ビデオエンコーダ２０Ａおよび２０Ｂに加えて、ビデオエンコーダ２３はリサンプリングユニット９０を含み得る。リサンプリングユニット９０は、場合によっては、たとえば、エンハンスメントレイヤを作成するために、受信されたビデオフレームのベースレイヤをアップサンプリングし得る。リサンプリングユニット９０は、フレームの受信されたベースレイヤに関連付けられた特定の情報をアップサンプリングするが、他の情報をアップサンプリングしないことがある。たとえば、リサンプリングユニット９０は、ベースレイヤの空間的サイズまたはピクセルの数をアップサンプリングし得るが、スライスの数またはピクチャ順序カウントは一定のままであり得る。場合によっては、リサンプリングユニット９０は、受信されたビデオを処理しないことがあるか、および／または随意であり得る。たとえば、場合によっては、予測処理ユニット１００がアップサンプリングを実行し得る。いくつかの実施形態では、リサンプリングユニット９０は、レイヤをアップサンプリングすることと、スライス境界ルールおよび／またはラスタ走査ルールのセットに準拠するために１つまたは複数のスライスを再編成、再定義、変更、または調整することとを行うように構成される。アクセスユニット中のベースレイヤまたは下位レイヤをアップサンプリングするものとして主に説明したが、場合によっては、リサンプリングユニット９０はレイヤをダウンサンプリングし得る。たとえば、ビデオのストリーミング中に帯域幅が減少した場合、フレームは、アップサンプリングされるのではなく、ダウンサンプリングされ得る。

[00107]リサンプリングユニット９０は、下位レイヤエンコーダ（たとえば、ビデオエンコーダ２０Ａ）の復号ピクチャバッファ１１４からピクチャまたはフレーム（またはピクチャに関連付けられたピクチャ情報）を受信し、ピクチャ（または受信されたピクチャ情報）をアップサンプリングするように構成され得る。このアップサンプリングされたピクチャは、次いで、下位レイヤエンコーダと同じアクセスユニット中のピクチャを符号化するように構成された上位レイヤエンコーダ（たとえば、ビデオエンコーダ２０Ｂ）の予測処理ユニット１００に与えられ得る。場合によっては、上位レイヤエンコーダは、下位レイヤエンコーダから削除された１つのレイヤである。他の場合には、図２Ｂのレイヤ０ビデオエンコーダとレイヤ１エンコーダとの間に１つまたは複数の上位レイヤエンコーダがあり得る。

[00108]場合によっては、リサンプリングユニット９０は省略またはバイパスされ得る。そのような場合、ビデオエンコーダ２０Ａの復号ピクチャバッファ１１４からのピクチャは、直接、または少なくともリサンプリングユニット９０に与えられることなしに、ビデオエンコーダ２０Ｂの予測処理ユニット１００に与えられ得る。たとえば、ビデオエンコーダ２０Ｂに与えられたビデオデータと、ビデオエンコーダ２０Ａの復号ピクチャバッファ１１４からの参照ピクチャとが同じサイズまたは解像度である場合、参照ピクチャは、リサンプリングなしにビデオエンコーダ２０Ｂに与えられ得る。

[00109]いくつかの実施形態では、ビデオエンコーダ２３は、ビデオエンコーダ２０Ａにビデオデータを提供する前に、ダウンサンプリングユニット９４を使用して下位レイヤエンコーダに提供されるべきビデオデータをダウンサンプリングする。代替的に、ダウンサンプリングユニット９４は、ビデオデータをアップサンプリングまたはダウンサンプリングすることが可能なリサンプリングユニット９０であり得る。また他の実施形態では、ダウンサンプリングユニット９４は省略され得る。

[00110]図２Ｂに示されているように、ビデオエンコーダ２３は、マルチプレクサ９８、またはｍｕｘをさらに含み得る。ｍｕｘ９８は、ビデオエンコーダ２３から合成ビットストリームを出力することができる。合成ビットストリームは、ビデオエンコーダ２０Ａおよび２０Ｂの各々からビットストリームを取ることと、所与の時間において出力されるビットストリームを交替することとによって、作成され得る。場合によっては、２つの（または、３つ以上のビデオエンコーダレイヤの場合には、より多くの）ビットストリームからのビットが一度に１ビットずつ交替され得るが、多くの場合、ビットストリームは別様に合成され得る。たとえば、出力ビットストリームは、選択されたビットストリームを一度に１ブロックずつ交替することによって作成され得る。別の例では、出力ビットストリームは、ビデオエンコーダ２０Ａおよび２０Ｂの各々から非１：１比のブロック（a non-1:1 ratio of blocks）を出力することによって作成され得る。たとえば、ビデオエンコーダ２０Ａから出力された各ブロックについて、２つのブロックがビデオエンコーダ２０Ｂから出力され得る。いくつかの実施形態では、ｍｕｘ９８からの出力ストリームはプリプログラムされ得る。他の実施形態では、ｍｕｘ９８は、ソースモジュール１２を含むソースデバイス上のプロセッサからなど、ビデオエンコーダ２３の外部のシステムから受信された制御信号に基づいて、ビデオエンコーダ２０Ａ、２０Ｂからのビットストリームを合成し得る。制御信号は、ビデオソース１８からのビデオの解像度またはビットレートに基づいて、リンク１６の帯域幅に基づいて、ユーザに関連付けられたサブスクリプション（a subscription）（たとえば、有料サブスクリプション対無料サブスクリプション）に基づいて、またはビデオエンコーダ２３から望まれる解像度出力を決定するための任意の他のファクタに基づいて生成され得る。

ビデオデコーダ
[00111]図３Ａは、本開示で説明する態様による技法を実装し得るビデオデコーダの一例を示すブロック図である。ビデオデコーダ３０は、ＨＥＶＣの場合など、ビデオフレームの単一のレイヤを処理するように構成され得る。さらに、ビデオデコーダ３０は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。一例として、動き補償ユニット１６２および／またはイントラ予測ユニット１６４は、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。一実施形態では、ビデオデコーダ３０は、場合によっては、本開示で説明する技法のいずれかまたはすべてを実行するように構成されたレイヤ間予測ユニット１６６を含み得る。他の実施形態では、レイヤ間予測は予測処理ユニット１５２（たとえば、動き補償ユニット１６２および／またはイントラ予測ユニット１６４）によって実行され得、その場合、レイヤ間予測ユニット１６６は省略され得る。ただし、本開示の態様はそのように限定されない。いくつかの例では、本開示で説明する技法は、ビデオデコーダ３０の様々な構成要素間で共有され得る。いくつかの例では、追加または代替として、プロセッサ（図示せず）が、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。

[00112]説明の目的で、本開示では、ＨＥＶＣコーディングのコンテキストにおいてビデオデコーダ３０について説明する。しかしながら、本開示の技法は、他のコーディング規格または方法にも適用可能であり得る。図３Ａに示された例はシングルレイヤコーデックのためのものである。しかしながら、図３Ｂに関してさらに説明するように、ビデオデコーダ３０の一部または全部はマルチレイヤコーデックの処理のために複製され得る。

[00113]図３Ａの例では、ビデオデコーダ３０は複数の機能構成要素を含む。ビデオデコーダ３０の機能構成要素は、エントロピー復号ユニット１５０と、予測処理ユニット１５２と、逆量子化ユニット１５４と、逆変換ユニット１５６と、再構成ユニット１５８と、フィルタユニット１５９と、復号ピクチャバッファ１６０とを含む。予測処理ユニット１５２は、動き補償ユニット１６２と、イントラ予測ユニット１６４と、レイヤ間予測ユニット１６６とを含む。いくつかの例では、ビデオデコーダ３０は、図２Ａのビデオエンコーダ２０に関して説明された符号化経路とは全般に逆の復号経路を実行し得る。他の例では、ビデオデコーダ３０は、より多数の、より少数の、または異なる機能構成要素を含み得る。

[00114]ビデオデコーダ３０は、符号化ビデオデータを備えるビットストリームを受信し得る。ビットストリームは複数のシンタックス要素を含み得る。ビデオデコーダ３０がビットストリームを受信したとき、エントロピー復号ユニット１５０は、ビットストリームに対してパース演算を実行し得る。ビットストリームに対してパース演算を実行した結果として、エントロピー復号ユニット１５０は、ビットストリームからシンタックス要素を抽出し得る。パース演算を実行することの一部として、エントロピー復号ユニット１５０は、ビットストリーム中のエントロピー符号化されたシンタックス要素をエントロピー復号し得る。予測処理ユニット１５２、逆量子化ユニット１５４、逆変換ユニット１５６、再構成ユニット１５８、およびフィルタユニット１５９は、ビットストリームから抽出されたシンタックス要素に基づいて、復号ビデオデータを生成する再構成演算を実行し得る。

[00115]上記で説明したように、ビットストリームは、一連のＮＡＬユニットを備え得る。ビットストリームのＮＡＬユニットは、ビデオパラメータセット、シーケンスパラメータセットＮＡＬユニット、ピクチャパラメータセットＮＡＬユニット、ＳＥＩ ＮＡＬユニットなどを含み得る。ビットストリームに対してパース演算を実行することの一部として、エントロピー復号ユニット１５０は、シーケンスパラメータセットＮＡＬユニットからのシーケンスパラメータセット、ピクチャパラメータセットＮＡＬユニットからのピクチャパラメータセット、ＳＥＩ ＮＡＬユニットからのＳＥＩデータなどを抽出しエントロピー復号する、パース演算を実行し得る。

[00116]さらに、ビットストリームのＮＡＬユニットはコード化スライスＮＡＬユニットを含み得る。ビットストリームに対してパース演算を実行することの一部として、エントロピー復号ユニット１５０は、コード化スライスＮＡＬユニットからコード化スライスを抽出しエントロピー復号する、パース演算を実行し得る。コーディングされたスライスの各々は、スライスヘッダとスライスデータとを含み得る。スライスヘッダは、スライスに関するシンタックス要素を含んでいることがある。スライスヘッダ中のシンタックス要素は、スライスを含んでいるピクチャに関連付けられたピクチャパラメータセットを識別するシンタックス要素を含み得る。エントロピー復号ユニット１５０は、コード化されたスライスヘッダ中のシンタックス要素に対して、ＣＡＢＡＣ復号演算などのエントロピー復号演算を実行して、スライスヘッダを再構成し得る。

[00117]コード化スライスのＮＡＬユニットからスライスデータを抽出することの一部として、エントロピー復号ユニット１５０は、スライスデータ中のコード化ＣＵからシンタックス要素を抽出するパース演算を実行し得る。抽出されたシンタックス要素は、変換係数ブロックに関連付けられたシンタックス要素を含み得る。エントロピー復号ユニット１５０は、次いで、シンタックス要素のうちのいくつかに対してＣＡＢＡＣ復号演算を実行し得る。

[00118]エントロピー復号ユニット１５０が区分されていないＣＵに対してパース演算を実行した後、ビデオデコーダ３０は、区分されていないＣＵに対して再構成演算を実行し得る。区分されていないＣＵに対して再構成演算を実行するために、ビデオデコーダ３０はＣＵの各ＴＵに対して再構成演算を実行し得る。ＣＵの各ＴＵについて再構成演算を実行することによって、ビデオデコーダ３０は、ＣＵに関連付けられた残差ビデオブロックを再構成し得る。

[00119]ＴＵに対して再構成演算を実行することの一部として、逆量子化ユニット１５４は、ＴＵに関連付けられた変換係数ブロックを逆量子化（inverse quantize）、たとえば、逆量子化（de-quantize）し得る。逆量子化ユニット１５４は、ＨＥＶＣ用に提案された、またはＨ．２６４復号規格によって定義された逆量子化プロセスと同様の方式で、変換係数ブロックを逆量子化し得る。逆量子化ユニット１５４は、量子化の程度を決定し、同様に、逆量子化ユニット１５４が適用すべき逆量子化の程度を決定するために、変換係数ブロックのＣＵのためにビデオエンコーダ２０によって計算される量子化パラメータＱＰを使用し得る。

[00120]逆量子化ユニット１５４が変換係数ブロックを逆量子化した後、逆変換ユニット１５６は、変換係数ブロックに関連付けられたＴＵのための残差ビデオブロックを生成し得る。逆変換ユニット１５６は、ＴＵのための残差ビデオブロックを生成するために、変換係数ブロックに逆変換を適用し得る。たとえば、逆変換ユニット１５６は、変換係数ブロックに、逆ＤＣＴ、逆整数変換、逆カルーネンレーベ変換（ＫＬＴ：Karhunen-Loeve transform）、逆回転変換、逆方向変換、または別の逆変換を適用し得る。いくつかの例では、逆変換ユニット１５６は、ビデオエンコーダ２０からのシグナリングに基づいて、変換係数ブロックに適用すべき逆変換を決定し得る。そのような例では、逆変換ユニット１５６は、変換係数ブロックに関連付けられたツリーブロックの４分木のルートノードにおいてシグナリングされた変換に基づいて、逆変換を決定し得る。他の例では、逆変換ユニット１５６は、ブロックサイズ、コーディングモードなど、１つまたは複数のコーディング特性から逆変換を推論し得る。いくつかの例では、逆変換ユニット１５６はカスケード逆変換を適用し得る。

[00121]いくつかの例では、動き補償ユニット１６２は、補間フィルタに基づく補間を実行することによって、ＰＵの予測ビデオブロックを改良し得る。サブサンプル精度をもつ動き補償のために使用されるべき補間フィルタのための識別子が、シンタックス要素中に含まれ得る。動き補償ユニット１６２は、ＰＵの予測ビデオブロックの生成中にビデオエンコーダ２０によって使用された同じ補間フィルタを使用して、参照ブロックのサブ整数サンプルについての補間値を計算し得る。動き補償ユニット１６２は、受信されたシンタックス情報に従って、ビデオエンコーダ２０によって使用された補間フィルタを決定し、その補間フィルタを使用して予測ビデオブロックを生成し得る。

[00122]図４および図５に関して以下でさらに説明するように、予測処理ユニット１５２は、図４および図５に示されている方法を実行することによってＰＵ（または任意の他の参照レイヤブロックおよび／またはエンハンスメントレイヤブロックまたはビデオユニット）をコーディング（たとえば、符号化または復号）し得る。たとえば、動き補償ユニット１６２、イントラ予測ユニット１６４、またはレイヤ間予測ユニット１６６は、一緒にまたは別々に、図４および図５に示されている方法を実行するように構成され得る。

[00123]ＰＵが、イントラ予測を使用して符号化される場合、イントラ予測ユニット１６４は、ＰＵのための予測ビデオブロックを生成するためにイントラ予測を実行し得る。たとえば、イントラ予測ユニット１６４は、ビットストリーム中のシンタックス要素に基づいて、ＰＵのためのイントラ予測モードを決定し得る。ビットストリームは、ＰＵのイントラ予測モードを決定するためにイントラ予測ユニット１６４が使用し得るシンタックス要素を含み得る。

[00124]いくつかの事例では、シンタックス要素は、イントラ予測ユニット１６４が別のＰＵのイントラ予測モードを使用して現在のＰＵのイントラ予測モードを決定すべきであることを示し得る。たとえば、現在のＰＵのイントラ予測モードは隣接するＰＵのイントラ予測モードと同じであることがあり得る。言い換えれば、隣接するＰＵのイントラ予測モードは、現在のＰＵに対して最確モードであり得る。したがって、この例では、ビットストリームは、ＰＵのイントラ予測モードが隣接するＰＵのイントラ予測モードと同じであることを示す、小さいシンタックス要素を含み得る。イントラ予測ユニット１６４は、次いで、イントラ予測モードを使用して、空間的に隣接するＰＵのビデオブロックに基づいて、ＰＵに関する予測データ（たとえば、予測サンプル）を生成し得る。

[00125]上記で説明したように、ビデオデコーダ３０もレイヤ間予測ユニット１６６を含み得る。レイヤ間予測ユニット１６６は、ＳＶＣにおいて利用可能である１つまたは複数の異なるレイヤ（たとえば、ベースレイヤまたは参照レイヤ）を使用して現在ブロック（たとえば、ＥＬ中の現在ブロック）を予測するように構成される。そのような予測はレイヤ間予測と呼ばれることがある。レイヤ間予測ユニット１６６は、レイヤ間冗長性を低減するために予測方法を利用し、それによって、コーディング効率を改善し、計算リソース要件を低減する。レイヤ間予測のいくつかの例としては、レイヤ間イントラ予測、レイヤ間動き予測、およびレイヤ間残差予測がある。レイヤ間イントラ予測は、ベースレイヤ中のコロケートブロックの再構成を使用してエンハンスメントレイヤ中の現在ブロックを予測する。レイヤ間動き予測は、ベースレイヤの動き情報を使用してエンハンスメントレイヤ中の動作を予測する。レイヤ間残差予測は、ベースレイヤの残差を使用してエンハンスメントレイヤの残差を予測する。レイヤ間予測方式の各々について、より詳細に以下で説明する。

[00126]再構成ユニット１５８は、適用可能なとき、ＣＵのＴＵに関連付けられた残差ビデオブロックとＣＵのＰＵの予測ビデオブロックとを使用して、たとえば、イントラ予測データまたはインター予測データのいずれかを使用して、ＣＵのビデオブロックを再構成し得る。したがって、ビデオデコーダ３０は、ビットストリーム中のシンタックス要素に基づいて、予測ビデオブロックと残差ビデオブロックとを生成し得、予測ビデオブロックと残差ビデオブロックとに基づいて、ビデオブロックを生成し得る。

[00127]再構成ユニット１５８がＣＵのビデオブロックを再構成した後、フィルタユニット１５９は、ＣＵに関連付けられたブロッキングアーティファクトを低減するためにデブロッキング演算を実行し得る。フィルタユニット１５９が、ＣＵに関連付けられたブロッキングアーティファクトを低減するためにデブロッキング演算を実行した後、ビデオデコーダ３０はＣＵのビデオブロックを復号されたピクチャバッファ１６０に記憶し得る。復号されたピクチャバッファ１６０は、後続の動き補償、イントラ予測、および図１Ａまたは図１Ｂのディスプレイデバイス３２などのディスプレイデバイス上での提示のために、参照ピクチャを提供し得る。たとえば、ビデオデコーダ３０は、復号ピクチャバッファ１６０中のビデオブロックに基づいて、他のＣＵのＰＵに対してイントラ予測演算またはインター予測演算を実行し得る。

マルチレイヤデコーダ
[00128]図３Ｂは、本開示で説明する態様による技法を実装し得るマルチレイヤビデオデコーダ３３の一例を示すブロック図である。ビデオデコーダ３３は、ＳＨＶＣおよびマルチビューコーディングの場合など、マルチレイヤビデオフレームを処理するように構成され得る。さらに、ビデオデコーダ３３は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。

[00129]ビデオデコーダ３３はビデオデコーダ３０Ａとビデオデコーダ３０Ｂとを含み、それらの各々はビデオデコーダ３０として構成され得、ビデオデコーダ３０に関して上記で説明した機能を実行し得る。さらに、参照番号の再利用によって示されるように、ビデオデコーダ３０Ａおよび３０Ｂは、ビデオデコーダ３０としてシステムとサブシステムとのうちの少なくともいくつかを含み得る。ビデオデコーダ３３は、２つのビデオデコーダ３０Ａおよび３０Ｂを含むものとして示されているが、ビデオデコーダ３３は、そのようなものとして限定されず、任意の数のビデオデコーダ３０レイヤを含み得る。いくつかの実施形態では、ビデオデコーダ３３はアクセスユニット中の各ピクチャまたはフレームについてビデオデコーダ３０を含み得る。たとえば、５つのピクチャを含むアクセスユニットは、５つのデコーダレイヤを含むビデオデコーダによって処理または復号され得る。いくつかの実施形態では、ビデオデコーダ３３は、アクセスユニット中のフレームよりも多くのデコーダレイヤを含み得る。いくつかのそのような場合では、ビデオデコーダレイヤのいくつかは、いくつかのアクセスユニットを処理するときに非アクティブであり得る。

[00130]ビデオデコーダ３０Ａおよび３０Ｂに加えて、ビデオデコーダ３３はアップサンプリングユニット９２を含み得る。いくつかの実施形態では、アップサンプリングユニット９２は、フレームまたはアクセスユニットのための参照ピクチャリストに追加されるべきエンハンストレイヤを作成するために、受信されたビデオフレームのベースレイヤをアップサンプリングし得る。このエンハンストレイヤは復号ピクチャバッファ１６０に記憶され得る。いくつかの実施形態では、アップサンプリングユニット９２は、図２Ａのリサンプリングユニット９０に関して説明した実施形態の一部または全部を含むことができる。いくつかの実施形態では、アップサンプリングユニット９２は、レイヤをアップサンプリングすることと、スライス境界ルールおよび／またはラスタ走査ルールのセットに準拠するために１つまたは複数のスライスを再編成、再定義、変更、または調整することとを行うように構成される。場合によっては、アップサンプリングユニット９２は、受信されたビデオフレームのレイヤをアップサンプリングおよび／またはダウンサンプリングするように構成されたリサンプリングユニットであり得る。

[00131]アップサンプリングユニット９２は、下位レイヤデコーダ（たとえば、ビデオデコーダ３０Ａ）の復号ピクチャバッファ１６０からピクチャまたはフレーム（またはピクチャに関連付けられたピクチャ情報）を受信し、ピクチャ（または受信されたピクチャ情報）をアップサンプリングするように構成され得る。このアップサンプリングされたピクチャは、次いで、下位レイヤデコーダと同じアクセスユニット中のピクチャを復号するように構成された上位レイヤデコーダ（たとえば、ビデオデコーダ３０Ｂ）の予測処理ユニット１５２に与えられ得る。場合によっては、上位レイヤデコーダは、下位レイヤデコーダから削除された１つのレイヤである。他の場合には、図３Ｂのレイヤ０ビデオデコーダとレイヤ１デコーダとの間に１つまたは複数の上位レイヤデコーダがあり得る。

[00132]場合によっては、アップサンプリングユニット９２は省略またはバイパスされ得る。そのような場合、ビデオデコーダ３０Ａの復号ピクチャバッファ１６０からのピクチャは、直接、または少なくともアップサンプリングユニット９２に与えられることなしに、ビデオデコーダ３０Ｂの予測処理ユニット１５２に与えられ得る。たとえば、ビデオデコーダ３０Ｂに与えられたビデオデータと、ビデオデコーダ３０Ａの復号ピクチャバッファ１６０からの参照ピクチャとが同じサイズまたは解像度である場合、参照ピクチャは、アップサンプリングなしにビデオデコーダ３０Ｂに与えられ得る。さらに、いくつかの実施形態では、アップサンプリングユニット９２は、ビデオデコーダ３０Ａの復号ピクチャバッファ１６０から受信された参照ピクチャをアップサンプリングまたはダウンサンプリングするように構成されたリサンプリングユニット９０であり得る。

[00133]図３Ｂに示されているように、ビデオデコーダ３３は、デマルチプレクサ９９、またはｄｅｍｕｘをさらに含み得る。ｄｅｍｕｘ９９は符号化ビデオビットストリームを複数のビットストリームにスプリットすることができ、ｄｅｍｕｘ９９によって出力された各ビットストリームは異なるビデオデコーダ３０Ａおよび３０Ｂに与えられる。複数のビットストリームは、ビットストリームを受信することによって作成され得、ビデオデコーダ３０Ａおよび３０Ｂの各々は、所与の時間においてビットストリームの一部分を受信する。場合によっては、ｄｅｍｕｘ９９において受信されるビットストリームからのビットは、ビデオデコーダの各々（たとえば、図３Ｂの例ではビデオデコーダ３０Ａおよび３０Ｂ）の間で一度に１ビットずつ交替され得るが、多くの場合、ビットストリームは別様に分割される。たとえば、ビットストリームは、一度に１ブロックずつビットストリームを受信するビデオデコーダを交替することによって分割され得る。別の例では、ビットストリームは、非１：１比のブロックによって、ビデオデコーダ３０Ａおよび３０Ｂの各々に分割され得る。たとえば、ビデオデコーダ３０Ａに提供される各ブロックについて、２つのブロックがビデオデコーダ３０Ｂに提供され得る。いくつかの実施形態では、ｄｅｍｕｘ９９によるビットストリームの分割はプリプログラムされ得る。他の実施形態では、ｄｅｍｕｘ９９は、宛先モジュール１４を含む宛先デバイス上のプロセッサからなど、ビデオデコーダ３３の外部のシステムから受信された制御信号に基づいてビットストリームを分割し得る。制御信号は、入力インターフェース２８からのビデオの解像度またはビットレートに基づいて、リンク１６の帯域幅に基づいて、ユーザに関連付けられたサブスクリプション（たとえば、有料サブスクリプション対無料サブスクリプション）に基づいて、またはビデオデコーダ３３によって取得可能な解像度を決定するための任意の他のファクタに基づいて生成され得る。

直接依存性フラグ
[00134]いくつかの例示的な実装形態（たとえば、ＭＶ−ＨＥＶＣおよびＳＨＶＣ）では、特定のレイヤについて、どの１つまたは複数のレイヤが特定のレイヤのレイヤ間予測のために使用され得るかを指定する、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇと呼ばれるシンタックス要素がある。一実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇは、ビデオデータのあるレイヤがビデオデータの別のレイヤに基づいて（またはそれに依存して）コーディングされるかどうかを指定する２次元アレイである。そのような２次元アレイは値ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇ［ｉ］［ｊ］の形態をとり得、ここで、ｉは、コーディングされるべきレイヤ（たとえば、現在のレイヤ）に対応し、ｊは、参照されるべきレイヤ（たとえば、参照レイヤ）に対応する。この例では、参照レイヤが現在のレイヤの直接参照レイヤでない場合、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇは０であり得、参照レイヤが現在のレイヤの直接参照レイヤである場合、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇは１であり得る。一実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇが省略されるかまたは未定義である場合、値は０であると推論される。別の実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇが省略されるかまたは未定義である場合、値は１であると推論される。一実施形態では、レイヤＡがレイヤＢの直接参照レイヤである場合、それは、レイヤＢが、レイヤＡ中に含まれる情報に少なくとも部分的に基づいてコーディングされ得ることを意味する。別の実施形態では、レイヤＡがレイヤＢの直接参照レイヤである場合、それは、レイヤＢが、レイヤＡ中に含まれる情報に少なくとも部分的に基づいてコーディングされることを意味する。いくつかの実施形態では、より小さいレイヤＩＤを有するすべてのレイヤ（たとえば、下位レイヤ）は特定のレイヤの直接参照レイヤである。他の実施形態では、下位レイヤのうちのいくつかのみが特定のレイヤの直接参照レイヤであり得る。たとえば、エンコーダは、計算の複雑さを低減するために、下位レイヤのうちのいくつかのみを特定のレイヤの直接依存性レイヤとして選定し得る。適用可能なコーディング方式（たとえば、ＨＥＶＣ）は、特定のレイヤがいくつの直接参照レイヤを有し得るかに関する限界を有することがある（たとえば、空間的スケーラビリティの場合、１つ以下の参照レイヤ）。一実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇフラグは、ビデオパラメータセット（ＶＰＳ）中でシグナリングされ、コード化ビデオシーケンス（ＣＶＳ：coded video sequence）全体に適用される。

直接依存性タイプ
[00135]現在のレイヤをコーディングするために使用される情報は、参照レイヤのテクスチャ情報（たとえば、ピクセル値）、参照レイヤの動き情報（たとえば、動きベクトル、参照インデックス、予測方向など）を含み得る。ただし、現在のレイヤをコーディングするために使用され得る参照レイヤの情報は、本明細書で説明するものに限定されず、参照レイヤ中に含まれるまたはそれの一部である何らかの情報であり得る。

[00136]いくつかの実装形態では、１つまたは複数の追加のフラグまたはシンタックス要素が、現在のレイヤをコーディングするために参照レイヤから導出またはインポートされる情報の１つまたは複数のタイプを示すために使用され得る。たとえば、いくつかの実施形態では、参照レイヤは、レイヤ間動き予測、レイヤ間テクスチャ予測、またはその両方のために使用され得る。一実施形態では、そのようなフラグまたはシンタックス要素は「ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ」と呼ばれることがある。

[00137]一実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅは、どのタイプのレイヤ間予測が、参照レイヤを使用して現在のレイヤをコーディングするために使用されるかを指定する２次元アレイである。そのような２次元アレイは値ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ［ｉ］［ｊ］の形態をとり得、ここで、ｉは、現在のレイヤ（たとえば、コーディングされるべきレイヤ）に対応し、ｊは、参照レイヤ（たとえば、参照されるべきレイヤ）に対応する。この例では、０のｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ値はレイヤ間サンプル予測のみを示し得、１はレイヤ間動き予測のみを示し得、２はレイヤ間サンプル予測とレイヤ間動き予測の両方を示し得る。いくつかの実施形態では、３（または他の値）のｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ値は、依存性がないことを示し得る。各ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ値が異なるタイプのレイヤ間予測にどのように割り当てられるかまたはマッピングされるかは、他の実装形態では異なり得、本開示は、異なるタイプのレイヤ間予測へのｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ値の特定の割り当てまたはマッピングに限定されない。一実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅシンタックス要素は、ビデオパラメータセット（ＶＰＳ）中でシグナリングされ、コード化ビデオシーケンス（ＣＶＳ）全体に適用される。

直接依存性タイプから導出される他の情報
[00138]いくつかの実装形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ［ｉ］［ｊ］は、変数ＮｕｍＳａｍｐｌｅＰｒｅｄＲｅｆＬａｙｅｒｓ［ｉ］、ＮｕｍＭｏｔｉｏｎＰｒｅｄＲｅｆＬａｙｅｒｓ［ｉ］、ＳａｍｐｌｅＰｒｅｄＥｎａｂｌｅｄＦｌａｇ［ｉ］［ｊ］、ＭｏｔｉｏｎＰｒｅｄＥｎａｂｌｅｄＦｌａｇ［ｉ］［ｊ］、ＮｕｍＤｉｒｅｃｔＲｅｆＬａｙｅｒｓ［ｉ］、ＲｅｆＬａｙｅｒＩｄ［ｉ］［ｊ］、ＭｏｔｉｏｎＰｒｅｄＲｅｆＬａｙｅｒＩｄ［ｉ］［ｊ］、およびＳａｍｐｌｅＰｒｅｄＲｅｆＬａｙｅｒＩｄ［ｉ］［ｊ］を導出するために使用される。一実施形態では、ＮｕｍＳａｍｐｌｅＰｒｅｄＲｅｆＬａｙｅｒｓは、レイヤ間サンプル予測のために使用され得る参照レイヤの数を示し得、ＮｕｍＭｏｔｉｏｎＰｒｅｄＲｅｆＬａｙｅｒｓは、レイヤ間動き予測のために使用され得るレイヤの数を示し得、ＳａｍｐｌｅＰｒｅｄＥｎａｂｌｅｄＦｌａｇは、レイヤ間サンプル予測が、参照レイヤのサンプル情報を使用して現在のレイヤがコーディングされ得るように有効化されるかどうかを示し得、ＭｏｔｉｏｎＰｒｅｄＥｎａｂｌｅｄＦｌａｇは、レイヤ間サンプル予測が、参照レイヤの動き情報を使用して現在のレイヤがコーディングされ得るように有効化されるかどうかを示し得、ＮｕｍＤｉｒｅｃｔＲｅｆＬａｙｅｒｓは、現在のレイヤが有する直接参照レイヤの数を示し得、ＲｅｆＬａｙｅｒＩｄは参照レイヤのレイヤＩＤを示し得、ＭｏｔｉｏｎＰｒｅｄＲｅｆＬａｙｅｒＩｄは、レイヤ間動き予測がそれのために有効化される参照レイヤのレイヤＩＤを示し得、ＳａｍｐｌｅＰｒｅｄＲｅｆＬａｙｅｒＩｄは、レイヤ間サンプル予測がそれのために有効化される参照レイヤのレイヤＩＤを示し得る。いくつかの実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ［ｉ］［ｊ］は、いくつかのビットストリーム適合制約に適合するために、両端値を含む０〜２の範囲内の値を有し得る。ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ［ｉ］［ｊ］の値は、両端値を含む０〜２の範囲内にあり得るが、いくつかの実施形態では、デコーダは、両端値を含む３〜２³²−２の範囲内のｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ［ｉ］［ｊ］の値がシンタックス中に出現することを可能にし得る。いくつかの実装形態では、エンコーダは、２よりも大きいｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ値を指定しないことがあるが、デコーダは、２よりも大きい値をパースする（parse）ように構成され得る。いくつかの実装形態では、２よりも大きいｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅ値は、直接依存性がないことを示し得る。いくつかの実装形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅシンタックス要素の長さは、ｄｉｒｅｃｔ＿ｄｅｐ＿ｔｙｐｅ＿ｌｅｎ＿ｍｉｎｕｓ２＋２であり得る。たとえば、この値は、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅシンタックス要素の長さが２であるので、いくつかの既存のコーディング方式（たとえば、ＨＥＶＣ）では２に等しい。現在知られているかまたは将来開発される他の実装形態は、コード化ビデオデータの他の態様および特性を示すために、２よりも大きい値を使用し得る。

[00139]例示的な一実装形態では、変数ＮｕｍＳａｍｐｌｅＰｒｅｄＲｅｆＬａｙｅｒｓ［ｉ］、ＮｕｍＭｏｔｉｏｎＰｒｅｄＲｅｆＬａｙｅｒｓ［ｉ］、ＳａｍｐｌｅＰｒｅｄＥｎａｂｌｅｄＦｌａｇ［ｉ］［ｊ］、ＭｏｔｉｏｎＰｒｅｄＥｎａｂｌｅｄＦｌａｇ［ｉ］［ｊ］、ＮｕｍＤｉｒｅｃｔＲｅｆＬａｙｅｒｓ［ｉ］、ＲｅｆＬａｙｅｒＩｄ［ｉ］［ｊ］、ＭｏｔｉｏｎＰｒｅｄＲｅｆＬａｙｅｒＩｄ［ｉ］［ｊ］、およびＳａｍｐｌｅＰｒｅｄＲｅｆＬａｙｅｒＩｄ［ｉ］［ｊ］は、以下のように導出される。

参照レイヤコーデック
[00140]いくつかの既存のコーディング方式では、参照レイヤコーデックは、ＨＥＶＣまたはＨ．２６４／ＡＶＣ、または一般的な非ＨＥＶＣコーデックであり得る。さらに、使用されるべきコーデックを示すパラメータセット中のフラグがあり得る。たとえば、ビデオパラメータセット（ＶＰＳ）中のフラグは、参照レイヤをコーディングするためにＨＥＶＣコーデックが使用されるのか非ＨＥＶＣ（たとえば、ＡＶＣ）コーデックが使用されるのかを示し得る。一例では、フラグａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇは、参照レイヤコーデックが、勧告（Recommendation）ＩＴＵ−Ｔ Ｈ．２６４｜国際規格ＩＳＯ／ＩＥＣ１４４９６−１０に従うビデオコーディング規格に適合することを示す、１に等しい値を有し得、代替的に、参照レイヤコーデックがＨＥＶＣ仕様に適合することを示す、０に等しい値を有し得る。したがって、エンハンスメントレイヤを符号化または復号するように構成されたコーディングデバイスは、参照レイヤに関してＡＶＣコーデックが使用されるのかＨＥＶＣコーデックが使用されるのか（または何らかの他の非ＨＥＶＣコーデックが使用されるのか）に関する情報を有し得る。

参照レイヤコーデックタイプおよび動き情報利用可能性
[00141]いくつかの参照レイヤコーディング方式（たとえば、ＡＶＣ）では、動き情報は、１つまたは複数のエンハンスメントレイヤをコーディングするために利用可能でないことがある。たとえば、参照レイヤコーダ（たとえば、エンコーダまたはデコーダ）は、（たとえば、表示のために）テクスチャ（たとえば、ピクセル値）情報のみを出力し得、参照レイヤをコーディングするために使用される動き情報を出力しないことがある。そのような場合、動き情報は、エンハンスメントレイヤコーデックによってアクセス可能でないことがあり、したがって、エンハンスメントレイヤをコーディングするために使用されないことがある。

[00142]いくつかの実施形態では、そのような利用不可能な情報へのアクセスを制限するために、そのような情報の使用を示し得るシンタックス要素は、そのような指示を提供することを制限され得る。たとえば、シンタックス要素が無制限であり、そのような情報の使用を示すことを可能にされる場合、コーダ（たとえば、エンコーダまたはデコーダ）は、（たとえば、参照された動き情報が、上記で説明したように利用可能でない場合）ビットストリームのある部分を符号化または復号することが可能でないことがある。

[00143]参照レイヤによって使用されるコーディング方式への、レイヤ間予測のための動き情報の利用可能性の依存を活用することによって、いくつかのレイヤ間の直接依存性タイプを決定するための追加の処理が省略され、したがって、コーディング効率が改善され、および／または計算の複雑さが低減されることになる。

[00144]一実施形態では、エンハンスメントレイヤをコーディングするために使用され得るレイヤ間予測方法は、参照レイヤコーデックが特定のコーディング方式に適合するかどうかに依存し得る。特定のコーディング方式は、参照レイヤ中の情報の一部分が利用可能でないことがあるかどうかを示し得る任意の所定のコーディング方式であり得る。一例では、特定のコーディング方式はＡＶＣである。そのような例では、エンハンスメントレイヤをコーディングするために使用されるレイヤ間予測方法は、参照レイヤコーデックがＡＶＣ（または非ＨＥＶＣコーディング方式）に適合するかどうかに依存し得る。たとえば、コーダは、上記で説明したコーデック情報を使用して、どのコーデックが参照レイヤをコーディングするために使用されるかをチェックし得、参照レイヤコーデックがＨＥＶＣ以外のコーディング方式に適合する場合、コーダ（たとえば、エンコーダまたはデコーダ）は、エンハンスメントレイヤをコーディングするときにレイヤ間動き予測の使用を無効化し得る。一方、参照レイヤコーデックがＨＥＶＣに適合する場合、コーダ（たとえば、エンコーダまたはデコーダ）は、エンハンスメントレイヤをコーディングするときにレイヤ間動き予測の使用を有効化し得る。

Ｈ．２６４／ＡＶＣ適合ベースレイヤに関する他の情報
[00145]いくつかの実装形態では、１のａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇ値は、参照ピクチャリスト構成のための勧告ＩＴＵ−Ｔ Ｈ．２６４｜ＩＳＯ／ＩＥＣ１４４９６−１０復号プロセスを使用して参照レイヤが復号されるとき、出力参照ピクチャリストｒｅｆＰｉｃＬｉｓｔ０（および、適用可能なとき、ｒｅｆＰｉｃＬｉｓｔ１）が、コード化ピクチャ（たとえば、参照ピクチャリストがそれに関連付けられるピクチャ）の時間的ＩＤよりも大きい時間的ＩＤを有するピクチャを含んでいないことを示す。いくつかの実装形態では、入力としてｔｅｍｐｏｒａｌ＿ｉｄのための任意の値を用いて、勧告ＩＴＵＴ Ｈ．２６４｜ＩＳＯ／ＩＥＣ１４４９６−１０サブクローズＧ．８．８．１において指定されているようにサブビットストリーム抽出プロセスを使用して導出され得る、勧告ＩＴＵ−Ｔ Ｈ．２６４｜ＩＳＯ／ＩＥＣ１４４９６−１０適合ベースレイヤのすべてのサブビットストリームはＣＶＳのセットを生じ、各ＣＶＳは、勧告ＩＴＵＴ Ｈ．２６４｜ＩＳＯ／ＩＥＣ１４４９６−１０アネックスＡ、Ｇ、およびＨにおいて指定されたプロファイルのうちの１つまたは複数に適合するものとする。

レイヤ間予測タイプのコーデック依存シグナリングの実装形態
[00146]上記で説明したように、レイヤ間動き予測（または他の予測モード）の使用を示すために使用されるフラグまたはシンタックス要素の値は、たとえば、ａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇまたは他のシンタックス要素によって指定されるか、またはいくつかのあるシンタックス要素から導出され得る、参照レイヤ（またはベースレイヤ）をコーディングするために使用されるコーデックに依存することができる。一実施形態では、ベースレイヤは、最も小さいレイヤＩＤをもつレイヤである。別の実施形態では、ベースレイヤは、０のレイヤＩＤを有するレイヤである。いくつかの実施形態では、レイヤ間動き予測は、ＡＶＣ参照レイヤについて無効化される。他の実施形態では、レイヤ間動き予測は、非ＨＥＶＣ参照レイヤについて無効化される。レイヤ間動き予測の無効化は、以下で説明するように実装され得る。

実施形態＃１
[00147]一実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅは、任意の非ＨＥＶＣ参照レイヤについて０に等しい値をとる。別の実施形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅは、ＡＶＣ参照レイヤについて０に等しい値をとる。この特徴は、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅシンタックス要素に対するビットストリーム制約として実装され得る。たとえば、適合ビットストリームでは、０のレイヤＩＤを有するレイヤ（たとえば、ベースレイヤ）に関するｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅは、ａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇが１に等しい場合、０に等しいものとする。別の例では、適合ビットストリームは、ａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇが１に等しい場合、０のレイヤＩＤを有するレイヤ（たとえば、ベースレイヤ）のためのレイヤ間動き予測を指定するシンタックス要素を含んでいないものとする。

実施形態＃２
[00148]一実施形態では、非ＨＥＶＣ（たとえば、ＡＶＣ）コーディング方式でコーディングされる参照レイヤについて、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅは、ａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇが１に等しい場合にレイヤ間サンプル予測のみを有効化することによって、条件付きでシグナリングされる。レイヤ間サンプル予測は非ＨＥＶＣコード化（たとえば、ＡＶＣコード化）レイヤのための唯一の利用可能なレイヤ間予測であるので、ａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇが１に等しい場合、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅシグナリングは省略され得、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅの値は、（たとえば、唯一のレイヤ間サンプル予測が使用されることを示す）０であると推論され得る。

[00149]ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅシグナリングの省略が、イタリック体にされた部分において実装される、例示的なシンタックスを以下に示す。

[00150]いくつかの実装形態では、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅを推論すること（たとえば、０の値が推論されるべきとき）がｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅのセマンティクスに追加される。たとえば、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅがあるレイヤについて存在しない場合、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅはそのレイヤについて０であると推論される。代替的に、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅがあるレイヤについて存在しない場合、ａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇが１に等しければ、ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅはそのレイヤについて０であると推論される。上記で説明したあるレイヤは、０のレイヤＩＤを有するベースレイヤであり得る。別の実施形態では、あるレイヤは、非０レイヤＩＤを有する参照レイヤであり得る。

他のシンタックス要素
[00151]本開示では、レイヤ間予測のタイプを示すｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅシンタックス要素が、様々な実施形態を説明するために使用されるが、同じ技法および機構が、レイヤ間予測タイプを指定することができる他のシンタックス要素に適用および拡張され得る。

[00152]本開示では、ａｖｃ＿ｂａｓｅ＿ｌａｙｅｒ＿ｆｌａｇシンタックス要素が、ベースレイヤのコーデック方式を示すために、またはベースレイヤが非ＨＥＶＣコーデック方式でコーディングされることを示すために使用される。しかしながら、他のシンタックス要素および機構が、参照レイヤコーデック方式またはベースレイヤコーデック方式を指定するためにシグナリングまたは処理され得る。

[00153]本明細書で説明する技法および機構は、動き情報の利用可能性または利用不可能性をシグナリングすることに限定されず、本開示で説明するものと同様の他の技法および機構が、テクスチャ情報またはレイヤ間予測（または予測一般）のための他のタイプの情報の利用可能性または利用不可能性を示すために使用され得る。

例示的なフローチャート＃１
[00154]図４は、本開示の一実施形態による、ビデオ情報をコーディングするための方法４００を示すフローチャートである。図４に示されたステップは、エンコーダ（たとえば、図２Ａまたは図２Ｂに示されているビデオエンコーダ）、デコーダ（たとえば、図３Ａまたは図３Ｂに示されているビデオデコーダ）、または任意の他の構成要素によって実行され得る。便宜上、方法４００は、エンコーダ、デコーダまたは別の構成要素であり得る、コーダによって実行されるものとして説明する。

[00155]方法４００はブロック４０１において開始する。ブロック４０５において、コーダは、参照レイヤコーデックが特定のタイプのコーデックであるかどうかを決定する。一実施形態では、参照レイヤコーデックは、参照レイヤをコーディングするために使用されるコーデックのタイプを指定する。別の実施形態では、参照レイヤコーデックは、それが適合するコーディング方式のタイプを指定する。一例では、特定のタイプのコーデックはＡＶＣコーデックを含む。別の例では、特定のタイプのコーデックは非ＨＥＶＣコーデックを含む。コーダが、参照レイヤコーデックが特定のタイプのコーデックでないと決定した場合、コーダは、ブロック４１０においてレイヤ間動き予測を有効化する。一例では、レイヤ間動き予測を有効化することは、参照レイヤの動き情報を使用して現在のレイヤを実際にコーディングすることを備え得る。別の例では、レイヤ間動き予測を有効化することは、レイヤ間動き予測を無効化するのを控えることを備え得、参照レイヤの動き情報が現在のレイヤをコーディングするために実際に使用されることを意味しないことがある。コーダが、ブロック４０５において、参照レイヤコーデックが特定のタイプのコーデックであると決定した場合、コーダは、ブロック４１５においてレイヤ間動き予測を無効化する。一例では、レイヤ間動き予測を無効化することは、参照レイヤの動き情報が現在のレイヤをコーディングするために使用されることを可能にしないことを備え得る。別の実施形態では、レイヤ間動き予測を無効化することは、参照レイヤの動き情報を使用せずに現在のレイヤをコーディングすることを備え得る。方法４００はブロック４２０において終了する。

[00156]上記で説明したように、図２Ａのビデオエンコーダ２０、図２Ｂのビデオエンコーダ２１、図３Ａのビデオデコーダ３０、または図３Ｂのビデオデコーダ３１のうちの１つまたは複数の構成要素（たとえば、レイヤ間予測ユニット１２８および／またはレイヤ間予測ユニット１６６）は、参照レイヤコーデックが特定のタイプのコーデックであるかどうかを決定すること、レイヤ間動き予測を有効化すること、およびレイヤ間動き予測を無効化することなど、本開示で説明する技法のいずれかを実装するために使用され得る。

例示的なフローチャート＃２
[00157]図５は、本開示の一実施形態による、ビデオ情報をコーディングするための方法５００を示すフローチャートである。図５に示されたステップは、エンコーダ（たとえば、図２Ａまたは図２Ｂに示されているビデオエンコーダ）、デコーダ（たとえば、図３Ａまたは図３Ｂに示されているビデオデコーダ）、または任意の他の構成要素によって実行され得る。便宜上、方法５００は、エンコーダ、デコーダまたは別の構成要素であり得る、コーダによって実行されるものとして説明する。

[00158]方法５００はブロック５０１において開始する。ブロック５０５において、コーダは、参照レイヤコーデックが特定のタイプのコーデックであるかどうかを決定する。コーダがブロック５０５において決定を行う方法は、図４のブロック４０５においてコーダによって採用された方法と同様であり得る。コーダが、参照レイヤコーデックが特定のタイプのコーデックでないと決定した場合、方法５００はブロック５２０において終了する。一方、コーダが、参照レイヤコーデックが特定のタイプのコーデックであると決定した場合、コーダは、ブロック５１０において、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理する。一実施形態では、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することは、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないことを示す１つまたは複数のシンタックス要素またはフラグをシグナリングまたは受信することを備える。別の実施形態では、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することは、エンハンスメントレイヤをコーディングするために使用され得る参照レイヤの情報がテクスチャ情報に制限されることを示す１つまたは複数のシンタックス要素またはフラグをシグナリングまたは受信することを備える。別の実施形態では、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することは、参照レイヤがエンハンスメントレイヤの直接参照レイヤであるかどうかを示すフラグまたはシンタックス要素を処理するのを控えることを備える。別の実施形態では、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することは、参照レイヤとエンハンスメントレイヤとの間の依存性タイプを示すフラグまたはシンタックス要素を処理するのを控えることを備える。別の実施形態では、予測タイプの指示はビットストリーム中でシグナリングされず、予測タイプは、利用可能なまたは既存のフラグ、シンタックス要素、または情報から導出（またはそれに基づいて決定）される。たとえば、コーダは、ベースレイヤが非ＨＥＶＣコーデック方式（たとえば、ＡＶＣ）でコーディングされる場合、ベースレイヤのテクスチャ情報のみがレイヤ間予測のために使用されるべきであると決定し得る。ブロック５１５において、コーダは、（たとえば、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理したことに応答して）参照レイヤの動き情報を使用せずにエンハンスメントレイヤをコーディングする。方法５００はブロック５２０において終了する。

[00159]上記で説明したように、図２Ａのビデオエンコーダ２０、図２Ｂのビデオエンコーダ２１、図３Ａのビデオデコーダ３０、または図３Ｂのビデオデコーダ３１のうちの１つまたは複数の構成要素（たとえば、レイヤ間予測ユニット１２８および／またはレイヤ間予測ユニット１６６）は、参照レイヤコーデックが特定のタイプのコーデックであるかどうかを決定すること、参照レイヤの動き情報がエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理すること、参照レイヤの動き情報を使用せずにエンハンスメントレイヤをコーディングすることなど、本開示で説明する技法のいずれかを実装するために使用され得る。

[00160]方法５００では、図５に示されたブロックのうちの１つまたは複数は削除される（たとえば、実行されない）ことがあり、および／または方法が実行される順序は入れ替えられることがある。たとえば、ブロック５１５が図５に示されているが、エンハンスメントレイヤを実際にコーディングすることは、方法５００の一部である必要はなく、したがって方法５００から省略される。したがって、本開示の実施形態は、図５に示された例にまたはそれによって限定されず、他の変形形態が、本開示の趣旨から逸脱することなく実装され得る。

他の考慮事項
[00161]本明細書で開示する情報および信号は、多種多様な技術および技法のいずれかを使用して表され得る。たとえば、上記の説明全体にわたって言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、およびチップは、電圧、電流、電磁波、磁界または磁性粒子、光場または光学粒子、あるいはそれらの任意の組合せによって表され得る。

[00162]本明細書で開示する実施形態に関して説明した様々な例示的な論理ブロック、モジュール、回路、およびアルゴリズムステップは、電子ハードウェア、コンピュータソフトウェア、またはその両方の組合せとして実装され得る。ハードウェアとソフトウェアのこの互換性を明確に示すために、様々な例示的な構成要素、ブロック、モジュール、回路、およびステップについて、上記では概してそれらの機能に関して説明した。そのような機能をハードウェアとして実装するか、ソフトウェアとして実装するかは、特定の適用例および全体的なシステムに課される設計制約に依存する。当業者は、説明した機能を特定の適用例ごとに様々な方法で実装し得るが、そのような実装の決定は、本発明の範囲からの逸脱を生じるものと解釈されるべきではない。

[00163]本明細書で説明した技法は、ハードウェア、ソフトウェア、ファームウェア、またはそれらの任意の組合せで実装され得る。そのような技法は、汎用コンピュータ、ワイヤレス通信デバイスハンドセット、またはワイヤレス通信デバイスハンドセットおよび他のデバイスにおける適用例を含む複数の用途を有する集積回路デバイスなど、様々なデバイスのいずれかにおいて実装され得る。モジュールまたは構成要素として説明した特徴は、集積論理デバイスに一緒に、または個別であるが相互運用可能な論理デバイスとして別々に実装され得る。ソフトウェアで実装した場合、本技法は、実行されたとき、上記で説明した方法のうちの１つまたは複数を実行する命令を含むプログラムコードを備えるコンピュータ可読データ記憶媒体によって、少なくとも部分的に実現され得る。コンピュータ可読データ記憶媒体は、パッケージング材料を含むことがあるコンピュータプログラム製品の一部を形成し得る。コンピュータ可読媒体は、同期型ダイナミックランダムアクセスメモリ（ＳＤＲＡＭ）などのランダムアクセスメモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、不揮発性ランダムアクセスメモリ（ＮＶＲＡＭ）、電気消去可能プログラマブル読取り専用メモリ（ＥＥＰＲＯＭ（登録商標））、フラッシュメモリ、磁気または光学データ記憶媒体など、メモリまたはデータ記憶媒体を備え得る。本技法は、追加または代替として、伝搬信号または電波など、命令またはデータ構造の形態でプログラムコードを搬送または伝達し、コンピュータによってアクセスされ、読み取られ、および／または実行され得るコンピュータ可読通信媒体によって、少なくとも部分的に実現され得る。

[00164]プログラムコードは、１つまたは複数のデジタル信号プロセッサ（ＤＳＰ）、汎用マイクロプロセッサ、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルロジックアレイ（ＦＰＧＡ）、または他の等価の集積回路またはディスクリート論理回路など、１つまたは複数のプロセッサを含み得るプロセッサによって実行され得る。そのようなプロセッサは、本開示で説明する技法のいずれかを実行するように構成され得る。汎用プロセッサはマイクロプロセッサであり得るが、代替として、プロセッサは、任意の従来のプロセッサ、コントローラ、マイクロコントローラ、または状態機械であり得る。プロセッサは、コンピューティングデバイスの組合せ、たとえば、ＤＳＰとマイクロプロセッサとの組合せ、複数のマイクロプロセッサ、ＤＳＰコアと連携する１つまたは複数のマイクロプロセッサ、あるいは任意の他のそのような構成として実装され得る。したがって、本明細書で使用する「プロセッサ」という用語は、上記の構造、上記の構造の任意の組合せ、または本明細書で説明した技法の実装に好適な他の構造または装置のいずれかを指す。さらに、いくつかの態様では、本明細書で説明した機能は、符号化および復号のために構成された専用のソフトウェアモジュールまたはハードウェアモジュール内に提供されるか、あるいは複合ビデオエンコーダ／デコーダ（コーデック）に組み込まれ得る。また、本技法は、１つまたは複数の回路または論理要素において完全に実装され得る。

[00165]本開示の技法は、ワイヤレスハンドセット、集積回路（ＩＣ）またはＩＣのセット（たとえば、チップセット）を含む、多種多様なデバイスまたは装置において実装され得る。本開示では、開示する技法を実行するために構成されたデバイスの機能的態様を強調するために様々な構成要素、モジュール、またはユニットについて説明したが、それらの構成要素、モジュール、またはユニットは、必ずしも異なるハードウェアユニットによる実現を必要とするとは限らない。むしろ、上記で説明したように、様々なユニットが、好適なソフトウェアおよび／またはファームウェアとともに、上記で説明した１つまたは複数のプロセッサを含めて、コーデックハードウェアユニットにおいて組み合わせられるか、または相互動作可能なハードウェアユニットの集合によって与えられ得る。

[00166]本発明の様々な実施形態について説明した。これらおよび他の実施形態は以下
の特許請求の範囲内に入る。
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
［Ｃ１］ ビデオ情報をコーディングするように構成された装置であって、前記装置は、
参照レイヤとエンハンスメントレイヤとに関連付けられたビデオ情報を記憶するように構成されたメモリと、前記参照レイヤが参照レイヤ（ＲＬ）コーデックに関連付けられ、前記エンハンスメントレイヤがエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられ、
前記メモリと通信しているプロセッサと
を備え、前記プロセッサは、
前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定することと、
前記ＲＬコーデックが特定のタイプのコーデックであると決定したことに応答して、ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することと
を行うように構成された、装置。
［Ｃ２］ 前記プロセッサは、前記参照レイヤに関連付けられた前記ＲＬコーデックが、前記エンハンスメントレイヤに関連付けられた第２のコーデックと異なるかどうかを決定することによって、前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定するように構成された、Ｃ１に記載の装置。
［Ｃ３］ 前記プロセッサは、前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを示すフラグまたはシンタックス要素の値を決定することによって、前記参照レイヤに関連付けられた前記ＲＬコーデックが前記特定のタイプのコーデックであるかどうかを決定するように構成された、Ｃ１に記載の装置。
［Ｃ４］ 前記プロセッサは、前記ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示をシグナリングするのを控えることと、前記ＲＬコーデックが非ＨＥＶＣコーデックであるかどうかに基づいて前記指示を決定することと、を行うようにさらに構成された、Ｃ１に記載の装置。
［Ｃ５］ 前記プロセッサは、前記ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示をシグナリングするのを控えることと、前記ＲＬコーデックがＡＶＣコーデックであるかどうかに基づいて前記指示を決定することと、を行うようにさらに構成された、Ｃ１に記載の装置。
［Ｃ６］ 前記プロセッサは、前記ＲＬコーデックが前記特定のタイプのコーデックであると決定したことに応答して、前記ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないことを示す１つまたは複数のシンタックス要素またはフラグをシグナリングまたは受信することによって、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理するように構成された、Ｃ１に記載の装置。
［Ｃ７］ 前記プロセッサは、前記ビデオビットストリーム中で追加のフラグまたはシンタックス要素をシグナリングまたは受信することなしに、前記ＲＬコーデックが非ＨＥＶＣコーデックであるかどうかに基づいて、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないと決定することによって、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理するように構成された、Ｃ１に記載の装置。
［Ｃ８］ 前記プロセッサは、前記エンハンスメントレイヤをコーディングするために使用され得る前記参照レイヤの情報がテクスチャ情報に制限されることを示す１つまたは複数のシンタックス要素またはフラグをシグナリングまたは受信することによって、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理するように構成された、Ｃ１に記載の装置。
［Ｃ９］ 前記プロセッサは、前記参照レイヤが前記エンハンスメントレイヤの直接参照レイヤであるかどうかを示すフラグまたはシンタックス要素を処理するのを控えることによって、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理するように構成された、Ｃ１に記載の装置。
［Ｃ１０］ 前記プロセッサは、前記参照レイヤと前記エンハンスメントレイヤとの間の依存性タイプを示すフラグまたはシンタックス要素を処理するのを控えることによって、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理するように構成された、Ｃ１に記載の装置。
［Ｃ１１］ 前記特定のコーデックが非ＨＥＶＣコーデックを備える、Ｃ１に記載の装置。
［Ｃ１２］ 前記特定のコーデックがＡＶＣコーデックを備える、Ｃ１に記載の装置。
［Ｃ１３］ 前記ＲＬコーデックがＡＶＣコーデックを備え、前記ＥＬコーデックがＨＥＶＣコーデックを備える、Ｃ１に記載の装置。
［Ｃ１４］ 前記装置がエンコーダを備え、ここにおいて、前記プロセッサが、前記ビデオビットストリーム中で前記ビデオ情報を符号化するようにさらに構成された、Ｃ１に記載の装置。
［Ｃ１５］ 前記装置がデコーダを備え、ここにおいて、前記プロセッサが、前記ビデオビットストリーム中で前記ビデオ情報を復号するようにさらに構成された、Ｃ１に記載の装置。
［Ｃ１６］ 前記装置が、コンピュータと、ノートブックと、ラップトップと、コンピュータと、タブレットコンピュータと、セットトップボックスと、電話ハンドセットと、スマートフォンと、スマートパッドと、テレビジョンと、カメラと、ディスプレイデバイスと、デジタルメディアプレーヤと、ビデオゲームコンソールと、車内コンピュータとのうちの１つまたは複数からなるグループから選択されるデバイスを備える、Ｃ１に記載の装置。
［Ｃ１７］ ビデオ情報をコーディングする方法であって、前記方法は、
参照レイヤに関連付けられた参照レイヤ（ＲＬ）コーデックが特定のタイプのコーデックであるかどうかを決定することと、
前記ＲＬコーデックが特定のタイプのコーデックであると決定したことに応答して、ビデオビットストリーム中で、前記参照レイヤの動き情報がエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられたエンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することと
を備える、方法。
［Ｃ１８］ 前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定することは、前記参照レイヤに関連付けられた前記ＲＬコーデックが、前記エンハンスメントレイヤに関連付けられた第２のコーデックと異なるかどうかを決定することを備える、Ｃ１７に記載の方法。
［Ｃ１９］ 前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定することは、前記ＲＬコーデックが前記特定のタイプのコーデックであるかどうかを示すフラグまたはシンタックス要素の値を決定することを備える、Ｃ１７に記載の方法。
［Ｃ２０］ 前記ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示をシグナリングするのを控えることと、前記ＲＬコーデックが非ＨＥＶＣコーデックであるかどうかに基づいて前記指示を決定することと、をさらに備える、Ｃ１７に記載の方法。
［Ｃ２１］ 前記ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示をシグナリングするのを控えることと、前記ＲＬコーデックがＡＶＣコーデックであるかどうかに基づいて前記指示を決定することと、をさらに備える、Ｃ１７に記載の方法。
［Ｃ２２］ 前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理することは、前記ＲＬコーデックが前記特定のタイプのコーデックであると決定したことに応答して、前記ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないことを示す１つまたは複数のシンタックス要素またはフラグをシグナリングまたは受信することを備える、Ｃ１７に記載の方法。
［Ｃ２３］ 前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理することは、前記ビデオビットストリーム中で追加のフラグまたはシンタックス要素をシグナリングまたは受信することなしに、前記ＲＬコーデックが非ＨＥＶＣコーデックであるかどうかに基づいて、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないと決定することを備える、Ｃ１７に記載の方法。
［Ｃ２４］ 前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理することは、前記ビデオビットストリーム中で、前記エンハンスメントレイヤをコーディングするために使用され得る前記参照レイヤの情報がテクスチャ情報に制限されることを示す１つまたは複数のシンタックス要素またはフラグをシグナリングまたは受信することを備える、Ｃ１７に記載の方法。
［Ｃ２５］ 前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理することは、前記参照レイヤが前記エンハンスメントレイヤの直接参照レイヤであるかどうかを示すフラグまたはシンタックス要素を処理するのを控えることを備える、Ｃ１７に記載の方法。
［Ｃ２６］ 前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理することは、前記参照レイヤと前記エンハンスメントレイヤとの間の依存性タイプを示すフラグまたはシンタックス要素を処理するのを控えることを備える、Ｃ１７に記載の方法。
［Ｃ２７］ 実行されたとき、
参照レイヤとエンハンスメントレイヤとに関連付けられたビデオ情報を記憶することと、前記参照レイヤが参照レイヤ（ＲＬ）コーデックに関連付けられ、前記エンハンスメントレイヤがエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられ、
前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定することと、
前記ＲＬコーデックが特定のタイプのコーデックであると決定したことに応答して、ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという指示を処理することと
を備えるプロセスを装置に実行させるコードを備える、非一時的コンピュータ可読媒体。
［Ｃ２８］ 前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理することは、前記ビデオビットストリーム中で追加のフラグまたはシンタックス要素をシグナリングまたは受信することなしに、前記ＲＬコーデックが非ＨＥＶＣコーデックであるかどうかに基づいて、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないと決定することを備える、Ｃ２７に記載のコンピュータ可読媒体。
［Ｃ２９］ ビデオ情報をコーディングするように構成されたビデオコーディングデバイスであって、前記ビデオコーディングデバイスは、
参照レイヤとエンハンスメントレイヤとに関連付けられたビデオ情報を記憶するための手段と、前記参照レイヤが参照レイヤ（ＲＬ）コーデックに関連付けられ、前記エンハンスメントレイヤがエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられ、
前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定するための手段と、
前記ＲＬコーデックが特定のタイプのコーデックであると決定したことに応答して、ビデオビットストリーム中で、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという指示を処理するための手段と
を備える、ビデオコーディングデバイス。
［Ｃ３０］ 前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないという前記指示を処理するための前記手段は、前記ビデオビットストリーム中で追加のフラグまたはシンタックス要素をシグナリングまたは受信することなしに、前記ＲＬコーデックが非ＨＥＶＣコーデックであるかどうかに基づいて、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないと決定するための手段を備える、Ｃ２９に記載のビデオコーディングデバイス。

Claims (13)

1. ビデオ情報をコーディングする方法であって、前記方法は、
   参照レイヤに関連付けられた参照レイヤ（ＲＬ）コーデックが特定のタイプのコーデックであるかどうかを決定することと、
   前記ＲＬコーデックが特定のタイプのコーデックであるという決定に基づいて、前記参照レイヤの動き情報がエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられたエンハンスメントレイヤをコーディングするために使用され得るかどうかを示すように構成された第１のフラグまたはシンタックス要素を、ビデオビットストリーム中で処理することなしに、前記参照レイヤの前記動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないと決定することと
   を備え、
   前記方法は、
   前記ＲＬコーデックが前記特定のタイプのコーデックであるという前記決定に基づいて、前記ビデオビットストリーム中で、前記第１のフラグまたはシンタックス要素をシグナリングするのを控えること、
   をさらに備える、方法。
2. 前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定することは、前記参照レイヤに関連付けられた前記ＲＬコーデックが、前記エンハンスメントレイヤに関連付けられた第２のコーデックと異なるかどうかを決定することを備える、請求項１に記載の方法。
3. 前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定することは、前記ＲＬコーデックが前記特定のタイプのコーデックであるかどうかを示す第２のフラグまたはシンタックス要素の値を決定することを備える、請求項１に記載の方法。
4. 前記ＲＬコーデックが非ＨＥＶＣコーデックであるかどうかに基づいて前記参照レイヤの前記動き情報が前記エンハンスメントレイヤをコーディングするために使用され得るかどうかを推論すること、をさらに備える、請求項１に記載の方法。
5. 前記ＲＬコーデックがＡＶＣコーデックであるかどうかに基づいて、前記参照レイヤの前記動き情報が前記エンハンスメントレイヤをコーディングするために使用され得るかどうかを推論すること、をさらに備える、請求項１に記載の方法。
6. 前記ＲＬコーデックが前記特定のタイプのコーデックではないという決定に基づいて、前記ビデオビットストリーム中で、前記第１のフラグまたはシンタックス要素をシグナリングすることをさらに備える、請求項１に記載の方法。
7. 前記ＲＬコーデックがＡＶＣコーデックであるかどうかを示す追加のフラグまたはシンタックス要素をシグナリングすることなしに、前記参照レイヤの前記動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないと、前記ＲＬコーデックがＡＶＣコーデックであるかどうかに基づいて、決定することをさらに備える、請求項１に記載の方法。
8. 前記エンハンスメントレイヤをコーディングするために使用され得る前記参照レイヤの情報がテクスチャ情報に制限されると決定することをさらに備える、請求項１に記載の方法。
9. 前記参照レイヤが前記エンハンスメントレイヤの直接参照レイヤであるかどうかを示すｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇを処理するのを控えることをさらに備え、
   前記第１のフラグまたはシンタックス要素は、前記ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｆｌａｇを備える、請求項１に記載の方法。
10. 前記参照レイヤと前記エンハンスメントレイヤとの間の直接依存性タイプを示すｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅを処理するのを控えることをさらに備え、
    前記第１のフラグまたはシンタックス要素は、前記ｄｉｒｅｃｔ＿ｄｅｐｅｎｄｅｎｃｙ＿ｔｙｐｅを備える、請求項１に記載の方法。
11. 実行されたとき、請求項１乃至１０のいずれか１項による方法を装置に実行させるコードを備える、非一時的コンピュータ可読媒体。
12. ビデオ情報をコーディングするように構成されたビデオコーディングデバイスであって、前記ビデオコーディングデバイスは、
    参照レイヤとエンハンスメントレイヤとに関連付けられたビデオ情報を記憶するための手段と、前記参照レイヤが参照レイヤ（ＲＬ）コーデックに関連付けられ、前記エンハンスメントレイヤがエンハンスメントレイヤ（ＥＬ）コーデックに関連付けられ、
    前記参照レイヤに関連付けられた前記ＲＬコーデックが特定のタイプのコーデックであるかどうかを決定するための手段と、
    前記ＲＬコーデックが特定のタイプのコーデックであるという決定に基づいて、前記参照レイヤの動き情報が前記エンハンスメントレイヤをコーディングするために使用され得るかどうかを示すように構成された第１のフラグまたはシンタックス要素を、ビデオビットストリーム中で処理することなしに、前記参照レイヤの前記動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないと決定するための手段と
    を備え、
    前記ビデオコーディングデバイスは、
    前記ＲＬコーデックが前記特定のタイプのコーデックであるという前記決定に基づいて、前記ビデオビットストリーム中で、前記第１のフラグまたはシンタックス要素をシグナリングするのを控えるための手段、
    をさらに備える、ビデオコーディングデバイス。
13. 前記ＲＬコーデックがＡＶＣコーデックであるかどうかを示す追加のフラグまたはシンタックス要素をシグナリングすることなしに、前記参照レイヤの前記動き情報が前記エンハンスメントレイヤをコーディングするために使用され得ないと、前記ＲＬコーデックがＡＶＣコーデックであるかどうかに基づいて、決定するための手段をさらに備える、請求項１２に記載のビデオコーディングデバイス。

Images