JP7354260B2 - Ｍｒｌ基盤のイントラ予測を実行する映像コーディング方法及び装置 - Google Patents

Description

本文書は、映像コーディング技術に関し、より詳しくは、ＭＲＬ（ｍｕｌｔｉ－ｒｅｆｅｒｅｎｃｅ ｌｉｎｅ）基盤のイントラ予測を実行する映像コーディング方法及び装置に関する。

近年、４Ｋまたは８Ｋ以上のＵＨＤ（Ｕｌｔｒａ Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）画像／ビデオのような高解像度、高品質の画像／ビデオに対する需要が様々な分野で増加している。画像／ビデオデータが高解像度、高品質になるほど、既存の画像／ビデオデータに比べて相対的に送信される情報量またはビット量が増加するので、既存の有無線広帯域回線のような媒体を利用して画像データを送信するか、既存の格納媒体を利用して画像／ビデオデータを格納する場合、送信費用と格納費用が増加される。

また、近年、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）、ＡＲ（Ａｒｔｉｆｉｃｉａｌ Ｒｅａｌｔｉｙ）コンテンツやホログラムなどの実感メディア（Ｉｍｍｅｒｓｉｖｅ Ｍｅｄｉａ）に対する関心及び需要が増加しており、ゲーム画像のように、現実画像と異なる画像特性を有する画像／ビデオに対する放送が増加している。

これにより、上記のような様々な特性を有する高解像度・高品質の画像／ビデオの情報を効果的に圧縮して送信するか、格納し、再生するために高効率の画像／ビデオ圧縮技術が求められる。

本文書の技術的課題は、映像コーディング効率を上げる方法及び装置を提供することにある。

本文書の他の技術的課題は、効率的なイントラ予測方法及び装置を提供することにある。

本文書の他の技術的課題は、ＭＲＬ（ｍｕｌｔｉ－ｒｅｆｅｒｅｎｃｅ ｌｉｎｅ）基盤のイントラ予測でＤＣモードを適用し、またＤＣモードを含むＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）リストを構成する方法及び装置を提供することにある。

〔技術的解決方法〕
本文書の一実施例によると、デコーディング装置により実行される映像デコーディング方法が提供される。前記方法は、現在ブロックに対する候補イントラ予測モードを含むＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）リストを構成するステップと、前記ＭＰＭリストに含まれている前記候補イントラ予測モードのうち、前記現在ブロックのためのイントラ予測モードを指示するＭＰＭインデックス情報に基づいて、前記ＭＰＭリストから前記現在ブロックのイントラ予測モードを導出するステップと、前記イントラ予測モードに基づいて前記現在ブロックに対する予測サンプルを生成するステップと、及び前記予測サンプルに基づいて前記現在ブロックに対する復元ピクチャを生成するステップを含み、前記ＭＰＭリストを構成するステップは、前記現在ブロックのイントラ予測のために使われる参照ラインを示す参照ラインインデックス情報の値が０でない場合に基づいて、ＤＣモードを前記候補イントラ予測モードのうち一つとして導出して前記ＭＰＭリストに含ませることを特徴とする。

本文書の他の一実施例によると、エンコーディング装置により実行される映像エンコーディング方法が提供される。前記方法は、現在ブロックに対する候補イントラ予測モードを含むＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）リストを構成するステップと、前記ＭＰＭリストに含まれている前記候補イントラ予測モードに基づいて前記現在ブロックのイントラ予測モードを導出するステップと、前記ＭＰＭリストに含まれている前記候補イントラ予測モードのうち前記現在ブロックのイントラ予測モードを指示するＭＰＭインデックス情報を生成するステップと、及び前記現在ブロックのイントラ予測のために使われる参照ラインを示す参照ラインインデックス情報または前記ＭＰＭインデックス情報のうち少なくとも一つを含む映像情報をエンコーディングするステップを含み、前記ＭＰＭリストを構成するステップは、前記参照ラインインデックス情報の値が０でない場合に基づいて、ＤＣモードを前記候補イントラ予測モードのうち一つとして導出して前記ＭＰＭリストに含ませることを特徴とする。

本文書の他の一実施例によると、コンピュータ読み取り可能なデジタル格納媒体であって、請求項１に記載された映像デコーディング方法を実行するようにするエンコーディングされた映像情報が格納されたデジタル格納媒体が提供される。

本文書によると、全般的な映像／ビデオ圧縮効率を上げることができる。

本文書によると、効率的なイントラ予測を介して計算複雑度を減らし、かつ予測性能を向上させることによって全般的なコーディング効率を向上させることができる。

本文書によると、ＭＲＬ基盤のイントラ予測でＤＣモードを含むＭＰＭリストを構成し、ＭＲＬを使用してＤＣモードイントラ予測を実行することによって、予測の正確度を高めることができ、これを介して全般的なコーディング効率を向上させることができる。

本文書の実施例に適用されることができるビデオ／映像コーディングシステムの例を概略的に示す。 本文書の実施例に適用されることができるビデオ／映像エンコーディング装置の構成を概略的に説明する図である。 本文書の実施例に適用されることができるビデオ／映像デコーディング装置の構成を概略的に説明する図である。 本文書の実施例が適用可能な概略的なイントラ予測に基づく映像エンコーディング方法の一例を示す。 エンコーディング装置内のイントラ予測部を概略的に示す。 本文書の実施例が適用可能な概略的なイントラ予測に基づく映像デコーディング方法の一例を示す。 デコーディング装置内のイントラ予測部を概略的に示す。 本文書の実施例が適用可能なエンコーディング装置におけるＭＰＭモード基盤のイントラ予測方法の一例を示す。 本文書の実施例が適用可能なデコーディング装置におけるＭＰＭモード基盤のイントラ予測方法の一例を示す。 本文書の実施例が適用可能なイントラ予測モードの一例を示す。 多重参照ラインを利用するイントラ予測のための参照サンプルラインの一例を示す。 ＤＣモードで予測サンプルを導出する方法の一実施例を説明するための図である。 ＤＣモードで予測サンプルを導出する方法の他の実施例を説明するための図である。 本文書の一実施例によるエンコーディング装置により実行されることができるエンコーディング方法を概略的に示す流れ図である。 本文書の一実施例によるデコーディング装置により実行されることができるデコーディング方法を概略的に示す流れ図である。 本文書に開示された実施例が適用されることができるコンテンツストリーミングシステムの例を示す。

本文書は、様々な変更を加えることができ、種々の実施例を有することができ、特定実施例を図面に例示し、詳細に説明しようとする。しかしながら、これは、本文書を特定実施例に限定しようとするものではない。本明細書で常用する用語は、単に特定の実施例を説明するために使用されたものであって、本文書の技術的思想を限定しようとする意図で使用されるものではない。単数の表現は、文脈上明白に異なるように意味しない限り、複数の表現を含む。本明細書において「含む」または「有する」などの用語は、明細書上に記載された特徴、数字、ステップ、動作、構成要素、部品、またはこれらを組み合わせたものが存在することを指定しようとするものであり、一つまたはそれ以上の他の特徴や数字、ステップ、動作、構成要素、部品、またはこれらを組み合わせたものなどの存在または付加可能性を予め排除しないことと理解されるべきである。

一方、本文書で説明される図面上の各構成は、互いに異なる特徴的な機能に関する説明の都合上、独立的に図示されたものであって、各構成が互いに別個のハードウェアや別個のソフトウェアで具現されるということを意味するものではない。例えば、各構成のうち、二つ以上の構成が結合されて一つの構成をなすこともでき、一つの構成を複数の構成に分けることもできる。各構成が統合及び／または分離された実施例も本文書の本質から外れない限り、本文書の権利範囲に含まれる。

以下、添付図面を参照して、本文書の好ましい実施例をより詳細に説明する。以下、図面上の同じ構成要素に対しては、同じ参照符号を使用し、同じ構成要素に対して重複した説明は省略されることができる。

この文書は、ビデオ／映像コーディングに関する。例えば、この文書に開示された方法／実施例は、ＶＶＣ（ｖｅｒｓａｔｉｌｅ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準、ＥＶＣ（ｅｓｓｅｎｔｉａｌ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準、ＡＶ１（ＡＯＭｅｄｉａ Ｖｉｄｅｏ １）標準、ＡＶＳ２（２ｎｄ ｇｅｎｅｒａｔｉｏｎ ｏｆ ａｕｄｉｏ ｖｉｄｅｏ ｃｏｄｉｎｇ ｓｔａｎｄａｒｄ）、または、次世代ビデオ／映像コーディング標準（例えば、Ｈ．２６７またはＨ．２６８等）に開示される方法に適用されることができる。

この文書では、ビデオ／映像コーディングに関する様々な実施例を提示し、他の言及がない限り、前記実施例は、互いに組み合わせられて実行されることもできる。

この文書において、ビデオ（ｖｉｄｅｏ）は、時間の流れによる一連の映像（ｉｍａｇｅ）の集合を意味することができる。ピクチャ（ｐｉｃｔｕｒｅ）は、一般的に特定時間帯の一つの映像を示す単位を意味し、スライス（ｓｌｉｃｅ）／タイル（ｔｉｌｅ）は、コーディングにおいてピクチャの一部を構成する単位である。スライス／タイルは、一つ以上のＣＴＵ（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）を含むことができる。一つのピクチャは、一つ以上のスライス／タイルで構成されることができる。一つのピクチャは、一つ以上のタイルグループで構成されることができる。一つのタイルグループは、一つ以上のタイルを含むことができる。ブリックは、ピクチャ内のタイル以内のＣＴＵ行の四角領域を示すことができる（ａ ｂｒｉｃｋ ｍａｙ ｒｅｐｒｅｓｅｎｔ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵ ｒｏｗｓ ｗｉｔｈｉｎ ａ ｔｉｌｅ ｉｎ ａ ｐｉｃｔｕｒｅ）。タイルは、複数のブリックにパーティショニングされることができ、各ブリックは、前記タイル内の一つ以上のＣＴＵ行で構成されることができる（Ａ ｔｉｌｅ ｍａｙ ｂｅ ｐａｒｔｉｔｉｏｎｅｄ ｉｎｔｏ ｍｕｌｔｉｐｌｅ ｂｒｉｃｋｓ，ｅａｃｈ ｏｆ ｗｈｉｃｈ ｃｏｎｓｉｓｔｉｎｇ ｏｆ ｏｎｅ ｏｒ ｍｏｒｅ ＣＴＵ ｒｏｗｓ ｗｉｔｈｉｎ ｔｈｅ ｔｉｌｅ）。また、複数のブリックにパーティショニングされないタイルはブリックと呼ばれることもできる（Ａ ｔｉｌｅ ｔｈａｔ ｉｓ ｎｏｔ ｐａｒｔｉｔｉｏｎｅｄ ｉｎｔｏ ｍｕｌｔｉｐｌｅ ｂｒｉｃｋｓ ｍａｙ ｂｅ ａｌｓｏ ｒｅｆｅｒｒｅｄ ｔｏ ａｓ ａ ｂｒｉｃｋ）。ブリックスキャンは、ピクチャをパーティショニングするＣＴＵの特定の順次的オーダリングを示すことができ、前記ＣＴＵは、ブリック内でＣＴＵラスタースキャンで整列されることができ、タイル内のブリックは、前記タイルの前記ブリックのラスタースキャンで連続的に整列されることができ、そして、ピクチャ内のタイルは、前記ピクチャの前記タイルのラスタースキャンで連続的に整列されることができる（Ａ ｂｒｉｃｋ ｓｃａｎ ｉｓ ａ ｓｐｅｃｉｆｉｃ ｓｅｑｕｅｎｔｉａｌ ｏｒｄｅｒｉｎｇ ｏｆ ＣＴＵｓ ｐａｒｔｉｔｉｏｎｉｎｇ ａ ｐｉｃｔｕｒｅ ｉｎ ｗｈｉｃｈ ｔｈｅ ＣＴＵｓ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ＣＴＵ ｒａｓｔｅｒ ｓｃａｎ ｉｎ ａ ｂｒｉｃｋ， ｂｒｉｃｋｓ ｗｉｔｈｉｎ ａ ｔｉｌｅ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ａ ｒａｓｔｅｒ ｓｃａｎ ｏｆ ｔｈｅ ｂｒｉｃｋｓ ｏｆ ｔｈｅ ｔｉｌｅ， ａｎｄ ｔｉｌｅｓ ｉｎ ａ ｐｉｃｔｕｒｅ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ａ ｒａｓｔｅｒ ｓｃａｎ ｏｆ ｔｈｅ ｔｉｌｅｓ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。タイルは、特定タイル列及び特定タイル列以内のＣＴＵの四角領域である（Ａ ｔｉｌｅ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｗｉｔｈｉｎ ａ ｐａｒｔｉｃｕｌａｒ ｔｉｌｅ ｃｏｌｕｍｎ ａｎｄ ａ ｐａｒｔｉｃｕｌａｒ ｔｉｌｅ ｒｏｗ ｉｎ ａ ｐｉｃｔｕｒｅ）。前記タイル列は、ＣＴＵの四角領域であり、前記四角領域は、前記ピクチャの高さと同じ高さを有し、幅は、ピクチャパラメータセット内のシンタックス要素により明示されることができる（Ｔｈｅ ｔｉｌｅ ｃｏｌｕｍｎ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｈａｖｉｎｇ ａ ｈｅｉｇｈｔ ｅｑｕａｌ ｔｏ ｔｈｅ ｈｅｉｇｈｔ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ ａｎｄ ａ ｗｉｄｔｈ ｓｐｅｃｉｆｉｅｄ ｂｙ ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ ｉｎ ｔｈｅ ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）。前記タイル行は、ＣＴＵの四角領域であり、前記四角領域は、ピクチャパラメータセット内のシンタックス要素により明示される幅を有し、高さは、前記ピクチャの高さと同じである（Ｔｈｅ ｔｉｌｅ ｒｏｗ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｈａｖｉｎｇ ａ ｈｅｉｇｈｔ ｓｐｅｃｉｆｉｅｄ ｂｙ ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ ｉｎ ｔｈｅ ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ ａｎｄ ａ ｗｉｄｔｈ ｅｑｕａｌ ｔｏ ｔｈｅ ｗｉｄｔｈ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。タイルスキャンは、ピクチャをパーティショニングするＣＴＵの特定順次的オーダリングを示すことができ、前記ＣＴＵは、タイル内のＣＴＵラスタースキャンで連続的に整列されることができ、ピクチャ内のタイルは、前記ピクチャの前記タイルのラスタースキャンで連続的に整列されることができる（Ａ ｔｉｌｅ ｓｃａｎ ｉｓ ａ ｓｐｅｃｉｆｉｃ ｓｅｑｕｅｎｔｉａｌ ｏｒｄｅｒｉｎｇ ｏｆ ＣＴＵｓ ｐａｒｔｉｔｉｏｎｉｎｇ ａ ｐｉｃｔｕｒｅ ｉｎ ｗｈｉｃｈ ｔｈｅ ＣＴＵｓ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ＣＴＵ ｒａｓｔｅｒ ｓｃａｎ ｉｎ ａ ｔｉｌｅ ｗｈｅｒｅａｓ ｔｉｌｅｓ ｉｎ ａ ｐｉｃｔｕｒｅ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ａ ｒａｓｔｅｒ ｓｃａｎ ｏｆ ｔｈｅ ｔｉｌｅｓ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。スライスは、ピクチャの整数個のブリックを含むことができ、前記整数個のブリックは、一つのＮＡＬユニットに含まれることができる（Ａ ｓｌｉｃｅ ｉｎｃｌｕｄｅｓ ａｎ ｉｎｔｅｇｅｒ ｎｕｍｂｅｒ ｏｆ ｂｒｉｃｋｓ ｏｆ ａ ｐｉｃｔｕｒｅ ｔｈａｔ ｍａｙ ｂｅ ｅｘｃｌｕｓｉｖｅｌｙ ｃｏｎｔａｉｎｅｄ ｉｎ ａ ｓｉｎｇｌｅ ＮＡＬ ｕｎｉｔ）。スライスは、複数の完全なタイルで構成されることができ、または、一つのタイルの完全なブリックの連続的なシーケンスである（Ａ ｓｌｉｃｅ ｍａｙ ｃｏｎｓｉｓｔｓ ｏｆ ｅｉｔｈｅｒ ａ ｎｕｍｂｅｒ ｏｆ ｃｏｍｐｌｅｔｅ ｔｉｌｅｓ ｏｒ ｏｎｌｙ ａ ｃｏｎｓｅｃｕｔｉｖｅ ｓｅｑｕｅｎｃｅ ｏｆ ｃｏｍｐｌｅｔｅ ｂｒｉｃｋｓ ｏｆ ｏｎｅ ｔｉｌｅ）。この文書において、タイルグループとスライスとは混用されることができる。例えば、本文書において、ｔｉｌｅ ｇｒｏｕｐ／ｔｉｌｅ ｇｒｏｕｐ ｈｅａｄｅｒは、ｓｌｉｃｅ／ｓｌｉｃｅ ｈｅａｄｅｒと呼ばれることができる。

ピクセル（ｐｉｘｅｌ）またはペル（ｐｅｌ）は、一つのピクチャ（または、映像）を構成する最小の単位を意味することができる。また、ピクセルに対応する用語として「サンプル（ｓａｍｐｌｅ）」が使用されることができる。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、ルマ（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すこともでき、クロマ（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。または、サンプルは、空間ドメインでのピクセル値を意味することもでき、このようなピクセル値が周波数ドメインに変換されると、周波数ドメインでの変換係数を意味することもできる。

ユニット（ｕｎｉｔ）は、映像処理の基本単位を示すことができる。ユニットは、ピクチャの特定領域及び当該領域に関連した情報のうち少なくとも一つを含むことができる。一つのユニットは、一つのルマブロック及び二つのクロマ（例えば、ｃｂ、ｃｒ）ブロックを含むことができる。ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプル（または、サンプルアレイ）、または変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）の集合（または、アレイ）を含むことができる。

この文書において「／」と「、」とは、「及び／または」と解釈される。例えば、「Ａ／Ｂ」は、「Ａ及び／またはＢ」と解釈され、「Ａ、Ｂ」は、「Ａ及び／またはＢ」と解釈される。追加的に、「Ａ／Ｂ／Ｃ」は、「Ａ、Ｂ及び／またはＣのうち少なくとも一つ」を意味する。また、「Ａ、Ｂ、Ｃ」も「Ａ、Ｂ及び／またはＣのうち少なくとも一つ」を意味する。

追加的に、本文書において「または」は、「及び／または」と解釈される。例えば、「ＡまたはＢ」は、１）「Ａ」のみを意味し、または２）「Ｂ」のみを意味し、または３）「Ａ及びＢ」を意味することができる。その他の表現として、本文書の「または」は、「追加的にまたは代替的に（ａｄｄｉｔｉｏｎａｌｌｙ ｏｒ ａｌｔｅｒｎａｔｉｖｅｌｙ）」を意味することができる。

図１は、本文書の実施例に適用されることができるビデオ／映像コーディングシステムの例を概略的に示す。

図１を参照すると、ビデオ／映像コーディングシステムは、第１の装置（ソースデバイス）及び第２の装置（受信デバイス）を含むことができる。ソースデバイスは、エンコーディングされたビデオ（ｖｉｄｅｏ）／映像（ｉｍａｇｅ）情報またはデータをファイルまたはストリーミング形態でデジタル格納媒体またはネットワークを介して受信デバイスに伝達できる。

前記ソースデバイスは、ビデオソース、エンコーディング装置、送信部を含むことができる。前記受信デバイスは、受信部、デコーディング装置、及びレンダラを含むことができる。前記エンコーディング装置は、ビデオ／映像エンコーディング装置と呼ばれることができ、前記デコーディング装置は、ビデオ／映像デコーディング装置と呼ばれることができる。送信機は、エンコーディング装置に含まれることができる。受信機は、デコーディング装置に含まれることができる。レンダラは、ディスプレイ部を含むこともでき、ディスプレイ部は、別個のデバイスまたは外部コンポーネントで構成されることもできる。

ビデオソースは、ビデオ／映像のキャプチャ、合成または生成過程などを介してビデオ／映像を取得することができる。ビデオソースは、ビデオ／映像キャプチャデバイス及び／またはビデオ／映像生成デバイスを含むことができる。ビデオ／映像キャプチャデバイスは、例えば、一つ以上のカメラ、以前にキャプチャされたビデオ／映像を含むビデオ／映像アーカイブなどを含むことができる。ビデオ／映像生成デバイスは、例えば、コンピュータ、タブレット、及びスマートフォンなどを含むことができ、（電子的に）ビデオ／映像を生成することができる。例えば、コンピュータなどを介して仮想のビデオ／映像が生成されることができ、この場合、ビデオ／映像キャプチャ過程を関連データが生成される過程に代替されることができる。

エンコーディング装置は、入力ビデオ／映像をエンコーディングすることができる。エンコーディング装置は、圧縮及びコーディング効率のために、予測、変換、量子化など、一連の手順を実行することができる。エンコーディングされたデータ（エンコーディングされたビデオ／映像情報）は、ビットストリーム（ｂｉｔｓｔｒｅａｍ）形態で出力されることができる。

送信部は、ビットストリーム形態で出力されたエンコーディングされたビデオ／映像情報またはデータをファイルまたはストリーミング形態でデジタル格納媒体またはネットワークを介して受信デバイスの受信部に伝達できる。デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、多様な格納媒体を含むことができる。送信部は、あらかじめ決められたファイルフォーマットを介してメディアファイルを生成するためのエレメントを含むことができ、放送／通信ネットワークを介した送信のためのエレメントを含むことができる。受信部は、前記ビットストリームを受信／抽出してデコーディング装置に伝達できる。

デコーディング装置は、エンコーディング装置の動作に対応する逆量子化、逆変換、予測など、一連の手順を実行してビデオ／映像をデコーディングすることができる。

レンダラは、デコーディングされたビデオ／映像をレンダリングすることができる。レンダリングされたビデオ／映像は、ディスプレイ部を介してディスプレイされることができる。

図２は、本文書の実施例に適用されることができるビデオ／映像エンコーディング装置の構成を概略的に説明する図である。以下、ビデオエンコーディング装置とは、映像エンコーディング装置を含むことができる。

図２に示すように、エンコーディング装置２００は、画像分割部（ｉｍａｇｅ ｐａｒｔｉｔｉｏｎｅｒ）２１０、予測部（ｐｒｅｄｉｃｔｏｒ）２２０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）２３０、エントロピーエンコーディング部（ｅｎｔｒｏｐｙ ｅｎｃｏｄｅｒ）２４０、加算部（ａｄｄｅｒ）２５０、フィルタリング部（ｆｉｌｔｅｒ）２６０、及びメモリ（ｍｅｍｏｒｙ）２７０を備えて構成されることができる。予測部２２０は、インター予測部２２１及びイントラ予測部２２２を備えることができる。レジデュアル処理部２３０は、変換部（ｔｒａｎｓｆｏｒｍｅｒ）２３２、量子化部（ｑｕａｎｔｉｚｅｒ）２３３、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）２３４、逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）２３５を備えることができる。レジデュアル処理部２３０は、減算部（ｓｕｂｔｒａｃｔｏｒ、２３１）をさらに備えることができる。加算部２５０は、復元部（ｒｅｃｏｎｓｔｒｕｃｔｏｒ）または復元ブロック生成部（ｒｅｃｏｎｔｒｕｃｔｇｅｄ ｂｌｏｃｋ ｇｅｎｅｒａｔｏｒ）と呼ばれることができる。上述した画像分割部２１０、予測部２２０、レジデュアル処理部２３０、エントロピーエンコーディング部２４０、加算部２５０、及びフィルタリング部２６０は、実施形態によって１つ以上のハードウェアコンポーネント（例えば、エンコーダチップセットまたはプロセッサ）によって構成されることができる。また、メモリ２７０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体によって構成されることもできる。前記ハードウェアコンポーネントは、メモリ２７０を内／外部コンポーネントとしてさらに備えることもできる。

画像分割部２１０は、エンコーディング装置２００に入力された入力画像（または、ピクチャ、フレーム）を１つ以上の処理ユニット（ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）に分割することができる。一例として、前記処理ユニットは、コーディングユニット（ｃｏｄｉｎｇ ｕｎｉｔ、ＣＵ）と呼ばれることができる。この場合、コーディングユニットは、コーディングツリーユニット（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ、ＣＴＵ）または最大コーディングユニット（ｌａｒｇｅｓｔ ｃｏｄｉｎｇ ｕｎｉｔ、ＬＣＵ）からＱＴＢＴＴＴ（Ｑｕａｄ－ｔｒｅｅ ｂｉｎａｒｙ－ｔｒｅｅ ｔｅｒｎａｒｙ－ｔｒｅｅ）構造によって再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）分割されることができる。例えば、１つのコーディングユニットは、クアッドツリー構造、バイナリツリー構造、及び／またはターナリ構造に基づいて下位（ｄｅｅｐｅｒ）デプスの複数のコーディングユニットに分割されることができる。この場合、例えば、クアッドツリー構造が先に適用され、バイナリツリー構造及び／またはターナリ構造がその後に適用されることができる。または、バイナリツリー構造が先に適用されることもできる。それ以上分割されない最終コーディングユニットに基づいて本開示に係るコーディング手順が行われ得る。この場合、画像特性によるコーディング効率などに基づいて、最大コーディングユニットが最終コーディングユニットとして使用されることができ、または、必要に応じてコーディングユニットは、再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）もっと下位デプスのコーディングユニットに分割されて最適のサイズのコーディングユニットが最終コーディングユニットとして使用されることができる。ここで、コーディング手順とは、後述する予測、変換、及び復元などの手順を含むことができる。他の例として、前記処理ユニットは、予測ユニット（ＰＵ：Ｐｒｅｄｉｃｔｉｏｎ Ｕｎｉｔ）または変換ユニット（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）をさらに備えることができる。この場合、前記予測ユニット及び前記変換ユニットは、各々上述した最終コーディングユニットから分割またはパーティショニングされることができる。前記予測ユニットは、サンプル予測の単位であることができ、前記変換ユニットは、変換係数を導く単位及び／または変換係数からレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ）を導く単位であることができる。

ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプルまたは変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）等の集合を示すことができる。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、輝度（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すことができ、彩度（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。サンプルは、１つのピクチャ（または、画像）をピクセル（ｐｉｘｅｌ）またはペル（ｐｅｌ）に対応する用語として使用することができる。

エンコーディング装置２００は、入力画像信号（原本ブロック、原本サンプルアレイ）でインター予測部２２１またはイントラ予測部２２２から出力された予測信号（予測されたブロック、予測サンプルアレイ）を減算してレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ、残余ブロック、残余サンプルアレイ）を生成することができ、生成されたレジデュアル信号は、変換部２３２に送信される。この場合、図示されたように、エンコーダ２００内において入力画像信号（原本ブロック、原本サンプルアレイ）で予測信号（予測ブロック、予測サンプルアレイ）を減算するユニットは、減算部２３１と呼ばれることができる。予測部は、処理対象ブロック（以下、現在ブロックという）に対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、現在ブロックまたはＣＵ単位でイントラ予測が適用されるか、またはインター予測が適用されるかを決定することができる。予測部は、各予測モードについての説明で後述するように、予測モード情報など、予測に関する様々な情報を生成してエントロピーエンコーディング部２４０に伝達することができる。予測に関する情報は、エントロピーエンコーディング部２４０でエンコーディングされてビットストリーム形態で出力されることができる。

イントラ予測部２２２は、現在ピクチャ内のサンプルを参照して現在ブロックを予測できる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置することができ、または、離れて位置することもできる。イントラ予測で予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。非方向性モードは、例えば、ＤＣモード及びプラナーモード（Ｐｌａｎａｒモード）を含むことができる。方向性モードは、予測方向の細かい程度によって、例えば、３３個の方向性予測モードまたは６５個の方向性予測モードを含むことができる。ただし、これは、例示であり、設定によってそれ以上またはそれ以下の個数の方向性予測モードが使用され得る。イントラ予測部２２２は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。

インター予測部２２１は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと前記時間的隣接ブロックを含む参照ピクチャとは同じであることができ、異なることもできる。前記時間的隣接ブロックは、同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同一位置ＣＵ（ｃｏｌ ＣＵ）などの名前で呼ばれることができ、前記時間的隣接ブロックを含む参照ピクチャは、同一位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもできる。例えば、インター予測部２２１は、隣接ブロックに基づいて動き情報候補リストを構成し、前記現在ブロックの動きベクトル及び／または参照ピクチャインデックスを導出するために、どの候補が使用されるかを指示する情報を生成することができる。様々な予測モードに基づいてインター予測が行われ得るし、例えば、スキップモードとマージモードとの場合に、インター予測部２２１は、隣接ブロックの動き情報を現在ブロックの動き情報として利用することができる。スキップモードの場合、マージモードとは異なり、レジデュアル信号が送信されないことがある。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として用い、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）をシグナリングすることにより、現在ブロックの動きベクトルを指示することができる。

予測部２２０は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、１つのブロックに対する予測のために、イントラ予測またはインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）予測モードに基づくことができ、または、パレットモード（ｐａｌｅｔｔｅ ｍｏｄｅ）に基づくこともできる。前記ＩＢＣ予測モードまたはパレットモードは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ画像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。即ち、ＩＢＣは、本文書において説明されるインター予測技法のうち少なくとも１つを利用することができる。パレットモードは、イントラコーディングまたはイントラ予測の一例と見なすことができる。パレットモードが適用される場合、パレットテーブル及びパレットインデックスに関する情報に基づいてピクチャ内のサンプル値をシグナリングすることができる。

前記予測部（インター予測部２２１及び／または前記イントラ予測部２２２を備える）を介して生成された予測信号は、復元信号を生成するために用いられるか、レジデュアル信号を生成するために用いられることができる。変換部２３２は、レジデュアル信号に変換技法を適用して変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔｓ）を生成することができる。例えば、変換技法は、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＤＳＴ（Ｄｉｓｃｒｅｔｅ Ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＫＬＴ（Ｋａｒｈｕｎｅｎ－Ｌｏｅｖｅ Ｔｒａｎｓｆｏｒｍ）、ＧＢＴ（Ｇｒａｐｈ－Ｂａｓｅｄ Ｔｒａｎｓｆｏｒｍ）、またはＣＮＴ（Ｃｏｎｄｉｔｉｏｎａｌｌｙ Ｎｏｎ－ｌｉｎｅａｒ Ｔｒａｎｓｆｏｒｍ）のうち少なくとも１つを含むことができる。ここで、ＧＢＴは、ピクセル間の関係情報をグラフで表現しようとするとき、このグラフから得られた変換を意味する。ＣＮＴは、以前に復元された全てのピクセル（ａｌｌ ｐｒｅｖｉｏｕｓｌｙ ｒｅｃｏｎｓｔｒｕｃｔｅｄ ｐｉｘｅｌ）を用いて予測信号を生成し、それに基づいて取得される変換を意味する。また、変換過程は、正方形の同じ大きさを有するピクセルブロックに適用されることができ、正方形でない可変大きさのブロックにも適用されることができる。

量子化部２３３は、変換係数を量子化してエントロピーエンコーディング部２４０に送信され、エントロピーエンコーディング部２４０は、量子化された信号（量子化された変換係数に関する情報）をエンコーディングしてビットストリームに出力することができる。前記量子化された変換係数に関する情報は、レジデュアル情報と呼ばれることができる。量子化部２３３は、係数スキャン順序（ｓｃａｎ ｏｒｄｅｒ）に基づいてブロック形態の量子化された変換係数を１次元ベクトル形態で再整列することができ、前記１次元ベクトル形態の量子化された変換係数に基づいて前記量子化された変換係数に関する情報を生成することもできる。エントロピーエンコーディング部２４０は、例えば、指数ゴロム（ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）、ＣＡＶＬＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）、ＣＡＢＡＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｂｉｎａｒｙ ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）などのような様々なエンコーディング方法を行うことができる。エントロピーエンコーディング部２４０は、量子化された変換係数の他に、ビデオ／イメージ復元に必要な情報（例えば、シンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ）の値等）を共にまたは別にエンコーディングすることもできる。エンコーディングされた情報（例えば、エンコーディングされたビデオ／画像情報）は、ビットストリーム形態でＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ）ユニット単位で送信または格納されることができる。前記ビデオ／画像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、またはビデオパラメータセット（ＶＰＳ）等、様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／画像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。本文書において、エンコーディング装置からデコーディング装置に伝達／シグナリングされる情報及び／またはシンタックス要素は、ビデオ／画像情報に含まれることができる。前記ビデオ／画像情報は、上述したエンコーディング手順を介してエンコーディングされて前記ビットストリームに含まれることができる。前記ビットストリームは、ネットワークを介して送信されることができ、または、デジタル格納媒体に格納されることができる。ここで、ネットワークは、放送網及び／または通信網などを含むことができ、デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な格納媒体を含むことができる。エントロピーエンコーディング部２４０から出力された信号は、送信する送信部（図示せず）及び／または格納する格納部（図示せず）がエンコーディング装置２００の内／外部エレメントとして構成されることができ、または、送信部は、エントロピーエンコーディング部２４０に含まれることもできる。

量子化部２３３から出力された量子化された変換係数は、予測信号を生成するために用いられることができる。例えば、量子化された変換係数に逆量子化部２３４及び逆変換部２３５を介して逆量子化及び逆変換を適用することにより、レジデュアル信号（レジデュアルブロックまたはレジデュアルサンプル）を復元できる。加算部１５５は、復元されたレジデュアル信号をインター予測部２２１またはイントラ予測部２２２から出力された予測信号に加えることにより、復元（ｒｅｃｏｎｓｔｒｕｃｔｅｄ）信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）が生成され得る。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。加算部２５０は、復元部または復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て次のピクチャのインター予測のために使用されることもできる。

一方、ピクチャエンコーディング及び／または復元過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。

フィルタリング部２６０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部２６０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ２７０、具体的に、メモリ２７０のＤＰＢに格納することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。フィルタリング部２６０は、各フィルタリング方法についての説明で後述するように、フィルタリングに関する様々な情報を生成してエントロピーエンコーディング部２４０に伝達することができる。フィルタリングに関する情報は、エントロピーエンコーディング部２４０でエンコーディングされてビットストリーム形態で出力されることができる。

メモリ２７０に送信された修正された復元ピクチャは、インター予測部２２１で参照ピクチャとして使用されることができる。エンコーディング装置は、これを介してインター予測が適用される場合、エンコーディング装置１００とデコーディング装置における予測ミスマッチを避けることができ、符号化効率も向上させることができる。

メモリ２７０のＤＰＢは、修正された復元ピクチャをインター予測部２２１における参照ピクチャとして使用するために格納することができる。メモリ２７０は、現在ピクチャ内の動き情報が導出された（または、エンコーディングされた）ブロックの動き情報及び／または既に復元されたピクチャ内のブロックの動き情報を格納することができる。前記格納された動き情報は、空間的隣接ブロックの動き情報または時間的隣接ブロックの動き情報として活用するために、インター予測部２２１に伝達することができる。メモリ２７０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納することができ、イントラ予測部２２２に伝達することができる。

図３は、本文書の実施例に適用されることができるビデオ／映像デコーディング装置の構成を概略的に説明する図である。

図３に示すように、デコーディング装置３００は、エントロピーデコーディング部（ｅｎｔｒｏｐｙ ｄｅｃｏｄｅｒ）３１０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）３２０、予測部（ｐｒｅｄｉｃｔｏｒ）３３０、加算部（ａｄｄｅｒ）３４０、フィルタリング部（ｆｉｌｔｅｒ）３５０、及びメモリ（ｍｅｍｏｅｒｙ）３６０を備えて構成されることができる。予測部３３０は、インター予測部３３１及びイントラ予測部３３２を備えることができる。レジデュアル処理部３２０は、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）３２１及び逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）３２１を備えることができる。上述したエントロピーデコーディング部３１０、レジデュアル処理部３２０、予測部３３０、加算部３４０、及びフィルタリング部３５０は、実施形態によって１つのハードウェアコンポーネント（例えば、デコーダチップセットまたはプロセッサ）により構成されることができる。また、メモリ３６０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体により構成されることもできる。前記ハードウェアコンポーネントは、メモリ３６０を内／外部コンポーネントとしてさらに備えることもできる。

ビデオ／画像情報を含むビットストリームが入力されれば、デコーディング装置３００は、図３のエンコーディング装置でビデオ／画像情報が処理されたプロセスに対応して画像を復元できる。例えば、デコーディング装置３００は、前記ビットストリームから取得したブロック分割関連情報に基づいてユニット／ブロックを導出することができる。デコーディング装置３００は、エンコーディング装置で適用された処理ユニットを用いてデコーディングを行うことができる。したがって、デコーディングの処理ユニットは、例えば、コーディングユニットであることができ、コーディングユニットは、コーディングツリーユニットまたは最大コーディングユニットからクアッドツリー構造、バイナリツリー構造、及び／またはターナリツリー構造にしたがって分割されることができる。コーディングユニットから１つ以上の変換ユニットが導出され得る。そして、デコーディング装置３００を介してデコーディング及び出力された復元画像信号は、再生装置を介して再生されることができる。

デコーディング装置３００は、図３のエンコーディング装置から出力された信号をビットストリーム形態で受信することができ、受信された信号は、エントロピーデコーディング部３１０を介してデコーディングされることができる。例えば、エントロピーデコーディング部３１０は、前記ビットストリームをパーシングして画像復元（または、ピクチャ復元）に必要な情報（例えば、ビデオ／画像情報）を導出することができる。前記ビデオ／画像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、またはビデオパラメータセット（ＶＰＳ）など、様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／画像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。デコーディング装置は、前記パラメータセットに関する情報及び／または前記一般制限情報に基づいてさらにピクチャをデコーディングすることができる。本文書において後述されるシグナリング／受信される情報及び／またはシンタックス要素は、前記デコーディング手順を介してデコーディングされて、前記ビットストリームから取得されることができる。例えば、エントロピーデコーディング部３１０は、指数ゴロム符号化、ＣＡＶＬＣ、またはＣＡＢＡＣなどのコーディング方法を基にビットストリーム内の情報をデコーディングし、画像復元に必要なシンタックスエレメントの値、レジデュアルに関する変換係数の量子化された値を出力できる。より具体的に、ＣＡＢＡＣエントロピーデコーディング方法は、ビットストリームで各シンタックス要素に該当するｂｉｎを受信し、デコーディング対象のシンタックス要素情報と隣接及びデコーディング対象ブロックのデコーディング情報または以前ステップでデコーディングされたシンボル／ｂｉｎの情報を利用して文脈（ｃｏｎｔｅｘｔ）モデルを決定し、決定された文脈モデルによってｂｉｎの発生確率を予測してｂｉｎの算術デコーディング（ａｒｉｔｈｍｅｔｉｃ ｄｅｃｏｄｉｎｇ）を行い、各シンタックス要素の値に該当するシンボルを生成することができる。このとき、ＣＡＢＡＣエントロピーデコーディング方法は、文脈モデル決定後、次のシンボル／ｂｉｎの文脈モデルのためにデコーディングされたシンボル／ｂｉｎの情報を利用して文脈モデルをアップデートすることができる。エントロピーデコーディング部３１０でデコーディングされた情報のうち、予測に関する情報は、予測部（インター予測部３３２及びイントラ予測部３３１）に提供され、エントロピーデコーディング部３１０でエントロピーデコーディングが行われたレジデュアル値、即ち、量子化された変換係数及び関連パラメータ情報は、レジデュアル処理部３２０に入力されることができる。レジデュアル処理部３２０は、レジデュアル信号（レジデュアルブロック、レジデュアルサンプル、レジデュアルサンプルアレイ）を導出することができる。また、エントロピーデコーディング部３１０でデコーディングされた情報のうち、フィルタリングに関する情報は、フィルタリング部３５０に提供されることができる。一方、エンコーディング装置から出力された信号を受信する受信部（図示せず）がデコーディング装置３００の内／外部エレメントとしてさらに構成されることができ、または、受信部は、エントロピーデコーディング部３１０の構成要素であることもできる。一方、本文書に係るデコーディング装置は、ビデオ／画像／ピクチャデコーディング装置と呼ばれることができ、前記デコーディング装置は、情報デコーダ（ビデオ／画像／ピクチャ情報デコーダ）及びサンプルデコーダ（ビデオ／画像／ピクチャサンプルデコーダ）に区分することもできる。前記情報デコーダは、前記エントロピーデコーディング部３１０を備えることができ、前記サンプルデコーダは、前記逆量子化部３２１、逆変換部３２２、加算部３４０、フィルタリング部３５０、メモリ３６０、インター予測部３３２、及びイントラ予測部３３１のうち少なくとも１つを備えることができる。

逆量子化部３２１では、量子化された変換係数を逆量子化して変換係数を出力できる。逆量子化部３２１は、量子化された変換係数を２次元のブロック形態で再整列することができる。この場合、前記再整列は、エンコーディング装置で行われた係数スキャン順序に基づいて再整列を行うことができる。逆量子化部３２１は、量子化パラメータ（例えば、量子化ステップサイズ情報）を用いて量子化された変換係数に対する逆量子化を行い、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）を取得することができる。

逆変換部３２２では、変換係数を逆変換してレジデュアル信号（レジデュアルブロック、レジデュアルサンプルアレイ）を取得するようになる。

予測部は、現在ブロックに対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、エントロピーデコーディング部３１０から出力された前記予測に関する情報に基づいて、前記現在ブロックにイントラ予測が適用されるか、または、インター予測が適用されるかを決定することができ、具体的なイントラ／インター予測モードを決定することができる。

予測部３２０は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、１つのブロックに対する予測のために、イントラ予測またはインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）予測モードに基づくことができ、または、パレットモード（ｐａｌｅｔｔｅ ｍｏｄｅ）に基づくこともできる。前記ＩＢＣ予測モードまたはパレットモードは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ画像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。即ち、ＩＢＣは、本文書において説明されるインター予測技法のうち少なくとも１つを利用することができる。パレットモードは、イントラコーディングまたはイントラ予測の一例と見なすことができる。パレットモードが適用される場合、パレットテーブル及びパレットインデックスに関する情報が前記ビデオ／画像情報に含まれてシグナリングされることができる。

イントラ予測部３３１は、現在ピクチャ内のサンプルを参照して現在ブロックを予測できる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置することができ、または離れて位置することができる。イントラ予測において予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。イントラ予測部３３１は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。

インター予測部３３２は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを備えることができる。例えば、インター予測部３３２は、隣接ブロックに基づいて動き情報候補リストを構成し、受信した候補選択情報に基づいて前記現在ブロックの動きベクトル及び／または参照ピクチャインデックスを導出することができる。様々な予測モードに基づいてインター予測が行われ得るし、前記予測に関する情報は、前記現在ブロックに対するインター予測のモードを指示する情報を含むことができる。

加算部３４０は、取得されたレジデュアル信号を予測部（インター予測部３３２及び／またはイントラ予測部３３１を備える）から出力された予測信号（予測されたブロック、予測サンプルアレイ）に加えることにより、復元信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成することができる。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。

加算部３４０は、復元部または復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て出力されることができ、または、次のピクチャのインター予測のために使用されることもできる。

一方、ピクチャデコーディング過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。

フィルタリング部３５０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部３５０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ３６０、具体的に、メモリ３６０のＤＰＢに送信することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。

メモリ３６０のＤＰＢに格納された（修正された）復元ピクチャは、インター予測部３３２で参照ピクチャとして使用されることができる。メモリ３６０は、現在ピクチャ内の動き情報が導出された（または、デコーディングされた）ブロックの動き情報及び／または既に復元されたピクチャ内のブロックの動き情報を格納できる。前記格納された動き情報は、空間的隣接ブロックの動き情報または時間的隣接ブロックの動き情報として活用するために、インター予測部２６０に伝達することができる。メモリ３６０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納でき、イントラ予測部３３１に伝達することができる。

本明細書において、エンコーディング装置１００のフィルタリング部２６０、インター予測部２２１、及びイントラ予測部２２２で説明された実施形態は、各々デコーディング装置３００のフィルタリング部３５０、インター予測部３３２、及びイントラ予測部３３１にも同一または対応するように適用されることができる。

一方、前述したように、ビデオコーディングを実行するにあたって圧縮効率を上げるために予測を実行する。それによって、コーディング対象ブロックである現在ブロックに対する予測サンプルを含む予測されたブロックを生成することができる。ここで、前記予測されたブロックは、空間ドメイン（または、ピクセルドメイン）での予測サンプルを含む。前記予測されたブロックは、エンコーディング装置及びデコーディング装置で同様に導出され、前記エンコーディング装置は、原本ブロックの原本サンプル値自体でない前記原本ブロックと前記予測されたブロックとの間のレジデュアルに関する情報（レジデュアル情報）をデコーディング装置にシグナリングすることで画像コーディング効率を上げることができる。デコーディング装置は、前記レジデュアル情報に基づいてレジデュアルサンプルを含むレジデュアルブロックを導出し、前記レジデュアルブロックと前記予測されたブロックを加算して復元サンプルを含む復元ブロックを生成することができ、復元ブロックを含む復元ピクチャを生成することができる。

前記レジデュアル情報は、変換及び量子化手順を介して生成されることができる。例えば、エンコーディング装置は、前記原本ブロックと前記予測されたブロックとの間のレジデュアルブロックを導出し、前記レジデュアルブロックに含まれているレジデュアルサンプル（レジデュアルサンプルアレイ）に変換手順を実行して変換係数を導出し、前記変換係数に量子化手順を実行して量子化された変換係数を導出することで、関連したレジデュアル情報を（ビットストリームを介して）デコーディング装置にシグナリングすることができる。ここで、前記レジデュアル情報は、前記量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含むことができる。デコーディング装置は、前記レジデュアル情報に基づいて逆量子化／逆変換手順を実行してレジデュアルサンプル（または、レジデュアルブロック）を導出することができる。デコーディング装置は、予測されたブロックと前記レジデュアルブロックに基づいて復元ピクチャを生成することができる。また、エンコーディング装置は、以後ピクチャのインター予測のための参照のために量子化された変換係数を逆量子化／逆変換してレジデュアルブロックを導出し、これに基づいて復元ピクチャを生成することができる。

一方、イントラ予測が実行される場合、サンプル間の相関関係が利用されることができ、原本ブロックと予測ブロックとの間の差、即ち、レジデュアル（ｒｅｓｉｄｕａｌ）が取得されることができる。前記レジデュアルには前述した変換及び量子化が適用されることができ、これを介して空間的リダンダンシー（ｓｐａｔｉａｌ ｒｅｄｕｎｄａｎｃｙ）が除去されることができる。以下、イントラ予測が使われるエンコーディング方法及びデコーディング方法に関して具体的に説明する。

イントラ予測は、現在ブロックを含むピクチャ（以下、現在ピクチャ）内の現在ブロック外部の参照サンプルに基づいて現在ブロックに対する予測サンプルを生成する予測を意味する。ここで、現在ブロック外部の参照サンプルは、現在ブロックの隣接に位置するサンプルを意味することができる。現在ブロックにイントラ予測が適用される場合、現在ブロックのイントラ予測に使用する隣接（ｎｅｉｇｈｂｏｒｉｎｇ）参照サンプルが導出されることができる。

例えば、現在ブロックの大きさ（幅×高さ）がｎＷ×ｎＨ大きさである時、現在ブロックの隣接参照サンプルは、現在ブロックの左側（ｌｅｆｔ）境界に隣接したサンプル及び左下側（ｂｏｔｔｏｍ－ｌｅｆｔ）に隣接した総２×ｎＨ個のサンプル、現在ブロックの上側（ｔｏｐ）境界に隣接したサンプル及び右上側（ｔｏｐ－ｒｉｇｈｔ）に隣接した総２×ｎＷ個のサンプル、現在ブロックの左上側（ｔｏｐ－ｌｅｆｔ）に隣接した１個のサンプルを含むことができる。または、現在ブロックの隣接参照サンプルは、複数列の上側隣接サンプル及び複数行の左側隣接サンプルを含むこともできる。また、現在ブロックの隣接参照サンプルは、ｎＷ×ｎＨ大きさの現在ブロックの右側（ｒｉｇｈｔ）境界に隣接した総ｎＨ個のサンプル、現在ブロックの下側（ｂｏｔｔｏｍ）境界に隣接した総ｎＷ個のサンプル、及び現在ブロックの右下側（ｂｏｔｔｏｍ－ｒｉｇｈｔ）に隣接した１個のサンプルを含むこともできる。

ただし、現在ブロックの隣接参照サンプルのうち一部は、まだデコーディングされない、または、利用可能でない場合がある。この場合、デコーディング装置は、利用可能でないサンプルを利用可能なサンプルに代替（ｓｕｂｓｔｉｔｕｔｉｏｎ）し、予測に使用する隣接参照サンプルを構成することができる。または、利用可能なサンプルの補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）を介して予測に使用する隣接参照サンプルを構成することができる。

隣接参照サンプルが導出された場合、（ｉ）現在ブロックの隣接参照サンプルの平均（ａｖｅｒａｇｅ）または補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）に基づいて予測サンプルを誘導することができ、（ii）現在ブロックの隣接参照サンプルのうち予測サンプルに対して特定（予測）方向に存在する参照サンプルに基づいて予測サンプルを誘導することもできる。（ｉ）の場合は、イントラ予測モードが非方向性モードまたは非角度モードである時に適用されることができ、（ii）の場合は、イントラ予測モードが方向性（ｄｉｒｅｃｔｉｏｎａｌ）モードまたは角度（ａｎｇｕｌａｒ）モードである時に適用されることができる。

また、隣接参照サンプルのうち現在ブロックの予測サンプルを基準にして、現在ブロックのイントラ予測モードの予測方向に位置する第１の隣接サンプルと前記予測方向の反対方向に位置する第２の隣接サンプルとの補間を介して予測サンプルが生成されることもできる。前述した場合は、線形補間イントラ予測（Ｌｉｎｅａｒ ｉｎｔｅｒｐｏｌａｔｉｏｎ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＬＩＰ）と呼ばれることができる。また、線形モデル（ｌｉｎｅａｒ ｍｏｄｅｌ）を利用してルマサンプルに基づいてクロマ予測サンプルが生成されることもできる。この場合は、ＬＭモードと呼ばれることができる。

また、フィルタリングされた隣接参照サンプルに基づいて現在ブロックの臨時予測サンプルを導出し、既存の隣接参照サンプル、即ち、フィルタリングされない隣接参照サンプルのうちイントラ予測モードによって導出された少なくとも一つの参照サンプルと前記臨時予測サンプルを加重和（ｗｅｉｇｈｔｅｄ ｓｕｍ）して現在ブロックの予測サンプルを導出することもできる。前述した場合は、ＰＤＰＣ（Ｐｏｓｉｔｉｏｎ ｄｅｐｅｎｄｅｎｔ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ）と呼ばれることができる。

また、現在ブロックの隣接多重参照サンプルラインの中から最も予測正確度が高い参照サンプルラインを選択して該当ラインで予測方向に位置する参照サンプルを利用して予測サンプルを導出し、このとき、使われた参照サンプルラインをデコーディング装置に指示（シグナリング）する方法でイントラ予測符号化を実行することができる。前述した場合は、ｍｕｌｔｉ－ｒｅｆｅｒｅｎｃｅ ｌｉｎｅ（ＭＲＬ）ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎまたはＭＲＬ基盤のイントラ予測と呼ばれることができる。

また、現在ブロックを垂直または水平のサブパーティションに分けて同じイントラ予測モードに基づいてイントラ予測を実行し、サブパーティション単位で隣接参照サンプルを導出して利用できる。即ち、この場合、現在ブロックに対するイントラ予測モードがサブパーティションに同じく適用され、サブパーティション単位で隣接参照サンプルを導出して利用することによって、場合によって、イントラ予測性能を高めることができる。このような予測方法は、ｉｎｔｒａ ｓｕｂ－ｐａｒｔｉｔｉｏｎｓ（ＩＳＰ）またはＩＳＰ基盤のイントラ予測と呼ばれることができる。

前述したイントラ予測方法は、イントラ予測モードと区分してイントラ予測タイプと呼ばれることができる。イントラ予測タイプは、イントラ予測技法または付加イントラ予測モードなど、多様な用語で呼ばれることができる。例えば、イントラ予測タイプ（または、付加イントラ予測モードなど）は、前述したＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰのうち少なくとも一つを含むことができる。前記ＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰなどの特定イントラ予測タイプを除外した一般イントラ予測方法は、ノーマルイントラ予測タイプと呼ばれることができる。ノーマルイントラ予測タイプは、前記のような特定イントラ予測タイプが適用されない場合に一般的に適用されることができ、前述したイントラ予測モードに基づいて予測が実行されることができる。一方、必要によって導出された予測サンプルに対する後処理フィルタリングが実行されることもできる。

図４は、本文書の実施例が適用可能な概略的なイントラ予測に基づく映像エンコーディング方法の一例を示し、図５は、エンコーディング装置内のイントラ予測部を概略的に示す。図５のエンコーディング装置内のイントラ予測部は、前述した図２のエンコーディング装置２００のイントラ予測部２２２にも同一または対応されるように適用されることができる。

図４及び図５を参照すると、Ｓ４００は、エンコーディング装置のイントラ予測部２２２により実行されることができ、Ｓ４１０は、エンコーディング装置のレジデュアル処理部２３０により実行されることができる。具体的に、Ｓ４１０は、エンコーディング装置の減算部２３１により実行されることができる。Ｓ４２０において、予測情報は、イントラ予測部２２２により導出され、エントロピーエンコーディング部２４０によりエンコーディングされることができる。Ｓ４２０において、レジデュアル情報は、レジデュアル処理部２３０により導出され、エントロピーエンコーディング部２４０によりエンコーディングされることができる。レジデュアル情報は、レジデュアルサンプルに関する情報である。レジデュアル情報は、レジデュアルサンプルに対する量子化された変換係数に関する情報を含むことができる。前述したように、レジデュアルサンプルは、エンコーディング装置の変換部２３２を介して変換係数として導出され、変換係数は、量子化部２３３を介して量子化された変換係数として導出されることができる。量子化された変換係数に関する情報がレジデュアルコーディング手順を介してエントロピーエンコーディング部２４０でエンコーディングされることができる。

エンコーディング装置は、現在ブロックに対するイントラ予測を実行する（Ｓ４００）。エンコーディング装置は、現在ブロックに対するイントラ予測モード／タイプを導出し、現在ブロックの隣接参照サンプルを導出することができ、イントラ予測モード／タイプ及び隣接参照サンプルに基づいて現在ブロック内の予測サンプルを生成する。ここで、イントラ予測モード／タイプ決定、隣接参照サンプル導出、及び予測サンプル生成手順は、同時に実行されてもよく、ある一手順が他の手順より先に実行されてもよい。

例えば、エンコーディング装置のイントラ予測部２２２は、イントラ予測モード／タイプ決定部２２２－１、参照サンプル導出部２２２－２、予測サンプル導出部２２２－３を含むことができ、イントラ予測モード／タイプ決定部２２２－１で現在ブロックに対するイントラ予測モード／タイプを決定し、参照サンプル導出部２２２－２で現在ブロックの隣接参照サンプルを導出し、予測サンプル導出部２２２－３で現在ブロックの予測サンプルを導出することができる。一方、図示されてはいないが、予測サンプルフィルタリング手順が実行される場合、イントラ予測部２２２は、予測サンプルフィルタ部（図示せず）をさらに含むこともできる。エンコーディング装置は、複数のイントラ予測モード／タイプのうち現在ブロックに対して適用されるモード／タイプを決定することができる。エンコーディング装置は、イントラ予測モード／タイプに対するＲＤ ｃｏｓｔを比較し、現在ブロックに対する最適のイントラ予測モード／タイプを決定することができる。

前述したように、エンコーディング装置は、予測サンプルフィルタリング手順を実行することもできる。予測サンプルフィルタリングは、ポストフィルタリングと呼ばれることができる。予測サンプルフィルタリング手順により予測サンプルのうち一部または全部がフィルタリングされることができる。場合によって、予測サンプルフィルタリング手順は、省略されることができる。

エンコーディング装置は、（フィルタリングされた）予測サンプルに基づいて現在ブロックに対するレジデュアルサンプルを生成する（Ｓ４１０）。エンコーディング装置は、現在ブロックの原本サンプルで予測サンプルを位相に基づいて比較し、レジデュアルサンプルを導出することができる。

エンコーディング装置は、イントラ予測に関する情報（予測情報）及びレジデュアルサンプルに関するレジデュアル情報を含む映像情報をエンコーディングすることができる（Ｓ４２０）。予測情報は、イントラ予測モード情報、イントラ予測タイプ情報を含むことができる。レジデュアル情報は、レジデュアルコーディングシンテックスを含むことができる。エンコーディング装置は、レジデュアルサンプルを変換／量子化して量子化された変換係数を導出することができる。レジデュアル情報は、前記量子化された変換係数に対する情報を含むことができる。

エンコーディング装置は、エンコーディングされた映像情報がビットストリーム形態で出力されることができる。出力されたビットストリームは、格納媒体またはネットワークを介してデコーディング装置に伝達されることができる。

前述したように、エンコーディング装置は、復元ピクチャ（復元サンプル及び復元ブロックを含む）を生成することができる。そのために、エンコーディング装置は、量子化された変換係数を再び逆量子化／逆変換処理して（修正された）レジデュアルサンプルを導出することができる。このように、レジデュアルサンプルを変換／量子化した後、再び逆量子化／逆変換を実行する理由は、前述したように、デコーディング装置で導出されるレジデュアルサンプルと同じレジデュアルサンプルを導出するためである。エンコーディング装置は、予測サンプルと（修正された）レジデュアルサンプルに基づいて現在ブロックに対する復元サンプルを含む復元ブロックを生成することができる。前記復元ブロックに基づいて現在ピクチャに対する復元ピクチャが生成されることができる。前記復元ピクチャにインループフィルタリング手順などがさらに適用可能であることは、前述した通りである。

図６は、本文書の実施例が適用可能な概略的なイントラ予測に基づく映像デコーディング方法の一例を示し、図７は、デコーディング装置内のイントラ予測部を概略的に示す。図７のデコーディング装置内のイントラ予測部は、前述した図３のデコーディング装置３００のイントラ予測部３３１にも同一または対応されるように適用されることができる。

図６及び図７を参照すると、デコーディング装置は、前述したエンコーディング装置で実行された動作と対応される動作を実行することができる。Ｓ６００乃至Ｓ６２０は、デコーディング装置のイントラ予測部３３１により実行されることができ、Ｓ６００の予測情報及びＳ６３０のレジデュアル情報は、デコーディング装置のエントロピーデコーディング部３１０によりビットストリームから取得されることができる。デコーディング装置のレジデュアル処理部３２０は、レジデュアル情報に基づいて現在ブロックに対するレジデュアルサンプルを導出することができる。具体的に、レジデュアル処理部３２０の逆量子化部３２１は、レジデュアル情報に基づいて導出された量子化された変換係数に基づいて、逆量子化を実行して変換係数を導出し、レジデュアル処理部の逆変換部３２２は、変換係数に対する逆変換を実行して現在ブロックに対するレジデュアルサンプルを導出することができる。Ｓ６４０は、デコーディング装置の加算部３４０または復元部により実行されることができる。

デコーディング装置は、受信された予測情報（イントラ予測モード／タイプ情報）に基づいて現在ブロックに対するイントラ予測モード／タイプを導出することができる（Ｓ６００）。デコーディング装置は、現在ブロックの隣接参照サンプルを導出することができる（Ｓ６１０）。デコーディング装置は、イントラ予測モード／タイプ及び隣接参照サンプルに基づいて現在ブロック内の予測サンプルを生成する（Ｓ６２０）。この場合、デコーディング装置は、予測サンプルフィルタリング手順を実行することができる。予測サンプルフィルタリングは、ポストフィルタリングと呼ばれることができる。予測サンプルフィルタリング手順により予測サンプルのうち一部または全部がフィルタリングされることができる。場合によって、予測サンプルフィルタリング手順は省略されることができる。

デコーディング装置は、受信されたレジデュアル情報に基づいて現在ブロックに対するレジデュアルサンプルを生成する（Ｓ６３０）。デコーディング装置は、予測サンプル及びレジデュアルサンプルに基づいて現在ブロックに対する復元サンプルを生成し、復元サンプルを含む復元ブロックを導出することができる（Ｓ６４０）。前記復元ブロックに基づいて現在ピクチャに対する復元ピクチャが生成されることができる。前記復元ピクチャにインループフィルタリング手順などがさらに適用可能であることは、前述した通りである。

ここで、デコーディング装置のイントラ予測部３３１は、イントラ予測モード／タイプ決定部３３１－１、参照サンプル導出部３３１－２、及び予測サンプル導出部３３１－３を含むことができ、イントラ予測モード／タイプ決定部３３１－１は、エントロピーデコーディング部３１０で取得されたイントラ予測モード／タイプ情報に基づいて現在ブロックに対するイントラ予測モード／タイプを決定し、参照サンプル導出部３３１－２は、現在ブロックの隣接参照サンプルを導出し、予測サンプル導出部３３１－３は、現在ブロックの予測サンプルを導出することができる。一方、図示されてはいないが、前述した予測サンプルフィルタリング手順が実行される場合、イントラ予測部３３１は、予測サンプルフィルタ部（図示せず）をさらに含むこともできる。

前記イントラ予測モード情報は、例えば、ＭＰＭ（ｍｏｓｔ ｐｒｏｂａｂｌｅ ｍｏｄｅ）が現在ブロックに適用されるか、またはリメイニングモード（ｒｅｍａｉｎｉｎｇ ｍｏｄｅ）が適用されるかを示すフラグ情報（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇ）を含むことができる。このとき、ＭＰＭが現在ブロックに適用される場合、予測モード情報は、イントラ予測モード候補（ＭＰＭ候補）のうち一つを指すインデックス情報（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘ）をさらに含むことができる。イントラ予測モード候補（ＭＰＭ候補）は、ＭＰＭ候補リストまたはＭＰＭリストで構成されることができる。また、ＭＰＭが現在ブロックに適用されない場合、イントラ予測モード情報は、イントラ予測モード候補（ＭＰＭ候補）を除外した残りのイントラ予測モードのうち一つを指すリメイニングモード情報（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒ）をさらに含むことができる。デコーディング装置は、イントラ予測モード情報に基づいて現在ブロックのイントラ予測モードを決定することができる。

また、イントラ予測タイプ情報は、多様な形態で具現されることができる。一例として、イントラ予測タイプ情報は、イントラ予測タイプのうち一つを指示するイントラ予測タイプインデックス情報を含むことができる。他の例として、イントラ予測タイプ情報は、ＭＲＬが現在ブロックに適用されるかどうか、及びＭＲＬが適用される場合には何番目の参照サンプルラインが利用されるかを示す参照サンプルライン情報（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘ）、ＩＳＰが現在ブロックに適用されるかどうかを示すＩＳＰフラグ情報（例えば、ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｍｏｄｅ＿ｆｌａｇ）、ＩＳＰが適用される場合にはサブパーティションの分割タイプを指示するＩＳＰタイプ情報（例えば、ｉｎｔｒａ＿ｓｕｂｐａｒｔｉｔｉｏｎｓ＿ｓｐｌｉｔ＿ｆｌａｇ）、ＰＤＣＰの適用可否を示すフラグ情報またはＬＩＰの適用可否を示すフラグ情報のうち少なくとも一つを含むことができる。また、イントラ予測タイプ情報は、現在ブロックにＭＩＰが適用されるかどうかを示すＭＩＰフラグを含むことができる。

前述したイントラ予測モード情報及び／またはイントラ予測タイプ情報は、本文書で説明したコーディング方法を介してエンコーディング／デコーディングされることができる。例えば、前述したイントラ予測モード情報及び／またはイントラ予測タイプ情報は、ｔｒｕｎｃａｔｅｄ （ｒｉｃｅ） ｂｉｎａｒｙ ｃｏｄｅに基づいてエントロピーコーディング（例えば、ＣＡＢＡＣ、ＣＡＶＬＣ）コーディングを介してエンコーディング／デコーディングされることができる。

一方、イントラ予測が適用される場合、隣接ブロックのイントラ予測モードを利用して現在ブロックに適用されるイントラ予測モードが決定されることができる。例えば、デコーディング装置は、現在ブロックの隣接ブロック（例えば、左側及び／または上側隣接ブロック）のイントラ予測モード及び追加的な候補モードに基づいて導出されたｍｐｍ（ｍｏｓｔ ｐｒｏｂａｂｌｅ ｍｏｄｅ）リスト内のｍｐｍ候補のうち一つを受信されたｍｐｍインデックスに基づいて選択でき、または、前記ｍｐｍ候補（及びプラナーモード）に含まれない残りのイントラ予測モードのうち一つをリメイニングイントラ予測モード情報に基づいて選択できる。ｍｐｍリストは、プラナーモードを候補として含む場合または含まない場合で構成されることができる。例えば、ｍｐｍリストがプラナーモードを候補として含む場合、ｍｐｍリストは、６個の候補を有することができ、ｍｐｍリストがプラナーモードを候補として含まない場合、ｍｐｍリストは、５個の候補を有することができる。ｍｐｍリストがプラナーモードを候補として含まない場合、現在ブロックのイントラ予測モードがプラナーモードでないことを示すｎｏｔプラナーフラグ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）がシグナリングされることができる。例えば、ｍｐｍフラグが先にシグナリングされ、ｍｐｍインデックス及びｎｏｔプラナーフラグは、ｍｐｍフラグの値が１である場合にシグナリングされることができる。また、ｍｐｍインデックスは、ｎｏｔプラナーフラグの値が１である場合にシグナリングされることができる。ここで、ｍｐｍリストがプラナーモードを候補として含まないように構成されることは、プラナーモードがｍｐｍでないことを意味するよりは、ｍｐｍで常にプラナーモードが考慮されるため、先にフラグ（ｎｏｔ ｐｌａｎａｒ ｆｌａｇ）をシグナリングしてプラナーモードであるかどうかを先に確認するためである。

例えば、現在ブロックに適用されるイントラ予測モードがｍｐｍ候補（及びプラナーモード）内にあるか、またはリメイニングモード内にあるかは、ｍｐｍ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇ）に基づいて指示されることができる。ｍｐｍ ｆｌａｇの値１は、現在ブロックに対するイントラ予測モードがｍｐｍ候補（及びプラナーモード）内にあることを示すことができ、ｍｐｍ ｆｌａｇの値０は、現在ブロックに対するイントラ予測モードがｍｐｍ候補（及びプラナーモード）内に無いことを示すことができる。ｎｏｔ ｐｌａｎａｒ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）値０は、現在ブロックに対するイントラ予測モードがプラナーモードであることを示すことができ、ｎｏｔ ｐｌａｎａｒ ｆｌａｇ値１は、現在ブロックに対するイントラ予測モードがプラナーモードでないことを示すことができる。ｍｐｍインデックスは、ｍｐｍ＿ｉｄｘまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘシンテックス要素の形態でシグナリングされることができ、リメイニングイントラ予測モード情報は、ｒｅｍ＿ｉｎｔｒａ＿ｌｕｍａ＿ｐｒｅｄ＿ｍｏｄｅまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒシンテックス要素の形態でシグナリングされることができる。例えば、リメイニングイントラ予測モード情報は、全体イントラ予測モードのうちｍｐｍ候補（及びプラナーモード）に含まれない残りのイントラ予測モードを予測モード番号順にインデクシングしてそのうち一つを指すことができる。イントラ予測モードは、ルマ成分（サンプル）に対するイントラ予測モードである。以下、イントラ予測モード情報は、ｍｐｍ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇ）、ｎｏｔ ｐｌａｎａｒ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）、ｍｐｍインデックス（例えば、ｍｐｍ＿ｉｄｘまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘ）、リメイニングイントラ予測モード情報（ｒｅｍ＿ｉｎｔｒａ＿ｌｕｍａ＿ｐｒｅｄ＿ｍｏｄｅまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒ）のうち少なくとも一つを含むことができる。本文書において、ＭＰＭリストは、ＭＰＭ候補リスト、ｃａｎｄＭｏｄｅＬｉｓｔなど、多様な用語で呼ばれることができる。

一般的に、映像に対するブロック分割になると、コーディングしようとする現在ブロックと隣接ブロックは、類似する映像特性を有するようになる。したがって、現在ブロックと隣接ブロックは、互いに同じまたは類似するイントラ予測モードを有する確率が高い。したがって、エンコーダは、現在ブロックのイントラ予測モードをエンコーディングするために、隣接ブロックのイントラ予測モードを利用することができる。例えば、エンコーダ／デコーダは、現在ブロックに対するＭＰＭ（ｍｏｓｔ ｐｒｏｂａｂｌｅ ｍｏｄｅｓ）リストを構成することができる。ＭＰＭリストは、ＭＰＭ候補リストを指すこともできる。ここで、ＭＰＭとは、イントラ予測モードコーディング時、現在ブロックと隣接ブロックの類似性を考慮してコーディング効率を向上させるために利用されるモードを意味することができる。

図８は、本文書の実施例が適用可能なエンコーディング装置におけるＭＰＭモード基盤のイントラ予測方法の一例を示す。

図８を参照すると、エンコーディング装置は、現在ブロックに対するＭＰＭリストを構成する（Ｓ８００）。ＭＰＭリストは、現在ブロックに適用される可能性が高い候補イントラ予測モード（ＭＰＭ候補）を含むことができる。ＭＰＭリストは、隣接ブロックのイントラ予測モードを含むこともでき、あらかじめ決められた方法によって特定イントラ予測モードをさらに含むこともできる。具体的なＭＰＭリスト構成方法は後述される。

エンコーディング装置は、現在ブロックのイントラ予測モードを決定する（Ｓ８１０）。エンコーディング装置は、多様なイントラ予測モードに基づいて予測を実行することができ、これに基づくＲＤＯ（ｒａｔｅ－ｄｉｓｔｏｒｔｉｏｎ ｏｐｔｉｍｉｚａｔｉｏｎ）に基づいて最適のイントラ予測モードを決定することができる。エンコーディング装置は、この場合、ＭＰＭリストに構成されたＭＰＭ候補及びプラナーモードのみを利用して最適のイントラ予測モードを決定することもでき、または、ＭＰＭリストに構成されたＭＰＭ候補及びプラナーモードだけでなく、残りのイントラ予測モードをさらに利用して最適のイントラ予測モードを決定することもできる。

具体的に、例えば、もし、現在ブロックのイントラ予測タイプがノーマルイントラ予測タイプでない特定タイプ（例えば、ＬＩＰ、ＭＲＬ、またはＩＳＰ）である場合、エンコーディング装置は、ＭＰＭ候補及びプラナーモードのみを現在ブロックに対するイントラ予測モード候補として考慮して最適のイントラ予測モードを決定することができる。即ち、この場合、現在ブロックに対するイントラ予測モードは、ＭＰＭ候補及びプラナーモードの中でのみ決定されることができ、この場合、ｍｐｍ ｆｌａｇをエンコーディング／シグナリングしない。デコーディング装置は、この場合、別途にｍｐｍ ｆｌａｇのシグナリングを受けなくてもｍｐｍ ｆｌａｇが１であると推定できる。

一般的に、現在ブロックのイントラ予測モードがプラナーモードでない、かつＭＰＭリスト内にあるＭＰＭ候補のうち一つである場合、エンコーディング装置は、ＭＰＭ候補のうち一つを指すｍｐｍインデックス（ｍｐｍ ｉｄｘ）を生成する。もし、現在ブロックのイントラ予測モードがＭＰＭリスト内にもない場合には、ＭＰＭリスト（及びプラナーモード）に含まれない残りのイントラ予測モードのうち現在ブロックのイントラ予測モードと同じモードを指すリメイニングイントラ予測モード情報を生成する。

エンコーディング装置は、イントラ予測モード情報をエンコーディングしてビットストリーム形態で出力できる（Ｓ８２０）。イントラ予測モード情報は、前述したｍｐｍ ｆｌａｇ、ｎｏｔ ｐｌａｎａｒ ｆｌａｇ、ｍｐｍインデックス及び／またはリメイニングイントラ予測モード情報を含むことができる。一般的に、ｍｐｍインデックスとリメイニングイントラ予測モード情報は、ａｌｔｅｒｎａｔｉｖｅな関係であって、一つのブロックに対するイントラ予測モードを指示するにあたって、同時にシグナリングされるものではない。即ち、ｍｐｍ ｆｌａｇ値１とｎｏｔ ｐｌａｎａｒ ｆｌａｇ ｏｒ ｍｐｍインデックスが共にシグナリングされ、または、ｍｐｍ ｆｌａｇ値０とリメイニングイントラ予測モード情報が共にシグナリングされる。ただし、前述したように、現在ブロックに特定イントラ予測タイプが適用される場合には、ｍｐｍ ｆｌａｇがシグナリングされずにｎｏｔ ｐｌａｎａｒ ｆｌａｇ ａｎｄ／ｏｒ ｍｐｍインデックスのみがシグナリングされることもできる。即ち、この場合、イントラ予測モード情報は、ｎｏｔ ｐｌａｎａｒ ｆｌａｇ ａｎｄ／ｏｒ ｍｐｍインデックスのみを含むこともできる。

図９は、本文書の実施例が適用可能なデコーディング装置におけるＭＰＭモード基盤のイントラ予測方法の一例を示す。図９のデコーディング装置は、図８のエンコーディング装置で決定及びシグナリングされたイントラ予測モード情報に対応してイントラ予測モードを決定することができる。

図９を参照すると、デコーディング装置は、ビットストリームからイントラ予測モード情報を取得する（Ｓ９００）。イントラ予測モード情報は、前述したように、ｍｐｍ ｆｌａｇ、ｎｏｔ ｐｌａｎａｒ ｆｌａｇ、ｍｐｍインデックス、リメイニングイントラ予測モードのうち少なくとも一つを含むことができる。

デコーディング装置は、ＭＰＭリストを構成する（Ｓ９１０）。ＭＰＭリストは、エンコーディング装置で構成されたＭＰＭリストと同じく構成される。即ち、ＭＰＭリストは、隣接ブロックのイントラ予測モードを含むこともでき、あらかじめ決められた方法によって特定イントラ予測モードをさらに含むこともできる。具体的なＭＰＭリスト構成方法は後述される。

たとえ、Ｓ９１０は、Ｓ９００より後に実行されると図示されているとしても、これは例示に過ぎず、Ｓ９１０は、Ｓ９００より先に実行されてもよく、同時に実行されてもよい。

デコーディング装置は、ＭＰＭリスト及びイントラ予測モード情報に基づいて現在ブロックのイントラ予測モードを決定する（Ｓ９２０）。

一例として、ｍｐｍ ｆｌａｇの値が１である場合、デコーディング装置は、プラナーモードを現在ブロックのイントラ予測モードとして導出し（ｎｏｔ ｐｌａｎａｒ ｆｌａｇ基盤）、または、ＭＰＭリスト内のＭＰＭ候補のうちｍｐｍインデックスが指す候補を現在ブロックのイントラ予測モードとして導出することができる。ここで、ＭＰＭ候補とは、ＭＰＭリストに含まれる候補のみを示すこともでき、または、ＭＰＭリストに含まれる候補だけでなく、ｍｐｍ ｆｌａｇの値が１である場合に適用されることができるプラナーモードも含まれることができる。

他の例として、ｍｐｍ ｆｌａｇの値が０である場合、デコーディング装置は、ＭＰＭリスト及びプラナーモードに含まれない残りのイントラ予測モードのうちリメイニングイントラ予測モード情報が指すイントラ予測モードを現在ブロックのイントラ予測モードとして導出することができる。

他の例として、現在ブロックのイントラ予測タイプが特定タイプ（例えば、ＬＩＰ、ＭＲＬまたはＩＳＰ等）である場合、デコーディング装置は、ｍｐｍ ｆｌａｇの確認がなくても、プラナーモードまたはＭＰＭリスト内でｍｐｍインデックスが指す候補を現在ブロックのイントラ予測モードとして導出することもできる。

一方、イントラ予測モードは、非方向性（ｎｏｎ－ｄｉｒｅｃｔｉｏｎａｌ、または非角度性（ｎｏｎ－ａｎｇｕｌａｒ））イントラ予測モードと、方向性（ｄｉｒｅｃｔｉｏｎａｌ、または角度性（ａｎｇｕｌａｒ））イントラ予測モードと、を含むことができる。例えば、ＨＥＶＣ標準では２個の非方向性予測モードと３３個の方向性予測モードを含むイントラ予測モードを使用する。非方向性予測モードには０番であるプラナー（ｐｌａｎａｒ）イントラ予測モード及び１番であるＤＣイントラ予測モードを含むことができ、方向性予測モードには２番乃至３４番イントラ予測モードを含むことができる。プラナーイントラ予測モードは、プラナーモードと呼ばれることができ、ＤＣイントラ予測モードは、ＤＣモードと呼ばれることができる。

または、自然映像（ｎａｔｕｒａｌ ｖｉｄｅｏ）で提示された任意のエッジ方向（ｅｄｇｅ ｄｉｒｅｃｔｉｏｎ）をキャプチャするために、前記方向性イントラ予測モードは、後述する図１０のように既存の３３個から６５個に拡張されることができる。この場合、イントラ予測モードは、２個の非方向性イントラ予測モードと６５個の方向性イントラ予測モードを含むことができる。非方向性イントラ予測モードは、０番であるプラナー（ｐｌａｎａｒ）イントラ予測モード及び１番であるＤＣイントラ予測モードを含むことができ、方向性イントラ予測モードは、２番乃至６６番イントラ予測モードを含むことができる。拡張された方向性イントラ予測モードは、全てのサイズのブロックに適用されることができ、ルマ成分及びクロマ成分の両方ともに適用されることができる。ただし、これは例示に過ぎず、本文書の実施例は、イントラ予測モードの数が異なる場合にも適用されることができる。場合によって、６７番イントラ予測モードがさらに使用されることができ、前記６７番イントラ予測モードは、ＬＭ（ｌｉｎｅａｒ ｍｏｄｅｌ）モードを示すことができる。

図１０は、本文書の実施例が適用可能なイントラ予測モードの一例を示す。

図１０を参照すると、左上向対角予測方向を有する３４番イントラ予測モードを中心にして、水平方向性（ｈｏｒｉｚｏｎｔａｌ ｄｉｒｅｃｔｉｏｎａｌｉｔｙ）を有するイントラ予測モードと、垂直方向性（ｖｅｒｔｉｃａｌ ｄｉｒｅｃｔｉｏｎａｌｉｔｙ）を有するイントラ予測モードと、を区分することができる。図１０のＨとＶは、各々、水平方向性と垂直方向性を意味し、－３２～３２の数字は、サンプルグリッドポジション（ｓａｍｐｌｅ ｇｒｉｄ ｐｏｓｉｔｉｏｎ）上で１／３２単位の変位を示す。２番乃至３３番イントラ予測モードは水平方向性を有し、３４番乃至６６番イントラ予測モードは垂直方向性を有する。１８番イントラ予測モードと５０番イントラ予測モードは、各々、水平イントラ予測モード（ｈｏｒｉｚｏｎｔａｌ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ ｍｏｄｅ）、垂直イントラ予測モード（ｖｅｒｔｉｃａｌ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ ｍｏｄｅ）を示し、２番イントラ予測モードは左下向対角イントラ予測モードと呼ばれ、３４番イントラ予測モードは左上向対角イントラ予測モードと呼ばれ、６６番イントラ予測モードは右上向対角イントラ予測モードと呼ばれることができる。

一方、イントラ予測は、多重参照ラインを利用するＭＲＬを使用することができる。ＭＲＬ方法では現在ブロックの上側及び／または左側に対して一つ乃至三つのサンプル距離ほど離れたサンプルラインに位置した隣接サンプルを参照サンプルとして利用してイントラ予測を実行することができる。

図１１は、多重参照ラインを利用するイントラ予測のための参照サンプルラインの一例を示す。図１１のブロックユニット（Ｂｌｏｃｋ Ｕｎｉｔ）は、現在ブロックを指すことができる。

一実施例において、イントラ予測は、現在ブロックに隣接した参照サンプル（または、現在ブロックに１番目に近い参照サンプル、即ち、現在ブロックから０サンプル距離に位置する参照サンプル）を予測のための参照サンプルとして利用できる。他の実施例において、多重参照ライン（ｍｕｌｔｉｐｌｅ ｒｅｆｅｒｅｎｃｅ ｌｉｎｅ、ＭＲＬ）イントラ予測は、現在ブロックの左側及び上側境界からＫサンプル距離（Ｋは、１以上の整数）に位置する参照サンプルを使用する方法であって、現在ブロックに１番目に隣接した（即ち、０サンプル距離に位置する）参照サンプルを利用するイントラ予測より参照サンプルに対するより多くのオプション及びより正確な予測性能を有することができる。現在ブロックの参照サンプルは、現在ブロックの隣接サンプルまたは現在ブロックの参照ラインサンプルと呼ばれることもでき、参照ラインサンプルは、参照ライン上のサンプルと呼ばれることもできる。

図１１を参照すると、現在ブロックから０、１、２、及び３サンプル距離に位置する隣接参照サンプルの位置は、各々、参照ライン（ｒｅｆｅｒｅｎｃｅ ｌｉｎｅｓ）０、１、２、及び３と呼ばれることができる。参照ラインは、参照サンプルライン、参照サンプル行、または参照サンプル列と呼ばれることができ、または、簡略にライン、行または、列と呼ばれることもできる。参照ライン０、１、２、及び３は、現在ブロックに近い順に位置できる。一例として、参照ライン１、２に基づいて多重参照ラインイントラ予測が実行されることができる。他の例として、参照ライン１、３に基づいて多重参照ラインイントラ予測が実行されることができる。ただし、本文書の多重参照ラインイントラ予測は、必ずこれらの例により限定されるものではない。

また、多重参照ライン（ＭＲＬ）基盤のイントラ予測は、何番目の参照ラインが利用されるかを示すための参照ライン情報をシグナリングすることができる。例えば、参照ライン情報は、ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘシンタックス要素の形態でシグナリングされることができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が０である場合、現在ブロックに１番目に近い（即ち、０サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が１である場合、現在ブロックに２番目に近い（即ち、１サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が２である場合、現在ブロックに３番目または４番目に近い（即ち、２または３サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。

以下、多重参照ライン基盤のイントラ予測を実行する場合、ＭＰＭリストを構成する方法と、ＤＣモードでの隣接参照サンプルを導出してイントラ予測を実行する方法と、に関して説明する。

図１２は、ＤＣモードで予測サンプルを導出する方法の一実施例を説明するための図である。

図１２では説明の便宜のために現在ブロックに１番目に近い（即ち、０サンプル距離に位置する）参照サンプルを使用する場合を例示して説明する。即ち、参照ラインインデックス情報（例：ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘ）の値が０である場合、ＤＣモードで使われる参照サンプルを図示した。図１２に開示された方法は、参照ラインインデックス情報（例：ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘ）の値が０でない場合、ＤＣモードでも同じく適用されることができる。

図１２の（ａ）を参照すると、現在ブロックが正方形ブロック（例えば、４×４ブロック）であり、かつ現在ブロックのイントラ予測モードがＤＣモードである場合、ＤＣモードのイントラ予測のために使われる隣接参照サンプルを導出することができる。このとき、隣接参照サンプルは、現在ブロックの左側隣接に位置する左側参照サンプル（Ｅ、Ｆ、Ｇ、Ｈ）と現在ブロックの上側隣接に位置する上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ）を含むことができる。この場合、左側参照サンプル（Ｅ、Ｆ、Ｇ、Ｈ）及び上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ）を使用して平均（ａｖｅｒａｇｅ）を計算し、計算された平均に基づいてＤＣ値（ｄｃＶａｌ）を導出することができる。現在ブロック内のサンプル（図１２の（ａ）における斜線領域）は、ＤＣ値（ｄｃＶａｌ）で満たされることができる。即ち、このようなＤＣ値（ｄｃＶａｌ）で満たされたサンプルは、予測サンプルと呼ばれることができる。

図１２の（ｂ）を参照すると、現在ブロックが非正方形ブロック（例えば、８×４ブロック）であり、かつ現在ブロックのイントラ予測モードがＤＣモードである場合、ＤＣモードのイントラ予測のために使われる隣接参照サンプルを導出することができる。このとき、隣接参照サンプルは、非正方形ブロックの幅と高さのうち、より長い側に位置する参照サンプルを含むことができる。図１２の（ｂ）のように８×４ブロックである場合には幅（即ち、横）がより大きい値を有するため、幅側の隣接に位置する上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ｈ）を隣接参照サンプルとして導出することができる。この場合、上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ｈ）を使用して平均（ａｖｅｒａｇｅ）を計算し、計算された平均に基づいてＤＣ値（ｄｃＶａｌ）を導出することができる。現在ブロック内のサンプル（図１２の（ｂ）における斜線領域）は、ＤＣ値（ｄｃＶａｌ）で満たされることができる。即ち、このようなＤＣ値（ｄｃＶａｌ）で満たされたサンプルは、予測サンプルと呼ばれることができる。

前述したように、正方形ブロックとは違って、非正方形ブロックで左側参照サンプルと上側参照サンプルを全て使用して平均を計算する場合、分ける値が２^ｎの形態でないため、割り算演算を使用しなければならない。このような割り算演算をシフト演算に変更するためには、前述したように、非正方形ブロックの幅と高さのうち、より長い側に位置する参照サンプルのみを使用してＤＣ値を計算することができる。

前記図１２の実施例ではＤＣモードで現在ブロックが非正方形ブロックの場合、幅（即ち、横長さ）と高さ（即ち、縦長さ）を比較した後、より長い側の参照サンプルのみを使用してＤＣ値を計算し、これを現在ブロックの予測サンプルとして導出する。この方法は、幅と高さのうち一側（即ち、短い長さを有する側）の参照サンプルを使用しないため、予測の正確度が低くなることができる。したがって、以下では現在ブロックが非正方形ブロックである時、左側参照サンプルと上側参照サンプルを全て使用してＤＣ値を計算して予測サンプルを生成する方法を説明する。また、割り算演算の代わりにシフト演算を使用してＤＣ値を計算することができるように参照サンプル（左側参照サンプルと上側参照サンプル）を選択する方法を説明する。一実施例として、非正方形ブロックの幅と高さのうち、短い長さ側の隣接参照サンプルの個数と同じ参照サンプル個数を長い長さ側の隣接参照サンプルから選択し、これを使用してＤＣ値を計算することができる。このように短い長さ側の参照サンプル個数ほど長い長さ側の隣接参照サンプルから参照サンプルを選択すると、総選択された参照サンプルの個数は、２^ｎの形態になるため、シフト演算で平均値を計算することができる。

図１３は、ＤＣモードで予測サンプルを導出する方法の他の実施例を説明するための図である。図１３に開示された方法は、非正方形ブロックの幅と高さのうち、短い長さ側の参照サンプル個数ほど長い長さ側の参照サンプルを選択し、長い長さ側の参照サンプルから互いに異なる位置の参照サンプルを選択する方法を示す。

また、図１３では説明の便宜のために現在ブロックに１番目に近い（即ち、０サンプル距離に位置する）参照サンプルを使用する場合を例示して説明する。即ち、参照ラインインデックス情報（例：ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘ）の値が０である場合、ＤＣモードで使われる参照サンプルを図示した。図１３に開示された方法は、参照ラインインデックス情報（例：ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘ）の値が０でない場合、ＤＣモードでも同じく適用されることができる。

図１３の（ａ）乃至（ｄ）を参照すると、現在ブロックが非正方形ブロック（例えば、８×４ブロック）であり、かつ現在ブロックのイントラ予測モードがＤＣモードである場合、ＤＣモードのイントラ予測のために使われる隣接参照サンプルを導出することができる。このとき、隣接参照サンプルは、現在ブロックの左側隣接に位置する左側参照サンプル（Ｉ、Ｊ、Ｋ、Ｌ）と現在ブロックの上側隣接に位置する上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ｈ）のうち左側参照サンプルと同じ個数の参照サンプルを含むことができる。

例えば、図１３の（ａ）に示すように、上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ｈ）のうち奇数番目位置の参照サンプルをサンプリングして左側参照サンプル個数ほど選択できる。即ち、奇数番目位置の参照サンプルとは、上側参照サンプルののうち１番目位置の参照サンプルから２個ずつサンプリングして左側参照サンプル個数ほど選択された参照サンプル（Ａ、Ｃ、Ｅ、Ｇ）である。この場合、隣接参照サンプルは、総８個の参照サンプル（４個の左側参照サンプルと４個の上側参照サンプル）を含むことができる。ＤＣ値は、このような総８個の参照サンプルの平均を計算して導出されることができる。

他の例として、図１３の（ｂ）に示すように、上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ｈ）のうち偶数番目位置の参照サンプルをサンプリングして左側参照サンプル個数ほど選択できる。即ち、偶数番目位置の参照サンプルとは、上側参照サンプルのうち２番目位置の参照サンプルから２個ずつサンプリングして左側参照サンプル個数ほど選択された参照サンプル（Ｂ、Ｄ、Ｆ、Ｈ）である。この場合、隣接参照サンプルは、総８個の参照サンプル（４個の左側参照サンプルと４個の上側参照サンプル）を含むことができる。ＤＣ値は、このような総８個の参照サンプル等の平均を計算して導出されることができる。

他の例として、図１３の（ｃ）に示すように、上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ｈ）のうち１番目位置の参照サンプルから左側参照サンプル個数ほど連続的に位置した参照サンプル（Ａ、Ｂ、Ｃ、Ｄ）を選択することができる。この場合、隣接参照サンプルは、総８個の参照サンプル（４個の左側参照サンプルと４個の上側参照サンプル）を含むことができる。ＤＣ値は、このような総８個の参照サンプルの平均を計算して導出されることができる。

他の例として、図１３の（ｄ）に示すように、上側参照サンプル（Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ｈ）のうち最後の位置の参照サンプルから左側参照サンプル個数ほど連続的に位置した参照サンプル（Ｅ、Ｆ、Ｇ、Ｈ）を選択することができる。この場合、隣接参照サンプルは、総８個の参照サンプル（４個の左側参照サンプルと４個の上側参照サンプル）を含むことができる。ＤＣ値は、このような総８個の参照サンプル等の平均を計算して導出されることができる。

図１３の実施例では８×４ブロックを例示して説明したが、これは一つの例示に過ぎず、多様な大きさの非正方形ブロックに対しても前述した方法を適用して隣接参照サンプルを導出し、これに基づいてＤＣ値を計算することができる。一例として、現在ブロックが１６×４非正方形ブロックである時、左側参照サンプル４個と上側参照サンプル１６個の中から４個の参照サンプルを選択することができる。このとき、図１３の（ａ）方法を適用する場合、上側参照サンプル１６個のうち１番目位置の参照サンプルから４個ずつサンプリングして総４個の上側参照サンプルを選択することができる。したがって、左側参照サンプル４個とサンプリングされた４個の上側参照サンプルを使用して平均を計算することによってＤＣ値を導出することができる。図１３の（ｂ）、（ｃ）、（ｄ）で説明した方法に対しても同じく適用して左側参照サンプル及び上側参照サンプルを導出することができ、導出された参照サンプルに基づいてＤＣ値を計算することができる。

一方、多重参照ラインを使用するイントラ予測方法は、プラナーモードとＤＣモードを除外した方向性イントラ予測モードにのみ適用されることができる。したがって、多重参照ラインが使われる場合、非方向性モードであるプラナーモードとＤＣモードのイントラ予測が適用されることができない限界点がある。本文書では前述したようなＤＣモードでの隣接参照サンプルを導出する多様な方法を適用して多重参照ラインでＤＣモードイントラ予測を実行する方法を提案する。

一実施例として、多重参照ライン基盤のイントラ予測では複雑度を減らすために、全てのイントラ予測モードに多重参照ラインを適用せずに、ＭＰＭリストに含まれている候補イントラ予測モードに対してのみ多重参照ラインを適用することができる。したがって、多重参照ライン基盤のイントラ予測が適用される場合、ＤＣモードを実行するためにＭＰＭリスト内にＤＣモードを追加することができる。即ち、既存多重参照ラインを使用するイントラ予測のためのＭＰＭリストは、総６個の候補イントラ予測モードを生成し、この時に生成された６個の候補イントラ予測モードにはプラナーモードとＤＣモードを含まない。しかしながら、本文書によると、候補イントラ予測モードにＤＣモードを追加してＭＰＭリストを構成することができる。一例として、既存のＭＰＭリスト内の候補イントラ予測モード個数を変更せずにＤＣモードを追加することができる。この場合、現在ブロックの左側隣接ブロックに対する候補イントラ予測モードである左側モードと、現在ブロックの上側隣接ブロックに対する候補イントラ予測モードである上側モードと、を導出し、左側モード及び上側モードに基づいて候補イントラ予測モードを導出してＭＰＭリストを構成することができる。このとき、候補イントラ予測モードのうち一つをＤＣモードとして導出することができる。

候補イントラ予測モードのうち一つをＤＣモードとして導出するにあたって、一実施例として、ＭＰＭリスト内の候補イントラ予測モードのうち一つのモードを除去してＤＣモードを追加することもできる。このとき、ＭＰＭリスト内の候補イントラ予測モードを除去する方法は、ＭＰＭリスト内で最も発生確率が低い最後の順序に位置する候補イントラ予測モードを除去することができる。ただし、これは一つの例示に過ぎず、任意の順序に位置する候補イントラ予測モードを除去することもでき、または、ＤＣモードの発生頻度を考慮してＭＰＭリスト内で１番目の順序に位置する候補イントラ予測モードを除去することもできる。また、ＭＰＭリスト内のＤＣモードを追加する方法は、除去された位置にＤＣモードを追加することができる。例えば、ＭＰＭリスト内の最後の順序にＤＣモードを追加することができ、または、１番目の順序にＤＣモードを追加することができる。また、ＭＰＭリスト内のＤＣモードを追加する位置も任意の位置に決定できる。即ち、ＭＰＭリスト内の候補イントラ予測モードのうち任意の順序にある候補イントラ予測モードを除去し、任意の順序にＤＣモードを位置させることができる。

前述したように、ＭＰＭリスト内にＤＣモードを追加することによって多重参照ライン基盤のイントラ予測でＤＣモードを使用して予測を実行することができる。このとき、ＭＰＭリスト内に含まれているＤＣモードに対する予測は、図１２及び図１３で説明した多様なＤＣ値予測方法を使用することができる。

図１４は、本文書の一実施例によるエンコーディング装置により実行されることができるエンコーディング方法を概略的に示す流れ図である。

図１４に開示された方法は、図２で開示されたエンコーディング装置２００により実行されることができる。具体的に、図１７のステップＳ１４００～Ｓ１４２０は、図２に開示された予測部２２０（具体的に、イントラ予測部２２２）により実行されることができ、図１７のステップＳ１４２０～Ｓ１４３０は、図２に開示されたエントロピーエンコーディング部２４０により実行されることができる。また、図１４で開示された方法は、本文書で詳述した実施例を含むことができる。したがって、図１４では前述した実施例と重複する内容に関して具体的な説明を省略または簡単にする。

図１４を参照すると、エンコーディング装置は、現在ブロックに対する候補イントラ予測モードを含むＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）リストを構成することができる（Ｓ１４００）。

一実施例として、エンコーディング装置は、現在ブロックの左側隣接ブロックに対する候補イントラ予測モードである左側モードを導出し、現在ブロックの上側隣接ブロックに対する候補イントラ予測モードである上側モードを導出することができる。ここで、左側隣接ブロックは、現在ブロックの左側に隣接して位置する左側隣接ブロックのうち最下側に位置する隣接ブロックを示すことができ、上側隣接ブロックは、現在ブロックの上側に隣接して位置する上側隣接ブロックのうち最右側に位置する隣接ブロックを示すことができる。例えば、現在ブロックのサイズがＷ×Ｈであり、かつ現在ブロックの左上段（ｔｏｐ－ｌｅｆｔ）サンプルポジションのｘ成分がｘＮ及びｙ成分がｙＮである場合、左側隣接ブロックは（ｘＮ－１，ｙＮ＋Ｈ－１）座標のサンプルを含むブロックであり、上側隣接ブロックは（ｘＮ＋Ｗ－１，ｙＮ－１）座標のサンプルを含むブロックである。

例えば、エンコーディング装置は、左側隣接ブロックが可用し（ａｖａｉｌａｂｌｅ）、左側隣接ブロックにイントラ予測が適用された場合、左側隣接ブロックのイントラ予測モードを左側候補イントラ予測モード（即ち、左側モード）として導出することができる。エンコーディング装置は、上側隣接ブロックが可用し（ａｖａｉｌａｂｌｅ）、上側隣接ブロックにイントラ予測が適用され、上側隣接ブロックが現在ＣＴＵに含まれている場合、上側隣接ブロックのイントラ予測モードを上側候補イントラ予測モード（即ち、上側モード）として導出することができる。または、エンコーディング装置は、左側隣接ブロックが可用しない、または、左側隣接ブロックにイントラ予測が適用されない場合、プラナーモードを左側モードとして導出することができる。エンコーディング装置は、上側隣接ブロックが可用しない、または、上側隣接ブロックにイントラ予測が適用されない、または、上側隣接ブロックが現在ＣＴＵに含まれない場合、プラナーモードを上側モードとして導出することができる。

エンコーディング装置は、左側隣接ブロックから導出された左側モード及び上側隣接ブロックから導出された上側モードに基づいて、現在ブロックに対する候補イントラ予測モードを導出してＭＰＭリストを構成することができる。このとき、ＭＰＭリストは、左側モード及び上側モードを含むこともでき、あらかじめ決められた方法によって特定イントラ予測モードをさらに含むこともできる。

一実施例として、エンコーディング装置は、現在ブロックに対して多重参照ラインを適用してイントラ予測を実行するかどうかを決定することができ、前記決定によって特定イントラ予測モードを導出してＭＰＭリストに含ませることができる。現在ブロックに対して多重参照ラインを適用してイントラ予測を実行する場合、エンコーディング装置は、参照ラインインデックス情報を生成してシグナリングできる。参照ラインインデックス情報は、現在ブロックのイントラ予測のために使われる参照ラインを示すインデックス値を含むことができ、例えば、前述したｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘシンタックス要素の形態でシグナリングされることができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が０である場合、現在ブロックに１番目に近い（即ち、０サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が１である場合、現在ブロックに２番目に近い（即ち、１サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が２である場合、現在ブロックに３番目または４番目に近い（即ち、２または３サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。

例えば、エンコーディング装置は、参照ラインインデックス情報の値が０でない場合、ＤＣモードを候補イントラ予測モードのうち一つとして導出することができ、導出されたＤＣモードをＭＰＭリストに含ませることができる。このとき、ＤＣモードは、ＭＰＭリスト内で任意の順序に位置させることができる。または、ＤＣモードは、発生頻度を考慮してＭＰＭリスト内で１番目の順序に含ませ、または、最後の順序に含ませることができる。

エンコーディング装置は、ＭＰＭリストに含まれている候補イントラ予測モードに基づいて現在ブロックのイントラ予測モードを導出することができる（Ｓ１４１０）。

一実施例として、エンコーディング装置は、現在ブロックに対して多様なイントラ予測モードを実行して最適のＲＤ（ｒａｔｅ－ｄｉｓｔｏｒｔｉｏｎ）ｃｏｓｔを有するイントラ予測モードを導出し、これを現在ブロックのイントラ予測モードとして決定できる。このとき、エンコーディング装置は、２個の非方向性イントラ予測モードと６５個のイントラ方向性予測モードとを含むイントラ予測モードに基づいて、現在ブロックに対する最適のイントラ予測モードを導出することができる。または、エンコーディング装置は、ＭＰＭリストに構成されたＭＰＭ候補のみを利用して最適のイントラ予測モードを決定することもできる。ここで、ＭＰＭ候補は、ＭＰＭリストの候補個数によって候補イントラ予測モード及び／またはプラナーモードを含むことができる。例えば、ＭＰＭリストの候補個数が６個である場合、ＭＰＭ候補は、プラナーモード及び候補イントラ予測モードを含むものであり、ＭＰＭリストの候補個数が５個である場合、ＭＰＭ候補は、候補イントラ予測モードを含むものである。

例えば、エンコーディング装置は、参照ラインインデックス情報の値が０でない場合、ＭＰＭリストに含まれているＭＰＭ候補イントラ予測モードを利用して現在ブロックのための最適のイントラ予測モードを導出することができる。即ち、この場合、現在ブロックに対するイントラ予測モードは、ＭＰＭリスト内のＤＣモードを含む候補イントラ予測モード（及びプラナーモード）の中でのみ決定されることができる。また、エンコーディング装置は、参照ラインインデックス情報の値が０でない場合、ＭＰＭフラグ情報をエンコーディング／シグナリングしない。このようにＭＰＭフラグ情報がエンコーディング／シグナリングされない場合、ＭＰＭフラグ情報の値は１に誘導されることができる。前述したように、ＭＰＭフラグ情報は、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇシンタックス要素の形態で表すことができる。例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇの値が１である場合、現在ブロックのイントラ予測モードがＭＰＭ候補イントラ予測モード（候補イントラ予測モード及び／またはプラナーモード）の中から選択されることを示し、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇの値が０である場合、現在ブロックのイントラ予測モードがＭＰＭ候補イントラ予測モード（候補イントラ予測モード及び／またはプラナーモード）の中から選択されないことを示すことができる。

エンコーディング装置は、ＭＰＭリストに含まれている候補イントラ予測モードのうち現在ブロックのイントラ予測モードを指示するＭＰＭインデックス情報を生成することができる（Ｓ１４２０）。

一実施例として、エンコーディング装置は、参照ラインインデックス情報の値が０でない、かつＭＰＭフラグ情報の値が１に誘導された場合、ＭＰＭリスト内にある候補イントラ予測モードのうち一つを指示するインデックス値を生成してＭＰＭインデックス情報でエンコーディングできる。即ち、参照ラインインデックス情報の値が０でない、かつＭＰＭフラグ情報の値が１に誘導された場合、ＭＰＭインデックス情報は、エンコーディング／シグナリングされることができる。

例えば、現在ブロックのイントラ予測モードがＭＰＭリストに含まれているＤＣモードとして導出された場合、ＭＰＭインデックス情報は、ＭＰＭリストに含まれている候補イントラ予測モードのうちＤＣモードを指示するインデックス値に生成されることができる。このとき、ＤＣモードがＭＰＭリスト内で１番目の順序に含まれている場合、ＭＰＭインデックス情報は、インデックス値０に設定されてエンコーディングされることができる。または、ＤＣモードがＭＰＭリスト内で最後の順序に含まれている場合、ＭＰＭインデックス情報は、ＭＰＭリストの候補個数によってインデックス値ｎ（例えば、候補個数が６個である場合にｎは５、または、候補個数が５である場合にｎは４）に設定されてエンコーディングされることができる。

また、エンコーディング装置は、現在ブロックに対して決定されたイントラ予測モードに基づいてイントラ予測を実行して現在ブロックに対する予測サンプルを生成することができる。例えば、現在ブロックのイントラ予測モードがＭＰＭリストに含まれているＤＣモードとして導出された場合、エンコーディング装置は、現在ブロックが正方形ブロックであるか、または非正方形ブロックであるかに基づいて、現在ブロックのＤＣモードのために使われる隣接参照サンプルを導出し、隣接参照サンプルに基づいて現在ブロックに対するＤＣ値を計算し、ＤＣ値に基づいて予測サンプルを生成することができる。このとき、隣接参照サンプルを導出する過程は、前述した多様な実施例が適用されることができ、これは図１２及び図１３を参照して詳細に説明した。

一実施例として、現在ブロックが正方形ブロックである場合、エンコーディング装置は、現在ブロックの左側参照サンプル及び現在ブロックの上側参照サンプルを含んで隣接参照サンプルを導出することができる。このとき、エンコーディング装置は、参照ラインインデックス情報に基づいて隣接参照サンプルを導出することができる。例えば、この場合、隣接参照サンプルは、参照ラインインデックス情報が指示する左側参照ライン（即ち、０、１、２、または３サンプル距離に位置する左側参照サンプル）及び上側参照ライン（即ち、０、１、２、または３サンプル距離に位置する上側参照サンプル）を含むことができる。

または、現在ブロックが非正方形ブロックであり、かつ現在ブロックの幅が高さより大きい場合、エンコーディング装置は、現在ブロックの上側参照サンプルを含んで隣接参照サンプルを導出することができる。一例として、上側参照サンプルは、現在ブロックの幅と同じ個数の参照サンプルを含むことができる。他の例として、上側参照サンプルは、左側参照サンプルと同じ個数の参照サンプルを含むことができる。また、他の例として、上側参照サンプルは、現在ブロックの上側参照サンプルのうち奇数番目のサンプルまたは偶数番目のサンプルをサンプリングして左側参照サンプルと同じ個数ほど含むこともできる。また、この場合、エンコーディング装置は、参照ラインインデックス情報に基づいて隣接参照サンプルを導出することができる。例えば、この場合、隣接参照サンプルは、参照ラインインデックス情報が指示する上側参照ライン（即ち、０、１、２、または３サンプル距離に位置する上側参照サンプル）を含むことができる。

または、現在ブロックが非正方形ブロックであり、かつ現在ブロックの幅が高さより小さい場合、エンコーディング装置は、現在ブロックの左側参照サンプルを含んで隣接参照サンプルを導出することができる。一例として、左側参照サンプルは、現在ブロックの高さと同じ個数の参照サンプルを含むことができる。他の例として、左側参照サンプルは、上側参照サンプルと同じ個数の参照サンプルを含むことができる。また、他の例として、左側参照サンプルは、現在ブロックの左側参照サンプルのうち奇数番目のサンプルまたは偶数番目のサンプルをサンプリングして上側参照サンプルと同じ個数ほど含むこともできる。また、この場合、エンコーディング装置は、参照ラインインデックス情報に基づいて隣接参照サンプルを導出することができる。例えば、この場合、隣接参照サンプルは、参照ラインインデックス情報が指示する左側参照ライン（即ち、０、１、２、または３サンプル距離に位置する左側参照サンプル）を含むことができる。

また、エンコーディング装置は、現在ブロックの予測サンプルと現在ブロックの原本サンプルに基づいて、現在ブロックに対するレジデュアルサンプルを導出することができる。そして、エンコーディング装置は、レジデュアルサンプルに基づいて現在ブロックに対するレジデュアル情報を生成し、レジデュアル情報を含む映像情報をエンコーディングすることができる。ここで、レジデュアル情報は、レジデュアルサンプルに変換及び量子化を実行して導出された量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含むことができる。

エンコーディング装置は、参照ラインインデックス情報またはＭＰＭインデックス情報のうち少なくとも一つを含む映像情報をエンコーディングすることができる（Ｓ１４３０）。

一実施例として、エンコーディング装置は、前述したように、多重参照ライン基盤のイントラ予測を適用するかどうかに基づいて決定された参照ラインインデックス情報と、ＭＰＭリストに基づいて導出された現在ブロックのイントラ予測モード情報（例えば、ＭＰＭインデックス情報）と、を含む映像情報をエンコーディングしてビットストリームで出力できる。また、エンコーディング装置は、レジデュアル情報をさらに導出してエンコーディングでき、これをビットストリーム形態で出力できる。

ビットストリームは、ネットワークまたは（デジタル）格納媒体を介してデコーディング装置に送信されることができる。ここで、ネットワークは、放送網及び／または通信網などを含むことができ、デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、多様な格納媒体を含むことができる。

前述した現在ブロックに対する予測サンプルを生成する過程は、図２で開示されたエンコーディング装置２００のイントラ予測部２２２により実行されることができ、レジデュアルサンプルを導出する過程は、図２で開示されたエンコーディング装置２００の減算部２３１により実行されることができ、レジデュアル情報を生成してエンコーディングする過程は、図２で開示されたエンコーディング装置２００のレジデュアル処理部２３０及びエントロピーエンコーディング部２４０により実行されることができる。

図１５は、本文書の一実施例によるデコーディング装置により実行されることができるデコーディング方法を概略的に示す流れ図である。

図１５に開示された方法は、図３で開示されたデコーディング装置３００により実行されることができる。具体的に、図１５のステップＳ１５００～Ｓ１５２０は、図３に開示された予測部３３０（具体的に、イントラ予測部３３１）により実行されることができ、図１５のステップＳ１５３０は、図３に開示されたレジデュアル処理部３２０及び／または加算部３４０により実行されることができる。また、図１５で開示された方法は、本文書で詳述した実施例を含むことができる。したがって、図１５では前述した実施例と重複する内容に関して具体的な説明を省略または簡単にする。

図１５を参照すると、デコーディング装置は、現在ブロックに対する候補イントラ予測モードを含むＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）リストを構成することができる（Ｓ１５００）。

一実施例として、デコーディング装置は、現在ブロックの左側隣接ブロックに対する候補イントラ予測モードである左側モードを導出し、現在ブロックの上側隣接ブロックに対する候補イントラ予測モードである上側モードを導出することができる。ここで、左側隣接ブロックは、現在ブロックの左側に隣接して位置する左側隣接ブロックのうち最下側に位置する隣接ブロックを示すことができ、上側隣接ブロックは、現在ブロックの上側に隣接して位置する上側隣接ブロックのうち最右側に位置する隣接ブロックを示すことができる。例えば、現在ブロックのサイズがＷ×Ｈであり、かつ現在ブロックの左上段（ｔｏｐ－ｌｅｆｔ）サンプルポジションのｘ成分がｘＮ及びｙ成分がｙＮである場合、左側隣接ブロックは（ｘＮ－１，ｙＮ＋Ｈ－１）座標のサンプルを含むブロックであり、上側隣接ブロックは（ｘＮ＋Ｗ－１，ｙＮ－１）座標のサンプルを含むブロックである。

例えば、デコーディング装置は、左側隣接ブロックが可用し（ａｖａｉｌａｂｌｅ）、左側隣接ブロックにイントラ予測が適用された場合、左側隣接ブロックのイントラ予測モードを左側候補イントラ予測モード（即ち、左側モード）として導出することができる。デコーディング装置は、上側隣接ブロックが可用し（ａｖａｉｌａｂｌｅ）、上側隣接ブロックにイントラ予測が適用され、上側隣接ブロックが現在ＣＴＵに含まれている場合、上側隣接ブロックのイントラ予測モードを上側候補イントラ予測モード（即ち、上側モード）として導出することができる。または、デコーディング装置は、左側隣接ブロックが可用しない、または、左側隣接ブロックにイントラ予測が適用されない場合、プラナーモードを左側モードとして導出することができる。デコーディング装置は、上側隣接ブロックが可用しない、または、上側隣接ブロックにイントラ予測が適用されない、または、上側隣接ブロックが現在ＣＴＵに含まれない場合、プラナーモードを上側モードとして導出することができる。

デコーディング装置は、左側隣接ブロックから導出された左側モード及び上側隣接ブロックから導出された上側モードに基づいて、現在ブロックに対する候補イントラ予測モードを導出してＭＰＭリストを構成することができる。このとき、ＭＰＭリストは、左側モード及び上側モードを含むこともでき、あらかじめ決められた方法によって特定イントラ予測モードをさらに含むこともできる。

一実施例として、デコーディング装置は、現在ブロックに対して多重参照ラインを適用してイントラ予測を実行するかどうかを決定することができ、前記決定によって特定イントラ予測モードを導出してＭＰＭリストに含ませることができる。即ち、デコーディング装置は、参照ラインインデックス情報を取得して現在ブロックに対して多重参照ラインを適用することで、イントラ予測を実行するかどうかを決定することができる。参照ラインインデックス情報は、現在ブロックのイントラ予測のために使われる参照ラインを示すインデックス値を含むことができ、例えば、前述したｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘシンタックス要素の形態でシグナリングされることができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が０である場合、現在ブロックに１番目に近い（即ち、０サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が１である場合、現在ブロックに２番目に近い（即ち、１サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。ｉｎｔｒａ＿ｌｕｍａ＿ｒｅｆ＿ｉｄｘの値が２である場合、現在ブロックに３番目または４番目に近い（即ち、２または３サンプル距離に位置する）参照サンプルを使用してイントラ予測が実行されることを示すことができる。

例えば、デコーディング装置は、参照ラインインデックス情報の値が０でない場合、ＤＣモードを候補イントラ予測モードのうち一つとして導出することができ、導出されたＤＣモードをＭＰＭリストに含ませることができる。このとき、ＤＣモードは、ＭＰＭリスト内で任意の順序に位置させることができる。または、ＤＣモードは、発生頻度を考慮してＭＰＭリスト内で１番目の順序に含ませ、または、最後の順序に含ませることができる。

デコーディング装置は、ＭＰＭインデックス情報に基づいてＭＰＭリストから現在ブロックのイントラ予測モードを導出することができる（Ｓ１５１０）。

一実施例として、デコーディング装置は、ビットストリームから現在ブロックに対するイントラ予測モード情報を取得することができる。イントラ予測モード情報は、現在ブロックのイントラ予測モードを示すための情報であって、ＭＰＭフラグ情報、ＭＰＭインデックス情報、及びリメイニングモード情報などを含むことができる。

このとき、参照ラインインデックス情報の値が０でない場合、ＭＰＭフラグ情報は、エンコーディング装置からシグナリングされない。このようにＭＰＭフラグ情報がシグナリングされない場合、デコーディング装置は、ＭＰＭフラグ情報の値を１に誘導できる。前述したように、ＭＰＭフラグ情報は、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇシンタックス要素の形態でシグナリングされることができる。例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇの値が１である場合、現在ブロックのイントラ予測モードがＭＰＭ候補イントラ予測モード（候補イントラ予測モード及び／またはプラナーモード）の中から選択されることを示し、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇの値が０である場合、現在ブロックのイントラ予測モードがＭＰＭ候補イントラ予測モード（候補イントラ予測モード及び／またはプラナーモード）の中から選択されないことを示すことができる。ここで、ＭＰＭ候補イントラ予測モードは、ＭＰＭリストの候補個数によって候補イントラ予測モード及び／またはプラナーモードを含むことができる。例えば、ＭＰＭリストの候補個数が６個である場合、ＭＰＭ候補は、プラナーモード及び候補イントラ予測モードを含むものであり、ＭＰＭリストの候補個数が５個である場合、ＭＰＭ候補は、候補イントラ予測モードを含むものである。

また、参照ラインインデックス情報の値が０でない、かつＭＰＭフラグ情報の値が１に誘導された場合、ＭＰＭインデックス情報は、エンコーディング装置からシグナリングされることができる。即ち、デコーディング装置は、ビットストリームからＭＰＭインデックス情報を取得してデコーディングできる。前述したように、ＭＰＭインデックス情報は、ＭＰＭリストに含まれている候補イントラ予測モードのうち現在ブロックのためのイントラ予測モードを指示するインデックス値を含み、例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘシンタックス要素の形態で表すことができる。

即ち、参照ラインインデックス情報の値が０でない、かつＭＰＭフラグ情報の値が１に誘導された場合、デコーディング装置は、ＭＰＭインデックス情報を取得してデコーディングし、これに基づいてＭＰＭリストから現在ブロックのイントラ予測モードを導出することができる。

例えば、ＭＰＭインデックス情報がＭＰＭリストに含まれている候補イントラ予測モードのうちＤＣモードを指示する場合、デコーディング装置は、現在ブロックのイントラ予測モードとしてＤＣモードを導出することができる。このとき、ＤＣモードがＭＰＭリスト内で１番目の順序に含まれている場合、ＭＰＭインデックス情報は、インデックス値０でエンコーディングされてシグナリングされることができる。または、ＤＣモードがＭＰＭリスト内で最後の順序に含まれている場合、ＭＰＭインデックス情報は、ＭＰＭリストの候補個数によってインデックス値ｎ（例えば、候補個数が６個である場合にｎは５、または、候補個数が５である場合にｎは４）でエンコーディングされてシグナリングされることができる。

デコーディング装置は、イントラ予測モードに基づいて現在ブロックに対する予測サンプルを生成することができる（Ｓ１５２０）。

例えば、現在ブロックのイントラ予測モードがＭＰＭリストに含まれているＤＣモードとして導出された場合、デコーディング装置は、現在ブロックが正方形ブロックであるかまたは非正方形ブロックであるかに基づいて、現在ブロックのＤＣモードのために使われる隣接参照サンプルを導出し、隣接参照サンプルに基づいて現在ブロックに対するＤＣ値を計算し、ＤＣ値に基づいて予測サンプルを生成することができる。このとき、隣接参照サンプルを導出する過程は、前述した多様な実施例が適用されることができ、これは図１２及び図１３を参照して詳細に説明した。

一実施例として、現在ブロックが正方形ブロックである場合、デコーディング装置は、現在ブロックの左側参照サンプル及び現在ブロックの上側参照サンプルを含んで隣接参照サンプルを導出することができる。このとき、デコーディング装置は、参照ラインインデックス情報に基づいて隣接参照サンプルを導出することができる。例えば、この場合、隣接参照サンプルは、参照ラインインデックス情報が指示する左側参照ライン（即ち、０、１、２、または３サンプル距離に位置する左側参照サンプル）及び上側参照ライン（即ち、０、１、２、または３サンプル距離に位置する上側参照サンプル）を含むことができる。

または、現在ブロックが非正方形ブロックであり、かつ現在ブロックの幅が高さより大きい場合、デコーディング装置は、現在ブロックの上側参照サンプルを含んで隣接参照サンプルを導出することができる。一例として、上側参照サンプルは、現在ブロックの幅と同じ個数の参照サンプルを含むことができる。他の例として、上側参照サンプルは、左側参照サンプルと同じ個数の参照サンプルを含むことができる。また、他の例として、上側参照サンプルは、現在ブロックの上側参照サンプルのうち奇数番目のサンプルまたは偶数番目のサンプルをサンプリングして左側参照サンプルと同じ個数ほど含むこともできる。また、この場合、デコーディング装置は、参照ラインインデックス情報に基づいて隣接参照サンプルを導出することができる。例えば、この場合、隣接参照サンプルは、参照ラインインデックス情報が指示する上側参照ライン（即ち、０、１、２、または３サンプル距離に位置する上側参照サンプル）を含むことができる。

または、現在ブロックが非正方形ブロックであり、かつ現在ブロックの幅が高さより小さい場合、デコーディング装置は、現在ブロックの左側参照サンプルを含んで隣接参照サンプルを導出することができる。一例として、左側参照サンプルは、現在ブロックの高さと同じ個数の参照サンプルを含むことができる。他の例として、左側参照サンプルは、上側参照サンプルと同じ個数の参照サンプルを含むことができる。また、他の例として、左側参照サンプルは、現在ブロックの左側参照サンプルのうち、奇数番目のサンプルまたは偶数番目のサンプルをサンプリングして上側参照サンプルと同じ個数ほど含むこともできる。また、この場合、デコーディング装置は、参照ラインインデックス情報に基づいて隣接参照サンプルを導出することができる。例えば、この場合、隣接参照サンプルは、参照ラインインデックス情報が指示する左側参照ライン（即ち、０、１、２、または３サンプル距離に位置する左側参照サンプル）を含むことができる。

デコーディング装置は、予測サンプルに基づいて現在ブロックに対する復元ピクチャを生成することができる（Ｓ１５３０）。

一実施例として、デコーディング装置は、予測モードによって予測サンプルを復元サンプルとして利用することもでき、または、前記予測サンプルにレジデュアルサンプルを加えて復元サンプルを生成することもできる。

デコーディング装置は、現在ブロックに対するレジデュアルサンプルが存在する場合、現在ブロックに対するレジデュアルに関する情報を受信することができる。レジデュアルに関する情報は、レジデュアルサンプルに関する変換係数を含むことができる。デコーディング装置は、レジデュアル情報に基づいて現在ブロックに対するレジデュアルサンプル（または、レジデュアルサンプルアレイ）を導出することができる。デコーディング装置は、予測サンプルとレジデュアルサンプルに基づいて復元サンプルを生成することができ、前記復元サンプルに基づいて復元ブロックまたは復元ピクチャを導出することができる。以後、デコーディング装置は、必要によって、主観的／客観的画質を向上させるために、デブロッキングフィルタリング及び／またはＳＡＯ手順のようなインループフィルタリング手順を前記復元ピクチャに適用可能であることは、前述した通りである。

前述した実施例において、方法は、一連のステップまたはブロックで流れ図に基づいて説明されているが、本文書の実施例は、ステップの順序に限定されるものではなく、あるステップは、前述と異なるステップと、異なる順序にまたは同時に発生できる。また、当業者であれば、流れ図に示すステップが排他的でなく、他のステップが含まれ、または、流れ図の一つまたはそれ以上のステップが本文書の範囲に影響を及ぼさずに削除可能であることを理解することができる。

前述した本文書による方法は、ソフトウェア形態で具現されることができ、本文書によるエンコーディング装置及び／またはデコーディング装置は、例えば、ＴＶ、コンピュータ、スマートフォン、セットトップボックス、ディスプレイ装置などの映像処理を実行する装置に含まれることができる。

本文書において、実施例がソフトウェアで具現される時、前述した方法は、前述した機能を遂行するモジュール（過程、機能など）で具現されることができる。モジュールは、メモリに格納され、プロセッサにより実行されることができる。メモリは、プロセッサの内部または外部にあり、よく知られた多様な手段でプロセッサと連結されることができる。プロセッサは、ＡＳＩＣ（ａｐｐｌｉｃａｔｉｏｎ－ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ）、他のチップセット、論理回路及び／またはデータ処理装置を含むことができる。メモリは、ＲＯＭ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）、フラッシュメモリ、メモリカード、格納媒体及び／または他の格納装置を含むことができる。即ち、本文書で説明した実施例は、プロセッサ、マイクロプロセッサ、コントローラまたはチップ上で具現されて実行されることができる。例えば、各図面で示す機能ユニットは、コンピュータ、プロセッサ、マイクロプロセッサ、コントローラまたはチップ上で具現されて実行されることができる。この場合、具現のための情報（例えば、ｉｎｆｏｒｍａｔｉｏｎ ｏｎ ｉｎｓｔｒｕｃｔｉｏｎｓ）またはアルゴリズムがデジタル格納媒体に格納されることができる。

また、本文書が適用されるデコーディング装置及びエンコーディング装置は、マルチメディア放送送受信装置、モバイル通信端末、ホームシネマビデオ装置、デジタルシネマビデオ装置、監視用カメラ、ビデオ対話装置、ビデオ通信のようなリアルタイム通信装置、モバイルストリーミング装置、格納媒体、カムコーダ、注文型ビデオ（ＶｏＤ）サービス提供装置、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置、インターネットストリーミングサービス提供装置、３次元（３Ｄ）ビデオ装置、ＶＲ（ｖｉｒｔｕａｌ ｒｅａｌｉｔｙ）装置、ＡＲ（ａｒｇｕｍｅｎｔｅ ｒｅａｌｉｔｙ）装置、画像電話ビデオ装置、運送手段端末（例えば、車両（自律走行車両を含む）端末、飛行機端末、船舶端末等）、及び医療用ビデオ装置などに含まれることができ、ビデオ信号またはデータ信号を処理するために使われることができる。例えば、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置として、ゲームコンソール、ブルーレイプレーヤ、インターネット接続ＴＶ、ホームシアターシステム、スマートフォン、タブレットＰＣ、ＤＶＲ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｒｅｃｏｄｅｒ）などを含むことができる。

また、本文書が適用される処理方法は、コンピュータで実行されるプログラムの形態で生産されることができ、コンピュータが読み取り可能な記録媒体に格納されることができる。また、本文書によるデータ構造を有するマルチメディアデータもコンピュータが読み取り可能な記録媒体に格納されることができる。前記コンピュータが読み取り可能な記録媒体は、コンピュータで読み出すことができるデータが格納される全ての種類の格納装置及び分散格納装置を含む。前記コンピュータが読み取り可能な記録媒体は、例えば、ブルーレイディスク（ＢＤ）、汎用直列バス（ＵＳＢ）、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、及び光学的データ格納装置を含むことができる。また、前記コンピュータが読み取り可能な記録媒体は、搬送波（例えば、インターネットを介した送信）の形態で具現されたメディアを含む。また、エンコーディング方法で生成されたビットストリームがコンピュータが読み取り可能な記録媒体に格納され、または、有無線通信ネットワークを介して送信されることができる。

また、本文書の実施例は、プログラムコードによるコンピュータプログラム製品で具現されることができ、前記プログラムコードは、本文書の実施例によりコンピュータで実行されることができる。前記プログラムコードは、コンピュータにより読み取り可能なキャリア上に格納されることができる。

図１６は、本文書に開示された実施例が適用されることができるコンテンツストリーミングシステムの例を示す。

図１６を参照すると、本文書の実施例に適用されるコンテンツストリーミングシステムは、大別して、エンコーディングサーバ、ストリーミングサーバ、ウェブサーバ、メディア格納所、ユーザ装置、及びマルチメディア入力装置を含むことができる。

前記エンコーディングサーバは、スマートフォン、カメラ、カムコーダなどのようなマルチメディア入力装置から入力されたコンテンツをデジタルデータで圧縮してビットストリームを生成し、これを前記ストリーミングサーバに送信する役割をする。他の例として、スマートフォン、カメラ、カムコーダなどのようなマルチメディア入力装置がビットストリームを直接生成する場合、前記エンコーディングサーバは省略されることができる。

前記ビットストリームは、本文書の実施例に適用されるエンコーディング方法またはビットストリーム生成方法により生成されることができ、前記ストリーミングサーバは、前記ビットストリームを送信または受信する過程で一時的に前記ビットストリームを格納することができる。

前記ストリーミングサーバは、ウェブサーバを介したユーザ要請に基づいてマルチメディアデータをユーザ装置に送信し、前記ウェブサーバは、ユーザにどのようなサービスがあるかを知らせる媒介体役割をする。ユーザが前記ウェブサーバに所望のサービスを要請すると、前記ウェブサーバは、これをストリーミングサーバに伝達し、前記ストリーミングサーバは、ユーザにマルチメディアデータを送信する。このとき、前記コンテンツストリーミングシステムは、別途の制御サーバを含むことができ、この場合、前記制御サーバは、前記コンテンツストリーミングシステム内の各装置間の命令／応答を制御する役割をする。

前記ストリーミングサーバは、メディア格納所及び／またはエンコーディングサーバからコンテンツを受信することができる。例えば、前記エンコーディングサーバからコンテンツを受信するようになる場合、前記コンテンツをリアルタイムで受信することができる。この場合、円滑なストリーミングサービスを提供するために、前記ストリーミングサーバは、前記ビットストリームを一定時間の間格納することができる。

前記ユーザ装置の例として、携帯電話、スマートフォン（ｓｍａｒｔ ｐｈｏｎｅ）、ノートブックコンピュータ（ｌａｐｔｏｐ ｃｏｍｐｕｔｅｒ）、デジタル放送用端末、ＰＤＡ（ｐｅｒｓｏｎａｌ ｄｉｇｉｔａｌ ａｓｓｉｓｔａｎｔｓ）、ＰＭＰ（ｐｏｒｔａｂｌｅ ｍｕｌｔｉｍｅｄｉａ ｐｌａｙｅｒ）、ナビゲーション、スレートＰＣ（ｓｌａｔｅ ＰＣ）、タブレットＰＣ（ｔａｂｌｅｔ ＰＣ）、ウルトラブック（ｕｌｔｒａｂｏｏｋ）、ウェアラブルデバイス（ｗｅａｒａｂｌｅ ｄｅｖｉｃｅ、例えば、ウォッチ型端末（ｓｍａｒｔｗａｔｃｈ）、グラス型端末（ｓｍａｒｔ ｇｌａｓｓ）、ＨＭＤ（ｈｅａｄ ｍｏｕｎｔｅｄ ｄｉｓｐｌａｙ）、デジタルＴＶ、デスクトップコンピュータ、デジタルサイニジがある。

前記コンテンツストリーミングシステム内の各サーバは、分散サーバとして運営されることができ、この場合、各サーバで受信するデータは、分散処理されることができる。

Claims (15)

1. デコーディング装置により実行される映像デコーディング方法において、
   ビットストリームから参照ラインインデックス情報を含む映像情報を取得するステップと、
   現在ブロックに対する候補イントラ予測モードを含むＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）リストを構成するステップと、
   前記ＭＰＭリストに含まれる前記候補イントラ予測モードのうち、前記現在ブロックのイントラ予測モードを指示するＭＰＭインデックス情報に基づいて、前記ＭＰＭリストから前記現在ブロックのイントラ予測モードを導出するステップと、
   前記イントラ予測モードに基づいて前記現在ブロックの予測サンプルを導出するステップと、
   前記予測サンプルに基づいて復元ピクチャを生成するステップとを含み、
   前記ＭＰＭリストを構成するステップは、
   前記現在ブロックのイントラ予測のために使われる参照ラインを示す参照ラインインデックス情報の値が０に等しくないことに基づいて、前記ＭＰＭリストにＤＣモードを含むために前記ＤＣモードを前記候補イントラ予測モードのうちの一つとして導出するステップ含み、
   前記ＭＰＭインデックス情報が前記ＭＰＭリストに含まれる前記候補イントラ予測モードの中の前記ＤＣモードを示すことに基づいて、前記ＤＣモードは前記現在ブロックのイントラ予測モードとして導出され、
   前記参照ラインインデックス情報の値が０に等しくないことに基づいて、参照ラインｎは前記現在ブロックの予測サンプルを生成するために利用され、ここで、前記ｎは０より大きく、
   前記現在ブロックの予測サンプルを生成するステップは、
   前記現在ブロックの参照ラインｎにおける参照サンプルの中の特定参照サンプルを利用して前記現在ブロックに対するＤＣ値を計算するステップであって、前記参照サンプルは、前記現在ブロックの参照ラインｎにおいて左側参照サンプルと上側参照サンプルを含む、ステップと、
   前記ＤＣ値に基づいて前記予測サンプルを導出するステップとを含み、
   前記特定参照サンプルは、前記現在ブロックが正方形ブロック又は非正方形ブロックであることに基づいて、決定され、
   前記現在ブロックが前記正方形ブロックであることに基づいて、前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記左側参照サンプルと前記参照ラインｎ内の前記上側参照サンプルを含み、
   前記現在ブロックが前記非正方形ブロックであり、前記現在ブロックの幅が前記現在ブロックの高さより大きいことに基づいて、前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記上側参照サンプルを含み、前記参照ラインｎ内の前記左側参照サンプルを含まず、
   前記現在ブロックが前記非正方形ブロックであり、前記現在ブロックの幅が前記現在ブロックの高さより小さいことに基づいて、
   前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記左側参照サンプルを含み、前記参照ラインｎ内の前記上側参照サンプルを含まない、映像デコーディング方法。
2. 前記ＭＰＭリストを構成するステップは、
   前記ＭＰＭリストの最後の順序に前記ＤＣモードを含む、請求項１に記載の映像デコーディング方法。
3. 前記ＭＰＭリストを構成するステップは、
   前記ＭＰＭリストの１番目の順序に前記ＤＣモードを含む、請求項１に記載の映像デコーディング方法。
4. 前記参照ラインインデックス情報の値が０でないことに基づいて、前記現在ブロックのイントラ予測モードがＭＰＭ候補イントラ予測モードの中から選択されるかどうかを示すＭＰＭフラグ情報はシグナリングされず、前記ＭＰＭフラグ情報の値は１に誘導される、請求項１に記載の映像デコーディング方法。
5. 前記現在ブロックが非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより大きいことに基づいて、前記ＤＣ値を計算するために利用される前記上側参照サンプルの数は、前記現在ブロックの幅と同じであり、
   前記現在ブロックが非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより小さいことに基づいて、前記ＤＣ値を計算するために利用される前記左側参照サンプルの数は、前記現在ブロックの高さと同じである、請求項１に記載の映像デコーディング方法。
6. 前記現在ブロックが非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより大きいことに基づいて、前記ＤＣ値を計算するために利用される前記上側参照サンプルの数は、前記左側参照サンプルの数と同じであり、
   前記現在ブロックが非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより小さいことに基づいて、前記ＤＣ値を計算するために利用される前記左側参照サンプルの数は、前記上側参照サンプルの数と同じである、請求項１に記載の映像デコーディング方法。
7. 前記現在ブロックが前記非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより大きいことに基づいて、前記ＤＣ値を計算するために利用される前記上側参照サンプルは、奇数番目のサンプルまたは偶数番目のサンプルを含む、請求項６に記載の映像デコーディング方法。
8. エンコーディング装置により実行される映像エンコーディング方法において、
   現在ブロックに対する候補イントラ予測モードを含むＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）リストを構成するステップと、
   前記ＭＰＭリストに含まれる前記候補イントラ予測モードに基づいて前記現在ブロックのイントラ予測モードを導出するステップと、
   前記ＭＰＭリストに含まれる前記候補イントラ予測モードの中の前記現在ブロックのイントラ予測モードを指示するＭＰＭインデックス情報を生成するステップと、
   前記イントラ予測モードに基づいて、前記現在ブロックの予測サンプルを生成するステップと、
   前記現在ブロックのイントラ予測のために使われる参照ラインを示す参照ラインインデックス情報及び前記ＭＰＭインデックス情報の少なくとも一つを含む映像情報をエンコーディングするステップとを含み、
   前記ＭＰＭリストを構成するステップは、
   前記参照ラインインデックス情報の値が０に等しくないことに基づいて、ＤＣモードを前記ＭＰＭリストに含むために前記候補イントラ予測モードの一つとして前記ＤＣモードを導出することを含み、
   前記現在ブロックのイントラ予測モードが前記ＭＰＭリストに含まれた前記ＤＣモードとして導出されることに基づいて、前記ＭＰＭインデックス情報は、前記ＭＰＭリストに含まれる前記候補イントラ予測モードの中の前記ＤＣモードと示すインデックス値として生成され、
   前記参照ラインインデックス情報の値が０に等しくないことに基づいて、参照ラインｎは、前記現在ブロックの予測サンプルを生成するために利用され、前記ｎは０より大きく、
   前記現在ブロックの予測サンプルを生成するステップは、
   前記ＤＣモードが前記現在ブロックに適用されることに基づいて、前記現在ブロックの参照ラインｎ内の参照サンプルの中の特定参照サンプルを利用して前記現在ブロックに対するＤＣ値を計算するステップであって、前記参照サンプルは前記現在ブロックの参照ラインｎ内の左側参照サンプルと上側参照サンプルを含む、ステップと、
   前記ＤＣ値に基づいて前記予測サンプルを導出するステップとを含み、
   前記特定参照サンプルは、前記現在ブロックが正方形ブロック又は非正方形ブロックであることに基づいて、決定され、
   前記現在ブロックが前記正方形ブロックであることに基づいて、前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記左側参照サンプルと前記参照ラインｎ内の前記上側参照サンプルを含み、
   前記現在ブロックが前記非正方形ブロックであり、前記現在ブロックの幅が前記現在ブロックの高さより大きいことに基づいて、前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記上側参照サンプルを含み、前記参照ラインｎ内の前記左側参照サンプルを含まず、
   前記現在ブロックが前記非正方形ブロックであり、前記現在ブロックの幅が前記現在ブロックの高さより小さいことに基づいて、
   前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記左側参照サンプルを含み、前記参照ラインｎ内の前記上側参照サンプルを含まない、映像エンコーディング方法。
9. 前記ＭＰＭリストを構成するステップは、
   前記ＭＰＭリストの最後の順序に前記ＤＣモードを含む、請求項８に記載の映像エンコーディング方法。
10. 前記ＭＰＭリストを構成するステップは、
    前記ＭＰＭリストの１番目の順序に前記ＤＣモードを含む、請求項８に記載の映像エンコーディング方法。
11. 前記参照ラインインデックス情報の値が０でないことに基づいて、前記現在ブロックのイントラ予測モードがＭＰＭ候補イントラ予測モードから選択されるかどうかを示すＭＰＭフラグ情報はシグナリングされず、前記ＭＰＭフラグ情報の値は１に誘導される、請求項８に記載の映像エンコーディング方法。
12. 前記参照ラインインデックス情報の値が０でなく、かつ前記ＭＰＭフラグ情報の値が１に誘導されることに基づいて、前記ＭＰＭインデックス情報はシグナリングされる、請求項１１に記載の映像エンコーディング方法。
13. 前記現在ブロックが非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより大きいことに基づいて、前記ＤＣ値を計算するために利用される前記上側参照サンプルの数は、前記現在ブロックの幅と同じであり、
    前記現在ブロックが非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより小さいことに基づいて、前記ＤＣ値を計算するために利用される前記左側参照サンプルの数は、前記現在ブロックの高さと同じである、請求項８に記載の映像エンコーディング方法。
14. 前記現在ブロックが非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより大きいことに基づいて、前記ＤＣ値を計算するために利用される前記上側参照サンプルの数は、前記左側参照サンプルの数と同じであり、
    前記現在ブロックが非正方形ブロックであり、かつ前記現在ブロックの幅が前記現在ブロックの高さより小さいことに基づいて、前記ＤＣ値を計算するために利用される前記左側参照サンプルの数は、前記上側参照サンプルの数と同じである、請求項８に記載の映像エンコーディング方法。
15. 映像情報に対するデータを送信する方法であって、
    現在ブロックのイントラ予測に利用される参照ラインを示す参照ラインインデックス情報と、ＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）インデックス情報を含む前記映像情報のビットストリームを取得するステップであって、前記ビットストリームは前記現在ブロックに対する候補イントラ予測モードを含むＭＰＭリストを構成することに基づいて生成される、ステップと、前記ＭＰＭリストに含まれる前記候補イントラ予測モードに基づいて前記現在ブロックのイントラ予測モードを導出するステップと、
    前記ＭＰＭリストに含まれる前記候補イントラ予測モードの中の前記現在ブロックのイントラ予測モードを示す前記ＭＰＭインデックス情報を生成するステップと、
    前記イントラ予測モードに基づいて、前記現在ブロックの予測サンプルを生成するステップと、
    前記参照ラインインデックス情報と前記ＭＰＭインデックス情報の少なくとも一つを含む前記映像情報をエンコーディングするステップと、
    前記参照ラインインデックス情報と前記ＭＰＭインデックス情報を含む前記映像情報の前記ビットストリームを含む前記データを送信するステップとを含み、
    前記参照ラインインデックス情報が０に等しくないこと場合に基づいて、前記ＭＰＭリストを構成するステップは、前記ＭＰＭリストの中のＤＣモードを含むために前記候補イントラ予測モードの一つとして前記ＤＣモードを導出するステップを含み、
    前記現在ブロックのイントラ予測モードが前記ＭＰＭリストに含まれる前記ＤＣモードとして導出されることに基づいて、前記ＭＰＭインデックス情報は前記ＭＰＭリストに含まれる前記候補イントラ予測モードの中の前記ＤＣモードを示すインデックス値として生成され、
    前記参照ラインインデックス情報が０に等しくないことに基づいて、参照ラインｎは、前記現在ブロックの予測サンプルを生成するために利用され、ここで、前記ｎは０より大きく、
    前記現在ブロックの予測サンプルを生成するステップは、
    前記ＤＣモードが前記現在ブロックに適用されることに基づいて、前記現在ブロックの参照ラインｎにおける参照サンプルの中の特定参照サンプルを利用して前記現在ブロックに対するＤＣ値を計算するステップであって、前記参照サンプルは、前記現在ブロックの参照ラインｎにおいて左側参照サンプルと上側参照サンプルを含む、ステップと、
    前記ＤＣ値に基づいて前記予測サンプルを導出するステップとを含み、
    前記特定参照サンプルは、前記現在ブロックが正方形ブロック又は非正方形ブロックであることに基づいて、決定され、
    前記現在ブロックが前記正方形ブロックであることに基づいて、前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記左側参照サンプルと前記参照ラインｎ内の前記上側参照サンプルを含み、
    前記現在ブロックが前記非正方形ブロックであり、前記現在ブロックの幅が前記現在ブロックの高さより大きいことに基づいて、前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記上側参照サンプルを含み、前記参照ラインｎ内の前記左側参照サンプルを含まず、
    前記現在ブロックが前記非正方形ブロックであり、前記現在ブロックの幅が前記現在ブロックの高さより小さいことに基づいて、
    前記ＤＣ値を計算するために利用される前記特定参照サンプルは、前記参照ラインｎ内の前記左側参照サンプルを含み、前記参照ラインｎ内の前記上側参照サンプルを含まない、方法。

Images