JP7528331B2 - 同一位置ピクチャに関する情報を含むピクチャヘッダーに基づく画像符号化／復号化方法、装置、及びビットストリームを伝送する方法 - Google Patents

Description

本開示は、同一位置ピクチャに関する情報を含むピクチャヘッダーに基づく画像符号化／復号化方法、装置、及びビットストリームを伝送する方法に関し、より詳細には、同一位置ピクチャの識別情報を含むピクチャヘッダーに基づいてインター予測を行う画像符号化／復号化方法、装置、及び本開示の画像符号化方法／装置によって生成されたビットストリームを伝送する方法に関する。

最近、高解像度、高品質の画像、例えばＨＤ（Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）画像及びＵＨＤ（Ｕｌｔｒａ Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）画像への需要が多様な分野で増加している。画像データが高解像度、高品質になるほど、従来の画像データに比べて、伝送される情報量又はビット量が相対的に増加する。伝送される情報量又はビット量の増加は、伝送費用と保存費用の増加をもたらす。

これにより、高解像度、高品質画像の情報を効果的に伝送又は保存し、再生するための高効率の画像圧縮技術が求められる。

本開示は、符号化／復号化効率が向上した画像符号化／復号化方法及び装置を提供することを目的とする。

また、本開示は、同一位置ピクチャに関する情報を含むピクチャヘッダーに基づく画像符号化／復号化方法及び装置を提供することを目的とする。

また、本開示は、ＴＭＶＰのためのシグナリングメカニズム効率が向上した画像符号化／復号化方法及び装置を提供することを目的とする。

また、本開示は、本開示による画像符号化方法又は装置によって生成されたビットストリームを伝送する方法を提供することを目的とする。

また、本開示は、本開示による画像符号化方法又は装置によって生成されたビットストリームを保存した記録媒体を提供することを目的とする。

また、本開示は、本開示による画像復号化装置によって受信され、復号化されて画像の復元に利用されるビットストリームを保存した記録媒体を提供することを目的とする。

本開示で解決しようとする技術的課題は上述した技術的課題に制限されず、上述していない別の技術的課題は以降の記載から本開示の属する技術分野における通常の知識を有する者に明確に理解できるであろう。

本開示の一態様による画像復号化方法は、現在ブロックに対する同一位置ピクチャに基づいて前記現在ブロックに対する時間動きベクトル予測子（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）を導出するステップと、前記時間動きベクトル予測子に基づいて前記現在ブロックの動きベクトルを導出するステップと、前記動きベクトルに基づいて前記現在ブロックの予測ブロックを生成するステップと、を含み、前記同一位置ピクチャは、前記現在ブロックを含む現在スライスのスライスヘッダーに含まれている前記同一位置ピクチャの識別情報に基づいて決定されるが、前記スライスヘッダーが前記同一位置ピクチャの識別情報を含まない場合、前記同一位置ピクチャは、前記現在ブロックを含む現在ピクチャのピクチャヘッダーに含まれている前記同一位置ピクチャの識別情報に基づいて決定されることができる。

本開示の他の態様による画像復号化装置は、メモリ及び少なくとも一つのプロセッサを含み、前記少なくとも一つのプロセッサは、現在ブロックに対する同一位置ピクチャに基づいて、前記現在ブロックに対する時間動きベクトル予測子（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）を導出し、前記時間動きベクトル予測子に基づいて前記現在ブロックの動きベクトルを導出し、前記動きベクトルに基づいて前記現在ブロックの予測ブロックを生成し、前記同一位置ピクチャは、前記現在ブロックを含む現在スライスのスライスヘッダーに含まれている前記同一位置ピクチャの識別情報に基づいて決定されるが、前記スライスヘッダーが前記同一位置ピクチャの識別情報を含まない場合、前記同一位置ピクチャは、前記現在ブロックを含む現在ピクチャのピクチャヘッダーに含まれている前記同一位置ピクチャの識別情報に基づいて決定されることができる。

本開示の別の態様による画像符号化方法は、現在ブロックの動きベクトルに基づいて前記現在ブロックの予測ブロックを生成するステップと、前記現在ブロックに対する同一位置ピクチャに基づいて前記現在ブロックに対する時間動きベクトル予測子（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）を導出するステップと、前記時間動きベクトル予測子に基づいて前記現在ブロックの動きベクトルを符号化するステップと、を含み、前記同一位置ピクチャの識別情報は、前記現在ブロックを含む現在スライスのスライスヘッダー内に符号化されるが、前記同一位置ピクチャの識別情報が前記スライスヘッダー内に符号化されない場合、前記同一位置ピクチャの識別情報は、前記現在ブロックを含む現在ピクチャのピクチャヘッダー内に符号化されることができる。

本開示の別の態様によるコンピュータ可読記録媒体は、本開示の画像符号化方法又は画像符号化装置によって生成されたビットストリームを保存することができる。

本開示について簡略に要約して上述した特徴は、後述する本開示の詳細な説明の例示的な態様に過ぎず、本開示の範囲を制限するものではない。

本開示によれば、符号化／復号化効率が向上した画像符号化／復号化方法及び装置が提供されることができる。

また、本開示によれば、同一位置ピクチャに関する情報を含むピクチャヘッダーに基づく画像符号化／復号化方法及び装置が提供されることができる。

また、本開示によれば、ＴＭＶＰのためのシグナリングメカニズム効率が向上した画像符号化／復号化方法及び装置が提供されることができる。

また、本開示によれば、本開示による画像符号化方法又は装置によって生成されたビットストリームを伝送する方法が提供されることができる。

また、本開示によれば、本開示による画像符号化方法又は装置によって生成されたビットストリームを保存した記録媒体が提供されることができる。

また、本開示によれば、本開示による画像復号化装置によって受信され、復号化されて画像の復元に利用されるビットストリームを保存した記録媒体が提供されることができる。

本開示で得られる効果は、上述した効果に限定されず、上述していない別の効果は、以降の記載から、本開示の属する技術分野における通常の知識を有する者に明確に理解できるだろう。

本開示による実施例が適用できるビデオコーディングシステムを概略的に示す図である。 本開示による実施例が適用できる画像符号化装置を概略的に示す図である。 本開示による実施例が適用できる画像復号化装置を概略的に示す図である。 インター予測ベースのビデオ／画像符号化方法を示すフローチャートである。 本開示によるインター予測部１８０の構成を例示的に示す図である。 インター予測ベースのビデオ／画像復号化方法を示すフローチャートである。 本開示によるインター予測部２６０の構成を例示的に示す図である。 空間マージ候補として用いられる周辺ブロックを例示する図である。 本開示の一例によるマージ候補リスト構成方法を概略的に示す図である。 空間候補に対して行われる冗長性チェックのための候補対を例示する図である。 時間候補の動きベクトルをスケーリングする方法を説明するための図である。 時間候補を誘導する位置を説明するための図である。 本開示の一例による動きベクトル予測子候補リスト構成方法を概略的に示す図である。 ＴＭＶＰに関する情報を含むピクチャヘッダーの一例を示す図である。 ＴＭＶＰに関する情報を含むスライスヘッダーの一例を示す図である。 本開示の実施例によるピクチャヘッダーの一例を示す図である。 本開示の実施例によるピクチャヘッダーの一例を示す図である。 本開示の実施例によるピクチャヘッダーの一例を示す図である。 本開示の実施例によるピクチャヘッダーの一例を示す図である。 本開示の一実施例による画像符号化方法を示すフローチャートである。 本開示の一実施例による画像復号化方法を示すフローチャートである。 本開示の一実施例による同一位置ピクチャを決定する方法を示すフローチャートである。 本開示による実施例が適用できるコンテンツストリーミングシステムを例示的に示す図である。

以下、添付図面を参照して、本開示の実施例について、本開示の属する技術分野における通常の知識を有する者が容易に実施し得るように詳細に説明する。しかし、本開示は、様々な異なる形態で実現でき、ここで説明する実施例に限定されない。

本開示の実施例を説明するにあたり、公知の構成又は機能についての具体的な説明が本開示の要旨を不明確にするおそれがあると判断される場合には、それについての詳細な説明は省略する。そして、図面において、本開示についての説明と関係ない部分は省略し、同様の部分には同様の図面符号を付した。

本開示において、ある構成要素が他の構成要素と「連結」、「結合」又は「接続」されているとするとき、これは、直接的な連結関係だけでなく、それらの間に別の構成要素が存在する間接的な連結関係も含むことができる。また、ある構成要素が他の構成要素を「含む」又は「有する」とするとき、これは、特に反対される記載がない限り、別の構成要素を排除するものではなく、別の構成要素をさらに含むことができることを意味する。

本開示において、「第１」、「第２」などの用語は、一つの構成要素を他の構成要素から区別する目的のみで使用され、特に言及されない限り、構成要素間の順序又は重要度などを限定しない。したがって、本開示の範囲内において、一実施例の第１構成要素は、他の実施例で第２構成要素と呼んでもよく、これと同様に、一実施例の第２構成要素を、他の実施例で第１構成要素と呼んでもよい。

本開示において、互いに区別される構成要素は、それぞれの特徴を明確に説明するためのものであり、構成要素が必ずしも分離されることを意味するものではない。つまり、複数の構成要素が統合されて一つのハードウェア又はソフトウェア単位で構成されてもよく、一つの構成要素が分散されて複数のハードウェア又はソフトウェア単位で構成されてもよい。よって、別に言及しなくても、このように統合された又は分散された実施例も本開示の範囲に含まれる。

本開示において、さまざまな実施例で説明する構成要素が必ず必要不可欠な構成要素を意味するものではなく、一部は選択的な構成要素であり得る。したがって、一実施例で説明する構成要素の部分集合で構成される実施例も本開示の範囲に含まれる。また、様々な実施例で説明する構成要素にさらに他の構成要素を含む実施例も、本開示の範囲に含まれる。

本開示は、画像の符号化及び復号化に関するものであって、本開示で使用される用語は、本開示で新たに定義されない限り、本開示の属する技術分野における通常の意味を持つことができる。

本開示において、「ピクチャ（ｐｉｃｔｕｒｅ）」は、一般的に、特定の時間帯のいずれか一つの画像を示す単位を意味し、スライス（ｓｌｉｃｅ）／タイル（ｔｉｌｅ）は、ピクチャの一部を構成する符号化単位であって、一つのピクチャは、一つ以上のスライス／タイルで構成できる。また、スライス／タイルは、一つ以上のＣＴＵ（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）を含むことができる。

本開示において、「ピクセル（ｐｉｘｅｌ）」又は「ペル（ｐｅｌ）」は、一つのピクチャ（又は画像）を構成する最小の単位を意味することができる。また、ピクセルに対応する用語として「サンプル（ｓａｍｐｌｅ）」が使用できる。サンプルは、一般的に、ピクセル又はピクセルの値を示すことができ、ルマ（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すこともでき、クロマ（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。

本開示において、「ユニット（ｕｎｉｔ）」は、画像処理の基本単位を示すことができる。ユニットは、ピクチャの特定の領域及び当該領域に関連する情報のうちの少なくとも一つを含むことができる。ユニットは、場合に応じて、「サンプルアレイ」、「ブロック（ｂｌｏｃｋ）」又は「領域（ａｒｅａ）」などの用語と混用して使用できる。一般な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプル（又はサンプルアレイ）又は変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）のセット（又はアレイ）を含むことができる。

本開示において、「現在ブロック」は、「現在コーディングブロック」、「現在コーディングユニット」、「符号化対象ブロック」、「復号化対象ブロック」又は「処理対象ブロック」のうちのいずれか一つを意味することができる。予測が行われる場合、「現在ブロック」は、「現在予測ブロック」又は「予測対象ブロック」を意味することができる。変換（逆変換）／量子化（逆量子化）が行われる場合、「現在ブロック」は「現在変換ブロック」又は「変換対象ブロック」を意味することができる。フィルタリングが行われる場合、「現在ブロック」は「フィルタリング対象ブロック」を意味することができる。

本開示において、「現在ブロック」は、クロマブロックという明示的な記載がない限り、ルマ成分ブロックとクロマ成分ブロックを全て含むブロック、又は「現在ブロックのルマブロック」を意味することができる。現在ブロックのルマ成分ブロックは、明示的に「ルマブロック」又は「現在ルマブロック」のようにルマ成分ブロックという明示的な記載を含んで表現できる。また、現在ブロックのクロマ成分ブロックは、明示的に「クロマブロック」又は「現在クロマブロック」のようにクロマ成分ブロックという明示的な記載を含んで表現できる。

本開示において、「／」と「、」は「及び／又は」と解釈されることができる。例えば、「Ａ／Ｂ」と「Ａ、Ｂ」は「Ａ及び／又はＢ」と解釈されることができる。また、「Ａ／Ｂ／Ｃ」と「Ａ、Ｂ、Ｃ」は、「Ａ、Ｂ及び／又はＣのうちの少なくとも一つ」を意味することができる。

本開示において、「又は」は、「及び／又は」と解釈されることができる。例えば、「Ａ又はＢ」は、１）「Ａ」のみを意味するか、２）「Ｂ」のみを意味するか、３）「Ａ及びＢ」を意味することができる。又は、本開示において、「又は」は、「追加的に又は代替的に（ａｄｄｉｔｉｏｎａｌｌｙ ｏｒ ａｌｔｅｒｎａｔｉｖｅｌｙ）」を意味することができる。

ビデオコーディングシステムの概要

図１は本開示によるビデオコーディングシステムを示す図である。

一実施例によるビデオコーディングシステムは、符号化装置１０及び復号化装置２０を含むことができる。符号化装置１０は、符号化されたビデオ（ｖｉｄｅｏ）及び／又は画像（ｉｍａｇｅ）情報又はデータをファイル又はストリーミング形式でデジタル記憶媒体又はネットワークを介して復号化装置２０へ伝達することができる。

一実施例よる符号化装置１０は、ビデオソース生成部１１、符号化部１２及び伝送部１３を含むことができる。一実施例による復号化装置２０は、受信部２１、復号化部２２及びレンダリング部２３を含むことができる。前記符号化部１２は、ビデオ／画像符号化部と呼ばれることができ、前記復号化部２２は、ビデオ／画像復号化部と呼ばれることができる。伝送部１３は、符号化部１２に含まれることができる。受信部２１は、復号化部２２に含まれることができる。レンダリング部２３は、ディスプレイ部を含むこともでき、ディスプレイ部は、別個のデバイス又は外部コンポーネントとして構成されることもできる。

ビデオソース生成部１１は、ビデオ／画像のキャプチャ、合成又は生成過程などを介してビデオ／画像を取得することができる。ビデオソース生成部１１は、ビデオ／画像キャプチャデバイス及び／又はビデオ／画像生成デバイスを含むことができる。ビデオ／画像キャプチャデバイスは、例えば、一つ以上のカメラ、以前にキャプチャされたビデオ／画像を含むビデオ／画像アーカイブなどを含むことができる。ビデオ／画像生成デバイスは、例えば、コンピュータ、タブレット及びスマートフォンなどを含むことができ、（電子的に）ビデオ／画像を生成することができる。例えば、コンピュータなどを介して、仮想のビデオ／画像が生成されることができ、この場合、ビデオ／画像キャプチャ過程は、関連データが生成される過程に置き換えられることができる。

符号化部１２は、入力ビデオ／画像を符号化することができる。符号化部１２は、圧縮及び符号化効率のために、予測、変換、量子化などの一連の手順を行うことができる。符号化部１２は、符号化されたデータ（符号化されたビデオ／画像情報）をビットストリーム（ｂｉｔｓｔｒｅａｍ）形式で出力することができる。

伝送部１３は、ビットストリーム形式で出力された、符号化されたビデオ／画像情報又はデータを、ファイル又はストリーミング形式でデジタル記憶媒体又はネットワークを介して復号化装置２０の受信部２１に伝達することができる。デジタル記憶媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、Ｂｌｕ－ｒａｙ（登録商標）、ＨＤＤ、ＳＳＤなどのさまざまな記憶媒体を含むことができる。伝送部１３は、予め決められたファイルフォーマットを介してメディアファイルを生成するためのエレメントを含むことができ、放送／通信ネットワークを介して伝送するためのエレメントを含むことができる。受信部２１は、前記記憶媒体又はネットワークから前記ビットストリームを抽出／受信して復号化部２２に伝達することができる。

復号化部２２は、符号化部１２の動作に対応する逆量子化、逆変換、予測などの一連の手順を行ってビデオ／画像を復号化することができる。

レンダリング部２３は、復号化されたビデオ／画像をレンダリングすることができる。レンダリングされたビデオ／画像は、ディスプレイ部を介して表示されることができる。

画像符号化装置の概要

図２は本開示による実施例が適用できる画像符号化装置を概略的に示す図である。

図２に示されているように、画像符号化装置１００は、画像分割部１１０、減算部１１５、変換部１２０、量子化部１３０、逆量子化部１４０、逆変換部１５０、加算部１５５、フィルタリング部１６０、メモリ１７０、インター予測部１８０、イントラ予測部１８５及びエントロピー符号化部１９０を含むことができる。インター予測部１８０及びイントラ予測部１８５は、合わせて「予測部」と呼ばれることができる。変換部１２０、量子化部１３０、逆量子化部１４０及び逆変換部１５０は、レジデュアル（ｒｅｓｉｄｕａｌ）処理部に含まれることができる。レジデュアル処理部は減算部１１５をさらに含むこともできる。

画像符号化装置１００を構成する複数の構成部の全部又は少なくとも一部は、実施例によって一つのハードウェアコンポーネント（例えば、エンコーダ又はプロセッサ）で実現されることができる。また、メモリ１７０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を含むことができ、デジタル記憶媒体によって実現できる。

画像分割部１１０は、画像符号化装置１００に入力された入力画像（又は、ピクチャ、フレーム）を一つ以上の処理ユニット（ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）に分割することができる。一例として、前記処理ユニットは、コーディングユニット（ｃｏｄｉｎｇ ｕｎｉｔ、ＣＵ）と呼ばれることができる。コーディングユニットは、コーディングツリーユニット（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ、ＣＴＵ）又は最大コーディングユニット（ｌａｒｇｅｓｔ ｃｏｄｉｎｇ ｕｎｉｔ、ＬＣＵ）をＱＴ／ＢＴ／ＴＴ（Ｑｕａｄ－ｔｒｅｅ／ｂｉｎａｒｙ－ｔｒｅｅ／ｔｅｒｎａｒｙ－ｔｒｅｅ）構造によって再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）分割することにより取得されることができる。例えば、一つのコーディングユニットは、四分木構造、二分木構造及び／又は三分木構造に基づいて、下位（ｄｅｅｐｅｒ）デプスの複数のコーディングユニットに分割されることができる。コーディングユニットの分割のために、四分木構造が先に適用され、二分木構造及び／又は三分木構造が後で適用されることができる。それ以上分割されない最終コーディングユニットを基に、本開示によるコーディング手順が行われることができる。最大コーディングユニットが最終コーディングユニットとして使用されることができ、最大コーディングユニットを分割して取得した下位デプスのコーディングユニットが最終コーディングユニットとして使用されることもできる。ここで、コーディング手順とは、後述する予測、変換及び／又は復元などの手順を含むことができる。他の例として、前記コーディング手順の処理ユニットは、予測ユニット（ＰＵ：Ｐｒｅｄｉｃｔｉｏｎ Ｕｎｉｔ）又は変換ユニット（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）であることができる。前記予測ユニット及び前記変換ユニットは、それぞれ前記最終コーディングユニットから分割又はパーティショニングされることができる。前記予測ユニットは、サンプル予測の単位であることができ、前記変換ユニットは、変換係数を誘導する単位、及び／又は変換係数からレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ）を誘導する単位であることができる。

予測部（インター予測部１８０又はイントラ予測部１８５）は、処理対象ブロック（現在ブロック）に対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、現在ブロック又はＣＵ単位でイントラ予測が適用されるか、或いはインター予測が適用されるかを決定することができる。予測部は、現在ブロックの予測に関するさまざまな情報を生成してエントロピー符号化部１９０に伝達することができる。予測に関する情報は、エントロピー符号化部１９０で符号化されてビットストリーム形式で出力されることができる。

イントラ予測部１８５は、現在ピクチャ内のサンプルを参照して現在ブロックを予測することができる。参照される前記サンプルは、イントラ予測モード及び／又はイントラ予測技法に従って、前記現在ブロックの周辺（ｎｅｉｇｈｂｏｒ）に位置することもでき、或いは離れて位置することもできる。イントラ予測モードは、複数の非方向性モードと複数の方向性モードを含むことができる。非方向性モードは、例えば、ＤＣモード及びＰｌａｎａｒモードを含むことができる。方向性モードは、予測方向の細かい程度に応じて、例えば３３個の方向性予測モード又は６５個の方向性予測モードを含むことができる。ただし、これは例示に過ぎず、設定に基づいてそれ以上又はそれ以下の個数の方向性予測モードが使用できる。イントラ予測部１８５は、周辺ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。

インター予測部１８０は、参照ピクチャ上で動きベクトルによって特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを誘導することができる。この時、インター予測モードで伝送される動き情報の量を減らすために、周辺ブロックと現在ブロックとの動き情報の相関性に基づいて動き情報をブロック、サブブロック又はサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測など）情報をさらに含むことができる。インター予測の場合、周辺ブロックは、現在ピクチャ内に存在する空間周辺ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と、参照ピクチャに存在する時間周辺ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）を含むことができる。前記参照ブロックを含む参照ピクチャと、前記時間周辺ブロックを含む参照ピクチャとは、同一でもよく、互いに異なってもよい。前記時間周辺ブロックは、同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同一位置ＣＵ（ｃｏｌＣＵ）などの名前で呼ばれることができる。前記時間周辺ブロックを含む参照ピクチャは、同一位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることができる。例えば、インター予測部１８０は、周辺ブロックに基づいて動き情報候補リストを構成し、前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出するために、どの候補が使用されるかを指示する情報を生成することができる。様々な予測モードに基づいて、インター予測が行われることができ、例えばスキップモードとマージモードの場合に、インター予測部１８０は、周辺ブロックの動き情報を現在ブロックの動き情報として用いることができる。スキップモードの場合、マージモードとは異なり、レジデュアル信号が伝送されないことができる。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、周辺ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として用い、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）及び動きベクトル予測子に対するインジケータ（ｉｎｄｉｃａｔｏｒ）を符号化することにより、現在ブロックの動きベクトルをシグナリングすることができる。動きベクトル差分は、現在ブロックの動きベクトルと動きベクトル予測子との差を意味することができる。

予測部は、後述する様々な予測方法及び／又は予測技法に基づいて予測信号を生成することができる。例えば、予測部は、現在ブロックの予測のために、イントラ予測又はインター予測を適用することができるだけでなく、イントラ予測とインター予測を同時に適用することができる。現在ブロックの予測のためにイントラ予測とインター予測を同時に適用する予測方法は、ＣＩＩＰ（ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ）と呼ばれることができる。また、予測部は、現在ブロックの予測のためにイントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）を行うこともできる。イントラブロックコピーは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのようにゲームなどのコンテンツ画像／動画コーディングのために使用できる。ＩＢＣは、現在ブロックから所定の距離だけ離れた位置の現在ピクチャ内の既に復元された参照ブロックを用いて現在ブロックを予測する方法である。ＩＢＣが適用される場合、現在ピクチャ内の参照ブロックの位置は前記所定の距離に該当するベクトル（ブロックベクトル）として符号化されることができる。ＩＢＣは、基本的に、現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出するという点において、インター予測と同様に行われることができる。すなわち、ＩＢＣは、本開示で説明されるインター予測技法のうちの少なくとも一つを用いることができる。

予測部によって生成された予測信号は、復元信号を生成するために用いられるか、或いはレジデュアル信号を生成するために用いられることができる。減算部１１５は、入力画像信号（原本ブロック、原本サンプルアレイ）から、予測部から出力された予測信号（予測されたブロック、予測サンプルアレイ）を減算して、レジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ、残余ブロック、残余サンプルアレイ）を生成することができる。生成されたレジデュアル信号は、変換部１２０に伝送されることができる。

変換部１２０は、レジデュアル信号に変換技法を適用して変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔｓ）を生成することができる。例えば、変換技法は、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＤＳＴ（Ｄｉｓｃｒｅｔｅ Ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＫＬＴ（Ｋａｒｈｕｎｅｎ－Ｌｏｅｖｅ Ｔｒａｎｓｆｏｒｍ）、ＧＢＴ（Ｇｒａｐｈ－Ｂａｓｅｄ Ｔｒａｎｓｆｏｒｍ）、又はＣＮＴ（Ｃｏｎｄｉｔｉｏｎａｌｌｙ Ｎｏｎ－ｌｉｎｅａｒ Ｔｒａｎｓｆｏｒｍ）のうちの少なくとも一つを含むことができる。ここで、ＧＢＴは、ピクセル間の関係情報をグラフで表現するとするとき、このグラフから得られた変換を意味する。ＣＮＴは、以前に復元されたすべてのピクセル（ａｌｌ ｐｒｅｖｉｏｕｓｌｙ ｒｅｃｏｎｓｔｒｕｃｔｅｄ ｐｉｘｅｌ）を用いて予測信号を生成し、それに基づいて取得される変換を意味する。変換過程は、正方形の同じサイズを有するピクセルブロックに適用されることもでき、正方形ではない、可変サイズのブロックにも適用されることもできる。

量子化部１３０は、変換係数を量子化してエントロピー符号化部１９０に伝送することができる。エントロピー符号化部１９０は、量子化された信号（量子化された変換係数に関する情報）を符号化してビットストリーム形式で出力することができる。前記量子化された変換係数に関する情報は、レジデュアル情報と呼ばれることができる。量子化部１３０は、係数スキャン順序（ｓｃａｎ ｏｒｄｅｒ）に基づいて、ブロック形式の量子化された変換係数を１次元ベクトル形式で再整列することができ、前記１次元ベクトル形式の量子化された変換係数に基づいて、前記量子化された変換係数に関する情報を生成することもできる。

エントロピー符号化部１９０は、例えば、指数ゴロム（ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）、ＣＡＶＬＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）、ＣＡＢＡＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｂｉｎａｒｙ ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）などの様々な符号化方法を行うことができる。エントロピー符号化部１９０は、量子化された変換係数の他に、ビデオ／画像復元に必要な情報（例えば、シンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓの値など）を一緒に又は別々に符号化することもできる。符号化された情報（例えば、符号化されたビデオ／画像情報）は、ビットストリーム形式でＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ）ユニット単位で伝送又は保存されることができる。前記ビデオ／画像情報は、適応パラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）又はビデオパラメータセット（ＶＰＳ）などの様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／画像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。本開示で言及されたシグナリング情報、伝送される情報及び／又はシンタックス要素は、上述した符号化手順を介して符号化されて前記ビットストリームに含まれることができる。

前記ビットストリームは、ネットワークを介して伝送されることができ、又はデジタル記憶媒体に保存されることができる。ここで、ネットワークは、放送網及び／又は通信網などを含むことができ、デジタル記憶媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、Ｂｌｕ－ｒａｙ、ＨＤＤ、ＳＳＤなどのさまざまな記憶媒体を含むことができる。エントロピー符号化部１９０から出力された信号を伝送する伝送部（図示せず）及び／又は保存する保存部（図示せず）が画像符号化装置１００の内／外部要素として備えられることができ、又は伝送部はエントロピー符号化部１９０の構成要素として備えられることもできる。

量子化部１３０から出力された、量子化された変換係数は、レジデュアル信号を生成するために用いられることができる。例えば、量子化された変換係数に逆量子化部１４０及び逆変換部１５０を介して逆量子化及び逆変換を適用することにより、レジデュアル信号（レジデュアルブロック又はレジデュアルサンプル）を復元することができる。

加算部１５５は、復元されたレジデュアル信号をインター予測部１８０又はイントラ予測部１８５から出力された予測信号に加えることにより、復元（ｒｅｃｏｎｓｔｒｕｃｔｅｄ）信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成することができる。スキップモードが適用された場合のように処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。加算部１５５は、復元部又は復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するようにフィルタリングを経て次のピクチャのインター予測のために使用されることもできる。

フィルタリング部１６０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部１６０は、復元ピクチャに様々なフィルタリング方法を適用して、修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ１７０、具体的にはメモリ１７０のＤＰＢに保存することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、双方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。フィルタリング部１６０は、各フィルタリング方法についての説明で後述するようにフィルタリングに関する様々な情報を生成してエントロピー符号化部１９０に伝達することができる。フィルタリングに関する情報は、エントロピー符号化部１９０で符号化されてビットストリーム形式で出力されることができる。

メモリ１７０に伝送された、修正された復元ピクチャは、インター予測部１８０で参照ピクチャとして使用されることができる。画像符号化装置１００は、これを介してインター予測が適用される場合、画像符号化装置１００と画像復号化装置での予測ミスマッチを回避することができ、符号化効率も向上させることができる。

メモリ１７０内のＤＰＢは、インター予測部１８０での参照ピクチャとして使用するために、修正された復元ピクチャを保存することができる。メモリ１７０は、現在ピクチャ内の動き情報が導出された（又は符号化された）ブロックの動き情報及び／又は既に復元されたピクチャ内ブロックの動き情報を保存することができる。前記保存された動き情報は、空間周辺ブロックの動き情報又は時間周辺ブロックの動き情報として活用するために、インター予測部１８０に伝達されることができる。メモリ１７０は、現在ピクチャ内の復元されたブロックの復元サンプルを保存することができ、イントラ予測部１８５に伝達することができる。

画像復号化装置の概要

図３は本開示による実施例が適用できる画像復号化装置を概略的に示す図である。

図３に示されているように、画像復号化装置２００は、エントロピー復号化部２１０、逆量子化部２２０、逆変換部２３０、加算部２３５、フィルタリング部２４０、メモリ２５０、インター予測部２６０及びイントラ予測部２６５を含んで構成できる。インター予測部２６０及びイントラ予測部２６５を合わせて「予測部」と呼ばれることができる。逆量子化部２２０、逆変換部２３０はレジデュアル処理部に含まれることができる。

画像復号化装置２００を構成する複数の構成部の全部又は少なくとも一部は、実施例によって一つのハードウェアコンポーネント（例えば、デコーダ又はプロセッサ）で実現されることができる。また、メモリ１７０は、ＤＰＢを含むことができ、デジタル記憶媒体によって実現できる。

ビデオ／画像情報を含むビットストリームを受信した画像復号化装置２００は、図２の画像符号化装置１００で行われたプロセスに対応するプロセスを実行して画像を復元することができる。例えば、画像復号化装置２００は、画像符号化装置で適用された処理ユニットを用いて復号化を行うことができる。したがって、復号化の処理ユニットは、例えばコーディングユニットであることができる。コーディングユニットは、コーディングツリーユニット又は最大コーディングユニットを分割して取得できる。そして、画像復号化装置２００を介して復号化及び出力された復元画像信号は、再生装置（図示せず）を介して再生できる。

画像復号化装置２００は、図２の画像符号化装置から出力された信号をビットストリーム形式で受信することができる。受信された信号は、エントロピー復号化部２１０を介して復号化できる。例えば、エントロピー復号化部２１０は、前記ビットストリームをパーシングして画像復元（又はピクチャ復元）に必要な情報（例えば、ビデオ／画像情報）を導出することができる。前記ビデオ／画像情報は、適応パラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）又はビデオパラメータセット（ＶＰＳ）などの様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／画像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。画像復号化装置は、画像を復号化するために、前記パラメータセットに関する情報及び／又は前記一般制限情報をさらに用いることができる。本開示で言及されたシグナリング情報、受信される情報及び／又はシンタックス要素は、前記復号化手順を介して復号化されることにより、前記ビットストリームから取得されることができる。例えば、エントロピー復号化部２１０は、指数ゴロム符号化、ＣＡＶＬＣ又はＣＡＢＡＣなどのコーディング方法に基づいてビットストリーム内の情報を復号化し、画像復元に必要なシンタックス要素の値、レジデュアルに関する変換係数の量子化された値を出力することができる。より詳細には、ＣＡＢＡＣエントロピー復号化方法は、ビットストリームから各シンタックス要素に該当するビン（ｂｉｎ）を受信し、復号化対象シンタックス要素情報と周辺ブロック及び復号化対象ブロックの復号化情報、或いは以前ステップで復号化されたシンボル／ビンの情報を用いてコンテキスト（ｃｏｎｔｅｘｔ）モデルを決定し、決定されたコンテキストモデルに基づいてビン（ｂｉｎ）の発生確率を予測してビンの算術復号化（ａｒｉｔｈｍｅｔｉｃ ｄｅｃｏｄｉｎｇ）を行うことにより、各シンタックス要素の値に該当するシンボルを生成することができる。この時、ＣＡＢＡＣエントロピー復号化方法は、コンテキストモデルの決定後、次のシンボル／ビンのコンテキストモデルのために、復号化されたシンボル／ビンの情報を用いてコンテキストモデルを更新することができる。エントロピー復号化部２１０で復号化された情報のうち、予測に関する情報は、予測部（インター予測部２６０及びイントラ予測部２６５）に提供され、エントロピー復号化部２１０でエントロピー復号化が行われたレジデュアル値、すなわち量子化された変換係数及び関連パラメータ情報は、逆量子化部２２０に入力されることができる。また、エントロピー復号化部２１０で復号化された情報のうち、フィルタリングに関する情報は、フィルタリング部２４０に提供されることができる。一方、画像符号化装置から出力された信号を受信する受信部（図示せず）が画像復号化装置２００の内／外部要素としてさらに備えられることができ、又は受信部はエントロピー復号化部２１０の構成要素として備えられることもできる。

一方、本開示による画像復号化装置は、ビデオ／画像／ピクチャ復号化装置と呼ばれることができる。前記画像復号化装置は、情報デコーダ（ビデオ／画像／ピクチャ情報デコーダ）及び／又はサンプルデコーダ（ビデオ／画像／ピクチャサンプルデコーダ）を含むこともできる。前記情報デコーダは、エントロピー復号化部２１０を含むことができ、前記サンプルデコーダは、逆量子化部２２０、逆変換部２３０、加算部２３５、フィルタリング部２４０、メモリ２５０、インター予測部２６０及びイントラ予測部２６５のうちの少なくとも一つを含むことができる。

逆量子化部２２０では、量子化された変換係数を逆量子化して変換係数を出力することができる。逆量子化部２２０は、量子化された変換係数を２次元のブロック形式で再整列することができる。この場合、前記再整列は、画像符号化装置で行われた係数スキャン順序に基づいて行われることができる。逆量子化部２２０は、量子化パラメータ（例えば、量子化ステップサイズ情報）を用いて、量子化された変換係数に対する逆量子化を行い、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）を取得することができる。

逆変換部２３０では、変換係数を逆変換してレジデュアル信号（レジデュアルブロック、レジデュアルサンプルアレイ）を取得することができる。

予測部は、現在ブロックに対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、エントロピー復号化部２１０から出力された前記予測に関する情報に基づいて、前記現在ブロックにイントラ予測が適用されるか或いはインター予測が適用されるかを決定することができ、具体的なイントラ／インター予測モード（予測技法）を決定することができる。

予測部が後述の様々な予測方法（技法）に基づいて予測信号を生成することができるのは、画像符号化装置１００の予測部についての説明で述べたのと同様である。

イントラ予測部２６５は、現在ピクチャ内のサンプルを参照して現在ブロックを予測することができる。イントラ予測部１８５についての説明は、イントラ予測部２６５に対しても同様に適用されることができる。

インター予測部２６０は、参照ピクチャ上で動きベクトルによって特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを誘導することができる。この時、インター予測モードで伝送される動き情報の量を減らすために、周辺ブロックと現在ブロックとの動き情報の相関性に基づいて動き情報をブロック、サブブロック又はサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測など）情報をさらに含むことができる。インター予測の場合に、周辺ブロックは、現在ピクチャ内に存在する空間周辺ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間周辺ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）を含むことができる。例えば、インター予測部２６０は、周辺ブロックに基づいて動き情報候補リストを構成し、受信した候補選択情報に基づいて前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出することができる。様々な予測モード（技法）に基づいてインター予測が行われることができ、前記予測に関する情報は、前記現在ブロックに対するインター予測のモード（技法）を指示する情報を含むことができる。

加算部２３５は、取得されたレジデュアル信号を予測部（インター予測部２６０及び／又はイントラ予測部２６５を含む）から出力された予測信号（予測されたブロック、予測サンプルアレイ）に加えることにより、復元信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成することができる。スキップモードが適用された場合のように処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。加算部１５５についての説明は、加算部２３５に対しても同様に適用されることができる。加算部２３５は、復元部又は復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するようにフィルタリングを経て次のピクチャのインター予測のために使用されることもできる。

フィルタリング部２４０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部２４０は、復元ピクチャに様々なフィルタリング方法を適用して、修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ２５０、具体的にはメモリ２５０のＤＰＢに保存することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、双方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。

メモリ２５０のＤＰＢに保存された（修正された）復元ピクチャは、インター予測部２６０で参照ピクチャとして使用されることができる。メモリ２５０は、現在ピクチャ内の動き情報が導出された（又は復号化された）ブロックの動き情報及び／又は既に復元されたピクチャ内のブロックの動き情報を保存することができる。前記保存された動き情報は、空間周辺ブロックの動き情報又は時間周辺ブロックの動き情報として活用するために、インター予測部２６０に伝達することができる。メモリ２５０は、現在ピクチャ内の復元されたブロックの復元サンプルを保存することができ、イントラ予測部２６５に伝達することができる。

本明細書において、画像符号化装置１００のフィルタリング部１６０、インター予測部１８０及びイントラ予測部１８５で説明された実施例は、それぞれ画像復号化装置２００のフィルタリング部２４０、インター予測部２６０及びイントラ予測部２６５にも、同様に又は対応するように適用されることができる。

インター予測の概要

画像符号化装置／復号化装置は、ブロック単位でインター予測を行って予測サンプルを導出することができる。インター予測は、現在ピクチャ以外のピクチャのデータ要素に依存的な方法で導出される予測技法を意味することができる。現在ブロックに対してインター予測が適用される場合、参照ピクチャ上で動きベクトルによって特定される参照ブロックを基に、現在ブロックに対する予測ブロックが誘導されることができる。

この時、インター予測モードで伝送される動き情報の量を減らすために、周辺ブロックと現在ブロックとの動き情報の相関性に基づいて現在ブロックの動き情報が誘導されることができ、ブロック、サブブロック又はサンプル単位で動き情報が誘導されることができる。このとき、動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。動き情報は、インター予測タイプ情報をさらに含むことができる。ここで、インター予測タイプ情報は、インター予測の方向性情報を意味することができる。インター予測タイプ情報は、現在ブロックがＬ０予測、Ｌ１予測、Ｂｉ予測のうちのいずれかを用いて予測されることを指示することができる。

現在ブロックに対してインター予測が適用される場合、現在ブロックの周辺ブロックは、現在ピクチャ内に存在する空間周辺ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と、参照ピクチャに存在する時間周辺ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）を含むことができる。このとき、現在ブロックに対する参照ブロックを含む参照ピクチャと、前記時間周辺ブロックを含む参照ピクチャとは、同一でもよく、異なってもよい。時間周辺ブロックは、同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同一位置符号化ユニット（ｃｏｌＣＵなどと呼ばれることがあり、前記時間周辺ブロックを含む参照ピクチャは、同一位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることがある。

一方、現在ブロックの周辺ブロックを基に動き情報候補リストが構成でき、このとき、現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出するために、どの候補が使用されるかを指すフラグ又はインデックス情報がシグナリングされることができる。

動き情報は、インター予測タイプに基づいてＬ０動き情報及び／又はＬ１動き情報を含むことができる。Ｌ０方向の動きベクトルは、Ｌ０動きベクトル又はＭＶＬ０と定義されることができ、Ｌ１方向の動きベクトルは、Ｌ１動きベクトル又はＭＶＬ１と定義されることができる。Ｌ０動きベクトルに基づいた予測はＬ０予測と定義されることができ、Ｌ１動きベクトルに基づいた予測はＬ１予測と定義されることができ、前記Ｌ０動きベクトル及び前記Ｌ１動きベクトルの両方ともに基づいた予測は双予測（Ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）と定義されることができる。ここで、Ｌ０動きベクトルは、参照ピクチャリストＬ０に関連した動きベクトルを意味することができ、Ｌ１動きベクトルは、参照ピクチャリストＬ１に関連した動きベクトルを意味することができる。

参照ピクチャリストＬ０は、前記現在ピクチャよりも出力順序において以前のピクチャを参照ピクチャとして含むことができ、参照ピクチャリストＬ１は、前記現在ピクチャよりも出力順序において以後のピクチャを含むことができる。このとき、以前のピクチャは、順方向（参照）ピクチャと定義することができ、前記以後のピクチャは、逆方向（参照）ピクチャと定義することができる。一方、参照ピクチャリストＬ０は、現在ピクチャよりも出力順序において以後のピクチャをさらに含むことができる。この場合、参照ピクチャリストＬ０内で以前のピクチャが先にインデックス化され、以後のピクチャはその次にインデックス化されることができる。参照ピクチャリストＬ１は、現在ピクチャよりも出力順序において以前のピクチャをさらに含むことができる。この場合、参照ピクチャリストＬ１内で以後のピクチャが先にインデックス化され、以前のピクチャはその次にインデックス化されることができる。ここで、出力順序は、ＰＯＣ（ｐｉｃｔｕｒｅ ｏｒｄｅｒ ｃｏｕｎｔ）順序（ｏｒｄｅｒ）に対応することができる。

図４はインター予測ベースのビデオ／画像符号化方法を示すフローチャートである。

図５は本開示によるインター予測部１８０の構成を例示的に示す図である。

図４の符号化方法は、図２の画像符号化装置によって行われることができる。具体的には、ステップＳ４１０は、インター予測部１８０によって行われることができ、ステップＳ４２０は、レジデュアル処理部によって行われることができる。具体的には、ステップＳ４２０は、減算部１１５によって行われることができる。ステップＳ４３０は、エントロピー符号化部１９０によって行われることができる。ステップＳ４３０の予測情報はインター予測部１８０によって導出され、ステップＳ４３０のレジデュアル情報はレジデュアル処理部によって導出されることができる。前記レジデュアル情報は前記レジデュアルサンプルに関する情報である。前記レジデュアル情報は、前記レジデュアルサンプルに対する量子化された変換係数に関する情報を含むことができる。前述したように、前記レジデュアルサンプルは、画像符号化装置の変換部１２０を介して変換係数として導出され、前記変換係数は、量子化部１３０を介して量子化された変換係数として導出されることができる。前記量子化された変換係数に関する情報がレジデュアルコーディング手順を介してエントロピー符号化部１９０で符号化されることができる。

画像符号化装置は、現在ブロックに対するインター予測を行うことができる（Ｓ４１０）。画像符号化装置は、現在ブロックのインター予測モード及び動き情報を導出し、前記現在ブロックの予測サンプルを生成することができる。ここで、インター予測モード決定、動き情報導出及び予測サンプル生成手順は、同時に行われてもよく、いずれか一つの手順が他の手順よりも先に行われてもよい。例えば、図５に示されているように、画像符号化装置のインター予測部１８０は、予測モード決定部１８１、動き情報導出部１８２、及び予測サンプル導出部１８３を含むことができる。予測モード決定部１８１で前記現在ブロックに対する予測モードを決定し、動き情報導出部１８２で前記現在ブロックの動き情報を導出し、予測サンプル導出部１８３で前記現在ブロックの予測サンプルを導出することができる。例えば、画像符号化装置のインター予測部１８０は、動き推定（ｍｏｔｉｏｎ ｅｓｔｉｍａｔｉｏｎ）を介して参照ピクチャの一定の領域（探索領域）内で前記現在ブロックと同様のブロックを探索し、前記現在ブロックとの差が最小又は一定の基準以下である参照ブロックを導出することができる。これに基づいて、前記参照ブロックが位置する参照ピクチャを指す参照ピクチャインデックスを導出し、前記参照ブロックと前記現在ブロックとの位置の差に基づいて動きベクトルを導出することができる。画像符号化装置は、様々なインター予測モードのうち、前記現在ブロックに対して適用されるモードを決定することができる。画像符号化装置は、前記様々な予測モードに対するレート歪みコスト（Ｒａｔｅ－Ｄｉｓｔｏｒｔｉｏｎ（ＲＤ） ｃｏｓｔ）を比較し、前記現在ブロックに対する最適のインター予測モードを決定することができる。しかし、画像符号化装置が現在ブロックに対するインター予測モードを決定する方法は、上記の例に限定されず、様々な方法が利用できる。

例えば、現在ブロックに対するインター予測モードは、マージモード（ｍｅｒｇｅ ｍｏｄｅ）、マージスキップモード（ｓｋｉｐ ｍｏｄｅ）、ＭＶＰモード（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ ｍｏｄｅ）、ＳＭＶＤモード（Ｓｙｍｍｅｔｒｉｃ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）、アフィンモード（ａｆｆｉｎｅ ｍｏｄｅ）、サブブロックベースのマージモード（Ｓｕｂｂｌｏｃｋ－ｂａｓｅｄ ｍｅｒｇｅ ｍｏｄｅ）、ＡＭＶＲモード（Ａｄａｐｔｉｖｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｓｏｌｕｔｉｏｎ ｍｏｄｅ）、ＨＭＶＰモード（Ｈｉｓｔｏｒｙ－ｂａｓｅｄ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｏｒ ｍｏｄｅ）、双予測マージモード（Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ ｍｅｒｇｅ ｍｏｄｅ）、ＭＭＶＤモード（Ｍｅｒｇｅ ｍｏｄｅ ｗｉｔｈ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅｓ ｍｏｄｅ）、ＤＭＶＲモード（Ｄｅｃｏｄｅｒ ｓｉｄｅ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｒｅｆｉｎｅｍｅｎｔ ｍｏｄｅ）、ＣＩＩＰモード（Ｃｏｍｂｉｎｅｄ Ｉｎｔｅｒ ａｎｄ Ｉｎｔｒａ Ｐｒｅｄｉｃｔｉｏｎ ｍｏｄｅ）、及びＧＰＭ（Ｇｅｏｍｅｔｒｉｃ Ｐａｒｔｉｔｉｏｎｉｎｇ ｍｏｄｅ）のうちの少なくとも一つと決定されることができる。

例えば、現在ブロックにスキップモード又はマージモードが適用される場合、画像符号化装置は、前記現在ブロックの周辺ブロックからマージ候補を誘導し、誘導されたマージ候補を用いてマージ候補リストを構成することができる。また、画像符号化装置は、前記マージ候補リストに含まれているマージ候補が指す参照ブロックのうち、前記現在ブロックとの差が最小又は一定の基準以下である参照ブロックを導出することができる。この場合、前記導出された参照ブロックに関連するマージ候補が選択され、前記選択されたマージ候補を指示するマージインデックス情報が生成されて画像復号化装置へシグナリングされることができる。前記選択されたマージ候補の動き情報を用いて前記現在ブロックの動き情報を導出することができる。

他の例として、前記現在ブロックにＭＶＰモードが適用される場合、画像符号化装置は、前記現在ブロックの周辺ブロックから動きベクトル予測子（ＭＶＰ、Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｏｒ）候補を誘導し、誘導されたＭＶＰ候補を用いてＭＶＰ候補リストを構成することができる。また、画像符号化装置は、前記ＭＶＰ候補リストに含まれているＭＶＰ候補のうち、選択されたＭＶＰ候補の動きベクトルを前記現在ブロックのＭＶＰとして用いることができる。この場合、例えば、前述した動き推定によって導出された参照ブロックを指す動きベクトルが前記現在ブロックの動きベクトルとして用いられることができ、前記ＭＶＰ候補のうち、前記現在ブロックの動きベクトルとの差が最も小さい動きベクトルを持つＭＶＰ候補が、前記選択されたＭＶＰ候補になることができる。前記現在ブロックの動きベクトルから前記ＭＶＰを差し引いた差分であるＭＶＤ（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）が導出されることができる。この場合、前記選択されたＭＶＰ候補を指すインデックス情報、及び前記ＭＶＤに関する情報が画像復号化装置へシグナリングされることができる。また、ＭＶＰモードが適用される場合、前記参照ピクチャインデックスの値は、参照ピクチャインデックス情報で構成されて別途に前記画像復号化装置へシグナリングされることができる。

画像符号化装置は、前記予測サンプルに基づいてレジデュアルサンプルを導出することができる（Ｓ４２０）。画像符号化装置は、前記現在ブロックの原本サンプルと前記予測サンプルとの比較によって前記レジデュアルサンプルを導出することができる。例えば、前記レジデュアルサンプルは、原本サンプルから対応する予測サンプルを減算することにより導出されることができる。

画像符号化装置は、予測情報及びレジデュアル情報を含む画像情報を符号化することができる（Ｓ４３０）。画像符号化装置は、符号化された画像情報をビットストリーム形式で出力することができる。前記予測情報は、前記予測手順に関連した情報であって、予測モード情報（例えば、ｓｋｉｐ ｆｌａｇ、ｍｅｒｇｅ ｆｌａｇ又はｍｏｄｅ ｉｎｄｅｘなど）及び動き情報に関する情報を含むことができる。前記予測モード情報のうち、ｓｋｉｐ ｆｌａｇは、現在ブロックに対してスキップモードが適用されるか否かを示す情報であり、ｍｅｒｇｅ ｆｌａｇは、現在ブロックに対してマージモードが適用されるか否かを示す情報である。又は、予測モード情報は、ｍｏｄｅ ｉｎｄｅｘのように、複数の予測モードのうちのいずれか一つを指示する情報であってもよい。前記ｓｋｉｐ ｆｌａｇとｍｅｒｇｅ ｆｌａｇがそれぞれ０である場合、現在ブロックに対してＭＶＰモードが適用されるものと決定されることができる。前記動き情報に関する情報は、動きベクトルを導出するための情報である候補選択情報（例えば、ｍｅｒｇｅ ｉｎｄｅｘ、ｍｖｐ ｆｌａｇ又はｍｖｐ ｉｎｄｅｘ）を含むことができる。前記候補選択情報のうち、ｍｅｒｇｅ ｉｎｄｅｘは、現在ブロックに対してマージモードが適用される場合にシグナリングされることができ、マージ候補リストに含まれているマージ候補のうちのいずれか一つを選択するための情報であることができる。前記候補選択情報のうち、ＭＶＰ ｆｌａｇ又はＭＶＰ ｉｎｄｅｘは、現在ブロックに対してＭＶＰモードが適用される場合にシグナリングされることができ、ＭＶＰ候補リストに含まれているＭＶＰ候補のうちのいずれか一つを選択するための情報であることができる。具体的に、ＭＶＰ ｆｌａｇは、シンタックス要素ｍｖｐ＿ｌ０＿ｆｌａｇ或いはｍｖｐ＿ｌ１＿ｆｌａｇを用いてシグナリングされることができる。また、前記動き情報に関する情報は、上述したＭＶＤに関する情報及び／又は参照ピクチャインデックス情報を含むことができる。また、前記動き情報に関する情報は、Ｌ０予測、Ｌ１予測、又は双（Ｂｉ）予測が適用されるか否かを示す情報を含むことができる。前記レジデュアル情報は、前記レジデュアルサンプルに関する情報である。前記レジデュアル情報は、前記レジデュアルサンプルに対する量子化された変換係数に関する情報を含むことができる。

出力されたビットストリームは、（デジタル）記憶媒体に保存されて画像復号化装置に伝達されることができ、又はネットワークを介して画像復号化装置に伝達されることもできる。

一方、前述したように、画像符号化装置は、前記参照サンプル及び前記レジデュアルサンプルに基づいて復元ピクチャ（復元サンプル及び復元ブロックを含むピクチャ）を生成することができる。これは、画像復号化装置で行われるのと同じ予測結果を画像符号化装置で導出するためであり、これによりコーディング効率を高めることができるためである。したがって、画像符号化装置は、復元ピクチャ（又は復元サンプル、復元ブロック）をメモリに保存し、インター予測のためのピクチャとして活用することができる。前記復元ピクチャにインループフィルタリング手順などがさらに適用できるのは、上述したとおりである。

図６はインター予測ベースのビデオ／画像復号化方法を示すフローチャートである。

図７は本開示によるインター予測部２６０の構成を例示的に示す図である。

画像復号化装置は、前記画像符号化装置で行われた動作と対応する動作を行うことができる。画像復号化装置は、受信された予測情報に基づいて現在ブロックに対する予測を行い、予測サンプルを導出することができる。

図６の復号化方法は、図３の画像復号化装置によって行われることができる。ステップＳ６１０乃至Ｓ６３０は、インター予測部２６０によって行われることができ、ステップＳ６１０の予測情報及びステップＳ６４０のレジデュアル情報は、エントロピー復号化部２１０によってビットストリームから取得されることができる。画像復号化装置のレジデュアル処理部は、前記レジデュアル情報に基づいて、現在ブロックに対するレジデュアルサンプルを導出することができる（Ｓ６４０）。具体的には、前記レジデュアル処理部の逆量子化部２２０は、前記レジデュアル情報に基づいて導出された、量子化された変換係数に基づいて、逆量子化を行って変換係数を導出し、前記レジデュアル処理部の逆変換部２３０は、前記変換係数に対する逆変換を行って前記現在ブロックに対するレジデュアルサンプルを導出することができる。ステップＳ６５０は、加算部２３５又は復元部によって行われることができる。

具体的には、画像復号化装置は、受信された予測情報に基づいて前記現在ブロックに対する予測モードを決定することができる（Ｓ６１０）。画像復号化装置は、前記予測情報内の予測モード情報に基づいて、前記現在ブロックにどのインター予測モードが適用されるかを決定することができる。

例えば、前記ｓｋｉｐ ｆｌａｇに基づいて、前記現在ブロックに前記スキップモードが適用されるか否かを決定することができる。また、前記ｍｅｒｇｅ ｆｌａｇに基づいて、前記現在ブロックに前記マージモードが適用されるか或いはＭＶＰモードが決定されるかを決定することができる。又は、前記ｍｏｄｅ ｉｎｄｅｘに基づいて、多様なインター予測モード候補のうちのいずれか一つを選択することができる。前記インター予測モード候補は、スキップモード、マージモード及び／又はＭＶＰモードを含むことができ、又は後述する様々なインター予測モードを含むことができる。

画像復号化装置は、前記決定されたインター予測モードに基づいて前記現在ブロックの動き情報を導出することができる（Ｓ６２０）。例えば、画像復号化装置は、前記現在ブロックにスキップモード又はマージモードが適用される場合、後述するマージ候補リストを構成し、前記マージ候補リストに含まれているマージ候補のうちのいずれか一つを選択することができる。前記選択は、前述した候補選択情報（ｍｅｒｇｅ ｉｎｄｅｘ）に基づいて行われることができる。前記選択されたマージ候補の動き情報を用いて前記現在ブロックの動き情報を導出することができる。例えば、前記選択されたマージ候補の動き情報が前記現在ブロックの動き情報として用いられることができる。

他の例として、画像復号化装置は、前記現在ブロックにＭＶＰモードが適用される場合、ＭＶＰ候補リストを構成し、前記ＭＶＰ候補リストに含まれているＭＶＰ候補の中から選ばれたＭＶＰ候補の動きベクトルを前記現在ブロックのｍｖｐとして用いることができる。前記選択は、前述した候補選択情報（ｍｖｐ ｆｌａｇ又はｍｖｐ ｉｎｄｅｘ）に基づいて行われることができる。この場合、前記ＭＶＤに関する情報に基づいて、前記現在ブロックのＭＶＤを導出することができ、前記現在ブロックのＭＶＰと前記ＭＶＤに基づいて前記現在ブロックの動きベクトルを導出することができる。また、前記参照ピクチャインデックス情報に基づいて前記現在ブロックの参照ピクチャインデックスを導出することができる。前記現在ブロックに関する関連参照ピクチャリスト内で前記参照ピクチャインデックスが指すピクチャが、前記現在ブロックのインター予測のために参照される参照ピクチャとして導出されることができる。

画像復号化装置は、前記現在ブロックの動き情報に基づいて、前記現在ブロックに対する予測サンプルを生成することができる（Ｓ６３０）。この場合、前記現在ブロックの参照ピクチャインデックスに基づいて前記参照ピクチャを導出し、前記現在ブロックの動きベクトルが前記参照ピクチャ上で指す参照ブロックのサンプルを用いて前記現在ブロックの予測サンプルを導出することができる。場合に応じて、前記現在ブロックの予測サンプルのうち、全部又は一部に対する予測サンプルフィルタリング手順がさらに行われることができる。

例えば、図７に示されているように、画像復号化装置のインター予測部２６０は、予測モード決定部２６１、動き情報導出部２６２及び予測サンプル導出部２６３を含むことができる。画像復号化装置のインター予測部２６０は、予測モード決定部２６１から受信された予測モード情報に基づいて、前記現在ブロックに対する予測モードを決定し、動き情報導出部２６２から受信された動き情報に関する情報に基づいて前記現在ブロックの動き情報（動きベクトル及び／又は参照ピクチャインデックスなど）を導出し、予測サンプル導出部２６３で前記現在ブロックの予測サンプルを導出することができる。

画像復号化装置は、受信されたレジデュアル情報に基づいて、前記現在ブロックに対するレジデュアルサンプルを生成することができる（Ｓ６４０）。画像復号化装置は、前記予測サンプル及び前記レジデュアルサンプルに基づいて前記現在ブロックに対する復元サンプルを生成し、これに基づいて復元ピクチャを生成することができる（Ｓ６５０）。以後、前記復元ピクチャにインループフィルタ手順などがさらに適用できるのは、前述したとおりである。

前述したように、インター予測手順は、インター予測モード決定ステップ、決定された予測モードによる動き情報導出ステップ、導出された動き情報に基づく予測実行（予測サンプルの生成）ステップを含むことができる。前記インター予測手順は、前述したように画像符号化装置及び画像復号化装置で行われることができる。

以下、予測モードによる動き情報導出ステップについてより詳細に説明する。

前述したように、インター予測は、現在ブロックの動き情報を用いて行われることができる。画像符号化装置は、動き推定（ｍｏｔｉｏｎ ｅｓｔｉｍａｔｉｏｎ）手順を介して、現在ブロックに対する最適の動き情報を導出することができる。例えば、画像符号化装置は、現在ブロックに対する原本ピクチャ内の原本ブロックを用いて相関性の高い類似な参照ブロックを参照ピクチャ内の定められた探索範囲内で分数ピクセル単位にて探索することができ、これにより動き情報を導出することができる。ブロックの類似性は、現在ブロックと参照ブロック間のＳＡＤ（ｓｕｍ ｏｆ ａｂｓｏｌｕｔｅ ｄｉｆｆｅｒｅｎｃｅｓ）に基づいて計算できる。この場合、探索領域内のＳＡＤが最も小さい参照ブロックを基に、動き情報を導出することができる。導出された動き情報は、インター予測モードに基づいて、様々な方法によって画像復号化装置にシグナリングされることができる。

現在ブロックに対してマージモード（ｍｅｒｇｅ ｍｏｄｅ）が適用される場合、現在ブロックの動き情報が直接伝送されず、周辺ブロックの動き情報を用いて前記現在ブロックの動き情報を誘導する。よって、マージモードを用いたことを知らせるフラグ情報及びどの周辺ブロックをマージ候補として用いたかを知らせる候補選択情報（例えば、マージインデックス）を伝送することにより、現在予測ブロックの動き情報を指示することができる。本開示において、現在ブロックは予測実行の単位であるので、現在ブロックは現在予測ブロックと同じ意味で使用され、周辺ブロックは周辺予測ブロックと同じ意味で使用されることができる。

画像符号化装置は、マージモードを行うために現在ブロックの動き情報を誘導するのに用いられるマージ候補ブロック（ｍｅｒｇｅ ｃａｎｄｉｄａｔｅ ｂｌｏｃｋ）を探索することができる。例えば、前記マージ候補ブロックは、最大５個まで使用できるが、これに限定されない。前記マージ候補ブロックの最大個数は、スライスヘッダー又はタイルグループヘッダーから伝送されることができるが、これに限定されない。前記マージ候補ブロックを見つけた後、画像符号化装置はマージ候補リストを生成することができ、これらのうち、ＲＤコストが最も小さいマージ候補ブロックを最終マージ候補ブロックとして選択することができる。

本開示は、前記マージ候補リストを構成するマージ候補ブロックに対する様々な実施例を提供する。前記マージ候補リストは、例えば５つのマージ候補ブロックを用いることができる。例えば、４つの空間マージ候補（ｓｐａｔｉａｌ ｍｅｒｇｅ ｃａｎｄｉｄａｔｅ）と１つの時間マージ候補（ｔｅｍｐｏｒａｌ ｍｅｒｇｅ ｃａｎｄｉｄａｔｅ）を用いることができる。

図８は空間マージ候補として用いることができる周辺ブロックを例示する図である。

図９は本開示の一例によるマージ候補リスト構成方法を概略的に示す図である。

画像符号化装置／画像復号化装置は、現在ブロックの空間周辺ブロックを探索して導出された空間マージ候補をマージ候補リストに挿入することができる（Ｓ９１０）。例えば、前記空間周辺ブロックは、図８に示されているように、前記現在ブロックの左下隅周辺ブロックＡ０、左側周辺ブロックＡ１、右上隅周辺ブロックＢ０、上側周辺ブロックＢ１、及び左上隅周辺ブロックＢ２を含むことができる。ただし、これは例示に過ぎず、前述した空間周辺ブロック以外にも右側周辺ブロック、下側周辺ブロック、右下側周辺ブロックなどの追加的な周辺ブロックがさらに前記空間周辺ブロックとして使用できる。画像符号化装置／画像復号化装置は、前記空間周辺ブロックを優先順位に基づいて探索することにより、利用可能なブロックを検出し、検出されたブロックの動き情報を前記空間マージ候補として導出することができる。例えば、画像符号化装置／画像復号化装置は、図８に示されている５つのブロックをＡ１、Ｂ１、Ｂ０、Ａ０、Ｂ２の順に探索し、利用可能な候補を順次インデックス化することにより、マージ候補リストを構成することができる。

画像符号化装置／画像復号化装置は、前記現在ブロックの時間周辺ブロックを探索して導出された時間マージ候補を前記マージ候補リストに挿入することができる（Ｓ９２０）。前記時間周辺ブロックは、前記現在ブロックが位置する現在ピクチャとは異なるピクチャである参照ピクチャ上に位置することができる。前記時間周辺ブロックが位置する参照ピクチャは、同一位置（ｃｏｌｌｏｃａｔｅｄ）ピクチャ又はｃｏｌピクチャと呼ばれることができる。前記時間周辺ブロックは、前記ｃｏｌピクチャ上における前記現在ブロックに対する同一位置ブロック（ｃｏｌｏｃａｔｅｄ ｂｌｏｃｋ）の右下側コーナー周辺ブロック及び右下側センターブロックの順に探索できる。一方、メモリ負荷を減らすために動き情報圧縮（ｍｏｔｉｏｎ ｄａｔａ ｃｏｍｐｒｅｓｓｉｏｎ）が適用される場合、前記ｃｏｌピクチャに対して、一定の保存単位ごとに特定の動き情報を代表動き情報として保存することができる。この場合、前記一定の保存ユニット内のすべてのブロックに対する動き情報を保存する必要がなく、これにより動き情報圧縮（ｍｏｔｉｏｎ ｄａｔａ ｃｏｍｐｒｅｓｓｉｏｎ）効果を得ることができる。この場合、一定の保存単位は、例えば１６×１６サンプル単位、又は８×８サンプル単位などで予め定められることもでき、又は画像符号化装置から画像復号化装置へ前記一定の保存単位に対するサイズ情報がシグナリングされることもできる。前記動き情報圧縮（ｍｏｔｉｏｎ ｄａｔａ ｃｏｍｐｒｅｓｓｉｏｎ）が適用される場合、前記時間周辺ブロックの動き情報は、前記時間周辺ブロックが位置する前記一定の保存単位の代表動き情報に置き換えられることができる。つまり、この場合、実現の観点からみると、前記時間周辺ブロックの座標に位置する予測ブロックロックではなく、前記時間周辺ブロックの座標（左上端サンプルポジション）に基づいて一定の値だけ算術右シフトした後、算術左シフトした位置をカバーする予測ブロックの動き情報に基づいて前記時間マージ候補が導出されることができる。例えば、前記一定の保存単位が２^ｎ×２^ｎサンプル単位である場合、前記時間周辺ブロックの座標が（ｘＴｎｂ，ｙＴｎｂ）であるとすれば、修正された位置である（（ｘＴｎｂ＞＞ｎ）＜＜ｎ），（ｙＴｎｂ＞＞ｎ）＜＜ｎ））に位置する予測ブロックの動き情報が前記時間マージ候補のために使用できる。具体的には、例えば、前記一定の保存単位が１６×１６サンプル単位である場合、前記時間周辺ブロックの座標が（ｘＴｎｂ，ｙＴｎｂ）であるとすれば、修正された位置である（（ｘＴｎｂ＞＞４）＜＜４），（ｙＴｎｂ＞＞４）＜＜４））に位置する予測ブロックの動き情報が前記時間マージ候補のために使用できる。又は、例えば、前記一定の保存単位が８×８サンプル単位である場合、前記時間周辺ブロックの座標が（ｘＴｎｂ，ｙＴｎｂ）であるとすれば、修正された位置である（（ｘＴｎｂ＞＞３）＜＜３），（ｙＴｎｂ＞＞３）＜＜３））に位置する予測ブロックの動き情報が前記時間マージ候補のために使用できる。

再び図９を参照すると、画像符号化装置／画像復号化装置は、現在マージ候補の個数が最大マージ候補の個数よりも小さいか否かを確認することができる（Ｓ９３０）。前記最大マージ候補の個数は、予め定義されるか、或いは画像符号化装置から画像復号化装置にシグナリングされることができる。例えば、画像符号化装置は、前記最大マージ候補の個数に関する情報を生成し、符号化してビットストリーム形式で前記画像復号化装置に伝達することができる。前記最大マージ候補の個数が全て満たされると、以後の候補追加過程（Ｓ９４０）は行われないことができる。

ステップＳ９３０の確認結果、前記現在マージ候補の個数が前記最大マージ候補の個数よりも小さい場合、画像符号化装置／画像復号化装置は、所定の方式に基づいて追加マージ候補を誘導した後、前記マージ候補リストに挿入することができる（Ｓ９４０）。前記追加マージ候補は、例えば、ｈｉｓｔｏｒｙ ｂａｓｅｄ ｍｅｒｇｅ ｃａｎｄｉｄａｔｅ（ｓ）、ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ ｍｅｒｇｅ ｃａｎｄｉｄａｔｅ（ｓ）、ＡＴＭＶＰ、ｃｏｎｂｉｎｅｄ ｂｉ－ｐｒｅｄｉｃｔｉｖｅマージ候補（現在スライス／タイルグループのスライス／タイルグループタイプがＢタイプである場合）又は／及びゼロ（ｚｅｒｏ）ベクトルマージ候補のうちの少なくとも一つを含むことができる。

ステップＳ９３０の確認結果、前記現在マージ候補の個数が前記最大マージ候補の個数よりも小さくない場合、画像符号化装置／画像復号化装置は、前記マージ候補リストの構成を終了することができる。この場合、画像符号化装置は、ＲＤコストに基づいて、前記マージ候補リストを構成するマージ候補のうちの最適のマージ候補を選択することができ、前記選択されたマージ候補を指す候補選択情報（例えば、マージ候補インデックス、ｍｅｒｇｅ ｉｎｄｅｘ）を画像復号化装置へシグナリングすることができる。画像復号化装置は、前記マージ候補リスト及び前記候補選択情報に基づいて前記最適のマージ候補を選択することができる。

前記選択されたマージ候補の動き情報が前記現在ブロックの動き情報として使用されることができ、前記現在ブロックの動き情報に基づいて前記現在ブロックの予測サンプルを導出することができるのは、前述したとおりである。画像符号化装置は、前記予測サンプルに基づいて前記現在ブロックのレジデュアルサンプルを導出することができ、前記レジデュアルサンプルに関するレジデュアル情報を画像復号化装置にシグナリングすることができる。画像復号化装置は、前記レジデュアル情報に基づいて導出されたレジデュアルサンプル及び前記予測サンプルに基づいて復元サンプルを生成し、これに基づいて復元ピクチャを生成することができるのは、前述したとおりである。

現在ブロックに対してスキップモード（ｓｋｉｐ ｍｏｄｅ）が適用される場合、前でマージモードが適用される場合と同様の方法で前記現在ブロックの動き情報を導出することができる。ただし、スキップモードが適用される場合、当該ブロックに対するレジデュアル信号が省略される。よって、予測サンプルが直ちに復元サンプルとして使用できる。前記スキップモードは、例えばｃｕ＿ｓｋｉｐ＿ｆｌａｇの値が１である場合に適用できる。

以下、マージモード及び／又はスキップモードの場合、空間候補を誘導する方法について説明する。空間候補は、上述した空間マージ候補を示すことができる。

空間候補の誘導は、空間的に隣接するブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋｓ）に基づいて行われることができる。例えば、図８に示されている位置に存在する候補ブロックから最大４つの空間候補が誘導されることができる。空間候補を誘導する順序は、Ａ１－＞Ｂ１－＞Ｂ０－＞Ａ０－＞Ｂ２の順序であり得る。しかし、空間候補を誘導する順序は、上記の順序に限定されず、例えば、Ｂ１－＞Ａ１－＞Ｂ０－＞Ａ０－＞Ｂ２の順序であってもよい。順序における最後の位置（上記の例において、Ｂ２位置）は、先行する４つの位置（上記の例において、Ａ１、Ｂ１、Ｂ０及びＡ０）のうちの少なくとも一つが利用可能でない場合に考慮できる。このとき、所定の位置のブロックが利用可能でないというのは、当該ブロックが現在ブロックとは異なるスライス又は異なるタイルに属するか、又は当該ブロックがイントラ予測されたブロックである場合を含むことができる。順序における最初の位置（上記の例において、Ａ１又はＢ１）から空間候補が誘導された場合、後続する位置の空間候補に対しては冗長性チェックが行われることができる。例えば、後続する空間候補の動き情報がマージ候補リストに既に含まれている空間候補の動き情報と同一である場合、前記後続する空間候補はマージ候補リストに含ませないことにより、符号化効率を向上させることができる。後続する空間候補に対して行われる冗長性チェックは、できる限りすべての候補対に対して行われず、一部の候補対に対してのみ行われることにより、計算複雑度を減少させることができる。

図１０は空間候補に対して行われる冗長性チェックに対する候補対を例示する図である。

図１０に示されている例において、Ｂ０位置の空間候補に対する冗長性チェックは、Ａ０位置の空間候補に対してのみ行われることができる。また、Ｂ１位置の空間候補に対する冗長性チェックは、Ｂ０位置の空間候補に対してのみ行われることができる。また、Ａ１位置の空間候補に対する冗長性チェックは、Ａ０位置の空間候補に対してのみ行われることができる。最後に、Ｂ２位置の空間候補に対する冗長性チェックは、Ａ０位置及びＢ０位置の空間候補に対してのみ行われることができる。

図１０に示されている例は、空間候補を誘導する順序がＡ０－＞Ｂ０－＞Ｂ１－＞Ａ１－＞Ｂ２の順序である場合の例である。しかし、これに限定されず、空間候補を誘導する順序が変更されても、図１０に示されている例のように、一部の候補対に対してのみ冗長性チェックが行われることができる。

以下、マージモード及び／又はスキップモードの場合、時間候補を誘導する方法について説明する。時間候補は、上述した時間マージ候補を示すことができる。また、時間候補の動きベクトルは、ＭＶＰモードの時間候補に対応することもできる。

時間候補は、一つの候補のみがマージ候補リストに含まれることができる。時間候補を誘導する過程で、時間候補の動きベクトルはスケーリングできる。例えば、前記スケーリングは、同一位置参照ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）（以下、「ｃｏｌピクチャ」という）に属する同一位置ブロック（ｃｏ－ｌｏｃａｔｅｄ Ｃｕ）（以下、「ｃｏｌブロック」という）に基づいて行われることができる。ｃｏｌブロックの誘導に用いられる参照ピクチャリストは、スライスヘッダーで明示的にシグナリングされることができる。

図１１は時間候補の動きベクトルをスケーリングする方法を説明するための図である。

図１１において、ｃｕｒｒ＿ＣＵとｃｕｒｒ＿ｐｉｃは現在ブロックと現在ピクチャを示し、ｃｏｌ＿ＣＵとｃｏｌ＿ｐｉｃはｃｏｌブロックとｃｏｌピクチャを示す。また、ｃｕｒｒ＿ｒｅｆは現在ブロックの参照ピクチャを示し、ｃｏｌ＿ｒｅｆはｃｏｌブロックの参照ピクチャを示す。また、ｔｂは現在ブロックの参照ピクチャと現在ピクチャとの距離を示し、ｔｄはｃｏｌブロックの参照ピクチャとｃｏｌピクチャとの距離を示す。前記ｔｂとｔｄは、ピクチャ間のＰＯＣ（Ｐｉｃｔｕｒｅ Ｏｒｄｅｒ Ｃｏｕｎｔ）の差に該当する値で表すことができる。時間候補の動きベクトルのスケーリングは、ｔｂとｔｄに基づいて行われることができる。また、時間候補の参照ピクチャインデックスは０に設定されることができる。

図１２は時間候補を誘導する位置を説明するための図である。

図１２において、太い実線のブロックは現在ブロックを示す。時間候補は、図１２のＣ０位置（右下側位置）又はＣ１位置（中央位置）に該当するｃｏｌピクチャ内のブロックから誘導されることができる。まず、Ｃ０位置が利用可能であるかが判断され、Ｃ０位置が利用可能である場合、Ｃ０位置に基づいて時間候補が誘導されることができる。もしＣ０位置が利用可能でない場合、Ｃ１位置に基づいて時間候補が誘導されることができる。例えば、Ｃ０位置のｃｏｌピクチャ内のブロックがイントラ予測ブロックであるか或いは現在ＣＴＵ行（ｒｏｗ）の外部に存在する場合、Ｃ０位置が利用可能でないと判断されることができる。

上述したように、ｍｏｔｉｏｎ ｄａｔａ ｃｏｍｐｒｅｓｓｉｏｎが適用される場合、ｃｏｌブロックの動きベクトルは所定の単位ブロックごとに保存できる。この場合、Ｃ０位置又はＣ１位置をカバーするブロックの動きベクトルを誘導するために、Ｃ０位置又はＣ１位置は修正できる。例えば、前記所定の単位ブロックが８×８ブロックであり、Ｃ０位置又はＣ１位置を（ｘＣｏｌＣｉ，ｙＣｏｌＣｉ）とするとき、時間候補を誘導するための位置は（（ｘＣｏｌＣｉ＞＞３）＜＜３，（ｙＣｏｌＣｉ）＞＞３）＜＜３）に修正されることができる。

以下、マージモード及び／又はスキップモードの場合、Ｈｉｓｔｏｒｙ－ｂａｓｅｄ候補を誘導する方法について説明する。Ｈｉｓｔｏｒｙ－ｂａｓｅｄ候補はＨｉｓｔｏｒｙ－ｂａｓｅｄマージ候補として表現できる。

Ｈｉｓｔｏｒｙ－ｂａｓｅｄ候補は、空間候補と時間候補がマージ候補リストに追加された後に前記マージ候補リストに追加されることができる。例えば、以前に符号化／復号化されたブロックの動き情報がテーブルに保存され、現在ブロックのＨｉｓｔｏｒｙ－ｂａｓｅｄ候補として使用できる。前記テーブルは、符号化／復号化過程の間、複数のＨｉｓｔｏｒｙ－ｂａｓｅｄ候補を保存することができる。前記テーブルは、新しいＣＴＵ行（ｒｏｗ）が始まるときに初期化できる。テーブルが初期化されるというのは、テーブルに保存されたＨｉｓｔｏｒｙ－ｂａｓｅｄ候補がすべて削除されて当該テーブルが空になることを意味することができる。インター予測されたブロックがあるたびに、関連動き情報が最後のエントリーとして前記テーブルに追加できる。このとき、前記インター予測されたブロックは、サブブロックに基づいて予測されたブロックでなくてもよい。前記テーブルに追加された動き情報は、新しいＨｉｓｔｏｒｙ－ｂａｓｅｄ候補として使用できる。

Ｈｉｓｔｏｒｙ－ｂａｓｅｄ候補のテーブルは所定のサイズを有することができる。例えば、当該サイズは５であり得る。このとき、前記テーブルは、最大５つのＨｉｓｔｏｒｙ－ｂａｓｅｄ候補を保存することができる。新しい候補がテーブルに追加されるとき、まず、同一の候補が前記テーブルに存在するかの冗長性チェックが行われる、制限されたＦＩＦＯ（ｆｉｒｓｔ－ｉｎ－ｆｉｒｓｔ－ｏｕｔ）規定が適用できる。もし同一の候補が前記テーブルに既に存在する場合、前記同一の候補は前記テーブルから削除され、以後の全てのＨｉｓｔｏｒｙ－ｂａｓｅｄ候補の位置が前方に移動することができる。

Ｈｉｓｔｏｒｙ－ｂａｓｅｄ候補は、マージ候補リストの構成過程に利用可能である。このとき、前記テーブルに最近含まれたＨｉｓｔｏｒｙ－ｂａｓｅｄ候補が順次チェックされ、前記マージ候補リストの時間候補以後の位置に含まれることができる。Ｈｉｓｔｏｒｙ－ｂａｓｅｄ候補がマージ候補リストに含まれるとき、前記マージ候補リストに既に含まれている空間候補又は時間候補との冗長性チェックが行われることができる。もし、マージ候補リストに既に含まれている空間候補又は時間候補とＨｉｓｔｏｒｙ－ｂａｓｅｄ候補が重複する場合、当該Ｈｉｓｔｏｒｙ－ｂａｓｅｄ候補は、前記マージ候補リストに含まれなくてもよい。前記冗長性チェックは、次のように単純化させることにより、演算量が低減できる。

マージ候補リストの生成に用いられるＨｉｓｔｏｒｙ－ｂａｓｅｄ候補の個数は、（Ｎ＜＝４）？Ｍ：（８－Ｎ）に設定できる。このとき、Ｎは、マージ候補リストに既に含まれている候補の個数を示し、Ｍは、前記テーブルに保存された利用可能なＨｉｓｔｏｒｙ－ｂａｓｅｄ候補の個数を示す。すなわち、マージ候補リストに４個以下の候補が含まれている場合、前記マージ候補リストの生成に用いられるＨｉｓｔｏｒｙ－ｂａｓｅｄ候補の個数はＭ個であり、マージ候補リストに４個よりも多いＮ個の候補が含まれる場合、前記マージ候補リストの生成に用いられるＨｉｓｔｏｒｙ－ｂａｓｅｄ候補の個数は（８－Ｎ）個に設定されることができる。

利用可能なマージ候補の総数が（マージ候補の最大許容個数－１）に達する場合、Ｈｉｓｔｏｒｙ－ｂａｓｅｄ候補を用いたマージ候補リストの構成は終了できる。

以下、マージモード及び／又はスキップモードの場合、Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補を誘導する方法について説明する。Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補は、Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅマージ候補又はＰａｉｒ－ｗｉｓｅ候補として表現できる。

Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補は、マージ候補リストに含まれている候補から既に定義された候補対を取得し、これらを平均することにより生成できる。既に定義された候補対は｛（０，１），（０，２），（１，２），（０，３），（１，３），（２，３）｝であり、各候補対を構成する数字は、マージ候補リストのインデックスであり得る。つまり、既に定義された候補対（０，１）は、マージ候補リストのインデックス０候補とインデックス１候補の対を意味し、Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補は、インデックス０候補とインデックス１候補の平均によって生成できる。前記既に定義された候補対の順序でＰａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補の誘導が行われることができる。すなわち、候補対（０，１）に対してＰａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補を誘導した後、候補対（０，２）、候補対（１，２）の順にＰａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補誘導過程が行われることができる。Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補誘導過程は、マージ候補リストの構成が完了するまで行われることができる。例えば、Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補誘導過程は、マージ候補リストに含まれているマージ候補の個数が最大マージ候補の個数に達するまで行われることができる。

Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補は、参照ピクチャリストのそれぞれに対して個別に計算できる。一つの参照ピクチャリスト（Ｌ０ ｌｉｓｔ又はＬ１ ｌｉｓｔ）に対して２つの動きベクトルが利用可能である場合、これらの２つの動きベクトルの平均が計算できる。このとき、２つの動きベクトルが互いに異なる参照ピクチャを指しても、前記２つの動きベクトルの平均が行われることができる。もし一つの参照ピクチャリストに対して一つの動きベクトルのみが利用可能である場合、利用可能な動きベクトルがＰａｉｒ ｗｉｓｅ ａｖｅｒａｇｅ候補の動きベクトルとして使用できる。もし一つの参照ピクチャリストに対して２つの動きベクトルがすべて利用可能でない場合、当該参照ピクチャリストは有効でないものと決定できる。

Ｐａｉｒ－ｗｉｓｅ ａｖｅｒａｇｅ候補がマージ候補リストに含まれた以後にも、マージ候補リストの構成が完了していない場合、最大マージ候補の個数に達するまでゼロベクトルがマージ候補リストに追加できる。

現在ブロックに対してＭＶＰモードが適用される場合、復元された空間周辺ブロック（例えば、図８に示されている周辺ブロック）の動きベクトル及び／又は時間周辺ブロック（又はＣｏｌブロック）に対応する動きベクトルを用いて、動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ、ＭＶＰ）候補リストが生成できる。つまり、復元された空間周辺ブロックの動きベクトル及び／又は時間周辺ブロックに対応する動きベクトルが現在ブロックの動きベクトル予測子候補として使用できる。双予測が適用される場合、Ｌ０動き情報導出のためのＭＶＰ候補リストとＬ１動き情報導出のためのＭＶＰ候補リストが個別に生成されて利用できる。現在ブロックに対する予測情報（又は予測に関する情報）は、前記ＭＶＰ候補リストに含まれている動きベクトル予測子候補の中から選択された最適の動きベクトル予測子候補を指示する候補選択情報（例えば、ＭＶＰフラグ又はＭＶＰインデックス）を含むことができる。このとき、予測部は、前記候補選択情報を用いて、ＭＶＰ候補リストに含まれている動きベクトル予測子候補の中から、現在ブロックの動きベクトル予測子を選択することができる。画像符号化装置の予測部は、現在ブロックの動きベクトルと動きベクトル予測子との動きベクトル差分（ＭＶＤ）を求めることができ、これを符号化してビットストリーム形式で出力することができる。つまり、ＭＶＤは現在ブロックの動きベクトルから前記動きベクトル予測子を差し引いた値で求められることができる。画像復号化装置の予測部は、前記予測に関する情報に含まれている動きベクトル差分を取得し、前記動きベクトル差分と前記動きベクトル予測子との加算を介して、現在ブロックの前記動きベクトルを導出することができる。画像復号化装置の予測部は、参照ピクチャを指示する参照ピクチャインデックスなどを前記予測に関する情報から取得又は誘導することができる。

図１３は本開示の一例による動きベクトル予測子候補リスト構成方法を概略的に示す図である。

まず、現在ブロックの空間候補ブロックを探索して、利用可能な候補ブロックをＭＶＰ候補リストに挿入することができる（Ｓ１３１０）。その後、ＭＶＰ候補リストに含まれているＭＶＰ候補が２つ未満であるか否かが判断され（Ｓ１３２０）、２つである場合、ＭＶＰ候補リストの構成を完了することができる。

ステップＳ１３２０で、利用可能な空間候補ブロックが２つ未満である場合、現在ブロックの時間候補ブロックを探索して、利用可能な候補ブロックをＭＶＰ候補リストに挿入することができる（Ｓ１３３０）。時間候補ブロックが利用可能でなければ、ゼロ動きベクトルをＭＶＰ候補リストに挿入（Ｓ１３４０）することにより、ＭＶＰ候補リストの構成を完了することができる。

一方、ＭＶＰモードが適用される場合、参照ピクチャインデックスが明示的にシグナリングされることができる。この場合、Ｌ０予測のためのピクチャインデックス（ｒｅｆｉｄｘＬ０）とＬ１予測のための参照ピクチャインデックス（ｒｅｆｉｄｘＬ１）が区分されてシグナリングされることができる。例えば、ＭＶＰモードが適用され、双予測（ＢＩ ｐｒｅｄｉｃｔｉｏｎ）が適用される場合、前記ｒｅｆｉｄｘＬ０に関する情報及びｒｅｆｉｄｘＬ１に関する情報が両方ともシグナリングされることができる。

前述したように、ＭＶＰモードが適用される場合、画像符号化装置から導出されたＭＶＤに関する情報が画像復号化装置にシグナリングされることができる。ＭＶＤに関する情報は、例えばＭＶＤ絶対値及び符号に対するｘ、ｙ成分を示す情報を含むことができる。この場合、ＭＶＤ絶対値が０よりも大きいか、及び１よりも大きいか否か、ＭＶＤの残りを示す情報が段階的にシグナリングされることができる。例えば、ＭＶＤ絶対値が１よりも大きいか否かを示す情報は、ＭＶＤ絶対値が０よりも大きいか否かを示すｆｌａｇ情報の値が１である場合に限ってシグナリングされることができる。

ＴＭＶＰ（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）シグナリングの概要

前述したように、現在ブロックのインター予測のために、時間マージ候補又は時間ＭＶＰ候補として用いられる時間動きベクトル予測子（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ、ＴＭＶＰ）が導出されることができる。ＴＭＶＰは、同一位置（参照）ピクチャ（ｃｏｌｌｏｃａｔｅｄ（ｒｅｆｅｒｅｎｃｅ） ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）内の時間周辺ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）に基づいて導出されることができる。ここで、時間周辺ブロックは、現在ブロックの同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ、ｃｏｌＣｂ）を含むことができる。

同一位置参照ブロック（ｃｏｌＣｂ）を指示する情報／シンタックス要素は、ピクチャヘッダー（ｐｉｃｔｕｒｅ ｈｅａｄｅｒ）などの上位レベルシンタックス（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ、ＨＬＳ）を介してシグナリングされることができる。ビットストリームを符号化／復号化するために、ＴＭＶＰコーディングツールが用いられることができる。ＴＭＶＰのためのシグナリングメカニズムは、次のとおりである。

ＴＭＶＰは、ＣＬＶＳ（ｃｏｄｅｄ ｌａｙｅｒ ｖｉｄｅｏ ｓｅｑｕｅｎｃｅ）内のピクチャコーディングのために用いられることができる。ＣＬＶＳ内のピクチャに対してＴＭＶＰが利用可能であるか否かは、ＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）内の所定のフラグ情報（例えば、ｓｐｓ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に基づいて決定されることができる。例えば、第１値（例えば、０）を有するｓｐｓ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、ＣＬＶＳ内のピクチャに対してＴＭＶＰが利用可能でないことを示し、第２値（例えば、１）を有するｓｐｓ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、ＣＬＶＳ内のピクチャに対してＴＭＶＰが利用可能であることを示すことができる。

ＣＬＶＳ内のピクチャに対してＴＭＶＰが利用可能である場合、それぞれのピクチャに対してＴＭＶＰが利用可能であるか否かが、ピクチャヘッダー（ｐｉｃｔｕｒｅ ｈｅａｄｅｒ）内の所定のフラグ情報（例えば、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に基づいて決定されることができる。例えば、第１値（例えば、０）を有するｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、ピクチャヘッダーに関連するピクチャ内のスライスに対するインター予測のためにＴＭＶＰが利用できないことを示すことができる。この場合、前記ピクチャヘッダーに関連するピクチャ内のスライスに対するシンタックス要素は、スライス復号化にＴＭＶＰが利用されないように制限できる。これとは異なり、第２値（例えば、１）を有するｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、ピクチャヘッダーに関連するピクチャ内のスライスに対するインター予測のためにＴＭＶＰが利用できることを示すことができる。一方、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇがシグナリングされない場合、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値は、第１値（例えば、０）と推論できる。一方、参照ピクチャバッファ（ｄｅｃｏｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ、ＤＰＢ）内に現在ピクチャと同一の空間解像度（ｓｐａｔｉａｌ ｒｅｓｏｌｕｔｉｏｎ）を有する参照ピクチャが存在しない場合、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値は第１値（例えば、０）に制限できる。

所定のピクチャに対してＴＭＶＰが利用可能である場合、前記ピクチャ内のそれぞれのスライスに対して、ＴＭＶＰに関する情報、例えば同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報がシグナリングされることができる。

図１４ａはＴＭＶＰに関する情報を含むピクチャヘッダーの一例を示す図である。

図１４ａを参照すると、シーケンスレベルでＴＭＶＰが利用可能であるか否かがシーケンスレベルの所定のフラグ情報（例えば、ｓｐｓ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に基づいて決定できる。例えば、第１値（例えば、０）を有するｓｐｓ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、シーケンスレベルでＴ ＭＶＰが利用可能でないことを示すことができる。これとは異なり、第２値（例えば、１）を有するｓｐｓ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、シーケンスレベルでＴＭＶＰが利用可能であることを示すことができる。

シーケンスレベルでＴＭＶＰが利用可能である場合、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇがピクチャヘッダーを介してシグナリングされることができる。例えば、第１値（例えば、０）を有するｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、ピクチャレベルでＴＭＶＰが利用可能でないことを示すことができる。これとは異なり、第２値（例えば、１）を有するｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、ピクチャレベルでＴＭＶＰが利用可能であることを示すことができる。

図１４ｂはＴＭＶＰに関する情報を含むスライスヘッダーの一例を示す図である。

図１４ｂを参照すると、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｏｖｅｒｒｉｄｅ＿ｆｌａｇは、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［ｉ］の存否を示すことができる。例えば、第１値（例えば、０）を有するｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｏｖｅｒｒｉｄｅ＿ｆｌａｇは、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［０］及びｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［１］が存在しないことを示すことができる。これとは異なり、第２値（例えば、１）を有するｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｏｖｅｒｒｉｄｅ＿ｆｌａｇは、Ｐスライス及びＢスライスに対してｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［０］が存在し、Ｂスライスに対してｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［１］が存在することを示すことができる。一方、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｏｖｅｒｒｉｄｅ＿ｆｌａｇがシグナリングされない場合、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｏｖｅｒｒｉｄｅ＿ｆｌａｇの値は第２値（例えば、１）と推論できる。

ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［ｉ］は、変数ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［ｉ］の導出に用いられることができる。ここで、変数ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［ｉ］から１を差し引いた値は、現在スライスの復号化に用いられるｉ番目（ここで、ｉは０又は１）参照ピクチャリスト（ｒｅｆｅｒｅｎｃｅ ｐｉｃｔｕｒｅ ｌｉｓｔ、ＲＰＬ）の最大参照インデックスを示すことができる。一例において、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［ｉ］の値は０以上１４以下であり得る。

現在スライスがＢスライスであり、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｏｖｅｒｒｉｄｅ＿ｆｌａｇが第２値（例えば、１）を有し、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［ｉ］が存在しない場合、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［ｉ］の値は第１値（例えば、０）と推論できる。又は、現在スライスがＰスライスであり、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｏｖｅｒｒｉｄｅ＿ｆｌａｇが第２値（例えば、１）を有し、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［０］が存在しない場合、ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［０］の値は第１値（例えば、０）と推論できる。

ｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１［ｉ］の値に基づいて、変数ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［ｉ］が下記表１のとおりに導出できる。

表１において、第１値（例えば、０）を有するＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［ｉ］は、ｉ番目（ここで、ｉは０又は１）の参照ピクチャリスト内の参照インデックスに基づいて現在スライスを復号化することができないことを示すことができる。

一例において、現在スライスがＰスライスである場合、ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［０］の値は０よりも大きいことができる。また、現在スライスがＢスライスである場合、ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［０］及びＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［１］のそれぞれの値は０よりも大きいことができる。

図１４ｂを参照し続けると、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇは、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）が参照ピクチャリストＬ０及び参照ピクチャリストＬ１のうちのどの参照ピクチャリストから導出されるか（つまり、同一位置ピクチャ（ｃｏｌＰｉｃ）の方向情報）を示すことができる。例えば、第１値（例えば、０）を有するｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇは、同一位置ピクチャ（ｃｏｌＰｉｃ）が参照ピクチャリストＬ１から導出されることを示すことができる。これとは異なり、第２値（例えば、１）を有するｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇは、同一位置ピクチャ（ｃｏｌＰｉｃ）が参照ピクチャリストＬ０から導出されることを示すことができる。一方、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇがシグナリングされず、スライスタイプがＢスライスではない場合、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇの値は第２値（例えば、１）と推論できる。又は、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇがシグナリングされず、スライスタイプがＢスライスである場合、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇの値は、ｐｐｓ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｉｄｃから１を差し引いた値と推論できる。ここで、ｐｐｓ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｉｄｃは、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇがスライスヘッダー内に存在するか否かを示すことができる。例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇがスライスヘッダー内に存在する場合、ｐｐｓ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｉｄｃは第１値（例えば、０）を有することができる。これとは異なり、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇがスライスヘッダー内に存在しない場合、ｐｐｓ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｉｄｃは第２値（例えば、１）又は第３値（例えば、２）を有することができる。

ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘは、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）の参照ピクチャインデックスを示すことができる。例えば、スライスタイプがＰスライス又はＢスライスであり（すなわち、ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［０］の値が０よりも大きく）、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇが第２値（例えば、１）を有する場合、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘは、参照ピクチャリストＬ０内の参照ピクチャを指すことができる。ここで、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘの値は０以上であり、ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［０］から１を差し引いた値以下であり得る。又は、スライスタイプがＢスライスであり（すなわち、ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［１］の値が０よりも大きく）、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇが第１値（例えば、０）を有する場合、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘは、参照ピクチャリストＬ１内の参照ピクチャを指すことができる。ここで、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘの値は、０以上であり、ＮｕｍＲｅｆＩｄｘＡｃｔｉｖｅ［１］から１を差し引いた値以下であり得る。一方、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘがシグナリングされない場合、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘの値は第１値（例えば、０）と推論できる。

一例において、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘによって特定される参照ピクチャが、コーディングされたピクチャに関連する全てのスライスに対して互いに同一であることは、ビットストリーム適合性のための制限事項であり得る。他の例において、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘによって特定される参照ピクチャ及び現在ピクチャの解像度が互いに同一であり、ＲｅｆＰｉｃＩｓＳｃａｌｅｄ［ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ？０：１］［ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ］の値が第１値（例えば、０）であるのは、ビットストリーム適合性のための制限事項であり得る。

図１４ａ及び図１４ｂを参照して上述したＴＭＶＰのためのシグナリングメカニズムにおいて、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報、例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）は、スライスヘッダーを介してのみシグナリングされることができる。しかし、ピクチャ内のすべてのスライスに対して互いに同一である同一位置ピクチャ（ｃｏｌＰｉｃ）が適用される場合、上述したＴＭＶＰのためのシグナリングメカニズムによれば、それぞれのスライスに対して同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報をシグナリングしなければならないので、シグナリングオーバーヘッドが増加するという問題が発生するおそれがある。

かかる問題を解決するために、本開示の実施例によれば、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、スライスヘッダーを介してシグナリングされることもでき、或いは、より上位レベルのシンタックス、例えばピクチャヘッダーを介してシグナリングされることもできる。

以下、添付図面を参照して、本開示の実施例を詳細に説明する。

図１５乃至図１８は本開示の実施例によるピクチャヘッダーの一例を示す図である。

まず、図１５を参照すると、ピクチャヘッダー（ｐｉｃｔｕｒｅ ｈｅａｄｅｒ）は、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報であって、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘを含むことができる。

ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘは、ピクチャレベルでＴＭＶＰが利用可能である場合（例えば、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＝＝１）にのみシグナリングされることができる。

ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇは、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）が参照ピクチャリスト０（ＲＰＬ０）及び参照ピクチャリスト１（ＲＰＬ１）のうちのどの参照ピクチャリストから導出されるか（すなわち、同一位置ピクチャ（ｃｏｌＰｉｃ）の方向情報）を示すことができる。例えば、第１値（例えば、０）を有するｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇは同一位置ピクチャ（ｃｏｌＰｉｃ）が参照ピクチャリスト１（ＲＰＬ１）から導出されることを示すことができる。これとは異なり、第２値（例えば、１）を有するｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇは、同一位置ピクチャ（ｃｏｌＰｉｃ）が参照ピクチャリスト０（ＲＰＬ０）から導出されることを示すことができる。一方、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇがシグナリングされず、参照ピクチャリスト１（ＲＰＬ１）内のエントリー個数（例えば、ｎｕｍ＿ｒｅｆ＿ｅｎｔｒｉｅｓ［１］［ＲｐｌｓＩｄｘ［１］］）が０である場合、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇの値は第２値（例えば、１）と推論できる。つまり、同一位置ピクチャ（ｃｏｌＰｉｃ）は、参照ピクチャリスト０（ＲＰＬ０）から導出されることができる。

ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇが第２値（例えば、１）を有し、参照ピクチャリスト０（ＲＰＬ０）内のエントリー個数が１よりも大きい場合（例えば、ｎｕｍ＿ｒｅｆ＿ｅｎｔｒｉｅｓ［０］［ＲｐｌｓＩｄｘ［０］］＞１）、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘがシグナリングされることができる。或いは、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇが第１値（例えば、０）を有し、参照ピクチャリスト１（ＲＰＬ１）内のエントリー個数が１よりも大きい場合（例えば、ｎｕｍ＿ｒｅｆ＿ｅｎｔｒｉｅｓ［１］［ＲｐｌｓＩｄｘ［１］］＞１）、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘがシグナリングされることができる。

ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘは、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）の参照ピクチャインデックスを示すことができる。例えば、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇが第２値（例えば、１）を有し、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘが参照ピクチャリスト０（ＲＰＬ０）内のエントリーのうちの一つを指示する場合、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘの値は０以上であり、参照ピクチャリスト０（ＲＰＬ０）内のエントリー個数から１を差し引いた値以下であることができる。これとは異なり、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇが第１値（例えば、０）を有し、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘが参照ピクチャリスト１（ＲＰＬ１）内のエントリーのうちの一つを指示する場合、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘの値は０以上であり、参照ピクチャリスト１（ＲＰＬ１）内のエントリー個数から１を差し引いた値以下であり得る。一方、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘがシグナリングされない場合、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘの値は第１値（例えば、０）と推論できる。

一例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーとスライスヘッダーの両方でシグナリングされることができる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされるが、前記ピクチャヘッダーに関連するスライスのうちの少なくとも一部に対しては、スライスヘッダーを介してもシグナリングされることができる。この場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、スライスヘッダーを介してシグナリングされた同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて決定されることができる。

他の例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダー又はスライスヘッダーを介して選択的にシグナリングされることができる。この場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダー（又は、スライスヘッダー）を介してシグナリングされるか否かは、ピクチャヘッダー（及び／又はスライスヘッダー）内の所定のシグナリング情報（例えば、ｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ）に基づいて決定されることができる。例えば、前記シグナリング情報が第２値（例えば、１）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされることができる。これとは異なり、前記シグナリング情報が第１値（例えば、０）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、スライスヘッダーを介してシグナリングされることができる。前記シグナリング情報は、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇと共にｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇのシグナリング条件を構成することができる。また、前記シグナリング情報は、図１４ｂを参照して前述したスライスヘッダー内で、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇと共にｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇのシグナリング条件を構成することができる。

同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がスライスヘッダーを介してシグナリングされる場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、前記スライスヘッダーを介して取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報に基づいて決定されることができる。これとは異なり、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダーを介してのみシグナリングされる場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、前記ピクチャヘッダーを介して取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報に基づいて決定されることができる。例えば、ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘが図１４ｂを参照して前述したスライスヘッダーを介してシグナリングされない場合（例えば、ｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ＝＝１）、前記ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘの値は、ピクチャヘッダーを介して取得されるｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘと同じ値に推論できる。前記ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘがスライスヘッダーだけでなく、ピクチャヘッダーを介してもシグナリングされない場合、前記ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘの値は第１値（例えば、０）と推論できる。

一方、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）が現在ピクチャとは異なる既に復元されたピクチャであることは、ビットストリーム適合性のための制限事項であり得る。

本開示の一実施例によるピクチャヘッダーの他の例は、図１６に示されている通りである。

図１６を参照すると、ピクチャヘッダーは、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報であって、ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌを含むことができる。

ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、現在ピクチャに対してＴＭＶＰが利用可能である場合（例えば、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＝＝１）にのみシグナリングされることができる。

ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、現在ピクチャとＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）とのＰＯＣ（ｐｉｃｔｕｒｅ ｏｒｄｅｒ ｃｏｕｎｔ）差を示すことができる。例えば、ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、現在ピクチャのＰＯＣから同一位置ピクチャ（ｃｏｌＰｉｃ）のＰＯＣを差し引いた値を有することができる。或いは、ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、同一位置ピクチャ（ｃｏｌＰｉｃ）のＰＯＣから現在ピクチャのＰＯＣを差し引いた値を有することもできる。ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、正の符号（＋）又は負の符号（－）を有し、ｓｉｇｎｅｄ ｉｎｔｅｇｅｒタイプで表現できる。

一例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーとスライスヘッダーの両方でシグナリングされることができる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされるが、前記ピクチャヘッダーに関連するスライスのうちの少なくとも一部に対しては、スライスヘッダーを介してもシグナリングされることができる。この場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、スライスヘッダーを介してシグナリングされた同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて決定されることができる。

他の例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダー又はスライスヘッダーを介して選択的にシグナリングされることができる。この場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダー（又は、スライスヘッダー）を介してシグナリングされるか否かは、ピクチャヘッダー（及び／又はスライスヘッダー）内の所定のシグナリング情報（例えば、ｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ）に基づいて決定されることができる。例えば、前記シグナリング情報が第２値（例えば、１）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされることができる。これとは異なり、前記シグナリング情報が第１値（例えば、０）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報はスライスヘッダーを介してシグナリングされることができる。

同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がスライスヘッダーを介してシグナリングされる場合、画像復号化段階で、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、前記スライスヘッダーを介して取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて決定されることができる。これとは異なり、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダーを介してのみシグナリングされる場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、前記ピクチャヘッダーを介して取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ）に基づいて決定されることができる。

一方、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）が現在ピクチャとは異なる既に復元されたピクチャであることは、ビットストリーム適合性のための制限事項であり得る。

本開示の一実施例によるピクチャヘッダーの別の例は、図１７に示されている通りである。

図１７を参照すると、ピクチャヘッダーは、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報であって、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ及びｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇを含むことができる。

ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ及びｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇは、ピクチャレベルでＴＭＶＰが利用可能である場合（例えば、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＝＝１）にのみシグナリングされることができる。

ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、現在ピクチャとＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）とのＰＯＣ（ｐｉｃｔｕｒｅ ｏｒｄｅｒ ｃｏｕｎｔ）差の絶対値を示すことができる。例えば、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、現在ピクチャのＰＯＣから同一位置ピクチャ（ｃｏｌＰｉｃ）のＰＯＣを差し引いた値の絶対値を有することができる。或いは、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、同一位置ピクチャ（ｃｏｌＰｉｃ）のＰＯＣから現在ピクチャのＰＯＣを差し引いた値の絶対値を有することもできる。ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌは、現在ピクチャと同一位置ピクチャ（ｃｏｌＰｉｃ）とのＰＯＣ差の絶対値を示し、図１６のｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌとは異なり、ｕｎｓｉｇｎｅｄ ｉｎｔｅｇｅｒタイプで表現できる。

ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇは、現在ピクチャとＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）とのＰＯＣ差の符号（ｓｉｇｎ）を示すことができる。例えば、現在ピクチャのＰＯＣが同一位置ピクチャ（ｃｏｌＰｉｃ）のＰＯＣよりも大きい場合（又は、その逆の場合）、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇは、正の符号（＋）を示す第２値（例えば、１）を有することができる。これとは異なり、現在ピクチャのＰＯＣが同一位置ピクチャ（ｃｏｌＰｉｃ）のＰＯＣと同一であるかそれより小さい場合（又は、その逆の場合）、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇは、負の符号（－）を示す第１値（例えば、０）を有することができる。

一例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーとスライスヘッダーの両方でシグナリングされることができる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされるが、前記ピクチャヘッダーに関連するスライスのうちの少なくとも一部に対しては、スライスヘッダーを介してもシグナリングされることができる。この場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、スライスヘッダーを介してシグナリングされた同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて決定されることができる。

他の例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダー又はスライスヘッダーを介して選択的にシグナリングされることができる。この場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダー（又は、スライスヘッダー）を介してシグナリングされるか否かは、ピクチャヘッダー（及び／又は、スライスヘッダー）内の所定のシグナリング情報に基づいて決定されることができる。例えば、前記シグナリング情報が第２値（例えば、１）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされることができる。これとは異なり、前記シグナリング情報が第１値（例えば、０）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、スライスヘッダーを介してシグナリングされることができる。

同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がスライスヘッダーを介してシグナリングされる場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、前記スライスヘッダーを介して取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて決定されることができる。これとは異なり、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダーを介してのみシグナリングされる場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、前記ピクチャヘッダーを介して取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ及びｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇ）に基づいて決定されることができる。

一方、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）が現在ピクチャとは異なる既に復元されたピクチャであることは、ビットストリーム適合性のための制限事項であり得る。

本開示の一実施例によるピクチャヘッダーの別の例は、図１８に示されている通りである。

図１８を参照すると、ピクチャヘッダーは、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報であって、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ＿ｍｉｎｕｓ１及びｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇを含むことができる。

ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ＿ｍｉｎｕｓ１及びｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇは、ピクチャレベルでＴＭＶＰモードが利用可能である場合（例えば、ｐｉｃ＿ｔｅｍｐｏｒａｌ＿ｍｖｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＝＝１）にのみシグナリングされることができる。

ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ＿ｍｉｎｕｓ１は、現在ピクチャとＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）とのＰＯＣ（ｐｉｃｔｕｒｅ ｏｒｄｅｒ ｃｏｕｎｔ）差の絶対値から１を差し引いた値を示すことができる。

ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇは、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ＿ｍｉｎｕｓ１に１を加えた値が０よりも大きいか否かを示すことができる。例えば、第１値（例えば、０）を有するｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇは、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ＿ｍｉｎｕｓ１に１を加えた値が０よりも小さいことを示すことができる。これとは異なり、第２値（例えば、１）を有するｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇは、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ＿ｍｉｎｕｓ１に１を加えた値が０よりも大きいことを示すことができる。

一例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーとスライスヘッダーの両方でシグナリングされることができる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされるが、前記ピクチャヘッダーに関連するスライスのうちの少なくとも一部に対しては、スライスヘッダーを介してもシグナリングされることができる。この場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、スライスヘッダーを介してシグナリングされた同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて決定されることができる。

他の例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダー又はスライスヘッダーを介して選択的にシグナリングされることができる。この場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダー（又は、スライスヘッダー）を介してシグナリングされるか否かは、ピクチャヘッダー（及び／又は、スライスヘッダー）内の所定のシグナリング情報（例えば、ｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ）に基づいて決定されることができる。例えば、前記シグナリング情報が第２値（例えば、１）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされることができる。これとは異なり、前記シグナリング情報が第１値（例えば、０）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、スライスヘッダーを介してシグナリングされることができる。

同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がスライスヘッダーを介してシグナリングされる場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、前記スライスヘッダーを介して取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて決定されることができる。これとは異なり、同一位置ピクチャに関する情報がピクチャヘッダーを介してのみシグナリングされる場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、前記ピクチャヘッダーを介して取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報（例えば、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ＿ｍｉｎｕｓ１及びｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇ）に基づいて決定されることができる。

一方、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）が現在ピクチャとは異なる既に復元されたピクチャであることは、ビットストリーム適合性のための制限事項であり得る。同一位置ピクチャ（ｃｏｌＰｉｃ）が現在ピクチャとは異なる既に復元されたピクチャであることは、現在ピクチャと同一位置ピクチャ（ｃｏｌＰｉｃ）とのＰＯＣ差を常に０よりも大きくするｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ＿ｍｉｎｕｓ１をシグナリングすることにより実現できる。

以上、図１５乃至図１８を参照して前述した本開示の実施例によるピクチャヘッダーは、ＴＭＶＰのための同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報、例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報を含むことができる。これにより、互いに同一である同一位置ピクチャ（ｃｏｌＰｉｃ）を参照する複数のスライスに対して、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダーを介して１回のみシグナリングされることができるので、ＴＭＶＰのためのシグナリングオーバーヘッドが減少してシグナリングメカニズムの効率が改善されることができる。

以下、図１９乃至図２１を参照して、本開示の一実施例による画像符号化／復号化方法について詳細に説明する。

図１９は本開示の一実施例による画像符号化方法を示すフローチャートである。

図１９の画像符号化方法は、図２の画像符号化装置によって行われることができる。例えば、ステップＳ１９１０及びステップＳ１９２０は、インター予測部１８０によって行われることができる。また、ステップＳ１９３０は、エントロピー符号化部１９０によって行われることができる。

図１９を参照すると、現在ブロックに対してインター予測モードが適用される場合、画像符号化装置は、現在ブロックの動きベクトルに基づいて現在ブロックの予測ブロックを生成することができる（Ｓ１９１０）。

現在ブロックに対するインター予測モードは、様々なインター予測モード（例えば、マージモード（ｍｅｒｇｅ ｍｏｄｅ）、スキップモード（ｓｋｉｐ ｍｏｄｅ）、ＭＶＰモード（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｉｏｎ ｍｏｄｅ）、ＳＭＶＤモード（Ｓｙｍｍｅｔｒｉｃ Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｄｉｆｆｅｒｅｎｃｅ）、アフィンモード（ａｆｆｉｎｅ ｍｏｄｅ）など）のうちのいずれかに決定されることができる。例えば、画像符号化装置は、様々なインター予測モードに対するレート歪みコスト（Ｒａｔｅ－Ｄｉｓｔｏｒｔｉｏｎ（ＲＤ）ｃｏｓｔ）を比較して最適のインター予測モードを選択し、選択された最適のインター予測モードを現在ブロックに対するインター予測モードとして決定することができる。

画像符号化装置は、動き推定（ｍｏｔｉｏｎ ｅｓｔｉｍａｔｉｏｎ）を介して現在ブロックに対する参照ピクチャの一定領域（サーチ領域）内で現在ブロックと類似なブロックをサーチし、現在ブロックとの差が最小又は一定の基準以下である参照ブロックを導出することができる。画像符号化装置は、前記導出された参照ブロックと現在ブロックとの位置差に基づいて現在ブロックの動きベクトルを導出することができる。

例えば、現在ブロックにマージモード又はスキップモードが適用される場合、画像符号化装置は、現在ブロックの周辺ブロックからマージ候補を誘導し、誘導されたマージ候補を用いてマージ候補リストを構成することができる。ここで、現在ブロックの周辺ブロックは、空間周辺ブロック及び／又は時間周辺ブロックを含むことができる。画像符号化装置は、前記マージ候補リストに含まれているマージ候補の動き情報によって推定される参照ブロックのうち、現在ブロックとの差が最小又は一定の基準以下である参照ブロックを導出することができる。この場合、現在ブロックの動きベクトルは、前記導出された参照ブロックに関連するマージ候補の動きベクトルを用いて導出されることができる。

他の例において、現在ブロックにＭＶＰモードが適用される場合、画像符号化装置は、現在ブロックの周辺ブロックから動きベクトル予測子（Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ Ｐｒｅｄｉｃｔｏｒ、ＭＶＰ）候補を誘導し、前記誘導されたＭＶＰ候補を用いてＭＶＰ候補リストを構成することができる。ここで、現在ブロックの周辺ブロックは、空間周辺ブロック及び／又は時間周辺ブロックを含むことができる。この場合、例えば、前述した動き推定によって導出される参照ブロックを指す動きベクトルが現在ブロックの動きベクトルとして用いられることができ、前記ＭＶＰ候補のうち、現在ブロックの動きベクトルとの差が最小である動きベクトルを有するＭＶＰ候補が現在ブロックに対するＭＶＰとして選択できる。

画像符号化装置は、同一位置ピクチャ（ｃｏｌＰｉｃ）に基づいて現在ブロックに対する時間動きベクトル予測子（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ、ＴＭＶＰ）を導出することができる（Ｓ１９２０）。

同一位置ピクチャ（ｃｏｌＰｉｃ）は、スライスレベル又はピクチャレベルで決定されることができる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）がスライスレベルで決定される場合、現在ピクチャ内のスライスのうちの少なくとも一部に対して、互いに異なる同一位置ピクチャ（ｃｏｌＰｉｃ）が選択されることができる。この場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報、例えば同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報は、スライスヘッダーを介して画像復号化装置へシグナリングされることができる。これとは異なり、同一位置ピクチャ（ｃｏｌＰｉｃ）がピクチャレベルで決定される場合、現在ピクチャ内のすべてのスライスに対して互いに同一である同一位置ピクチャ（ｃｏｌＰｉｃ）が選択されることができる。この場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報、例えば同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報は、ピクチャヘッダーを介して画像復号化装置へシグナリングされることができる。

一例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、所定のシグナリング情報（例えば、ｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ）に基づいて、ピクチャヘッダー又はスライスヘッダーを介して選択的にシグナリングされることができる。例えば、前記シグナリング情報が第１値（例えば、１）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされることができる。これとは異なり、前記シグナリング情報が第２値（例えば、０）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、スライスヘッダーを介してシグナリングされることができる。

現在ブロックに対するＴＭＶＰは、同一位置ピクチャ（ｃｏｌＰｉｃ）内の時間周辺ブロックに基づいて導出されることができる。時間周辺ブロックは、現在ブロックに対する同一位置ブロック（ｃｏｌｌｏｃａｔｅｄ ｂｌｏｃｋ、ｃｏｌＣｂ）を含むことができる。ここで、同一位置ブロック（ｃｏｌＣｂ）とは、同一位置ピクチャ（ｃｏｌＰｉｃ）内で現在ブロックと同一の位置及び／又は同一のサイズを有するブロックを意味することができる。

一例において、同一位置ブロック（ｃｏｌＣｂ）は、同一位置ピクチャ（ｃｏｌＰｉｃ）内で現在ブロックの右下隅（ｒｉｇｈｔ－ｂｏｔｔｏｍ ｃｏｒｎｅｒ）に対応する第１位置（ｘＣｏｌＢｒ，ｙＣｏｌＢｒ）から修正された（ｍｏｄｉｆｉｅｄ）位置をカバーするルマコーディングブロック（ｌｕｍａ ｃｏｄｉｎｇ ｂｌｏｃｋ）として決定されることができる。ここで、第１位置（ｘＣｏｌＢｒ，ｙＣｏｌＢｒ）は、同一位置ピクチャ内で現在ブロックの左上隅（ｕｐｐｅｒ－ｌｅｆｔ ｃｏｒｎｅｒ）に対応する位置（ｘＣｂ，ｙＣｂ）から現在ブロックの幅（ｃｂＷｉｄｔｈ）及び高さ（ｃｂＨｅｉｇｈｔ）だけ移動した位置（ｘＣｂ＋ｃｂＷｉｄｔｈ，ｙＣｂ＋ｃｂＨｅｉｇｈｔ）を意味することができる。第１位置（ｘＣｏｌＢｒ，ｙＣｏｌＢｒ）は、ｍｏｔｉｏｎ ｄａｔａ ｃｏｍｐｒｅｓｓｉｏｎのために、算術シフト演算（ａｒｉｔｈｍｅｔｉｃ ｓｈｉｆｔ ｏｐｅｒａｔｉｏｎ）を用いて修正されることができる。例えば、第１位置（ｘＣｏｌＢｒ，ｙＣｏｌＢｒ）は（（ｘＣｏｌＢｒ＞＞ｎ）＜＜ｎ，（ｙＣｏｌＢｒ＞＞ｎ）＜＜ｎ）に修正されることができる。ここで、ｎは０以上の整数であり得る。

他の例において、同一位置ブロック（ｃｏｌＣｂ）は、同一位置ピクチャ（ｃｏｌＰｉｃ）内で現在ブロックの中心部の４サンプルのうち、右下側サンプル（ｃｅｎｔｅｒａｌ ｒｉｇｈｔ－ｂｏｔｔｏｍ ｓａｍｐｌｅ）に対応する第２位置（ｘＣｏｌＣｔｒ，ｙＣｏｌＣｔｒ）から修正された位置をカバーするルマコーディングブロックとして決定されることができる。ここで、第２位置（ｘＣｏｌＣｔｒ，ｙＣｏｌＣｔｒ）は、同一位置ピクチャ内で現在ブロックの左上隅に対応する位置（ｘＣｂ，ｙＣｂ）から現在ブロックの幅（ｃｂＷｉｄｔｈ）及び高さ（ｃｂＨｅｉｇｈｔ）のそれぞれの半分だけ移動した位置（ｘＣｂ＋（ｃｂＷｉｄｔｈ＞＞１），ｙＣｂ＋（ｃｂＨｅｉｇｈｔ＞＞１））を意味することができる。第２位置（ｘＣｏｌＣｔｒ，ｙＣｏｌＣｔｒ）は、ｍｏｔｉｏｎ ｄａｔａ ｃｏｍｐｒｅｓｓｉｏｎのために、算術シフト演算を用いて修正されることができる。例えば、第２位置（ｘＣｏｌＣｔｒ，ｙＣｏｌＣｔｒ）は（（ｘＣｏｌＣｔｒ＞＞ｎ）＜＜ｎ，（ｙＣｏｌＣｔｒ＞＞ｎ）＜＜ｎ）に修正されることができる。ここで、ｎは０以上の整数であり得る。

上述した例において、算術シフト演算に用いられるｎは、時間周辺ブロックの動き情報を保存する保存単位を意味することができる。例えば、ｎが３である場合、時間周辺ブロックの動き情報を保存する保存単位は８×８サンプル単位であり得る。或いは、ｎが４である場合、時間周辺ブロックの動き情報を保存する保存単位は１６×１６サンプル単位であり得る。

或いは、算術シフト演算に用いられるｎは、時間周辺ブロックの動き情報を読み出す読出単位を意味することができる。例えば、ｎが３である場合、時間周辺ブロックの動き情報を読み出す読出単位は８×８サンプル単位であり得る。この場合、画像符号化装置は、算術シフト演算に基づいて修正された第１位置（（ｘＣｏｌＢｒ＞＞ｎ）＜＜ｎ，（ｙＣｏｌＢｒ＞＞ｎ）＜＜ｎ）又は第２位置（（ｘＣｏｌＣｔｒ＞＞ｎ）＜＜ｎ，（ｙＣｏｌＣｔｒ＞＞ｎ）＜＜ｎ）を含む８×８サンプル単位を識別し、前記識別された８×８サンプル単位の動き情報を読み出すことができる。

一方、図１９では、ステップＳ１９２０がステップＳ１９１０よりも後で行われるものと図示されているが、本開示の実施例はこれに限定されるものではない。例えば、ステップＳ１９２０はステップＳ１９１０よりも先に行われてもよく、或いはステップＳ１９２０はステップＳ１９１０と同時に行われてもよい。

画像符号化装置は、現在ブロックに対するＴＭＶＰに基づいて現在ブロックの動きベクトルを符号化することができる（Ｓ１９３０）。

例えば、現在ブロックにマージモード又はスキップモードが適用される場合、現在ブロックに対するＴＭＶＰが時間マージ候補（ｔｅｍｐｏｒａｌ ｍｅｒｇｅ ｃａｎｄｉｄａｔｅ）としてマージ候補リストに含まれることができる。前記時間マージ候補は、前記ＴＭＶＰを含めて複数の候補を含むこともできる。現在ブロックに対して前記時間マージ候補が選択される場合、画像符号化装置は、前記時間マージ候補を指すマージインデックス情報を符号化することにより、現在ブロックの動きベクトルを符号化することができる。

他の例において、現在ブロックにＭＶＰモードが適用される場合、現在ブロックに対するＴＭＶＰが時間ＭＶＰ候補としてＭＶＰ候補リストに含まれることができる。前記時間ＭＶＰ候補は、前記ＴＭＶＰを含めて複数の候補を含むこともできる。現在ブロックに対して前記時間ＭＶＰ候補が選択される場合、画像符号化装置は、前記時間ＭＶＰ候補のＴＭＶＰに基づいて現在ブロックの動きベクトルを符号化することができる。例えば、画像符号化装置は、現在ブロックの動きベクトルから前記ＴＭＶＰを差し引いた差分であるＭＶＤ（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）を導出し、前記ＭＶＤに関する情報及び前記時間ＭＶＰ候補を指すＭＶＰインデックス情報を符号化することにより、現在ブロックの動きベクトルを符号化することができる。

前述したように、本開示の一実施例によれば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダー又はスライスヘッダーを介して選択的にシグナリングされることができる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介して１回のみシグナリングされることもでき、或いは、スライスヘッダーを介して適応的にシグナリングされることもできる。或いは、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーとスライスヘッダーの両方でシグナリングされることもできる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされるが、前記ピクチャヘッダーに関連するスライスのうちの少なくとも一部に対してはスライスヘッダーを介してもシグナリングされることができる。この場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、スライスヘッダーを介してシグナリングされた同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報に基づいて決定されることができる。これにより、ＴＭＶＰのためのシグナリングオーバーヘッドが減少してシグナリングメカニズムの効率が改善されることができる。

図２０は本開示の一実施例による画像復号化方法を示すフローチャートである。

図２０の画像復号化方法は、図３の画像復号化装置によって行われることができる。例えば、ステップＳ２０１０は、エントロピー復号化部２１０によって行われることができる。また、ステップＳ２０２０及びステップＳ２０３０は、インター予測部２６０によって行われることができる。

図２０を参照すると、現在ブロックに対してインター予測モードが適用される場合、画像復号化装置は、同一位置ピクチャ（ｃｏｌＰｉｃ）に基づいて現在ブロックに対する時間動きベクトル予測子（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ、ＴＭＶＰ）を導出することができる（Ｓ２０１０）。

同一位置ピクチャ（ｃｏｌＰｉｃ）は、ピクチャヘッダー又はスライスヘッダーから取得される同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報に基づいて決定されることができる。同一位置ピクチャ（ｃｏｌＰｉｃ）を決定する具体的な方法は、図２１に示されている通りである。

図２１は本開示の一実施例による同一位置ピクチャを決定する方法を示すフローチャートである。

図２１を参照すると、画像復号化装置は、スライスヘッダーから同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報が取得されるか否かを判別することができる（Ｓ２１１０）。

スライスヘッダーから同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報、例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報が取得される場合（Ｓ２１１０の「Ｙｅｓ」）、画像復号化装置は、スライスヘッダーに基づいて現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）を決定することができる（Ｓ２１２０）。例えば、図１４ｂを参照して前述したスライスヘッダーから取得される同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報（例えば、ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）が決定されることができる。

これとは異なり、スライスヘッダーから同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報が取得されない場合（Ｓ２１１０の「いいえ」）、画像復号化装置は、ピクチャヘッダーに基づいて現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）を決定することができる（Ｓ２１３０）。例えば、図１５を参照して前述したピクチャヘッダーから取得される同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報（例えば、ｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｆｒｏｍ＿ｌ０＿ｆｌａｇ及びｐｉｃ＿ｃｏｌｌｏｃａｔｅｄ＿ｒｅｆ＿ｉｄｘ）に基づいて、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）が決定されることができる。又は、図１６乃至図１８を参照して前述したピクチャヘッダーから取得される同一位置ピクチャ（ｃｏｌＰｉｃ）の識別情報（例えば、ｃｏｌ＿ｒｅｆ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｖａｌ、ｃｏｌ＿ｒｅｆ＿ａｂｓ＿ｄｅｌｔａ＿ｐｏｃ＿ｓｉｇｎ＿ｆｌａｇなど）に基づいて、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）が決定されることができる。

一例において、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報がピクチャヘッダー（又は、スライスヘッダー）を介して取得されるか否かは、ピクチャヘッダー（及び／又はスライスヘッダー）内の所定のシグナリング情報（例えば、ｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ）に基づいて決定されることができる。例えば、前記シグナリング情報が第１値（例えば、０）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、スライスヘッダーを介して取得されることができる。この場合、現在ピクチャ内のスライスのうちの少なくとも一部に対して、互いに異なる同一位置ピクチャ（ｃｏｌＰｉｃ）が適用できる。これとは異なり、前記シグナリング情報が第２値（例えば、１）を有する場合、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報はピクチャヘッダーを介して取得されることができる。この場合、現在ピクチャ内の全てのスライスに対して、互いに同一である同一位置ピクチャ（ｃｏｌＰｉｃ）が適用されることができる。

再び図２０を参照すると、画像復号化装置は、同一位置ピクチャ（ｃｏｌＰｉｃ）に基づいて、現在ブロックに対する時間動きベクトル予測子（ｔｅｍｐｏｒａｌ ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ、ＴＭＶＰ）を導出することができる。

ＴＭＶＰは、同一位置ピクチャ（ｃｏｌＰｉｃ）内の時間周辺ブロック（ｔｅｍｐｏｒａｌ ｎｅｒｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）に基づいて導出されることができる。時間周辺ブロックは、同一位置ピクチャ（ｃｏｌＰｉｃ）内で現在ブロックと同一の位置及び／又は同一のサイズを有する同一位置ブロック（ｃｏｌｌｏｃａｔｅｄ ｂｌｏｃｋ、ｃｏｌＣｂ）を含むことができる。

一例において、同一位置ブロック（ｃｏｌＣｂ）は、同一位置ピクチャ（ｃｏｌＰｉｃ）内で現在ブロックの右下隅（ｒｉｇｈｔ－ｂｏｔｔｏｍ ｃｏｒｎｅｒ）に対応する第１位置（ｘＣｏｌＢｒ，ｙＣｏｌＢｒ）から修正された（ｍｏｄｉｆｉｅｄ）位置をカバーするルマコーディングブロック（ｌｕｍａ ｃｏｄｉｎｇ ｂｌｏｃｋ）として決定されることができる。ここで、第１位置（ｘＣｏｌＢｒ，ｙＣｏｌＢｒ）は、同一位置ピクチャ（ｃｏｌＰｉｃ）内で現在ブロックの左上隅（ｕｐｐｅｒ－ｌｅｆｔ ｃｏｒｎｅｒ）に対応する位置（ｘＣｂ，ｙＣｂ）から現在ブロックの幅（ｃｂＷｉｄｔｈ）及び高さ（ｃｂＨｅｉｇｈｔ）だけ移動した位置（ｘＣｂ＋ｃｂＷｉｄｔｈ，ｙＣｂ＋ｃｂＨｅｉｇｈｔ）を意味することができる。一方、第１位置（ｘＣｏｌＢｒ，ｙＣｏｌＢｒ）は、ｍｏｔｉｏｎ ｄａｔａ ｃｏｍｐｒｅｓｓｉｏｎのために、算術シフト演算（ａｒｉｔｈｍｅｔｉｃ ｓｈｉｆｔ ｏｐｅｒａｔｉｏｎ）を用いて変更できる。例えば、第１位置（ｘＣｏｌＢｒ，ｙＣｏｌＢｒ）は（（ｘＣｏｌＢｒ＞＞３）＜＜３，（ｙＣｏｌＢｒ＞＞３）＜＜３）に修正できる。

他の例において、同一位置ブロック（ｃｏｌＣｂ）は、同一位置ピクチャ（ｃｏｌＰｉｃ）内で現在ブロックの中心部の４サンプルのうち、右下側サンプル（ｃｅｎｔｅｒａｌ ｒｉｇｈｔ－ｂｏｔｔｏｍ ｓａｍｐｌｅ）に対応する第２位置（ｘＣｏｌＣｔｒ，ｙＣｏｌＣｔｒ）から修正された位置をカバーするルマコーディングブロックとして決定されることができる。ここで、第２位置（ｘＣｏｌＣｔｒ，ｙＣｏｌＣｔｒ）は、同一位置ピクチャ（ｃｏｌＰｉｃ）内で現在ブロックの左上隅に対応する位置（ｘＣｂ，ｙＣｂ）から現在ブロックの幅（ｃｂＷｉｄｔｈ）及び高さ（ｃｂＨｅｉｇｈｔ）のそれぞれの半分だけ移動した位置（ｘＣｂ＋（ｃｂＷｉｄｔｈ＞＞１），ｙＣｂ＋（ｃｂＨｅｉｇｈｔ＞＞１））を意味することができる。一方、第２位置（ｘＣｏｌＣｔｒ，ｙＣｏｌＣｔｒ）は、ｍｏｔｉｏｎ ｄａｔａ ｃｏｍｐｒｅｓｓｉｏｎのために、算術シフト演算を用いて変更できる。例えば、第２位置（ｘＣｏｌＣｔｒ，ｙＣｏｌＣｔｒ）は（（ｘＣｏｌＣｔｒ＞＞３）＜＜３，（ｙＣｏｌＣｔｒ＞＞３）＜＜３）に修正できる。

画像復号化装置は、現在ブロックに対するＴＭＶＰに基づいて現在ブロックの動きベクトルを導出することができる（Ｓ２０２０）。

例えば、現在ブロックにマージモード又はスキップモードが適用される場合、画像復号化装置は、マージ候補リストを構成し、前記マージ候補リスト内で現在ブロックに対するＴＭＶＰを含む時間マージ候補の動きベクトルを現在ブロックの動きベクトルとして導出することができる。

他の例において、現在ブロックにＭＶＰモードが適用される場合、画像復号化装置は、ＭＶＰ候補リストを構成し、前記ＭＶＰ候補リスト内で現在ブロックに対するＴＭＶＰを含む時間ＭＶＰ候補の動きベクトルを現在ブロックのＭＶＰとして導出することができる。この場合、画像復号化装置は、ビットストリームから取得されるＭＶＤ（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）に関する情報に基づいて現在ブロックのＭＶＤを導出し、前記ＭＶＤに前記ＭＶＰを加算することにより、現在ブロックの動きベクトルを導出することができる。

画像復号化装置は、現在ブロックの動きベクトルに基づいて現在ブロックの予測ブロックを生成することができる（Ｓ２０３０）。例えば、画像復号化装置は、ビットストリームから取得される参照ピクチャインデックス情報に基づいて現在ブロックの参照ピクチャを導出し、現在ブロックの動きベクトルが前記参照ピクチャ上で指す参照ブロックのサンプルを用いて現在ブロックの予測ブロックを生成することができる。一例において、現在ブロックの予測ブロック内のサンプルの全部又は一部に対して、予測サンプルフィルタリング手順がさらに行われることができる。

一方、画像復号化装置は、ビットストリームから取得されるレジデュアル（ｒｅｓｉｄｕａｌ）情報に基づいて現在ブロックのレジデュアルブロックを生成し、前記予測ブロックに前記レジデュアルブロックを加算することにより、現在ブロックを復元することができる。一例において、復元された画像に対して、インループフィルタリング手順などがさらに行われることができる。

前述したように、本開示の一実施例によれば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダー又はスライスヘッダーを介して選択的にシグナリングされることができる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介して１回のみシグナリングされることができ、或いはスライスヘッダーを介して適応的にシグナリングされることもできる。或いは、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーとスライスヘッダーの両方でシグナリングされることもできる。例えば、同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報は、ピクチャヘッダーを介してシグナリングされるが、前記ピクチャヘッダーに関連するスライスのうちの少なくとも一部に対しては、スライスヘッダーを介してもシグナリングされることができる。この場合、現在ブロックに対する同一位置ピクチャ（ｃｏｌＰｉｃ）は、スライスヘッダーを介してシグナリングされた同一位置ピクチャ（ｃｏｌＰｉｃ）に関する情報に基づいて決定されることができる。これにより、ＴＭＶＰのためのシグナリングオーバーヘッドが減少してシグナリングメカニズムの効率が改善されることができる。

本開示の例示的な方法は、説明の明確性のために動作のシリーズで表現されているが、これは、ステップが行われる順序を制限するためのものではなく、必要な場合には、それぞれのステップが同時に又は異なる順序で行われることもできる。本開示による方法を実現するために、例示するステップにさらに他のステップを含むか、一部のステップを除いて残りのステップを含むか、又は一部のステップを除いて追加の他のステップを含むこともできる。

本開示において、所定の動作（ステップ）を行う画像符号化装置又は画像復号化装置は、当該動作（ステップ）の実行条件や状況を確認する動作（ステップ）を行うことができる。例えば、所定の条件が満足される場合、所定の動作を行うと記載された場合、画像符号化装置又は画像復号化装置は、前記所定の条件が満足されるか否かを確認する動作を行った後、前記所定の動作を行うことができる。

本開示の様々な実施例は、すべての可能な組み合わせを羅列したものではなく、本開示の代表的な態様を説明するためのものであり、様々な実施例で説明する事項は、独立して適用されてもよく、２つ以上の組み合わせで適用されてもよい。

また、本開示の様々な実施例は、ハードウェア、ファームウェア（ｆｉｒｍｗａｒｅ）、ソフトウェア、又はそれらの組み合わせなどによって実現できる。ハードウェアによる実現の場合、１つ又はそれ以上のＡＳＩＣｓ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔｓ）、ＤＳＰｓ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒｓ）、ＤＳＰＤｓ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｄｅｖｉｃｅｓ）、ＰＬＤｓ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅｓ）、ＦＰＧＡｓ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙｓ）、汎用プロセッサ（ｇｅｎｅｒａｌ ｐｒｏｃｅｓｓｏｒ）、コントローラ、マイクロコントローラ、マイクロプロセッサなどによって実現できる。

また、本開示の実施例が適用された画像復号化装置及び画像符号化装置は、マルチメディア放送送受信装置、モバイル通信端末、ホームシネマビデオ装置、デジタルシネマビデオ装置、監視用カメラ、ビデオ会話装置、ビデオ通信などのリアルタイム通信装置、モバイルストリーミング装置、記憶媒体、カムコーダ、注文型ビデオ（ＶｏＤ）サービス提供装置、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置、インターネットストリーミングサービス提供装置、３次元（３Ｄ）ビデオ装置、画像電話ビデオ装置、及び医療用ビデオ装置などに含まれることができ、ビデオ信号又はデータ信号を処理するために使用できる。例えば、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置としては、ゲームコンソール、ブルーレイプレーヤー、インターネット接続ＴＶ、ホームシアターシステム、スマートフォン、タブレットＰＣ、ＤＶＲ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｒｅｃｏｄｅｒ）などを含むことができる。

図２２は本開示による実施例が適用できるコンテンツストリーミングシステムを例示的に示す図である。

図２２に示されているように、本開示の実施例が適用されたコンテンツストリーミングシステムは、大きく、符号化サーバ、ストリーミングサーバ、Ｗｅｂサーバ、メディアストレージ、ユーザ装置及びマルチメディア入力装置を含むことができる。

前記符号化サーバは、スマートフォン、カメラ、カムコーダなどのマルチメディア入力装置から入力されたコンテンツをデジタルデータに圧縮してビットストリームを生成し、これを前記ストリーミングサーバに伝送する役割を果たす。他の例として、スマートフォン、カメラ、ビデオカメラなどのマルチメディア入力装置がビットストリームを直接生成する場合、前記符号化サーバは省略できる。

前記ビットストリームは、本開示の実施例が適用された画像符号化方法及び／又は画像符号化装置によって生成でき、前記ストリーミングサーバは、前記ビットストリームを伝送又は受信する過程で一時的に前記ビットストリームを保存することができる。

前記ストリーミングサーバは、Ｗｅｂサーバを介してユーザの要求に基づいてマルチメディアデータをユーザ装置に伝送し、前記Ｗｅｂサーバは、ユーザにどんなサービスがあるかを知らせる媒介体の役割を果たすことができる。ユーザが前記Ｗｅｂサーバに所望のサービスを要求すると、前記Ｗｅｂサーバは、これをストリーミングサーバに伝達し、前記ストリーミングサーバは、ユーザにマルチメディアデータを伝送することができる。この時、前記コンテンツストリーミングシステムは、別途の制御サーバを含むことができ、この場合、前記制御サーバは、前記コンテンツストリーミングシステム内の各装置間の命令／応答を制御する役割を果たすことができる。

前記ストリーミングサーバは、メディアストレージ及び／又は符号化サーバからコンテンツを受信することができる。例えば、前記符号化サーバからコンテンツを受信する場合、前記コンテンツをリアルタイムで受信することができる。この場合、円滑なストリーミングサービスを提供するために、前記ストリーミングサーバは、前記ビットストリームを一定時間の間保存することができる。

前記ユーザ装置の例としては、携帯電話、スマートフォン（ｓｍａｒｔ ｐｈｏｎｅ）、ノートパソコン（ｌａｐｔｏｐ ｃｏｍｐｕｔｅｒ）、デジタル放送用端末、ＰＤＡ（ｐｅｒｓｏｎａｌ ｄｉｇｉｔａｌ ａｓｓｉｓｔａｎｔｓ）、ＰＭＰ（ｐｏｒｔａｂｌｅ ｍｕｌｔｉｍｅｄｉａ ｐｌａｙｅｒ）、ナビゲーション、スレートＰＣ（ｓｌａｔｅ ＰＣ）、タブレットＰＣ（ｔａｂｌｅｔ ＰＣ）、ウルトラブック（ｕｌｔｒａｂｏｏｋ）、ウェアラブルデバイス（ｗｅａｒａｂｌｅ ｄｅｖｉｃｅ）、例えば、スマートウォッチ（ｓｍａｒｔｗａｔｃｈ）、スマートグラス（ｓｍａｒｔ ｇｌａｓｓ）、ＨＭＤ（ｈｅａｄ ｍｏｕｎｔｅｄ ｄｉｓｐｌａｙ）、デジタルＴＶ、デスクトップコンピュータ、デジタルサイネージなどがあり得る。

前記コンテンツストリーミングシステム内の各サーバは、分散サーバとして運営されることができ、この場合、各サーバから受信するデータは、分散処理されることができる。

本開示の範囲は、様々な実施例の方法による動作が装置又はコンピュータ上で実行されるようにするソフトウェア又はマシン－実行可能なコマンド（例えば、オペレーティングシステム、アプリケーション、ファームウェア（ｆｉｒｍｗａｒｅ）、プログラムなど）、及びこのようなソフトウェア又はコマンドなどが保存されて装置又はコンピュータ上で実行できる非一時的なコンピュータ可読媒体（ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ－ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）を含む。

本開示による実施例は、画像を符号化／復号化するために利用可能である。

Claims (3)

1. 画像復号化装置によって行われる画像復号化方法であって、
   現在ブロックに対する同一位置ピクチャに基づいて、前記現在ブロックに対する時間動きベクトル予測子を導出するステップと、
   動きベクトル差分に関する情報に基づいて、前記現在ブロックの動きベクトル差分を導出するステップと、
   前記時間動きベクトル予測子及び前記動きベクトル差分に基づいて前記現在ブロックの動きベクトルを導出するステップと、
   前記動きベクトルに基づいて前記現在ブロックの予測ブロックを生成するステップと、を含み、
   前記同一位置ピクチャは、前記同一位置ピクチャの識別情報に基づいて決定され、前記同一位置ピクチャの前記識別情報は、前記現在ブロックに対する参照ピクチャリスト内の前記同一位置ピクチャを示す参照インデックス情報を含み、
   前記時間動きベクトル予測子が、前記現在ブロックを含む現在ピクチャに対して有効であることに基づいて、前記同一位置ピクチャの前記識別情報は、前記現在ピクチャに対するピクチャヘッダーから取得される、画像復号化方法。
2. 画像符号化装置によって行われる画像符号化方法であって、
   現在ブロックの動きベクトルに基づいて前記現在ブロックの予測ブロックを生成するステップと、
   前記現在ブロックに対する同一位置ピクチャに基づいて前記現在ブロックに対する時間動きベクトル予測子を導出するステップと、
   前記動きベクトル及び前記時間動きベクトル予測子に基づいて、前記現在ブロックの動きベクトル差分を導出するステップと、
   前記時間動きベクトル予測子及び前記動きベクトル差分に基づいて前記現在ブロックの動きベクトルを符号化するステップと、を含み、
   前記同一位置ピクチャの識別情報は符号化され、前記同一位置ピクチャの前記識別情報は、前記現在ブロックに対する参照ピクチャリスト内の前記同一位置ピクチャを示す参照インデックス情報を含み、
   前記時間動きベクトル予測子が、前記現在ブロックを含む現在ピクチャに対して有効であることに基づいて、前記同一位置ピクチャの前記識別情報は、前記現在ピクチャに対するピクチャヘッダー内に符号化される、画像符号化方法。
3. 画像符号化方法によって生成されたビットストリームを伝送する方法であって、
   前記画像符号化方法は、
   現在ブロックの動きベクトルに基づいて前記現在ブロックの予測ブロックを生成するステップと、
   前記現在ブロックに対する同一位置ピクチャに基づいて前記現在ブロックに対する時間動きベクトル予測子を導出するステップと、
   前記動きベクトル及び前記時間動きベクトル予測子に基づいて、前記現在ブロックの動きベクトル差分を導出するステップと、
   前記時間動きベクトル予測子及び前記動きベクトル差分に基づいて前記現在ブロックの動きベクトルを符号化するステップと、を含み、
   前記同一位置ピクチャの識別情報は符号化され、前記同一位置ピクチャの前記識別情報は、前記現在ブロックに対する参照ピクチャリスト内の前記同一位置ピクチャを示す参照インデックス情報を含み、
   前記時間動きベクトル予測子が、前記現在ブロックを含む現在ピクチャに対して有効であることに基づいて、前記同一位置ピクチャの前記識別情報は、前記現在ピクチャに対するピクチャヘッダー内に符号化される、ビットストリーム伝送方法。