JP7457083B2 - 映像情報通知方法及び装置、並びにこれを利用した復号方法及び装置 - Google Patents

Description

本発明は、映像圧縮技術に関し、更に具体的には、映像情報を効率的に通知（シグナリング）する方法及び装置、並びにこれを利用した復号方法及び装置に関する。

最近、高解像度、高品質の映像に対する要求が多様な応用分野において増加している。しかしながら、映像が高解像度を有し、高品質になるほど、該当映像に関する情報量も共に増加する。

したがって、従来の有無線広帯域回線のような媒体を利用して映像情報を転送したり、既存の記憶媒体を利用して映像情報を記憶したりする場合には、情報の転送費用及び記憶費用が増加する。

高解像度、高品質映像の情報を効果的に転送、記憶、又は再生するために、高効率の映像圧縮技術を利用することができる。

映像圧縮の効率を上げるために、インタ予測及びイントラ予測を利用できる。インタ予測法では、他のピクチャの情報を参照して現在ピクチャのピクセル値を予測し、イントラ予測法では、同じピクチャ内のピクセル間の関係を利用してピクセル値を予測する。

インタ予測を採用する場合、符号化装置及び復号装置は、現在ブロック（現在ピクチャ）が利用できる参照ピクチャを指示する参照ピクチャリストに基づいて予測を行う。

参照ピクチャリストを作成するための情報は、符号化装置から復号装置に転送される。復号装置は、符号化装置から受信した情報に基づいて参照ピクチャリストを作成して、インタ予測を効果的に行うことができる。

本発明は、映像情報の符号化／復号において、映像情報を効果的に通知する方法及び装置を提供することを目的とする。

本発明は、映像情報の符号化／復号において、インタ予測のための情報を効果的に通知する方法及び装置を提供することを目的とする。

本発明は、インタ予測を行うための参照ピクチャリストを作成する情報を効果的に通知する方法及び装置を提供することを目的とする。

本発明は、受信した情報に基づいてインタ予測のための参照ピクチャリストを効果的に構成する方法及び装置を提供することを目的とする。

本発明の一実施形態は、映像情報通知方法であって、現在ピクチャに対するインタ予測を行うステップと、インタ予測結果及びインタ予測で利用可能な参照ピクチャを指示する参照ピクチャ情報を含む情報を通知するステップとを含み、参照ピクチャ情報は、利用可能な参照ピクチャのピクチャ順カウント（ＰＯＣ）情報を含み、参照ピクチャ情報において利用可能な参照ピクチャのＰＯＣ情報は、ＰＯＣ順で、現在ピクチャ以前のピクチャに対するＰＯＣが先頭部分に配置され、ＰＯＣ順で、現在ピクチャ以後のピクチャに対するＰＯＣが続いて配置される。

このとき、ＰＯＣ情報は、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対しては、参照ピクチャのＰＯＣ降順に、ＰＯＣ順で、現在ピクチャ以後の参照ピクチャに対しては、参照ピクチャのＰＯＣ昇順に配置される。

ＰＯＣ情報は、参照ピクチャ情報が指示する参照ピクチャのうち、対象参照ピクチャと他のピクチャとの間のＰＯＣ差であってよく、参照ピクチャ情報において参照ピクチャのＰＯＣ情報は、各対象参照ピクチャのＰＯＣに基づいて整列させることができる。

参照ピクチャのＰＯＣ情報は、参照ピクチャ情報が指示する参照ピクチャのうち、対象参照ピクチャと基準ピクチャとの間のＰＯＣ差の大きさ及び符号を含み、参照ピクチャ情報において参照ピクチャのＰＯＣ情報は、対象参照ピクチャのＰＯＣに基づいて整列させることができる。

このとき、参照ピクチャ情報内においてＰＯＣ情報は、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対しては、参照ピクチャのＰＯＣ降順に、ＰＯＣ順で、現在ピクチャ以後の参照ピクチャに対しては、参照ピクチャのＰＯＣ昇順に配置され、対象参照ピクチャが参照ピクチャ情報が指示する参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前のピクチャのうち、現在ピクチャと最も近いピクチャ、及び現在ピクチャ以後のピクチャのうち、現在ピクチャと最も近いピクチャのいずれか一つである場合、基準ピクチャは、現在ピクチャであり、対象参照ピクチャが参照ピクチャ情報の指示する参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前のピクチャのうち、現在ピクチャと最も近いピクチャ、及び現在ピクチャ以後のピクチャのうち、現在ピクチャと最も近いピクチャのいずれか一つでない場合、基準ピクチャは、参照ピクチャ情報において対象参照ピクチャのＰＯＣ情報の直前ＰＯＣ情報に対応する参照ピクチャであってよい。

また、このとき、ＰＯＣ差の符号は、対象参照ピクチャのＰＯＣと現在ピクチャのＰＯＣとの間の差の符号であってよい。

参照ピクチャ情報において利用可能な参照ピクチャのＰＯＣ情報は、参照ピクチャ情報が指示する参照ピクチャのうち、対象参照ピクチャと基準ピクチャとの間のＰＯＣ差の大きさとＰＯＣ差の符号が負の場合の個数及びＰＯＣ差の符号が正の場合の個数を指示する情報であってよく、参照ピクチャ情報において参照ピクチャのＰＯＣ情報は、対象参照ピクチャのＰＯＣに基づいて整列させることができる。

このとき、ＰＯＣ差の符号は、対象参照ピクチャのＰＯＣと現在ピクチャのＰＯＣとの間の差の符号であってよい。

また、このとき、参照ピクチャ情報内においてＰＯＣ情報は、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対しては、参照ピクチャのＰＯＣ降順に、ＰＯＣ順で、現在ピクチャ以後の参照ピクチャに対しては、参照ピクチャのＰＯＣ昇順に配置され、対象参照ピクチャが参照ピクチャ情報が指示する参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前のピクチャのうち、現在ピクチャと最も近いピクチャ、及び現在ピクチャ以後のピクチャのうち、現在ピクチャと最も近いピクチャのいずれか一つである場合、基準ピクチャは、現在ピクチャであり、対象参照ピクチャが参照ピクチャ情報の指示する参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前のピクチャのうち、現在ピクチャと最も近いピクチャ、及び現在ピクチャ以後のピクチャのうち、現在ピクチャと最も近いピクチャのいずれか一つでない場合、基準ピクチャは、参照ピクチャ情報において対象参照ピクチャのＰＯＣ情報の直前ＰＯＣ情報に対応する参照ピクチャであってよい。

本発明の他の実施形態は、映像情報の復号方法であって、受信したビットストリームの情報をエントロピ復号して、現在ピクチャの予測に利用可能な参照ピクチャのＰＯＣ情報を含む参照ピクチャ情報を取得するステップと、参照ピクチャ情報から導出される各参照ピクチャのＰＯＣに基づいて構成された参照ピクチャリストを利用して、現在ブロックに対する予測を行うステップとを含み、参照ピクチャ情報において参照ピクチャのＰＯＣ情報は、ＰＯＣ順で、現在ピクチャ以前のピクチャに対するＰＯＣが先頭部分に配置され、ＰＯＣ順で、現在ピクチャ以後のピクチャに対するＰＯＣが続いて配置される。

ＰＯＣ情報は、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対しては、参照ピクチャのＰＯＣ降順に、ＰＯＣ順で、現在ピクチャ以後の参照ピクチャに対しては、参照ピクチャのＰＯＣ昇順に配置される。

参照ピクチャ情報内の第ｉ（ｉは、整数）番目のＰＯＣ情報ＰＯＣｉは、参照ピクチャＰｉのＰＯＣ情報であり、ＰＯＣｉは、参照ピクチャ情報内のＰｉと基準ピクチャ間のＰＯＣ差の大きさを含み、参照ピクチャ情報において参照ピクチャのＰＯＣ情報は、対象参照ピクチャのＰＯＣに基づいて整列させることができる。

このとき、参照ピクチャ情報内においてＰＯＣ情報は、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対しては、参照ピクチャのＰＯＣ降順に、ＰＯＣ順で、現在ピクチャ以後の参照ピクチャに対しては、参照ピクチャのＰＯＣ昇順に配置され、Ｐｉが参照ピクチャ情報が指示する参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前のピクチャのうち、現在ピクチャと最も近いピクチャ、及び現在ピクチャ以後のピクチャのうち、現在ピクチャと最も近いピクチャのいずれか一つである場合、基準ピクチャは、現在ピクチャであり、Ｐｉが参照ピクチャ情報の指示する参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前のピクチャのうち、現在ピクチャと最も近いピクチャ、及び現在ピクチャ以後のピクチャのうち、現在ピクチャと最も近いピクチャのいずれか一つでない場合、基準ピクチャは、参照ピクチャ情報内の第ｉ－１番目のＰＯＣ情報に対応する参照ピクチャであってよい。

また、このとき、ＰＯＣ情報は、対象参照ピクチャのＰＯＣと現在ピクチャのＰＯＣとの間の差の符号を指示する情報を含むことができる。

参照ピクチャ情報内の第ｉ（ｉは、整数）番目のＰＯＣ情報ＰＯＣｉは、参照ピクチャＰｉのＰＯＣ情報であり、ＰＯＣｉは、参照ピクチャ情報内のＰｉと基準ピクチャ間のＰＯＣ差の大きさを含み、参照ピクチャ情報において参照ピクチャのＰＯＣ情報は、対象参照ピクチャのＰＯＣに基づいて整列させることができる。

このとき、参照ピクチャ情報内においてＰＯＣ情報は、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対しては、参照ピクチャのＰＯＣ降順に、ＰＯＣ順で、現在ピクチャ以後の参照ピクチャに対しては、参照ピクチャのＰＯＣ昇順に配置され、Ｐｉが参照ピクチャ情報の指示する参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前のピクチャのうち、現在ピクチャと最も近いピクチャ、及び現在ピクチャ以後のピクチャのうち、現在ピクチャと最も近いピクチャのいずれか一つである場合、基準ピクチャは、現在ピクチャであり、Ｐｉが参照ピクチャ情報が指示する参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前のピクチャのうち、現在ピクチャと最も近いピクチャ、及び現在ピクチャ以後のピクチャのうち、現在ピクチャと最も近いピクチャのいずれか一つでない場合、基準ピクチャは、参照ピクチャ情報内の第ｉ－１番目のＰＯＣ情報に対応する参照ピクチャであってよい。

また、このとき、参照ピクチャ情報は、各対象参照ピクチャのＰＯＣと現在ピクチャのＰＯＣとの間の先後関係を指示する情報を含むことができる。

また、ＰＯＣ情報は、ＰＯＣ差情報及び符号情報を含み、参照ピクチャ情報によって指示されるｍ個の参照ピクチャのうち、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャの個数がｎの場合、ＰＯＣ差情報のうち、第ｋ番目（０≦ｋ≦ｎ－１）ＰＯＣ差情報であるＰＯＣｋに対応する参照ピクチャｋのＰＯＣは、第１基準ピクチャのＰＯＣとＰＯＣｋの差で、ＰＯＣ差情報のうち、第ｊ番目（ｎ≦ｊ≦ｍ）ＰＯＣ差情報であるＰＯＣｊに対応する参照ピクチャｊのＰＯＣは、第２基準ピクチャのＰＯＣとＰＯＣｊとの和であってよい。

このとき、ｋが０の場合、第１基準ピクチャは、現在ピクチャであり、ｋが０でない場合、第１基準ピクチャは、第ｋ－１番目のＰＯＣ差情報に対応する参照ピクチャで、ｊがｎの場合、第２基準ピクチャは、現在ピクチャであり、ｊがｎでない場合、第２基準ピクチャは、第ｎ－１番目のＰＯＣ差情報に対応する参照ピクチャであってよい。

本発明によれば、映像情報の符号化／復号において、映像情報を効果的に通知できる。

本発明によれば、インタ予測を行うための参照ピクチャリストを作成する情報を効果的に通知できる。

本発明によれば、参照ピクチャリストを作成するための情報を転送する際の転送オーバヘッドを減らすことができる。

本発明によれば、参照ピクチャリストを作成するための情報を受信した後、受信した情報に基づいてインタ予測のための参照ピクチャリストを低い複雑度で効果的に構成できる。

本発明の一実施形態にかかる符号化装置（映像符号化装置）を概略的に示すブロック図である。 本発明の一実施形態にかかる映像復号装置を概略的に示したブロック図である。 現在ブロックに対してインタ予測を行う場合に利用できる候補ブロックの一例を概略的に説明する図である。 符号化装置から復号装置に通知される参照ピクチャ集合の一例を概略的に説明する図である。 両方向予測を行うＢピクチャ間の参照関係の一例を示す図である。 Ｂピクチャ及びＰピクチャ間の参照関係の一例を概略的に示した図である。 本発明によって符号化装置が行う符号化方法を概略的に説明するフローチャートである。 本発明によって復号装置が行う復号方法を概略的に説明するフローチャートである。

本発明は、多様な変更を加えることができ、様々な実施形態を有することができるため、特定実施形態を図面に例示し、詳細に説明する。しかしながら、これは、本発明を特定の実施形態に対して限定するものではない。本明細書において使用する用語は、特定の実施形態を説明するために使用されるものであって、本発明の技術的思想を限定する意図で使用されるものではない。単数の表現は、文脈上明らかな場合を除いて複数の表現を含む。本明細書において「含む」又は「有する」などの用語は、明細書上に記載された特徴、数字、段階、動作、構成要素、部品又はこれらを組み合わせたものが存在することを指定するものであり、一つ又はそれ以上の他の特徴や数字、段階、動作、構成要素、部品又はこれらを組み合わせたものの存在又は付加可能性を予め排除しないことを理解されたい。

一方、本発明において説明される図面上の各構成は、映像符号化装置／復号装置において別個の特徴的な機能に関する説明の便宜のために独立に示されたものであって、各構成が別のハードウェア又は別のソフトウェアによって具現化されることを意味しない。例えば、各構成のうち、二つ以上の構成が合わせられて一つの構成をなしてもよいし、一つの構成が複数の構成に分けられてもよい。各構成が統合及び／又は分離された実施形態も、本発明の本質から逸脱しない限り、本発明の権利範囲に含まれる。

以下、添付した図面を参照して、本発明の好ましい実施形態を更に詳細に説明する。以下、図面上の同じ構成要素に対しては、同じ参照符号を使用し、同じ構成要素について重複した説明は省略する。

図１は、本発明の一実施形態にかかる符号化装置（映像符号化装置）を概略的に示すブロック図である。図１に示すように、符号化装置１００は、ピクチャ分割部１０５、予測部１１０、変換部１１５、量子化部１２０、再整列部１２５、エントロピ符号化部１３０、逆量子化部１３５、逆変換部１４０、フィルタ部１４５及びメモリ１５０を備える。

ピクチャ分割部１０５は、入力されたピクチャを少なくとも一つの処理単位ブロックに分割できる。このとき、処理単位としてのブロックは、予測ユニット（以下、ＰＵとする）、変換ユニット（以下、ＴＵとする）、又は符号化ユニット（以下、ＣＵとする）であってもよい。

予測部１１０は、後述するように、インタ予測を行うインタ予測部と、イントラ予測を行うイントラ予測部とを備える。予測部１１０は、ピクチャ分割部１０５でピクチャの処理単位に対して予測を行って、予測ブロックを生成する。予測部１１０でピクチャの処理単位は、ＣＵ、ＴＵ、又はＰＵであってもよい。また、予測部１１０は、該当処理単位に対して実施される予測がインタ予測であるかイントラ予測であるかを決定し、各予測方法の具体的な内容（例えば、予測モード等）を決めることができる。このとき、予測が行われる処理単位と、予測方法及び予測方法の具体的な内容が決められる処理単位とは異なってもよい。例えば、予測の方法と予測モードなどは、ＰＵ単位で決定され、予測の遂行は、ＴＵ単位で行うこともできる。

インタ予測によっては、現在ピクチャの以前ピクチャ及び／又は以後ピクチャのうち、少なくとも一つのピクチャの情報に基づいて予測を行って、予測ブロックを生成できる。また、イントラ予測によっては、現在ピクチャ内のピクセル情報に基づいて予測を行って、予測ブロックを生成できる。

インタ予測の方法として、スキップモード、マージモード、動きベクトル予測（ＭＶＰ）などを利用できる。インタ予測では、ＰＵに対して、参照ピクチャを選択し、ＰＵと同じ大きさの参照ブロックを選択できる。参照ブロックは、整数ピクセル単位で選択することができる。次に、現在ＰＵとの残差（ｒｅｓｉｄｕａｌ）信号が最小になり、動きベクトルの大きさもやはり最小になる予測ブロックが生成される。

予測ブロックは、整数サンプル単位で生成してもよいし、１／２ピクセル単位又は１／４ピクセル単位のように整数以下のピクセル単位で生成してもよい。このとき、動きベクトルもまた、整数ピクセル以下の単位で表現することができる。例えば、輝度サンプルに対しては、１／４ピクセル単位で、色差サンプルに対しては、１／８ピクセル単位で表現することができる。

インタ予測を介して選択された参照ピクチャのインデクス、動きベクトル（例えば、ＭＶＰ）、残差信号などの情報は、エントロピ符号化されて復号装置に伝達される。スキップモードが採用される場合には、残差を予測ブロックを復元ブロックにすることができるため、残差を生成、変換、量子化、転送しなくてもよい。

イントラ予測を行う場合には、ＰＵ単位で予測モードが決まり、ＰＵ単位で予測を行うことができる。また、ＰＵ単位で予測モードが決まり、ＴＵ単位でイントラ予測を行うこともできる。

イントラ予測において予測モードは、３３個の方向性予測モードと、少なくとも２個以上の非方向性モードとを有することができる。非方向性モードは、ＤＣ予測モード及び平面モード（Ｐｌａｎａｒモード）を含むことができる。

イントラ予測では、参照サンプルにフィルタを適用した後、予測ブロックを生成できる。このとき、参照サンプルにフィルタを適用するかどうかは、現在ブロックのイントラ予測モード及び／又はサイズによって決定することができる。

ＰＵは、多様なサイズ／形態のブロックであってもよく、例えばインタ予測の場合にＰＵは、２Ｎ×２Ｎブロック、２Ｎ×Ｎブロック、Ｎ×２Ｎブロック、又はＮ×Ｎブロック（Ｎは、整数）などであってよい。イントラ予測の場合にＰＵは、２Ｎ×２Ｎブロック又はＮ×Ｎブロック（Ｎは、整数）などであってよい。このとき、Ｎ×Ｎブロック大きさのＰＵは、特定の場合においてだけ適用するように設定できる。例えば、最小大きさＣＵに対してだけＮｘＮブロック大きさのＰＵを利用するように決めるか、又はイントラ予測に対してだけ利用するように決めることができる。また、上述した大きさのＰＵの他に、Ｎ×ｍＮブロック、ｍＮ×Ｎブロック、２Ｎ×ｍＮブロック又はｍＮ×２Ｎブロック（ｍ＜１）などのＰＵを更に定義して使用することもできる。

生成された予測ブロックと原ブロックとの間の残差値（残差ブロック又は残差信号）は、変換部１１５に入力される。また、予測のために使用した予測モード情報、動きベクトル情報などは、残差値と共にエントロピ符号化部１３０で符号化されて復号装置に伝達される。

変換部１１５は、変換単位で残差ブロックに対する変換を行い、変換係数を生成する。変換部１１５での変換単位は、ＴＵであってよく、四分木（ｑｕａｄ ｔｒｅｅ）構造を有することができる。このとき、変換単位の大きさは、所定の最大及び最小大きさの範囲内で決めることができる。変換部１１５は、残差ブロックを離散コサイン変換（ＤＣＴ）及び／又は離散サイン変換（ＤＳＴ）を利用して変換できる。

量子化部１２０は、変換部１１５で変換された残差値を量子化して量子化係数を生成することができる。量子化部１２０から算出された値は、逆量子化部１３５と再整列部１２５とに提供される。

再整列部１２５は、量子化部１２０から提供された量子化係数を再整列させる。量子化係数を再整列させることによって、エントロピ符号化部１３０での符号化効率を上げることができる。再整列部１２５は、係数スキャン（Ｃｏｅｆｆｉｃｉｅｎｔ Ｓｃａｎｎｉｎｇ）法によって、２次元ブロック形態の量子化係数を１次元のベクトル形態で再整列できる。再整列部１２５では、量子化部から転送された係数の確率的な統計に基づいて係数スキャンの順序を変更することによって、エントロピ符号化部１３０でのエントロピ符号化効率を上げることもできる。

エントロピ符号化部１３０は、再整列部１２５によって再整列させた量子化係数に対するエントロピ符号化を行うことができる。エントロピ符号化には、例えば、指数ゴロム（Ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）、コンテキスト適応可変長符号化（ＣＡＶＬＣ）、コンテキスト適応２値算術符号化（ＣＡＢＡＣ）などのような符号化方法を使用することができる。エントロピ符号化部１３０は、再整列部１２５及び予測部１１０から伝達されたＣＵの量子化係数情報及びブロックタイプ情報、予測モード情報、分割単位情報、ＰＵ情報及び転送単位情報、動きベクトル情報、参照ピクチャ情報、ブロックの補間情報、フィルタ情報など多様な情報を符号化できる。

また、エントロピ符号化部１３０は、必要な場合、転送するパラメータ集合又は構文（シンタックス）に一定の変更を加えることもできる。

逆量子化部１３５は、量子化部１２０で量子化された値を逆量子化し、逆変換部１４０は、逆量子化部１３５で逆量子化された値を逆変換する。逆量子化部１３５及び逆変換部１４０で生成された残差値と、予測部１１０で予測された予測ブロックとを合わせて、復元ブロックを生成することができる。

図１では、加算器を介して残差ブロックと予測ブロックとを合わせて復元ブロックが生成されることを説明している。このとき、加算器は復元ブロックを生成する別途のユニット（復元ブロック生成部）と見なすこともできる。

フィルタ部１４５は、ブロック歪み除去（deblocking）フィルタ、適応ループフィルタ（ＡＬＦ）、サンプル適応オフセット（ＳＡＯ）を復元されたピクチャに適用できる。

ブロック歪み除去フィルタは、復元されたピクチャにおいてブロック間の境界に生じた歪みを除去できる。ＡＬＦは、ブロック歪み除去フィルタを介してブロックが除去された後、復元された映像と本来の映像とを比較した値に基づいてフィルタ処理を行うことができる。ＡＬＦは、高効率を採用する場合にだけ行われる場合もある。ＳＡＯは、ブロック歪み除去フィルタが採用された残差ブロックに対して、ピクセル単位で原映像とのオフセット差を復元し、バンドオフセット、エッジオフセットなどの形態で採用される。

一方、インタ予測に使用される復元ブロックに対して、フィルタ部１４５は、フィルタを適用しなくてもよい。

メモリ１５０は、フィルタ部１４５を介して算出された復元ブロック又はピクチャを記憶することができる。メモリ１５０に記憶された復元ブロック又はピクチャは、インタ予測を行う予測部１１０に提供することができる。

図２は、本発明の一実施形態にかかる映像復号装置を概略的に示したブロック図である。図２に示すように、映像復号装置２００は、エントロピ復号部２１０、再整列部２１５、逆量子化部２２０、逆変換部２２５、予測部２３０、フィルタ部２３５、及びメモリ２４０を備えることができる。

映像符号化装置において映像ビットストリームが入力された場合、入力されたビットストリームは、映像符号化装置で映像情報が処理された手順に従って復号することができる。

例えば、映像符号化装置においてエントロピ符号化を行うために、ＣＡＶＬＣなどの可変長符号化（以下、ＶＬＣとする）が使用された場合、エントロピ復号部２１０も符号化装置において使用したＶＬＣテーブルと同じＶＬＣテーブルで具現化してエントロピ復号を行うことができる。また、映像符号化装置においてエントロピ符号化を行うためにＣＡＢＡＣを利用した場合、エントロピ復号部２１０は、これに対応してＣＡＢＡＣを利用したエントロピ復号を行うことができる。

エントロピ復号部２１０において復号された情報のうち、予測ブロックを生成するための情報は、予測部２３０に提供され、エントロピ復号部２１０においてエントロピ復号が行われた残差値は、再整列部２１５に入力することができる。

再整列部２１５は、エントロピ復号部２１０においてエントロピ復号されたビットストリームを、映像符号化装置において再整列した方法に基づいて再整列できる。再整列部２１５は、１次元ベクトル形態で表現された係数を、２次元のブロック形態の係数に再度復元して再整列できる。再整列部２１５は、符号化装置において行われた係数スキャンに関連した情報を受け取り、符号化装置において行われたスキャン順序に基づいて逆にスキャンする方法によって再整列を行うことができる。

逆量子化部２２０は、符号化装置から提供された量子化パラメータと、再整列させたブロックの係数値とに基づいて逆量子化を行うことができる。

逆変換部２２５は、映像符号化装置において行われた量子化結果に対して、符号化装置の変換部が行ったＤＣＴ及びＤＳＴに対して逆ＤＣＴ及び／又は逆ＤＳＴを行うことができる。逆変換は、符号化装置で決定された転送単位又は映像の分割単位に基づいて行うことができる。符号化装置の変換部においてＤＣＴ及び／又はＤＳＴは、予測方法、現在ブロックの大きさ及び予測方向など複数の情報に応じて選択的に行うことができ、復号装置の逆変換部２２５は、符号化装置の変換部において行われた変換情報に基づいて逆変換を行うことができる。

予測部２３０は、エントロピ復号部２１０から提供された予測ブロック生成関連情報と、メモリ２４０から提供された以前に復号されたブロック及び／又はピクチャ情報とに基づいて予測ブロックを生成できる。

現在、ＰＵに対した予測モードがイントラ予測モードの場合、現在ピクチャ内のピクセル情報に基づいて予測ブロックを生成するイントラ予測を行うことができる。

現在、ＰＵに対した予測モードがインタ予測モードの場合、現在ピクチャの以前ピクチャ又は以後ピクチャのうち、少なくとも一つのピクチャに含まれた情報に基づいて現在ＰＵに対したインタ予測を行うことができる。このとき、映像符号化装置から提供された現在ＰＵのインタ予測に必要な動き情報、例えば動きベクトル、参照ピクチャインデクスなどに関する情報は、符号化装置から受信したスキップフラグ、マージフラグなどから導出することができる。

復元ブロックは、予測部２３０から生成された予測ブロックと逆変換部２２５から提供された残差ブロックとを利用して生成することができる。図２では、加算器で予測ブロックと残差ブロックとが合わせられて復元ブロックが生成されることを説明している。このとき、加算器は復元ブロックを生成する別途のユニット（復元ブロック生成部）と見なすことができる。

スキップモードが採用される場合には、残差が転送されず、予測ブロックを復元ブロックにすることができる。

復元されたブロック及び／又はピクチャは、フィルタ部２３５に提供することができる。フィルタ部２３５は、復元されたブロック及び／又はピクチャにブロック歪み除去フィルタリング、ＳＡＯ及び／又はＡＬＦなどを採用できる。

メモリ２４０は、復元されたピクチャ又はブロックを記憶して参照ピクチャ又は参照ブロックとして使用できるようにすることができ、また復元されたピクチャを出力部に提供できる。

一方、符号化又は復号されたピクチャは、メモリ、例えば復号ピクチャバッファ（ＤＰＢ）に記憶される。現在ピクチャを符号化又は復号する場合、現在ピクチャに対する予測を行うために、ＤＰＢに記憶された以前のピクチャを参照する。

具体的には、符号化装置及び復号装置は、インタ予測に使用するために以前に符号化／復号されたピクチャのリストを参照ピクチャリストに維持できる。

インタ予測が採用される場合、符号化装置及び復号装置は、他のピクチャを参照して現在ピクチャの対象ブロック（現在ブロック）に対した予測を行うことができる。インタ予測は、図１及び図２に示すように、符号化装置及び復号装置内の予測部で行ってもよい。

インタ予測を行う場合には、上述したように、現在ブロックに隣接し利用可能な（ａｖａｉｌａｂｌｅ）周辺ブロックの情報を利用して、現在ブロックを予測する。このとき、周辺ブロックは、現在ブロックが参照できる参照ピクチャにおいて現在ブロックと同じ位置にある（ｃｏ－ｌｏｃａｔｅｄ）ブロックのうち、利用可能なブロック（以下、説明の便宜のために「Ｃｏｌブロック」と呼ぶ）を含む。

インタ予測において現在ブロックに対する予測を行うために利用する周辺ブロックを、説明の便宜のために「候補ブロック」と呼ぶ。

インタ予測では、候補ブロックの情報を利用して現在ブロックに対する予測を行う。スキップモード又はマージモードの場合には、候補ブロックのうち、選択されたブロックに対する動き情報（例えば、動きベクトル）及び参照ピクチャを、現在ブロックに対する動き情報及び参照ピクチャとして利用する。

ＭＶＰを利用する場合には、候補ブロックのうち、選択されたブロックに対する動き情報（例えば、動きベクトル）を現在ブロックに対する動きベクトルとして利用し、現在ブロックに対する参照ピクチャ情報は、符号化装置から復号装置に転送される。候補ブロックから導出されたＭＶＰと、現在ブロックに対する動きベクトルの差ＭＶＤとは、符号化装置から復号装置に転送され、復号装置の予測部は、ＭＶＰ及びＭＶＤに基づいて現在ブロックに対する動き情報を導出することができる。

図３は、現在ブロックに対してインタ予測を行う場合に利用できる候補ブロックの一例を概略的に説明する図である。

符号化装置及び復号装置の予測部は、現在ブロック４００周辺の所定位置のブロックを候補ブロックとして利用できる。例えば、図３の例では、現在ブロックの左下端に配置される二つのブロックＡ₀４１０及びＡ₁４２０、そして現在ブロックの右上端及び左上端の三つのブロックＢ₀４３０、Ｂ₁４４０、Ｂ₂４５０を候補ブロックとして選択できる。また、空間的に隣接するブロックの他に時間的な候補ブロックとして、上述したＣｏｌブロック４６０を候補ブロックとして利用できる。

インタ予測を行うとき、現在ブロックに対する動き情報は、上述したように、周辺ブロックのうち、選択されたブロックの動き情報をそのまま使用するか、周辺ブロックのうち、選択されたブロックの動き情報に基づいて導出される。

一方、インタ予測に使用される参照ピクチャに関して、現在ブロックに対する参照ピクチャは、周辺ブロックの参照ピクチャから導出されるか、又は復号装置から指示することができる。スキップモード又はマージモードの場合、復号装置の予測部は、周辺ブロックの参照ピクチャを現在ブロックの参照ピクチャとして利用できる。ＭＶＰを利用する場合、復号装置の予測部は、現在ブロックに対する参照ピクチャを指示する情報を符号化装置から受信することができる。

現在ピクチャより以前に符号化／復号されたピクチャは、メモリ（例えば、ＤＰＢ）に記憶されて、現在ブロック（現在ピクチャ）の予測に利用することができる。現在ブロックのインタ予測に利用可能なピクチャのリストは、参照ピクチャリストとして維持される。

Ｐスライスは、イントラ予測又は最大一つの動きベクトル及び一つの参照ピクチャを利用するインタ予測を介して復号されるスライスである。Ｂスライスは、イントラ予測又は最大二つの動きベクトル及び二つの参照ピクチャを利用するインタ予測を介して復号されるスライスである。このとき、参照ピクチャは、短期参照ピクチャ（ｓｈｏｒｔ ｔｅｒｍ ｒｅｆｅｒｅｎｃｅ ｐｉｃｔｕｒｅ）と長期参照ピクチャ（ｌｏｎｇ ｔｅｒｍ ｒｅｆｅｒｅｎｃｅ ｐｉｃｔｕｒｅ）とを含む。

参照ピクチャリスト０（以下、説明の便宜のために「Ｌ０」とする）は、Ｐスライス又はＢスライスのインタ予測に利用される参照ピクチャリストである。参照ピクチャリスト１（以下、説明の便宜のために「Ｌ１」とする）は、Ｂスライスのインタ予測のために利用される。したがって、単方向予測を行うＰスライスのブロックに対するインタ予測にはＬ０が利用され、両方向予測を行うＢスライスのブロックに対するインタ予測にはＬ０及びＬ１が利用される。

復号装置は、インタ予測を介してＰスライスとＢスライスに対する復号を行う場合、参照ピクチャリストを作成（ｃｏｎｓｔｒｕｃｔ）する。インタ予測に利用される参照ピクチャは、参照ピクチャリストを介して指定される。参照ピクチャインデクスは、参照ピクチャリスト上の参照ピクチャを指示するインデクスである。

参照ピクチャリストは、符号化装置から転送される参照ピクチャ集合に基づいて作成することができる。

参照ピクチャインデクスを介して参照ピクチャリストを作成する参照ピクチャは、メモリ（例えば、ＤＰＢ）に記憶することができる。

メモリに記憶されるピクチャ（現在ピクチャの以前に符号化／復号されたピクチャ）は、符号化装置及び復号装置によって管理される。符号化装置及び復号装置は、現在ブロックの予測に必要なピクチャを維持し、現在ブロックの予測に利用されないピクチャをメモリから解放（ｒｅｌｅａｓｅ）する。

参照ピクチャを管理する方法として、スライド窓（ｓｌｉｄｉｎｇ ｗｉｎｄｏｗ）方式を利用する場合には、メモリに記憶された後、一定時間が過ぎたとき解放される簡単な方法によって参照ピクチャを管理できるが、いくつかの問題がある。例えば、もうこれ以上要らなくなった参照ピクチャがあるとしても、メモリから直接解放できないため、効率が低下する。また、一定時間後には、メモリから解放されるため、長期参照ピクチャを管理し難くなる。

スライド窓方式の問題を考慮して、符号化装置から参照ピクチャの管理に関する指示を直接通知するメモリ管理命令操作（Ｍｅｍｏｒｙ Ｍａｎａｇｅｍｅｎｔ Ｃｏｍｍａｎｄ Ｏｐｅｒａｔｉｏｎ、ＭＭＣＯ）法を利用してもよい。しかしながら、ＭＭＣＯ法を利用しても通知過程においてピクチャ損失が発生し、損失したピクチャがＭＭＣＯ命令を含んでいた場合、損失したＭＭＣＯ情報を復元できなくなることによって、メモリ（ＤＰＢ）を現在必要なピクチャが管理される正確な状態に維持できない。したがって、インタ予測も不正確に行われるおそれがある。

上述した問題を解決するために、スライスの復号過程に必要な参照ピクチャのリストを各々のスライスヘッダから転送する方法を利用できる。スライスヘッダにおいて参照ピクチャのリストを含む一種の抽象的なコンテナを「ＲｅｆＰｉｃＬｉｓｔ」と呼ぶことができる。又は先に説明したように、復号装置において構成される参照ピクチャリスト０及び参照ピクチャリスト１を区別するために、スライスの復号過程において必要な参照ピクチャのリストを参照ピクチャ集合又は参照ピクチャの集合ということができる。

参照ピクチャ集合又はＲｅｆＰｉｃＬｉｓｔ（以下、説明の便宜及び参照ピクチャリストとの区別のために、「参照ピクチャ集合」とする）は、現在ピクチャ／スライス又は未来（ｆｕｔｕｒｅ）ピクチャ／スライスの参照のために利用される参照ピクチャを含む。例えば、参照ピクチャ集合は、符号化装置から復号装置に転送される情報であって、参照ピクチャ集合に含まれるピクチャは、ＰＯＣによって特定することができる。ＰＯＣは、ピクチャの表示順序を示す。このとき、参照ピクチャ集合に含まれる参照ピクチャのＰＯＣは、現在ピクチャのＰＯＣに対した相対ＰＯＣであってよい。

相対ＰＯＣは、参照ピクチャ集合内の二つのピクチャ間のＰＯＣ差を示す。ＰＯＣ順で、現在ピクチャ以前の参照ピクチャ（現在ピクチャのＰＯＣよりＰＯＣが小さな参照ピクチャ）の相対ＰＯＣは、参照ピクチャ集合内の直前の参照ピクチャとのＰＯＣ差である。ＰＯＣ順で、現在ピクチャ以後の参照ピクチャ（現在ピクチャのＰＯＣよりＰＯＣが大きい参照ピクチャ）の相対ＰＯＣも、参照ピクチャ集合内の直前の参照ピクチャとのＰＯＣ差である。ただし、（１）参照ピクチャ集合における第１番目の参照ピクチャ及び（２）参照ピクチャ集合における以前の参照ピクチャと相対ＰＯＣの符号が異なる参照ピクチャの場合、相対ＰＯＣの大きさは、現在ピクチャとのＰＯＣ差となる。

参照ピクチャ集合内の二つのピクチャ間のＰＯＣ差は、絶対値及び符号（ｓｉｇｎ）で表現することができる。

参照ピクチャ集合は、Ｐスライス及びＢスライスごとに符号化装置から復号装置に通知される。

参照ピクチャリストＬ０、Ｌ１は、符号化装置から受信した参照ピクチャ集合に基づいて作成してもよいし、符号化装置から明示的に転送してもよい。

参照ピクチャリストＬ０を作成する場合は、受信した参照ピクチャ集合のうち、現在ピクチャのＰＯＣよりＰＯＣが小さなピクチャ（ＰＯＣ順で、現在ピクチャ以前のピクチャ又は相対ＰＯＣの符号が負の値を有するピクチャ）と、現在ピクチャのＰＯＣよりＰＯＣが大きなピクチャ（ＰＯＣ順で、現在ピクチャ以後のピクチャ又は相対ＰＯＣの符号が正の値を有するピクチャ）とのうち、現在ピクチャのＰＯＣよりＰＯＣが小さなピクチャから参照ピクチャインデクスを割り当てて参照ピクチャリストが作成される。

例えば、参照ピクチャリストを作成するすべての参照ピクチャインデクスが割り当てられるまで、（ｉ）現在ピクチャ／スライスに対する参照ピクチャ集合のうち、現在ピクチャのＰＯＣよりＰＯＣが小さなピクチャに対して、ＰＯＣ順で、現在ピクチャから近いピクチャに低い参照ピクチャインデクスが付与され、次に（ｉｉ）現在ピクチャ／スライスに対する参照ピクチャ集合のうち、現在ピクチャのＰＯＣよりＰＯＣが大きなピクチャに対して、ＰＯＣ順で、現在ピクチャから近いピクチャに低い参照ピクチャインデクスが付与される。

参照ピクチャリストＬ１を作成する場合は、受信した参照ピクチャ集合のうち、現在ピクチャのＰＯＣよりＰＯＣが小さなピクチャ（ＰＯＣ順で、現在ピクチャ以前のピクチャあるいは相対ＰＯＣの符号が負の値を有するピクチャ）と、現在ピクチャのＰＯＣよりＰＯＣが大きなピクチャ（ＰＯＣ順で、現在ピクチャ以後のピクチャ又は相対ＰＯＣの符号が正の値を有するピクチャ）とのうち、現在ピクチャのＰＯＣよりＰＯＣが大きなピクチャから参照ピクチャインデクスを割り当てて参照ピクチャリストが作成される。

例えば、参照ピクチャリストを作成するすべての参照ピクチャが割り当てられるまで、（ｉ）現在ピクチャ／スライスに対する参照ピクチャ集合のうち、現在ピクチャのＰＯＣよりＰＯＣが大きなピクチャに対して、ＰＯＣ順で、現在ピクチャから近いピクチャに低い参照ピクチャインデクスが付与され、次に（ｉｉ）現在ピクチャ／スライスに対する参照ピクチャ集合のうち、現在ピクチャのＰＯＣよりＰＯＣが小さなピクチャに対して、ＰＯＣ順で、現在ピクチャから近いピクチャに低い参照ピクチャインデクスが付与される。

ここでは、短期参照ピクチャの場合を例に挙げて説明したが、長期参照ピクチャを含む参照ピクチャリストの場合は、前記Ｌ０とＬ１に対して（ｉ）及び（ｉｉ）の過程を経た後、参照ピクチャ集合を介して長期参照ピクチャとして転送されたピクチャを追加できる。

以下、本明細書では、短期参照ピクチャの参照ピクチャ集合を作成し、参照ピクチャリストを作成する方法を説明し、以下、参照ピクチャとは、短期参照ピクチャを意味する。

このとき、通知された参照ピクチャ集合のビット数を減らし、復号器で参照ピクチャリストを作成する過程の複雑度を減少させるために、参照ピクチャ集合（参照ピクチャのリスト）内の参照ピクチャ（参照ピクチャの情報、例えばＰＯＣ値）が整列して転送されるようにすることができる。

参照ピクチャ集合内の参照ピクチャは、（１）参照ピクチャ集合の先頭部分に現在ピクチャのＰＯＣより小さなＰＯＣの参照ピクチャがＰＯＣの降順に整列させ、次に（２）現在ピクチャのＰＯＣより大きなＰＯＣ参照ピクチャがＰＯＣの昇順に整列させられて通知される。

例えば、参照ピクチャ集合内では、現在ピクチャのＰＯＣよりＰＯＣが小さな参照ピクチャ（ピクチャの情報）が配置された後に、現在ピクチャのＰＯＣよりＰＯＣが大きな参照ピクチャ（ピクチャの情報）が配置される。このとき、配置される参照ピクチャの情報は、参照ピクチャのＰＯＣ、参照ピクチャの相対ＰＯＣ又は参照ピクチャの相対ＰＯＣの大きさ及び符号であってよい。

配置される情報が参照ピクチャのＰＯＣである場合、参照ピクチャ集合では、現在ピクチャのＰＯＣよりＰＯＣが小さな参照ピクチャのＰＯＣが現在ピクチャのＰＯＣに近い順に配置された後、現在ピクチャのＰＯＣよりＰＯＣが大きな参照ピクチャのＰＯＣが現在ピクチャのＰＯＣに近い順に配置される。

配置される情報が参照ピクチャの相対ＰＯＣであるとき、現在ピクチャのＰＯＣよりＰＯＣが小さな参照ピクチャに対する相対ＰＯＣがまず配置され、現在ピクチャのＰＯＣよりＰＯＣが大きな参照ピクチャに対する相対ＰＯＣが続いて配置される。例えば、参照ピクチャ集合内で現在ピクチャのＰＯＣよりＰＯＣが小さな参照ピクチャに対する相対ＰＯＣは、参照ピクチャのＰＯＣ順（降順）に配置され、次に現在ピクチャのＰＯＣよりＰＯＣが大きな参照ピクチャに対する相対ＰＯＣが参照ピクチャのＰＯＣ順（昇順）に配置される。ここで、参照ピクチャに対する相対ＰＯＣは、現在ピクチャのＰＯＣと参照ピクチャのＰＯＣとの間の差値である。

参照ピクチャ集合内において相対ＰＯＣは、相対ＰＯＣの大きさ（絶対値）及び相対ＰＯＣの符号で表すことができる。

参照ピクチャの相対ＰＯＣの符号は、ＰＯＣの順序において参照ピクチャが現在ピクチャの以前なのか、以後なのかを表す。したがって、相対ＰＯＣの符号（＋なのか、－なのか）を具体的に指示する情報を転送する代わりに、ＰＯＣ順において現在ピクチャ以前の参照ピクチャに対する相対ＰＯＣの大きさをまず転送し、次に現在ピクチャ以後の参照ピクチャに対する相対ＰＯＣの大きさを転送できる。参照ピクチャ集合を受信する復号装置は、まず受信される相対ＰＯＣの大きさがＰＯＣの順序上現在ピクチャ以前の参照ピクチャに対するものであり、後ほど受信される相対ＰＯＣの大きさがＰＯＣ順で、現在ピクチャ以後の参照ピクチャに対するものであると判断できる。このとき、ＰＯＣ順において現在ピクチャ以前の参照ピクチャの個数と、現在ピクチャ以後の参照ピクチャの個数とを表す情報が共に転送することができる。

相対ＰＯＣの大きさを転送する場合にも、参照ピクチャ集合内で現在ピクチャのＰＯＣよりＰＯＣが小さな参照ピクチャに対する相対ＰＯＣの大きさは、参照ピクチャのＰＯＣの順（降順）に配置され、次に現在ピクチャのＰＯＣよりＰＯＣが大きな参照ピクチャに対する相対ＰＯＣの大きさが参照ピクチャのＰＯＣの順（昇順）に配置される。

表１は、符号化装置において相対ＰＯＣの大きさ及び符号を決定する方法の一例を表したものである。

符号化装置は、表１の方法を利用して、参照ピクチャ集合を介して通知する参照ピクチャの相対ＰＯＣの大きさ及び符号を決定できる。

ｓｉｇｎ＿ｒｅｆ＿ｐｉｃ［ｉ］は、参照ピクチャ集合内の第ｉ番目の参照ピクチャに対する相対ＰＯＣの符号を特定する。第ｉ番目の参照ピクチャのＰＯＣ（ｒｅｆ＿ｐｉｃ［ｉ］）が現在ピクチャのＰＯＣ（ｃｕｒｒｅｎｔＰＯＣ）より大きな場合、第ｉ番目の参照ピクチャに対する相対ＰＯＣの符号ｓｉｇｎ＿ｒｅｆ＿ｐｉｃ［ｉ］の値は、‘＋’を指示する。第ｉ番目の参照ピクチャのＰＯＣ（ｒｅｆ＿ｐｉｃ［ｉ］）が現在ピクチャのＰＯＣ（ｃｕｒｒｅｎｔＰＯＣ）より大きくない場合、第ｉ番目の参照ピクチャに対する相対ＰＯＣの符号ｓｉｇｎ＿ｒｅｆ＿ｐｉｃ［ｉ］の値は、‘－’を指示する。

ａｂｓ＿ｒｅｆ＿ｐｉｃ［ｉ］は、参照ピクチャ集合内の第ｉ番目の参照ピクチャに対する相対ＰＯＣの大きさを特定する。第ｉ番目の参照ピクチャの相対ＰＯＣ符号が第ｉ－１番目の参照ピクチャの相対ＰＯＣの符号と同一であるとき、第ｉ番目の参照ピクチャのＰＯＣと基準値（ｒｅｆＶａｌｕｅ）との間の差と第ｉ－１番目の参照ピクチャのＰＯＣと基準値（ｒｅｆＶａｌｕｅ）との間の差の差値が第ｉ番目の参照ピクチャの相対ＰＯＣの大きさとなる。すなわち、第ｉ番目の参照ピクチャの相対ＰＯＣ符号が第ｉ－１番目の参照ピクチャの相対ＰＯＣの符号と同一であるとき、第ｉ番目の参照ピクチャの相対ＰＯＣの大きさは、参照ピクチャ集合内で隣接する参照ピクチャ間のＰＯＣ差（第ｉ番目の参照ピクチャのＰＯＣと第ｉ－１番目の参照ピクチャのＰＯＣとの間の差）となる。

基準値（ｒｅｆＶａｌｕｅ）は、符号化装置から転送されるか、又は予め設定された基準ＰＯＣ値であって、参照ピクチャ集合内の第１番目の相対ＰＯＣを算出する基準ＰＯＣ値になる。例えば基準値（ｒｅｆＶａｌｕｅ）は、現在ピクチャのＰＯＣ値であってよい。

第ｉ番目の参照ピクチャの相対ＰＯＣ符号が第ｉ－１番目の参照ピクチャの相対ＰＯＣの符号と同一でなくてもよい。この場合は、参照ピクチャ集合において第ｉ番目の参照ピクチャが第１番目のピクチャの場合であるか、又は参照ピクチャ集合において第ｉ－１番目の参照ピクチャは、ＰＯＣ順で、現在ピクチャ以前のピクチャであり、第ｉ番目の参照ピクチャは、ＰＯＣ順で、現在ピクチャ以後のピクチャの場合となる。したがって、第ｉ番目の参照ピクチャの相対ＰＯＣ符号が第ｉ－１番目の参照ピクチャの相対ＰＯＣの符号と同一でない場合、第ｉ番目の参照ピクチャの相対ＰＯＣの大きさは、第ｉ番目の参照ピクチャのＰＯＣと基準値（ｒｅｆＶａｌｕｅ）との間の差となる。次に、第ｉ＋１番目の参照ピクチャの場合は、再度第ｉ番目の参照ピクチャと相対ＰＯＣの符号とが同一になるため、第ｉ＋１番目の参照ピクチャの相対ＰＯＣの大きさは、再度第ｉ＋１番目の参照ピクチャのＰＯＣと第ｉ番目の参照ピクチャのＰＯＣとの間の差となる。

符号化装置は、参照ピクチャ集合として、上述したように導出した参照ピクチャの相対ＰＯＣの大きさ及び符号を転送できる。また、符号化装置は、参照ピクチャの相対ＰＯＣの大きさを転送する際、符号を転送するＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対する相対ＰＯＣの大きさをまず転送し、現在ピクチャ以後の参照ピクチャに対する相対ＰＯＣの大きさを続いて転送することもできる。この場合に符号化装置は、相対ＰＯＣの符号が‘－’である参照ピクチャ（ＰＯＣ順で、現在ピクチャ以前のピクチャ）の個数及び相対ＰＯＣの符号が‘＋’である参照ピクチャ（ＰＯＣ順で、現在ピクチャ以後のピクチャ）の個数を指示する情報を転送できる。

表２は、符号化装置において相対ＰＯＣの大きさ及び符号を決定する方法の他の例を表したものである。

表２では、基準値（ｒｅｆＶａｌｕｅ）が現在ピクチャのＰＯＣ値である場合を例として説明する。

表１と同様に、表２において第ｉ番目の参照ピクチャのＰＯＣ（ｒｅｆ＿ｐｉｃ［ｉ］）が現在ピクチャのＰＯＣ（ｃｕｒｒｅｎｔＰＯＣ）より大きな場合、第ｉ番目の参照ピクチャに対する相対ＰＯＣの符号ｓｉｇｎ＿ｒｅｆ＿ｐｉｃ［ｉ］の値は、‘＋’を指示する。第ｉ番目の参照ピクチャのＰＯＣ（ｒｅｆ＿ｐｉｃ［ｉ］）が現在ピクチャのＰＯＣ（ｃｕｒｒｅｎｔＰＯＣ）より大きくない場合、第ｉ番目の参照ピクチャに対する相対ＰＯＣの符号ｓｉｇｎ＿ｒｅｆ＿ｐｉｃ［ｉ］の値は、‘－’を指示する。

第ｉ番目の参照ピクチャの相対ＰＯＣ符号が第ｉ－１番目の参照ピクチャの相対ＰＯＣの符号と同一であるとき、第ｉ番目の参照ピクチャのＰＯＣと現在ピクチャのＰＯＣとの間の差と、第ｉ－１番目の参照ピクチャのＰＯＣと現在ピクチャのＰＯＣとの間の差との間の差が第１番目の参照ピクチャの相対ＰＯＣの大きさとなる。すなわち、第ｉ番目の参照ピクチャの相対ＰＯＣ符号が第ｉ－１番目の参照ピクチャの相対ＰＯＣの符号と同一であるとき、第ｉ番目の参照ピクチャの相対ＰＯＣの大きさは、参照ピクチャ集合内で隣接する参照ピクチャ間のＰＯＣ差（第ｉ番目の参照ピクチャのＰＯＣと第ｉ－１番目の参照ピクチャのＰＯＣとの間の差）となる。

第ｉ番目の参照ピクチャの相対ＰＯＣ符号が第ｉ－１番目の参照ピクチャの相対ＰＯＣの符号と同一でなくてもよい。この場合は、参照ピクチャ集合において第ｉ番目の参照ピクチャが第１番目のピクチャの場合であるか、又は参照ピクチャ集合において第ｉ－１番目の参照ピクチャは、ＰＯＣ順で、現在ピクチャ以前のピクチャであり、第ｉ番目の参照ピクチャは、ＰＯＣ順で、現在ピクチャ以後のピクチャの場合となる。したがって、第ｉ番目の参照ピクチャの相対ＰＯＣ符号が第ｉ－１番目の参照ピクチャの相対ＰＯＣの符号と同一でない場合、第ｉ番目の参照ピクチャの相対ＰＯＣの大きさは、第ｉ番目の参照ピクチャのＰＯＣと現在ピクチャのＰＯＣとの間の差となる。次に、第ｉ＋１番目の参照ピクチャの場合は、再度第ｉ番目の参照ピクチャの相対ＰＯＣの符号と同一になるため、第ｉ＋１番目の参照ピクチャの相対ＰＯＣの大きさは、再度第ｉ＋１番目の参照ピクチャのＰＯＣと第ｉ番目の参照ピクチャのＰＯＣとの間の差となる。

符号化装置は、参照ピクチャ集合として、上述したように導出した参照ピクチャの相対ＰＯＣの大きさ及び符号を転送できる。また、符号化装置は、参照ピクチャの相対ＰＯＣの大きさを転送する際、符号を転送するＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対する相対ＰＯＣの大きさをまず転送し、現在ピクチャ以後の参照ピクチャに対する相対ＰＯＣの大きさを続いて転送することもできる。この場合、符号化装置は、相対ＰＯＣの符号が‘－’の参照ピクチャ（ＰＯＣ順で、現在ピクチャ以前のピクチャ）の個数及び相対ＰＯＣの符号が‘＋’の参照ピクチャ（ＰＯＣ順で、現在ピクチャ以後のピクチャ）の個数を指示する情報を転送できる。

復号装置は、符号化装置から参照ピクチャ集合に関する情報を受信し、これに基づいて参照ピクチャ集合を構成又は復元できる。

表３は、参照ピクチャ集合を受信する復号装置において参照ピクチャの情報（ＰＯＣ）を復元（ｒｅｃｏｖｅｒ）する方法の一例を表したものである。

復号装置は、符号化装置から受信した参照ピクチャ情報（相対ＰＯＣの大きさ又は相対ＰＯＣの大きさ及び符号）に基づいて、表３の方法によって現在ブロック（ピクチャ）の予測に利用できるＰＯＣを復元できる。

参照ピクチャ集合内の第ｉ番目の参照ピクチャのＰＯＣ（ｒｅｆ＿ｐｉｃ［ｉ］）は、第ｉ番目の参照ピクチャの相対ＰＯＣの大きさ（ａｂｓ＿ｒｅｆ＿ｐｉｃ［ｉ］）及び符号（ｓｉｇｎ＿ｒｅｆ＿ｐｉｃ［ｉ］）に基づいて復元できる。

復号装置は、表３のように、相対ＰＯＣの符号を明示的に符号化装置から受信して、参照ピクチャのＰＯＣを復元できる。

参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と第ｉ－１番目の参照ピクチャの符号とが同一であり、第ｉ番目の参照ピクチャの符号が‘－’であるとき、第ｉ番目の参照ピクチャのＰＯＣは、基準値（ｒｅｆＶａｌｕｅ）から第１番目の参照ピクチャ（第０番目の参照ピクチャ）から第ｉ番目の参照ピクチャまでの相対ＰＯＣ和を減算した値になる。参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と第ｉ－１番目の参照ピクチャの符号とが同一であり、第ｉ番目の参照ピクチャの符号が‘＋’であるとき、第ｉ番目の参照ピクチャのＰＯＣは、基準値（ｒｅｆＶａｌｕｅ）に第１番目の参照ピクチャ（第０番目の参照ピクチャ）から第ｉ番目の参照ピクチャまでの相対ＰＯＣを加算した値になる。

このとき、基準値（ｒｅｆＶａｌｕｅ）は、符号化装置から転送されるか、又は予め設定された基準ＰＯＣ値であって、参照ピクチャ集合内の第１番目の相対ＰＯＣを算出する基準ＰＯＣ値になる。例えば基準値（ｒｅｆＶａｌｕｅ）は、現在ピクチャのＰＯＣ値であってよい。

参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と、第ｉ－１番目の参照ピクチャの符号とが異なるとき、第ｉ番目の参照ピクチャ集合において第ｉ番目の参照ピクチャが第１番目のピクチャの場合であるか、又は参照ピクチャ集合において第ｉ－１番目の参照ピクチャは、ＰＯＣ順で、現在ピクチャ以前のピクチャであり、第ｉ番目の参照ピクチャは、ＰＯＣ順で、現在ピクチャ以後のピクチャとなる。

参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と、第ｉ－１番目の参照ピクチャの符号とが異なり、第ｉ番目の参照ピクチャの符号が‘－’であるとき、第ｉ番目の参照ピクチャのＰＯＣは、基準値（ｒｅｆＶａｌｕｅ）から第ｉ番目の参照ピクチャの相対ＰＯＣを減算した値になる。参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と、第ｉ－１番目の参照ピクチャの符号とが異なり、第ｉ番目の参照ピクチャの符号が‘＋’であるとき、第ｉ番目の参照ピクチャのＰＯＣは、基準値（ｒｅｆＶａｌｕｅ）に第ｉ番目の参照ピクチャの相対ＰＯＣを加算した値になる。

また、表２の例とは異なり、明示的に参照ピクチャの相対ＰＯＣに対した符号を指示する情報は転送されなくてもよい。この場合、復号装置は、参照ピクチャ集合内で先頭部分に配置される相対ＰＯＣの符号は、‘－’（ｍｉｎｕｓ）と判断し、参照ピクチャ集合内で後方に配置される相対ＰＯＣの符号は、‘＋’（ｐｌｕｓ）と判断できる。このとき、符号化装置から符号が‘－’の相対ＰＯＣの個数及び符号の個数が‘＋’の相対ＰＯＣの個数を指示する情報を転送することもできる。復号装置は、参照ピクチャ集合の先頭部分から、符号化装置が指示した符号が‘－’の相対ＰＯＣの個数分だけの相対ＰＯＣは符号が‘－’であると判断し、残りの相対ＰＯＣは符号が‘＋’であると判断して、上述したように、第ｉ番目の参照信号のＰＯＣ（ｒｅｆ＿ｐｉｃ［ｉ］）を復元できる。

言い換えれば、参照ピクチャ集合内の参照ピクチャのうち、第１番目の参照ピクチャに対する相対ＰＯＣは、基準値（ｒｅｆＶａｌｕｅ）とのＰＯＣ差である。参照ピクチャ集合内の参照ピクチャのうち、第１番目の参照ピクチャを除いた現在ピクチャ以前のピクチャに対する相対ＰＯＣは、直前の参照ピクチャとのＰＯＣ差である。参照ピクチャ集合内の参照ピクチャのうち、現在ピクチャ以後の第１番目のピクチャに対する相対ＰＯＣは、基準値とのＰＯＣ差である。参照ピクチャ集合内の残りの参照ピクチャ（参照ピクチャ集合内で現在ピクチャ以後の第２番目の参照ピクチャから最後の参照ピクチャまで）に対する相対ＰＯＣは、直前の参照ピクチャとのＰＯＣ差である。ここで、現在ピクチャの以前及び以後は、ＰＯＣ順をもって判断する。また、直前の参照ピクチャとは、参照ピクチャ集合内の整列順において直前のピクチャを意味する。

表４は、参照ピクチャ集合を受信する復号装置において、参照ピクチャの情報（ＰＯＣ）を復元する方法の他の例を表したものである。

表４の方法は、本発明の特徴を明確に説明するために、参照ピクチャ集合に含まれる参照ピクチャの個数が２であり、表３において第１番目の相対ＰＯＣ値を算出するための基準値（ｒｅｆＶａｌｕｅ）が現在ピクチャのＰＯＣである場合を例として説明する。

復号装置は、相対ＰＯＣの符号を明示的に符号化装置から受信して、参照ピクチャのＰＯＣを復元できる。

参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と第ｉ－１番目の参照ピクチャの符号とが同一であり、第ｉ番目の参照ピクチャの符号が‘－’であるとき、第ｉ番目の参照ピクチャのＰＯＣは、現在ピクチャのＰＯＣから第ｉ番目の参照ピクチャの相対ＰＯＣと、第ｉ－１番目の参照ピクチャの相対ＰＯＣとを減算した値になる。参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と、第ｉ－１番目の参照ピクチャの符号とが同一であり、第ｉ番目の参照ピクチャの符号が‘＋’であるとき、第ｉ番目の参照ピクチャのＰＯＣは、現在ピクチャのＰＯＣに第ｉ番目の参照ピクチャの相対ＰＯＣと、第ｉ－１番目の参照ピクチャの相対ＰＯＣとを加算した値になる。

参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と、第ｉ－１番目の参照ピクチャの符号とが異なるとき、第ｉ番目の参照ピクチャ集合において第ｉ番目の参照ピクチャが第１番目のピクチャの場合であるか、又は参照ピクチャ集合において第ｉ－１番目の参照ピクチャは、ＰＯＣ順で、現在ピクチャ以前のピクチャであり、第ｉ番目の参照ピクチャは、ＰＯＣ順で、現在ピクチャ以後のピクチャとなる。この場合、第ｉ番目の参照ピクチャの相対ＰＯＣは、表２から分かるように、現在ピクチャのＰＯＣに基づいて導出される。

したがって、参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と、第ｉ－１番目の参照ピクチャの符号とが異なり、第ｉ番目の参照ピクチャの符号が‘－’であるとき、第ｉ番目の参照ピクチャのＰＯＣは、現在ピクチャのＰＯＣから第ｉ番目の参照ピクチャの相対ＰＯＣを減算した値になる。参照ピクチャ集合内の第ｉ番目の参照ピクチャの符号と、第ｉ－１番目の参照ピクチャの符号とが異なり、第ｉ番目の参照ピクチャの符号が‘＋’であるとき、第ｉ番目の参照ピクチャのＰＯＣは、現在ピクチャのＰＯＣに第ｉ番目の参照ピクチャの相対ＰＯＣを加算した値になる。

また、表３において説明したように、明示的に参照ピクチャの相対ＰＯＣに対した符号を指示する情報は転送されなくてもよい。この場合、復号装置は、参照ピクチャ集合内で先頭部分に配置される相対ＰＯＣの符号は、‘－’（ｍｉｎｕｓ）と判断し、参照ピクチャ集合内で後方に配置される相対ＰＯＣの符号は、‘＋’（ｐｌｕｓ）と判断できる。このとき、符号化装置から符号が‘－’である相対ＰＯＣの個数と、符号の個数が‘＋’である相対ＰＯＣの個数とを指示する情報を転送することもできる。復号装置は、参照ピクチャ集合の先頭部分から、符号化装置が指示した符号が‘－’である相対ＰＯＣの個数分だけの相対ＰＯＣは符号が‘－’と判断し、残りの相対ＰＯＣは、符号が‘＋’と判断して、上述したように、第ｉ番目の参照信号のＰＯＣ（ｒｅｆ＿ｐｉｃ［ｉ］）を復元できる。

言い換えれば、参照ピクチャ集合内の参照ピクチャのうち、第１番目の参照ピクチャに対する相対ＰＯＣは、現在ピクチャとのＰＯＣ差である。参照ピクチャ集合内の参照ピクチャのうち、第１番目の参照ピクチャを除いた現在ピクチャ以前のピクチャに対する相対ＰＯＣは、直前の参照ピクチャとのＰＯＣ差である。参照ピクチャ集合内の参照ピクチャのうち、現在ピクチャ以後、第１番目のピクチャに対する相対ＰＯＣは、現在ピクチャとのＰＯＣ差である。参照ピクチャ集合内の残りの参照ピクチャ（参照ピクチャ集合内において現在ピクチャ以後の第２番目の参照ピクチャから最後の参照ピクチャまで）に対した相対ＰＯＣは、直前の参照ピクチャとのＰＯＣ差である。ここで、現在ピクチャの以前及び以後は、ＰＯＣ順で判断する。ここで、直前の参照ピクチャとは、参照ピクチャ集合内の整列順において直前のピクチャを意味する。

以下、基準値（ｒｅｆＶａｌｕｅ）が現在ピクチャのＰＯＣである場合について、本発明が採用される例を具体的に説明する。

図４は、符号化装置から復号装置に通知される参照ピクチャ集合の一例を概略的に説明する図である。図４の例は、単方向予測を行う９個のＰスライス（Ｐピクチャ）Ｐ０～Ｐ９が相互参照する場合を示す。

表５は、図４の例に対して通知される参照ピクチャ集合が参照ピクチャのＰＯＣから構成される例を表したものである。

図４及び表５に示すように、現在ピクチャに対する参照ピクチャ集合は、現在ピクチャが参照できる参照ピクチャのＰＯＣを含む。参照ピクチャ集合において参照ピクチャは、ＰＯＣ順で、現在ピクチャに近い参照ピクチャに低いインデクスが付与される。

例えば、図４及び表５の例において現在ピクチャがＰ６（ＰＯＣ＝２６）の場合、現在ピクチャが参照できる参照ピクチャは、Ｐ５、Ｐ４、Ｐ０である。したがって、ＰＯＣが２６である現在ピクチャＰ６に対した参照ピクチャ集合は、Ｐ５、Ｐ４、Ｐ０のＰＯＣから構成され、ＰＯＣ順で、現在ピクチャに近い参照ピクチャに低いインデクスが割り当てられる。

図４及び表５の例では、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャの場合には、参照ピクチャ集合内で降順に整列させられるが、参照ピクチャ集合は、参照ピクチャのＰＯＣをそのまま通知する。

これとは異なり、先に説明したように、参照ピクチャ集合が参照ピクチャの相対ＰＯＣを通知することができる。

表６は、図４の場合に通知される参照ピクチャ集合の一例を表したものであって、参照ピクチャ集合が参照ピクチャの相対ＰＯＣから構成される例を説明するためのものである。

表６では、図４に対して現在ピクチャの参照ピクチャ集合を参照ピクチャのＰＯＣ、参照ピクチャの相対ＰＯＣの大きさ、参照ピクチャの相対ＰＯＣ符号で表している。

表５では、参照ピクチャ集合において参照ピクチャのＰＯＣをそのまま転送する場合を説明したが、表６の例では、参照ピクチャ集合において参照ピクチャの相対ＰＯＣを転送する場合を説明する。

ＰＯＣ順で、現在ピクチャ以前の参照ピクチャ（現在ピクチャのＰＯＣよりＰＯＣが小さな参照ピクチャ）の相対ＰＯＣは、参照ピクチャ集合内で直前の参照ピクチャとのＰＯＣ差である。また、参照ピクチャ集合に含まれて転送される相対ＰＯＣ符号は、該当参照ピクチャがＰＯＣ順で、現在ピクチャ以前のピクチャなのか、以後のピクチャなのかを表す。

例えば、図４及び表６の例において、現在ピクチャがＰ５の場合を考慮すれば、現在ピクチャが参照できるピクチャは、Ｐ４、Ｐ３、Ｐ０で、ＰＯＣがそれぞれ２４、２３、２０である。

Ｐ５に対した参照ピクチャ集合が相対ＰＯＣを転送する場合、参照ピクチャ集合は、Ｐ５に対した参照ピクチャの相対ＰＯＣの大きさ及び符号を所定の順に整列して転送する。上述したように、Ｐスライス間の参照関係を表す図４の例において、参照ピクチャは、ＰＯＣ順で、現在ピクチャ以前のピクチャであり、参照ピクチャ集合において参照ピクチャは、降順に整列させられる。

したがって、Ｐ５に対した参照ピクチャ集合において相対ＰＯＣの大きさは、Ｐ４、Ｐ３、Ｐ０の順に整列させられる。表６に表したように、Ｐ５に対した参照ピクチャ集合に転送されるＰ４の相対ＰＯＣの大きさは１であり、符号は‘－’であり、Ｐ３の相対ＰＯＣの大きさは１であり、符号は‘－’であり、Ｐ０の相対ＰＯＣの大きさは３であり、符号は‘－’である。

このとき、相対ＰＯＣの符号なしで、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャ（参照ピクチャの相対ＰＯＣの大きさ）が参照ピクチャ集合の前の部分に整列させ、現在ピクチャ以後の参照ピクチャ（参照ピクチャの相対ＰＯＣの大きさ）が参照ピクチャ集合の後の部分に整列させた参照ピクチャ集合を転送することもできる。この場合、ＰＯＣ順で、現在ピクチャ以前の参照ピクチャ（相対ＰＯＣの符号が‘－’の参照ピクチャ）の個数と、ＰＯＣ順で、現在ピクチャ以後の参照ピクチャ（相対ＰＯＣの符号が‘＋’の参照ピクチャ）の個数とを指示する情報を共に転送することもできる。

図５は、単方向予測を行うＰピクチャ間の参照関係を表す図４とは異なり、両方向予測を行うＢピクチャ間の参照関係の一例を示す図である。図５では、９個のＢピクチャＢ０～Ｂ８の参照関係を概略的に示したものである。

表７は、図５の場合に通知される参照ピクチャ集合の一例を表したものであって、参照ピクチャ集合が参照ピクチャの相対ＰＯＣから構成される例を説明するためのものである。

表７及び図５の例においても、参照ピクチャ集合は、参照ピクチャのＰＯＣをそのまま転送する代わりに、参照ピクチャの相対ＰＯＣを転送できる。

ＰＯＣ順で、現在ピクチャ以前の参照ピクチャ（現在ピクチャのＰＯＣよりＰＯＣが小さな参照ピクチャ）の相対ＰＯＣは、参照ピクチャ集合内で直前の参照ピクチャとのＰＯＣ差である。ＰＯＣ順で、現在ピクチャ以後の参照ピクチャ（現在ピクチャのＰＯＣよりＰＯＣが大きな参照ピクチャ）の相対ＰＯＣも、参照ピクチャ集合内で直前の参照ピクチャとのＰＯＣ差である。ただし、（１）参照ピクチャ集合において第１番目の参照ピクチャ及び（２）参照ピクチャ集合において以前の参照ピクチャと相対ＰＯＣの符号が異なる参照ピクチャの場合、相対ＰＯＣの大きさは、現在ピクチャとのＰＯＣ差となる。言い替えれば、参照ピクチャ集合においてＰＯＣ順で、現在ピクチャ以前の参照ピクチャのうち、現在ピクチャに最も近い参照ピクチャと、現在ピクチャ以後の参照ピクチャとのうち、現在ピクチャに最も近い参照ピクチャの相対ＰＯＣは、現在ピクチャとのＰＯＣ差となる。

表７を参照して、現在ピクチャがＢ５の場合を例に挙げて説明すれば、参照ピクチャ集合は、Ｂ４、Ｂ２、Ｂ６、Ｂ８から構成される。参照ピクチャ集合を相対ＰＯＣから構成する場合、参照ピクチャ集合において最も低いインデクスが割り当てられる相対ＰＯＣの大きさは、Ｂ４に対したものであり、現在ピクチャのＰＯＣとＢ４のＰＯＣとの間の差値である１であり、符号は、‘－’である。次に、第２番目のインデクスが割り当てられる相対ＰＯＣの大きさは、Ｂ２に対したものであり、Ｂ４のＰＯＣとＢ２のＰＯＣとの間の差値である２であり、符号は、‘－‘である。第３番目のインデクスが割り当てられる相対ＰＯＣの大きさは、Ｂ６に対したものである。Ｂ６に対した相対ＰＯＣは、以前の参照ピクチャであるＢ２に対した相対ＰＯＣと符号が異なるため、Ｂ６に対した相対ＰＯＣの大きさは、現在ピクチャとのＰＯＣ差である１であり、符号は、‘＋’である。最後のインデクスが割り当てられる相対ＰＯＣの大きさは、Ｂ８に対したもので、Ｂ６のＰＯＣとＢ８との差値である２であり、符号は、‘＋’である。

上述したように、参照ピクチャ集合は、現在ピクチャに対する参照ピクチャの相対ＰＯＣの大きさ及び符号をすべて転送する代わりに、現在ピクチャに対する参照ピクチャの相対ＰＯＣの大きさだけを転送する際、‘－’符号を有する相対ＰＯＣの大きさを‘＋’符号を有する相対ＰＯＣの大きさより先に転送することによって、符号を明示的に転送しなくても該当相対ＰＯＣの符号が導出されるようにすることができる。この場合、‘－’符号を有する相対ＰＯＣの個数と‘＋’符号を有する相対ＰＯＣの個数とを指示する情報が共に転送することができる。

例えば、表７において現在ピクチャがＢ５の場合を再度考慮すると、符号化装置は、Ｂ５に対した参照ピクチャ集合を( 1 2 1 2 )のように参照ピクチャの相対的ＰＣ大きさだけから構成して転送できる。表７のように、‘－’符号を有する相対ＰＯＣの大きさが参照ピクチャ集合の前部分に配置される。整列順は、‘－’符号を有する相対ＰＯＣ（ＰＯＣ順で、現在ピクチャ以前の参照ピクチャに対する相対ＰＯＣ）の場合、先に説明したように、降順であり、‘＋’符号を有する相対ＰＯＣ（ＰＯＣ順で、現在ピクチャ以後の参照ピクチャに対する相対ＰＯＣ）等の場合もまた、先に説明したように昇順を維持する。このとき、参照ピクチャ集合と共に‘－’を有する相対ＰＯＣの個数と、‘＋’符号を有する相対ＰＯＣの個数とを指示する情報を転送することができる。例えば、Ｂ５に対した参照ピクチャ集合において‘－’符号を有する参照ピクチャ（相対ＰＯＣ）の個数が２で、‘＋’符号を有する参照ピクチャ（相対ＰＯＣ）個数が２という指示を受信すると、復号装置は、参照ピクチャ集合のうち、前の２個の相対ＰＯＣに対した符号が‘－’であり、後の２個の相対ＰＯＣに対した符号が‘＋’であるため、参照ピクチャ集合のうち、前の２個の相対ＰＯＣの大きさは、現在ピクチャよりＰＯＣが小さな参照ピクチャに対する相対ＰＯＣの大きさであり、参照ピクチャ集合のうち、後の２個の相対ＰＯＣの大きさは、現在ピクチャよりＰＯＣが大きい参照ピクチャに対する相対ＰＯＣの大きさと判断できる。

図６は、Ｂピクチャ及びＰピクチャ間の参照関係の一例を概略的に示した図である。

図６では、単方向予測を行う７個のＰピクチャＰ０～Ｐ６と両方向予測を行う２個のＢピクチャＢ０、Ｂ１との間の参照関係を示している。

表８は、図６の場合に通知される参照ピクチャ集合の一例を表したものであって、参照ピクチャ集合が参照ピクチャの相対ＰＯＣから構成される例を説明するためのものである。

表８と図６の例は、ＰピクチャとＢピクチャとが混在する場合に対したものであるが、相対ＰＯＣの大きさと符号を導出する方法、参照ピクチャ集合内で相対ＰＯＣの整列方法などは、上述したとおりである。

例えば、現在ピクチャがＢ１の場合、Ｂ１に対した参照ピクチャ集合は、Ｐ３、Ｐ０、Ｐ６の相対ＰＯＣから構成することができる。参照ピクチャ集合は、Ｐ３、Ｐ０、Ｐ６に対する相対ＰＯＣの大きさ（２ ４ ２）と各々の符号から構成されて、復号装置に転送することができる。

この場合にも、相対ＰＯＣの符号を指示する情報を転送せずに、整列順に基づいて‘－’符号を有する相対ＰＯＣの個数と、‘＋’符号を有する相対ＰＯＣの個数とを指示する情報を相対ＰＯＣの大きさを含む参照ピクチャ集合と共に転送することもできる。例えば、現在ピクチャがＢ１の場合、相対ＰＯＣの大きさを含む参照ピクチャ集合（２ ４ ２）と‘－’符号を有する相対ＰＯＣの個数が２であり、‘＋’符号を有する相対ＰＯＣの個数が１であることを指示する情報が転送することができる。

図７は、本発明によって符号化装置が行う符号化方法を概略的に説明するフローチャートである。図７の符号化方法を行う符号化装置は、図１において説明した符号化装置に対応する。

図７に示すように、符号化装置は、現在ブロックに対する予測を行う（Ｓ７１０）。符号化装置は、現在ブロックに対してインタ予測又はイントラ予測を行うことができる。インタ予測を行う場合には、上述したように構成される参照ピクチャリストを利用して現在ブロックに対する参照ピクチャを選択／指定できる。

符号化装置は、現在ブロックに対する予測結果を変換／量子化する（Ｓ７２０）。符号化装置は、予測結果と原ブロックとの差に該当する残差ブロックを変換／量子化できる。また、イントラ予測が採用された場合には、採用されたイントラ予測モードに関する情報を変換／量子化することができ、インタ予測が採用された場合には、動き情報（動きベクトル／参照ピクチャに関する情報）を変換／量子化することができる。

符号化装置は、変換／量子化された情報をエントロピ符号化する（Ｓ７３０）。エントロピ符号化の方法としてＣＡＢＡＣを利用することができる。

符号化装置は、エントロピ符号化された情報を通知する（Ｓ７４０）。このとき、通知される情報は、現在ピクチャ（現在ブロック）に対した参照ピクチャリストを作成するための参照ピクチャ集合を含む。参照ピクチャ集合は、スライス別に構成することができ、スライスにヘッダに含まれて転送することができる。

参照ピクチャ集合は、現在ブロックに対する参照ピクチャのＰＯＣから構成することができる。また、参照ピクチャ集合は、参照ピクチャの相対ＰＯＣから構成して転送オーバヘッドを減らすこともできる。

参照ピクチャ集合が参照ピクチャの相対ＰＯＣから構成される場合には、参照ピクチャ集合を介して現在ピクチャの参照ピクチャとして利用することができるピクチャに対する相対ＰＯＣの大きさ及び符号を転送してもよいし、相対ＰＯＣの大きさ及び‘－’符号を有する相対ＰＯＣ及び‘＋’符号を有する相対ＰＯＣの個数を転送してもよい。相対ＰＯＣが転送される場合、‘－’符号を有する相対ＰＯＣがまず転送され、‘＋’符号を有する相対ＰＯＣは、その次に転送される。‘－’符号を有する相対ＰＯＣは、参照ピクチャのＰＯＣに応じて降順に整列させ、‘＋’符号を有する相対ＰＯＣは、参照ピクチャのＰＯＣに応じて昇順に整列させることができる。

図７では、参照ピクチャ集合に関する内容を考慮して、発明が容易に理解できるように符号化装置の動作を概略的に説明したが、これは、説明の便宜のためのものであって、本発明において符号化装置の動作は、図１において説明した諸動作を含む。

図８は、本発明によって復号装置が行う復号方法を概略的に説明するフローチャートである。

図８に示すように、復号装置は、符号化装置からビットストリームを受信し、エントロピ復号を行う（Ｓ８１０）。符号化装置から受信したビットストリームは、参照ピクチャ集合を含む。参照ピクチャ集合は、スライドヘッダに含めて受信することができる。

参照ピクチャ集合は、現在ブロックに対する参照ピクチャのＰＯＣから構成してもよく、参照ピクチャの相対ＰＯＣから構成してもよい。

復号装置は、参照ピクチャ集合を介して現在ピクチャの参照ピクチャとして利用できるピクチャを指示する情報を受信することができる。例えば、参照ピクチャ集合を介して現在ピクチャの参照ピクチャとして利用できるピクチャのＰＯＣを受信することができる。参照ピクチャ集合が（１）参照ピクチャに対する相対ＰＯＣの大きさ及び符号又は（２）参照ピクチャに対する相対ＰＯＣの大きさと、‘－’及び‘＋’符号を有する相対ＰＯＣの個数を含む場合には、受信した情報に基づいて表４の方法などを利用して該当参照ピクチャのＰＯＣを導出できる。

参照ピクチャ集合を介して相対ＰＯＣを受信する場合、‘－’符号を有する相対ＰＯＣがまず受信され、‘＋’符号を有する相対ＰＯＣは、その次に受信される。‘－’符号を有する相対ＰＯＣは、参照ピクチャのＰＯＣに応じて降順に整列させ、‘＋’符号を有する相対ＰＯＣは、参照ピクチャのＰＯＣに応じて昇順に整列させることができる。

復号装置は、エントロピ復号した情報に基づいて現在ブロックに対する予測を行う（Ｓ９２０）。現在ブロックに対する予測方法は、符号化装置から転送することができる。現在ブロックに対する予測方法がインタ予測の場合、復号装置は、受信した参照ピクチャ集合に基づいて構成した参照ピクチャリストを利用して予測を行うことができる。

参照ピクチャ集合から参照ピクチャリストを作成する方法は、上述したとおりである。構成された参照ピクチャリストは、復号装置のメモリに記憶することができる。

復号装置は、映像を復元する（Ｓ９３０）。現在ブロックに対する予測に基づいて現在ブロックを復元し、復元されたブロックを介して映像を復元できる。スキップモードが採用される場合、残差が転送されないため、予測ブロックを復元ブロックとすることができる。マージモードが適用される場合又はＭＶＰを利用する場合には、予測ブロックと残差ブロックとを合せて現在ブロックを復元できる。

本明細書では、「参照ピクチャ集合に含まれたピクチャ」、「参照ピクチャ集合の第ｘ番目のピクチャ」という表現を使用したが、これは、説明の便宜のためであることに留意しなければならない。参照ピクチャ集合に含まれたピクチャは、参照ピクチャ集合に対応するＰＯＣ情報が含まれているピクチャを意味し、参照ピクチャ集合の第ｘ番目のピクチャは、参照ピクチャ集合内で対応するＰＯＣ情報が第ｘ番目に整列させられるピクチャを意味する。

一方、図４ないし図６に示すピクチャ間の参照関係は、時間的レベル（ｔｅｍｐｏｒａｌ ｌｅｖｅｌ）が採用されない場合を例として説明したが、これは、発明の理解のためであり、本発明は、これに限定されない。本発明は、時間的レベルが考慮されて、自分より下位レベルのピクチャだけを参照する場合に対しても同様に適用することができ、この場合に表５ないし表８の参照関係は、これを反映して変更することができる。

上述した例示的なシステムにおいて、本発明の方法は、一連のステップ又はブロックでフローチャートに基づいて説明されているが、本発明は、ステップの順序に限定されるものではなく、あるステップは、上述したことと異なるステップと異なる順序で又は同時に発生できる。また、上述した実施形態は、多様な様態の例示を含む。したがって、本発明は、以下の特許請求の範囲内に属するすべての他の交替、修正及び変更を含むと理解しなければならない。

以上、本発明に関する説明において、一つの構成要素が他の構成要素に「連結されて」いるか、「接続され」ていると言及されたときには、一つの他の構成要素が他の構成要素に直接的に連結されているか、又は接続されいる場合もあるが、二つの構成要素の間に他の構成要素が存在しうると理解しなければならない。これに対し、一つの構成要素が他の構成要素に「直接連結され」ているか「直接接続され」されていると言及されたときには、二つの構成要素の間に他の構成要素が存在しないと理解しなければならない。

Claims (7)

1. 復号装置により実行されるインター予測方法であって、
   ピクチャ順カウント（ＰＯＣ）情報を受信するステップと、
   前記ＰＯＣ情報に基づいて、参照ピクチャに対するピクチャ順カウント（ＰＯＣ）値を導出するステップと、
   前記参照ピクチャの前記ＰＯＣ値に基づいて参照ピクチャリストを構成するステップと、
   現在ブロックの予測されたサンプルを導出するために、前記参照ピクチャリストに基づいて前記現在ブロックに対してインター予測を実行するステップと、を含み、
   第ｉ番目の参照ピクチャのＰＯＣ値は前記ＰＯＣ情報から導出されたＰＯＣ差に基づいて導出され、
   前記参照ピクチャは、ＰＯＣ順で現在ピクチャの前の前記参照ピクチャと、前記ＰＯＣ順で前記現在ピクチャに後続の前記参照ピクチャを含み、
   前記参照ピクチャリストは、参照ピクチャ集合に基づいて構成され、
   ０番目の参照ピクチャは前記参照ピクチャ集合において第１参照ピクチャであり、
   前記ＰＯＣ順で前記現在ピクチャの前に位置する前記参照ピクチャに対して、
   前記ＰＯＣ差は、前記第ｉ番目の参照ピクチャが前記参照ピクチャ集合において第１の参照ピクチャである場合、前記現在ピクチャのＰＯＣ値と前記第ｉ番目の参照ピクチャのＰＯＣ値との差であり、
   前記ＰＯＣ差は、前記第ｉ番目の参照ピクチャが１番目の参照ピクチャに続く２番目の参照ピクチャから前記参照ピクチャ集合の最後の参照ピクチャまでである場合、前記第ｉ番目の参照ピクチャのＰＯＣ値と第（ｉ－１）番目の参照ピクチャのＰＯＣ値との差であり、
   前記参照ピクチャリストに対して、インデックスは、前記ＰＯＣ順での前記現在ピクチャの前の前記参照ピクチャまでのＰＯＣ値の降順に基づいて、割り当てられ、そして、インデックスは、ＰＯＣ順において前記現在ピクチャの前の前記参照ピクチャまでＰＯＣ値の昇順に基づいて、割り当てられる、インター予測方法。
2. 前記ＰＯＣ情報に基づいて、前記ＰＯＣ順の降順で、ＰＯＣ順で前記現在ピクチャの前に位置する前記参照ピクチャに対するＰＯＣ差を導出するステップと、
   前記ＰＯＣ情報に基づいて、前記ＰＯＣ順の昇順で、PＯＣ順で前記現在ピクチャに後続の前記参照ピクチャに対するＰＯＣ差を導出するステップを更に備える、請求項１に記載のインター予測方法。
3. 前記ＰＯＣ情報が、前記ＰＯＣ順において、前記現在ピクチャの前に位置する前記参照ピクチャの数を特定するための第１数情報と、前記ＰＯＣ順において、前記現在ピクチャに後続の前記参照ピクチャの数を特定するための第２数情報を含む、請求項１に記載のインター予測方法。
4. 前記ＰＯＣ情報はスライスヘッダのレベルとしてシグナルされる、請求項１に記載のインター予測方法。
5. 前記スライスヘッダはＰスライス又はＢスライスのためである、請求項４に記載のインター予測方法。
6. 符号化装置により実行される映像符号化方法であって、
   参照ピクチャに含まれた参照ピクチャリストに基づいて現在ブロックについてインター予測を実行するステップと、
   前記参照ピクチャに対するピクチャ順カウント（ＰＯＣ）値を導出するステップと、
   前記参照ピクチャの前記導出されたＰＯＣ値に基づいて前記参照ピクチャのＰＯＣ情報を導出するステップであって、前記ＰＯＣ情報は前記参照ピクチャに対するＰＯＣ差を示す、ステップと、
   前記ＰＯＣ情報を含む映像情報を符号化するステップとを含み、
   前記参照ピクチャは、ＰＯＣ順で現在ピクチャの前の前記参照ピクチャと、前記ＰＯＣ順で前記現在ピクチャに後続の前記参照ピクチャを含み、
   前記参照ピクチャリストは、参照ピクチャ集合に基づいて構成され、
   ０番目の参照ピクチャは前記参照ピクチャ集合において第１参照ピクチャであり、
   前記ＰＯＣ順で前記現在ピクチャの前に位置する前記参照ピクチャに対して、
   前記ＰＯＣ差は、第ｉ番目の参照ピクチャが前記参照ピクチャ集合において第１の参照ピクチャである場合、前記現在ピクチャのＰＯＣ値と前記第ｉ番目の参照ピクチャのＰＯＣ値との差であり、
   前記ＰＯＣ差は、前記第ｉ番目の参照ピクチャが１番目の参照ピクチャに続く２番目の参照ピクチャから前記参照ピクチャ集合の最後の参照ピクチャまでである場合、前記第ｉ番目の参照ピクチャのＰＯＣ値と第（ｉ－１）番目の参照ピクチャのＰＯＣ値との差であり、
   前記参照ピクチャリストに対して、インデックスは、前記ＰＯＣ順での前記現在ピクチャの前の前記参照ピクチャまでのＰＯＣ値の降順に基づいて、割り当てられ、そして、インデックスは、ＰＯＣ順において前記現在ピクチャの前の前記参照ピクチャまでＰＯＣ値の昇順に基づいて、割り当てられる、映像符号化方法。
7. 画像に対するデータの送信方法であって、
   前記画像に対するビットストリームを取得するステップであって、
   前記ビットストリームは、参照ピクチャに含まれる参照ピクチャリストに基づいて現在ブロックについてインター予測を実行し、前記参照ピクチャに対するピクチャ順カウント（ＰＯＣ）値を導出し、前記参照ピクチャの前記導出されたＰＯＣ値に基づいて前記参照ピクチャのＰＯＣ情報を導出し、前記ＰＯＣ情報は前記参照ピクチャに対するＰＯＣ差を示し、前記ビットストリームを出力するために、前記ＰＯＣ情報を含む映像情報を符号化することにより、生成される、ステップと、
   前記ビットストリームを含む前記データを送信するステップとを含み、
   前記参照ピクチャは、ＰＯＣ順で現在ピクチャの前の前記参照ピクチャと、前記ＰＯＣ順で前記現在ピクチャに後続の前記参照ピクチャを含み、
   前記参照ピクチャリストは、参照ピクチャ集合に基づいて構成され、
   ０番目の参照ピクチャは前記参照ピクチャ集合において第１参照ピクチャであり、
   前記ＰＯＣ順で前記現在ピクチャの前に位置する前記参照ピクチャに対して、
   前記ＰＯＣ差は、第ｉ番目の参照ピクチャが前記参照ピクチャ集合において第１の参照ピクチャである場合、前記現在ピクチャのＰＯＣ値と前記第ｉ番目の参照ピクチャのＰＯＣ値との差であり、
   前記ＰＯＣ差は、前記第ｉ番目の参照ピクチャが１番目の参照ピクチャに続く２番目の参照ピクチャから前記参照ピクチャ集合の最後の参照ピクチャまでである場合、前記第ｉ番目の参照ピクチャのＰＯＣ値と第（ｉ－１）番目の参照ピクチャのＰＯＣ値との差であり、
   前記参照ピクチャリストに対して、インデックスは、前記ＰＯＣ順での前記現在ピクチャの前の前記参照ピクチャまでのＰＯＣ値の降順に基づいて、割り当てられ、そして、インデックスは、ＰＯＣ順において前記現在ピクチャの前の前記参照ピクチャまでＰＯＣ値の昇順に基づいて、割り当てられる、データの送信方法。

Images