JP2022537805A - Ｂｌｏｃｋ ＤＰＣＭ予測方法を使用するビデオ信号処理方法及び装置 - Google Patents

Abstract

本開示はビデオ信号処理方法及び装置に関し、より詳しくは、ビットストリームからブロック基盤デルタパルス符号変調（Ｂｌｏｃｋ－ｂａｓｅｄ Ｄｅｌｔａ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ；ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報をパージングするステップと、ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、現在ブロックの高さが第２値より小さいか同じである場合、現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報をビットストリームからパージングするステップと、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対するイントラＢＤＰＣＭ方向情報をビットストリームからパージングするステップと、イントラＢＤＰＣＭ方向情報に基づいて現在ブロックを復元するステップと、を含む。

Description

本開示はビデオ信号処理方法及び装置に関し、より詳しくは、ビデオ信号をエンコーディングするかデコーディングするビデオ信号処理方法及び装置に関する。

圧縮符号化とは、デジタル化した情報を通信回線を介して伝送するか、貯蔵媒体に適合した形態に貯蔵するための一連の信号処理技術を意味する。圧縮符号化の対象としては音声、映像、文字などの対象が存在するが、特に映像を対象とする圧縮符号化を行う技術をビデオ映像圧縮と称する。ビデオ信号に対する圧縮符号化は、空間的な相関関係、時間的な相関関係、確率的な相関関係などを考慮して剰余情報を除去することで行われる。しかし、最近の多様なメディア及びデータ伝送媒体の発展によって、より高効率のビデオ信号処理方法及び装置が求められている。

本開示は、ビデオ信号のコーディング効率を上げるための目的を有する。

本開示の一実施例によるビデオ信号を処理する方法は、ビットストリームからブロック基盤デルタパルス符号変調（Ｂｌｏｃｋ－ｂａｓｅｄ Ｄｅｌｔａ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ；ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報をパージングするステップと、ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、現在ブロックの高さが第２値より小さいか同じである場合、現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報をビットストリームからパージングするステップと、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対するイントラＢＤＰＣＭ方向情報をビットストリームからパージングするステップと、イントラＢＤＰＣＭ方向情報に基づいて現在ブロックを復元するステップと、を含むことを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法の第１値及び第２値は、変換スキップを許容する最大ブロックサイズであることを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法のイントラＢＤＰＣＭ情報及びイントラＢＤＰＣＭ方向情報は、クロマ成分に関わらずルマ成分のためにパージングされることを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法のＢＤＰＣＭ活性情報は、シーケンス（ｓｅｑｕｅｎｃｅ）でシグナリングされることを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法のイントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、前記ビットストリームから前記現在ブロックに当たる変換ブロックの変換スキップ情報をパージングせず、変換スキップ情報は変換スキップ情報の値が第１推論値である場合、変換スキップ情報に当たるブロックに対して変換が適用されないことを示すことを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法は、変換スキップ情報が存在せず、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、変換スキップ情報を第１推論値に推論するステップと、変換スキップ情報が存在せず、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用しないことを示す場合、変換スキップ情報を第２推論値に推論するステップと、を更に含むことを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法のイントラＢＤＰＣＭ方向情報は、水平方向または垂直方法のうち一つを示すことを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法は、イントラＢＤＰＣＭ方向情報が０である場合、複数のイントラモードのうち水平方向に当たるイントラ予測モードを現在ブロックのイントラ予測モードとして選択するステップと、イントラＢＤＰＣＭ方向情報が１である場合、複数のイントラモードのうち垂直方向に当たるイントラ予測モードを現在ブロックのイントラ予測モードとして選択するステップと、を含むことを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法の現在ブロックのイントラ予測モードは、現在ブロックの後で復元される周辺ブロックのイントラ予測モードを決定するために使用されることを特徴とする。

本開示の一実施例によるビデオ信号処理装置はプロセッサ及びメモリを含み、プロセッサはメモリに保存されている命令語に基づいて、ビットストリームからブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報をパージングし、ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、現在ブロックの高さが第２値より小さいか同じである場合、現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報をビットストリームからパージングし、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対するイントラＢＤＰＣＭ方向情報をビットストリームからパージングし、イントラＢＤＰＣＭ方向情報に基づいて現在ブロックを復元する。

本開示の一実施例によるビデオ信号処理装置の第１値及び第２値は、変換スキップを許容する最大ブロックサイズである。

本開示の一実施例によるビデオ信号処理装置のイントラＢＤＰＣＭ情報及びイントラＢＤＰＣＭ方向情報は、クロマ成分に関わらずルマ成分のためにパージングされる。

本開示の一実施例によるビデオ信号処理装置のＢＤＰＣＭ活性情報は、シーケンス（ｓｅｑｕｅｎｃｅ）でシグナリングされる。

本開示の一実施例によるビデオ信号処理装置のイントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、前記ビットストリームから前記現在ブロックに当たる変換ブロックの変換スキップ情報をパージングせず、変換スキップ情報は変換スキップ情報の値が第１推論値である場合、変換スキップ情報に当たるブロックに対して変換が適用されないことを示す。

本開示の一実施例によるビデオ信号処理装置のプロセッサはメモリに保存されている命令語に基づいて、変換スキップ情報が存在せず、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、変換スキップ情報を第１推論値に推論し、変換スキップ情報が存在せず、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用しないことを示す場合、変換スキップ情報を第２推論値に推論する。

本開示の一実施例によるビデオ信号処理装置のイントラＢＤＰＣＭ方向情報は、水平方向または垂直方法のうち一つを示す。

本開示の一実施例によるビデオ信号処理装置のプロセッサはメモリに保存されている命令語に基づいて、イントラＢＤＰＣＭ方向情報が０である場合、複数のイントラモードのうち水平方向に当たるイントラ予測モードを現在ブロックのイントラ予測モードとして選択し、イントラＢＤＰＣＭ方向情報が１である場合、複数のイントラモードのうち垂直方向に当たるイントラ予測モードを現在ブロックのイントラ予測モードとして選択する。

本開示の一実施例によるビデオ信号処理装置のイントラ予測モードは、現在ブロックの後で復元される周辺ブロックのイントラ予測モードを決定するために使用される。

本開示の一実施例によるビデオ信号を処理する方法は、ブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報を生成するステップと、ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、現在ブロックの高さが第２値より小さいか同じである場合、現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報を生成するステップと、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対するイントラＢＤＰＣＭ方向情報を生成するステップと、ＢＤＰＣＭ活性情報、イントラＢＤＰＣＭ情報、及びイントラＢＤＰＣＭ方向情報に基づいてビットストリームを生成するステップと、を含むことを特徴とする。

本開示の一実施例によるビデオ信号を処理する方法のイントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに当たる変換ブロックの変換スキップ情報を生成しないことを特徴とする。

本開示の一実施例によるビデオ信号処理装置はプロセッサ及びメモリを含み、プロセッサはメモリに保存されている命令語に基づいて、ブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報を生成し、ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、現在ブロックの高さが第２値より小さいか同じである場合、現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報を生成し、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対するイントラＢＤＰＣＭ方向情報を生成し、ＢＤＰＣＭ活性情報、イントラＢＤＰＣＭ情報、及びイントラＢＤＰＣＭ方向情報に基づいてビットストリームを生成する。

本開示の一実施例によるビデオ信号処理装置は、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに当たる変換ブロックの変換スキップ情報を生成しない。

本開示の一実施例によるエンコーディングされたビデオ信号を記録したコンピュータによって読み取り可能な記録媒体は、ブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報を生成するステップと、ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、現在ブロックの高さが第２値より小さいか同じである場合、現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報を生成するステップと、イントラＢＤＰＣＭ情報が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対するイントラＢＤＰＣＭ方向情報を生成するステップと、ＢＤＰＣＭ活性情報、イントラＢＤＰＣＭ情報、及びイントラＢＤＰＣＭ方向情報に基づいてビットストリームを生成するステップと、を含む。

本開示の実施例によると、ビデオ信号のコーディング効率が上がる。

本発明の一実施例によるビデオ信号エンコーディング装置の概略的なブロック図である。 本発明の一実施例によるビデオ信号デコーディング装置の概略的なブロック図である。 ピクチャ内でコーディングツリーユニットがコーディングユニットに分割される実施例を示す図である。 クォードツリー及びマルチ－タイプツリーの分割をシグナリングする方法の一実施例を示す図である。 イントラ予測モードで現在ブロックを予測するために使用される参照サンプルの一実施例を示す図である。 イントラ予測に使用される予測モードの一実施例を示す図である。 本開示の一実施例によるビデオ信号処理装置の動作を示すフローチャートである。 Ｂｌｏｃｋ ＤＰＣＭ（ＢＤＰＣＭ）の予測モード及び量子化された残差信号を示す図である。 シーケンスパラメータセットに定義されたＢＤＰＣＭブラッグを示す図である。 コーディングユニットシンタックス構造の一部を示す図である。 コーディングユニットシンタックスの一部を示す図面であって、ＢＤＰＣＭ適用ブロックのサイズ変数を含む図である。 変換ユニットシンタックス構造の一部を示す図である。 変換ユニットシンタックスの一部分内でｔｒａｎｓｆｏｒｍ ｓｋｉｐフラッグのシグナリング／パージング条件を示す図である。 ＢＤＰＣＭが適用されたブロックの画面内予測モード変数との関係を示す図である。

本明細書で使用される用語は本発明における機能を考慮しながらできるだけ現在広く使用されている一般的な用語を選択したが、これは当分野に携わる技術者の意図、慣例または新たな技術の出現などによって異なり得る。また、特定の場合は出願人が任意に選定した用語もあるが、この場合、該当の発明を実施する形態の部分においてその意味を記載する。よって、本明細書で使用される用語は、単なる用語の名称ではなく、その用語の有する実質的な意味と本明細書全般にわたる内容に基づいて解釈すべきであることを明らかにする。

本明細書において、一部用語は以下のように解釈される。コーディングは、場合によってはエンコーディングまたはでコーディングに解釈される。本明細書において、ビデオ信号のエンコーディング（符号化）を行ってビデオ信号のビットストリームを生成する装置はエンコーディング装置またはエンコーダと称され、ビデオ信号ビットストリームのデコーディング（復号化）を行ってビデオ信号を復元する装置はデコーディング装置またはデコーダと称される。また、本明細書において、ビデオ信号処理装置はエンコーダ及びデコーダをいずれも含む概念の用語として使用される。情報（ｉｎｆｏｒｍａｔｉｏｎ）は値（ｖａｌｕｅｓ）、パラメータ（ｐａｒａｍｅｔｅｒ）、係数（ｃｏｅｆｆｉｃｉｅｎｔｓ）、成分（ｅｌｅｍｅｎｔｓ）などをいずれも含む用語であって、場合によっては意味が異なるように解釈されることがあるため、本発明はこれに限らない。「ユニット」は映像処理の基本単位またはピクチャの特定位置を指す意味で使用され、ルマ（ｌｕｍａ）成分とクロマ（ｃｈｒｏｍａ）成分をいずれも含むイメージ領域を指す。また、「ブロック」はルマ成分及びクロマ成分（つまり、Ｃｂ及びＣｒ）のうち特定成分を含むイメージ領域を指す。但し、実施例によっては「ユニット」、「ブロック」、「パーティション」、及び「領域」などの用語は互いに混合して使用されてもよい。また、本明細書において、ユニットまたはブロックはコーディングユニット（またはコーディングブロック）、予測ユニット（または予測ブロック）、変換ユニット（または変換ブロック）をいずれも含む概念として使用される。ピクチャはフィールドまたはフレームを指し、実施例よっては前記用語は互いに混用して使用される。

図１は、本発明の一実施例によるビデオ信号エンコーディング装置１００の概略的なブロック図である。図１を参照すると、本明細書のエンコーディング装置１００は、変換部１１０、量子化部１１５、逆量子化部１２０、逆変換部１２５、フィルタリング部１３０、予測部１５０、及びエントロピーコーディング部１６０を含む。

変換部１１０は、入力されたビデオ信号と予測部１５０で生成された予測信号の差であるレジデュアル信号を変換して変換系数値を獲得する。例えば、離散コサイン変換（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ、ＤＣＴ）、離散サイン変換（Ｄｉｓｃｒｅｔｅ Ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ、ＤＳＴ）、またはウェーブレット変換（Ｗａｖｅｌｅｔ Ｔｒａｎｓｆｏｒｍ）などが使用される。離散コサイン変換及び離散サイン変換は、入力されたピクチャ信号をブロックの形態に分けて変換を行うようになる。変換において、変換領域内の値の分布と特性によってコーディング効率が異なり得る。量子化部１１５は、変換部１１０内で出力された変換係数の値を量子化する。

コーディング効率を上げるために、ピクチャ信号をそのままコーディングするのではなく、予測部１５０を介して予めコーディングされた領域を利用してピクチャを予測し、予測されたピクチャに原本ピクチャと予測ピクチャの間のレジデュアル値を足して復元ピクチャを獲得する方法が使用される。エンコーダとデコーダでミスマッチが発生しないように、エンコーダで予測を行う際にはデコーダでも使用可能な情報を使用すべきである。そのために、エンコーダでは符号化した現在ブロックを更に復元する過程を行う。逆量子化部１２０では変換係数値を逆量子化し、逆変換部１２５では逆量子化された変換係数値を利用してレジデュアル値を復元する。一方、フィルタリング部１３０は、復元されたピクチャの品質改善及び符号化効率の向上のためのフィルタリング演算を行う。例えば、デブロッキングフィルタ、サンプル適応的オフセット（Ｓａｍｐｌｅ Ａｄｐａｔｉｖｅ Ｏｆｆｓｅｔ、ＳＡＯ）、及び適応的ループフィルタなどが含まれてもよい。フィルタリングを経たピクチャは、出力されるか参照ピクチャとして利用するために復号ピクチャバッファ（Ｄｅｃｏｄｅｄ Ｐｉｃｔｕｒｅ Ｂｕｆｆｅｒ、ＤＰＢ）１５６に貯蔵される。

予測部１５０は、イントラ予測部１５２とインター予測部１５４を含む。イントラ予測部１５２は現在ピクチャ内でイントラ（ｉｎｔｒａ）予測を行い、インター予測部１５４は復号ピクチャバッファ１５６に貯蔵された参照バッファを利用して現在ピクチャを予測するインター（ｉｎｔｅｒ）予測を行う。イントラ予測部１５２は、現在ピクチャ内の復元されたサンプルからイントラ予測を行い、イントラ符号化情報をエントロピーコーディング部１６０に伝達する。イントラ符号化情報は、イントラ予測モード、ＭＰＭ（Ｍｏｓｔ Ｐｒｏｂａｂｌｅ Ｍｏｄｅ）フラッグ、ＭＰＭインデックスのうち少なくとも一つを含む。インター予測部１５４は、モーション推定部１５４ａ及びモーション補償部１５４ｂを含んで構成される。モーション推定部１５４ａは、復元された参照信号ピクチャの特定領域を参照して現在領域のモーションベクトル値を獲得する。モーション推定部１５４ａは、参照領域に対するモーション情報セット（参照ピクチャインデックス、モーションベクトル情報）をエントロピーコーディング部１６０に伝達する。モーション補償部１５４ｂは、モーション補償部１５４ａから伝達されたモーションベクトル値を利用してモーション補償を行う。インター予測部１５４は、参照領域に対するモーション情報を含むインター符号化情報をエントロピーコーディング部１６０に伝達する。

上述したピクチャ予測が行われれば、変換部１１０は原本ピクチャと予測ピクチャの間のレジデュアル値を変換して変換係数値を獲得する。この際、変換はピクチャ内で特定ブロック単位で行われるが、特定ブロックのサイズは予め設定された範囲内で可変する。量子化部１１５は、変換部１１０で生成された変換係数の値を量子化してエントロピーコーディング部１６０に伝達する。

エントロピーコーディング部１６０は、量子化された変換係数、イントラ符号化情報、及びインター符号化情報などをエントロピーコーディングしてビデオ信号ビットストリームを生成する。エントロピーコーディング部１６０では、可変長コーディング（Ｖａｒｉａｂｌｅ Ｌｅｎｇｔｈ Ｃｏｄｅｉｎｇ、ＶＬＣ）方式と算術コーディング（ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）方式などが使用される。可変長コーディング（ＶＬＣ）方式は入力されるシンボルを連続したコードワードにへ難するが、コードワードの長さは可変的である。例えば、よく発生するシンボルは短いコードワードで、よく発生しないシンボルは長いコードワードで表現する。可変長コーディング方式として、コンテキスト基盤適応型可変長コーディング（Ｃｏｎｔｅｘｔ－ｂａｓｅｄ Ａｄａｐｔｉｖｅ Ｖａｒｉａｂｌｅ Ｌｅｎｇｔｈ Ｃｏｄｉｎｇ、ＣＡＶＬＣ）方式が使用される。算術コーディングは連続したデータシンボルを一つの素数に変換するが、算術コーディングは各シンボルを表現するために必要な最適の素数ビットを得る。算術コーディングとして、コンテキスト基盤適合型算術符号化（Ｃｏｎｔｅｘｔ－ｂａｓｅｄ Ａｄａｐｔｉｖｅ Ｂｉｎａｒｙ Ａｒｉｔｈｍｅｔｉｃ Ｃｏｄｉｎｇ、ＣＡＢＡＣ）方式が使用される。

前記生成されたビットストリームは、ＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを基本単位にカプセル化される。ＮＡＬユニットは、符号化された整数個のコーディングツリーユニット（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）を含む。ビデオデコーダでビットストリームを復号化するためには、まずビットストリームをＮＡＬユニット単位に分離した後、分離されたそれぞれのＮＡＬユニットを復号化すべきである。一方、ビデオ信号ビットストリームの復号化のために必要な情報は、ピクチャパラメータセット（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ、ＰＰＳ）、シーケンスパラメータセット（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ、ＳＰＳ）、ビデオパラメータセット（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ、ＶＰＳ）などのような上位レベルセットのＲＢＳＰ（Ｒａｗ Ｂｙｔｅ Ｓｅｑｕｅｎｃｅ Ｐａｙｌｏａｄ）を介して伝送される。

一方、図１のブロック図は本発明の一実施例によるエンコーディング装置１００を示し、分離して示したブロックはエンコーディング装置１００のエレメントを論理的に区別して示している。よって、上述したエンコーディング装置１００のエレメントは、ディバイスの設計に応じて一つのチップまたは複数のチップに取り付けられる。一実施例によると、上述したエンコーディング装置１００の各エレメントの動作はプロセッサ（図示せず）によって行われる。

図２は、本発明の実施例によるビデオ信号デコーディング装置の２００概略的なブロック図である。図２を参照すると、本明細書のデコーディング装置２００は、エントロピーデコーディング部２１０、逆量子化部２２０、逆変換部２２５、フィルタリング部２３０、及び予測部２５０を含む。

エントロピーデコーディング部２１０は、ビデオ信号ビットストリームをエントロピーデコードし、各領域に対する変換係数情報、イントラ符号化情報、インター符号化情報などを抽出する。逆量子化部２２０は量子化された変換係数を逆量子化し、逆変換部２２５は、逆量子化された変換係数を用いてレジデュアル値を復元する。ビデオ信号処理装置２００は、逆変換部２２５から取得したレジデュアル値を、予測部２５０から取得した予測値と合算して、元来の画素値を復元する。

一方、フィルタリング部２３０は、ピクチャに対するフィルタリングを行って画質を向上させる。ここには、ブロック歪曲現象を減少させるためのデブロッキングフィルタ及び／またはピクチャ全体の歪曲を除去するための適応的ループフィルタなどが含まれる。フィルタリングを経たピクチャは出力されるか、次のピクチャに対する参照ピクチャとして利用するために復号ピクチャバッファ（ＤＰＢ）２５６に貯蔵される。

予測部２５０は、イントラ予測部２５２及びインター予測部２５４を含む。予測部２５０は、前述したエントロピーデコーディング部２１０を通じて復号化された符号化タイプ、各領域に対する変換係数、イントラ／インター符号化情報などを活用して予測ピクチャを生成する。復号化が遂行される現在ブロックを復元するために、現在ブロックが含まれた現在ピクチャまたは他のピクチャの復号化された領域が利用できる。復元に現在ピクチャのみを利用する、つまり、イントラ予測のみを行うピクチャ（または、タイル／スライス）をイントラピクチャまたはＩピクチャ（または、タイル／スライス）、イントラ予測とインター予測をいずれも行うピクチャ（または、タイル／スライス）をインターピクチャ（または、タイル／スライス）という。インターピクチャ（又は、タイル／スライス）のうち、各ブロックのサンプル値を予測するために、最大で１つのモーションベクトル及び参照ピクチャインデックスを用いるピクチャ（又は、タイル／スライス）を、予測ピクチャ（ｐｒｅｄｉｃｔｉｖｅ ｐｉｃｔｕｒｅ）又はＰピクチャ（又は、タイル／スライス）といい、最大で２つのモーションベクトル及び参照ピクチャインデックスを用いるピクチャ（又は、タイル／スライス）を、双予測ピクチャ（Ｂｉ－ｐｒｅｄｉｃｔｉｖｅ ｐｉｃｔｕｒｅ）又はＢピクチャ（又は、タイル／スライス）という。言い換えると、Ｐピクチャ（または、タイル／スライス）は各ブロックを予測するために最大１つの動き情報セットを用いて、Ｂピクチャ（または、タイル／スライス）は各ブロックを予測するために最大２つの動き情報セットを用いる。ここで、動き情報セットは１つ以上の動きベクトルと１つの参照ピクチャインデックスを含む。

イントラ予測部２５２は、イントラ符号化情報及び現在ピクチャ内の復元されたサンプルを利用して予測ブロックを生成する。上述したように、イントラ符号化情報は、イントラ予測モード、ＭＰＭフラッグ、ＭＰＭインデックスのうち少なくとも一つを含む。イントラ予測部２５２は、現在ブロックの左側及び／または上側に位置する復元されたピクセルを参照ピクセルとして利用して、現在ブロックのピクセル値を予測する。一実施例によると、参照ピクセルは現在ブロックの左側境界に隣接したピクセル及び／または上側境界に隣接したピクセルである。他の実施例によると、参照ピクセルは現在ブロックの周辺ブロックのピクセルのうち、現在ブロックの左側境界から予め設定された距離以内に隣接したピクセル及び／または現在ブロックの上側境界から予め設定された距離以内に隣接したピクセルである。この際、現在ブロックの周辺ブロックは、現在ブロックに隣接した左側（Ｌ）ブロック、上側（Ａ）ブロック、下左側（Ｂｅｌｏｗ Ｌｅｆｔ、ＢＬ）ブロック、上右側（Ａｂｏｖｅ Ｒｉｇｈｔ、ＡＲ）ブロック、または上左側（Ａｂｏｖｅ Ｌｅｆｔ、ＡＬ）ブロックのうち少なくとも一つを含む。

インター予測部２５４は、復号ピクチャバッファ２５６に貯蔵された参照ピクチャ及びインター符号化情報を利用して予測ブロックを生成する。インター符号化情報は、参照ブロックに対する現在ブロックのモーション情報セット（参照ピクチャインデックス、モーションベクトルなど）を含む。インター予測には、Ｌ０予測、Ｌ１予測、及び双予測（Ｂｉ－ｐｒｅｄｉｃｔｉｏｎ）がある。Ｌ０予測はＬ０ピクチャリストに含まれた一つの参照ピクチャを利用した予測であり、Ｌ１予測はＬ１ピクチャリストに含まれた一つの参照ピクチャを利用した予測を意味する。そのためには、１セットのモーション情報（例えば、モーションベクトル及び参照ピクチャインデックス）が必要である。双予測方式では最大２つの参照領域を利用するが、この２つの参照領域は同じ参照ピクチャに存在してもよく、互いに異なるピクチャにそれぞれ存在してもよい。つまり、双予測方式では最大２セットのモーション情報（例えば、モーションベクトル及び参照ピクチャインデックス）が利用されるが、２つのモーションベクトルが同じ参照ピクチャインデックスに対応してもよく、互いに異なる参照ピクチャインデックスに対応してもよい。この際、参照ピクチャは時間的に現在ピクチャの以前や以降のいずれにも表示（または出力）される。

インター予測部２５４は、モーションベクトル及び参照ピクチャインデックスを利用して現在の参照ブロックを獲得する。前記参照ブロックは、参照ピクチャインデックスに対応する参照ピクチャ内に存在する。また、モーションベクトルによって特定されたブロックのピクセル値またはこれの補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）された値が現在ブロックの予測値（ｐｒｅｄｉｃｔｏｒ）として利用される。サブペル（ｓｕｂ－ｐｅｌ）単位のピクセル正確度を有するモーション予測のために、例えば、ルマ信号に対して８－タブ補間フィルタが、クロマ信号に対して４－タブ補間フィルタが使用される。但し、サブペル単位のモーション予測のための補間フィルタはこれに限らない。このように、インター予測部２５４は、以前復元されたピクチャから現在ユニットのテクスチャをモーション情報を利用して予測するモーション補償（ｍｏｔｉｏｎ ｃｏｍｐｅｎｓａｔｉｏｎ）を行う。

前記イントラ予測部２５２又はインター予測部２５４から出力された予測値、及び逆変換部２２５から出力されたレジデュアル値が合算されて復元されたビデオピクチャが生成される。すなわち、ビデオ信号デコーディング装置２００は、予測部２５０で生成された予測ブロックと逆変換部２２５から取得されたレジデュアルを用いて現在ブロックを復元する。

一方、図２のブロック図は本発明の一実施例によるデコーディング装置２００を示し、分離して示したブロックはデコーディング装置２００のエレメントを論理的に区別して示している。よって、上述したデコーディング装置２００のエレメントは、ディバイスの設計に応じて一つのチップまたは複数のチップに取り付けられる。一実施例によると、上述したデコーディング装置２００の各エレメントの動作はプロセッサ（図示せず）によって行われる。

図３は、ピクチャ内でコーディングツリーユニット（Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ、ＣＴＵ）がコーディングユニット（Ｃｏｄｉｎｇ Ｕｎｉｔｓ、ＣＵｓ）に分割される実施例を示している。ビデオ信号のコーディング過程において、ピクチャはコーディングツリーユニット（ＣＴＵ）のシーケンスに分割される。コーディングツリーユニットは、輝度サンプルのＮＸＮブロックと、それに対応する色差サンプルの２つのブロックからなる。コーディングツリーユニットは、複数のコーディングユニットに分割される。コーディングユニットは上述したビデオ信号の処理過程、つまり、イントラ／インター予測、変換、量子化及び／またはエントロピーコーディングなどの過程でピクチャを処理するための基本単位を指す。一つのピクチャ内において、コーディングユニットのサイズ及び模様は一定ではない。コーディングユニットは正方形または長方形の模様を有する。長方形コーディングユニット（または、長方形ブロック）は垂直コーディングユニット（または、垂直ブロック）と水平コーディングユニット（または、水平ブロック）を含む。本明細書において、垂直ブロックは高さが幅より大きいブロックであり、水平ブロックは幅が高さより大きいブロックである。また、本明細書において、正方形ではない（ｎｏｎ－ｓｑｕａｒｅ）ブロックは長方形ブロックを指すが、本発明はこれに限らない。前記のようにエンコーディング装置１００及びデコーディング装置２００を説明した。以下で説明するビデオ信号処理装置は、エンコーディング装置１００及びデコーディング装置２００のうち少なくとも一つを含む。

図３を参照すると、コーディングツリーユニットは、まずクォードツリー（Ｑｕａｄ Ｔｒｅｅ、ＱＴ）構造に分割される。つまり、クォードツリー構造において、２Ｎ×２Ｎのサイズを有する一つのノードはＮ×Ｎのサイズを有する４つのノードに分割される。本明細書において、クォードツリーは４進（ｑｕａｔｅｒｎａｒｙ）ツリーとも称される。クォードツリー分割は再帰的に行われ、全てのノードが同じ深さに分割される必要はない。

一方、上述したクォードツリーのリーフノード（ｌｅａｆ ｎｏｄｅ）は、マルチ－タイプツリー（Ｍｕｌｔｉ－Ｔｙｐｅ Ｔｒｅｅ、ＭＴＴ）構造に更に分割される。本発明の実施例によると、マルチタイプツリー構造では一つのノードが水平または垂直分割の２進（ｂｉｎａｒｙ、バイナリー）または３進（ｔｅｒｎａｒｙ、ターナリー）ツリー構造に分割される。つまり、マルチ－タイプツリー構造には、垂直バイナリー分割、水平バイナリー分割、垂直ターナリー分割、及び水平ターナリー分割の４つの分割構造が存在する。本発明の実施例によると、前記各ツリー構造において、ノードの幅及び高さはいずれも２の累乗値を有する。例えば、バイナリーツリー（ｂｉｎａｒｙ Ｔｒｅｅ、ＢＴ）構造において、２Ｎ×２Ｎのサイズのノードは垂直バイナリー分割によって２つのＮ×２Ｎノードに分割され、水平バイナリー分割によって２つの２Ｎ×Ｎノードに分割される。また、ターナリーツリー（Ｔｅｒｎａｒｙ Ｔｒｅｅ、ＴＴ）構造において、２Ｎ×２Ｎのサイズのノードは垂直ターナリー分割によって（Ｎ／２）×２Ｎ、Ｎ×２Ｎ及び（Ｎ／２）×２Ｎのノードに分割され、水平ターナリー分割によって２Ｎ×（Ｎ／２）、２Ｎ×Ｎ及び２Ｎ×（Ｎ／２）のノードに分割される。このようなマルチ－タイプツリー分割は再帰的に行われる。

マルチ－タイプツリーのリーフノードはコーディングユニットになり得る。コーディングユニットが最大変換長に比べ過度に大きくなければ、該当コーディングユニットはそれ以上分割されずに予測及び変換の単位として使用される。一方、上述したクォードツリー及びマルチ－タイプツリーにおいて、次のパラメータのうち少なくとも一つが事前に定義されるか、ＰＰＳ、ＳＰＳ、ＶＰＳなどのような上位レベルセットのＲＢＳＰを介して伝送される。１）ＣＴＵサイズ：クォードツリーのルートノード（ｒｏｏｔ ｎｏｄｅ）のサイズ、２）最小ＱＴサイズ（ＭｉｎＱｔＳｉｚｅ）：許容された最小ＱＴリーフノードのサイズ、３）最大ＢＴサイズ（ＭａｘＢｔＳｉｚｅ）：許容された最大ＢＴルートノードのサイズ、４）最大ＴＴサイズ（ＭａｘＴｔＳｉｚｅ）：許容された最大ＴＴルートノードのサイズ、５）最大ＭＴＴ深さ（ＭａｘＭｔｔＤｅｐｔｈ）：ＱＴのリーフノードからのＭＴＴ分割の最大許容深さ、６）最小ＢＴサイズ（ＭｉｎＢｔＳｉｚｅ）：許容された最小ＢＴリーフノードのサイズ、７）最小ＴＴサイズ：許容された最小ＴＴリーフノードのサイズ。

図４は、クワッドツリー及びマルチ－タイプツリーの分割をシグナリングする方法の一実施形態を図示する。前述したクワッドツリー及びマルチ－タイプツリーの分割をシグナリングするために既設定されたフラグが使われることができる。図４を参照すると、クワッドツリーノードの分割するか否かを指示するフラグ‘qt_split_flag’、マルチ－タイプツリーノードの分割するか否かを指示するフラグ‘mtt_split_flag’、マルチ－タイプツリーノードの分割方向を指示するフラグ‘mtt_split_vertical_flag’またはマルチ－タイプツリーノードの分割形態を指示するフラグ‘mtt_split_binary_flag’のうち、少なくとも１つが使われることができる。

本発明の実施形態によれば、コーディングツリーユニットはクワッドツリーのルートノードであり、クワッドツリー構造に先に分割できる。クワッドツリー構造では各々のノード‘QT_node’別に‘qt_split_flag’がシグナリングされる。‘qt_split_flag’の値が１の場合、該当ノードは４個の正四角形ノードに分割され、‘qt_split_flag’の値が０の場合、該当ノードはクワッドツリーのリーフノード‘QT_leaf_node’となる。
各々のクワッドツリーリーフノード‘QT_leaf_node’はマルチ－タイプツリー構造にさらに分割できる。マルチ－タイプツリー構造では、各々のノード‘MTT_node’別に‘mtt_split_flag’がシグナリングされる。‘mtt_split_flag’の値が１の場合、該当ノードは複数の矩形ノードに分割され、‘mtt_split_flag’の値が０の場合、該当ノードはマルチ－タイプツリーのリーフノード‘MTT_leaf_node’となる。マルチ－タイプツリーノード‘MTT_node’が複数の矩形ノードに分割される場合（即ち、‘mtt_split_flag’の値が１の場合）、ノード‘MTT_node’のための‘mtt_split_vertical_flag’及び‘mtt_split_binary_flag’が追加でシグナリングできる。‘mtt_split_vertical_flag’の値が１の場合、ノード‘MTT_node’の垂直分割が指示され、‘mtt_split_vertical_flag’の値が０の場合、ノード‘MTT_node’の水平分割が指示される。また、‘mtt_split_binary_flag’の値が１の場合、ノード‘MTT_node’は２つの矩形ノードに分割され、‘mtt_split_binary_flag’の値が０の場合、ノード‘MTT_node’は３個の矩形ノードに分割される。

図５及び図６は、本開示の実施例によるイントラ予測方法をより詳しく示す図である。上述したように、イントラ予測部は、現在ブロックの左側及び／または上側に位置する復元されたピクセルを参照ピクセルとして利用して、現在ブロックのピクセル値を予測する。

まず、図５はイントラ予測モードで現在ブロックを予測するために使用される参照サンプルの一実施例を示す。一実施例によると、参照ピクセルは現在ブロックの左側境界に隣接したピクセル及び／または上側境界に隣接したピクセルである。図５に示したように、現在ブロックのサイズがＷ×Ｈで現在ブロックに隣接した単一参照ライン（ｌｉｎｅ）のピクセルがイントラ予測に使用されれば、現在ブロックの左側及び／または上側に位置した最大２Ｗ＋２Ｈ＋１個の隣接したピクセルを使用して参照ピクセルが設定される。一方、本開示の追加的な実施例によると、現在ブロックのイントラ予測のために多重参照ラインのピクセルが使用される。多重参照ラインは、現在ブロックから予め設定された範囲内に位置するｎ個のラインからなる。一実施例によると、イントラ予測のために多重参照ラインのピクセルが使用されれば、参照ピクセルに設定されるラインを指示する別途のインデックス情報がシグナリングされる。参照ピクセルとして使用される少なくとも一部の隣接ピクセルがまだ復元されていなければ、イントラ予測部は予め設定された規則による参照サンプルパッディング過程を行って参照ピクセルを獲得する。また、イントラ予測部は、イントラ予測の誤差を減らすために参照サンプルフィルタリング過程を行う。つまり、隣接ピクセル及び／または参照サンプルパッディング過程によって獲得されたピクセルにフィルタリングを行って参照ピクセルを獲得する。イントラ予測部は、このように獲得された参照ピクセルを利用して現在ブロックのピクセルを予測する。

次に、図６はイントラ予測に使われる予測モードの一実施形態を図示する。イントラ予測のために、イントラ予測方向を指示するイントラ予測モード情報がシグナリングできる。イントラ予測モード情報は、イントラ予測モードセットを構成する複数のイントラ予測モードのうち、いずれか１つを指示する。現在ブロックがイントラ予測されたブロックである場合、デコーダーはビットストリームから現在ブロックのイントラ予測モード情報を受信する。デコーダのイントラ予測部は、抽出されたイントラ予測モード情報に基づいて現在ブロックに対するイントラ予測を遂行する。

本発明の実施例によると、イントラ予測モードセットは、イントラ予測に使用される全てのイントラ予測モード（例えば、総６７個のイントラ予測モード）を含む。より詳しくは、イントラ予測モードセットは、平面モード、ＤＣモード、及び複数の（例えば、６５個の）角度モード（つまり、方向モード）を含む。それぞれのイントラ予測モードは、予め設定されたインデックス（つまり、イントラ予測モードインデックス）を介して指示される。例えば、図６に示したように、イントラ予測モードインデックス０は平面（ｐｌａｎａｒ）モードを指示し、イントラ予測モードインデックス１はＤＣモードを指示する。また、イントラ予測モードインデックス２乃至６６は、互いに異なる角度モードをそれぞれ指示する。角度モードは、既に設定された角度範囲以内の異なる角度をそれぞれ指示する。例えば、角度モードは時計回り方向に４５°～－１３５°の角度範囲（すなわち、第１角度範囲）以内の角度を指示できる。前記角度モードは１２時方向を基準に定義されてよい。この際、イントラ予測モードインデックス２は水平対角（Ｈｏｒｉｚｏｎｔａｌ Ｄｉａｇｏｎａｌ、ＨＤＩＡ）モードを指示し、イントラ予測モードインデックス１８は水平（Ｈｏｒｉｚｏｎｔａｌ、ＨＯＲ）モードを指示し、イントラ予測モードインデックス３４は対角（Ｄｉａｇｏｎａｌ、ＤＩＡ）モードを指示し、イントラ予測モードインデックス５０は水直（Ｖｅｒｔｉｃａｌ、ＶＥＲ）モードを指示し、イントラ予測モードインデックス６６は垂直対角（Ｖｅｒｔｉｃａｌ Ｄｉａｇｏｎａｌ、ＶＤＩＡ）モードを指示する。

一方、予め設定された角度範囲は現在ブロックの模様に応じて互いに異なるように設定される。例えば、現在ブロックが長方形ブロックであれば、時計回りに４５度を超過するか－１３５度未満の角度を指示する広角モードが更に使用される。現在ブロックが水平ブロックであれば、角度モードは時計回りに（４５＋ｏｆｆｓｅｔ １）度から（－１３５＋ｏｆｆｓｅｔ １）度の間の角度範囲（つまり、第２角度範囲）以内の角度を指示する。この際、第１角度範囲を逸脱する角度モード６７乃至７６が更に使用される。また、現在ブロックが水直ブロックであれば、角度モードは時計回りに（４５－ｏｆｆｓｅｔ ２）度から（－１３５－ｏｆｆｓｅｔ ２）度の間の角度範囲（つまり、第３角度範囲）以内の角度を指示する。この際、第１角度範囲を逸脱する角度モード－１０乃至－１が更に使用される。本開示の実施例によると、ｏｆｆｓｅｔ １及びｏｆｆｓｅｔ ２の値は、長方形ブロックの幅と高さとの間の割合によって互いに異なるように決定される。また、ｏｆｆｓｅｔ １及びｏｆｆｓｅｔ ２は正数である。

本開示の追加的な実施例によると、イントラ予測モードセットを構成する複数の角度モードは、基本角度モードと拡張角度モードを含む。この際、拡張角度モードは基本角度モードに基づいて決定される。

一実施例によると、基本角度モードは従来のＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）標準のイントラ予測で使用される角度に対応するモードであり、拡張角度モードは次世代ビデオコーデック標準のイントラ予測で新たに追加される角度に対応するモードである。より詳しくは、基本角度モードはイントラ予測モード｛２、４、６、…、６６｝のうちいずれか一つに対応する角度モードであり、拡張角度モードはイントラ予測モード｛３、５、７、…、６６｝のうちいずれか一つに対応する角度モードである。つまり、拡張角度モードは、第１角度範囲内における基本角度モードの間の角度モードである。よって、拡張角度モードが指示する角度は基本角度モードが指示する角度に基づいて決定される。

他の実施例によると、基本角度モードは予め設定された第１角度範囲以内の角度に対応するモードであり、拡張角度モードは前記第１角度範囲を逸脱する広角モードである。つまり、基本角度モードはイントラ予測モード｛２、３、４、…、６６｝のうちいずれか一つに対応する角度モードであり、拡張角度モードはイントラ予測モード｛－１０、－９、…、－１｝及び｛６７、６８、…、７６｝のうちいずれか一つに対応する角度モードである。拡張角度モードが指示する角度は、対応する基本角度モードが指示する角度の反対側の角度と決定される。よって、拡張角度モードが指示する角度はは基本角度モードが指示する角度に基づいて決定される。一方、拡張角度モードの個数はこれに限らず、現在ブロックのサイズ及び／または形状によって更なる拡張角度が定義される。例えば、拡張角度モードはイントラ予測モード｛－１４、－１３、…、－１｝及び｛６７、６８、…、８０｝のうちいずれか一つに対応する角度モードとして定義されてもよい。一方、イントラ予測モードセットに含まれるイントラ予測モードの総個数は、上述した基本角度モードと拡張角度モードの構成によって可変する。

前記実施例において、拡張角度モード間の間隔は、対応する基本角度モード間の間隔に基づいて設定される。例えば、拡張角度モード｛３、５、７、…、６５｝間の間隔は、対応する基本角度モード｛２、４、６、…、６６｝間の間隔に基づいて決定される。また、拡張角度モード｛－１０、－９、…、－１｝間の間隔は、対応する反対側の基本角度モード｛５６、５７、…、６５｝間の間隔に基づいて決定され、拡張角度モード｛６７、６８、…、７６｝間の間隔は、対応する反対側の基本角度モード｛３、４、…、１２｝間の間隔に基づいて決定される。拡張角度モード間の角度間隔は、対応する基本角度モード間の角度間隔と同じように設定される。また、イントラ予測モードセットにおいて、拡張角度モードの個数は基本角度モードの個数以下に設定される。

本開示の実施例によると、拡張角度モードは基本角度モードに基づいてシグナリングされる。例えば、広角モード（つまり、拡張角度モード）は第１角度範囲以内の少なくとも一つの角度モード（つまり、基本角度モード）を代替する。代替される基本角度モードは、広角モードの反対側に対応する角度モードである。つまり、代替される基本角度モードは広角モードが指示する角度の反対方向の角度に対応するか、または前記反対方向の角度から予め設定されたオフセットインデックスだけ差がある角度に対応する角度モードである。本開示の実施例によると、予め設定されたオフセットインデックスは１である。代替される基本角度モードに対応するイントラ予測モードインデックスは広角モードに更にマッピングされて、該当広角モードをシグナリングする。例えば、広角モード｛－１０、－９、…、－１｝はイントラ予測モードインデックス｛５７、５８、…、６６｝によってそれぞれシグナリングされ、広角モード｛６７、６８、…７６｝はイントラ予測モードインデックス｛２、３、…、１１｝によってそれぞれシグナリングされる。このように基本角度モードのためのイントラ予測モードインデックスが拡張角度モードをシグナリングするようにすることで、各ブロックのイントラ予測に使用される角度モードの構成が互いに異なっても、同じセットのイントラ予測モードインデックスがイントラ予測モードのシグナリングに使用される。よって、イントラ予測モードの構成の変化によるシグナリングオーバーヘッドが最小化される。

一方、拡張角度モードの使用可否は、現在ブロックの形状及びサイズのうち少なくとも一つに基づいて決定される。一実施例によると、現在ブロックのサイズが予め設定されたサイズより大きければ、拡張角度モードが現在ブロックのイントラ予測のために使用され、そうでなければ基本角度モードのみ現在ブロックのイントラ予測のために使用される。他の実施例によると、現在ブロックが正方形ではないブロックであれば、拡張角度モードが現在ブロックのイントラ予測のために使用され、現在ブロックが正方形ブロックであれば、基本角度モードのみ現在ブロックのイントラ予測のために使用される。

イントラ予測部は現在ブロックのイントラ予測モード情報に基づいて、現在ブロックのイントラ予測に使用される参照ピクセル及び／または補間された参照ピクセルを決定する。イントラ予測モードインデックスが特定角度モードを指示すれば、現在ブロックの現在ピクセルから前記特定角度に対応する参照ピクセルまたは補間された参照ピクセルが現在ピクセルの予測に使用される。よって、イントラ予測モードに応じて互いに異なるセットの参照ピクセル及び／または補完された参照ピクセルがイントラ予測に使用される。参照ピクセル及びイントラ予測モード情報を利用して現在ブロックのイントラ予測が行われたら、デコーダは逆変換部から獲得された現在ブロックの残差信号を現在ブロックのイントラ予測値と足して、現在ブロックのピクセル値を復元する。

図７は、本開示の一実施例によるビデオ信号処理装置の動作を示すフローチャートである。

図７の各ステップについては図９乃至図１３と共に詳しく説明する。

図８は、本開示の一実施例によるＢｌｏｃｋ ＤＰＣＭ（ＢＤＰＣＭ）の予測モード及び量子化された残差信号を示す図である。

ブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）は画面内（イントラ）予測方法のうち一つである。ＢＤＰＣＭは２つの画面内（イントラ）予測モードを使用する。一般的な画面内予測モードのうち、垂直方向の予測モードと水平方向の予測モードを使用する。画面内予測モードの総個数が６７個を使用する場合、垂直方向予測モードのインデックスは５０であり、水平方向予測モードは１８番である。ＢＤＰＣＭを使用する場合、２つのモードのうち一つをシグナリングする。現在コーディングブロックに対してＢＤＰＣＭが適用される場合、参照サンプルはフィルタリングされていないサンプルを使用する。垂直方向予測モードがＢＤＰＣＭに適用されれば、現在コーディングブロックの幅に当たるサンプルを使用することができ、各サンプルは該当列に同じ値と予測する。水平方向予測モードがＢＤＰＣＭに適用されれば、現在コーディングブロックの高さに当たるサンプルを使用することができ、各サンプルは該当行の全てのサンプルを同じ値と予測する。ＢＤＰＣＭが適用されたブロックは変換過程を省略し、残差信号にコーディングしてデコーダに知らせる。図８の「Ａ．ＢＤＰＣＭ予測モード」は、残差信号コーディングに関する方法である。

デコーダはエンコーダの反対に計算して量子化された残差信号を生成し、予測値に足して復元信号を作る。

図９は、シーケンスパラメータセットに定義されたＢＤＰＣＭフラッグを示す図である。

上位レベルでＢＤＰＣＭフラッグを定義し、該当機能をｏｎ／ｏｆｆする。上位レベル順に並べると、ｖｉｄｅｏ ｐａｒａｍｅｔｅｒ ｓｅｔ、ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ、ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔなどに区分される。本開示では、前記フラッグをｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ（ＳＰＳ）に定義する。しかし、これに限らない。ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）はＢＤＰＣＭの活性可否を示す。ビデオ信号処理装置は、ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）をビットストリームからパージングするステップ７１０を行う。ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が１であればＢＤＰＣＭが活性化されることを指示する。その値が０であればＢＤＰＣＭが非活性化されることを指示する。指示する値は反対に定義されてもよく、いかなる形態でも活性化と非活性化を指示してもよい。

既に説明したように、図９においてＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）はシーケンス単位で定義されているが、これに限らない。ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）は、Ｃｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ（ＣＴＵ）、スライス（ｓｌｉｃｅ）、タイル（ｔｉｌｅ）、タイルグループ（ｔｉｌｅ ｇｒｏｕｐ）、ピクチャ（ｐｉｃｔｕｒｅ）、サブピクチャ（ｓｕｂｐｉｃｔｕｒｅ）、シーケンス（ｓｅｑｕｅｎｃｅ）、またはビデオ（ｖｉｄｅｏ）単位のうち少なくとも一つにシグナリングされる。ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＣｏｄｉｎｇ Ｔｒｅｅ Ｕｎｉｔ（ＣＴＵ）、スライス（ｓｌｉｃｅ）、タイル（ｔｉｌｅ）、タイルグループ（ｔｉｌｅ ｇｒｏｕｐ）、ピクチャ（ｐｉｃｔｕｒｅ）、サブピクチャ（ｓｕｂｐｉｃｔｕｒｅ）、またはビデオ（ｖｉｄｅｏ）単位でシグナリングされれば、ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の名称が異なり得る。しかし、その機能は同じである。

図９を参照すると、ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）は別途の条件なしにビットストリームからパージングされる。しかし、これに限らない。ビデオ信号処理装置は、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニット（ｔｒａｎｓｆｏｒｍ ｕｎｉｔ）に存在するのか否かを示す変換スキップ活性化情報（ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）をビットストリームからパージングする。変換ユニットはコーディングブロックに含まれたピクセルを変換するためのユニットであって、コーディングブロックに含まれる。また、現在変換ユニットは現在ブロックに含まれる。変換スキップ活性化情報（ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）は変換スキップの使用可否を示す情報である。変換スキップ活性化情報（ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）はシーケンス単位でシグナリングされる。変換スキップ活性化情報（ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が１であれば変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が存在することを示し、ビデオ信号処理装置は後に変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をビットストリームからパージングする。変換スキップ活性化情報（ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が０であれば変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が存在しないことを示し、ビデオ信号処理装置は後に変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をビットストリームからパージングしない。ビデオ信号処理装置はのうちデコーダが変換スキップ情報をパージングしないということは、ビデオ信号処理装置のうちエンコーダが変換スキップ情報を生成しないということを示す。本開示によると、変換スキップ活性化情報（ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）が１であれば、ビデオ信号処理装置はＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）をビットストリームからパージングする。

図１０は、コーディングユニットシンタックス構造の一部を示す図である。

図１０は予測しようとするコーディングブロック単位で必要な情報の構造を示し、エンコーダでは該当条件に合わせてシグナリングし、デコーダでも該当条件に合わせてビットストリームから情報をパージングして獲得する。該当コーディングブロックの左上側の座標（ｘ０，ｙ０）において、ｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］がｐｃｍモードが適用されないことを指示する０の値であれば、ｔｒｅｅＴｙｐｅがＳＩＮＧＬＥ＿ＴＲＥＥであるのかＤＵＡＬ＿ＴＲＥＥ＿ＬＵＭＡであるのかを確認する。ｔｒｅｅＴｙｐｅがＳＩＮＧＬＥ＿ＴＲＥＥであるのかＤＵＡＬ＿ＴＲＥＥ＿ＬＵＭＡである場合、ビデオ信号処理装置はイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）をビットストリームからパージングする。イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）は現在ブロックにＢＤＰＣＭが適用されるのか否かを示す。イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が１であれば、現在ブロックにＢＤＰＣＭが適用されることを意味する。また、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が０であれば、現在ブロックにＢＤＰＣＭが適用されないことを意味する。しかし、これに限らず、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が０であれば、現在ブロックにＢＤＰＣＭが適用されることを意味し、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が１であれば、現在ブロックにＢＤＰＣＭが適用されないことを意味してもよい。

イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）はｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］のような形式で表される。ここで、ｘ０及びｙ０は現在ブロックの座標である。より詳しくは、ｘ０及びｙ０は現在ブロックの左上側ピクセルの座標である。

イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がパージングされるためには、該当コーディングユニットの幅と高さに対する条件とＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の活性化／非活性化条件を満足すべきである。例えば、幅と高さはいずれも３２であるかそれより小さく、ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）は活性化を指示する１であるべきである。イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）が移用されたことを指示する１であれば、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ［ｘ０］［ｙ０］）をシグナリング／パージングする。該当フラッグはＢＤＰＣＭに適用される予測モードを指示する。予測モードは、１８番水平方向予測モードと５０数式方向予測モードのうち一つである。イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ［ｘ０］［ｙ０］）の値が０であれば１８番イントラ予測モードであり、１であれば５０番イントラ予測モードを指示する。上位レベルで定義されたｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値によってコーディングブロックにおけるＢＤＰＣＭ機能の使用有無が決定される。

図１１は、コーディングユニットシンタックスの一部を示す図面であって、ＢＤＰＣＭ適用ブロックのサイズ変数を含む図である。

ＢＤＰＣＭが適用されたブロックのサイズを予め設定された変数によって可変的に変更する方法、或いは予め設定された他の変数と共に適用することもできる。ビデオ信号処理装置はＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値（Ｖａｌｕｅ １）より小さいか同じであって、現在ブロックの高さが第２値（Ｖａｌｕｅ ２）より小さいか同じである場合、現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）をビットストリームからパージングするステップ７２０を行う。

より詳しくは、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）をシグナリング／パージングするための条件は、コーディングブロックの幅（ｃｂＷｉｄｔｈ）が第１値（Ｖａｌｕｅ １）より小さいか同じであるか、コーディングブロックの高さ（ｃｂＨｅｉｇｈｔ）第２値（Ｖａｌｕｅ ２）より小さいか同じ場合である。Ｖａｌｕｅ １とＶａｌｕｅ ２は同じであるか互いに異なる値である。例えば、第１値（Ｖａｌｕｅ １）及び第２値（Ｖａｌｕｅ ２）はｔｒａｎｓｆｏｒｍ ｓｋｉｐに適用された最大ブロックサイズ（ＭａｘＴｓＳｉｚｅ）である。ｔｒａｎｓｆｏｒｍ ｓｋｉｐに適用された最大ブロックサイズ（ＭａｘＴｓＳｉｚｅ）は変換スキップを許容する最大ブロックサイズである。変換スキップを許容する最大ブロックサイズ（ＭａｘＴｓＳｉｚｅ）は４乃至３２の間の値である。変換スキップを許容する最大ブロックサイズ（ＭａｘＴｓＳｉｚｅ）は以下のように定義される。シンタックス変数ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２はｔｒａｎｓｆｏｒｍ ｓｋｉｐが適用される最大ブロックサイズを指示し、その値は０乃至３の間である。該当変数（ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）が存在しなければ０と推論される。該当変数（ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）を利用して、変換スキップを許容する最大ブロックサイズ（ＭａｘＴｓＳｉｚｅ）は１＜＜（ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２＋２）のように設定される。

他の方法として、ｔｒａｎｓｆｏｒｍ ｓｋｉｐ条件に関するｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２を利用せずに別途のＢＤＰＣＭのためのブロックサイズ変数を設定してもよい。例えば、変数ＭａｘＢｄｐｃｍＳｉｚｅを利用する。ＭａｘＢｄｐｃｍＳｉｚｅのサイズはｌｏｇ２＿ｂｄｐｃｍ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２でシグナリングされる値に基づいて設定される。ＭａｘＢｄｐｃｍＳｉｚｅは１＜＜（ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２＋２）に設定される。ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２は０で最大値であり、最大値は７、６、５、４、３、２、１の値のうち一つである。Ｔｒａｎｓｆｏｒｍ ｓｋｉｐ条件に関するｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２を使用する場合、追加の変数を設定する必要がなく、エンコーダからデコーダに追加に伝送される情報がない可能性がある。そうでなくｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２を利用する場合、ｌｏｇ２＿ｂｄｐｃｍ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２のような追加の変数が必要となるが、ブロックの自由度が上がる。前記と類似した方法でＶａｌｕｅ １とＶａｌｕｅ ２を異なるように設定することもできる。

ビデオ信号処理装置は、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）のシグナリング／パージング条件にｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇを含ませる。ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＆＆ｃｂＷｉｄｔｈ＜＝Ｖａｌｕｅ １＆＆ｃｂＨｅｉｇｈｔ＜＝Ｖａｌｕｅ ２のようになる。

より詳しくは、図１１は予測しようとするコーディングブロック単位で必要な情報の構造を示し、エンコーダでは該当条件に合わせてシグナリングし、デコーダでも該当条件に合わせてビットストリームから情報をパージングして獲得する。ライン１１１０を参照すると、ビデオ信号処理装置は、該当コーディングブロックの左上側の座標（ｘ０，ｙ０）でｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］がｐｃｍモードが適用されないことを示すのか否かを決定する。ライン１１２０を参照すると、コーディングブロックの左上側の座標（ｘ０，ｙ０）において、ｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］がｐｃｍモードが適用されないことを指示する０の値と同じであれば、ビデオ信号処理装置はｔｒｅｅＴｙｐｅがＳＩＮＧＬＥ＿ＴＲＥＥであるのかＤＵＡＬ＿ＴＲＥＥ＿ＬＵＭＡであるのかを確認することができる。また、ｔｒｅｅＴｙｐｅがＳＩＮＧＬＥ＿ＴＲＥＥであるかＤＵＡＬ＿ＴＲＥＥ＿ＬＵＭＡである場合、ビデオ信号処理装置はＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＢＤＰＣＭの活性化を示すのか否か、現在ブロックの幅が第１値（Ｖａｌｕｅ １）より小さいか或いは同じであるか、または現在ブロックの高さが第２値（Ｖａｌｕｅ ２）より小さいか或いは同じであるかを決定する。ライン１１３０にはＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＢＤＰＣＭの活性化を示すのか否かが記載されていないが、ＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＢＤＰＣＭの活性化を示すのか否かも判断される。ここで、第１値及び第２値は変換スキップを許容する最大ブロックサイズ（ＭａｘＴｓＳｉｚｅ）である。変換スキップを許容する最大ブロックサイズ（ＭａｘＴｓＳｉｚｅ）については既に説明したため、重複する説明は省略する。

ライン１１４０を参照すると、ビデオ信号処理装置はＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであって、現在ブロックの高さが第２値より小さいか同じである場合、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）をビットストリームからパージングするステップ７２０を行う。

イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）は現在ブロックにＢＤＰＣＭが適用されるのか否かを示す。イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）はｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］のような形式で表される。ここで、ｘ０及びｙ０は現在ブロックの座標である。より詳しくは、ｘ０及びｙ０は現在ブロックの左上側ピクセルの座標である。

ライン１１５０を参照すると、ビデオ信号処理装置はイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）がＢＤＰＣＭの使用を示すのか否かを決定する。ライン１１６０を参照すると、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対するイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）をビットストリームからパージングするステップ７３０を行う。イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）は水平方向または垂直方向のうち一つを示す。例えば、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）が０であれば水平方向を示す。また、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）が１であれば垂直方向を示す。しかし、これに限らず、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）が１であれば水平モードを示し、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）が０であれば垂直モードを示してもよい。

イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）はＢＤＰＣＭに適用された予測モードを指示する。予測モードは、１８番イントラ予測モードまたは５０番イントラ予測モードのうち一つである。１８番イントラ予測モードは水平方向予測モードであり、５０番イントラ予測モードは垂直方向予測モードである。イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ［ｘ０］［ｙ０］）の値が０であればＢＤＰＣＭ予測方法は水平方向を示し、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ［ｘ０］［ｙ０］）の値が１であればＢＤＰＣＭ予測方向は垂直方向を示す。また、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ［ｘ０］［ｙ０］）の値が０であれば１８番イントラ予測モードを指示し、１であれば５０番イントラ予測モードを指示する。上位レベルで定義されたＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値によってコーディングブロックにおける該当機能の使用有無が決定される。

イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）及びイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）はクロマ成分及びルマ成分別にパージングされる。イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）及びイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）はクロマ成分に関わらずルマ成分のためにパージングされる。つまり、ビデオ信号処理装置は既に説明したような方式でルマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｆｌａｇ）またはルマ成分に対するイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｄｉｒ＿ｆｌａｇ）をパージングし、類似した方式でクロマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｆｌａｇ）またはクロマ成分に対するイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｄｉｒ＿ｆｌａｇ）をパージングする。
ルマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｆｌａｇ）及びルマ成分に対するイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｄｉｒ＿ｆｌａｇ）を獲得する過程は、クロマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｆｌａｇ）及びクロマ成分に対するイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｄｉｒ＿ｆｌａｇ）を獲得する過程と多少差がある。なぜならば、ルマ成分の現在ブロック及びクロマ成分の現在ブロックは互いに異なり得るためである。より詳しくは、ルマ成分の現在ブロックのサイズまたは位置はクロマ成分の現在ブロックのサイズまたは位置と異なり得る。ビデオ信号処理装置はＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＢＤＰＣＭの活性化を示し、現在ルマコーディングブロックの幅が第１値より小さいか同じでって、現在ルマコーディングブロックの高さが第２値より小さいか同じである場合、ルマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｆｌａｇ）をビットストリームからパージングする。類似して、ビデオ信号処理装置はＢＤＰＣＭ活性情報（ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＢＤＰＣＭの活性化を示し、現在クロマコーディングブロックの幅が第１値より小さいか同じでって、現在クロマコーディングブロックの高さが第２値より小さいか同じである場合、クロマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｆｌａｇ）をビットストリームからパージングする。また、ルマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｆｌａｇ）が現在ルマコーディングブロックにＢＤＰＣＭを適用することを示す場合、現在ルマコーディングブロックに対するルマイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｄｉｒ＿ｆｌａｇ）をビットストリームからパージングするステップを行う。類似して、クロマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｆｌａｇ）が現在クロマコーディングブロックにＢＤＰＣＭを適用することを示す場合、現在クロマコーディングブロックに対するクロマイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｄｉｒ＿ｆｌａｇ）をビットストリームからパージングするステップを行う。ここで、第１値及び第２値は変換スキップを許容する最大ブロックサイズ（ＭａｘＴｓＳｉｚｅ）である。

本開示において、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）は、ルマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｆｌａｇ）及びクロマ成分に対するイントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｆｌａｇ）を含む。また、本開示において、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）は、ルマ成分に対するイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｄｉｒ＿ｆｌａｇ）及びクロマ成分に対するイントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｄｉｒ＿ｆｌａｇ）を含む。

ビデオ信号処理装置は、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）に基づいて現在ブロックを復元するステップ７４０を行う。イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）に基づいて現在ブロックを復元するステップ７４０については図８と共に説明したため、重複する説明は省略する。

図１２は、変換ユニットシンタックスの一部を示す図である。

ＢＤＰＣＭが適用されたコーディングブロックは、変換過程なしに図８で説明した方法で残差信号をコーディングする。該当ブロックが変換過程を適用しないようにするシンタックス変数は、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）である。つまり、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）は該当ブロックに対して変換を適用するのか否かを示す。または、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が予め指定された値と同じであれば、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）は前記現在ブロックに対して変換が適用されないことを示す。変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が１であれば、該当変換ブロックに対して変換がスキップされる。また、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が０であれば、該当変換ブロックに対して変換がスキップされない。しかし、これに限らず、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が０であれば、該当変換ブロックに対して変換がスキップされてもよい。また、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が１であれば、該当変換ブロックに対して変換がスキップされなくてもよい。

変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）はカラー成分別にｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］のような形式で表される。ここで、ｘ０及びｙ０は該当変換ブロックの座標である。より詳しくは、ｘ０及びｙ０は該当ブロックの左上側ピクセルの座標である。既に説明したように、現在ブロックは少なくとも一つの変換ブロックを含む。エンコーダは変換ブロック単位で変換を行い、デコーダは変換ブロック単位で逆変換を行う。

変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）をシグナリング／パージングするための条件として、まず、ｔｕ＿ｃｂｆ＿ｌｕｍａ［ｘ０］［ｙ０］値が１であるのか、ｔｒｅｅＴｙｐｅがＤＵＡＬ＿ＴＹＰＥ＿ＴＲＥＥ＿ＣＨＲＯＭＡと異なるのか、コーディングユニットの幅と高さが３２より小さいかまたは同じであるのか、ＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓＳｐｌｉｔ［ｘ０］［ｙ０］がＩＳＰ＿ＮＯ＿ＳＰＬＩＴと同じであるのか、ｃｕ＿ｓｂｔ＿ｆｌａｇが０であるのか、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）が０であるのかを満足すべきである。また、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＆＆ｔｂＷｉｄｔｈ＜＝ＭａｘＴｓＳｉｚｅ＆＆ｔｂＨｅｉｇｈｔ＜＝ＭａｘＴｓＳｉｚｅの条件も満足すべきである。ｔｂＷｉｄｔｈは変換ブロックの幅を示す変数、ｔｂＨｅｉｇｈｔは変換ブロックの高さを示す変数である。

前記条件は例示的なものであって、前記条件のうち一部は他の条件に代替されるか削除されてもよい。また、他の条件が追加されてもよい。但し、前記条件のうち一部は維持されて、映像のエンコーディングまたはデコーディングの効率を上げる。例えば、既に説明したように、ＢＤＰＣＭが適用されたコーディングブロックはｔｒａｎｓｆｏｒｍ ｓｋｉｐが適用されるため、別途の情報をシグナリング／パージングせずに推論してｔｒａｎｓｆｏｒｍ ｓｋｉｐの適用を知る。つまり、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対して変換を適用するのか否かを示す変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をパージングしない。既に説明したように、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が１であれば、現在ブロックにＢＤＰＣＭが適用されることを示す。イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が現在ブロックにＢＤＰＣＭを適用しないことを示す場合、ビデオ信号処理装置は、上述した条件のうち少なくとも一つを更に判断して、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をパージングするのか否かを決定する。

前記条件のうち一部を満足しなければ変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をパージングしないため、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）が存在しない場合が発生する可能性がある。例えば、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が現在ブロックにＢＤＰＣＭを適用することを示す場合、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）が存在しない。ビデオ信号処理装置は、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）に基づいてｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇを推論し、ｔｒａｎｓｆｏｒｍ ｓｋｉｐの適用可否を知る。

例えば、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）がなく、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）が１であれば、ビデオ信号処理装置は、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）を第１推論値として推論する。ここで、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が１であるということは、現在ブロックにＢＤＰＣＭを適用することを示す。変換スキップ情報の値が第１推論値であれば、変換スキップ情報に当たるブロックに対して変換が適用されないことを示す。

また、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）がなく、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）が０であれば、ビデオ信号処理装置は、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）を第２推論値として推論する。ここで、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が０であるということは、現在ブロックにＢＤＰＣＭを適用しないことを示す。変換スキップ情報の値が第２推論値であれば、変換スキップ情報に当たるブロックに対して変換が適用されることを示す。ここで、第１推論値は１で、第２推論値は０である。しかし、これに限らず、第１推論値は０で、第２推論値は１であってもよい。

ＢＤＰＣＭが適用されたブロックの変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）が１であれば、ｒｅｓｉｄｕａｌ＿ｔｓ＿ｃｏｄｉｎｇ（）関数を呼び出す。この関数によって、図８で変換された残差信号がコーディングされる。更に、同じ方法でｔｂＷｉｄｔｈとｔｂＨｅｉｇｈｔのＭｉｎＢｄｐｃｍＳｉｚｅ条件も追加される。該当値は上位レベルで類似した方法でシグナリングされ計算される。図１３のような条件にもＭｉｎＢｄｐｃｍＳｉｚｅ条件を追加して適用してもよい。

図１３は、変換ユニットシンタックスの一部分内でｔｒａｎｓｆｏｒｍ ｓｋｉｐフラッグのシグナリング／パージング条件を示す図である。

図１３は前記図１２と類似した実施例である。ＢＤＰＣＭが適用されたコーディングブロックはｔｒａｎｓｆｏｒｍ ｓｋｉｐが適用されるため、別途の情報をシグナリング／パージングせずに推論してｔｒａｎｓｆｏｒｍ ｓｋｉｐの適用を知る。よって、ＢＤＰＣＭが適用されないことを指示する条件をｔｒａｎｓｆｏｒｍ ｓｋｉｐフラッグをシグナリング／パージングする条件に追加する。

前記図１３のように、ビデオ信号処理装置は、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をパージングするための条件として、（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＆＆ｔｂＷｉｄｔｈ＜＝ＭａｘＴｓＳｉｚｅ＆＆ｔｂＨｅｉｇｈｔ＜＝ＭａｘＴｓＳｉｚｅ＆＆（！ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］））のような条件を使用する。また、ビデオ信号処理装置は、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１で、ｔｂＷｉｄｔｈ＜＝ＭａｘＴｓＳｉｚｅを満足し、ｔｂＨｅｉｇｈｔ＜＝ＭａｘＴｓＳｉｚｅを満足し、ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］が０であれば変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をパージングする。つまり、ｔｒａｎｓｆｏｒｍ ｓｋｉｐ条件とＢＤＰＣＭが適用されないブロックでのみｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］をシグナリング／パージングするようにする。

変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）をシグナリング／パージングするための条件は以下のようである。ライン１３１０を参照すると、ビデオ信号処理装置は、ｔｕ＿ｃｂｆ＿ｌｕｍａ［ｘ０］［ｙ０］値が１であるのか、ｔｒｅｅＴｙｐｅがＤＵＡＬ＿ＴＹＰＥ＿ＴＲＥＥ＿ＣＨＲＯＭＡと異なるのか、変換ブロックの幅（ｔｂＷｉｄｔｈ）と高さ（ｔｂＨｅｉｇｈｔ）が３２より小さいかまたは同じであるのか、ＩｎｔｒａＳｕｂＰａｒｔｉｔｉｏｎｓＳｐｌｉｔ［ｘ０］［ｙ０］がＩＳＰ＿ＮＯ＿ＳＰＬＩＴと同じであるのか、ｃｕ＿ｓｂｔ＿ｆｌａｇが０であるのか、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）が０であるのかを確認する。既に説明したように、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が０であるということは、現在ブロックにＢＤＰＣＭが適用されないことを意味する。また、ライン１３２０を参照すると、ビデオ信号処理装置は、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ＆＆ｔｂＷｉｄｔｈ＜＝ＭａｘＴｓＳｉｚｅ＆＆ｔｂＨｅｉｇｈｔ＜＝ＭａｘＴｓＳｉｚｅの条件を満足するのか否かを決定する。

前記条件は例示的なものであって、前記条件のうち一部は他の条件に代替されるか削除されてもよい。また、他の条件が追加されてもよい。但し、前記条件のうち一部は維持されて、映像のエンコーディングまたはデコーディングの効率を上げる。例えば、既に説明したように、ＢＤＰＣＭが適用されたコーディングブロックはｔｒａｎｓｆｏｒｍ ｓｋｉｐが適用されるため、別途の情報をシグナリング／パージングしない。つまり、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が現在ブロックにＢＤＰＣＭを適用することを示す場合、現在ブロックに対して変換を適用するのか否かを示す変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をパージングしない。既に説明したように、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が１であれば、現在ブロックにＢＤＰＣＭが適用されることを示す。イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が現在ブロックにＢＤＰＣＭを適用しないことを示す場合、ビデオ信号処理装置は、上述した条件のうち少なくとも一つを更に判断して、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）をパージングするのか否かを決定する。

前記条件のうち少なくとも一つを満足しない場合、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）が存在しない場合が発生する可能性がある。例えば、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が現在ブロックにＢＤＰＣＭを適用することを示す場合、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）が存在しない。ビデオ信号処理装置は、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）に基づいてｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇを推論し、ｔｒａｎｓｆｏｒｍ ｓｋｉｐの適用可否を知る。例えば、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）がなく、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）が１であれば、ビデオ信号処理装置は、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）を１に推論する。ここで、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が１であるということは、現在ブロックにＢＤＰＣＭを適用することを示す。逆に、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）がなく、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ［ｘ０］［ｙ０］）が０であれば、ビデオ信号処理装置は、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ［ｘ０］［ｙ０］）を０に推論する。ここで、イントラＢＤＰＣＭ情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）が０であるということは、現在ブロックにＢＤＰＣＭを適用しないことを示す。このように、エンコーダは重複する情報を伝送せず、デコーダはパージングしないことで、エンコーディング／デコーディングの効率が上がる。エンコーダはｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇを生成しないためエンコーディングの効率を上げ、ビットストリームの容量を減らす。また、デコーダはパージング過程なしに情報を推論することで、コンピューティングの効率を上げる。

変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）はクロマ成分及びルマ成分別にパージングされる。クロマ成分はＣｂ、Ｃｒを含む。変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）はＣｂ及びＣｒ別にパージングされる。変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）はクロマ成分に関わらずルマ成分のためにパージングされてもよい。変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）はルマ成分に関わらずクロマ成分のためにパージングされてもよい。ビデオ信号処理装置は、ルマ成分に対する変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）を獲得し、クロマ成分に対する変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）を獲得する。また、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）がなければ、変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）はクロマ成分及びルマ成分別に推論される。ビデオ信号処理装置は、既に説明したような方法を利用して変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）を推論する。または、ビデオ信号処理装置は、ルマ成分に対する変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）を利用して、クロマ成分に対する変換スキップ情報（ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）を推論してもよい。

図１４は、ＢＤＰＣＭが適用されたブロックの画面内予測モード変数との関係を示す図である。

ＢＤＰＣＭが適用されたブロックはｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ［ｘ０］［ｙ０］の値によってイントラ（画面内）予測モードを指示する。例えば、ビデオ信号処理装置は、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）が０であれば、複数のイントラモードのうち水平方向に当たるイントラ予測モード（１８番モード）を現在ブロックのイントラ予測モードとして選択するステップを行う。また、ビデオ信号処理装置は、イントラＢＤＰＣＭ方向情報（ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ）が１であれば、複数のイントラモードのうち垂直方向に当たるイントラ予測モード（５０モード）を現在ブロックのイントラ予測モードとして選択するステップを行う。

ＢＤＰＣＭが適用されたブロックで使用された画面内予測モードは一般的な画面内予測モードとその方式が同じであるため、該当モードを現在予測ブロックのイントラ予測モードを示す変数（ＩｎｔｒａＰｒｅｄＭｏｄｅＹ［ｘＣｂ］［ｙＣｂ］）として保存して一般コーディングブロックのＭＰＭを誘導する際に使用する。つまり、現在ブロックのイントラ予測モードは、現在ブロックの後で復元される周辺ブロックのイントラ予測モードを決定するために使用される。また、ビデオ信号処理装置は、現在ブロックの後で復元される周辺ブロックのイントラ予測モードを決定するための候補として現在ブロックのイントラ予測モードを保存する。ビデオ信号処理装置は、パージングされた情報に基づいて保存された複数の候補のうち一つを選択して、現在ブロックの後で復元される周辺ブロックのイントラ予測モードを決定する。

また、既に復元されたコーディングブロックのイントラ予測モードは、現在ブロックのイントラ予測モードを決定するために使用される。ビデオ信号処理装置は、現在ブロックのイントラ予測モードを決定するための候補として既に復元されたコーディングブロックのイントラ予測モードを保存する。ビデオ信号処理装置は、パージングされた情報に基づいて保存された複数の候補のうち一つを選択して、現在ブロックのイントラ予測モードを決定する。

例えば、現在ブロックはＢＤＰＣＭが適用されたブロックではない一般ブロックであり、既に復元された隣のブロックのうち一つがＢＤＰＣＭが適用されたブロックで、ｉｎｔｒａ＿ｂｄｐｃｍ＿ｄｉｒ＿ｆｌａｇ［ｘ０］［ｙ０］が０であれば、ＩｎｔｒａＰｒｅｄＭｏｄｅＹ［ｘＣｂ］［ｙＣｂ］は１８番イントラ予測モードを保存する。ビデオ信号処理装置は、一般コーディングブロックをエンコーディングするかデコーディングするために、既に復元された隣のブロックの１８番イントラ予測モードを使用する。より詳しくは、ビデオ信号処理装置は、現在ブロックに対してＭＰＭを誘導する際、既に復元された隣のブロックの１８番イントラ予測モードを使用する。ＢＤＰＣＭが適用されたブロックの予測モードは最終残差信号を最小化することが目的であるため予測方法は同じであってもよいが、残渣のパターンが一般的な状況とは異なり得るため、予め設定された値を使用する。ＢＤＰＣＭの水平方向モードに垂直方向に、ＢＤＰＣＭの垂直方向モードに水平方向に、或いはＢＤＰＣＭの２つ方向に一つのモードにＤＣモードを設定する。

前記内容なデコーダの観点で記述されたが、エンコーダでも同じく動作する。前記内容のうちパージングという用語はビットストリームから情報を獲得する過程で重点的に説明したが、エンコーダの側面ではビットストリームに該当情報を構成すると解釈される。よって、パージングという用語はデコーダの動作にのみ限らず、エンコーダではビットストリームを構成する行為にまで解釈される。

上述した本発明の実施例は多様な手段を介して具現される。例えば、本発明の実施例は、ハードウェア、ファームウェア（ｆｉｒｍｗａｒｅ）、ソフトフェアまたはそれらの組み合わせによって具現される。

ハードウェアによる具現の場合、本発明の実施例による方法は、一つまたはそれ以上のＡＳＩＣｓ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔｓ）、ＤＳＰｓ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒｓ）、ＤＳＤＰｓ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｄｅｖｉｃｅｓ）、ＰＤＬｓ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅｓ）、ＦＰＧＡｓ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙｓ）、プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサなどによって具現される。

ファームフェアやソフトウェアによる具現の場合、本発明の実施例による方法は、上述した機能または動作を行うモジュール、手順または関数などの形態で具現される。ソフトウェアコードは、メモリに貯蔵されてプロセッサによって具現される。前記メモリはプロセッサの内部または外部に位置し、既に公知の多様な手段によってプロセッサとデータを交換する。

上述した本発明の説明は例示のためのものであって、本発明が属する技術分野における通常の知識を有する者は、本発明の技術的思想や必須的特徴を変更せずも他の具体的な形態に容易に変更可能であることを理解できるはずである。よって、上述した実施例は全ての面で例示的なものであり、限定的なものではないと理解すべきである。例えば、単一型として説明されている各構成要素は分散されて実施されてもよく、同じく分散されていると説明されている構成要素も結合された形態で実施されてもよい。

以上、前述した本発明の好ましい実施例は、例示の目的のために開示されたものであり、当業者であれば、以下に添付する特許請求の範囲に開示される本発明の技術的思想とその技術的範囲内で、様々な他の実施例へと改良、変更、代替又は付加などが可能であろう。

Claims (23)

1. デコーディングのためのビデオ信号を処理する方法において、
   ビットストリームからブロック基盤デルタパルス符号変調（Ｂｌｏｃｋ－ｂａｓｅｄ Ｄｅｌｔａ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ；ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報をパージングするステップと、
   前記ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、前記現在ブロックの高さが第２値より小さいか同じである場合、前記現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報をビットストリームからパージングするステップと、
   前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記現在ブロックに対するイントラＢＤＰＣＭ方向情報をビットストリームからパージングするステップと、
   前記イントラＢＤＰＣＭ方向情報に基づいて前記現在ブロックを復元するステップと、
   を含むことを特徴とするビデオ信号を処理する方法。
2. 前記第１値及び前記第２値は、変換スキップを許容する最大ブロックサイズであることを特徴とする請求項１に記載のビデオ信号を処理する方法。
3. 前記イントラＢＤＰＣＭ情報及び前記イントラＢＤＰＣＭ方向情報は、クロマ成分に関わらずルマ成分のためにパージングされることを特徴とする請求項１に記載のビデオ信号を処理する方法。
4. 前記ＢＤＰＣＭ活性情報は、シーケンス（ｓｅｑｕｅｎｃｅ）でシグナリングされることを特徴とする請求項１に記載のビデオ信号を処理する方法。
5. 前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記ビットストリームから前記現在ブロックに当たる変換ブロックの変換スキップ情報をパージングせず、
   前記変換スキップ情報は前記変換スキップ情報の値が第１推論値である場合、前記変換スキップ情報に当たるブロックに対して変換が適用されないことを示すことを特徴とする請求項１に記載のビデオ信号を処理する方法。
6. 前記変換スキップ情報が存在せず、前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記変換スキップ情報を前記第１推論値に推論するステップと、
   前記変換スキップ情報が存在せず、前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用しないことを示す場合、前記変換スキップ情報を第２推論値に推論するステップと、を更に含むことを特徴とする請求項５に記載のビデオ信号を処理する方法。
7. 前記イントラＢＤＰＣＭ方向情報は、水平方向または垂直方法のうち一つを示すことを特徴とする請求項１に記載のビデオ信号を処理する方法。
8. 前記イントラＢＤＰＣＭ方向情報が０である場合、複数のイントラモードのうち水平方向に当たるイントラ予測モードを前記現在ブロックのイントラ予測モードとして選択するステップと、
   前記イントラＢＤＰＣＭ方向情報が１である場合、複数のイントラモードのうち垂直方向に当たるイントラ予測モードを前記現在ブロックのイントラ予測モードとして選択するステップと、を含むことを特徴とする請求項７に記載のビデオ信号を処理する方法。
9. 前記現在ブロックのイントラ予測モードは、前記現在ブロックの後で復元される周辺ブロックのイントラ予測モードを決定するために使用されることを特徴とする請求項８に記載のビデオ信号を処理する方法。
10. 映像をデコーディングするためのビデオ信号処理装置はプロセッサ及びメモリを含み、
    前記プロセッサは前記メモリに保存されている命令語に基づいて、
    ビットストリームからブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報をパージングし、
    前記ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、前記現在ブロックの高さが第２値より小さいか同じである場合、前記現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報をビットストリームからパージングし、
    前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記現在ブロックに対するイントラＢＤＰＣＭ方向情報をビットストリームからパージングし、
    前記イントラＢＤＰＣＭ方向情報に基づいて前記現在ブロックを復元するビデオ信号処理装置。
11. 前記第１値及び前記第２値は、変換スキップを許容する最大ブロックサイズである請求項１０に記載のビデオ信号処理装置。
12. 前記イントラＢＤＰＣＭ情報及び前記イントラＢＤＰＣＭ方向情報は、クロマ成分に関わらずルマ成分のためにパージングされる請求項１０に記載のビデオ信号処理装置。
13. 前記ＢＤＰＣＭ活性情報は、シーケンスでシグナリングされる請求項１０に記載のビデオ信号処理装置。
14. 前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記ビットストリームから前記現在ブロックに当たる変換ブロックの変換スキップ情報をパージングせず、
    前記変換スキップ情報は前記変換スキップ情報の値が第１推論値である場合、前記変換スキップ情報に当たるブロックに対して変換が適用されないことを示す請求項１０に記載のビデオ信号処理装置。
15. 前記プロセッサは前記メモリに保存されている命令語に基づいて、
    前記変換スキップ情報が存在せず、前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記変換スキップ情報を前記第１推論値に推論し、
    前記変換スキップ情報が存在せず、前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用しないことを示す場合、前記変換スキップ情報を第２推論値に推論する請求項１４に記載のビデオ信号処理装置。
16. 前記イントラＢＤＰＣＭ方向情報は、水平方向または垂直方法のうち一つを示す請求項１０に記載のビデオ信号処理装置。
17. 前記プロセッサは前記メモリに保存されている命令語に基づいて、
    前記イントラＢＤＰＣＭ方向情報が０である場合、複数のイントラモードのうち水平方向に当たるイントラ予測モードを前記現在ブロックのイントラ予測モードとして選択するし、
    前記イントラＢＤＰＣＭ方向情報が１である場合、複数のイントラモードのうち垂直方向に当たるイントラ予測モードを前記現在ブロックのイントラ予測モードとして選択する請求項１６に記載のビデオ信号処理装置。
18. 前記現在ブロックのイントラ予測モードは、前記現在ブロックの後で復元される周辺ブロックのイントラ予測モードを決定するために使用される請求項１７に記載のビデオ信号処理装置。
19. エンコーディングのためのビデオ信号を処理する方法において、
    ブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報を生成するステップと、
    前記ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、前記現在ブロックの高さが第２値より小さいか同じである場合、前記現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報を生成するステップと、前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記現在ブロックに対するイントラＢＤＰＣＭ方向情報を生成するステップと、
    前記ＢＤＰＣＭ活性情報、前記イントラＢＤＰＣＭ情報、及び前記イントラＢＤＰＣＭ方向情報に基づいてビットストリームを生成するステップと、
    を含むことを特徴とするビデオ信号を処理する方法。
20. 前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記現在ブロックに当たる変換ブロックの変換スキップ情報を生成しないことを特徴とする請求項１９に記載のビデオ信号を処理する方法。
21. エンコーディングのためのビデオ信号処理装置はプロセッサ及びメモリを含み、
    前記プロセッサは前記メモリに保存されている命令語に基づいて、
    ブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報を生成し、
    前記ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、前記現在ブロックの高さが第２値より小さいか同じである場合、前記現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報を生成し、
    前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記現在ブロックに対するイントラＢＤＰＣＭ方向情報を生成し、
    前記ＢＤＰＣＭ活性情報、前記イントラＢＤＰＣＭ情報、及び前記イントラＢＤＰＣＭ方向情報に基づいてビットストリームを生成するビデオ信号処理装置。
22. 前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記現在ブロックに当たる変換ブロックの変換スキップ情報を生成しない請求項２１に記載のビデオ信号処理装置。
23. ブロック基盤デルタパルス符号変調（ＢＤＰＣＭ）の活性可否を示すＢＤＰＣＭ活性情報を生成するステップと、
    前記ＢＤＰＣＭ活性情報がＢＤＰＣＭの活性化を示し、現在ブロックの幅が第１値より小さいか同じであり、前記現在ブロックの高さが第２値より小さいか同じである場合、前記現在ブロックにＢＤＰＣＭが適用されるのか否かを示すイントラＢＤＰＣＭ情報を生成するステップと、
    前記イントラＢＤＰＣＭ情報が前記現在ブロックにＢＤＰＣＭを適用することを示す場合、前記現在ブロックに対するイントラＢＤＰＣＭ方向情報を生成するステップと、
    前記ＢＤＰＣＭ活性情報、前記イントラＢＤＰＣＭ情報、及び前記イントラＢＤＰＣＭ方向情報に基づいてビットストリームを生成するステップと、
    を含むエンコーディングされたビデオ信号を記録したコンピュータによって読み取り可能な記録媒体。

Images