JP2023510535A - 量子化パラメータを獲得するためのビデオ復号方法及びその装置、量子化パラメータを伝送するためのビデオ符号化方法及びその装置 - Google Patents

量子化パラメータを獲得するためのビデオ復号方法及びその装置、量子化パラメータを伝送するためのビデオ符号化方法及びその装置 Download PDF

Info

Publication number
JP2023510535A
JP2023510535A JP2022542286A JP2022542286A JP2023510535A JP 2023510535 A JP2023510535 A JP 2023510535A JP 2022542286 A JP2022542286 A JP 2022542286A JP 2022542286 A JP2022542286 A JP 2022542286A JP 2023510535 A JP2023510535 A JP 2023510535A
Authority
JP
Japan
Prior art keywords
coding unit
difference value
current
picture
slice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022542286A
Other languages
English (en)
Other versions
JPWO2021141451A5 (ja
Inventor
パク，ミンウ
パク，ミンス
チェー，キホ
ピョ，インジ
キム，チャンヨル
ソン，ユミ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=76788193&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2023510535(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2023510535A publication Critical patent/JP2023510535A/ja
Publication of JPWO2021141451A5 publication Critical patent/JPWO2021141451A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

一実施形態によるビデオ復号方法は、ピクチャパラメータセットから、現在ピクチャに適用されるＱＰ（quantization parameter）初期値、及びピクチャヘッダＱＰ差分値情報を獲得し、該ピクチャヘッダＱＰ差分値情報が、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在することを示す場合、ピクチャヘッダから、現在ピクチャのための第１ ＱＰ差分値を獲得し記現在ピクチャに含まれた符号化単位のためのＱＰを、ＱＰ初期値と第１ ＱＰ差分値とを利用して決定し、ＱＰを利用し、符号化単位について逆量子化を行い、符号化単位の変換係数を獲得し、変換係数を利用し、符号化単位を復元する方法を提供する。

Description

本発明は、ビデオ復号方法及びその装置、ビデオ符号化方法及びその装置に係り、量子化パラメータ（ＱＰ：quantization parameter）を効果的に遂行し、ビデオを符号化する方法及びその装置、ビデオを復号する方法及びその装置に関する。
従来の圧縮方式の場合、ピクチャに含まれる符号化単位の大きさを決定する過程において分割するか否かということを決定した後、画一的に４個の同一サイズの符号化単位に分割する再帰的分割過程を介し、正方形の符号化単位を決定した。しかしながら、最近、高解像度の映像につき、正方形という画一的な形態の符号化単位利用によって引き起こされる復元映像の画質劣化が問題になっている。従って、高解像度映像を多様な形態の符号化単位に分割する方法及びその装置が提案されている。
本発明が解決しようとする課題は、ビデオ復号方法及びその装置、ビデオ符号化方法及びその装置に係り、ビデオ符号化装置において、量子化パラメータ（ＱＰ）差分値を効率的に伝送する方法、ビデオ復号装置において、ＱＰ差分値を効率的に獲得する方法を解決することである。
本開示で提供する一実施形態によるビデオ復号方法は、ピクチャパラメータセットから、現在ピクチャに適用される量子化パラメータ（ＱＰ）初期値を獲得し、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在するか否かということを示すピクチャヘッダＱＰ差分値情報を、前記ピクチャパラメータセットから獲得する段階と、前記ピクチャヘッダＱＰ差分値情報が、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在することを示す場合、前記ピクチャヘッダから、前記現在ピクチャのための第１ ＱＰ差分値を獲得する段階と、前記現在ピクチャに含まれた符号化単位のためのＱＰを、前記ＱＰ初期値と前記第１ ＱＰ差分値とを利用して決定する段階と、前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階と、前記変換係数を利用し、前記符号化単位を復元する段階と、を含むものでもある。
一実施形態によるビデオ符号化方法及びビデオ復号方法により、ピクチャの特性またはデータ伝送効率により、量子化パラメータ（ＱＰ）の差分値を伝送する方式を決定し、その方式により、ＱＰの差分値をシグナリングすることができる。
本明細書で引用される図面をさらに十分に理解するために、各図面の簡単な説明が提供される：
一実施形態による映像復号装置の概略的なブロック図である。 一実施形態による映像復号方法のフローチャートである。 一実施形態による、映像復号装置が現在符号化単位を分割し、少なくとも１つの符号化単位を決定する過程を図示する図である。 一実施形態による、映像復号装置が非正方形の形態である符号化単位を分割し、少なくとも１つの符号化単位を決定する過程を図示する図である。 一実施形態による映像復号装置がブロック形態情報及び分割形態モード情報のうち少なくとも一つに基づき、符号化単位を分割する過程を図示する図である。 一実施形態による映像復号装置が奇数個の符号化単位のうち、所定の符号化単位を決定するための方法を図示する図である。 一実施形態による映像復号装置が現在符号化単位を分割し、複数個の符号化単位を決定する場合、複数個の符号化単位が処理される順序を図示する図である。 一実施形態による映像復号装置が所定の順序で符号化単位が処理されえない場合、現在符号化単位が奇数個の符号化単位に分割されることを決定する過程を図示する図である。 一実施形態による映像復号装置が第１符号化単位を分割し、少なくとも１つの符号化単位を決定する過程を図示する図である。 一実施形態による映像復号装置が第１符号化単位が分割されて決定された非正方形状の第２符号化単位が所定の条件を満足する場合、第２符号化単位が分割されうる形態が制限されることを図示する図である。 一実施形態による、分割形態モード情報が４個の正方形状の符号化単位に分割することを示すことができない場合、映像復号装置が正方形状の符号化単位を分割する過程を図示する図である。 一実施形態による、複数個の符号化単位間の処理順序が符号化単位の分割過程によっても異なりうることを図示した図である。 一実施形態による、符号化単位が再帰的に分割され、複数個の符号化単位が決定される場合、符号化単位の形態及び大きさが変わることにより、符号化単位の深度が決定される過程を図示する図である。 一実施形態による、符号化単位の形態及び大きさによって決定されうる深度、及び符号化単位区分のためのインデックス（ｐＰＩＤ：part index）を図示する図である。 一実施形態による、ピクチャに含まれる複数個の所定のデータ単位により、複数個の符号化単位が決定されたところを図示する図である。 映像符号化及び復号システムのブロック図を示した図である。 一実施形態によるビデオ復号装置のブロック図である。 一実施形態によるビデオ復号方法のフローチャートである。 一実施形態によるビデオ符号化装置のブロック図である。 一実施形態によるビデオ符号化方法のフローチャートである。 一実施形態による、ピクチャレベルまたはスライスレベルで量子化パラメータ（ＱＰ）を誘導するための概要図である。 一実施形態による、ピクチャヘッダＱＰ差分値情報が含まれたピクチャパラメータセットを図示する図である。 一実施形態による、現在ピクチャのＱＰ差分値が含まれたピクチャヘッダを図示する図である。 一実施形態による、現在スライスのＱＰ差分値が含まれたスライスヘッダを図示する図である。 一実施形態による、ピクチャヘッダにデブロッキングフィルタ関連パラメータが含まれているか否かということを示す情報が含まれたピクチャパラメータセットを図示する図である。 一実施形態による、現在ピクチャのデブロッキングフィルタ関連パラメータが含まれたピクチャヘッダを図示する図である。 一実施形態による、現在スライスのデブロッキングフィルタ関連パラメータが含まれたスライスヘッダを図示する図である。 一実施形態による、ピクチャヘッダに、各種ツール関連パラメータが含まれているか否かということを示す情報が含まれたピクチャパラメータセットを図示する図である。 一実施形態による、現在ピクチャの加重値予測関連パラメータ、ＳＡＯ（sample adaptive offset）関連パラメータ、及び参照ピクチャリスト関連パラメータが含まれたピクチャヘッダを図示する図である。 一実施形態による、現在ピクチャのＡＬＦ（adaptive loop filter）関連パラメータが含まれたピクチャヘッダを図示する図である。 一実施形態による、現在スライスの参照ピクチャリスト関連パラメータ、加重値予測関連パラメータ及びＳＡＯ関連パラメータが含まれたスライスヘッダを図示する図である。 一実施形態による、現在スライスのＡＬＦ関連パラメータが含まれたスライスヘッダを図示する図である。
本開示で提供する一実施形態によるビデオ復号方法は、ピクチャパラメータセットから、現在ピクチャに適用される量子化パラメータ（ＱＰ：quantization parameter）初期値を獲得し、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在するか否かということを示すピクチャヘッダＱＰ差分値情報を、前記ピクチャパラメータセットから獲得する段階と、前記ピクチャヘッダＱＰ差分値情報が、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在することを示す場合、前記ピクチャヘッダから、前記現在ピクチャのための第１ ＱＰ差分値を獲得する段階と、前記現在ピクチャに含まれた符号化単位のためのＱＰを、前記ＱＰ初期値と前記第１ ＱＰ差分値とを利用して決定する段階と、前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階と、前記変換係数を利用し、前記符号化単位を復元する段階と、を含むものでもある。
一実施形態による前記ビデオ復号方法は、前記ピクチャヘッダＱＰ差分値情報が、前記ピクチャヘッダに、前記ＱＰ差分値情報が存在しないことを示す場合、前記現在ピクチャに含まれた現在スライスのスライスヘッダから、前記現在スライスのための第２ ＱＰ差分値を獲得する段階と、前記現在スライスに含まれた符号化単位のためのＱＰを、前記ＱＰ初期値と前記第２ ＱＰ差分値とを利用して決定する段階と、前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階と、前記変換係数を利用し、前記符号化単位を復元する段階と、をさらに含むものでもある。
一実施形態により、前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階は、前記ピクチャヘッダから、前記現在ピクチャのルマ成分のための前記ＱＰ差分値を獲得する段階と、前記ＱＰ初期値と、前記ルマ成分のための前記第１ ＱＰ差分値と、を加えることにより、前記現在ピクチャに含まれるスライスのルマ成分のためのＱＰを決定する段階と、前記スライスのルマ成分のためのＱＰを利用し、前記現在ピクチャに含まれ、前記スライスに含まれる前記符号化単位のＱＰを決定する段階と、を含むものでもある。
一実施形態による、前記符号化単位のＱＰを決定する段階は、前記符号化単位のためのＱＰ差分値をビットストリームから獲得する段階と、前記スライスのルマ成分のためのＱＰと、前記符号化単位のためのＱＰ差分値と、を利用し、前記符号化単位のルマ成分のためのＱＰを決定する段階と、を含むものでもある。
一実施形態による、前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階は、前記スライスヘッダから、前記現在スライスのルマ成分のための前記第２ ＱＰ差分値を獲得する段階と、前記ＱＰ初期値と、前記ルマ成分のための前記第２ ＱＰ差分値と、を加えることにより、前記現在スライスのルマ成分のためのＱＰを決定する段階と、前記現在スライスのルマ成分のためのＱＰを利用し、前記現在スライスに含まれた前記符号化単位のＱＰを決定する段階と、を含むものでもある。
一実施形態による、前記符号化単位のＱＰを決定する段階は、前記符号化単位のためのＱＰ差分値をビットストリームから獲得する段階と、前記現在スライスのルマ成分のためのＱＰと、前記符号化単位のためのＱＰ差分値と、を利用し、前記符号化単位のルマ成分のためのＱＰを決定する段階と、を含むものでもある。
一実施形態による、前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階は、前記スライスヘッダから、前記現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値と、前記現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値と、を獲得する段階と、前記現在スライスに含まれた現在符号化単位のＣｂクロマ成分のためのＱＰを、前記現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値を利用して更新することにより、前記現在符号化単位のＣｂクロマ成分のためのＣｂ ＱＰを決定する段階と、前記現在符号化単位のＣｒクロマ成分のためのＱＰを、前記現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値を利用して更新することにより、前記現在符号化単位のＣｒクロマ成分のためのＣｒ ＱＰを決定する段階と、を含むものでもある。
本開示で提供する一実施形態によるビデオ復号装置は、ピクチャパラメータセットから、現在ピクチャに適用されるＱＰ初期値を獲得し、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在するか否かということを示すピクチャヘッダＱＰ差分値情報を、前記ピクチャパラメータセットから獲得し、前記ピクチャヘッダＱＰ差分値情報が、前記ピクチャヘッダに、前記ＱＰ差分値情報が存在することを示せば、前記ピクチャヘッダから、現在ピクチャのための第１ ＱＰ差分値を獲得する獲得部と、前記ピクチャヘッダＱＰ差分値情報が、前記ピクチャヘッダに、前記ＱＰ差分値情報が存在することを示せば、前記現在ピクチャに含まれた符号化単位のためのＱＰを、前記ＱＰ初期値と前記第１ ＱＰ差分値とを利用して決定し、前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得し、前記符号化単位の変換係数を利用し、前記符号化単位を復元する復号部と、を含むものでもある。
本開示で提供する一実施形態によるビデオ符号化方法は、現在ピクチャに適用されるＱＰ初期値を決定する段階と、ピクチャ別に、前記ＱＰ差分値を決定する場合、現在ピクチャで使用されたＱＰと、前記ＱＰ初期値との第１ ＱＰ差分値を決定し、前記第１ ＱＰ差分値を含む、前記現在ピクチャに係わるピクチャヘッダを生成する段階と、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在するか否かということを示すピクチャヘッダＱＰ差分値情報と、前記ＱＰ初期値とを含む前記ピクチャパラメータセットを生成する段階と、を含むものでもある。
一実施形態による前記ビデオ符号化方法は、スライス別に、前記ＱＰ差分値を決定する場合、前記現在ピクチャに含まれた現在スライスで使用されたＱＰと、前記ＱＰ初期値との第２ ＱＰ差分値を決定し、前記第２ ＱＰ差分値を含む、前記現在スライスに係わるスライスヘッダを生成する段階をさらに含むものでもある。
一実施形態による、前記第１ ＱＰ差分値を含む、前記現在ピクチャに係わるピクチャヘッダを生成する段階は、前記現在ピクチャに含まれるスライスのルマ成分のためのＱＰを決定する段階と、前記現在ピクチャに含まれるスライスのルマ成分のためのＱＰと、前記ＱＰ初期値との差値を利用し、前記現在ピクチャのルマ成分のための前記第１ ＱＰ差分値を決定する段階と、を含むものでもある。
一実施形態による、前記第１ ＱＰ差分値を決定する段階は、前記符号化単位のルマ成分のためのＱＰと、前記スライスのルマ成分のためのＱＰとの差値を利用し、前記符号化単位のためのＱＰ差分値を決定する段階と、前記符号化単位のためのＱＰ差分値を符号化する段階と、を含むものでもある。
一実施形態による、前記第２ ＱＰ差分値を含む、前記現在スライスに係わるスライスヘッダを生成する段階は、前記現在スライスのルマ成分のためのＱＰを決定する段階と、前記現在スライスのルマ成分のためのＱＰと、前記ＱＰ初期値との差値を利用し、前記現在スライスのルマ成分のための前記第２ ＱＰ差分値を決定する段階と、を含むものでもある。
一実施形態による、前記第２ ＱＰ差分値を決定する段階は、前記符号化単位のルマ成分のためのＱＰから、前記現在スライスのルマ成分のためのＱＰを差し引くことにより、前記符号化単位のためのＱＰ差分値を決定する段階と、前記符号化単位のためのＱＰ差分値を符号化する段階と、を含むものでもある。
一実施形態による、前記第２ ＱＰ差分値を決定する段階は、前記現在スライスに含まれた現在符号化単位のＣｂクロマ成分のＱＰを決定するための、前記現在符号化単位のＣｂクロマ成分のためのＣｂ ＱＰ差分値を決定する段階と、前記現在スライスに含まれた現在符号化単位のＣｒクロマ成分のＱＰを決定するための、前記現在符号化単位のＣｒクロマ成分のためのＣｒ ＱＰ差分値を決定する段階と、前記現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値と、前記現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値と、を符号化し、前記Ｃｂ ＱＰ差分値と前記Ｃｒ ＱＰ差分値とを含む前記現在スライスのためのスライスヘッダを生成する段階と、を含むものでもある。
本開示で提供する一実施形態によるビデオ復号方法をコンピュータで遂行するためのプログラムが記録された、コンピュータで読み取り可能な記録媒体が提供される。
本開示で提供する一実施形態によるビデオ符号化方法をコンピュータで遂行するためのプログラムが記録された、コンピュータで読み取り可能な記録媒体が提供される。
本開示は、多様な変更を加えることができ、さまざまな実施形態を有することができるが、特定実施形態を図面に例示し、それらについて、詳細な説明を介して詳細に説明する。しかしながら、それらは、本開示の実施形態について限定するものではなく、本開示は、さまざまな実施形態の思想及び技術範囲に含まれる全ての変更、均等物ないし代替物を含むものであると理解されなければならない。
本実施形態の説明において、関連公知技術に係わる具体的な説明が、本開示の要旨を必要以上に不明確にしてしまうと判断される場合、その詳細な説明を省略する。また、明細書の説明過程で利用される数（例：第１、第２など）は、１つの構成要素を他の構成要素と区分するための識別記号に過ぎない。
また、本明細書において、一構成要素が他の構成要素と「連結される」とか「接続される」というように言及されたときには、前記一構成要素が前記他の構成要素と直接連結されるか、あるいは直接接続されもし、特別に反対となる記載が存在しない以上、中間に、さらに他の構成要素を媒介させて連結されるか、あるいは接続されもすると理解されなければならないのである。
また、本明細書において、「～部（ユニット）」、「モジュール」などと表現される構成要素は、２個以上の構成要素が１つの構成要素に合わされるか、あるいは１つの構成要素がさらに細分化された機能別に２個以上に分化されもする。また、以下で説明する構成要素それぞれは、自体が担当する主機能以外にも、他の構成要素が担当する機能のうち一部または全部の機能を追加して遂行することもでき、構成要素それぞれが担当する主機能のうち一部機能が、他の構成要素によって専担されて遂行されるということは、言うまでもない。
また、本明細書において、「映像（image）」または「ピクチャ」は、ビデオの静止映像や動画、すなわち、ビデオそれ自体を示しうる。
また、本明細書において「サンプル」は、映像のサンプリング位置に割り当てられたデータであり、プロセッシング対象になるデータを意味する。例えば、空間領域の映像において、画素値、変換領域上の変換係数がサンプルでもある。そのような少なくとも１つのサンプルを含む単位をブロックと定義することができる。
また、本明細書において、「現在ブロック（current block）」は、符号化または復号する現在映像の最大符号化単位、符号化単位、予測単位または変換単位のブロックを意味しうる。
また、本明細書において、ある動きベクトルがリスト０方向であるというのは、リスト０に含まれた参照ピクチャ内ブロックを示すために利用される動きベクトルであるということを意味し、アル動きベクトルがリスト１方向であるというのは、リスト１に含まれた参照ピクチャ内ブロックを示すために利用される動きベクトルであるということを意味しうる。また、ある動きベクトルが単方向であるというのは、リスト０またはリスト１に含まれた参照ピクチャ内ブロックを示すために利用される動きベクトルであるということを意味し、ある動きベクトルが双方向であるというのは、動きベクトルが、リスト０方向の動きベクトルと、リスト１方向の動きベクトルとを含むということを意味しうる。
また、本明細書において、ブロックの「バイナリ分割（binary split）」とは、ブロックの幅または高さが半分である２個の下位ブロックを生成せしめる分割を意味する。具体的には、現在ブロックに「バイナリ垂直分割」が行われれ、現在ブロック幅の半分地点において、垂直方向（縦長方向）に分割が行われるので、現在ブロック幅の半分である幅を有し、現在ブロック高と同一高さを有する２個の下位ブロックが生成されうる。現在ブロックに「バイナリ水平分割」が行われれ、現在ブロック高の半分地点において、水平方向（横長方向）に分割が行われるので、現在ブロック高の半分である高さを有し、現在ブロックの幅は、同一幅を有する２個の下位ブロックが生成されうる。
また、本明細書において、ブロックの「ターナリ分割（ternary split）」とは、ブロックの幅または高さが１：２：１比率に分割され、３個の下位ブロックを生成せしめる分割を意味する。具体的には、現在ブロックに「ターナリ垂直分割」が行われれ、現在ブロック幅の１：２：１比率地点において、垂直方向（縦長方向）に分割が行われるので、現在ブロック幅の１／４である幅を有し、現在ブロックと高さが同一である２個の下位ブロックと、現在ブロック幅の２／４である幅を有し、現在ブロック高と同一高さを有する１個の下位ブロックと、が生成されうる。現在ブロックに「ターナリ水平分割」が行われれ、現在ブロック高の１：２：１比率地点において、水平方向（横長方向）に分割が行われるので、現在ブロック高の１／４である高さを有し、現在ブロックの幅と同一幅を有する２個の下位ブロックと、現在ブロック高の２／４である高さを有し、現在ブロックの幅と同一幅を有する１個の下位ブロックと、が生成されうる。
また、本明細書において、ブロックの「クアッド分割（quad split）」とは、ブロックの幅及び高さが１：１比率に分割され、４個の下位ブロックを生成せしめる分割を意味する。具体的には、現在ブロックに「クアッド分割」が行われれ、現在ブロック幅の半分地点において、垂直方向（縦長方向）に分割が行われ、現在ブロック高の半分地点において、水平方向（横長方向）に分割が行われるので、現在ブロック幅の１／２である幅を有し、現在ブロック高の１／２である高さを有する４個の下位ブロックが生成されうる。
以下、図１ないし図１６を参照し、一実施形態による、映像符号化装置及び映像復号装置、映像符号化方法及び映像復号方法について説明される。図３ないし図１６を参照し、一実施形態による、映像のデータ単位を決定する方法について説明され、図１７ないし図４０を参照し、前記決定されたデータ単位を利用する一実施形態によるビデオ符号化／復号方法が後述される。
以下、図１及び図２を参照し、本開示の一実施形態による、多様な形態の符号化単位に基づき、適応的に選択するための方法及び装置について説明される。
図１は、一実施形態による映像復号装置の概略的なブロック図を図示する。
映像復号装置１００は、受信部１１０及び復号部１２０を含むものでもある。受信部１１０及び復号部１２０は、少なくとも１つのプロセッサを含むものでもある。また、受信部１１０及び復号部１２０は、少なくとも１つのプロセッサが遂行する命令語を保存するメモリを含むものでもある。
受信部１１０は、ビットストリームを受信することができる。該ビットストリームは、後述される映像符号化装置２２００が映像を符号化した情報を含む。また、ビットストリームは、映像符号化装置２２００から送信されうる。映像符号化装置２２００及び映像復号装置１００は、有線または無線によっても連結され、受信部１１０は、有線または無線を介し、ビットストリームを受信することができる。受信部１１０は、光学メディア、ハードディスクのような記録媒体から、ビットストリームを受信することができる。復号部１２０は、受信されたビットストリームから獲得された情報に基づき、映像を復元することができる。復号部１２０は、映像を復元するためのシンタックスエレメントを、ビットストリームから獲得することができる。復号部１２０は、シンタックスエレメントに基づき、映像を復元することができる。
映像復号装置１００の動作については、図２と共に、さらに詳細に説明する。
図２は、一実施形態による映像復号方法のフローチャートを図示する。
本開示の一実施形態によれば、受信部１１０は、ビットストリームを受信する。
映像復号装置１００は、ビットストリームから、符号化単位の分割形態モードに対応するビンストリングを獲得する段階（２１０）を遂行する。映像復号装置１００は、符号化単位の分割規則を決定する段階（２２０）を遂行する。また、映像復号装置１００は、分割形態モードに対応するビンストリング、及び前記分割規則のうち少なくとも一つに基づき、符号化単位を複数の符号化単位に分割する段階（２３０）を遂行する。映像復号装置１００は、分割規則を決定するために、符号化単位の幅及び高さの比率による、前記符号化単位の大きさの許容可能な第１範囲を決定することができる。映像復号装置１００は、分割規則を決定するために、符号化単位の分割形態モードによる、符号化単位の大きさの許容可能な第２範囲を決定することができる。
以下においては、本開示の一実施形態による、符号化単位の分割について詳細に説明する。
まず、１つのピクチャ（picture）は、１以上のスライス、あるいは１以上のタイルにも分割される。１つのスライス、あるいは１つのタイルは、１以上の最大符号化単位（ＣＴＵ：coding tree unit）のシーケンスでもある。最大符号化単位（ＣＴＵ）と対比される概念として、ｌ最大符号化ブロック（ＣＴＢ：coding tree block）がある。
最大符号化ブロック（ＣＴＢ）は、ＮｘＮ個のサンプルを含むＮｘＮブロックを意味する（Ｎは、整数である）。各カラー成分は、１以上の最大符号化ブロックにも分割される。
ピクチャが３個のサンプルアレイ（Ｙ，Ｃｒ，Ｃｂ成分別サンプルアレイ）を有する場合、最大符号化単位（ＣＴＵ）とは、ルマサンプルの最大符号化ブロック、及びそれに対応するクロマサンプルの２個の最大符号化ブロックと、ルマサンプル、クロマサンプルを符号化するのに利用されるシンタックス構造と、を含む単位である。該ピクチャがモノクロムピクチャである場合、最大符号化単位とは、モノクロムサンプルの最大符号化ブロックと、モノクロムサンプルを符号化するのに利用されるシンタックス構造と、を含む単位である。該ピクチャがカラー成分別に分離されるカラープレーンに符号化されるピクチャである場合、最大符号化単位とは、当該ピクチャと、ピクチャのサンプルを符号化するのに利用されるシンタックス構造と、を含む単位である。
１つの最大符号化ブロック（ＣＴＢ）は、ＭｘＮ個のサンプルを含むＭｘＮ符号化ブロックにも分割される（Ｍ、Ｎは、整数である）。
ピクチャがＹ，Ｃｒ，Ｃｂ成分別サンプルアレイを有する場合、符号化単位（ＣＵ：coding unit）とは、ルマサンプルの符号化ブロック、及びそれに対応するクロマサンプルの２個の符号化ブロックと、ルマサンプル、クロマサンプルを符号化するのに利用されるシンタックス構造と、を含む単位である。該ピクチャがモノクロムピクチャである場合、符号化単位とは、モノクロムサンプルの符号化ブロックと、モノクロムサンプルを符号化するのに利用されるシンタックス構造と、を含む単位である。該ピクチャがカラー成分別に分離されるカラープレーンに符号化されるピクチャである場合、符号化単位とは、当該ピクチャと、ピクチャのサンプルを符号化するのに利用されるシンタックス構造と、を含む単位である。
前述のように、最大符号化ブロックと最大符号化単位は、互いに区別される概念であり、符号化ブロックと符号化単位は、互いに区別される概念である。すなわち、（最大）符号化単位は、当該サンプルを含む（最大）符号化ブロックと、それに対応するシンタックス構造と、を含むデータ構造を意味する。しかしながら、当業者が、（最大）符号化単位または（最大）符号化ブロックが、所定個数のサンプルを含む所定サイズのブロックを称するということを理解することができるので、以下、本明細書においては、最大符号化ブロック及び最大符号化単位、または符号化ブロック及び符号化単位を特別な事情がない限り、区別せずに言及する。
映像は、最大符号化単位（ＣＴＵ）にも分割される。該最大符号化単位の大きさは、ビットストリームから獲得された情報に基づいても決定される。該最大符号化単位の形態は、同一サイズの正方形を有することができる。しかしながら、それに限定されるものではない。
例えば、ビットストリームから、ルマ符号化ブロックの最大サイズに係わる情報が獲得されうる。例えば、ルマ符号化ブロックの最大サイズに係わる情報が示すルマ符号化ブロックの最大サイズは、４ｘ４、８ｘ８、１６ｘ１６、３２ｘ３２、６４ｘ６４、１２８ｘ１２８、２５６ｘ２５６のうち一つでもある。
例えば、ビットストリームから、２分割が可能なルマ符号化ブロックの最大サイズと、ルマブロックサイズ差とに係わる情報が獲得されうる。ルマブロックサイズ差に係わる情報は、ルマ最大符号化単位と、２分割が可能な最大ルマ符号化ブロックとの大きさ差を示しうる。従って、ビットストリームから獲得された２分割が可能なルマ符号化ブロックの最大サイズに係わる情報と、ルマブロックサイズ差に係わる情報と、を結合すれば、ルマ最大符号化単位の大きさが決定されうる。ルマ最大符号化単位の大きさを利用すれば、クロマ最大符号化単位の大きさも、決定されうる。例えば、カラーフォーマットにより、Ｙ：Ｃｂ：Ｃｒ比率が４：２：０であるならば、クロマブロックの大きさは、ルマブロックの大きさの半分でもあり、同様に、クロマ最大符号化単位の大きさは、ルマ最大符号化単位の大きさの半分でもある。
一実施形態によれば、バイナリ分割が可能なルマ符号化ブロックの最大サイズに係わる情報は、ビットストリームから獲得するので、バイナリ分割が可能なルマ符号化ブロックの最大サイズは、可変的に決定されうる。それと異なり、ターナリ分割が可能なルマ符号化ブロックの最大サイズは、固定されうる。例えば、Ｉピクチャにおいて、ターナリ分割が可能なルマ符号化ブロックの最大サイズは、３２ｘ３２であり、ＰピクチャまたはＢピクチャにおいて、ターナリ分割が可能なルマ符号化ブロックの最大サイズは、６４ｘ６４でもある、。
また、最大符号化単位は、ビットストリームから獲得された分割形態モード情報に基づき、符号化単位にも階層的に分割される。分割形態モード情報として、クアッド分割いかんを示す情報、多分割いかんを示す情報、分割方向情報及び分割タイプ情報のうち少なくとも一つが、ビットストリームからも獲得される。
例えば、クアッド分割いかんを示す情報は、現在符号化単位がクアッド分割（ＱＵＡＤ＿ＳＰＬＩＴ）されるか否かということ、またはクアッド分割されないか否かということを示しうる。
現在符号化単位がクアッド分割されなければ、多分割いかんを示す情報は、現在符号化単位がそれ以上分割されないか（ＮＯ＿ＳＰＬＩＴ）、あるいはバイナリ／ターナリ分割されるか否かということを示しうる。
現在符号化単位がバイナリ分割されるか、あるいはターナリ分割されれば、分割方向情報は、現在符号化単位が水平方向または垂直方向のうち一つに分割されることを示す。
現在符号化単位が、水平方向または垂直方向に分割されれば、分割タイプ情報は、現在符号化単位を、バイナリ分割またはターナリ分割によって分割することを示す。
分割方向情報及び分割タイプ情報により、現在符号化単位の分割モードが決定されうる。現在符号化単位が、水平方向にバイナリ分割される場合の分割モードは、バイナリ水平分割（ＳＰＬＩＴ＿ＢＴ＿ＨＯＲ）、水平方向にターナリ分割される場合の分割モードは、ターナリ水平分割（ＳＰＬＩＴ＿ＴＴ＿ＨＯＲ）、垂直方向にバイナリ分割される場合の分割モードは、バイナリ垂直分割（ＳＰＬＩＴ＿ＢＴ＿ＶＥＲ）、及び垂直方向にターナリ分割される場合の分割モードは、ターナリ垂直分割（ＳＰＬＩＴ＿ＢＴ＿ＶＥＲ）と決定されうる。
映像復号装置１００は、ビットストリームから、分割形態モード情報を１つのビンストリングから獲得することができる。映像復号装置１００が受信したビットストリームの形態は、fixed length binary code、unary code、truncated unary code、既決定バイナリコードなどを含むものでもある。該ビンストリングは、情報を二進数の羅列で示したものである。該ビンストリングは、少なくとも１ビットによっても構成される。映像復号装置１００は、分割規則に基づき、ビンストリングに対応する分割形態モード情報を獲得することができる。映像復号装置１００は、１つのビンストリングに基づき、符号化単位をクアッド分割するか否かということ、分割しないか否かということ、または分割方向及び分割タイプを決定することができる。
符号化単位は、最大符号化単位より小さいか、あるいはそれと同じでもある。例えば、最大符号化単位も、最大サイズを有する符号化単位であるので、符号化単位の一つである。該最大符号化単位に係わる分割形態モード情報が分割されないことを示す場合、該最大符号化単位で決定される符号化単位は、該最大符号化単位と同じ大きさを有する。該最大符号化単位に係わる分割形態モード情報が分割されることを示す場合、該最大符号化単位は、符号化単位にも分割される。また、符号化単位に係わる分割形態モード情報が分割を示す場合、該符号化単位は、さらに小さなサイズの符号化単位にも分割される。ただし、映像の分割は、それに限定されるものではなく、最大符号化単位及び符号化単位は、区別されないものでもある。符号化単位の分割については、図３ないし図１６において、さらに詳細に説明する。
また、符号化単位から予測のための１以上の予測ブロックが決定されうる。該予測ブロックは、符号化単位と同じであるか、あるいはそれよりも小さい。また、該符号化単位から変換のための１以上の変換ブロックが決定されうる。該変換ブロックは、符号化単位と同じであるか、あるいはそれよりも小さい。
変換ブロックと予測ブロックとの形態及び大きさは、互いに関係もない。
他の実施形態として、符号化単位が予測ブロックとして、符号化単位を利用して予測が行われうる。また、該符号化単位が変換ブロックとして、該符号化単位を利用し、変換が行われうる。
符号化単位の分割については、図３ないし図１６において、さらに詳細に説明する。本開示の現在ブロック及び周辺ブロックは、最大符号化単位、符号化単位、予測ブロック及び変換ブロックのうち一つを示しうる。また、現在ブロックまたは現在符号化単位は、現在、復号または符号化が進められるブロック、または現在分割が進められているブロックである。周辺ブロックは、現在ブロック以前に復元されたブロックでもある。該周辺ブロックは、現在ブロックから、空間的または時間的に隣接しうる。該周辺ブロックは、現在ブロックの左下側、左側、左上側、上側、右上側、右側、右下側のうち一つに位置しうる。
図３は、一実施形態による映像復号装置が現在符号化単位を分割し、少なくとも１つの符号化単位を決定する過程を図示する。
ブロック形態は、４Ｎｘ４Ｎ、４Ｎｘ２Ｎ、２Ｎｘ４Ｎ、４ＮｘＮ、Ｎｘ４Ｎ、３２ＮｘＮ、Ｎｘ３２Ｎ、１６ＮｘＮ、Ｎｘ１６Ｎ、８ＮｘＮまたはＮｘ８Ｎを含むものでもある。ここで、Ｎは、正の整数でもある。ブロック形態情報は、符号化単位の形態、方向、幅及び高さの比率または大きさのうち少なくとも一つを示す情報である。
符号化単位の形態は、正方形（square）及び非正方形（non－square）を含むものでもある。符号化単位の幅及び高さの大きさが同じである場合（すなわち、符号化単位のブロック形態が４Ｎｘ４Ｎである場合）、映像復号装置１００は、符号化単位のブロック形態情報を正方形と決定することができる。映像復号装置１００は、符号化単位の形態を非正方形とも決定することができる。
符号化単位の幅及び高さの大きさが異なる場合（すなわち、符号化単位のブロック形態が、４Ｎｘ２Ｎ、２Ｎｘ４Ｎ、４ＮｘＮ、Ｎｘ４Ｎ、３２ＮｘＮ、Ｎｘ３２Ｎ、１６ＮｘＮ、Ｎｘ１６Ｎ、８ＮｘＮまたはＮｘ８Ｎである場合）、映像復号装置１００は、符号化単位のブロック形態情報を非正方形と決定することができる。符号化単位の形態が非正方形である場合、映像復号装置１００は、符号化単位のブロック形態情報において、幅及び高さの比率を１：２、２：１、１：４、４：１、１：８、８：１、１：１６、１６：１、１：３２、３２：１のうち少なくとも一つに決定することができる。また、符号化単位の幅の大きさ及び高さの大きさに基づき、映像復号装置１００は、符号化単位が水平方向であるか、または垂直方向であるかということを決定することができる。また、符号化単位の幅の大きさ、高さの大きさ、または広さのうち少なくとも一つに基づき、映像復号装置１００は、符号化単位の大きさを決定することができる。
一実施形態による映像復号装置１００は、ブロック形態情報を利用し、符号化単位の形態を決定することができ、分割形態モード情報を利用し、符号化単位がいかなる形態に分割されるかということを決定することができる。すなわち、映像復号装置１００が利用するブロック形態情報が、いかなるブロック形態を示すかということにより、分割形態モード情報が示す符号化単位の分割方法が決定されうる。
映像復号装置１００は、ビットストリームから、分割形態モード情報を獲得することができる。しかしながら、それに限定されるものではなく、映像復号装置１００及び映像符号化装置２２００は、ブロック形態情報に基づき、事前に約束された分割形態モード情報を決定することができる。映像復号装置１００は、最大符号化単位または最小符号化単位につき、事前に約束された分割形態モード情報を決定することができる。例えば、映像復号装置１００は、最大符号化単位につき、分割形態モード情報を、クアッド分割と決定することができる。また、映像復号装置１００は、最小符号化単位につき、分割形態モード情報を、「分割せず」と決定することができる。具体的には、映像復号装置１００は、最大符号化単位の大きさを２５６ｘ２５６と決定することができる。映像復号装置１００は、事前に約束された分割形態モード情報を、クアッド分割と決定することができる。該クアッド分割は、符号化単位の幅及び高さをいずれも二等分する分割形態モードである。映像復号装置１００は、分割形態モード情報に基づき、２５６ｘ２５６サイズの最大符号化単位から、１２８ｘ１２８サイズの符号化単位を獲得することができる。また、映像復号装置１００は、最小符号化単位の大きさを４ｘ４と決定することができる。映像復号装置１００は、最小符号化単位につき、「分割せず」を示す分割形態モード情報を獲得することができる。
一実施形態により、映像復号装置１００は、現在符号化単位が正方形状であることを示すブロック形態情報を利用することができる。例えば、映像復号装置１００は、分割形態モード情報により、正方形の符号化単位を分割しないか、垂直に分割するか、水平に分割するか、４個の符号化単位に分割するということを決定することができる。図３を参照すれば、現在符号化単位３００のブロック形態情報が正方形の形態を示す場合、復号部１２０は、分割されないことを示す分割形態モード情報により、現在符号化単位３００と同一サイズを有する符号化単位３１０ａを分割しないか、あるいは所定の分割方法を示す分割形態モード情報に基づいて分割された符号化単位３１０ｂ，３１０ｃ，３１０ｄ，３１０ｅ，３１０ｆを決定することができる。
図３を参照すれば、映像復号装置１００は、一実施形態により、垂直方向に分割されることを示す分割形態モード情報に基づき、現在符号化単位３００を垂直方向に分割した２つの符号化単位３１０ｂを決定することができる。映像復号装置１００は、水平方向に分割されることを示す分割形態モード情報に基づき、現在符号化単位３００を水平方向に分割した２つの符号化単位３１０ｃを決定することができる。映像復号装置１００は、垂直方向及び水平方向に分割されることを示す分割形態モード情報に基づき、現在符号化単位３００を垂直方向及び水平方向に分割した４つの符号化単位３１０ｄを決定することができる。映像復号装置１００は、一実施形態により、垂直方向にターナリ分割されることを示す分割形態モード情報に基づき、現在符号化単位３００を垂直方向に分割した３つの符号化単位３１０ｅを決定することができる。映像復号装置１００は、水平方向にターナリ分割されることを示す分割形態モード情報に基づき、現在符号化単位３００を水平方向に分割した３つの符号化単位３１０ｆを決定することができる。ただし、正方形の符号化単位が分割されうる分割形態は、前述の形態に限定して解釈されるものではなく、該分割形態モード情報が示しうる多様な形態が含まれうる。正方形の符号化単位が分割される所定の分割形態は、以下において、多様な実施形態を介して具体的に説明する。
図４は、一実施形態による映像復号装置が非正方形の形態である符号化単位を分割し、少なくとも１つの符号化単位を決定する過程を図示する。
一実施形態による映像復号装置１００は、現在符号化単位が非正方形状であることを示すブロック形態情報を利用することができる。映像復号装置１００は、分割形態モード情報により、非正方形の現在符号化単位を分割しないか、あるいは所定の方法で分割するかいうことを決定することができる。図４を参照すれば、現在符号化単位４００または４５０のブロック形態情報が非正方形の形態を示す場合、映像復号装置１００は、分割されないことを示す分割形態モード情報により、現在符号化単位４００または４５０と同一サイズを有する符号化単位４１０または４６０を決定するか、あるいは所定の分割方法を示す分割形態モード情報に基づいて分割された符号化単位４２０ａ，４２０ｂ，４３０ａ，４３０ｂ，４３０ｃ，４７０ａ，４７０ｂ，４８０ａ，４８０ｂ，４８０ｃを決定することができる。非正方形の符号化単位が分割される所定の分割方法は、以下において、多様な実施形態を介して具体的に説明する。
一実施形態による映像復号装置１００は、分割形態モード情報を利用し、符号化単位が分割される形態を決定することができ、その場合、該分割形態モード情報は、符号化単位が分割されて生成される少なくとも１つの符号化単位の個数を示しうる。図４を参照すれば、分割形態モード情報が２つの符号化単位に、現在符号化単位４００または４５０が分割されることを示す場合、映像復号装置１００は、分割形態モード情報に基づき、現在符号化単位４００または４５０を分割し、現在符号化単位に含まれる２つの符号化単位４２０ａ，４２０ｂまたは４７０ａ，４７０ｂを決定することができる。
一実施形態による映像復号装置１００が分割形態モード情報に基づき、非正方形状の現在符号化単位４００または４５０を分割する場合、映像復号装置１００は、非正方形の現在符号化単位４００または４５０の長辺の位置を考慮し、現在符号化単位を分割することができる。例えば、映像復号装置１００は、現在符号化単位４００または４５０の形態を考慮し、現在符号化単位４００または４５０の長辺を分割する方向に、現在符号化単位４００または４５０を分割し、複数個の符号化単位を決定することができる。
一実施形態により、分割形態モード情報が奇数個のブロックに、符号化単位を分割（ターナリ分割）することを示す場合、映像復号装置１００は、現在符号化単位４００または４５０に含まれる奇数個の符号化単位を決定することができる。例えば、分割形態モード情報が３個の符号化単位に、現在符号化単位４００または４５０を分割することを示す場合、映像復号装置１００は、現在符号化単位４００または４５０を、３個の符号化単位４３０ａ，４３０ｂ，４３０ｃ，４８０ａ，４８０ｂ，４８０ｃに分割することができる。
一実施形態により、現在符号化単位４００または４５０の幅及び高さの比率が、４：１または１：４でもある、。幅及び高さの比率が４：１である場合、幅の大きさが高さの大きさより大きいので、ブロック形態情報は、水平方向でもある。幅及び高さの比率が、１：４である場合、幅の大きさが高さの大きさより小さいので、ブロック形態情報は、垂直方向でもある。映像復号装置１００は、分割形態モード情報に基づき、現在符号化単位を、奇数個のブロックに分割することを決定することができる。また、映像復号装置１００は、現在符号化単位４００または４５０のブロック形態情報に基づき、現在符号化単位４００または４５０の分割方向を決定することができる。例えば、現在符号化単位４００が垂直方向である場合、映像復号装置１００は、現在符号化単位４００を水平方向に分割し、符号化単位４３０ａ，４３０ｂ，４３０ｃを決定することができる。また、現在符号化単位４５０が水平方向である場合、映像復号装置１００は、現在符号化単位４５０を垂直方向に分割し、符号化単位４８０ａ，４８０ｂ，４８０ｃを決定することができる。
一実施形態による映像復号装置１００は、現在符号化単位４００または４５０に含まれる奇数個の符号化単位を決定することができ、決定された符号化単位の大きさがいずれも同一ではないのである。例えば、決定された奇数個の符号化単位４３０ａ，４３０ｂ，４３０ｃ，４８０ａ，４８０ｂ，４８０ｃのうち、所定の符号化単位４３０ｂまたは４８０ｂの大きさは、他の符号化単位４３０ａ，４３０ｃ，４８０ａ，４８０ｃとは異なる大きさを有しうる。すなわち、現在符号化単位４００または４５０が分割されて決定されうる符号化単位は、複数の種類の大きさを有することができ、場合によっては、奇数個の符号化単位４３０ａ，４３０ｂ，４３０ｃ，４８０ａ，４８０ｂ，４８０ｃがそれぞれ互いに異なる大きさを有しうる。
一実施形態により、分割形態モード情報が、奇数個のブロックに、符号化単位が分割されることを示す場合、映像復号装置１００は、現在符号化単位４００または４５０に含まれる奇数個の符号化単位を決定することができ、さらには、映像復号装置１００は、分割されて生成される奇数個の符号化単位のうち、少なくとも１つの符号化単位につき、所定の制限を置くことができる。図４を参照すれば、映像復号装置１００は、現在符号化単位４００または４５０が分割されて生成された３個の符号化単位４３０ａ，４３０ｂ，４３０ｃ，４８０ａ，４８０ｂ，４８０ｃのうち、中央に位置する符号化単位４３０ｂ，４８０ｂに対する復号過程を、他の符号化単位４３０ａ，４３０ｃ，４８０ａ，４８０ｃと異ならせることができる。例えば、映像復号装置１００は、中央に位置する符号化単位４３０ｂ，４８０ｂについては、他の符号化単位４３０ａ，４３０ｃ，４８０ａ，４８０ｃと異なり、それ以上分割されないように制限するか、あるいは所定の回数ほど分割されるように制限することができる。
図５は、一実施形態により、映像復号装置が、ブロック形態情報及び分割形態モード情報のうち少なくとも一つに基づき、符号化単位を分割する過程を図示する。
一実施形態による映像復号装置１００は、ブロック形態情報及び分割形態モード情報のうち少なくとも一つに基づき、正方形状の第１符号化単位５００を符号化単位に分割するか、あるいは分割しないと決定することができる。一実施形態により、分割形態モード情報が、水平方向に第１符号化単位５００を分割することを示す場合、映像復号装置１００は、第１符号化単位５００を水平方向に分割し、第２符号化単位５１０を決定することができる。一実施形態によって利用される第１符号化単位、第２符号化単位、第３符号化単位は、符号化単位間の分割前後関係を理解するために利用された用語である。例えば、第１符号化単位を分割すれば、第２符号化単位が決定され、第２符号化単位が分割されれば、第３符号化単位が決定されうる。以下においては、利用される第１符号化単位、第２符号化単位及び第３符号化単位の関係は、前述の特徴によるとも理解される。
一実施形態による映像復号装置１００は、決定された第２符号化単位５１０を分割形態モード情報に基づき、符号化単位に分割するか、あるいは分割しないと決定することができる。図５を参照すれば、映像復号装置１００は、分割形態モード情報に基づき、第１符号化単位５００を分割して決定された非正方形状の第２符号化単位５１０を、少なくとも１つの第３符号化単位５２０ａ，５２０ｂ，５２０ｃ，５２０ｄに分割するか、あるいは第２符号化単位５１０を分割しないのである。映像復号装置１００は、分割形態モード情報を獲得することができ、映像復号装置１００は、獲得した分割形態モード情報に基づき、第１符号化単位５００を分割し、多様な形態の複数個の第２符号化単位（例：５１０）を分割することができ、第２符号化単位５１０は、分割形態モード情報に基づき、第１符号化単位５００が分割された方式により、分割されることができる。一実施形態により、第１符号化単位５００が第１符号化単位５００に対する分割形態モード情報に基づき、第２符号化単位５１０に分割された場合、第２符号化単位５１０も第２符号化単位５１０に対する分割形態モード情報に基づき、第３符号化単位（例：５２０ａ，５２０ｂ，５２０ｃ，５２０ｄ）にも分割される。すなわち、符号化単位は、符号化単位それぞれに係わる分割形態モード情報に基づき、再帰的にも分割される。従って、非正方形状の符号化単位において、正方形の符号化単位が決定され、そのような正方形状の符号化単位が再帰的に分割され、非正方形状の符号化単位が決定されうる。
図５を参照すれば、非正方形状の第２符号化単位５１０が分割されて決定される奇数個の第３符号化単位５２０ｂ，５２０ｃ，５２０ｄのうち、所定の符号化単位（例：真ん中に位置する符号化単位、または正方形状の符号化単位）は、再帰的にも分割される。一実施形態により、奇数個の第３符号化単位５２０ｂ，５２０ｃ，５２０ｄのうち１つの正方形状の第３符号化単位５２０ｂは、水平方向に分割され、複数個の第４符号化単位にも分割される。複数個の第４符号化単位５３０ａ，５３０ｂ，５３０ｃ，５３０ｄのうち１つの非正方形状の第４符号化単位５３０ｂまたは５３０ｄは、さらに複数個の符号化単位にも分割される。例えば、非正方形状の第４符号化単位５３０ｂまたは５３０ｄは、奇数個の符号化単位にさらに分割されうる。符号化単位の再帰的分割に利用されうる方法については、多様な実施形態を介して後述する。
一実施形態による映像復号装置１００は、分割形態モード情報に基づき、第３符号化単位５２０ａ，５２０ｂ，５２０ｃ，５２０ｄそれぞれを、符号化単位に分割することができる。また、映像復号装置１００は、分割形態モード情報に基づき、第２符号化単位５１０を分割しないと決定することができる。映像復号装置１００は、一実施形態により、非正方形状の第２符号化単位５１０を、奇数個の第３符号化単位５２０ｂ，５２０ｃ，５２０ｄに分割することができる。映像復号装置１００は、奇数個の第３符号化単位５２０ｂ，５２０ｃ，５２０ｄのうち、所定の第３符号化単位につき、所定の制限を置くことができる。例えば、映像復号装置１００は、奇数個の第３符号化単位５２０ｂ，５２０ｃ，５２０ｄのうち、真ん中に位置する符号化単位５２０ｃについては、それ以上分割されないように制限するか、あるいは設定可能な回数に分割されなければならないと制限することができる。
図５を参照すれば、映像復号装置１００は、非正方形状の第２符号化単位５１０に含まれる奇数個の第３符号化単位５２０ｂ，５２０ｃ，５２０ｄのうち、真ん中に位置する符号化単位５２０ｃは、それ以上分割されないか、あるいは所定の分割形態に分割（例えば、４個の符号化単位にだけ分割するか、あるいは第２符号化単位５１０が分割された形態に対応する形態に分割する）されるように制限するか、あるいは所定の回数にだけ分割（例えば、ｎ回ほど分割する（ｎ＞０））するように制限することができる。ただし、真ん中に位置した符号化単位５２０ｃに対する前記制限は、単純な実施形態に過ぎないので、前述の実施形態に制限されて解釈されるものではなく、真ん中に位置した符号化単位５２０ｃが、他の符号化単位５２０ｂ，５２０ｄと異なるように復号されうる多様な制限を含むと解釈されなければならない。
一実施形態による映像復号装置１００は、現在符号化単位を分割するために利用される分割形態モード情報を、現在符号化単位内の所定の位置で獲得することができる。
図６は、一実施形態による映像復号装置１００が、奇数個の符号化単位のうち、所定の符号化単位を決定するための方法を図示する。
図６を参照すれば、現在符号化単位６００，６５０の分割形態モード情報は、現在符号化単位６００，６５０に含まれる複数個のサンプルのうち、所定位置のサンプル（例えば、真ん中に位置するサンプル６４０，６９０）からも獲得される。ただし、そのような分割形態モード情報のうち少なくとも一つが獲得されうる現在符号化単位６００内の所定位置は、図６で図示する真ん中の位置に限定して解釈されるものではなく、該所定位置には、現在符号化単位６００内に含まれうる多様な位置（例えば、最上端、最下端、左側、右側、左側上端、左側下側、右側上端または右側下側など）が含まれうると解釈されなければならない。映像復号装置１００は、所定位置から獲得される分割形態モード情報を獲得し、現在符号化単位を、多様な形態及び大きさの符号化単位に分割するか、あるいは分割しないと決定することができる。
一実施形態による映像復号装置１００は、現在符号化単位が、所定個数の符号化単位に分割された場合、そのうち１つの符号化単位を選択することができる。複数個の符号化単位のうち一つを選択するための方法は、多様でもあり、そのような方法に係わる説明は、以下の多様な実施形態を介して後述する。
一実施形態による映像復号装置１００は、現在符号化単位を、複数個の符号化単位に分割し、所定位置の符号化単位を決定することができる。
一実施形態による映像復号装置１００は、奇数個の符号化単位のうち、真ん中に位置する符号化単位を決定するために、奇数個の符号化単位それぞれの位置を示す情報を利用することができる。図６を参照すれば、映像復号装置１００は、現在符号化単位６００または現在符号化単位６５０を分割し、奇数個の符号化単位６２０ａ，６２０ｂ，６２０ｃ、または奇数個の符号化単位６６０ａ，６６０ｂ，６６０ｃを決定することができる。映像復号装置１００は、奇数個の符号化単位６２０ａ，６２０ｂ，６２０ｃ、または奇数個の符号化単位６６０ａ，６６０ｂ，６６０ｃの位置に係わる情報を利用し、真ん中符号化単位６２０ｂまたは真ん中符号化単位６６０ｂを決定することができる。例えば、映像復号装置１００は、符号化単位６２０ａ，６２０ｂ，６２０ｃに含まれる所定のサンプルの位置を示す情報に基づき、符号化単位６２０ａ，６２０ｂ，６２０ｃの位置を決定することにより、真ん中に位置する符号化単位６２０ｂを決定することができる。具体的には、映像復号装置１００は、符号化単位６２０ａ，６２０ｂ，６２０ｃの左側上端のサンプル６３０ａ，６３０ｂ，６３０ｃの位置を示す情報に基づき、符号化単位６２０ａ，６２０ｂ，６２０ｃの位置を決定することにより、真ん中に位置する符号化単位６２０ｂを決定しうる。
一実施形態により、符号化単位６２０ａ，６２０ｂ，６２０ｃにそれぞれ含まれる左側上端のサンプル６３０ａ，６３０ｂ，６３０ｃの位置を示す情報は、符号化単位６２０ａ，６２０ｂ，６２０ｃのピクチャ内における位置または座標に係わる情報を含むものでもある。一実施形態により、符号化単位６２０ａ，６２０ｂ，６２０ｃにそれぞれ含まれる左側上端のサンプル６３０ａ，６３０ｂ，６３０ｃの位置を示す情報は、現在符号化単位６００に含まれる符号化単位６２０ａ，６２０ｂ，６２０ｃの幅または高さを示す情報を含むものでもあり、そのような幅または高さは、符号化単位６２０ａ，６２０ｂ，６２０ｃのピクチャ内における座標間の差を示す情報にも該当する。すなわち、映像復号装置１００は、符号化単位６２０ａ，６２０ｂ，６２０ｃのピクチャ内における位置または座標に係わる情報を直接利用するか、あるいは座標間の差値に対応する符号化単位の幅または高さに係わる情報を利用することにより、真ん中に位置する符号化単位６２０ｂを決定することができる。
一実施形態により、上端符号化単位６２０ａの左側上端のサンプル６３０ａの位置を示す情報は、（ｘａ，ｙａ）座標を示し、真ん中符号化単位６２０ｂの左側上端のサンプル５３０ｂの位置を示す情報は、（ｘｂ，ｙｂ）座標を示し、下端符号化単位６２０ｃの左側上端のサンプル６３０ｃの位置を示す情報は、（ｘｃ，ｙｃ）座標を示しうる。映像復号装置１００は、符号化単位６２０ａ，６２０ｂ，６２０ｃにそれぞれ含まれる左側上端のサンプル６３０ａ，６３０ｂ，６３０ｃの座標を利用し、真ん中符号化単位６２０ｂを決定することができる。例えば、左側上端のサンプル６３０ａ，６３０ｂ，６３０ｃの座標を、昇順または降順に整列したとき、真ん中に位置するサンプル６３０ｂの座標である（ｘｂ，ｙｂ）を含む符号化単位６２０ｂを、現在符号化単位６００が分割されて決定された符号化単位６２０ａ，６２０ｂ，６２０ｃのうち、真ん中に位置する符号化単位と決定することができる。ただし、左側上端のサンプル６３０ａ，６３０ｂ，６３０ｃの位置を示す座標は、ピクチャ内における絶対的な位置を示す座標を示し、さらには、上端符号化単位６２０ａの左側上端のサンプル６３０ａの位置を基準に、真ん中符号化単位６２０ｂの左側上端のサンプル６３０ｂの相対的位置を示す情報である（ｄｘｂ，ｄｙｂ）座標、下端符号化単位６２０ｃの左側上端のサンプル６３０ｃの相対的位置を示す情報である（ｄｘｃ，ｄｙｃ）座標を利用することもできる。また、符号化単位に含まれるサンプルの位置を示す情報として、当該サンプルの座標を利用することにより、所定位置の符号化単位を決定する方法は、前述の方法に限定して解釈されるものではなく、サンプルの座標を利用することができる多様な算術的方法によって解釈されなければならない。
一実施形態による映像復号装置１００は、現在符号化単位６００を、複数個の符号化単位６２０ａ，６２０ｂ，６２０ｃに分割することができ、符号化単位６２０ａ，６２０ｂ，６２０ｃのうち、所定の基準により、符号化単位を選択することができる。例えば、映像復号装置１００は、符号化単位６２０ａ，６２０ｂ，６２０ｃのうち、大きさが異なる符号化単位６２０ｂを選択することができる。
一実施形態による映像復号装置１００は、上端符号化単位６２０ａの左側上端のサンプル６３０ａの位置を示す情報である（ｘａ，ｙａ）座標、真ん中符号化単位６２０ｂの左側上端のサンプル６３０ｂの位置を示す情報である（ｘｂ，ｙｂ）座標、下端符号化単位６２０ｃの左側上端のサンプル６３０ｃの位置を示す情報である（ｘｃ，ｙｃ）座標を利用し、符号化単位６２０ａ，６２０ｂ，６２０ｃそれぞれの幅または高さを決定することができる。映像復号装置１００は、符号化単位６２０ａ，６２０ｂ，６２０ｃの位置を示す座標である（ｘａ，ｙａ）、（ｘｂ，ｙｂ）、（ｘｃ，ｙｃ）を利用し、符号化単位６２０ａ，６２０ｂ，６２０ｃそれぞれの大きさを決定することができる。一実施形態により、映像復号装置１００は、上端符号化単位６２０ａの幅を、現在符号化単位６００の幅と決定することができる。映像復号装置１００は、上端符号化単位６２０ａの高さを、ｙｂ－ｙａと決定することができる。一実施形態による映像復号装置１００は、真ん中符号化単位６２０ｂの幅を、現在符号化単位６００の幅と決定することができる。映像復号装置１００は、真ん中符号化単位６２０ｂの高さを、ｙｃ－ｙｂと決定することができる。一実施形態による映像復号装置１００は、下端符号化単位の幅または高さは、現在符号化単位の幅または高さと、上端符号化単位６２０ａ及び真ん中符号化単位６２０ｂの幅及び高さとを利用して決定することができる。映像復号装置１００は、決定された符号化単位６２０ａ，６２０ｂ，６２０ｃの幅及び高さに基づき、他の符号化単位と異なる大きさを有する符号化単位を決定することができる。図６を参照すれば、映像復号装置１００は、上端符号化単位６２０ａ及び下端符号化単位６２０ｃの大きさと異なる大きさを有する真ん中符号化単位６２０ｂを、所定位置の符号化単位と決定することができる。ただし、前述の映像復号装置１００が、他の符号化単位と異なる大きさを有する符号化単位を決定する過程は、サンプル座標に基づいて決定される符号化単位の大きさを利用し、所定位置の符号化単位を決定する一実施形態に過ぎないので、所定のサンプル座標によって決定される符号化単位の大きさを比較し、所定位置の符号化単位を決定する多様な過程が利用されうる。
映像復号装置１００は、左側符号化単位６６０ａの左側上端のサンプル６７０ａの位置を示す情報である（ｘｄ，ｙｄ）座標、真ん中符号化単位６６０ｂの左側上端のサンプル６７０ｂの位置を示す情報である（ｘｅ，ｙｅ）座標、右側符号化単位６６０ｃの左側上端のサンプル６７０ｃの位置を示す情報である（ｘｆ，ｙｆ）座標を利用し、符号化単位６６０ａ，６６０ｂ，６６０ｃそれぞれの幅または高さを決定することができる。映像復号装置１００は、符号化単位６６０ａ，６６０ｂ，６６０ｃの位置を示す座標である（ｘｄ，ｙｄ）、（ｘｅ，ｙｅ）、（ｘｆ，ｙｆ）を利用し、符号化単位６６０ａ，６６０ｂ，６６０ｃそれぞれの大きさを決定することができる。
一実施形態により、映像復号装置１００は、左側符号化単位６６０ａの幅を、ｘｅ－ｘｄと決定することができる。映像復号装置１００は、左側符号化単位６６０ａの高さを、現在符号化単位６５０の高さと決定することができる。一実施形態による映像復号装置１００は、真ん中符号化単位６６０ｂの幅を、ｘｆ－ｘｅと決定することができる。映像復号装置１００は、真ん中符号化単位６６０ｂの高さを、現在符号化単位６００の高さと決定することができる。一実施形態による映像復号装置１００は、右側符号化単位６６０ｃの幅または高さは、現在符号化単位６５０の幅または高さと、左側符号化単位６６０ａ及び真ん中符号化単位６６０ｂの幅及び高さとを利用して決定することができる。映像復号装置１００は、決定された符号化単位６６０ａ，６６０ｂ，６６０ｃの幅及び高さに基づき、他の符号化単位と異なる大きさを有する符号化単位を決定することができる。図６を参照すれば、映像復号装置１００は、左側符号化単位６６０ａ及び右側符号化単位６６０ｃの大きさと異なる大きさを有する真ん中符号化単位６６０ｂを、所定位置の符号化単位と決定することができる。ただし、前述の映像復号装置１００が、他の符号化単位と異なる大きさを有する符号化単位を決定する過程は、サンプル座標に基づいて決定される符号化単位の大きさを利用し、所定位置の符号化単位を決定する一実施形態に過ぎないので、所定のサンプル座標によって決定される符号化単位の大きさを比較し、所定位置の符号化単位を決定する多様な過程が利用されうる。
ただし、符号化単位の位置を決定するために考慮するサンプルの位置は、前述の左側上端に限定して解釈されるものではなく、符号化単位に含まれる任意のサンプルの位置に係わる情報が利用されうるとも解釈される。
一実施形態による映像復号装置１００は、現在符号化単位の形態を考慮し、現在符号化単位が分割されて決定される奇数個の符号化単位のうち、所定位置の符号化単位を選択することができる。例えば、現在符号化単位が、幅が高さより大きい非正方形状であるならば、映像復号装置１００は、水平方向に沿い、所定位置の符号化単位を決定することができる。すなわち、映像復号装置１００は、水平方向に位置を異ならせて設定する符号化単位のうち一つを決定し、当該符号化単位に係わる制限を置くことができる。現在符号化単位が、高さが幅より大きい非正方形状であるならば、映像復号装置１００は、垂直方向に沿い、所定位置の符号化単位を決定することができる。すなわち、映像復号装置１００は、垂直方向に位置を異ならせて設定する符号化単位のうち一つを決定し、当該符号化単位に係わる制限を置くことができる。
一実施形態による映像復号装置１００は、偶数個の符号化単位のうち、所定位置の符号化単位を決定するために、偶数個の符号化単位それぞれの位置を示す情報を利用することができる。映像復号装置１００は、現在符号化単位を分割（バイナリ分割）し、偶数個の符号化単位を決定することができ、偶数個の符号化単位の位置に係わる情報を利用し、所定位置の符号化単位を決定することができる。それに係わる具体的な過程は、図６で説明した奇数個の符号化単位のうち、所定位置（例：真ん中位置）の符号化単位を決定する過程に対応する過程でもあるので、省略する。
一実施形態により、非正方形状の現在符号化単位を、複数個の符号化単位に分割した場合、複数個の符号化単位のうち、所定位置の符号化単位を決定するために、分割過程において、所定位置の符号化単位に係わる所定の情報を利用することができる。例えば、映像復号装置１００は、現在符号化単位が複数個に分割された符号化単位のうち、真ん中に位置する符号化単位を決定するために、分割過程において、真ん中符号化単位に含まれたサンプルに保存されたブロック形態情報及び分割形態モード情報のうち少なくとも一つを利用することができる。
図６を参照すれば、映像復号装置１００は、分割形態モード情報に基づき、現在符号化単位６００を、複数個の符号化単位６２０ａ，６２０ｂ，６２０ｃに分割することができ、複数個の符号化単位６２０ａ，６２０ｂ，６２０ｃのうち、真ん中に位置する符号化単位６２０ｂを決定することができる。さらには、映像復号装置１００は、分割形態モード情報が獲得される位置を考慮し、真ん中に位置する符号化単位６２０ｂを決定することができる。すなわち、現在符号化単位６００の分割形態モード情報は、現在符号化単位６００の真ん中に位置するサンプル６４０から獲得され、前記分割形態モード情報に基づき、現在符号化単位６００が、複数個の符号化単位６２０ａ，６２０ｂ，６２０ｃに分割された場合、前記サンプル６４０を含む符号化単位６２０ｂを、真ん中に位置する符号化単位と決定することができる。ただし、真ん中に位置する符号化単位と決定するために利用される情報が、分割形態モード情報に限定して解釈されるものではなく、多様な種類の情報が、真ん中に位置する符号化単位を決定する過程においても利用される。
一実施形態により、所定位置の符号化単位を識別するための所定の情報は、決定すべき符号化単位に含まれる所定のサンプルからも獲得される。図６を参照すれば、映像復号装置１００は、現在符号化単位６００が分割されて決定された複数個の符号化単位６２０ａ，６２０ｂ，６２０ｃのうち、所定位置の符号化単位（例えば、複数個に分割された符号化単位のうち、真ん中に位置する符号化単位）を決定するために、現在符号化単位６００内の所定位置のサンプル（例えば、現在符号化単位６００の真ん中に位置するサンプル）から獲得される分割形態モード情報を利用することができる。すなわち、映像復号装置１００は、現在符号化単位６００のブロック形態を考慮し、前記所定位置のサンプルを決定することができ、映像復号装置１００は、現在符号化単位６００が分割されて決定される複数個の符号化単位６２０ａ，６２０ｂ，６２０ｃにおいて、所定の情報（例：分割形態モード情報）が獲得されうるサンプルが含まれた符号化単位６２０ｂを決定し、所定の制限を置くことができる。図６を参照すれば、一実施形態による映像復号装置１００は、所定の情報が獲得されうるサンプルとして、現在符号化単位６００の真ん中に位置するサンプル６４０を決定することができ、映像復号装置１００は、そのようなサンプル６４０が含まれる符号化単位６２０ｂに対し、復号過程における所定の制限を置くことができる。ただし、所定の情報が獲得されうるサンプルの位置は、前述の位置に限定して解釈されるものではなく、制限を置くために決定すべき符号化単位６２０ｂに含まれる任意の位置のサンプルとも解釈される。
一実施形態により、所定の情報が獲得されうるサンプルの位置は、現在符号化単位６００の形態によっても決定される。一実施形態により、ブロック形態情報は、現在符号化単位の形態が、正方形であるかまたは非正方形であるかということを決定することができ、形態により、所定の情報が獲得されうるサンプルの位置を決定することができる。例えば、映像復号装置１００は、現在符号化単位の幅に係わる情報、及び高さに係わる情報のうち少なくとも一つを利用し、現在符号化単位の幅及び高さのうち少なくとも一つを半分に分割する境界上に位置するサンプルを、所定の情報が獲得されうるサンプルと決定することができる。他の例を挙げれば、映像復号装置１００は、現在符号化単位に係わるブロック形態情報が非正方形状であることを示す場合、現在符号化単位の長辺を半分に分割する境界を含むサンプルのうち一つを、所定の情報が獲得されうるサンプルと決定することができる。
一実施形態による映像復号装置１００は、現在符号化単位を、複数個の符号化単位に分割した場合、複数個の符号化単位のうち、所定位置の符号化単位を決定するために、分割形態モード情報を利用することができる。一実施形態による映像復号装置１００は、分割形態モード情報を、符号化単位に含まれた所定位置のサンプルから獲得することができ、映像復号装置１００は、現在符号化単位が分割されて生成された複数個の符号化単位を、複数個の符号化単位それぞれに含まれた所定位置のサンプルから獲得される分割形態モード情報を利用して分割することができる。すなわち、符号化単位は、符号化単位それぞれに含まれた所定位置のサンプルから獲得される分割形態モード情報を利用し、再帰的にも分割される。符号化単位の再帰的分割過程については、図５を介して説明したので、詳細な説明は、省略する。
一実施形態による映像復号装置１００は、現在符号化単位を分割し、少なくとも１つの符号化単位を決定することができ、そのような少なくとも１つの符号化単位が復号される順序を、所定のブロック（例：現在符号化単位）によって決定することができる。
図７は、一実施形態による映像復号装置が現在符号化単位を分割し、複数個の符号化単位を決定する場合、複数個の符号化単位が処理される順序を図示する。
一実施形態による映像復号装置１００は、分割形態モード情報により、第１符号化単位７００を垂直方向に分割し、第２符号化単位７１０ａ，７１０ｂを決定するか、第１符号化単位７００を水平方向に分割し、第２符号化単位７３０ａ，７３０ｂを決定するか、あるいは第１符号化単位７００を垂直方向及び水平方向に分割し、第２符号化単位７５０ａ，７５０ｂ，７５０ｃ，７５０ｄを決定することができる。
図７を参照すれば、映像復号装置１００は、第１符号化単位７００を垂直方向に分割して決定された第２符号化単位７１０ａ，７１０ｂを、水平方向（７１０ｃ）に処理されるように順序を決定することができる。映像復号装置１００は、第１符号化単位７００を、水平方向に分割して決定された第２符号化単位７３０ａ，７３０ｂの処理順序を、垂直方向（７３０ｃ）と決定することができる。映像復号装置１００は、第１符号化単位７００を、垂直方向及び水平方向に分割して決定された第２符号化単位７５０ａ，７５０ｂ，７５０ｃ，７５０ｄを、１行に位置する符号化単位が処理された後、次の行に位置する符号化単位が処理される所定の順序（例えば、ラスタースキャン順序（raster scan order）またはｚスキャン順序（ｚ scan order）７５０ｅ）によって決定することができる。
一実施形態による映像復号装置１００は、符号化単位を再帰的に分割することができる。図７を参照すれば、映像復号装置１００は、第１符号化単位７００を分割し、複数個の符号化単位７１０ａ，７１０ｂ，７３０ａ，７３０ｂ，７５０ａ，７５０ｂ，７５０ｃ，７５０ｄを決定することができ、決定された複数個の符号化単位７１０ａ，７１０ｂ，７３０ａ，７３０ｂ，７５０ａ，７５０ｂ，７５０ｃ，７５０ｄそれぞれを再帰的に分割することができる。複数個の符号化単位７１０ａ，７１０ｂ，７３０ａ，７３０ｂ，７５０ａ，７５０ｂ，７５０ｃ，７５０ｄを分割する方法は、第１符号化単位７００を分割する方法に対応する方法にもなる。それにより、複数個の符号化単位７１０ａ，７１０ｂ，７３０ａ，７３０ｂ，７５０ａ，７５０ｂ，７５０ｃ，７５０ｄは、それぞれ独立して、複数個の符号化単位にも分割される。図７を参照すれば、映像復号装置１００は、第１符号化単位７００を垂直方向に分割し、第２符号化単位７１０ａ，７１０ｂを決定することができ、さらには、第２符号化単位７１０ａ，７１０ｂそれぞれを独立して分割するか、あるいは分割しないと決定することができる。
一実施形態による映像復号装置１００は、左側の第２符号化単位７１０ａを水平方向に分割し、第３符号化単位７２０ａ，７２０ｂに分割することができ、右側の第２符号化単位７１０ｂは、分割しないのである。
一実施形態により、符号化単位の処理順序は、符号化単位の分割過程に基づいても決定される。言い換えれば、分割された符号化単位の処理順序は、分割される直前の符号化単位の処理順序に基づいても決定される。映像復号装置１００は、左側の第２符号化単位７１０ａが分割されて決定された第３符号化単位７２０ａ，７２０ｂが処理される順序を、右側の第２符号化単位７１０ｂと独立して決定することができる。左側の第２符号化単位７１０ａが水平方向に分割され、第３符号化単位７２０ａ，７２０ｂが決定されたので、第３符号化単位７２０ａ，７２０ｂは、垂直方向（７２０ｃ）にも処理される。また、左側の第２符号化単位７１０ａ、及び右側の第２符号化単位７１０ｂが処理される順序は、水平方向（７１０ｃ）に該当するので、左側の第２符号化単位７１０ａに含まれる第３符号化単位７２０ａ，７２０ｂが垂直方向（７２０ｃ）に処理された後、右側符号化単位７１０ｂが処理されうる。前述の内容は、符号化単位が、それぞれ分割前の符号化単位によって処理順序が決定される過程について説明するためのものであるので、前述の実施形態に限定して解釈されるものではなく、多様な形態に分割されて決定される符号化単位が、所定の順序によって独立して処理されうる多様な方法に利用されると解釈されなければならない。
図８は、一実施形態による映像復号装置１００が、所定の順序符号化単位が処理されえない場合、現在符号化単位が、奇数個の符号化単位に分割されることを決定する過程を図示する。
一実施形態による映像復号装置１００は、獲得された分割形態モード情報に基づき、現在符号化単位が、奇数個の符号化単位に分割されることを決定することができる。図８を参照すれば、正方形状の第１符号化単位８００が、非正方形状の第２符号化単位８１０ａ、８１０ｂにも分割され、第２符号化単位８１０ａ、８１０ｂは、それぞれ独立して、第３符号化単位８２０ａ，８２０ｂ，８２０ｃ，８２０ｄ，８２０ｅにも分割される。一実施形態による映像復号装置１００は、第２符号化単位において、左側符号化単位８１０ａは、水平方向に分割し、複数個の第３符号化単位８２０ａ，８２０ｂを決定することができ、右側符号化単位８１０ｂは、奇数個の第３符号化単位８２０ｃ，８２０ｄ，８２０ｅに分割することができる。
一実施形態による映像復号装置１００は、第３符号化単位８２０ａ，８２０ｂ，８２０ｃ，８２０ｄ，８２０ｅが所定順序に処理されうるか否かということを判断し、奇数個に分割された符号化単位が存在するか否かということを決定することができる。図８を参照すれば、映像復号装置１００は、第１符号化単位８００を再帰的に分割し、第３符号化単位８２０ａ，８２０ｂ，８２０ｃ，８２０ｄ，８２０ｅを決定することができる。映像復号装置１００は、ブロック形態情報及び分割形態モード情報のうち少なくとも一つに基づき、第１符号化単位８００、第２符号化単位８１０ａ，８１０ｂまたは第３符号化単位８２０ａ，８２０ｂ，８２０ｃ，８２０ｄ，８２０ｅが分割される形態において、奇数個の符号化単位に分割されるか否かということを決定することができる。例えば、第２符号化単位８１０ａ，８１０ｂのうち、右側に位置する符号化単位が、奇数個の第３符号化単位８２０ｃ，８２０ｄ，８２０ｅにも分割される。第１符号化単位８００に含まれる複数個の符号化単位が処理される順序は、所定の順序（例：ｚスキャン順序（８３０））にもなり、映像復号装置１００は、右側第２符号化単位８１０ｂが奇数個に分割されて決定された第３符号化単位８２０ｃ，８２０ｄ，８２０ｅが、前記所定の順序によって処理されうる条件を満足するか否かということを判断することができる。
一実施形態による映像復号装置１００は、第１符号化単位８００に含まれる第３符号化単位８２０ａ，８２０ｂ，８２０ｃ，８２０ｄ，８２０ｅが、所定の順序によって処理されうる条件を満足するか否かということを決定することができ、前記条件は、第３符号化単位８２０ａ，８２０ｂ，８２０ｃ，８２０ｄ，８２０ｅの境界により、第２符号化単位８１０ａ，８１０ｂの幅及び高さのうち少なくとも一つが、半分に分割されるか否かということと係わる。例えば、非正方形状の左側第２符号化単位８１０ａの高さを半分に分割して決定される第３符号化単位８２０ａ，８２０ｂは、該条件を満足させうる。右側第２符号化単位８１０ｂを、３個の符号化単位に分割して決定される第３符号化単位８２０ｃ，８２０ｄ，８２０ｅの境界が、右側第２符号化単位８１０ｂの幅または高さを半分に分割することができないので、第３符号化単位８２０ｃ，８２０ｄ，８２０ｅは、条件を満足することができないと決定されうる。映像復号装置１００は、そのような条件不満足の場合、スキャン順序の断絶（disconnection）と判断し、該判断結果に基づき、右側第２符号化単位８１０ｂは、奇数個の符号化単位に分割されると決定することができる。一実施形態による映像復号装置１００は、奇数個の符号化単位に分割される場合、分割された符号化単位のうち、所定位置の符号化単位につき、所定の制限を置くことができ、そのような制限内容または所定位置などについては、多様な実施形態を介して説明したので、詳細な説明は、省略する。
図９は、一実施形態による映像復号装置が第１符号化単位を分割し、少なくとも１つの符号化単位を決定する過程を図示する。
一実施形態による映像復号装置１００は、受信部１１０を介して獲得した分割形態モード情報に基づき、第１符号化単位９００を分割することができる。正方形状の第１符号化単位９００は、４個の正方形状を有する符号化単位に分割されるか、あるいは非正方形状の複数個の符号化単位に分割することができる。例えば、図９を参照すれば、第１符号化単位９００が正方形であり、分割形態モード情報が、非正方形の符号化単位に分割されることを示す場合、映像復号装置１００は、第１符号化単位９００を、複数個の非正方形の符号化単位に分割することができる。具体的には、分割形態モード情報が、第１符号化単位９００を、水平方向または垂直方向に分割し、奇数個の符号化単位を決定することを示す場合、映像復号装置１００は、正方形状の第１符号化単位９００を、奇数個の符号化単位として、垂直方向に分割されて決定された第２符号化単位９１０ａ，９１０ｂ，９１０ｃ、または水平方向に分割されて決定された第２符号化単位９２０ａ，９２０ｂ，９２０ｃに分割することができる。
一実施形態による映像復号装置１００は、第１符号化単位９００に含まれる第２符号化単位９１０ａ，９１０ｂ，９１０ｃ，９２０ａ，９２０ｂ，９２０ｃが、所定の順序によって処理されうる条件を満足するか否かということを決定することができ、前記条件は、第２符号化単位９１０ａ，９１０ｂ，９１０ｃ，９２０ａ，９２０ｂ，９２０ｃの境界に沿い、第１符号化単位９００の幅及び高さのうち少なくとも一つが半分に分割されるか否かということと係わる。図９を参照すれば、正方形状の第１符号化単位９００を、垂直方向に分割して決定される第２符号化単位９１０ａ，９１０ｂ，９１０ｃの境界が、第１符号化単位９００の幅を半分に分割することができないので、第１符号化単位９００は、所定の順序によって処理されうる条件を満足することができないと決定されうる。また、正方形状の第１符号化単位９００を、水平方向に分割して決定される第２符号化単位９２０ａ，９２０ｂ，９２０ｃの境界が、第１符号化単位９００の幅を半分に分割することができないので、第１符号化単位９００は、所定の順序によって処理されうる条件を満足することができないと決定されうる。映像復号装置１００は、そのような条件不満足の場合、スキャン順序の断絶と判断し、該判断結果に基づき、第１符号化単位９００は、奇数個の符号化単位に分割されると決定することができる。一実施形態による映像復号装置１００は、奇数個の符号化単位に分割される場合、分割された符号化単位のうち、所定位置の符号化単位につき、所定の制限を置くことができ、そのような制限内容または所定位置などについては、多様な実施形態を介して説明したので、詳細な説明は、省略する。
一実施形態により、映像復号装置１００は、第１符号化単位を分割し、多様な形態の符号化単位を決定することができる。
図９を参照すれば、映像復号装置１００は、正方形状の第１符号化単位９００、非正方形状の第１符号化単位９３０または９５０を多様な形態の符号化単位に分割することができる。
図１０は、一実施形態による映像復号装置が、第１符号化単位が分割されて決定された非正方形状の第２符号化単位が、所定の条件を満足する場合、第２符号化単位が分割されうる形態が制限されることを図示する。
一実施形態による映像復号装置１００は、受信部１１０を介して獲得した分割形態モード情報に基づき、正方形状の第１符号化単位１０００を非正方形状の第２符号化単位１０１０ａ，１０１０ｂ，１０２０ａ，１０２０ｂに分割すると決定することができる。第２符号化単位１０１０ａ，１０１０ｂ，１０２０ａ，１０２０ｂは、独立しても分割される。それにより、映像復号装置１００は、第２符号化単位１０１０ａ，１０１０ｂ，１０２０ａ，１０２０ｂそれぞれに係わる分割形態モード情報に基づき、複数個の符号化単位に分割するか、あるいは分割しないと決定することができる。一実施形態による映像復号装置１００は、垂直方向に第１符号化単位１０００が分割されて決定された非正方形状の左側第２符号化単位１０１０ａを水平方向に分割し、第３符号化単位１０１２ａ，１０１２ｂを決定することができる。ただし、映像復号装置１００は、左側第２符号化単位１０１０ａを水平方向に分割した場合、右側第２符号化単位１０１０ｂは、左側第２符号化単位１０１０ａが分割された方向と同一に、水平方向に分割されえないように制限することができる。もし右側第２符号化単位１０１０ｂが同一方向に分割され、第３符号化単位１０１４ａ，１０１４ｂが決定された場合、左側第２符号化単位１０１０ａ及び右側第２符号化単位１０１０ｂが水平方向にそれぞれ独立して分割されることにより、第３符号化単位１０１２ａ，１０１２ｂ，１０１４ａ，１０１４ｂが決定されうる。しかしながら、それは、映像復号装置１００が分割形態モード情報に基づき、第１符号化単位１０００を４個の正方形状の第２符号化単位１０３０ａ，１０３０ｂ，１０３０ｃ，１０３０ｄに分割したところと同一結果であり、それは、映像復号側面において、非効率的でもある。
一実施形態による映像復号装置１００は、水平方向に第１符号化単位１０００が分割されて決定された非正方形状の第２符号化単位１０２０ａまたは１０２０ｂを垂直方向に分割し、第３符号化単位１０２２ａ，１０２２ｂ，１０２４ａ，１０２４ｂを決定することができる。ただし、映像復号装置１００は、第２符号化単位のうち一つ（例：上端第２符号化単位１０２０ａ）を垂直方向に分割した場合、前述の理由により、他の第２符号化単位（例：下端符号化単位１０２０ｂ）は、上端第２符号化単位１０２０ａが分割された方向と同一に、垂直方向に分割されえないように制限することができる。
図１１は、一実施形態により、分割形態モード情報が４個の正方形状の符号化単位に分割することを示すことができない場合、映像復号装置が正方形状の符号化単位を分割する過程を図示する。
一実施形態による映像復号装置１００は、分割形態モード情報に基づき、第１符号化単位１１００を分割し、第２符号化単位１１１０ａ，１１１０ｂ，１１２０ａ，１１２０ｂを決定することができる。該分割形態モード情報には、符号化単位が分割されうる多様な形態に係わる情報が含まれうるが、多様な形態に係わる情報には、正方形状の４個の符号化単位に分割するための情報が含まれえない場合がある。そのような分割形態モード情報によれば、映像復号装置１００は、正方形状の第１符号化単位１１００を、４個の正方形状の第２符号化単位１１３０ａ，１１３０ｂ，１１３０ｃ，１１３０ｄに分割することができない。該分割形態モード情報に基づき、映像復号装置１００は、非正方形状の第２符号化単位１１１０ａ，１１１０ｂ，１１２０ａ，１１２０ｂを決定することができる。
一実施形態による映像復号装置１００は、非正方形状の第２符号化単位１１１０ａ，１１１０ｂ，１１２０ａ，１１２０ｂをそれぞれ独立して分割することができる。再帰的な方法を介し、第２符号化単位１１１０ａ，１１１０ｂ，１１２０ａ，１１２０ｂそれぞれが所定順に分割され、それは、分割形態モード情報に基づき、第１符号化単位１１００が分割される方法に対応する分割方法でもある。
例えば、映像復号装置１００は、左側第２符号化単位１１１０ａが水平方向に分割され、正方形状の第３符号化単位１１１２ａ，１１１２ｂを決定することができ、右側第２符号化単位１１１０ｂが水平方向に分割され、正方形状の第３符号化単位１１１４ａ，１１１４ｂを決定することができる。さらには、映像復号装置１００は、左側第２符号化単位１１１０ａ及び右側第２符号化単位１１１０ｂのいずれもが水平方向に分割され、正方形状の第３符号化単位１１１６ａ，１１１６ｂ，１１１６ｃ，１１１６ｄを決定することもできる。そのような場合、第１符号化単位１１００が、４個の正方形状の第２符号化単位１１３０ａ，１１３０ｂ，１１３０ｃ，１１３０ｄに分割されたところと同一形態に符号化単位が決定されうる。
他の例を挙げれば、映像復号装置１００は、上端第２符号化単位１１２０ａが垂直方向に分割され、正方形状の第３符号化単位１１２２ａ，１１２２ｂを決定することができ、下端第２符号化単位１１２０ｂが垂直方向に分割され、正方形状の第３符号化単位１１２４ａ，１１２４ｂを決定することができる。さらには、映像復号装置１００は、上端第２符号化単位１１２０ａ及び下端第２符号化単位１１２０ｂのいずれもが垂直方向に分割され、正方形状の第３符号化単位１１２６ａ，１１２６ｂ，１１２６ａ，１１２６ｂを決定することもできる。そのような場合、第１符号化単位１１００が、４個の正方形状の第２符号化単位１１３０ａ，１１３０ｂ，１１３０ｃ，１１３０ｄに分割されたところと同一形態に符号化単位が決定されうる。
図１２は、一実施形態により、複数個の符号化単位間の処理順序が、符号化単位の分割過程によっても異なりうるところと図示したものである。
一実施形態による映像復号装置１００は、分割形態モード情報に基づき、第１符号化単位１２００を分割することができる。ブロック形態が正方形であり、分割形態モード情報が、第１符号化単位１２００が水平方向及び垂直方向のうち少なくとも１つの方向に分割されることを示す場合、映像復号装置１００は、第１符号化単位１２００を分割し、第２符号化単位（例：１２１０ａ，１２１０ｂ，１２２０ａ，１２２０ｂ）を決定することができる。図１２を参照すれば、第１符号化単位１２００が、水平方向または垂直方向だけに分割されて決定された非正方形状の第２符号化単位１２１０ａ，１２１０ｂ，１２２０ａ，１２２０ｂは、それぞれに係わる分割形態モード情報に基づき、独立しても分割される。例えば、映像復号装置１００は、第１符号化単位１２００が垂直方向に分割されて生成された第２符号化単位１２１０ａ，１２１０ｂを水平方向にそれぞれ分割し、第３符号化単位１２１６ａ，１２１６ｂ，１２１６ｃ，１２１６ｄを決定することができ、第１符号化単位１２００が水平方向に分割されて生成された第２符号化単位１２２０ａ，１２２０ｂを水平方向にそれぞれ分割し、第３符号化単位１２２６ａ，１２２６ｂ，１２２６ｃ，１２２６ｄを決定することができる。そのような第２符号化単位１２１０ａ，１２１０ｂ，１２２０ａ，１２２０ｂの分割過程は、図１１と係わって説明したので、詳細な説明は、省略する。
一実施形態による映像復号装置１００は、所定の順序により、符号化単位を処理することができる。所定の順序による符号化単位の処理に係わる特徴は、図７と係わって説明したので、詳細な説明は、省略する。図１２を参照すれば、映像復号装置１００は、正方形状の第１符号化単位１２００を分割し、４個の正方形状の第３符号化単位１２１６ａ，１２１６ｂ，１２１６ｃ，１２１６ｄ，１２２６ａ，１２２６ｂ，１２２６ｃ，１２２６ｄを決定することができる。一実施形態による映像復号装置１００は、第１符号化単位１２００が分割される形態により、第３符号化単位１２１６ａ，１２１６ｂ，１２１６ｃ，１２１６ｄ，１２２６ａ，１２２６ｂ，１２２６ｃ，１２２６ｄの処理順序を決定することができる。
一実施形態による映像復号装置１００は、垂直方向に分割されて生成された第２符号化単位１２１０ａ，１２１０ｂを水平方向にそれぞれ分割し、第３符号化単位１２１６ａ，１２１６ｂ，１２１６ｃ，１２１６ｄを決定することができ、映像復号装置１００は、左側第２符号化単位１２１０ａに含まれる第３符号化単位１２１６ａ，１２１６ｃを垂直方向にまず処理した後、右側第２符号化単位１２１０ｂに含まれる第３符号化単位１２１６ｂ，１２１６ｄを垂直方向に処理する順序（１２１７）により、第３符号化単位１２１６ａ，１２１６ｂ，１２１６ｃ，１２１６ｄを処理することができる。
一実施形態による映像復号装置１００は、水平方向に分割されて生成された第２符号化単位１２２０ａ，１２２０ｂを垂直方向にそれぞれ分割し、第３符号化単位１２２６ａ，１２２６ｂ，１２２６ｃ，１２２６ｄを決定することができ、映像復号装置１００は、上端第２符号化単位１２２０ａに含まれる第３符号化単位１２２６ａ，１２２６ｂを水平方向にまず処理した後、下端第２符号化単位１２２０ｂに含まれる第３符号化単位１２２６ｃ，１２２６ｄを水平方向に処理する順序（１２２７）により、第３符号化単位１２２６ａ，１２２６ｂ，１２２６ｃ，１２２６ｄを処理することができる。
図１２を参照すれば、第２符号化単位１２１０ａ，１２１０ｂ，１２２０ａ，１２２０ｂがそれぞれ分割され、正方形状の第３符号化単位１２１６ａ，１２１６ｂ，１２１６ｃ，１２１６ｄ，１２２６ａ，１２２６ｂ，１２２６ｃ，１２２６ｄが決定されうる。垂直方向に分割されて決定された第２符号化単位１２１０ａ，１２１０ｂ、及び水平方向に分割されて決定された第２符号化単位１２２０ａ，１２２０ｂは、互いに異なる形態に分割されたものであるが、その後に決定される第３符号化単位１２１６ａ，１２１６ｂ，１２１６ｃ，１２１６ｄ，１２２６ａ，１２２６ｂ，１２２６ｃ，１２２６ｄによれば、結局、同一形態の符号化単位に第１符号化単位１２００が分割された結果になる。それにより、映像復号装置１００は、分割形態モード情報に基づき、異なる過程を介し、再帰的に符号化単位を分割することにより、結果として、同一形態の符号化単位を決定するとしても、同一形態に決定された複数個の符号化単位に対し、互いに異なる順序処理することができる。
図１３は、一実施形態により、符号化単位が再帰的に分割され、複数個の符号化単位が決定される場合、符号化単位の形態及び大きさが変わることにより、符号化単位の深度が決定される過程を図示する。
一実施形態による映像復号装置１００は、符号化単位の深度を、所定の基準によって決定することができる。例えば、該所定の基準は、符号化単位の長辺の長さにもなる。映像復号装置１００は、現在符号化単位の長辺の長さが、分割される前の符号化単位の長辺の長さより２ｎ（ｎ＞０）倍に分割された場合、現在符号化単位の深度は、分割される前の符号化単位の深度よりｎほど深度が増大されたと決定することができる。以下においては、深度が増大された符号化単位を、下位深度の符号化単位と表現する。
図１３を参照すれば、一実施形態により、正方形状であることを示すブロック形態情報（例えば、ブロック形態情報は、「０：ＳＱＵＡＲＥ」を示しうる）に基づき、映像復号装置１００は、正方形状である第１符号化単位１３００を分割し、下位深度の第２符号化単位１３０２、第３符号化単位１３０４などを決定することができる。正方形状の第１符号化単位１３００の大きさを２Ｎｘ２Ｎとするならば、第１符号化単位１３００の幅及び高さを１／２倍に分割して決定された第２符号化単位１３０２は、ＮｘＮの大きさを有することができる。さらには、第２符号化単位１３０２の幅及び高さを１／２サイズに分割して決定された第３符号化単位１３０４は、Ｎ／２ｘＮ／２の大きさを有することができる。その場合、第３符号化単位１３０４の幅及び高さは、第１符号化単位１３００の１／４倍に該当する。第１符号化単位１３００の深度がＤである場合、第１符号化単位１３００の幅及び高さの１／２倍である第２符号化単位１３０２の深度は、Ｄ＋１でもあり、第１符号化単位１３００の幅及び高さの１／４倍である第３符号化単位１３０４の深度は、Ｄ＋２でもある。
一実施形態により、非正方形状を示すブロック形態情報（例えば、該ブロック形態情報は、高さが幅より大きい非正方形であることを示す「１：ＮＳ＿ＶＥＲ」、または幅が高さより大きい非正方形であることを示す「２：ＮＳ＿ＨＯＲ」を示しうる）に基づき、映像復号装置１００は、非正方形状である第１符号化単位１３１０または１３２０を分割し、下位深度の第２符号化単位１３１２または１３２２、第３符号化単位１３１４または１３２４を決定することができる。
映像復号装置１００は、Ｎｘ２Ｎサイズの第１符号化単位１３１０の幅及び高さのうち少なくとも一つを分割し、第２符号化単位（例：１３０２，１３１２，１３２２）を決定することができる。すなわち、映像復号装置１００は、第１符号化単位１３１０を水平方向に分割し、ＮｘＮサイズの第２符号化単位１３０２、またはＮｘＮ／２サイズの第２符号化単位１３２２を決定することができ、水平方向及び垂直方向に分割し、Ｎ／２ｘＮサイズの第２符号化単位１３１２を決定することもできる。
一実施形態による映像復号装置１００は、２ＮｘＮサイズの第１符号化単位１３２０の幅及び高さのうち少なくとも一つを分割し、第２符号化単位（例：１３０２，１３１２，１３２２）を決定することもできる。すなわち、映像復号装置１００は、第１符号化単位１３２０を垂直方向に分割し、ＮｘＮサイズの第２符号化単位１３０２、またはＮ／２ｘＮサイズの第２符号化単位１３１２を決定することができ、水平方向及び垂直方向に分割し、ＮｘＮ／２サイズの第２符号化単位１３２２を決定することもできる。
一実施形態による映像復号装置１００は、ＮｘＮサイズの第２符号化単位１３０２の幅及び高さのうち少なくとも一つを分割し、第３符号化単位（例：１３０４，１３１４，１３２４）を決定することもできる。すなわち、映像復号装置１００は、第２符号化単位１３０２を垂直方向及び水平方向に分割し、Ｎ／２ｘＮ／２サイズの第３符号化単位１３０４を決定するか、Ｎ／４ｘＮ／２サイズの第３符号化単位１３１４を決定するか、あるいはＮ／２ｘＮ／４サイズの第３符号化単位１３２４を決定することができる。
一実施形態による映像復号装置１００は、Ｎ／２ｘＮサイズの第２符号化単位１３１２の幅及び高さのうち少なくとも一つを分割し、第３符号化単位（例：１３０４，１３１４，１３２４）を決定することもできる。すなわち、映像復号装置１００は、第２符号化単位１３１２を水平方向に分割し、Ｎ／２ｘＮ／２サイズの第３符号化単位１３０４、またはＮ／２ｘＮ／４サイズの第３符号化単位１３２４を決定するか、あるいは垂直方向及び水平方向に分割し、Ｎ／４ｘＮ／２サイズの第３符号化単位１３１４を決定することができる。
一実施形態による映像復号装置１００は、ＮｘＮ／２サイズの第２符号化単位１３２２の幅及び高さのうち少なくとも一つを分割し、第３符号化単位（例：１３０４，１３１４，１３２４）を決定することもできる。すなわち、映像復号装置１００は、第２符号化単位１３２２を垂直方向に分割し、Ｎ／２ｘＮ／２サイズの第３符号化単位１３０４、またはＮ／４ｘＮ／２サイズの第３符号化単位１３１４を決定するか、あるいは垂直方向及び水平方向に分割し、Ｎ／２ｘＮ／４サイズの第３符号化単位１３２４を決定することができる。
一実施形態による映像復号装置１００は、正方形状の符号化単位（例：１３００，１３０２，１３０４）を水平方向または垂直方向に分割することができる。例えば、２Ｎｘ２Ｎサイズの第１符号化単位１３００を垂直方向に分割し、Ｎｘ２Ｎサイズの第１符号化単位１３１０を決定するか、あるいは水平方向に分割し、２ＮｘＮサイズの第１符号化単位１３２０を決定することができる。一実施形態により、深度が符号化単位の最大長辺の長さに基づいて決定される場合、２Ｎｘ２Ｎサイズの第１符号化単位１３００が水平方向または垂直方向に分割されて決定される符号化単位の深度は、第１符号化単位１３００の深度と同一でもある。
一実施形態により、第３符号化単位１３１４または１３２４の幅及び高さは、第１符号化単位１３１０または１３２０の１／４倍にも該当する。第１符号化単位１３１０または１３２０の深度がＤである場合、第１符号化単位１３１０または１３２０の幅及び高さの１／２倍である第２符号化単位１３１２または１３２２の深度は、Ｄ＋１でもあり、第１符号化単位１３１０または１３２０の幅及び高さの１／４倍である第３符号化単位１３１４または１３２）の深度は、Ｄ＋２でもある。
図１４は、一実施形態により、符号化単位の形態及び大きさによって決定されうる深度、及び符号化単位区分のためのインデックス（ＰＩＤ：part index）を図示する。
一実施形態による映像復号装置１００は、正方形状の第１符号化単位１４００を分割し、多様な形態の第２符号化単位を決定することができる。図１４を参照すれば、映像復号装置１００は、分割形態モード情報により、第１符号化単位１４００を、垂直方向及び水平方向のうち少なくとも１つの方向に分割し、第２符号化単位１４０２ａ，１４０２ｂ，１４０４ａ，１４０４ｂ，１４０６ａ，１４０６ｂ，１４０６ｃ，１４０６ｄを決定することができる。すなわち、映像復号装置１００は、第１符号化単位１４００に係わる分割形態モード情報に基づき、第２符号化単位１４０２ａ，１４０２ｂ，１４０４ａ，１４０４ｂ，１４０６ａ，１４０６ｂ，１４０６ｃ，１４０６ｄを決定することができる。
一実施形態により、正方形状の第１符号化単位１４００に係わる分割形態モード情報によって決定される第２符号化単位１４０２ａ，１４０２ｂ，１４０４ａ，１４０４ｂ，１４０６ａ，１４０６ｂ，１４０６ｃ，１４０６ｄは、長辺の長さに基づき、深度が決定されうる。例えば、正方形状の第１符号化単位１４００の一辺の長さと、非正方形状の第２符号化単位１４０２ａ，１４０２ｂ，１４０４ａ，１４０４ｂの長辺の長さとが同一であるので、第１符号化単位１４００と、非正方形状の第２符号化単位１４０２ａ，１４０２ｂ，１４０４ａ，１４０４ｂとの深度は、Ｄで等しいと見ることができる。それに対し、映像復号装置１００が分割形態モード情報に基づき、第１符号化単位１４００を４個の正方形状の第２符号化単位１４０６ａ，１４０６ｂ，１４０６ｃ，１４０６ｄに分割した場合、正方形状の第２符号化単位１４０６ａ，１４０６ｂ，１４０６ｃ，１４０６ｄの一辺の長さは、第１符号化単位１４００の一辺の長さの１／２倍であるので、第２符号化単位１４０６ａ，１４０６ｂ，１４０６ｃ，１４０６ｄの深度は、第１符号化単位１４００の深度であるＤより１深度下位であるＤ＋１の深度でもある。
一実施形態による映像復号装置１００は、高さが幅より大きい形態の第１符号化単位１４１０を、分割形態モード情報によって水平方向に分割し、複数個の第２符号化単位１４１２ａ，１４１２ｂ，１４１４ａ，１４１４ｂ，１４１４ｃに分割することができる。一実施形態による映像復号装置１００は、幅が高さより大きい形態の第１符号化単位１４２０を分割形態モード情報によって垂直方向に分割し、複数個の第２符号化単位１４２２ａ，１４２２ｂ，１４２４ａ，１４２４ｂ，１４２４ｃに分割することができる。
一実施形態により、非正方形状の第１符号化単位１４１０または１４２０に係わる分割形態モード情報によって決定される第２符号化単位１４１２ａ，１４１２ｂ，１４１４ａ，１４１４ｂ，１４１４ｃ，１４２２ａ，１４２２ｂ，１４２４ａ，１４２４ｂ，１４２４ｃは、長辺の長さに基づき、深度が決定されうる。例えば、正方形状の第２符号化単位１４１２ａ，１４１２ｂの一辺の長さは、高さが幅より大きい非正方形状の第１符号化単位１４１０の一辺の長さの１／２倍であるので、正方形状の第２符号化単位１４１２ａ，１４１２ｂの深度は、非正方形状の第１符号化単位１４１０の深度Ｄより１深度下位の深度であるＤ＋１である。
さらには、映像復号装置１００が分割形態モード情報に基づき、非正方形状の第１符号化単位１４１０を奇数個の第２符号化単位１４１４ａ，１４１４ｂ，１４１４ｃに分割することができる。奇数個の第２符号化単位１４１４ａ，１４１４ｂ，１４１４ｃは、非正方形状の第２符号化単位１４１４ａ，１４１４ｃ、及び正方形状の第２符号化単位１４１４ｂを含むものでもある。その場合、非正方形状の第２符号化単位１４１４ａ，１４１４ｃの長辺の長さ、及び正方形状の第２符号化単位１４１４ｂの一辺の長さは、第１符号化単位１４１０の一辺の長さの１／２倍であるので、第２符号化単位１４１４ａ，１４１４ｂ，１４１４ｃの深度は、第１符号化単位１４１０の深度であるＤより１深度下位であるＤ＋１の深度でもある。映像復号装置１００は、第１符号化単位１４１０と係わる符号化単位の深度を決定する前記方式に対応する方式で、幅が高さより大きい非正方形状の第１符号化単位１４２０と係わる符号化単位の深度を決定することができる。
一実施形態による映像復号装置１００は、分割された符号化単位の区分のためのインデックス（ＰＩＤ）決定において、奇数個に分割された符号化単位が互いに同一サイズではない場合、符号化単位間の大きさの比率に基づき、インデックスを決定することができる。図１４を参照すれば、奇数個に分割された符号化単位１４１４ａ，１４１４ｂ，１４１４ｃのうち、真ん中に位置する符号化単位１４１４ｂは、他の符号化単位１４１４ａ，１４１４ｃと、幅は、同一であるが、高さが異なる符号化単位１４１４ａ，１４１４ｃの高さの２倍でもある。すなわち、その場合、真ん中に位置する符号化単位１４１４ｂは、他の符号化単位１４１４ａ，１４１４ｃの二つを含むものでもある。従って、スキャン順序により、真ん中に位置する符号化単位１４１４ｂのインデックス（ＰＩＤ）が１であるならば、その次の順序に位置する符号化単位１４１４ｃは、インデックスが２が増大した３でもある。すなわち、インデックスの値の不連続性が存在しうる。一実施形態による映像復号装置１００は、そのような分割された符号化単位間区分のためのインデックスの不連続性の存在いかんに基づき、奇数個に分割された符号化単位が互いに同一サイズではないか否かということを決定することができる。
一実施形態による映像復号装置１００は、現在符号化単位から分割されて決定された複数個の符号化単位を区分するためのインデックスの値に基づき、特定分割形態に分割されたものであるか否かということを決定することができる。図１４を参照すれば、映像復号装置１００は、高さが幅より大きい長方形状の第１符号化単位１４１０を分割し、偶数個の符号化単位１４１２ａ，１４１２ｂを決定するか、あるいは奇数個の符号化単位１４１４ａ，１４１４ｂ，１４１４ｃを決定することができる。映像復号装置１００は、複数個の符号化単位それぞれを区分するために、各符号化単位を示すインデックス（ＰＩＤ）を利用することができる。一実施形態により、該インデックス（ＰＩＤ）は、それぞれの符号化単位の所定位置のサンプル（例：左側上端サンプル）からも獲得される。
一実施形態による映像復号装置１００は、符号化単位区分のためのインデックスを利用して分割されて決定された符号化単位のうち、所定位置の符号化単位を決定することができる。一実施形態により、高さが幅より大きい長方形状の第１符号化単位１４１０に係わる分割形態モード情報が、３個の符号化単位に分割されることを示す場合、映像復号装置１００は、第１符号化単位１４１０を３個の符号化単位１４１４ａ，１４１４ｂ，１４１４ｃに分割することができる。映像復号装置１００は、３個の符号化単位１４１４ａ，１４１４ｂ，１４１４ｃそれぞれに係わるインデックスを割り当てることができる。映像復号装置１００は、奇数個に分割された符号化単位のうち真ん中符号化単位を決定するために、各符号化単位に係わるインデックスを比較することができる。映像復号装置１００は、符号化単位のインデックスに基づき、インデックスのうち、真ん中値に該当するインデックスを有する符号化単位１４１４ｂを、第１符号化単位１４１０が分割されて決定された符号化単位のうち、真ん中位置の符号化単位として決定することができる。一実施形態による映像復号装置１００は、分割された符号化単位区分のためのインデックス決定において、符号化単位が互いに同一サイズではない場合、符号化単位間の大きさの比率に基づき、インデックスを決定することができる。図１４を参照すれば、第１符号化単位１４１０が分割されて生成された符号化単位１４１４ｂは、他の符号化単位１４１４ａ，１４１４ｃと、幅は、同一であるが、高さが異なる符号化単位１４１４ａ，１４１４ｃの高さの２倍でもある。その場合、真ん中に位置する符号化単位１４１４ｂのインデックス（ＰＩＤ）が１であるならば、その次の順序に位置する符号化単位１４１４ｃは、インデックスが２が増大した３でもある。そのような場合のように、均一にインデックスが増大していて増大幅が異なる場合、映像復号装置１００は、他の符号化単位と異なる大きさを有する符号化単位を含む複数個の符号化単位に分割されたと決定することができる。一実施形態により、分割形態モード情報が、奇数個の符号化単位に分割されることを示す場合、映像復号装置１００は、奇数個の符号化単位のうち、所定位置の符号化単位（例：真ん中符号化単位）が、他の符号化単位と大きさが異なる形態に現在符号化単位を分割することができる。その場合、映像復号装置１００は、符号化単位に係わるインデックス（ＰＩＤ）を利用し、異なる大きさを有する真ん中符号化単位を決定することができる。ただし、前述のインデックス、決定すべき所定位置の符号化単位の大きさまたは位置は、一実施形態について説明するために特定したものであるので、それに限定して解釈されるものではなく、多様なインデックス、符号化単位の位置及び大きさが利用されうると解釈されなければならない。
一実施形態による映像復号装置１００は、符号化単位の再帰的な分割が始まる所定のデータ単位を利用することができる。
図１５は、一実施形態により、ピクチャに含まれる複数個の所定のデータ単位により、複数個の符号化単位が決定されたところを図示する。
一実施形態により、該所定のデータ単位は、符号化単位が分割形態モード情報を利用し、再帰的に分割され始めるデータ単位とも定義される。すなわち、現在ピクチャを分割する複数個の符号化単位が決定される過程で利用される最上位深度の符号化単位にも該当する。以下においては、説明上の便宜のために、そのような所定のデータ単位を基準データ単位と称する。
一実施形態により、該基準データ単位は、所定の大きさ及び形態を示しうる。一実施形態により、基準符号化単位は、ＭｘＮのサンプルを含むものでもある。ここで、Ｍ及びＮは、互いに同一でもあり、２の乗数として表現される整数でもある。すなわち、該基準データ単位は、正方形または非正方形の形態を示し、その後、整数個の符号化単位にも分割される。
一実施形態による映像復号装置１００は、現在ピクチャを、複数個の基準データ単位に分割することができる。一実施形態による映像復号装置１００は、現在ピクチャを分割する複数個の基準データ単位を、それぞれの基準データ単位に係わる分割形態モード情報を利用して分割することができる。そのような基準データ単位の分割過程は、クアッドツリー（quad-tree）構造を利用した分割過程に対応しうる。
一実施形態による映像復号装置１００は、現在ピクチャに含まれる基準データ単位が有することができる最小サイズを事前に決定することができる。それにより、映像復号装置１００は、最小サイズ以上の大きさを有する多様な大きさの基準データ単位を決定することができ、決定された基準データ単位を基準に、分割形態モード情報を利用し、少なくとも１つの符号化単位を決定することができる。
図１５を参照すれば、映像復号装置１００は、正方形状の基準符号化単位１５００を利用することができ、または非正方形状の基準符号化単位１５０２を利用することもできる。一実施形態により、基準符号化単位の形態及び大きさは、少なくとも１つの基準符号化単位を含む多様なデータ単位（例：シーケンス（sequence）、ピクチャ（picture）、スライス（slice）、スライスセグメント（slice segment）、タイル（tile）、タイルグループ（tile group）、最大符号化単位など）によっても決定される。
一実施形態による映像復号装置１００の受信部１１０は、基準符号化単位の形態に係わる情報、及び基準符号化単位の大きさに係わる情報のうち少なくとも一つを、前記多様なデータ単位ごとに、ビットストリームから獲得することができる。正方形状の基準符号化単位１５００に含まれる少なくとも１つの符号化単位が決定される過程は、図３の現在符号化単位３００が分割される過程を介して説明し、非正方形状の基準符号化単位１５０２に含まれる少なくとも１つの符号化単位の決定される過程は、図４の現在符号化単位４００または４５０が分割される過程を介して説明したので、詳細な説明は、省略する。
一実施形態による映像復号装置１００は、所定の条件に基づき、事前に決定される一部データ単位により、基準符号化単位の大きさ及び形態を決定するために、基準符号化単位の大きさ及び形態を識別するためのインデックスを利用することができる。すなわち、受信部１１０は、ビットストリームから、前記多様なデータ単位（例：シーケンス、ピクチャ、スライス、スライスセグメント、タイル、タイルグループ、最大符号化単位など）のうち、所定の条件（例：スライス以下の大きさを有するデータ単位）を満足するデータ単位として、スライス、スライスセグメント、タイル、タイルグループ、最大符号化単位などごとに、基準符号化単位の大きさ及び形態の識別のためのインデックスだけを獲得することができる。映像復号装置１００は、インデックスを利用することにより、前記所定の条件を満足するデータ単位ごとに、基準データ単位の大きさ及び形態を決定することができる。該基準符号化単位の形態に係わる情報、及び基準符号化単位の大きさに係わる情報を、相対的に小さいサイズのデータ単位ごとに、ビットストリームから獲得して利用する場合、ビットストリームの利用効率が良好ではなくなるので、基準符号化単位の形態に係わる情報、及び基準符号化単位の大きさに係わる情報を直接獲得する代わりに、前記インデックスだけを獲得して利用することができる。その場合、基準符号化単位の大きさ及び形態を示すインデックスに対応する基準符号化単位の大きさ及び形態のうち少なくとも一つは、事前に決定されてもいる。すなわち、映像復号装置１００は、既決定基準符号化単位の大きさ及び形態のうち少なくとも一つをインデックスによって選択することにより、インデックス獲得の基準になるデータ単位に含まれる基準符号化単位の大きさ及び形態のうち少なくとも一つを決定することができる。
一実施形態による映像復号装置１００は、１つの最大符号化単位に含まれる少なくとも１つの基準符号化単位を利用することができる。すなわち、映像を分割する最大符号化単位には、少なくとも１つの基準符号化単位が含まれ、それぞれの基準符号化単位の再帰的な分割過程を介し、符号化単位が決定されうる。一実施形態により、該最大符号化単位の幅及び高さのうち少なくとも一つは、基準符号化単位の幅及び高さのうち少なくとも１つの整数倍にも該当する。一実施形態により、基準符号化単位の大きさは、最大符号化単位をクアッドツリー構造により、ｎ回分割された大きさでもある。すなわち、映像復号装置１００は、最大符号化単位を、クアッドツリー構造によってｎ回分割し、基準符号化単位を決定することができ、多様な実施形態により、基準符号化単位を、ブロック形態情報及び分割形態モード情報のうち少なくとも一つに基づいて分割することができる。
一実施形態による映像復号装置１００は、現在符号化単位の形態を示すブロック形態情報、または現在符号化単位を分割する方法を示す分割形態モード情報を、ビットストリームから獲得して利用することができる。分割形態モード情報は、多様なデータ単位と係わるビットストリームに含まれうる。例えば、映像復号装置１００は、シーケンスパラメータセット（sequence parameter set）、ピクチャパラメータセット（picture parameter set）、ビデオパラメータセット（video parameter set）、スライスヘッダ（slice header）、スライスセグメントヘッダ（slice segment header）、タイルヘッダ（tile header）、タイルグループヘッダ（tile group header）に含まれた分割形態モード情報を利用することができる。さらには、映像復号装置１００は、最大符号化単位、基準符号化単位、プロセッシングブロックごとに、ビットストリームから、ブロック形態情報または分割形態モード情報に対応するシンタックスエレメントをビットストリームから獲得して利用することができる。
以下、本開示の一実施形態による分割規則を決定する方法について詳細に説明する。
映像復号装置１００は、映像の分割規則を決定することができる。該分割規則は、映像復号装置１００と映像符号化装置２２００との間に事前に決定されてもいる。映像復号装置１００は、ビットストリームから獲得された情報に基づき、映像の分割規則を決定することができる。映像復号装置１００は、シーケンスパラメータセット、ピクチャパラメータセット、ビデオパラメータセット、スライスヘッダ、スライスセグメントヘッダ、タイルヘッダ、タイルグループヘッダのうち少なくとも一つから獲得された情報に基づき、分割規則を決定することができる。映像復号装置１００は、分割規則を、フレーム、スライス、タイル、テンポラルレイヤ（temporal layer）、最大符号化単位または符号化単位により、異なるように決定することができる。
映像復号装置１００は、符号化単位のブロック形態に基づき、分割規則を決定することができる。該ブロック形態は、符号化単位の大きさ、形態、幅及び高さの比率、方向を含むものでもある。映像復号装置１００は、符号化単位のブロック形態に基づき、分割規則を決定することを事前に決定することができる。しかしながら、それに限定されるものではない。映像復号装置１００は、受信されたビットストリームから獲得された情報に基づき、分割規則を決定することができる。
符号化単位の形態は、正方形及び非正方形を含むものでもある。符号化単位の幅及び高さの大きさが同じである場合、映像復号装置１００は、符号化単位の形態を正方形と決定することができる。また、符号化単位の幅及び高さの大きさが同じではない場合、映像復号装置１００は、符号化単位の形態を非正方形と決定することができる。
符号化単位の大きさは、４ｘ４、８ｘ４、４ｘ８、８ｘ８、１６ｘ４、１６ｘ８、…、２５６ｘ２５６の多様な大きさを含むものでもある。該符号化単位の大きさは、符号化単位の長辺の長さ、短辺の長さ、または広さによっても分類される。映像復号装置１００は、同一グループに分類された符号化単位に、同一分割規則を適用することができる。例えば、映像復号装置１００は、同一長辺長を有する符号化単位を、同一サイズに分類することができる。また、映像復号装置１００は、同一長辺長を有する符号化単位につき、同一分割規則を適用することができる。
符号化単位の幅及び高さの比率は１：２、２：１、１：４、４：１、１：８、８：１、１：１６、１６：１、３２：１または１：３２などを含むものでもある。また、符号化単位の方向は、水平方向及び垂直方向を含むものでもある。該水平方向は、符号化単位幅の大きさが、高さの大きさより大きい場合を示しうる。該垂直方向は、符号化単位幅の大きさが、高さの大きさより小さい場合を示しうる。
映像復号装置１００は、符号化単位の大きさに基づき、分割規則を適応的に決定することができる。映像復号装置１００は、符号化単位の大きさに基づき、許容可能な分割形態モードを異なるように決定することができる。例えば、映像復号装置１００は、符号化単位の大きさに基づき、分割が許容されるか否かということを決定することができる。映像復号装置１００は、符号化単位の大きさにより、分割方向を決定することができる。映像復号装置１００は、符号化単位の大きさにより、許容可能な分割タイプを決定することができる。
符号化単位の大きさに基づき、分割規則を決定することは、映像復号装置１００間に既決定分割規則でもある。また、映像復号装置１００は、ビットストリームから獲得された情報に基づき、分割規則を決定することができる。
映像復号装置１００は、符号化単位の位置に基づき、分割規則を適応的に決定することができる。映像復号装置１００は、符号化単位が、映像で占める位置に基づき、分割規則を適応的に決定することができる。
また、映像復号装置１００は、互いに異なる分割経路によって生成された符号化単位が、同一ブロック形態を有さないように分割規則を決定することができる。ただし、それに限定されるものではなく、互いに異なる分割経路によって生成された符号化単位は、同一ブロック形態を有することができる。互いに異なる分割経路によって生成された符号化単位は、互いに異なる復号処理順序を有することができる。該復号処理順序については、図１２と共に説明したので、詳細な説明は、省略する。
図１６は、映像符号化及び復号システムのブロック図を示した図面である。
映像符号化及び復号システム１６００の符号化器１６１０は、映像の符号化されたビットストリームを伝送し、復号器１６５０は、ビットストリームを受信して復号することで復元映像を出力する。ここで、復号器１６５０は、映像復号装置１００に類似した構成でもある。
符号化端１６１０において、インター予測符号化部１６０５は、現在ブロックの予測モードがインター予測モードである場合、現在ピクチャに時間的に隣接する参照ピクチャの参照ブロックを示す現在ブロックの動き情報を生成する。インター予測符号化部１６０５は、参照ブロックのサンプルを利用し、現在ブロックの予測サンプルを決定することができる。イントラ予測符号化部１６１０は、現在ブロックに空間的に隣接する隣接サンプルを利用し、現在ブロックの予測サンプルを決定するように、現在ブロックと類似した隣接サンプルが位置する方向または予測サンプルを決定する方式を示すイントラ予測情報を決定することができる。インター予測符号化部１６０５は、ＤＰＢ（decoded picture buffer）１６４８に保存されている、まず復元されたサンプルのうち、現在ブロックの予測のために利用する参照サンプルを決定することができる。
変換部１６２０は、現在ブロックの原本サンプルから、インター予測符号化部１６０５またはイントラ予測符号化部１６１０によって生成された予測サンプルを抜き取ったレジデュアルサンプル値について変換を行い、変換係数を出力する。変換部１６２０から出力された変換係数を、量子化部１６２５が量子化し、量子化された変換係数を出力する。エントロピー符号化部１６３０は、量子化された変換係数を、レベル値を含むレジデュアルシンタックスエレメントに符号化し、ビットストリームの形態に出力することができる。
量子化部１６２５から出力された量子化された変換係数は、逆量子化部１６３３及び逆変換部１６３５を介し、逆量子化及び逆変換され、さらにレジデュアルサンプル値が生成されうる。
加算器１６１５において、レジデュアルサンプル値と予測サンプル値とが合わされ、復元サンプル値が出力される。復元後フィルタリング部１６４０は、復元サンプルについて復元後フィルタリングを行い、該復元後フィルタリングを介して更新された復元サンプル値は、イントラ予測部１６１０で行われるイントラ予測のための参照サンプル値としても利用される。復元後フィルタリング部１６４０は、復元サンプル値につき、アダマール変換領域フィルタリングまたはバイラテラルフィルタリングを行うことができる。
インループフィルタリング部１６４５は、復元後フィルタリングを介して更新された復元サンプルにつき、デブロッキングフィルタリング及び適応的ループフィルタリングのうち少なくとも一つを遂行することができる。インループフィルタリング部１６４５のフィルタリングを介して更新された復元サンプル値は、ＤＰＢ １６４８に保存され、インター予測部１６０５で行われるインター予測のための参照サンプル値としても利用される。
復号器１６５０のエントロピー復号部１６５５は、受信されたビットストリームについてエントロピー復号を行い、レベル値を含むレジデュアルシンタックスエレメントをパージングすることができる。レジデュアルシンタックスエレメントから量子化された変換係数を復元することができる。逆量子化部１６６０は、量子化された変換係数について逆量子化を行い、変換係数を出力し、逆変換部１６６５は、変換係数について逆変換を行い、レジデュアルサンプル値を出力することができる。
復号器１６５０のインター予測符号化部１６７０は、エントロピー復号部１６５５でパージングした現在ブロックの動き情報を利用し、現在ピクチャに時間的に隣接する参照ピクチャを決定し、参照ピクチャ内の参照ブロックを決定することができる。インター予測符号化部１６７０は、参照ブロックのサンプルを利用し、現在ブロックの予測サンプルを決定することができる。復号器１６５０のイントラ予測符号化部１６７５は、エントロピー復号部１６５５でパージングした現在ブロックの動き情報を利用し、イントラ予測情報を利用し、現在ブロックに空間的に隣接する参照サンプルを決定し、決定された隣接サンプルを利用し、現在ブロックの予測サンプルを決定することができる。インター予測符号化部１６７０は、ＤＰＢ（decoded picture buffer）１６９０に保存されている、まず復元されたサンプルのにおいて、現在ブロックの予測のために利用する参照サンプルを決定することができる。
復号器１６５０の加算器１６９５において、レジデュアルサンプル値と予測サンプル値とが合わされ、現在ブロックの復元サンプル値を出力する。復号器１６５０の復元後フィルタリング部１６８０は、復元サンプル値につき、アダマール変換領域フィルタリングまたはバイラテラルフィルタリングを行うことができる。復元後フィルタリング部１６８０のフィルタリングを介して更新された復元サンプル値は、イントラ予測部１６７５で行われるイントラ予測のための参照サンプル値としても利用される。
復号器１６５０のインループフィルタリング部１６８５は、復元後フィルタリングを介して更新された復元サンプルについて利用され、デブロッキングフィルタリング及び適応的ループフィルタリングのうち少なくとも一つを行うことができる。インループフィルタリング部１６８５のフィルタリングを介して更新された復元サンプル値は、ＤＰＢ １６９０に保存され、インター予測部１６７０で行われるインター予測のための参照サンプル値としても利用される。
一実施形態によるビデオ符号化方法及びビデオ復号方法、ビデオ符号化装置及びビデオ復号装置は、先の図１ないし１６を参照して説明されたビデオ符号化装置及びビデオ復号装置で決定されたデータ単位に基づき、量子化または逆量子化を行う方法を提案する。以下、図１７ないし図４０を参照し、本明細書で開示された一実施形態により、量子化パラメータ（ＱＰ：quantization parameter）を決定し、量子化または逆量子化を行うビデオ符号化方法及びその装置、またはビデオ復号方法及びその装置について説明される。
図１７は、一実施形態によるビデオ復号装置のブロック図を図示する。
一実施形態によるビデオ復号装置１７００は、獲得部１７１０及び復号部１７２０を含む。ビデオ復号装置１７００は、映像の符号化結果として生成されたビットストリームを獲得し、ビットストリームに含まれた情報に基づき、ピクチャから分割されたブロックの位置を把握し、最大符号化単位及び符号化単位のようなブロックを復号することができる。
ビデオ復号装置１７００は、獲得部１７１０及び復号部１７２０の入出力データが保存される１以上のデータ保存部（図示せず）を含むものでもある。ビデオ復号装置１７００は、データ保存部（図示せず）のデータ入出力を制御するメモリ制御部（図示せず）を含むものでもある。
ビデオ復号装置１７００は、映像復号を介して映像を復元するため、内部に搭載されたビデオデコーディングプロセッサまたは外部のビデオデコーディングプロセッサと連繋して作動することにより、予測を含む映像復号動作を遂行することができる。一実施形態によるビデオ復号装置１７００の内部ビデオデコーディングプロセッサは、別個のプロセッサだけではなく、中央演算装置またはグラフィック演算装置が、映像デコーディングプロセッシングモジュールを含むことにより、基本的な映像復号動作を具現することもできる。
ビデオ復号装置１７００は、前述の映像復号装置１００に含まれうる。例えば、獲得部１７１０及び復号部１７２０は、映像復号装置１００の復号部１２０に対応しうる。ビデオ復号装置１７００は、図１６を参照して説明した映像符号化及び復号システムの復号器１６５０に対応しうる。例えば、復号部１７２０は、復号器１６５０の逆量子化部１６３３の機能を含むものでもある。
ビデオ復号装置１７００は、映像の符号化結果として生成されたビットストリームを受信する。該ビットストリームは、現在ピクチャに係わる情報を含むものでもある。該ピクチャは、１以上の最大符号化単位を含むものでもある。ビデオ復号装置１７００は、ビットストリームから獲得された情報に基づき、ピクチャ内において、現在ブロックの位置を決定することができる。現在ブロックは、ピクチャから、ツリー構造によって分割されて生成されるブロックであり、例えば、最大符号化単位または符号化単位に対応しうる。ビデオ復号装置１７００は、現在ブロックが、下位デプスの下位ブロックにさらに分割されるか否かということを決定し、現在ブロックのツリー構造を決定することができる。現在ブロックの現在デプスに比べ、現在ブロックから下位ブロックまで分割された回数ほど増大され、下位デプスが決定されうる。現在ピクチャに含まれたツリー構造をなしているブロックにおいて、ツリーリーフに位置するブロックは、それ以上分割されないブロックである。従って、ビデオ復号装置１７００は、それ以上分割されない１以上のブロックにつき、逆量子化、逆変換、予測を行うことにより、ブロックを復号することができる。
ビデオ復号装置１７００は、現在ブロックについて予測を行い、現在ブロックの予測サンプルを生成することができる。ビデオ復号装置１７００は、現在ブロックについて逆変換を行い、前記現在ブロックのレジデュアルサンプルを生成することができる。復元部１７３０は、現在ブロックの予測サンプルと、現在ブロックのレジデュアルサンプルとを利用し、現在ブロックの復元サンプルを生成することができる。ビデオ復号装置１７００は、ブロックごとにサンプルを復元することにより、現在ピクチャを復元することができる。
例えば、現在ブロックの予測モードがイントラモードである場合、ビデオ復号装置１７００は、現在ブロックのイントラ予測情報を利用し、イントラ予測方向に位置した空間的隣接ブロックのサンプルのうち参照サンプルを決定し、参照サンプルを利用し、現在ブロックに対応する予測サンプルを決定することができる。
例えば、現在ブロックの予測モードがインターモードである場合、ビデオ復号装置１７００は、現在ブロックの動きベクトルを利用し、現在ブロックを復元することができる。ビデオ復号装置１７００は、現在ブロックの動きベクトルを利用し、参照ピクチャ内の参照ブロックを決定し、参照ブロックに含まれた参照サンプルから、現在ブロックに対応する予測サンプルを決定することができる。ビデオ復号装置１７００は、ビットストリームから獲得した変換係数レベルを利用し、変換係数を復元し、変換係数について逆量子化及び逆変換を行い、レジデュアルサンプルを復元することができる。ビデオ復号装置１７００は、現在ブロックに対応する予測サンプルと、レジデュアルサンプルとを組み合わせ、現在ブロックの復元サンプルを決定することができる。
現在ブロックがスキップモードでもって予測される場合、ビデオ復号装置１７００は、ビットストリームから、現在ブロックの変換係数をパージングする必要がない。ビデオ復号装置１７００は、現在ブロックの予測サンプルをそのまま利用し、現在ブロックの復元サンプルを決定することができる。
一実施形態によるビデオ復号装置１７００は、逆量子化を行うために、量子化パラメータ（ＱＰ）を利用する。該ＱＰは、符号化単位別に設定され、符号化単位に含まれた変換係数に１つのＱＰが適用されうる。ピクチャは、１以上のスライスを含むものでもあり、１つのスライスは、１以上の符号化単位を含むものでもある。ビデオ復号装置１７００は、符号化単位別にＱＰを決定するために、符号化単位別、スライス別またはピクチャ別にＱＰを決定するために必要な情報を、ビットストリームから獲得することができる。
一実施形態による獲得部１７１０は、符号化単位別でＱＰを決定するために必要な情報を、符号化単位関連ビットストリームシンタックスから獲得することができる。獲得部１７１０は、スライス別にＱＰを決定するために必要な情報を、スライスヘッダシンタックスから獲得することができる。獲得部１７１０は、ピクチャ別にＱＰを決定するために必要な情報を、ピクチャヘッダシンタックスから獲得することができる。
まず、ビデオ復号装置１７００が、ピクチャ別にＱＰ差分値を獲得するか、あるいはスライス別にＱＰ差分値を獲得するかということを、ピクチャパラメータセットレベルで決定することができる。
一実施形態による獲得部１７１０は、ピクチャパラメータセットから、現在ピクチャに適用されるＱＰ初期値を獲得することができる。また、獲得部１７１０は、ピクチャパラメータセットから、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在するか否かということを示すピクチャヘッダＱＰ差分値情報を獲得することができる。ピクチャヘッダＱＰ差分値情報が、ピクチャヘッダに、ＱＰ差分値情報が存在することを示せば、前記獲得部１７１０は、ピクチャヘッダから、現在ピクチャのための第１ ＱＰ差分値を獲得することができる。ピクチャヘッダＱＰ差分値情報が、ピクチャヘッダに、ＱＰ差分値情報が存在しないことを示せば、獲得部１７１０は、現在ピクチャに含まれた現在スライスのスライスヘッダから、現在スライスのための第２ ＱＰ差分値を獲得することができる。
一実施形態による復号部１７２０は、ピクチャヘッダＱＰ差分値情報が、ピクチャヘッダに、ＱＰ差分値情報が存在することを示せば、現在ピクチャに含まれた符号化単位のためのＱＰを、ＱＰ初期値と第１ ＱＰ差分値とを利用して決定することができる。復号部１７２０は、第１ ＱＰ差分値を利用し、ＱＰを利用し、現在ピクチャに含まれた符号化単位につき、逆量子化を行うことができる。
一実施形態による復号部１７２０は、ピクチャヘッダＱＰ差分値情報が、ピクチャヘッダに、ＱＰ差分値情報が存在しないことを示せば、現在スライスに含まれた符号化単位のためのＱＰを、ＱＰ初期値と第２ ＱＰ差分値とを利用して決定することができる。復号部１７２０は、第２ ＱＰ差分値を利用して決定されたＱＰを利用し、現在スライスに含まれた符号化単位につき、逆量子化を行うことができる。
以下、図１８を参照し、ビデオ復号装置１７００が、ピクチャ別またはスライス別にＱＰ差分値情報を獲得し、符号化単位別に逆量子化を行う過程について詳述する。
図１８は、一実施形態によるビデオ復号方法のフローチャートを図示する。
段階１８１０において、獲得部１７１０は、現在ピクチャに適用されるＱＰ初期値及びピクチャヘッダＱＰ差分値情報を、ピクチャパラメータセットから獲得することができる。一実施形態によるピクチャヘッダＱＰ差分値情報は、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在するか否かということを示しうる。
段階１８２０において、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在することを、ピクチャヘッダＱＰ差分値情報が示す場合、獲得部１８１０は、ピクチャヘッダから、現在ピクチャのための第１ ＱＰ差分値を獲得することができる。
段階１８３０において、復号部１８２０は、現在ピクチャに含まれた符号化単位のためのＱＰを、ＱＰ初期値と第１ ＱＰ差分値とを利用して決定することができる。
段階１８４０において、復号部１８２０は、第１ ＱＰ差分値を利用して決定されたＱＰを利用し、符号化単位につき、逆量子化を行い、符号化単位の変換係数を獲得することができる。すなわち、第１ ＱＰ差分値を利用して決定されたＱＰを利用し、現在ピクチャに含まれた符号化単位につき、逆量子化が行われうる。
段階１８５０において、復号部１８２０は、段階１８４０で獲得された符号化単位の変換係数を利用し、符号化単位を復元することができる。復号部１８２０は、変換係数について逆変換を行い、レジデュアルサンプルを獲得し、レジデュアルサンプルを利用し、符号化単位の復元サンプルを決定することができる。
一実施形態により、ピクチャヘッダＱＰ差分値情報が、ピクチャヘッダに、ＱＰ差分値情報が存在しないことを示す場合、獲得部１７１０は、現在ピクチャに含まれた現在スライスのスライスヘッダから、現在スライスのための第２ ＱＰ差分値を獲得することができる。復号部１７２０は、現在スライスに含まれた符号化単位のためのＱＰを、ＱＰ初期値と第２ ＱＰ差分値とを利用して決定することができる。復号部１７２０は、第２ ＱＰ差分値を利用して決定されたＱＰを利用し、符号化単位につき、逆量子化を行い、符号化単位の変換係数を獲得することができる。復号部１７２０は、変換係数を利用し、符号化単位を復元することができる。すなわち、第２ ＱＰ差分値を利用して決定されたＱＰを利用し、現在スライスに含まれた符号化単位につき、逆量子化が行われうる。
段階１８２０において、ピクチャヘッダＱＰ差分値情報が、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在することを示す場合、獲得部１８１０は、ピクチャヘッダから、現在ピクチャのルマ成分のための前記第１ ＱＰ差分値を獲得することができる。復号部１８２０は、ＱＰ初期値と、ルマ成分のための前記第１ ＱＰ差分値とを加えることにより、現在ピクチャに含まれるスライスのルマ成分のためのＱＰを決定することができる。復号部１８２０は、スライスのルマ成分のためのＱＰを利用し、現在ピクチャに含まれながら、現在ピクチャに含まれたスライスに含まれた符号化単位のＱＰを決定することができる。
段階１８２０において、獲得部１７１０は、符号化単位のためのＱＰ差分値を、ビットストリームから獲得することができる。復号部１８２０は、スライスのルマ成分のためのＱＰと、符号化単位のためのＱＰ差分値とを利用し、符号化単位のルマ成分のためのＱＰを決定することができる。復号部１８２０は、符号化単位のためのＱＰを利用し、符号化単位に含まれた変換係数について逆量子化を行うことができる。逆量子化された変換係数について逆変換を行い、符号化単位のレジデュアルサンプルが復号されうる。
他の実施形態による獲得部１７１０は、符号化単位のためのＱＰ差分値を、ビットストリームから獲得しないのである。その場合、復号部１８１０は、符号化単位のために予測されたＱＰ予測値を利用し、符号化単位のルマ成分のためのＱＰを決定することができる。
一実施形態により、ピクチャヘッダＱＰ差分値情報が、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在しないことを示す場合、獲得部１８１０は、スライスヘッダから、現在スライスのルマ成分のための第２ ＱＰ差分値を獲得することができる。復号部１８２０は、ＱＰ初期値と、ルマ成分のための第２ ＱＰ差分値とを加えることにより、現在スライスのルマ成分のためのＱＰを決定することができる。復号部１８２０は、現在スライスのルマ成分のためのＱＰを利用し、現在スライスに含まれた符号化単位のＱＰを決定することができる。復号部１８２０は、符号化単位のためのＱＰを利用し、符号化単位に含まれた変換係数について逆量子化を行うことができる。逆量子化された変換係数について逆変換を行い、符号化単位のレジデュアルサンプルが復号されうる。ピクチャヘッダＱＰ差分値情報が、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在しないことを示す場合、獲得部１８１０は、現在スライスに含まれた符号化単位のためのＱＰ差分値を、ビットストリームから獲得することができる。復号部１８２０は、符号化単位のためのＱＰ差分値を利用し、現在スライスに含まれた現在符号化単位のルマ成分のためのＱＰを決定することができる。
ピクチャヘッダＱＰ差分値情報が、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在しないことを示す場合、獲得部１８１０は、スライスヘッダから、現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値、及び現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値を獲得することができる。復号部１８２０は、現在スライスに含まれた現在符号化単位のＣｂクロマ成分のためのＱＰを、現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値を利用して更新することにより、現在符号化単位のＣｂクロマ成分のためのＣｂ ＱＰを決定することができる。復号部１８２０は、現在スライスに含まれた現在符号化単位のＣｒクロマ成分のためのＱＰを、現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値を利用して更新することにより、現在符号化単位のＣｒクロマ成分のためのＣｒ ＱＰを決定することができる。
図１９は、一実施形態によるビデオ符号化装置のブロック図を図示する。
図１９を参照すれば、一実施形態によるビデオ符号化装置１９００は、量子化部１９１０及び情報符号化部１９２０を含むものでもある。
一実施形態によるビデオ符号化装置１９００は、量子化部１９１０及び情報符号化部１９２０を制御する中央プロセッサ（図示せず）を含むものでもある。または、量子化部１９１０及び情報符号化部１９２０が、それぞれの自体プロセッサ（図示せず）によって作動し、プロセッサ（図示せず）が相互有機的に作動することにより、ビデオ符号化装置１９００が全体的に作動することもできる。または、ビデオ符号化装置１９００の外部プロセッサ（図示せず）の制御により、量子化部１９１０及び情報符号化部１９２０が制御されうる。
ビデオ符号化装置１９００は、量子化部１９１０及び情報符号化部１９２０の入出力データが保存される１以上のデータ保存部（図示せず）を含むものでもある。ビデオ符号化装置１９００は、データ保存部（図示せず）のデータ入出力を制御するメモリ制御部（図示せず）を含むものでもある。
ビデオ符号化装置１９００は、映像符号化のために、内部に搭載されたビデオエンコードプロセッサ、または外部のビデオエンコーディングプロセッサと連繋して作動することにより、予測を含む映像符号化動作を遂行することができる。一実施形態によるビデオ符号化装置１９００の内部ビデオエンコーディングプロセッサは、別個のプロセッサだけではなく、中央演算装置またはグラフィック演算装置が、映像エンコーディングプロセッシングモジュールを含むことにより、基本的な映像符号化動作を具現することもできる。
ビデオ符号化装置１９００は、図１６を参照して説明した映像符号化及び復号システムの符号化器１６００に対応しうる。例えば、情報符号化部１９２０は、符号化器１６００のエントロピー符号化部１６３０に対応しうる。量子化部１９１０は、符号化器１６００の量子化部１６２５に対応しうる。
一実施形態によるビデオ符号化装置１９００は、ピクチャを、複数個の最大符号化単位に分割し、各最大符号化単位を多様な大きさ、及び多様な形態のブロックに分割し、符号化することができる。
例えば、現在ブロックの予測モードがイントラモードである場合、ビデオ符号化装置１９００は、現在ブロックの現在ブロックのイントラ予測方向に位置した空間的隣接ブロックのサンプルのうち参照サンプルを決定し、参照サンプルを利用し、現在ブロックの予測サンプルを決定することができる。予測サンプルと、現在ブロックのサンプルとの差であるレジデュアルサンプルを決定し、該レジデュアルサンプルにつき、変換ブロックを基に変換して変換係数を生成し、該変換係数について量子化を行い、量子化された変換係数を生成することができる。
例えば、現在ブロックがスキップモードでもって予測される場合、ビデオ符号化装置１９００は、現在ブロックを予測するための動きベクトルを決定することができる。ビデオ符号化装置１９００は、参照ピクチャ内において、現在ブロックの参照ブロックを決定し、現在ブロックから、参照ブロックを示す動きベクトルを決定することができる。スキップモードである場合には、レジデュアルブロックの符号化が必要ない。
例えば、現在ブロックの予測モードがインターモードである場合、ビデオ符号化装置１９００は、現在ブロックを予測するための動きベクトルを決定することができる。ビデオ符号化装置１９００は、参照ピクチャ内の現在ブロックの参照ブロックを決定し、現在ブロックから、参照ブロックを示す動きベクトルを決定することができる。ビデオ符号化装置１９００は、参照ブロックに含まれた参照サンプルを利用し、現在ブロックの予測サンプルを決定し、予測サンプルと、現在ブロックのサンプルとの差であるレジデュアルサンプルを決定し、該レジデュアルサンプルにつき、変換ブロックを基に変換及び量子化を行うことにより、量子化された変換係数を生成することができる。
現在ブロックは、映像から、ツリー構造によって分割されて生成されるブロックであり、例えば、最大符号化単位、符号化単位または変換単位に対応しうる。ビデオ符号化装置１９００は、ピクチャに含まれたブロックを、符号化順序によって符号化することができる。
一実施形態によるビデオ符号化装置１９００は、量子化を行うために、ＱＰを利用する。該ＱＰは、符号化単位別に設定され、符号化単位に含まれた変換係数に、１つのＱＰが適用されうる。ピクチャは、１以上のスライスを含むものでもあり、１つのスライスは、１以上の符号化単位を含むものでもある。ビデオ符号化装置１９００は、符号化単位別にＱＰを決定し、符号化単位別、スライス別またはピクチャ別にＱＰを決定するために必要な情報をシグナリングするために、符号化することができる。
一実施形態による情報符号化部１９２０は、符号化単位別にＱＰを決定するために必要な情報を符号化し、符号化単位関連ビットストリームシンタックスの形態に出力することができる。情報符号化部１９２０は、スライス別にＱＰを決定するために必要な情報を符号化し、スライスヘッダシンタックスの形態に出力することができる。情報符号化部１９２０は、ピクチャ別にＱＰを決定するために必要な情報を符号化し、ピクチャヘッダシンタックスの形態に出力することができる。
まず、ビデオ符号化装置１９００が、ピクチャ別にＱＰ差分値を伝送するか、あるいはスライス別にＱＰ差分値を伝送するかということを、ピクチャパラメータセットレベルで決定することができる。
一実施形態による量子化部１９１０は、現在ピクチャに適用されるＱＰ初期値を決定することができる。
ピクチャ別にＱＰ差分値を決定する場合、情報符号化部１９２０は、現在ピクチャで使用されたＱＰとＱＰ初期値との第１ ＱＰ差分値を決定することができる。情報符号化部１９２０は、第１ ＱＰ差分値を含む現在ピクチャに係わるピクチャヘッダを生成することができる。
スライス別にＱＰ差分値を決定する場合、情報符号化部１９２０は、現在ピクチャに含まれた現在スライスで使用されたＱＰとＱＰ初期値との第２ ＱＰ差分値を決定することができる。情報符号化部１９２０は、第２ ＱＰ差分値を含む、現在スライスに係わるスライスヘッダを生成することができる。
一実施形態による情報符号化部１９２０は、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在するか否かということを示すピクチャヘッダＱＰ差分値情報、及びＱＰ初期値を含むピクチャパラメータセットを生成することができる。
以下、図２０を参照し、ビデオ符号化装置１９００が、ピクチャ別またはスライス別にＱＰ差分値情報をシグナリングする過程について詳述する。
図２０は、一実施形態によるビデオ符号化方法のフローチャートを図示する。
段階２０１０において、量子化部１９１０は、現在ピクチャに適用されるＱＰ初期値を決定することができる。
段階２０２０において、ピクチャ別にＱＰ差分値を決定する場合、情報符号化部１９２０は、現在ピクチャで使用されたＱＰとＱＰ初期値との第１ ＱＰ差分値を決定し、第１ ＱＰ差分値を含む現在ピクチャに係わるピクチャヘッダを生成することができる。
段階２０３０において、情報符号化部１９２０は、現在ピクチャのピクチャヘッダに、ＱＰ差分値情報が存在するか否かということを示すピクチャヘッダＱＰ差分値情報、及びＱＰ初期値を含むピクチャパラメータセットを生成することができる。
一実施形態により、スライス別にＱＰ差分値を決定する場合、情報符号化部１９２０は、現在ピクチャに含まれた現在スライスで使用されたＱＰとＱＰ初期値との第２ ＱＰ差分値を決定し、第２ ＱＰ差分値を含む現在スライスに係わるスライスヘッダを生成することができる。
段階２０２０において、量子化部１９１０は、ピクチャ別にＱＰ差分値を決定する場合、現在ピクチャに含まれるスライスのルマ成分のためのＱＰを決定することができる。情報符号化部１９２０は、現在ピクチャに含まれるスライスのルマ成分のためのＱＰと、ＱＰ初期値との差値を利用し、現在ピクチャのルマ成分のための第１ ＱＰ差分値を決定することができる。情報符号化部１９２０は、符号化単位のルマ成分のためのＱＰと、スライスのルマ成分のためのＱＰとの差値を利用し、符号化単位のためのＱＰ差分値を決定することができる。情報符号化部１９２０は、符号化単位のためのＱＰ差分値を符号化することができる。
段階２０３０において、量子化部１９１０は、スライス別にＱＰ差分値を決定する場合、現在スライスのルマ成分のためのＱＰを決定することができる。情報符号化部１９２０は、現在スライスのルマ成分のためのＱＰと、ＱＰ初期値との差値を利用し、現在スライスのルマ成分のための第２ ＱＰ差分値を決定することができる。情報符号化部１９２０は、符号化単位のルマ成分のためのＱＰから、現在スライスのルマ成分のためのＱＰを差し引くことにより、符号化単位のためのＱＰ差分値を決定することができる。情報符号化部１９２０は、符号化単位のためのＱＰ差分値を符号化することができる。
他の実施形態による量子化部１９１０は、符号化単位のために予測されたＱＰ予測値を利用し、符号化単位のルマ成分のためのＱＰを決定し、ＱＰを利用し、符号化単位につき、量子化を行うこともできる。その場合、情報符号化部１９２０は、符号化単位のためのＱＰ差分値を符号化しないのである。
段階２０３０において、スライス別にＱＰ差分値を符号化する場合、情報符号化部１９２０は、現在スライスに含まれた符号化単位のＣｂクロマ成分のＱＰを決定するための、現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値を決定することができる。また、情報符号化部１９２０は、現在スライスに含まれた符号化単位のＣｒクロマ成分のＱＰを決定するための、現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値を決定することができる。情報符号化部１９２０は、現在スライスのＣｂ ＱＰ差分値、及びＣｒクロマ成分のためのＣｒ ＱＰ差分値を符号化し、Ｃｂ ＱＰ差分値とＣｒ ＱＰ差分値とを含む現在スルライのためのスライスヘッダを生成することができる。
量子化部１９１０は、ＱＰを利用し、符号化単位の変換係数について量子化を行い、符号化単位の量子化された変換係数を生成することができる。情報符号化部１９２０は、量子化された変換係数に係わる情報についてエントロピー符号化を行い、ビットストリームを生成することができる。
一実施形態によるビデオ復号装置１７００、及び一実施形態によるビデオ符号化装置１９００は、ＱＰ差分値をピクチャ別またはスライス別に、選択的にシグナリングすることができる。従って、一実施形態によるビデオ符号化装置１９００は、ピクチャ別にＱＰ差分値をシグナリングするか、あるいはスライス別にＱＰ差分値をシグナリングするかということを、データピクチャの特性またはデータ伝送効率によって決定し、伝送効率が高い方法により、ＱＰ差分値をシグナリングすることができる。一実施形態によるビデオ復号装置１７００は、ピクチャパラメータセットから獲得された情報に基づき、ピクチャ別にＱＰ差分値を獲得するか、あるいはスライス別にＱＰ差分値を獲得するかということを決定し、ピクチャ別にＱＰ、またはスライス別にＱＰを決定することができる。従って、ピクチャ別にＱＰ差分値がシグナリングされる場合には、ピクチャに含まれたスライス別にＱＰ差分値がシグナリングされる必要がないので、ＱＰをシグナリングするためのデータが節減されうる。
図２１は、一実施形態により、ピクチャレベルまたはスライスレベルでＱＰを誘導するための概要図を図示する。
従来のビデオコーデックの場合、一般的に、ＱＰ ＱＰの初期値がピクチャパラメータセット（ＰＰＳ：picture parameter set）で設定され、スライスヘッダを介し、各スライスのＱＰ初期値の差分値が伝送され、スライスごとにＱＰが設定された。
それに対し、一実施形態によるビデオ復号装置１７００においては、１つのピクチャごとに、ピクチャヘッダを獲得することができ、ピクチャヘッダから、ＱＰに係わる情報をシグナリングすることができる。本発明においては、ビデオ復号装置１７００とビデオ符号化装置１９００との間に、ピクチャ別にＱＰ差分値をシグナリングするか、スライス別にＱＰ差分値をシグナリングするかということを選択するので、ＱＰのシグナリング構造が単純にもなる。
まず、段階２１００において、ビデオ復号装置１７００は、ピクチャヘッダより上位レベルであるピクチャパラメータセット（ＰＰＳ）またはシーケンスパラメータセット（ＳＰＳ：sequence parameter set）から、ＱＰの初期値を獲得することができる。また、段階２１１０において、ビデオ復号装置１７００は、ピクチャパラメータセット（ＰＰＳ）またはシーケンスパラメータセット（ＳＰＳ）から、ピクチャヘッダＱＰ差分値（ｄＱＰ）情報を獲得することができる。ビデオ復号装置１７００は、ピクチャヘッダＱＰ差分値情報により、ピクチャレベルでＱＰを決定するか、あるいはスライスレベルでＱＰを決定するかということを決定することができる。
具体的には、ピクチャヘッダＱＰ差分値情報が０ではない場合（例えば、ピクチャヘッダＱＰ差分値情報が１である場合）、すなわち、ピクチャヘッダに、ＱＰ差分値（デルタ値）が存在する場合、段階２１２０において、ビデオ復号装置１７００は、ピクチャヘッダから、ＱＰ差分値を獲得することができる。ビデオ復号装置１７００は、ピクチャヘッダから獲得されたＱＰ差分値と、ピクチャパラメータセット（ＰＰＳ）またはシーケンスパラメータセット（ＳＰＳ）から獲得したＱＰ初期値と、を利用し、ピクチャごとにＱＰを決定することができる。
ピクチャヘッダＱＰ差分値情報が０である場合、すなわち、ピクチャヘッダに、ＱＰ差分値が存在しない場合、段階２１３０において、ビデオ復号装置１７００は、スライスヘッダからＱＰ差分値を獲得することができる。ビデオ復号装置１７００は、スライスヘッダから獲得されたＱＰ差分値と、ピクチャパラメータセット（ＰＰＳ）またはシーケンスパラメータセット（ＳＰＳ）から獲得したＱＰ初期値と、を利用し、スライスごとにＱＰを決定することができる。
ビデオ復号装置１７００の段階２１００ないし段階２１３０の動作のために、ビデオ符号化装置１９００は、ピクチャレベルまたはスライスレベルでＱＰを決定するかということを決定することができる。また、ビデオ符号化装置１９００は、ピクチャレベルでＱＰを決定するか、あるいはスライスレベルでＱＰを決定するかということを示すピクチャヘッダＱＰ差分値情報を符号化することができる。
具体的には、ビデオ符号化装置１９００が、ピクチャごとにＱＰを決定する場合に、ピクチャごとに、ＱＰ差分値を符号化することができる。従って、ビデオ符号化装置１９００は、現在ピクチャのＱＰ差分値を含む現在ピクチャのピクチャヘッダを生成することができる。その場合、現在ピクチャのピクチャヘッダに、ＱＰ差分値が存在することを示すように、ピクチャヘッダＱＰ差分値情報が１を示すように符号化することができる。
ビデオ符号化装置１９００がスライスごとにＱＰを決定する場合、スライスごとにＱＰ差分値を符号化することができる。従って、ビデオ符号化装置１９００は、現在スライスのＱＰ差分値を含む現在スライスのスライスヘッダを生成することができる。その場合、ピクチャヘッダに、ＱＰ差分値が存在しないことを示すように、ピクチャヘッダＱＰ差分値情報が０を示すように符号化することができる。
一実施形態によるビデオ符号化装置１９００は、ＱＰの初期値と、ピクチャヘッダＱＰ差分値情報とを含むピクチャパラメータセット（ＰＰＳ）またはシーケンスパラメータセット（ＳＰＳ）を生成することができる。
前述のように、ピクチャレベルにおいて、現在ピクチャに含まれた符号化単位につき、同一ＱＰを設定する場合には、ＱＰを、ピクチャヘッダでのみシグナリングされるようにすることができるので、ＱＰをシグナリングするためのビット量を減らすことができる。すなわち、現在ピクチャに含まれたスライスごとに、当該スライスヘッダを介し、ＱＰをシグナリングする必要なく、現在ピクチャのピクチャヘッダでのみ、ＱＰ差分値が１回シグナリングされうる。もし現在ピクチャに含まれたスライスの特性が異なるのであるならば、さらに細部的にＱＰを設定するために、スライス別にＱＰを別途に設定し、各スライスに、スライスヘッダごとにＱＰ差分値がシグナリングされるようにすることもできる。
以下、図２２ないし図２４を参照し、ピクチャヘッダＱＰ差分値情報をシグナリングするためのシンタックス構造について詳述する。
図２２は、一実施形態による、ピクチャヘッダＱＰ差分値情報が含まれたピクチャパラメータセットを図示する。
ビデオ符号化装置１９００は、ピクチャパラメータセットシンタックス２２００に、シンタックスエレメントｐｐｓ＿ｉｎｉｔ＿ｑｐ＿ｍｉｎｕｓ２６ ２２１０及びｐｐｓ＿ｑｐ＿ｄｅｌｔａ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２２２０を含めることができる。シンタックスエレメントｐｐｓ＿ｑｐ＿ｄｅｌｔａ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２２２０は、現在ピクチャのピクチャヘッダに、現在ピクチャのためのＱＰ差分値が存在するか否かということを示しうる。
ビデオ復号装置１７００は、ピクチャパラメータセットシンタックス２２００から、シンタックスエレメントｐｐｓ＿ｉｎｉｔ＿ｑｐ＿ｍｉｎｕｓ２６ ２２１０及びｐｐｓ＿ｑｐ＿ｄｅｌｔａ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２２２０をパージングすることができる。ビデオ復号装置１７００は、シンタックスエレメントｐｐｓ＿ｉｎｉｔ＿ｑｐ＿ｍｉｎｕｓ２６ ２２１０から、現在ピクチャまたは現在ピクチャに含まれたスライスに適用可能なＱＰの初期値を獲得することができる。ビデオ復号装置１７００は、シンタックスエレメントｐｐｓ＿ｑｐ＿ｄｅｌｔａ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２２２０から、現在ピクチャのピクチャヘッダに、現在ピクチャのためのＱＰ差分値が存在するか否かということを確認することができる。
シンタックスエレメントｐｐｓ＿ｉｎｉｔ＿ｑｐ＿ｍｉｎｕｓ２６ ２２１０は、現在ピクチャまたは現在ピクチャに含まれたスライスに適用可能なＱＰ ＳｌｉｃｅＱｐＹの初期値を示しうる。ピクチャヘッダにおいて、ピクチャのＱＰ差分値ｐｈ＿ｑｐ＿ｄｅｌｔａが０ではない値に復号されれば、ピクチャレベルにおいて、ＳｌｉｃｅＱｐＹの初期値が、ＱＰ差分値を利用しても調整される。スライスヘッダにおいて、スライスのＱＰ差分値ｓｈ＿ｑｐ＿ｄｅｌｔａが０ではない値に復号されれば、スライスレベルにおいて、ＳｌｉｃｅＱｐＹの初期値がＱＰ差分値を利用しても調整される。ｐｐｓ＿ｉｎｉｔ＿ｑｐ＿ｍｉｎｕｓ２６ ２２１０の値は、－（２６＋ＱｐＢｄＯｆｆｓｅｔ）において、＋３７までの範囲内の値でもある。ＱｐＢｄＯｆｆｓｅｔは、ビットデプスによって決定されうる。ＳｌｉｃｅＱｐＹは、ｐｈ＿ｑｐ＿ｄｅｌｔａまたはｓｈ＿ｑｐ＿ｄｅｌｔａが復号されるか否かということにより、下記の数式によって決定されうる。
SliceQpY = 26 + pps_init_qp_minus26 + ph_qp_delta
SliceQpY = 26 + pps_init_qp_minus26 + sh_qp_delta
従って、スライスのルマ成分のＱＰ ＳｌｉｃｅＱｐＹは、－ＱｐＢｄＯｆｆｓｅｔにおいて、＋６３までの範囲で決定されうる。
図２３は、一実施形態による、現在ピクチャのＱＰ差分値が含まれたピクチャヘッダを図示する。
ビデオ符号化装置１９００は、ピクチャヘッダシンタックス２３００に、シンタックスエレメントｐｈ＿ｑｐ＿ｄｅｌｔａ ２３２０を含めることができる。シンタックスエレメントｐｈ＿ｑｐ＿ｄｅｌｔａ ２３２０は、現在ピクチャに適用可能なＱＰ差分値を示しうる。具体的には、先のピクチャパラメータセットシンタックス２２００に含まれたｐｐｓ＿ｑｐ＿ｄｅｌｔａ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２２２０が１を示す場合（２３１０）、ピクチャヘッダシンタックス２３００に、シンタックスエレメントｐｈ＿ｑｐ＿ｄｅｌｔａ ２３２０を含めることができる。
ビデオ復号装置１７００は、ピクチャヘッダシンタックス２３００から、シンタックスエレメントｐｈ＿ｑｐ＿ｄｅｌｔａ ２３２０を獲得することができる。具体的には、先のピクチャパラメータセットシンタックス２２００から獲得したｐｐｓ＿ｑｐ＿ｄｅｌｔａ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２２２０が１を示す場合（２３１０）、ピクチャヘッダシンタックス２３００から、シンタックスエレメントｐｈ＿ｑｐ＿ｄｅｌｔａ ２３２０を獲得することができる。その場合、ピクチャヘッダシンタックス２３００に対応する現在ピクチャのために、シンタックスエレメントｐｐｓ＿ｉｎｉｔ＿ｑｐ＿ｍｉｎｕｓ２６ ２２１０とｐｈ＿ｑｐ＿ｄｅｌｔａ ２３２０とを加えることにより、ピクチャのＱＰを決定することができる。現在ピクチャに含まれた全ての符号化単位につき、ピクチャのＱＰを適用することができる。各符号化単位に対応するシンタックス構造から、符号化単位のＱＰ差分値が獲得される場合には、符号化単位のＱＰ差分値と、ピクチャのＱＰとを加えることにより、符号化単位のＱＰが決定されうる。ビデオ復号装置１７００は、符号化単位ごとに決定されたＱＰを利用し、符号化単位の変換サンプルについて逆量子化を行うことができる。
図２４は、一実施形態による、現在スライスのＱＰ差分値が含まれたスライスヘッダを図示する。
ビデオ符号化装置１９００は、スライスヘッダシンタックス２４００に、シンタックスエレメントｓｈ＿ｑｐ＿ｄｅｌｔａ ２４２０を含めることができる。シンタックスエレメントｓｈ＿ｑｐ＿ｄｅｌｔａ ２４２０は、現在スライスに適用可能なルマ成分のＱＰ差分値を示しうる。具体的には、先のピクチャパラメータセットシンタックス２２００に含まれたｐｐｓ＿ｑｐ＿ｄｅｌｔａ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２２２０が０を示す場合（２４１０）、スライスヘッダシンタックス２４００に、シンタックスエレメントｓｈ＿ｑｐ＿ｄｅｌｔａ ２４２０を含めることができる。また、ビデオ符号化装置１９００は、シンタックスエレメントｓｈ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔ及びｓｈ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔ ２４３０を、スライスヘッダシンタックス２４００に含めることができる。シンタックスエレメントｓｈ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔ及びｓｈ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔ ２４３０は、それぞれクロマＣｂ成分のＱＰ差分値、及びクロマＣｒ成分のＱＰ差分値を示す。
ビデオ復号装置１７００は、スライスヘッダシンタックス２４００から、シンタックスエレメントｓｈ＿ｑｐ＿ｄｅｌｔａ ２４２０を獲得することができる。具体的には、先のピクチャパラメータセットシンタックス２２００から獲得したｐｐｓ＿ｑｐ＿ｄｅｌｔａ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２２２０が０を示す場合（２４１０）、スライスヘッダシンタックス２４００から、シンタックスエレメントｓｈ＿ｑｐ＿ｄｅｌｔａ ２４２０を獲得することができる。その場合、スライスヘッダシンタックス２４００に対応する現在スライスのために、シンタックスエレメントｐｐｓ＿ｉｎｉｔ＿ｑｐ＿ｍｉｎｕｓ２６ ２２１０とｓｈ＿ｑｐ＿ｄｅｌｔａ ２４２０とを加えることにより、スライスのルマ成分のＱＰを決定することができる。現在スライスに含まれた全ての符号化単位につき、スライスのルマ成分のＱＰを適用することができる。各符号化単位に対応するシンタックス構造から、符号化単位のルマ成分のＱＰ差分値が獲得される場合には、符号化単位のルマ成分のＱＰ差分値と、スライスのルマ成分のＱＰとを加えることにより、符号化単位のルマ成分のＱＰが決定されうる。
また、ビデオ復号装置１７００は、シンタックスエレメントｓｈ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔ及びｓｈ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔ ２４３０を、スライスヘッダシンタックス２４００からパージングすることができる。シンタックスエレメントｓｈ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔ及びｓｈ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔ ２４３０から、それぞれクロマＣｂ成分のＱＰ差分値、及びクロマＣｒ成分のＱＰ差分値を獲得することができる。従って、ビデオ復号装置１７００は、クロマＣｂ成分のＱＰ差分値を利用し、現在スライスに含まれた符号化単位のクロマＣｂ成分のためのＱＰを決定し、クロマＣｒ成分のＱＰ差分値を利用し、現在スライスに含まれた符号化単位のクロマＣｒ成分のためのＱＰを決定することができる。ビデオ復号装置１７００は、符号化単位ごとに決定されたＱＰを利用し、符号化単位の変換サンプルについて逆量子化を行うことができる。
ｓｈ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔ及びｓｈ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔ ２４３０は、それぞれ－１２から１２までの範囲の値でもある。
スライスにおけるＣｂ成分のＱＰのオフセットは、ｐｐｓ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔ＋ｓｈ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔと決定され、ｐｐｓ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔ＋ｓｈ＿ｃｂ＿ｑｐ＿ｏｆｆｓｅｔの値は、－１２から＋１２までの範囲内に決定されうる。類似して、スライスにおけるＣｒ成分のＱＰのオフセットは、ｐｐｓ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔ＋ｓｈ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔと決定され、ｐｐｓ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔ＋ｓｈ＿ｃｒ＿ｑｐ＿ｏｆｆｓｅｔの値は、－１２から＋１２までの範囲内に決定されうる。
それ以外に、符号化単位レベルにおいて、ＱＰ差分値（delta ＱＰ）をシグナリングする場合には、タイル開始、スライス開始、ピクチャヘッダまたはスライスヘッダと決定されたＱＰが、ＱＰの初期値としても使用される。例えば、ピクチャヘッダにおいてＱＰが決定され、ピクチャ内のスライスまたはタイルが存在する場合、当該のスライスまたはタイルの開始において、ピクチャヘッダにおいて決定されたＱＰが初期値に利用されうる。従って、符号化単位レベルでシグナリングされた符号化単位のＱＰ差分値と、タイル開始またはスライス開始で決定されたＱＰの初期値とを加え、当該符号化単位のＱＰが決定されうる。
他の例として、ＰＯＣ（picture order counter）をシグナリングするにおいて、スライスヘッダではないピクチャヘッダにだけＰＯＣ情報を含めることができる。そのような場合、特定スライスが、どのピクチャに属するということを確認し難くもなる。しかしながら、システムレベルでシグナリングするタイムスタンプやシーケンスナンバーなどを使用し、スライスが属したピクチャのインデックスを確認するようにすることができる。また、特定のスライスやピクチャヘッダの情報が損失されたことを、コーデックの外部システムから通知されて判断することもできる。
一実施形態によるビデオ符号化方法及びビデオ復号方法により、ピクチャの特性またはデータ伝送効率により、ＱＰの差分値を伝送する方式を決定し、その方式により、ＱＰの差分値をシグナリングすることができる。
以下、図２５ないし図３２を参照し、多様なツールで利用可能なパラメータを、ピクチャレベルまたはスライスレベルで選択的にシグナリングするためのシンタックス構造について詳述する。ピクチャシーケンスセットでシグナリングされたフラグを介し、ツール関連パラメータがピクチャヘッダでシグナリングされるか、あるいはスライスヘッダでシグナリングされるかということが決定されうる。
図２５は、一実施形態による、ピクチャヘッダにデブロッキングフィルタ関連パラメータが含まれているか否かということを示す情報が含まれたピクチャパラメータセットを図示する。
ビデオ符号化装置１９００は、ピクチャパラメータセットシンタックス２５００に、ｐｐｓ＿ｄｂｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２５１０を含めることができる。シンタックスエレメントｐｐｓ＿ｄｂｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２５１０は、現在ピクチャのピクチャヘッダに、現在ピクチャのためのデブロッキングフィルタリング関連パラメータ差分値が存在するか否かということを示しうる。
ビデオ復号装置１７００は、ピクチャパラメータセットシンタックス２５００から、ｐｐｓ＿ｄｂｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２５１０をパージングすることができる。ビデオ復号装置１７００は、シンタックスエレメントｐｐｓ＿ｄｂｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２５１０から、現在ピクチャヘッダに、現在ピクチャのためのデブロッキングフィルタリング関連パラメータが存在するか否かということを確認することができる。
図２６は、一実施形態による、現在ピクチャのデブロッキングフィルタ関連パラメータが含まれたピクチャヘッダを図示する。
ビデオ符号化装置１９００は、ピクチャヘッダシンタックス２６００に、シンタックスエレメントｐｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｌｕｍａ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｂ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｒ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２ ２６２０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２５００に含まれたｐｐｓ＿ｄｂｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２５１０が１を示す場合（２６１０）、ピクチャヘッダシンタックス２６００に、シンタックスエレメントｐｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｌｕｍａ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｂ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｒ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２ ２６２０を含めることができる。
ビデオ復号装置１７００は、ピクチャヘッダシンタックス２６００から、シンタックスエレメントｐｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｌｕｍａ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｂ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｒ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２ ２６２０を獲得することができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２５００に含まれたｐｐｓ＿ｄｂｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２５１０が１を示す場合（２６１０）、ピクチャヘッダシンタックス２６００から、シンタックスエレメントｐｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｌｕｍａ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｂ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｐｈ＿ｃｒ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２ ２６２０を獲得することができる。
シンタックスエレメントｐｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在ピクチャ内のスライスのルマ成分について適用されるデブロッキングパラメータβのためのオフセットを示しうる。シンタックスエレメントｐｈ＿ｌｕｍａ＿ｔＣ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在ピクチャ内のスライスのルマ成分について適用されるデブロッキングパラメータｔＣのためのオフセットを示しうる。シンタックスエレメントｐｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在ピクチャ内のスライスのＣｂ成分について適用されるデブロッキングパラメータβのためのオフセットを示しうる。シンタックスエレメントｐｈ＿ｃｂ＿ｔＣ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在ピクチャ内のスライスのＣｂ成分について適用されるデブロッキングパラメータｔＣのためのオフセットを示しうる。シンタックスエレメントｐｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在ピクチャ内のスライスのＣｒ成分について適用されるデブロッキングパラメータβのためのオフセットを示しうる。シンタックスエレメントｐｈ＿ｃｒ＿ｔＣ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在ピクチャ内のスライスのＣｒ成分について適用されるデブロッキングパラメータｔＣのためのオフセットを示しうる。ビデオ復号装置１７００は、ピクチャヘッダから獲得された前記デブロッキングフィルタリング関連パラメータを利用し、現在ピクチャに含まれた符号化単位の境界についてデブロッキングフィルタリングを行うことができる。
図２７は、一実施形態による、現在スライスのデブロッキングフィルタ関連パラメータが含まれたスライスヘッダを図示する。
ビデオ符号化装置１９００は、スライスヘッダシンタックス２７００に、シンタックスエレメントｓｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｌｕｍａ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｂ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｒ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２ ２７２０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２５００に含まれたｐｐｓ＿ｄｂｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２５１０が０を示す場合（２７１０）、スライスヘッダシンタックス２７００に、シンタックスエレメントｓｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｌｕｍａ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｂ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｒ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２ ２７２０を含めることができる。
ビデオ復号装置１７００は、スライスヘッダシンタックス２７００から、シンタックスエレメントｓｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｌｕｍａ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｂ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｒ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２ ２７２０を獲得することができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２５００に含まれたｐｐｓ＿ｄｂｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２５１０が０を示す場合（２７１０）、スライスヘッダシンタックス２７００から、シンタックスエレメントｓｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｌｕｍａ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｂ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２，ｓｈ＿ｃｒ＿ｔｃ＿ｏｆｆｓｅｔ＿ｄｉｖ２ ２７２０を獲得することができる。
シンタックスエレメントｓｈ＿ｌｕｍａ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在スライスのルマ成分について適用されるデブロッキングパラメータβのためのオフセットを示しうる。シンタックスエレメントｓｈ＿ｌｕｍａ＿ｔＣ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在スライスのルマ成分について適用されるデブロッキングパラメータｔＣのためのオフセットを示しうる。シンタックスエレメントｓｈ＿ｃｂ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在スライスのＣｂ成分について適用されるデブロッキングパラメータβのためのオフセットを示しうる。シンタックスエレメントｓｈ＿ｃｂ＿ｔＣ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在スライスのＣｂ成分について適用されるデブロッキングパラメータｔＣのためのオフセットを示しうる。シンタックスエレメントｓｈ＿ｃｒ＿ｂｅｔａ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在スライスのＣｒ成分について適用されるデブロッキングパラメータβのためのオフセットを示しうる。シンタックスエレメントｓｈ＿ｃｒ＿ｔＣ＿ｏｆｆｓｅｔ＿ｄｉｖ２は、現在スライスのＣｒ成分について適用されるデブロッキングパラメータｔＣのためのオフセットを示しうる。ビデオ復号装置１７００は、スライスヘッダから獲得された前記デブロッキングフィルタリング関連パラメータを利用し、現在スライスに含まれた符号化単位の境界についてデブロッキングフィルタリングを行うことができる。
図２８は、一実施形態による、ピクチャヘッダに、各種ツール関連パラメータが含まれているか否かということを示す情報が含まれたピクチャパラメータセットを図示する。
ビデオ符号化装置１９００は、ピクチャパラメータセットシンタックス２８００に、ｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８１０、ｐｐｓ＿ｓａｏ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８２０、ｐｐｓ＿ａｌｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８３０、ｐｐｓ＿ｗｐ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８４０を含めることができる。シンタックスエレメントｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８１０は、現在ピクチャのピクチャヘッダに、現在ピクチャのための参照ピクチャリスト関連パラメータが存在するか否かということを示しうる。シンタックスエレメントｐｐｓ＿ｓａｏ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８２０は、現在ピクチャのピクチャヘッダに現在ピクチャのためのＳＡＯ（sample adaptive offset）関連パラメータが存在するか否かということを示しうる。シンタックスエレメントｐｐｓ＿ａｌｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８３０は、現在ピクチャのピクチャヘッダに、現在ピクチャのためのＡＬＦ（adaptive loop filtering）関連パラメータが存在するか否かということを示しうる。シンタックスエレメントｐｐｓ＿ｗｐ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８４０は、現在ピクチャのピクチャヘッダに、現在ピクチャのための加重値予測（weighted prediction）関連パラメータが存在するか否かということを示しうる。
ビデオ復号装置１７００は、ピクチャパラメータセットシンタックス２８００から、ｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８１０，ｐｐｓ＿ｓａｏ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８２０，ｐｐｓ＿ａｌｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８３０，ｐｐｓ＿ｗｐ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８４０をパージングすることができる。ビデオ復号装置１７００は、シンタックスエレメントｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８１０から、現在ピクチャのピクチャヘッダに、現在ピクチャのための参照ピクチャリスト関連パラメータが存在するか否かということを確認することができる。ビデオ復号装置１７００は、シンタックスエレメントｐｐｓ＿ｓａｏ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８２０から、現在ピクチャのピクチャヘッダに、現在ピクチャのためのＳＡＯ関連パラメータが存在するか否かということを確認することができる。ビデオ復号装置１７００は、シンタックスエレメントｐｐｓ＿ａｌｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８３０から、現在ピクチャのピクチャヘッダに、現在ピクチャのためのＡＬＦ関連パラメータが存在するか否かということを確認することができる。ビデオ復号装置１７００は、シンタックスエレメントｐｐｓ＿ｗｐ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８４０から、現在ピクチャのピクチャヘッダに、現在ピクチャのための加重値予測関連パラメータが存在するか否かということを確認することができる。
図２９は、一実施形態による、現在ピクチャの加重値予測関連パラメータ、ＳＡＯ関連パラメータ及び参照ピクチャリスト関連パラメータが含まれたピクチャヘッダを図示する。
ビデオ符号化装置１９００は、ピクチャヘッダシンタックス２９００に、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）２９２０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｗｐ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８４０が１を示す場合（２９１０）、ピクチャヘッダシンタックス２９００に、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）２９２０を含めることができる。
ビデオ復号装置１７００は、ピクチャヘッダシンタックス２９００から、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）２９２０を呼び出すことができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｗｐ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８４０が１を示す場合（２９１０）、ピクチャヘッダシンタックス２９００から、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）２９２０を呼び出すことができる。
ビデオ復号装置１７００は、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）２９２０から、加重値予測を行うために必要なルマ成分の加重値、及びクロマ成分の加重値を決定するためのパラメータを獲得することができる。ビデオ復号装置１７００は、現在ピクチャに含まれたブロックにつき、ルマ成分の加重値、及びクロマ成分の加重値を利用して加重値予測を行うことができる。
ビデオ符号化装置１９００は、ピクチャヘッダシンタックス２９００に、シンタックスエレメントｐｈ＿ｓａｏ＿ｌｕｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｐｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ ２９４０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｓａｏ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８２０が１を示す場合（２９３０）、ピクチャヘッダシンタックス２９００に、シンタックスエレメントｐｈ＿ｓａｏ＿ｌｕｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｐｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ ２９４０を含めることができる。
ビデオ復号装置１７００は、ピクチャヘッダシンタックス２９００から、シンタックスエレメントｐｈ＿ｓａｏ＿ｌｕｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｐｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ ２９４０を獲得することができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｓａｏ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８２０が１を示す場合（２９３０）、ピクチャヘッダシンタックス２９００から、シンタックスエレメントｐｈ＿ｓａｏ＿ｌｕｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｐｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ ２９４０を獲得することができる。
ビデオ復号装置１７００は、シンタックスエレメントｐｈ＿ｓａｏ＿ｌｕｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇから、現在ピクチャのルマ成分のためにＳＡＯが遂行されるか否かということを確認することができる。ビデオ復号装置１７００は、シンタックスエレメントｐｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇから、現在ピクチャのクロマ成分のためにＳＡＯが遂行されるか否かということを確認することができる。ビデオ復号装置１７００は、シンタックスエレメントｐｈ＿ｓａｏ＿ｌｕｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ及びｐｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｅｎａｂｌｅｄ＿ｆｌａｇ ２９４０に基づき、現在ピクチャに含まれた最大符号化単位のルマ成分及びクロマ成分につき、それぞれＳＡＯを遂行することができる。
ビデオ符号化装置１９００は、ピクチャヘッダシンタックス２９００に、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）（２９６０）を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８１０が１を示す場合（２９５０）、ピクチャヘッダシンタックス２９００に、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）（２９６０）を含めることができる。
ビデオ復号装置１７００は、ピクチャヘッダシンタックス２９００から、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）２９６０を呼び出すことができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８１０が１を示す場合（２９５０）、ピクチャヘッダシンタックス２９００から、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）２９６０を呼び出すことができる。
ビデオ復号装置１７００は、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）２９６０から、現在ピクチャのブロックにおいて、参照ピクチャリストを決定するためのパラメータを獲得することができる。ビデオ復号装置１７００は、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）２９６０から獲得されたパラメータを利用し、現在ピクチャに含まれたブロックのための参照ピクチャリストを決定し、ブロックごとに、参照ピクチャリストを利用したインター予測を行うことができる。
図３０は、一実施形態による、現在ピクチャのＡＬＦ関連パラメータが含まれたピクチャヘッダを図示する。
ビデオ符号化装置１９００は、ピクチャヘッダシンタックス３０００に、シンタックスエレメントｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｐｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３０２０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ａｌｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８３０が１を示す場合（３０１０）、ピクチャヘッダシンタックス３０００に、シンタックスエレメントｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｐｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３０２０を含めることができる。
ビデオ符号化装置１９００は、ピクチャヘッダシンタックス３０００から、シンタックスエレメントｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｐｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３０２０を獲得することができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ａｌｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８３０が１を示す場合（３０１０）、ピクチャヘッダシンタックス３０００から、シンタックスエレメントｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｐｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３０２０を獲得することができる。
シンタックスエレメントｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａは、現在ピクチャに含まれたスライスが参照するＡＬＦ ＡＰＳの個数を示す。シンタックスエレメントｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］は、現在ピクチャに含まれたスライスのルマ成分が参照するｉ番目ＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示す。シンタックスエレメントｐｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、現在ピクチャのＣｂ成分につき、ＡＬＦが許容されるか否かということを示す。シンタックスエレメントｐｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、現在ピクチャのＣｒ成分につき、ＡＬＦが許容されるか否かということを示す。シンタックスエレメントｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａは、現在ピクチャに含まれたスライスのクロマ成分が参照するＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示す。シンタックスエレメントｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、現在ピクチャのＣｂ成分につき、クロスコンポーネントＡＬＦが許容されるか否かということを示す。シンタックスエレメントｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄは、現在ピクチャに含まれたスライスのＣｂ成分が参照するＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示す。シンタックスエレメントｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、現在ピクチャのＣｒ成分につき、クロスコンポーネントＡＬＦが許容されるか否かということを示す。シンタックスエレメントｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄは、現在ピクチャに含まれたスライスのＣｒ成分が参照するＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示す。
ビデオ復号装置１７００は、前記獲得されたシンタックスエレメントｐｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｐｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｐｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３０２０を利用し、現在ピクチャの最大符号化単位ごとに、ルマ成分及びクロマ成分につき、ＡＬＦを遂行することができる。
図３１は、一実施形態による、現在スライスの参照ピクチャリスト関連パラメータ、加重値予測関連パラメータ及びＳＡＯ関連パラメータが含まれたスライスヘッダを図示する。
ビデオ符号化装置１９００は、スライスヘッダシンタックス３１００に、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）３１２０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８１０が０を示す場合（３１１０）、スライスヘッダシンタックス３１００に、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）３１２０を含めることができる。
ビデオ復号装置１７００は、スライスヘッダシンタックス３１００から、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）３１２０を呼び出すことができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｒｐｌ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８１０が０を示す場合（３１１０）、スライスヘッダシンタックス３１００から、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）３１２０を呼び出すことができる。
ビデオ復号装置１７００は、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）３１２０から、現在スライスのブロックから、参照ピクチャリストを決定するためのパラメータを獲得することができる。ビデオ復号装置１７００は、参照ピクチャリストシンタックスｒｅｆ＿ｐｉｃ＿ｌｉｓｔｓ（）３１２０から獲得されたパラメータを利用し、現在スライスに含まれたブロックのための参照ピクチャリストを決定し、ブロックごとに、参照ピクチャリストを利用したインター予測を行うことができる。
ビデオ符号化装置１９００は、スライスヘッダシンタックス３１００に、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）３１４０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｗｐ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８４０が０を示す場合（３１３０）、スライスヘッダシンタックス３１００に、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）３１４０を含めることができる。
ビデオ復号装置１７００は、スライスヘッダシンタックス３１００から、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）３１４０を呼び出すことができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｗｐ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８４０が０を示す場合（３１３０）、スライスヘッダシンタックス３１００から、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）３１４０を呼び出すことができる。
ビデオ復号装置１７００は、加重値予測シンタックスｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）３１４０から、加重値予測を行うために必要なルマ成分の加重値、及びクロマ成分の加重値を決定するためのパラメータを獲得することができる。ビデオ復号装置１７００は、現在スライスに含まれたブロックにつき、ルマ成分の加重値、及びクロマ成分の加重値を利用して加重値予測を行うことができる。
ビデオ符号化装置１９００は、スライスヘッダシンタックス３１００に、シンタックスエレメントｓｈ＿ｓａｏ＿ｌｕｍａ＿ｕｓｅｄ＿ｆｌａｇ及びｓｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｕｓｅｄ＿ｆｌａｇ ３１６０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｓａｏ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８２０が０を示す場合（３１５０）、スライスヘッダシンタックス３１００に、シンタックスエレメントｓｈ＿ｓａｏ＿ｌｕｍａ＿ｕｓｅｄ＿ｆｌａｇ及びｓｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｕｓｅｄ＿ｆｌａｇ ３１６０を含めることができる。
ビデオ復号装置１７００は、スライスヘッダシンタックス３１００から、シンタックスエレメントｓｈ＿ｓａｏ＿ｌｕｍａ＿ｕｓｅｄ＿ｆｌａｇ及びｓｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｕｓｅｄ＿ｆｌａｇ ３１６０を獲得することができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ｓａｏ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８２０が０を示す場合（３１５０）、スライスヘッダシンタックス３１００から、シンタックスエレメントｓｈ＿ｓａｏ＿ｌｕｍａ＿ｕｓｅｄ＿ｆｌａｇ及びｓｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｕｓｅｄ＿ｆｌａｇ ３１６０を獲得することができる。
ビデオ復号装置１７００は、シンタックスエレメントｓｈ＿ｓａｏ＿ｌｕｍａ＿ｕｓｅｄ＿ｆｌａｇから、現在スライスのルマ成分のためにＳＡＯが使用されるか否かということを確認することができる。ビデオ復号装置１７００は、シンタックスエレメントｓｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｕｓｅｄ＿ｆｌａｇから、現在スライスのクロマ成分のためにＳＡＯが使用されるか否かということを確認することができる。ビデオ復号装置１７００は、シンタックスエレメントｓｈ＿ｓａｏ＿ｌｕｍａ＿ｕｓｅｄ＿ｆｌａｇ及びｓｈ＿ｓａｏ＿ｃｈｒｏｍａ＿ｕｓｅｄ＿ｆｌａｇ ３１６０に基づき、現在スライスに含まれた最大符号化単位のルマ成分及びクロマ成分につき、それぞれＳＡＯを遂行することができる。
図３２は、一実施形態による、現在スライスのＡＬＦ関連パラメータが含まれたスライスヘッダを図示する。
ビデオ符号化装置１９００は、スライスヘッダシンタックス３２００に、シンタックスエレメントｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｓｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３２２０を含めることができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ａｌｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８３０が０を示す場合（３２１０）、スライスヘッダシンタックス３２００に、シンタックスエレメントｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｓｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３２２０を含めることができる。
ビデオ符号化装置１９００は、スライスヘッダシンタックス３２００から、シンタックスエレメントｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｓｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３２２０を獲得することができる。具体的には、先のピクチャパラメータセット（ＰＰＳ）２８００に含まれたｐｐｓ＿ａｌｆ＿ｉｎｆｏ＿ｉｎ＿ｐｈ＿ｆｌａｇ ２８３０が０を示す場合（３２１０）、スライスヘッダシンタックス３２００から、シンタックスエレメントｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｓｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３２２０を獲得することができる。
シンタックスエレメントｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａは、現在スライスが参照するＡＬＦ ＡＰＳの個数を示す。シンタックスエレメントｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］は、現在スライスのルマ成分が参照するｉ番目ＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示す。シンタックスエレメントｓｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、現在スライスのＣｂ成分につき、ＡＬＦが許容されるか否かということを示す。シンタックスエレメントｓｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、現在スライスのＣｒ成分につき、ＡＬＦが許容されるか否かということを示す。シンタックスエレメントｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａは、現在スライスのクロマ成分が参照するＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示す。シンタックスエレメントｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、現在スライスのＣｂ成分につき、クロスコンポーネントＡＬＦが許容されるか否かということを示す。シンタックスエレメントｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄは、現在スライスのＣｂ成分が参照するＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示す。シンタックスエレメントｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、現在スライスのＣｒ成分に対してクロスコンポーネントＡＬＦが許容されるか否かということを示す。シンタックスエレメントｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄは、現在スライスのＣｒ成分が参照するＡＬＦ ＡＰＳのａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示す。
ビデオ復号装置１７００は、前記獲得されたシンタックスエレメントｓｈ＿ｎｕｍ＿ａｌｆ＿ａｐｓ＿ｉｄｓ＿ｌｕｍａ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｌｕｍａ［ｉ］，ｓｈ＿ａｌｆ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ａｐｓ＿ｉｄ＿ｃｈｒｏｍａ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｂ＿ａｐｓ＿ｉｄ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇ，ｓｈ＿ａｌｆ＿ｃｃ＿ｃｒ＿ａｐｓ＿ｉｄ ３２２０を利用し、現在スライスの最大符号化単位ごとに、ルマ成分及びクロマ成分につき、ＡＬＦを遂行することができる。
一実施形態によるビデオ復号装置１７００、及び一実施形態によるビデオ符号化装置１９００は、デブロッキングフィルタリング関連パラメータ、参照ピクチャリスト関連パラメータ、加重値予測関連パラメータ、ＳＡＯ関連パラメータ、ＡＬＦ関連パラメータを、それぞれピクチャ別またはスライス別に、選択的にシグナリングすることができる。従って、一実施形態によるビデオ符号化装置１９００は、ピクチャ別に、前記ツール別関連パラメータをシグナリングするか、あるいはスライス別に、前記ツール別関連パラメータをシグナリングするかということを、データピクチャの特性またはデータ伝送効率によって決定し、伝送効率が高い方法により、前記ツール別関連パラメータをシグナリングすることができる。一実施形態によるビデオ復号装置１７００は、ピクチャパラメータセットから獲得された情報に基づき、ピクチャ別に、前記ツール別関連パラメータを獲得するか、あるいはスライス別に、前記ツール別関連パラメータを獲得するかということを決定し、ピクチャ別に、前記ツール別関連パラメータ、またはスライス別に、前記ツール別関連パラメータを獲得することができる。従って、ピクチャ別に、前記ツール別関連パラメータがシグナリングされる場合には、ピクチャに含まれたスライス別に、前記ツール別関連パラメータがシグナリングされる必要がないので、前記ツール別関連パラメータをシグナリングするためのデータが節減されうる。
なお、前述の本開示の実施形態は、コンピュータで実行されうるプログラムに作成可能であり、作成されたプログラムは、媒体にも保存される。
該媒体は、コンピュータで実行可能なプログラムを続けて保存するか、あるいは実行またはダウンロードのために、臨時保存するものでもある。また、該媒体は、単一または数個のハードウェアが結合された形態の多様な記録手段または保存手段でもあるが、あるコンピュータシステムに直接接続される媒体に限定されるものではなく、ネットワーク上に分散存在するものでもある。該媒体の例示としては、ハードディスク、フロッピィーディスク及び磁気テープのような磁気媒体；ＣＤ－ＲＯＭ（compact disc read-only memory）及びＤＶＤ（digital versatile disc）のような光記録媒体；フロプティカルディスク（floptical disk）のような磁気・光媒体（magneto-optical medium）；及びＲＯＭ（read-only memory）、ＲＡＭ（random access memory）、フラッシュメモリなどを含み、プログラム命令語が保存されるように構成されたものでもある。機器で読み取り可能な記録媒体は、非一時的（non-transitory）記録媒体の形態によっても提供される。ここで、「非一時的記録媒体」は、実在（tangible）する装置であり、信号（例：電磁波）を含まないということを意味するのみであり、該用語は、データが記録媒体に半永久的に保存される場合と、臨時に保存される場合とを区分するものではない。例として、」非一時的記録媒体」は、データが臨時に保存されるバッファを含むものでもある。
また、他の媒体の例示として、アプリケーションを流通させるアプリストアや、その他多様なソフトウェアを供給したり流通させたりするサイト、サーバなどで管理する記録媒体や保存記録媒体も挙げることができる。
一実施形態によれば、本文書に開示された多様な実施形態による方法は、コンピュータプログラム製品（computer program product）に含まれても提供される。該コンピュータプログラム製品は、商品として、販売者と購入者との間で取り引きされうる。該コンピュータプログラム製品は、機器で読み取り可能な記録媒体（例：ＣＤ－ＲＯＭ）の形態に配布されるか、あるいはアプリケーションストア（例：プレイストアＴＭ）を介し、あるいは２つのユーザ装置（例：スマートフォン）間において、直接、オンラインで配布（例：ダウンロードまたはアップロード）されもする。オンライン配布の場合、コンピュータプログラム製品（例：ダウンローダブルアプリ（downloadable app））の少なくとも一部は、製造社のサーバ、アプリケーションストアのサーバ、または中継サーバのメモリのような機器で読み取り可能な記録媒体に、少なくとも一時保存されるか、あるいは臨時に生成されうる。
以上、本開示の技術的思想について、望ましい実施形態を挙げて詳細に説明したが、本開示の技術的思想は、前述の実施形態に限定されるものではなく、本開示の技術的思想の範囲内において、当分野において当業者により、さまざまな変形及び変更が可能であろう。

Claims (14)

  1. ピクチャパラメーターセットから、現在ピクチャに適用されるＱＰ（quantization parameter）初期値を獲得する段階と、
    前記ピクチャパラメーターセットから、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値が存在するか否かということを示すＱＰ差分値フラグを獲得する段階と、
    前記ＱＰ差分値フラグが、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値が存在することを示す場合、前記ピクチャヘッダから、前記現在ピクチャのための第１ ＱＰ差分値を獲得する段階と、
    前記ＱＰ差分値フラグが、前記ピクチャヘッダに、前記ＱＰ差分値が存在しないことを示す場合、前記現在ピクチャに含まれた現在スライスのスライスヘッダから、前記現在スライスのための第２ ＱＰ差分値を獲得する段階と、
    前記第１ ＱＰ差分値または前記第２ ＱＰ差分値のうち一つと、前記ＱＰ初期値とを利用し、前記現在ピクチャに含まれた符号化単位のためのＱＰを決定する段階と、を含むことを特徴とするビデオ復号方法。
  2. 前記ビデオ復号方法は、
    前記ＱＰを利用し、前記符号化単位に含まれた１以上の変換単位について逆量子化を行い、変換係数を獲得する段階と、
    前記変換係数を利用し、前記現在ピクチャを復元する段階と、をさらに含むことを特徴とする請求項１に記載のビデオ復号方法。
  3. 前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階は、
    前記ＱＰ差分値フラグが、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値が存在することを示す場合、前記ピクチャヘッダから、前記現在ピクチャのルマ成分のための前記ＱＰ差分値を獲得する段階と、
    前記ＱＰ初期値と、前記ルマ成分のための前記第１ ＱＰ差分値と、を加えることにより、前記現在ピクチャに含まれるスライスのルマ成分のためのＱＰを決定する段階と、
    前記スライスのルマ成分のためのＱＰを利用し、前記現在ピクチャに含まれ、前記スライスに含まれる前記符号化単位のＱＰを決定する段階と、を含むことを特徴とする請求項２に記載のビデオ復号方法。
  4. 前記符号化単位のＱＰを決定する段階は、
    前記符号化単位のためのＱＰ差分値をビットストリームから獲得する段階と、
    前記スライスのルマ成分のためのＱＰと、前記符号化単位のためのＱＰ差分値と、を利用し、前記符号化単位のルマ成分のためのＱＰを決定する段階と、を含むことを特徴とする請求項３に記載のビデオ復号方法。
  5. 前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階は、
    前記ＱＰ差分値フラグが、前記ピクチャヘッダに、前記ＱＰ差分値が存在しないことを示す場合、前記スライスヘッダから、前記現在スライスのルマ成分のための前記第２ ＱＰ差分値を獲得する段階と、
    前記ＱＰ初期値と、前記ルマ成分のための前記第２ ＱＰ差分値と、を加えることにより、前記現在スライスのルマ成分のためのＱＰを決定する段階と、
    前記現在スライスのルマ成分のためのＱＰを利用し、前記現在スライスに含まれた前記符号化単位のＱＰを決定する段階と、を含むことを特徴とする請求項２に記載のビデオ復号方法。
  6. 前記符号化単位のＱＰを決定する段階は、
    前記符号化単位のためのＱＰ差分値をビットストリームから獲得する段階と、
    前記現在スライスのルマ成分のためのＱＰと、前記符号化単位のためのＱＰ差分値と、を利用し、前記符号化単位のルマ成分のためのＱＰを決定する段階と、を含むことを特徴とする請求項５に記載のビデオ復号方法。
  7. 前記ＱＰを利用し、前記符号化単位について逆量子化を行い、前記符号化単位の変換係数を獲得する段階は、
    前記ＱＰ差分値フラグが、前記ピクチャヘッダに、前記ＱＰ差分値が存在しないことを示す場合、前記スライスヘッダから、前記現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値と、前記現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値と、を獲得する段階と、
    前記現在スライスに含まれた現在符号化単位のＣｂクロマ成分のためのＱＰを、前記現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値を利用して更新することにより、前記現在符号化単位のＣｂクロマ成分のためのＣｂ ＱＰを決定する段階と、
    前記現在符号化単位のＣｒクロマ成分のためのＱＰを、前記現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値を利用して更新することにより、前記現在符号化単位のＣｒクロマ成分のためのＣｒ ＱＰを決定する段階と、を含むことを特徴とする請求項２に記載のビデオ復号方法。
  8. ビデオ復号装置において、
    ピクチャパラメーターセットから、現在ピクチャに適用されるＱＰ（quantization parameter）初期値を獲得し、
    前記ピクチャパラメーターセットから、前記現在ピクチャのピクチャヘッダに、ＱＰ差分値が存在するか否かということを示すＱＰ差分値フラグを獲得し、前記ＱＰ差分値フラグが、前記ピクチャヘッダに、前記ＱＰ差分値が存在することを示せば、前記ピクチャヘッダから、現在ピクチャのための第１ ＱＰ差分値を獲得し、前記ＱＰ差分値フラグが、前記ピクチャヘッダに、前記ＱＰ差分値が存在しないことを示す場合、
    前記現在ピクチャに含まれた現在スライスのスライスヘッダから、前記現在スライスのための第２ ＱＰ差分値を獲得する獲得部と、
    前記第１ ＱＰ差分値または前記第２ ＱＰ差分値のうち一つと、前記ＱＰ初期値とを利用し、前記現在ピクチャに含まれた符号化単位のためのＱＰを決定する復号部と、を含むことを特徴とするビデオ復号装置。
  9. 現在ピクチャに適用されるＱＰ（quantization parameter）初期値を決定する段階と、
    ピクチャ別にＱＰ差分値を決定する場合、現在ピクチャで使用されたＱＰと、前記ＱＰ初期値との第１ ＱＰ差分値を決定し、前記第１ ＱＰ差分値を含む、前記現在ピクチャに係わるピクチャヘッダを生成する段階と、
    スライス別にＱＰ差分値を決定する場合、前記現在ピクチャに含まれた現在スライスで使用されたＱＰと、前記ＱＰ初期値との第２ ＱＰ差分値を決定し、前記第２ ＱＰ差分値を含む、前記現在スライスに係わるスライスヘッダを生成する段階と、
    前記現在ピクチャのピクチャヘッダに、ＱＰ差分値が存在するか否かということを示すＱＰ差分値フラグと前記ＱＰ初期値とを含む前記ピクチャパラメーターセットを生成する段階と、を含むことを特徴とするビデオ符号化方法。
  10. 前記第１ ＱＰ差分値を含む、前記現在ピクチャに係わるピクチャヘッダを生成する段階は、
    前記現在ピクチャに含まれるスライスのルマ成分のためのＱＰを決定する段階と、
    前記現在ピクチャに含まれるスライスのルマ成分のためのＱＰと、前記ＱＰ初期値との差値を利用し、前記現在ピクチャのルマ成分のための前記第１ ＱＰ差分値を決定する段階と、を含むことを特徴とする請求項９に記載のビデオ符号化方法。
  11. 前記第１ ＱＰ差分値を決定する段階は、
    前記符号化単位のルマ成分のためのＱＰと、前記スライスのルマ成分のためのＱＰとの差値を利用し、前記符号化単位のためのＱＰ差分値を決定する段階と、
    前記符号化単位のためのＱＰ差分値を符号化する段階と、を含むことを特徴とする請求項１０に記載のビデオ符号化方法。
  12. 前記第２ ＱＰ差分値を含む、前記現在スライスに係わるスライスヘッダを生成する段階は、
    前記現在スライスのルマ成分のためのＱＰを決定する段階と、
    前記現在スライスのルマ成分のためのＱＰと、前記ＱＰ初期値との差値を利用し、前記現在スライスのルマ成分のための前記第２ ＱＰ差分値を決定する段階と、を含むことを特徴とする請求項９に記載のビデオ符号化方法。
  13. 前記第２ ＱＰ差分値を決定する段階は、
    前記符号化単位のルマ成分のためのＱＰから、前記現在スライスのルマ成分のためのＱＰを差し引くことにより、前記符号化単位のためのＱＰ差分値を決定する段階と、
    前記符号化単位のためのＱＰ差分値を符号化する段階と、を含むことを特徴とする請求項１２に記載のビデオ符号化方法。
  14. 前記第２ ＱＰ差分値を決定する段階は、
    前記現在スライスに含まれた現在符号化単位のＣｂクロマ成分のＱＰを決定するための、前記現在符号化単位のＣｂクロマ成分のためのＣｂ ＱＰ差分値を決定する段階と、
    前記現在スライスに含まれた現在符号化単位のＣｒクロマ成分のＱＰを決定するための、前記現在符号化単位のＣｒクロマ成分のためのＣｒ ＱＰ差分値を決定する段階と、
    前記現在スライスのＣｂクロマ成分のためのＣｂ ＱＰ差分値と、前記現在スライスのＣｒクロマ成分のためのＣｒ ＱＰ差分値と、を符号化し、前記Ｃｂ ＱＰ差分値と前記Ｃｒ ＱＰ差分値とを含む前記現在スライスのためのスライスヘッダを生成する段階と、を含むことを特徴とする請求項１２に記載のビデオ符号化方法。
JP2022542286A 2020-01-10 2021-01-08 量子化パラメータを獲得するためのビデオ復号方法及びその装置、量子化パラメータを伝送するためのビデオ符号化方法及びその装置 Pending JP2023510535A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202062959452P 2020-01-10 2020-01-10
US62/959,452 2020-01-10
PCT/KR2021/000275 WO2021141451A1 (ko) 2020-01-10 2021-01-08 양자화 파라미터를 획득하기 위한 비디오 복호화 방법 및 장치, 양자화 파라미터를 전송하기 위한 비디오 부호화 방법 및 장치

Publications (2)

Publication Number Publication Date
JP2023510535A true JP2023510535A (ja) 2023-03-14
JPWO2021141451A5 JPWO2021141451A5 (ja) 2024-02-22

Family

ID=76788193

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022542286A Pending JP2023510535A (ja) 2020-01-10 2021-01-08 量子化パラメータを獲得するためのビデオ復号方法及びその装置、量子化パラメータを伝送するためのビデオ符号化方法及びその装置

Country Status (11)

Country Link
US (1) US20220368909A1 (ja)
EP (1) EP4090020A4 (ja)
JP (1) JP2023510535A (ja)
KR (3) KR102304703B1 (ja)
CN (1) CN115280773A (ja)
AU (1) AU2021206074A1 (ja)
BR (1) BR112022013662A2 (ja)
CA (1) CA3164388A1 (ja)
IL (1) IL294576A (ja)
MX (1) MX2022008502A (ja)
WO (1) WO2021141451A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220131250A (ko) * 2020-02-05 2022-09-27 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로마 컴포넌트에 대한 디블로킹 파라미터
JP2023513518A (ja) 2020-02-05 2023-03-31 北京字節跳動網絡技術有限公司 ローカルデュアルツリー向けのパレットモード
AR121125A1 (es) * 2020-02-29 2022-04-20 Beijing Bytedance Network Tech Co Ltd Interacción entre cabecera de imagen y cabecera de segmento de un flujo de bits de video
JP2023520040A (ja) * 2020-04-02 2023-05-15 エルジー エレクトロニクス インコーポレイティド ビデオまたは映像コーディングシステムにおける白黒映像に関するクロマデブロッキングパラメータ情報に基づく映像コーディング方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112014018115B1 (pt) * 2012-01-30 2021-10-26 Samsung Electronics Co., Ltd Método de decodificar um vídeo
US9521410B2 (en) * 2012-04-26 2016-12-13 Qualcomm Incorporated Quantization parameter (QP) coding in video coding
KR102242675B1 (ko) * 2017-11-13 2021-04-22 한국전자통신연구원 양자화 방법 및 장치
KR102390733B1 (ko) * 2018-06-11 2022-04-25 한화테크윈 주식회사 양자화 파라미터 기반의 잔차 블록 부호화/복호화 방법 및 장치

Also Published As

Publication number Publication date
CN115280773A (zh) 2022-11-01
CA3164388A1 (en) 2021-07-15
KR102304703B9 (ko) 2022-05-02
AU2021206074A1 (en) 2022-08-18
IL294576A (en) 2022-09-01
MX2022008502A (es) 2022-08-08
KR20240052922A (ko) 2024-04-23
KR20210118377A (ko) 2021-09-30
KR102304703B1 (ko) 2021-09-28
EP4090020A1 (en) 2022-11-16
BR112022013662A2 (pt) 2022-09-13
EP4090020A4 (en) 2024-01-17
US20220368909A1 (en) 2022-11-17
KR20210090559A (ko) 2021-07-20
KR102657549B1 (ko) 2024-04-15
WO2021141451A1 (ko) 2021-07-15

Similar Documents

Publication Publication Date Title
JP7425080B2 (ja) クロマ成分を予測するビデオ符号化及び復号方法、及びクロマ成分を予測するビデオ符号化及び復号装置
JP7464684B2 (ja) 動き情報の符号化方法、復号方法、符号化装置及び復号装置並びに記録媒体
KR102657549B1 (ko) 양자화 파라미터를 획득하기 위한 비디오 복호화 방법 및 장치, 양자화 파라미터를 전송하기 위한 비디오 부호화 방법 및 장치
KR20200134324A (ko) 움직임 정보의 부호화 및 복호화 방법, 및 움직임 정보의 부호화 및 복호화 장치
KR102487598B1 (ko) 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR102494697B1 (ko) 삼각 예측 모드를 이용하는 영상 부호화 장치 및 영상 복호화 장치, 및 이에 의한 영상 부호화 방법 및 영상 복호화 방법
KR102471075B1 (ko) 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
EP4030762A1 (en) Image decoding device using tool set and image decoding method thereby, and image coding device and image coding method thereby
KR20220003113A (ko) 제한된 예측 모드에서 복원후 필터링을 수행하는 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
EP3893503A1 (en) Video encoding method and decoding method using tiles and slices, and video encoding device and decoding device using tiles and slices
KR102516068B1 (ko) 부호화 순서를 고려하여 어파인 모델 기반의 예측을 수행하는 비디오 부호화 방법 및 그 장치, 복호화 순서를 고려하여 어파인 모델 기반의 예측을 수행하는 비디오 복호화 방법 및 그 장치
EP4044597A1 (en) Image decoding device using tool set and image decoding method thereby, and image encoding device and image encoding method thereby
EP3934252A1 (en) Apparatuses for encoding and decoding image, and methods for encoding and decoding image thereby
EP3972250A1 (en) Method and device for encoding video on basis of video size, and method and device for decoding video on basis of video size
KR102606802B1 (ko) 영상으로부터 다양한 형태로 분할된 블록들을 이용하는 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR102553148B1 (ko) 블록 형태별로 블록 크기가 설정되는 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR102493125B1 (ko) 툴 세트를 이용하는 영상 복호화 장치 및 이에 의한 영상 복호화 방법, 및 영상 부호화 장치 및 이에 의한 영상 부호화 방법
JP2023521083A (ja) 動きベクトルの符号化装置及びその方法、及び動きベクトルの復号装置及びその方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231113

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240213