JP2023171547A - ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング - Google Patents
ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング Download PDFInfo
- Publication number
- JP2023171547A JP2023171547A JP2023175711A JP2023175711A JP2023171547A JP 2023171547 A JP2023171547 A JP 2023171547A JP 2023175711 A JP2023175711 A JP 2023175711A JP 2023175711 A JP2023175711 A JP 2023175711A JP 2023171547 A JP2023171547 A JP 2023171547A
- Authority
- JP
- Japan
- Prior art keywords
- lmcs
- information
- aps
- luma
- mapping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 title claims abstract description 307
- 241000023320 Luma <angiosperm> Species 0.000 title claims abstract description 302
- 238000013507 mapping Methods 0.000 title claims abstract description 232
- 238000000034 method Methods 0.000 claims abstract description 177
- 230000006978 adaptation Effects 0.000 claims description 7
- 230000008569 process Effects 0.000 abstract description 23
- 208000031212 Autoimmune polyendocrinopathy Diseases 0.000 abstract description 20
- 235000019395 ammonium persulphate Nutrition 0.000 abstract description 16
- 238000000261 appearance potential spectroscopy Methods 0.000 abstract description 15
- 239000000523 sample Substances 0.000 description 91
- 239000013598 vector Substances 0.000 description 38
- 238000001914 filtration Methods 0.000 description 35
- 238000007493 shaping process Methods 0.000 description 27
- 238000013139 quantization Methods 0.000 description 24
- 230000006870 function Effects 0.000 description 23
- 238000012545 processing Methods 0.000 description 22
- 230000011664 signaling Effects 0.000 description 18
- 230000009466 transformation Effects 0.000 description 14
- 230000009977 dual effect Effects 0.000 description 13
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 12
- 230000001419 dependent effect Effects 0.000 description 11
- 239000013074 reference sample Substances 0.000 description 9
- 238000009795 derivation Methods 0.000 description 8
- 238000000638 solvent extraction Methods 0.000 description 8
- 230000003044 adaptive effect Effects 0.000 description 7
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- 238000005192 partition Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000003491 array Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 4
- 230000002441 reversible effect Effects 0.000 description 4
- 239000000872 buffer Substances 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000002146 bilateral effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- BWHLPLXXIDYSNW-UHFFFAOYSA-N ketorolac tromethamine Chemical compound OCC(N)(CO)CO.OC(=O)C1CCN2C1=CC=C2C(=O)C1=CC=CC=C1 BWHLPLXXIDYSNW-UHFFFAOYSA-N 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 239000010454 slate Substances 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 101150114515 CTBS gene Proteins 0.000 description 1
- 239000011449 brick Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/1887—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a variable length codeword
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/96—Tree coding, e.g. quad-tree coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
【課題】本発明は、ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディングに関する。【解決手段】本文書の開示によれば、全体ＡＰＳのうち、ＬＭＣＳ ＡＰＳが占める範囲を制限することにより、ＬＭＣＳ手順に必要な資源が減少されることができる。したがって、ＬＭＣＳの複雑度が減少し、ビデオ／画像コーディング効率が増加することができる。【選択図】図８
Description
本技術は、ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディングに関する。
近年、４Ｋまたは８Ｋ以上のＵＨＤ（Ｕｌｔｒａ Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）画像／ビデオのような高解像度、高品質の画像／ビデオに対する需要が様々な分野で増加している。画像／ビデオデータが高解像度、高品質になるほど、既存の画像／ビデオデータに比べて相対的に送信される情報量またはビット量が増加するので、既存の有無線広帯域回線のような媒体を利用して画像データを送信するか、既存の格納媒体を利用して画像／ビデオデータを格納する場合、送信費用と格納費用が増加される。
また、近年、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）、ＡＲ（Ａｒｔｉｆｉｃｉａｌ Ｒｅａｌｔｉｙ）コンテンツやホログラムなどの実感メディア（Ｉｍｍｅｒｓｉｖｅ Ｍｅｄｉａ）に対する関心及び需要が増加しており、ゲーム画像のように、現実画像と異なる画像特性を有する画像／ビデオに対する放送が増加している。
これにより、上記のような様々な特性を有する高解像度・高品質の画像／ビデオの情報を効果的に圧縮して送信するか、格納し、再生するために高効率の画像／ビデオ圧縮技術が求められる。
また、圧縮効率を向上させ、主観的／客観的ビジュアル品質を高めるために、ＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）手順が実行され、ＬＭＣＳ手順を効率的に適用する方案に対する論議がある。
本文書の一実施形態によると、画像／ビデオコーディング効率を上げる方法及び装置を提供する。
本文書の一実施形態によると、効率的なフィルタリング適用方法及び装置を提供する。
本文書の一実施形態によると、効率的なＬＭＣＳ適用方法及び装置を提供する。
本文書の一実施形態によると、前記ＬＭＣＳコードワード（または、その範囲）を制限することができる。
本文書の一実施形態によると、ＬＭＣＳのクロマスケーリングで直接的にシグナリングされた単一クロマレジデュアルスケーリングファクタが使用され得る。
本文書の一実施形態によると、線形マッピング（線形ＬＭＣＳ）が使用され得る。
本文書の一実施形態によると、線形マッピングに必要なピボットポイントに関する情報が明示的にシグナリングされることができる。
本文書の一実施形態によると、フレキシブルな個数のｂｉｎがルママッピングのために使用されることができる。
本文書の一実施形態に係ると、逆ルママッピング及び／またはクロマレジデュアルスケーリングのためのインデックス導出手順が単純化されることができる。
本文書の一実施形態に係ると、一つのＣＴＵ（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）内ルマ及びクロマブロックが個別的ブロックツリー構造を有する場合（デュアルツリー構造）にもＬＭＣＳ手順が適用されることができる。
本文書の一実施形態に係ると、ＬＭＣＳ ＡＰＳの個数が制限されることができる。
本文書の一実施形態に係ると、全体ＡＰＳのうち、ＬＭＣＳ ＡＰＳが占める範囲が制限されることができる。
本文書の一実施形態によれば、デコード装置により行われるビデオ／画像デコード方法を提供する。
本文書の一実施形態によれば、ビデオ／画像デコードを行うデコード装置を提供する。
本文書の一実施形態によれば、エンコード装置により行われるビデオ／画像エンコード方法を提供する。
本文書の一実施形態によれば、ビデオ／画像エンコードを行うエンコード装置を提供する。
本文書の一実施形態によれば、本文書の実施形態の少なくとも１つに開示されたビデオ／画像エンコード方法によって生成されたエンコードされたビデオ／画像情報が格納されたコンピュータ読み取り可能なデジタル格納媒体を提供する。
本文書の一実施形態によれば、デコード装置により本文書の実施形態の少なくとも１つに開示されたビデオ／画像デコード方法を行うように引き起こすエンコードされた情報又はエンコードされたビデオ／画像情報が格納されたコンピュータ読み取り可能なデジタル格納媒体を提供する。
本文書の一実施形態によると、全般的な画像／ビデオ圧縮効率を上げることができる。
本文書の一実施形態によると、効率的なフィルタリングを介して主観的／客観的ビジュアル品質を高めることができる。
本文書の一実施形態によると、画像／ビデオコーディングのためのＬＭＣＳ手順が効率的に実行されることができる。
本文書の一実施形態によると、ＬＭＣＳ手順に必要なリソース／費用（ソフトウェアまたはハードウェアの）を最小化することができる。
本文書の一実施形態によると、ＬＭＣＳ手順のためのハードウェア実現を容易にできる。
本文書の一実施形態によると、前記ＬＭＣＳコードワード（または、その範囲）制限を介してマッピング（リシェイピング）でのＬＭＣＳコードワードの導出に必要な割り算演算を除去し、または最小化することができる。
本文書の一実施形態によると、単一クロマレジデュアルスケーリングファクタ使用を介してピースワイズインデックス識別によるレイテンシーが除去されることができる。
本文書の一実施形態によると、ＬＭＣＳで線形マッピングの使用を介してルマブロック（の復元）に依存せずに、クロマレジデュアルスケーリング手順が実行されることができ、したがって、スケーリングでのレイテンシーが除去されることができる。
本文書の一実施形態によると、ＬＭＣＳでのマッピング効率が高まることができる。
本文書の一実施形態に係ると、逆ルママッピング及び／またはクロマレジデュアルスケーリングのためのインデックス導出手順の単純化を通じて、ＬＭＣＳの複雑度が減少することができ、したがって、ビデオ／画像コーディング効率が増加することができる。
本文書の一実施形態に係ると、デュアルツリー構造を有するブロックに対してもＬＭＣＳ手順が実行されることができ、したがって、ＬＭＣＳの効率が増加することができる。また、デュアルツリー構造を有するブロックに対するコーディング性能（例えば、客観的／主観的画質）が向上されることができる。
本文書の一実施形態に係ると、ＬＭＣＳ ＡＰＳの個数が制限されることにより、ＬＭＣＳの複雑度が減少することができ、そして、ＬＭＣＳにより少ない資源（例えば、メモリー）が消費（使用）されることができる。
本文書の一実施形態に係ると、全体ＡＰＳのうち、ＬＭＣＳ ＡＰＳが占める範囲を制限することにより、ＬＭＣＳの複雑度が減少し、ビデオ／画像コーディング効率が増加することができる。
本文書の開示は、様々な変更を加えることができ、様々な実施形態を有することができるが、特定の実施形態を図面に例示し、詳細に説明しようとする。しかし、これは、本開示を特定の実施形態に限定しようとするわけではない。本文書で使用する用語は、単に特定の実施形態を説明するために使用されたものであって、本文書における実施形態の技術的思想を限定しようとする意図に使用されるものではない。単数の表現は、文脈上明らかに異なる意味ではない限り、複数の表現を含む。本文書において、「含む」又は「有する」等の用語は、文書上に記載された特徴、数字、ステップ、動作、構成要素、部品又はこれらを組み合わせたものが存在することを指定しようとするものであり、１つ又はそれ以上の異なる特徴や、数字、ステップ、動作、構成要素、部品又はこれらを組み合わせたものの存在又は付加の可能性を予め排除しないものと理解されるべきである。
一方、本文書で説明される図面上の各構成は、互いに異なる特徴的な機能に関する説明の都合上、独立して示すものであって、各構成が互いに別個のハードウェアや別個のソフトウェアで実現されるということを意味するのではない。例えば、各構成のうち、２つ以上の構成を合わせて１つの構成をなすこともあり、１つの構成が複数の構成に分けられることもある。各構成が統合及び／又は分離された実施形態も、本文書の開示範囲に含まれる。
以下、添付図を参照として、本文書の実施形態を説明しようとする。以下、図面上の同じ構成要素に対しては同じ参照符号を使用し得、同じ構成要素に対して重複した説明は省略され得る。
図１は、本文書の実施形態が適用され得るビデオ／画像コーディングシステムの例を概略的に示す。
図１に示すように、ビデオ／画像コーディングシステムは、第１の装置（ソースデバイス）及び第２の装置（受信デバイス）を備えることができる。ソースデバイスは、エンコードされたビデオ（ｖｉｄｅｏ）／画像（ｉｍａｇｅ）情報またはデータをファイルまたはストリーミング形態でデジタル格納媒体またはネットワークを介して受信デバイスに伝達することができる。
前記ソースデバイスは、ビデオソース、エンコード装置、送信部を備えることができる。前記受信デバイスは、受信部、デコード装置、及びレンダラーを備えることができる。前記エンコード装置は、ビデオ／画像エンコード装置と呼ばれることができ、前記デコード装置は、ビデオ／画像デコード装置と呼ばれることができる。送信機は、エンコード装置に備えられることができる。受信機は、デコード装置に備えられることができる。レンダラーは、ディスプレイ部を備えることができ、ディスプレイ部は、別個のデバイスまたは外部コンポーネントで構成されることもできる。
ビデオソースは、ビデオ／画像のキャプチャ、合成、または生成過程などを介してビデオ／画像を取得することができる。ビデオソースは、ビデオ／画像キャプチャデバイス及び／又はビデオ／画像生成デバイスを含むことができる。ビデオ／画像キャプチャデバイスは、例えば、１つ以上のカメラ、以前にキャプチャされたビデオ／画像を含むビデオ／画像アーカイブなどを含むことができる。ビデオ／画像生成デバイスは、例えば、コンピュータ、タブレット、及びスマートフォンなどを含むことができ、（電子的に）ビデオ／画像を生成することができる。例えば、コンピュータなどを介して仮想のビデオ／画像が生成され得るし、この場合、関連データが生成される過程にビデオ／画像キャプチャ過程が代替されることができる。
エンコード装置は、入力ビデオ／画像をエンコードすることができる。エンコード装置は、圧縮及びコーディング効率のために、予測、変換、量子化など、一連の手順を行うことができる。エンコードされたデータ（エンコードされたビデオ／画像情報）は、ビットストリーム（ｂｉｔｓｔｒｅａｍ）形態で出力されることができる。
送信部は、ビットストリーム形態で出力されたエンコードされたビデオ／画像情報またはデータをファイルまたはストリーミング形態でデジタル格納媒体またはネットワークを介して受信デバイスの受信部に伝達することができる。デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な格納媒体を含むことができる。送信部は、予め決められたファイルフォーマットを介してメディアファイルを生成するためのエレメントを含むことができ、放送／通信ネットワークを介しての送信のためのエレメントを含むことができる。受信部は、前記ビットストリームを受信／抽出してデコード装置に伝達することができる。
デコード装置は、エンコード装置の動作に対応する逆量子化、逆変換、予測など、一連の手順を行ってビデオ／画像をデコードすることができる。
レンダラーは、デコードされたビデオ／画像をレンダリングすることができる。レンダリングされたビデオ／画像は、ディスプレイ部を介してディスプレイされることができる。
本文書は、ビデオ／画像コーディングに関する。例えば、本文書で開示された方法／実施形態は、ＶＶＣ（ｖｅｒｓａｔｉｌｅ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準に開示される方法に適用されることができる。また、本文書で開示された方法／実施形態は、ＥＶＣ（ｅｓｓｅｎｔｉａｌ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準、ＡＶ１（ＡＯＭｅｄｉａ Ｖｉｄｅｏ １）標準、ＡＶＳ２（２ｎｄ ｇｅｎｅｒａｔｉｏｎ ｏｆ ａｕｄｉｏ ｖｉｄｅｏ ｃｏｄｉｎｇ ｓｔａｎｄａｒｄ）又は次世代ビデオ／画像コーディング標準（ｅｘ．２６７又はＨ．２６８等）に開示される方法に適用されることができる。
本文書では、ビデオ／画像コーディングに関する様々な実施形態を提示し、別の言及がない限り、前記実施形態は互いに組み合わせて行うこともある。
本文書で、ビデオ（ｖｉｄｅｏ）は、時間の流れによる一連の画像（ｉｍａｇｅ）の集合を意味することができる。ピクチャ（ｐｉｃｔｕｒｅ）は、一般的に特定の時間帯の１つの画像を示す単位を意味し、スライス（ｓｌｉｃｅ）／タイル（ｔｉｌｅ）は、コーディングにおいてピクチャの一部を構成する単位である。スライス／タイルは、１つ以上のＣＴＵ（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）を含むことができる。１つのピクチャは、１つ以上のスライス／タイルで構成されることができる。タイルは、ピクチャ内の特定のタイル列及び特定のタイル列以内のＣＴＵの四角領域である（Ａ ｔｉｌｅ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｗｉｔｈｉｎ ａ ｐａｒｔｉｃｕｌａｒ ｔｉｌｅ ｃｏｌｕｍｎ ａｎｄ ａ ｐａｒｔｉｃｕｌａｒ ｔｉｌｅ ｒｏｗ ｉｎ ａ ｐｉｃｔｕｒｅ）。前記タイル列は、ＣＴＵの四角領域であり、前記四角領域は、前記ピクチャの高さと同じ高さを有し、幅はピクチャパラメータセット内のシンタックス要素により明示され得る（Ｔｈｅ ｔｉｌｅ ｃｏｌｕｍｎ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｈａｖｉｎｇ ａ ｈｅｉｇｈｔ ｅｑｕａｌ ｔｏ ｔｈｅ ｈｅｉｇｈｔ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ ａｎｄ ａ ｗｉｄｔｈ ｓｐｅｃｉｆｉｅｄ ｂｙ ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ ｉｎ ｔｈｅ ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）。前記タイル行はＣＴＵの四角領域であり、前記四角領域はピクチャパラメータセット内のシンタックス要素によって明示される幅を有し、高さは前記ピクチャの高さと同一であり得る（Ｔｈｅ ｔｉｌｅ ｒｏｗ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｈａｖｉｎｇ ａ ｈｅｉｇｈｔ ｓｐｅｃｉｆｉｅｄ ｂｙ ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ ｉｎ ｔｈｅ ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ ａｎｄ ａ ｗｉｄｔｈ ｅｑｕａｌ ｔｏ ｔｈｅ ｗｉｄｔｈ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。タイルのスキャンはピクチャをパーティショニングするＣＴＵの特定の順次オーダリングを示し得、前記ＣＴＵはタイル内のＣＴＵラスタースキャンに連続的に整列され得、ピクチャ内のタイルは、前記ピクチャの前記タイルのラスタースキャンに連続的に整列され得る（Ａ ｔｉｌｅ ｓｃａｎ ｉｓ ａ ｓｐｅｃｉｆｉｃ ｓｅｑｕｅｎｔｉａｌ ｏｒｄｅｒｉｎｇ ｏｆ ＣＴＵｓ ｐａｒｔｉｔｉｏｎｉｎｇ ａ ｐｉｃｔｕｒｅ ｉｎ ｗｈｉｃｈ ｔｈｅ ＣＴＵｓ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ＣＴＵ ｒａｓｔｅｒ ｓｃａｎ ｉｎ ａ ｔｉｌｅ ｗｈｅｒｅａｓ ｔｉｌｅｓ ｉｎ ａ ｐｉｃｔｕｒｅ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ａ ｒａｓｔｅｒ ｓｃａｎ ｏｆ ｔｈｅ ｔｉｌｅｓ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。スライスは単一のＮＡＬユニットに排他的に含まれ得る、整数個の完全なタイル又はピクチャのタイル内の整数個の連続的な完全なＣＴＵ行を含み得る（Ａ ｓｌｉｃｅ ｉｎｃｌｕｄｅｓ ａｎ ｉｎｔｅｇｅｒ ｎｕｍｂｅｒ ｏｆ ｃｏｍｐｌｅｔｅ ｔｉｌｅｓ ｏｒ ａｎ ｉｎｔｅｇｅｒ ｎｕｍｂｅｒ ｏｆ ｃｏｎｓｅｃｕｔｉｖｅ ｃｏｍｐｌｅｔｅ ＣＴＵ ｒｏｗｓ ｗｉｔｈｉｎ ａ ｔｉｌｅ ｏｆ ａ ｐｉｃｔｕｒｅ ｔｈａｔ ｍａｙ ｂｅ ｅｘｃｌｕｓｉｖｅｌｙ ｃｏｎｔａｉｎｅｄ ｉｎ ａ ｓｉｎｇｌｅ ＮＡＬ ｕｎｉｔ）
一方、１つのピクチャは、２つ以上のサブピクチャに区分されることができる。サブピクチャは、ピクチャ内の１つ以上のスライスの四角領域であり得る（ａｎ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ｏｎｅ ｏｒ ｍｏｒｅ ｓｌｉｃｅｓ ｗｉｔｈｉｎ ａ ｐｉｃｔｕｒｅ）。
ピクセル（ｐｉｘｅｌ）またはペル（ｐｅｌ）は、１つのピクチャ（または、画像）を構成する最小の単位を意味することができる。また、ピクセルに対応する用語として、「サンプル（ｓａｍｐｌｅ）」が使用され得る。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、ルマ（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すことができ、クロマ（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。
ユニット（ｕｎｉｔ）は、画像処理の基本単位を示すことができる。ユニットは、ピクチャの特定領域及び当該領域に関連した情報のうち、少なくとも１つを含むことができる。１つのユニットは、１つのルマブロック及び２つのクロマ（例えば、ｃｂ、ｃｒ）ブロックを含むことができる。ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行とからなるサンプル（または、サンプルアレイ）または変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）の集合（または、アレイ）を含むことができる。
本文書において、「Ａ又はＢ（Ａ ｏｒ Ｂ）」は、「ただＡ」、「ただＢ」、又は「Ａ及びＢ両方」を意味し得る。言い換えると、本文書において、「Ａ又はＢ（Ａ ｏｒ Ｂ）」は、「Ａ及び／又はＢ（Ａ ａｎｄ／ｏｒ Ｂ）」と解釈され得る。例えば、本文書において、「Ａ、Ｂ又はＣ（Ａ， Ｂ ｏｒ Ｃ）」は、「ただＡ」、「ただＢ」、「ただＣ」、又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙ ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」を意味し得る。
本文書で使用されるスラッシュ（／）や休止符（ｃｏｍｍａ）は、「及び／又は（ａｎｄ／ｏｒ）」を意味し得る。例えば、「Ａ／Ｂ」は、「Ａ及び／又はＢ」を意味し得る。これによって、「Ａ／Ｂ」は、「ただＡ」、「ただＢ」、又は「Ａ及びＢ両方」を意味し得る。例えば、「Ａ、Ｂ、Ｃ」は、「Ａ、Ｂ又はＣ」を意味し得る。
本文書において、「少なくとも１つのＡ及びＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ Ｂ）」は、「ただＡ」、「ただＢ」又は「Ａ及びＢ両方」を意味し得る。また、本文書において、「少なくとも１つのＡ又はＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ｏｒ Ｂ）」や「少なくとも１つのＡ及び／又はＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ／ｏｒ Ｂ）」という表現は、「少なくとも１つのＡ及びＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ Ｂ）」と同様に解釈され得る。
また、本文書において、「少なくとも１つのＡ、Ｂ及びＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」は、「ただＡ」、「ただＢ」、「ただＣ」、又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙ ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」を意味し得る。また、「少なくとも１つのＡ、Ｂ又はＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ｏｒ Ｃ）」や「少なくとも１つのＡ、Ｂ及び／又はＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ／ｏｒ Ｃ）」は、「少なくとも１つのＡ、Ｂ及びＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」を意味し得る。
また、本文書で使用される括弧は、「例えば（ｆｏｒ ｅｘａｍｐｌｅ）」を意味し得る。具体的に、「予測（イントラ予測）」と表示された場合、「予測」の一例として「イントラ予測」が提案されたものであり得る。言い換えると、本文書の「予測」は、「イントラ予測」に制限（ｌｉｍｉｔ）されず、「イントラ予測」が「予測」の一例として提案されたものであり得る。また、「予測（即ち、イントラ予測）」と表示された場合にも、「予測」の一例として「イントラ予測」が提案されたものであり得る。
本文書において１つの図面内で個別的に説明される技術的特徴は、個別的に実現されてもよく、同時に実現されてもよい。
図２は、本文書の実施形態が適用され得るビデオ／画像エンコード装置の構成を概略的に説明する図である。以下、エンコード装置というのは、画像エンコード装置及び／又はビデオエンコード装置を含むことができる。
図２に示すように、エンコード装置２００は、画像分割部（ｉｍａｇｅ ｐａｒｔｉｔｉｏｎｅｒ）２１０、予測部（ｐｒｅｄｉｃｔｏｒ）２２０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）２３０、エントロピーエンコード部（ｅｎｔｒｏｐｙ ｅｎｃｏｄｅｒ）２４０、加算部（ａｄｄｅｒ）２５０、フィルタリング部（ｆｉｌｔｅｒ）２６０、及びメモリ（ｍｅｍｏｒｙ）２７０を備えて構成されることができる。予測部２２０は、インター予測部２２１及びイントラ予測部２２２を備えることができる。レジデュアル処理部２３０は、変換部（ｔｒａｎｓｆｏｒｍｅｒ）２３２、量子化部（ｑｕａｎｔｉｚｅｒ）２３３、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）２３４、逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）２３５を備えることができる。レジデュアル処理部２３０は、減算部（ｓｕｂｔｒａｃｔｏｒ、２３１）をさらに備えることができる。加算部２５０は、復元部（ｒｅｃｏｎｓｔｒｕｃｔｏｒ）または復元ブロック生成部（ｒｅｃｏｎｔｒｕｃｔｇｅｄ ｂｌｏｃｋ ｇｅｎｅｒａｔｏｒ）と呼ばれることができる。上述した画像分割部２１０、予測部２２０、レジデュアル処理部２３０、エントロピーエンコード部２４０、加算部２５０、及びフィルタリング部２６０は、実施形態によって１つ以上のハードウェアコンポーネント（例えば、エンコーダチップセットまたはプロセッサ）によって構成されることができる。また、メモリ２７０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体によって構成されることもできる。前記ハードウェアコンポーネントは、メモリ２７０を内／外部コンポーネントとしてさらに備えることもできる。
画像分割部２１０は、エンコード装置２００に入力された入力画像（または、ピクチャ、フレーム）を１つ以上の処理ユニット（ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）に分割することができる。一例として、前記処理ユニットは、コーディングユニット（ｃｏｄｉｎｇ ｕｎｉｔ、ＣＵ）と呼ばれることができる。この場合、コーディングユニットは、コーディングツリーユニット（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ、ＣＴＵ）または最大コーディングユニット（ｌａｒｇｅｓｔ ｃｏｄｉｎｇ ｕｎｉｔ、ＬＣＵ）からＱＴＢＴＴＴ（Ｑｕａｄ－ｔｒｅｅ ｂｉｎａｒｙ－ｔｒｅｅ ｔｅｒｎａｒｙ－ｔｒｅｅ）構造によって再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）分割されることができる。例えば、１つのコーディングユニットは、クアッドツリー構造、バイナリツリー構造、及び／又はターナリ構造に基づいて下位（ｄｅｅｐｅｒ）デプスの複数のコーディングユニットに分割されることができる。この場合、例えば、クアッドツリー構造が先に適用され、バイナリツリー構造及び／又はターナリ構造がその後に適用されることができる。または、バイナリツリー構造が先に適用されることもできる。それ以上分割されない最終コーディングユニットに基づいて本開示に係るコーディング手順が行われ得る。この場合、画像特性によるコーディング効率などに基づいて、最大コーディングユニットが最終コーディングユニットとして使用されることができ、または、必要に応じてコーディングユニットは、再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）もっと下位デプスのコーディングユニットに分割されて最適のサイズのコーディングユニットが最終コーディングユニットとして使用されることができる。ここで、コーディング手順とは、後述する予測、変換、及び復元などの手順を含むことができる。他の例として、前記処理ユニットは、予測ユニット（ＰＵ：Ｐｒｅｄｉｃｔｉｏｎ Ｕｎｉｔ）または変換ユニット（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）をさらに備えることができる。この場合、前記予測ユニット及び前記変換ユニットは、各々上述した最終コーディングユニットから分割またはパーティショニングされることができる。前記予測ユニットは、サンプル予測の単位であることができ、前記変換ユニットは、変換係数を導く単位及び／又は変換係数からレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ）を導く単位であることができる。
ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプルまたは変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）等の集合を示すことができる。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、輝度（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すことができ、彩度（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。サンプルは、１つのピクチャ（または、画像）をピクセル（ｐｉｘｅｌ）またはペル（ｐｅｌ）に対応する用語として使用することができる。
エンコード装置２００は、入力画像信号（原本ブロック、原本サンプルアレイ）でインター予測部２２１またはイントラ予測部２２２から出力された予測信号（予測されたブロック、予測サンプルアレイ）を減算してレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ、残余ブロック、残余サンプルアレイ）を生成することができ、生成されたレジデュアル信号は、変換部２３２に送信される。この場合、図示されたように、エンコーダ２００内において入力画像信号（原本ブロック、原本サンプルアレイ）で予測信号（予測ブロック、予測サンプルアレイ）を減算するユニットは、減算部２３１と呼ばれることができる。予測部は、処理対象ブロック（以下、現在ブロックという）に対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、現在ブロックまたはＣＵ単位でイントラ予測が適用されるか、またはインター予測が適用されるか決定することができる。予測部は、各予測モードについての説明で後述するように、予測モード情報など、予測に関する様々な情報を生成してエントロピーエンコード部２４０に伝達することができる。予測に関する情報は、エントロピーエンコード部２４０でエンコードされてビットストリーム形態で出力されることができる。
イントラ予測部２２２は、現在ピクチャ内のサンプルを参照して現在ブロックを予測できる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置することができ、または、離れて位置することもできる。イントラ予測で予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。非方向性モードは、例えば、ＤＣモード及びプラナーモード（Ｐｌａｎａｒモード）を含むことができる。方向性モードは、予測方向の細かい程度によって、例えば、３３個の方向性予測モードまたは６５個の方向性予測モードを含むことができる。ただし、これは、例示であり、設定によってそれ以上またはそれ以下の個数の方向性予測モードが使用され得る。イントラ予測部２２２は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。
インター予測部２２１は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと前記時間的隣接ブロックを含む参照ピクチャとは同じであることができ、異なることもできる。前記時間的隣接ブロックは、同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同一位置ＣＵ（ｃｏｌ ＣＵ）などの名前で呼ばれることができ、前記時間的隣接ブロックを含む参照ピクチャは、同一位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもできる。例えば、インター予測部２２１は、隣接ブロックに基づいて動き情報候補リストを構成し、前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出するために、どの候補が使用されるかを指示する情報を生成することができる。様々な予測モードに基づいてインター予測が行われ得るし、例えば、スキップモードとマージモードとの場合に、インター予測部２２１は、隣接ブロックの動き情報を現在ブロックの動き情報として利用することができる。スキップモードの場合、マージモードとは異なり、レジデュアル信号が送信されないことがある。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として用い、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）をシグナリングすることにより、現在ブロックの動きベクトルを指示することができる。
予測部２２０は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、１つのブロックに対する予測のために、イントラ予測またはインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）予測モードに基づくことができ、またはパレットモード（ｐａｌｅｔｔｅ ｍｏｄｅ）に基づくこともできる。前記ＩＢＣ予測モードまたはパレットモードは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ画像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。即ち、ＩＢＣは、本文書において説明されるインター予測技法のうち、少なくとも１つを用いることができる。パレットモードは、イントラコーディングまたはイントラ予測の一例と見なすことができる。パレットモードが適用される場合、パレットテーブル及びパレットインデックスに関する情報に基づいてピクチャ内のサンプル値をシグナリングすることができる。
前記予測部（インター予測部２２１及び／又は前記イントラ予測部２２２を含む）を介して生成された予測信号は、復元信号を生成するために用いられるか、レジデュアル信号を生成するために用いられることができる。変換部２３２は、レジデュアル信号に変換技法を適用して、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔｓ）を生成することができる。例えば、変換技法は、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＤＳＴ（Ｄｉｓｃｒｅｔｅ Ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＧＢＴ（Ｇｒａｐｈ－Ｂａｓｅｄ Ｔｒａｎｓｆｏｒｍ）、又はＣＮＴ（Ｃｏｎｄｉｔｉｏｎａｌｌｙ Ｎｏｎ－ｌｉｎｅａｒ Ｔｒａｎｓｆｏｒｍ）の少なくとも１つを含むことができる。ここで、ＧＢＴは、ピクセル間の関係情報をグラフで表現するという際に、このグラフから得られた変換を意味する。ＣＮＴは、以前に復元された全てのピクセル（ａｌｌ ｐｒｅｖｉｏｕｓｌｙ ｒｅｃｏｎｓｔｒｕｃｔｅｄ ｐｉｘｅｌ）を用いて予測信号を生成し、それに基づいて取得される変換を意味する。また、変換過程は正方形の同じサイズを有するピクセルブロックに適用されてもよく、正方形ではない可変サイズのブロックに適用されてもよい。
量子化部２３３は、変換係数を量子化してエントロピーエンコード部２４０に送信され、エントロピーエンコード部２４０は、量子化された信号（量子化された変換係数に関する情報）をエンコードしてビットストリームに出力することができる。前記量子化された変換係数に関する情報は、レジデュアル情報と呼ばれることができる。量子化部２３３は、係数スキャン順序（ｓｃａｎ ｏｒｄｅｒ）に基づいてブロック形態の量子化された変換係数を１次元ベクトル形態で再整列することができ、前記１次元ベクトル形態の量子化された変換係数に基づいて前記量子化された変換係数に関する情報を生成することもできる。エントロピーエンコード部２４０は、例えば、指数ゴロム（ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）、ＣＡＶＬＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）、ＣＡＢＡＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｂｉｎａｒｙ ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）などのような様々なエンコード方法を行うことができる。エントロピーエンコード部２４０は、量子化された変換係数の他に、ビデオ／イメージ復元に必要な情報（例えば、シンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ）の値）を共にまたは別にエンコードすることもできる。エンコードされた情報（例えば、エンコードされたビデオ／画像情報）は、ビットストリーム形態でＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ）ユニット単位で送信または格納されることができる。前記ビデオ／画像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、またはビデオパラメータセット（ＶＰＳ）等、様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／画像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。本文書において、エンコード装置からデコード装置に伝達／シグナリングされる情報及び／又はシンタックス要素は、ビデオ／画像情報に含まれることができる。前記ビデオ／画像情報は、上述したエンコード手順を介してエンコードされて前記ビットストリームに含まれることができる。前記ビットストリームは、ネットワークを介して送信されることができ、またはデジタル格納媒体に格納されることができる。ここで、ネットワークは、放送網及び／又は通信網などを含むことができ、デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な格納媒体を含むことができる。エントロピーエンコード部２４０から出力された信号は、送信する送信部（図示せず）及び／又は格納する格納部（図示せず）がエンコード装置２００の内／外部エレメントとして構成されることができ、または送信部は、エントロピーエンコード部２４０に含まれることもできる。
量子化部２３３から出力された量子化された変換係数は、予測信号を生成するために用いられることができる。例えば、量子化された変換係数に逆量子化部２３４及び逆変換部２３５を介して逆量子化及び逆変換を適用することにより、レジデュアル信号（レジデュアルブロックまたはレジデュアルサンプル）を復元できる。加算部１５５は、復元されたレジデュアル信号をインター予測部２２１またはイントラ予測部２２２から出力された予測信号に加えることにより、復元（ｒｅｃｏｎｓｔｒｕｃｔｅｄ）信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）が生成され得る。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。加算部２５０は、復元部または復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て次のピクチャのインター予測のために使用されることもできる。
一方、ピクチャエンコード及び／又は復元過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。
フィルタリング部２６０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部２６０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ２７０、具体的に、メモリ２７０のＤＰＢに格納することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。フィルタリング部２６０は、各フィルタリング方法についての説明で後述するように、フィルタリングに関する様々な情報を生成してエントロピーエンコード部２４０に伝達することができる。フィルタリングに関する情報は、エントロピーエンコード部２４０でエンコードされてビットストリーム形態で出力されることができる。
メモリ２７０に送信された修正された復元ピクチャは、インター予測部２２１で参照ピクチャとして使用されることができる。エンコード装置は、これを介してインター予測が適用される場合、エンコード装置１００とデコード装置における予測ミスマッチを避けることができ、符号化効率も向上させることができる。
メモリ２７０のＤＰＢは、修正された復元ピクチャをインター予測部２２１における参照ピクチャとして使用するために格納することができる。メモリ２７０は、現在ピクチャ内の動き情報が導出された（または、エンコードされた）ブロックの動き情報及び／又は既に復元されたピクチャ内のブロックの動き情報を格納することができる。前記格納された動き情報は、空間的隣接ブロックの動き情報または時間的隣接ブロックの動き情報として活用するために、インター予測部２２１に伝達することができる。メモリ２７０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納することができ、イントラ予測部２２２に伝達することができる。
図３は、本文書の実施形態が適用され得るビデオ／画像デコード装置の構成を概略的に説明する図である。以下、デコード装置というのは、画像デコード装置及び／又はビデオデコード装置を含むことができる。
図３に示すように、デコード装置３００は、エントロピーデコード部（ｅｎｔｒｏｐｙ ｄｅｃｏｄｅｒ）３１０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）３２０、予測部（ｐｒｅｄｉｃｔｏｒ）３３０、加算部（ａｄｄｅｒ）３４０、フィルタリング部（ｆｉｌｔｅｒ）３５０、及びメモリ（ｍｅｍｏｅｒｙ）３６０を備えて構成されることができる。予測部３３０は、イントラ予測部３３１及びインター予測部３３２を備えることができる。レジデュアル処理部３２０は、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）３２１及び逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）３２１を備えることができる。上述したエントロピーデコード部３１０、レジデュアル処理部３２０、予測部３３０、加算部３４０、及びフィルタリング部３５０は、実施形態によって１つのハードウェアコンポーネント（例えば、デコーダチップセットまたはプロセッサ）により構成されることができる。また、メモリ３６０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体により構成されることもできる。前記ハードウェアコンポーネントは、メモリ３６０を内／外部コンポーネントとしてさらに備えることもできる。
ビデオ／画像情報を含むビットストリームが入力されれば、デコード装置３００は、図３のエンコード装置でビデオ／画像情報が処理されたプロセスに対応して画像を復元できる。例えば、デコード装置３００は、前記ビットストリームから取得したブロック分割関連情報に基づいてユニット／ブロックを導出できる。デコード装置３００は、エンコード装置で適用された処理ユニットを用いてデコードを行うことができる。したがって、デコードの処理ユニットは、例えば、コーディングユニットであることができ、コーディングユニットは、コーディングツリーユニットまたは最大コーディングユニットからクアッドツリー構造、バイナリツリー構造、及び／又はターナリツリー構造にしたがって分割されることができる。コーディングユニットから１つ以上の変換ユニットが導出され得る。そして、デコード装置３００を介してデコード及び出力された復元画像信号は、再生装置を介して再生されることができる。
デコード装置３００は、図３のエンコード装置から出力された信号をビットストリーム形態で受信することができ、受信された信号は、エントロピーデコード部３１０を介してデコードされることができる。例えば、エントロピーデコード部３１０は、前記ビットストリームをパーシングして画像復元（または、ピクチャ復元）に必要な情報（例えば、ビデオ／画像情報）を導出できる。前記ビデオ／画像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、またはビデオパラメータセット（ＶＰＳ）など、様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／画像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。デコード装置は、前記パラメータセットに関する情報及び／又は前記一般制限情報に基づいてさらにピクチャをデコードすることができる。本文書において後述されるシグナリング／受信される情報及び／又はシンタックス要素は、前記デコード手順を介してデコードされて、前記ビットストリームから取得されることができる。例えば、エントロピーデコード部３１０は、指数ゴロム符号化、ＣＡＶＬＣ、またはＣＡＢＡＣなどのコーディング方法を基にビットストリーム内の情報をデコードし、画像復元に必要なシンタックスエレメントの値、レジデュアルに関する変換係数の量子化された値を出力できる。より具体的に、ＣＡＢＡＣエントロピーデコード方法は、ビットストリームで各シンタックス要素に該当するビンを受信し、デコード対象のシンタックス要素情報と隣接及びデコード対象ブロックのデコード情報または以前ステップでデコードされたシンボル／ビンの情報を利用して文脈（ｃｏｎｔｅｘｔ）モデルを決定し、決定された文脈モデルによってビン（ｂｉｎ）の発生確率を予測してビンの算術デコード（ａｒｉｔｈｍｅｔｉｃ ｄｅｃｏｄｉｎｇ）を行い、各シンタックス要素の値に該当するシンボルを生成することができる。このとき、ＣＡＢＡＣエントロピーデコード方法は、文脈モデル決定後、次のシンボル／ビンの文脈モデルのためにデコードされたシンボル／ビンの情報を利用して文脈モデルをアップデートすることができる。エントロピーデコード部３１０でデコードされた情報のうち、予測に関する情報は、予測部（インター予測部３３２及びイントラ予測部３３１）に提供され、エントロピーデコード部３１０でエントロピーデコードが行われたレジデュアル値、即ち、量子化された変換係数及び関連パラメータ情報は、レジデュアル処理部３２０に入力されることができる。レジデュアル処理部３２０は、レジデュアル信号（レジデュアルブロック、レジデュアルサンプル、レジデュアルサンプルアレイ）を導出できる。また、エントロピーデコード部３１０でデコードされた情報のうち、フィルタリングに関する情報は、フィルタリング部３５０に提供されることができる。一方、エンコード装置から出力された信号を受信する受信部（図示せず）がデコード装置３００の内／外部エレメントとしてさらに構成されることができ、または受信部は、エントロピーデコード部３１０の構成要素であることもできる。一方、本文書に係るデコード装置は、ビデオ／画像／ピクチャデコード装置と呼ばれることができ、前記デコード装置は、情報デコーダ（ビデオ／画像／ピクチャ情報デコーダ）及びサンプルデコーダ（ビデオ／画像／ピクチャサンプルデコーダ）に区分することもできる。前記情報デコーダは、前記エントロピーデコード部３１０を備えることができ、前記サンプルデコーダは、前記逆量子化部３２１、逆変換部３２２、加算部３４０、フィルタリング部３５０、メモリ３６０、インター予測部３３２、及びイントラ予測部３３１のうち、少なくとも１つを備えることができる。
逆量子化部３２１では、量子化された変換係数を逆量子化して変換係数を出力できる。逆量子化部３２１は、量子化された変換係数を２次元のブロック形態で再整列することができる。この場合、前記再整列は、エンコード装置で行われた係数スキャン順序に基づいて再整列を行うことができる。逆量子化部３２１は、量子化パラメータ（例えば、量子化ステップサイズ情報）を用いて量子化された変換係数に対する逆量子化を行い、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）を取得することができる。
逆変換部３２２では、変換係数を逆変換してレジデュアル信号（レジデュアルブロック、レジデュアルサンプルアレイ）を取得するようになる。
予測部は、現在ブロックに対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、エントロピーデコード部３１０から出力された前記予測に関する情報に基づいて、前記現在ブロックにイントラ予測が適用されるか、またはインター予測が適用されるか決定することができ、具体的なイントラ／インター予測モードを決定できる。
予測部３２０は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、１つのブロックに対する予測のために、イントラ予測またはインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）予測モードに基づくことができ、またはパレットモード（ｐａｌｅｔｔｅ ｍｏｄｅ）に基づくこともできる。前記ＩＢＣ予測モードまたはパレットモードは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ画像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。即ち、ＩＢＣは、本文書において説明されるインター予測技法のうち、少なくとも１つを利用することができる。パレットモードは、イントラコーディングまたはイントラ予測の一例と見なすことができる。パレットモードが適用される場合、パレットテーブル及びパレットインデックスに関する情報が前記ビデオ／画像情報に含まれてシグナリングされることができる。
イントラ予測部３３１は、現在ピクチャ内のサンプルを参照して現在ブロックを予測できる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置することができ、または離れて位置することができる。イントラ予測において予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。イントラ予測部３３１は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。
インター予測部３３２は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを備えることができる。例えば、インター予測部３３２は、隣接ブロックに基づいて動き情報候補リストを構成し、受信した候補選択情報に基づいて前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出できる。様々な予測モードに基づいてインター予測が行われ得るし、前記予測に関する情報は、前記現在ブロックに対するインター予測のモードを指示する情報を含むことができる。
加算部３４０は、取得されたレジデュアル信号を予測部（インター予測部３３２及び／又はイントラ予測部３３１を備える）から出力された予測信号（予測されたブロック、予測サンプルアレイ）に加えることにより、復元信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成することができる。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。
加算部３４０は、復元部または復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て出力されることができ、または次のピクチャのインター予測のために使用されることもできる。
一方、ピクチャデコード過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。
フィルタリング部３５０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部３５０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ３６０、具体的に、メモリ３６０のＤＰＢに送信することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。
メモリ３６０のＤＰＢに格納された（修正された）復元ピクチャは、インター予測部３３２で参照ピクチャとして使用されることができる。メモリ３６０は、現在ピクチャ内の動き情報が導出された（または、デコードされた）ブロックの動き情報及び／又は既に復元されたピクチャ内のブロックの動き情報を格納できる。前記格納された動き情報は、空間的隣接ブロックの動き情報または時間的隣接ブロックの動き情報として活用するために、インター予測部２６０に伝達することができる。メモリ３６０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納でき、イントラ予測部３３１に伝達することができる。
本明細書において、エンコード装置２００のフィルタリング部２６０、インター予測部２２１、及びイントラ予測部２２２で説明された実施形態等は、各々デコード装置３００のフィルタリング部３５０、インター予測部３３２、及びイントラ予測部３３１にも同一または対応するように適用されることができる。
前述したように、ビデオコーディングを実行するにあたって、圧縮効率を上げるために予測を実行する。これを介してコーディング対象ブロックである現在ブロックに対する予測サンプルを含む予測されたブロックを生成することができる。ここで、前記予測されたブロックは、空間ドメイン（または、ピクセルドメイン）での予測サンプルを含む。前記予測されたブロックは、エンコード装置及びデコード装置で同じく導出され、前記エンコード装置は、原本ブロックの原本サンプル値自体でない前記原本ブロックと前記予測されたブロックとの間のレジデュアルに対する情報（レジデュアル情報）をデコード装置にシグナリングすることで画像コーディング効率を上げることができる。デコード装置は、前記レジデュアル情報に基づいてレジデュアルサンプルを含むレジデュアルブロックを導出し、前記レジデュアルブロックと前記予測されたブロックとを合わせて復元サンプルを含む復元ブロックを生成することができ、復元ブロックを含む復元ピクチャを生成することができる。
前記レジデュアル情報は、変換及び量子化手順を介して生成されることができる。例えば、エンコード装置は、前記原本ブロックと前記予測されたブロックとの間のレジデュアルブロックを導出し、前記レジデュアルブロックに含まれているレジデュアルサンプル（レジデュアルサンプルアレイ）に変換手順を実行して変換係数を導出し、前記変換係数に量子化手順を実行して量子化された変換係数を導出することで、関連したレジデュアル情報を（ビットストリームを介して）デコード装置にシグナリングされることができる。ここで、前記レジデュアル情報は、前記量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含むことができる。デコード装置は、前記レジデュアル情報に基づいて逆量子化／逆変換の手順を実行してレジデュアルサンプル（または、レジデュアルブロック）を導出することができる。デコード装置は、予測されたブロックと前記レジデュアルブロックに基づいて復元ピクチャを生成することができる。また、エンコード装置は、以後ピクチャのインター予測のための参照のために量子化された変換係数を逆量子化／逆変換してレジデュアルブロックを導出し、これに基づいて復元ピクチャを生成することができる。
本文書において、量子化／逆量子化及び／又は変換／逆変換のうち少なくとも１つは、省略されることができる。前記量子化／逆量子化が省略される場合、前記量子化された変換係数は、変換係数と呼ばれることができる。前記変換／逆変換が省略される場合、前記変換係数は、係数またはレジデュアル係数と呼ばれることもでき、または、表現の統一性のために、依然として変換係数と呼ばれることもできる。
本文書において、量子化された変換係数及び変換係数は、各々、変換係数及びスケーリングされた（ｓｃａｌｅｄ）変換係数と呼ばれることができる。この場合、レジデュアル情報は、変換係数（ら）に関する情報を含むことができ、前記変換係数（ら）に関する情報は、レジデュアルコーディングシンタックスを介してシグナリングされることができる。前記レジデュアル情報（または、前記変換係数（ら）に関する情報）に基づいて変換係数が導出されることができ、前記変換係数に対する逆変換（スケーリング）を介してスケーリングされた変換係数が導出されることができる。前記スケーリングされた変換係数に対する逆変換（変換）に基づいてレジデュアルサンプルが導出されることができる。これは本文書の他の部分でも同様に適用／表現されることができる。
イントラ予測は、現在ブロックが属するピクチャ（以下、現在ピクチャという）内の参照サンプルに基づいて現在ブロックに対する予測サンプルを生成する予測を示すことができる。現在ブロックにイントラ予測が適用される場合、現在ブロックのイントラ予測に使用する隣接参照サンプルが導出されることができる。前記現在ブロックの隣接参照サンプルは、ｎＷ×ｎＨ大きさの現在ブロックの左側（ｌｅｆｔ）境界に隣接したサンプル及び左下側（ｂｏｔｔｏｍ－ｌｅｆｔ）に隣接した総２×ｎＨ個のサンプル、現在ブロックの上側（ｔｏｐ）境界に隣接したサンプル及び右上側（ｔｏｐ－ｒｉｇｈｔ）に隣接した総２×ｎＷ個のサンプル及び現在ブロックの左上側（ｔｏｐ－ｌｅｆｔ）に隣接した１個のサンプルを含むことができる。または、前記現在ブロックの隣接参照サンプルは、複数列の上側隣接サンプル及び複数行の左側隣接サンプルを含むこともできる。また、前記現在ブロックの隣接参照サンプルは、ｎＷ×ｎＨ大きさの現在ブロックの右側（ｒｉｇｈｔ）境界に隣接した総ｎＨ個のサンプル、現在ブロックの下側（ｂｏｔｔｏｍ）境界に隣接した総ｎＷ個のサンプル及び現在ブロックの右下側（ｂｏｔｔｏｍ－ｒｉｇｈｔ）に隣接した１個のサンプルを含むこともできる。
ただし、現在ブロックの隣接参照サンプルのうち一部は、まだデコードされない、または利用可能でない場合がある。この場合、デコーダは、利用可能なサンプルとして利用可能でないサンプルを代替（ｓｕｂｓｔｉｔｕｔｉｏｎ）して予測に使用する隣接参照サンプルを構成することができる。または、利用可能なサンプルの補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）を介して予測に使用する隣接参照サンプルを構成することができる。
隣接参照サンプルが導出された場合、（ｉ）現在ブロックの隣接（ｎｅｉｇｈｂｏｒｉｎｇ）参照サンプルの平均（ａｖｅｒａｇｅ）または補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）に基づいて予測サンプルを誘導することができ、（ｉｉ）現在ブロックの隣接参照サンプルのうち、予測サンプルに対して特定（予測）方向に存在する参照サンプルに基づいて前記予測サンプルを誘導することもできる。（ｉ）の場合は、非方向性（ｎｏｎ－ｄｉｒｅｃｔｉｏｎａｌ）モードまたは非角度（ｎｏｎ－ａｎｇｕｌａｒ）モードと呼ばれ、（ｉｉ）の場合は、方向性（ｄｉｒｅｃｔｉｏｎａｌ）モードまたは角度（ａｎｇｕｌａｒ）モードと呼ばれることができる。
また、前記隣接参照サンプルのうち前記現在ブロックの予測サンプルを基準にして、前記現在ブロックのイントラ予測モードの予測方向に位置する第１の隣接サンプルと前記予測方向の反対方向に位置する第２の隣接サンプルとの補間を介して前記予測サンプルが生成されることもできる。前述した場合は、線形補間イントラ予測（Ｌｉｎｅａｒ ｉｎｔｅｒｐｏｌａｔｉｏｎ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＬＩＰ）と呼ばれることができる。また、線形モデル（ｌｉｎｅａｒ ｍｏｄｅｌ）を利用してルマサンプルに基づいてクロマ予測サンプルが生成されることもできる。この場合は、ＬＭモードと呼ばれることができる。
また、フィルタリングされた隣接参照サンプルに基づいて前記現在ブロックの臨時予測サンプルを導出し、前記既存の隣接参照サンプル、即ち、フィルタリングされない隣接参照サンプルのうち、前記イントラ予測モードによって導出された少なくとも１つの参照サンプルと前記臨時予測サンプルとを加重和（ｗｅｉｇｈｔｅｄ ｓｕｍ）して前記現在ブロックの予測サンプルを導出することもできる。前述した場合は、ＰＤＰＣ（Ｐｏｓｉｔｉｏｎ ｄｅｐｅｎｄｅｎｔ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ）と呼ばれることができる。
また、現在ブロックの隣接多重参照サンプルラインの中から最も予測正確度が高い参照サンプルラインを選択して該当ラインで予測方向に位置する参照サンプルを利用して予測サンプルを導出し、この時に使われた参照サンプルラインをデコード装置に指示（シグナリング）する方法でイントラ予測符号化を実行することができる。前述した場合は、多重参照ライン（ｍｕｌｔｉ－ｒｅｆｅｒｅｎｃｅ ｌｉｎｅ）イントラ予測またはＭＲＬベースのイントラ予測と呼ばれることができる。
また、現在ブロックを垂直または水平のサブパーティションに分けて同じイントラ予測モードに基づいてイントラ予測を実行し、前記サブパーティション単位で隣接参照サンプルを導出して利用できる。即ち、この場合、現在ブロックに対するイントラ予測モードが前記サブパーティションに同じく適用され、前記サブパーティション単位で隣接参照サンプルを導出して利用することによって、場合によって、イントラ予測性能を高めることができる。このような予測方法は、ＩＳＰ（ｉｎｔｒａ ｓｕｂ－ｐａｒｔｉｔｉｏｎｓ）ベースのイントラ予測と呼ばれることができる。
前述したイントラ予測方法は、イントラ予測モードと区分してイントラ予測タイプと呼ばれることができる。前記イントラ予測タイプは、イントラ予測技法または付加イントラ予測モードなど、様々な用語で呼ばれることができる。例えば、前記イントラ予測タイプ（または、付加イントラ予測モードなど）は、前述したＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰのうち少なくとも１つを含むことができる。前記ＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰなどの特定イントラ予測タイプを除外した一般イントラ予測方法は、ノーマルイントラ予測タイプと呼ばれることができる。ノーマルイントラ予測タイプは、前記のような特定イントラ予測タイプが適用されない場合、一般的に適用されることができ、前述したイントラ予測モードに基づいて予測が実行されることができる。一方、必要によって、導出された予測サンプルに対する後処理フィルタリングが実行されることもできる。
具体的に、イントラ予測手順は、イントラ予測モード／タイプ決定ステップ、隣接参照サンプル導出ステップ、イントラ予測モード／タイプベースの予測サンプル導出ステップを含むことができる。また、必要によって、導出された予測サンプルに対する後処理フィルタリング（ｐｏｓｔ－ｆｉｌｔｅｒｉｎｇ）ステップが実行されることもできる。
イントラ予測が適用される場合、隣接ブロックのイントラ予測モードを利用して現在ブロックに適用されるイントラ予測モードが決定されることができる。例えば、デコード装置は、現在ブロックの隣接ブロック（例えば、左側及び／又は上側隣接ブロック）のイントラ予測モード及び追加的な候補モードに基づいて導出されたＭＰＭ（ｍｏｓｔ ｐｒｏｂａｂｌｅ ｍｏｄｅ）リスト内のＭＰＭ候補のうち１つを、受信されたＭＰＭインデックスに基づいて選択でき、または、前記ＭＰＭ候補（及びプラナーモード）に含まれない残りのイントラ予測モードのうち１つを、リメイニングイントラ予測モード情報に基づいて選択できる。前記ＭＰＭリストは、プラナーモードを候補として含む場合または含まない場合で構成されることができる。例えば、前記ＭＰＭリストがプラナーモードを候補として含む場合、前記ＭＰＭリストは、６個の候補を有することができ、前記ＭＰＭリストがプラナーモードを候補として含まない場合、前記ＭＰＭリストは、５個の候補を有することができる。前記ＭＰＭリストがプラナーモードを候補として含まない場合、現在ブロックのイントラ予測モードがプラナーモードでないかことを示すｎｏｔプラナーフラグ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）がシグナリングされることができる。例えば、ＭＰＭフラグが先にシグナリングされ、ＭＰＭインデックス及びｎｏｔプラナーフラグは、ＭＰＭフラグの値が１である場合にシグナリングされることができる。また、前記ＭＰＭインデックスは、前記ｎｏｔプラナーフラグの値が１である場合にシグナリングされることができる。ここで、前記ＭＰＭリストがプラナーモードを候補として含まないように構成されることは、前記プラナーモードがＭＰＭでないことを意味するより、ＭＰＭとして常にプラナーモードが考慮されるため、先にフラグ（ｎｏｔ ｐｌａｎａｒ ｆｌａｇ）をシグナリングしてプラナーモードであるかどうかを先に確認するためである。
例えば、現在ブロックに適用されるイントラ予測モードがＭＰＭ候補（及びプラナーモード）内にあるか、または、リメイニングモード内にあるかは、ＭＰＭフラグ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇ）に基づいて指示されることができる。ＭＰＭフラグの値１は、前記現在ブロックに対するイントラ予測モードがＭＰＭ候補（及びプラナーモード）内にあることを示すことができ、ＭＰＭ ｆｌａｇの値０は、前記現在ブロックに対するイントラ予測モードがＭＰＭ候補（及びプラナーモード）内に無いことを示すことができる。前記ｎｏｔプラナーフラグ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）値０は、前記現在ブロックに対するイントラ予測モードがプラナーモードであることを示すことができ、前記ｎｏｔプラナーフラグ値１は、前記現在ブロックに対するイントラ予測モードがプラナーモードでないことを示すことができる。前記ＭＰＭインデックスは、ｍｐｍ＿ｉｄｘまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘシンテックス要素の形態でシグナリングされることができ、前記リメイニングイントラ予測モード情報は、ｒｅｍ＿ｉｎｔｒａ＿ｌｕｍａ＿ｐｒｅｄ＿ｍｏｄｅまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒシンテックス要素の形態でシグナリングされることができる。例えば、前記リメイニングイントラ予測モード情報は、全体イントラ予測モードのうち前記ＭＰＭ候補（及びプラナーモード）に含まれない残りのイントラ予測モードを予測モード番号順にインデキシングしてそのうち１つを指すことができる。前記イントラ予測モードは、ルマ成分（サンプル）に対するイントラ予測モードである。以下、イントラ予測モード情報は、前記ＭＰＭ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇ）、前記ｎｏｔ ｐｌａｎａｒ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）、前記ＭＰＭインデックス（例えば、ｍｐｍ＿ｉｄｘまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘ）、前記リメイニングイントラ予測モード情報（ｒｅｍ＿ｉｎｔｒａ＿ｌｕｍａ＿ｐｒｅｄ＿ｍｏｄｅまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒ）のうち少なくとも１つを含むことができる。本文書において、ＭＰＭリストは、ＭＰＭ候補リスト、ｃａｎｄＭｏｄｅＬｉｓｔなど、様々な用語で呼ばれることができる。ＭＩＰが現在ブロックに適用される場合、ＭＩＰのための別途のｍｐｍ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｍｉｐ＿ｍｐｍ＿ｆｌａｇ）、ｍｐｍインデックス（例えば、ｉｎｔｒａ＿ｍｉｐ＿ｍｐｍ＿ｉｄｘ）、リメイニングイントラ予測モード情報（例えば、ｉｎｔｒａ＿ｍｉｐ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒ）がシグナリングされることができ、前記ｎｏｔ ｐｌａｎａｒ ｆｌａｇはシグナリングされない。
即ち、一般的に画像に対するブロック分割になると、コーディングしようとする現在ブロックと隣接（ｎｅｉｇｈｂｏｒｉｎｇ）ブロックは、類似する画像特性を有するようになる。したがって、現在ブロックと隣接ブロックは、互いに同じまたは類似するイントラ予測モードを有する確率が高い。したがって、エンコーダは、現在ブロックのイントラ予測モードをエンコードするために、隣接ブロックのイントラ予測モードを利用することができる。
例えば、エンコーダ／デコーダは、現在ブロックに対するＭＰＭ（ｍｏｓｔ ｐｒｏｂａｂｌｅ ｍｏｄｅｓ）リストを構成することができる。前記ＭＰＭリストは、ＭＰＭ候補リストと示すこともできる。ここで、ＭＰＭとは、イントラ予測モードコーディング時、現在ブロックと隣接ブロックの類似性を考慮してコーディング効率を向上させるために利用されるモードを意味することができる。前述したように、ＭＰＭリストは、プラナーモードを含んで構成されることもでき、または、プラナーモードを除外して構成されることもできる。例えば、ＭＰＭリストがプラナーモードを含む場合、ＭＰＭリストの候補の個数は６個である。そして、ＭＰＭリストがプラナーモードを含まない場合、ＭＰＭリストの候補の個数は５個である。
エンコーダ／デコーダは、５個または６個のＭＰＭを含むＭＰＭリストを構成することができる。
ＭＰＭリストを構成するために、デフォルトイントラモード（Ｄｅｆａｕｌｔ ｉｎｔｒａ ｍｏｄｅｓ）、隣接イントラモード（Ｎｅｉｇｈｂｏｕｒ ｉｎｔｒａ ｍｏｄｅｓ）、及び導出されたイントラモード（Ｄｅｒｉｖｅｄ ｉｎｔｒａ ｍｏｄｅｓ）の三つの種類のモードが考慮されることができる。
前記隣接イントラモードのために、二つの隣接ブロック、即ち、左側隣接ブロック及び上側隣接ブロックが考慮されることができる。
前述したように、もし、ＭＰＭリストがプラナーモードを含まないように構成する場合、前記リストからプラナー（ｐｌａｎａｒ）モードが除外され、前記ＭＰＭリスト候補の個数は、５個に設定されることができる。
また、イントラ予測モードのうち、非方向性モード（または、非角度モード）は、現在ブロックの隣接（ｎｅｉｇｈｂｏｒｉｎｇ）参照サンプルの平均（ａｖｅｒａｇｅ）ベースのＤＣモードまたは補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）ベースのプラナー（ｐｌａｎａｒ）モードを含むことができる。
インター予測が適用される場合、エンコード装置／デコード装置の予測部は、ブロック単位でインター予測を行って予測サンプルを導出することができる。インター予測は、現在ピクチャ以外のピクチャのデータ要素（ｅｘ．サンプル値、又は動き情報）に依存的な方法で導出される予測を示すことができる。現在ブロックにインター予測が適用される場合、参照ピクチャのインデックスの指す参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロック（予測サンプルアレイ）を誘導することができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、現在ブロックの動き情報をブロック、サブブロック又はサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャのインデックスを含むことができる。前記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）の情報を更に含むことができる。インター予測が適用される場合、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と、参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと、前記時間的隣接ブロックを含む参照ピクチャとは同一であってもよく、異なってもよい。前記時間的隣接ブロックは、同じ位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同じ位置ＣＵ（ｃｏｌＣＵ）等の名称で呼ばれ得、前記時間的隣接ブロックを含む参照ピクチャは、同じ位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもある。例えば、現在ブロックの隣接ブロックに基づいて動き情報の候補リストが構成されることができ、前記現在ブロックの動きベクトル及び／又は参照ピクチャのインデックスを導出するために、どの候補が選択（使用）されるかを指示するフラグ又はインデックス情報がシグナリングされることができる。様々な予測モードに基づいてインター予測が行われ、例えば、スキップモードとマージモードの場合、現在ブロックの動き情報は、選択された隣接ブロックの動き情報を同一であり得る。スキップモードの場合、マージモードと異なり、レジデュアル信号が送信されないことがある。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、選択された隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として利用し、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）はシグナリングされることができる。この場合、前記動きベクトル予測子及び動きベクトル差分の和を用いて、前記現在ブロックの動きベクトルを導出することができる。
前記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）に応じて、Ｌ０動き情報及び／又はＬ１動き情報を含むことができる。Ｌ０方向の動きベクトルは、Ｌ０動きベクトル又はＭＶＬ０と呼ばれ得、Ｌ１方向の動きベクトルは、Ｌ１動きベクトル又はＭＶＬ１と呼ばれ得る。Ｌ０動きベクトルに基づいた予測は、Ｌ０予測と呼ばれ得、Ｌ１動きベクトルに基づいた予測をＬ１予測と呼ばれ得、前記Ｌ０動きベクトル及び前記Ｌ１動きベクトルの両方に基づいた予測を双（Ｂｉ）予測と呼ばれ得る。ここで、Ｌ０動きベクトルは、参照ピクチャリストＬ０（Ｌ０）に関連した動きベクトルを示すことができ、Ｌ１動きベクトルは、参照ピクチャリストＬ１（Ｌ１）に関連した動きベクトルを示すことができる。参照ピクチャリストＬ０は、前記現在ピクチャよりも、出力順序上、以前のピクチャを参照ピクチャに含むことができ、参照ピクチャリストＬ１は、前記現在ピクチャよりも、出力順序上、以後のピクチャを含むことができる。前記以前のピクチャは、順方向（参照）ピクチャと呼ばれ得、前記以後のピクチャは、逆方向（参照）ピクチャと呼ばれ得る。前記参照ピクチャリストＬ０は、前記現在ピクチャよりも、出力順序上、以後のピクチャを参照ピクチャにさらに含むことができる。この場合、前記参照ピクチャリストＬ０内で前記以前のピクチャが先にインデキシングされ、前記以後のピクチャは、その後にインデキシングされ得る。前記参照ピクチャリストＬ１は、前記現在ピクチャよりも、出力順序上、以前のピクチャを参照ピクチャにさらに含むことができる。この場合、前記参照ピクチャリスト１内で前記以後のピクチャが先にインデキシングされ、前記以前のピクチャは、その後にインデキシングされ得る。ここで、出力順序は、ＰＯＣ（ｐｉｃｔｕｒｅ ｏｒｄｅｒ ｃｏｕｎｔ）順序（ｏｒｄｅｒ）に対応し得る。
図４は、例示的なブロックツリー構造を示す。図４は、クワッドツリー及び隋伴されるマルチタイプツリー（ｑｕａｄｔｒｅｅ ａｎｄ ｎｅｓｔｅｄ ｍｕｌｔｉ－ｔｙｐｅ ｔｒｅｅ）構造に基づいて ＣＴＵが多重ＣＵに分割されることを例示的に示す。
ボールドブロックエッジ（ｂｏｌｄ ｂｌｏｃｋ ｅｄｇｅｓ）は、クワッドツリーパーティショニングを、残りのエッジは、マルチタイプツリーパーティショニングを示す。マルチタイプツリーを伴ったクワッドツリーパーティションは、コンテンツ－アダプティブコーディングツリー構造を提供することができる。ＣＵは、コーディングブロック（ＣＢ）に対応することができる。あるいは、ＣＵは、ルマサンプルのコーディングブロックと、対応するクロマサンプルの二つのコーディングブロックを含むことができる。ＣＵのサイズは、ＣＴＵだけ大きくてもよく、またはルマサンプル単位で４×４ほど小さくてもよい。例えば、４：２：０カラーフォーマット（ｏｒクロマフォーマット）の場合、最大クロマＣＢサイズは６４×６４であり、最小クロマＣＢサイズは２×２であり得る。
本文書において、例えば、最大許容ルマＴＢサイズは６４×６４であり、最大許容クロマＴＢサイズは３２×３２であり得る。前記ツリー構造に沿って分割されたＣＢの幅または高さが最大の変換幅または高さより大きい場合、そのＣＢは、自動的に（または暗黙的に）水平方向及び垂直方向のＴＢサイズ制限を満足するまで分割されることができる。
本文書において、コーディングツリースキームは、ルマ及びクロマ（成分）ブロックが個別的（ｓｅｐａｒａｔｅ）ブロックツリー構造を有することを支援することができる。個別的ブロックツリー構造を有するブロックは、個別的ツリーでコーディングされたものであり得る。一つのＣＴＵ内ルマ及びクロマブロックが同一ブロックツリー構造を有する場合は、ＳＩＮＧＬＥ＿ＴＲＥＥ（シングルツリー構造）と示すことができる。一つのＣＴＵ内ルマ及びクロマブロックが個別的ブロックツリー構造を有する場合は、ＤＵＡＬ＿ＴＲＥＥ（シングルツリー構造）と示すことができる。この場合、ルマ成分に対するブロックツリータイプは、ＤＵＡＬ＿ＴＲＥＥ＿ＬＵＭＡと呼ばれることができ、クロマ成分に対するブロックツリータイプは、ＤＵＡＬ＿ＴＲＥＥ＿ＣＨＲＯＭＡと呼ばれることができる。デュアルツリー構造を有するブロックは、デュアルツリーでコーディングされたものであり得る。Ｐ及びＢスライス／タイルグループに対して、一つのＣＴＵ内ルマ及びクロマＣＴＢは、同一コーディングツリー構造を有するように制限されることができる。しかし、Ｉスライス／タイルグループに対して、ルマ及びクロマブロックは、互いに個別的ブロックツリー構造を有することができる。個別的ブロックツリーモードが適用される場合、ルマＣＴＢは、特定コーディングツリー構造に基づいてＣＵに分割され、クロマＣＴＢは、他のコーディングツリー構造に基づいてクロマＣＵに分割されることができる。これは、Ｉスライス／タイルグループ内ＣＵは、ルマ成分のコーディングブロックまたは二つのクロマ成分のコーディングブロックで構成され、ＰまたはＢスライス／タイルグループのＣＵは、三つのカラー成分のブロックで構成されることができることを意味することができる。本文書において、スライスは、タイル／タイルグループと呼ばれることができ、タイル／タイルグループは、スライスと呼ばれることができる。
マルチタイプのツリーを伴ったクワッドツリーコーディングツリー構造について説明したが、ＣＵが分割される構造はこれに限定されない。例えば、ＢＴ構造及びＴＴ構造は、多数分割ツリー（Ｍｕｌｔｉｐｌｅ ｐａｒｔｉｔｉｏｎｉｎｇ Ｔｒｅｅ、ＭＰＴ）構造に含まれる概念に解釈されることができ、ＣＵは、ＱＴ構造及びＭＰＴ構造を通じて分割されると解釈することができる。ＱＴ構造及びＭＰＴ構造を通じてＣＵが分割される一例において、ＱＴ構造のリーフノードがいくつかのブロックに分割されるかに関する情報を含む構文要素（例えば、ＭＰＴ_split_type）及びＱＴ構造のリーフノードが垂直と水平のうち、どちらの方向に分割されるかに関する情報を含む構文要素（例えば、ＭＰＴ_split_mode）がシグナリングされることで、分割構造が決定され得る。
また他の例において、ＣＵは、ＱＴ構造、ＢＴ構造またはＴＴ構造と別の方法で分割されることができる。つまり、ＱＴ構造に応じて、下位デプスのＣＵが上位デプスのＣＵの１／４サイズに分割されたり、ＢＴ構造に応じて、下位デプスのＣＵが上位デプスのＣＵの１／２サイズに分割されたり、ＴＴ構造に応じて、下位デプスのＣＵが上位デプスのＣＵの１／４または１／２のサイズに分割されるのとは異なり、下位デプスのＣＵは、場合によって、上位デプスのＣＵの１／５、１／３、３／８、３／５、２／３または５／８のサイズに分割されることができ、ＣＵが分割される方法は、これに限定されない。
図５は、コーディングされた画像／ビデオに対する階層構造を例示的に示す。
図５を参照すると、コーディングされた画像／ビデオは、画像／ビデオのデコード処理及びそのものを扱うＶＣＬ（ｖｉｄｅｏ ｃｏｄｉｎｇ ｌａｙｅｒ、ビデオコーディングレイヤ）、符号化された情報を送信して格納する下位システム、そして、ＶＣＬと下位システムとの間に存在してネットワーク適応機能を担当するＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ、ネットワーク抽象レイヤ）に分けられている。
ＶＣＬでは、圧縮された画像データ（スライスデータ）を含むＶＣＬデータを生成するか、あるいはピクチャパラメータセット（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＰＰＳ）、シーケンスパラメータセット（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＳＰＳ）、ビデオパラメータセット（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＶＰＳ）などの情報を含むパラメータセットまたは画像のデコーディング過程に付加的に必要なＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージを生成することができる。
ＮＡＬでは、ＶＣＬで生成されたＲＢＳＰ（Ｒａｗ Ｂｙｔｅ Ｓｅｑｕｅｎｃｅ Ｐａｙｌｏａｄ）にヘッダ情報（ＮＡＬユニットヘッダ）を付け加えてＮＡＬユニットを生成することができる。この時、ＲＢＳＰは、ＶＣＬで生成されたスライスデータ、パラメータセット、ＳＥＩメッセージなどを言う。ＮＡＬユニットヘッダには当該ＮＡＬユニットに含まれるＲＢＳＰデータによって特定されるＮＡＬユニットタイプの情報を含むことができる。
前記図面で示したように、ＮＡＬユニットは、ＶＣＬで生成されたＲＢＳＰによってＶＣＬ ＮＡＬユニットとＮｏｎ－ＶＣＬ ＮＡＬユニットに分けられることができる。ＶＣＬ ＮＡＬユニットは、画像に対する情報（スライスデータ）を含んでいるＮＡＬユニットを意味することができ、Ｎｏｎ－ＶＣＬ ＮＡＬユニットは、画像をデコーディングするために必要な情報（パラメータセットまたはＳＥＩメッセージ）を含んでいるＮＡＬユニットを意味することができる。
前述のＶＣＬ ＮＡＬユニット、Ｎｏｎ－ＶＣＬ ＮＡＬユニットは、下位システムのデータ規格によってヘッダ情報を付けてネットワークを介して送信されることができる。例えば、ＮＡＬユニットは、Ｈ．２６６／ＶＶＣファイルフォーマット、ＲＴＰ（Ｒｅａｌ－ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）、ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）などのような所定規格のデータ形態に変形されて、多様なネットワークを介して送信されることができる。
前述のように、ＮＡＬユニットは、当該ＮＡＬユニットに含まれるＲＢＳＰデータ構造（ｓｔｒｕｃｔｕｒｅ）によってＮＡＬユニットのタイプが特定されることができ、このようなＮＡＬユニットのタイプに対する情報は、ＮＡＬユニットヘッダに格納されて、シグナリングされることができる。
例えば、ＮＡＬユニットが画像に対する情報（スライスデータ）を含むか否かによって、大きく、ＶＣＬ ＮＡＬユニットタイプとＮｏｎ－ＶＣＬ ＮＡＬユニットタイプに分類されることができる。ＶＣＬ ＮＡＬユニットタイプは、ＶＣＬ ＮＡＬユニットが含むピクチャの性質及び種類などによって分類されることができ、Ｎｏｎ－ＶＣＬ ＮＡＬユニットタイプは、パラメータセットの種類などによって分類されることができる。
以下は、Ｎｏｎ－ＶＣＬ ＮＡＬユニットタイプが含むパラメータセットの種類などによって特定されたＮＡＬユニットタイプの一例である。
－ ＡＰＳ（Ａｄａｐｔａｔｉｏｎ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＡＰＳを含むＮＡＬユニットに対するタイプ
－ ＤＰＳ（Ｄｅｃｏｄｉｎｇ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＤＰＳを含むＮＡＬユニットに対するタイプ
－ ＶＰＳ（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＶＰＳを含むＮＡＬユニットに対するタイプ
－ ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＳＰＳを含むＮＡＬユニットに対するタイプ
－ ＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＰＰＳを含むＮＡＬユニットに対するタイプ
－ ＰＨ（Ｐｉｃｔｕｒｅ ｈｅａｄｅｒ）ＮＡＬ ｕｎｉｔ：ＰＨを含む ＮＡＬユニットに対するタイプ
前述のＮＡＬユニットタイプは、ＮＡＬユニットタイプのためのシンタックス情報を有し、前記シンタックス情報は、ＮＡＬユニットヘッダに格納されてシグナリングされることができる。例えば、前記シンタックス情報は、ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅであり得、ＮＡＬユニットタイプは、ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅ値で特定されることができる。
一方、前述のように、一つのピクチャは、複数のスライスを含むことができ、一つのスライスは、スライスヘッダ及びスライスデータを含むことができる。この場合、一つのピクチャ内の複数のスライス（スライスヘッダ及びスライスデータ集合）に対して、一つのピクチャヘッダがさらに付加されることができる。前記ピクチャヘッダ（ピクチャヘッダシンタックス）は、前記ピクチャに共通的に適用することができる情報／パラメータを含むことができる。本文書において、スライスは、タイルグループで混用または代替されることができる。また、本文書において、スライスヘッダは、タイプグループヘッダで混用または代替されることができる。
前記スライスヘッダ（スライスヘッダシンタックス）は、前記スライスに共通的に適用することができる情報／パラメータを含むことができる。前記ＡＰＳ（ＡＰＳシンタックス）またはＰＰＳ（ＰＰＳシンタックス）は、一つ以上のスライスまたはピクチャに共通的に適用することができる情報／パラメータを含むことができる。前記ＳＰＳ（ＳＰＳシンタックス）は、一つ以上のシーケンスに共通的に適用することができる情報／パラメータを含むことができる。前記ＶＰＳ（ＶＰＳシンタックス）は、多重レイヤドに共通的に適用することができる情報／パラメータを含むことができる。前記ＤＰＳ（ＤＰＳシンタックス）は、ビデオ全般に共通的に適用することができる情報／パラメータを含むことができる。前記ＤＰＳは、ＣＶＳ（ｃｏｄｅｄ ｖｉｄｅｏ ｓｅｑｕｅｎｃｅ）の接合（ｃｏｎｃａｔｅｎａｔｉｏｎ）に係わる情報／パラメータを含むことができる。本文書において、上位レベルシンタックス（ＨｉｇｈＬｅｖｅｌ ｓｙｎｔａｘ、ＨＬＳ）とは、前記ＡＰＳシンタックス、ＰＰＳシンタックス、ＳＰＳシンタックス、ＶＰＳシンタックス、ＤＰＳシンタックス、ピクチャヘッダシンタックス、スライスヘッダシンタックスの少なくとも一つを含むことができる。
本文書において、エンコード装置からデコード装置でエンコーディングされてビットストリーム形態でシグナリングされる画像／ビデオ情報は、ピクチャ内のパーティショニング関連情報、イントラ／インター予測情報、レジデュアル情報、ループ内フィルタリング情報などを含むだけでなく、前記スライスヘッダに含まれた情報、前記ピクチャヘッダに含まれた情報、前記ＡＰＳに含まれた情報、前記ＰＰＳに含まれた情報、ＳＰＳに含まれた情報、ＶＰＳに含まれた情報及び／またはＤＰＳに含まれた情報を含むことができる。また、前記画像／ビデオ情報は、ＮＡＬユニットヘッダの情報をさらに含むことができる。
一方、量子化などの圧縮符号化過程で発生するエラーによる原本（ｏｒｉｇｉｎａｌ）画像と復元画像の差を補償するために、前述のように、復元サンプルまたは復元ピクチャにループ内フィルタリング手順が実行されることができる。前述のように、ループ内フィルタリングはエンコード装置のフィルタ部及びデコード装置のフィルタ部で実行されることができ、デブロッキングフィルタ、ＳＡＯ及び／または適応的ループフィルタ（ＡＬＦ）が適用されることができる。例えば、ＡＬＦ手順は、デブロッキングフィルタリング手順及び／またはＳＡＯ手順が完了された後に実行されることができる。ただ、この場合にも、デブロッキングフィルタリング手順及び／またはＳＡＯ手順が省略され得る。
一方、コーディング効率を高めるために、前述のように、ＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることができる。ＬＭＣＳは、ループ整形器（整形）と指称されることができる。コーディング効率を高めるために、ＬＭＣＳの制御及び／またはＬＭＣＳ関連情報のシグナリングは、階層的に実行されることができる。
図６は、本文書の一実施形態に係るＣＶＳの階層的な構造を例示的に示す。ＣＶＳ（ｃｏｄｅｄ ｖｉｄｅｏ ｓｕｑｕｅｎｃｅ）は、ＳＰＳ、ＰＰＳ、タイルグループヘッダ（ｔｉｌｅ ｇｒｏｕｐ ｈｅａｄｅｒ）、タイルデータ（ｔｉｌｅ ｄａｔａ）、及び／またはＣＴＵを含むことができる。ここで、タイルグループヘッダ及びタイルデータは、それぞれスライスヘッダ及びスライスデータと指称されることもできる。
ＳＰＳは、ＣＶＳで用いられるように、ツールを使用可能にするためのフラグを原始的に含むことができる。また、ＳＰＳは、ピクチャごとに変わるパラメータに対する情報を含むＰＰＳによって参照されることができる。符号化されたピクチャのそれぞれは、一つ以上の符号化された矩形ドメインのタイルを含むことができる。前記タイルは、タイルグループを形成するラスタースキャンでグループ化されることができる。各タイルグループは、タイルグループというヘッダ情報にカプセル化される。各タイルは、符号化されたデータを含むＣＴＵで構成される。ここで、データは原本サンプル値、予測サンプル値、及びそのルマ及びクロマ成分（ルマ予測サンプル値及びクロマ予測サンプル値）を含むことができる。
従来の方法によれば、ＡＬＦデータ（ＡＬＦパラメータ）またはＬＭＣＳデータ（ＬＭＣＳパラメータ）は、タイルグループヘッダに含まれた。一つのビデオが多数のピクチャで構成され、一つのピクチャが多数のタイルを含むことを考慮すると、ＡＬＦデータ（ＡＬＦパラメータ）またはＬＭＣＳデータ（ＬＭＣＳパラメータ）のシグナリングがタイルグループ単位で頻繁に行われることは、コーディング効率を低下させるという問題があった。
本文書において提案された一実施形態に係ると、前記ＡＬＦパラメータまたはＬＭＣＳデータ（ＬＭＣＳパラメータ）は、ＡＰＳに含まれてシグナリングされることができる。
一実施形態において、ＡＰＳが定義され、前記ＡＰＳは、必要なＡＬＦデータ（ＡＬＦパラメータ）を運ぶことができる。しかも、ＡＰＳは、自己識別パラメータ（ｓｅｌｆ－ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｐａｒａｍｅｔｅｒ）及びＡＬＦデータを有することができる。前記ＡＰＳの自己識別パラメータはＡＰＳ ＩＤを含むことができる。すなわち、前記ＡＰＳは、ＡＬＦデータフィールドの外にも前記ＡＰＳ ＩＤを示す情報を含むことができる。タイルグループヘッダまたはスライスヘッダは、ＡＰＳインデックス情報を利用してＡＰＳを参照することができる。言い換えれば、タイルグループヘッダまたはスライスヘッダは、ＡＰＳインデックス情報を含むことができ、前記ＡＰＳインデックス情報が示すＡＰＳ ＩＤを有するＡＰＳに含まれたＡＬＦデータ（ＡＬＦパラメータ）に基づいて対象ブロックに対するＡＬＦ手順を実行することができる。ここで、前記ＡＰＳインデックス情報はＡＰＳ ＩＤ情報とも呼ばれ得る。
また、前記ＳＰＳは、ＡＬＦの使用を許容するフラグを含むことができる。例えば、ＣＶＳが始まる（ｂｅｇｉｎ）時、ＳＰＳがチェックされ、前記ＳＰＳ内に前記フラグがチェックされることができる。例えば、ＳＰＳは、下表１のシンタックスを含むことができる。表１のシンタックスは、ＳＰＳの一部分であり得る。
前記表１のシンタックスに含まれたシンタックス要素のセマンティクスは、例えば、次の表のように示すことができる。
すなわち、前記ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、その値が０であるか、１であるかに基づいて、ＡＬＦの可用可否を表すことができる。ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、ＡＬＦ可用フラグ（第１ＡＬＦ可用フラグと呼ばれ得る）と呼ばれ得、ＳＰＳに含まれることができる。すなわち、前記ＡＬＦ可用フラグは、ＳＰＳ（またはＳＰＳレベル）でシグナリングされることができる。前記ＳＰＳでシグナリングされる前記ＡＬＦ可用フラグの値が１である場合、前記ＳＰＳを参照するＣＶＳ内のピクチャに対して基本的にＡＬＦが可用に決められることができる。一方、前述のように、前記ＳＰＳよりも下位レベルで追加的な可用フラグをシグナリングして、個別的にＡＬＦをｏｎ／ｏｆｆ処理することもできる。
例えば、ＡＬＦツールがＣＶＳに対して可用である場合、タイルグループヘッダまたはスライスヘッダで追加的な可用フラグ（第２ＡＬＦ可用フラグと呼ばれ得る）がシグナリングされることができる。前記第２ＡＬＦ可用フラグは、例えば、ＳＰＳレベルでＡＬＦが可用である場合にパーシング／シグナリングされることができる。もし、第２ＡＬＦ可用フラグの値が１である場合、前記タイルグループヘッダまたは前記スライスヘッダを通じてＡＬＦデータをパーシングすることができる。例えば、前記第２ＡＬＦ可用フラグは、ルマ及びクロマ成分に関するＡＬＦ可用条件（ｃｏｎｄｉｔｉｏｎ）を明示（ｓｐｅｃｉｆｙ）することができる。前記ＡＬＦデータは、ＡＰＳ ＩＤ情報を通じて接近することができる。
前記表３または表４のシンタックスに含まれたシンタックス要素のセマンティクスは、例えば、次の表のように示すことができる。
前記第２ＡＬＦ可用フラグは、ｔｉｌｅ＿ｇｒｏｕｐ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素またはｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素を含むことができる。
前記ＡＰＳ ＩＤ情報（ｅｘ．ｔｉｌｅ＿ｇｒｏｕｐ＿ａｐｓ＿ｉｄシンタックス要素またはｓｌｉｃｅ＿ａｐｓ＿ｉｄシンタックス要素）に基づいて当該タイルグループまたは当該スライスで参照するＡＰＳが識別されることができる。前記ＡＰＳはＡＬＦデータを含むことができる。
一方、ＡＬＦデータを含むＡＰＳの構造は、例えば、次のようなシンタックス及びセマンティクスに基づいて説明されることができる。表７のシンタックスは、ＡＰＳの一部分であり得る。
前記のように、ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄシンタックス要素は、当該ＡＰＳの識別子を示すことができる。すなわち、ＡＰＳは、前記ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄシンタックス要素に基づいて識別されることができる。前記ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄシンタックス要素は、ＡＰＳ ＩＤ情報と呼ばれることができる。また、前記ＡＰＳは、ＡＬＦデータフィールドを含むことができる。前記ＡＬＦデータフィールドは、前記ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄシンタックス要素以後にパーシング／シグナリングされることができる。
また、例えば、ＡＰＳでＡＰＳ拡張フラグ（ｅｘ．ａｐｓ＿ｅｘｔｅｎｓｉｏｎ＿ｆｌａｇシンタックス要素）がパーシング／シグナリングされることができる。前記ＡＰＳ拡張フラグは、ＡＰＳ拡張データフラグ（ａｐｓ＿ｅｘｔｅｎｓｉｏｎ＿ｄａｔａ＿ｆｌａｇ）シンタックス要素が存在するか否かを指示することができる。前記ＡＰＳ拡張フラグは、例えばＶＶＣ標準の以後のバージョンのための拡張ポイントを提供するために用いられることができる。
図７は、本文書の一実施形態に係る例示的なＬＭＣＳ構造を示す。図７のＬＭＣＳ構造７００は、適応的ピースワイズ線形（ａｄａｐｔｉｖｅ ｐｉｅｃｅｗｉｓｅ ｌｉｎｅａｒ、ａｄａｐｔｉｖｅ ＰＷＬ）モデルに基づいたルマ成分のループ内マッピング（ｉｎ－ｌｏｏｐ ｍａｐｐｉｎｇ）部分７１０と、クロマ成分に対してルマ－依存的なクロマレジデュアルスケーリング（ｌｕｍａ－ｄｅｐｅｎｄｅｎｔ ｃｈｒｏｍａ ｒｅｓｉｄｕａｌ ｓｃａｌｉｎｇ）部分７２０を含むことができる。ループ内マッピング部分７１０の逆量子化及び逆変換７１１、復元７１２、及びイントラ予測７１３ブロックは、マッピングされた（整形された（ｒｅｓｈａｐｅｄ））ドメインで適用されるプロセスを示す。ループ内マッピング部分７１０のループフィルタ７１５、動き補償またはインター予測７１７ブロック、及びクロマレジデュアルスケーリング部分７２０の復元７２２、イントラ予測７２３、動き補償またはインター予測７２４、ループフィルタ７２５ブロックは、本来の（マッピングされない（ｎｏｎ－ｍａｐｐｅｄ）、整形されない）ドメインで適用されるプロセスを示す。
図７で説明するように、ＬＭＣＳが使用可能になると、逆整形（マッピング）プロセス７１４、フォワード整形（マッピング）プロセス７１８、及びクロマスケーリングプロセス７２１の少なくとも一つが適用されることができる。例えば、逆整形プロセスは、復元されたピクチャの（復元された）ルマサンプル（またはルマサンプルまたはルマサンプルアレイ）に適用されることができる。逆整形プロセスは、ルマサンプルの部分関数（逆）インデックス（ｐｉｅｃｅｗｉｓｅ ｆｕｎｃｔｉｏｎ（ｉｎｖｅｒｓｅ）ｉｎｄｅｘ）に基づいて実行されることができる。部分関数（逆）インデックスは、ルマサンプルが属するピース（または部分）を識別することができる。逆整形プロセスの出力は、修正された（復元）ルマサンプル（または修正されたルマサンプルまたは修正されたルマサンプルアレイ）である。ＬＭＣＳは、タイルグループ（またはスライス）、ピクチャまたはより高いレベルで使用可能になるか、または使用不可能になることができる。
フォワード整形プロセス及び／またはクロマスケーリングプロセスは、復元されたピクチャを生成するために適用されることができる。ピクチャは、ルマサンプルとクロマサンプルを含むことができる。ルマサンプルを有する復元されたピクチャは、復元されたルマピクチャと指称されることができ、クロマサンプルを有する復元されたピクチャは、復元されたクロマピクチャと指称されることができる。復元されたルマピクチャと復元されたクロマピクチャの組合は、復元されたピクチャと指称されることができる。復元されたルマピクチャは、フォワード整形プロセスに基づいて生成されることができる。例えば、インター予測が現在ブロックに適用されると、フォワード整形は、参照ピクチャの（復元された）ルマサンプルに基づいて導出されたルマ予測サンプルに適用される。参照ピクチャの（復元された）ルマサンプルは、逆整形プロセスに基づいて生成されるので、フォワード整形がルマ予測サンプルに適用されて整形された（マッピングされた）ルマ予測サンプルが導出されることができる。フォワード整形プロセスは、ルマ予測サンプルの部分関数インデックスに基づいて実行されることができる。部分関数インデックスは、インター予測に用いられた参照ピクチャのルマ予測サンプルの値またはルマサンプルの値に基づいて導出されることができる。イントラ予測（またはＩＢＣ（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ））が現在ブロックに適用される場合、逆整形プロセスが現在ピクチャの復元されたサンプルにまだ適用されなかったので、フォワードマッピングは必要でない。復元されたルマピクチャで（復元された）ルマサンプルは整形されたルマ予測サンプル及び対応するルマレジデュアルサンプルに基づいて生成される。
復元されたクロマピクチャは、クロマスケーリングプロセスに基づいて生成されることができる。例えば、復元されたクロマピクチャでの（復元された）クロマサンプルは、現在ブロックでのクロマ予測サンプル及びクロマレジデュアルサンプル（ｃｒｅｓ）に基づいて導出されることができる。クロマレジデュアルサンプル（ｃｒｅｓ）は現在ブロックに対する（スケーリングされた）クロマレジデュアルサンプル（ｃｒｅｓＳｃａｌｅ）及びクロマレジデュアルスケーリングファクター（ｃＳｃａｌｅＩｎｖはｖａｒＳｃａｌｅと指称されることができる）に基づいて導出される。クロマレジデュアルスケーリングファクターは、現在ブロックで整形されたルマ予測サンプル値に基づいて計算されることができる。例えば、スケーリングファクターは、整形されたルマ予測サンプル値（Ｙ`ｐｒｅｄ）の平均ルマ値（ａｖｅ（Ｙ`ｐｒｅｄ））に基づいて計算されることができる。参考に、逆変換／逆量子化に基づいて導出された（スケーリングされた）クロマレジデュアルサンプルはｃｒｅｓＳｃａｌｅ、前記（スケーリングされた）クロマレジデュアルサンプルに（逆）スケーリング手順を実行して導出されるクロマレジデュアルサンプルはｃｒｅｓと指称されることができる。
図８は、本文書の他の一実施形態に係るＬＭＣＳ構造を示す。図８は、図７を参照して説明され得る。ここでは、図８のＬＭＣＳ構造と図７のＬＭＣＳ構造７００との間の差について主に説明する。図８のループ内マッピング部分とルマ－依存的なクロマレジデュアルスケーリング部分は、それぞれ図７のループ内マッピング部分７１０とルマ－依存的なクロマレジデュアルスケーリング部分７２０と同一／類似するように動作することができる。
図８を参照すると、ルマ復元サンプルに基づいてクロマレジデュアルスケーリングファクターを導出することができる。この場合、復元ブロックの内部ルマ復元サンプルではない復元ブロック外部の周辺ルマ復元サンプルに基づいて平均ルマ値（ａｖｇＹｒ）を獲得することができ、前記平均ルマ値（ａｖｇＹｒ）に基づいてクロマレジデュアルスケーリングファクターを導出することができる。ここで、前記周辺ルマ復元サンプルは、現在ブロックの周辺ルマ復元サンプルであり得、または前記現在ブロックを含むＶＰＤＵ（ｖｉｒｔｕａｌｐｉｐｅｌｉｎｅ ｄａｔａ ｕｎｉｔｓ）の周辺ルマ復元サンプルであり得る。例えば、対象ブロックにイントラ予測が適用される場合、前記イントラ予測に基づいて導出された予測サンプルに基づいて復元サンプルが導出されることができる。また、例えば、前記対象ブロックにインター予測が適用される場合、前記インター予測に基づいて導出された予測サンプルにフォワードマッピングを適用し、整形された（あるいはフォワードマッピングされた）ルマ予測サンプルに基づいて復元サンプルが生成されることができる。
ビットストリームを介してシグナリングされる動画／画像情報は、ＬＭＣＳパラメータ（ＬＭＣＳに対する情報）を含むことができる。ＬＭＣＳパラメータは、ＨＬＳ（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ、スライスヘッダシンタックスを含む）などで構成されることができる。ＬＭＣＳパラメータ及び構成の詳細な説明は後述される。前述のように、本文書（及び以下の実施形態）で説明されたシンタックス表は、エンコーダ段で構成／エンコードされることができ、ビットストリームを介してデコーダ段にシグナリングされることができる。デコーダは、シンタックス表でＬＭＣＳに対する情報（シンタックス構成要素の形態で）をパーシング／デコーディングすることができる。以下で説明される一つ以上の実施形態は組み合わせられることができる。エンコーダは、ＬＭＣＳに関する情報に基づいて現在ピクチャをエンコーディングすることができ、そして、デコーダは、ＬＭＣＳに関する情報に基づいて現在ピクチャをデコーディングすることができる。
ルマ成分のループ内マッピングは、圧縮効率を向上させるために、動的範囲にかけてコードワードを再分配することにより入力信号の動的範囲を調節することができる。ルママッピングのために、フォワードマッピング（整形）関数（ＦｗｄＭａｐ）と、前記フォワードマッピング関数（ＦｗｄＭａｐ）に対応する逆マッピング（整形）関数（ＩｎｖＭａｐ）が用いられることができる。フォワードマッピング関数（ＦｗｄＭａｐ）は、部分線形モデルを利用してシグナリングされることができ、例えば、部分線形モデルは、１６個のピース（ｐｉｅｃｅｓ）またはビン（ｂｉｎｓ）を有することができる。前記ピースは、同じ長さを有することができる。一例において、逆マッピング関数（ＩｎｖＭａｐ）は別途にシグナリングされなくてもよく、その代わりにフォワードマッピング関数（ＦｗｄＭａｐ）から導出されることができる。すなわち、逆マッピングは、フォワードマッピングの関数であり得る。例えば、逆マッピング関数は、ｙ＝ｘを基準として、フォワードマッピング関数を対称させた関数であり得る。
ループ内（ルマ）整形（ｒｅｓｈａｐｉｎｇ）は、整形されたドメインで入力ルマ値（サンプル）を変更された値にマッピングするのみ用いられることができる。整形された値は符号化され、そして復元後に本来の（マッピングされない、整形されない）ドメインに再びマッピングされることができる。クロマレジデュアルスケーリングは、ルマ信号とクロマ信号との間の差を補償するために適用されることができる。ループ内整形は、整形器モデルのためのハイレベルシンタックスを指定して実行されることができる。整形器モデルシンタックスは、部分線形モデル（ＰＷＬモデル）をシグナリングすることができる。部分線形モデルに基づいてフォワードルックアップテーブル（ＦｗｄＬＵＴ）及び／または逆ルックアップテーブル（ＩｎｖＬＵＴ）が導出されることができる。一例として、フォワードルックアップテーブル（ＦｗｄＬＵＴ）が導出された場合、フォワードルックアップテーブル（ＦｗｄＬＵＴ）に基づいて逆ルックアップテーブル（ＩｎｖＬＵＴ）が導出されることができる。フォワードルックアップテーブル（ＦｗｄＬＵＴ）は入力ルマ値Ｙｉを変更された値Ｙｒにマッピングし、逆ルックアップテーブル（ＩｎｖＬＵＴ）は、変更された値に基づいた復元値Ｙｒを復元された値Ｙ`ｉにマッピングすることができる。復元された値Ｙ`ｉは入力ルマ値Ｙｉに基づいて導出されることができる。
一例において、ＳＰＳは、下表９のシンタックスを含むことができる。表９のシンタックスは、ツール使用可能なフラグとしてｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇを含むことができる。ここで、ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、整形器がＣＶＳ（ｃｏｄｅｄ ｖｉｄｅｏ ｓｅｑｕｅｎｃｅ）で使用されるどうかを指定するのに利用されることができる。すなわち、ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇは、ＳＰＳで整形を使用可能にするフラグであり得る。一例において、表９のシンタックスはＳＰＳの一部分であり得る。
一例において、ｓｐｓ＿ｓｅｑ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ及びｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇが示すことができるセマンティクスは、下表１０の通りであり得る。
一例において、タイルグループヘッダまたはスライスヘッダは、下表１１ または表１２のシンタックスを含むことができる。
前記表１１または表１２のシンタックスに含まれたシンタックス要素のセマンティクスは、例えば、次の表に開示された事項を含むことができる。
一例として、ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇがパーシングされると、タイルグループヘッダは、ルックアップテーブル（ＦｗｄＬＵＴ及び／またはＩｎｖＬＵＴ）を構成するのに用いられる追加的なデータ（例えば、前記表１３または１４に含まれた情報）をパーシングすることができる。このために、ＳＰＳ整形器フラグの状態がスライスヘッダまたはタイルグループヘッダで確認されることができる。ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇが真（または１）である場合、追加的なフラグ、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）がパーシングされることができる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）の目的は、整形器モデルの存在を指示するのにあり得る。例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が真（または１）である場合、現在タイルグループ（または現在スライス）に対して整形器が存在すると指示されることができる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が偽（または０）である場合、現在タイルグループ（または現在スライス）に対して整形器が存在しないと指示されることができる。
整形器が存在し、そして整形器が現在タイルグループ（または現在スライス）で使用可能になった場合、整形器モデル（例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（）またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（））はプロセッシングされることができ、これに加えて、追加的なフラグ、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）もパーシングされることができる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）は、整形器モデルが現在タイルグループ（またはスライス）に用いられたか否かを指示することができる。例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）が０（または偽）であると、整形器モデルは、現在タイルグループ（または現在スライス）に用いられていないことと指示されることができる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）が１（または真）であると、整形器モデルは、現在タイルグループ（またはスライス）に用いられたことと指示されることができる。
一例として、例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が真（または１）であり、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）が偽（または０）であり得る。これは、整形器モデルが存在するが、現在タイルグループ（またはスライス）で用いられなかったことを意味する。このような場合、整形器モデルは、次のタイルグループ（またはスライス）で用いられることができる。他の例として、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇが真（または１）であり、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇが偽（または０）であり得る。
整形器モデル（例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（）またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（））及びｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）がパーシングされると、クロマスケーリングのために必要な条件が存在するか否かが判断（評価）されることができる。前記条件は、条件１（現在タイルグループ／スライスがイントラ符号化されないこと）及び／または条件２（現在タイルグループ／スライスがルマ及びクロマに対する二つの区分されたコーディングクアッドツリー構造に分割されないこと、すなわち現在タイルグループ／スライスがデュアルツリー構造でないこと）を含むことができる。条件１及び／または条件２が真であり、及び／またはｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）が真（または１）であると、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ）がパーシングされることができる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ）が使用可能であると（１または真であると）、現在タイルグループ（またはスライス）に対してクロマレジデュアルスケーリングが使用可能になったことが指示されることができる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ（またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ）が使用不可能になると（０または偽であると）、現在タイルグループ（またはスライス）に対してクロマレジデュアルスケーリングが使用不可能になったことが指示されることができる。
前述の整形の目的は、ルックアップテーブル（ＦｗｄＬＵＴ及び／またはＩｎｖＬＵＴ）を構成するために必要なデータをパーシングすることである。一例において、前記パーシングされたデータに基づいて構成されたルックアップテーブルは許容可能なルマ値範囲の分布を複数個のビン（例えば、１６個）に分けることができる。よって、与えられたビン内にあるルマ値は変更されたルマ値にマッピングされることができる。
図９は、例示的なフォワードマッピングを示すグラフを示す。図９では、例示的に５つのビンのみ示される。
図９を参照すると、ｘ軸は入力ルマ値を示し、ｙ軸は変更された出力ルマ値を示す。ｘ軸は、５つのビンまたはピースに分けられ、各ビンは長さＬを有する。すなわち、変更されたルマ値にマッピングされた５つのビンは互いに同じ長さを有する。フォワードルックアップテーブル（ＦｗｄＬＵＴ）は、タイルグループヘッダで利用可能なデータ（例えば、整形器データ）を用いて構成されることができ、これからマッピングが容易になり得る。
一実施形態において、前記ビンインデックスに関する出力ピボットポイント（ｏｕｔｐｕｔ ｐｉｖｏｔ ｐｏｉｎｔｓ）が計算されることができる。出力ピボットポイントは、ルマコードワード整形の出力範囲の最小及び最大境界を設定（マーキング）することができる。出力ピボットポイントを計算する過程は、コードワードの数の部分累積（ｐｉｅｃｅｗｉｓｅ ｃｕｍｕｌａｔｉｖｅ）分布関数に基づいて実行されることができる。前記出力ピボット範囲は、用いられるビンの最大個数及びルックアップテーブル（ＦｗｄＬＵＴまたはＩｎｖＬＵＴ）の大きさに基づいて分割されることができる。一例として、前記出力ピボット範囲は、ビンの最大個数とルックアップテーブルの大きさの間の積に基づいて分割されることができる。例えば、ビンの最大個数とルックアップテーブルの大きさの間の積が１０２４の場合、前記出力ピボット範囲は１０２４個のエントリーに分割されることができる。前記出力ピボット範囲の分割は、スケーリングファクターに基づいて（利用して）実行（適用または達成）されることができる。一例において、スケーリングファクターは、以下の数式１に基づいて導出されることができる。
前記数式１で、ＳＦは、スケーリングファクターを示し、ｙ１及びｙ２は、それぞれのビンに対応する出力ピボットポイントを示す。また、ＦＰ＿ＰＲＥＣ及びｃは予め決められた定数であり得る。前記数式１に基づいて決められるスケーリングファクターは、フォワード整形のためのスケーリングファクターと指称されることができる。
他の実施形態において、逆整形（逆マッピング）に関連して、ビンの定義された範囲（例えば、ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘからｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｍａｘ＿ｂｉｎ＿ｉｄｘまで）に対して、フォワードルックアップテーブル（ＦｗｄＬＵＴ）のマッピングされたピボットポイントに対応する入力整形されたピボットポイント及びマッピングされた逆出力ピボットポイント（ビンインデックス＊初期コードワードの数で与えられる）がパッチされる。他の例において、スケーリングファクター（ＳＦ）は、以下の数式２に基づいて導出されることができる。
前記数式２で、ＳＦは、スケーリングファクターを示し、ｘ１及びｘ２は、入力ピボットポイントを示し、ｙ１及びｙ２は、それぞれのピース（ビン）に対応する出力ピボットポイントを示す。ここで、入力ピボットポイントは、フォワードルックアップテーブル（ＦｗｄＬＵＴ）に基づいてマッピングされたピボットポイントであり得、そして出力ピボットポイントは逆ルックアップテーブル（ＩｎｖＬＵＴ）に基づいて逆マッピングされたピボットポイントであり得る。また、ＦＰ＿ＰＲＥＣは、予め決められた定数であり得る。数式２のＦＰ＿ＰＲＥＣは、数式１のＦＰ＿ＰＲＥＣと同じであるか、異なってもよい。前記数式２に基づいて決められたスケーリングファクターは、逆整形のためのスケーリングファクターと指称されることができる。逆整形の途中に、数式２のスケーリングファクターに基づいて入力ピボットポイントの分割が実行されることができる。分割された入力ピボットポイントに基づいて、０から最小ビンインデックス（ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ）まで及び／または最小ビンインデックス（ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ）から最大ビンインデックス（ｒｅｓｈａｐｅ＿ｍｏｄｅｌ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ）までの範囲に属するビンインデックスのために、最小及び最大ビン値に対応するピボット値が指定される。
一例において、ＬＭＣＳデータ（ｌｍｃｓ＿ｄａｔａ）は、ＡＰＳに含まれることができる。ＡＰＳのセマンティクスは、例えば、コーディングのために、３２個のＡＰＳがシグナリングされることができる。
次の表は、本文書の一実施形態に係る例示的なＡＰＳのシンタックス及びセマンティクスを示す。
前記表１５を参照すると、ＡＰＳでＡＰＳパラメータのタイプ情報（ｅｘ．ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ）がパーシング／シグナリングされることができる。ＡＰＳパラメータのタイプ情報は、ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ以後にパーシング／シグナリングされることができる。
前記表１５に含まれたａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ、ＡＬＦ＿ＡＰＳ及びＬＭＣＳ＿ＡＰＳは、表１６内に含まれた表３．２に従って説明されることができる。すなわち、前記表１５に含まれたａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅに従ってＡＰＳに適用されるＡＰＳパラメータのタイプは、表１６内に含まれた表３．２のように設定されることができる。表１５に含まれたシンタックス要素は、表８を参照して説明されることができる。ＡＰＳに関する説明は、表１乃至表８と一緒に前述された説明によって裏付けられることができる。
表１６を参照すると、例えば、ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅは、当該ＡＰＳパラメータのタイプを分類するためのシンタックス要素であり得る。ＡＰＳパラメータのタイプは、ＡＬＦパラメータ及びＬＭＣＳパラメータを含むことができる。表１６を参照すると、タイプ情報（ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ）の値が０の場合、ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅの名称は、ＡＬＦ＿ＡＰＳ（ｏｒ ＡＬＦ ＡＰＳ）に決められることができ、ＡＰＳパラメータのタイプは、ＡＬＦパラメータで決められることができる（ＡＰＳパラメータは、ＡＬＦパラメータを示すことができる）。この場合、ＡＰＳにＡＬＦデータフィールド（ｉ．ｅ．ａｌｆ＿ｄａｔａ（））がパーシング／シグナリングされることができる。タイプ情報（ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ）の値が１である場合、ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅの名称は、ＬＭＣＳ＿ＡＰＳ（ｏｒ ＬＭＣＳ ＡＰＳ）に決められることができ、そして、ＡＰＳパラメータのタイプは、ＬＭＣＳパラメータで決められることができる（ＡＰＳパラメータは、ＬＭＣＳパラメータを示すことができる）。この場合、ＡＰＳにＬＭＣＳデータフィールド（ｉ．ｅ．ｌｍｃｓ＿ｄａｔａ（））がパーシング／シグナリングされることができる。
下表１７及び／または１８は、一実施形態に係る整形器モデルのシンタックスを示す。前記整形器モデルは、ＬＭＣＳモデルと呼ばれることができる。ここで、整形器モデルは、例示的に、タイルグループ整形器で説明されたが、必ず本実施形態によって本明細本が制限されるのではない。例えば、前記整形器モデルはＡＰＳに含まれることもでき、またはタイルグループ整形器モデルは、スライス整形器モデルまたはＬＭＣＳデータ（ＬＭＣＳデータフィールド）と指称されることもできる。また、接頭語（ｐｒｅｆｉｘ）ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌまたはＲｓｐは、ｌｍｃｓと混用されて用いられることができる。例えば、次の表及び以下の説明で、ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ、ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｄｅｌｔａ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ、ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ、ＲｓｐＣＷ、ＲｓｅｐＤｅｌｔａＣＷは、それぞれｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓ＿ｄｅｌｔａ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓＣＷ、ｌｍｃｓＤｅｌｔａＣＷと混用されて用いられることができる。
前記表１５に含まれたＬＭＣＳデータ（ｌｍｃｓ＿ｄａｔａ（））または整形器モデル（タイルグループ整形器またはスライス整形器）は、次の表に含まれたシンタックスのように表現されることができる。
前記表１７及び／または表１８のシンタックスに含まれたシンタックス要素のセマンティクスは、例えば、次の表に開示された事項を含むことができる。
本文書に係るルマサンプルに対する逆マッピング手順は、下表のような標準文書形式で記述されることができる。
本文書に係るルマサンプルに対する区分関数インデックス（ｐｉｅｃｅｗｉｓｅ ｆｕｎｃｔｉｏｎ ｉｎｄｅｘ）手順の識別は、下表のような標準文書形式で記述されることができる。表２２で、ｉｄｘＹＩｎｖは、逆マッピングインデックスと指称されることができ、逆マッピングインデックスは、復元ルマサンプル（ｌｕｍａ Ｓａｍｐｌｅ）に基づいて導出されることができる。
前述の実施形態及び例示に基づいてルママッピングが実行されることができ、前述のシンタックス及びそれに含まれた構成要素はただ例示的な表現であり得、実施形態が前述の表や数式によって制限されるのではない。以下では、ルママッピングに基づいてクロマレジデュアルスケーリング（レジデュアルサンプルのクロマ成分に対するスケーリング）を実行する方法が説明される。
（ルマ－依存的な（ｌｕｍａ－ｄｅｐｅｎｄｅｎｔ））クロマレジデュアルスケーリングは、ルマサンプル及びこれに対応するクロマサンプルの間の差を補償するためである。例えば、クロマレジデュアルスケーリングが使用可能である否かはタイルグループレベルまたはスライスグループレベルでシグナリングされることができる。一例において、ルママッピングが使用可能で、デュアルツリー分割（ｄｕａｌ ｔｒｅｅ ｐａｒｔｉｔｉｏｎｉｎｇ）が現在タイルグループに適用されない場合、ルマ－依存的なクロマレジデュアルスケーリングが使用可能である否かを指示するために、追加的なフラグがシグナリングされることができる。他の例において、ルママッピングが使用されないか、またはデュアルツリー分割が現在タイルグループに使用されないと、ルマ－依存的なクロマレジデュアルスケーリングが使用不可能になることがある。また、他の例において、クロマレジデュアルスケーリングは、４より小さいか同じ大きさを有するクロマブロックに対しては、常に使用不可能になり得る。
クロマレジデュアルスケーリングは、当該ルマ予測ブロック（イントラ予測モード及び／またはインター予測モードが適用された予測ブロックのルマ成分）の平均値に基づくことができる。エンコーダ段及び／またはデコーダ段でのスケーリング演算は、以下の数式３に基づいて固定小数点定数演算で具現されることができる。
前述の数式３において、ｃ`は、スケーリングされたクロマレジデュアルサンプル（レジデュアルサンプルのスケーリングされたクロマ成分）を示し、ｃは、クロマレジデュアルサンプル（レジデュアルサンプルのクロマ成分）を示し、ｓは、クロマレジデュアルスケーリングファクターを示し、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、予め決められた定数を示すことができ、例えば、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、１１であり得る。
図１０は、本文書の一実施形態によってクロマレジデュアルスケーリングインデックスを導出する方法を示す手順図である。図１０とともに説明される方法は、図７及びそれに係わる説明に含まれた表、数式、変数、アレイ、関数に基づいて実行されることができる。
Ｓ１０１０ステップにおいて、予測モード情報に基づいて予測モードがイントラ予測モードであるのか、またはインター予測モードであるのかが判断されることができる。予測モードがイントラ予測モードであると、現在ブロックまたは現在ブロックの予測サンプルは既整形された（マッピングされた）領域にあることと見なされる。予測モードがインター予測モードであると、現在ブロックまたは現在ブロックの予測サンプルは本来の（マッピングされない、整形されない）領域にあることと見なされる。
Ｓ１０２０ステップにおいて、予測モードがイントラ予測モードである場合、現在ブロック（または現在ブロックのルマ予測サンプル）の平均が計算（導出）されることができる。すなわち、既整形された領域にある現在ブロックの平均が直接計算される。平均は平均値とも指称され得る。
Ｓ１０２１ステップにおいて、予測モードがインター予測モードである場合、現在ブロックのルマ予測サンプルに対してフォワード整形（フォワードマッピング）が実行（適用）されることができる。フォワード整形を通じて、インター予測モードに基づいたルマ予測サンプルは、本来の領域から整形された領域にマッピングされることができる。一例において、ルマ予測サンプルに対するフォワード整形は、前述の表１７及び／または１８とともに説明されたＬＭＣＳデータフィールドまたは整形器モデルに基づいて実行されることができる。
Ｓ１０２２ステップにおいて、（フォワード）整形された、または（フォワード）マッピングされたルマ予測サンプルの平均が計算（導出）されることができる。すなわち、（フォワード）整形された、または（フォワード）マッピングされた結果に対して平均化過程が実行されることができる。
Ｓ１０３０ステップにおいて、クロマレジデュアルスケーリングインデックスが計算されることができる。予測モードがイントラ予測モードである場合、前記予測ルマサンプルの平均に基づいて前記クロマレジデュアルスケーリングインデックスが計算されることができる。予測モードがインター予測モードである場合、フォワード整形されたルマ予測サンプルの平均に基づいて前記クロマレジデュアルスケーリングインデックスが計算されることができる。
一実施形態において、前記クロマレジデュアルスケーリングインデックスは、ｆｏｒループ構文に基づいて計算されることができる。下表は、前記クロマレジデュアルスケーリングインデックスの導出（計算）のための例示的なｆｏｒループ構文を示す。
前記表２３で、ｉｄｘＳは、前記クロマレジデュアルスケーリングインデックスを示し、ｉｄｘＳは、ｉｆ構文の条件を満たすクロマレジデュアルスケーリングインデックスが求められた否かを識別するインデックスを示し、Ｓは、予め決められた定数を示し、そして、ＭａｘＢｉｎＩｄｘは、許容可能な最大ビンインデックスを示す。ＲｅｓｈａｐＰｉｖｏｔ［ｉｄｘＳ＋１］（言い換えれば、ＬｍｃｓＰｉｖｏｔ［ｉｄｘＳ＋１］）は、前述の表１９及び／または２０に基づいて導出されることができる。
一実施形態において、クロマレジデュアルスケーリングファクターは、前記クロマレジデュアルスケーリングインデックスに基づいて導出されることができる。以下の数式４は、前記クロマレジデュアルスケーリングファクターの導出のための一例である。
前記数式４で、ｓは、前記クロマレジデュアルスケーリングファクターを示し、そして、ＣｈｒｏｍａＳｃａｌｅＣｏｅｆは、前述の表１９及び／または２０に基づいて導出された変数（またはアレイ）であり得る。
前述のように、前記参照サンプルの平均ルマ値を獲得することができ、前記平均ルマ値に基づいてクロマレジデュアルスケーリングファクターを導出することができる。前記クロマレジデュアルスケーリングファクターに基づいてクロマ成分レジデュアルサンプルに対するスケーリングを実行し、スケーリングされたクロマ成分レジデュアルサンプルに基づいてクロマ成分復元サンプルが生成されることができることは前述のとおりである。
本文書の一実施形態において、前述のＬＭＣＳを効率的に適用するためのシグナリング構造が提案される。本文書の一実施形態に係ると、例えば、ＬＭＣＳデータは、ＨＬＳ（例えばＡＰＳ）に含まれることができ、ＡＰＳの下位レベルであるヘッダ情報（ｅｘ．ピクチャヘッダ、スライスヘッダ）を通じて、参照されるＡＰＳ ＩＤをシグナリングすることで、ＬＭＣＳモデル（整形器モデル）を適応的に導出することができる。前記ＬＭＣＳモデルは、ＬＭＣＳパラメータに基づいて導出されることができる。また、例えば、前記ヘッダ情報を通じて複数のＡＰＳ ＩＤがシグナリングされることができ、これを通じて同一ピクチャ／スライス内のブロック単位で互いに異なるＬＭＣＳモデルを適用することができる。
本文書に係る一実施形態において、ＬＭＣＳに必要な演算を効率的に実行する方法が提案される。表１９及び／または２０で前述されたセマンティクスによれば、ＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］の導出のためにピース長さ（ｐｉｅｃｅｌｅｎｇｔｈ）ｌｍｃｓＣＷ［ｉ］による割り算演算が要求される。ただ、前記ピース長さが２の累乗（ｐｏｗｅｒ ｏｆ ２）でない場合、前記割り算演算はビットシフトで実行されることができない。
例えば、ＩｎｖＳｃａｌｅＣｏｅｆｆの計算は、一つのスライスあたり最大１６回の割り算演算が必要となり得る。前述の表１９及び／または２０によると、１０ビットコーディングの場合、ｌｍｃｓＣＷ［ｉ］の範囲は、８から５１１までであるので、ＬＵＴを用いてｌｍｃｓＣＷ［ｉ］による割り算演算を具現するためには、ＬＵＴのサイズが５０４である必要がある。また、１２ビットコーディングの場合、ｌｍｃｓＣＷ［ｉ］の範囲は、３２から２０４７までであるので、ＬＵＴを用いてｌｍｃｓＣＷ［ｉ］による割り算演算を具現するためには、ＬＵＴのサイズが２０１６である必要がある。すなわち、割り算演算は、ハードウェアの具現において相当な費用を招来することがあり、よって割り算演算はできれば省略されるべきである。
本実施形態の一観点で、ｌｍｃｓＣＷ［ｉ］を固定された数（または予め決められた数または所定の数（ｐｒｅ－ｄｅｆｉｎｅｄ ｎｕｍｂｅｒ ｏｒ ｐｒｅ－ｄｅｔｅｒｍｉｎｅｄ ｎｕｍｂｅｒ））の倍数に制限することができる。それによって、割り算演算のためのＬＵＴ（ｌｏｏｋｕｐ ｔａｂｌｅ）が（ＬＵＴの容量またはサイズ）減少されることができる。例えば、ｌｍｃｓＣＷ［ｉ］が２の倍数である場合、割り算演算を代替するためのＬＵＴのサイズが半分に減少されることができる。
本実施形態の他の観点で、高い内部ビット深度コーディングが提案される。高い内部ビット深度コーディングは、ｌｍｃｓＣＷ［ｉ］の範囲制限の上位条件であり得る。例えば、コーディングビット深度が１０より高い場合に、ｌｍｃｓＣＷ［ｉ］は１＜＜（ＢｉｔＤｅｐｔｈＹ－１０）の倍数に制限されることができる。ここで、ＢｉｔＤｅｐｔｈＹは、ルマビット深度であり得る。これによって、ｌｍｃｓＣＷ［ｉ］の可能な値はコーディングビット深度によって変わらなくなり、それによって、前記ＩｎｖＳｃａｌｅＣｏｅｆｆ計算のためのＬＵＴのサイズは、コーディングビット深度が高くても増加しなくなる。一例において、１２ビット内部コーディングビット深度に対して、ｌｍｃｓＣＷ［ｉ］の値は４の倍数に制限されることができ、これによって、割り算演算を代替するためのＬＵＴのサイズは、１０ビットコーディングのために用いられるＬＵＴのサイズと同一であり得る。本観点は、単独でも実施可能であるが、前述の観点と組み合わせて実施されることもできる。
本実施形態の他の観点で、ｌｍｃｓＣＷ［ｉ］をより狭い範囲に制限することができる。例えば、ｌｍｃｓＣＷ［ｉ］は、（ＯｒｇＣＷ＞＞１）から（ＯｒｇＣＷ＜＜１）－１までの範囲内に制限されることができる。１０ビットコーディングの場合、ｌｍｃｓＣＷ［ｉ］の範囲は［３２、１２７］であり得、９６のサイズを有するＬＵＴのみでもＩｎｖＳｃａｌｅＣｏｅｆｆを計算することができる。
本実施形態のまた他の観点で、ｌｍｃｓＣＷ［ｉ］を２の累乗に近接する数値で近似して整形器の設計に用いることができる。これによって、逆マッピング手順での割り算演算は、ビットシフトで実行されることができる（代替されることができる）。
本文書に係る一実施形態において、ＬＭＣＳコードワード範囲の制限が提案される。前述の表８によれば、ＬＭＣＳコードワードの値は（ＯｒｇＣＷ＞＞３）から（ＯｒｇＣＷ＜＜３）－１までの範囲内にある。ＬＭＣＳピース長さの広い範囲によって、ＲｓｐＣＷ［ｉ］とＯｒｇＣＷとの間の大きな差が発生すると、視覚的劣化が招来されることがある。
本文書に係る一実施形態に係ると、ＬＭＣＳ ＰＷＬマッピングのコードワードを狭い範囲に制限することが提案される。例えば、ｌｍｃｓＣＷ［ｉ］の範囲は、（ＯｒｇＣＷ＞＞１）から（ＯｒｇＣＷ＜＜１）－１までの範囲にあり得る。
本文書に係る一実施形態において、ＬＭＣＳでのクロマレジデュアルスケーリングのために、単一クロマレジデュアルスケーリングファクターの使用が提案される。クロマレジデュアルスケーリングファクターを導出するための従来の方法は、当該ルマブロックの平均値を用いて逆ルママッピングでの各ピースの勾配を当該スケーリングファクターとして導出した。また、当該ルマブロックの利用可能性を要求するピースワイズインデックスを識別するための手順によりレイテンシ問題が発生された。これはハードウェアの具現において好ましくない。本文書の一実施形態を通じて、クロマブロックでのスケーリングは、ルマブロック値に依存されなくなり、ピースワイズインデックス識別が必要でないことがある。したがって、レイテンシのイシューなしにＬＭＣＳでのクロマレジデュアルスケーリング手順が実行されることができる。
本文書に係る一実施形態において、単一クロマスケーリングファクターは、ルマＬＭＣＳ情報に基づいてエンコーダとデコーダの全部で導出されることができる。ＬＭＣＳルマモデルが受信されると、クロマレジデュアルスケーリングファクターがアップデートされることができる。例えば、ＬＭＣＳモデルがアップデートされる場合に、単一クロマレジデュアルスケーリングファクターがアップデートされることができる。
下表は、本実施形態によって単一クロマスケーリングファクターを獲得するための一例を示す。
表２４を参照すると、単一クロマスケーリングファクター（ｅｘ．ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆまたはＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）は、ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘとの間の範囲内の全てのピース（ｐｉｅｃｅｓ）の逆ルママッピング勾配を平均化することで獲得されることができる。
図１１は、本文書の一実施形態に係るピボットポイントの線形フィッティングを示す。図１１では、ピボットポイントＰ１、Ｐｓ、Ｐ２が示される。以下の実施形態またはそれらの例示は、図１１を参照して説明される。
本実施形態の一例において、ピボットポイントｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１との間のルマＰＷＬマッピングの線形近似に基づいて単一クロマスケーリングファクターが獲得されることができる。すなわち、線形マッピングの逆勾配がクロマレジデュアルスケーリングファクターとして用いられることができる。例えば、図１１の線形ライン１（ｌｉｎｅａｒ ｌｉｎｅ １）は、ピボットポイントＰ１、Ｐ２を連結する一直線であり得る。図１１を参照すると、Ｐ１で入力値はｘ１であり、マッピングされた値は０であり、そして、Ｐ２で入力値はｘ２であり、マッピングされた値はｙ２である。線形ライン１の逆勾配（逆スケール）は（ｘ２－ｘ１）／ｙ２であり、そして単一クロマスケーリングファクターＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅは、ピボットポイントＰ１、Ｐ２の入力値及びマッピングされた値、及び次の数式に基づいて計算されることができる。
数式５で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、シフトファクター（ｓｈｉｆｔ ｆａｃｔｏｒ）を示し、例えば、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、予め決められた定数であり得る。一例において、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは１１であり得る。
本実施形態に係る他の例において、図１１を参照すると、ピボットポイントＰｓで入力値はｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１であり、マッピングされた値はｙｓである。それによって、線形ライン１の逆勾配（逆スケール）は（ｘｓ－ｘ１）／ｙｓと計算されることができ、単一クロマスケーリングファクターＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅは、ピボットポイントＰ１、Ｐｓの入力値、及びマッピングされた値、及び次の数式に基づいて計算されることができる。
数式６で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、シフトファクター（ビットシフトのためのファクター）を示し、例えば、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、予め決められた定数であり得る。一例において、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは１１であり得、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣに基づいて逆スケールに対するビットシフトが実行されることができる。
本実施形態に係る他の例において、単一クロマレジデュアルスケーリングファクターは、線形近似ライン（ｌｉｎｅａｒ ａｐｐｒｏｘｉｍａｔｉｏｎ ｌｉｎｅ）に基づいて導出されることができる。線形近似ラインを導出するための一例は、ピボットポイント（ｅｘ．ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１）の線形的連結を含むことができる。例えば、線形フィッティング結果は、ＰＷＬマッピングのコードワードで示すことができる。Ｐ２でのマッピングされた値ｙ２は、全てのビン（ピース）のコードワードの和であり得、そして、Ｐ２での入力値とＰ１での入力値との間の差（ｘ２－ｘ１）は、ＯｒｇＣＷ＊（ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ－ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１）（ＯｒｇＣＷは、前述の表１９及び／または表２０参照）であり得る。下表は、前述の実施形態によって単一クロマスケーリングファクターを獲得する例示を示す。
表２５を参照すると、単一クロマスケーリングファクター（ｅｘ．ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）は、２つのピボットポイント（ｉ．ｅ．、ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ）から獲得されることができる。例えば、線形マッピングの勾配逆数（ｉｎｖｅｒｓｅ ｓｌｏｐｅ ｏｆ ｌｉｎｅａｒ ｍａｐｐｉｎｇ）は、クロマスケーリングファクターとして用いられることができる。
本実施形態のまた他の例において、単一クロマスケーリングファクターは、ピボットポイントの線形フィッティング（ｌｉｎｅａｒ ｆｉｔｔｉｎｇ）によって獲得されて、線形フィッティングと既存のＰＷＬマッピングとの間のエラー（または平均二乗エラー）を最小化することができる。本例示は、単純にｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘの２つのピボットポイントを単純に連結することよりも正確になり得る。最適な線形マッピングを捜すための多様な方法が存在することができ、以下では、一例が説明される。
一例において、最小二乗エラーの和を最小化するための線形フィッティング式（ｌｉｎｅａｒ ｆｉｔｔｉｎｇ ｅｑｕａｔｉｏｎ）ｙ＝ｂ１＊ｘ＋ｂ０のパラメータｂ１、ｂ０は、次の数式７及び／または８に基づいて計算されることができる。
ここで、ｘは、原本ルマ値であり、ｙは、整形されたルマ値を示す。具体的には、
、
は、それぞれｘ、ｙの平均を示し、ｘｉ、ｙｉは、ｉ番目のピボットポイントの値を示す。
図１１を参照すると、線形マッピングを識別するためのまた他の近似が次のように与えられることができる：
－ ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１でのＰＷＬマッピングのピボットポイントを連結することで、線形ライン１獲得、ＯｒｇＣＷの倍数である入力値を有する線形ラインでのｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｉ］を計算
－ 線形ライン１及びＰＷＬマッピングを利用してピボットポイントのマッピングされた値の間の差を合算
－ 平均差（ａｖｇＤｉｆｆ）を獲得
－ 平均差によって（ｅ．ｇ．２＊ａｖｇＤｉｆｆ）線形ラインの最後のピボットポイントを調整
－ 調整された線形ラインの勾配逆数（ｉｎｖｅｒｓｅ ｓｌｏｐｅ）をクロマレジデュアルスケールとして使用
前述の線形フィッティングによって、クロマスケーリングファクター（ｉ．ｅ．、フォワードマッピングの勾配逆数（ｉｎｖｅｒｓｅ ｓｌｏｐｅ ｏｆ ｆｏｒｗａｒｄ ｍａｐｐｉｎｇ））は、次の数式９または１０に基づいて導出される（獲得される）ことができる。
前述の数式で、ｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｅｎａｒ［ｉ］は、線形マッピングのマッピングされた値であり得る。線形マッピングを通じて、最小及び最大ビンインデックスの間のＰＷＬマッピングの全てのピースは同じＬＭＣＳコードワード（ｌｍｃｓＣＷ）を有することができる。すなわち、ｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］は、ｌｍｃｓＣＷ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ］と同一であり得る。
また、数式９、１０で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、シフトファクター（ビットシフトのためのファクター）を示し、例えば、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、予め決められた定数であり得る。一例において、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは１１であり得る。
単一クロマレジデュアルスケーリングファクター（ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を通じて、当該ルマブロックの平均を計算する必要がなく、そしてＰＷＬ線形マッピングでインデックスを捜す必要がない。したがって、クロマレジデュアルスケーリングを利用したコーディングの効率が高くなることができる。
前述の本実施形態に係るＬＭＣＳデータに関するセマンティクス及び／またはクロマサンプルに対するルマ依存的なクロマレジデュアルスケーリング手順は、次の表のように標準文書形式で記述されることができる。
本文書の他の実施形態において、エンコーダは、単一クロマスケーリングファクターに関するパラメータを決めることができ、前記パラメータをデコーダにシグナリングすることができる。シグナリングを通じて、エンコーダは、クロマレジデュアルスケーリングファクターを導出するために、エンコーダで利用可能な他の情報を活用可能にすることができる。本実施形態は、クロマレジデュアルスケーリングレイテンシ問題を除去することに目的がある。
例えば、クロマレジデュアルスケーリングファクターを決めるために用いられる線形マッピングを識別するための手順は、次のように与えられることができる：
－ ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１でのＰＷＬマッピングのピボットポイントを連結することで、線形ライン１獲得、ＯｒｇＣＷの倍数である入力値を有する線形ラインでのｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｉ］を計算
－ 線形ライン１及びルマＰＷＬマッピングのピボットポイントを利用してピボットポイントのマッピングされた値の間の差の加重和を獲得
－ 加重値が適用された（ｗｅｉｇｈｔｅｄ）平均差（ａｖｇＤｉｆｆ）を獲得
－ 加重値が適用された平均差によって（ｅ．ｇ．２＊ａｖｇＤｉｆｆ）線形ライン１の最後のピボットポイントを調整
－ 調整された線形ラインの勾配逆数（ｉｎｖｅｒｓｅ ｓｌｏｐｅ）をクロマレジデュアルスケールとして使用
下表は、クロマスケーリングファクターを導出のために、ｙ値をシグナリングする例示的なシンタックスを示す。
表２８において、シンタックス要素ｌｍｃｓ＿ｃｈｒｏｍａ＿ｓｃａｌｅは、ＬＭＣＳクロマレジデュアルスケーリングのために用いられる単一クロマ（レジデュアル）スケーリングファクターを明示（ｓｐｅｃｉｆｙ）することができる（ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ＝ｌｍｃｓ＿ｃｈｒｏｍａ＿ｓｃａｌｅ）。すなわち、クロマレジデュアルスケーリングファクターに関する情報が直接シグナリングされ、前記シグナリングされた情報がクロマレジデュアルスケーリングファクターとして導出されることができる。言い換えれば、シグナリングされたクロマレジデュアルスケーリングファクターに関する情報の値が単一クロマレジデュアルスケーリングファクターの値として（直接的に）導出されることができる。ここで、シンタックス要素ｌｍｃｓ＿ｃｈｒｏｍａ＿ｓｃａｌｅは、他のＬＭＣＳデータ（例えば、コードワードの絶対値、符号に関するシンタックス要素ｅｔｃ．）とともにシグナリングされることができる。
代案的に、エンコーダは、クロマレジデュアルスケーリングファクターを導出するために必要なパラメータのみをデコーダにシグナリングすることができる。デコーダでクロマレジデュアルスケーリングファクターを導出するために、入力値ｘとマッピングされた値ｙが必要となる。ｘ値は、ビン長さを示すので、既にデコーダ段にも知られた値であるので、シグナリングされる必要がない。結局、クロマレジデュアルスケーリングファクターを導出するためには、ただｙ値のみがシグナリングされる必要がある。ここで、ｙ値は、線形マッピングにおける任意のピボットポイントのマッピングされた値であり得る（ｅ．ｇ．図１１のＰ２あるいはＰｓのマッピングされた値）。
次の表は、クロマレジデュアルスケーリングファクターを導出するためにマッピングされた値をシグナリングする例示を示す。
前述の表２９及び３０のシンタックスの一つがエンコーダとデコーダによって明示される（ｓｐｅｃｉｆｉｅｄ）任意の線形ピボットポイントでｙ値をシグナリングするために用いられることができる。すなわち、エンコーダ及びデコーダは、互いに同じシンタックスを用いてｙ値を導出することができる。
まず、表２９による実施形態が説明され得る。表２９において、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒは、ＰｓまたはＰ２にマッピングされた値を示すことができる。すなわち、表２９による実施形態において、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒを通じて固定された数字がシグナリングされることができる。
本実施形態に係る一例において、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒが一つのビン（ｉ．ｅ．図１１のＰｓでのｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］）にマッピングされた値を示す場合、クロマスケーリングファクターは、次の数式に基づいて導出されることができる。
本実施形態に係る他の例において、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒがｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１（ｉ．ｅ．図１１のＰ２でのｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１］）を示す場合、クロマスケーリングファクターは、次の数式に基づいて導出されることができる。
前述の数式で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、シフトファクター（ビットシフトのためのファクター）を示し、例えば、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは、予め決められた定数であり得る。一例において、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは１１であり得る。
次に、表３０による実施形態が説明され得る。本実施形態において、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒは、固定された数に関するデルタ値（ｉ．ｅ．ｌｍｃｓ＿ｄｅｌｔａ＿ａｂｓ＿ｃｗ＿ｌｉｎｅａｒ、ｌｍｃｓ＿ｄｅｌｔａ＿ｓｉｇｎ＿ｃｗ＿ｌｉｎｅａｒ＿ｆｌａｇ）としてシグナリングされることもできる。本実施形態の一例において、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒがｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］（ｉ．ｅ．図１１のＰｓ）でのマッピングされた値を示す場合、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒ＿ｄｅｌｔａ及びｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒは、次の数式に基づいて導出されることができる。
本実施形態の他の例において、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒがｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１］（ｉ．ｅ．図１１のＰ２）でのマッピングされた値を示す場合、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒ＿ｄｅｌｔａ及びｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒは、次の数式に基づいて導出されることができる。
前述の数式で、ＯｒｇＣＷは、前述の表１９及び／または２０に基づいて導出された値であり得る。
前述の本実施形態に係るＬＭＣＳデータに関するセマンティクス及び／またはクロマサンプルに対するルマ依存的なクロマレジデュアルスケーリング手順は、次の表のように、標準文書形式で記述されることができる。
図１２は、本文書の一実施形態に係る線形整形（または線形整形器、線形マッピング）の一例を示す。すなわち、本文書の一実施形態では、ＬＭＣＳで線形整形器の使用が提案される。例えば、図１２の例示は、フォワード線形整形（マッピング）に係わることができる。
図１２を参照すると、線形整形器は、２つのピボットポイント（ｉ．ｅ．、Ｐ１、Ｐ２）を含むことができる。Ｐ１とＰ２は、入力とマッピングされた値を示すことができ、例えば、Ｐ１は（ｍｉｎＩｎｐｕｔ、０）であり得、そして、Ｐ２は（ｍａｘＩｎｐｕｔ、ｍａｘＭａｐｐｅｄ）であり得る。ここで、ｍｉｎＩｎｐｕｔは最小入力値を示し、ｍａｘＩｎｐｕｔは最大入力値を示す。入力値がｍｉｎＩｎｐｕｔより小さいか同一であれば、０にマッピングされ、入力値がｍａｘＩｎｐｕｔより大きければ、ｍａｘＭａｐｐｅｄにマッピングされる。ｍｉｎＩｎｐｕｔとｍａｘＩｎｐｕｔとの間の入力（ルマ）値は、他の値に線形的にマッピングされることができる。図１２は、マッピングの一例を示す。ピボットポイントＰ１、Ｐ２はエンコーダで決められることができ、このために、ピースワイズ線形マッピングを近似するために、線形フィッティングが用いられることができる。
本文書に係る他の実施形態において、線形整形器をシグナリングする方法のまた他の例が提案されることができる。線形整形器モデルのピボットポイントＰ１、Ｐ２は、明示的にシグナリングされることができる。次の表は、本例示によって線形整形器モデルを明示的にシグナリングするシンタックス及びセマンティクスの一例を示す。
表３３及び３４を参照すると、シンタックス要素ｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔに基づいて第１ピボットポイントの入力値が導出されることができ、そして、シンタックス要素ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔに基づいて第２ピボットポイントの入力値が導出されることができる。第１ピボットポイントのマッピングされた値は予め決められた値（エンコーダ及びデコーダの全部に知られた値）であり得、例えば、０であり得る。シンタックス要素ｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄに基づいて第２ピボットポイントのマッピングされた値が導出されることができる。すなわち、表３３のシンタックスに基づいてシグナリングされた前記情報に基づいて線形整形器モデルが明示的に（直接的に）シグナリングされることができる。
代案的に、ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ及びｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄは、デルタ値としてシグナリングされることができる。次の表は、デルタ値として線形整形器モデルをシグナリングするシンタックス及びセマンティクスの一例を示す。
前記表３６を参照すると、シンタックス要素ｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔに基づいて第１ピボットポイントの入力値が導出されることができる。例えば、ｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔは、０のマッピングされた値を有することができる。ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ＿ｄｅｌｔａは、第２ピボットポイントの入力値と最大ルマ値（ｉ．ｅ．、（１＜＜ｂｉｔｄｅｐｔｈＹ）－１）との間の差を示すことができる。ｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ＿ｄｅｌｔａは、第２ピボットポイントのマッピングされた値と最大ルマ値（ｉ．ｅ．、（１＜＜ｂｉｔｄｅｐｔｈＹ）－１）との間の差を示すことができる。
本文書の一実施形態に係ると、前述の線形整形器に関する例示に基づいてルマ予測サンプルのためのフォワードマッピング、ルマ復元サンプルのための逆マッピング、クロマレジデュアルスケーリングが実行されることができる。一例において、線形整形器に基づく逆マッピングでルマ（復元）サンプル（ピクセル）のための逆スケーリングのために、ただ一つの逆スケーリングファクターが必要になることがある。これは、フォワードマッピング、クロマレジデュアルスケーリングでも同様である。すなわち、ビンインデックスｉに対するＳｃａｌｅＣｏｅｆｆ［ｉ］、ＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］ ａｎｄ ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆ［ｉ］を決めるステップは、ただ一つのファクターを利用することを代替することができる。ここで、一つのファクターとは、線形マッピングの（フォワード）勾配または逆勾配が固定小数点で表現されたことを指称することができる。一例において、逆ルママッピングスケーリングファクター（ルマ復元サンプルのための逆マッピングでの逆スケーリングファクター）は、次の数式の少なくとも一つに基づいて導出されることができる。
数式１７のｌｍｃｓＣＷＬｉｎｅａｒは、前述の表３１から導出されることができる。数式１８及び１９のｌｍｃｓＣＷＬｉｎｅａｒＡＬＬは、前述の表３３乃至３６の少なくとも一つから導出されることができる。数式１７または１８で、ＯｒｇＣＷは、表１９及び／または表２０から導出されることができる。
次の表は、ピクチャ復元でのルマサンプル（ｉ．ｅ．ルマ予測サンプル）に対するフォワードマッピング手順を示す数式及びシンタックス（条件文）を説明する。以下の表及び数式で、ＦＰ＿ＰＲＥＣは、ビットシフトのための定数であり、予め決められた値であり得る。例えば、ＦＰ＿ＰＲＥＣは、１１または１５であり得る。
表３７は、前述の表１７乃至表２０に基づいたルママッピング手順でフォワードマッピングされたルマサンプルを導出するためのものであり得る。すなわち、表３７は、表１９及び／または２０とともに説明されることができる。表３７で、入力としてのルマ（予測）サンプルＰｒｅｄＳａｍｐｌｅｓ［ｉ］［ｊ］から出力としてのフォワードマッピングされたルマ（予測）サンプルＰｒｅｄｍＡＰＳａｍｐｌｅｓ［ｉ］［ｊ］が導出されることができる。表３７のｉｄｘＹは（フォワード）マッピングインデックスと指称されることができ、マッピングインデックスは予測ルマサンプルに基づいて導出されることができる。
表３８は、線形整形器の適用によるルママッピングでフォワードマッピングされたルマサンプルを導出するためのものであり得る。例えば、表３８のｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔ、ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ、ｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ、ＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅは、表３３乃至３６ の少なくとも一つによって導出されることができる。表３８で、ｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔ＜ｐｒｅｄＳａｍｐｌｅｓ［ｉ］［ｊ］＜ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔの場合に、入力としてのルマ（予測）サンプルＰｒｅｄＳａｍｐｌｅｓ［ｉ］［ｊ］から出力としてのフォワードマッピングされたルマ（予測）サンプルＰｒｅｄｍＡＰＳａｍｐｌｅｓ［ｉ］［ｊ］が導出されることができる。表３７と表３８との比較を通じて、線形整形器の適用による既存ＬＭＣＳからの変化がフォワードマッピング観点で見えられることができる。
次の数式及び表は、ルマサンプル（ｉ．ｅ．ルマ復元サンプル）に対する逆マッピング手順を説明する。以下の数式及び表で、入力としてのｌｕｍａＳａｍｐｌｅは、逆マッピング以前の（修正前）ルマ復元サンプルであり得る。出力としてのｉｎｖＳａｍｐｌｅは、逆マッピングされた（修正された）ルマ復元サンプルであり得る。他の場合、クリッピングされたｉｎｖＳａｍｐｌｅが修正されたルマ復元サンプルと指称され得る。
数式２１はルママッピングで逆マッピングされたルマサンプルを導出するためのものであり得る。数式２０で、インデックスｉｄｘＩｎｖは、後述される表５０、５１または５２に基づいて導出されることができる。
数式２１は、線形整形器の適用によるルママッピングで逆マッピングされたルマサンプルを導出するためのものであり得る。例えば、数式２１のｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔは、表３３乃至３６の少なくとも一つによって導出されることができる。数式２０と数式２１との比較を通じて、線形整形器の適用による既存ＬＭＣＳからの変化がフォワードマッピング観点で見えられることができる。
表３９は、ルママッピングで逆マッピングされたルマサンプルを導出するための数式の一例を含むことができる。例えば、インデックスｉｄｘＩｎｖは、後述される表５０、５１または５２に基づいて導出されることができる。
表４０は、ルママッピングで逆マッピングされたルマサンプルを導出するための数式の他の例を含むことができる。例えば、表４０のｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔ及び／またはｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄは、表３３乃至３６の少なくとも一つによって導出されることができ、そして／または表４０のＩｎｖＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅは、表３３乃至３６、及び／または数式１７乃至１９の少なくとも一つによって導出されることができる。
前述の線形整形器に関する例示に基づいてピースワイズインデックス識別手順が省略されることができる。すなわち、本例示において、整形されたルマピクセルを有するピースが１つのみ存在するので、逆ルママッピング及びクロマレジデュアルスケーリングに用いられるピースワイズインデックス識別手順が除去されることができる。これによって、逆ルママッピングの複雑性が減少されることができる。それに加えて、ルマピースワイズインデックス識別に依存することで引き起こされるレイテンシ問題がクロマレジデュアルスケーリングの途中に除去されることができる。
前述の線形整形器の使用に関する実施形態によって、ＬＭＣＳのために次のような利点が提供されることができる。ｉ）エンコーダの整形器の設計を単純化してピースワイズ線形ピースの間で発生される急激な変化による劣化を防止することができる。ｉｉ）ピースワイズインデックス識別手順を除去してデコーダ逆マッピング手順を単純化することができる。ｉｉｉ）ピースワイズインデックス識別手順を除去して当該ルマブロックに依存することで引き起こされるクロマレジデュアルスケーリング内のレイテンシ問題を除去することができる。ｉｖ）シグナリングのオーバーヘッドを減らし、整形器の頻繁なアップデートをより実現可能にすることができる。ｖ）１６個のピースのループ（例えば、ｆｏｒ構文）が必要であった多くの部分でループを除去することができる。例えば、ＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］を導出するために、ｌｍｃｓＣＷ［ｉ］による割り算演算の数を１に減らすことができる。
本文書に係る他の実施形態において、フレキシブルビンに基づいたＬＭＣＳが提案される。ここで、フレキシブルビンとは、ビンの個数が所定の数に固定されないことを意味することができる。既存の一実施形態では、ＬＭＣＳでのビンの個数が１６個に固定され、そして、１６個のビンは入力サンプル値に対して均等に分布された。本実施形態において、フレキシブルな個数のビンが提案され、そしてピース（ビン）が原本ピクセル値に対して均等に分配されないはずである。
次の表は、本実施形態に係るＬＭＣＳデータ（データフィールド）に関するシンタックス及びそれに含まれたシンタックス要素に対するセマンティクスを例示的に示す。
表４１を参照すると、ビンの個数に関する情報ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１がシグナリングされることができる。表４２を参照すると、ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１＋１は、ビンの個数と同一であり得、これからビンの個数は、１から（１＜＜ＢｉｔＤｅｐｔｈＹ）－１までの範囲内にあり得る。例えば、ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１またはｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１＋１は２の倍数であり得る。
表４１及び表４２と一緒に説明された実施形態において、ピボットポイントの個数は、整形器が線形であるか否かに関係なく、ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１（ビンの個数に関する情報）に基づいて導出されることができ（ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１のシグナリング）、そしてピボットポイントの入力値及びマッピングされた値（ＬｍｃｓＰｉｖｏｔ＿ｉｎｐｕｔ［ｉ］、ＬｍｃｓＰｉｖｏｔ＿ｍａｐｐｅｄ［ｉ］）はシグナリングされたコードワード値（ｌｍｃｓ＿ｄｅｌｔａ＿ｉｎｐｕｔ＿ｃｗ［ｉ］、ｌｍｃｓ＿ｄｅｌｔａ＿ｍａｐｐｅｄ＿ｃｗ［ｉ］）の合算に基づいて導出されることができる（ここで、初期入力値ＬｍｃｓＰｉｖｏｔ＿ｉｎｐｕｔ［０］及び初期出力値ＬｍｃｓＰｉｖｏｔ＿ｍａｐｐｅｄ［０］は ０）。
図１３は、本文書の一実施形態における線形フォワードマッピングの一例を示す。図１４は、本文書の一実施形態における逆フォワードマッピングの一例を示す。
図１３及び図１４による実施形態において、レギュラーＬＭＣＳ及び線形ＬＭＣＳを全部支援する方法が提案される。本実施形態に係る一例において、シンタックス要素ｌｍｃｓ＿ｉｓ＿ｌｉｎｅａｒに基づいてレギュラーＬＭＣＳ及び／または線形ＬＭＣＳが指示されることができる。エンコーダで、線形ＬＭＣＳラインが決められた後、マッピングされた値（ｅｘ．図１３及び図１４のＰＬでのマッピングされた値）は均等なピース（ｅｘ．ＬｍｃｓＭａｘＢｉｎＩｄｘ－ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１）に分けられることができる。ビンＬｍｃｓＭａｘＢｉｎＩｄｘでのコードワードは、前述のｌｍｃｓデータまたは整形器モデルに関するシンタックスを利用してシグナリングされることができる。
次の表は、本実施形態の一例によるＬＭＣＳデータ（データフィールド）に関するシンタックス及びそれに含まれたシンタックス要素に対するセマンティクスを例示的に示す。
次の表は、本実施形態の他の例によるＬＭＣＳデータ（データフィールド）に関するシンタックス及びそれに含まれたシンタックス要素に対するセマンティクスを例示的に示す。
前記表４３乃至４６を参照すると、ｌｍｃｓ＿ｉｓ＿ｌｉｎｅａｒ＿ｆｌａｇが真である場合、ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとＬｍｃｓＭａｘＢｉｎＩｄｘとの間の全てのｌｍｃｓＤｅｌｔａＣＷ［ｉ］は同じ値を有することができる。すなわち、ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとＬｍｃｓＭａｘＢｉｎＩｄｘとの間の全てのピースの中でＬｍｃｓＣＷ［ｉ］が同じ値を有することができる。ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓＭａｘＢｉｎＩｄｘとの間の全てのピースのスケール及び逆スケールとクロマスケールは同一であり得る。線形整形器が真であると、ピースインデックスを導出する必要がなく、ピースの中の一つでスケール、逆スケールが用いられることができる。
次の表は、本実施形態に係るピースワイズインデックスの識別手順を例示的に示す。
本文書の他の実施形態に係ると、レギュラー１６－ピースＰＷＬ ＬＭＣＳ及び線形ＬＭＣＳの適用は、ハイレベルシンタックス（例えば、シーケンスレベル）に依存することができる。
次の表は、本実施形態に係るＳＰＳに関するシンタックス及びそれに含まれたシンタックス要素に対するセマンティクスを例示的に示す。
表４８及び４９を参照すると、ＳＰＳに含まれたシンタックス要素によってレギュラーＬＭＣＳ及び／または線形ＬＭＣＳの可用可否が決定（シグナリング）されることができる。表４８を参照すると、シンタックス要素ｓｐｓ＿ｌｉｎｅａｒ＿ｌｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇに基づいてレギュラーＬＭＣＳまたは線形ＬＭＣＳの一つがシーケンス単位で可用されることができる。
これに加えて、線形ＬＭＣＳまたはレギュラーＬＭＣＳの一つまたは二つが全部可用されるか否かは、プロファイルレベルに依存的であり得る。一例において、特定プロファイル（ｅ．ｇ．ＳＤＲプロファイル）に対して、線形ＬＭＣＳのみが許容されることができ、そして、他のプロファイル（ｅ．ｇ．ＨＤＲプロファイル）に対して、レギュラーＬＭＣＳのみが許容されることができ、そして、また他のプロファイルに対しては、レギュラーＬＭＣＳ及び／または線形ＬＭＣＳ両方とも許容されることができる。
本文書のまた他の実施形態に係ると、ＬＭＣＳピースワイズインデックス識別手順が逆ルママッピング及びクロマレジデュアルスケーリングで用いられることができる。本実施形態において、クロマレジデュアルスケーリングが可用なブロックに対して、前記ピースワイズインデックスの識別手順が用いられることができ、そして整形された（マッピングされた）領域内の全てのルマサンプルを対しても前記識別手順が用いられることができる。本実施形態は、前記インデックスを導出するための複雑度を減少することを目的とする。
次の表は、既存のピースワイズ関数インデックスの識別手順（導出手順）を示す。
一例において、前記ピースワイズインデックス識別手順では入力サンプルが少なくとも二つ以上のカテゴリに分類されることができる。例えば、前記入力サンプルは、三つのカテゴリ、第１、第２、第３カテゴリに分類されることができる。例えば、第１カテゴリは、ＬｍｃｓＰｉｖｏｔ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］より小さいサンプル（の値）を示すことができ、第２カテゴリは、ＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ］より大きいか同じサンプル（の値）を示すことができ、第３カテゴリは、ＬｍｃｓＰｉｖｏｔ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］とＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ］との間のサンプル（の値）を示すことができる。
本実施形態において、カテゴリの分類を除去することにより、識別手順を最適化する方法が提案される。ピースワイズインデックス識別手順に対する入力が整形された（マッピングされた）ルマ値であるので、ピボットポイントｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ及びＬｍｃｓＭａｘＢｉｎＩｄｘ＋１でのマッピングされた値を超える値はあってはならない。よって、カテゴリ別にサンプルを分類する条件的手順は、既存のピースワイズインデックス識別手順で省略されることができ、具体的な例示が以下で表とともに説明され得る。
本実施形態による一例において、表５０に含まれた識別手順は、下表５１または５２の一つで代替されることができる。表５１、５２を参照すると、表５０の前の二つのカテゴリが削除されることができ、そして、最後のカテゴリに対して繰り返し的なループ（ｆｏｒ構文）での境界値（第２境界値またはエンディングポイント）がＬｍｃｓＭａｘＢｉｎＩｄｘでＬｍｃｓＭａｘＢｉｎＩｄｘ＋１に修正されることができる。すなわち、識別手順が単純化されることができ、ピースワイズインデックスを導出するための複雑度が減少されることができる。よって、本実施形態によってＬＭＣＳ関連コーディングが効率的に実行されることができる。
表５１を参照すると、ｉｆ節の条件に対応する比較手順（ｉｆ節の条件に対応する数式）は、最小ビンインデックスから最大ビンインデックスまでのビンインデックスの全部に対して繰り返し的に実行されることができる。ｉｆ節の条件に対応する数式が真である場合でのビンインデックスは、逆ルママッピングのための逆マッピングインデックス（またはクロマレジデュアルスケーリングのための逆スケーリングインデックス）として導出されることができる。前記逆マッピングインデックスに基づいて修正された復元ルマサンプル（またはスケーリングされたクロマレジデュアルサンプル）が導出されることができる。
表５１の実施形態に係ると、（逆）ピースワイズ関数インデックスを識別する手順で発生され得る問題が解決されることができる。表５１の実施形態によって、演算バグが除去されることができ、そして／または重なる境界条件によって発生される重複演算過程が省略されることができる。本文書が表５１の実施形態によるものでない場合、ピースワイズインデックス（逆マッピングインデックス）の識別のためのｆｏｒ構文（ループ構文）で現在ブロックに対するＬＭＣＳで利用されるマッピング値がＬｍｃｓＰｉｖｏｔ［ｉｄｘＹＩｎｖ＋１］を超える（逸脱する）ことがある。本実施形態に係ると、前記インデックス識別手順で現在ブロックに対するＬＭＣＳで利用される適切な範囲内のマッピング値が利用されることができる。
次の表は、表５１の実施形態によって改善されたコーディング性能に関する効果を示す。
表５３乃至表５５を参照すると、表５１の実施形態によってコーディング性能が改善されることができる。または、表５１の実施形態によってコーディング性能を保持しながら演算バグが除去されることができ、そして／または重なった演算過程が省略されることができる。
本文書に係る一実施形態において、従来の実施形態では個別的ブロックツリーによってコーディングされたスライス（ｅ．ｇ．イントラスライス）に対して、デュアルツリーによってコーディングされたスライスより対応するルマブロックでのクロマレジデュアルスケーリング依存度によるレイテンシが高かった。このような理由から、従来の実施形態では、個別的ブロックツリーでコーディングされたスライスにはＬＭＣＳクロマレジデュアルスケーリングが適用されなかった。
本実施形態では、個別ツリーでコーディングされたスライスに対してもクロマレジデュアルスケーリングが適用されることができる。前述した単一クロマレジデュアルスケーリングファクターが用いられる場合、対応するルマブロックでのクロマレジデュアルスケーリングの間の依存度がないので、クロマレジデュアルスケーリングの適用によるレイテンシがないはずである。
次の表は、本実施形態に係るスライスヘッダのシンタックス及びセマンティクスを示す。
表５７を参照すると、現在ブロックがデュアルツリー構造であるかシングルツリー構造であるか否かを示す条件節（またはそれに対するフラグ）に関係なく、クロマレジデュアルスケーリングフラグがシグナリングされることができる。
本文書に係る一実施形態において、ＡＬＦデータ及び／またはＬＭＣＳデータがＡＰＳでシグナリングされることができる。例えば、３２個のＡＰＳが用いられることができる。一例において、全てのＡＰＳがＡＬＦ及び／またはＬＭＣＳのために用いられる場合、前記ＡＰＳのバッファーのためには、約１０キロバイト（Ｋｂｙｔｅｓ）オン－チップメモリーが必要となるはずである。ＡＬＦ／ＬＭＣＳパラメータを格納するのに要求されるメモリ、及びＬＭＣＳのために必要な計算複雑度を制限する（減少させる）ために、ＡＬＦ及び／またはＬＭＣＳ ＡＰＳの個数を制限する方案が本実施形態で提案される。
本実施形態に係る一例で、ピクチャ内に含まれたスライスまたはブリックスの個数に関係なく、ピクチャあたり一つのＬＭＣＳモデルが使用（許容）されることができる。ＬＭＣＳのためのＡＰＳの個数は３２個より少なくてもよい。例えば、ＬＭＣＳのためのＡＰＳの個数は４つであり得る。
次の表は、本実施形態に係るＡＰＳに関するセマンティクスを示す。
表５８を参照すると、ＬＭＣＳ ＡＰＳの最大個数は予め決められることができる。例えば、ＬＭＣＳ ＡＰＳの最大個数は４つであり得る。表１５及び表５８を参照すると、複数のＡＰＳはＬＭＣＳ ＡＰＳを含むことができる。ＬＭＣＳ ＡＰＳの（最大）個数は４つであり得る。一例で、ＬＭＣＳ ＡＰＳの一つのＬＭＣＳ ＡＰＳに含まれたＬＭＣＳデータフィールドが現在ピクチャ内の現在ブロックのためのＬＭＣＳ手順で用いられることができる。
次の表は、スライスヘッダ（またはピクチャヘッダ）に含まれたシンタックス要素に対するセマンティクスを示す。
表５９から説明されるシンタックス要素は、表５６を参照して説明されることができる。一例において、シンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄは、スライスヘッダに含まれることができる。他の例において、表５６のシンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄは、ピクチャヘッダに含まれることもでき、この場合、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄは、ｐｈ＿ｌｍｃｓ＿ａｐｓ＿ｉｄに修正されることができる。
本文書の一実施形態に係ると、ＬＭＣＳ ＡＰＳの全体個数は４より小さいか同じであり得る。また、本実施形態の一例において、一つのピクチャあたり一つのＬＭＣＳモデルのみ用いられることができる。この時、画像／ビデオの解像度に関係なく、一つのピクチャあたり一つのＬＭＣＳモデルのみ用いられることができる。本実施形態に係ると、ＬＭＣＳ ＡＰＳに対する制約によって具現が容易になることができ、そして、資源（メモリー）の過消費問題を解決することができる。
次の表は、本文書に開示されたシンタックス要素の一例に対するセマンティクスを示す。
表６０から説明されるシンタックス要素は、表５６を参照して説明されることができる。一例において、シンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄは、スライスヘッダに含まれることができる。他の例において、表６０のシンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄは、ピクチャヘッダに含まれることもでき、この場合、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄは、ｐｈ＿ｌｍｃｓ＿ａｐｓ＿ｉｄに修正されることができる。
前記表６０を参照すると、シンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄによって現在スライス（または現在ピクチャ）が参照するＬＭＣＳ ＡＰＳのａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄが明示されることができる。すなわち、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄは、現在スライス（または現在ピクチャ）が参照するＬＭＣＳ ＡＰＳのａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示すことができる。ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄの値は０から３までの範囲にあり得る。すなわち、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄの値は０、１、２または３であり得る。例えば、第０乃至第３のＬＭＣＳ ＡＰＳ（または第１乃至第４のＬＭＣＳ ＡＰＳ）のうち、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄによって指示される第０ＬＭＣＳ ＡＰＳ（または第１ＬＭＣＳ ＡＰＳ）は、現在スライス（または現在ピクチャ）によって参照されることができ、そして、前記第０ＬＭＣＳ ＡＰＳ（または第１ＬＭＣＳ ＡＰＳ）に含まれたＬＭＣＳデータ（ＬＭＣＳデータフィールドまたは整形器モデル）は、現在スライス（または現在ピクチャ）に対するＬＭＣＳ手順のために利用されることができる（前記第０ＬＭＣＳ ＡＰＳ（または第１ＬＭＣＳ ＡＰＳ）に含まれたＬＭＣＳデータ（ＬＭＣＳデータフィールドまたは整形器モデル）に基づいて現在スライス（または現在ピクチャ）に対するＬＭＣＳ手順が実行されることができる）。
本文書に開示された少なくとも一つの実施形態によって、ＬＭＣＳに関するコーディング手順が整理（ｃｌｅａｎ ｕｐ）または単純化されることができる。
以下の図面は、本明細書の具体的な一例を説明するために作成された。図面に記載された具体的な装置の名称や具体的な信号／メッセージ／フィールドの名称は、例示的に提示されたものであるので、本明細書の技術的特徴は以下の図面に用いられた具体的な名称に制限されない。
図１５及び１６は、本文書の実施形態に係るビデオ／画像エンコード方法及び関連コンポーネントの一例を概略的に示す。図１５で開示された方法は、図２で開示されたエンコード装置により実行されることができる。具体的には、例えば、図１５のＳ１５００は、前記エンコード装置の予測部２２０により実行されることができ、Ｓ１５１０及び／またはＳ１５２０は、前記エンコード装置の予測部２２０及び／または加算部２５０により実行されることができ、Ｓ１５２０は、前記エンコード装置のレジデュアル処理部２３０または加算部２５０により実行されることができ、Ｓ１５３０及び／またはＳ１５４０は、前記エンコード装置のレジデュアル処理部２３０または加算部２５０により実行されることができ、Ｓ１５５０乃至Ｓ１５７０は、前記エンコード装置のレジデュアル処理部２３０により実行されることができ、Ｓ１５８０は、前記エンコード装置のエントロピーエンコード部２４０により実行されることができる。図１５で開示された方法は、本文書で上述した実施形態を含むことができる。
図１５を参照すると、エンコード装置は、予測ルマサンプルを生成することができる（Ｓ１５００）。予測ルマサンプルに関して、エンコード装置は、予測モードに基づいて前記現在ブロックの予測ルマサンプルを導出することができる。この場合、インター予測またはイントラ予測など本文書で開示された多様な予測方法が適用されることができる。
エンコード装置は、予測クロマサンプルを導出することができる。エンコード装置は、現在ブロックの原本クロマサンプル及び予測クロマサンプルに基づいて前記レジデュアルクロマサンプルを導出することができる。例えば、エンコード装置は、前記予測クロマサンプルと原本クロマサンプルとの間の差に基づいてレジデュアルクロマサンプルを導出することができる。
エンコード装置は、ルママッピングのためのビン及び／またはＬＭＣＳコードワードを導出することができる（Ｓ１５１０）。エンコード装置は、複数個のビンに対するそれぞれのＬＭＣＳコードワードを導出することができる。例えば、前述のｌｍｃｓＣＷ［ｉ］はエンコード装置により導出されたＬＭＣＳコードワードに対応することができる。
エンコード装置は、マッピングされた予測ルマサンプルを生成することができる（Ｓ１５２０）。例えば、エンコード装置は、ルママッピングのためのピボットポイントの入力値及びマッピング値（出力値）を導出することができ、そして、前記入力値及びマッピング値に基づいてマッピングされた予測ルマサンプルを生成することができる。一例において、エンコード装置は、第１予測ルマサンプルに基づいてマッピングインデックス（ｉｄｘＹ）を導出することができ、そして、前記マッピングインデックスに対応するピボットポイントの入力値及びマッピング値に基づいて第１マッピングされた予測ルマサンプルを生成することができる。他の例において、線形マッピング（線形整形、線形ＬＭＣＳ）が用いられることができ、そして、線形マッピングでの二つのピボットポイントから導出されたフォワードマッピンスケーリングファクターに基づいてマッピングされた予測ルマサンプルが生成されることができ、したがって、線形マッピングによってインデックス導出手順が省略されることもできる。
エンコード装置は、復元ルマサンプルを生成することができる（Ｓ１５３０）。エンコード装置は、マッピングされた予測ルマサンプルに基づいて復元ルマサンプルを生成することができる。具体的には、エンコード装置は、前述のレジデュアルルマサンプルをマッピングされた予測ルマサンプルと合算することができ、前記合算結果に基づいて復元ルマサンプルを生成することができる。
エンコード装置は、前記ルママッピングのための前記ビン、前記ＬＭＣＳコードワード、及び前記復元ルマサンプルに基づいて修正された復元ルマサンプルを生成することができる（Ｓ１５４０）。エンコード装置は、前記復元ルマサンプルに対する逆マッピング手順を通じて前記修正された復元ルマサンプルを生成することができる。例えば、エンコード装置は、逆マッピング手順で復元ルマサンプル及び／またはビンインデックスごとに割り当てられたマッピング値（ｅｘ．ＬｍｃｓＰｉｖｏｔ［ｉ］、ｉ＝ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ．．．ＬｍｃｓＭａｘＢｉｎＩｄｘ＋１）に基づいて逆マッピングインデックス（ｅｘ．ｉｎｖＹＩｄｘ）を導出することができる。エンコード装置は、逆マッピングインデックスに割り当てられたマッピング値（ＬｍｃｓＰｉｖｏｔ［ｉｎｖＹＩｄｘ］）に基づいて修正された復元ルマサンプルを生成することができる。
エンコード装置は、スケーリングされたレジデュアルクロマサンプルを生成することができる。具体的には、エンコード装置は、クロマレジデュアルスケーリングファクターを導出することができ、クロマレジデュアルスケーリングファクターに基づいてスケーリングされたレジデュアルクロマサンプルを生成することができる。ここで、エンコーディング段のクロマレジデュアルスケーリングは、フォワードクロマレジデュアルスケーリングと指称されることもできる。よって、エンコード装置により導出されたクロマレジデュアルスケーリングファクターは、フォワードクロマレジデュアルスケーリングファクターと指称されることができ、フォワードスケーリングされたレジデュアルクロマサンプルが生成されることができる。
エンコード装置は、ルママッピングのためのビン及びＬＭＣＳコードワードに基づいてＬＭＣＳデータに関する情報を導出することができる（Ｓ１５５０）。または、エンコード装置は、マッピングされた予測ルマサンプル及び／またはスケーリングされたレジデュアルクロマサンプルに基づいてＬＭＣＳデータに関する情報を生成することができる。エンコード装置は、前記復元サンプルに対するＬＭＣＳデータに関する情報を生成することができる。エンコード装置は、前記復元サンプルに対するフィルタリングのために適用されることができるＬＭＣＳ関連パラメータを導出し、ＬＭＣＳ関連パラメータに基づいてＬＭＣＳデータに関する情報を生成することができる。例えば、ＬＭＣＳデータに関する情報は、前述のルママッピング（ｅｘ．フォワードマッピング、逆マッピング、線形マッピング）に関する情報、クロマレジデュアルスケーリングに関する情報、及び／またはＬＭＣＳ（または整形、整形器）に関するインデックス（ｅｘ．最大ビンインデックス、最小ビンインデックス）を含むことができる。
エンコード装置は、前記マッピングされた予測ルマサンプルに基づいてレジデュアルルマサンプルを生成することができる（Ｓ１５６０）。例えば、エンコード装置は、前記マッピングされた予測ルマサンプルと原本ルマサンプルとの間の差に基づいてレジデュアルルマサンプルを導出することができる。
エンコード装置は、レジデュアル情報を導出することができる（Ｓ１５７０）。エンコード装置は、前記スケーリングされたレジデュアルクロマサンプル及び／または前記レジデュアルルマサンプルに基づいてレジデュアル情報を導出することができる。エンコード装置は、前記スケーリングされたレジデュアルクロマサンプル及び前記ルマレジデュアルサンプルに対する変換手順に基づいて変換係数を導出することができる。例えば、変換手順は、ＤＣＴ、ＤＳＴ、ＧＢＴ、またはＣＮＴの少なくとも一つを含むことができる。エンコード装置は、前記変換係数に対する量子化手順に基づいて量子化された変換係数を導出することができる。量子化された変換係数は、係数スキャン手順に基づいて１次元ベクトル形態を有することができる。エンコード装置は、前記量子化された変換係数を示すレジデュアル情報を生成することができる。レジデュアル情報は、指数ゴロム、ＣＡＶＬＣ、ＣＡＢＡＣなどのような多様なエンコード方法を通じて生成されることができる。
エンコード装置は、画像／ビデオ情報をエンコーディングすることができる（Ｓ１５８０）。前記画像情報は、ＬＭＣＳ関連情報及び／またはレジデュアル情報を含むことができる。例えば、ＬＭＣＳ関連情報は、線形ＬＭＣＳに関する情報を含むことができる。一例において、線形ＬＭＣＳに関する情報に基づいて少なくとも一つのＬＭＣＳコードワードが導出されることができる。エンコーディングされたビデオ／画像情報はビットストリーム形態で出力されることができる。前記ビットストリームは、ネットワークまたは格納媒体を介してデコード装置に送信されることができる。
前記画像／ビデオ情報は、本文書の実施形態に係る多様な情報を含むことができる。例えば、前記画像／ビデオ情報は、前述の表１乃至６０の少なくとも一つに開示された情報を含むことができる。
一実施形態において、前記画像情報は、ＬＭＣＳ ＡＰＳを含むことができる。ＬＭＣＳ ＡＰＳ（前記ＬＭＣＳ ＡＰＳの一つ）は、ＬＭＣＳデータフィールドを含むＡＰＳであることを示すタイプ情報、及び前記ＬＭＣＳ ＡＰＳの識別子情報（ｉｄｅｎｔｉｆｉｅｒ ｉｎｆｏｒｍａｔｉｏｎ、ＩＤ 情報）を含むことができる。前記ＬＭＣＳデータフィールドは、前記ＬＭＣＳデータに関する情報を含むことができる。前記タイプ情報に基づいて前記ＬＭＣＳ ＡＰＳは前記ＬＭＣＳデータフィールドを含み、前記ＬＭＣＳデータフィールドに基づいて前記ＬＭＣＳコードワードが導出されることができる。一例において、前記識別子情報の値は所定の範囲内にあり得る。例えば、前記所定の範囲は０から３の範囲であり得る。すなわち、前記識別子情報の値は０、１、２、または３であり得る。他の例において、前記ＬＭＣＳ ＡＰＳの最大個数は予め決められた値であり得る。例えば、ＬＭＣＳ ＡＰＳの最大個数（前記予め決められた値）は４であり得る。
一実施形態において、エンコード装置は、クロマレジデュアルスケーリングのためのピースワイズインデックスを生成することができる。エンコード装置は、前記ピースワイズインデックスに基づいてクロマレジデュアルスケーリングファクターを導出することができる。エンコード装置は、前記レジデュアルクロマサンプル、及び前記クロマレジデュアルスケーリングファクターに基づいてスケーリングされたレジデュアルクロマサンプルを生成することができる。
一実施形態において、前記現在ブロックがシングルツリー構造またはデュアルツリー構造である場合（前記現在ブロックが個別的ツリー構造である場合、前記現在ブロックが個別的ツリーでコーディングされた場合）、前記現在ブロックのためにクロマレジデュアルスケーリングが適用されるか否かを示すクロマレジデュアルスケーリング可用フラグがエンコード装置によって生成されることができる。現在ピクチャ、現在スライス、及び／または現在ブロックに対してクロマレジデュアルスケーリングが適用される場合、前記クロマレジデュアルスケーリング可用フラグの値は１であり得る。
一実施形態において、前記クロマレジデュアルスケーリングファクターは、単一クロマレジデュアルスケーリングファクターであり得る。
一実施形態において、前記タイプ情報の値が１であることに基づいて、前記ＡＰＳは、ＬＭＣＳパラメータを含む前記ＬＭＣＳデータフィールドを含むことができる。
一実施形態において、前記画像情報はヘッダ情報を含むことができる。ここで、ヘッダ情報は、ピクチャヘッダ（またはスライスヘッダ）であり得る。前記ヘッダ情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含むことができる。前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報は、前記現在ピクチャ、前記現在ブロック、または現在スライスに対するＬＭＣＳ ＡＰＳの前記識別子情報を示すことができる。すなわち、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は、前記ＬＭＣＳ ＡＰＳの前記識別子情報の値と同一であり得る。例えば、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は０から３の範囲内にあり得る。すなわち、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は０、１、２、または３であり得る。
一実施形態において、前記画像情報は、ＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）を含むことができる。前記ＳＰＳは、線形ＬＭＣＳが可用であるか否かを示す線形ＬＭＣＳ可用フラグを含むことができる。
一実施形態において、前記ＬＭＣＳデータに関する情報に基づいて最小ビンインデックス（ｅｘ．ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ）及び／または最大ビンインデックス（ｅｘ．ＬｍｃｓＭａｘＢｉｎＩｄｘ）が導出されることができる。前記最小ビンインデックスに基づいて第１マッピング値（ＬｍｃｓＰｉｖｏｔ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ］）が導出されることができる。前記最大ビンインデックスに基づいて第２マッピング値（ＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ］またはＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ＋１］）が導出されることができる。前記復元ルマサンプル（ｅｘ．表３６または３７のｌｕｍａＳａｍｐｌｅ）の値は、第１マッピング値から第２マッピング値までの範囲にあり得る。一例において、全ての復元ルマサンプルの値は、第１マッピング値から第２マッピング値までの範囲にあり得る。他の例において、復元ルマサンプルのうち一部サンプルの値は、第１マッピング値から第２マッピング値までの範囲にあり得る。
一実施形態において、前記ＬＭＣＳデータに関する情報は、ＬＭＣＳデータフィールド及び線形ＬＭＣＳに関する情報を含むことができる。前記線形ＬＭＣＳに関する情報は、線形マッピングに関する情報とも指称され得る。前記ＬＭＣＳデータフィールドは、線形ＬＭＣＳが適用されるか否かを示す線形ＬＭＣＳフラグを含むことができる。前記線形ＬＭＣＳフラグの値が１である場合、前記マッピングされた予測ルマサンプルは、前記線形ＬＭＣＳに関する情報に基づいて生成されることができる。
一実施形態において、前記線形ＬＭＣＳに関する情報は、第１ピボットポイント（ｅｘ．図１１のＰ１）に関する情報、及び第２ピボットポイント（ｅｘ．図１１のＰ２）に関する情報を含むことができる。例えば、前記第１ピボットポイントの入力値及びマッピング値は、それぞれ最小入力値、最小マッピング値であり得る。前記第２ピボットポイントの入力値及びマッピング値は、それぞれ最大入力値、最大マッピング値であり得る。前記最小入力値及び前記最大入力値の間の入力値は、線形的にマッピングされることができる。
一実施形態において、前記画像情報は、前記最大入力値に関する情報、及び前記最大マッピング値に関する情報を含むことができる。前記最大入力値は、前記最大入力値に関する情報（ｅｘ．表３３のｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ）の値と同一であり得る。前記最大マッピング値は、前記最大マッピング値に関する情報（ｅｘ．表３３のｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ）の値と同一であり得る。
一実施形態において、前記線形マッピングに関する情報は、前記第２ピボットポイントの入力デルタ値に関する情報（ｅｘ．表３５のｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ＿ｄｅｌｔａ）及び前記第２ピボットポイントのマッピングデルタ値に関する情報（ｅｘ．表３５のｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ＿ｄｅｌｔａ）を含むことができる。前記第２ピボットポイントの入力デルタ値に基づいて前記最大入力値が導出され、前記第２ピボットポイントのマッピングデルタ値に基づいて前記最大マッピング値が導出されることができる。
一実施形態において、前記最大入力値及び前記最大マッピング値は、前述の表３６に含まれた少なくとも一つの数式に基づいて導出されることができる。
一実施形態において、前記マッピングされた予測ルマサンプルを生成するステップは、前記予測ルマサンプルに対するフォワードマッピングスケーリングファクター（ｅｘ．前述のＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を導出するステップ、及び前記フォワードマッピングスケーリングファクターに基づいて前記マッピングされた予測ルマサンプルは生成するステップを含むことができる。前記フォワードマッピングスケーリングファクターは、前記予測ルマサンプルのための単一ファクターであり得る。
一実施形態において、前記フォワードマッピングスケーリングファクターは、前述の表３６及び／または３８に含まれた少なくとも一つの数式に基づいて導出されることができる。
一実施形態において、前記マッピングされた予測ルマサンプルは、前述の表３８に含まれた少なくとも一つの数式に基づいて導出されることができる。
一実施形態において、エンコード装置は、前記復元ルマサンプル（ｅｘ．前述のｌｕｍａＳａｍｐｌｅ）に対する逆マッピングスケーリングファクター（ｅｘ．前述のＩｎｖＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を導出することができる。また、エンコード装置は、前記復元ルマサンプル及び前記逆マッピングスケーリングファクターに基づいて修正された復元ルマサンプル（ｅｘ．ｉｎｖＳａｍｐｌｅ）を生成することができる。前記逆マッピングスケーリングファクターは、前記復元ルマサンプルのための単一ファクターであり得る。
一実施形態において、前記逆マッピングスケーリングファクターは、前記復元ルマサンプルに基づいて導出されたピースワイズインデックスを利用して導出されることができる。
一実施形態において、前記ピースワイズインデックスは、前述の表５１に基づいて導出されることができる。すなわち、前記表５１に含まれた比較手順（ｌｕｍａＳａｍｐｌｅ＜ＬｍｃｓＰｉｖｏｔ［ｉｄｘＹＩｎｖ＋１］）は、前記ピースワイズインデックスが前記最小ビンインデックスの場合から前記ピースワイズインデックスが前記最大ビンインデックスの場合まで繰り返し的に実行されることができる。
一実施形態において、前記逆マッピングスケーリングファクターは、前述の表３３、３４、３５、３６に含まれた少なくとも一つの数式、または数式１１または１２に基づいて導出されることができる。
一実施形態において、前記修正された復元ルマサンプルは、前述の数式２０、数式２１、表３９、及び／または表４０に基づいて導出されることができる。
一実施形態において、前記ＬＭＣＳ関連情報は、前記マッピングされた予測ルマサンプルを導出するためのビンの個数に関する情報（ｅｘ．表４１のｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１）を含むことができる。例えば、ルママッピングのためのピボットポイントの個数は、前記ビンの個数と同一に設定されることができる。一例において、エンコード装置は、前記ビンの個数だけ前記ピボットポイントのデルタ入力値及びデルタマッピング値をそれぞれ生成することができる。一例において、前記デルタ入力値（ｅｘ．表４１のｌｍｃｓ＿ｄｅｌｔａ＿ｉｎｐｕｔ＿ｃｗ［ｉ］）及び前記デルタマッピング値（ｅｘ．表４１のｌｍｃｓ＿ｄｅｌｔａ＿ｍａｐｐｅｄ＿ｃｗ［ｉ］）に基づいて前記ピボットポイントの入力値及びマッピング値が導出され、前記入力値（ｅｘ．表４２のｌｍｃｓＰｉｖｏｔ＿ｉｎｐｕｔ［ｉ］）及び前記マッピング値（ｅｘ．表４２のＬｍｃｓＰｉｖｏｔ＿ｍａｐｐｅｄ［ｉ］）に基づいて前記マッピングされた予測ルマサンプルが生成されることができる。
一実施形態において、エンコード装置は、前記ＬＭＣＳ関連情報に含まれた少なくとも一つのＬＭＣＳコードワードと原本コードワード（ＯｒｇＣＷ）に基づいてＬＭＣＳデルタコードワードを導出することができ、少なくとも一つのＬＭＣＳコードワードと原本コードワードに基づいてマッピングされたルマ予測サンプルを導出することもできる。一例において、前記線形マッピングに関する情報は、ＬＭＣＳデルタコードワードに関する情報を含むことができる。
一実施形態において、前記ＬＭＣＳデルタコードワードとＯｒｇＣＷの合算に基づいて前記少なくとも一つのＬＭＣＳコードワードが導出されることができ、例えば、ＯｒｇＣＷは（１＜＜ＢｉｔＤｅｐｔｈＹ）／１６であり、ここで、ＢｉｔＤｅｐｔｈＹは、ルマビット深度を示すことができる。本実施形態は、数式１２に基づくことができる。
一実施形態において、前記ＬＭＣＳデルタコードワードとＯｒｇＣＷ＊（ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ－ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１）の合算に基づいて前記少なくとも一つのＬＭＣＳコードワードが導出されることができ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ及びｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘは、各々、最大ｂｉｎインデックス及び最小ｂｉｎインデックスであり、ＯｒｇＣＷは（１＜＜ＢｉｔＤｅｐｔｈＹ）／１６である。本実施形態は、数式１５、１６に基づいて行われることができる。
一実施形態において、前記少なくとも一つのＬＭＣＳコードワードは、２の倍数であることができる。
一実施形態において、前記復元ルマサンプルのルマビット深度（ＢｉｔＤｅｐｔｈＹ）が１０より高い場合、前記少なくとも一つのＬＭＣＳコードワードは、１＜＜（ＢｉｔＤｅｐｔｈＹ－１０）の倍数である。
一実施形態において、前記少なくとも一つのＬＭＣＳコードワードは、（ＯｒｇＣＷ＞＞１）から（ＯｒｇＣＷ＜＜１）－１までの範囲内にある。
図１７及び１８は、本文書の実施形態に係る画像／ビデオデコード方法及び関連コンポーネントの一例を概略的に示す。図１７で開示された方法は、図３で開示されたデコード装置により実行されることができる。具体的には、例えば、図１７のＳ１７００は、前記デコード装置のエントロピーデコード部３１０により実行されることができ、Ｓ１７１０は、前記デコード装置の予測部３３０により実行されることができ、Ｓ１７２０は、前記デコード装置のレジデュアル処理部３２０、予測部３３０及び／または加算部３４０により実行されることができ、Ｓ１７３０は、前記デコード装置の加算部３４０により実行されることができる。図１７で開示された方法は、本文書で上述した実施形態を含むことができる。
図１７を参照すると、デコード装置は、ビデオ／画像情報を受信／獲得することができる（Ｓ１７００）。ビデオ／画像情報は、ＬＭＣＳデータに関する情報及び／またはレジデュアル情報を含むことができる。例えば、ＬＭＣＳデータに関する情報は、前述のルママッピング（ｅｘ．フォワードマッピング、逆マッピング、線形マッピング）に関する情報、クロマレジデュアルスケーリングに関する情報、及び／またはＬＭＣＳ（または整形、整形器）に関するインデックス（ｅｘ．最大ビンインデックス、最小ビンインデックス、マッピングインデックス）を含むことができる。デコード装置は、ビットストリームを介して前記画像／ビデオ情報を受信／獲得することができる。
前記画像／ビデオ情報は、本文書の実施形態に係る多様な情報を含むことができる。例えば、前記画像／ビデオ情報は、前述した表１乃至６０の少なくとも一つに開示された情報を含むことができる。
デコード装置は、予測ルマサンプルを生成することができる。デコード装置は、予測モードに基づいて前記現在ブロックの予測ルマサンプルを導出することができる。この場合、インター予測またはイントラ予測など本文書で開示された多様な予測方法が適用されることができる。
前記画像情報は、レジデュアル情報を含むことができる。デコード装置は、レジデュアル情報に基づいてレジデュアルクロマサンプルを生成することができる。具体的には、デコード装置は、レジデュアル情報に基づいて量子化された変換係数を導出することができる。量子化された変換係数は、係数スキャン手順に基づいて１次元ベクトル形態を有することができる。デコード装置は、前記量子化された変換係数に対する逆量子化手順に基づいて変換係数を導出することができる。デコード装置は、変換係数に基づいてレジデュアルクロマサンプル及び／またはレジデュアルルマサンプルを導出することができる。
デコード装置は、マッピングされた予測ルマサンプルを生成することができる（Ｓ１７１０）。例えば、デコード装置は、ルママッピングのためのピボットポイントの入力値及びマッピング値（出力値）を導出することができ、そして、前記入力値及びマッピング値に基づいてマッピングされた予測ルマサンプルを生成することができる。一例において、デコード装置は、第１予測ルマサンプルに基づいて（フォワード）マッピングインデックス（ｉｄｘＹ）を導出することができ、そして、前記マッピングインデックスに対応するピボットポイントの入力値及びマッピング値に基づいて第１マッピングされた予測ルマサンプルを生成することができる。他の例において、線形マッピング（線形整形、線形ＬＭＣＳ）が用いられることができ、そして、線形マッピングでの二つのピボットポイントから導出されたフォワードマッピングスケーリングファクターに基づいてマッピングされた予測ルマサンプルが生成されることができ、したがって、線形マッピングによってインデックス導出手順が省略されることもできる。
デコード装置は、前記レジデュアル情報に基づいてレジデュアルルマサンプルを生成することができる（Ｓ１７２０）。例えば、デコード装置は、前記レジデュアル情報に基づいて量子化された変換係数を導出することができる。量子化された変換係数は、係数スキャン手順に基づいて１次元ベクトル形態を有することができる。デコード装置は、前記量子化された変換係数に対する逆量子化手順に基づいて変換係数を導出することができる。デコード装置は、前記変換係数に対する逆変換手順に基づいてレジデュアルサンプルを導出することができる。前記レジデュアルサンプルは、レジデュアルルマサンプル及び／またはレジデュアルクロマサンプルを含むことができる。
デコード装置は、復元ルマサンプルを生成することができる（Ｓ１７３０）。デコード装置は、マッピングされた予測ルマサンプルに基づいて復元ルマサンプルを生成することができる。具体的には、デコード装置は、前述のレジデュアルルマサンプルをマッピングされた予測ルマサンプルと合算することができ、前記合算結果に基づいて復元ルマサンプルを生成することができる。
デコード装置は、前記ＬＭＣＳデータに関する情報及び前記復元ルマサンプルに基づいて修正された復元ルマサンプルを生成することができる（Ｓ１７４０）。デコード装置は、前記復元ルマサンプルに対する逆マッピング手順を通じて前記修正された復元ルマサンプルを生成することができる。
デコード装置は、スケーリングされたレジデュアルクロマサンプルを生成することができる。具体的には、デコード装置は、クロマレジデュアルスケーリングファクターを導出することができ、クロマレジデュアルスケーリングファクターに基づいてスケーリングされたレジデュアルクロマサンプルを生成することができる。ここで、デコーディング段のクロマレジデュアルスケーリングは、エンコーディング段とは反対に、逆クロマレジデュアルスケーリングとも指称され得る。よって、デコード装置により導出されたクロマレジデュアルスケーリングファクターは、逆クロマレジデュアルスケーリングファクターと指称され得る、逆スケーリングされたレジデュアルクロマサンプルが生成されることができる。
デコード装置は、復元クロマサンプルを生成することができる。デコード装置は、スケーリングされたレジデュアルクロマサンプルに基づいて復元クロマサンプルを生成することができる。具体的には、デコード装置は、クロマ成分に対する予測手順を実行することができ、予測クロマサンプルを生成することができる。デコード装置は、予測クロマサンプルとスケーリングされたレジデュアルクロマサンプルとの間の合算に基づいて復元クロマサンプルを生成することができる。
一実施形態において、前記画像情報は、ＬＭＣＳ ＡＰＳを含むことができる。ＬＭＣＳ ＡＰＳ（前記ＬＭＣＳ ＡＰＳの一つ）は、ＬＭＣＳデータフィールドを含むＡＰＳであることを示すタイプ情報及び前記ＬＭＣＳ ＡＰＳの識別子情報（ｉｄｅｎｔｉｆｉｅｒ ｉｎｆｏｒｍａｔｉｏｎ、ＩＤ 情報）を含むことができる。前記ＬＭＣＳデータフィールドは、前記ＬＭＣＳデータに関する情報を含むことができる。前記タイプ情報に基づいて、前記ＬＭＣＳ ＡＰＳは、前記ＬＭＣＳデータフィールドを含み、前記ＬＭＣＳデータフィールドに基づいて前記ＬＭＣＳコードワードが導出されることができる。前記ＬＭＣＳコードワードに基づいて前記マッピングされた予測ルマサンプル及び前記修正された復元ルマサンプルが生成されることができる。一例において、前記識別子情報の値は所定の範囲内にあり得る。例えば、前記所定の範囲は０から３の範囲であり得る。すなわち、前記識別子情報の値は０、１、２、または３であり得る。前記ＬＭＣＳ ＡＰＳの最大個数は、予め決められた値であり得る。他の例において、前記ＬＭＣＳ ＡＰＳの最大個数は、予め決められた値であり得る。例えば、ＬＭＣＳ ＡＰＳの最大個数（前記予め決められた値）は４であり得る。
一実施形態において、前記ＬＭＣＳデータに関する情報に基づいてピースワイズインデックス（ｅｘ．表３５、３６または３７のｉｄｘＹＩｎｖ）が識別されることができる。デコード装置は、前記ピースワイズインデックスに基づいてクロマレジデュアルスケーリングファクターを導出することができる。デコード装置は、前記レジデュアルクロマサンプル及び前記クロマレジデュアルスケーリングファクターに基づいてスケーリングされたレジデュアルクロマサンプルを生成することができる。
一実施形態において、前記現在ブロックがシングルツリー構造またはデュアルツリー構造である場合（前記現在ブロックが個別的ツリー構造である場合、前記現在ブロックが個別的ツリーでコーディングされた場合）、前記現在ブロックのためにクロマレジデュアルスケーリングが適用されるか否かを示すクロマレジデュアルスケーリング可用フラグがシグナリングされることができる。現在ピクチャ、現在スライス、及び／または現在ブロックに対してクロマレジデュアルスケーリングが適用される場合、前記クロマレジデュアルスケーリング可用フラグの値は１であり得る。
一実施形態において、前記クロマレジデュアルスケーリングファクターは、単一クロマレジデュアルスケーリングファクターであり得る。
一実施形態において、前記タイプ情報の値が１であることに基づいて、前記ＡＰＳは、ＬＭＣＳパラメータを含む前記ＬＭＣＳデータフィールドを含むことができる。
一実施形態において、前記画像情報はヘッダ情報を含むことができる。ここで、ヘッダ情報は、ピクチャヘッダ（またはスライスヘッダ）であり得る。前記ヘッダ情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含むことができる。前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報は、前記現在ピクチャ、前記現在ブロック、または現在スライスに対するＬＭＣＳ ＡＰＳの前記識別子情報を示すことができる。すなわち、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は、前記ＬＭＣＳ ＡＰＳの前記識別子情報の値と同一であり得る。例えば、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は０から３の範囲内にあり得る。すなわち、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は０、１、２、または３であり得る。
一実施形態において、前記ＬＭＣＳデータに関する情報に基づいて最小ビンインデックス（ｅｘ．ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ）及び／または最大ビンインデックス（ｅｘ．ＬｍｃｓＭａｘＢｉｎＩｄｘ）が導出されることができる。前記最小ビンインデックスに基づいて第１マッピング値（ＬｍｃｓＰｉｖｏｔ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ］）が導出されることができる。前記最大ビンインデックスに基づいて第２マッピング値（ＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ］またはＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ＋１］）が導出されることができる。前記復元ルマサンプル（ｅｘ．表５１または５２のｌｕｍａＳａｍｐｌｅ）の値は、第１マッピング値から第２マッピング値までの範囲にあり得る。一例において、全ての復元ルマサンプルの値は第１マッピング値から第２マッピング値までの範囲にあり得る。他の例において、復元ルマサンプルのうち一部サンプルの値は第１マッピング値から第２マッピング値までの範囲にあり得る。
一実施形態において、前記画像情報はＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）を含むことができる。前記ＳＰＳは線形ＬＭＣＳが可用であるか否かを示す線形ＬＭＣＳ可用フラグを含むことができる。
一実施形態において、前記クロマレジデュアルスケーリングファクターは、単一クロマレジデュアルスケーリングファクターであり得る。
一実施形態において、前記ＬＭＣＳデータに関する情報は、ＬＭＣＳデータフィールド及び線形ＬＭＣＳに関する情報を含むことができる。前記線形ＬＭＣＳに関する情報は、線形マッピングに関する情報とも指称され得る。前記ＬＭＣＳデータフィールドは、線形ＬＭＣＳが適用されるか否かを示す線形ＬＭＣＳフラグを含むことができる。前記線形ＬＭＣＳフラグの値が１の場合、前記マッピングされた予測ルマサンプルは、前記線形ＬＭＣＳに関する情報に基づいて生成されることができる。
一実施形態において、前記線形ＬＭＣＳに関する情報は、第１ピボットポイント（ｅｘ．図１１のＰ１）に関する情報及び第２ピボットポイント（ｅｘ．図１１のＰ２）に関する情報を含むことができる。例えば、前記第１ピボットポイントの入力値及びマッピング値は、それぞれ最小入力値、最小マッピング値であり得る。前記第２ピボットポイントの入力値及びマッピング値は、それぞれ最大入力値、最大マッピング値であり得る。前記最小入力値及び前記最大入力値の間の入力値は、線形的にマッピングされることができる。
一実施形態において、前記画像情報は、前記最大入力値に関する情報及び前記最大マッピング値に関する情報を含むことができる。前記最大入力値は、前記最大入力値に関する情報（ｅｘ．表３３のｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ）の値と同一であり得る。前記最大マッピング値は、前記最大マッピング値に関する情報（ｅｘ．表３３のｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ）の値と同一であり得る。
一実施形態において、前記線形マッピングに関する情報は、前記第２ピボットポイントの入力デルタ値に関する情報（ｅｘ．表３５のｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ＿ｄｅｌｔａ）及び前記第２ピボットポイントのマッピングデルタ値に関する情報（ｅｘ．表３５のｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ＿ｄｅｌｔａ）を含むことができる。前記第２ピボットポイントの入力デルタ値に基づいて前記最大入力値が導出され、前記第２ピボットポイントのマッピングデルタ値に基づいて前記最大マッピング値が導出されることができる。
一実施形態において、前記最大入力値及び前記最大マッピング値は、前述の表３６に含まれた少なくとも一つの数式に基づいて導出されることができる。
一実施形態において、前記マッピングされた予測ルマサンプルを生成するステップは、前記予測ルマサンプルに対するフォワードマッピングスケーリングファクター（ｅｘ．前述のＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を導出するステップ、及び前記フォワードマッピングスケーリングファクターに基づいて前記マッピングされた予測ルマサンプルは生成するステップを含むことができる。前記フォワードマッピングスケーリングファクターは、前記予測ルマサンプルのための単一ファクターであり得る。
一実施形態において、前記逆マッピングスケーリングファクターは、前記復元ルマサンプルに基づいて導出されたピースワイズインデックスを利用して導出されることができる。
一実施形態において、前記ピースワイズインデックスは、前述の表５１に基づいて導出されることができる。すなわち、前記表５１に含まれた比較手順（ｌｕｍａＳａｍｐｌｅ＜ＬｍｃｓＰｉｖｏｔ［ｉｄｘＹＩｎｖ＋１］）は、前記ピースワイズインデックスが前記最小ビンインデックスの場合から前記ピースワイズインデックスが前記最大ビンインデックスの場合まで繰り返し的に実行されることができる。
一実施形態において、前記フォワードマッピングスケーリングファクターは、前述の表３６及び／または３８に含まれた少なくとも一つの数式に基づいて導出されることができる。
一実施形態において、前記マッピングされた予測ルマサンプルは、前述の表３８に含まれた少なくとも一つの数式に基づいて導出されることができる。
一実施形態において、デコード装置は、前記復元ルマサンプル（ｅｘ．前述のｌｕｍａＳａｍｐｌｅ）に対する逆マッピングスケーリングファクター（ｅｘ．前述のＩｎｖＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を導出することができる。また、デコード装置は、前記復元ルマサンプル及び前記逆マッピングスケーリングファクターに基づいて修正された復元ルマサンプル（ｅｘ．ｉｎｖＳａｍｐｌｅ）を生成することができる。前記逆マッピングスケーリングファクターは、前記復元ルマサンプルのための単一ファクターであり得る。
一実施形態において、前記逆マッピングスケーリングファクターは、前述の表３３、３４、３５、３６に含まれた少なくとも一つの数式、または数式１１ または１２に基づいて導出されることができる。
一実施形態において、前記修正された復元ルマサンプルは、前述の数式２０、数式２１、表３９、及び／または表４０に基づいて導出されることができる。
一実施形態において、前記ＬＭＣＳ関連情報は、前記マッピングされた予測ルマサンプルを導出するためのビンの個数に関する情報（ｅｘ．表４１のｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１）を含むことができる。例えば、ルママッピングのためのピボットポイントの個数は、前記ビンの個数と同一に設定されることができる。一例において、デコード装置は、前記ビンの個数だけ前記ピボットポイントのデルタ入力値及びデルタマッピング値をそれぞれ生成することができる。一例において、前記デルタ入力値（ｅｘ．表４１のｌｍｃｓ＿ｄｅｌｔａ＿ｉｎｐｕｔ＿ｃｗ［ｉ］）及び前記デルタマッピング値（ｅｘ．表４１のｌｍｃｓ＿ｄｅｌｔａ＿ｍａｐｐｅｄ＿ｃｗ［ｉ］）に基づいて前記ピボットポイントの入力値及びマッピング値が導出され、前記入力値（ｅｘ．表４２のＬｍｃｓＰｉｖｏｔ＿ｉｎｐｕｔ［ｉ］）及び前記マッピング値（ｅｘ．表４２のＬｍｃｓＰｉｖｏｔ＿ｍａｐｐｅｄ［ｉ］）に基づいて前記マッピングされた予測ルマサンプルが生成されることができる。
一実施形態において、デコード装置は、前記ＬＭＣＳ関連情報に含まれた少なくとも一つのＬＭＣＳコードワードと原本コードワード（ＯｒｇＣＷ）に基づいてＬＭＣＳデルタコードワードを導出することができ、少なくとも一つのＬＭＣＳコードワードと原本コードワードに基づいてマッピングされたルマ予測サンプルを導出することもできる。一例において、前記線形マッピングに関する情報は、ＬＭＣＳデルタコードワードに関する情報を含むことができる。
一実施形態において、前記ＬＭＣＳデルタコードワードとＯｒｇＣＷの合算に基づいて前記少なくとも一つのＬＭＣＳコードワードが導出されることができ、例えば、ＯｒｇＣＷは（１＜＜ＢｉｔＤｅｐｔｈＹ）／１６であり、ここで、ＢｉｔＤｅｐｔｈＹは、ルマビット深度を示すことができる。本実施形態は、数式１４に基づくことができる。
一実施形態において、前記ＬＭＣＳデルタコードワードとＯｒｇＣＷ＊（ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ－ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１）の合算に基づいて前記少なくとも一つのＬＭＣＳコードワードが導出されることができ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ及びｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘは、各々、最大ｂｉｎインデックス及び最小ｂｉｎインデックスであり、ＯｒｇＣＷは（１＜＜ＢｉｔＤｅｐｔｈＹ）／１６である。本実施形態は、数式１５、１６に基づいて行われることができる。
一実施形態において、前記少なくとも一つのＬＭＣＳコードワードは、２の倍数であることができる。
一実施形態において、前記復元ルマサンプルのルマビット深度（ＢｉｔＤｅｐｔｈＹ）が１０より高い場合、前記少なくとも一つのＬＭＣＳコードワードは、１＜＜（ＢｉｔＤｅｐｔｈＹ－１０）の倍数である。
一実施形態において、前記少なくとも一つのＬＭＣＳコードワードは、（ＯｒｇＣＷ＞＞１）から（ＯｒｇＣＷ＜＜１）－１までの範囲内にある。
前述の文段で、ＬＭＣＳデータに関する情報は、ＬＭＣＳ関連情報と同一であり得る。
前述した実施形態において、方法は、一連のステップ又はブロックとしてフローチャートに基づいて説明されているが、該当実施形態は、ステップの順序に限定されるわけではなく、あるステップは、前述したところと異なるステップと異なる順序で、又は同時に発生し得る。また、当業者であれば、フローチャートに示されているステップが排他的ではなく、異なるステップが含まれるか、フローチャートの一つ又はそれ以上のステップが本文書の実施形態の範囲に影響を与えずに削除され得ることを理解することができる。
前述した本文書の実施形態に係る方法は、ソフトウェアの形態で実現されることができ、本文書に係るエンコード装置及び／又はデコード装置は、例えば、ＴＶ、コンピュータ、スマートフォン、セットトップボックス、ディスプレイ装置等の画像処理を行う装置に含まれ得る。
本文書で、実施形態がソフトウェアで実現される際、前述した方法は、前述した機能を行うモジュール（過程、機能等）で実現されることができる。モジュールはメモリに格納され、プロセッサにより実行されることができる。メモリは、プロセッサの内部又は外部にあってもよく、よく知られている様々な手段でプロセッサと連結されてもよい。プロセッサは、ＡＳＩＣ（ａｐｐｌｉｃａｔｉｏｎ－ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ）、他のチップセット、論理回路及び／又はデータ処理装置を含むことができる。メモリは、ＲＯＭ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）、フラッシュメモリ、メモリカード、格納媒体及び／又は他の格納装置を含むことができる。即ち、本文書で説明した実施形態は、プロセッサ、マイクロプロセッサ、コントローラ又はチップ上で実現されて行われ得る。例えば、各図面で示している機能ユニットは、コンピュータ、プロセッサ、マイクロプロセッサ、コントローラ又はチップ上で実現されて行われ得る。この場合、実現のための情報（ｅｘ．ｉｎｆｏｒｍａｔｉｏｎ ｏｎ ｉｎｓｔｒｕｃｔｉｏｎｓ）又はアルゴリズムがデジタル格納媒体に格納されることができる。
また、本文書の実施形態が適用されるデコード装置及びエンコード装置は、マルチメディア放送送受信装置、モバイル通信端末、ホームシネマビデオ装置、デジタルシネマビデオ装置、監視用カメラ、ビデオ対話装置、ビデオ通信のようなリアルタイム通信装置、モバイルストリーミング装置、格納媒体、カムコーダ、オーダーメイド型ビデオ（ＶｏＤ）サービス提供装置、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置、インターネットストリーミングサービス提供装置、３次元（３Ｄ）ビデオ装置、ＶＲ（ｖｉｒｔｕａｌ ｒｅａｌｉｔｙ）装置、ＡＲ（ａｒｇｕｍｅｎｔｅ ｒｅａｌｉｔｙ）装置、画像電話ビデオ装置、運送手段端末（ｅｘ．車両（自律走行車両含む）端末、飛行機端末、船舶端末など）及び医療用ビデオ装置等に含まれ得、ビデオ信号又はデータ信号を処理するために使用され得る。例えば、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置としては、ゲームコンソール、ブルーレイプレーヤー、インターネットアクセスＴＶ、ホームシアターシステム、スマートフォン、タブレットＰＣ、ＤＶＲ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｒｅｃｏｄｅｒ）等を含み得る。
また、本文書の実施形態が適用される処理方法は、コンピュータで実行されるプログラムの形態で生産されることができ、コンピュータが読み取ることができる記録媒体に格納されることができる。本文書の実施形態に係るデータ構造を有するマルチメディアデータもまた、コンピュータが読み取ることができる記録媒体に格納されることができる。前記コンピュータが読み取ることができる記録媒体は、コンピュータで読み取られるデータが格納される全ての種類の格納装置及び分散格納装置を含む。前記コンピュータが読み取ることができる記録媒体は、例えば、ブルーレイディスク（ＢＤ）、汎用直列バス（ＵＳＢ）、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピディスク、及び光学的データ格納装置を含み得る。また、前記コンピュータが読み取ることができる記録媒体は、搬送波（例えば、インターネットを介した送信）の形態で実現されたメディアを含む。また、エンコード方法で生成されたビットストリームが、コンピュータが読み取られる記録媒体に格納されるか、有無線通信ネットワークを介して送信されることができる。
また、本文書の実施形態は、プログラムコードによるコンピュータプログラム製品で実現されることができ、前記プログラムコードは、本文書の実施形態によってコンピュータで実行されることができる。前記プログラムコードは、コンピュータによって読み取り可能なキャリア上に格納されることができる。
図１９は、本文書に開示された実施形態が適用されることができるコンテンツストリーミングシステムの例を示す。
図１９を参照すると、本文書の実施形態が適用されるコンテンツストリーミングシステムは、大きくエンコードサーバ、ストリーミングサーバ、ウェブサーバ、メディアストレージ、ユーザ装置、及びマルチメディア入力装置を含むことができる。
前記エンコードサーバは、スマートフォン、カメラ、カムコーダ等のようなマルチメディア入力装置から入力されたコンテンツをデジタルデータに圧縮してビットストリームを生成し、これを前記ストリーミングサーバに送信する役割をする。別の例として、スマートフォン、カメラ、カムコーダなどのようなマルチメディア入力装置がビットストリームを直接生成する場合、前記エンコードサーバは省略され得る。
前記ビットストリームは、本文書の実施形態が適用されるエンコード方法又はビットストリームの生成方法により生成されることができ、前記ストリーミングサーバは、前記ビットストリームを送信又は受信する過程で、一時的に前記ビットストリームを格納することができる。
前記ストリーミングサーバは、ウェブサーバを介してのユーザ要請に基づいてマルチメディアデータをユーザ装置に送信し、前記ウェブサーバは、ユーザにどのようなサービスがあるかを知らせる媒介体役割をする。ユーザが前記ウェブサーバに所望のサービスを要請すれば、前記ウェブサーバは、これをストリーミングサーバに伝達し、前記ストリーミングサーバは、ユーザにマルチメディアデータを送信する。このとき、前記コンテンツストリーミングシステムは、別の制御サーバを含むことができ、この場合、前記制御サーバは、前記コンテンツストリーミングシステム内の各装置間の命令／応答を制御する役割をする。
前記ストリーミングサーバは、メディア格納所及び／又はエンコードサーバからコンテンツを受信することができる。例えば、前記エンコードサーバからコンテンツを受信するようになる場合、前記コンテンツをリアルタイムに受信することができる。この場合、円滑なストリーミングサービスを提供するために、前記ストリーミングサーバは、前記ビットストリームを一定時間の間、格納することができる。
前記ユーザ装置の例では、携帯電話、スマートフォン（ｓｍａｒｔ ｐｈｏｎｅ）、ノートブックコンピュータ（ｌａｐｔｏｐ ｃｏｍｐｕｔｅｒ）、デジタル放送用端末機、ＰＤＡ（ｐｅｒｓｏｎａｌ ｄｉｇｉｔａｌ ａｓｓｉｓｔａｎｔｓ）、ＰＭＰ（ｐｏｒｔａｂｌｅ ｍｕｌｔｉｍｅｄｉａ ｐｌａｙｅｒ）、ナビゲーション、スレートＰＣ（ｓｌａｔｅ ＰＣ）、タブレットＰＣ（ｔａｂｌｅｔ ＰＣ）、ウルトラブック（ｕｌｔｒａｂｏｏｋ）、ウェアラブルデバイス（ｗｅａｒａｂｌｅ ｄｅｖｉｃｅ、例えば、ウォッチ型端末機（ｓｍａｒｔｗａｔｃｈ）、グラス型端末機（ｓｍａｒｔ ｇｌａｓｓ）、ＨＭＤ（ｈｅａｄ ｍｏｕｎｔｅｄ ｄｉｓｐｌａｙ））、デジタルＴＶ、デスクトップコンピュータ、デジタルサイニジなどがありうる。
前記コンテンツストリーミングシステム内の各サーバは、分散サーバとして運営されることができ、この場合、各サーバで受信するデータは、分散処理されることができる。
本明細書に記載された請求項は、多様な方式で組み合わせることができる。例えば、本明細書の方法請求項の技術的特徴が組み合わせられて装置として実現されることができ、本明細書の装置請求項の技術的特徴が組み合わせられて方法として実現されることができる。また、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴とが組み合わせられて装置として実現されることができ、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴とが組み合わせられて方法として実現されることができる。
Claims (3)
- デコード装置により実行される画像デコード方法において、
ビットストリームからＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）データに関する情報、及びレジデュアル情報を含む画像情報を獲得するステップと、
前記ＬＭＣＳデータに関する情報及び予測ルマサンプルに基づいてマッピングされた予測ルマサンプルを生成するステップと、
前記レジデュアル情報に基づいてレジデュアルルマサンプルを導出するステップと、
前記マッピングされた予測ルマサンプル及び前記レジデュアルルマサンプルに基づいて復元ルマサンプルを生成するステップと、
前記ＬＭＣＳデータに関する情報及び前記復元ルマサンプルに基づいて修正された復元ルマサンプルを生成するステップと、を含み、
前記画像情報は、ＬＭＣＳ ＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）を含み、
ＬＭＣＳ ＡＰＳは、ＬＭＣＳデータフィールドを含むＡＰＳであることを示すタイプ情報及び前記ＬＭＣＳ ＡＰＳの識別子情報を含み、
前記ＬＭＣＳデータフィールドは、前記ＬＭＣＳデータに関する情報を含み、
前記タイプ情報に基づいて前記ＬＭＣＳ ＡＰＳは前記ＬＭＣＳデータフィールドを含み、
前記ＬＭＣＳデータフィールドに基づいてＬＭＣＳコードワードが導出され、
前記ＬＭＣＳコードワードに基づいて前記マッピングされた予測ルマサンプル及び前記修正された復元ルマサンプルが生成され、
前記識別子情報の値は所定の範囲内にあり、
前記画像情報は、ヘッダ情報を含み、
前記ヘッダ情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含み、
前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報は、前記ＬＭＣＳ ＡＰＳの前記識別子情報を示し、
前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は０から３の範囲内にある、画像デコード方法。 - エンコード装置により実行される画像エンコード方法において、
現在ピクチャ内の現在ブロックに対する予測ルマサンプルを生成するステップと、
ルママッピングのためのビン及びＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）コードワードを導出するステップと、
前記ルママッピングのための前記ビン及び前記ＬＭＣＳコードワードに基づいてマッピングされた予測ルマサンプルを生成するステップと、
前記マッピングされた予測ルマサンプルに基づいて復元ルマサンプルを生成するステップと、
前記ルママッピングのための前記ビン、前記ＬＭＣＳコードワード、及び前記復元ルマサンプルに基づいて修正された復元ルマサンプルを生成するステップと、
前記ルママッピングのための前記ビン及び前記ＬＭＣＳコードワードに基づいてＬＭＣＳデータに関する情報を導出するステップと、
前記マッピングされた予測ルマサンプルに基づいてレジデュアルルマサンプルを生成するステップと、
前記レジデュアルルマサンプルに基づいてレジデュアル情報を生成するステップと、
前記ＬＭＣＳデータに関する情報及び前記レジデュアル情報を含む画像情報をエンコーディングするステップと、を含み、
前記画像情報はＬＭＣＳ ＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）を含み、
ＬＭＣＳ ＡＰＳがＬＭＣＳデータフィールドを含むＡＰＳであることを示すタイプ情報及び前記ＬＭＣＳ ＡＰＳの識別子情報を含み、
前記ＬＭＣＳデータフィールドは前記ＬＭＣＳデータに関する情報を含み、
前記タイプ情報に基づいて前記ＬＭＣＳ ＡＰＳは前記ＬＭＣＳデータフィールドを含み、
前記ＬＭＣＳデータフィールドに基づいて前記ＬＭＣＳコードワードが導出され、
前記識別子情報の値は所定の範囲内にあり、
前記画像情報はヘッダ情報を含み、
前記ヘッダ情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含み、
前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報は、前記ＬＭＣＳ ＡＰＳの前記識別子情報を示し、
前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は０から３の範囲内にある、画像エンコード方法。 - 映像に対するデータを送信する方法であって、
前記映像に対するビットストリームを獲得するステップであって、
前記ビットストリームは、現在ピクチャ内の現在ブロックに対する予測ルマサンプルを生成し、ＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）コードワードとルママッピングに対するビンを導き出し、前記ＬＭＣＳコードワードと前記ルママッピングに対するビンに基づいてマッピングされた予測ルマサンプルを生成し、前記マッピングされた予測ルマサンプルに基づいて復元ルマサンプルを生成し、前記復元ルマサンプル、前記ＬＭＣＳコードワード及び前記ルママッピングに対するビンに基づいて修正された復元ルマサンプルを生成し、前記ＬＭＣＳコードワード及び前記ルママッピングに対する前記ビンに基づいてＬＭＣＳデータについての情報を導き出し、前記マッピングされた予測ルマサンプルに基づいてレジデュアルルマサンプルを生成し、前記レジデュアルルマサンプルに基づいてレジデュアル情報を生成し、前記レジデュアル情報と前記ＬＭＣＳデータについての情報を含む画像情報をエンコーディングすることにより生成される、ステップと、
前記ビットストリームを含む前記データを送信するステップを含み、
前記画像情報は、ＬＭＣＳ ＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）を含み、
ＬＭＣＳ ＡＰＳは、前記ＬＭＣＳ ＡＰＳの識別子情報と、前記ＬＭＣＳ ＡＰＳがＬＭＣＳデータフィールドを含むＡＰＳであることを示すタイプ情報を含み、
前記ＬＭＣＳデータフィールドは前記ＬＭＣＳデータについての前記情報を含み、
前記ＬＭＣＳ ＡＰＳは、前記タイプ情報に基づいて前記ＬＭＣＳデータフィールドを含み、
前記ＬＭＣＳコードワードは、前記ＬＭＣＳデータフィールドに基づいて導き出され、
前記識別子情報の値は所定の範囲内であり、
前記画像情報はヘッダ情報を含み、
前記ヘッダ情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含み、
前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報は、前記ＬＭＣＳ ＡＰＳの前記識別子情報を示し、
前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は０から３の範囲内にある、映像に対するデータを送信する方法。
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201962865921P | 2019-06-24 | 2019-06-24 | |
| US62/865,921 | 2019-06-24 | ||
| JP2021577098A JP7367077B2 (ja) | 2019-06-24 | 2020-06-24 | ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング |
| PCT/KR2020/008208 WO2020262952A1 (ko) | 2019-06-24 | 2020-06-24 | 루마 샘플들의 맵핑 및 크로마 샘플들의 스케일링 기반 비디오 또는 영상 코딩 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021577098A Division JP7367077B2 (ja) | 2019-06-24 | 2020-06-24 | ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023171547A true JP2023171547A (ja) | 2023-12-01 |
| JP7529873B2 JP7529873B2 (ja) | 2024-08-06 |
Family
ID=74061856
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021577098A Active JP7367077B2 (ja) | 2019-06-24 | 2020-06-24 | ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング |
| JP2023175711A Active JP7529873B2 (ja) | 2019-06-24 | 2023-10-11 | ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021577098A Active JP7367077B2 (ja) | 2019-06-24 | 2020-06-24 | ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング |
Country Status (5)
| Country | Link |
|---|---|
| US (3) | US11418799B2 (ja) |
| JP (2) | JP7367077B2 (ja) |
| KR (1) | KR20220003114A (ja) |
| CN (4) | CN116582684A (ja) |
| WO (1) | WO2020262952A1 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114175635A (zh) * | 2019-05-27 | 2022-03-11 | Sk电信有限公司 | 用于推导帧内预测模式的方法及装置 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6959116B2 (en) * | 2001-09-18 | 2005-10-25 | Emc Corporation | Largest magnitude indices selection for (run, level) encoding of a block coded picture |
| US9924191B2 (en) * | 2014-06-26 | 2018-03-20 | Qualcomm Incorporated | Filters for advanced residual prediction in video coding |
| US10778985B2 (en) * | 2015-09-23 | 2020-09-15 | Lg Electronics Inc. | Method and apparatus for intra prediction in video coding system |
| US10652575B2 (en) * | 2016-09-15 | 2020-05-12 | Qualcomm Incorporated | Linear model chroma intra prediction for video coding |
| CN113424528A (zh) | 2019-02-01 | 2021-09-21 | 北京字节跳动网络技术有限公司 | 环路整形和块差分脉冲编解码调制之间的相互作用 |
| BR112021016953A2 (pt) | 2019-02-27 | 2021-11-23 | Huawei Tech Co Ltd | Codificador, decodificador e métodos correspondentes |
| GB201902829D0 (en) * | 2019-03-01 | 2019-04-17 | Canon Kk | Method and apparatus for encoding and decoding a video bitsream for merging regions of interest |
| CN113796075B (zh) | 2019-05-03 | 2024-05-31 | 寰发股份有限公司 | 视频编码系统中编码或解码视频数据的方法和装置 |
| US11166033B2 (en) | 2019-06-06 | 2021-11-02 | Qualcomm Incorporated | Adaptation parameter set in access unit in video coding |
| JP2021002780A (ja) | 2019-06-21 | 2021-01-07 | シャープ株式会社 | 動画像復号装置および動画像符号化装置 |
-
2020
- 2020-06-24 CN CN202310788496.2A patent/CN116582684A/zh active Pending
- 2020-06-24 CN CN202080058312.1A patent/CN114270830B/zh active Active
- 2020-06-24 JP JP2021577098A patent/JP7367077B2/ja active Active
- 2020-06-24 CN CN202310776679.2A patent/CN116567271A/zh active Pending
- 2020-06-24 CN CN202310777675.6A patent/CN116600144A/zh active Pending
- 2020-06-24 WO PCT/KR2020/008208 patent/WO2020262952A1/ko active Application Filing
- 2020-06-24 KR KR1020217042127A patent/KR20220003114A/ko not_active Application Discontinuation
-
2021
- 2021-12-23 US US17/560,461 patent/US11418799B2/en active Active
-
2022
- 2022-07-08 US US17/860,625 patent/US11722681B2/en active Active
-
2023
- 2023-06-13 US US18/209,140 patent/US20230328264A1/en active Pending
- 2023-10-11 JP JP2023175711A patent/JP7529873B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| US11722681B2 (en) | 2023-08-08 |
| JP7367077B2 (ja) | 2023-10-23 |
| CN116567271A (zh) | 2023-08-08 |
| CN116582684A (zh) | 2023-08-11 |
| JP7529873B2 (ja) | 2024-08-06 |
| US20220353518A1 (en) | 2022-11-03 |
| CN116600144A (zh) | 2023-08-15 |
| CN114270830A (zh) | 2022-04-01 |
| WO2020262952A1 (ko) | 2020-12-30 |
| US20220116631A1 (en) | 2022-04-14 |
| KR20220003114A (ko) | 2022-01-07 |
| JP2022539354A (ja) | 2022-09-08 |
| US11418799B2 (en) | 2022-08-16 |
| US20230328264A1 (en) | 2023-10-12 |
| CN114270830B (zh) | 2023-07-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102606330B1 (ko) | Aps 시그널링 기반 비디오 또는 영상 코딩 | |
| CN114402597B (zh) | 应用自适应环路滤波器的视频或图像编码 | |
| KR102479050B1 (ko) | 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩 | |
| KR102491959B1 (ko) | 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩 | |
| US20220182620A1 (en) | Adaptive loop filter-based video or image coding | |
| JP7355860B2 (ja) | ルママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング | |
| CN114586351A (zh) | 基于自适应环路滤波的图像编译设备和方法 | |
| KR20220110299A (ko) | 인루프 필터링 기반 영상 코딩 장치 및 방법 | |
| JP2024038444A (ja) | ルママッピングベースのビデオまたは映像コーディング | |
| KR20220017425A (ko) | 루마 샘플들의 맵핑 및 크로마 샘플들의 스케일링 기반 비디오 또는 영상 코딩 | |
| JP7529873B2 (ja) | ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング | |
| JP7471498B2 (ja) | ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング | |
| JP7471495B2 (ja) | ルママッピング基盤ビデオまたは映像コーディング | |
| KR20210158392A (ko) | 루마 맵핑 기반 비디오 또는 영상 코딩 | |
| KR20220163401A (ko) | 인루프 필터링 기반 영상 코딩 장치 및 방법 | |
| KR20210158391A (ko) | 루마 샘플들의 맵핑 및 크로마 샘플들의 스케일링 기반 비디오 또는 영상 코딩 | |
| KR20220110840A (ko) | 적응적 루프 필터링 기반 영상 코딩 장치 및 방법 | |
| KR20220112828A (ko) | 필터링 관련 정보 시그널링 기반 영상 코딩 장치 및 방법 | |
| KR20210158390A (ko) | 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩 | |
| KR20220004767A (ko) | 루마 맵핑 기반 비디오 또는 영상 코딩 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231011 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231011 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240625 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240725 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7529873 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |