JP7471498B2 - ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング - Google Patents

ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング Download PDF

Info

Publication number
JP7471498B2
JP7471498B2 JP2023105073A JP2023105073A JP7471498B2 JP 7471498 B2 JP7471498 B2 JP 7471498B2 JP 2023105073 A JP2023105073 A JP 2023105073A JP 2023105073 A JP2023105073 A JP 2023105073A JP 7471498 B2 JP7471498 B2 JP 7471498B2
Authority
JP
Japan
Prior art keywords
lmcs
information
luma
mapping
residual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023105073A
Other languages
English (en)
Other versions
JP2023123699A (ja
Inventor
チエ チャオ
スンファン キム
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of JP2023123699A publication Critical patent/JP2023123699A/ja
Application granted granted Critical
Publication of JP7471498B2 publication Critical patent/JP7471498B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本技術は、ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディングに関する。
近年、４Ｋまたは８Ｋ以上のＵＨＤ（Ｕｌｔｒａ Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）画像／ビデオのような高解像度、高品質の画像／ビデオに対する需要が様々な分野で増加している。画像／ビデオデータが高解像度、高品質になるほど、既存の画像／ビデオデータに比べて相対的に送信される情報量またはビット量が増加するので、既存の有無線広帯域回線のような媒体を利用して画像データを送信するか、既存の格納媒体を利用して画像／ビデオデータを格納する場合、送信費用と格納費用が増加される。
また、近年、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）、ＡＲ（Ａｒｔｉｆｉｃｉａｌ Ｒｅａｌｔｉｙ）コンテンツやホログラムなどの実感メディア（Ｉｍｍｅｒｓｉｖｅ Ｍｅｄｉａ）に対する関心及び需要が増加しており、ゲーム画像のように、現実画像と異なる画像特性を有する画像／ビデオに対する放送が増加している。
これにより、上記のような様々な特性を有する高解像度・高品質の画像／ビデオの情報を効果的に圧縮して送信するか、格納し、再生するために高効率の画像／ビデオ圧縮技術が求められる。
また、圧縮効率を向上させ、主観的／客観的ビジュアル品質を高めるためにＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）手続きが遂行され、ＬＭＣＳ手続きを効率のよく適用する方案に対する議論がある。
本文書の一実施形態によると、画像／ビデオコーディング効率を上げる方法及び装置を提供する。
本文書の一実施形態によると、効率的なフィルタリング適用方法及び装置を提供する。
本文書の一実施形態によると、効率的なＬＭＣＳ適用方法及び装置を提供する。
本文書の一実施形態によると、前記ＬＭＣＳコードワード（または、その範囲）を制限することができる。
本文書の一実施形態によると、ＬＭＣＳのクロマスケーリングで直接的にシグナリングされた単一クロマレジデュアルスケーリングファクタが使用され得る。
本文書の一実施形態によると、線形マッピング（線形ＬＭＣＳ）が使用され得る。
本文書の一実施形態によると、線形マッピングに必要なピボットポイントに関する情報が明示的にシグナリングされることができる。
本文書の一実施形態によると、フレキシブルな個数のｂｉｎがルーママッピングのために使用されることができる。
本文書の一実施形態によると、インバスルーママッピング及び／又はクロマレジデュアルスケーリングのためのインデックス導出手続きが単純化できる。
本文書の一実施形態によると、１つのＣＴＵ（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）内のルーマ及びクロマブロックが個別的ブロックツリー構造を有する場合（デュアルツリー構造）にもＬＭＣＳ手続きが適用できる。
本文書の一実施形態によると、ＬＭＣＳ ＡＰＳの個数が制限できる。
本文書の一実施形態によると、ＬＭＣＳ ＡＰＳに含まれるＩＤ情報の範囲が制限できる。
本文書の一実施形態によれば、デコード装置により行われるビデオ／画像デコード方法を提供する。
本文書の一実施形態によれば、ビデオ／画像デコードを行うデコード装置を提供する。
本文書の一実施形態によれば、エンコード装置により行われるビデオ／画像エンコード方法を提供する。
本文書の一実施形態によれば、ビデオ／画像エンコードを行うエンコード装置を提供する。
本文書の一実施形態によれば、本文書の実施形態の少なくとも１つに開示されたビデオ／画像エンコード方法によって生成されたエンコードされたビデオ／画像情報が格納されたコンピュータ読み取り可能なデジタル格納媒体を提供する。
本文書の一実施形態によれば、デコード装置により本文書の実施形態の少なくとも１つに開示されたビデオ／画像デコード方法を行うように引き起こすエンコードされた情報又はエンコードされたビデオ／画像情報が格納されたコンピュータ読み取り可能なデジタル格納媒体を提供する。
本文書の一実施形態によると、全般的な画像／ビデオ圧縮効率を上げることができる。
本文書の一実施形態によると、効率的なフィルタリングを介して主観的／客観的ビジュアル品質を高めることができる。
本文書の一実施形態によると、画像／ビデオコーディングのためのＬＭＣＳ手順が効率的に実行されることができる。
本文書の一実施形態によると、ＬＭＣＳ手順に必要なリソース／費用（ソフトウェアまたはハードウェアの）を最小化することができる。
本文書の一実施形態によると、ＬＭＣＳ手順のためのハードウェア実現を容易にできる。
本文書の一実施形態によると、前記ＬＭＣＳコードワード（または、その範囲）制限を介してマッピング（リシェイピング）でのＬＭＣＳコードワードの導出に必要な割り算演算を除去し、または最小化することができる。
本文書の一実施形態によると、単一クロマレジデュアルスケーリングファクタ使用を介してピースワイズインデックス識別によるレイテンシーが除去されることができる。
本文書の一実施形態によると、ＬＭＣＳで線形マッピングの使用を介してルーマブロック（の復元）に依存せずに、クロマレジデュアルスケーリング手順が実行されることができ、したがって、スケーリングでのレイテンシーが除去されることができる。
本文書の一実施形態によると、ＬＭＣＳでのマッピング効率が高まることができる。
本文書の一実施形態によると、インバースルーママッピング及び／又はクロマレジデュアルスケーリングのためのインデックス導出手続きの単純化を通じてＬＭＣＳの複雑度が減少することができ、したがって、ビデオ／画像コーディング効率が増加することができる。
本文書の一実施形態によると、デュアルツリー構造を有するブロックに対してもＬＭＣＳ手続きが遂行されることができ、したがって、ＬＭＣＳの効率が増加することができる。また、デュアルツリー構造を有するブロックに対するコーディング性能（例えば、客観的／主観的画質）が向上できる。
本文書の一実施形態によると、ＬＭＣＳ ＡＰＳの個数が制限されるにつれて、ＬＭＣＳの複雑度が減少することができ、そして、ＬＭＣＳに一層少ない資源（例えば、メモリ）が消費（使用）できる。
本文書の一実施形態によると、ＬＭＣＳ ＡＰＳに含まれるＩＤ情報の範囲が制限されるにつれて、ＬＭＣＳ手続きで用いられるメモリが減少（制限）できる。
本文書の実施形態が適用され得るビデオ／画像コーディングシステムの例を概略的に示す。 本文書の実施形態が適用され得るビデオ／画像エンコード装置の構成を概略的に説明する図である。 本文書の実施形態が適用され得るビデオ／画像デコード装置の構成を概略的に説明する図である。 例示的なブロックツリー構造を図示する。 コーディングされた画像／ビデオに対する階層構造を例示的に示す。 本文書の一実施形態に従うＣＶＳの階層構造を例示的に図示する。 本文書の一実施形態に従うＣＶＳの階層構造を例示的に図示する。 本文書の別の実施形態によるＣＶＳの階層的な構造を例示的に示す。 本文書の一実施形態による例示的なＬＭＣＳ構造を示す。 本文書の他の一実施形態によるＬＭＣＳ構造を示す。 例示的なフォワードマッピングを示すグラフを示す。 本文書の一実施形態によってクロマレジデュアルスケーリングインデックスを導出する方法を示す流れ図である。 本文書の一実施形態によるピボットポイントの線形フィッティングを示す。 本文書の一実施形態による線形リシェイパの一例を示す。 本文書の一実施形態での線形フォワードマッピングの一例を示す。 本文書の一実施形態でのインバースフォワードマッピングの一例を示す。 本文書の実施形態（等）によるビデオ／画像エンコード方法及び関連コンポーネントの一例を概略的に示す。 本文書の実施形態（等）によるビデオ／画像エンコード方法及び関連コンポーネントの一例を概略的に示す。 本文書の実施形態による画像／ビデオデコード方法及び関連コンポーネントの一例を概略的に示す。 本文書の実施形態による画像／ビデオデコード方法及び関連コンポーネントの一例を概略的に示す。 本文書に開示された実施形態が適用され得るコンテンツストリーミングシステムの例を示す。
本文書の開示は、様々な変更を加えることができ、様々な実施形態を有することができるが、特定の実施形態を図面に例示し、詳細に説明しようとする。しかし、これは、本開示を特定の実施形態に限定しようとするわけではない。本文書で使用する用語は、単に特定の実施形態を説明するために使用されたものであって、本文書における実施形態の技術的思想を限定しようとする意図に使用されるものではない。単数の表現は、文脈上明らかに異なる意味ではない限り、複数の表現を含む。本文書において、「含む」又は「有する」等の用語は、文書上に記載された特徴、数字、ステップ、動作、構成要素、部品又はこれらを組み合わせたものが存在することを指定しようとするものであり、１つ又はそれ以上の異なる特徴や、数字、ステップ、動作、構成要素、部品又はこれらを組み合わせたものの存在又は付加の可能性を予め排除しないものと理解されるべきである。
一方、本文書で説明される図面上の各構成は、互いに異なる特徴的な機能に関する説明の都合上、独立して示すものであって、各構成が互いに別個のハードウェアや別個のソフトウェアで実現されるということを意味するのではない。例えば、各構成のうち、２つ以上の構成を合わせて１つの構成をなすこともあり、１つの構成が複数の構成に分けられることもある。各構成が統合及び／又は分離された実施形態も、本文書の開示範囲に含まれる。
以下、添付図を参照として、本文書の実施形態を説明しようとする。以下、図面上の同じ構成要素に対しては同じ参照符号を使用し得、同じ構成要素に対して重複した説明は省略され得る。
図１は、本文書の実施形態が適用され得るビデオ／画像コーディングシステムの例を概略的に示す。
図１に示すように、ビデオ／画像コーディングシステムは、第１の装置（ソースデバイス）及び第２の装置（受信デバイス）を備えることができる。ソースデバイスは、エンコードされたビデオ（ｖｉｄｅｏ）／画像（ｉｍａｇｅ）情報またはデータをファイルまたはストリーミング形態でデジタル格納媒体またはネットワークを介して受信デバイスに伝達することができる。
前記ソースデバイスは、ビデオソース、エンコード装置、送信部を備えることができる。前記受信デバイスは、受信部、デコード装置、及びレンダラーを備えることができる。前記エンコード装置は、ビデオ／画像エンコード装置と呼ばれることができ、前記デコード装置は、ビデオ／画像デコード装置と呼ばれることができる。送信機は、エンコード装置に備えられることができる。受信機は、デコード装置に備えられることができる。レンダラーは、ディスプレイ部を備えることができ、ディスプレイ部は、別個のデバイスまたは外部コンポーネントで構成されることもできる。
ビデオソースは、ビデオ／画像のキャプチャ、合成、または生成過程などを介してビデオ／画像を取得することができる。ビデオソースは、ビデオ／画像キャプチャデバイス及び／又はビデオ／画像生成デバイスを含むことができる。ビデオ／画像キャプチャデバイスは、例えば、１つ以上のカメラ、以前にキャプチャされたビデオ／画像を含むビデオ／画像アーカイブなどを含むことができる。ビデオ／画像生成デバイスは、例えば、コンピュータ、タブレット、及びスマートフォンなどを含むことができ、（電子的に）ビデオ／画像を生成することができる。例えば、コンピュータなどを介して仮想のビデオ／画像が生成され得るし、この場合、関連データが生成される過程にビデオ／画像キャプチャ過程が代替されることができる。
エンコード装置は、入力ビデオ／画像をエンコードすることができる。エンコード装置は、圧縮及びコーディング効率のために、予測、変換、量子化など、一連の手順を行うことができる。エンコードされたデータ（エンコードされたビデオ／画像情報）は、ビットストリーム（ｂｉｔｓｔｒｅａｍ）形態で出力されることができる。
送信部は、ビットストリーム形態で出力されたエンコードされたビデオ／画像情報またはデータをファイルまたはストリーミング形態でデジタル格納媒体またはネットワークを介して受信デバイスの受信部に伝達することができる。デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な格納媒体を含むことができる。送信部は、予め決められたファイルフォーマットを介してメディアファイルを生成するためのエレメントを含むことができ、放送／通信ネットワークを介しての送信のためのエレメントを含むことができる。受信部は、前記ビットストリームを受信／抽出してデコード装置に伝達することができる。
デコード装置は、エンコード装置の動作に対応する逆量子化、逆変換、予測など、一連の手順を行ってビデオ／画像をデコードすることができる。
レンダラーは、デコードされたビデオ／画像をレンダリングすることができる。レンダリングされたビデオ／画像は、ディスプレイ部を介してディスプレイされることができる。
本文書は、ビデオ／画像コーディングに関する。例えば、本文書で開示された方法／実施形態は、ＶＶＣ（ｖｅｒｓａｔｉｌｅ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準に開示される方法に適用されることができる。また、本文書で開示された方法／実施形態は、ＥＶＣ（ｅｓｓｅｎｔｉａｌ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準、ＡＶ１（ＡＯＭｅｄｉａ Ｖｉｄｅｏ １）標準、ＡＶＳ２（２ｎｄ ｇｅｎｅｒａｔｉｏｎ ｏｆ ａｕｄｉｏ ｖｉｄｅｏ ｃｏｄｉｎｇ ｓｔａｎｄａｒｄ）又は次世代ビデオ／画像コーディング標準（ｅｘ． ２６７又はＨ．２６８等）に開示される方法に適用されることができる。
本文書では、ビデオ／画像コーディングに関する様々な実施形態を提示し、別の言及がない限り、前記実施形態は互いに組み合わせて行うこともある。
本文書で、ビデオ（ｖｉｄｅｏ）は、時間の流れによる一連の画像（ｉｍａｇｅ）の集合を意味することができる。ピクチャ（ｐｉｃｔｕｒｅ）は、一般的に特定の時間帯の１つの画像を示す単位を意味し、スライス（ｓｌｉｃｅ）／タイル（ｔｉｌｅ）は、コーディングにおいてピクチャの一部を構成する単位である。スライス／タイルは、１つ以上のＣＴＵ（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）を含むことができる。１つのピクチャは、１つ以上のスライス／タイルで構成されることができる。タイルは、ピクチャ内の特定のタイル列及び特定のタイル列以内のＣＴＵの四角領域である（Ａ ｔｉｌｅ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｗｉｔｈｉｎ ａ ｐａｒｔｉｃｕｌａｒ ｔｉｌｅ ｃｏｌｕｍｎ ａｎｄ ａ ｐａｒｔｉｃｕｌａｒ ｔｉｌｅ ｒｏｗ ｉｎ ａ ｐｉｃｔｕｒｅ）。前記タイル列は、ＣＴＵの四角領域であり、前記四角領域は、前記ピクチャの高さと同じ高さを有し、幅はピクチャパラメータセット内のシンタックス要素により明示され得る（Ｔｈｅ ｔｉｌｅ ｃｏｌｕｍｎ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｈａｖｉｎｇ ａ ｈｅｉｇｈｔ ｅｑｕａｌ ｔｏ ｔｈｅ ｈｅｉｇｈｔ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ ａｎｄ ａ ｗｉｄｔｈ ｓｐｅｃｉｆｉｅｄ ｂｙ ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ ｉｎ ｔｈｅ ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）。前記タイル行はＣＴＵの四角領域であり、前記四角領域はピクチャパラメータセット内のシンタックス要素によって明示される幅を有し、高さは前記ピクチャの高さと同一であり得る（Ｔｈｅ ｔｉｌｅ ｒｏｗ ｉｓ ａ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ＣＴＵｓ ｈａｖｉｎｇ ａ ｈｅｉｇｈｔ ｓｐｅｃｉｆｉｅｄ ｂｙ ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ ｉｎ ｔｈｅ ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ ａｎｄ ａ ｗｉｄｔｈ ｅｑｕａｌ ｔｏ ｔｈｅ ｗｉｄｔｈ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。タイルのスキャンはピクチャをパーティショニングするＣＴＵの特定の順次オーダリングを示し得、前記ＣＴＵはタイル内のＣＴＵラスタースキャンに連続的に整列され得、ピクチャ内のタイルは、前記ピクチャの前記タイルのラスタースキャンに連続的に整列され得る（Ａ ｔｉｌｅ ｓｃａｎ ｉｓ ａ ｓｐｅｃｉｆｉｃ ｓｅｑｕｅｎｔｉａｌ ｏｒｄｅｒｉｎｇ ｏｆ ＣＴＵｓ ｐａｒｔｉｔｉｏｎｉｎｇ ａ ｐｉｃｔｕｒｅ ｉｎ ｗｈｉｃｈ ｔｈｅ ＣＴＵｓ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ＣＴＵ ｒａｓｔｅｒ ｓｃａｎ ｉｎ ａ ｔｉｌｅ ｗｈｅｒｅａｓ ｔｉｌｅｓ ｉｎ ａ ｐｉｃｔｕｒｅ ａｒｅ ｏｒｄｅｒｅｄ ｃｏｎｓｅｃｕｔｉｖｅｌｙ ｉｎ ａ ｒａｓｔｅｒ ｓｃａｎ ｏｆ ｔｈｅ ｔｉｌｅｓ ｏｆ ｔｈｅ ｐｉｃｔｕｒｅ）。スライスは単一のＮＡＬユニットに排他的に含まれ得る、整数個の完全なタイル又はピクチャのタイル内の整数個の連続的な完全なＣＴＵ行を含み得る（Ａ ｓｌｉｃｅ ｉｎｃｌｕｄｅｓ ａｎ ｉｎｔｅｇｅｒ ｎｕｍｂｅｒ ｏｆ ｃｏｍｐｌｅｔｅ ｔｉｌｅｓ ｏｒ ａｎ ｉｎｔｅｇｅｒ ｎｕｍｂｅｒ ｏｆ ｃｏｎｓｅｃｕｔｉｖｅ ｃｏｍｐｌｅｔｅ ＣＴＵ ｒｏｗｓ ｗｉｔｈｉｎ ａ ｔｉｌｅ ｏｆ ａ ｐｉｃｔｕｒｅ ｔｈａｔ ｍａｙ ｂｅ ｅｘｃｌｕｓｉｖｅｌｙ ｃｏｎｔａｉｎｅｄ ｉｎ ａ ｓｉｎｇｌｅ ＮＡＬ ｕｎｉｔ）
一方、１つのピクチャは、２つ以上のサブピクチャに区分されることができる。サブピクチャは、ピクチャ内の１つ以上のスライスの四角領域であり得る（ａｎ ｒｅｃｔａｎｇｕｌａｒ ｒｅｇｉｏｎ ｏｆ ｏｎｅ ｏｒ ｍｏｒｅ ｓｌｉｃｅｓ ｗｉｔｈｉｎ ａ ｐｉｃｔｕｒｅ）。
ピクセル（ｐｉｘｅｌ）またはペル（ｐｅｌ）は、１つのピクチャ（または、画像）を構成する最小の単位を意味することができる。また、ピクセルに対応する用語として、「サンプル（ｓａｍｐｌｅ）」が使用され得る。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、ルーマ（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すことができ、クロマ（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。
ユニット（ｕｎｉｔ）は、画像処理の基本単位を示すことができる。ユニットは、ピクチャの特定領域及び当該領域に関連した情報のうち、少なくとも１つを含むことができる。１つのユニットは、１つのルーマブロック及び２つのクロマ（例えば、ｃｂ、ｃｒ）ブロックを含むことができる。ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行とからなるサンプル（または、サンプルアレイ）または変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）の集合（または、アレイ）を含むことができる。
本文書において、「Ａ又はＢ（Ａ ｏｒ Ｂ）」は、「ただＡ」、「ただＢ」、又は「Ａ及びＢ両方」を意味し得る。言い換えると、本文書において、「Ａ又はＢ（Ａ ｏｒ Ｂ）」は、「Ａ及び／又はＢ（Ａ ａｎｄ／ｏｒ Ｂ）」と解釈され得る。例えば、本文書において、「Ａ、Ｂ又はＣ（Ａ， Ｂ ｏｒ Ｃ）」は、「ただＡ」、「ただＢ」、「ただＣ」、又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙ ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」を意味し得る。
本文書で使用されるスラッシュ（／）や休止符（ｃｏｍｍａ）は、「及び／又は（ａｎｄ／ｏｒ）」を意味し得る。例えば、「Ａ／Ｂ」は、「Ａ及び／又はＢ」を意味し得る。これによって、「Ａ／Ｂ」は、「ただＡ」、「ただＢ」、又は「Ａ及びＢ両方」を意味し得る。例えば、「Ａ、Ｂ、Ｃ」は、「Ａ、Ｂ又はＣ」を意味し得る。
本文書において、「少なくとも１つのＡ及びＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ Ｂ）」は、「ただＡ」、「ただＢ」又は「Ａ及びＢ両方」を意味し得る。また、本文書において、「少なくとも１つのＡ又はＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ｏｒ Ｂ）」や「少なくとも１つのＡ及び／又はＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ／ｏｒ Ｂ）」という表現は、「少なくとも１つのＡ及びＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ Ｂ）」と同様に解釈され得る。
また、本文書において、「少なくとも１つのＡ、Ｂ及びＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」は、「ただＡ」、「ただＢ」、「ただＣ」、又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙ ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」を意味し得る。また、「少なくとも１つのＡ、Ｂ又はＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ｏｒ Ｃ）」や「少なくとも１つのＡ、Ｂ及び／又はＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ／ｏｒ Ｃ）」は、「少なくとも１つのＡ、Ｂ及びＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」を意味し得る。
また、本文書で使用される括弧は、「例えば（ｆｏｒ ｅｘａｍｐｌｅ）」を意味し得る。具体的に、「予測（イントラ予測）」と表示された場合、「予測」の一例として「イントラ予測」が提案されたものであり得る。言い換えると、本文書の「予測」は、「イントラ予測」に制限（ｌｉｍｉｔ）されず、「イントラ予測」が「予測」の一例として提案されたものであり得る。また、「予測（即ち、イントラ予測）」と表示された場合にも、「予測」の一例として「イントラ予測」が提案されたものであり得る。
本文書において１つの図面内で個別的に説明される技術的特徴は、個別的に実現されてもよく、同時に実現されてもよい。
図２は、本文書の実施形態が適用され得るビデオ／画像エンコード装置の構成を概略的に説明する図である。以下、エンコード装置というのは、画像エンコード装置及び／又はビデオエンコード装置を含むことができる。
図２に示すように、エンコード装置２００は、画像分割部（ｉｍａｇｅ ｐａｒｔｉｔｉｏｎｅｒ）２１０、予測部（ｐｒｅｄｉｃｔｏｒ）２２０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）２３０、エントロピーエンコード部（ｅｎｔｒｏｐｙ ｅｎｃｏｄｅｒ）２４０、加算部（ａｄｄｅｒ）２５０、フィルタリング部（ｆｉｌｔｅｒ）２６０、及びメモリ（ｍｅｍｏｒｙ）２７０を備えて構成されることができる。予測部２２０は、インター予測部２２１及びイントラ予測部２２２を備えることができる。レジデュアル処理部２３０は、変換部（ｔｒａｎｓｆｏｒｍｅｒ）２３２、量子化部（ｑｕａｎｔｉｚｅｒ）２３３、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）２３４、逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）２３５を備えることができる。レジデュアル処理部２３０は、減算部（ｓｕｂｔｒａｃｔｏｒ、２３１）をさらに備えることができる。加算部２５０は、復元部（ｒｅｃｏｎｓｔｒｕｃｔｏｒ）または復元ブロック生成部（ｒｅｃｏｎｔｒｕｃｔｇｅｄ ｂｌｏｃｋ ｇｅｎｅｒａｔｏｒ）と呼ばれることができる。上述した画像分割部２１０、予測部２２０、レジデュアル処理部２３０、エントロピーエンコード部２４０、加算部２５０、及びフィルタリング部２６０は、実施形態によって１つ以上のハードウェアコンポーネント（例えば、エンコーダチップセットまたはプロセッサ）によって構成されることができる。また、メモリ２７０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体によって構成されることもできる。前記ハードウェアコンポーネントは、メモリ２７０を内／外部コンポーネントとしてさらに備えることもできる。
画像分割部２１０は、エンコード装置２００に入力された入力画像（または、ピクチャ、フレーム）を１つ以上の処理ユニット（ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）に分割することができる。一例として、前記処理ユニットは、コーディングユニット（ｃｏｄｉｎｇ ｕｎｉｔ、ＣＵ）と呼ばれることができる。この場合、コーディングユニットは、コーディングツリーユニット（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ、ＣＴＵ）または最大コーディングユニット（ｌａｒｇｅｓｔ ｃｏｄｉｎｇ ｕｎｉｔ、ＬＣＵ）からＱＴＢＴＴＴ（Ｑｕａｄ－ｔｒｅｅ ｂｉｎａｒｙ－ｔｒｅｅ ｔｅｒｎａｒｙ－ｔｒｅｅ）構造によって再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）分割されることができる。例えば、１つのコーディングユニットは、クアッドツリー構造、バイナリツリー構造、及び／又はターナリ構造に基づいて下位（ｄｅｅｐｅｒ）デプスの複数のコーディングユニットに分割されることができる。この場合、例えば、クアッドツリー構造が先に適用され、バイナリツリー構造及び／又はターナリ構造がその後に適用されることができる。または、バイナリツリー構造が先に適用されることもできる。それ以上分割されない最終コーディングユニットに基づいて本開示に係るコーディング手順が行われ得る。この場合、画像特性によるコーディング効率などに基づいて、最大コーディングユニットが最終コーディングユニットとして使用されることができ、または、必要に応じてコーディングユニットは、再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）もっと下位デプスのコーディングユニットに分割されて最適のサイズのコーディングユニットが最終コーディングユニットとして使用されることができる。ここで、コーディング手順とは、後述する予測、変換、及び復元などの手順を含むことができる。他の例として、前記処理ユニットは、予測ユニット（ＰＵ：Ｐｒｅｄｉｃｔｉｏｎ Ｕｎｉｔ）または変換ユニット（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）をさらに備えることができる。この場合、前記予測ユニット及び前記変換ユニットは、各々上述した最終コーディングユニットから分割またはパーティショニングされることができる。前記予測ユニットは、サンプル予測の単位であることができ、前記変換ユニットは、変換係数を導く単位及び／又は変換係数からレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ）を導く単位であることができる。
ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプルまたは変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）等の集合を示すことができる。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、輝度（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すことができ、彩度（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。サンプルは、１つのピクチャ（または、画像）をピクセル（ｐｉｘｅｌ）またはペル（ｐｅｌ）に対応する用語として使用することができる。
エンコード装置２００は、入力画像信号（原本ブロック、原本サンプルアレイ）でインター予測部２２１またはイントラ予測部２２２から出力された予測信号（予測されたブロック、予測サンプルアレイ）を減算してレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ、残余ブロック、残余サンプルアレイ）を生成することができ、生成されたレジデュアル信号は、変換部２３２に送信される。この場合、図示されたように、エンコーダ２００内において入力画像信号（原本ブロック、原本サンプルアレイ）で予測信号（予測ブロック、予測サンプルアレイ）を減算するユニットは、減算部２３１と呼ばれることができる。予測部は、処理対象ブロック（以下、現在ブロックという）に対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、現在ブロックまたはＣＵ単位でイントラ予測が適用されるか、またはインター予測が適用されるか決定することができる。予測部は、各予測モードについての説明で後述するように、予測モード情報など、予測に関する様々な情報を生成してエントロピーエンコード部２４０に伝達することができる。予測に関する情報は、エントロピーエンコード部２４０でエンコードされてビットストリーム形態で出力されることができる。
イントラ予測部２２２は、現在ピクチャ内のサンプルを参照して現在ブロックを予測できる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置することができ、または、離れて位置することもできる。イントラ予測で予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。非方向性モードは、例えば、ＤＣモード及びプラナーモード（Ｐｌａｎａｒモード）を含むことができる。方向性モードは、予測方向の細かい程度によって、例えば、３３個の方向性予測モードまたは６５個の方向性予測モードを含むことができる。ただし、これは、例示であり、設定によってそれ以上またはそれ以下の個数の方向性予測モードが使用され得る。イントラ予測部２２２は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。
インター予測部２２１は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと前記時間的隣接ブロックを含む参照ピクチャとは同じであることができ、異なることもできる。前記時間的隣接ブロックは、同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同一位置ＣＵ（ｃｏｌ ＣＵ）などの名前で呼ばれることができ、前記時間的隣接ブロックを含む参照ピクチャは、同一位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもできる。例えば、インター予測部２２１は、隣接ブロックに基づいて動き情報候補リストを構成し、前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出するために、どの候補が使用されるかを指示する情報を生成することができる。様々な予測モードに基づいてインター予測が行われ得るし、例えば、スキップモードとマージモードとの場合に、インター予測部２２１は、隣接ブロックの動き情報を現在ブロックの動き情報として利用することができる。スキップモードの場合、マージモードとは異なり、レジデュアル信号が送信されないことがある。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として用い、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）をシグナリングすることにより、現在ブロックの動きベクトルを指示することができる。
予測部２２０は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、１つのブロックに対する予測のために、イントラ予測またはインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）予測モードに基づくことができ、またはパレットモード（ｐａｌｅｔｔｅ ｍｏｄｅ）に基づくこともできる。前記ＩＢＣ予測モードまたはパレットモードは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ画像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。即ち、ＩＢＣは、本文書において説明されるインター予測技法のうち、少なくとも１つを用いることができる。パレットモードは、イントラコーディングまたはイントラ予測の一例と見なすことができる。パレットモードが適用される場合、パレットテーブル及びパレットインデックスに関する情報に基づいてピクチャ内のサンプル値をシグナリングすることができる。
前記予測部（インター予測部２２１及び／又は前記イントラ予測部２２２を含む）を介して生成された予測信号は、復元信号を生成するために用いられるか、レジデュアル信号を生成するために用いられることができる。変換部２３２は、レジデュアル信号に変換技法を適用して、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔｓ）を生成することができる。例えば、変換技法は、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＤＳＴ（Ｄｉｓｃｒｅｔｅ Ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＧＢＴ（Ｇｒａｐｈ－Ｂａｓｅｄ Ｔｒａｎｓｆｏｒｍ）、又はＣＮＴ（Ｃｏｎｄｉｔｉｏｎａｌｌｙ Ｎｏｎ－ｌｉｎｅａｒ Ｔｒａｎｓｆｏｒｍ）の少なくとも１つを含むことができる。ここで、ＧＢＴは、ピクセル間の関係情報をグラフで表現するという際に、このグラフから得られた変換を意味する。ＣＮＴは、以前に復元された全てのピクセル（ａｌｌ ｐｒｅｖｉｏｕｓｌｙ ｒｅｃｏｎｓｔｒｕｃｔｅｄ ｐｉｘｅｌ）を用いて予測信号を生成し、それに基づいて取得される変換を意味する。また、変換過程は正方形の同じサイズを有するピクセルブロックに適用されてもよく、正方形ではない可変サイズのブロックに適用されてもよい。
量子化部２３３は、変換係数を量子化してエントロピーエンコード部２４０に送信され、エントロピーエンコード部２４０は、量子化された信号（量子化された変換係数に関する情報）をエンコードしてビットストリームに出力することができる。前記量子化された変換係数に関する情報は、レジデュアル情報と呼ばれることができる。量子化部２３３は、係数スキャン順序（ｓｃａｎ ｏｒｄｅｒ）に基づいてブロック形態の量子化された変換係数を１次元ベクトル形態で再整列することができ、前記１次元ベクトル形態の量子化された変換係数に基づいて前記量子化された変換係数に関する情報を生成することもできる。エントロピーエンコード部２４０は、例えば、指数ゴロム（ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）、ＣＡＶＬＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）、ＣＡＢＡＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｂｉｎａｒｙ ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）などのような様々なエンコード方法を行うことができる。エントロピーエンコード部２４０は、量子化された変換係数の他に、ビデオ／イメージ復元に必要な情報（例えば、シンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ）の値）を共にまたは別にエンコードすることもできる。エンコードされた情報（例えば、エンコードされたビデオ／画像情報）は、ビットストリーム形態でＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ）ユニット単位で送信または格納されることができる。前記ビデオ／画像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、またはビデオパラメータセット（ＶＰＳ）等、様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／画像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。本文書において、エンコード装置からデコード装置に伝達／シグナリングされる情報及び／又はシンタックス要素は、ビデオ／画像情報に含まれることができる。前記ビデオ／画像情報は、上述したエンコード手順を介してエンコードされて前記ビットストリームに含まれることができる。前記ビットストリームは、ネットワークを介して送信されることができ、またはデジタル格納媒体に格納されることができる。ここで、ネットワークは、放送網及び／又は通信網などを含むことができ、デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、様々な格納媒体を含むことができる。エントロピーエンコード部２４０から出力された信号は、送信する送信部（図示せず）及び／又は格納する格納部（図示せず）がエンコード装置２００の内／外部エレメントとして構成されることができ、または送信部は、エントロピーエンコード部２４０に含まれることもできる。
量子化部２３３から出力された量子化された変換係数は、予測信号を生成するために用いられることができる。例えば、量子化された変換係数に逆量子化部２３４及び逆変換部２３５を介して逆量子化及び逆変換を適用することにより、レジデュアル信号（レジデュアルブロックまたはレジデュアルサンプル）を復元できる。加算部１５５は、復元されたレジデュアル信号をインター予測部２２１またはイントラ予測部２２２から出力された予測信号に加えることにより、復元（ｒｅｃｏｎｓｔｒｕｃｔｅｄ）信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）が生成され得る。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。加算部２５０は、復元部または復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て次のピクチャのインター予測のために使用されることもできる。
一方、ピクチャエンコード及び／又は復元過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。
フィルタリング部２６０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部２６０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ２７０、具体的に、メモリ２７０のＤＰＢに格納することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。フィルタリング部２６０は、各フィルタリング方法についての説明で後述するように、フィルタリングに関する様々な情報を生成してエントロピーエンコード部２４０に伝達することができる。フィルタリングに関する情報は、エントロピーエンコード部２４０でエンコードされてビットストリーム形態で出力されることができる。
メモリ２７０に送信された修正された復元ピクチャは、インター予測部２２１で参照ピクチャとして使用されることができる。エンコード装置は、これを介してインター予測が適用される場合、エンコード装置１００とデコード装置における予測ミスマッチを避けることができ、符号化効率も向上させることができる。
メモリ２７０のＤＰＢは、修正された復元ピクチャをインター予測部２２１における参照ピクチャとして使用するために格納することができる。メモリ２７０は、現在ピクチャ内の動き情報が導出された（または、エンコードされた）ブロックの動き情報及び／又は既に復元されたピクチャ内のブロックの動き情報を格納することができる。前記格納された動き情報は、空間的隣接ブロックの動き情報または時間的隣接ブロックの動き情報として活用するために、インター予測部２２１に伝達することができる。メモリ２７０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納することができ、イントラ予測部２２２に伝達することができる。
図３は、本文書の実施形態が適用され得るビデオ／画像デコード装置の構成を概略的に説明する図である。以下、デコード装置というのは、画像デコード装置及び／又はビデオデコード装置を含むことができる。
図３に示すように、デコード装置３００は、エントロピーデコード部（ｅｎｔｒｏｐｙ ｄｅｃｏｄｅｒ）３１０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）３２０、予測部（ｐｒｅｄｉｃｔｏｒ）３３０、加算部（ａｄｄｅｒ）３４０、フィルタリング部（ｆｉｌｔｅｒ）３５０、及びメモリ（ｍｅｍｏｅｒｙ）３６０を備えて構成されることができる。予測部３３０は、イントラ予測部３３１及びインター予測部３３２を備えることができる。レジデュアル処理部３２０は、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）３２１及び逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）３２１を備えることができる。上述したエントロピーデコード部３１０、レジデュアル処理部３２０、予測部３３０、加算部３４０、及びフィルタリング部３５０は、実施形態によって１つのハードウェアコンポーネント（例えば、デコーダチップセットまたはプロセッサ）により構成されることができる。また、メモリ３６０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体により構成されることもできる。前記ハードウェアコンポーネントは、メモリ３６０を内／外部コンポーネントとしてさらに備えることもできる。
ビデオ／画像情報を含むビットストリームが入力されれば、デコード装置３００は、図３のエンコード装置でビデオ／画像情報が処理されたプロセスに対応して画像を復元できる。例えば、デコード装置３００は、前記ビットストリームから取得したブロック分割関連情報に基づいてユニット／ブロックを導出できる。デコード装置３００は、エンコード装置で適用された処理ユニットを用いてデコードを行うことができる。したがって、デコードの処理ユニットは、例えば、コーディングユニットであることができ、コーディングユニットは、コーディングツリーユニットまたは最大コーディングユニットからクアッドツリー構造、バイナリツリー構造、及び／又はターナリツリー構造にしたがって分割されることができる。コーディングユニットから１つ以上の変換ユニットが導出され得る。そして、デコード装置３００を介してデコード及び出力された復元画像信号は、再生装置を介して再生されることができる。
デコード装置３００は、図３のエンコード装置から出力された信号をビットストリーム形態で受信することができ、受信された信号は、エントロピーデコード部３１０を介してデコードされることができる。例えば、エントロピーデコード部３１０は、前記ビットストリームをパーシングして画像復元（または、ピクチャ復元）に必要な情報（例えば、ビデオ／画像情報）を導出できる。前記ビデオ／画像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、またはビデオパラメータセット（ＶＰＳ）など、様々なパラメータセットに関する情報をさらに含むことができる。また、前記ビデオ／画像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含むことができる。デコード装置は、前記パラメータセットに関する情報及び／又は前記一般制限情報に基づいてさらにピクチャをデコードすることができる。本文書において後述されるシグナリング／受信される情報及び／又はシンタックス要素は、前記デコード手順を介してデコードされて、前記ビットストリームから取得されることができる。例えば、エントロピーデコード部３１０は、指数ゴロム符号化、ＣＡＶＬＣ、またはＣＡＢＡＣなどのコーディング方法を基にビットストリーム内の情報をデコードし、画像復元に必要なシンタックスエレメントの値、レジデュアルに関する変換係数の量子化された値を出力できる。より具体的に、ＣＡＢＡＣエントロピーデコード方法は、ビットストリームで各シンタックス要素に該当するビンを受信し、デコード対象のシンタックス要素情報と隣接及びデコード対象ブロックのデコード情報または以前ステップでデコードされたシンボル／ビンの情報を利用して文脈（ｃｏｎｔｅｘｔ）モデルを決定し、決定された文脈モデルによってビン（ｂｉｎ）の発生確率を予測してビンの算術デコード（ａｒｉｔｈｍｅｔｉｃ ｄｅｃｏｄｉｎｇ）を行い、各シンタックス要素の値に該当するシンボルを生成することができる。このとき、ＣＡＢＡＣエントロピーデコード方法は、文脈モデル決定後、次のシンボル／ビンの文脈モデルのためにデコードされたシンボル／ビンの情報を利用して文脈モデルをアップデートすることができる。エントロピーデコード部３１０でデコードされた情報のうち、予測に関する情報は、予測部（インター予測部３３２及びイントラ予測部３３１）に提供され、エントロピーデコード部３１０でエントロピーデコードが行われたレジデュアル値、即ち、量子化された変換係数及び関連パラメータ情報は、レジデュアル処理部３２０に入力されることができる。レジデュアル処理部３２０は、レジデュアル信号（レジデュアルブロック、レジデュアルサンプル、レジデュアルサンプルアレイ）を導出できる。また、エントロピーデコード部３１０でデコードされた情報のうち、フィルタリングに関する情報は、フィルタリング部３５０に提供されることができる。一方、エンコード装置から出力された信号を受信する受信部（図示せず）がデコード装置３００の内／外部エレメントとしてさらに構成されることができ、または受信部は、エントロピーデコード部３１０の構成要素であることもできる。一方、本文書に係るデコード装置は、ビデオ／画像／ピクチャデコード装置と呼ばれることができ、前記デコード装置は、情報デコーダ（ビデオ／画像／ピクチャ情報デコーダ）及びサンプルデコーダ（ビデオ／画像／ピクチャサンプルデコーダ）に区分することもできる。前記情報デコーダは、前記エントロピーデコード部３１０を備えることができ、前記サンプルデコーダは、前記逆量子化部３２１、逆変換部３２２、加算部３４０、フィルタリング部３５０、メモリ３６０、インター予測部３３２、及びイントラ予測部３３１のうち、少なくとも１つを備えることができる。
逆量子化部３２１では、量子化された変換係数を逆量子化して変換係数を出力できる。逆量子化部３２１は、量子化された変換係数を２次元のブロック形態で再整列することができる。この場合、前記再整列は、エンコード装置で行われた係数スキャン順序に基づいて再整列を行うことができる。逆量子化部３２１は、量子化パラメータ（例えば、量子化ステップサイズ情報）を用いて量子化された変換係数に対する逆量子化を行い、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）を取得することができる。
逆変換部３２２では、変換係数を逆変換してレジデュアル信号（レジデュアルブロック、レジデュアルサンプルアレイ）を取得するようになる。
予測部は、現在ブロックに対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、エントロピーデコード部３１０から出力された前記予測に関する情報に基づいて、前記現在ブロックにイントラ予測が適用されるか、またはインター予測が適用されるか決定することができ、具体的なイントラ／インター予測モードを決定できる。
予測部３２０は、後述する様々な予測方法に基づいて予測信号を生成することができる。例えば、予測部は、１つのブロックに対する予測のために、イントラ予測またはインター予測を適用することができるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）予測モードに基づくことができ、またはパレットモード（ｐａｌｅｔｔｅ ｍｏｄｅ）に基づくこともできる。前記ＩＢＣ予測モードまたはパレットモードは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ画像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内で予測を行うが、現在ピクチャ内で参照ブロックを導出する点においてインター予測と同様に行われることができる。即ち、ＩＢＣは、本文書において説明されるインター予測技法のうち、少なくとも１つを利用することができる。パレットモードは、イントラコーディングまたはイントラ予測の一例と見なすことができる。パレットモードが適用される場合、パレットテーブル及びパレットインデックスに関する情報が前記ビデオ／画像情報に含まれてシグナリングされることができる。
イントラ予測部３３１は、現在ピクチャ内のサンプルを参照して現在ブロックを予測できる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置することができ、または離れて位置することができる。イントラ予測において予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。イントラ予測部３３１は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。
インター予測部３３２は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを備えることができる。例えば、インター予測部３３２は、隣接ブロックに基づいて動き情報候補リストを構成し、受信した候補選択情報に基づいて前記現在ブロックの動きベクトル及び／又は参照ピクチャインデックスを導出できる。様々な予測モードに基づいてインター予測が行われ得るし、前記予測に関する情報は、前記現在ブロックに対するインター予測のモードを指示する情報を含むことができる。
加算部３４０は、取得されたレジデュアル信号を予測部（インター予測部３３２及び／又はイントラ予測部３３１を備える）から出力された予測信号（予測されたブロック、予測サンプルアレイ）に加えることにより、復元信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成することができる。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。
加算部３４０は、復元部または復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て出力されることができ、または次のピクチャのインター予測のために使用されることもできる。
一方、ピクチャデコード過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。
フィルタリング部３５０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部３５０は、復元ピクチャに様々なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ３６０、具体的に、メモリ３６０のＤＰＢに送信することができる。前記様々なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。
メモリ３６０のＤＰＢに格納された（修正された）復元ピクチャは、インター予測部３３２で参照ピクチャとして使用されることができる。メモリ３６０は、現在ピクチャ内の動き情報が導出された（または、デコードされた）ブロックの動き情報及び／又は既に復元されたピクチャ内のブロックの動き情報を格納できる。前記格納された動き情報は、空間的隣接ブロックの動き情報または時間的隣接ブロックの動き情報として活用するために、インター予測部２６０に伝達することができる。メモリ３６０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納でき、イントラ予測部３３１に伝達することができる。
本明細書において、エンコード装置２００のフィルタリング部２６０、インター予測部２２１、及びイントラ予測部２２２で説明された実施形態等は、各々デコード装置３００のフィルタリング部３５０、インター予測部３３２、及びイントラ予測部３３１にも同一または対応するように適用されることができる。
前述したように、ビデオコーディングを実行するにあたって、圧縮効率を上げるために予測を実行する。これを介してコーディング対象ブロックである現在ブロックに対する予測サンプルを含む予測されたブロックを生成することができる。ここで、前記予測されたブロックは、空間ドメイン（または、ピクセルドメイン）での予測サンプルを含む。前記予測されたブロックは、エンコード装置及びデコード装置で同じく導出され、前記エンコード装置は、原本ブロックの原本サンプル値自体でない前記原本ブロックと前記予測されたブロックとの間のレジデュアルに対する情報（レジデュアル情報）をデコード装置にシグナリングすることで画像コーディング効率を上げることができる。デコード装置は、前記レジデュアル情報に基づいてレジデュアルサンプルを含むレジデュアルブロックを導出し、前記レジデュアルブロックと前記予測されたブロックとを合わせて復元サンプルを含む復元ブロックを生成することができ、復元ブロックを含む復元ピクチャを生成することができる。
前記レジデュアル情報は、変換及び量子化手順を介して生成されることができる。例えば、エンコード装置は、前記原本ブロックと前記予測されたブロックとの間のレジデュアルブロックを導出し、前記レジデュアルブロックに含まれているレジデュアルサンプル（レジデュアルサンプルアレイ）に変換手順を実行して変換係数を導出し、前記変換係数に量子化手順を実行して量子化された変換係数を導出することで、関連したレジデュアル情報を（ビットストリームを介して）デコード装置にシグナリングされることができる。ここで、前記レジデュアル情報は、前記量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含むことができる。デコード装置は、前記レジデュアル情報に基づいて逆量子化／逆変換の手順を実行してレジデュアルサンプル（または、レジデュアルブロック）を導出することができる。デコード装置は、予測されたブロックと前記レジデュアルブロックに基づいて復元ピクチャを生成することができる。また、エンコード装置は、以後ピクチャのインター予測のための参照のために量子化された変換係数を逆量子化／逆変換してレジデュアルブロックを導出し、これに基づいて復元ピクチャを生成することができる。
本文書において、量子化／逆量子化及び／又は変換／逆変換のうち少なくとも１つは、省略されることができる。前記量子化／逆量子化が省略される場合、前記量子化された変換係数は、変換係数と呼ばれることができる。前記変換／逆変換が省略される場合、前記変換係数は、係数またはレジデュアル係数と呼ばれることもでき、または、表現の統一性のために、依然として変換係数と呼ばれることもできる。
本文書において、量子化された変換係数及び変換係数は、各々、変換係数及びスケーリングされた（ｓｃａｌｅｄ）変換係数と呼ばれることができる。この場合、レジデュアル情報は、変換係数（ら）に関する情報を含むことができ、前記変換係数（ら）に関する情報は、レジデュアルコーディングシンタックスを介してシグナリングされることができる。前記レジデュアル情報（または、前記変換係数（ら）に関する情報）に基づいて変換係数が導出されることができ、前記変換係数に対する逆変換（スケーリング）を介してスケーリングされた変換係数が導出されることができる。前記スケーリングされた変換係数に対する逆変換（変換）に基づいてレジデュアルサンプルが導出されることができる。これは本文書の他の部分でも同様に適用／表現されることができる。
イントラ予測は、現在ブロックが属するピクチャ（以下、現在ピクチャという）内の参照サンプルに基づいて現在ブロックに対する予測サンプルを生成する予測を示すことができる。現在ブロックにイントラ予測が適用される場合、現在ブロックのイントラ予測に使用する隣接参照サンプルが導出されることができる。前記現在ブロックの隣接参照サンプルは、ｎＷ×ｎＨ大きさの現在ブロックの左側（ｌｅｆｔ）境界に隣接したサンプル及び左下側（ｂｏｔｔｏｍ－ｌｅｆｔ）に隣接した総２×ｎＨ個のサンプル、現在ブロックの上側（ｔｏｐ）境界に隣接したサンプル及び右上側（ｔｏｐ－ｒｉｇｈｔ）に隣接した総２×ｎＷ個のサンプル及び現在ブロックの左上側（ｔｏｐ－ｌｅｆｔ）に隣接した１個のサンプルを含むことができる。または、前記現在ブロックの隣接参照サンプルは、複数列の上側隣接サンプル及び複数行の左側隣接サンプルを含むこともできる。また、前記現在ブロックの隣接参照サンプルは、ｎＷ×ｎＨ大きさの現在ブロックの右側（ｒｉｇｈｔ）境界に隣接した総ｎＨ個のサンプル、現在ブロックの下側（ｂｏｔｔｏｍ）境界に隣接した総ｎＷ個のサンプル及び現在ブロックの右下側（ｂｏｔｔｏｍ－ｒｉｇｈｔ）に隣接した１個のサンプルを含むこともできる。
ただし、現在ブロックの隣接参照サンプルのうち一部は、まだデコードされない、または利用可能でない場合がある。この場合、デコーダは、利用可能なサンプルとして利用可能でないサンプルを代替（ｓｕｂｓｔｉｔｕｔｉｏｎ）して予測に使用する隣接参照サンプルを構成することができる。または、利用可能なサンプルの補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）を介して予測に使用する隣接参照サンプルを構成することができる。
隣接参照サンプルが導出された場合、（ｉ）現在ブロックの隣接（ｎｅｉｇｈｂｏｒｉｎｇ）参照サンプルの平均（ａｖｅｒａｇｅ）または補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）に基づいて予測サンプルを誘導することができ、（ｉｉ）現在ブロックの隣接参照サンプルのうち、予測サンプルに対して特定（予測）方向に存在する参照サンプルに基づいて前記予測サンプルを誘導することもできる。（ｉ）の場合は、非方向性（ｎｏｎ－ｄｉｒｅｃｔｉｏｎａｌ）モードまたは非角度（ｎｏｎ－ａｎｇｕｌａｒ）モードと呼ばれ、（ｉｉ）の場合は、方向性（ｄｉｒｅｃｔｉｏｎａｌ）モードまたは角度（ａｎｇｕｌａｒ）モードと呼ばれることができる。
また、前記隣接参照サンプルのうち前記現在ブロックの予測サンプルを基準にして、前記現在ブロックのイントラ予測モードの予測方向に位置する第１の隣接サンプルと前記予測方向の反対方向に位置する第２の隣接サンプルとの補間を介して前記予測サンプルが生成されることもできる。前述した場合は、線形補間イントラ予測（Ｌｉｎｅａｒ ｉｎｔｅｒｐｏｌａｔｉｏｎ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＬＩＰ）と呼ばれることができる。また、線形モデル（ｌｉｎｅａｒ ｍｏｄｅｌ）を利用してルーマサンプルに基づいてクロマ予測サンプルが生成されることもできる。この場合は、ＬＭモードと呼ばれることができる。
また、フィルタリングされた隣接参照サンプルに基づいて前記現在ブロックの臨時予測サンプルを導出し、前記既存の隣接参照サンプル、即ち、フィルタリングされない隣接参照サンプルのうち、前記イントラ予測モードによって導出された少なくとも１つの参照サンプルと前記臨時予測サンプルとを加重和（ｗｅｉｇｈｔｅｄ ｓｕｍ）して前記現在ブロックの予測サンプルを導出することもできる。前述した場合は、ＰＤＰＣ（Ｐｏｓｉｔｉｏｎ ｄｅｐｅｎｄｅｎｔ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ）と呼ばれることができる。
また、現在ブロックの隣接多重参照サンプルラインの中から最も予測正確度が高い参照サンプルラインを選択して該当ラインで予測方向に位置する参照サンプルを利用して予測サンプルを導出し、この時に使われた参照サンプルラインをデコード装置に指示（シグナリング）する方法でイントラ予測符号化を実行することができる。前述した場合は、多重参照ライン（ｍｕｌｔｉ－ｒｅｆｅｒｅｎｃｅ ｌｉｎｅ）イントラ予測またはＭＲＬベースのイントラ予測と呼ばれることができる。
また、現在ブロックを垂直または水平のサブパーティションに分けて同じイントラ予測モードに基づいてイントラ予測を実行し、前記サブパーティション単位で隣接参照サンプルを導出して利用できる。即ち、この場合、現在ブロックに対するイントラ予測モードが前記サブパーティションに同じく適用され、前記サブパーティション単位で隣接参照サンプルを導出して利用することによって、場合によって、イントラ予測性能を高めることができる。このような予測方法は、ＩＳＰ（ｉｎｔｒａ ｓｕｂ－ｐａｒｔｉｔｉｏｎｓ）ベースのイントラ予測と呼ばれることができる。
前述したイントラ予測方法は、イントラ予測モードと区分してイントラ予測タイプと呼ばれることができる。前記イントラ予測タイプは、イントラ予測技法または付加イントラ予測モードなど、様々な用語で呼ばれることができる。例えば、前記イントラ予測タイプ（または、付加イントラ予測モードなど）は、前述したＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰのうち少なくとも１つを含むことができる。前記ＬＩＰ、ＰＤＰＣ、ＭＲＬ、ＩＳＰなどの特定イントラ予測タイプを除外した一般イントラ予測方法は、ノーマルイントラ予測タイプと呼ばれることができる。ノーマルイントラ予測タイプは、前記のような特定イントラ予測タイプが適用されない場合、一般的に適用されることができ、前述したイントラ予測モードに基づいて予測が実行されることができる。一方、必要によって、導出された予測サンプルに対する後処理フィルタリングが実行されることもできる。
具体的に、イントラ予測手順は、イントラ予測モード／タイプ決定ステップ、隣接参照サンプル導出ステップ、イントラ予測モード／タイプベースの予測サンプル導出ステップを含むことができる。また、必要によって、導出された予測サンプルに対する後処理フィルタリング（ｐｏｓｔ－ｆｉｌｔｅｒｉｎｇ）ステップが実行されることもできる。
イントラ予測が適用される場合、隣接ブロックのイントラ予測モードを利用して現在ブロックに適用されるイントラ予測モードが決定されることができる。例えば、デコード装置は、現在ブロックの隣接ブロック（例えば、左側及び／又は上側隣接ブロック）のイントラ予測モード及び追加的な候補モードに基づいて導出されたＭＰＭ（ｍｏｓｔ ｐｒｏｂａｂｌｅ ｍｏｄｅ）リスト内のＭＰＭ候補のうち１つを、受信されたＭＰＭインデックスに基づいて選択でき、または、前記ＭＰＭ候補（及びプラナーモード）に含まれない残りのイントラ予測モードのうち１つを、リメイニングイントラ予測モード情報に基づいて選択できる。前記ＭＰＭリストは、プラナーモードを候補として含む場合または含まない場合で構成されることができる。例えば、前記ＭＰＭリストがプラナーモードを候補として含む場合、前記ＭＰＭリストは、６個の候補を有することができ、前記ＭＰＭリストがプラナーモードを候補として含まない場合、前記ＭＰＭリストは、５個の候補を有することができる。前記ＭＰＭリストがプラナーモードを候補として含まない場合、現在ブロックのイントラ予測モードがプラナーモードでないことを示すｎｏｔプラナーフラグ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）がシグナリングされることができる。例えば、ＭＰＭフラグが先にシグナリングされ、ＭＰＭインデックス及びｎｏｔプラナーフラグは、ＭＰＭフラグの値が１である場合にシグナリングされることができる。また、前記ＭＰＭインデックスは、前記ｎｏｔプラナーフラグの値が１である場合にシグナリングされることができる。ここで、前記ＭＰＭリストがプラナーモードを候補として含まないように構成されることは、前記プラナーモードがＭＰＭでないことを意味するより、ＭＰＭとして常にプラナーモードが考慮されるため、先にフラグ（ｎｏｔ ｐｌａｎａｒ ｆｌａｇ）をシグナリングしてプラナーモードであるかどうかを先に確認するためである。
例えば、現在ブロックに適用されるイントラ予測モードがＭＰＭ候補（及びプラナーモード）内にあるか、または、リメイニングモード内にあるかは、ＭＰＭフラグ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇ）に基づいて指示されることができる。ＭＰＭフラグの値１は、前記現在ブロックに対するイントラ予測モードがＭＰＭ候補（及びプラナーモード）内にあることを示すことができ、ＭＰＭ ｆｌａｇの値０は、前記現在ブロックに対するイントラ予測モードがＭＰＭ候補（及びプラナーモード）内に無いことを示すことができる。前記ｎｏｔプラナーフラグ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）値０は、前記現在ブロックに対するイントラ予測モードがプラナーモードであることを示すことができ、前記ｎｏｔプラナーフラグ値１は、前記現在ブロックに対するイントラ予測モードがプラナーモードでないことを示すことができる。前記ＭＰＭインデックスは、ｍｐｍ＿ｉｄｘまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘシンテックス要素の形態でシグナリングされることができ、前記リメイニングイントラ予測モード情報は、ｒｅｍ＿ｉｎｔｒａ＿ｌｕｍａ＿ｐｒｅｄ＿ｍｏｄｅまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒシンテックス要素の形態でシグナリングされることができる。例えば、前記リメイニングイントラ予測モード情報は、全体イントラ予測モードのうち前記ＭＰＭ候補（及びプラナーモード）に含まれない残りのイントラ予測モードを予測モード番号順にインデキシングしてそのうち１つを指すことができる。前記イントラ予測モードは、ルーマ成分（サンプル）に対するイントラ予測モードである。以下、イントラ予測モード情報は、前記ＭＰＭ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｆｌａｇ）、前記ｎｏｔ ｐｌａｎａｒ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｌｕｍａ＿ｎｏｔ＿ｐｌａｎａｒ＿ｆｌａｇ）、前記ＭＰＭインデックス（例えば、ｍｐｍ＿ｉｄｘまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｉｄｘ）、前記リメイニングイントラ予測モード情報（ｒｅｍ＿ｉｎｔｒａ＿ｌｕｍａ＿ｐｒｅｄ＿ｍｏｄｅまたはｉｎｔｒａ＿ｌｕｍａ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒ）のうち少なくとも１つを含むことができる。本文書において、ＭＰＭリストは、ＭＰＭ候補リスト、ｃａｎｄＭｏｄｅＬｉｓｔなど、様々な用語で呼ばれることができる。ＭＩＰが現在ブロックに適用される場合、ＭＩＰのための別途のｍｐｍ ｆｌａｇ（例えば、ｉｎｔｒａ＿ｍｉｐ＿ｍｐｍ＿ｆｌａｇ）、ｍｐｍインデックス（例えば、ｉｎｔｒａ＿ｍｉｐ＿ｍｐｍ＿ｉｄｘ）、リメイニングイントラ予測モード情報（例えば、ｉｎｔｒａ＿ｍｉｐ＿ｍｐｍ＿ｒｅｍａｉｎｄｅｒ）がシグナリングされることができ、前記ｎｏｔ ｐｌａｎａｒ ｆｌａｇはシグナリングされない。
即ち、一般的に画像に対するブロック分割になると、コーディングしようとする現在ブロックと隣接（ｎｅｉｇｈｂｏｒｉｎｇ）ブロックは、類似する画像特性を有するようになる。したがって、現在ブロックと隣接ブロックは、互いに同じまたは類似するイントラ予測モードを有する確率が高い。したがって、エンコーダは、現在ブロックのイントラ予測モードをエンコードするために、隣接ブロックのイントラ予測モードを利用することができる。
例えば、エンコーダ／デコーダは、現在ブロックに対するＭＰＭ（ｍｏｓｔ ｐｒｏｂａｂｌｅ ｍｏｄｅｓ）リストを構成することができる。前記ＭＰＭリストは、ＭＰＭ候補リストと示すこともできる。ここで、ＭＰＭとは、イントラ予測モードコーディング時、現在ブロックと隣接ブロックの類似性を考慮してコーディング効率を向上させるために利用されるモードを意味することができる。前述したように、ＭＰＭリストは、プラナーモードを含んで構成されることもでき、または、プラナーモードを除外して構成されることもできる。例えば、ＭＰＭリストがプラナーモードを含む場合、ＭＰＭリストの候補の個数は６個である。そして、ＭＰＭリストがプラナーモードを含まない場合、ＭＰＭリストの候補の個数は５個である。
エンコーダ／デコーダは、５個または６個のＭＰＭを含むＭＰＭリストを構成することができる。
ＭＰＭリストを構成するために、デフォルトイントラモード（Ｄｅｆａｕｌｔ ｉｎｔｒａ ｍｏｄｅｓ）、隣接イントラモード（Ｎｅｉｇｈｂｏｕｒ ｉｎｔｒａ ｍｏｄｅｓ）、及び導出されたイントラモード（Ｄｅｒｉｖｅｄ ｉｎｔｒａ ｍｏｄｅｓ）の三つの種類のモードが考慮されることができる。
前記隣接イントラモードのために、二つの隣接ブロック、即ち、左側隣接ブロック及び上側隣接ブロックが考慮されることができる。
前述したように、もし、ＭＰＭリストがプラナーモードを含まないように構成する場合、前記リストからプラナー（ｐｌａｎａｒ）モードが除外され、前記ＭＰＭリスト候補の個数は、５個に設定されることができる。
また、イントラ予測モードのうち、非方向性モード（または、非角度モード）は、現在ブロックの隣接（ｎｅｉｇｈｂｏｒｉｎｇ）参照サンプルの平均（ａｖｅｒａｇｅ）ベースのＤＣモードまたは補間（ｉｎｔｅｒｐｏｌａｔｉｏｎ）ベースのプラナー（ｐｌａｎａｒ）モードを含むことができる。
インター予測が適用される場合、エンコード装置／デコード装置の予測部は、ブロック単位でインター予測を行って予測サンプルを導出することができる。インター予測は、現在ピクチャ以外のピクチャのデータ要素（ｅｘ． サンプル値、又は動き情報）に依存的な方法で導出される予測を示すことができる。現在ブロックにインター予測が適用される場合、参照ピクチャのインデックスの指す参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロック（予測サンプルアレイ）を誘導することができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、現在ブロックの動き情報をブロック、サブブロック又はサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャのインデックスを含むことができる。前記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）の情報を更に含むことができる。インター予測が適用される場合、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と、参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと、前記時間的隣接ブロックを含む参照ピクチャとは同一であってもよく、異なってもよい。前記時間的隣接ブロックは、同じ位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同じ位置ＣＵ（ｃｏｌＣＵ）等の名称で呼ばれ得、前記時間的隣接ブロックを含む参照ピクチャは、同じ位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもある。例えば、現在ブロックの隣接ブロックに基づいて動き情報の候補リストが構成されることができ、前記現在ブロックの動きベクトル及び／又は参照ピクチャのインデックスを導出するために、どの候補が選択（使用）されるかを指示するフラグ又はインデックス情報がシグナリングされることができる。様々な予測モードに基づいてインター予測が行われ、例えば、スキップモードとマージモードの場合、現在ブロックの動き情報は、選択された隣接ブロックの動き情報を同一であり得る。スキップモードの場合、マージモードと異なり、レジデュアル信号が送信されないことがある。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、選択された隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として利用し、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）はシグナリングされることができる。この場合、前記動きベクトル予測子及び動きベクトル差分の和を用いて、前記現在ブロックの動きベクトルを導出することができる。
前記動き情報は、インター予測タイプ（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）に応じて、Ｌ０動き情報及び／又はＬ１動き情報を含むことができる。Ｌ０方向の動きベクトルは、Ｌ０動きベクトル又はＭＶＬ０と呼ばれ得、Ｌ１方向の動きベクトルは、Ｌ１動きベクトル又はＭＶＬ１と呼ばれ得る。Ｌ０動きベクトルに基づいた予測は、Ｌ０予測と呼ばれ得、Ｌ１動きベクトルに基づいた予測をＬ１予測と呼ばれ得、前記Ｌ０動きベクトル及び前記Ｌ１動きベクトルの両方に基づいた予測を双（Ｂｉ）予測と呼ばれ得る。ここで、Ｌ０動きベクトルは、参照ピクチャリストＬ０（Ｌ０）に関連した動きベクトルを示すことができ、Ｌ１動きベクトルは、参照ピクチャリストＬ１（Ｌ１）に関連した動きベクトルを示すことができる。参照ピクチャリストＬ０は、前記現在ピクチャよりも、出力順序上、以前のピクチャを参照ピクチャに含むことができ、参照ピクチャリストＬ１は、前記現在ピクチャよりも、出力順序上、以後のピクチャを含むことができる。前記以前のピクチャは、順方向（参照）ピクチャと呼ばれ得、前記以後のピクチャは、逆方向（参照）ピクチャと呼ばれ得る。前記参照ピクチャリストＬ０は、前記現在ピクチャよりも、出力順序上、以後のピクチャを参照ピクチャにさらに含むことができる。この場合、前記参照ピクチャリストＬ０内で前記以前のピクチャが先にインデキシングされ、前記以後のピクチャは、その後にインデキシングされ得る。前記参照ピクチャリストＬ１は、前記現在ピクチャよりも、出力順序上、以前のピクチャを参照ピクチャにさらに含むことができる。この場合、前記参照ピクチャリスト１内で前記以後のピクチャが先にインデキシングされ、前記以前のピクチャは、その後にインデキシングされ得る。ここで、出力順序は、ＰＯＣ（ｐｉｃｔｕｒｅ ｏｒｄｅｒ ｃｏｕｎｔ）順序（ｏｒｄｅｒ）に対応し得る。
図４は、例示的なブロックツリー構造を図示する。図４はクアッドツリー及び伴われるマルチタイプツリー（ｑｕａｄｔｒｅｅ ａｎｄ ｎｅｓｔｅｄ ｍｕｌｔｉ－ｔｙｐｅ ｔｒｅｅ）構造に基づいてＣＴＵが多重ＣＵに分割されることを例示的に図示する。
ボールドブロックエッジ（ｂｏｌｄ ｂｌｏｃｋ ｅｄｇｅｓ）は、クアッドツリーパーティショニングを、残りのエッジはマルチタイプツリーパーティショニングを示す。マルチタイプツリーを伴ったクアッドツリーパーテーションはコンテンツ－アダプテッドコーディングツリー構造を提供することができる。ＣＵはコーディングブロック（ＣＢ）に対応できる。あるいは、ＣＵはルーマサンプルのコーディングブロックと、対応するクロマサンプルの２つのコーディングブロックを含むことができる。ＣＵのサイズはＣＴＵだけ大きいこともあり、またはルーマサンプル単位で４ｘ４だけ小さいこともある。例えば、４：２：０カラーフォーマット（ｏｒ クロマフォーマット）の場合、最大クロマＣＢサイズは６４ｘ６４であり、最小クロマＣＢサイズは２ｘ２でありえる。
本文書で、例えば、最大許容ルーマＴＢサイズは６４ｘ６４であり、最大許容クロマＴＢサイズは３２ｘ３２でありえる。もし、前記ツリー構造によって分割されたＣＢの幅または高さが最大変換幅または高さより大きい場合、該当ＣＢは自動的に（または、暗黙的に）水平及び垂直方向のＴＢサイズ制限を満たすまで分割できる。
本文書で、コーディングツリースキームはルーマ及びクロマ（成分）ブロックが個別的（ｓｅｐａｒａｔｅ）ブロックツリー構造を有することを支援することができる。個別的ブロックツリー構造を有するブロックは個別的ツリーにコーディングされたものでありえる。１つのＣＴＵ内のルーマ及びクロマブロックが同一ブロックツリー構造を有する場合はＳＩＮＧＬＥ＿ＴＲＥＥ（シングルツリー構造）と示すことができる。１つのＣＴＵ出しルーマ及びクロマブロックが個別的ブロックツリー構造を有する場合はＤＵＡＬ＿ＴＲＥＥ（シングルツリー構造）と示すことができる。この場合、ルーマ成分に対するブロックツリータイプはＤＵＡＬ＿ＴＲＥＥ＿ＬＵＭＡと呼ばれることができ、クロマ成分に対するブロックツリータイプはＤＵＡＬ＿ＴＲＥＥ＿ＣＨＲＯＭＡと呼ばれることができる。デュアルツリー構造を有するブロックはデュアルツリーにコーディングされたものでありえる。Ｐ及びＢスライス／タイルグループに対し、１つのＣＴＵ内のルーマ及びクロマＣＴＢは同一のコーディングツリー構造を有するように制限できる。しかしながら、Ｉスライス／タイルグループに対し、ルーマ及びクロマブロックは互いに個別的ブロックツリー構造を有することができる。もし、個別的ブロックツリーモードが適用される場合、ルーマＣＴＢは特定コーディングツリー構造に基づいてＣＵに分割され、クロマＣＴＢは他のコーディングツリー構造に基づいてクロマＣＵに分割できる。これは、Ｉスライス／タイルグループ内のＣＵはルーマ成分のコーディングブロックまたは２つのクロマ成分のコーディングブロックで構成され、ＰまたはＢスライス／タイルグループのＣＵは３つのカラー成分のブロックで構成できることを意味することができる。本文書で、スライスはタイル／タイルグループと呼ばれることができ、タイル／タイルグループはスライスと呼ばれることができる。
マルチタイプツリーを伴ったクアッドツリーコーディングツリー構造について説明されたが、ＣＵが分割される構造はこれに限定されない。例えば、ＢＴ構造及びＴＴ構造は多数分割ツリー（Ｍｕｌｔｉｐｌｅ Ｐａｒｔｉｔｉｏｎｉｎｇ Ｔｒｅｅ、ＭＰＴ）構造に含まれる概念と解釈することができ、ＣＵはＱＴ構造及びＭＰＴ構造を通じて分割されると解釈できる。ＱＴ構造及びＭＰＴ構造を通じてＣＵが分割される一例で、ＱＴ構造のリーフノードが幾つのブロックに分割されるかに関する情報を含むシンタックス要素（例えば、ＭＰＴ＿ｓｐｌｉｔ＿ｔｙｐｅ）及びＱＴ構造のリーフノードが垂直と水平のうち、どの方向に分割されるかに関する情報を含むシンタックス要素（例えば、ＭＰＴ＿ｓｐｌｉｔ＿ｍｏｄｅ）がシグナリングされることにより分割構造が決定できる。
更に他の例で、ＣＵはＱＴ構造、ＢＴ構造、またはＴＴ構造と異なる方法により分割できる。即ち、ＱＴ構造によって下位デップスのＣＵが上位デップスのＣＵの１／４サイズに分割されるか、ＢＴ構造によって下位デップスのＣＵが上位デップスのＣＵの１／２サイズに分割されるか、ＴＴ構造によって下位デップスのＣＵが上位デップスのＣＵの１／４または１／２サイズに分割されることとは異なり、下位デップスのＣＵは、場合によって上位デップスのＣＵの１／５、１／３、３／８、３／５、２／３、または５／８サイズに分割されることができ、ＣＵが分割される方法はこれに限定されない。
図５は、コーディングされた画像／ビデオに対する階層構造を例示的に示す。
図５を参照すると、コーディングされた画像／ビデオは画像／ビデオのデコード処理及びその自体を扱うＶＣＬ（ｖｉｄｅｏ ｃｏｄｉｎｇ ｌａｙｅｒ、ビデオコーディング階層）、符号化された情報を転送し格納する下位システム、そしてＶＣＬと下位システムの間に存在し、ネットワーク適応機能を担当するＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ、ネットワーク抽象階層）に区分されている。
ＶＣＬでは圧縮された画像データ（スライスデータ）を含むＶＣＬデータを生成するか、またはピクチャパラメータセット（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＰＰＳ）、シーケンスパラメータセット（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＳＰＳ）、ビデオパラメータセット（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ：ＶＰＳ）などの情報を含むパラメータセット、または画像のデコード過程に付加的に必要とするＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）メッセージを生成することができる。
ＮＡＬでは、ＶＣＬで生成されたＲＢＳＰ（Ｒａｗ Ｂｙｔｅ Ｓｅｑｕｅｎｃｅ Ｐａｙｌｏａｄ）にヘッダ情報（ＮＡＬユニットヘッダ）を付加してＮＡＬユニットを生成することができる。この際、ＲＢＳＰはＶＣＬで生成されたスライスデータ、パラメータセット、ＳＥＩメッセージなどをいう。ＮＡＬユニットヘッダには該当ＮＡＬユニットに含まれるＲＢＳＰデータによって特定されるＮＡＬユニットタイプ情報を含むことができる。
前記の図面で図示したように、ＮＡＬユニットはＶＣＬで生成されたＲＢＳＰのよってＶＣＬ ＮＡＬユニットとＮｏｎ－ＶＣＬ ＮＡＬユニットに区分できる。ＶＣＬ ＮＡＬユニットは画像に対する情報（スライスデータ）を含んでいるＮＡＬユニットを意味することができ、Ｎｏｎ－ＶＣＬ ＮＡＬユニットは画像をデコードするために必要とする情報（パラメータセットまたはＳＥＩメッセージ）を含んでいるＮＡＬユニットを意味することができる。
前述したＶＣＬ ＮＡＬユニット、Ｎｏｎ－ＶＣＬ ＮＡＬユニットは下位システムのデータ規格によってヘッダ情報を付けてネットワークを介して転送できる。例えば、ＮＡＬユニットはＨ．２６６／ＶＶＣファイルフォーマット、ＲＴＰ（Ｒｅａｌ－ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）、ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）などの所定の規格のデータ形態に変形されて多様なネットワークを介して転送できる。
前述したように、ＮＡＬユニットは該当ＮＡＬユニットに含まれるＲＢＳＰデータ構造（ｓｔｒｕｃｔｕｒｅ）によってＮＡＬユニットタイプが特定されることができ、このようなＮＡＬユニットタイプに対する情報はＮＡＬユニットヘッダに格納されてシグナリングできる。
例えば、ＮＡＬユニットが画像に対する情報（スライスデータ）を含むか否かによってＶＣＬ ＮＡＬユニットタイプとＮｏｎ－ＶＣＬ ＮＡＬユニットタイプに大別できる。ＶＣＬ ＮＡＬユニットタイプはＶＣＬ ＮＡＬユニットが含むピクチャの性質及び種類などによって分類されることができ、Ｎｏｎ－ＶＣＬ ＮＡＬユニットタイプはパラメータセットの種類などによって分類できる。
以下はＮｏｎ－ＶＣＬ ＮＡＬユニットタイプが含むパラメータセットの種類などによって特定されたＮＡＬユニットタイプの一例である。
－ＡＰＳ（Ａｄａｐｔａｔｉｏｎ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＡＰＳを含むＮＡＬユニットに対するタイプ
－ＤＰＳ（Ｄｅｃｏｄｉｎｇ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＤＰＳを含むＮＡＬユニットに対するタイプ
－ＶＰＳ（Ｖｉｄｅｏ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＶＰＳを含むＮＡＬユニットに対するタイプ
－ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＳＰＳを含むＮＡＬユニットに対するタイプ
－ＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）ＮＡＬ ｕｎｉｔ：ＰＰＳを含むＮＡＬユニットに対するタイプ
－ＰＨ（Ｐｉｃｔｕｒｅ ｈｅａｄｅｒ）ＮＡＬ ｕｎｉｔ：ＰＨを含むＮＡＬユニットに対するタイプ
前述したＮＡＬユニットタイプはＮＡＬユニットタイプのためのシンタックス情報を有し、前記シンタックス情報はＮＡＬユニットヘッダに格納されてシグナリングできる。例えば、前記シンタックス情報はｎａｌ＿ｕｎｉｔ＿ｔｙｐｅであることがあり、ＮＡＬユニットタイプはｎａｌ＿ｕｎｉｔ＿ｔｙｐｅ値に特定できる。
一方、前述したように、１つのピクチャは複数のスライスを含むことができ、１つのスライスはスライスヘッダ及びスライスデータを含むことができる。この場合、１つのピクチャ内の複数のスライス（スライスヘッダ及びスライスデータ集合）に対して１つのピクチャヘッダが更に付加できる。前記ピクチャヘッダ（ピクチャヘッダシンタックス）は前記ピクチャに共通的に適用できる情報／パラメータを含むことができる。本文書で、スライスはタイルグループに混用または代替できる。また、本文書でスライスヘッダはタイプグループヘッダに混用または代替できる。
前記スライスヘッダ（スライスヘッダシンタックス）は、前記スライスに共通的に適用できる情報／パラメータを含むことができる。前記ＡＰＳ（ＡＰＳシンタックス）またはＰＰＳ（ＰＰＳシンタックス）は１つ以上のスライスまたはピクチャに共通的に適用できる情報／パラメータを含むことができる。前記ＳＰＳ（ＳＰＳシンタックス）は、１つ以上のシーケンスに共通的に適用できる情報／パラメータを含むことができる。前記ＶＰＳ（ＶＰＳシンタックス）は多重レイヤに共通的に適用できる情報／パラメータを含むことができる。前記ＤＰＳ（ＤＰＳシンタックス）は、ビデオの全般に共通的に適用できる情報／パラメータを含むことができる。前記ＤＰＳは、ＣＶＳ（ｃｏｄｅｄ ｖｉｄｅｏ ｓｅｑｕｅｎｃｅ）の接合（ｃｏｎｃａｔｅｎａｔｉｏｎ）に関連した情報／パラメータを含むことができる。本文書で、上位レベルシンタックス（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ、ＨＬＳ）ということは、前記ＡＰＳシンタックス、ＰＰＳシンタックス、ＳＰＳシンタックス、ＶＰＳシンタックス、ＤＰＳシンタックス、ピクチャヘッダシンタックス、スライスヘッダシンタックスのうち、少なくとも１つを含むことができる。
本文書で、エンコード装置からデコード装置にエンコードされてビットストリーム形態にシグナリングされる画像／ビデオ情報は、ピクチャ内のパーティショニング関連情報、イントラ／インター予測情報、レジデュアル情報、インループフィルタリング情報などを含むだけでなく、前記スライスヘッダに含まれた情報、前記ピクチャヘッダに含まれた情報、前記ＡＰＳに含まれた情報、前記ＰＰＳに含まれた情報、ＳＰＳに含まれた情報、ＶＰＳに含まれた情報、及び／又はＤＰＳに含まれた情報を含むことができる。また、前記画像／ビデオ情報はＮＡＬユニットヘッダの情報を更に含むことができる。
一方、量子化などの圧縮符号化過程で発生するエラーによる原本（ｏｒｉｇｉｎａｌ）画像と復元画像の差を補償するために、前述したように復元サンプルまたは復元ピクチャにインループフィルタリング手続きが遂行できる。前述したように、インループフィルタリングはエンコード装置のフィルタ部及びデコード装置のフィルタ部で遂行されることができ、デブロッキングフィルタ、ＳＡＯ及び／又は適応的ループフィルタ（ＡＬＦ）が適用できる。例えば、ＡＬＦ手続きはデブロッキングフィルタリング手続き及び／又はＳＡＯ手続きが完了した後、遂行できる。但し、この場合にもデブロッキングフィルタリング手続き及び／又はＳＡＯ手続きが省略されることもできる。
一方、コーディング効率を高めるために前述したようにＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用できる。ＬＭＣＳはループリシェイパ（リシェイピング）と称されることができる。コーディング効率を高めるためにＬＭＣＳの制御及び／又はＬＭＣＳ関連情報のシグナリングは階層的に遂行できる。
図６は、本文書の一実施形態に従うＣＶＳの階層構造を例示的に図示する。
図６を参照すると、ＣＶＳ（ｃｏｄｅｄ ｖｉｄｅｏ ｓｅｑｕｅｎｃｅ）はＳＰＳ、１つ以上のＰＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）、そして後続する１つ以上のコーディングされたピクチャを含むことができる。各コーディングされたピクチャは四角リージョンに分けられることができる。前記四角リージョンはタイルと呼ばれることができる。１つ以上のタイルは集まってタイルグループまたはスライスを形成することができる。この場合、タイルグループヘッダがＰＰＳ（ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）にリンクされ、前記ＰＰＳがＳＰＳにリンクできる。
図７は、本文書の一実施形態に従うＣＶＳの階層的な構造を例示的に図示する。図８は、本文書の他の実施形態に従うＣＶＳの階層構造を例示的に図示する。
図８を参照すると、ＣＶＳ（ｃｏｄｅｄ ｖｉｄｅｏ ｓｅｑｕｅｎｃｅ）はＳＰＳ、ＰＰＳ、タイルグループヘッダ（ｔｉｌｅ ｇｒｏｕｐ ｈｅａｄｅｒ）、タイルデータ（ｔｉｌｅ ｄａｔａ）、及び／又はＣＴＵを含むことができる。ここで、タイルグループヘッダ及びタイルデータは各々スライスヘッダ及びスライスデータと称されることもできる。
ＳＰＳは、ＣＶＳで使われるようにツールをイネーブルさせるためのフラグを原始的に含むことができる。また、ＳＰＳはピクチャ毎に変わるパラメータに対する情報を含むＰＰＳにより参照できる。符号化されたピクチャの各々は１つ以上の符号化された矩形ドメインのタイルを含むことができる。前記タイルはタイルグループを形成するラスタースキャンにグループ化できる。各タイルグループはタイルグループヘッダというヘッダ情報としてカプセル化される。各タイルは符号化されたデータを含むＣＴＵで構成される。ここで、データは原本サンプル値、予測サンプル値、及びそれのルーマ及びクロマ成分（ルーマ予測サンプル値及びクロマ予測サンプル値）を含むことができる。
既存の方法によると、ＡＬＦデータ（ＡＬＦパラメータ）またはＬＭＣＳデータ（ＬＭＣＳパラメータ）はタイルグループヘッダに含まれた。１つのビデオが多数のピクチャ―で構成され、１つのピクチャ―が多数のタイルを含むことを考慮する時、ＡＬＦデータ（ＡＬＦパラメータ）またはＬＭＣＳデータ（ＬＭＣＳパラメータ）のシグナリングがタイルグループ単位で頻繁になされることはコーディング効率を低下させる問題があった。
本文書で提案された一実施形態によると、前記ＡＬＦパラメータまたはＬＭＣＳデータ（ＬＭＣＳパラメータ）は次のようにＡＰＳに含まれてシグナリングできる。
図７を参照すると、ＡＰＳが定義され、前記ＡＰＳは必要とするＡＬＦデータ（ＡＬＦパラメータ）を運ぶことができる。その上、ＡＰＳは自己識別パラメータ（ｓｅｌｆ－ｉｄｅｎｔｉｆｉｃａｔｉｏｎ ｐａｒａｍｅｔｅｒ）、ＡＬＦデータ、及び／又はＬＭＣＳデータを有することができる。前記ＡＰＳの自己識別パラメータはＡＰＳ ＩＤを含むことができる。即ち、前記ＡＰＳは前記ＡＰＳ ＩＤを示す情報を含むことができる。タイルグループヘッダまたはスライスヘッダはＡＰＳインデックス情報を用いてＡＰＳを参照することができる。言い換えると、タイルグループヘッダまたはスライスヘッダはＡＰＳインデックス情報を含むことができ、前記ＡＰＳインデックス情報が示すＡＰＳ ＩＤを有するＡＰＳに含まれたＬＭＣＳデータ（ＬＭＣＳパラメータ）に基づいて対象ブロックに対するＡＬＦ手続きを遂行することができ、または前記ＡＰＳインデックス情報が示すＡＰＳ ＩＤを有するＡＰＳに含まれたＡＬＦデータ（ＡＬＦパラメータ）に基づいて対象ブロックに対するＬＭＣＳ手続きを遂行することができる。ここで、前記ＡＰＳインデックス情報はＡＰＳ ＩＤ情報と呼ばれることもできる。
一例で、前記ＳＰＳはＡＬＦの使用を許容するフラグを含むことができる。例えば、ＣＶＳが開始（ｂｅｇｉｎ）する時、ＳＰＳがチェックされ、前記ＳＰＳ内に前記フラグがチェックできる。例えば、ＳＰＳは以下の表１のシンタックスを含むことができる。表１のシンタックスはＳＰＳの一部分でありえる。
Figure 0007471498000001
前記表１のシンタックスに含まれたシンタックス要素のセマンティックスは例えば、次の表のように示すことができる。
Figure 0007471498000002
即ち、前記ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素はその値が０なのか１なのかに基づいてＡＬＦが可用か否かを示すことができる。ｓｐｓ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素はＡＬＦ可用フラグ（第１のＡＬＦ可用フラグと呼ばれることができる）と呼ばれることができ、ＳＰＳに含まれることができる。即ち、前記ＡＬＦ可用フラグはＳＰＳ（または、ＳＰＳレベル）でシグナリングできる。前記ＳＰＳでシグナリングされる前記ＡＬＦ可用フラグの値が１の場合、前記ＳＰＳを参照するＣＶＳ内のピクチャ―に対して基本的にＡＬＦが可用に決定できる。一方、前述したように、前記ＳＰＳより下位レベルで追加的な可用フラグをシグナリングして個別的にＡＬＦをｏｎ／ｏｆｆ処理することもできる。
例えば、ＡＬＦツールがＣＶＳに対して可用な場合、タイルグループヘッダまたはスライスヘッダで追加的な可用フラグ（第２のＡＬＦ可用フラグと呼ばれることができる）がシグナリングできる。前記第２のＡＬＦ可用フラグは、例えば、ＳＰＳレベルでＡＬＦが可用な場合にパーシング／シグナリングできる。もし、 第２のＡＬＦ可用フラグの値が１の場合、前記タイルグループヘッダまたは前記スライスヘッダを通じてＡＬＦデータをパーシングすることができる。例えば、前記第２のＡＬＦ可用フラグはルーマ及びクロマ成分に関するＡＬＦ可用条件（ｃｏｎｄｉｔｉｏｎ）を明示（ｓｐｅｃｉｆｙ）することができる。前記ＡＬＦデータはＡＰＳ ＩＤ情報を通じて接近することができる。
Figure 0007471498000003
Figure 0007471498000004
前記表３または表４のシンタックスに含まれたシンタックス要素のセマンティックスは、例えば、次の表のように示すことができる。
Figure 0007471498000005
Figure 0007471498000006
前記第２のＡＬＦ可用フラグはｔｉｌｅ＿ｇｒｏｕｐ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素またはｓｌｉｃｅ＿ａｌｆ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素を含むことができる。
前記ＡＰＳ ＩＤ情報（ｅｘ．ｔｉｌｅ＿ｇｒｏｕｐ＿ａｐｓ＿ｉｄシンタックス要素またはｓｌｉｃｅ＿ａｐｓ＿ｉｄシンタックス要素）に基づいて該当タイルグループまたは該当スライスで参照するＡＰＳが識別できる。前記ＡＰＳはＡＬＦデータを含むことができる。
一方、ＡＬＦデータを含むＡＰＳの構造は、例えば、次のようなシンタックス及びセマンティックスに基づいて説明できる。表７のシンタックスはＡＰＳの一部分でありえる。
Figure 0007471498000007
Figure 0007471498000008
前記のように、ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄシンタックス要素は該当ＡＰＳの識別子を示すことができる。即ち、ＡＰＳは前記ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄシンタックス要素に基づいて識別できる。前記ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄシンタックス要素はＡＰＳ ＩＤ情報と呼ばれることができる。また、前記ＡＰＳはＡＬＦデータフィールドを含むことができる。前記ＡＬＦデータフィールドは、前記ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄシンタックス要素の以後にパーシング／シグナリングできる。
また、例えば、ＡＰＳでＡＰＳ拡張フラグ（ｅｘ．ａｐｓ＿ｅｘｔｅｎｓｉｏｎ＿ｆｌａｇシンタックス要素）がパーシング／シグナリングできる。前記ＡＰＳ拡張フラグは、ＡＰＳ拡張データフラグ（ａｐｓ＿ｅｘｔｅｎｓｉｏｎ＿ｄａｔａ＿ｆｌａｇ）シンタックス要素が存在するか否かを指示することができる。前記ＡＰＳ拡張フラグは、例えばＶＶＣ標準の以後のバージョンのための拡張ポイントを提供するために使用できる。
図９は、本文書の一実施形態に従う例示的なＬＭＣＳ構造を図示する。図９のＬＭＣＳ構造（９００）は、適応的部分線形（ａｄａｐｔｉｖｅ ｐｉｅｃｅｗｉｓｅ ｌｉｎｅａｒ、ａｄａｐｔｉｖｅ ＰＷＬ）モデルに基づいたルーマ成分のイン－ループマッピング（ｉｎ－ｌｏｏｐ ｍａｐｐｉｎｇ）部分（９１０）とクロマ成分に対してルーマ－依存したクロマレジデュアルスケーリング（ｌｕｍａ－ｄｅｐｅｎｄｅｎｔ ｃｈｒｏｍａ ｒｅｓｉｄｕａｌ ｓｃａｌｉｎｇ）部分（９２０）を含むことができる。イン－ループマッピング部分（９１０）の逆量子化及び逆変換（９１１）、復元（９１２）、及びイントラ予測（９１３）ブロックは、マッピングされた（リシェイプされた（ｒｅｓｈａｐｅｄ））ドメインで適用されるプロセスを示す。イン－ループマッピング部分（９１０）のループフィルタ（９１５）、動き補償またはインター予測（９１７）ブロック、及びクロマレジデュアルスケーリング部分（９２０）の復元（９２２）、イントラ予測（９２３）、動き補償またはインター予測（９２４）、ループフィルタ（９２５）のブロックは本来の（マッピングされていない（ｎｏｎ－ｍａｐｐｅｄ）、リシェイプされていない）ドメインで適用されるプロセスを示す。
図９で説明されるように、ＬＭＣＳがイネーブルされれば、インバースリシェイピング（マッピング）プロセス（９１４）、フォワードリシェイピング（マッピング）プロセス（９１８）、及びクロマスケーリングプロセス（９２１）のうち、少なくとも１つが適用できる。例えば、インバースリシェイピングプロセスは復元されたピクチャ―の（復元された）ルーマサンプル（または、ルーマサンプルまたはルーマサンプルアレイ）に適用できる。インバースリシェイピングプロセスはルーマサンプルの部分関数（インバース）インデックス（ｐｉｅｃｅｗｉｓｅ ｆｕｎｃｔｉｏｎ（ｉｎｖｅｒｓｅ）ｉｎｄｅｘ）に基づいて遂行できる。部分関数（インバース）インデックスはルーマサンプルが属する断片（または、部分）を識別することができる。インバースリシェイピングプロセスの出力は修正された（復元）ルーマサンプル（または、修正されたルーマサンプルまたは修正されたルーマサンプルアレイ）である。ＬＭＣＳはタイルグループ（または、スライス）、ピクチャ―またはより高いレベルでイネーブルまたはディスエーブルできる。
フォワードリシェイピングプロセス及び／又はクロマスケーリングプロセスは復元されたピクチャ―を生成するために適用できる。ピクチャ―はルーマサンプルとクロマサンプルを含むことができる。ルーマサンプルを有する復元されたピクチャ―は復元されたルーマピクチャ―と称されることができ、クロマサンプルを有する復元されたピクチャ―は復元されたクロマピクチャ―と称されることができる。復元されたルーマピクチャ―と復元されたクロマピクチャ―の組み合わせは復元されたピクチャ―と称されることができる。復元されたルーマピクチャ―はフォワードリシェイピングプロセスに基づいて生成できる。例えば、インター予測が現在ブロックに適用されれば、フォワードリシェイピングは参照ピクチャ―の（復元された）ルーマサンプルに基づいて導出されたルーマ予測サンプルに適用される。参照ピクチャ―の（復元された）ルーマサンプルはインバースリシェイピングプロセスに基づいて生成されるので、フォワードリシェイピングがルーマ予測サンプルに適用されてリシェイプされた（マッピングされた）ルーマ予測サンプルが導出できる。フォワードリシェイピングプロセスはルーマ予測サンプルの部分関数インデックスに基づいて遂行できる。部分関数インデックスはインター予測に使われた参照ピクチャ―のルーマ予測サンプルの値またはルーマサンプルの値に基づいて導出できる。イントラ予測（または、ＩＢＣ（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ））が現在ブロックに適用される場合、インバースリシェイピングプロセスが現在ピクチャ―の復元されたサンプルにまだ適用されていないので、フォワードマッピングは必要でない。復元されたルーマピクチャ―で（復元された）ルーマサンプルはリシェイプされたルーマ予測サンプル及び対応するルーマレジデュアルサンプルに基づいて生成される。
復元されたクロマピクチャ―はクロマスケーリングプロセスに基づいて生成できる。例えば、復元されたコマピクチャ―での（復元された）クロマサンプルは現在ブロックでのクロマ予測サンプル及びクロマレジデュアルサンプル（ｃｒｅｓ）に基づいて導出できる。クロマレジデュアルサンプル（ｃｒｅｓ）は現在ブロックに対する（スケーリングされた）クロマレジデュアルサンプル（ｃｒｅｓＳｃａｌｅ）及びクロマレジデュアルスケーリングファクタ（ｃＳｃａｌｅＩｎｖはｖａｒＳｃａｌｅと称されることができる）に基づいて導出される。クロマレジデュアルスケーリングファクタは、現在ブロックでリシェイプされたルーマ予測サンプル値に基づいて計算できる。例えば、スケーリングファクタはリシェイプされたルーマ予測サンプル値（Ｙ’ｐｒｅｄ）の平均ルーマ値（ａｖｅ（Ｙ’ｐｒｅｄ））に基づいて計算できる。参考までに、逆変換／逆量子化に基づいて導出された（スケーリングされた）クロマレジデュアルサンプルは、ｃｒｅｓＳｃａｌｅ、前記（スケーリングされた）クロマレジデュアルサンプルに（インバース）スケーリング手続きを遂行して導出されるクロマレジデュアルサンプルはｃｒｅｓと称されることができる。
図１０は、本文書の他の一実施形態に従うＬＭＣＳ構造を図示する。図１０は図９を参照して説明される。ここでは、図１０のＬＭＣＳ構造と図９のＬＭＣＳ構造（９００）の間の差が主として説明される。図１０のイン－ループマッピング部分とルーマ－依存的なクロマレジデュアルスケーリング部分は、各々図９のイン－ループマッピング部分（９１０）とルーマ－依存的なクロマレジデュアルスケーリング部分（９２０）と同一／類似するように動作することができる。
図１０を参照すると、ルーマ復元サンプルに基づいてクロマレジデュアルスケーリングファクタを導出することができる。この場合、復元ブロックの内部ルーマ復元サンプルでない復元ブロックの外部の周辺ルーマ復元サンプルに基づいて平均ルーマ値（ａｖｇＹｒ）を獲得することができ、前記平均ルーマ値（ａｖｇＹｒ）に基づいてクロマレジデュアルスケーリングファクタを導出することができる。ここで、前記の周辺ルーマ復元サンプルは現在ブロックの周辺ルーマ復元サンプル、または前記現在ブロックを含むＶＰＤＵ（ｖｉｒｔｕａｌ ｐｉｐｅｌｉｎｅ ｄａｔａ ｕｎｉｔｓ）の周辺ルーマ復元サンプルでありえる。例えば、対象ブロックにイントラ予測が適用される場合、前記イントラ予測に基づいて導出された予測サンプルに基づいて復元サンプルが導出できる。また例えば、前記対象ブロックにインター予測が適用される場合、前記インター予測に基づいて導出された予測サンプルにフォワードマッピングを適用し、リシェイプされた（あるいは、フォワードマッピングされた）ルーマ予測サンプルに基づいて復元サンプルが生成できる。
ビットストリームを通じてシグナリングされる動画像／画像情報はＬＭＣＳパラメータ（ＬＭＣＳ対する情報）を含むことができる。ＬＭＣＳパラメータはＨＬＳ（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ、スライスヘッダシンタックスを含み）などで構成できる。ＬＭＣＳパラメータ及び構成の詳細な説明は後述する。前述したように、本文書（及び、以下の実施形態）で説明されたシンタックス表はエンコーダ端で構成／エンコードされることができ、ビットストリームを通じてデコーダ端でシグナリングできる。デコーダはシンタックス表でＬＭＣＳに対する情報（シンタックス構成要素の形態に）をパーシング／デコードすることができる。以下に説明される１つ以上の実施形態は組み合わせることができる。エンコーダはＬＭＣＳに関する情報に基づいて現在ピクチャ―をエンコードすることができ、そしてデコーダはＬＭＣＳに関する情報に基づいて現在ピクチャ―をデコードすることができる。
ルーマ成分のイン－ループマッピングは圧縮効率を向上させるために動的範囲に亘ってコードワードを再分配することによって、入力信号の動的範囲を調節することができる。ルーママッピングのために、フォワードマッピング（リシェイピング）関数（ＦｗｄＭａｐ）と、前記フォワードマッピング関数（ＦｗｄＭａｐ）に対応するインバースマッピング（リシェイピング）関数（ＩｎｖＭａｐ）が使用できる。フォワードマッピング関数（ＦｗｄＭａｐ）は部分線形モデルを用いてシグナリングされることができ、例えば、部分線形モデルは１６個の断片（ｐｉｅｃｅｓ）またはビン（ｂｉｎｓ）を有することができる。前記断片は同一の長さを有することができる。一例で、インバースマッピング関数（ＩｎｖＭａｐ）は別途にシグナリングされないことがあり、代わりにフォワードマッピング関数（ＦｗｄＭａｐ）から導出できる。即ち、インバースマッピングはフォワードマッピングの関数でありえる。例えば、インバースマッピング関数はｙ＝ｘを基準にフォワードマッピング関数を対称させた関数でありえる。
イン－ループ（ルーマ）リシェイピング（ｒｅｓｈａｐｉｎｇ）はリシェイプされたドメインで入力ルーマ値（サンプル）を変更された値にマッピングすることに使用できる。リシェイプされた値は符号化され、そして復元後に本来の（マッピングされていない、リシェイプされていない）ドメインにまたマッピングできる。クロマレジデュアルスケーリングはルーマ信号とクロマ信号の間の差を補償するために適用できる。イン－ループリシェイピングはリシェイパモデルのためのハイレベルシンタックスを指定して遂行できる。リシェイパモデルシンタックスは部分線形モデル（ＰＷＬモデル）をシグナリングすることができる。部分線形モデルに基づいてフォワードルックアップテーブル（ＦｗｄＬＵＴ）及び／又はインバースルックアップテーブル（ＩｎｖＬＵＴ）が導出できる。一例として、フォワードルックアップテーブル（ＦｗｄＬＵＴ）が導出された場合、フォワードルックアップテーブル（ＦｗｄＬＵＴ）に基づいてインバースルックアップテーブル（ＩｎｖＬＵＴ）が導出できる。フォワードルックアップテーブル（ＦｗｄＬＵＴ）は入力ルーマ値Ｙｉを変更された値Ｙｒにマッピングし、インバースルックアップテーブル（ＩｎｖＬＵＴ）は変更された値に基づいた復元値Ｙｒを復元された値Ｙ’ｉにマッピングすることができる。復元された値Ｙ’ｉは入力ルーマ値Ｙｉに基づいて導出できる。
一例で、ＳＰＳは以下の表９のシンタックスを含むことができる。表９のシンタックスはツールイネーブリングフラグとしてｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇを含むことができる。ここで、ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇはリシェイパがＣＶＳ（ｃｏｄｅｄ ｖｉｄｅｏ ｓｅｑｕｅｎｃｅ）で使われるかを指定することに利用できる。即ち、ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇはＳＰＳでリシェイピングをイネーブリングするフラグでありえる。一例で、表９のシンタックスはＳＰＳの一部分でありえる。
Figure 0007471498000009
一例で、ｓｐｓ＿ｓｅｑ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ及びｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇが示すことができるセマンティックスは以下の表１０の通りである。
Figure 0007471498000010
一例で、タイルグループヘッダまたはスライスヘッダは以下の表１１または表１２のシンタックスを含むことができる。
Figure 0007471498000011
Figure 0007471498000012
前記表１１または表１２のシンタックスに含まれたシンタックス要素のセマンティックスは、例えば、次の表に開示された事項を含むことができる。
Figure 0007471498000013
Figure 0007471498000014
一例として、ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇがパーシングされれば、タイルグループヘッダはルックアップテーブル（ＦｗｄＬＵＴ及び／又はＩｎｖＬＵＴ）を構成することに使われる追加的なデータ（例えば、前記表１３または表１４に含まれた情報）をパーシングすることができる。このために、ＳＰＳリシェイパフラグの状態がスライスヘッダまたはタイルグループヘッダで確認できる。ｓｐｓ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅｄ＿ｆｌａｇが真（または１）の場合、追加的なフラグ、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）がパーシングできる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）の目的はリシェイパモデルの存在を指示することにありえる。例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が真（または１）の場合、現在タイルグループ（または、現在スライス）に対してリシェイパが存在すると指示できる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が偽（または０）の場合、現在タイルグループ（または、現在スライス）に対してリシェイパが存在しないと指示できる。
リシェイパが存在し、そしてリシェイパが現在タイルグループ（または、現在スライス）でイネーブルされれば、リシェイパモデル（例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（）またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（））はプロセシングされることができ、これに加えて、追加的なフラグ、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）もパーシングできる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）はリシェイパモデルが現在タイルグループ（または、スライス）に使われたかを指示することができる。例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）が０（または、偽）であれば、リシェイパモデルは現在タイルグループ（または、現在スライス）に使われないことと指示できる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）が１（または、真）であれば、リシェイパモデルは現在タイルグループ（または、スライス）に使われたことと指示できる。
一例として、例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）が真（または１）で、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）が偽（または０）でありえる。これは、リシェイパモデルが存在するが、現在タイルグループ（または、スライス）で使われていないことを意味する。このような場合、リシェイパモデルは次のタイルグループ（または、スライス）で使用できる。他の例として、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇが真（または１）でｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇが偽（または０）である場合もある。
リシェイパモデル（例えば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（）またはｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ（））及びｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）がパーシングされれば、クロマスケーリングのために必要な条件が存在するか否かが判断（評価）できる。前記の条件は条件１（現在タイルグループ／スライスがイントラ符号化されていないこと）及び／又は条件２（現在タイルグループ／スライスがルーマ及びクロマに対する２つの区分されたコーディングクワッドツリー構造に分割されていないこと、即ち現在タイルグループ／スライスがデュアルツリー構造でないこと）を含むことができる。条件１及び／又は条件２が真であり、及び／又はｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｅｎａｂｌｅ＿ｆｌａｇ）が真（または１）であれば、ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ）がパーシングできる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ）がイネーブルされれば（１または真であれば）、現在タイルグループ（または、スライス）に対してクロマレジデュアルスケーリングがイネーブルされることが指示できる。ｔｉｌｅ＿ｇｒｏｕｐ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ（または、ｓｌｉｃｅ＿ｒｅｓｈａｐｅｒ＿ｃｈｒｏｍａ＿ｒｅｓｉｄｕａｌ＿ｓｃａｌｅ＿ｆｌａｇ）がディスエーブルされれば（０または偽であれば）、現在タイルグループ（または、スライス）に対してクロマレジデュアルスケーリングがディスエーブルされることが指示できる。
前述したリシェイピングの目的はルックアップテーブル（ＦｗｄＬＵＴ及び／又はＩｎｖＬＵＴ）を構成するために必要なデータをパーシングするものである。一例で、前記パーシングされたデータに基づいて構成されたルックアップテーブルは許容可能なルーマ値範囲の分布を複数個のビン（例えば、１６個）に分けることができる。したがって、与えられたビン内にあるルーマ値は変更されたルーマ値にマッピングできる。
図１１は、例示的なフォワードマッピングを示すグラフを示す。図１１では例示的に５個のビンのみ図示される。
図１１を参照すると、ｘ軸は入力ルーマ値を示し、ｙ軸は変更された出力ルーマ値を示す。ｘ軸は５個のビンまたは断片に分けられ、各ビンは長さＬを有する。即ち、変更されたルーマ値にマッピングされた５個のビンは互いに同一な長さを有する。フォワードルックアップテーブル（ＦｗｄＬＵＴ）はタイルグループヘッダで利用可能なデータ（例えば、リシェイパデータ）を使用して構成されることができ、これからマッピングが容易になることができる。
一実施形態で、前記ビンのインデックスと関連した出力ピボット地点（ｏｕｔｐｕｔ ｐｉｖｏｔ ｐｏｉｎｔｓ）が計算できる。出力ピボット地点はルーマコードワードリシェイピングの出力範囲の最小及び最大境界を設定（マーキング）することができる。出力ピボット地点を計算する過程はコードワードの数の部分累積（ｐｉｅｃｅｗｉｓｅ ｃｕｍｕｌａｔｉｖｅ）分布関数に基づいて遂行できる。前記出力ピボット範囲は使われるビンの最大個数及びルックアップテーブル（ＦｗｄＬＵＴまたはＩｎｖＬＵＴ）のサイズに基づいて分割できる。一例として、前記出力ピボット範囲はビンの最大個数とルックアップテーブルのサイズの間の積に基づいて分割できる。例えば、ビンの最大個数とルックアップテーブルのサイズの間の積が１０２４の場合、前記出力ピボット範囲は１０２４個のエントリーに分割できる。前記出力ピボット範囲の分割はスケーリングファクタに基づいて（用いて）遂行（適用または達成）できる。一例で、スケーリングファクタは以下の数式１に基づいて導出できる。
Figure 0007471498000015
前記の数式１で、ＳＦはスケーリングファクタを示し、ｙ１及びｙ２は各々のビンに対応する出力ピボット地点を示す。また、ＦＰ＿ＰＲＥＣ及びｃは事前に決定された定数でありえる。前記数式１に基づいて決定されるスケーリングファクタはフォワードリシェイピングのためのスケーリングファクタと称されることができる。
他の実施形態で、インバースリシェイピング（インバースマッピング）と関連して、ビンの定義された範囲（例えば、ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘからｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍａｘ＿ｂｉｎ＿ｉｄｘまで）に対し、フォワードルックアップテーブル（ＦｗｄＬＵＴ）のマッピングされたピボット地点に対応する入力リシェイプされたピボット地点及びマッピングされたインバース出力ピボット地点（ビンインデックス＊初期コードワードの数で与えられる）がパッチされる。他の例で、スケーリングファクタ（ＳＦ）は以下の数式２に基づいて導出できる。
Figure 0007471498000016
前記の数式２で、ＳＦはスケーリングファクタを示し、ｘ１及びｘ２は入力ピボット地点を示し、ｙ１及びｙ２は各々の断片（ビン）に対応する出力ピボット地点を示す。ここで、入力ピボット地点はフォワードルックアップテーブル（ＦｗｄＬＵＴ）に基づいてマッピングされたピボット地点であり、そして出力ピボット地点はインバースルックアップテーブル（ＩｎｖＬＵＴ）に基づいてインバースマッピングされたピボット地点でありえる。また、ＦＰ＿ＰＲＥＣは事前に決定された定数でありえる。数式２のＦＰ＿ＰＲＥＣは数式１のＦＰ＿ＰＲＥＣと同一または相異することができる。前記数式２に基づいて決定されるスケーリングファクタはインバースリシェイピングのためのスケーリングファクタと称されることができる。インバースリシェイピングの途中に、数式２のスケーリングファクタに基づいて入力ピボット地点の分割が遂行できる。分割された入力ピボット地点に基づいて、０から最小ビンインデックス（ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ）まで及び／又は最小ビンインデックス（ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ）から最大ビンインデックス（ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ）までの範囲に属するビンインデックスのために最小及び最大ビン値に対応するピボット値が指定される。
一例で、ＬＭＣＳデータ（ｌｍｃｓ＿ｄａｔａ）はＡＰＳに含まれることができる。ＬＭＣＳデータを含むＡＰＳは図７の階層構造として構成できる。ＡＰＳのセマンティックスは、例えば、コーディングのために３２個のＡＰＳがシグナリングできる。
次の表は、本文書の一実施形態に従う例示的なＡＰＳのシンタックス及びセマンティックスを示す。
Figure 0007471498000017
Figure 0007471498000018
前記の表１５を参照すると、ＡＰＳでＡＰＳパラメータのタイプ情報（ｅｘ．ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ）がパーシング／シグナリングできる。ＡＰＳパラメータのタイプ情報はａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの以後にパーシング／シグナリングできる。
前記の表１５に含まれたａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ、ＡＬＦ＿ＡＰＳ及びＬＭＣＳ＿ＡＰＳは、表１６内に含まれた表３．２により説明できる。即ち、前記表１５に含まれたａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅによってＡＰＳに適用されるＡＰＳパラメータのタイプは表１６内に含まれた表３．２のように設定できる。表１５に含まれたシンタックス要素は表８を参照して説明できる。ＡＰＳに関連した説明は表１乃至表８と共に前述した説明により裏付けられる。
表１６を参照すると、例えばａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅは該当ＡＰＳパラメータのタイプを分類するためのシンタックス要素でありえる。ＡＰＳパラメータのタイプはＡＬＦパラメータ及びＬＭＣＳパラメータを含むことができる。表１６を参照すると、タイプ情報（ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ）の値が０の場合、ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅの名称はＡＬＦ＿ＡＰＳ（ｏｒ ＡＬＦ ＡＰＳ）に定まり、ＡＰＳパラメータのタイプはＡＬＦパラメータに定まることができる（ＡＰＳパラメータは、ＡＬＦパラメータを示すことができる）。この場合、ＡＰＳにＡＬＦデータフィールド（ｉ．ｅ． ａｌｆ＿ｄａｔａ（））がパーシング／シグナリングできる。タイプ情報（ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅ）の値が１の場合、ａｐｓ＿ｐａｒａｍｓ＿ｔｙｐｅの名称はＬＭＣＳ＿ＡＰＳ（or ＬＭＣＳ ＡＰＳ）に定まり、そしてＡＰＳパラメータのタイプはＬＭＣＳパラメータに定まることができる（ＡＰＳパラメータは、ＬＭＣＳパラメータを示すことができる）。この場合、ＡＰＳにＬＭＣＳデータフィールド（ｉ．ｅ． ｌｍｃｓ＿ｄａｔａ()）がパーシング／シグナリングできる。
以下の表１７及び／又は表１８は一実施形態に従うリシェイパモデルのシンタックスを示す。前記リシェイパモデルはＬＭＣＳモデルと呼ばれることができる。ここで、リシェイパモデルは例示的にタイルグループリシェイパとして説明されたが、必ず本実施形態により本明細書が制限されるのではない。例えば、前記リシェイパモデルはＡＰＳに含まれることもでき、またはタイルグループリシェイパモデルはスライスリシェイパモデルまたはＬＭＣＳデータ（ＬＭＣＳデータフィールド）と称されることもできる。また、接頭語（ｐｒｅｆｉｘ）ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌまたはＲｓｐはｌｍｃｓと混用して使用できる。例えば、次の表及び以下の説明でｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ、ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｄｅｌｔａ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ、ｒｅｓｈａｐｅｒ＿ｍｏｄｅｌ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ、ＲｓｐＣＷ、 ＲｓｅｐＤｅｌｔａＣＷは、各々ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓ＿ｄｅｌｔａ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓＣＷ、ｌｍｃｓＤｅｌｔａＣＷと混用して使用できる。
前記の表１５に含まれたＬＭＣＳデータ（ｌｍｃｓ＿ｄａｔａ（））またはリシェイパモデル（タイルグループリシェイパまたはスライスリシェイパ）は次の表に含まれたシンタックスのように表現できる。
Figure 0007471498000019
Figure 0007471498000020
前記の表１７及び／又は表１８のシンタックスに含まれたシンタックス要素のセマンティックスは、例えば、次の表に開示された事項を含むことができる。
Figure 0007471498000021
Figure 0007471498000022
Figure 0007471498000023
Figure 0007471498000024
本文書に従うルーマサンプルに対するインバースマッピング手続きは以下の表のような標準文書形式で記述できる。
Figure 0007471498000025
本文書に従うルーマサンプルに対するピースワイズ関数インデックス（ｐｉｅｃｅｗｉｓｅ ｆｕｎｃｔｉｏｎ ｉｎｄｅｘ）手続きの識別は以下の表のような標準文書形式で記述できる。表２２で、ｉｄｘＹＩｎｖはインバースマッピングインデックスと称されることができ、インバースマッピングインデックスは復元ルーマサンプル（ｌｕｍａＳａｍｐｌｅ）に基づいて導出できる。
Figure 0007471498000026
前述した実施形態及び例示に基づいてルーママッピングが遂行されることができ、前述したシンタックス及びそれに含まれた構成要素は単に例示的な表現であって、実施形態が前述した表や数式により制限されるのではない。以下、ルーママッピングに基づいてクロマレジデュアルスケーリング（レジデュアルサンプルのクロマ成分に対するスケーリング）を遂行する方法が説明される。
（ルーマ－依存的な（ｌｕｍａ－ｄｅｐｅｎｄｅｎｔ））クロマレジデュアルスケーリングはルーマサンプル及びこれに対応するクロマサンプルの間の差を補償するためである。例えば、クロマレジデュアルスケーリングがイネーブルされるか否かはタイルグループレベルまたはスライスグループレベルでシグナリングできる。一例で、ルーママッピングがイネーブルされ、デュアルツリー分割（ｄｕａｌ ｔｒｅｅ ｐａｒｔｉｔｉｏｎｉｎｇ）が現在タイルグループに適用されないと、ルーマ－依存的なクロマレジデュアルスケーリングがイネーブルされるか否かを指示するために追加的なフラグがシグナリングできる。他の例で、ルーママッピングが使用されないか、 またはデュアルツリー分割が現在タイルグループに使用されないと、ルーマ－依存的なクロマレジデュアルスケーリングがディスエーブルできる。更に他の例で、クロマレジデュアルスケーリングは４より小さいか等しいサイズを有するクロマブロックに対しては常にディスエーブルできる。
クロマレジデュアルスケーリングは該当ルーマ予測ブロック（イントラ予測モード及び／又はインター予測モードが適用された予測ブロックのルーマ成分）の平均値を基にすることができる。エンコーダ端及び／又はデコーダ端でのスケーリング演算は以下の数式３に基づいて固定少数点整数演算で具現できる。
Figure 0007471498000027
前述した数式３で、ｃ’はスケーリングされたクロマレジデュアルサンプル（レジデュアルサンプルのスケーリングされたクロマ成分）を示し、ｃはクロマレジデュアルサンプル（レジデュアルサンプルのクロマ成分）を示し、ｓはクロマレジデュアルスケーリングファクタを示し、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは事前に決定された定数を示すことができ、例えば、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは１１でありえる。
図１２は、本文書の一実施形態に従ってクロマレジデュアルスケーリングインデックスを導出する方法を図示する流れ図である。図１２と共に説明される方法は図９及びそれと関連した説明に含まれた表、数式、変数、アレイ、関数に基づいて遂行できる。
ステップＳ１２１０で、予測モード情報に基づいて予測モードがイントラ予測モードか、またはインター予測モードかが判断できる。予測モードがイントラ予測モードであれば、現在ブロックまたは現在ブロックの予測サンプルは既にリシェイプされた（マッピングされた）領域にあることと見なされる。予測モードがインター予測モードであれば、現在ブロックまたは現在ブロックの予測サンプルは本来の（マッピングされていない、リシェイプされていない）領域にあることと見なされる。
ステップＳ１２２０で、予測モードがイントラ予測モードの場合、現在ブロック（または、現在ブロックのルーマ予測サンプル）の平均が計算（導出）できる。即ち、既にリシェイプされた領域にある現在ブロックの平均が直接的に計算される。平均は平均値と称されることができる。
ステップＳ１２２１で、予測モードがインター予測モードの場合、現在ブロックのルーマ予測サンプルに対してフォワードリシェイピング（フォワードマッピング）が遂行（適用）できる。フォワードリシェイピングを通じて、インター予測モードに基づいたルーマ予測サンプルは本来の領域からリシェイプされた領域にマッピングできる。一例で、ルーマ予測サンプルに対するフォワードリシェイピングは前述した表１７及び／又は表１８と共に説明されたＬＭＣＳデータフィールドまたはリシェイパモデルに基づいて遂行できる。
ステップＳ１２２２で、（フォワード）リシェイプされた、または（フォワード）マッピングされたルーマ予測サンプルの平均が計算（導出）できる。即ち、（フォワード）リシェイプされた、または（フォワード）マッピングされた結果に対して平均化過程が遂行できる。
ステップＳ１２３０で、クロマレジデュアルスケーリングインデックスが計算できる。予測モードがイントラ予測モードの場合、前記予測ルーマサンプルの平均に基づいて前記クロマレジデュアルスケーリングインデックスが計算できる。予測モードがインター予測モードの場合、フォワードリシェイプされたルーマ予測サンプルの平均に基づいて前記クロマレジデュアルスケーリングインデックスが計算できる。
一実施形態で、前記クロマレジデュアルスケーリングインデックスはｆｏｒループ構文に基づいて計算できる。以下の表は前記クロマレジデュアルスケーリングインデックスの導出（計算）のための例示的なｆｏｒループ構文を示す。
Figure 0007471498000028
前記の表２３で、ｉｄｘＳは前記クロマレジデュアルスケーリングインデックスを示し、ｉｄｘＳはｉｆ構文の条件を満たすクロマレジデュアルスケーリングインデックスが求められたかを識別するインデックスを示し、Ｓは事前に決定された定数を示し、そしてＭａｘＢｉｎＩｄｘは許容可能な最大ビンインデックスを示す。 ＲｅｓｈａｐＰｉｖｏｔ［ｉｄｘＳ＋１］（言い換えると、 ＬｍｃｓＰｉｖｏｔ［ｉｄｘＳ＋１］）は前述した表１９及び／又は表２０に基づいて導出できる。
一実施形態で、クロマレジデュアルスケーリングファクタは前記クロマレジデュアルスケーリングインデックスに基づいて導出できる。以下の数式４は前記クロマレジデュアルスケーリングファクタの導出のための一例である。
Figure 0007471498000029
前記の数式４で、ｓは前記クロマレジデュアルスケーリングファクタを示し、そしてＣｈｒｏｍａＳｃａｌｅＣｏｅｆは前述した表１９及び／又は表２０に基づいて導出された変数（または、アレイ）でありえる。
前述したように、前記参照サンプルの平均ルーマ値を獲得することができ、前記平均ルーマ値に基づいてクロマレジデュアルスケーリングファクタを導出することができる。前記クロマレジデュアルスケーリングファクタに基づいてクロマ成分レジデュアルサンプルに対するスケーリングを遂行し、スケーリングされたクロマ成分レジデュアルサンプルに基づいてクロマ成分復元サンプルが生成できることは前述した通りである。
本文書の一実施形態では前述したＬＭＣＳを効率のよく適用するためのシグナリング構造が提案される。本文書の一実施形態によると、例えば、ＬＭＣＳデータはＨＬＳ（例えば、ＡＰＳ）に含まれることができ、ＡＰＳの下位レベルであるヘッダ情報（ｅｘ．ピクチャヘッダ、スライスヘッダ）を通じて、参照されるＡＰＳ ＩＤをシグナリングすることによりＬＭＣＳモデル（リシェイパモデル）を適応的に導出することができる。前記ＬＭＣＳモデルはＬＭＣＳパラメータに基づいて導出できる。また、例えば前記ヘッダ情報を通じて複数のＡＰＳ ＩＤがシグナリングされることができ、これを通じて同一ピクチャ／スライス内のブロック単位で互いに異なるＬＭＣＳモデルを適用することができる。
本文書に従う一実施形態ではＬＭＣＳに必要とする演算を効率よく遂行する方法が提案される。表１９及び／又は表２０で前述したセマンティックスによれば、ＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］の導出のために断片長さ（ｐｉｅｃｅ ｌｅｎｇｔｈ）ｌｍｃｓＣＷ［ｉ］による割り算演算が要求される。但し、前記断片長さが２の累乗（ｐｏｗｅｒ ｏｆ ２）でない場合、前記割り算演算はビットシフティングで遂行できない。
例えば、ＩｎｖＳｃａｌｅＣｏｅｆｆの計算は１つのスライス当たり最大１６回の割り算演算が必要でありえる。前述した表１９及び／又は表２０による場合、１０ビットコーディングの場合、 ｌｍｃｓＣＷ［ｉ］の範囲は８から５１１までであるので、ＬＵＴを使用してｌｍｃｓＣＷ［ｉ］による割り算演算を具現するにはＬＵＴのサイズが５０４にならなければならない。また、１２ビットコーディングの場合、ｌｍｃｓＣＷ［ｉ］の範囲は３２から２０４７までであるので、ＬＵＴを使用してｌｍｃｓＣＷ［ｉ］による割り算演算を具現するにはＬＵＴサイズが２０１６にならなければならない。即ち、割り算演算はハードウェア具現において、相当な費用をもたらすことがあり、したがって割り算演算は可能であれば省略されなければならない。
本実施形態の一観点で、ｌｍｃｓＣＷ［ｉ］を固定された数（または、事前に決定された数または所定の数（ｐｒｅ－ｄｅｆｉｎｅｄ ｎｕｍｂｅｒ ｏｒ ｐｒｅ ｄｅｔｅｒｍｉｎｅｄ ｎｕｍｂｅｒ））の倍数に制限することができる。それによって、割り算演算のためのＬＵＴ（ｌｏｏｋｕｐ ｔａｂｌｅ）が（ＬＵＴの容量またはサイズが）減少できる。例えば、ｌｍｃｓＣＷ［ｉ］が２の倍数であれば、割り算演算を代替するためのＬＵＴのサイズが半分に減ることができる。
本実施形態の他の観点で、高いインターナルビット深度コーディングが提案される。高いインターナルビット深度コーディングはｌｍｃｓＣＷ［ｉ］の範囲制限の上位条件でありえる。例えば、コーディングビット深度が１０より高い場合にｌｍｃｓＣＷ［ｉ］は１＜＜（ＢｉｔＤｅｐｔｈＹ－１０）の倍数に制限できる。ここで、ＢｉｔＤｅｐｔｈＹはルーマビット深度でありえる。これによって、ｌｍｃｓＣＷ［ｉ］の可能な値はコーディングビット深度によって変わらないようになり、したがって、前記ＩｎｖＳｃａｌｅＣｏｅｆｆ計算のためのＬＵＴのサイズはコーディングビット深度が高くても増加しなくなる。一例で、１２ビットインターナルコーディングビット深度に対して、ｌｍｃｓＣＷ［ｉ］の値は４の倍数に制限されることができ、これによって割り算演算を代替するためのＬＵＴのサイズは１０ビットコーディングのために使われるＬＵＴのサイズと同一でありえる。本観点は単独でも実施可能であるが、前述した観点と組み合わせて実施されることもできる。
本実施形態の他の観点で、ｌｍｃｓＣＷ［ｉ］をより狭い範囲に制限することができる。例えば、ｌｍｃｓＣＷ［ｉ］は（ＯｒｇＣＷ＞＞１）から（ＯｒｇＣＷ＜＜１）－１までの範囲内に制限できる。１０ビットコーディングの場合、ｌｍｃｓＣＷ［ｉ］の範囲は［３２、１２７］であって、９６のサイズを有するＬＵＴだけでもＩｎｖＳｃａｌｅＣｏｅｆｆを計算することができる。
本実施形態の更に他の観点で、ｌｍｃｓＣＷ［ｉ］を２の累乗に近接する数値に近似してリシェイパの設計に使用することができる。これによって、インバースマッピング手続きでの割り算演算はビットシフティングにより遂行できる（代替できる）。
本文書に従う一実施形態ではＬＭＣＳコードワード範囲の制限が提案される。前述した表８によると、ＬＭＣＳコードワードの値は（ＯｒｇＣＷ＞＞３）から（ＯｒｇＣＷ＜＜３）－１までの範囲内にある。ＬＭＣＳ断片長さの広い範囲によって、ＲｓｐＣＷ［ｉ］とＯｒｇＣＷの間の大きい差が発生すれば視覚的劣化がもたらされる。
本文書に従う一実施形態によると、ＬＭＣＳ ＰＷＬマッピングのコードワードを狭い範囲に制限することが提案される。例えば、ｌｍｃｓＣＷ［ｉ］の範囲は（ＯｒｇＣＷ＞＞１）から（ＯｒｇＣＷ＜＜１）－１までの範囲にありえる。
本文書に従う一実施形態では、ＬＭＣＳでのクロマレジデュアルスケーリングのために単一クロマレジデュアルスケーリングファクタの使用が提案される。クロマレジデュアルスケーリングファクタ導出のための既存の方法は、該当ルーマブロックの平均値を使用し、インバースルーママッピングでの各断片の傾きを該当スケーリングファクタとして導出した。また、該当ルーマブロックの利用可能性を要求するピースワイズインデックスを識別するための手続きによってレイテンシーの問題が発生した。これは、ハードウェア具現において好ましくない。本文書の一実施形態を通じて、クロマブロックでのスケーリングはルーマブロック値に依存しなくなり、ピースワイズインデックスの識別が必要でないことがある。したがって、レイテンシー問題無しでＬＭＣＳでのクロマレジデュアルスケーリング手続きが遂行できる。
本文書に従う一実施形態で、単一クロマスケーリングファクタはルーマＬＭＣＳ情報に基づいてエンコーダとデコーダ全てから導出できる。ＬＭＣＳルーマモデルが受信されれば、クロマレジデュアルスケーリングファクタがアップデートできる。例えば、ＬＭＣＳモデルがアップデートされる場合に単一クロマレジデュアルスケーリングファクタがアップデートできる。
以下の表は本実施形態に従って単一クロマスケーリングファクタの獲得のための一例を示す。
Figure 0007471498000030
表２４を参照すると、単一クロマスケーリングファクタ（ｅｘ． ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆまたはＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）はｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘの間の範囲内の全ての断片（ｐｉｅｃｅｓ）のインバースルーママッピング傾きを平均化することによって獲得できる。
図１３は、本文書の一実施形態に従うピボットポイントの線形フィッティングを示す。図１３ではピボットポイントＰ１、Ｐｓ、Ｐ２が図示される。以下の実施形態またはそれらの例示は図１３を参照して説明される。
本実施形態の一例で、ピボットポイントｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１の間のルーマＰＷＬマッピングの線形近似に基づいて単一クロマスケーリングファクタが獲得できる。即ち、線形マッピングのインバース傾きがクロマレジデュアルスケーリングファクタに使用できる。例えば、図１３の線形ライン１（ｌｉｎｅａｒ ｌｉｎｅ １）はピボットポイントＰ１、Ｐ２を繋ぐ一直線でありえる。図１３を参照すると、Ｐ１で入力値はｘ１であり、マッピングされた値は０であり、そしてＰ２で入力値はｘ２であり、マッピングされた値はｙ２である。線形ライン１のインバース傾き（インバーススケール）は（ｘ２－ｘ１）／ｙ２であり、そして単一クロマスケーリングファクタＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅはピボットポイントＰ１、Ｐ２の入力値及びマッピングされた値、及び次の数式に基づいて計算できる。
Figure 0007471498000031
数式５で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣはシフトファクタ（ｓｈｉｆｔ ｆａｃｔｏｒ）を示し、例えばＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは事前に決定された定数でありえる。一例で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣ は１１でありえる。
本実施形態に従う他の例で、図１３を参照すると、ピボットポイントＰｓで入力値はｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１であり、マッピングされた値はｙｓである。これによって、線形ライン１のインバース傾き（インバーススケール）は（ｘｓ－ｘ１）／ｙｓで計算されることができ、単一クロマスケーリングファクタＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅはピボットポイントＰ１、Ｐｓの入力値及びマッピングされた値、及び次の数式に基づいて計算できる。
Figure 0007471498000032
数式６で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣはシフトファクタ（ビットシフティングのためのファクタ）を示し、例えばＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは事前に決定された定数でありえる。一例で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは１１であって、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣに基づいてインバーススケールに対するビットシフティングが遂行できる。
本実施形態に従う他の例で、単一クロマレジデュアルスケーリングファクタは線形近似ライン（ｌｉｎｅａｒ ａｐｐｒｏｘｉｍａｔｉｏｎ ｌｉｎｅ）に基づいて導出できる。線形近似ラインの導出のための一例は、ピボットポイント（ｅｘ．ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１）の線形的な連結を含むことができる。例えば、線形トレンドの結果はＰＷＬマッピングのコードワードで示すことができる。Ｐ２でのマッピングされた値ｙ２は全てのビン（断片）のコードワードの和であって、そしてＰ２での入力値とＰ１での入力値の間の差（ｘ２－ｘ１）はＯｒｇＣＷ＊（ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ－ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１）（ＯｒｇＣＷは前述した表１９及び／又は表２０参照）でありえる。以下の表は前述した実施形態に従って単一クロマスケーリングファクタを獲得する例示を示す。
Figure 0007471498000033
表２５を参照すると、単一クロマスケーリングファクタ（ｅｘ． ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）は２つのピボットポイント（ｉ．ｅ．, ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ）から獲得できる。例えば、線形マッピングの傾き逆数（ｉｎｖｅｒｓｅ ｓｌｏｐｅ ｏｆ ｌｉｎｅａｒ ｍａｐｐｉｎｇ）はクロマスケーリングファクタとして使用できる。
本実施形態の更に他の例で、単一クロマスケーリングファクタはピボットポイントの線形フィッティング（ｌｉｎｅａｒ ｆｉｔｔｉｎｇ）により獲得されて線形フィッティングと既存ＰＷＬマッピングの間のエラー（または、平均自乗エラー）を最小化することができる。本例示は単純にｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘの２つのピボットポイントを単純に連結することより正確でありえる。最適の線形マッピングを探すための多様な方法が存在することができ、以下では一例が説明される。
一例で、最小自乗エラーの和を最小化するための線形トレンド式（ｌｉｎｅａｒ ｆｉｔｔｉｎｇ ｅｑｕａｔｉｏｎ）ｙ＝ｂ１＊ｘ＋ｂ０のパラメータｂ１、ｂ０は次の数式７及び／又は数式８に基づいて計算できる。
Figure 0007471498000034
Figure 0007471498000035
ここで、ｘは原本ルーマ値であり、ｙはリシェイプされたルーマ値を示す。具体的に、
Figure 0007471498000036
、
Figure 0007471498000037
は各々ｘ、ｙの平均を示し、ｘｉ、ｙｉはｉ番目のピボットポイントの値を示す。
図１３を参照すると、線形マッピングを識別するための更に他の近似が次のように与えられることができる：
－ ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１でのＰＷＬマッピングのピボットポイントを連結することによって、線形ライン１獲得、ＯｒｇＣＷの倍数である入力値を有する線形ラインでのｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｉ］を計算
－ 線形ライン１及びＰＷＬマッピングを用いてピボットポイントのマッピングされた値の間の差を合算
－ 平均差（ａｖｇＤｉｆｆ）を獲得
－ 平均差によって（ｅ．ｇ． ２＊ａｖｇＤｉｆｆ）線形ラインの最後のピボットポイントを調整
－ 調整された線形ラインの傾き逆数（ｉｎｖｅｒｓｅ ｓｌｏｐｅ）をクロマレジデュアルスケールとして使用
前述した線形フィッティングによって、クロマスケーリングファクタ（ｉ．ｅ．, フォワードマッピングの傾き逆数（ｉｎｖｅｒｓｅ ｓｌｏｐｅ ｏｆ ｆｏｒｗａｒｄ ｍａｐｐｉｎｇ））は次の数式９または数式１０に基づいて導出（獲得）できる。
Figure 0007471498000038
Figure 0007471498000039
前述した数式で、ｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｉ］は線形マッピングのマッピングされた値でありえる。線形マッピングを通じて、最小及び最大ビンインデックスの間のＰＷＬマッピングの全ての断片は同一なＬＭＣＳコードワード（ｌｍｃｓＣＷ）を有することができる。即ち、ｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］はｌｍｃｓＣＷ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ］と同一でありえる。
また、数式９、数式１０で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣはシフトファクタ（ビットシフティングのためのファクタ）を示し、例えばＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは事前に決定された定数でありえる。一例で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは１１でありえる。
単一クロマレジデュアルスケーリングファクタ（ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を通じて、該当ルーマブロックの平均を計算する必要がなく、そしてＰＷＬ線形マッピングでインデックスを探す必要がない。したがって、クロマレジデュアルスケーリングを用いたコーディングの効率が高まることができる。
前述した本実施形態に従うＬＭＣＳデータに関するセマンティックス及び／又はクロマサンプルに対するルーマ依存的なクロマレジデュアルスケーリング手続きは、次の表のように標準文書形式に記述できる。
Figure 0007471498000040
Figure 0007471498000041
本文書の他の実施形態で、エンコーダは単一クロマスケーリングファクタに関するパラメータを決定することができ、前記パラメータをデコーダにシグナリングすることができる。シグナリングを通じて、エンコーダはクロマレジデュアルスケーリングファクタを導出するためにエンコーダで利用可能な他の情報を活用可能にすることができる。本実施形態は、クロマレジデュアルスケーリングレイテンシー問題を除去することを目的とする。
例えば、クロマレジデュアルスケーリングファクタを決定するために使われる線形マッピングを識別するための手続きは次の通り与えられることができる：
－ ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１でのＰＷＬマッピングのピボットポイントを連結することによって、線形ライン１獲得、ＯｒｇＣＷの倍数である入力値を有する線形ラインでのｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｉ］を計算
－ 線形ライン１及びルーマＰＷＬマッピングのピボットポイントを用いてピボットポイントのマッピングされた値の間の差の加重和を獲得
－ 加重値が適用された（ｗｅｉｇｈｔｅｄ）平均差（ａｖｇＤｉｆｆ）を獲得
－ 加重値が適用された平均差によって（ｅ．ｇ．２＊ａｖｇＤｉｆｆ）線形ライン１の最後のピボットポイントを調整
－ 調整された線形ラインの傾き逆数（ｉｎｖｅｒｓｅ ｓｌｏｐｅ）をクロマレジデュアルスケールとして使用
以下の表はクロマスケーリングファクタ導出のためにｙ値をシグナリングする例示的なシンタックスを示す。
Figure 0007471498000042
表２８で、シンタックス要素ｌｍｃｓ＿ｃｈｒｏｍａ＿ｓｃａｌｅはＬＭＣＳクロマレジデュアルスケーリングのために使われる単一クロマ（レジデュアル）スケーリングファクタを明示（ｓｐｅｃｉｆｙ）することができる（ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ＝ｌｍｃｓ＿ｃｈｒｏｍａ＿ｓｃａｌｅ）。即ち、クロマレジデュアルスケーリングファクタに関する情報が直接的にシグナリングされ、前記シグナリングされた情報がクロマレジデュアルスケーリングファクタに導出できる。言い換えると、シグナリングされたクロマレジデュアルスケーリングファクタに関する情報の値が単一クロマレジデュアルスケーリングファクタの値に（直接的に）導出できる。ここで、シンタックス要素ｌｍｃｓ＿ｃｈｒｏｍａ＿ｓｃａｌｅは他のＬＭＣＳデータ（例えば、コードワードの絶対値、符号に関するシンタックス要素ｅｔｃ．）と共にシグナリングできる。
代案的に、エンコーダはクロマレジデュアルスケーリングファクタを導出するために必要なパラメータのみをデコーダにシグナリングすることができる。デコーダからクロマレジデュアルスケーリングファクタを導出するために、入力値ｘとマッピングされた値ｙが必要である。ｘ値はビン長さを示すので、既にデコーダ端にも知られた値であるので、シグナリングされる必要がない。結局、クロマレジデュアルスケーリングファクタの導出のためにはただｙ値のみシグナリングされる必要がある。ここで、ｙ値は線形マッピングにおける任意のピボットポイントのマッピングされた値でありえる（ｅ．ｇ． 図１３のＰ２あるいはＰｓのマッピングされた値）。
次の表はクロマレジデュアルスケーリングファクタ導出のためにマッピングされた値をシグナリングする例示を示す。
Figure 0007471498000043
Figure 0007471498000044
前述した表２９及び表３０のシンタックスのうちの１つがエンコーダとデコーダにより明示される（ｓｐｅｃｉｆｉｅｄ）任意の線形ピボットポイントでｙ値をシグナリングするために使用できる。即ち、エンコーダ及びデコーダは互いに同一なシンタックスを使用してｙ値を導出することができる。
まず、表２９に従う実施形態が説明される。表２９で、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒはＰｓまたはＰ２にマッピングされた値を示すことができる。即ち、表２９に従う実施形態でｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒを通じて固定された数字がシグナリングできる。
本実施形態に従う一例で、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒが１つのビン（ｉ．ｅ． 図１３のＰｓでのｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］）にマッピングされた値を示すと、クロマスケーリングファクタは次の数式に基づいて導出できる。
Figure 0007471498000045
本実施形態に従う他の例で、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒがｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１（ｉ．ｅ． 図１３のＰ２でのｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１］）を示すと、クロマスケーリングファクタは次の数式に基づいて導出できる。
Figure 0007471498000046
前述した数式で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣはシフトファクタ（ビットシフティングのためのファクタ）を示し、例えばＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは事前に決定された定数でありえる。一例で、ＣＳＣＡＬＥ＿ＦＰ＿ＰＲＥＣは１１でありえる。
次に、表３０に従う実施形態が説明される。本実施形態で、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒは固定された数と関連したデルタ値（ｉ．ｅ． ｌｍｃｓ＿ｄｅｌｔａ＿ａｂｓ＿ｃｗ＿ｌｉｎｅａｒ、ｌｍｃｓ＿ｄｅｌｔａ＿ｓｉｇｎ＿ｃｗ＿ｌｉｎｅａｒ＿ｆｌａｇ）としてシグナリングされることもできる。本実施形態の一例で、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒがｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］（ｉ．ｅ． 図１３のＰｓ）でのマッピングされた値を示す場合、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒ＿ｄｅｌｔａ及びｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒは次の数式に基づいて導出できる。
Figure 0007471498000047
Figure 0007471498000048
本実施形態の他の例で、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒがｌｍｃｓ＿ｐｉｖｏｔｓ＿ｌｉｎｅａｒ［ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ＋１］（ｉ．ｅ． 図１３のＰ２）でのマッピングされた値を示す場合、ｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒ＿ｄｅｌｔａ及びｌｍｃｓ＿ｃｗ＿ｌｉｎｅａｒは次の数式に基づいて導出できる。
Figure 0007471498000049
Figure 0007471498000050
前述した数式で、ＯｒｇＣＷは前述した表１９及び／又は表２０に基づいて導出された値でありえる。
前述した本実施形態に従うＬＭＣＳデータに関するセマンティックス及び／又はクロマサンプルに対するルーマ依存的なクロマレジデュアルスケーリング手続きは次の表のように標準文書形式で記述できる。
Figure 0007471498000051
Figure 0007471498000052
図１４は、本文書の一実施形態に従う線形リシェイピング（または、線形リシェイパ、線形マッピング）の一例を示す。即ち、本文書の一実施形態ではＬＭＣＳで線形リシェイパの使用が提案される。例えば、図１４の例示はフォワード線形リシェイピング（マッピング）に関連できる。
図１４を参照すると、線形リシェイパは２つのピボットポイント（ｉ．ｅ．, Ｐ１、Ｐ２）を含むことができる。Ｐ１とＰ２は入力とマッピングされた値を示すことができ、例えば、Ｐ１は（ｍｉｎＩｎｐｕｔ、０）であって、そしてＰ２は（ｍａｘＩｎｐｕｔ、ｍａｘＭａｐｐｅｄ）でありえる。ここでｍｉｎＩｎｐｕｔは最小入力値を示し、ｍａｘＩｎｐｕｔは最大入力値を示す。入力値がｍｉｎＩｎｐｕｔより小さいか等しい場合は０にマッピングされ、入力値がｍａｘＩｎｐｕｔより大きい場合はｍａｘＭａｐｐｅｄにマッピングされる。ｍｉｎＩｎｐｕｔとｍａｘＩｎｐｕｔの間の入力（ルーマ）値は他の値に線形的にマッピングできる。図１４は、マッピングの一例を示す。ピボットポイントＰ１、Ｐ２はエンコーダで決定されることができ、このためにピースワイズ線形マッピングを近似するために線形フィッティングが使用できる。
本文書に従う他の実施形態で、線形リシェイパをシグナリングする方法の更に他の例が提案できる。線形リシェイパモデルのピボットポイントＰ１、Ｐ２は明示的にシグナリングできる。次の表は本例示によって線形リシェイパモデルを明示的にシグナリングするシンタックス及びセマンティックスの一例を示す。
Figure 0007471498000053
Figure 0007471498000054
表３３及び表３４を参照すると、シンタックス要素ｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔに基づいて第１のピボットポイントの入力値が導出されることができ、そしてシンタックス要素ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔに基づいて第２のピボットポイントの入力値が導出できる。第１のピボットポイントのマッピングされた値は事前に決定された値（エンコーダ及びデコーダ全てに知られた値）であって、例えば０でありえる。シンタックス要素ｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄに基づいて第２のピボットポイントのマッピングされた値が導出できる。即ち、表３３のシンタックスに基づいてシグナリングされた前記情報に基づいて線形リシェイパモデルが明示的に（直接的に）シグナリングできる。
代案的に、ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ及びｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄはデルタ値としてシグナリングできる。次の表はデルタ値として線形リシェイパモデルをシグナリングするシンタックス及びセマンティックスの一例を示す。
Figure 0007471498000055
Figure 0007471498000056
前記表３６を参照すると、シンタックス要素ｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔに基づいて第１のピボットポイントの入力値が導出できる。例えば、ｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔは０のマッピングされた値を有することができる。ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ＿ｄｅｌｔａは第２のピボットポイントの入力値と最大ルーマ値（ｉ．ｅ．,（１＜＜ｂｉｔｄｅｐｔｈＹ）－１）の間の差を示すことができる。ｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ＿ｄｅｌｔａは第２のピボットポイントのマッピングされた値と最大ルーマ値（ｉ．ｅ．,（１＜＜ｂｉｔｄｅｐｔｈＹ）－１）の間の差を示すことができる。
本文書の一実施形態によると、前述した線形リシェイパに関する例示に基づいてルーマ予測サンプルのためのフォワードマッピング、ルーマ復元サンプルのためのインバースマッピング、クロマレジデュアルスケーリングが遂行できる。一例で、線形リシェイパ基盤インバースマッピングでルーマ（復元）サンプル（ピクセル）のためのインバーススケーリングのためにただ１つのインバーススケーリングファクタが必要でありえる。これは、フォワードマッピング、クロマレジデュアルスケーリングでも同様である。即ち、ビンインデックスiに対するＳｃａｌｅＣｏｅｆｆ［ｉ］、ＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］ ａｎｄ ＣｈｒｏｍａＳｃａｌｅＣｏｅｆｆ［ｉ］を決定するステップはただ１つのファクタを用いることに代替できる。ここで、１つのファクタとは、線形マッピングの（フォワード）傾きまたはインバース傾きが固定少数点で表現されたことを称することができる。一例で、インバースルーママッピングスケーリングファクタ（ルーマ復元サンプルのためのインバースマッピングでのインバーススケーリングファクタ）は次の数式のうち、少なくとも１つに基づいて導出できる。
Figure 0007471498000057
Figure 0007471498000058
Figure 0007471498000059
数式１７のｌｍｃｓＣＷＬｉｎｅａｒは前述した表３１から導出できる。数式１８及び数式１９のｌｍｃｓＣＷＬｉｎｅａｒＡＬＬは前述した表３３乃至表３６のうち、少なくとも１つから導出できる。数式１７または数式１８で、ＯｒｇＣＷは表１９及び／又は表２０から導出できる。
次の表はピクチャ復元でのルーマサンプル（ｉ．ｅ． ルーマ予測サンプル）に対するフォワードマッピング手続きを示す数式及びシンタックス（条件文）を説明する。以下の表及び数式で、ＦＰ＿ＰＲＥＣはビットシフティングのための定数であり、事前に決定された値でありえる。例えば、ＦＰ＿ＰＲＥＣは１１または１５でありえる。
Figure 0007471498000060
Figure 0007471498000061
表３７は前述した表１７乃至表２０に基づいたルーママッピング手続きでフォワードマッピングされたルーマサンプルを導出するためのものでありえる。即ち、表３７は表１９及び／又は表２０と共に説明できる。表３７で、入力としてのルーマ（予測）サンプルｐｒｅｄＳａｍｐｌｅｓ［ｉ］［ｊ］から出力としてのフォワードマッピングされたルーマ（予測）サンプルＰｒｅｄｍＡＰＳａｍｐｌｅｓ［ｉ］［ｊ］が導出できる。表３７のｉｄｘＹは（フォワード）マッピングインデックスと称されることができ、マッピングインデックスは予測ルーマサンプルに基づいて導出できる。
表３８は、線形リシェイパの適用に従うルーママッピングでフォワードマッピングされたルーマサンプルを導出するためのものでありえる。例えば、表３８のｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔ、ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ、ｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ、ＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅは表３３乃至表３６のうち、少なくとも１つにより導出できる。表３８で、ｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔ＜ｐｒｅｄＳａｍｐｌｅｓ［ｉ］［ｊ］＜ｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔの場合に入力としてのルーマ（予測）サンプルｐｒｅｄＳａｍｐｌｅｓ［ｉ］［ｊ］から出力としてのフォワードマッピングされたルーマ（予測）サンプルＰｒｅｄｍＡＰＳａｍｐｌｅｓ［ｉ］［ｊ］が導出できる。表３７と表３８の間の比較を通じて、線形リシェイパの適用に従う既存のＬＭＣＳからの変化がフォワードマッピング観点から見られることができる。
次の数式及び表はルーマサンプル（ｉ．ｅ． ルーマ復元サンプル）に対するインバースマッピング手続きを説明する。以下の数式及び表で、入力としてのｌｕｍａＳａｍｐｌｅはインバースマッピング以前の（修正前）ルーマ復元サンプルでありえる。出力としてのｉｎｖＳａｍｐｌｅはインバースマッピングされた（修正された）ルーマ復元サンプルでありえる。他の場合、クリッピングされたｉｎｖＳａｍｐｌｅが修正されたルーマ復元サンプルと称されることもできる。
Figure 0007471498000062
Figure 0007471498000063
Figure 0007471498000064
Figure 0007471498000065
数式２１は従うルーママッピングからインバースマッピングされたルーマサンプルを導出するためのものでありえる。数式２０で、インデックスｉｄｘＩｎｖは後述する表５０、表５１、または表５２に基づいて導出できる。
数式２１は、線形リシェイパの適用に従うルーママッピングでインバースマッピングされたルーマサンプルを導出するためのものでありえる。例えば、数式２１のｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔは表３３乃至表３６のうち、少なくとも１つにより導出できる。数式２０と数式２１との比較を通じて、線形リシェイパの適用に従う既存のＬＭＣＳからの変化がフォワードマッピング観点から見られることができる。
表３９は、ルーママッピングでインバースマッピングされたルーマサンプルを導出するための数式の一例を含むことができる。例えば、インデックスｉｄｘＩｎｖは後述する表５０、表５１、または表５２に基づいて導出できる。
表４０は、ルーママッピングでインバースマッピングされたルーマサンプルを導出するための数式の他の例を含むことができる。例えば、表４０のｌｍｃｓ＿ｍｉｎ＿ｉｎｐｕｔ及び／又はｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄは表３３乃至３６のうち、少なくとも１つにより導出されることができ、そして／または表４０のＩｎｖＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅは表３３乃至表３６、及び／又は数式１７乃至数式１９のうち、少なくとも１つにより導出できる。
前述した線形リシェイパに関する例示に基づいてピースワイズインデックス識別手続きが省略できる。即ち、本例示でリシェイプされたルーマピクセルを有する断片が１つのみ存在するので、インバースルーママッピング及びクロマレジデュアルスケーリングに使われるピースワイズインデックス識別手続きが除去できる。これによって、インバースルーママッピングの複雑性が減少できる。これに加えて、ルーマピースワイズインデックス識別に依存することによって引き起こされるレイテンシー問題がクロマレジデュアルスケーリングの途中に除去できる。
前述した線形リシェイパの使用に関する実施形態に従って、ＬＭＣＳのために次のような利点が提供できる。i）エンコーダのリシェイパ設計を単純化してピースワイズ線形断片の間で発生する突然の変化による劣化を防止することができる。ii）ピースワイズインデックス識別手続きを除去してデコーダインバースマッピング手続きを単純化することができる。iii）ピースワイズインデックス識別手続きを除去して該当ルーマブロックに依存することによって引き起こされるクロマレジデュアルスケーリング内のレイテンシー問題を除去することができる。iv）シグナリングのオーバーヘッドを減らし、頻繁なリシェイパのアップデートをより実現可能にすることができる。v）１６個の断片のループ（例えば、ｆｏｒ構文）が必要していた多くの部分からループを除去することができる。例えば、ＩｎｖＳｃａｌｅＣｏｅｆｆ［ｉ］を導出するためにｌｍｃｓＣＷ［ｉ］による割り算演算の数を１に減らすことができる。
本文書に従う他の実施形態ではフレキシブルなビンに基づいたＬＭＣＳが提案される。ここで、フレキシブルなビンとは、ビンの個数が所定の数に固定されないことを意味することができる。既存の一実施形態ではＬＭＣＳでのビンの個数が１６個に固定されており、そして１６個のビンは入力サンプル値に対して均等に分布された。本実施形態ではフレキシブルな個数のビンが提案され、そして断片（ビン）が原本ピクセル値に対して均等に分配されない。
次の表は本実施形態を従うＬＭＣＳデータ（データフィールド）に関するシンタックス及びそれに含まれたシンタックス要素に対するセマンティックスを例示的に示す。
Figure 0007471498000066
Figure 0007471498000067
表４１を参照すると、ビンの個数に関する情報ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１がシグナリングできる。表４２を参照すると、ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１＋１はビンの個数と同一であることがあり、これからビンの個数は１から（１＜＜ｂｉｔｄｅｐｔｈＹ）－１までの範囲内にありえる。例えば、ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１またはｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１＋１は２の倍数でありえる。
表４１及び表４２と共に説明された実施形態で、ピボットポイントの個数は、リシェイパが線形か否かに関わらず、ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１（ビンの個数に関する情報）に基づいて導出されることができ、（ｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１のシグナリング）、そして、ピボットポイントの入力値及びマッピングされた値（ＬｍｃｓＰｉｖｏｔ＿ｉｎｐｕｔ［ｉ］、ＬｍｃｓＰｉｖｏｔ＿ｍａｐｐｅｄ［ｉ］）はシグナリングされたコードワード値（ｌｍｃｓ＿ｄｅｌｔａ＿ｉｎｐｕｔ＿ｃｗ［ｉ］、ｌｍｃｓ＿ｄｅｌｔａ＿ｍａｐｐｅｄ＿ｃｗ［ｉ］）の合算に基づいて導出できる（ここで、初期入力値 ＬｍｃｓＰｉｖｏｔ＿ｉｎｐｕｔ［０］及び初期出力値 ＬｍｃｓＰｉｖｏｔ＿ｍａｐｐｅｄ［０］は０）。
図１５は、本文書の一実施形態での線形フォワードマッピングの一例を示す。図１６は、本文書の一実施形態でのインバースフォワードマッピングの一例を示す。
図１５及び図１６に従う実施形態では、レギュラーＬＭＣＳ及び線形ＬＭＣＳの全てを支援する方法が提案される。本実施形態に従う一例で、シンタックス要素ｌｍｃｓ＿ｉｓ＿Ｌｉｎｅａｒに基づいてレギュラーＬＭＣＳ及び／又は線形ＬＭＣＳが指示できる。エンコーダで、線形ＬＭＣＳラインが決定された後に、マッピングされた値（ｅｘ．図１５及び図１６のｐＬでのマッピングされた値）は均等な断片（ｅｘ．ＬｍｃｓＭａｘＢｉｎＩｄｘ－Ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１）に分かれることができる。ビンＬｍｃｓＭａｘＢｉｎＩｄｘでのコードワードは前述したｌｍｃｓデータまたはリシェイパモデルに関するシンタックスを用いてシグナリングできる。
次の表は本実施形態の一例に従うＬＭＣＳデータ（データフィールド）に関するシンタックス及びそれに含まれたシンタックス要素に対するセマンティックスを例示的に示す。
Figure 0007471498000068
Figure 0007471498000069
Figure 0007471498000070
次の表は本実施形態の他の例に従うＬＭＣＳデータ（データフィールド）に関するシンタックス及びそれに含まれたシンタックス要素に対するセマンティックスを例示的に示す。
Figure 0007471498000071
Figure 0007471498000072
Figure 0007471498000073
前記表４３乃至表４６を参照すると、ｌｍｃｓ＿ｉｓ＿ｌｉｎｅａｒ＿ｆｌａｇが真であれば、ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘと ＬｍｃｓＭａｘＢｉｎＩｄｘの間の全てのｌｍｃｓＣＷ［ｉ］は同一な値を有することができる。即ち、ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘとＬｍｃｓＭａｘＢｉｎＩｄｘの間の全ての断片のうち、ｌｍｃｓＣＷ［ｉ］が同一な値を有することができる。ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘと ｌｍｃｓＭａｘＢｉｎＩｄｘの間の全ての断片のスケール及び逆スケールとクロマスケールは同一でありえる。線形リシェイパが真であれば断片インデックスを導出する必要がなく、断片のうちの１つでスケール、インバーススケールが使用できる。
次の表は、本実施形態に従うピースワイズインデックスの識別手続きを例示的に示す。
Figure 0007471498000074
本文書の他の実施形態によると、レギュラー１６－ピースＰＷＬ ＬＭＣＳ及び線形ＬＭＣＳの適用はハイレベルシンタックス（例えば、シーケンスレベル）に依存することができる。
次の表は本実施形態に従うＳＰＳに関するシンタックス及びそれに含まれたシンタックス要素に対するセマンティックスを例示的に示す。
Figure 0007471498000075
Figure 0007471498000076
表４８及び表４９を参照すると、ＳＰＳに含まれたシンタックス要素によりレギュラーＬＭＣＳ及び／又は線形ＬＭＣＳの可用有無が決定（シグナリング）できる。表４８を参照すると、シンタックス要素ｓｐｓ＿ｌｉｎｅａｒＬｍｃｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇに基づいてレギュラーＬＭＣＳまたは線形ＬＭＣＳのうちの１つがシーケンス単位で可用できる。
これに加えて、線形ＬＭＣＳまたはレギュラーＬＭＣＳのうちの１つ、または２つともが可用されるか否かはプロフィールレベルに依存的でありえる。一例で、特定プロフィール（ｅ．ｇ． ＳＤＲプロフィール）に対し、線形ＬＭＣＳのみ許容されることができ、そして他のプロフィール（ｅ．ｇ． ＨＤＲプロフィール）に対し、レギュラーＬＭＣＳのみ許容されることができ、そして、更に他のプロフィールに対しては、レギュラーＬＭＣＳ及び／又は線形ＬＭＣＳ両方とも許容できる。
本文書の更に他の実施形態によると、ＬＭＣＳピースワイズインデックス識別手続きがインバースルーママッピング及びクロマレジデュアルスケーリングで使用できる。本実施形態で、クロマレジデュアルスケーリングが可用なブロックに対して前記ピースワイズインデックスの識別手続きが使用されることができ、そしてリシェイピングされた（マッピングされた）領域内のルーマサンプルを対しても前記識別手続きが使用できる。本実施形態は前記インデックスの導出のための複雑度を減少させることを目的とする。
次の表は、既存のピースワイズ関数インデックスの識別手続き（導出手続き）を示す。
Figure 0007471498000077
一例で、前記ピースワイズインデックス識別手続きでは入力サンプルが少なくとも２つ以上のカテゴリーに分類できる。例えば、前記入力サンプルは３個のカテゴリー、第１、第２、第３のカテゴリーに分類できる。例えば、第１のカテゴリーは ＬｍｃｓＰｉｖｏｔ［Ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］より小さなサンプル（の値）を示すことができ、第２のカテゴリーは ＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ］より大きいか等しいサンプル（の値）を示すことができ、第３のカテゴリーは ＬｍｃｓＰｉｖｏｔ［Ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１］とＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ］の間のサンプル（の値）を示すことができる。
本実施形態では、カテゴリー分類を除去することによって識別手続きを最適化する方法が提案される。ピースワイズインデックス識別手続きに対する入力がリシェイピングされた（マッピングされた）ルーマ値であるので、ピボットポイントｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ及び ＬｍｃｓＭａｘＢｉｎＩｄｘ＋１でのマッピングされた値を超過する値があってはならない。したがって、カテゴリー別にサンプルを分類する条件的手続きは既存のピースワイズインデックス識別手続きで省略されることができ、具体的な例示が以下に表と共に説明される。
本実施形態に従う一例で、表５０に含まれた識別手続きは以下の表５１または表５２のうちの１つに代替できる。表５１、表５２を参照すると、表５０の先の２つのカテゴリーが削除されることができ、そして最後のカテゴリーに対して反復的なループ（ｆｏｒ構文）での境界値（第２境界値またはエンディングポイント）がＬｍｃｓＭａｘＢｉｎＩｄｘから ＬｍｃｓＭａｘＢｉｎＩｄｘ＋１に修正できる。即ち、識別手続きが単純化されることができ、ピースワイズインデックスの導出のための複雑度が減少できる。したがって、本実施形態によりＬＭＣＳ関連コーディングが効率のよく遂行できる。
Figure 0007471498000078
Figure 0007471498000079
表５１を参照すると、ｉｆ節の条件に対応する比較手続き（ｉｆ節の条件に対応する数式）は最小ビンインデックスから最大ビンインデックスまでのビンインデックス全てに対して反復的に遂行できる。ｉｆ節の条件に対応する数式が真の場合でのビンインデックスはインバースルーママッピングのためのインバースマッピングインデックス（または、クロマレジデュアルスケーリングのためのインバーススケーリングインデックス）として導出できる。前記インバースマッピングインデックスに基づいて修正された復元ルーマサンプル（または、スケーリングされたクロマレジデュアルサンプル）が導出できる。
表５１の実施形態によると、（インバース）ピースワイズ関数インデックスを識別する手続きで発生できる問題が解決できる。表５１の実施形態によって、演算バグが除去されることができ、そして／または重畳する境界条件によって発生する重複演算過程が省略できる。もし、本文書が表５１の実施形態に従わなければ、ピースワイズインデックス（インバースマッピングインデックス）の識別のためのｆｏｒ構文（ループ構文）で現在ブロックに対するＬＭＣＳで用いられるマッピング値がＬｍｃｓＰｉｖｏｔ［ｉｄｘＹＩｎｖ＋１］を超過する（外れる）ことができる。本実施形態によると、前記インデックス識別手続きで現在ブロックに対するＬＭＣＳで用いられる適切な範囲内のマッピング値が用いられる。
次の表は、表５１の実施形態により改善されたコーディング性能に関する効果を示す。
Figure 0007471498000080
Figure 0007471498000081
Figure 0007471498000082
表５３乃至表５５を参照すると、表５１の実施形態に従ってコーディング性能が改善できる。または、表５１の実施形態に従ってコーディング性能を維持しながら演算バグが除去されることができ、そして／または重畳した演算過程が省略できる。
本文書に従う一実施形態で、既存の実施形態では個別的ブロックツリーによりコーディングされたスライス（ｅ．ｇ． イントラスライス）に対し、デュアルツリーによりコーディングされたスライスより対応するルーマブロックでのクロマレジデュアルスケーリング依存度によるレイテンシーが高かった。このような理由で、既存の実施形態では個別的ブロックツリーにコーディングされたスライスにはＬＭＣＳクロマレジデュアルスケーリングが適用されなかった。
本実施形態では個別ツリーにコーディングされたスライスに対してもクロマレジデュアルスケーリングが適用できる。前述した単一クロマレジデュアルスケーリングファクタが使われる場合、対応するルーマブロックでのクロマレジデュアルスケーリングの間の依存度がないので、クロマレジデュアルスケーリングの適用に従うレイテンシーがないことがある。
次の表は、本実施形態に従うスライスヘッダのシンタックス及びセマンティックスを示す。
Figure 0007471498000083
Figure 0007471498000084
表５７を参照すると、現在ブロックがデュアルツリー構造か、シングルツリー構造かを示す条件節（または、それに対するフラグ）に関わらず、クロマレジデュアルスケーリングフラグがシグナリングできる。
本文書に従う一実施形態で、ＡＬＦデータ及び／又はＬＭＣＳデータがＡＰＳでシグナリングできる。例えば、３２個のＡＰＳが使用できる。一例で、全てのＡＰＳがＡＬＦ及び／又はＬＭＣＳのために使われる場合、前記ＡＰＳのバッファのためには略１０キロバイト（Ｋｂｙｔｅｓ）オン－チップメモリが必要でありえる。ＡＬＦ／ＬＭＣＳパラメータを格納することに要求されるメモリ、及びＬＭＣＳのために必要とする計算複雑度を制限する（減少させる）ために、ＡＬＦ及び／又はＬＭＣＳ ＡＰＳの個数を制限する方案が本実施形態で提案される。
本実施形態に従う一例で、ピクチャ内に含まれたスライスまたはブリックの個数に関わらず、ピクチャ当たり１つのＬＭＣＳモデルが使用（許容）できる。ＬＭＣＳのためのＡＰＳの個数は３２個より少ないことがある。例えば、ＬＭＣＳのためのＡＰＳの個数は４個でありえる。
次の表は、本実施形態に従うＡＰＳと関連したセマンティックスを示す。
Figure 0007471498000085
表５８を参照すると、ＬＭＣＳ ＡＰＳの最大個数は事前に決定できる。例えば、ＬＭＣＳ ＡＰＳの最大個数は４個でありえる。表１５及び表５８を参照すると、複数のＡＰＳはＬＭＣＳ ＡＰＳを含むことができる。ＬＭＣＳ ＡＰＳの（最大）個数は４個でありえる。一例で、ＬＭＣＳ ＡＰＳのうちの１つのＬＭＣＳ ＡＰＳに含まれたＬＭＣＳデータフィールドが現在ピクチャ内の現在ブロックのためのＬＭＣＳ手続きで使用できる。
次の表は、スライスヘッダ（または、ピクチャヘッダ）に含まれたシンタックス要素に対するセマンティックスを示す。
Figure 0007471498000086
表５９から説明されるシンタックス要素は表５６を参照して説明できる。一例で、シンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄはスライスヘッダに含まれることができる。他の例で、表５９のシンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄはピクチャヘッダに含まれることもでき、この場合ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄはｐｈ＿ｌｍｃｓ＿ａｐｓ＿ｉｄに修正できる。
本文書の一実施形態によると、ＬＭＣＳ ＡＰＳの全体個数は４より小さいか等しいことがある。また、本実施形態の一例で１つのピクチャ当たり１つのＬＭＣＳモデルのみ使用できる。この際、画像／ビデオの解像度に関わらず、１つのピクチャ当たり１つのＬＭＣＳモデルのみ使用できる。本実施形態によると、ＬＭＣＳ ＡＰＳに対する制約により具現が容易になることができ、そして資源（メモリ）過消費の問題が解決できる。
次の表は、本文書に開示されたシンタックス要素の一例に対するセマンティックスを示す。
Figure 0007471498000087
表６０から説明されるシンタックス要素は、表５６を参照して説明できる。一例で、シンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄはスライスヘッダに含まれることができる。他の例で、表６０のシンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄはピクチャヘッダに含まれることもでき、この場合、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄはｐｈ＿ｌｍｃｓ＿ａｐｓ＿ｉｄに修正できる。
前記の表６０を参照すると、シンタックス要素ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄにより現在スライス（または、現在ピクチャ）が参照するＬＭＣＳ ＡＰＳのａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄが明示できる。即ち、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄは現在スライス（または、現在ピクチャ）が参照するＬＭＣＳ ＡＰＳのａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを示すことができる。ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄの値は０から３までの範囲にありえる。即ち、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄの値は０、１、２、または３でありえる。例えば、第０乃至第３のＬＭＣＳ ＡＰＳ（または、第１乃至第４のＬＭＣＳ ＡＰＳ）のうち、ｓｌｉｃｅ＿ｌｍｃｓ＿ａｐｓ＿ｉｄにより指示される第０のＬＭＣＳ ＡＰＳ（または、第１のＬＭＣＳ ＡＰＳ）は現在スライス（または、現在ピクチャ）により参照されることができ、そして前記第０のＬＭＣＳ ＡＰＳ（または、第１のＬＭＣＳ ＡＰＳ）に含まれたＬＭＣＳデータ（ＬＭＣＳデータフィールドまたはリシェイパモデル）は現在スライス（または、現在ピクチャ）に対するＬＭＣＳ手続きのために用いられることができる（前記第０ＬＭＣＳ ＡＰＳ（または、第１のＬＭＣＳ ＡＰＳ）に含まれたＬＭＣＳデータ（ＬＭＣＳデータフィールドまたはリシェイパモデル）に基づいて現在スライス（または、現在ピクチャ）に対するＬＭＣＳ手続きが遂行できる）。
本文書に開示された少なくとも１つの実施形態に従ってＬＭＣＳと関連したコーディング手続きが整理（ｃｌｅａｎ ｕｐ）または単純化できる。
以下の図面は、本明細書の具体的な一例を説明するために作成された。図面に記載された具体的な装置の名称や具体的な信号／メッセージ／フィールドの名称は、例示的に提示されたものであるため、本明細書の技術的特徴が以下の図面に使われた具体的な名称に制限されない。
図１７及び図１８は、本文書の実施形態（等）に係るビデオ／画像エンコード方法及び関連コンポーネントの一例を概略的に示す。図１７において開示された方法は、図２において開示されたエンコード装置によって行われることができる。具体的に、例えば、図１７のＳ１７００、Ｓ１７１０は、前記エンコード装置の予測部２２０によって行われることができ、Ｓ１７２０は、前記エンコード装置のレジデュアル処理部２３０によって行われることができ、Ｓ１７３０は、前記エンコード装置の予測部２２０またはレジデュアル処理部２３０によって行われることができ、Ｓ１７４０は、前記エンコード装置のレジデュアル処理部２３０または加算部２５０によって行われることができ、Ｓ１７５０は、前記エンコード装置のレジデュアル処理部２３０によって行われることができ、Ｓ１７６０は、前記エンコード装置のエントロピーエンコード部２４０によって行われることができる。図１７において開示された方法は、本文書において上述した実施形態を含むことができる。
図１７に示すように、エンコード装置は、現在ピクチャ内の現在ブロックのためにインター予測モードを導出できる（Ｓ１７００）。エンコード装置は、インター予測モードのうち、本文書に開示された様々なモードのうち、少なくとも１つを導出できる。
エンコード装置は、前記インター予測モードに基づいて予測ルーマサンプルを生成できる（Ｓ１７１０）。エンコード装置は、現在ブロックに含まれた原本サンプルに対する予測を行うことによって予測ルーマサンプルを生成できる。
エンコード装置は、予測クロマサンプルを導出することができる。エンコード装置は、現在ブロックの原本クロマサンプル及び予測クロマサンプルに基づいて前記レジデュアルクロマサンプルを導出することができる。例えば、エンコード装置は、前記予測クロマサンプルと原本クロマサンプルとの間の差に基づいてレジデュアルクロマサンプルを導出することができる。
エンコード装置は、ルーママッピングのためのビン及びＬＭＣＳコードワードを導出できる。エンコード装置は、ＳＤＲまたはＨＤＲに基づいて前記ビン及び／又はＬＭＣＳコードワードを導出できる。
エンコード装置は、ＬＭＣＳ関連情報を導出できる（Ｓ１７２０）。ＬＭＣＳ関連情報は、ルーママッピングのためのビン及びＬＭＣＳコードワードを含むことができる。
エンコード装置は、ルーマサンプルのためのマッピング手順に基づいてマッピングされた予測ルーマサンプルを生成できる（Ｓ１７３０）。エンコード装置は、ルーママッピングのためのビン及び／又はＬＭＣＳコードワードに基づいてマッピングされた予測ルーマサンプルを生成できる。例えば、エンコード装置は、ルーママッピングのためのピボットポイントの入力値及びマッピング値（出力値）を導出でき、そして、前記入力値及びマッピング値に基づいてマッピングされた予測ルーマサンプルを生成できる。一例として、エンコード装置は、第１の予測ルーマサンプルに基づいてマッピングインデックス（ｉｄｘＹ）を導出でき、そして、前記マッピングインデックスに対応するピボットポイントの入力値及びマッピング値に基づいて第１のマッピングされた予測ルーマサンプルを生成できる。他の例として、線形マッピング（線形リシェイピング、線形ＬＭＣＳ）が使用され得るし、そして、線形マッピングにおける２個のピボットポイントから導出されたフォワードマッピングスケーリングファクタに基づいてマッピングされた予測ルーマサンプルが生成され得るし、したがって、線形マッピングによりインデックス導出手順が省略されることもできる。
エンコード装置は、スケーリングされたレジデュアルクロマサンプルを生成することができる。具体的に、エンコード装置は、クロマレジデュアルスケーリングファクタを導出することができ、クロマレジデュアルスケーリングファクタに基づいてスケーリングされたレジデュアルクロマサンプルを生成することができる。ここで、エンコード端のクロマレジデュアルスケーリングは、フォワードクロマレジデュアルスケーリングとも呼ばれる。したがって、エンコード装置により導出されたクロマレジデュアルスケーリングファクタは、フォワードクロマレジデュアルスケーリングファクタと呼ばれることができ、フォワードスケーリングされたレジデュアルクロマサンプルが生成されることができる。
エンコード装置は、復元ルーマサンプルを生成できる。エンコード装置は、マッピングされた予測ルーマサンプルに基づいて復元ルーマサンプルを生成できる。具体的に、エンコード装置は、上述したレジデュアルルーマサンプルをマッピングされた予測ルーマサンプルと合算することができ、前記合算結果に基づいて復元ルーマサンプルを生成できる。
エンコード装置は、ルーマサンプルのためのインバースマッピング手順に基づいて修正された復元ルーマサンプルを生成できる（Ｓ１７４０）。エンコード装置は、前記ルーママッピングのための前記ビン、前記ＬＭＣＳコードワード、及び前記復元ルーマサンプルに基づいて修正された復元ルーマサンプルを生成できる。エンコード装置は、前記復元ルーマサンプルに対するインバースマッピング手順を介して前記修正された復元ルーマサンプルを生成できる。例えば、エンコード装置は、インバースマッピング手順で復元ルーマサンプル及び／又はビンインデックス毎に割り当てられたマッピング値（ｅｘ． ＬｍｃｓＰｉｖｏｔ［ｉ］、ｉ＝Ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ．．．ＬｍｃｓＭａｘＢｉｎＩｄｘ＋１）に基づいてインバースマッピングインデックス（ｅｘ． ＩｎｖＹＩｄｘ）を導出できる。エンコード装置は、インバースマッピングインデックスに割り当てられたマッピング値（ＬｍｃｓＰｉｖｏｔ［ＩｎｖＹＩｄｘ］）に基づいて修正された復元ルーマサンプルを生成できる。
エンコード装置は、前記マッピングされた予測ルーマサンプルに基づいてレジデュアルルーマサンプルを生成することができる。例えば、エンコード装置は、前記マッピングされた予測ルーマサンプルと原本ルーマサンプルとの間の差に基づいてレジデュアルルーマサンプルを導出することができる。
エンコード装置は、レジデュアル情報を導出できる（Ｓ１７５０）。一例として、エンコード装置は、前記マッピングされた予測ルーマサンプル及び前記修正された復元ルーマサンプルに基づいてレジデュアル情報を生成できる。例えば、エンコード装置は、前記スケーリングされたレジデュアルクロマサンプル及び／又は前記レジデュアルルーマサンプルに基づいてレジデュアル情報を導出できる。エンコード装置は、前記スケーリングされたレジデュアルクロマサンプル及び／又は前記レジデュアルルーマサンプルに対する変換手順に基づいて変換係数を導出できる。例えば、変換手順は、ＤＣＴ、ＤＳＴ、ＧＢＴ、またはＣＮＴのうち、少なくとも１つを含むことができる。エンコード装置は、前記変換係数に対する量子化手順に基づいて量子化された変換係数を導出できる。量子化された変換係数は、係数スキャン順序に基づいて１次元ベクトル形態を有することができる。エンコード装置は、前記量子化された変換係数を表すレジデュアル情報を生成できる。レジデュアル情報は、指数ゴロム、ＣＡＶＬＣ、ＣＡＢＡＣなどのような様々なエンコード方法を介して生成されることができる。
エンコード装置は、画像／ビデオ情報をエンコードすることができる（Ｓ１７６０）。前記画像情報は、ＬＭＣＳデータに関する情報及び／またはレジデュアル情報を含むことができる。例えば、ＬＭＣＳ関連情報は、線形ＬＭＣＳに関する情報を含むことができる。一例において、線形ＬＭＣＳに関する情報に基づいて少なくとも１つのＬＭＣＳコードワードが導出されることができる。エンコードされたビデオ／画像情報は、ビットストリーム形態で出力されることができる。前記ビットストリームは、ネットワークまたは格納媒体を介してデコード装置に送信されることができる。
前記画像／ビデオ情報は本文書の実施形態に従う多様な情報を含むことができる。例えば、前記画像／ビデオ情報は前述した表１乃至表６０のうち、少なくとも１つに開示された情報を含むことができる。
一実施形態で、前記画像情報はＬＭＣＳ ＡＰＳを含むことができる。ＬＭＣＳ ＡＰＳはＬＭＣＳデータフィールド（ｌｍｃｓ＿ｄａｔａ（））及び／又はＩＤ情報（ａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ）を含むことができる。前記ＩＤ情報の値は所定の範囲内にありえる。例えば、前記ＩＤ情報の値は０乃至３の範囲にありえる。即ち、前記ＩＤ情報の値は０、１、２、または３でありえる。前記ＬＭＣＳデータフィールドは、前記ＬＭＣＳ関連情報を含むことができる。前記ＬＭＣＳデータフィールドに基づいて前記マッピング手続き及び前記インバースマッピング手続きで用いられるＬＭＣＳコードワードが導出できる。前記ＬＭＣＳ ＡＰＳの最大個数は事前に決定された値でありえる。例えば、ＬＭＣＳ ＡＰＳの最大個数（前記事前に決定された値）は４でありえる。
一実施形態で、前記ルーマサンプルのための前記マッピング手続きで、前記予測ルーマサンプルに基づいてマッピングインデックスが導出され、そして前記マッピングインデックスに基づく第１マッピング値を用いて前記マッピングされた予測ルーマサンプルが生成できる。
一実施形態で、前記ＬＭＣＳ関連情報はインバースマッピングのためのビンに関する情報を含むことができる。前記ビンに関する情報に基づいて最小ビンインデックス及び最大ビンインデックスが導出できる。前記ルーマサンプルのための前記インバースマッピング手続きで、前記最小ビンインデックスから前記最大ビンインデックスまでのビンインデックスに基づくマッピング値に基づいてインバースマッピングインデックスが導出され、そして前記インバースマッピングインデックスに基づく第２のマッピング値を用いて前記修正された復元ルーマサンプルが生成できる。
一実施形態で、エンコード装置はクロマレジデュアルスケーリングのためのピースワイズインデックスを生成することができる。エンコード装置は、前記ピースワイズインデックスに基づいてクロマレジデュアルスケーリングファクタを導出することができる。エンコード装置は、前記レジデュアルクロマサンプル及び前記クロマレジデュアルスケーリングファクタに基づいてスケーリングされたレジデュアルクロマサンプルを生成することができる。
一実施形態で、前記現在ブロックがシングルツリー構造またはデュアルツリー構造の場合（前記現在ブロックが個別的ツリー構造の場合、前記現在ブロックが個別的ツリーにコーディングされた場合）、前記現在ブロックのためにクロマレジデュアルスケーリングが適用されるか否かを示すクロマレジデュアルスケーリング可用フラグがエンコード装置により生成できる。または、前記現在ブロックのブロックツリー構造に関わらず、前記現在ブロックのためにクロマレジデュアルスケーリングが適用されるか否かを示すクロマレジデュアルスケーリング可用フラグが生成できる。現在ピクチャ、現在スライス、及び／又は現在ブロックに対してクロマレジデュアルスケーリングが適用される場合、前記クロマレジデュアルスケーリング可用フラグの値は１でありえる。
一実施形態で、前記クロマレジデュアルスケーリングファクタは単一クロマレジデュアルスケーリングファクタでありえる。
一実施形態で、前記タイプ情報の値が１であることに基づいて、前記ＡＰＳはＬＭＣＳパラメータを含む前記ＬＭＣＳデータフィールドを含むことができる。
一実施形態で、前記画像情報はヘッダ情報を含むことができる。ここで、ヘッダ情報はピクチャヘッダ（または、スライスヘッダ）でありえる。前記ヘッダ情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含むことができる。一例で、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報は前記現在ピクチャまたは前記現在ブロックに対するＬＭＣＳ ＡＰＳのＩＤを示すことができる。他の例で、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は前記ＩＤ情報の前記値と同一でありえる。前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の前記値は０乃至３の範囲内にありえる。
一実施形態で、前記画像情報はＳＰＳ（Ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）を含むことができる。前記ＳＰＳは線形ＬＭＣＳが可用か否かを示す線形ＬＭＣＳ可用フラグを含むことができる。
一実施形態で、前記ＬＭＣＳデータに関する情報に基づいて最小ビンインデックス（ｅｘ．ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ）及び／又は最大ビンインデックス（ｅｘ．ＬｍｃｓＭａｘＢｉｎＩｄｘ）が導出できる。前記最小ビンインデックスに基づいて第１のマッピング値（ＬｍｃｓＰｉｖｏｔ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ］）が導出できる。前記最大ビンインデックスに基づいて第２のマッピング値（ＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ］またはＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ＋１］）が導出できる。前記復元ルーマサンプル（ｅｘ．表３６または表３７のｌｕｍａＳａｍｐｌｅ）の値は第１のマッピング値から第２のマッピング値までの範囲にありえる。一例で、全ての復元ルーマサンプルの値は第１のマッピング値から第２のマッピング値までの範囲にありえる。他の例で、復元ルーマサンプルのうち、一部のサンプルの値は第１のマッピング値から第２のマッピング値までの範囲にありえる。
一実施形態で、前記ＬＭＣＳデータに関する情報はＬＭＣＳデータフィールド及び線形ＬＭＣＳに関する情報を含むことができる。前記線形ＬＭＣＳに関する情報は線形マッピングに関する情報と称されることもできる。前記ＬＭＣＳデータフィールドは線形ＬＭＣＳが適用されるか否かを示す線形ＬＭＣＳフラグを含むことができる。前記線形ＬＭＣＳフラグの値が１の場合、前記マッピングされた予測ルーマサンプルは前記線形ＬＭＣＳに関する情報に基づいて生成できる。
一実施形態で、前記線形ＬＭＣＳに関する情報は第１のピボットポイント（ｅｘ．図１１のＰ１）に関する情報及び第２のピボットポイント（ｅｘ．図１１のＰ２）に関する情報を含むことができる。例えば、前記第１のピボットポイントの入力値及びマッピング値は各々最小入力値、最小マッピング値でありえる。前記第２のピボットポイントの入力値及びマッピング値は各々最大入力値、最大マッピング値でありえる。前記最小入力値及び前記最大入力値の間の入力値は線形的にマッピングできる。
一実施形態で、前記画像情報は前記最大入力値に関する情報及び前記最大マッピング値に関する情報を含むことができる。前記最大入力値は前記最大入力値に関する情報（ｅｘ．表３３のｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ）の値と同一でありえる。前記最大マッピング値は前記最大マッピング値に関する情報（ｅｘ．表３３のｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ）の値と同一でありえる。
一実施形態で、前記線形マッピングに関する情報は、前記第２のピボットポイントの入力デルタ値に関する情報（ｅｘ．表３５のｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ＿ｄｅｌｔａ）及び前記第２のピボットポイントのマッピングデルタ値に関する情報（ｅｘ．表３５のｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ＿ｄｅｌｔａ）を含むことができる。前記第２のピボットポイントの入力デルタ値に基づいて前記最大入力値が導出され、前記第２のピボットポイントのマッピングデルタ値に基づいて前記最大マッピング値が導出できる。
一実施形態で、前記最大入力値及び前記最大マッピング値は前述した表３６に含まれた少なくとも１つの数式に基づいて導出できる。
一実施形態で、前記マッピングされた予測ルーマサンプルを生成するステップは、前記予測ルーマサンプルに対するフォワードマッピングスケーリングファクタ（ｅｘ．前述したＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を導出するステップ、及び前記フォワードマッピングスケーリングファクタに基づいて前記マッピングされた予測ルーマサンプルを生成するステップを含むことができる。前記フォワードマッピングスケーリングファクタは、前記予測ルーマサンプルのための単一ファクタでありえる。
一実施形態で、前記フォワードマッピングスケーリングファクタは前述した表３６及び／又は表３８に含まれた少なくとも１つの数式に基づいて導出できる。
一実施形態で、前記マッピングされた予測ルーマサンプルは前述した表３８に含まれた少なくとも１つの数式に基づいて導出できる。
一実施形態で、エンコード装置は前記復元ルーマサンプル（ｅｘ． 前述したｌｕｍａＳａｍｐｌｅ）に対するインバースマッピングスケーリングファクタ（ｅｘ．前述したＩｎｖＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を導出することができる。また、エンコード装置は前記復元ルーマサンプル及び前記インバースマッピングスケーリングファクタに基づいて修正された復元ルーマサンプル（ｅｘ．ＩｎｖＳａｍｐｌｅ）を生成することができる。前記インバースマッピングスケーリングファクタは、前記復元ルーマサンプルのための単一ファクタでありえる。
一実施形態で、前記インバースマッピングスケーリングファクタは前記復元ルーマサンプルに基づいて導出されたピースワイズインデックスを用いて導出できる。
一実施形態で、前記ピースワイズインデックスは前述した表５０に基づいて導出できる。即ち、前記表５０に含まれた比較手続き（ｌｕｍａＳａｍｐｌｅ＜ＬｍｃｓＰｉｖｏｔ［ｉｄｘＹＩｎｖ＋１］）は、前記ピースワイズインデックスが前記最小ビンインデックスの場合から前記ピースワイズインデックスが前記最大ビンインデックスの場合まで反復的に遂行できる。
一実施形態で、前記インバースマッピングスケーリングファクタは前述した表３３、表３４、表３５、表３６に含まれた少なくとも１つの数式、または数式１１または数式１２に基づいて導出できる。
一実施形態で、前記修正された復元ルーマサンプルは、前述した数式２０、数式２１、表３９、及び／又は表４０に基づいて導出できる。
一実施形態で、前記ＬＭＣＳ関連情報は前記マッピングされた予測ルーマサンプルを導出するためのビンの個数に関する情報（ｅｘ．表４１のｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１）を含むことができる。例えば、ルーママッピングのためのピボットポイントの個数は前記ビンの個数と同一に設定できる。一例で、エンコード装置は前記ビンの個数だけ前記ピボットポイントのデルタ入力値及びデルタマッピング値を各々生成することができる。一例で、前記デルタ入力値（ｅｘ．表４１のｌｍｃｓ＿ｄｅｌｔａ＿ｉｎｐｕｔ＿ｃｗ［ｉ］）及び前記デルタマッピング値（ｅｘ．表４１のｌｍｃｓ＿ｄｅｌｔａ＿ｍａｐｐｅｄ＿ｃｗ［ｉ］）に基づいて前記ピボットポイントの入力値及びマッピング値が導出され、前記入力値（ｅｘ．表４２のＬｍｃｓＰｉｖｏｔ＿ｉｎｐｕｔ［ｉ］）及び前記マッピング値（ｅｘ．表４２のＬｍｃｓＰｉｖｏｔ＿ｍａｐｐｅｄ［ｉ］）に基づいて前記マッピングされた予測ルーマサンプルが生成できる。
一実施形態において、エンコード装置は、前記ＬＭＣＳ関連情報に含まれている少なくとも１つのＬＭＣＳコードワードと原本コードワード（ＯｒｇＣＷ）とに基づいてＬＭＣＳデルタコードワードを導出することができ、少なくとも１つのＬＭＣＳコードワードと原本コードワードに基づいてマッピングされたルーマ予測サンプルを導出することもできる。一例において、前記線形マッピングに関する情報は、ＬＭＣＳデルタコードワードに関する情報を含むことができる。
一実施形態において、前記ＬＭＣＳデルタコードワードとＯｒｇＣＷとの合算に基づいて、前記少なくとも１つのＬＭＣＳコードワードが導出されることができ、例えば、ＯｒｇＣＷは（１＜＜ＢｉｔＤｅｐｔｈＹ）／１６であり、ここで、ＢｉｔＤｅｐｔｈＹは、ルーマビット深度を示すことができる。本実施形態は、数式１４に基づいて行われることができる。
一実施形態において、前記ＬＭＣＳデルタコードワードとＯｒｇＣＷ＊（ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ－Ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１）との合算に基づいて前記少なくとも１つのＬＭＣＳコードワードが導出されることができ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ及びＬｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘは、各々、最大ｂｉｎインデックス及び最小ｂｉｎインデックスであり、ＯｒｇＣＷは（１＜＜ＢｉｔＤｅｐｔｈＹ）／１６である。本実施形態は、数式１５、１６に基づいて行われることができる。
一実施形態において、前記少なくとも１つのＬＭＣＳコードワードは、２の倍数である。
一実施形態において、前記復元ルーマサンプルのルーマビット深度（ＢｉｔｄｅｐｔｈＹ）が１０より高い場合、前記少なくとも１つのＬＭＣＳコードワードは、１＜＜（ＢｉｔｄｅｐｔｈＹ－１０）の倍数である。
一実施形態において、前記少なくとも１つのＬＭＣＳコードワードは、（ＯｒｇＣＷ＞＞１）から（ＯｒｇＣＷ＜＜１）－１までの範囲内にある。
前述した文段で、ＬＭＣＳデータに関する情報はＬＭＣＳ関連情報と同一でありえる。
図１９及び図２０は、本文書の実施形態に従う画像／ビデオデコード方法及び関連コンポーネントの一例を概略的に示す。図１９で開示された方法は図３で開示されたデコード装置により遂行できる。具体的に、例えば、図１９のＳ１９００は前記デコード装置のエントロピーデコード部３１０により遂行されることができ、Ｓ１９１０、Ｓ１９２０は前記デコード装置の予測部３３０により遂行されることができ、Ｓ１９３０は前記デコード装置のレジデュアル処理部３２０または予測部３３０によって遂行できて、Ｓ１９４０は前記デコード装置のレジデュアル処理部３２０、予測部３３０及び／又は加算部３４０に遂行できる。図１９で開示された方法は本文書で前述した実施形態を含むことができる。
図１９を参照すると、デコード装置はビデオ／画像情報を受信／獲得することができる（Ｓ１９００）。ビデオ／画像情報はＬＭＣＳデータに関する情報及び／又はレジデュアル情報を含むことができる。例えば、ＬＭＣＳデータに関する情報は前述したルーママッピング（ｅｘ．フォワードマッピング、インバースマッピング、線形マッピング）に関する情報、クロマレジデュアルスケーリングに関する情報、及び／又はＬＭＣＳ（または、リシェイピング、リシェイパ）に関連したインデックス（ｅｘ．最大ビンインデックス、最小ビンインデックス、マッピングインデックス）を含むことができる。デコード装置はビットストリームを通じて前記画像／ビデオ情報を受信／獲得することができる。
前記画像／ビデオ情報は本文書の実施形態に従う多様な情報を含むことができる。例えば、前記画像／ビデオ情報は前述した表１乃至６０のうち、少なくとも１つに開示された情報を含むことができる。
デコード装置は、前記予測モード情報に基づいて現在ピクチャ内の現在ブロックのために予測モードを導出することができる（Ｓ１９１０）。デコード装置は、インター予測モードのうち、本文書に開示された多様なモードのうち、少なくとも１つを導出することができる。
デコード装置は、予測ルーマサンプルを生成することができる。デコード装置は、予測モードに基づいて前記現在ブロックの予測ルーマサンプルを導出することができる。この場合、インター予測またはイントラ予測など、本文書で開示された多様な予測方法が適用できる。
デコード装置は予測ルーマサンプルを生成することができる（Ｓ１９２０）。デコード装置は、予測モードに基づいて前記現在ブロックの予測ルーマサンプルを導出することができる。デコード装置は、現在ブロックに含まれた原本サンプルに対する予測を遂行することによって予測ルーマサンプルを生成することができる。
前記画像情報は、レジデュアル情報を含むことができる。デコード装置は、レジデュアル情報に基づいてレジデュアルクロマサンプルを生成することができる。具体的に、デコード装置はレジデュアル情報に基づいて量子化された変換係数を導出することができる。量子化された変換係数は係数スキャン順序に基づいて１次元ベクトル形態を有することができる。デコード装置は、前記量子化された変換係数に対する逆量子化手続きに基づいて変換係数を導出することができる。デコード装置は、変換係数に基づいてレジデュアルクロマサンプル及び／又はレジデュアルルーマサンプルを導出することができる。
デコード装置は、マッピングされた予測ルーマサンプルを生成できる（Ｓ１９３０）。デコード装置は、ルーマサンプルのためのマッピング手順に基づいてマッピングされた予測ルーマサンプルを生成できる。例えば、デコード装置は、ルーママッピングのためのピボットポイントの入力値及びマッピング値（出力値）を導出でき、そして、前記入力値及びマッピング値に基づいてマッピングされた予測ルーマサンプルを生成できる。一例として、デコード装置は、第１の予測ルーマサンプルに基づいて（フォワード）マッピングインデックス（ｉｄｘＹ）を導出でき、そして、前記マッピングインデックスに対応するピボットポイントの入力値及びマッピング値に基づいて第１のマッピングされた予測ルーマサンプルを生成できる。他の例として、線形マッピング（線形リシェイピング、線形ＬＭＣＳ）が使用され得るし、そして、線形マッピングにおける２個のピボットポイントから導出されたフォワードマッピングスケーリングファクタに基づいてマッピングされた予測ルーマサンプルが生成されることができ、したがって、線形マッピングによりインデックス導出手順が省略されることもできる。
デコード装置は、前記レジデュアル情報に基づいてレジデュアルルーマサンプルを生成できる。例えば、デコード装置は、前記レジデュアル情報に基づいて量子化された変換係数を導出できる。量子化された変換係数は、係数スキャン順序に基づいて１次元ベクトル形態を有することができる。デコード装置は、前記量子化された変換係数に対する逆量子化手順に基づいて変換係数を導出できる。デコード装置は、前記変換係数に対する逆変換手順に基づいてレジデュアルサンプルを導出できる。前記レジデュアルサンプルは、レジデュアルルーマサンプル及び／又はレジデュアルクロマサンプルを含むことができる。
デコード装置は、復元ルーマサンプルを生成することができる。デコード装置は、マッピングされた予測ルーマサンプルに基づいて復元ルーマサンプルを生成することができる。具体的に、デコード装置は、前述されたレジデュアルルーマサンプルを、マッピングされた予測ルーマサンプルと合算でき、前記合算結果に基づいて復元ルーマサンプルを生成することができる。
デコード装置は、修正された復元ルーマサンプルを生成することができる。デコード装置は、ルーマサンプルのためのインバースマッピング手続きに基づいて修正された復元ルーマサンプルを生成することができる。デコード装置は、前記ＬＭＣＳ関連情報及び前記復元ルーマサンプルに基づいて修正された復元ルーマサンプルを生成することができる（Ｓ１９４０）。デコード装置は、前記復元ルーマサンプルに対するインバースマッピング手続きを通じて前記修正された復元ルーマサンプルを生成することができる。
デコード装置は、スケーリングされたレジデュアルクロマサンプルを生成することができる。具体的に、デコード装置はクロマレジデュアルスケーリングファクタを導出することができ、クロマレジデュアルスケーリングファクタに基づいてスケーリングされたレジデュアルクロマサンプルを生成することができる。ここで、デコード端のクロマレジデュアルスケーリングは、エンコード端とは反対に、インバースクロマレジデュアルスケーリングと称されることもできる。したがって、デコード装置により導出されたクロマレジデュアルスケーリングファクタはインバースクロマレジデュアルスケーリングファクタと称されることができ、インバーススケーリングされたレジデュアルクロマサンプルが生成できる。
デコード装置は、復元クロマサンプルを生成することができる。デコード装置は、スケーリングされたレジデュアルクロマサンプルに基づいて復元クロマサンプルを生成することができる。具体的に、デコード装置はクロマ成分に対する予測手続きを遂行することができ、予測クロマサンプルを生成することができる。デコード装置は、予測クロマサンプルとスケーリングされたレジデュアルクロマサンプルの間の合算に基づいて復元クロマサンプルを生成することができる。
一実施形態で、前記画像情報はＬＭＣＳ ＡＰＳを含むことができる。ＬＭＣＳ ＡＰＳは、ＬＭＣＳデータフィールド（ｌｍｃｓ＿ｄａｔａ（））及び／又はＩＤ情報（ａｐｓ＿ａｄａｐｔａｔｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ）を含むことができる。前記ＩＤ情報の値は所定の範囲内にありえる。例えば、前記ＩＤ情報の値は０乃至３の範囲にありえる。即ち、前記ＩＤ情報の値は０、１、２、または３でありえる。前記ＬＭＣＳデータフィールドは、前記ＬＭＣＳ関連情報を含むことができる。前記ＬＭＣＳデータフィールドに基づいて前記マッピング手続き及び前記インバースマッピング手続きで用いられるＬＭＣＳコードワードが導出できる。前記ＬＭＣＳ ＡＰＳの最大個数は事前に決定された値でありえる。例えば、ＬＭＣＳ ＡＰＳの最大個数（前記事前に決定された値）は４でありえる。
一実施形態で、前記ルーマサンプルのための前記マッピング手続きで、前記予測ルーマサンプルに基づいてマッピングインデックスが導出され、そして前記マッピングインデックスに基づく第１のマッピング値を用いて前記マッピングされた予測ルーマサンプルが生成できる。
一実施形態で、前記ＬＭＣＳ関連情報はインバースマッピングのためのビンに関する情報を含むことができる。前記ビンに関する情報に基づいて最小ビンインデックス及び最大ビンインデックスが導出できる。前記ルーマサンプルのための前記インバースマッピング手続きで、前記最小ビンインデックスから前記最大ビンインデックスまでのビンインデックスに基づくマッピング値に基づいてインバースマッピングインデックスが導出され、そして前記インバースマッピングインデックスに基づく第２のマッピング値を用いて前記修正された復元ルーマサンプルが生成できる。
一実施形態で、前記ＬＭＣＳデータに関する情報に基づいてピースワイズインデックス（ｅｘ．表３５、表３６、または表３７のｉｄｘＹＩｎｖ）が識別できる。デコード装置は、前記ピースワイズインデックスに基づいてクロマレジデュアルスケーリングファクタを導出することができる。デコード装置は、前記レジデュアルクロマサンプル及び前記クロマレジデュアルスケーリングファクタに基づいてスケーリングされたレジデュアルクロマサンプルを生成することができる。
一実施形態で、前記現在ブロックがシングルツリー構造またはデュアルツリー構造の場合（前記現在ブロックが個別的ツリー構造の場合、前記現在ブロックが個別的ツリーにコーディングされた場合）、前記現在ブロックのためにクロマレジデュアルスケーリングが適用されるか否かを示すクロマレジデュアルスケーリング可用フラグがシグナリングできる。または、前記現在ブロックのブロックツリー構造に関わらず、前記現在ブロックのためにクロマレジデュアルスケーリングが適用されるか否かを示すクロマレジデュアルスケーリング可用フラグがシグナリングできる。現在ピクチャ、現在スライス、及び／又は現在ブロックに対してクロマレジデュアルスケーリングが適用される場合、前記クロマレジデュアルスケーリング可用フラグの値は１でありえる。
一実施形態で、前記クロマレジデュアルスケーリングファクタは単一クロマレジデュアルスケーリングファクタでありえる。
一実施形態で、前記タイプ情報の値が１であることに基づいて、前記ＡＰＳはＬＭＣＳパラメータを含む前記ＬＭＣＳデータフィールドを含むことができる。
一実施形態で、前記画像情報はヘッダ情報を含むことができる。ここで、ヘッダ情報はピクチャヘッダ（または、スライスヘッダ）でありえる。前記ヘッダ情報はＬＭＣＳ関連ＡＰＳ ＩＤ情報を含むことができる。一例で、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報は、前記現在ピクチャまたは前記現在ブロックに対するＬＭＣＳ ＡＰＳのＩＤを示すことができる。他の例で、前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は、前記ＩＤ情報の前記値と同一でありえる。前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の前記値は０乃至３の範囲内にありえる。
一実施形態で、前記ＬＭＣＳデータに関する情報に基づいて最小ビンインデックス（ｅｘ．ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ）及び／又は最大ビンインデックス（ｅｘ．ＬｍｃｓＭａｘＢｉｎＩｄｘ）が導出できる。前記最小ビンインデックスに基づいて第１のマッピング値（ＬｍｃｓＰｉｖｏｔ［ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ］）が導出できる。前記最大ビンインデックスに基づいて第２のマッピング値（ＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ］またはＬｍｃｓＰｉｖｏｔ［ＬｍｃｓＭａｘＢｉｎＩｄｘ＋１］）が導出できる。前記復元ルーマサンプル（ｅｘ．表５１または表５２のｌｕｍａＳａｍｐｌｅ）の値は第１のマッピング値から第２のマッピング値までの範囲にありえる。一例で、全ての復元ルーマサンプルの値は第１のマッピング値から第２のマッピング値までの範囲にありえる。他の例で、復元ルーマサンプルのうちの一部サンプルの値は第１のマッピング値から第２のマッピング値までの範囲にありえる。
一実施形態で、前記画像情報はＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）を含むことができる。前記ＳＰＳは線形ＬＭＣＳが可用か否かを示す線形ＬＭＣＳ可用フラグを含むことができる。
一実施形態で、前記クロマレジデュアルスケーリングファクタは単一クロマレジデュアルスケーリングファクタでありえる。
一実施形態で、前記ＬＭＣＳデータに関する情報はＬＭＣＳデータフィールド及び線形ＬＭＣＳに関する情報を含むことができる。前記線形ＬＭＣＳに関する情報は、線形マッピングに関する情報と称されることもできる。前記ＬＭＣＳデータフィールドは線形ＬＭＣＳが適用されるか否かを示す線形ＬＭＣＳフラグを含むことができる。前記線形ＬＭＣＳフラグの値が１の場合、前記マッピングされた予測ルーマサンプルは前記線形ＬＭＣＳに関する情報に基づいて生成できる。
一実施形態で、前記線形ＬＭＣＳに関する情報は第１のピボットポイント（ｅｘ．図１１のＰ１）に関する情報及び第２のピボットポイント（ｅｘ．図１１のＰ２）に関する情報を含むことができる。例えば、前記第１のピボットポイントの入力値及びマッピング値は各々最小入力値、最小マッピング値でありえる。前記第２のピボットポイントの入力値及びマッピング値は各々最大入力値、最大マッピング値でありえる。前記最小入力値及び前記最大入力値の間の入力値は線形的にマッピングできる。
一実施形態で、前記画像情報は前記最大入力値に関する情報及び前記最大マッピング値に関する情報を含むことができる。前記最大入力値は前記最大入力値に関する情報（ｅｘ．表３３のｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ）の値と同一でありえる。前記最大マッピング値は、前記最大マッピング値に関する情報（ｅｘ．表３３のｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ）の値と同一でありえる。
一実施形態で、前記線形マッピングに関する情報は前記第２のピボットポイントの入力デルタ値に関する情報（ｅｘ．表３５のｌｍｃｓ＿ｍａｘ＿ｉｎｐｕｔ＿ｄｅｌｔａ）及び前記第２のピボットポイントのマッピングデルタ値に関する情報（ｅｘ．表３５のｌｍｃｓ＿ｍａｘ＿ｍａｐｐｅｄ＿ｄｅｌｔａ）を含むことができる。前記第２のピボットポイントの入力デルタ値に基づいて前記最大入力値が導出され、前記第２のピボットポイントのマッピングデルタ値に基づいて前記最大マッピング値が導出できる。
一実施形態で、前記最大入力値及び前記最大マッピング値は前述した表３６に含まれた少なくとも１つの数式に基づいて導出できる。
一実施形態で、前記マッピングされた予測ルーマサンプルを生成するステップは、前記予測ルーマサンプルに対するフォワードマッピングスケーリングファクタ（ｅｘ．前述したＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を導出するステップ、及び前記フォワードマッピングスケーリングファクタに基づいて前記マッピングされた予測ルーマサンプルを生成するステップを含むことができる。前記フォワードマッピングスケーリングファクタは、前記予測ルーマサンプルのための単一ファクタでありえる。
一実施形態で、前記インバースマッピングスケーリングファクタは前記復元ルーマサンプルに基づいて導出されたピースワイズインデックスを用いて導出できる。
一実施形態で、前記ピースワイズインデックスは前述した表５０に基づいて導出できる。即ち、前記表５０に含まれた比較手続き（ｌｕｍａＳａｍｐｌｅ＜ＬｍｃｓＰｉｖｏｔ［ｉｄｘＹＩｎｖ＋１］）は前記ピースワイズインデックスが前記最小ビンインデックスの場合から前記ピースワイズインデックスが前記最大ビンインデックスの場合まで反復的に遂行できる。
一実施形態で、前記フォワードマッピングスケーリングファクタは前述した表３６及び／又は表３８に含まれた少なくとも１つの数式に基づいて導出できる。
一実施形態で、前記マッピングされた予測ルーマサンプルは前述した表３８に含まれた少なくとも１つの数式に基づいて導出できる。
一実施形態で、デコード装置は前記復元ルーマサンプル（ｅｘ．前述したｌｕｍａＳａｍｐｌｅ）に対するインバースマッピングスケーリングファクタ（ｅｘ．前述したＩｎｖＳｃａｌｅＣｏｅｆｆＳｉｎｇｌｅ）を導出することができる。また、デコード装置は前記復元ルーマサンプル及び前記インバースマッピングスケーリングファクタに基づいて修正された復元ルーマサンプル（ｅｘ．ｉｎｖＳａｍｐｌｅ）を生成することができる。前記インバースマッピングスケーリングファクタは前記復元ルーマサンプルのための単一ファクタでありえる。
一実施形態で、前記インバースマッピングスケーリングファクタは前述した表３３、表３４、表３５、表３６に含まれた少なくとも１つの数式、または数式１１または数式１２に基づいて導出できる。
一実施形態で、前記修正された復元ルーマサンプルは前述した数式２０、数式２１、表３９、及び／又は表４０に基づいて導出できる。
一実施形態で、前記ＬＭＣＳ関連情報は前記マッピングされた予測ルーマサンプルを導出するためのビンの個数に関する情報（ｅｘ．表４１のｌｍｃｓ＿ｎｕｍ＿ｂｉｎｓ＿ｍｉｎｕｓ１）を含むことができる。例えば、ルーママッピングのためのピボットポイントの個数は前記ビンの個数と同一に設定できる。一例で、デコード装置は前記ビンの個数だけ前記ピボットポイントのデルタ入力値及びデルタマッピング値を各々生成することができる。一例で、前記デルタ入力値（ｅｘ．表４１のｌｍｃｓ＿ｄｅｌｔａ＿ｉｎｐｕｔ＿ｃｗ［ｉ］）及び前記デルタマッピング値（ｅｘ．表４１のｌｍｃｓ＿ｄｅｌｔａ＿ｍａｐｐｅｄ＿ｃｗ［ｉ］）に基づいて前記ピボットポイントの入力値及びマッピング値が導出され、前記入力値（ｅｘ．表４２のＬｍｃｓＰｉｖｏｔ＿ｉｎｐｕｔ［ｉ］）及び前記マッピング値（ｅｘ．表４２のＬｍｃｓＰｉｖｏｔ＿ｍａｐｐｅｄ［ｉ］）に基づいて前記マッピングされた予測ルーマサンプルが生成できる。
一実施形態で、デコード装置は前記ＬＭＣＳ関連情報に含まれた少なくとも１つのＬＭＣＳコードワードと原本コードワード（ＯｒｇＣＷ）に基づいてＬＭＣＳデルタコードワードを導出することができ、少なくとも１つのＬＭＣＳコードワードと原本コードワードに基づいてマッピングされたルーマ予測サンプルを導出することができる。一例で、前記線形マッピングに関する情報はＬＭＣＳデルタコードワードに関する情報を含むことができる。
一実施形態で、前記ＬＭＣＳデルタコードワードとＯｒｇＣＷの合算に基づいて前記少なくとも１つのＬＭＣＳコードワードが導出されることができ、例えばＯｒｇＣＷは（1＜＜ＢｉｔＤｅｐｔｈＹ）／１６であり、ここでｂｉｔｄｅｐｔｈＹはルーマビット深度を示すことができる。本実施形態は数式１４に基づくことができる。
一実施形態において、前記ＬＭＣＳデルタコードワードとＯｒｇＣＷ＊（ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ－ｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘ＋１）の合算に基づいて前記少なくとも一つのＬＭＣＳコードワードが導出されることができ、ｌｍｃｓ＿ｍａｘ＿ｂｉｎ＿ｉｄｘ及びｌｍｃｓ＿ｍｉｎ＿ｂｉｎ＿ｉｄｘは、各々、最大ｂｉｎインデックス及び最小ｂｉｎインデックスであり、ＯｒｇＣＷは（１＜＜ＢｉｔＤｅｐｔｈＹ）／１６である。本実施形態は、数式１５、１６に基づいて行われることができる。
一実施形態において、前記少なくとも一つのＬＭＣＳコードワードは、２の倍数であることができる。
一実施形態において、前記復元ルーマサンプルのルーマビット深度（ＢｉｔＤｅｐｔｈＹ）が１０より高い場合、前記少なくとも一つのＬＭＣＳコードワードは、１＜＜（ＢｉｔＤｅｐｔｈＹ－１０）の倍数である。
一実施形態において、前記少なくとも一つのＬＭＣＳコードワードは、（ＯｒｇＣＷ＞＞１）から（ＯｒｇＣＷ＜＜１）－１までの範囲内にある。
前述した実施形態において、方法は、一連のステップ又はブロックとしてフローチャートに基づいて説明されているが、該当実施形態は、ステップの順序に限定されるわけではなく、あるステップは、前述したところと異なるステップと異なる順序で、又は同時に発生し得る。また、当業者であれば、フローチャートに示されているステップが排他的ではなく、異なるステップが含まれるか、フローチャートの一つ又はそれ以上のステップが本文書の実施形態の範囲に影響を与えずに削除され得ることを理解することができる。
前述した本文書の実施形態に係る方法は、ソフトウェアの形態で実現されることができ、本文書に係るエンコード装置及び／又はデコード装置は、例えば、ＴＶ、コンピュータ、スマートフォン、セットトップボックス、ディスプレイ装置等の画像処理を行う装置に含まれ得る。
本文書で、実施形態がソフトウェアで実現される際、前述した方法は、前述した機能を行うモジュール（過程、機能等）で実現されることができる。モジュールはメモリに格納され、プロセッサにより実行されることができる。メモリは、プロセッサの内部又は外部にあってもよく、よく知られている様々な手段でプロセッサと連結されてもよい。プロセッサは、ＡＳＩＣ（ａｐｐｌｉｃａｔｉｏｎ－ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ）、他のチップセット、論理回路及び／又はデータ処理装置を含むことができる。メモリは、ＲＯＭ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）、フラッシュメモリ、メモリカード、格納媒体及び／又は他の格納装置を含むことができる。即ち、本文書で説明した実施形態は、プロセッサ、マイクロプロセッサ、コントローラ又はチップ上で実現されて行われ得る。例えば、各図面で示している機能ユニットは、コンピュータ、プロセッサ、マイクロプロセッサ、コントローラ又はチップ上で実現されて行われ得る。この場合、実現のための情報（ｅｘ． ｉｎｆｏｒｍａｔｉｏｎ ｏｎ ｉｎｓｔｒｕｃｔｉｏｎｓ）又はアルゴリズムがデジタル格納媒体に格納されることができる。
また、本文書の実施形態が適用されるデコード装置及びエンコード装置は、マルチメディア放送送受信装置、モバイル通信端末、ホームシネマビデオ装置、デジタルシネマビデオ装置、監視用カメラ、ビデオ対話装置、ビデオ通信のようなリアルタイム通信装置、モバイルストリーミング装置、格納媒体、カムコーダ、オーダーメイド型ビデオ（ＶｏＤ）サービス提供装置、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置、インターネットストリーミングサービス提供装置、３次元（３Ｄ）ビデオ装置、ＶＲ（ｖｉｒｔｕａｌ ｒｅａｌｉｔｙ）装置、ＡＲ（ａｒｇｕｍｅｎｔｅ ｒｅａｌｉｔｙ）装置、画像電話ビデオ装置、運送手段端末（ｅｘ． 車両（自律走行車両含む）端末、飛行機端末、船舶端末など）及び医療用ビデオ装置等に含まれ得、ビデオ信号又はデータ信号を処理するために使用され得る。例えば、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置としては、ゲームコンソール、ブルーレイプレーヤー、インターネットアクセスＴＶ、ホームシアターシステム、スマートフォン、タブレットＰＣ、ＤＶＲ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｒｅｃｏｄｅｒ）等を含み得る。
また、本文書の実施形態が適用される処理方法は、コンピュータで実行されるプログラムの形態で生産されることができ、コンピュータが読み取ることができる記録媒体に格納されることができる。本文書の実施形態に係るデータ構造を有するマルチメディアデータもまた、コンピュータが読み取ることができる記録媒体に格納されることができる。前記コンピュータが読み取ることができる記録媒体は、コンピュータで読み取られるデータが格納される全ての種類の格納装置及び分散格納装置を含む。前記コンピュータが読み取ることができる記録媒体は、例えば、ブルーレイディスク（ＢＤ）、汎用直列バス（ＵＳＢ）、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピディスク、及び光学的データ格納装置を含み得る。また、前記コンピュータが読み取ることができる記録媒体は、搬送波（例えば、インターネットを介した送信）の形態で実現されたメディアを含む。また、エンコード方法で生成されたビットストリームが、コンピュータが読み取られる記録媒体に格納されるか、有無線通信ネットワークを介して送信されることができる。
また、本文書の実施形態は、プログラムコードによるコンピュータプログラム製品で実現されることができ、前記プログラムコードは、本文書の実施形態によってコンピュータで実行されることができる。前記プログラムコードは、コンピュータによって読み取り可能なキャリア上に格納されることができる。
図２１は、本文書に開示された実施形態が適用されることができるコンテンツストリーミングシステムの例を示す。
図２１を参照すると、本文書の実施形態が適用されるコンテンツストリーミングシステムは、大きくエンコードサーバ、ストリーミングサーバ、ウェブサーバ、メディアストレージ、ユーザ装置、及びマルチメディア入力装置を含むことができる。
前記エンコードサーバは、スマートフォン、カメラ、カムコーダ等のようなマルチメディア入力装置から入力されたコンテンツをデジタルデータに圧縮してビットストリームを生成し、これを前記ストリーミングサーバに送信する役割をする。別の例として、スマートフォン、カメラ、カムコーダなどのようなマルチメディア入力装置がビットストリームを直接生成する場合、前記エンコードサーバは省略され得る。
前記ビットストリームは、本文書の実施形態が適用されるエンコード方法又はビットストリームの生成方法により生成されることができ、前記ストリーミングサーバは、前記ビットストリームを送信又は受信する過程で、一時的に前記ビットストリームを格納することができる。
前記ストリーミングサーバは、ウェブサーバを介してのユーザ要請に基づいてマルチメディアデータをユーザ装置に送信し、前記ウェブサーバは、ユーザにどのようなサービスがあるかを知らせる媒介体役割をする。ユーザが前記ウェブサーバに所望のサービスを要請すれば、前記ウェブサーバは、これをストリーミングサーバに伝達し、前記ストリーミングサーバは、ユーザにマルチメディアデータを送信する。このとき、前記コンテンツストリーミングシステムは、別の制御サーバを含むことができ、この場合、前記制御サーバは、前記コンテンツストリーミングシステム内の各装置間の命令／応答を制御する役割をする。
前記ストリーミングサーバは、メディア格納所及び／又はエンコードサーバからコンテンツを受信することができる。例えば、前記エンコードサーバからコンテンツを受信するようになる場合、前記コンテンツをリアルタイムに受信することができる。この場合、円滑なストリーミングサービスを提供するために、前記ストリーミングサーバは、前記ビットストリームを一定時間の間、格納することができる。
前記ユーザ装置の例では、携帯電話、スマートフォン（ｓｍａｒｔ ｐｈｏｎｅ）、ノートブックコンピュータ（ｌａｐｔｏｐ ｃｏｍｐｕｔｅｒ）、デジタル放送用端末機、ＰＤＡ（ｐｅｒｓｏｎａｌ ｄｉｇｉｔａｌ ａｓｓｉｓｔａｎｔｓ）、ＰＭＰ（ｐｏｒｔａｂｌｅ ｍｕｌｔｉｍｅｄｉａ ｐｌａｙｅｒ）、ナビゲーション、スレートＰＣ（ｓｌａｔｅ ＰＣ）、タブレットＰＣ（ｔａｂｌｅｔ ＰＣ）、ウルトラブック（ｕｌｔｒａｂｏｏｋ）、ウェアラブルデバイス（ｗｅａｒａｂｌｅ ｄｅｖｉｃｅ、例えば、ウォッチ型端末機（ｓｍａｒｔｗａｔｃｈ）、グラス型端末機（ｓｍａｒｔ ｇｌａｓｓ）、ＨＭＤ（ｈｅａｄ ｍｏｕｎｔｅｄ ｄｉｓｐｌａｙ））、デジタルＴＶ、デスクトップコンピュータ、デジタルサイニジなどがありえる。
前記コンテンツストリーミングシステム内の各サーバは、分散サーバとして運営されることができ、この場合、各サーバで受信するデータは、分散処理されることができる。
本明細書に記載された請求項は、多様な方式で組み合わせることができる。例えば、本明細書の方法請求項の技術的特徴が組み合わせられて装置として実現されることができ、本明細書の装置請求項の技術的特徴が組み合わせられて方法として実現されることができる。また、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴とが組み合わせられて装置として実現されることができ、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴とが組み合わせられて方法として実現されることができる。

Claims (3)

  1. デコード装置により遂行される画像デコード方法において、
    ビットストリームから予測モード情報、レジデュアル情報及びＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）関連情報を含む画像情報を獲得するステップと、
    前記予測モード情報に基づいて現在ピクチャ内の現在ブロックのためにインター予測モードを導出するステップと、
    前記インター予測モードに基づいて予測ルーマサンプルを生成するステップと、
    ルーマサンプルのためのマッピング手続きに基づいてマッピングされた予測ルーマサンプルを生成するステップと、
    前記レジデュアル情報に基づいてレジデュアルルーマサンプルを導出するステップと、
    前記マッピングされた予測ルーマサンプルと前記レジデュアルルーマサンプルに基づいて復元ルーマサンプルを生成するステップとを含み、
    前記画像情報はＬＭＣＳ ＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）及びヘッダー情報を含み、
    ＬＭＣＳ ＡＰＳはＬＭＣＳデータフィールド及びＩＤ情報を含み、
    前記ＬＭＣＳデータフィールドは前記ＬＭＣＳ関連情報を含み、
    前記ＬＭＣＳデータフィールドに基づいて、前記マッピング手続きで用いられるＬＭＣＳコードワードが導出され、
    前記ＩＤ情報の値は所定の範囲内にあり、
    前記所定の範囲は、０から３の範囲であり、
    前記ヘッダー情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含み、
    前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は、前記ＩＤ情報の値と等しい、画像デコード方法。
  2. エンコード装置により遂行される画像エンコード方法において、
    インター予測モードを導出するステップと、
    前記インター予測モードに基づいて予測ルーマサンプルを生成するステップと、
    ＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）関連情報を生成するステップと、
    ルーマサンプルのためのマッピング手続きに基づいてマッピングされた予測ルーマサンプルを生成するステップと、
    前記マッピングされた予測ルーマサンプルに基づいて、レジデュアルルーマサンプルを導出するステップと、
    前記マッピングされた予測ルーマサンプルと前記レジデュアルルーマサンプルに基づいて復元ルーマサンプルを生成するステップと、
    前記マッピングされた予測ルーマサンプルに基づいてレジデュアル情報を生成するステップと、
    前記ＬＭＣＳ関連情報及び前記レジデュアル情報を含む画像情報をエンコードするステップとを含み、
    前記画像情報はＬＭＣＳ ＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）及びヘッダー情報を含み、
    ＬＭＣＳ ＡＰＳはＬＭＣＳデータフィールド及びＩＤ情報を含み、
    前記ＬＭＣＳデータフィールドは前記ＬＭＣＳ関連情報を含み、
    前記ＬＭＣＳデータフィールドに基づいて前記マッピング手続きで用いられるＬＭＣＳコードワードが導出され、
    前記ＩＤ情報の値は所定の範囲内にあり、
    前記所定の範囲は、０から３の範囲であり、
    前記ヘッダー情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含み、
    前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は、前記ＩＤ情報の値と等しい、画像エンコード方法。
  3. 画像に対するデータを送信する方法であって、
    前記画像に対するビットストリームを取得するステップであって、
    前記ビットストリームは、インター予測モードを導出し、前記インター予測モードに基づいて予測ルーマサンプルを生成し、ＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）関連情報を生成し、ルーマサンプルに対するマッピング手続きに基づいてマッピングされたルーマサンプルを生成し、前記マッピングされた予測ルーマサンプルに基づいてレジデュアルルーマサンプルを導出し、前記マッピングされた予測ルーマサンプルと前記レジデュアルルーマサンプルに基づいて復元ルーマサンプルを生成し、前記マッピングされた予測ルーマサンプルに基づいてレジデュアル情報を生成し、前記ＬＭＣＳ関連情報と前記レジデュアル情報を含む画像情報をエンコーディングすることに基づいて生成される、ステップと、
    前記ビットストリームを含む前記データを送信するステップを含み、
    前記画像情報はＬＭＣＳ ＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）及びヘッダー情報を含み、
    ＬＭＣＳ ＡＰＳはＬＭＣＳデータフィールド及びＩＤ情報を含み、
    前記ＬＭＣＳデータフィールドは前記ＬＭＣＳ関連情報を含み、
    前記ＬＭＣＳデータフィールドに基づいて前記マッピング手続きで用いられるＬＭＣＳコードワードが導出され、
    前記ＩＤ情報の値は所定の範囲内にあり、
    前記所定の範囲は、０から３の範囲であり、
    前記ヘッダー情報は、ＬＭＣＳ関連ＡＰＳ ＩＤ情報を含み、
    前記ＬＭＣＳ関連ＡＰＳ ＩＤ情報の値は、前記ＩＤ情報の値と等しい、画像に対するデータを送信する方法。
JP2023105073A 2019-06-24 2023-06-27 ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング Active JP7471498B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962865918P 2019-06-24 2019-06-24
US62/865,918 2019-06-24
PCT/KR2020/008145 WO2020262922A1 (ko) 2019-06-24 2020-06-24 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩
JP2021577047A JP7305810B2 (ja) 2019-06-24 2020-06-24 ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021577047A Division JP7305810B2 (ja) 2019-06-24 2020-06-24 ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング

Publications (2)

Publication Number Publication Date
JP2023123699A JP2023123699A (ja) 2023-09-05
JP7471498B2 true JP7471498B2 (ja) 2024-04-19

Family

ID=74061886

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2021577047A Active JP7305810B2 (ja) 2019-06-24 2020-06-24 ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング
JP2023105073A Active JP7471498B2 (ja) 2019-06-24 2023-06-27 ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2021577047A Active JP7305810B2 (ja) 2019-06-24 2020-06-24 ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング

Country Status (7)

Country Link
US (3) US11470333B2 (ja)
EP (1) EP3989565A4 (ja)
JP (2) JP7305810B2 (ja)
KR (1) KR20220003115A (ja)
CN (1) CN114270823A (ja)
MX (1) MX2022000003A (ja)
WO (1) WO2020262922A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200389655A1 (en) 2019-06-06 2020-12-10 Qualcomm Incorporated Adaptation parameter set in access unit in video coding
JP2021002780A (ja) 2019-06-21 2021-01-07 シャープ株式会社 動画像復号装置および動画像符号化装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101948707B1 (ko) 2010-01-29 2019-02-15 가부시키가이샤 한도오따이 에네루기 켄큐쇼 반도체 기억 장치
US9277228B2 (en) * 2011-07-18 2016-03-01 Qualcomm Incorporated Adaptation parameter sets for video coding
US10200719B2 (en) * 2015-11-25 2019-02-05 Qualcomm Incorporated Modification of transform coefficients for non-square transform units in video coding
US10652575B2 (en) * 2016-09-15 2020-05-12 Qualcomm Incorporated Linear model chroma intra prediction for video coding
WO2020156530A1 (en) 2019-02-01 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Configuring luma-dependent chroma residue scaling for video coding
KR102661416B1 (ko) 2019-02-27 2024-04-25 후아웨이 테크놀러지 컴퍼니 리미티드 인코더, 디코더 및 대응하는 방법
US20220060709A1 (en) * 2019-03-01 2022-02-24 Lg Electronics Inc. Image coding method based on lmcs, and device therefor
US11451826B2 (en) * 2019-04-15 2022-09-20 Tencent America LLC Lossless coding mode and switchable residual coding
US11368684B2 (en) * 2019-04-23 2022-06-21 Qualcomm Incorporated Adaptation parameter sets (APS) for adaptive loop filter (ALF) parameters
WO2020224525A1 (en) 2019-05-03 2020-11-12 Mediatek Inc. Methods and apparatuses of syntax signaling and referencing constraint in video coding system
CN117768652A (zh) * 2019-06-05 2024-03-26 北京字节跳动网络技术有限公司 视频处理方法、装置、介质、以及存储比特流的方法
WO2020256512A1 (ko) * 2019-06-20 2020-12-24 엘지전자 주식회사 루마 맵핑 기반 비디오 또는 영상 코딩
JP7418478B2 (ja) * 2019-06-22 2024-01-19 北京字節跳動網絡技術有限公司 クロマ残差スケーリングのためのシンタックス要素
WO2021006612A1 (ko) * 2019-07-08 2021-01-14 현대자동차주식회사 동영상 데이터의 인트라 예측 코딩을 위한 방법 및 장치
CN114145013B (zh) * 2019-07-23 2023-11-14 北京字节跳动网络技术有限公司 调色板模式编解码的模式确定
WO2021018167A1 (en) * 2019-07-29 2021-02-04 Beijing Bytedance Network Technology Co., Ltd. Palette mode coding in prediction process

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200389655A1 (en) 2019-06-06 2020-12-10 Qualcomm Incorporated Adaptation parameter set in access unit in video coding
JP2021002780A (ja) 2019-06-21 2021-01-07 シャープ株式会社 動画像復号装置および動画像符号化装置

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
Benjamin Bross, Jianle Chen, and Shan Liu，Versatile Video Coding (Draft 5)，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-N1001 (version 8)，14th Meeting: Geneva, CH，2019年06月11日，pp.37,40-43,47,85-86,89-97,102-103,267-271
Seethal Paluri, Jaehyun Lim, amd Seung Hwan Kim，AHG17: APS ID Control Mechanism，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-O0561，15th Meeting: Gothenburg, SE，2019年06月，pp.1-5
Taoran Lu, et al.，AHG16/AHG17: LMCS related clean-ups，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-O0428-v2，5th Meeting: Gothenburg, SE，2019年07月，pp.1-4
Ye-Kui Wang, et al.，AHG17: Signalling of reshaper parameters in APS，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-N0117-v1，14th Meeting: Geneva, CH，2019年03月，pp.1-7

Also Published As

Publication number Publication date
KR20220003115A (ko) 2022-01-07
WO2020262922A1 (ko) 2020-12-30
US11470333B2 (en) 2022-10-11
EP3989565A4 (en) 2022-12-28
JP2023123699A (ja) 2023-09-05
JP7305810B2 (ja) 2023-07-10
MX2022000003A (es) 2022-03-11
US20230336750A1 (en) 2023-10-19
JP2022539099A (ja) 2022-09-07
US20220116632A1 (en) 2022-04-14
CN114270823A (zh) 2022-04-01
EP3989565A1 (en) 2022-04-27
US11729404B2 (en) 2023-08-15
US20220360801A1 (en) 2022-11-10

Similar Documents

Publication Publication Date Title
KR102393325B1 (ko) Aps 시그널링 기반 비디오 또는 영상 코딩
US11930191B2 (en) Luma mapping—and chroma scaling-based video or image coding
JP7355860B2 (ja) ルママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング
US20240155139A1 (en) Luma-mapping-based video or image coding
JP2024038444A (ja) ルママッピングベースのビデオまたは映像コーディング
JP7471495B2 (ja) ルママッピング基盤ビデオまたは映像コーディング
JP2023171547A (ja) ルマサンプルのマッピング及びクロマサンプルのスケーリングに基づくビデオまたは画像コーディング
KR102491959B1 (ko) 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩
US20220256174A1 (en) Video or image coding based on mapped luma component and scaled chroma component
KR20210158390A (ko) 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩
KR20210158391A (ko) 루마 샘플들의 맵핑 및 크로마 샘플들의 스케일링 기반 비디오 또는 영상 코딩
KR20220017425A (ko) 루마 샘플들의 맵핑 및 크로마 샘플들의 스케일링 기반 비디오 또는 영상 코딩
JP7471498B2 (ja) ルーママッピング及びクロマスケーリングに基づくビデオまたは画像コーディング
RU2811987C1 (ru) Кодирование видео или изображений на основе отображения яркости и масштабирования цветности
RU2804453C2 (ru) Кодирование видео или изображений на основе отображения яркости и масштабирования цветности
US20240155138A1 (en) Luma mapping-based video or image coding

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230627

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230627

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240326

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240409

R150 Certificate of patent or registration of utility model

Ref document number: 7471498

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150