JP2023158204A - 変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング - Google Patents

変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング Download PDF

Info

Publication number
JP2023158204A
JP2023158204A JP2023146837A JP2023146837A JP2023158204A JP 2023158204 A JP2023158204 A JP 2023158204A JP 2023146837 A JP2023146837 A JP 2023146837A JP 2023146837 A JP2023146837 A JP 2023146837A JP 2023158204 A JP2023158204 A JP 2023158204A
Authority
JP
Japan
Prior art keywords
information
flag
skip
transform
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023146837A
Other languages
English (en)
Inventor
ソンミ ユ
Sunmi Yoo
チョンア チェ
Jungah Choi
チャンウォン チェ
Jangwon Choi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of JP2023158204A publication Critical patent/JP2023158204A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】本発明は、変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディングに関する。【解決手段】本文書の開示によると、ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）を介して変換スキップ可用情報及びパレット可用情報をシグナリングし、前記変換スキップ可用情報及び前記パレット可用情報のうち少なくとも１つに基づいて変換スキップ及び／又はパレットコーディング関連情報を効果的にパーシング／シグナリングすることができる。これにより、ビデオ／映像コーディングのためにシグナリングされなければならないビットを節約することができ、コーディング効率を向上させることができる。【選択図】図１２

Description

本技術は、ビデオ又は映像コーディングに関し、例えば、変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング技術に関する。
近年、４Ｋまたは８Ｋ以上のＵＨＤ（Ｕｌｔｒａ Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ）画像／ビデオのような高解像度、高品質の画像／ビデオに対する需要が様々な分野で増加している。画像／ビデオデータが高解像度、高品質になるほど、既存の画像／ビデオデータに比べて相対的に送信される情報量またはビット量が増加するので、既存の有無線広帯域回線のような媒体を利用して画像データを送信するか、既存の格納媒体を利用して画像／ビデオデータを格納する場合、送信費用と格納費用が増加される。
また、近年、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）、ＡＲ（Ａｒｔｉｆｉｃｉａｌ Ｒｅａｌｔｉｙ）コンテンツやホログラムなどの実感メディア（Ｉｍｍｅｒｓｉｖｅ Ｍｅｄｉａ）に対する関心及び需要が増加しており、画像のように、現実画像と異なる画像特性を有する画像／ビデオに対する放送が増加している。
これにより、前記のような様々な特性を有する高解像度・高品質の画像／ビデオの情報を効果的に圧縮して送信するか、格納し、再生するために高効率の画像／ビデオ圧縮技術が求められる。
また、変換スキップ及びパレットコーディングの実行において、必須であるか又は補助的に使われる情報の従属性及び非終属性に応じて関連情報のコーディングを行うか否かを効率的に区分することにより全般的な映像／ビデオコーディングの効率を向上させる方案が必要である。
本文書の技術的課題はビデオ／映像コーディング効率を高める方法及び装置を提供することにある。
本文書の他の技術的課題は、変換スキップ及び／又はパレットコーディング関連情報を効率的にパーシング／シグナリングする方法及び装置を提供することにある。
本文書のまた他の技術的課題は、変換スキップ及び／又はパレットコーディング時に使用される情報の従属性及び／又は非終属性に応じて効率的にコーディングの可否を決定する方法及び装置を提供することにある。
本文書のまた他の技術的課題は、変換スキップ及び／又はパレットコーディングに関するハイレベルシンタックス要素（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）に対して従属性のあるシンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）を効果的にパーシングするための従属条件を定義し、前記従属条件に基づいてパーシングを行うか否かを決定する方法及び装置を提供することにある。
本文書の実施例によると、ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）を介して変換スキップ可用情報及びパレット可用情報をシグナリングし、前記変換スキップ可用情報及び前記パレット可用情報のうち少なくとも１つに基づいて変換スキップモードに対する最小許容量子化パラメータ（ｍｉｎｉｍｕｍ ａｌｌｏｗｅｄ ｑｕａｎｔｉｚａｔｉｏｎ ｐａｒａｍｅｔｅｒ）に関する最小量子化パラメータ情報をパーシング／シグナリングするか否かを決定することができる。例えば、前記変換スキップ可用情報の値が１又は前記パレットコーディング可用情報の値が１である条件に基づいて前記ＳＰＳにおいて前記最小量子化パラメータ情報をパーシング／シグナリングすることができる。
本文書の一実施例によると、デコーディング装置により行われるビデオ／映像デコーディング方法を提供する。前記ビデオ／映像デコーディング方法は、本文書の実施例において開示された方法を含む。
本文書の一実施例によると、ビデオ／映像デコーディングを行うデコーディング装置を提供する。前記デコーディング装置は、本文書の実施例において開示された方法を行う。
本文書の一実施例によると、エンコーディング装置により行われるビデオ／映像エンコーディング方法を提供する。前記ビデオ／映像エンコーディング方法は、本文書の実施例において開示された方法を含む。
本文書の一実施例によると、ビデオ／映像エンコーディングを行うエンコーディング装置を提供する。前記エンコーディング装置は、本文書の実施例において開示された方法を行う。
本文書の一実施例によると、本文書の実施例のうち少なくとも一つに開示されたビデオ／映像エンコーディング方法によって生成されたエンコーディングされたビデオ／映像情報が格納されたコンピュータ読み取り可能なデジタル格納媒体を提供する。
本文書の一実施例によると、デコーディング装置により本文書の実施例のうち少なくとも一つに開示されたビデオ／映像デコーディング方法を実行するようにするエンコーディングされた情報またはエンコーディングされたビデオ／映像情報が格納されたコンピュータ読み取り可能なデジタル格納媒体を提供する。
本文書は様々な効果を有することができる。例えば、本文書の一実施例によると、全般的な映像／ビデオ圧縮効率を高めることができる。また、本文書の一実施例によると、変換スキップ及び／又はパレットコーディング関連情報を効率的にパーシング／シグナリングすることができる。また、本文書の一実施例によると、変換スキップ及び／又はパレットコーディング時に使用される情報の従属性及び／又は非終属性に応じてコーディングするか否かを効果的に決定することができる。また、本文書の一実施例によると、変換スキップ及び／又はパレットコーディング関連ハイレベルシンタックス要素（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）に対して従属性のあるシンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）を効果的にパーシングするための従属条件を定義し、前記従属条件に応じてパーシングするか否かを決定することにより効率的なコーディングが可能である。また、本文書の一実施例によると、変換スキップ及び／又はパレットコーディング関連ハイレベルシンタックス要素（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）に対して従属条件に応じてパーシングするか否かを決定させることにより、送信されるビットを節約する効果が得られる。
本文書の具体的な一例を介して得ることができる効果は、以上で羅列された効果に制限されない。例えば、関連した技術分野の通常の知識を有する者が（ａ ｐｅｒｓｏｎ ｈａｖｉｎｇ ｏｒｄｉｎａｒｙ ｓｋｉｌｌ ｉｎ ｔｈｅ ｒｅｌａｔｅｄ ａｒｔ）が本文書から理解し、または誘導できる多様な技術的効果が存在できる。それによって、本文書の具体的な効果は、本文書に明示的に記載されたものに制限されずに、本文書の技術的特徴から理解され、または誘導されることができる多様な効果を含むことができる。
本文書の実施例に適用できるビデオ／映像コーディングシステムの例を概略的に示す。 本文書の実施例が適用できるビデオ／映像エンコーディング装置の構成を概略的に説明する図である。 本文書の実施例が適用できるビデオ／映像デコーディング装置の構成を概略的に説明する図である。 本文書の実施例が適用可能な概略的なビデオ／映像エンコーディング方法の一例を示す。 本文書の実施例が適用可能な概略的なビデオ／映像デコーディング方法の一例を示す。 本文書の実施例が適用可能なエントロピーエンコーディング方法の一例を概略的に示す。 エンコーディング装置内のエントロピーエンコーディング部を概略的に示す。 本文書の実施例が適用可能なエントロピーデコーディング方法の一例を概略的に示す。 デコーディング装置内のエントロピーデコーディング部を概略的に示す。 本文書の実施例（ら）によるビデオ／映像エンコーディング方法及び関連コンポーネントの一例を概略的に示す。 本文書の実施例（ら）によるビデオ／映像エンコーディング方法及び関連コンポーネントの一例を概略的に示す。 本文書の実施例（ら）によるビデオ／映像デコーディングの方法及び関連コンポーネントの一例を概略的に示す。 本文書の実施例（ら）によるビデオ／映像デコーディングの方法及び関連コンポーネントの一例を概略的に示す。 本文書において開示された実施例が適用できるコンテンツストリーミングシステムの例を示す。
本文書は、様々な変更を加えることができ、種々の実施例を有することができ、特定実施例を図面に例示し、詳細に説明しようとする。しかしながら、これは、本文書を特定実施例に限定しようとするものではない。本明細書で常用する用語は、単に特定の実施例を説明するために使用されたものであって、本文書の技術的思想を限定しようとする意図で使用されるものではない。単数の表現は、文脈上明白に異なるように意味しない限り、複数の表現を含む。本明細書において「含む」または「有する」などの用語は、明細書上に記載された特徴、数字、ステップ、動作、構成要素、部品、またはこれらを組み合わせたものが存在することを指定しようとするものであり、一つまたはそれ以上の他の特徴や数字、ステップ、動作、構成要素、部品、またはこれらを組み合わせたものなどの存在または付加可能性を予め排除しないことと理解されるべきである。
一方、本文書で説明される図面上の各構成は、互いに異なる特徴的な機能に関する説明の都合上、独立に図示されたものであって、各構成が互いに別個のハードウェアや別個のソフトウェアで具現されるということを意味するものではない。例えば、各構成のうち、二つ以上の構成が結合されて一つの構成をなすこともでき、一つの構成を複数の構成に分けることもできる。各構成が統合及び／または分離された実施例も本文書の本質から外れない限り、本文書の権利範囲に含まれる。
本文書において「Ａ又はＢ（Ａ ｏｒ Ｂ）」は「ただＡ」、「ただＢ」又は「ＡとＢの両方とも」を意味することができる。言い換えれば、本文書において「Ａ又はＢ（Ａ ｏｒ Ｂ）」は「Ａ及び／又はＢ（Ａ ａｎｄ／ｏｒ Ｂ）」と解釈されることができる。例えば、本明細書において「Ａ、Ｂ又はＣ（Ａ、Ｂ ｏｒ Ｃ）」は「ただＡ」、「ただＢ」、「ただＣ」、又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙ ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ａ、Ｂ ａｎｄ Ｃ）」を意味することができる。
本明細書で使われるスラッシュ（／）や読点（ｃｏｍｍａ）は「及び／または（ａｎｄ／ｏｒ）」を意味することができる。例えば、「Ａ／Ｂ」は「Ａ及び／又はＢ」を意味することができる。それによって、「Ａ／Ｂ」は「ただＡ」、「ただＢ」、又は「ＡとＢの両方とも」を意味することができる。例えば、「Ａ、Ｂ、Ｃ」は「Ａ、Ｂ又はＣ」を意味することができる。
本明細書において「少なくとも１つのＡ及びＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ Ｂ）」は、「ただＡ」、「ただＢ」又は「ＡとＢの両方とも」を意味することができる。また、本明細書において「少なくとも１つのＡ又はＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ｏｒ Ｂ）」や「少なくとも１つのＡ及び／又はＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ／ｏｒ Ｂ）」という表現は「少なくとも１つのＡ及びＢ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ ａｎｄ Ｂ）」と同じく解釈されることができる。
また、本明細書において「少なくとも１つのＡ、Ｂ及びＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」は、「ただＡ」、「ただＢ」、「ただＣ」、又は「Ａ、Ｂ及びＣの任意の全ての組み合わせ（ａｎｙ ｃｏｍｂｉｎａｔｉｏｎ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」を意味することができる。また、「少なくとも１つのＡ、ＢまたはＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ｏｒ Ｃ）」や「少なくとも１つのＡ、Ｂ及び／又はＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ／ｏｒ Ｃ）」は「少なくとも１つのＡ、Ｂ及びＣ（ａｔ ｌｅａｓｔ ｏｎｅ ｏｆ Ａ， Ｂ ａｎｄ Ｃ）」を意味することができる。
また、本明細書で使われる括弧は「例えば（ｆｏｒ ｅｘａｍｐｌｅ）」を意味することができる。具体的に、「予測（イントラ予測）」で表示された場合、「予測」の一例として「イントラ予測」が提案されたものであり得る。言い換えると、本明細書の「予測」は「イントラ予測」に制限（ｌｉｍｉｔ）されずに、「イントラ予測」が「予測」の一例として提案されたものであり得る。また、「予測（すなわち、イントラ予測）」で表示された場合も、「予測」の一例として「イントラ予測」が提案されたものであり得る。
本文書は、ビデオ／映像コーディングに関する。例えば、本文書において開示された方法／実施例はＶＶＣ（ｖｅｒｓａｔｉｌｅ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準に開示される方法に適用されることができる。また、本文書において開示された方法／実施例はＥＶＣ（ｅｓｓｅｎｔｉａｌ ｖｉｄｅｏ ｃｏｄｉｎｇ）標準、ＡＶ１（ＡＯＭｅｄｉａ Ｖｉｄｅｏ １）標準、ＡＶＳ２（２ｎｄ ｇｅｎｅｒａｔｉｏｎ ｏｆ ａｕｄｉｏ ｖｉｄｅｏ ｃｏｄｉｎｇ ｓｔａｎｄａｒｄ）又は次世代ビデオ／映像コーディング標準（例えば、Ｈ．２６７又はＨ．２６８など）に開示される方法に適用されることができる。
この文書ではビデオ／映像コーディングに関する多様な実施例を提示し、他の言及がない限り、前記実施例は、互いに組み合わせて実行されることもできる。
この文書においてビデオ（ｖｉｄｅｏ）は、時間の流れによる一連の映像（ｉｍａｇｅ）の集合を意味し得る。ピクチャ（ｐｉｃｔｕｒｅ）は、一般に特定の時間帯の１つの映像を示す単位を意味し、スライス（ｓｌｉｃｅ）／タイル（ｔｉｌｅ）はコーディングにおいてピクチャの一部を構成する単位である。スライス／タイルは、１つ以上のＣＴＵ（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ）を含んでもよい。１つのピクチャは１つ以上のスライス／タイルで構成されてもよい。１つのピクチャは１つ以上のタイルグループで構成されてもよい。タイルはピクチャ内の特定タイル列及び特定タイル列以内のＣＴＵの四角領域である（A tile is a rectangular region of CTUs within a particular tile column and a particular tile row in a picture）。前記タイル列はＣＴＵの四角領域であり、前記四角領域は前記ピクチャの高さと同一の高さを有し、幅はピクチャパラメータセット内のシンタックス要素により明示される（The tile column is a rectangular region of CTUs having a height equal to the height of the picture and a width specified by syntax elements in the picture parameter set）。前記タイル行はＣＴＵの四角領域であり、前記四角領域はピクチャパラメータセット内のシンタックス要素により明示される幅を有し、高さは前記ピクチャの高さと同一であり得る（The tile row is a rectangular region of CTUs having a height specified by syntax elements in the picture parameter set and a width equal to the width of the picture）。タイルスキャンはピクチャをパーティショニングするＣＴＵの特定の順次オーダリングを示し、前記ＣＴＵはタイル内のＣＴＵラスタスキャンで連続整列され、ピクチャ内のタイルは前記ピクチャの前記タイルのラスタスキャンで連続整列される（A tile scan is a specific sequential ordering of CTUs partitioning a picture in which the CTUs are ordered consecutively in CTU raster scan in a tile whereas tiles in a picture are ordered consecutively in a raster scan of the tiles of the picture）。スライスは単一ＮＡＬユニットに排他的に含まれ得る、整数個の完全なタイル又はピクチャのタイル内の整数個の連続的な完全なＣＴＵ行を含む（A slice includes an integer number of complete tiles or an integer number of consecutive complete CTU rows within a tile of a picture that may be exclusively contained in a single NAL unit）。
一方、１つのピクチャは２つ以上のサブピクチャに区分される。サブピクチャはピクチャ内の１つ以上のスライスの四角領域である（an rectangular region of one or more slices within a picture）。
ピクセル（ｐｉｘｅｌ）またはペル（ｐｅｌ）は、一つのピクチャ（または、映像）を構成する最小の単位を意味することができる。また、ピクセルに対応する用語として「サンプル（ｓａｍｐｌｅ）」が使用されることができる。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、ルマ（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すこともでき、クロマ（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。または、サンプルは、空間ドメインでのピクセル値を意味することもでき、このようなピクセル値が周波数ドメインに変換されると、周波数ドメインでの変換係数を意味することもできる。
ユニット（ｕｎｉｔ）は、映像処理の基本単位を示すことができる。ユニットは、ピクチャの特定領域及び当該領域に関連した情報のうち少なくとも一つを含むことができる。一つのユニットは、一つのルマブロック及び二つのクロマ（例えば、ｃｂ、ｃｒ）ブロックを含むことができる。ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプル（または、サンプルアレイ）、または変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）の集合（または、アレイ）を含むことができる。
本文書において、量子化／逆量子化及び／又は変換／逆変換の少なくとも１つは省略されてもよい。前記量子化／逆量子化が省略される場合、量子化された変換係数は変換係数と呼ばれてもよい。変換／逆変換が省略される場合、変換係数は係数又はレジデュアル係数と呼ばれてもよく、又は表現の統一性のために変換係数と依然として呼ばれてもよい。
本文書において、量子化された変換係数及び変換係数は、それぞれ変換係数及びスケーリングされた（ｓｃａｌｅｄ）変換係数と呼ばれてもよい。この場合、レジデュアル情報は、変換係数（ら）に関する情報を含み、変換係数（ら）に関する情報は、レジデュアルコーディングシンタックスを介してシグナリングされることができる。レジデュアル情報（又は、前記変換係数（ら）に関する情報）に基づいて変換係数が導出され、変換係数に対する逆変換（スケーリング）によりスケーリングされた変換係数が導出される。スケーリングされた変換係数に対する逆変換（変換）に基づいてレジデュアルサンプルが導出される。これは、本文書の他の部分においても同様に適用／表現できる。
本文書において１つの図面内で個別的に説明される技術的特徴は、個別的に実現されてもよく、同時に実現されてもよい。
以下、添付の図面を参照して、本文書の好ましい実施例をより詳細に説明する。以下，図面上の同一の構成要素に対しては同一の参照符号を使用し，同一の構成要素に関する重複した説明は省略される。
図１は、本文書の実施例に適用できるビデオ／映像コーディングシステムの例を概略的に示す。
図１に示すように、ビデオ／映像コーディングシステムは第１装置（ソースデバイス）及び第２装置（受信デバイス）を含む。ソースデバイスはエンコーディングされたビデオ（ｖｉｄｅｏ）／映像（ｉｍａｇｅ）情報又はデータをファイル又はストリーミング形態でデジタル格納媒体又はネットワークを介して受信デバイスに伝達することができる。
前記ソースデバイスは、ビデオソース、エンコーディング装置、送信部を含むことができる。前記受信デバイスは、受信部、デコーディング装置、及びレンダラを含むことができる。前記エンコーディング装置は、ビデオ／映像エンコーディング装置と呼ばれることができ、前記デコーディング装置は、ビデオ／映像デコーディング装置と呼ばれることができる。送信機は、エンコーディング装置に含まれることができる。受信機は、デコーディング装置に含まれることができる。レンダラは、ディスプレイ部を含むこともでき、ディスプレイ部は、別個のデバイスまたは外部コンポーネントで構成されることもできる。
ビデオソースは、ビデオ／映像のキャプチャ、合成または生成過程などを介してビデオ／映像を取得することができる。ビデオソースは、ビデオ／映像キャプチャデバイス及び／またはビデオ／映像生成デバイスを含むことができる。ビデオ／映像キャプチャデバイスは、例えば、一つ以上のカメラ、以前にキャプチャされたビデオ／映像を含むビデオ／映像アーカイブなどを含むことができる。ビデオ／映像生成デバイスは、例えば、コンピュータ、タブレット、及びスマートフォンなどを含むことができ、（電子的に）ビデオ／映像を生成することができる。例えば、コンピュータなどを介して仮想のビデオ／映像が生成されることができ、この場合、ビデオ／映像キャプチャ過程を関連データが生成される過程に代替されることができる。
エンコーディング装置は、入力ビデオ／映像をエンコーディングすることができる。エンコーディング装置は、圧縮及びコーディング効率のために、予測、変換、量子化など、一連の手順を実行することができる。エンコーディングされたデータ（エンコーディングされたビデオ／映像情報）は、ビットストリーム（ｂｉｔｓｔｒｅａｍ）形態で出力されることができる。
送信部は、ビットストリーム形態で出力されたエンコーディングされたビデオ／映像情報またはデータをファイルまたはストリーミング形態でデジタル格納媒体またはネットワークを介して受信デバイスの受信部に伝達できる。デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなど、多様な格納媒体を含むことができる。送信部は、あらかじめ決められたファイルフォーマットを介してメディアファイルを生成するためのエレメントを含むことができ、放送／通信ネットワークを介した送信のためのエレメントを含むことができる。受信部は、前記ビットストリームを受信／抽出してデコーディング装置に伝達できる。
デコーディング装置は、エンコーディング装置の動作に対応する逆量子化、逆変換、予測など、一連の手順を実行してビデオ／映像をデコーディングすることができる。
レンダラは、デコーディングされたビデオ／映像をレンダリングすることができる。レンダリングされたビデオ／映像は、ディスプレイ部を介してディスプレイされることができる。
図２は、本文書の実施例が適用できるビデオ／映像エンコーディング装置の構成を概略的に説明する図である。以下、エンコーディング装置とは、映像エンコーディング装置及び／又はビデオエンコーディング装置を含む。
図２に示すように、エンコーディング装置２００は、画像分割部（ｉｍａｇｅ ｐａｒｔｉｔｉｏｎｅｒ）２１０、予測部（ｐｒｅｄｉｃｔｏｒ）２２０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）２３０、エントロピーエンコーディング部（ｅｎｔｒｏｐｙ ｅｎｃｏｄｅｒ）２４０、加算部（ａｄｄｅｒ）２５０、フィルタリング部（ｆｉｌｔｅｒ）２６０、及びメモリ（ｍｅｍｏｒｙ）２７０を備えて構成されることができる。予測部２２０は、インター予測部２２１及びイントラ予測部２２２を備えることができる。レジデュアル処理部２３０は、変換部（ｔｒａｎｓｆｏｒｍｅｒ）２３２、量子化部（ｑｕａｎｔｉｚｅｒ）２３３、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）２３４、逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）２３５を備えることができる。レジデュアル処理部２３０は、減算部（ｓｕｂｔｒａｃｔｏｒ、２３１）をさらに備えることができる。加算部２５０は、復元部（ｒｅｃｏｎｓｔｒｕｃｔｏｒ）または復元ブロック生成部（ｒｅｃｏｎｔｒｕｃｔｇｅｄ ｂｌｏｃｋ ｇｅｎｅｒａｔｏｒ）と呼ばれることができる。前述した画像分割部２１０、予測部２２０、レジデュアル処理部２３０、エントロピーエンコーディング部２４０、加算部２５０、及びフィルタリング部２６０は、実施形態によって１つ以上のハードウェアコンポーネント（例えば、エンコーダチップセットまたはプロセッサ）によって構成されることができる。また、メモリ２７０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体によって構成されることもできる。前記ハードウェアコンポーネントは、メモリ２７０を内／外部コンポーネントとしてさらに備えることもできる。
画像分割部２１０は、エンコーディング装置２００に入力された入力画像（または、ピクチャ、フレーム）を１つ以上の処理ユニット（ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）に分割することができる。一例として、前記処理ユニットは、コーディングユニット（ｃｏｄｉｎｇ ｕｎｉｔ、ＣＵ）と呼ばれることができる。この場合、コーディングユニットは、コーディングツリーユニット（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔ、ＣＴＵ）または最大コーディングユニット（ｌａｒｇｅｓｔ ｃｏｄｉｎｇ ｕｎｉｔ、ＬＣＵ）からＱＴＢＴＴＴ（Ｑｕａｄ－ｔｒｅｅ ｂｉｎａｒｙ－ｔｒｅｅ ｔｅｒｎａｒｙ－ｔｒｅｅ）構造によって再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）分割されることができる。例えば、１つのコーディングユニットは、クアッドツリー構造、バイナリツリー構造、及び／またはターナリ構造に基づいて下位（ｄｅｅｐｅｒ）デプスの複数のコーディングユニットに分割されることができる。この場合、例えば、クアッドツリー構造が先に適用され、バイナリツリー構造及び／またはターナリ構造がその後に適用されることができる。または、バイナリツリー構造が先に適用されることもできる。それ以上分割されない最終コーディングユニットに基づいて本開示に係るコーディング手順が行われ得る。この場合、画像特性によるコーディング効率などに基づいて、最大コーディングユニットが最終コーディングユニットとして使用されることができ、または、必要に応じてコーディングユニットは、再帰的に（ｒｅｃｕｒｓｉｖｅｌｙ）もっと下位デプスのコーディングユニットに分割されて最適のサイズのコーディングユニットが最終コーディングユニットとして使用されることができる。ここで、コーディング手順とは、後述する予測、変換、及び復元などの手順を含むことができる。他の例として、前記処理ユニットは、予測ユニット（ＰＵ：Ｐｒｅｄｉｃｔｉｏｎ Ｕｎｉｔ）または変換ユニット（ＴＵ：Ｔｒａｎｓｆｏｒｍ Ｕｎｉｔ）をさらに備えることができる。この場合、前記予測ユニット及び前記変換ユニットは、各々前述した最終コーディングユニットから分割またはパーティショニングされることができる。前記予測ユニットは、サンプル予測の単位であることができ、前記変換ユニットは、変換係数を導く単位及び／または変換係数からレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ）を導く単位であることができる。
ユニットは、場合によって、ブロック（ｂｌｏｃｋ）または領域（ａｒｅａ）などの用語と混用して使用されることができる。一般的な場合、Ｍ×Ｎブロックは、Ｍ個の列とＮ個の行からなるサンプルまたは変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）等の集合を示すことができる。サンプルは、一般的にピクセルまたはピクセルの値を示すことができ、輝度（ｌｕｍａ）成分のピクセル／ピクセル値のみを示すことができ、彩度（ｃｈｒｏｍａ）成分のピクセル／ピクセル値のみを示すこともできる。サンプルは、１つのピクチャ（または、画像）をピクセル（ｐｉｘｅｌ）またはペル（ｐｅｌ）に対応する用語として使用することができる。
エンコーディング装置２００は、入力映像信号（原本ブロック、原本サンプルアレイ）からインター予測部２２１又はイントラ予測部２２２から出力された予測信号（予測されたブロック、予測サンプルアレイ）を減算してレジデュアル信号（ｒｅｓｉｄｕａｌ ｓｉｇｎａｌ、残余ブロック、残余サンプルアレイ）を生成し、生成されたレジデュアル信号は、変換部２３２に送信される。この場合、図示されているように、エンコーダ２００内において入力映像信号（原本ブロック、原本サンプルアレイ）から予測信号（予測ブロック、予測サンプルアレイ）を減算するユニットは、減算部２３１と呼ばれてもよい。予測部は、処理対象ブロック（以下、現在ブロックという）に対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成する。予測部は、現在ブロック又はＣＵ単位でイントラ予測が適用されるか、又はインター予測が適用されるか決定することができる。予測部は、各予測モードに関する説明において後述するように、予測モード情報などの予測に関する様々な情報を生成してエントロピーエンコーディング部２４０に伝達する。予測に関する情報は、エントロピーエンコーディング部２４０においてエンコーディングされてビットストリーム形態で出力される。
イントラ予測部２２２は、現在ピクチャ内のサンプルを参照して現在ブロックを予測することができる。前記参照されるサンプルは、予測モードによって前記現在ブロックに隣接（ｎｅｉｇｈｂｏｒ）して位置することができ、または、離れて位置することもできる。イントラ予測で予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。非方向性モードは、例えば、ＤＣモード及びプラナーモード（Ｐｌａｎａｒモード）を含むことができる。方向性モードは、予測方向の細かい程度によって、例えば、３３個の方向性予測モードまたは６５個の方向性予測モードを含むことができる。ただし、これは、例示であり、設定によってそれ以上またはそれ以下の個数の方向性予測モードが使用され得る。イントラ予測部２２２は、隣接ブロックに適用された予測モードを用いて、現在ブロックに適用される予測モードを決定することもできる。
インター予測部２２１は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを導くことができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、動き情報をブロック、サブブロック、またはサンプル単位で予測することができる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）とを含むことができる。前記参照ブロックを含む参照ピクチャと前記時間的隣接ブロックを含む参照ピクチャとは同じであることができ、異なることもできる。前記時間的隣接ブロックは、同一位置参照ブロック（ｃｏｌｌｏｃａｔｅｄ ｒｅｆｅｒｅｎｃｅ ｂｌｏｃｋ）、同一位置ＣＵ（ｃｏｌ ＣＵ）などの名前で呼ばれることができ、前記時間的隣接ブロックを含む参照ピクチャは、同一位置ピクチャ（ｃｏｌｌｏｃａｔｅｄ ｐｉｃｔｕｒｅ、ｃｏｌＰｉｃ）と呼ばれることもできる。例えば、インター予測部２２１は、隣接ブロックに基づいて動き情報候補リストを構成し、前記現在ブロックの動きベクトル及び／または参照ピクチャインデックスを導出するために、どの候補が使用されるかを指示する情報を生成することができる。様々な予測モードに基づいてインター予測が行われ得るし、例えば、スキップモードとマージモードとの場合に、インター予測部２２１は、隣接ブロックの動き情報を現在ブロックの動き情報として利用することができる。スキップモードの場合、マージモードとは異なり、レジデュアル信号が送信されないことがある。動き情報予測（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｉｏｎ、ＭＶＰ）モードの場合、隣接ブロックの動きベクトルを動きベクトル予測子（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｐｒｅｄｉｃｔｏｒ）として用い、動きベクトル差分（ｍｏｔｉｏｎ ｖｅｃｔｏｒ ｄｉｆｆｅｒｅｎｃｅ）をシグナリングすることにより、現在ブロックの動きベクトルを指示することができる。
予測部２２０は後述する様々な予測方法に基づいて予測信号を生成する。例えば、予測部は１つのブロックに対する予測のためにイントラ予測又はインター予測を適用できるだけでなく、イントラ予測とインター予測を同時に適用する。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれてもよい。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）予測モードに基づくことができ、又はパレットモード（ｐａｌｅｔｔｅ ｍｏｄｅ）に基づくこともできる。前記ＩＢＣ予測モード又はパレットモードは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのようにゲームなどのコンテンツ映像／動画コーディングのために使用される。ＩＢＣは、基本的に現在ピクチャ内において予測を行うが、現在ピクチャ内において参照ブロックを導出する点においてインター予測と類似して行われる。すなわち、ＩＢＣは、本文書において説明されるインター予測技法のうち少なくとも１つを用いることができる。パレットモードはイントラコーディング又はイントラ予測の一例と見なすことができる。パレットモードが適用される場合、パレットテーブル及びパレットインデックスに関する情報に基づいてピクチャ内のサンプル値をシグナリングする。
前記予測部（インター予測部２２１及び／又は前記イントラ予測部２２２を含む）により生成された予測信号は、復元信号を生成するために用いられるか、レジデュアル信号を生成するために用いられる。変換部２３２は、レジデュアル信号に変換技法を適用して変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔｓ）を生成する。例えば、変換技法は、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＤＳＴ（Ｄｉｓｃｒｅｔｅ Ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、ＫＬＴ（Ｋａｒｈｕｎｅｎ－Ｌｏｅｖｅ Ｔｒａｎｓｆｏｒｍ）、ＧＢＴ（Ｇｒａｐｈ－Ｂａｓｅｄ Ｔｒａｎｓｆｏｒｍ）、又はＣＮＴ（Ｃｏｎｄｉｔｉｏｎａｌｌｙ Ｎｏｎ－ｌｉｎｅａｒ Ｔｒａｎｓｆｏｒｍ）の少なくとも１つを含む。ここで、ＧＢＴは、ピクセル間の関係情報をグラフで表現する時、このグラフから得られた変換を意味する。ＣＮＴは、以前に復元された全てのピクセル（ａｌｌ ｐｒｅｖｉｏｕｓｌｙ ｒｅｃｏｎｓｔｒｕｃｔｅｄ ｐｉｘｅｌ）を用いて予測信号を生成し、それに基づいて取得される変換を意味する。また、変換過程は正方形の同一のサイズを有するピクセルブロックに適用されてもよく、正方形ではない可変サイズのブロックに適用されてもよい。
量子化部２３３は、変換係数を量子化してエントロピーエンコーディング部２４０に送信し、エントロピーエンコーディング部２４０は、量子化された信号（量子化された変換係数に関する情報）をエンコーディングしてビットストリームに出力する。前記量子化された変換係数に関する情報は、レジデュアル情報と呼ばれることができる。量子化部２３３は、係数スキャン順序（ｓｃａｎ ｏｒｄｅｒ）に基づいてブロック形態の量子化された変換係数を１次元ベクトル形態で再整列することができ、前記１次元ベクトル形態の量子化された変換係数に基づいて前記量子化された変換係数に関する情報を生成することもできる。エントロピーエンコーディング部２４０は、例えば、指数ゴロム（ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）、ＣＡＶＬＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）、ＣＡＢＡＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｂｉｎａｒｙ ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）などの様々なエンコーディング方法を行うことができる。エントロピーエンコーディング部２４０は、量子化された変換係数の他に、ビデオ／イメージ復元に必要な情報（例えば、シンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ）の値など）を共に又は別にエンコーディングすることもできる。エンコーディングされた情報（例えば、エンコーディングされたビデオ／映像情報）は、ビットストリーム形態でＮＡＬ（ｎｅｔｗｏｒｋ ａｂｓｔｒａｃｔｉｏｎ ｌａｙｅｒ）ユニット単位で送信又は格納されることができる。前記ビデオ／映像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、又はビデオパラメータセット（ＶＰＳ）などの様々なパラメータセットに関する情報をさらに含んでもよい。また、前記ビデオ／映像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含んでもよい。本文書において、エンコーディング装置からデコーディング装置に伝達／シグナリングされる情報及び／又はシンタックス要素は、ビデオ／映像情報に含まれる。前記ビデオ／映像情報は、前述のエンコーディング手順によりエンコーディングされて前記ビットストリームに含まれる。前記ビットストリームは、ネットワークを介して送信されるか、又はデジタル格納媒体に格納されることができる。ここで、ネットワークは、放送網及び／又は通信網などを含み、デジタル格納媒体は、ＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなどの様々な格納媒体を含む。エントロピーエンコーディング部２４０から出力された信号を送信する送信部（図示せず）及び／又は格納する格納部（図示せず）がエンコーディング装置２００の内／外部エレメントとして構成されてもよく、又は、送信部はエントロピーエンコーディング部２４０に含まれてもよい。
量子化部２３３から出力された量子化された変換係数は、予測信号を生成するために用いられることができる。例えば、量子化された変換係数に逆量子化部２３４及び逆変換部２３５を介して逆量子化及び逆変換を適用することにより、レジデュアル信号（レジデュアルブロック又はレジデュアルサンプル）を復元できる。加算部１５５は復元されたレジデュアル信号をインター予測部２２１又はイントラ予測部２２２から出力された予測信号に加えることにより復元（ｒｅｃｏｎｓｔｒｕｃｔｅｄ）信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成する。スキップモードが適用された場合のように、処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使用されることができる。加算部２５０は、復元部又は復元ブロック生成部と呼ばれてもよい。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使用されることができ、後述するように、フィルタリングを経て次のピクチャのインター予測のために使用されることもできる。
一方、ピクチャエンコーディング及び／または復元過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍ ａｓｃａｌｉｎｇ）が適用されることもできる。
フィルタリング部２６０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部２６０は、復元ピクチャに多様なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ２７０、具体的に、メモリ２７０のＤＰＢに格納することができる。前記多様なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ、ＳＡＯ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。フィルタリング部２６０は、各フィルタリング方法に対する説明で後述するように、フィルタリングに関する多様な情報を生成してエントロピーエンコーディング部２９０に伝達できる。フィルタリング関する情報は、エントロピーエンコーディング部２９０でエンコーディングされてビットストリーム形態で出力されることができる。
メモリ２７０に送信された修正された復元ピクチャは、インター予測部２８０で参照ピクチャとして使われることができる。エンコーディング装置は、これを介してインター予測が適用される場合、エンコーディング装置２００とデコーディング装置での予測ミスマッチを避けることができ、符号化効率も向上させることができる。
メモリ２７０のＤＰＢは。修正された復元ピクチャをインター予測部２２１での参照ピクチャとして使用するために格納することができる。メモリ２７０は、現在ピクチャ内の動き情報が導出された（または、エンコーディングされた）ブロックの動き情報及び／または既に復元されたピクチャ内のブロックの動き情報を格納することができる。前記格納された動き情報は、空間的隣接ブロックの動き情報または時間的隣接ブロックの動き情報として活用するためにインター予測部２２１に伝達できる。メモリ２７０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納することができ、イントラ予測部２２２に伝達できる。
図３は、本文書の実施例が適用できるビデオ／映像デコーディング装置の構成を概略的に説明する図である。以下、デコーディング装置とは、映像デコーディング装置及び／又はビデオデコーディング装置を含む。
図３に示すように、デコーディング装置３００は、エントロピーデコーディング部（ｅｎｔｒｏｐｙ ｄｅｃｏｄｅｒ）３１０、レジデュアル処理部（ｒｅｓｉｄｕａｌ ｐｒｏｃｅｓｓｏｒ）３２０、予測部（ｐｒｅｄｉｃｔｏｒ）３３０、加算部（ａｄｄｅｒ）３４０、フィルタリング部（ｆｉｌｔｅｒ）３５０、及びメモリ（ｍｅｍｏｅｒｙ）３６０を備えて構成されることができる。予測部３３０は、インター予測部３３２及びイントラ予測部３３１を備えることができる。レジデュアル処理部３２０は、逆量子化部（ｄｅｑｕａｎｔｉｚｅｒ）３２１及び逆変換部（ｉｎｖｅｒｓｅ ｔｒａｎｓｆｏｒｍｅｒ）３２１を備えることができる。前述したエントロピーデコーディング部３１０、レジデュアル処理部３２０、予測部３３０、加算部３４０、及びフィルタリング部３５０は、実施形態によって１つのハードウェアコンポーネント（例えば、デコーダチップセットまたはプロセッサ）により構成されることができる。また、メモリ３６０は、ＤＰＢ（ｄｅｃｏｄｅｄ ｐｉｃｔｕｒｅ ｂｕｆｆｅｒ）を備えることができ、デジタル格納媒体により構成されることもできる。前記ハードウェアコンポーネントは、メモリ３６０を内／外部コンポーネントとしてさらに備えることもできる。
ビデオ／画像情報を含むビットストリームが入力されれば、デコーディング装置３００は、図３のエンコーディング装置でビデオ／画像情報が処理されたプロセスに対応して画像を復元することができる。例えば、デコーディング装置３００は、前記ビットストリームから取得したブロック分割関連情報に基づいてユニット／ブロックを導出することができる。デコーディング装置３００は、エンコーディング装置で適用された処理ユニットを用いてデコーディングを行うことができる。従って、デコーディングの処理ユニットは、例えば、コーディングユニットであることができ、コーディングユニットは、コーディングツリーユニットまたは最大コーディングユニットからクアッドツリー構造、バイナリツリー構造、及び／またはターナリツリー構造に従って分割されることができる。コーディングユニットから１つ以上の変換ユニットが導出され得る。そして、デコーディング装置３００を介してデコーディング及び出力された復元画像信号は、再生装置を介して再生されることができる。
デコーディング装置３００は、図２のエンコーディング装置から出力された信号をビットストリーム形態で受信し、受信された信号は、エントロピーデコーディング部３１０を介してデコーディングされる。例えば、エントロピーデコーディング部３１０は、前記ビットストリームをパーシングして映像復元（又は、ピクチャ復元）に必要な情報（例えば、ビデオ／映像情報）を導出することができる。前記ビデオ／映像情報は、アダプテーションパラメータセット（ＡＰＳ）、ピクチャパラメータセット（ＰＰＳ）、シーケンスパラメータセット（ＳＰＳ）、又はビデオパラメータセット（ＶＰＳ）などの様々なパラメータセットに関する情報をさらに含んでもよい。また、前記ビデオ／映像情報は、一般制限情報（ｇｅｎｅｒａｌ ｃｏｎｓｔｒａｉｎｔ ｉｎｆｏｒｍａｔｉｏｎ）をさらに含んでもよい。デコーディング装置は、前記パラメータセットに関する情報及び／又は前記一般制限情報に基づいてさらにピクチャをデコーディングすることができる。本文書において後述されるシグナリング／受信される情報及び／又はシンタックス要素は、前記デコーディング手順を介してデコーディングされて前記ビットストリームから取得されることができる。例えば、エントロピーデコーディング部３１０は、指数ゴロム符号化、ＣＡＶＬＣ、又はＣＡＢＡＣなどのコーディング方法に基づいてビットストリーム内の情報をデコーディングし、映像復元に必要なシンタックス要素の値、レジデュアルに関する変換係数の量子化された値を出力することができる。より詳細に、ＣＡＢＡＣエントロピーデコーディング方法は、ビットストリームにおいて各構文要素に該当するビンを受信し、デコーディング対象構文要素情報と周辺及びデコーディング対象ブロックのデコーディング情報あるいは以前ステップでデコーディングされたシンボル／ビンの情報を利用して文脈（ｃｏｎｔｅｘｔ）モデルを決定し、決定された文脈モデルによってビン（ｂｉｎ）の発生確率を予測してビンの算術デコーディング（ａｒｉｔｈｍｅｔｉｃ ｄｅｃｏｄｉｎｇ）を行うことにより各構文要素の値に該当するシンボルを生成できる。このとき、ＣＡＢＡＣエントロピーデコーディング方法は、文脈モデル決定後、次のシンボル／ビンの文脈モデルのためにデコーディングされたシンボル／ビンの情報を利用して文脈モデルをアップデートすることができる。エントロピーデコーディング部３１０でデコーディングされた情報のうち予測に関する情報は予測部（インター予測部３３２及びイントラ予測部３３１）に提供され、エントロピーデコーディング部３１０でエントロピーデコーディングが行われたレジデュアル値、すなわち、量子化された変換係数及び関連パラメータ情報は、レジデュアル処理部３２０に入力される。レジデュアル処理部３２０は、レジデュアル信号（レジデュアルブロック、レジデュアルサンプル、レジデュアルサンプルアレイ）を導出できる。また、エントロピーデコーディング部３１０でデコーディングされた情報のうちフィルタリングに関する情報は、フィルタリング部３５０に提供される。一方、エンコーディング装置から出力された信号を受信する受信部（図示せず）がデコーディング装置３００の内／外部エレメントとしてさらに構成されてもよく、又は受信部は、エントロピーデコーディング部３１０の構成要素であってもよい。一方、本文書によるデコーディング装置は、ビデオ／映像／ピクチャデコーディング装置と呼ばれることができ、前記デコーディング装置は、情報デコーダ（ビデオ／映像／ピクチャ情報デコーダ）及びサンプルデコーダ（ビデオ／映像／ピクチャサンプルデコーダ）に区分することもできる。前記情報デコーダは、前記エントロピーデコーディング部３１０を含んでもよく、前記サンプルデコーダは、前記逆量子化部３２１、逆変換部３２２、加算部３４０、フィルタリング部３５０、メモリ３６０、インター予測部３３２、及びイントラ予測部３３１のうち少なくとも１つを含んでもよい。
逆量子化部３２１では、量子化された変換係数を逆量子化して変換係数を出力することができる。逆量子化部３２１は、量子化された変換係数を２次元のブロック形態で再整列することができる。この場合、前記再整列は、エンコーディング装置で行われた係数スキャン順序に基づいて再整列を行うことができる。逆量子化部３２１は、量子化パラメータ（例えば、量子化ステップサイズ情報）を用いて量子化された変換係数に対する逆量子化を行い、変換係数（ｔｒａｎｓｆｏｒｍ ｃｏｅｆｆｉｃｉｅｎｔ）を取得することができる。
逆変換部３２２では、変換係数を逆変換してレジデュアル信号（レジデュアルブロック、レジデュアルサンプルアレイ）を取得するようになる。
予測部は、現在ブロックに対する予測を行い、前記現在ブロックに対する予測サンプルを含む予測されたブロック（ｐｒｅｄｉｃｔｅｄ ｂｌｏｃｋ）を生成することができる。予測部は、エントロピーデコーディング部３１０から出力された前記予測に関する情報に基づいて、前記現在ブロックにイントラ予測が適用されるか、または、インター予測が適用されるかを決定することができ、具体的なイントラ／インター予測モードを決定する。
予測部３２０は、後述する様々な予測方法に基づいて予測信号を生成できる。例えば、予測部は、１つのブロックに対する予測のためにイントラ予測又はインター予測を適用できるだけでなく、イントラ予測とインター予測とを同時に適用することができる。これは、ｃｏｍｂｉｎｅｄ ｉｎｔｅｒ ａｎｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ（ＣＩＩＰ）と呼ばれることができる。また、予測部は、ブロックに対する予測のために、イントラブロックコピー（ｉｎｔｒａ ｂｌｏｃｋ ｃｏｐｙ、ＩＢＣ）予測モードに基づくことができ、またはパレットモード（ｐａｌｅｔｔｅ ｍｏｄｅ）に基づくこともできる。前記ＩＢＣ予測モード又はパレットモードは、例えば、ＳＣＣ（ｓｃｒｅｅｎ ｃｏｎｔｅｎｔ ｃｏｄｉｎｇ）などのように、ゲームなどのコンテンツ映像／動画コーディングのために使用されることができる。ＩＢＣは、基本的に現在ピクチャ内において予測を行うが、現在ピクチャ内において参照ブロックを導出する点でインター予測と類似して行われることができる。すなわち、ＩＢＣは、本文書において説明されるインター予測技法のうち少なくとも１つを利用することができる。パレットモードは、イントラコーディング又はイントラ予測の一例と見なすことができる。パレットモードが適用される場合、パレットテーブル及びパレットインデックスに関する情報が前記ビデオ／映像情報に含まれてシグナリングされる。
イントラ予測部３３１は、現在ピクチャ内のサンプルを参照して現在ブロックを予測することができる。前記参照されるサンプルは、予測モードによって前記現在ブロックの隣接（ｎｅｉｇｈｂｏｒ）に位置でき、または離れて位置することもできる。イントラ予測において、予測モードは、複数の非方向性モードと複数の方向性モードとを含むことができる。イントラ予測部３３１は、隣接ブロックに適用された予測モードを利用し、現在ブロックに適用される予測モードを決定することもできる。
インター予測部３３２は、参照ピクチャ上で動きベクトルにより特定される参照ブロック（参照サンプルアレイ）に基づいて、現在ブロックに対する予測されたブロックを誘導することができる。このとき、インター予測モードで送信される動き情報の量を減らすために、隣接ブロックと現在ブロックとの間の動き情報の相関性に基づいて、動き情報をブロック、サブブロックまたはサンプル単位で予測できる。前記動き情報は、動きベクトル及び参照ピクチャインデックスを含むことができる。前記動き情報は、インター予測方向（Ｌ０予測、Ｌ１予測、Ｂｉ予測等）情報をさらに含むことができる。インター予測の場合に、隣接ブロックは、現在ピクチャ内に存在する空間的隣接ブロック（ｓｐａｔｉａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と、参照ピクチャに存在する時間的隣接ブロック（ｔｅｍｐｏｒａｌ ｎｅｉｇｈｂｏｒｉｎｇ ｂｌｏｃｋ）と、を含むことができる。例えば、インター予測部３３２は、隣接ブロックに基づいて動き情報候補リストを構成し、受信した候補選択情報に基づいて前記現在ブロックの動きベクトル及び／または参照ピクチャインデックスを導出することができる。多様な予測モードに基づいてインター予測が実行されることができ、前記予測に関する情報は、前記現在ブロックに対するインター予測のモードを指示する情報を含むことができる。
加算部３４０は、取得されたレジデュアル信号を、予測部３３０から出力された予測信号（予測されたブロック、予測サンプルアレイ）に加えることによって復元信号（復元ピクチャ、復元ブロック、復元サンプルアレイ）を生成することができる。スキップモードが適用された場合のように処理対象ブロックに対するレジデュアルがない場合、予測されたブロックが復元ブロックとして使われることができる。
加算部３４０は、復元部または復元ブロック生成部と呼ばれることができる。生成された復元信号は、現在ピクチャ内の次の処理対象ブロックのイントラ予測のために使われることができ、後述するように、フィルタリングを経て出力されることもでき、または、次のピクチャのインター予測のために使われることもできる。
一方、ピクチャデコーディング過程でＬＭＣＳ（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ）が適用されることもできる。
フィルタリング部３５０は、復元信号にフィルタリングを適用して主観的／客観的画質を向上させることができる。例えば、フィルタリング部３５０は、復元ピクチャに多様なフィルタリング方法を適用して修正された（ｍｏｄｉｆｉｅｄ）復元ピクチャを生成することができ、前記修正された復元ピクチャをメモリ６０、具体的に、メモリ３６０のＤＰＢに送信できる。前記多様なフィルタリング方法は、例えば、デブロッキングフィルタリング、サンプル適応的オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ）、適応的ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ）、両方向フィルタ（ｂｉｌａｔｅｒａｌ ｆｉｌｔｅｒ）などを含むことができる。
メモリ３６０のＤＰＢに格納された（修正された）復元ピクチャは、インター予測部３３２で参照ピクチャとして使われることができる。メモリ３６０は、現在ピクチャ内の動き情報が導出された（または、デコーディングされた）ブロックの動き情報及び／または既に復元されたピクチャ内のブロックの動き情報を格納することができる。前記格納された動き情報は、空間的隣接ブロックの動き情報または時間的隣接ブロックの動き情報として活用するためにインター予測部３３２に伝達できる。メモリ３６０は、現在ピクチャ内の復元されたブロックの復元サンプルを格納することができ、イントラ予測部３３１に伝達できる。
本文書において、エンコーディング装置２００のフィルタリング部２６０、インター予測部２２１及びイントラ予測部２２２において説明された実施例は、それぞれデコーディング装置３００のフィルタリング部３５０、インター予測部３３２及びイントラ予測部３３１にも同一又は対応するように適用される。
前述したように、ビデオコーディングを実行するにあたって圧縮効率を上げるために予測を実行する。それによって、コーディング対象ブロックである現在ブロックに対する予測サンプルを含む予測されたブロックを生成することができる。ここで、前記予測されたブロックは、空間ドメイン（または、ピクセルドメイン）での予測サンプルを含む。前記予測されたブロックは、エンコーディング装置及びデコーディング装置で同様に導出され、前記エンコーディング装置は、原本ブロックの原本サンプル値自体でない前記原本ブロックと前記予測されたブロックとの間のレジデュアルに関する情報（レジデュアル情報）をデコーディング装置にシグナリングすることで画像コーディング効率を上げることができる。デコーディング装置は、前記レジデュアル情報に基づいてレジデュアルサンプルを含むレジデュアルブロックを導出し、前記レジデュアルブロックと前記予測されたブロックを加算して復元サンプルを含む復元ブロックを生成することができ、復元ブロックを含む復元ピクチャを生成することができる。
前記レジデュアル情報は、変換及び量子化手順を介して生成されることができる。例えば、エンコーディング装置は、前記原本ブロックと前記予測されたブロックとの間のレジデュアルブロックを導出し、前記レジデュアルブロックに含まれているレジデュアルサンプル（レジデュアルサンプルアレイ）に変換手順を実行して変換係数を導出し、前記変換係数に量子化手順を実行して量子化された変換係数を導出することで、関連したレジデュアル情報を（ビットストリームを介して）デコーディング装置にシグナリングすることができる。ここで、前記レジデュアル情報は、前記量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含むことができる。デコーディング装置は、前記レジデュアル情報に基づいて逆量子化／逆変換手順を実行してレジデュアルサンプル（または、レジデュアルブロック）を導出することができる。デコーディング装置は、予測されたブロックと前記レジデュアルブロックに基づいて復元ピクチャを生成することができる。また、エンコーディング装置は、以後ピクチャのインター予測のための参照のために量子化された変換係数を逆量子化／逆変換してレジデュアルブロックを導出し、これに基づいて復元ピクチャを生成することができる。
以下の図面は本文書の具体的な一例を説明するために作成された。図面に記載された具体的な装置の名称又は具体的な用語や名称（例えば、シンタックスの名称など）は例示的に示されたものであるので、本文書の技術的特徴が以下の図面に用いられた具体的な名称に限られない。
図４は、本文書の実施例が適用可能な概略的なビデオ／映像エンコーディング方法の一例を示す。
図４に開示された方法は、前述の図２のエンコーディング装置２００により行われることができる。具体的に、Ｓ４００はエンコーディング装置２００のインター予測部２２１又はイントラ予測部２２２により行われ、Ｓ４１０、Ｓ４２０、Ｓ４３０、Ｓ４４０はそれぞれエンコーディング装置２００の減算部２３１、変換部２３２、量子化部２３３、エントロピーエンコーディング部２４０により行われる。
図４に示すように、エンコーディング装置は現在ブロックに対する予測により予測サンプルを導出する（Ｓ４００）。エンコーディング装置は、現在ブロックにインター予測を行うか又はイントラ予測を行うかを決定し、具体的なインター予測モード又は具体的なイントラ予測モードをＲＤコストに基づいて決定する。決定されたモードに応じてエンコーディング装置は現在ブロックに対する予測サンプルを導出する。
エンコーディング装置は、現在ブロックに対する原本サンプルと予測サンプルを比較してレジデュアルサンプルを導出する（Ｓ４１０）。
エンコーディング装置は、レジデュアルサンプルに対する変換手順を介して変換係数を導出し（Ｓ４２０）、導出された変換係数を量子化して量子化された変換係数を導出する（Ｓ４３０）。
量子化は、量子化パラメータに基づいて行われる。変換手順及び／又は量子化手順は省略されてもよい。変換手順が省略される場合、レジデュアルサンプルに対する（量子化された）（レジデュアル）係数が後述するレジデュアルコーディング技法に従ってコーディングされる。（量子化された）（レジデュアル）係数も用語の統一のために（量子化された）変換係数と呼ばれてもよい。
エンコーディング装置は、予測情報及びレジデュアル情報を含む映像情報をエンコーディングし、エンコーディングされた映像情報をビットストリーム形態で出力する（Ｓ４４０）。予測情報は予測手順に関する情報であり、予測モード情報及び動き情報に関する情報（例えば、インター予測が適用される場合）などを含む。レジデュアル情報は量子化された変換係数に関する情報を含む。レジデュアル情報はエントロピーコーディングされることができる。または、レジデュアル情報は（量子化された）（レジデュアル）係数に関する情報を含む。
出力されたビットストリームは、格納媒体又はネットワークを介してデコーディング装置に伝達される。
図５は、本文書の実施例が適用可能な概略的なビデオ／映像デコーディング方法の一例を示す。
図５に開示された方法は、前述の図３のデコーディング装置３００により行われることができる。具体的に、Ｓ５００はデコーディング装置３００のインター予測部３３２又はイントラ予測部３３１により行われる。Ｓ５００で、ビットストリームに含まれた予測情報をデコーディングして関連シンタックス要素の値を導出する手順は、デコーディング装置３００のエントロピーデコーディング部３１０により行われる。Ｓ５１０、Ｓ５２０、Ｓ５３０、Ｓ５４０は、それぞれデコーディング装置３００のエントロピーデコーディング部３１０、逆量子化部３２１、逆変換部３２２、加算部３４０により行われる。
図５に示すように、デコーディング装置はエンコーディング装置において行われた動作と対応する動作を行う。デコーディング装置は、受信された予測情報に基づいて現在ブロックに対するインター予測又はイントラ予測を行って予測サンプルを導出する（Ｓ５００）。
デコーディング装置は、受信されたレジデュアル情報に基づいて現在ブロックに対する量子化された変換係数を導出する（Ｓ５１０）。デコーディング装置は、エントロピーデコーディングによりレジデュアル情報から量子化された変換係数を導出する。
デコーディング装置は、量子化された変換係数を逆量子化して変換係数を導出する（Ｓ５２０）。逆量子化は量子化パラメータに基づいて行われる。
デコーディング装置は、変換係数に対する逆変換手順によりレジデュアルサンプルを導出する（Ｓ５３０）。
逆変換手順及び／又は逆量子化手順は省略されてもよい。逆変換手順が省略された場合、レジデュアル情報から（量子化された）（レジデュアル）係数が導出され、（量子化された）係数に基づいてレジデュアルサンプルが導出されることができる。
デコーディング装置は予測サンプル及びレジデュアルサンプルに基づいて現在ブロックに対する復元サンプルを生成し、これに基づいて復元ピクチャを生成する（Ｓ５４０）。その後、復元ピクチャにインループフィルタリング手順がさらに適用できることは前述の通りである。
一方、前述のように、エンコーディング装置は、例えば、指数ゴロム（ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）、ＣＡＶＬＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）、ＣＡＢＡＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｂｉｎａｒｙ ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）などの様々なエンコーディング方法に基づいてエントロピーエンコーディングを行う。また、デコーディング装置は、指数ゴロム符号化、ＣＡＶＬＣ又はＣＡＢＡＣなどのコーディング方法に基づいてエントロピーデコーディングを行う。以下では、エントロピーエンコーディング／デコーディング手順について説明する。
図６は、本文書の実施例が適用可能なエントロピーエンコーディング方法の一例を概略的に示し、図７は、エンコーディング装置内のエントロピーエンコーディング部を概略的に示す。図７のエンコーディング装置内のエントロピーエンコーディング部は前述の図２のエンコーディング装置２００のエントロピーエンコーディング部２４０にも同一又は対応するように適用できる。
図６及び図７に示すように、エンコーディング装置（エントロピーエンコーディング部）は、映像／ビデオ情報に関するエントロピーコーディング手順を行う。映像／ビデオ情報は、パーティショニング関連情報、予測関連情報（例えば、インター／イントラ予測区分情報、イントラ予測モード情報、インター予測モード情報など）、レジデュアル情報、インループフィルタリング関連情報などを含み、又はそれに関する多様なシンタックス要素を含む。エントロピーコーディングはシンタックス要素単位で行われる。Ｓ６００ないしＳ６１０は、前述した図２のエンコーディング装置２００のエントロピーエンコーディング部２４０により行われることができる。
エンコーディング装置は対象シンタックス要素に対する二進化を行う（Ｓ６００）。ここで、二進化は、Ｔｒｕｎｃａｔｅｄ Ｒｉｃｅ ｂｉｎａｒｉｚａｔｉｏｎ ｐｒｏｃｅｓｓ、Ｆｉｘｅｄ－ｌｅｎｇｔｈ ｂｉｎａｒｉｚａｔｉｏｎ ｐｒｏｃｅｓｓなどの多様な二進化方法に基づいて行われ、対象シンタックス要素に対する二進化方法は予め定義されることができる。二進化手順はエントロピーエンコーディング部２４０内の二進化部２４２により行われる。
エンコーディング装置は、対象シンタックス要素に対するエントロピーエンコーディングを行う（Ｓ６１０）。エンコーディング装置は、ＣＡＢＡＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ａｒｉｔｈｍｅｔｉｃ ｃｏｄｉｎｇ）又はＣＡＶＬＣ（ｃｏｎｔｅｘｔ－ａｄａｐｔｉｖｅ ｖａｒｉａｂｌｅ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）などのエントロピーコーディング技法に基づいて対象シンタックス要素のビンストリング（ｂｉｎ ｓｔｒｉｎｇ）を正規コーディングベース（コンテキストベース）又はバイパスコーディングベースエンコーディングすることができ、その出力はビットストリームに含まれる。エントロピーエンコーディング手順はエントロピーエンコーディング部２４０内のエントロピーエンコーディング処理部２４３により行われる。ビットストリームは（デジタル）格納媒体又はネットワークを介してデコーディング装置に伝達できることを前述の通りである。
図８は、本文書の実施例が適用可能なエントロピーデコーディング方法の一例を概略的に示し、図９は、デコーディング装置内のエントロピーデコーディング部を概略的に示す。図９のデコーディング装置内のエントロピーデコーディング部は前述の図３のデコーディング装置３００のエントロピーデコーディング部３１０にも同一又は対応するように適用できる。
図８及び図９に示すように、デコーディング装置（エントロピーデコーディング部）はエンコーディングされた映像／ビデオ情報をデコーディングする。映像／ビデオ情報は、パーティショニング関連情報、予測関連情報（例えば、インター／イントラ予測区分情報、イントラ予測モード情報、インター予測モード情報など）、レジデュアル情報、インループフィルタリング関連情報などを含み、又はそれに関する多様なシンタックス要素を含む。エントロピーコーディングはシンタックス要素単位で行われる。Ｓ８００ないしＳ８１０は、前述の図３のデコーディング装置３００のエントロピーデコーディング部３１０により行われることができる。
デコーディング装置は、対象シンタックス要素に対する二進化を行う（Ｓ８００）。ここで、二進化はＴｒｕｎｃａｔｅｄ Ｒｉｃｅ ｂｉｎａｒｉｚａｔｉｏｎ ｐｒｏｃｅｓｓ、Ｆｉｘｅｄ－ｌｅｎｇｔｈ ｂｉｎａｒｉｚａｔｉｏｎ ｐｒｏｃｅｓｓなどの様々な二進化方法に基づいて行われ、対象シンタックス要素に対する二進化方法は予め定義されることができる。デコーディング装置は、二進化手順により対象シンタックス要素の可用値に対する可用ビンストリング（ビンストリング候補）を導出する。二進化手順は、エントロピーデコーディング部３１０内の二進化部３１２により行われることができる。
デコーディング装置は、対象シンタックス要素に対するエントロピーデコーディングを行う（Ｓ８１０）。デコーディング装置は、ビットストリーム内の入力ビット（ら）から対象シンタックス要素に対する各ビンを順次デコーディング及びパーシングしながら、導出されたビンストリングを当該シンタックス要素に対する可用ビンストリングと比較する。もし、導出されたビンストリングが可用ビンストリングのうち１つと同じであるとすると、そのビンストリングに対応する値が当該シンタックス要素の値として導出されることができる。もし、そうでないとすると、ビットストリーム内の次のビットをさらにパーシングした後、前述の手順を再び行う。このような過程によりビットストリーム内に特定情報（特定シンタックス要素）に対するスタートビットやエンドビットを使わなくても可変長ビットを利用して当該情報をシグナリングすることができる。これにより、低い値に対しては相対的に少ないビットを割り当てることができ、全般的なコーディング効率を高めることができる。
デコーディング装置は、ＣＡＢＡＣ又はＣＡＶＬＣなどのエントロピーコーディング技法に基づいてビットストリームからビンストリング内の各ビンをコンテキストベース又はバイパスベースデコーディングを行うことができる。ここで、ビットストリームは、前述のように映像／ビデオデコーディングのための様々な情報を含む。ビットストリームは、（デジタル）格納媒体又はネットワークを介してデコーディング装置に伝達できることは前述の通りである。
本文書においてエンコーディング装置からデコーディング装置への情報のシグナリングを示すために、シンタックス要素を含む表（シンタックス表）が使用される。本文書において使用されるシンタックス表のシンタックス要素の順序は、ビットストリームからシンタックス要素のパーシング順序（ｐａｒｓｉｎｇ ｏｒｄｅｒ）を示す。エンコーディング装置は、シンタックス要素がパーシング順序でデコーディング装置においてパーシングされるようにシンタックス表を構成及びエンコーディングすることができ、デコーディング装置はビットストリームから当該シンタックス表のシンタックス要素をパーシング順序に従ってパーシング及びデコーディングしてシンタックス要素の値を取得することができる。
一方、前述のように、レジデュアルサンプルは、変換、量子化過程を経て量子化された変換係数として導出される。量子化された変換係数は変換係数と呼ばれてもよい。この場合、ブロック内の変換係数はレジデュアル情報の形態でシグナリングされることができる。レジデュアル情報は、レジデュアルコーディングシンタックスを含む。すなわち、エンコーディング装置は、レジデュアル情報でレジデュアルコーディングシンタックスを構成し、これをエンコーディングしてビットストリーム形態に出力し、デコーディング装置は、ビットストリームからレジデュアルコーディングシンタックスをデコーディングしてレジデュアル（量子化された）変換係数を導出する。レジデュアルコーディングシンタックスは、後述のように、当該ブロックに対して変換が適用されているか、ブロック内の最後の有効変換係数の位置がどこであるか、サブブロック内に有効変換係数が存在するか、有効変換係数のサイズ／符号がどうなのかなどを示すシンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ）を含む。
例えば、（量子化された）変換係数は、レジデュアル情報に含まれたｌａｓｔ＿ｓｉｇ＿ｃｏｅｆｆ＿ｘ＿ｐｒｅｆｉｘ、ｌａｓｔ＿ｓｉｇ＿ｃｏｅｆｆ＿ｙ＿ｐｒｅｆｉｘ、ｌａｓｔ＿ｓｉｇ＿ｃｏｅｆｆ＿ｘ＿ｓｕｆｆｉｘ、ｌａｓｔ＿ｓｉｇ＿ｃｏｅｆｆ＿ｙ＿ｓｕｆｆｉｘ、ｃｏｄｅｄ＿ｓｕｂ＿ｂｌｏｃｋ＿ｆｌａｇ、ｓｉｇ＿ｃｏｅｆｆ＿ｆｌａｇ、ｐａｒ＿ｌｅｖｅｌ＿ｆｌａｇ、ａｂｓ＿ｌｅｖｅｌ＿ｇｔＸ＿ｆｌａｇ、ａｂｓ＿ｒｅｍａｉｎｄｅｒ、ｃｏｅｆｆ＿ｓｉｇｎ＿ｆｌａｇ、ｄｅｃ＿ａｂｓ＿ｌｅｖｅｌなどのシンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ）に基づいてエンコーディング及び／又はデコーディングされることができる。これは、レジデュアル（データ）コーディング又は（変換）係数コーディングとも呼ばれる。この時、変換／量子化過程は省略されてもよい。この場合、レジデュアルサンプルの値が定めた方法に従ってコーディングされてシグナリングされることができる。レジデュアルデータエンコーディング／デコーディングと関連したシンタックス要素は以下の表１のように示すことができる。
Figure 2023158204000002
Figure 2023158204000003
Figure 2023158204000004
Figure 2023158204000005
表１を参照すると、ｌａｓｔ＿ｓｉｇ＿ｃｏｅｆｆ＿ｘ＿ｐｒｅｆｉｘ、ｌａｓｔ＿ｓｉｇ＿ｃｏｅｆｆ＿ｙ＿ｐｒｅｆｉｘ、ｌａｓｔ＿ｓｉｇ＿ｃｏｅｆｆ＿ｘ＿ｓｕｆｆｉｘ、ｌａｓｔ＿ｓｉｇ＿ｃｏｅｆｆ＿ｙ＿ｓｕｆｆｉｘは、連関したブロック（ａｓｓｏｃｉａｔｅｄ ｂｌｏｃｋ）内の最後の非ゼロ係数の（ｘ，ｙ）位置情報をエンコーディングするシンタックス要素である。連関したブロックはＣＢ（ｃｏｄｉｎｇ ｂｌｏｃｋ）又はＴＢ（Ｔｒａｎｓｆｏｒｍ ｂｌｏｃｋ）であり得る。変換（及び量子化）及びレジデュアルコーディング手順に関して、ＣＢとＴＢは混用されてもよい。例えば、ＣＢに対してレジデュアルサンプルが導出され、レジデュアルサンプルに対する変換及び量子化により（量子化された）変換係数が導出できることは前述の通りであり、レジデュアルコーディング手順により（量子化された）変換係数（の位置、サイズ、符号など）を効率的に示す情報（又は、シンタックス要素）が生成及びシグナリングされることができる。量子化された変換係数は簡単に変換係数と呼ばれてもよい。一般に、ＣＢが最大ＴＢより大きくない場合、ＣＢのサイズはＴＢのサイズと同じことがあり、この場合、変換（及び量子化）及びレジデュアルコーディングされる対象ブロックはＣＢと呼ばれてもよく、ＴＢと呼ばれてもよい。または、ＣＢが最大ＴＢより大きい場合は、変換（及び量子化）及びレジデュアルコーディングされる対象ブロックはＴＢと呼ばれてもよい。以下、レジデュアルコーディングに関連したシンタックス要素が変換ブロック（ＴＢ）単位でシグナリングされることと説明するが、これは例示であり、ＴＢはコーディングブロック（ＣＢ）と混用できることは前述の通りである。
一方、レジデュアルコーディングのために変換スキップが適用されるか否かに応じて相異なるレジデュアルコーディング方式が適用される。一実施例として、変換スキップが適用されるか否かは変換スキップフラグシンタックス要素を使用して示し、変換スキップフラグのシンタックス要素ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇの値によってレジデュアルコーディングが分岐されることができる。すなわち、変換スキップフラグの値に基づいて（変換スキップが適用されるか否かに基づいて）レジデュアルコーディングのために相異なるシンタックス要素が使用される。変換スキップが適用されない場合（すなわち、変換が適用された場合）に使用されるレジデュアルコーディングは、レギュラーレジデュアルコーディング（Ｒｅｇｕｌａｒ Ｒｅｓｉｄｕａｌ Ｃｏｄｉｎｇ、ＲＲＣ）と呼ばれ、変換スキップが適用されない場合（すなわち、変換が適用されない場合）のレジデュアルコーディングは、変換スキップレジデュアルコーディング（Ｔｒａｎｓｆｏｒｍ Ｓｋｉｐ Ｒｅｓｕａｌ Ｃｏｄｉｎｇ、ＴＳＲＣ）と呼ばれる。
次の表２は、変換スキップフラグのシンタックス要素に基づいてレジデュアルコーディングが分岐される過程を示す。
Figure 2023158204000006
前記表２を参照すると、変換スキップが適用されない場合（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇの値が０である場合）はレギュラーレジデュアルコーディングが行われ、これは前述の表１に開示されたシンタックス要素に基づいて行われる。または、変換スキップが適用される場合（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇの値が１である場合）は変換スキップレジデュアルコーディングが行われ、これは次の表３に開示されたシンタックス要素に基づいて行われる。
次の表３は、変換スキップレジデュアルコーディングのためのシンタックス要素を示す。
Figure 2023158204000007
Figure 2023158204000008
例えば、変換ブロックの変換スキップの可否を指示する変換スキップフラグがパージングされ、変換スキップフラグが１であるか否かが判断される。変換スキップフラグの値が１である場合、表３に示すように、変換ブロックのレジデュアル係数に関するシンタックス要素ｓｉｇ＿ｃｏｅｆｆ＿ｆｌａｇ、ｃｏｅｆｆ＿ｓｉｇｎ＿ｆｌａｇ、ａｂｓ＿ｌｅｖｅｌ＿ｇｔｘ＿ｆｌａｇ、ｐａｒ＿ｌｅｖｅｌ＿ｆｌａｇ及び／又はａｂｓ＿ｒｅｍａｉｎｄｅｒがパージングされ、シンタックス要素に基づいてレジデュアル係数が導出される。この場合、前記シンタックス要素は順次パージングされてもよく、パーシング順序が変更されてもよい。ここで、ａｂｓ＿ｌｅｖｅｌ＿ｇｔｘ＿ｆｌａｇはａｂｓ＿ｌｅｖｅｌ＿ｇｔ１＿ｆｌａｇ、ａｂｓ＿ｌｅｖｅｌ＿ｇｔ３＿ｆｌａｇ、ａｂｓ＿ｌｅｖｅｌ＿ｇｔ５＿ｆｌａｇ、ａｂｓ＿ｌｅｖｅｌ＿ｇｔ７＿ｆｌａｇ及び／又はａｂｓ＿ｌｅｖｅｌ＿ｇｔ９＿ｆｌａｇを示すことができる。例えば、ａｂｓ＿ｌｅｖｅｌ＿ｇｔｘ＿ｆｌａｇ［ｎ］［ｊ］はスキャニング位置ｎにおいて変換係数レベル（又は、変換係数レベルを右側に１だけシフトした値）の絶対値が（ｊ＜＜１）＋１より大きいか否かを示すフラグであり得る。前記（ｊ＜＜１）＋１は、場合によっては、第１臨界値、第２臨界値などの所定の臨界値に代替されることもできる。
また、変換スキップフラグの値が０である場合、表１に示すように、変換ブロックのレジデュアル係数に関するシンタックス要素ｓｉｇ＿ｃｏｅｆｆ＿ｆｌａｇ、ａｂｓ＿ｌｅｖｅｌ＿ｇｔｘ＿ｆｌａｇ、ｐａｒ＿ｌｅｖｅｌ＿ｆｌａｇ、ａｂｓ＿ｒｅｍａｉｎｄｅｒ、ｄｅｃ＿ａｂｓ＿ｌｅｖｅｌ、ｃｏｅｆｆ＿ｓｉｇｎ＿ｆｌａｇがパーシングされ、前記シンタックス要素に基づいてレジデュアル係数が導出される。この場合、前記シンタックス要素は順次パージングされてもよく、パーシング順序が変更されてもよい。ここで、ａｂｓ＿ｌｅｖｅｌ＿ｇｔｘ＿ｆｌａｇはａｂｓ＿ｌｅｖｅｌ＿ｇｔ１＿ｆｌａｇ及び／又はａｂｓ＿ｌｅｖｅｌ＿ｇｔ３＿ｆｌａｇを示すことができる。
一方、前述のように、エンコーディング装置は、イントラ／インター／ＩＢＣ／パレット予測などにより予測されたブロック（予測サンプル）に基づいてレジデュアルブロック（レジデュアルサンプル）を導出し、導出されたレジデュアルサンプルに変換及び量子化を適用して量子化された変換係数を導出する。量子化された変換係数に関する情報（レジデュアル情報）はレジデュアルコーディングシンタックスに含まれてエンコーディング後にビットストリーム形態で出力される。デコーディング装置は、前記ビットストリームから前記量子化された変換係数に関する情報（レジデュアル情報）を取得し、デコーディングして量子化された変換係数を導出する。デコーディング装置は、量子化された変換係数に基づいて逆量子化／逆変換を経てレジデュアルサンプルを導出する。前述のように、前記量子化／逆量子化及び／又は変換／逆変換の少なくとも１つは省略されてもよい。前記変換／逆変換が省略される場合、前記変換係数は係数又はレジデュアル係数と呼ばれてもよく、又は表現の統一性のために変換係数と依然として呼ばれてもよい。前記変換／逆変換が省略されるか否かは、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇに基づいてシグナリングされる。例えば、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇの値が１である場合は前記変換／逆変換が省略されることを示し、これを変換スキップモードという。
一般的に、ビデオ／映像コーディングにおいては量子化率を変化させることができ、変化された量子化率を利用して圧縮率を調節することができる。実現の観点からは、複雑度を考慮して量子化率を直接使用する代わりに量子化パラメータ（ｑｕａｎｔｉｚａｔｉｏｎ ｐａｒａｍｅｔｅｒ、ＱＰ）を使用できる。例えば、０から６３までの整数値の量子化パラメータが使用されることができ、各量子化パラメータ値は実際の量子化率に対応できる。また、例えば、ルマ成分（ルマサンプル）に対する量子化パラメータ（ＱＰＹ）とクロマ成分（クロマサンプル）に対する量子化パラメータ（ＱＰＣ）は異なる設定が可能である。
量子化過程は変換係数（Ｃ）を入力とし、量子化率（Ｑｓｔｅｐ）で割って、これに基づいて量子化された変換係数（Ｃ’） が得られる。この場合、計算複雑度を考慮して量子化率にスケールを掛け算して整数形態にし、スケール値に該当する値の分だけシフト演算を行うことができる。量子化率とスケール値の積に基づいて量子化スケール（ｑｕａｎｔｉｚａｔｉｏｎ ｓｃａｌｅ）が導出できる。すなわち、ＱＰによって前記量子化スケールが導出される。例えば、前記変換係数（Ｃ）に前記量子化スケールを適用して、これに基づいて量子化された変換係数（Ｃ‘）が導出されることもできる。
逆量子化過程は量子化過程の逆過程であり、量子化された変換係数（Ｃ’）に量子化率（Ｑｓｔｅｐ）を掛け算して、これに基づいて復元された変換係数（Ｃ’’）が得られる。この場合、前記量子化パラメータによってレベルスケール（ｌｅｖｅｌ ｓｃａｌｅ）が導出され、前記量子化された変換係数（Ｃ’）に前記レベルスケールを適用して、これに基づいて復元された変換係数（Ｃ’’）が導出される。復元された変換係数（Ｃ’’）は、変換及び／又は量子化過程での損失（ｌｏｓｓ）により最初変換係数（Ｃ）と多少差がある。従って、エンコーディング装置においてもデコーディング装置と同様に逆量子化を行う。
また、予測の実行においてパレットコーディング（ｐａｌｅｔｔｅ ｃｏｄｉｎｇ）に基づいてもよい。パレットコーディングは少ない数の固有色の値を含むブロックを示すために有用な技術である。ブロックに対して予測及び変換を適用する代わりに、パレットモードは各サンプルの値を示すためにインデックスをシグナリングする。パレットモードはビデオメモリバッファ空間の節約に有用である。パレットモード（例えば、ＭＯＤＥ＿ＰＬＴ）を使用してブロックがコーディングされることができる。このようにエンコーディングされたブロックをデコーディングするために、デコーダはパレットエントリ及びインデックスをデコーディングしなければならない。パレットエントリは、パレットテーブルにより示され、パレットテーブルコーディングツールによりエンコーディングされる。
パレットコーディングは、（イントラ）パレットモード又は（イントラ）パレットコーディングモードなどと呼ばれる。パレットコーディング又はパレットモードによって現在ブロックが復元されることができる。パレットコーディングはイントラコーディングの一例であり、又はイントラ予測方法の１つでもある。ただし、前述のスキップモードと類似するように、当該ブロックに対する別途のレジデュアル値はシグナリングされないことがある。
例えば、パレットモードが選択された場合、パレットテーブルに関する情報がシグナリングされることができる。パレットテーブルはそれぞれのピクセルに対応するインデックスを含む。パレットテーブルは、以前のブロックにおいて使用されていたピクセル値からパレット予測テーブルを構成することができる。例えば、以前に使われていたピクセル値が特定のバッファに格納されていて（パレット予測子）、このバッファから現在パレットを構成するためのパレット予測子情報（ｐａｌｅｔｔｅ＿ｐｒｅｄｉｃｔｏｒ＿ｒｕｎ）が受信される。すなわち、パレット予測子は現在ブロックのパレットインデックスマップ（ｐａｌｅｔｔｅ ｉｎｄｅｘ ｍａｐ）の少なくとも一部に対するインデックスを示すデータを含む。現在ブロックを表現するためのパレットエントリがパレット予測子から構成されたパレット予測エントリで十分でない場合、現在パレットエントリに関するピクセル情報が別途に送信される。
パレットモードは、ＣＵレベルでシグナリングされ、一般的にＣＵ内の大部分のピクセルが代表ピクセル値のセットとして示されることができる場合に使用できる。すなわち、パレットモードはＣＵ内のサンプルが代表ピクセル値のセットとして表現されることができる。このようなセットはパレットと呼ばれてもよい。パレット内のピクセル値に近い値を有するサンプルの場合、パレット内のピクセル値に対応するパレットインデックス（ｐａｌｅｔｔｅ＿ｉｄｘ＿ｉｄｃ）又はインデックスを指す情報（ｒｕｎ＿ｃｏｐｙ＿ｆｌａｇ、ｃｏｐｙ＿ａｂｏｖｅ＿ｉｎｄｉｃｅｓ＿ｆｌａｇ）がシグナリングされることができる。パレットエントリ以外のピクセル値を有するサンプルの場合、そのサンプルはエスケープシンボル（ｅｓｃａｐｅ ｓｙｍｂｏｌ）と表示され、量子化されたサンプル値が直接的にシグナリングされることができる。本文書において、ピクセル又はピクセル値はサンプル又はサンプル値として称されてもよい。
パレットモードでコーディングされたブロックをデコーディングするために、デコーダはパレットエントリ情報及びパレットインデックス情報が必要である。パレットインデックスがエスケープシンボルに該当する場合、追加構成要素（ｃｏｍｐｏｎｅｎｔ）に（量子化された）エスケープ値がシグナリングされる。また、エンコーダにおいては当該ＣＵに対する適切なパレットを導出してデコーダに伝達しなければならない。
パレットエントリの効率的なコーディングのために、パレット予測子（ｐａｌｅｔｔｅ ｐｒｅｄｉｃｔｏｒ）が維持される。パレット予測子及びパレットの最大サイズがＳＰＳにおいてシグナリングされることができる。または、パレット予測子及びパレット最大サイズが既に定義されることができる。例えば、パレット予測子及びパレット最大サイズは、現在ブロックがシングルツリーであるかデュアルツリーであるかに応じてそれぞれ３１、１５と定義される。ＶＶＣ標準においてはパレットモードが可用であるか否かを示すｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇが送信されることができる。そうすると、現在コーディングユニットがパレットモードでコーディングされたものであるか否かを示すｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｃｏｄｉｎｇフラグが送信される。パレット予測子は、各ブリック（ｂｒｉｃｋ）又は各スライスの開始部分において初期化される。
パレット予測子内の各エントリに対して、再使用フラグ（ｒｅｕｓｅ ｆｌａｇ）がシグナリングされて現在パレットの一部であるか否かを示すことができる。再使用フラグは０のｒｕｎ－ｌｅｎｇｔｈコーディングを使用して送信できる。その後、新しいパレットエントリの個数は、０ｔｈ ｏｒｄｅｒの指数ゴロム（ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ）コーディングを使ってシグナリングされることができる。最後に、新しいパレットエントリに対するコンポーネント値（ｃｏｍｐｏｎｅｎｔ ｖａｌｕｅ）がシグナリングされることができる。現在ＣＵをエンコーディングした後、パレット予測子は現在パレットを使ってアップデートされ、現在パレットにおいて再使用されていない以前パレット予測子のエントリは、許容される最大サイズに到達するまで新しいパレット予測子の最後に追加されることができる（ｐａｌｅｔｔｅ ｓｔｕｆｆｉｎｇ、パレットスタッフィング）。
パレットインデックスマップをコーディングするために水平及び垂直トラバーススキャン（ｔｒａｖｅｒｓｅ ｓｃａｎｓ）を使用してインデックスをコーディングすることができる。スキャン順序（ｓｃａｎ ｏｒｄｅｒ）はフラグ情報（例えば、ｐａｌｅｔｔｅ＿ｔｒａｎｓｐｏｓｅ＿ｆｌａｇ）を使ってビットストリームから明示的にシグナリングされることができる。
一方、パレットインデックスは２種類のパレットサンプルモードを使ってコーディングでされるが、例えば、「ＩＮＤＥＸ」モード及び「ＣＯＰＹ＿ＡＢＯＶＥ」モードを使用することができる。このようなパレットモードは、「ＩＮＤＥＸ」モードであるか「ＣＯＰＹ＿ＡＢＯＶＥ」モードであるかを示すフラグを使用してシグナリングされることができる。この時、エスケープシンボルは「ＩＮＤＥＸ」モードでシグナリングされ、現在パレットサイズと同じインデックスが割り当てられることができる。例えば、現在パレットのサイズが１０であると、インデックス０番から９番まではパレット内のエントリインデックスを意味し、１０番インデックスはエスケープシンボルに対するインデックスを意味する。水平スキャンが使用される場合は、上端行（ｔｏｐ ｒｏｗ）を除いてフラグをシグナリングすることができ、垂直スキャンが使用される場合又は以前モードが「ＣＯＰＹ＿ＡＢＯＶＥ」モードである場合は、１番目の列（ｆｉｒｓｔ ｃｏｌｕｍｎ）を除いてフラグをシグナリングすることができる。「ＣＯＰＹ＿ＡＢＯＶＥ」モードでは、上にある行のサンプルのパレットインデックスがコピーされる。「ＩＮＤＥＸ」モードでは、パレットインデックスが明示的にシグナリングされる。「ＩＮＤＥＸ」モード及び「ＣＯＰＹ＿ＡＢＯＶＥ」モードの両方ともに対して、同一のモードを使用してコーディングされる次のサンプルの個数を示すラン値がシグナリングされる。エスケープシンボルが「ＩＮＤＥＸ」モード又は「ＣＯＰＹ＿ＡＢＯＶＥ」モードにおいてランの一部である場合、エスケープコンポーネント値が各エスケープシンボルに対してシグナリングされることができる。
パレットインデックスに対するコーディングは以下のようである。まず、ＣＵに対するインデックスの数がシグナリングされる。その次に、固定長コーディング（ｆｉｘｌｅｄ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）を使用して全体ＣＵに対する実際のインデックスがシグナリングされる。インデックス数及びインデックスがバイパスモードでコーディングされる。これはインデックス関連バイパスビンが一緒にグループ化されることができる。次に、パレットサンプルモード（ｃｏｐｙ＿ａｂｏｖｅ＿ｐａｌｅｔｔｅ＿ｉｎｄｉｃｅｓ＿ｆｌａｇ）及びランがインターリーブ方式（ｉｎｔｅｒｌｅａｖｅｄ ｍａｎｎｅｒ）でシグナリングされる。最後に、全体ＣＵに対するエスケープサンプルに対応するコンポーネントエスケープ値が一緒にグループ化され、バイパスモードでコーディングされる。
次の表４は、コーディングユニットに対するパレットモードベースコーディングに関連するシンタックス要素を含むシンタックス構造の一例を示し、次の表５は、表４のシンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔｓ）に対するセマンティックス（ｓｅｍａｎｔｉｃｓ）を示す。
Figure 2023158204000009
Figure 2023158204000010
Figure 2023158204000011
Figure 2023158204000012
Figure 2023158204000013
Figure 2023158204000014
Figure 2023158204000015
Figure 2023158204000016
前記表４及び表５を参照すると、現在ブロック（すなわち、現在コーディングユニット）に対してパレットモードが適用される場合、前記表４に示すようなパレットコーディングシンタックス（例：ｐａｌｅｔｔｅ＿ｃｏｄｉｎｇ（））がパーシング／シグナリングされる。
例えば、パレットエントリ情報に基づいてパレットテーブルを構成することができる。パレットエントリ情報は、ｐａｌｅｔｔｅ＿ｐｒｅｄｉｃｔｏｒ＿ｒｕｎ、ｎｕｍ＿ｓｉｇｎａｌｌｅｄ＿ｐａｌｅｔｔｅ＿ｅｎｔｒｉｅｓ、ｎｅｗ＿ｐａｌｅｔｔｅ＿ｅｎｔｒｉｅｓなどのシンタックス要素を含む。
また、パレットインデックス情報に基づいて、現在ブロックに対するパレットインデックスマップを構成することができる。パレットインデックス情報は、ｎｕｍ＿ｐａｌｅｔｔｅ＿ｉｎｄｉｃｅｓ＿ｍｉｎｕｓ１、ｐａｌｅｔｔｅ＿ｉｄｘ＿ｉｄｃ、ｐａｌｅｔｔｅ＿ｔｒａｎｓｐｏｓｅ＿ｆｌａｇなどのシンタックス要素を含む。前記のようなパレットインデックス情報に基づいて、トラバーススキャン方向（垂直方向又は水平方向）に沿って巡回しながら現在ブロック内のサンプルに対してパレットインデックス（例：ＰａｌｅｔｔｅＩｎｄｅｘＩｄｃ）を導出してパレットインデックスマップ（例：ＰａｌｅｔｔｅＩｎｄｅｘＭａｐ）を構成することができる。
また、パレットインデックスマップに基づいてパレットテーブル内のパレットエントリに対するサンプル値を導出し、前記パレットエントリにマッピングされたサンプル値に基づいて現在ブロックの復元サンプルを生成することができる。
また、現在ブロック内にエスケープ値を有するサンプルが存在する場合（すなわち、ｐａｌｅｔｔｅ＿ｅｓｃａｐｅ＿ｖａｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇの値が１である場合）、エスケープ情報に基づいて現在ブロックに対するエスケープ値を導出する。エスケープ情報はｐａｌｅｔｔｅ＿ｅｓｃａｐｅ＿ｖａｌ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ、ｐａｌｅｔｔｅ＿ｅｓｃａｐｅ＿ｖａｌなどのシンタックス要素を含む。例えば、量子化されたエスケープ値情報（例：ｐａｌｅｔｔｅ＿ｅｓｃａｐｅ＿ｖａｌ）に基づいて現在ブロック内のエスケープコーディングされたサンプルに対するエスケープ値を導出する。前記エスケープ値に基づいて現在ブロックの復元サンプルを生成することができる。
一方、エンコーディング／デコーディング過程において、ＢＤＰＣＭ（ｂｌｏｃｋ ｄｉｆｆｅｒｅｎｔｉａｌ ｐｕｌｓｅ ｃｏｄｅｄ ｍｏｄｕｌａｔｉｏｎ又はＢｌｏｃｋ－ｂａｓｅｄ Ｄｅｌｔａ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ）技法が使用される。ＢＤＰＣＭはＲＤＰＣＭ（ｑｕａｎｔｉｚｅｄ Ｒｅｓｉｄｕａｌ ｂｌｏｃｋ－ｂａｓｅｄ Ｄｅｌｔａ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ）と名付けられてもよい。
ＢＤＰＣＭを適用してブロックを予測する場合、ブロックの行又は列をラインバイラインで予測するために復元されたサンプルが活用できる。このとき、使用された参照サンプルはフィルタリングされていないサンプルであり得る。ＢＤＰＣＭ方向は、垂直方向又は水平方向予測が使用されているかを示す。すなわち、ＢＤＰＣＭが適用される場合、垂直方向又は水平方向がＢＤＰＣＭ 方向に選択され、前記ＢＤＰＣＭ方向に予測が行われることができる。予測エラー（ｐｒｅｄｉｃｔｉｏｎ ｅｒｒｏｒ）は空間的ドメインにおいて量子化され、サンプルは予測（すなわち、予測サンプル）に逆量子化された予測エラーを加えることにより復元される。前記予測エラーはレジデュアル（ｒｅｓｉｄｕａｌ）を意味する。このようなＢＤＰＣＭの代案として量子化されたレジデュアルドメインＢＤＰＣＭが提案されることができ、予測方向やシグナリングは空間的ドメインに適用されたＢＤＰＣＭと同一であり得る。すなわち、量子化されたレジデュアルドメインＢＤＰＣＭを介して量子化係数自体をＤＰＣＭ（Ｄｅｌｔａ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ）のように積み上げた後、逆量子化によりレジデュアルが復元されることができる。従って、量子化されたレジデュアルドメインＢＤＰＣＭは、レジデュアルコーディング段においてＤＰＣＭを適用するという意味で使用されることができる。以下で使われる量子化されたレジデュアルドメインは、予測に基づいて導出されたレジデュアルが変換なしに量子化されたものであり、量子化されたレジデュアルサンプルに対するドメインを意味する。例えば、量子化されたレジデュアルドメインは、変換スキップが適用される、すなわち、レジデュアルサンプルに対して変換はスキップされるが量子化は適用される量子化されたレジデュアル（又は、量子化されたレジデュアル係数）を含む。または、例えば、量子化されたレジデュアルドメインは量子化された変換係数を含む。
前記のように、ＢＤＰＣＭは量子化されたレジデュアルドメインに適用されることができ、量子化されたレジデュアルドメインは量子化されたレジデュアル（又は、量子化されたレジデュアル係数）を含み、このとき、レジデュアルに対しては変換スキップが適用される。すなわち、ＢＤＰＣＭが適用される場合は、レジデュアルサンプルに対して変換はスキップされ、量子化は適用される。または、量子化されたレジデュアルドメインは量子化された変換係数を含むこともできる。ＢＤＰＣＭが適用可能であるか否かに関するフラグはシーケンスレベル（ＳＰＳ）でシグナリングされ、このようなフラグはＳＰＳで変換スキップモードが可能であるとシグナリングされる場合にのみシグナリングされることもできる。前記フラグは、ＢＤＰＣＭ可用フラグ又はＳＰＳ ＢＤＰＣＭ可用フラグと呼ばれてもよい。
ＢＤＰＣＭ適用の時、イントラ予測は、イントラ予測方向と類似の予測方向（例えば、垂直予測又は水平予測）によるサンプル複製（ｓａｍｐｌｅ ｃｏｐｙ）により全体ブロックに行われる。原本と予測ブロックの差分値であるレジデュアルは変換がスキップされて量子化され、量子化されたレジデュアルと水平又は垂直方向に対する予測子（すなわち、水平又は垂直方向の量子化されたレジデュアル）間のデルタ値、すなわち、差分値がコーディングされる。
ＢＤＰＣＭが適用可能であると、ＣＵサイズがルマサンプルに対するＭａｘＴｓＳｉｚｅ（最大変換スキップブロックサイズ）より小さいか等しく、ＣＵがイントラ予測でコーディングされる場合、フラッグ情報がＣＵレベルで送信されることができる。前記フラグ情報はＢＤＰＣＭフラグと呼ばれてもよい。ここで、ＭａｘＴｓＳｉｚｅは、変換スキップモードが許容されるための最大ブロックサイズを意味し得る。前記フラグ情報は、通常のイントラコーディングが適用されるか又はＢＤＰＣＭが適用されるかを指示することができる。ＢＤＰＣＭが適用されると、予測方向が水平方向であるか垂直方向であるかを指示するＢＤＰＣＭ予測方向フラグが送信されることができる。前記ＢＤＰＣＭ予測方向フラグはＢＤＰＣＭ方向フラグとも呼ばれる。以後、ブロックはフィルタリングされていない参照サンプルを利用した通常の水平又は垂直イントラ予測過程を通じて予測されることができる。また、レジデュアルは量子化され、各量子化されたレジデュアルとその予測子、例えば、ＢＤＰＣＭ予測方向によって水平又は垂直方向にある周辺位置の既に量子化されたレジデュアル間の差異値がコーディングされることができる。
一方、前述のように、本文書において開示されるシンタックステーブル内の情報（シンタックス要素）は、映像／ビデオ情報に含まれ、エンコーディング装置において構成／エンコーディングされてビットストリーム形態でデコーディング装置に伝達される。デコーディング装置は、当該シンタックステーブル内の情報（シンタックス要素）をパーシング／デコーディングする。デコーディング装置は、デコーディングされた情報に基づいて現在ブロックに対するデコーディング手順（予測、（変換スキップベース）レジデュアル処理、ＢＤＰＣＭ、パレットコーディングなど）を行うことができる。
以下、本文書においては変換スキップ関連ハイレベルシンタックス要素（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）及び／又はパレットコーディング関連ハイレベルシンタックス要素について、従属性のあるシンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）をパーシング／シグナリングする効率的な方案を提案する。すなわち、本文書の実施例によると、ビデオ／映像コーディング時に変換スキップ及び／又はパレットコーディングの実行において必須であるか補助的に使用される情報の従属性及び非従属性によってコーディングの可否を区分することができ、これにより、効率的なコーディングを行うことができる。
ビデオ符号化においては、符号化コーディングツールのスイッチが特定ハイレベルシンタックス（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ、ＨＬＳ）内において定義できる。従来のＶＶＣの場合、各コーディングツールに関するフラグ情報がＳＰＳにおいて定義されることができる。また、ＶＶＣにおいては、各ハイレベルシンタックスセット（例えば、ＶＰＳ（ｖｉｄｅｏ ｐａｒａｍｅｔｅｒ ｓｅｔ）、ＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）、ＰＰＳ（ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）、ＡＰＳ（ａｄａｐｔａｔｉｏｎ ｐａｒａｍｅｔｅｒ ｓｅｔ）、ＤＰＳ（ｄｅｃｏｄｉｎｇ ｐａｒａｍｅｔｅｒ ｓｅｔ）、スライスヘッダ（Ｓｌｉｃｅ ｈｅａｄｅｒ）など）間には独立性を有することを志向して標準化が進んできた。従って、コーディングツールのフラグが存在するハイレベルシンタックスセットの内部においては従属性を有するシンタックス要素が多数存在するようになる。本文書の実施例（ら）においては変換スキップ及び／又はパレットコーディングによって従属性を有するハイレベルシンタックス要素をパーシング／シグナリングする方法を提案する。
一実施例として、本文書は、変換スキップ関連ハイレベルシンタックス要素（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）に対して従属性のあるシンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）が従属条件に応じてパージング／シグナリングするか否かを決定することにより、送信されるビットを節約する方法を提案する。一例として、変換スキップ（可用）フラグによる変換スキップの使用可否に応じて従属性を有するハイレベルシンタックス要素をパーシングする方法を提案する。
例えば、変換スキップベースコーディングに従属されるシンタックス要素としては、変換スキップ（可用）フラグ（例えば、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップのための最小量子化パラメータ情報（例えば、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）、ＢＤＰＣＭの適用可否に関する情報（例えば、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）などがある。一例として、変換スキップ（可用）フラグの値が１に定義された場合、関連フラッグ又は情報シンタックス要素は必ず送信されなければならないが、変換スキップ（可用）フラグの値が０に定義された場合は、変換スキップ（可用）フラグシンタックス要素を除いた前記シンタックス要素を送信しないことがある。
すなわち、高級構文ＨＬＳ（例えば、ＶＰＳ、ＳＰＳ、ＰＰＳ、ＡＰＳ、ＤＰＳ、Ｓｌｉｃｅ ｈｅａｄｅｒなど）内の変換スキップ（可用）フラグの値に応じて変換スキップする時、変換スキップブロックに対する最小量子化パラメータ情報、ＢＤＰＣＭの適用可否などの変換スキップ可否に従属されたハイレベルシンタックス要素を送信する方法を提案する。また、提案する方法は、本実施例で言及されたシンタックス要素のみに限定されず、変換スキップを行うか否かに応じて従属性を有しながら変換スキップ（可用）フラグが含まれたハイレベルシンタックスセットにおいて定義されている全てのハイレベルシンタックス要素を含むことができる。
前述のように変換スキップベースコーディングに関連するシンタックス要素がハイレベルシンタックスセットにおいて定義されることができ、次の表６の実施例においてのようにＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）の内部で定義されることができる。
Figure 2023158204000017
また、例えば、前記ＳＰＳシンタックスのシンタックス要素のうち前述の実施例に関するシンタックス要素のセマンティック（ｓｅｍａｎｔｉｃ）は次の表７のように示すことができる。
Figure 2023158204000018
前記表６及び表７を参照すると、ＳＰＳにおいて変換スキップに関連したシンタックス要素が定義されることができ、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素を含む。
ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、その値が０であるか１であるかに基づいて変換スキップが可用であるか否かを示す。例えば、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が１である場合は変換スキップが可用であることを示し、この場合、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇが変換ユニットシンタックス（ｔｒａｎｓｆｏｒｍ ｕｎｉｔ ｓｙｎｔａｘ）を介してパージング／シグナリングされることができる。ここで、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇシンタックス要素は、当該変換ブロック（ａｓｓｏｃｉａｔｅｄ ｔｒａｎｓｆｏｒｍ ｂｌｏｃｋ）に変換が適用できるか否かを示す。ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が０である場合は変換スキップが可用でないことを示し、この場合、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇが変換ユニットシンタックスにおいてパーシング／シグナリングされない。言い換えれば、変換スキップ可用フラグｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇに基づいて変換ユニットシンタックスにおいてｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇが存在しているか否かを示すことができる。
ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、その値が０であるか１であるかに基づいてＢＤＰＣＭが可用であるか否かを示すことができる。例えば、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が１である場合はＢＤＰＣＭが可用であることを示し、この場合、ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ（又は、ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｆｌａｇ及びｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｆｌａｇ）がイントラコーディングユニットに対するコーディングユニットシンタックス（ｃｏｄｉｎｇ ｕｎｉｔ ｓｙｎｔａｘ）を介してパージング／シグナリングされることができる。ここで、ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇシンタックス要素はＢＤＰＣＭが現在コーディングブロックに適用されるか否かを示す。ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が０である場合はＢＤＰＣＭが可用でないことを示し、この場合、ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ（又は、ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｆｌａｇ及びｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｆｌａｇ）がイントラコーディングユニットに対するコーディングユニットシンタックにおいてパーシング／シグナリングされない。言い換えれば、ＢＤＰＣＭ可用フラグｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇに基づいてコーディングユニットシンタックスにおいてｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ（又は、ｉｎｔｒａ＿ｂｄｐｃｍ＿ｌｕｍａ＿ｆｌａｇ及びｉｎｔｒａ＿ｂｄｐｃｍ＿ｃｈｒｏｍａ＿ｆｌａｇ）が存在しているか否かを示すことができる。
ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素は、変換スキップモードに対して許容される最小量子化パラメータ（ｍｉｎｉｍｕｍ ａｌｌｏｗｅｄ ｑｕａｎｔｉｚａｔｉｏｎ ｐａｒａｍｅｔｅｒ）を示す。例えば、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素に基づいて変換スキップモードでの最小量子化パラメータ値（例：ＱｐＰｒｉｍｅＴｓＭｉｎ）が導出される。前記変換スキップモードでの最小量子化パラメータに基づいてスケーリング過程（逆量子化過程）で使用される量子化パラメータが導出される。また、前記量子化パラメータに基づいて現在ブロックに対してスケーリング過程（逆量子化過程）を行ってスケーリングされた変換係数（逆量子化された変換係数）を導出し、これに基づいて現在ブロックのレジデュアルサンプルを導出することができる。
また、ＳＰＳにおいては変換スキップに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性のあるシンタックス要素を定義することができる。例えば、前記表６及び表７に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて変換スキップモードで変換スキップブロックに対する最小量子化パラメータ情報を示すｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素、ＢＤＰＣＭが可用であるか否かを示すｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素及びｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素がパーシング／シグナリングされることができる。または、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素及びｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素がパーシング／シグナリングされない。
また、一実施例として、本文書は、変換スキップ関連ハイレベルシンタックス要素（ｈｉｇｈ ｌｅｖｅｌ ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）に対して従属性のあるシンタックス要素（ｓｙｎｔａｘ ｅｌｅｍｅｎｔ）が従属条件に応じてパージング／シグナリングするか否かを決定することにより、送信されるビットを節約する方法を提案する。一例として、変換スキップ（可用）フラグによる変換スキップの使用可否によって従属性を有するハイレベルシンタックス要素をパーシングする方法を提案する。
例えば、変換スキップベースコーディングに従属されるシンタックス要素としては、変換スキップ（可用）フラグ（例えば、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップ適用サイズに関する情報（例えば、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）、変換スキップのための最小量子化パラメータ情報（例えば、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）、ＢＤＰＣＭ適用可否情報（例えば、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）などがある。一例として、変換スキップ（可用）フラグの値が１に定義された場合、関連フラッグ又は情報シンタックス要素は必ず送信されなければならないが、変換スキップ（可用）フラグの値が０に定義された場合は、変換スキップ（可用）フラグシンタックス要素を除いた前記シンタックス要素を送信しない。
すなわち、高級構文ＨＬＳ（例えば、ＶＰＳ、ＳＰＳ、ＰＰＳ、ＡＰＳ、ＤＰＳ、Ｓｌｉｃｅ ｈｅａｄｅｒなど）内の変換スキップ（可用）フラグの値に応じて変換スキップ適用最大サイズに関する情報、変換スキップ時の最小量子化パラメータ情報、ＢＤＰＣＭ適用可否などの変換スキップ可否に従属されたハイレベルシンタックス要素を送信する方法を提案する。また、提案する方法は、本実施例において言及されたシンタックス要素のみに限定されず、変換スキップを行うか否かに応じて従属性を有しながら変換スキップ（可用）フラグが含まれたハイレベルシンタックスセットにおいて定義されている全てのハイレベルシンタックス要素を含む。
前述のように、変換スキップベースコーディングに関連するシンタックス要素がハイレベルシンタックスセットにおいて定義されることができ、次の表８の実施例においてのようにＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）内部において定義されることができる。ただし、従来は、ＰＰＳ（ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）において定義されている変換スキップのための最大ブロックサイズ情報がＨＬＳ間の従属性を止揚するためにＳＰＳに新たに定義されることができ、これは次の表８のように示すことができる。
Figure 2023158204000019
また、例えば、前記ＳＰＳシンタックスのシンタックス要素のうち前述の実施例に関するシンタックス要素のセマンティック（ｓｅｍａｎｔｉｃ）は次の表９のように示すことができる。
Figure 2023158204000020
前記表８及び表９を参照すると、ＳＰＳにおいて変換スキップに関連したシンタックス要素が定義されることができ、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素を含む。
ここで、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素は、前記表６及び表７において詳細に説明しているので、本実施例においては説明の便宜のために具体的な説明を省略する。
ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素は変換スキップモードで使用される最大ブロックサイズを示す。この時、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素は０ないし３の範囲内にあり得る。例えば、前記表９に開示されているように、変換スキップモードにおいて使用される最大ブロックサイズ（例：ＭａｘＴｓＳｉｚｅ）は１＜＜（ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２＋２）のような計算に基づいて導出される。
また、ＳＰＳにおいては変換スキップに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性のあるシンタックス要素を定義することができる。例えば、前記表８及び表９に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてＢＤＰＣＭが可用であるか否かを示すｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素、変換スキップモードにおいて変換スキップブロックに対する最小量子化パラメータ情報を示すｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素、変換スキップモードにおいて使用される最大ブロックサイズを示すｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素がパーシング／シグナリングされることができる。または、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素がパーシング／シグナリングされない。
また、一実施例として、本文書は、変換スキップ関連ハイレベルシンタックス要素及びパレットコーディング関連ハイレベルシンタックス要素に対して従属性のあるシンタックス要素が従属条件に応じてパージング／シグナリングするか否かを決定することにより送信されるビットを節約する方法を提案する。一例として、変換スキップ（可用）フラッグ及び／又はパレットコーディング（可用）フラグにより従属性を有するハイレベルシンタックス要素をパーシングする方法を提案する。
例えば、変換スキップベースコーディングに従属されるシンタックス要素としては、変換スキップ（可用）フラグ（例えば、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップ適用サイズに関する情報（例えば、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）、変換スキップ時の最小量子化パラメータ情報（例えば、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）、ＢＤＰＣＭ適用可否情報（例えば、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）などがある。また、前述したように、パレットコーディングの時にエスケープ値も変換されないので、量子化の実行において変換スキップのための最小量子化パラメータ情報が使用されることができる。従って、パレットモードベースコーディングに対してパレットコーディング（可用）フラグ（例えば、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップ時の最小量子化パラメータ情報（例えば、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）が従属性を有することができる。一例として、変換スキップ（可用）フラグ又はパレットコーディング（可用）フラグの値が１に定義された場合、関連フラッグ又は情報シンタックス要素は必ず送信されなければならないが、変換スキップ（可用）フラグ又はパレットコーディング（可用）フラグの値が０に定義された場合は各フラグシンタックス要素を除いた前記シンタックス要素を送信しない。
すなわち、高級構文（例えば、ＶＰＳ、ＳＰＳ、ＰＰＳ、ＡＰＳ、ＤＰＳ、Ｓｌｉｃｅ ｈｅａｄｅｒなど）内の変換スキップ（可用）フラッグ及び／又はパレットコーディング（可用）フラグの値に応じて変換スキップ適用最大サイズに関する情報、変換スキップ時の最小量子化パラメータ情報、ＢＤＰＣＭ適用可否などの変換スキップ可否又はパレットコーディング可否に従属されたハイレベルシンタックス要素を送信する方法を提案する。
例えば、（ｉ）変換スキップ（可用）フラグとパレットコーディング（可用）フラグが全て１に定義された時、変換スキップ（可用）フラグとパレットコーディング（可用）フラグに従属されたシンタックス要素の和集合に該当するシンタックス要素がパーシングされることができる。（ｉｉ）変換スキップ（可用）フラグが１に定義され、パレットコーディング（可用）フラグが０である場合、変換スキップ（可用）フラグに従属されたシンタックス要素がパーシングされることができる。（ｉｉｉ）変換スキップ（可用）フラグが０に定義され、パレットコーディング（可用）フラグが１である時は、パレットコーディング（可用）フラグに従属されたシンタックス要素がパーシングされることができる。（ｉｖ）変換スキップ（可用）フラグ及びパレットコーディング（可用）フラグが全て０である場合、２種類のコーディングツールに従属性を有する他のハイレベルシンタックス要素はパージングされない。
本実施例で言及したシンタックス要素のパーシング順序は特定に限定されず、シンタックス要素間の従属性に応じてパーシングするか否かが決定される場合は一致するものとみなす。また、提案する方法は、本実施例で言及されたシンタックス要素のみに限定されず、変換スキップ可否又はパレットコーディング可否に応じて従属性を有しながら変換スキップ（可用）フラグ、パレットコーディング（可用）フラグが含まれたハイレベルシンタックスセットにおいて定義されている全てのハイレベルシンタックス要素を含む。
前述のように変換スキップベースコーディング及び／又はパレットモードベースコーディングに関連するシンタックス要素がハイレベルシンタックスセットにおいて定義されることができ、次の表１０の実施例のようにＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）内部において定義されることができる。
Figure 2023158204000021
また、例えば、前記ＳＰＳシンタックスのシンタックス要素のうち前述の実施例に関するシンタックス要素のセマンティック（ｓｅｍａｎｔｉｃ）は次の表１１のように示すことができる。
Figure 2023158204000022
前記表１０及び表１１を参照すると、ＳＰＳにおいて変換スキップ及び／又はパレットコーディングに関連したシンタックス要素が定義されることができ、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素を含む。
ここで、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素は、前記表６ないし表９において詳細に説明しているので、本実施例においては説明の便宜のために具体的な説明を省略する。
ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、その値が０であるか１であるかに基づいてパレットコーディング（すなわち、パレット予測モード）が可用であるか否かを示す。例えば、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が１である場合はパレットコーディングが可用であることを示し、この場合、ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇがコーディングユニットシンタックス（ｃｏｄｉｎｇ ｕｎｉｔ ｓｙｎｔａｘ）を介してパージング／シグナリングされる。ここで、ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇシンタックス要素は現在コーディングユニットにパレットモードが使用できるか否かを示す。ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が０である場合はパレットコーディングが可能ではないことを示し、この場合、ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇがコーディングユニットシンタックスにおいてパーシング／シグナリングされない。言い換えれば、パレットコーディング可用フラグｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇに基づいてコーディングユニットシンタックスにおいてｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇが存在するか否かを示す。
また、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１０及び表１１に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてＢＤＰＣＭが可用であるか否かを示すｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素がパーシング／シグナリングされる。または、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素がパーシング／シグナリングされない。
また、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうちパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）と関連して従属条件を定義することができる。例えば、前記表１０及び表１１に開示されているように、ＳＰＳにおいて後述するｃｈｒｏｍａ＿ｆｏｒｍａｔ＿ｉｄｃシンタックス要素に基づいてパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がパーシング／シグナリングされることができる。一例として、ｃｈｒｏｍａ＿ｆｏｒｍａｔ＿ｉｄｃシンタックス要素の値が３である場合、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素がパーシング／シグナリングされる。
また、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１０及び表１１に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて変換スキップモードに対する最小量子化パラメータ情報を示すｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるか又はパレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素がパーシング／シグナリングされる。
また、前述のように変換スキップベースコーディング及び／又はパレットモードベースコーディングに関連するシンタックス要素がハイレベルシンタックスセットにおいて定義されることができ、次の表１２の実施例のようにＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）内部で定義されることができる。ただし、従来はＰＰＳ（ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）で定義されている変換スキップのための最大ブロックサイズ情報がＨＬＳ間の従属性を止揚するためにＳＰＳに新たに定義されることができ、これは次の表１２のように示すことができる。
Figure 2023158204000023
また、例えば、前記ＳＰＳシンタックスのシンタックス要素のうち前述の実施例に対するシンタックス要素のセマンティック（ｓｅｍａｎｔｉｃ）は、下表１３のように示すことができる。
Figure 2023158204000024
前記の表１２及び表１３を参照すると、ＳＰＳにおいて変換スキップ及び／又はパレットコーディングに関連するシンタックス要素が定義されることができ、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２、 ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素を含む。
ここで、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素は前記表６ないし表１１において詳細に説明しているので、本実施例においては説明の便宜のために具体的な説明は省略する。
前記表１２及び表１３の実施例に開示されているように、ＳＰＳにおいては、変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性のあるシンタックス要素を定義することができる。例えば、前記表１２及び表１３に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてＢＤＰＣＭが可用であるか否かを示すｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素、変換スキップモードにおいて使用される最大ブロックサイズを示すｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素がパーシング／シグナリングされる。または、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素がパーシング／シグナリングされない。
また、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１２及び表１３に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて変換スキップモードに対する最小量子化パラメータ情報を示すｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるか又はパレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４シンタックス要素がパーシング／シグナリングされる。
一方、ソース又はコーディングされたピクチャ／映像はルマ成分アレイを含み、場合によって２つのクロマ成分（ｃｂ、ｃｒ）アレイをさらに含んでもよい。すなわち、ピクチャ／映像の１つのピクセルはルマサンプル及びクロマサンプル（ｃｂ、ｃｒ）を含む。
カラーフォーマットはルマ成分とクロマ成分（ｃｂ、ｃｒ）の構成フォーマットを示し、クロマフォーマットと呼ばれてもよい。前記カラーフォーマット（又は、クロマフォーマット）は予め決まっていてもよく、または適応的にシグナリングされてもよい。例えば、前記クロマフォーマットは、以下の表１４のように、ｃｈｒｏｍａ＿ｆｏｒｍａｔ＿ｉｄｃ及びｓｅｐａｒａｔｅ＿ｃｏｌｏｕｒ＿ｐｌａｎｅ＿ｆｌａｇの少なくとも１つに基づいてシグナリングされることができる。
Figure 2023158204000025
前記表１４を参照すると、単色サンプリング（ｍｏｎｏｃｈｒｏｍｅ ｓａｍｐｌｉｎｇ）には名目上（ｎｏｍｉｎａｌｌｙ）ルマアレイと見なされる１つのサンプルアレイのみがある。
４：２：０サンプリングにおいて、２つのクロマアレイそれぞれはルマアレイの高さの半分及び幅の半分を有する。
４：２：２サンプリングにおいて、２つのクロマアレイそれぞれはルマアレイの同一の高さ及び幅の半分を有する。
４：４：４サンプリングにおいて、ｓｅｐａｒａｔｅ＿ｃｏｌｏｕｒ＿ｐｌａｎｅ＿ｆｌａｇの値に応じて以下が適用される。
－もし、ｓｅｐａｒａｔｅ＿ｃｏｌｏｕｒ＿ｐｌａｎｅ＿ｆｌａｇの値が０である場合、２つのクロマアレイそれぞれはルマアレイと同一の高さ及び幅を有する。
－そうではなく、ｓｅｐａｒａｔｅ＿ｃｏｌｏｕｒ＿ｐｌａｎｅ＿ｆｌａｇの値が１である場合、３つのカラープレーン（ｃｏｌｏｕｒ ｐｌａｎｅｓ）が単色サンプリングされたピクチャ（ｍｏｎｏｃｈｒｏｍｅ ｓａｍｐｌｅｄ ｐｉｃｔｕｒｅｓ）に別途処理される。
ＳｕｂＷｉｄｔｈＣ及びＳｕｂＨｅｉｇｈｔＣはルマサンプルとクロマサンプル間の割合を示すことができる。例えば、ｃｈｒｏｍａ＿ｆｏｒｍａｔ＿ｉｄｃが３である場合、クロマフォーマットは４：４：４であり、この場合、ルマサンプルブロックの幅が１６であるとき、当該クロマサンプルブロックの幅は１６／ＳｕｂＷｉｄｔｈＣであり得る。一般的に、クロマサンプル関連シンタックス及びビットストリームはクロマアレイタイプ（例：ｃｈｒｏｍａＡｒｒａｙＴｙｐｅ）が０でない場合にのみパージングされる。
また、一実施例として、本文書は変換スキップ関連ハイレベルシンタックス要素及びパレットコーディング関連ハイレベルシンタックス要素に対して従属性があるシンタックス要素が従属条件に応じてパージング／シグナリングされるか否かを決定することにより送信されるビットを節約する方法を提案する。一例として、変換スキップ（可用）フラッグ及び／又はパレットコーディング（可用）フラグにより従属性を有するハイレベルシンタックス要素をパーシングする方法を提案する。
例えば、変換スキップベースコーディングに従属されるシンタックス要素としては、変換スキップ（可用）フラグ（例えば、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップ適用サイズに関する情報（例えば、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）、変換スキップ時の最小量子化パラメータ情報（例えば、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）、ＢＤＰＣＭ適用可否情報（例えば、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）などがある。また、前述したように、パレットコーディング時にエスケープ値も変換されないので、量子化の実行において変換スキップのための最小量子化パラメータ情報が使用されることができる。
前述の実施例で示したように、変換スキップ（可用）フラグ又はパレットコーディング（可用）フラグの値が１に定義された場合、関連フラッグ又は情報シンタックス要素は必ず送信されなければならないが、変換スキップ（可用）フラグ又はパレットコーディング（可用）フラグの値が０に定義された場合は、各フラグシンタックス要素を除いた前記シンタックス要素を送信しないことがある。つまり、高級構文（例えば、ＶＰＳ、ＳＰＳ、ＰＰＳ、ＡＰＳ、ＤＰＳ、Ｓｌｉｃｅ ｈｅａｄｅｒなど）内の変換スキップ（可用）フラグ及びパレットコーディング（可用）フラグの値に応じて変換スキップ又はパレットコーディング時の最小量子化パラメータ情報、ＢＤＰＣＭ適用可否などの変換スキップ可否又はパレットコーディング可否に従属されたハイレベルシンタックス要素を送信する方法を提案する。
例えば、（ｉ）変換スキップ（可用）フラグとパレットコーディング（可用）フラグが全て１に定義された時、変換スキップ（可用）フラグとパレットコーディング（可用）フラグに従属されたシンタックス要素の和集合に該当するシンタックス要素がパーシングされることができる。（ｉｉ）変換スキップ（可用）フラグが１に定義され、パレットコーディング（可用）フラグが０である場合、変換スキップ（可用）フラグに従属されたシンタックス要素がパーシングされることができる。（ｉｉｉ）変換スキップ（可用）フラグが０に定義され、パレットコーディング（可用）フラグが１である時はパレットコーディング（可用）フラグに従属されたシンタックス要素がパーシングされることができる。（ｉｖ）変換スキップ（可用）フラグ及びパレットコーディング（可用）フラグが全て０である場合、２つコーディングツールに従属性を有する他のハイレベルシンタックス要素はパージングされないことがある。
本実施例で言及したシンタックス要素のパーシング順序は特定に限定されず、シンタックス要素間の従属性に応じてパーシングするか否かが決定される場合、一致するものとみなす。また、提案する方法は、本実施例で言及されたシンタックス要素のみに限定せず、変換スキップ可否又はパレットコーディング可否に応じて従属性を有しながら変換スキップ（可用）フラグ、パレットコーディング（可用）フラグが含まれたハイレベルシンタックスセットにおいて定義されている全てのハイレベルシンタックス要素を含むことができる。
前述のように変換スキップベースコーディング及び／又はパレットモードベースコーディングに関連するシンタックス要素がハイレベルシンタックスセットにおいて定義されることができ、次の表１５の実施例のようにＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）内部において定義されることができる。
Figure 2023158204000026
また、例えば、前記ＳＰＳシンタックスのシンタックス要素のうち前述の実施例に関するシンタックス要素のセマンティック（ｓｅｍａｎｔｉｃ）は次の表１６のように示す。
Figure 2023158204000027
前記表１５及び表１６を参照すると、ＳＰＳにおいて変換スキップ及び／又はパレットコーディングに関連したシンタックス要素が定義されることができ、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｌｕｍａ＿ｍｉｎｕｓ４、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素を含む。
ここで、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素は、前記表６ないし表１１で詳細に説明しているので、本実施例では説明の便宜のための具体的な説明を省略する。
前記表１５及び表１６の実施例に開示されているように、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１５及び表１６に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてＢＤＰＣＭか可用であるか否かを示すｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素がパーシング／シグナリングされる。または、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素がパーシング／シグナリングされない。
また、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうちパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１５及び表１６に開示されているように、ＳＰＳにおいてパレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてクロマ成分に対する変換スキップモードにおいての最小量子化パラメータ情報を示すｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素が従属性を有することができる。一例として、パレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素がパーシング／シグナリングされる。または、パレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素がパーシング／シグナリングされない。
また、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１５及び表１６に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてルマ成分に対する変換スキップモードにおいての最小量子化パラメータ情報を示すｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｌｕｍａ＿ｍｉｎｕｓ４シンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるか又はパレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｌｕｍａ＿ｍｉｎｕｓ４シンタックス要素がパーシング／シグナリングされる。
また、一実施例として、本文書は、変換スキップ関連ハイレベルシンタックス要素及びパレットコーディング関連ハイレベルシンタックス要素に対して従属性があるシンタックス要素が従属条件に応じてパージング／シグナリングするか否かを決定することにより送信されるビットを節約する方法を提案する。一例として、変換スキップ（可用）フラッグ及び／又はパレットコーディング（可用）フラグにより従属性を有するハイレベルシンタックス要素をパーシングする方法を提案する。
例えば、変換スキップベースコーディングに従属されるシンタックス要素としては、変換スキップ（可用）フラグ（例えば、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップ適用サイズに関する情報（例えば、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）、変換スキップ時の最小量子化パラメータ情報（例えば、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）、ＢＤＰＣＭ適用可否情報（例えば、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）などがある。また、前述したように、パレットコーディング時にエスケープ値も変換されないので、量子化の実行において変換スキップのための最小量子化パラメータ情報が使用されることができる。
前述の実施例に示したように、変換スキップ（可用）フラグ又はパレットコーディング（可用）フラグの値が１に定義された場合、関連フラッグあるいは情報シンタックス要素は必ず送信されなければならないが、変換スキップ（可用）フラグ又はパレットコーディング（可用）フラグの値が０に定義された場合は、各フラグシンタックス要素を除いた前記シンタックス要素を送信しない。すなわち、高級構文（例えば、ＶＰＳ、ＳＰＳ、ＰＰＳ、ＡＰＳ、ＤＰＳ、Ｓｌｉｃｅ ｈｅａｄｅｒなど）内の変換スキップ（可用）フラグ及びパレットコーディング（可用）フラグの値に応じて変換スキップ適用最大サイズに関する情報、変換スキップ又はパレットコーディング時の少なくとも量子化パラメータ情報、ＢＤＰＣＭ適用可否などの変換スキップ可否又はパレットコーディング可否に従属されたハイレベルシンタックス要素を送信する方法を提案する。
例えば、（ｉ）変換スキップ（可用）フラグとパレットコーディング（可用）フラグが全て１に定義された時、変換スキップ（可用）フラグとパレットコーディング（可用）フラグに従属されたシンタックス要素の和集合に該当するシンタックス要素がパーシングされることができる。（ｉｉ）変換スキップ（可用）フラグが１に定義され、パレットコーディング（可用）フラグが０である場合、変換スキップ（可用）フラグに従属されたシンタックス要素がパーシングされる。（ｉｉｉ）変換スキップ（可用）フラグが０に定義され、パレットコーディング（可用）フラグが１である時は、パレットコーディング（可用）フラグに従属されたシンタックス要素がパーシングされる。（ｉｖ）変換スキップ（可用）フラグ及びパレットコーディング（可用）フラグが全て０である場合、２つのコーディングツールに従属性を有する他のハイレベルシンタックス要素はパージングされない。
本実施例で言及したシンタックス要素のパーシング順序は特定に限定せず、シンタックス要素間の従属性に応じてパーティションするか否かが決定される場合、一致するものとみなす。また、提案する方法は、本実施例で言及されたシンタックス要素のみに限定せず、変換スキップ可否又はパレットコーディング可否によって従属性を有しながら変換スキップ（可用）フラグ、パレットコーディング（可用）フラグが含まれたハイレベルシンタックスセットにおいて定義されている全てのハイレベルシンタックス要素を含む。
前述のように、変換スキップベースコーディング及び／又はパレットモードベースコーディングに関連するシンタックス要素がハイレベルシンタックスセットにおいて定義されることができ、次の表１７の実施例のようにＳＰＳ（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）内部において定義されることができる。本実施例では、従来ＰＰＳ（ｐｉｃｔｕｒｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）において定義されている変換スキップ最大サイズに関する情報がＨＬＳ間の従属性を止揚するためにＳＰＳに新たに定義されることができ、既存に使用される変換スキップ及びパレットコーディング関連シンタックス要素の従属性に基づいてパージング／シグナリングされる方法を提案する。
Figure 2023158204000028
また、例えば、前記ＳＰＳシンタックスのシンタックス要素のうち前述の実施例に関するシンタックス要素のセマンティック（ｓｅｍａｎｔｉｃ）は次の表１８のように示す。
Figure 2023158204000029
Figure 2023158204000030
前記表１７及び表１８を参照すると、ＳＰＳにおいて変換スキップ及び／又はパレットコーディングに関連したシンタックス要素が定義されることができ、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｌｕｍａ＿ｍｉｎｕｓ４、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素を含む。
ここで、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２、ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｌｕｍａ＿ｍｉｎｕｓ４、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素は、前記表６ないし表１１で詳細に説明しているので、本実施例では説明の便宜のために具体的な説明を省略する。
前記表１７及び表１８の実施例に開示されているように、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１７及び表１８に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてＢＤＰＣＭが可用であるか否かを示すｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素、変換スキップモードにおいて使用される最大ブロックサイズを示すｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素がパーシング／シグナリングされる。または、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ、ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２シンタックス要素がパーシング／シグナリングされない。また、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうちパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１７及び表１８に開示されているように、ＳＰＳにおいてパレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてクロマ成分に対する変換スキップモードにおいての最小量子化パラメータ情報を示すｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素が従属性を有することができる。一例として、パレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素がパーシング／シグナリングされる。または、パレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｃｈｒｏｍａ＿ｍｉｎｕｓ４シンタックス要素がパーシング／シグナリングされない。
また、ＳＰＳにおいては変換スキップ及び／又はパレットコーディングに関連するシンタックス要素のうち変換スキップ可用フラグシンタックス要素（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性があるシンタックス要素を定義することができる。例えば、前記表１７及び表１８に開示されているように、ＳＰＳにおいて変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用フラグシンタックス要素（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてルマ成分に対する変換スキップモードにおいての最小量子化パラメータ情報を示すｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｌｕｍａ＿ｍｉｎｕｓ４シンタックス要素が従属性を有することができる。一例として、変換スキップ可用フラグ（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であるか又はパレットコーディング可用フラグ（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｌｕｍａ＿ｍｉｎｕｓ４シンタックス要素がパーシング／シグナリングされることができる。
以下の図面は本文書の具体的な一例を説明するために作成された。図面に記載された具体的な装置の名称や具体的な用語や名称（例えば、シンタックス／シンタックス要素の名称など）は例示的に提示されたものであるので、本文書の技術的特徴が以下の図面に使用された具体的な名称に制限されない。
図１０及び図１１は、本文書の実施例（ら）によるビデオ／映像エンコーディングの方法及び関連コンポーネントの一例を概略的に示す。
図１０に開示された方法は、図２又は図１１において開示されたエンコーディング装置２００により行われることができる。ここで、図１１に開示されたエンコーディング装置２００は、図２に開示されたエンコーディング装置２００を簡略に示したものである。具体的に、図１０のステップＳ１０００～Ｓ１０１０は、図２に開示されたレジデュアル処理部２３０により行われ、図１０のステップＳ１０２０は、図２に開示されたエントロピーエンコーディング部２４０により行われる。また、図示されてはいないが、予測サンプルを導出する過程は、前記エンコーディング装置２００の予測部２２０により行われ、前記現在ブロックに対するレジデュアルサンプルと予測サンプルに基づいて前記現在ブロックに対する復元サンプル及び復元ピクチャを生成する過程は、前記エンコーディング装置２００の加算部２５０により行われ、前記現在ブロックに対する予測情報をエンコーディングする過程は、前記エンコーディング装置２００のエントロピーエンコーディング部２４０により行われる。また、図１０に開示された方法は、本文書において前述の実施例を含めて行われる。従って、図１０においては、前述の実施例と重複する内容に関して具体的な説明を省略するか簡単にする。
図１０に示すように、エンコーディング装置は、変換スキップ可用情報に基づいて現在ブロックに対して変換を適用するか否かを決定する（Ｓ１０００）。
一実施例として、まず、エンコーディング装置は現在ブロックに対する予測モードを決定し、予測サンプルを導出する。例えば、エンコーディング装置は、現在ブロックにインター予測を行うか又はイントラ予測を行うかを決定することができ、また、ＲＤコストに基づいて具体的なインター予測モード又は具体的なイントラ予測モードを決定することができる。または、エンコーディング装置は、現在ブロックにＣＩＩＰモード、ＩＢＣモード、ＢＤＰＣＭモード又はパレットモードなどに基づいて予測を行うか否かを決定することができる。エンコーディング装置は決定された予測モードにより予測を行って現在ブロックに対する予測サンプルを導出することができる。この時、インター予測又はイントラ予測など本文書において開示された多様な予測方法が適用される。また、エンコーディング装置は現在ブロックに適用された予測に関する情報（例えば、予測モード情報）を生成し、エンコーディングすることができる。
そして、エンコーディング装置は、現在ブロックに対する原本サンプルと予測サンプルを比較してレジデュアルサンプルを導出することができる。エンコーディング装置は、レジデュアルサンプルに対する変換過程を通じて変換係数を導出することができる。この時、エンコーディング装置は、コーディング効率を考慮して現在ブロックに対する変換適用可否を決定することができる。すなわち、エンコーディング装置は、現在ブロックのレジデュアルサンプルに対して変換が適用されるか否かを決定することができる。
例えば、エンコーディング装置は、変換スキップ可用情報に基づいて現在ブロック（レジデュアルサンプル）に変換を適用するか又は変換スキップモードを適用するかを決定する。
変換スキップ可用情報は、前述のように変換スキップが可用であるか否かに関する情報であり、前記表６ないし表１８に開示されているようにｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素で示すことができる。例えば、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が１である場合は変換スキップが可用であることを示し、この場合、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇが変換ユニットシンタックス（ｔｒａｎｓｆｏｒｍ ｕｎｉｔ ｓｙｎｔａｘ）を介してパージング／シグナリングされる。ここで、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇシンタックス要素は、当該変換ブロック（ａｓｓｏｃｉａｔｅｄ ｔｒａｎｓｆｏｒｍ ｂｌｏｃｋ）に変換が適用できるか否かを示す。ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が０である場合は変換スキップが可用ではないことを示し、この場合、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇが変換ユニットシンタックスにおいてパーシング／シグナリングされない。変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）は、ＳＰＳに含まれてデコーディング装置にシグナリングされることができる。すなわち、ＳＰＳに含まれた変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であることに基づいて、変換ユニットシンタックスが変換スキップフラグ（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）を含む。この時、変換ユニットシンタックスに含まれた変換スキップフラグ（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）の値が１である場合、現在ブロックに対して変換が適用されないモード（変換スキップモード）が実行される。または、変換ユニットシンタックスに含まれた変換スキップフラグ（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）の値が０である場合、現在ブロックに対して変換が適用される。
例えば、変換スキップ可用情報の値が１である場合（すなわち、変換スキップが可用であることを示す変換スキップ可用情報について）、エンコーディング装置は現在ブロックに変換を適用するか否かを決定することができる。すなわち、エンコーディング装置は、変換スキップ可用情報の値が１であることに基づいて現在ブロックに変換を適用するか否かに関する情報（変換スキップフラグ）を生成し、前記変換スキップフラグを、変換ユニットシンタックスを介してシグナリングすることができる。このとき、現在ブロックに変換を適用しない場合（すなわち、変換スキップモードである場合）、エンコーディング装置は、その値が１である変換スキップフラグを生成し、これを変換ユニットシンタックスに含めることができる。または、現在ブロックに変換を適用する場合、エンコーディング装置は、その値が０である変換スキップフラグを生成し、これを変換ユニットシンタックスに含めることができる。
エンコーディング装置は変換を適用するか否かに基づいて現在ブロックに対するレジデュアル情報を生成する（Ｓ１０１０）。
一実施例として、エンコーディング装置は、現在ブロックのレジデュアルサンプルを導出し、変換を適用するか否かに基づいて現在ブロックのレジデュアルサンプルに変換又は変換スキップを適用してレジデュアル情報を生成する。例えば、変換スキップフラグの値が１である現在ブロックに対するレジデュアルサンプルに対して、エンコーディング装置は変換スキップモードを適用することができる。この場合、エンコーディング装置は現在ブロックのレジデュアルサンプルを変換係数として導出することができる。または、変換スキップフラグの値が０である現在ブロックに対するレジデュアルサンプルに対して、エンコーディング装置は変換を行って変換係数を導出する。エンコーディング装置は、変換スキップ又は変換により導出された変換係数に基づいて量子化過程を行って量子化された変換係数を導出する。エンコーディング装置は、量子化された変換係数に基づいてレジデュアル情報を生成することができる。
ここで、レジデュアル情報は、変換及び／又は量子化手順により生成された情報として、量子化された変換係数に関する情報であり、例えば、量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含む。
エンコーディング装置は映像情報（又は、ビデオ情報）をエンコーディングする（Ｓ１０２０）。
ここで、映像情報は前記レジデュアル情報を含む。また、映像情報は、前記予測サンプルの導出に使用された前記予測に関する情報（例えば、予測モード情報）を含む。また、映像情報は、前記変換スキップに関する情報、例えば、変換スキップ可用情報、変換スキップフラグ情報を含む。すなわち、映像情報はエンコーディング過程で導出される様々な情報を含み、このような様々な情報を含んでエンコーディングされる。
また、映像情報は、本文書において前述の実施例による様々な情報を含み、前述の表１ないし図１８の少なくとも１つに開示された情報を含む。
例えば、映像情報はＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）を含む。ＳＰＳは、変換スキップ関連情報、パレットコーディング関連情報などを含む。一例として、変換スキップ関連情報は変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、ＢＤＰＣＭ可用情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップモードにおいて使用される最大ブロックサイズに関する情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）、変換スキップモードに対する最小許容量子化パラメータに関連した最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）などを含む。また、一例として、パレットコーディングに関する情報はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップモードに対する最小許容量子化パラメータに関連した最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）などを含む。
また、例えば、前述のようにＳＰＳに含まれる変換スキップ及び／又はパレットコーディングに関する情報のうち、変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性がある情報を定義することができる。
一例として、ＳＰＳにおいて変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてＢＤＰＣＭが可用であるか否かに関するＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）をパーシング／シグナリングできるように構成することができる。この場合、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＳＰＳに含まれ、前記情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＳＰＳからパーシング／シグナリングされることができる。または、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＳＰＳからパーシング／シグナリングされない。
また、ＳＰＳにおいてのＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて、現在ブロックに対してＢＤＰＣＭを適用するか否かに関するＢＤＰＣＭフラグ情報（例：ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がコーディングユニットシンタックスを介してパージング／シグナリングされることができる。この場合、ＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ＢＤＰＣＭフラグ情報（例：ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がコーディングユニットシンタックスに含まれ、前記情報（例：ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がコーディングユニットシンタックスからパーシング／シグナリングされる。または、ＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ＢＤＰＣＭフラグ情報（例：ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がコーディングユニットシンタックスからパーシング／シグナリングされない。
または、一例として、ＳＰＳにおいて変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて変換スキップモードにおいて使用される最大ブロックサイズに関する情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）をパーシング／シグナリングできるように構成することができる。この場合、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、変換スキップモードにおいて使用される最大ブロックサイズに関する情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）がＳＰＳに含まれ、前記情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）がＳＰＳからパーシング／シグナリングされる。または、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、変換スキップモードにおいて使用される最大ブロックサイズに関する情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）がＳＰＳからパーシング／シグナリングされない。
または、一例として、ＳＰＳにおいて定義された変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて、現在ブロックに対して変換スキップを適用するか否かに関する変換スキップフラグ情報（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニットシンタックスを介してパージング／シグナリングされることができる。この場合、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、変換スキップフラグ情報（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニットシンタックスに含まれ、前記情報（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニットシンタックスからパーシング／シグナリングされる。または、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、変換スキップフラグ情報（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニットシンタックスからパーシング／シグナリングされない。
また、例えば、前述のようにＳＰＳに含まれる変換スキップ及び／又はパレットコーディングに関する情報のうち、パレットコーディングが可用であるか否かに関するパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性がある情報を定義することができる。一例として、ＳＰＳにおいて定義されたパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて、現在ブロックに対してパレットコーディング（パレット予測モード）を適用するか否かに関するパレット予測モードのフラグ情報（例：ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇ）がコーディングユニットシンタックスを介してパージング／シグナリングされることができる。この場合、パレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、パレット予測モードフラグ情報（例：ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇ）がコーディングユニットシンタックスに含まれ、前記情報（例：ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇ）がコーディングユニットシンタックスからパーシング／シグナリングされる。または、パレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、パレット予測モードのフラグ情報（例：ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇ）がコーディングユニットシンタックスからパーシング／シグナリングされない。
また、例えば、前述のようにＳＰＳに含まれる変換スキップ及び／又はパレットコーディングに関する情報のうち、変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性がある情報を定義することができる。
一例として、ＳＰＳにおいて変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）のうち少なくとも１つに基づいて、変換スキップモードに対する最小許容量子化パラメータに関連した最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）をパーシング／シグナリングすることができる。言い換えれば、変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１又はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である条件に基づいて、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）がＳＰＳに含まれ、前記条件を満足させる場合に限って最低量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）がパーシング／シグナリングされることができる。
ここで、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）は前述のように変換スキップモードに対する最小許容量子化パラメータに関する情報であり、これに基づいて現在ブロックに対する量子化パラメータを導出することができる。
例えば、現在ブロックについて変換スキップモードが適用される場合、少なくとも量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）に基づいて現在ブロックに対する量子化パラメータを導出し、前記量子化パラメータに基づいて量子化過程を行って量子化された変換係数を導出することができる。
または、例えば、現在ブロックに対してパレットコーディングモードが適用される場合、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）に基づいて現在ブロックのエスケープ値に対する量子化パラメータを導出することができる。この場合、前記量子化パラメータに基づいて前記現在ブロックのエスケープ値に適用して量子化されたエスケープ値（例：ｐａｌｅｔｔｅ＿ｅｓｃａｐｅ＿ｖａｌ）を導出することができる。パレットコーディングモードが適用される過程は、前記表４及び表５に開示されているように行われる。
前述したような多様な情報を含む映像情報はエンコーディングされてビットストリーム形態で出力される。ビットストリームは、ネットワーク又は（デジタル）格納媒体を介してデコーディング装置に送信される。ここで、ネットワークは、放送網及び／又は通信網などを含み、デジタル格納媒体はＵＳＢ、ＳＤ、ＣＤ、ＤＶＤ、ブルーレイ、ＨＤＤ、ＳＳＤなどの多様な格納媒体を含む。
図１２及び図１３は、本文書の実施例（ら）によるビデオ／映像デコーディング方法及び関連コンポーネントの一例を概略的に示す。
図１２に開示された方法は、図３又は図１３に開示されたデコーディング装置３００により行われることができる。ここで、図１３に開示されたデコーディング装置３００は、図３に開示されたデコーディング装置３００を簡略に示したものである。具体的に、図１２のステップＳ１２００は図３に開示されたエントロピーデコーディング部３１０により行われ、図１２のステップＳ１２１０～Ｓ１２２０は図３に開示されたレジデュアル処理部３２０により行われ、図１２のステップＳ１２３０は図３に開示された加算部３４０により行われる。また、図示されてはいないが、現在ブロックに対する予測情報を受信する過程は、前記デコーディング装置３００のエントロピーデコーディング部３１０により行われ、現在ブロックの予測サンプルを導出する過程は、前記デコーディング装置３００の予測部３３０により行われる。また、図１２で開示された方法は、本文書において前述の実施例を含んで行われることができる。従って、図１２では、前述の実施例と重複する内容に関して、具体的な説明を省略するか簡単にする。
図１２に示すように、デコーディング装置はビットストリームから映像情報（又は、ビデオ情報）を受信する（Ｓ１２００）。
一実施例として、デコーディング装置はビットストリームをパーシングして映像復元（又は、ピクチャ復元）に必要な情報（例えば、ビデオ／映像情報）を導出する。この時、映像情報はレジデュアル情報を含み、レジデュアル情報は量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含む。また、映像情報は予測に関する情報（例えば、予測モード情報）を含む。また、映像情報は、前記変換スキップに関する情報、例えば、変換スキップ可用情報、変換スキップフラグ情報を含む。すなわち、映像情報は、デコーディング過程で必要な様々な情報を含み、指数ゴロム符号化、ＣＡＶＬＣ又はＣＡＢＡＣなどのコーディング方法に基づいてデコーディングされることができる。
また、映像情報は、本文書において前述の実施例（ら）による様々な情報を含み、前述の表１ないし図１８の少なくとも１つに開示された情報を含む。
例えば、映像情報はＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）を含む。ＳＰＳは、変換スキップ関連情報、パレットコーディング関連情報などを含む。一例として、変換スキップ関連情報は変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、ＢＤＰＣＭ可用情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップモードにおいて使用される最大ブロックサイズに関する情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）、変換スキップモードに対する最小許容量子化パラメータに関する最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）などを含む。また、一例として、パレットコーディング関連情報はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）、変換スキップモードに対する最小許容量子化パラメータに関する最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）などを含む。
また、例えば、前述のように、ＳＰＳに含まれる変換スキップ及び／又はパレットコーディングに関する情報のうち、変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性がある情報を定義することができる。
一例として、ＳＰＳにおいて変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいてＢＤＰＣＭが可用であるか否かに関するＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）をパーシング／シグナリングできるように構成することができる。この場合、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＳＰＳに含まれ、前記情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＳＰＳからパーシング／シグナリングされる。または、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）がＳＰＳからパーシング／シグナリングされない。
また、ＳＰＳにおいてのＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて、現在ブロックに対してＢＤＰＣＭを適用するか否かに関するＢＤＰＣＭフラグ情報（例：ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がコーディングユニットシンタックスを介してパージング／シグナリングされることができる。この場合、ＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、ＢＤＰＣＭフラグ情報（例：ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がコーディングユニットシンタックスに含まれ、前記情報（例：ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がコーディングユニットシンタックスからパーシング／シグナリングされる。または、ＢＤＰＣＭ可用フラグ情報（例：ｓｐｓ＿ｂｄｐｃｍ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、ＢＤＰＣＭフラグ情報（例：ｉｎｔｒａ＿ｂｄｐｃｍ＿ｆｌａｇ）がコーディングユニットシンタックスからパーシング／シグナリングされない。
または、一例として、ＳＰＳにおいて変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて変換スキップモードにおいて使用される最大ブロックサイズに関する情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）をパーシング／シグナリングできるように構成することができる。この場合、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、変換スキップモードにおいて使用される最大ブロックサイズに関する情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）がＳＰＳに含まれ、前記情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）がＳＰＳからパーシング／シグナリングされる。または、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、変換スキップモードにおいて使用される最大ブロックサイズに関する情報（例：ｌｏｇ２＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｍａｘ＿ｓｉｚｅ＿ｍｉｎｕｓ２）がＳＰＳからパーシング／シグナリングされない。
または、一例として、ＳＰＳにおいて定義された変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて、現在ブロックに対して変換スキップを適用するか否かに関する変換スキップフラグ情報（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニットシンタックスを介してパージング／シグナリングされることができる。この場合、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、変換スキップフラグ情報（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニットシンタックスに含まれ、前記情報（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニットシンタックスからパーシング／シグナリングされる。または、変換スキップ可用フラグ情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、変換スキップフラグ情報（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）が変換ユニットシンタックスからパーシング／シグナリングされない。
また、例えば、前述のように、ＳＰＳに含まれる変換スキップ及び／又はパレットコーディングに関する情報のうち、パレットコーディングが可用である否かに関するパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性がある情報を定義することができる。一例として、ＳＰＳにおいて定義されたパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値に基づいて、現在ブロックに対してパレットコーディング（パレット予測モード）を適用するか否かに関するパレット予測モードフラグ情報（例：ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇ）がコーディングユニットシンタックスを介してパージング／シグナリングされることができる。この場合、パレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である場合、パレット予測モードのフラグ情報（例：ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇ）がコーディングユニットシンタックスに含まれ、前記情報（例：ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇ）がコーディングユニットシンタックスからパーシング／シグナリングされる。または、パレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が０である場合、パレット予測モードのフラグ情報（例：ｐｒｅｄ＿ｍｏｄｅ＿ｐｌｔ＿ｆｌａｇ）がコーディングユニットシンタックスからパーシング／シグナリングされない。
また、例えば、前述のように、ＳＰＳに含まれる変換スキップ及び／又はパレットコーディングに関する情報のうち、変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）に対して従属性がある情報を定義することができる。
一例として、ＳＰＳにおいて変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）のうち少なくとも１つに基づいて、変換スキップモードに対する最小許容量子化パラメータに関する最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）をパーシング／シグナリングすることができる。すなわち、変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１又はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である条件に基づいて、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）がＳＰＳに含まれ、前記条件を満足させる場合に限って、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）がパーシング／シグナリングされることができる。
ここで、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）は、前述のように変換スキップモードに対する最小許容量子化パラメータに関する情報であり、これに基づいて現在ブロックに対する量子化パラメータを導出することができる。
例えば、現在ブロックに対して変換スキップモードが適用される場合、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）に基づいて現在ブロックに対する量子化パラメータを導出し、前記量子化パラメータに基づいて逆量子化過程（スケーリング過程）を行って逆量子化された変換係数（スケーリングされた変換係数）を導出する。前記逆量子化された変換係数に基づいて現在ブロックのレジデュアルサンプルを導出することができる。
または、例えば、現在ブロックに対してパレットコーディングモードが適用される場合、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）に基づいて現在ブロックのエスケープ値に対する量子化パラメータを導出することができる。この場合、前記量子化パラメータに基づいて逆量子化（スケーリング過程）を行って前記現在ブロックのエスケープ値を導出することができる。前記エスケープ値に基づいて現在ブロックの復元サンプルを生成することができる。パレットコーディングモードが適用される過程は、前記表４及び表５に開示されているように行われる。
デコーディング装置は変換スキップ可用情報に基づいて現在ブロックに変換を適用するか否かを決定する（Ｓ１２１０）。
一実施例として、変換スキップ可用情報を含む映像情報を受信した場合、デコーディング装置は変換スキップ可用情報に基づいて現在ブロックに変換を適用するか又は変換スキップモードを適用するかを決定する。
変換スキップ可用情報は、前述のように、変換スキップが可用であるか否かに関する情報であり、前記表６ないし表１８に開示されているように、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇシンタックス要素で示すことができる。例えば、ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が１である場合は変換スキップが可用であることを示し、この場合、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇが変換ユニットシンタックス（ｔｒａｎｓｆｏｒｍ ｕｎｉｔ ｓｙｎｔａｘ）を介してパージング／シグナリングされる。ここで、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇシンタックス要素は、当該変換ブロック（ａｓｓｏｃｉａｔｅｄ ｔｒａｎｓｆｏｒｍ ｂｌｏｃｋ）に変換が適用できるか否かを示す。ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇの値が０である場合は変換スキップが可用ではないことを示し、この場合、ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇが変換ユニットシンタックスにおいてパーシング／シグナリングされない。変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）はＳＰＳに含まれたエンコーディング装置からデコーディング装置にシグナリングされる。すなわち、ＳＰＳに含まれた変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１であることに基づいて、変換ユニットシンタックスが変換スキップフラグ（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）を含む。この時、変換ユニットシンタックスに含まれた変換スキップフラグ（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）の値が１である場合、現在ブロックに対して変換が適用されていないモード（変換スキップモード）が行われる。または、変換ユニットシンタックスに含まれた変換スキップフラグ（例：ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｆｌａｇ）の値が０である場合、現在ブロックに対して変換が適用される。
例えば、変換スキップ可用情報の値が１である場合（すなわち、変換スキップが可用であることを示す変換スキップ可用情報について）、デコーディング装置は現在ブロックに変換を適用するか否かを決定することができる。
デコーディング装置は、変換適用可否及びレジデュアル情報に基づいてレジデュアルサンプルを導出する（Ｓ１２２０）。
一例として、デコーディング装置はレジデュアル情報を含む映像情報を受信する。レジデュアル情報は、前述のように、量子化された変換係数の値情報、位置情報、変換技法、変換カーネル、量子化パラメータなどの情報を含む。デコーディング装置は、レジデュアル情報に含まれている量子化された変換係数情報に基づいて現在ブロックに対する量子化された変換係数を導出し、前記量子化された変換係数に基づいて変換係数を導出することができる。そして、前記変換係数に基づいてレジデュアルサンプルを導出することができる。
例えば、変換スキップ可用情報の値が１である場合（すなわち、変換スキップが可用であることを示す変換スキップ可用情報に対して）、デコーディング装置は現在ブロックに変換を適用するか否かに関する情報（変換スキップフラグ）を変換ユニットシンタックスから取得することができる。この時、デコーディング装置は前記変換スキップフラグ情報に基づいてレジデュアルサンプルを導出することができる。例えば、変換スキップフラグの値が１である現在ブロックに対しては、変換スキップモードを適用することができ、この場合、デコーディング装置は変換係数を現在ブロックのレジデュアルサンプルとして導出することができる。または、変換スキップフラグの値が０である現在ブロックに対しては変換を適用することができ、この場合、デコーディング装置は変換係数に対して逆変換して現在ブロックのレジデュアルサンプルを導出することができる。
また、変換スキップフラグの値が１（すなわち、変換スキップモード）である現在ブロックに対して、デコーディング装置は最小量子化パラメータ情報に基づいて逆量子化過程で使われる量子化パラメータを導出することができる。そして、デコーディング装置は、前記量子化パラメータに基づいて逆量子化過程を行って逆量子化された変換係数を導出し、前記逆量子化された変換係数に基づいてレジデュアルサンプルを導出することができる。
ここで、最小量子化パラメータ情報は、前述のように、変換スキップモードに対する最小許容量子化パラメータに関する情報であり、変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）及び／又はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）のうち少なくとも１つに基づいて映像情報（例：ＳＰＳ）に含まれる。例えば、変換スキップ可用情報（例：ｓｐｓ＿ｔｒａｎｓｆｏｒｍ＿ｓｋｉｐ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１又はパレットコーディング可用情報（例：ｓｐｓ＿ｐａｌｅｔｔｅ＿ｅｎａｂｌｅｄ＿ｆｌａｇ）の値が１である条件に基づいて、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）がＳＰＳに含まれる。すなわち、前記条件を満足させる場合に限って、最小量子化パラメータ情報（例：ｍｉｎ＿ｑｐ＿ｐｒｉｍｅ＿ｔｓ＿ｍｉｎｕｓ４）がパーシング／シグナリングされることができる。
デコーディング装置はレジデュアルサンプルに基づいて復元のサンプルを生成する（Ｓ１２３０）。
一実施例として、デコーディング装置は、映像情報に含まれた予測情報（例えば、予測モード情報）に基づいて現在ブロックに対するインター予測を行うか又はイントラ予測を行うかを決定し、前記決定によって予測を行って現在ブロックに対する予測サンプルを導出することができる。そして、デコーディング装置は予測サンプルとレジデュアルサンプルに基づいて復元サンプルを生成する。この時、デコーディング装置は、予測モードに応じて予測サンプルを直ちに復元サンプルとして利用してもよく、又は予測サンプルにレジデュアルサンプルを加えて復元サンプルを生成してもよい。また、復元サンプルに基づいて復元ブロック又は復元ピクチャを導出することができる。以後、デコーディング装置は、必要に応じて主観的／客観的画質を向上させるためにデブロッキングフィルタリング及び／又はＳＡＯ手順のようなインループフィルタリングの手順を前記復元ピクチャに適用できることは前述の通りである。
前述した実施例において、方法は、一連のステップまたはブロックで流れ図に基づいて説明されているが、該当実施例は、ステップの順序に限定されるものではなく、あるステップは、前述と異なるステップと、異なる順序にまたは同時に発生できる。また、当業者であれば、流れ図に示すステップが排他的でなく、他のステップが含まれ、または、流れ図の一つまたはそれ以上のステップが本文書の実施例の範囲に影響を及ぼさずに削除可能であることを理解することができる。
前述した本文書の実施例による方法は、ソフトウェア形態で具現されることができ、本文書によるエンコーディング装置及び／またはデコーディング装置は、例えば、ＴＶ、コンピュータ、スマートフォン、セットトップボックス、ディスプレイ装置などの映像処理を実行する装置に含まれることができる。
本文書において、実施例がソフトウェアで具現される時、前述した方法は、前述した機能を遂行するモジュール（過程、機能など）で具現されることができる。モジュールは、メモリに格納され、プロセッサにより実行されることができる。メモリは、プロセッサの内部または外部にあり、よく知られた多様な手段でプロセッサと連結されることができる。プロセッサは、ＡＳＩＣ（ａｐｐｌｉｃａｔｉｏｎ－ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ）、他のチップセット、論理回路及び／またはデータ処理装置を含むことができる。メモリは、ＲＯＭ（ｒｅａｄ－ｏｎｌｙ ｍｅｍｏｒｙ）、ＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）、フラッシュメモリ、メモリカード、格納媒体及び／または他の格納装置を含むことができる。即ち、本文書で説明した実施例は、プロセッサ、マイクロプロセッサ、コントローラまたはチップ上で具現されて実行されることができる。例えば、各図面で示す機能ユニットは、コンピュータ、プロセッサ、マイクロプロセッサ、コントローラまたはチップ上で具現されて実行されることができる。この場合、具現のための情報（例えば、ｉｎｆｏｒｍａｔｉｏｎ ｏｎ ｉｎｓｔｒｕｃｔｉｏｎｓ）またはアルゴリズムがデジタル格納媒体に格納されることができる。
また、本文書が適用されるデコーディング装置及びエンコーディング装置は、マルチメディア放送送受信装置、モバイル通信端末、ホームシネマビデオ装置、デジタルシネマビデオ装置、監視用カメラ、ビデオ対話装置、ビデオ通信のようなリアルタイム通信装置、モバイルストリーミング装置、格納媒体、カムコーダ、注文型ビデオ（ＶｏＤ）サービス提供装置、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置、インターネットストリーミングサービス提供装置、３次元（３Ｄ）ビデオ装置、ＶＲ（ｖｉｒｔｕａｌ ｒｅａｌｉｔｙ）装置、ＡＲ（ａｒｇｕｍｅｎｔｅ ｒｅａｌｉｔｙ）装置、画像電話ビデオ装置、運送手段端末（例えば、車両（自律走行車両を含む）端末、飛行機端末、船舶端末等）、及び医療用ビデオ装置などに含まれることができ、ビデオ信号またはデータ信号を処理するために使われることができる。例えば、ＯＴＴビデオ（Ｏｖｅｒ ｔｈｅ ｔｏｐ ｖｉｄｅｏ）装置として、コンソール、ブルーレイプレーヤ、インターネット接続ＴＶ、ホームシアターシステム、スマートフォン、タブレットＰＣ、ＤＶＲ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｒｅｃｏｒｄｅｒ）などを含むことができる。
また、本文書の実施例（ら）が適用される処理方法は、コンピュータで実行されるプログラムの形態で生産されることができ、コンピュータが読み取り可能な記録媒体に格納されることができる。また、本文書の実施例（ら）によるデータ構造を有するマルチメディアデータもコンピュータが読み取り可能な記録媒体に格納されることができる。前記コンピュータが読み取り可能な記録媒体は、コンピュータで読みだすことができるデータが格納される全ての種類の格納装置及び分散格納装置を含む。前記コンピュータが読み取り可能な記録媒体は、例えば、ブルーレイディスク（ＢＤ）、汎用直列バス（ＵＳＢ）、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、及び光学的データ格納装置を含むことができる。また、前記コンピュータが読み取り可能な記録媒体は、搬送波（例えば、インターネットを介した送信）の形態で具現されたメディアを含む。また、エンコーディング方法で生成されたビットストリームが、コンピュータが読み取り可能な記録媒体に格納され、または、有無線通信ネットワークを介して送信されることができる。
また、本文書の実施例（ら）は、プログラムコードによるコンピュータプログラム製品で具現されることができ、前記プログラムコードは、本文書の実施例（ら）によりコンピュータで実行されることができる。前記プログラムコードは、コンピュータにより読み取り可能なキャリア上に格納されることができる。
図１４は、本文書において開示された実施例が適用できるコンテンツストリーミングシステムの例を示す。
図１４に示すように、本文書の実施例に適用されるコンテンツストリーミングシステムは、大別してエンコーディングサーバ、ストリーミングサーバ、ウェブサーバ、メディア格納所、使用者装置及びマルチメディア入力装置を含む。
前記エンコーディングサーバは、スマートフォン、カメラ、カムコーダなどのようなマルチメディア入力装置から入力されたコンテンツをデジタルデータで圧縮してビットストリームを生成し、これを前記ストリーミングサーバに送信する役割をする。他の例として、スマートフォン、カメラ、カムコーダなどのようなマルチメディア入力装置がビットストリームを直接生成する場合、前記エンコーディングサーバは省略されることができる。
前記ビットストリームは、本文書の実施例に適用されるエンコーディング方法またはビットストリーム生成方法により生成されることができ、前記ストリーミングサーバは、前記ビットストリームを送信または受信する過程で一時的に前記ビットストリームを格納することができる。
前記ストリーミングサーバは、ウェブサーバを介したユーザ要請に基づいてマルチメディアデータをユーザ装置に送信し、前記ウェブサーバは、ユーザにどのようなサービスがあるかを知らせる媒介体役割をする。ユーザが前記ウェブサーバに所望のサービスを要請すると、前記ウェブサーバは、これをストリーミングサーバに伝達し、前記ストリーミングサーバは、ユーザにマルチメディアデータを送信する。このとき、前記コンテンツストリーミングシステムは、別途の制御サーバを含むことができ、この場合、前記制御サーバは、前記コンテンツストリーミングシステム内の各装置間の命令／応答を制御する役割をする。
前記ストリーミングサーバは、メディア格納所及び／またはエンコーディングサーバからコンテンツを受信することができる。例えば、前記エンコーディングサーバからコンテンツを受信するようになる場合、前記コンテンツをリアルタイムで受信することができる。この場合、円滑なストリーミングサービスを提供するために、前記ストリーミングサーバは、前記ビットストリームを一定時間の間格納することができる。
前記ユーザ装置の例として、携帯電話、スマートフォン（ｓｍａｒｔ ｐｈｏｎｅ）、ノートブックコンピュータ（ｌａｐｔｏｐ ｃｏｍｐｕｔｅｒ）、デジタル放送用端末、ＰＤＡ（ｐｅｒｓｏｎａｌ ｄｉｇｉｔａｌ ａｓｓｉｓｔａｎｔｓ）、ＰＭＰ（ｐｏｒｔａｂｌｅ ｍｕｌｔｉｍｅｄｉａ ｐｌａｙｅｒ）、ナビゲーション、スレートＰＣ（ｓｌａｔｅ ＰＣ）、タブレットＰＣ（ｔａｂｌｅｔ ＰＣ）、ウルトラブック（ｕｌｔｒａｂｏｏｋ）、ウェアラブルデバイス（ｗｅａｒａｂｌｅ ｄｅｖｉｃｅ、例えば、ウォッチ型端末（ｓｍａｒｔｗａｔｃｈ）、グラス型端末（ｓｍａｒｔ ｇｌａｓｓ）、ＨＭＤ（ｈｅａｄ ｍｏｕｎｔｅｄ ｄｉｓｐｌａｙ）、デジタルＴＶ、デスクトップコンピュータ、デジタルサイニジがある。
前記コンテンツストリーミングシステム内の各サーバは、分散サーバとして運営されることができ、この場合、各サーバで受信するデータは、分散処理されることができる。
本明細書に記載された請求項は、多様な方式で組み合わせることができる。例えば、本明細書の方法請求項の技術的特徴が組み合わせて装置で具現されることができ、本明細書の装置請求項の技術的特徴が組み合わせて方法で具現されることができる。また、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴が組み合わせて装置で具現されることができ、本明細書の方法請求項の技術的特徴と装置請求項の技術的特徴が組み合わせて方法で具現されることができる。

Claims (7)

  1. デコーディング装置により行われる映像デコーディング方法において、
    ビットストリームからレジデュアル情報及び変換スキップ可用情報を含む映像情報を取得するステップと、
    前記変換スキップ可用情報に基づいて変換スキップフラグ情報を取得するステップと、
    前記変換スキップフラグ情報に基づいて現在ブロックに変換スキップを適用するか否かを決定するステップと、
    前記変換スキップを適用するか否か及び前記レジデュアル情報に基づいてレジデュアルサンプルを導出するステップと、
    前記レジデュアルサンプルに基づいて復元サンプルを生成するステップを含み、
    前記映像情報はパレットコーディング可用情報を含み、
    前記変換スキップ可用情報及び前記パレットコーディング可用情報のうち少なくとも１つに基づいて、前記映像情報は変換スキップモードに対する最小許容量子化パラメータ（ｍｉｎｉｍｕｍ ａｌｌｏｗｅｄ ｑｕａｎｔｉｚａｔｉｏｎ ｐａｒａｍｅｔｅｒ）に関する最小量子化パラメータ情報をさらに含み、
    前記最小量子化パラメータ情報に基づいて前記現在ブロックに対する量子化パラメータが導出され、
    前記レジデュアルサンプルは前記量子化パラメータに基づいて導出される、映像デコーディング方法。
  2. 前記映像情報はＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）を含み、
    前記変換スキップ可用情報に基づいて、前記ＳＰＳはＢＤＰＣＭ（Ｂｌｏｃｋ－ｂａｓｅｄ Ｄｅｌｔａ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ）が可用であるか否かに関するＢＤＰＣＭ可用フラグ情報を含む、請求項１に記載の映像デコーディング方法。
  3. 前記映像情報はコーディングユニットシンタックスを含み、
    前記ＢＤＰＣＭ可用フラグ情報の値が１に等しいことに基づいて、前記コーディングユニットシンタックスから前記現在ブロックに対してＢＤＰＣＭを適用するか否かを表すＢＤＰＣＭフラグ情報がさらに取得される、請求項２に記載の映像デコーディング方法。
  4. エンコーディング装置により行われる映像エンコーディング方法において、
    変換スキップ可用情報に基づいて現在ブロックに変換スキップが適用されるか否かを決定するステップと、
    前記変換スキップが適用されるかに基づいて変換スキップフラグ情報を生成するステップと、
    前記変換スキップが適用されるか否かに基づいて前記現在ブロックについてのレジデュアル情報を生成するステップと、
    前記変換スキップ可用情報及び前記レジデュアル情報を含む映像情報をエンコーディングするステップを含み、
    前記映像情報はパレットコーディング可用情報を含み、
    前記変換スキップ可用情報及び前記パレットコーディング可用情報のうちの少なくとも１つに基づいて、前記映像情報は変換スキップモードに対する最小許容量子化パラメータ（ｍｉｎｉｍｕｍ ａｌｌｏｗｅｄ ｑｕａｎｔｉｚａｔｉｏｎ ｐａｒａｍｅｔｅｒ）に関する最小量子化パラメータ情報をさらに含む、映像エンコーディング方法。
  5. 前記映像情報はＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）を含み、
    前記変換スキップ可用情報に基づいて、前記ＳＰＳがＢＤＰＣＭ（Ｂｌｏｃｋ－ｂａｓｅｄ Ｄｅｌｔａ Ｐｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ）が可用であるか否かに関するＢＤＰＣＭ可用フラグ情報を含む、請求項４に記載の映像エンコーディング方法。
  6. 前記映像情報はコーディングユニットシンタックスを含み、
    前記ＢＤＰＣＭ可用フラグ情報の値が１であることに基づいて、前記コーディングユニットシンタックスが前記現在ブロックに対してＢＤＰＣＭを適用するか否かを示すＢＤＰＣＭフラグ情報を含む、請求項５に記載の映像エンコーディング方法。
  7. 映像に対するデータの送信方法であって、
    ビットストリームを取得するステップであって、
    前記ビットストリームは、
    変換スキップ可用情報に基づいて現在ブロックに変換スキップが適用されるか否かを決定し、前記変換スキップが適用されるか否かに基づいて、変換スキップフラグ情報を生成し、前記変換スキップが適用されるか否かに基づいて、前記現在ブロックについてのレジデュアル情報を生成し、前記変換スキップ可用情報と前記レジデュアル情報を含む映像情報をエンコーディングして前記ビットストリームを生成することを実行することにより生成される、ステップと、
    前記ビットストリームを含む前記データを送信するステップを含み、
    前記映像情報はパレットコーディング可用情報を含み、
    前記変換スキップ可用情報及び前記パレットコーディング可用情報の少なくとも一つに基づいて、前記映像情報は変換スキップモードに対する最小許容量子化パラメータに関連する最小量子化パラメータ情報をさらに含む、送信方法。
JP2023146837A 2019-10-05 2023-09-11 変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング Pending JP2023158204A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962911221P 2019-10-05 2019-10-05
US62/911,221 2019-10-05
JP2022520214A JP7351003B2 (ja) 2019-10-05 2020-10-05 変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング
PCT/KR2020/013495 WO2021066618A1 (ko) 2019-10-05 2020-10-05 변환 스킵 및 팔레트 코딩 관련 정보의 시그널링 기반 영상 또는 비디오 코딩

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2022520214A Division JP7351003B2 (ja) 2019-10-05 2020-10-05 変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング

Publications (1)

Publication Number Publication Date
JP2023158204A true JP2023158204A (ja) 2023-10-26

Family

ID=75338443

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2022520214A Active JP7351003B2 (ja) 2019-10-05 2020-10-05 変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング
JP2023146837A Pending JP2023158204A (ja) 2019-10-05 2023-09-11 変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2022520214A Active JP7351003B2 (ja) 2019-10-05 2020-10-05 変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング

Country Status (7)

Country Link
US (1) US20220385903A1 (ja)
EP (1) EP4040792A4 (ja)
JP (2) JP7351003B2 (ja)
KR (1) KR102715088B1 (ja)
CN (5) CN117939164A (ja)
MX (1) MX2022004015A (ja)
WO (1) WO2021066618A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7415027B2 (ja) 2020-02-29 2024-01-16 北京字節跳動網絡技術有限公司 ハイレベルシンタックス要素のための制約
JP7540871B2 (ja) 2020-05-22 2024-08-27 北京字節跳動網絡技術有限公司 一般制約フラグのシグナリング

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2869557B1 (en) * 2012-06-29 2023-08-09 Electronics And Telecommunications Research Institute Method and device for encoding/decoding images
US11259020B2 (en) * 2013-04-05 2022-02-22 Qualcomm Incorporated Determining palettes in palette-based video coding
US9558567B2 (en) * 2013-07-12 2017-01-31 Qualcomm Incorporated Palette prediction in palette-based video coding
CN105684442B (zh) * 2013-07-23 2020-02-21 英迪股份有限公司 用于编码/解码图像的方法
CN104754361B (zh) * 2013-12-28 2018-01-23 同济大学 图像编码、解码方法及装置
CN104320657B (zh) * 2014-10-31 2017-11-03 中国科学技术大学 Hevc无损视频编码的预测模式选择方法及相应的编码方法
CN107005717B (zh) * 2014-11-12 2020-04-07 寰发股份有限公司 索引映射编解码中的跳出像素编解码方法

Also Published As

Publication number Publication date
JP2022551250A (ja) 2022-12-08
EP4040792A4 (en) 2023-11-15
CN117939165A (zh) 2024-04-26
KR102715088B1 (ko) 2024-10-11
CN114762336A (zh) 2022-07-15
CN114762336B (zh) 2024-03-26
CN117956186A (zh) 2024-04-30
CN117939166A (zh) 2024-04-26
WO2021066618A1 (ko) 2021-04-08
JP7351003B2 (ja) 2023-09-26
EP4040792A1 (en) 2022-08-10
CN117939164A (zh) 2024-04-26
KR20220051373A (ko) 2022-04-26
US20220385903A1 (en) 2022-12-01
MX2022004015A (es) 2022-05-02

Similar Documents

Publication Publication Date Title
JP7400082B2 (ja) パレットモードに基づく画像またはビデオコーディング
US11856183B2 (en) Image or video coding based on palette coding
KR102660881B1 (ko) 팔레트 이스케이프 코딩 기반 영상 또는 비디오 코딩
JP2023158204A (ja) 変換スキップ及びパレットコーディング関連情報のシグナリングベースの映像又はビデオコーディング
CN114762339B (zh) 基于变换跳过和调色板编码相关高级语法元素的图像或视频编码
US20220295105A1 (en) Image or video coding based on escape binarization in palette mode
CN111587575A (zh) 基于高频归零确定变换系数扫描顺序的方法及其设备
KR102711457B1 (ko) 변환 스킵 및 팔레트 코딩 관련 정보 기반 영상 또는 비디오 코딩
US12010344B2 (en) Image or video coding based on quantization-related information
US12095982B2 (en) Image or video coding based on quantization parameter information for palette coding or transform unit
US11973947B2 (en) Image or video coding based on signaling of quantization parameter offset-related information
US12028536B2 (en) Image or video coding based on chroma quantization parameter offset information
US20220368907A1 (en) Image or video coding based on signaling of quantization parameter-related information
KR20240151253A (ko) 변환 스킵 및 팔레트 코딩 관련 정보의 시그널링 기반 영상 또는 비디오 코딩

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230911

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230911

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240806