JP2023509951A - 符号化方法、復号化方法、符号器、復号器及び記憶媒体 - Google Patents

符号化方法、復号化方法、符号器、復号器及び記憶媒体 Download PDF

Info

Publication number
JP2023509951A
JP2023509951A JP2022541305A JP2022541305A JP2023509951A JP 2023509951 A JP2023509951 A JP 2023509951A JP 2022541305 A JP2022541305 A JP 2022541305A JP 2022541305 A JP2022541305 A JP 2022541305A JP 2023509951 A JP2023509951 A JP 2023509951A
Authority
JP
Japan
Prior art keywords
value
current block
mip
prediction
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022541305A
Other languages
English (en)
Other versions
JPWO2021139572A5 (ja
Inventor
フオ、チュンイェン
ワン、シューアイ
マー、イェンチュオ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Publication of JP2023509951A publication Critical patent/JP2023509951A/ja
Publication of JPWO2021139572A5 publication Critical patent/JPWO2021139572A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Error Detection And Correction (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

本発明の実施形態において、符号化方法、復号化方法、符号器、復号器及び記憶媒体が提供される。当該方法は以下を含むことができる。現在のブロックの予測パラメータを決定し、予測パラメータは予測モードパラメータを含みむ。予測モードパラメータがマトリックスベースイントラ予測（ＭＩＰ）モードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定する。予測残差値に対して低周波非分離変換（ＬＦＮＳＴ）を行うことによって、ＬＦＮＳＴパラメータを決定する。ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込む。

Description

［関連出願の参照］
本出願は、Ｊｕｎｙａｎ Ｈｕｏ、Ｓｈｕａｉ Ｗａｎ、Ｙａｎｚｈｕｏ Ｍａの名義で２０２０年０１月０８日に出願された「ＶＩＤＥＯ ＥＮＣＯＤＩＮＧ ＡＮＤ ＤＥＣＯＤＩＮＧ ＭＥＴＨＯＤ，ＡＰＰＡＲＡＴＵＳ ＡＮＤ ＣＯＭＭＵＮＩＣＡＴＩＯＮ ＳＹＳＴＥＭ（ビデオ符号化・復号化方法、装置、及び通信システム）」と題する米国仮出願第６２／９５８，５８２号の優先権を主張しており、そのすべての内容は参照として本出願に組み込まれる。
本発明の実施形態はビデオ符号化の技術分野に関し、特に、符号化方法、復号化方法、符号器、復号器及び記憶媒体に関する。
ビデオ表示品質に対する人々の要求が高まるにつれて、高精細映像や超高精細映像などの新しいビデオアプリケーション形態が出現している。Ｈ．２６５／高効率ビデオ符号化（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＨＥＶＣ）は既に、急速に発展しているビデオアプリケーションのニーズを満たすことができない。そこで、ＪＶＥＴ（Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅａｍ）は、次世代ビデオ符号化規格であるＨ.２６６／多用途ビデオ符号化（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ、ＶＶＣ）を提案した。
Ｈ．２６６／ＶＶＣにおいて、マトリックスベースイントラ予測（Ｍａｔｒｉｘ－ｂａｓｅｄ Ｉｎｔｒａ Ｐｒｅｄｉｃｔｉｏｎ、ＭＩＰ）は、１つのイントラ予測モードであり、現在のブロックのイントラ予測ブロックを取得するために用いられる。次に、低周波非分離変換（Ｌｏｗ－Ｆｒｅｑｕｅｎｃｙ Ｎｏｎ－Ｓｅｐａｒａｂｌｅ Ｔｒａｎｓｆｏｒｍ、ＬＦＮＳＴ）技術を用いて現在のブロックの予測残差を決定する。しかしながら、ＬＦＮＳＴ技術がＭＩＰモード予測に適用される場合に、ＶＶＣの符号化効率に悪影響を及ぼすという課題がある。
本発明の実施形態において、符号化・復号化効率を向上させることができる符号化方法、復号化方法、符号器、復号器及び記憶媒体が提供される。
本発明の実施形態の技術的解決策は、以下のように実現されることができる。
第一様態において、本発明の実施形態では、符号器に適用される符号化方法が提供される。当該方法は以下を含むことができる。
現在のブロックの予測パラメータを決定する。予測パラメータは予測モードパラメータを含む。
予測モードパラメータがマトリックスベースイントラ予測（Ｍａｔｒｉｘ－ｂａｓｅｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＭＩＰ）モードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。
ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値は現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。
現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定する。
予測残差値に対して低周波非分離変換（ｌｏｗ－ｆｒｅｑｕｅｎｃｙ ｎｏｎ－ｓｅｐａｒａｂｌｅ ｔｒａｎｓｆｏｒｍ、ＬＦＮＳＴ）を行うことによって、ＬＦＮＳＴパラメータを決定する。
ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込む。
第二様態において、本発明の実施形態では、復号器に適用される復号化方法が提供される。当該方法は以下を含むことができる。
現在のブロックの予測パラメータ及び低周波非分離変換（ＬＦＮＳＴ）パラメータを取得するようにビットストリームを解析する。予測パラメータは予測モードパラメータを含む。
予測モードパラメータがマトリックスベースイントラ予測（ＭＩＰ）モードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。
ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値は現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。
ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。
第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得する。
現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定する。
第三様態において、本発明の実施形態では、符号器が提供される。当該符号器は、第１の決定ユニット、第１の予測ユニット、第１の変換ユニット、及び符号化ユニットを含む。
第１の決定ユニットは、現在のブロックの予測パラメータを決定するように構成されており、予測パラメータは予測モードパラメータを含む。
第１の決定ユニットは、予測モードパラメータがマトリックスベースイントラ予測（ＭＩＰ）モードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定するようにさらに構成されている。
第１の予測ユニットは、ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定し、且つＭＩＰ予測値をフィルタリングすることによって現在のブロックの彩度コンポーネントのイントラ予測値を決定するように構成されており、ＭＩＰ予測値は現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
第１の変換ユニットは、現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定し、且つ予測残差値に対して低周波非分離変換（ＬＦＮＳＴ）を行うことによってＬＦＮＳＴパラメータを決定するように構成されている。
符号化ユニットは、ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込むように構成されている。
第四様態において、本発明の実施形態では、符号器が提供される。当該符号器は、第１のメモリ及び第１のプロセッサを含む。
第１のメモリは、第１のプロセッサで実行可能なコンピュータプログラムを記憶するように構成されている。
第１のプロセッサは、コンピュータプログラムを実行すると、第一様態に記載の方法を実行するように構成されている。
第五様態において、本発明の実施形態では、復号器が提供される。当該復号器は、解析ユニット、第２の決定ユニット、第２の予測ユニット及び第２の変換ユニットを含む。
解析ユニットは、現在のブロックの予測パラメータ及び低周波非分離変換（ＬＦＮＳＴ）パラメータを取得するようにビットストリームを解析するように構成されており、予測パラメータは予測モードパラメータを含む。
第２の決定ユニットは、予測モードパラメータがマトリックスベースイントラ予測（ＭＩＰ）モードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定するように構成されている。
第２の予測ユニットは、ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定し、且つＭＩＰ予測値をフィルタリングすることによって現在のブロックの彩度コンポーネントのイントラ予測値を決定するように構成されており、ＭＩＰ予測値は現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
第２の変換ユニットは、ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得し、且つ第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得するように構成されている。
第２の決定ユニットは、現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定するようにさらに構成されている。
第六様態において、本発明の実施形態では、復号器が提供される。当該復号器は、第２のメモリ及び第２のプロセッサを含む。
第２のメモリは、第２のプロセッサで実行可能なコンピュータプログラムを記憶するように構成されている。
第２のプロセッサは、コンピュータプログラムを実行すると、第二様態に記載の方法を実行するように構成されている。
第七様態において、本発明の実施形態では、コンピュータプログラムを記憶するコンピュータ記憶媒体が提供される。当該コンピュータプログラムが第１のプロセッサによって実行されると、第一様態に記載の方法を実行し、又は第２のプロセッサによって実行されると、第二様態に記載の方法を実行する。
本発明の実施形態では、符号化方法、復号化方法、符号器、復号器及び記憶媒体が提供される。符号器側では、現在のブロックの予測パラメータを決定した後、予測モードパラメータがマトリックスベースイントラ予測（ＭＩＰ）モードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定する。予測残差値に対して低周波非分離変換（ＬＦＮＳＴ）を行うことによって、ＬＦＮＳＴパラメータを決定する。ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込む。復号器側では、現在のブロックの予測パラメータ及びＬＦＮＳＴパラメータを取得するようにビットストリームを解析した後、予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得する。現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定する。このように、ＭＩＰモードでは、符号化・復号化の性能を確保した上で、複雑度を下げ、同時に符号化・復号化のプロセスに必要な記憶スペースを減らし、符号化・復号化効率を効果的に高めることができる。また、ＬＦＮＳＴ技術がＭＩＰモード予測に適用される場合に、ＭＩＰパラメータの導入により、ＬＦＮＳＴがより柔軟になり、符号化・復号化効率がさらに向上することができる。
図１は、本発明の実施形態に係る符号器の構造を示す概略図である。 図２は、本発明の実施形態に係る復号器の構造を示す概略図である。 図３は、本発明の実施形態に係る符号化方法を示すフローチャートである。 図４は、本発明の実施形態に係る別の符号化方法を示すフローチャートである。 図５は、本発明の実施形態に係るマトリックスベースイントラ予測（ＭＩＰ）予測プロセスを示すフローチャートである。 図６は、本発明の実施形態に係るＭＩＰモードを用いてイントラ予測ブロックを取得することを示すフローチャートである。 図７は、本発明の実施形態に係る低周波非分離変換（ＬＦＮＳＴ）を行うフローを示す概略図である。 図８は、本発明の実施形態に係るＬＦＮＳＴパラメータの符号化を示すフローチャートである。 図９は、本発明の実施形態に係る復号化方法を示すフローチャートである。 図１０は、本発明の実施形態に係るＬＦＮＳＴパラメータの解析を示すフローチャートである。 図１１は、本発明の実施形態に係るＬＦＮＳＴを行う別のフローを示す概略図である。 図１２は、本発明の実施形態に係る別の符号器の構造を示す概略図である。 図１３は、本発明の実施形態に係る符号器の具体的なハードウェア構造を示す概略図である。 図１４は、本発明の実施形態に係る別の復号器の構造を示す概略図である。 図１５は、本発明の実施形態に係る復号器の具体的なハードウェア構造を示す概略図である。 図１６は、本発明の実施形態に係る送信デバイスの構造を示す概略図である。 図１７は、本発明の実施形態に係る目標デバイスの構造を示す概略図である。 図１８は、本発明の実施形態に係る通信システムの構造を示す概略図である。
本発明の実施形態の特徴及び技術内容をより詳しく理解するために、以下、図面を参照しながら本発明の実施形態の実現を詳細に説明する。添付された図面はただ説明のために用いられ、本発明の実施形態を限定するものではない。
本明細書で使用されるすべての技術的及び科学的用語は、特に定義されない限り、本発明の技術分野に属する当業者が一般的に理解するのと同じ意味を有する。本明細書で使用される用語は、本発明の実施形態を説明するためのものであり、本発明を限定することを意図するものではない。
以下の説明では、「いくつかの実施形態」に係るが、それはすべての可能な実施形態のサブセットを説明するが、「いくつかの実施形態」は、すべての可能な実施形態の同じサブセット又は異なるサブセットであってもよく、矛盾がない限りそれらが互いに組み合わせられてもよいことが理解されることができる。また、本発明の実施形態に係る用語「第１／第２／第３」は、単に類似のオブジェクトを区別し、オブジェクトの特定の順序を意味するものではないことに留意されたい。本明細書に記載された本発明の実施形態が本明細書に図示又は記載された順序以外の順序で実施され得るように、「第１／第２／第３」は、許可される場合に特定の順序又は優先順位を交換することができる。
ビデオ圧縮技術の発展に伴い、国際電気通信連合－電気通信標準化部門（Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ Ｕｎｉｏｎ－Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ、ＩＴＵ－Ｔ）及び国際標準化機構（Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｏｒｇａｎｉｚａｔｉｏｎ ｆｏｒ Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ、ＩＳＯ）／国際電気標準会議（Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｅｌｅｃｔｒｏｔｅｃｈｎｉｃａｌ Ｃｏｍｍｉｓｓｉｏｎ、ＩＥＣ）は、新世代のビデオ符号化規格を開発するために、多用途ビデオ符号化（ＶＶＣ）と題する標準化プロジェクトを開始し、高解像度、高フレームレート、高ビット深度、高ダイナミックレンジ、広色域及び全方位視野角のうちの１つ又は複数の特徴を持つ高品質なビデオを符号化するとき、最新のＨ．２６５/ＨＥＶＣ規格と比べると、ＶＶＣの性能を約５０％向上させることを目標とする。ＩＴＵ－Ｔ ＳＧ１６ＷＰ３とＩＳＯ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１のＪＶＥＴ（Ｊｏｉｎｔ Ｖｉｄｅｏ Ｅｘｐｌｏｒａｔｉｏｎ Ｔｅａｍ）は当該標準化プロジェクトを担当する。様々なイントラ予測モードやインター予測モードが、高品質なビデオを符号化する際に高い圧縮効率を実現できることが検証されたため、ＶＶＣのワーキングドラフト（Ｗｏｒｋｉｎｇ Ｄｒａｆｔ、ＷＤ））に採用された。
マトリックスベースイントラ予測（ＭＩＰ）モードは、１つのイントラ予測モードである。ＶＶＣにおいて、符号器又は復号器は、現在のブロックのイントラ予測ブロックを取得するために、ＭＩＰモードを呼び出すことができる。次に、低周波非分離変換（ＬＦＮＳＴ）は、二次変換（又は、第２の変換と呼ばれる）として、現在のブロックの予測残差に適用されることが可能である。
関連技術において、ＬＦＮＳＴは、ＬＦＮＳＴ変換カーネル候補セットとＬＦＮＳＴ転置指示パラメータ（ｔｒａｎｓｐｏｓｉｔｉｏｎ ｉｎｄｉｃａｔｉｏｎ ｐａｒａｍｅｔｅｒ）とが固定的に構成されたＭＩＰモード予測に適用されることができるが、これはＶＶＣの符号化・復号化効率に悪影響を与える。
上記に基づいて、本発明の１つの実施形態において、符号化方法が提供される。当該符号化方法の基本的な思想は以下の通りである。現在のブロックの予測パラメータを決定する。予測パラメータは予測モードパラメータを含む。予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定する。予測残差値に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定する。ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込む。本発明の別の実施形態において、復号化方法が提供される。当該復号化方法の基本的な思想は以下の通りである。現在のブロックの予測パラメータ及びＬＦＮＳＴパラメータを取得するようにビットストリームを解析する。予測パラメータは予測モードパラメータを含む。予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得する。現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定する。このように、ＭＩＰモードでは、符号化・復号化の性能を確保した上で、複雑度を下げ、同時に符号化・復号化のプロセスに必要な記憶スペースを減らし、符号化・復号化効率を効果的に高めることができる。また、ＬＦＮＳＴ技術がＭＩＰモード予測に適用される場合に、ＭＩＰパラメータの導入により、ＬＦＮＳＴがより柔軟になり、符号化・復号化効率がさらに向上することができる。
以下、添付図面を参照しながら、本発明の各実施形態を詳細に説明する。
図１を参照すると、図１は、本発明の実施形態に係る符号器のシステムの構造の一例のブロック図を示している。図１に示すように、符号器１００は、分割ユニット１０１、予測ユニット１０２、第１の加算器１０７、変換ユニット１０８、量子化ユニット１０９、逆量子化ユニット１１０、逆変換ユニット１１１、第２の加算器１１２、フィルタリングユニット１１３、復号化画像バッファ（Ｄｅｃｏｄｅｄ Ｐｉｃｔｕｒｅ Ｂｕｆｆｅｒ、ＤＰＢ）ユニット１１４及びエントロピー符号化ユニット１１５を含む。ここで、符号器１００の入力は、一連の画像又は一枚の静止画像からなるビデオであってもよく、符号器１００の出力は、入力ビデオの圧縮されたバージョンを表すビットストリームであってもよい。
分割ユニット１０１は、入力ビデオにおける画像を１つ又は複数の符号化ツリーユニット（ｃｏｄｉｎｇ ｔｒｅｅ ｕｎｉｔｓ、ＣＴＵｓ）に分割する。分割ユニット１０１は、画像を複数のタイル（ｔｉｌｅｓ）に分割し、さらに、１つのタイルを１つ又は複数のブリック（ｂｒｉｃｋｓ）に分割してもよい。ここで、１つのタイル又は１つのブリックは、１つ又は複数の完全な及び／又は部分的なＣＴＵを含んでもよい。また、分割ユニット１０１は、1つ又は複数のスライス（ｓｌｉｃｅｓ）を形成してもよい。１つのスライスは、ラスタ順に並ぶ画像内の１つ又は複数のタイル、又は矩形領域をカバーする画像内の１つ又は複数のタイルを含んでもよい。分割ユニット１０１は、１つ又は複数のサブ画像をさらに形成してもよく、サブ画像は、１つ又は複数のスライス、タイル、又はブリックを含んでもよい。
符号器１００の符号化のプロセスにおいて、分割ユニット１０１はＣＴＵを予測ユニット１０２に送る。予測ユニット１０２は一般的に、ブロック分割ユニット１０３、動き推定（Ｍｏｔｉｏｎ Ｅｓｔｉｍａｔｉｏｎ、ＭＥ）ユニット１０４、動き補償（Ｍｏｔｉｏｎ Ｃｏｍｐｅｎｓａｔｉｏｎ、ＭＣ）ユニット１０５及びイントラ予測ユニット１０６を含むことができる。具体的に、ブロック分割ユニット１０３は、４分木分割、２分木分割、３分木分割を反復的に用いて、入力ＣＴＵをより小さい符号化ユニット（Ｃｏｄｉｎｇ Ｕｎｉｔｓ、ＣＵｓ）にさらに分割する。予測ユニット１０２は、ＭＥユニット１０４及びＭＣユニット１０５を用いて、ＣＵのインター予測ブロックを取得することができる。イントラ予測ユニット１０６は、ＭＩＰモードを含む様々なイントラ予測モードを用いて、ＣＵのイントラ予測ブロックを取得することができる。例示として、インター予測ブロックを取得するために、レート歪み最適化（ｒａｔｅ－ｄｉｓｔｏｒｔｉｏｎ ｏｐｔｉｍｉｚｅｄ）の動き推定法が、ＭＥユニット１０４及びＭＣユニット１０５によって呼び出されることができ、また、インター予測ブロックを取得するために、レート歪み最適化のモード決定法が、イントラ予測ユニット１０６によって呼び出されることができる。
予測ユニット１０２はＣＵの予測ブロックを出力し、第１の加算器１０７は、分割ユニット１０１の出力におけるＣＵとＣＵの予測ブロックとの間の差、即ち、残差ＣＵを計算する。変換ユニット１０８は係数を取得するために、残差ＣＵを読み出し、且つ残差ＣＵに対して１つ又は複数の変換操作を行う。量子化ユニット１０９は、係数を量子化し、且つ量子化係数（即ち、レベル（ｌｅｖｅｌｓ））を出力する。逆量子化ユニット１１０は、量子化係数に対してスケーリング操作を行うことによって、再構成係数を出力する。逆変換ユニット１１１は、変換ユニット１０８における変換に対応の１つ又は複数の逆変換を行い、且つ再構成残差を出力する。第２の加算器１１２は、再構成残差と予測ユニット１０２からのＣＵの予測ブロックとを加算することによって、再構成ＣＵを算出する。また、第２の加算器１１２は、その出力をイントラ予測の参照として用いるために、予測ユニット１０２に送る。画像又はサブ画像内のすべてのＣＵが再構成された後、フィルタリングユニット１１３は、再構成された画像又はサブ画像に対してインループフィルタリングを実行する。ここで、フィルタリングユニット１１３は１つ又は複数のフィルタを含み、例えば、デブロッキングフィルタ（ｄｅｂｌｏｃｋｉｎｇ ｆｉｌｔｅｒ）、サンプル適応オフセット（ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔ、ＳＡＯ）フィルタ、適応ループフィルタ（ａｄａｐｔｉｖｅ ｌｏｏｐ ｆｉｌｔｅｒ、ＡＬＦ）、クロマスケーリング付きルママッピング（ｌｕｍａ ｍａｐｐｉｎｇ ｗｉｔｈ ｃｈｒｏｍａ ｓｃａｌｉｎｇ、ＬＭＣＳ）フィルタ、及びニューラルネットワークベースフィルタ（ｎｅｕｒａｌ－ｎｅｔｗｏｒｋ－ｂａｓｅｄ ｆｉｌｔｅｒ）などが挙げられる。又は、フィルタリングユニット１１３は、ＣＵが他のＣＵを符号化するための参照として用いられないと判断した場合に、ＣＵにおける１つ又は複数の目標サンプルに対してインループフィルタリングを行う。
フィルタリングユニット１１３の出力は復号化された画像又はサブ画像であり、これらの復号化された画像又はサブ画像はＤＰＢユニット１１４にバッファリングされる。ＤＰＢユニット１１４は、タイミング及び制御情報に基づいて、復号化された画像又はサブ画像を出力する。ここで、ＤＰＢユニット１１４に記憶された画像はさらに、予測ユニット１０２によるインター予測又はイントラ予測の参照として用いられることができる。最後に、エントロピー符号化ユニット１１５は、符号器１００からの、画像の復号化に必要なパラメータ（制御パラメータや補足情報など）を２進数形式に変換し、且つ各データユニットのシンタックス構造に基づいてその２進数形式をビットストリームに書き込み、即ち、符号器１００は最終的に、ビットストリームを出力する。
さらに、符号器１００は、第１のプロセッサと、コンピュータプログラムを記録する第１のメモリとを備えることができる。第１のプロセッサがコンピュータプログラムを読み出して実行すると、符号器１００は入力ビデオを読み出し、且つ対応するビットストリームを生成する。また、符号器１００は、１つ又は複数のチップを備えた計算デバイスであってもよい。チップで集積回路として実装された上記ユニットは、図１における対応のユニットと類似の接続及びデータ交換機能を有する。
図２を参照すると、図２は、本発明の実施形態に係る復号器のシステムの構造の一例のブロック図を示している。図２に示すように、復号器２００は、解析ユニット２０１、予測ユニット２０２、スケーリングユニット２０５、変換ユニット２０６、加算器２０７、フィルタリングユニット２０８及び復号化画像バッファユニット２０９を含むことができる。ここで、復号器２００の入力は、ビデオ又は一枚の静止画像の圧縮されたバージョンを表すビットストリームであり、復号器２００の出力は、一連の画像からなる復号化ビデオ又は一枚の復号化された静止画像であってもよい。
復号器２００の入力ビットストリームは、符号器１００が生成したビットストリームであってもよい。解析ユニット２０１は入力ビットストリームを解析し、且つ入力ビットストリームからシンタックス要素の値を取得する。解析ユニット２０１は、１つ又は複数の復号化された画像を取得するために、シンタックス要素の２進表現を数値に変換し、且つ数値を復号器２００におけるユニットに送る。解析ユニット２０１はさらに、復号化された画像を表示するために、入力ビットストリームから１つ又は複数のシンタックス要素を解析することができる。
復号器２００の復号化のプロセスにおいて、解析ユニット２０１は、シンタックス要素の値と、シンタックス要素の値に基づいて設定された又は決定された、１つ又は複数の復号化された画像を取得するための１つ又は複数の変数とを、復号器２００におけるユニットに送る。
予測ユニット２０２は、現在の復号化ブロック（例えば、ＣＵ）の予測ブロックを決定する。ここで、予測ユニット２０２は、動き補償ユニット２０３及びイントラ予測ユニット２０４を含むことができる。具体的に、インター復号化モードが現在の復号化ブロックを復号化するために用いられることが示される場合に、予測ユニット２０２は、インター予測ブロックを取得するために、解析ユニット２０１からの関連パラメータを動き補償ユニット２０３に送る。イントラ予測モード（ＭＩＰモードインデックス値に基づいて示されるＭＩＰモードを含む）が現在の復号化ブロックを復号化するために用いられることが示される場合に、予測ユニット２０２は、イントラ予測ブロックを取得するために、解析ユニット２０１からの関連パラメータをイントラ予測ユニット２０４に送信する。
スケーリングユニット２０５は、符号器１００における逆量子化ユニット１１０と同じ機能を有する。スケーリングユニット２０５は、再構成係数を取得するために、解析ユニット２０１からの量子化係数（即ち、レベル）に対してスケーリング操作を行う。
変換ユニット２０６は、符号器１００における逆変換ユニット１１１と同じ機能を有する。変換ユニット２０６は、再構成残差を取得するために、１つ又は複数の変換操作（即ち、符号器１００における逆変換ユニット１１１による１つ又は複数の変換操作の逆操作）を行う。
加算器２０７は、現在の復号化ブロックの再構成ブロックを取得するために、その入力（予測ユニット２０２からの予測ブロック及び変換ユニット２０６からの再構成残差）に対して加算操作を行う。再構成ブロックはまた、イントラ予測モードのもとで符号化される他のブロックの参照として用いられるために、予測ユニット２０２に送られる。
画像又はサブ画像におけるすべてのＣＵが再構成された後、フィルタリングユニット２０８は再構成された画像又はサブ画像に対してインループフィルタリングを実行する。フィルタリングユニット２０８は１つ又は複数のフィルタを含み、例えば、デブロッキングフィルタ、サンプル適応オフセット（ＳＡＯ）フィルタ、適応ループフィルタ（ＡＬＦ）、クロマスケーリング付きルママッピング（ＬＭＣＳ）フィルタ、及びニューラルネットワークベースフィルタなどが挙げられる。又は、フィルタリングユニット２０８は、再構成ブロックが他のブロックを復号化するための参照として用いられないと判断した場合に、再構成ブロックにおける１つ又は複数の目標サンプルに対してインループフィルタリングを行う。フィルタリングユニット２０８の出力は復号化された画像又はサブ画像であり、これらの復号化された画像又はサブ画像はＤＰＢユニット２０９にバッファリングされる。ＤＰＢユニット２０９は、タイミング及び制御情報に基づいて、復号化された画像又はサブ画像を出力する。ＤＰＢユニット２０９に記憶された画像はさらに、予測ユニット２０２によるインター予測又はイントラ予測の参照として用いられることができる。
さらに、復号器２００は、第２のプロセッサと、コンピュータプログラムを記録する第２のメモリとを備えることができる。第１のプロセッサがコンピュータプログラムを読み出して実行すると、復号器２００は、入力ビットストリームを読み出し、且つ対応する復号化ビデオを生成する。また、復号器２００は、１つ又は複数のチップを備えた計算デバイスであってもよい。チップで集積回路として実装された上記ユニットは、図２における対応のユニットと類似の接続及びデータ交換機能を有する。
なお、本発明の実施形態に係る符号化方法は、主に符号器１００のイントラ予測ユニット１０６及び変換ユニット１０８に適用され、本発明の実施形態に係る復号化方法は、主に復号器２００のイントラ予測ユニット２０４及び変換ユニット２０６に適用されることに留意されたい。即ち、本発明の実施形態は、符号器に適用されてもよく、復号器に適用されてもよく、さらに、符号器と復号器の両方に同時に適用されてもよい。本明細書ではそれについては限定されない。
また、本発明の実施形態が符号器１００に適用される場合に、「現在のブロック」は具体的に、イントラ予測における現在符号化しようとする画像ブロック（「符号化ブロック」とも呼ばれ得る）を指し、本発明の実施形態が復号器２００に適用される場合に、「現在のブロック」は具体的に、イントラ予測における現在復号化しようとする画像ブロック（「復号化ブロック」とも呼ばれ得る）を指すことに留意されたい。
符号器１００が本発明の実施形態に係る符号化方法を介してより良い予測効果を実現することで符号化性能を向上させることができる場合に、復号器２００はそれに応じて、本発明の実施形態に係る復号化方法を介してビデオ復号化品質を改善することで復号化性能を向上させることもできる。
本発明の１つの実施形態において、図３を参照すると、図３は、本発明の実施形態に係る符号化方法のフローチャートを示している。図３に示すように、当該方法は以下を含むことができる。
Ｓ３０１：現在のブロックの予測パラメータを決定する。予測パラメータは予測モードパラメータを含む。
なお、符号化しようとする画像は複数の画像ブロックに分割されることができ、各符号化しようとする画像ブロックは、符号化ブロックと呼ばれ得る。ここで、各符号化ブロックは、第１の画像コンポーネント、第２の画像コンポーネント及び第３の画像コンポーネントを含むことができる。現在のブロックは、ビデオの画像における第１の画像コンポーネント、第２の画像コンポーネント又は第３の画像コンポーネントの予測が現在実行されようとする符号化ブロックである。
現在のブロックに対して第１の画像コンポーネントの予測が実行され、第１の画像コンポーネントが輝度コンポーネントであり、即ち、予測しようとする画像コンポーネントが輝度コンポーネントであると仮定すると、現在のブロックが輝度ブロックと呼ばれることもでき、現在のブロックの輝度コンポーネントの予測値を取得する。又は、現在のブロックに対して第２の画像コンポーネントの予測が実行され、第２の画像コンポーネントが彩度コンポーネントであり、即ち、予測しようとする画像コンポーネントが彩度コンポーネントであると仮定すると、現在のブロックが彩度ブロックと呼ばれることもでき、現在のブロックの輝度コンポーネントの予測値を取得する。
また、予測パラメータは予測モードパラメータを含むことができ、予測モードパラメータは、現在のブロックが採用した予測モードを示すために用いられ、異なる予測モードは、異なる予測モードパラメータに対応することに留意されたい。ここで、予測モードパラメータの決定について、簡単な決定戦略を採用してもよく、例として、歪み値（ｄｉｓｔｏｒｔｉｏｎ ｖａｌｕｅ）の大きさに基づいて決定する。また、複雑な決定戦略を採用してもよく、例として、レート歪み最適化（Ｒａｔｅ Ｄｉｓｔｏｒｔｉｏｎ Ｏｐｔｉｍｉｚａｔｉｏｎ、ＲＤＯ）の結果に基づいて決定する。本発明の実施形態では、それについては限定されない。一般に、ＲＤＯ方法を採用して現在のブロックの予測モードパラメータを決定し、即ち、現在のブロックの予測パラメータを決定する。
具体的に、いくつかの実施形態において、上記現在のブロックの予測パラメータを決定することは、以下を含むことができる。
複数の予測モードを用いて現在のブロックを予めに符号化することによって、複数の予測モードに対応のレート歪みコスト値を取得する。
取得された複数のレート歪みコスト値から最適なレート歪みコスト値を選択し、最適なレート歪みコスト値に対応の予測モードのもとの予測パラメータを、現在のブロックの予測パラメータとして決定する。
即ち、符号器側では、現在のブロックに対して、複数の予測モードを用いて現在のブロックをそれぞれ予めに符号化することができる。ここで、複数の予測モードは一般に、インター予測モード、従来のイントラ予測モード、及び従来と異なるイントラ予測モードを含む。従来のイントラ予測モードは、直流（Ｄｉｒｅｃｔ Ｃｕｒｒｅｎｔ、ＤＣ）モード、平面（ＰＬＡＮＡＲ）モード、角度イントラ予測モード（ａｎｇｕｌａｒ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ ｍｏｄｅ）などを含むことができる。従来と異なるイントラ予測モードは、ＭＩＰモード、ＣＣＬＭ（Ｃｒｏｓｓ－ｃｏｍｐｏｎｅｎｔ Ｌｉｎｅａｒ Ｍｏｄｅｌ Ｐｒｅｄｉｃｔｉｏｎ）モード、イントラブロックコピー（Ｉｎｔｒａ Ｂｌｏｃｋ Ｃｏｐｙ、ＩＢＣ）モード、ＰＬＴ（Ｐａｌｅｔｔｅ）モードなどを含むことができる。インター予測モードは、従来のインター予測モード及びインターブロックのための幾何学的分割（Ｇｅｏｍｅｔｒｉｃａｌ（ＧＥＯ） ｐａｒｔｉｔｉｏｎｉｎｇ ｆｏｒ ｉｎｔｅｒ ｂｌｏｃｋｓ）モードなどを含むことができる。
このように、複数の予測モードを用いて現在のブロックをそれぞれ予めに符号化した後、複数の予測モードに対応のレート歪みコスト値を取得することができる。次に、取得された複数のレート歪みコスト値から最適なレート歪みコスト値を選択し（一般に、最小レート歪みコスト値が最適なレート歪みコスト値である）、当該最適なレート歪みコスト値に対応の予測モードのもとの予測パラメータを、現在のブロックの予測パラメータとして決定する。
さらに、複数の予測モードを用いて現在のブロックをそれぞれ予めに符号化することによって、複数の予測モードに対応の歪み値を取得することができる。次に、取得された複数の歪み値から最適な歪み値を選択し、当該最適な歪み値に対応の予測モードのもとの予測パラメータを、現在のブロックの予測パラメータとして決定する。このように、符号器は最終的に、決定された予測パラメータにおける予測モードパラメータが示す予測モードを用いて、現在のブロックに対して予測符号化を行う。それによって、より小さい予測残差を取得することができ、符号化効率を向上させることができる。
Ｓ３０２：予測モードパラメータがマトリックスベースイントラ予測（ＭＩＰ）モードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。
なお、現在のブロックに対して、本発明の実施形態において、ＭＩＰモードを用いて現在のブロックの彩度コンポーネントに対してイントラ予測を行う。このプロセスにおいて、まず現在のブロックの隣接サンプル値を取得し、次に、現在のブロックの隣接サンプル値に基づいて、現在のブロックのＭＩＰ入力サンプル値を決定する。
ＭＩＰモードに対して、まず、ＭＩＰコアパラメータを構成する必要があることが理解されるべきである。ここで、ＭＩＰコアパラメータは、現在のブロックの種類（ｍｉｐＳｉｚｅＩｄで表す）、各エッジの参照サンプルの数（ｂｏｕｎｄｙＳｉｚｅで表す）、ＭＩＰ入力サンプルの数（ｉｎＳｉｚｅで表す）、及び行列乗算から出力されるＭＩＰ予測ブロックのサイズ（ｐｒｅｄＳｉｚｅ×ｐｒｅｄＳｉｚｅで配列される）を含むことができる。ＭＩＰモードにおいて、現在のブロックの幅及び高さに基づいて現在のブロックが３つの種類に分類されることができ、ｍｉｐＳｉｚｅＩｄは０、１又は２に等しくてもよい。本明細書において、ｍｉｐＳｉｚｅＩｄは、現在のブロックの種類、即ち本発明の実施形態に示される「現在のブロックのブロックサイズインデックス値」を示す。ｍｉｐＳｉｚｅＩｄが異なると、参照サンプルの数（各エッジに必要な参照サンプルの数がｂｏｕｎｄｙＳｉｚｅ個であり）、ＭＩＰ入力サンプルの数（ｉｎＳｉｚｅ）、行列乗算から出力されるＭＩＰ予測ブロックのサイズ（ｐｒｅｄＳｉｚｅ×ｐｒｅｄＳｉｚｅで配列される）も異なる。
また、予測パラメータは、予測モードパラメータに加えて、現在のブロックのサイズパラメータをさらに含むことができることに留意されたい。現在のブロックのサイズパラメータは、現在のブロックの幅（ｎＴｂＷで表す）及び高さ（ｎＴｂＨで表す）を含むことができる。また、現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値（即ち、ｍｉｐＳｉｚｅＩｄ）を決定することができる。
１つの可能な実施態様において、上記現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定することは、
現在のブロックの幅と高さがいずれも４に等しい場合に、現在のブロックのブロックサイズインデックス値を０に設定することと、
そうでなければ、現在のブロックの幅と高さがいずれも８に等しいか、又は現在のブロックの幅と高さの一方が４に等しい場合に、現在のブロックのブロックサイズインデックス値を１に設定することと、
そうでなければ、現在のブロックが別のサイズである場合に、現在のブロックのブロックサイズインデックス値を２に設定することと、を含むことができる。
別の可能な実施態様において、上記現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定することは、
現在のブロックの幅と高さがいずれも４に等しい場合に、現在のブロックのブロックサイズインデックス値を０に設定することと、
そうでなければ、現在のブロックの幅と高さの一方が４に等しい場合に、現在のブロックのブロックサイズインデックス値を１に設定することと、
そうでなければ、現在のブロックが別のサイズである場合に、現在のブロックのブロックサイズインデックス値を２に設定することと、を含むことができる。
このように、現在のブロックのブロックサイズインデックス値に基づいて、表１に示すルックアップテーブル（Ｌｏｏｋ－Ｕｐ Ｔａｂｌｅ、ＬＵＴ）によって、隣接境界参照サンプルの数（変数がｂｏｕｎｄａｒｙＳｉｚｅであり）及びＭＩＰ予測ブロックのサイズ（変数がｐｒｅｄＳｉｚｅであり、ＭＩＰ予測ブロックのサイズがｐｒｅｄＳｉｚｅ×ｐｒｅｄＳｉｚｅであり）を決定することができ、ＭＩＰ行列乗算のプロセスに用いられるＭＩＰ入力サンプル値の数（ｉｎＳｉｚｅで表す）を計算する。当該計算式は次の通りである。
Figure 2023509951000002
式（１）における演算子の演算規則は、ＩＴＵ－ＴＨ．２６５規格で定義されている演算子の演算規則と同じであり、例えば、「＝＝」は論理「イコール（ｅｑｕａｌ ｔｏ）」演算子である。
Figure 2023509951000003
このように、表１によれば、ｍｉｐＳｉｚｅＩｄの値が０に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅの値は２に等しく、ｐｒｅｄＳｉｚｅの値は４に等しい。即ち、この場合、参照サンプルは、各エッジにおいて選択された２つのサンプルであり、行列乗算の出力は４×４のＭＩＰ予測ブロックである。
ｍｉｐＳｉｚｅＩｄの値が１に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅの値は４に等しく、ｐｒｅｄＳｉｚｅの値は４に等しい。即ち、この場合、参照サンプルは、各エッジにおいて選択された４つのサンプルであり、行列乗算の出力は４×４のＭＩＰ予測ブロックである。
ｍｉｐＳｉｚｅＩｄの値が２に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅの値は４に等しく、ｐｒｅｄＳｉｚｅの値は８に等しい。即ち、この場合、参照サンプルは、各エッジにおいて選択された４つのサンプルであり、行列乗算の出力は８×８のＭＩＰ予測ブロックである。
さらに、現在のブロックのブロックサイズインデックス値に基づいて、表２に示すルックアップテーブルによって、同時に、ｂｏｕｎｄａｒｙＳｉｚｅ、ｉｎＳｉｚｅ及びｐｒｅｄＳｉｚｅの値を決定することができる。
Figure 2023509951000004
このように、表２によれば、ｍｉｐＳｉｚｅＩｄの値が０に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅの値は２に等しく、ｉｎＳｉｚｅの値は４に等しく、ｐｒｅｄＳｉｚｅの値は４に等しい。即ち、この場合、参照サンプルは、各エッジにおいて選択された２つのサンプルであり、行列乗算の入力サンプルの数は４であり、行列乗算の出力は４×４のＭＩＰ予測ブロックである。
ｍｉｐＳｉｚｅＩｄの値が１に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅの値は４に等しく、ｉｎＳｉｚｅの値は８に等しく、ｐｒｅｄＳｉｚｅの値は４に等しい。即ち、この場合、参照サンプルは、各エッジにおいて選択された４つのサンプルであり、行列乗算の入力サンプルの数は８であり、行列乗算の出力は４×４のＭＩＰ予測ブロックである。
ｍｉｐＳｉｚｅＩｄの値が２に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅの値は４に等しく、ｉｎＳｉｚｅの値は７に等しく、ｐｒｅｄＳｉｚｅの値は８に等しい。即ち、この場合、参照サンプルは、各エッジにおいて選択された４つのサンプルであり、行列乗算の入力サンプルの数は７であり、行列乗算の出力は８×８のＭＩＰ予測ブロックである。
さらに、ＭＩＰコアパラメータを構成した後、参照サンプルを取得する必要がある。その後、参照サンプル及びＭＩＰコアパラメータに基づいて、ＭＩＰ入力サンプル値を構築する。ここで、参照サンプルは、現在のブロックの隣接サンプル値を指し、現在のブロックの左隣接サンプル値及び現在のブロックの上隣接サンプル値を含むことができる。即ち、現在のブロックの左隣接サンプル値及び上隣接サンプル値に基づいて、現在のブロックのＭＩＰ入力サンプル値を決定することができる。
いくつかの実施形態において、上記現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定することは、以下を含むことができる。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定する。
現在のブロックの隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得する。
上記現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、第２の定数値と第１の一時的参照値におけるインデックス０に対応の値との差に設定し、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、第１の一時的参照値におけるインデックスｉに対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定する。ｉは０より大きい整数である。
上記現在のブロックのブロックサイズインデックス値が予め設定された範囲外にある場合に、ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、第１の一時的参照値におけるインデックス（ｊ＋１）に対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定する。ｊは０以上の整数である。
さらに、上記現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、上記方法はさらに、以下を含むことができる。
現在のブロックの隣接サンプル値のビット深度に基づいて、第２の定数値を決定し、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、第１の一時的参照値におけるインデックス０に対応の値と第２の定数値との差に設定し、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、第１の一時的参照値におけるインデックスｉに対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定する。ｉは０より大きい整数である。
現在のブロックの隣接サンプル値をダウンサンプリングした後、第１の一時的参照値を取得できることに留意されたい。第１の一時的参照値について、具体的には、現在のブロックの隣接サンプル値をダウンサンプリングした後、フィルタリングされた隣接サンプル値をバッファ（ｐＴｅｍｐで表す）にバッファリングされることができる。第１の一時的参照値におけるインデックス０に対応の値は、ｐＴｅｍｐ［０］を指し、第１の一時的参照値におけるインデックスｉに対応の値は、ｐＴｅｍｐ［ｉ］を指す。
また、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）が予め設定された範囲内にあるか否かに基づいて、現在のブロックのサイズパラメータの値が予め設定された範囲内にあるか否かを決定できることに留意されたい。具体的に、ｍｉｐＳｉｚｅＩｄ＝０又は１の場合に、現在のブロックのブロックサイズインデックス値が予め設定された範囲内にあり、即ち、現在のブロックのサイズパラメータの値が予め設定された範囲内にあることが示される。ｍｉｐＳｉｚｅＩｄ＝２の場合に、現在のブロックのブロックサイズインデックス値が予め設定された範囲外にあり、即ち、現在のブロックのサイズパラメータの値が予め設定された範囲内にないことが示される。
換言すると、ＭＩＰ入力サンプル値は、バッファ（ｐＴｅｍｐで表す）、現在のブロックのブロックサイズインデックス値（ＭｉｐＳｉｚｅＩｄで表す）、現在のブロックの隣接サンプル値のビット深度（ＢｉｔＤｅｐｔｈで表す）によって決定され、ＭＩＰ入力サンプル値に対応の入力サンプルの数は、現在のブロックのブロックサイズインデックス値に関連する。最後に、ＭＩＰ入力サンプル値におけるインデックスｘに対応の値（ｐ［ｘ］で表す）が取得されることができる。
さらに、いくつかの実施形態において、上記現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定することは、以下を含むことができる。
第２の定数値を２の累乗に設定する。累乗の指数は整数であり、現在のブロックの隣接サンプル値のビット深度から１を引いたものに等しい。
又は、いくつかの実施形態において、上記現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定することは、以下を含むことができる。
「１」を２進左シフトすることによって第２の定数値を取得する。左シフトされたビット数は、現在のブロックの隣接サンプル値のビット深度から１を引いたものに等しい。
換言すると、現在のブロックの隣接サンプル値のビット深度（ＢｉｔＤｅｐｔｈで表す）が取得された後、第２の定数値は１＜＜（ＢｉｔＤｅｐｔｈ－１）又は２＾（ＢｉｔＤｅｐｔｈ－１）として表されることができる。このように、現在のブロックのサイズパラメータの値が予め設定された範囲内にある場合に、第２の定数値と合わせて現在のブロックのＭＩＰ入力サンプル値を決定することができる。
また、ＭＩＰ入力サンプルは、行列乗算演算に用いられる行列ベクトルであることに留意されたい。現在の関連技術方案は以下の通りである。バッファ（ｐＴｅｍｐで表す）、現在のブロックの種類（即ち、ｍｉｐＳｉｚｅＩｄで表す現在のブロックのブロックサイズインデックス値）、現在のブロックの隣接サンプル値のビット深度（ＢｉｔＤｅｐｔｈで表す）及びＭＩＰ入力サンプルの数に基づいて、ＭＩＰ入力サンプル値におけるインデックスｘに対応の値（ｐ［ｘ］で表す）を最終的に取得する。
具体的に、ｘ番目の入力サンプル値ｐ［ｘ］の構築のプロセスは以下の通りである。
１つの可能な実施態様において、上記現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、当該構築のプロセスは以下を含むことができる。
第２の定数値と第１の一時的参照値におけるインデックス０に対応の値との差を計算することによって、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を取得する。
第１の一時的参照値におけるインデックスｉに対応の値及び第１の一時的参照値におけるインデックス０に対応の値に対して減算演算を行うことによって、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を取得する。ｉは０より大きくＮより小さい正の整数であり、Ｎは入力サンプル行列に含まれる要素の数を表す。
本発明の実施形態において、上記差の計算における被減数を第２の定数値に等しく設定し、上記差の計算における減数を第１の一時的参照値におけるインデックス０に対応の値に等しく設定する。
換言すると、ｍｉｐＳｉｚｅＩｄ＝０又は１の場合に、１＜＜（ＢｉｔＤｅｐｔｈ－１）からｐＴｅｍｐ［０］を引いたものをｐ［０］とし、ｘが０でない場合に、ｐＴｅｍｐ［ｘ］からｐＴｅｍｐ［０］を引いたものをｐ［ｘ］とする。具体的は以下に示す通りである。
Figure 2023509951000005
別の可能な実施態様において、上記現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、当該構築のプロセスは以下を含むことができる。
第１の一時的参照値におけるインデックス０に対応の値と第２の定数値との差を計算することによって、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を取得する。
第１の一時的参照値におけるインデックスｉに対応の値及び第１の一時的参照値におけるインデックス０に対応の値に対して減算演算を行うことによって、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を取得する。ｉは０より大きくＮより小さい正の整数であり、Ｎは入力サンプル行列に含まれる要素の数を表す。
本発明の実施形態において、上記差の計算における被減数を第１の一時的参照値におけるインデックス０に対応の値に等しく設定し、上記差の計算における減数を第２の定数値に等しく設定する。
換言すると、ｍｉｐＳｉｚｅＩｄ＝０又は１のとき、ｘが０に等しい場合に、ＭＩＰ入力サンプル値におけるインデックス０に対応の値（ｐ［０］で表す）は、第１の一時的参照値におけるインデックス０に対応の値（即ち、ｐＴｅｍｐ［０］）から第２の定数値（即ち、１＜＜（ＢｉｔＤｅｐｔｈ－１））を引くことによって取得される。ｘが０に等しくない場合に、ＭＩＰ入力サンプル値におけるインデックスｘに対応の値（ｐ［ｘ］で表す）は、第１の一時的参照値におけるインデックスｘに対応の値（即ち、ｐＴｅｍｐ［ｘ］）から第１の一時的参照値におけるインデックス０に対応の値（即ち、ｐＴｅｍｐ［０］）を引くことによって取得される。
具体的は以下に示す通りである。
Figure 2023509951000006
もう１つの可能な実施形態において、上記現在のブロックのブロックサイズインデックス値が予め設定された範囲外にある場合に、当該構築のプロセスは以下を含むことができる。
第１の一時的参照値におけるインデックス（ｉ＋１）に対応の値及び第１の一時的参照値におけるインデックス０に対応の値に対して減算演算を行うことによって、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を取得する。ｉは０以上でＮより小さい正の整数であり、Ｎは入力サンプル行列に含まれる要素の数を表す。
換言すると、ｍｉｐＳｉｚｅＩｄ＝２の場合に、第１の一時的参照値におけるインデックス０に対応の値、即ちｐＴｅｍｐ［０］を無視してもよい。次に、ＭＩＰ入力サンプル値におけるインデックスｘに対応の値（ｐ［ｘ］で表す）は、第１の一時的参照値におけるインデックス（ｘ＋１）に対応の値（即ち、ｐＴｅｍｐ［ｘ＋１］）から第１の一時的参照値におけるインデックス０に対応の値（即ち、ｐＴｅｍｐ［０］）を引くことによって取得される。ここで、ｘは０以上の正の整数である。具体的は以下に示す通りである。
Figure 2023509951000007
ここで、依然として４×４の現在のブロックを例として、バッファｐＴｅｍｐに４つの値が記憶されている。即ち、第１の一時的参照値は、インデックス０に対応の値（即ち、ｐＴｅｍｐ［０］）、インデックス１に対応の値（即ち、ｐＴｅｍｐ［１］）、インデックス２に対応の値（即ち、ｐＴｅｍｐ［２］）及びインデックス３に対応の値（即ち、ｐＴｅｍｐ［３］）を含む。この場合、式（２）、式（３）又は式（４）によって、ｐ［ｘ］で表す４つのＭＩＰ入力サンプル値を決定することができ、ｘ＝０、１、２、３。ここで、４つのＭＩＰ入力サンプル値は、１×４のＭＩＰ入力サンプル行列を形成することもできる。
上記以外に、本発明の実施形態において、ｍｉｐＳｉｚｅＩｄの値を決定せず、統一的な計算方法でｐ［ｘ］の値を取得することも可能である。いくつかの実施形態において、現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定することは、以下を含むことができる。
現在のブロックの隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得する。
現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、第１の一時的参照値の後の１つのデータユニット内で第２の定数値をバッファリングすることによって第２の一時的参照値を取得する。
ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、第２の一時的参照値におけるインデックス（ｊ＋１）に対応の値と第２の一時的参照値におけるインデックス０に対応の値との差に設定する。ｊは０以上の整数である。
換言すると、本発明の実施形態において、第２の定数値（即ち、（１＜＜（ＢｉｔＤｅｐｔｈ－１）））を付加要素として、バッファｐＴｅｍｐの末尾に追加する。この場合、現在のブロックのサイズパラメータを考慮する必要はなく（即ち、ｍｉｐＳｉｚｅＩｄの値を考慮する必要はなく）、ｐ［ｘ］を、ｐ［ｘ］＝ｐＴｅｍｐ［ｘ＋１］－ｐＴｅｍｐ［０］に直接に設定することができ、ｘ＝０、...、ｉｎＳｉｚｅ－１。
このように、現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定した後、現在のブロックのＭＩＰ予測値をさらに決定することができる。
Ｓ３０３：ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。
ＭＩＰ予測値は、現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
なお、シフトパラメータは、シフトオフセットパラメータ（ｓｈｉｆｔｉｎｇ ｏｆｆｓｅｔ ｐａｒａｍｅｔｅｒ）及びシフトナンバーパラメータ（ｓｈｉｆｔｉｎｇ ｎｕｍｂｅｒ ｐａｒａｍｅｔｅｒ）を含むことができる。この場合、図４に示すように、Ｓ３０３は以下のステップを含むことができる。
Ｓ３０３－１：シフトオフセットパラメータの値に基づいて、ＭＩＰ入力サンプル値の合計とシフトオフセットパラメータとの乗積を決定する。シフトオフセットパラメータの値は、固定の定数である。
なお、シフトオフセットパラメータは、シフト補償パラメータ（ｓｈｉｆｔｉｎｇ ｃｏｍｐｅｎｓａｔｉｏｎ ｐａｒａｍｅｔｅｒ）又はオフセット因子（ｏｆｆｓｅｔ ｆａｃｔｏｒ）と呼ばれてもよく、ｆＯで表されることができる。本発明の実施形態において、シフトオフセットパラメータの値は固定の定数、例えば、３２、４６、５６、又は６６などに設定されることができる。さらに、シフトオフセットパラメータの値は、シフト・オフセット・パラメータ・テーブルに関連するように設定されることができ、シフトオフセットパラメータの値は、ルックアップテーブルによって決定されることができる。本明細書では、それについては限定されない。
Ｓ３０３－２：シフトナンバーパラメータの値に基づいて、第１の定数値を決定する。
Ｓ３０３－３：第１のオフセットの値を第１の定数値と上記乗積との差に設定する。
なお、シフトナンバーパラメータはシフト因子（ｓｈｉｆｔｉｎｇ ｆａｃｔｏｒ）、シフトビット数又は重みシフト値（ｗｅｉｇｈｔ ｓｈｉｆｔｉｎｇ ｖａｌｕｅ）などと呼ばれてもよく、ｓＷ、ｓｈｉｆｔ又はｗｅｉｇｈｔ ｓｈｉｆｔで表されることができる。本発明の実施形態において、シフトナンバーパラメータはｓＷで表される。また、第１のオフセットはｏＷで表されることができ、第１のオフセットは、シフトナンバーパラメータとシフトオフセットパラメータの両方に関連する。
本発明の実施形態において、シフトナンバーパラメータの値は固定の定数、例えば、５、６、又は７などに設定されることができる。さらに、シフトナンバーパラメータの値は、シフト・ナンバー・パラメータ・テーブルに関連するように設定されることができ、シフトナンバーパラメータの値は、ルックアップテーブルによって決定されることができる。本明細書では、それについては限定されない。
Ｓ３０３－４：予測パラメータに基づいて、現在のブロックのＭＩＰ重み付け行列を決定する。
なお、予測パラメータは、予測モードパラメータを含むことができ、また、現在のブロックのサイズパラメータを含むこともできる。予測パラメータにおいて、予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、重み付け行列テーブルは予めに確立されることができ、当該重み付け行列テーブルはメモリ又は記憶ユニットに記憶されている。ここのメモリ又は記憶ユニットは、符号器に集積されてもよいし、又は、単独に設けられてもよい。このように、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄ）及びＭＩＰモードインデックス値（ｍｏｄｅｌＩｄ）に基づいて、現在のブロックのために使用される必要のあるＭＩＰ重み付け行列（ＭＩＰ重み行列、又はＭＩＰ行列とも呼ばれる）は、ルックアップテーブルによって決定されることができ、ｍＷｅｉｇｈｔ［ｘ］［ｙ］で表される。現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄ）は、現在のブロックのサイズパラメータに基づいて決定され、ＭＩＰ重み付け行列ｍＷｅｉｇｈｔ［ｘ］［ｙ］のサイズは、表３に示すように、現在のブロックのブロックサイズインデックス値に関連する。
表３に示すＭＩＰ重み付け行列において、列数はｉｎＳｉｚｅに等しい行列乗算の入力サンプルの数であり、行数はｐｒｅｄＳｉｚｅｄ×ｐｒｅｄＳｉｚｅｄに等しい行列乗算の出力サンプルの数であり、現在のブロックのＭＩＰ重み付け行列が決定されることができる。
Figure 2023509951000008
符号器において、シフト・ナンバー・パラメータ・テーブルが予めに確立されることができ、当該シフト・ナンバー・パラメータ・テーブルもメモリ又は記憶ユニットに記憶されている。ここのメモリ又は記憶ユニットは、符号器に集積されてもよいし、又は、単独に設けられてもよい。本発明の実施形態において、シフトナンバーパラメータ（ｓＷ）は以下のいくつかの方法で決定されることができる。
１つの可能な実施形態において、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトナンバーパラメータは異なってもよい。いくつかの実施形態において、上記方法以下をさらに含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのＭＩＰモードインデックス値を決定する。
ＭＩＰモードインデックス値に基づいて、第１の予め設定されたルックアップテーブルからＭＩＰモードインデックス値に対応の値をクエリーする。第１の予め設定されたルックアップテーブルは、ＭＩＰモードインデックス値とシフトナンバーパラメータの値との対応関係を記録するために用いられる。
クエリーした値をシフトナンバーパラメータの値として決定する。
なお、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）及びＭＩＰモードインデックス値（ｍｏｄｅｌＩｄ）に基づいて、シフトナンバーパラメータの値をクエリーすることができる。表４に示す第１の予め設定されたルックアップテーブルにおいて、異なるｍｉｐＳｉｚｅＩｄ及びｍｏｄｅｌＩｄに対して、ルックアップテーブルによって、行列乗算において必要とされるシフトナンバーパラメータを決定することができる。
Figure 2023509951000009
ただし、符号器側では、表４をルックアップテーブルの形でメモリ又は記憶ユニットに記憶する必要がある。しかし、記憶にはコストがかかり、ルックアップのプロセスにもコストがかかる。表４におけるシフトナンバーパラメータの値は、現在のブロックのブロックサイズ及びＭＩＰモードインデックス値の両方に関連するため、メモリの占有量が増え、計算複雑度も増加する。
メモリの占有を低減し、計算複雑度を下げるために、本発明の実施形態において、シフトナンバーパラメータの決定方法を簡略化することができる。
別の可能な実施態様において、シフトナンバーパラメータの値を、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数に設定することができる。例えば、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトナンバーパラメータの値を５に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトナンバーパラメータの値を６に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトナンバーパラメータの値を７に設定することができる。本発明の実施形態において、シフトナンバーパラメータの値を６に設定することが好ましいが、それについては限定されない。
もう１つの可能な実施形態において、シフトナンバーパラメータの値について、上記方法は以下をさらに含む。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定する。
上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定する。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定できることに留意されたい。いくつかの実施形態において、上記現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定することは、以下を含むことができる。
現在のブロックの幅と高さがいずれも４に等しい場合に、現在のブロックのブロックサイズインデックス値を０に設定する。
現在のブロックの幅と高さがいずれも８に等しいか、又は現在のブロックの幅と高さの一方が４に等しい場合に、現在のブロックのブロックサイズインデックス値を１に設定する。
現在のブロックの幅と高さが上記条件を満たさない場合に、現在のブロックのブロックサイズインデックス値を２に設定する。
このように、現在のブロックのブロックサイズインデックス値を決定した後、現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値をさらに決定することができる。
選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定することは、以下を含むことができる。
ブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、現在のブロックのブロックサイズインデックス値に対応のシフトナンバーパラメータの値が５、６又は５にそれぞれ等しいと決定する。
選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定することは、以下を含むことができる。
シフトナンバーパラメータの値を、現在のブロックのブロックサイズインデックス値に対応の第１の予め設定された値に対する現在のブロックの幅又は高さの比率に等しく設定する。
ここで、第１の予め設定された値は、現在のブロックの境界から取得されたＭＩＰ入力サンプル値の数を表す。この場合、上記方法は以下を含むこともできる。
現在のブロックのブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、現在のブロックのブロックサイズインデックス値に対応の第１の予め設定された値が２、４又は４にそれぞれ等しいと決定する。
換言すると、第１の予め設定された値が、現在のブロックの境界から取得されたＭＩＰ入力サンプル値の数を表すとき、現在のブロックのブロックサイズインデックス値が０に等しい場合に、対応の第１の予め設定された値は２に等しく、現在のブロックのブロックサイズインデックス値が１に等しい場合に、対応の第１の予め設定された値は４に等しく、現在のブロックのブロックサイズインデックス値が２に等しい場合に、対応の第１の予め設定された値は４に等しい。このように、対応の第１の予め設定された値に対する現在のブロックの幅又は高さの比率に基づいて、シフトナンバーパラメータの値を決定することができる。
選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定することは、以下を含むことができる。
シフトナンバーパラメータの値を、現在のブロックのブロックサイズインデックス値に対応の第２の予め設定された値に対する現在のブロックの幅又は高さの比率に等しく設定する。
ここで、第２の予め設定された値は、ＭＩＰ重み付け行列を直接に使用することによって取得される現在のブロックのＭＩＰ予測ブロックのサイズを表す。この場合、上記方法は以下を含むこともできる。
現在のブロックのブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、現在のブロックのブロックサイズインデックス値に対応の第２の予め設定された値が４、４又は８にそれぞれ等しいと決定する。
換言すると、第２の予め設定された値が、ＭＩＰ重み付け行列を直接に使用することによって取得される現在のブロックのＭＩＰ予測ブロックのサイズを表すとき、現在のブロックのブロックサイズインデックス値が０に等しい場合に、対応の第２の予め設定された値は４に等しく、現在のブロックのブロックサイズインデックス値が１に等しい場合に、対応の第２の予め設定された値は４に等しく、現在のブロックのブロックサイズインデックス値が２に等しい場合に、対応の第２の予め設定された値は８に等しい。このように、対応の第２の予め設定された値に対する現在のブロックの幅又は高さの比率に基づいて、シフトナンバーパラメータの値を決定することができる。
もう１つの可能な実施形態において、シフト・ナンバー・パラメータ・テーブルを最小化することができ、また、依然としてルックアップテーブルの方法によってシフトナンバーパラメータの値を決定する。選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定することは、以下を含むことができる。
ブロックサイズインデックス値に基づいて、第２の予め設定されたルックアップテーブルからブロックサイズインデックス値に対応の値をクエリーする。第２の予め設定されたルックアップテーブルは、ブロックサイズインデックス値とシフトナンバーパラメータの値との対応関係を記録するために用いられる。
クエリーした値をシフトナンバーパラメータの値として決定する。
なお、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）のみに基づいて、シフトナンバーパラメータの値をクエリーすることができる。表５に示す第２の予め設定されたルックアップテーブルにおいて、各ブロックサイズインデックス値は、固定値に対応することができる。即ち、各ブロックのサイズ又は各ブロックのサイズセットは、表５に示すような固定したシフトナンバーパラメータの値を有することができる。
Figure 2023509951000010
表５によれば、現在のブロックのブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、ブロックサイズインデックス値に対応のシフトナンバーパラメータの値が５、６又は５にそれぞれ等しいと決定することができる。
上記実施形態において、シフトナンバーパラメータの決定方法を簡略化することで、特にシフト・ナンバー・パラメータ・テーブルを最小化し又はシフトナンバーパラメータの値を固定することで、ルックアップテーブルの記憶量を最小化することができ、それで、計算複雑度を増やさずに、ＭＩＰモードのもとのシフト・ナンバー・パラメータ・テーブルの記憶に占有されるメモリを低減することができる。
符号器において、シフト・オフセット・パラメータ・テーブルが予めに確立されることができ、当該シフト・オフセット・パラメータ・テーブルもメモリ又は記憶ユニットに記憶されている。ここのメモリ又は記憶ユニットは、符号器に集積されてもよいし、又は、単独に設けられてもよい。本発明の実施形態において、シフトオフセットパラメータ（ｆＯ）は以下のいくつかの方法で決定されることができる。
１つの可能な実施形態において、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータは異なってもよい。いくつかの実施形態において、上記方法以下をさらに含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのＭＩＰモードインデックス値を決定する。
ＭＩＰモードインデックス値に基づいて、第３の予め設定されたルックアップテーブルからＭＩＰモードインデックス値に対応の値をクエリーする。第３の予め設定されたルックアップテーブルは、ＭＩＰモードインデックス値とシフトオフセットパラメータの値との対応関係を記録するために用いられる。
クエリーした値をシフトオフセットパラメータの値として決定する。
なお、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）及びＭＩＰモードインデックス値（ｍｏｄｅｌＩｄ）に基づいて、シフトオフセットパラメータの値をクエリーすることができる。表６に示す第３の予め設定されたルックアップテーブルにおいて、異なるｍｉｐＳｉｚｅＩｄ及びｍｏｄｅｌＩｄに対して、ルックアップテーブルによって、行列乗算において必要とされるシフトオフセットパラメータを決定することができる。
Figure 2023509951000011
ただし、符号器側では、表６をルックアップテーブルの形でメモリ又は記憶ユニットに記憶する必要がある。しかし、記憶にはコストがかかり、ルックアップのプロセスにもコストがかかる。表６におけるシフトオフセットパラメータの値は、現在のブロックのブロックサイズ及びＭＩＰモードインデックス値の両方に関連するため、メモリの占有量が増え、計算複雑度も増加する。
メモリの占有を低減し、計算複雑度を下げるために、本発明の実施形態において、シフトオフセットパラメータの決定方法を簡略化することができる。
別の可能な実施態様において、シフトオフセットパラメータの値を、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数に設定することができる。一般的に、当該固定の定数は０～１００の範囲にある。例えば、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータの値を３２に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータの値を４６に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータの値を５６に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータの値を６６に設定することができる。本発明の実施形態において、シフトオフセットパラメータの値を３２に設定することが好ましいが、それについては限定されない。
もう１つの可能な実施形態において、シフトオフセットパラメータの値について、上記方法は以下をさらに含むことができる。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定する。
上記現在のブロックのブロックサイズインデックス値に基づいて、シフトオフセットパラメータの値を決定する。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定できることに留意されたい。その後、現在のブロックのブロックサイズインデックス値に基づいて、シフトオフセットパラメータの値をさらに決定することができる。
選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトオフセットパラメータの値を決定することは、以下を含むことができる。
ブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、現在のブロックのブロックサイズインデックス値に対応のシフトオフセットパラメータの値が３４、２３又は４６にそれぞれ等しいと決定する。
選択的に、いくつかの実施形態において、シフト・オフセット・パラメータ・テーブルを最小化することがさらにでき、また、依然としてルックアップテーブルの方法によってシフト因子を決定する。選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトオフセットパラメータの値を決定することは、以下を含むことができる。
ブロックサイズインデックス値に基づいて、第４の予め設定されたルックアップテーブルからブロックサイズインデックス値に対応の値をクエリーする。第４の予め設定されたルックアップテーブルは、ブロックサイズインデックス値とシフトオフセットパラメータの値との対応関係を記録するために用いられる。
クエリーした値をシフトオフセットパラメータの値として決定する。
なお、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）のみに基づいて、シフトオフセットパラメータの値をクエリーすることができる。表７に示す第４の予め設定されたルックアップテーブルにおいて、各ブロックサイズインデックス値は、固定値に対応することができる。即ち、各ブロックのサイズ又は各ブロックのサイズセットは、表７に示すような固定したシフトオフセットパラメータの値を有することができる。
Figure 2023509951000012
表７によれば、現在のブロックのブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、ブロックサイズインデックス値に対応のシフトオフセットパラメータの値が３４、２３又は４６にそれぞれ等しいと決定することができる。
上記実施形態において、シフトオフセットパラメータの決定方法を簡略化することで、特にシフト・オフセット・パラメータ・テーブルを最小化し又はシフトオフセットパラメータの値を固定することで、ルックアップテーブルの記憶量を最小化することができ、それで、計算複雑度を増やさずに、ＭＩＰモードのもとのシフト・オフセット・パラメータ・テーブルの記憶に占有されるメモリを低減することができる。
このように、シフトオフセットパラメータ（ｆＯ）及びシフトナンバーパラメータ（ｓＷ）を決定した後、第１の定数値について、選択的に、いくつかの実施形態において、上記シフトナンバーパラメータの値に基づいて第１の定数値を決定することは、以下を含むことができる。
第１の定数値を２の累乗に設定する。累乗の指数は整数であり、シフトナンバーパラメータの値から１を引いたものに等しい。
選択的に、いくつかの実施形態において、上記シフトナンバーパラメータの値に基づいて第１の定数値を決定することは、以下を含むことができる。
「１」を２進左シフトすることによって第１の定数値を取得する。左シフトされたビット数はシフトナンバーパラメータの値から１を引いたものに等しい。
換言すると、シフトナンバーパラメータ（ｓＷ）が取得された後、第１の定数値は、１＜＜（ｓＷ－１）と表記されてもよく、２^（ｓＷ－１）と表記されてもよい。この場合、シフトナンバーパラメータの値を６に設定するとき、３２に等しい第１の定数値を取得することができる。
Figure 2023509951000013
このように、ＭＩＰモードのもとで、ＭＩＰ重み付け行列、ＭＩＰ入力サンプル値、シフトナンバーパラメータ及び第１のオフセットを取得することができ、それで、その後の現在のブロックのＭＩＰ予測値の決定が容易になる。
Ｓ３０３－５：ＭＩＰ重み付け行列、ＭＩＰ入力サンプル値、シフトナンバーパラメータ及び第１のオフセットに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。
ここで、ＭＩＰ予測値は、現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
上記ＭＩＰ重み付け行列、ＭＩＰ入力サンプル値、シフトナンバーパラメータ及び第１のオフセットに基づいて、現在のブロックのＭＩＰ予測値を決定することは、以下を含むことができる。
ＭＩＰ重み付け行列とＭＩＰ入力サンプル値との第１の重み付け和を計算する。
第１の重み付け和と第１のオフセットとの第１の合計を計算する。
第１の合計を２進右シフトすることによって第１の右シフト値を取得する。右シフトされたビット数はシフトナンバーパラメータの値に等しい。
現在のブロックのＭＩＰ予測値を、第１の右シフト値と第１の一時的参照値におけるインデックス０に対応の値との合計に設定する。第１の一時的参照値は、現在のブロックの隣接サンプル値をダウンサンプリングすることによって取得される。
具体的に、ＭＩＰモードのもとで、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）及びＭＩＰモードインデックス値（ｍｏｄｅｌＩｄで表す）に基づいて、ＭＩＰ重み付け行列（ｍＷｅｉｇｈｔで表す）、シフトナンバーパラメータ（ｓＷで表す）及びシフトオフセットパラメータ（ｆＯで表す）を決定することができる。次に、ＭＩＰ入力サンプル値（ｐ［ｘ］で表す）、ｍＷｅｉｇｈｔ、ｓＷ及びｆＯを行列乗算に入力することによって、行列乗算から出力されるＭＩＰ予測値（ｐｒｅｄＭｉｐ［ｘ］［ｙ］で表すことができる）を取得する。ｐｒｅｄＭｉｐ［ｘ］［ｙ］におけるサンプルは、ｐｒｅｄＳｉｚｅ×ｐｒｅｄＳｉｚｅに基づいて行列／アレーの形式で配列される。計算式は次の通りである。
Figure 2023509951000014
［ｘ］［ｙ］はサンプルの位置座標を表し、ｘは水平方向、ｙは垂直方向を表し、ｉｎＳｉｚｅは入力サンプルの数を表し、p［ｉ］はＭＩＰ入力サンプル値におけるインデックスｉに対応の値を表し、ｐＴｅｍｐ［０］は第１の一時的参照値におけるインデックス０に対応の値を表し、「＞＞」は２進右シフト演算子を表し、「＜＜」は２進左シフト演算子を表し、ｘ＝０、…、ｐｒｅｄＳｉｚｅ－１、ｙ＝０、…、ｐｒｅｄＳｉｚｅ－１。このように、上記式（５）に基づいて、ｐｒｅｄＭｉｐ［ｘ］［ｙ］を計算することによって、ＭＩＰ予測ブロックを取得することができる。
いくつかの実施形態において、ｓＷの固定値が６であり、ｆＯの固定値が３２である場合に、計算式は次の通りである。
Figure 2023509951000015
さらに、現在のブロックのＭＩＰ予測ブロックを取得するために、ＭＩＰ予測ブロックにおけるサンプルの予測値に対してクリッピング（ｃｌｉｐｐｉｎｇ）を行う必要がある。次に、当該ＭＩＰ予測ブロックを転置するか否かを判断する。判断結果がＹｅｓの場合に、当該ＭＩＰ予測ブロックにおける予測サンプル値を転置する必要があり、転置されたＭＩＰ予測ブロックを現在のブロックのＭＩＰ予測ブロックとして決定する。判断結果がＮｏの場合に、当該ＭＩＰ予測ブロックにおける予測サンプル値を転置する必要がなく、当該ＭＩＰ予測ブロックを現在のブロックのＭＩＰ予測ブロックとして直接に決定することによって、現在のブロックのＭＩＰ予測値を取得することができ、当該ＭＩＰ予測値は現在のブロックにおける一部のサンプルの予測値である。
Ｓ３０４：ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。
上記ＭＩＰ予測値をフィルタリングすることによって、現在のブロックのイントラ予測値を決定することは、以下を含むことができる。
ＭＩＰ予測ブロックのサイズパラメータと現在のブロックのサイズパラメータが同じであるか否かを判断する。
ＭＩＰ予測ブロックのサイズパラメータと現在のブロックのサイズパラメータが同じである場合に、現在のブロックのイントラ予測ブロックをＭＩＰ予測ブロックに等しく設定する。ＭＩＰ予測ブロックは、現在のブロックにおけるすべてのサンプル位置の予測サンプル値を含む。
ＭＩＰ予測ブロックのサイズパラメータが現在のブロックのサイズパラメータと異なる場合に、ＭＩＰ予測ブロックをフィルタリングすることによって、フィルタリングされた予測ブロックを取得し、フィルタリングされた予測ブロックを現在のブロックのイントラ予測ブロックとして設定する。
ここで、フィルタリングは、アップサンプリング（ｕｐｓａｍｐｌｉｎｇ）又はローパスフィルタリング（ｌｏｗ－ｐａｓｓ ｆｉｌｔｅｒｉｎｇ）を含むことができる。
なお、ＭＩＰ予測ブロックはＭＩＰ予測値で構成される。ＭＩＰ予測ブロックを取得した後、ＭＩＰ予測ブロックのサイズパラメータが４×４のＭＩＰ予測ブロック及び８×８のＭＩＰ予測ブロックという２種類しか含まないため、現在のブロックのサイズパラメータとＭＩＰ予測ブロックのサイズパラメータは同じである場合もあれば、そうでない場合もある。換言すると、ＭＩＰ予測ブロックに対応のサンプル値は、現在のブロックを完全に埋めるとは限らないため、最終的な予測値の生成にはＭＩＰ予測ブロックに対するアップサンプリングが必要となる可能性がある。即ち、ＭＩＰ予測ブロックのサイズパラメータと現在のブロックのサイズパラメータが同じであるか否かを判断することによって、ＭＩＰ予測ブロックをアップサンプリングするか否かを決定する。
また、ＭＩＰ予測ブロックのサイズパラメータと現在のブロックのサイズパラメータが同じである場合に、即ち、ＭＩＰ予測ブロックの幅と高さがいずれも現在のブロックと同じである場合に、ＭＩＰ予測ブロックのアップサンプルが必要でないことが示される。この場合、ＭＩＰ予測ブロックを直接に現在のブロックに埋めることができ、即ち、埋めた後の現在のブロックには空孔サンプル（ｖａｃａｎｔ ｓａｍｐｌｅ）がない。この場合、現在のブロックにおける各サンプルのイントラ予測値は、以下に示すように、ＭＩＰ予測ブロックにおける各サンプルの予測値に直接に設定されることができる。
Figure 2023509951000016
［ｘ］［ｙ］はサンプルの位置座標を表し、ｘは水平方向、ｙは垂直方向を表し、ｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］は現在のブロックにおける位置座標が［ｘ］［ｙ］であるサンプルに対応のイントラ予測値を表し、ｐｒｅｄＭｉｐ［ｘ］［ｙ］はＭＩＰ予測ブロックにおける位置座標が［ｘ］［ｙ］であるサンプルに対応の予測値を表す。このように、式（７）に基づいて、ＭＩＰ予測ブロックｐｒｅｄＭｉｐ［ｘ］［ｙ］を、直接に現在のブロックのイントラ予測ブロックｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］とし、即ち、現在のブロックにおける少なくとも１つのサンプルのイントラ予測値とすることができる。
なお、ＭＩＰ予測ブロックのサイズパラメータが現在のブロックのサイズパラメータと異なる場合に、即ち、ＭＩＰ予測ブロックの幅と高さのうちの少なくとも一方が現在のブロックと異なる場合に、ＭＩＰ予測ブロックは現在のブロックを完全に埋めることができず、即ち、埋めた後の現在のブロックには空孔サンプルがあり、この場合に、ＭＩＰ予測ブロックをフィルタリングする必要があることが示される。換言すると、水平方向と垂直方向の両方にアップサンプリングが必要な場合に、ＭＩＰ予測ブロックを先に水平方向にアップサンプリングし、次に垂直方向にアップサンプリングすることによって、ｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］で表すことができる第１のアップサンプルブロックを取得する。その後、ＭＩＰ予測ブロックを垂直方向にアップサンプリングしてから水平方向にアップサンプリングすることによって、ｐｒｅｄＳａｍｐｌｅｓＴｅｍｐ［ｘ］［ｙ］で表すことができる第２のアップサンプルブロックを取得することができる。最後に、ｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］とｐｒｅｄＳａｍｐｌｅｓＴｅｍｐ［ｘ］［ｙ］とを加重平均することによって、現在のブロックの彩度コンポーネントのイントラ予測値を最終的に取得し、即ち、現在のブロックのイントラ予測ブロックを取得する。
例示的に、現在のブロックのエッジ長さｎＴｂＳ（ここで、ＳはＷとＨにそれぞれ置き換えられることができる）が、ｐｒｅｄＭｉｐのエッジ長さｐｒｅｄＳｉｚｅ（ここで、ｐｒｅｄＳｉｚｅは現在のブロックのｂｌｏｃｋｓｉｚｅＩｄｘのみに関連する）に等しい場合に、ＭＩＰ予測ブロックを現在のブロックのイントラ予測ブロックに直接に設定することができる。そうでなければ、現在のブロックのイントラ予測ブロックを取得するために、ＭＩＰ予測ブロックをフィルタリングする必要がある。ここで、４×４の現在のブロックを例として、現在のブロックのサイズパラメータとＭＩＰ予測ブロックのサイズパラメータが同じである場合に、ＭＩＰ予測ブロックをフィルタリングする必要がなく、ＭＩＰ予測ブロックを現在のブロックのイントラ予測ブロックに直接に設定することができ、そして、現在のブロックにおける少なくとも１つのサンプルのイントラ予測値を取得する。
簡単に説明すると、ＭＩＰモードのもとの予測プロセスについて、ＭＩＰモードの入力データは、現在のブロックの位置（ｘＴｂＣｍｐ、ｙＴｂＣｍｐ）、現在のブロックに適用されるＭＩＰモードインデックス値（ｍｏｄｅｌＩｄで表すことができる）、現在のブロックの高さ（ｎＴｂＨで表す）、現在のブロックの幅（ｎＴｂＷで表す）、及び転置が必要か否かを示す転置指示フラグ（即ち、ＭＩＰ転置指示パラメータ（ｉｓＴｒａｎｓｐｏｓｅｄで表すことができる））などを含むことができる。ＭＩＰモードの出力データは、現在のブロックのイントラ予測ブロックを含むことができる。当該イントラ予測ブロックにおけるサンプル座標［ｘ］［ｙ］に対応の予測値は、ｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］であり、ｘ＝０、１、…ｎＴｂＷ－１、ｙ＝０、１、… ｎＴｂＨ－１。
図５に示すように、ＭＩＰ予測プロセスは具体的に、以下のステップを含む。
Ｓ５０１：コアパラメータを構成する。
Ｓ５０１について、ＭＩＰコアパラメータは、現在のブロックの種類（ｍｉｐＳｉｚｅＩｄで表す）、各エッジの参照サンプルの数（ｂｏｕｎｄｙＳｉｚｅで表す）、ＭＩＰ入力サンプルの数（ｉｎＳｉｚｅで表す）、及び行列乗算から出力されるＭＩＰ予測ブロックのサイズ（ｐｒｅｄＳｉｚｅ×ｐｒｅｄＳｉｚｅで配列される）を含むことができる。現在のブロックのサイズに基づいて、現在のブロックを３つの種類に分類することができ、ｍｉｐＳｉｚｅＩｄで現在のブロックの種類を記録する。ここで、ｍｉｐＳｉｚｅＩｄは０、１又は２に等しくてもよい。また、現在のブロックの種類が異なると、参照サンプルの数及び行列乗算から出力されるＭＩＰ予測ブロックのサイズも異なる。
Ｓ５０２：参照サンプルを取得する。
Ｓ５０２について、現在のブロックを予測するとき、現在のブロックの上隣接ブロックと左隣接ブロックはいずれも符号化済みのブロックであり、ＭＩＰモードのもとの参照サンプルは、現在のブロックに隣接する上の行と左の列におけるサンプルの再構成値である。換言すると、現在のブロックの上隣接参照サンプル（ｒｅｆＴで表す）と左隣接参照サンプル（ｒｅｆＬで表す）を取得するプロセスは、参照サンプルの取得プロセスである。
Ｓ５０３：入力サンプルを構築する。
Ｓ５０３について、当該ステップは、行列乗算の入力のために用いられ、具体的に以下を含むことができる。
Ｓ５０３１：参照サンプルを取得する。
Ｓ５０３２：参照サンプルバッファを構築する。
Ｓ５０３３：行列乗算の入力サンプルを導く。
Ｓ５０３１について、参照サンプルを取得するプロセスは、参照サンプルをダウンサンプリングするプロセスである。Ｓ５０３１について、参照サンプルバッファの構築において、２種類の埋め方法があり、具体に以下を含むことができる。
Ｓ５０３２－１：転置を必要としないバッファの埋め方法。
Ｓ５０３２－２：転置を必要とするバッファの埋め方法。
Ｓ５０４：イントラ予測値を生成する。
Ｓ５０４について、当該ステップは、現在のブロックのＭＩＰ予測値を取得するために用いられ、具体的に以下を含むことができる。
Ｓ５０４１：行列乗算の出力サンプルのＭＩＰ予測ブロックを構築する。
Ｓ５０４２：行列乗算の出力サンプルのＭＩＰ予測ブロックに対してクリッピングを実行する。
Ｓ５０４３：行列乗算の出力サンプルのＭＩＰ予測ブロックに対して転置を行う。
Ｓ５０４４：ＭＩＰ予測値を生成する。
Ｓ５０４１について、ＭＩＰ予測ブロックを構築するプロセスは、具体的に以下を含むことができる。
Ｓ５０４１－１：重み付け行列を取得する。
Ｓ５０４１－２：シフトパラメータを取得する。
Ｓ５０４１－３：行列乗算演算を行う。
換言すると、ＭＩＰ予測ブロックを構築するプロセスにおいて、重み付け行列だけではなく、シフトパラメータ（シフトオフセットパラメータ及びシフトナンバーパラメータを含む）を取得する必要がある。次に、行列乗算の出力サンプルのＭＩＰ予測ブロックを取得するために、行列乗算演算を行う。Ｓ５０４４について、最終的なＭＩＰ予測値の生成は、２つの状況を含み、具体的に以下を含むことができる。
Ｓ５０４４－１：アップサンプリングを必要としない予測値を生成する。
Ｓ５０４４－２：アップサンプリングを必要とする予測値を生成する。
このように、上記Ｓ５０１～Ｓ５０４という４つのステップの後、本発明の実施形態において、現在のブロックの彩度コンポーネントにおける少なくとも１つのサンプルのイントラ予測値を取得することができる。
Ｓ３０５：現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定する。
なお、現在のブロックの彩度コンポーネントのイントラ予測値を取得した後、現在のブロックの彩度コンポーネントの実際の値と現在のブロックの彩度コンポーネントのイントラ予測値との差を計算することによって、現在のブロックの彩度コンポーネントの予測残差値を取得し、即ち、現在のブロックの残差ブロックを取得する。
Ｓ３０６：予測残差値に対して低周波非分離変換（ＬＦＮＳＴ）を行うことによって、ＬＦＮＳＴパラメータを決定する。
なお、図１に示す変換ユニット１０８について、変換ユニット１０８は、現在のブロックの残差ブロックに対して第１の変換を行うことができ、例として、離散コサイン変換（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ、ＤＣＴ）に基づいて初期に設計された整数変換が挙げられる。また、現在のブロックの残差ブロックに対して第２の変換を行うことができ、例として、低周波非分離変換（ＬＦＮＳＴ）が挙げられる。具体的に、いくつかの実施形態において、上記予測残差値に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定することは、以下を含むことができる。
予測残差値に基づいて現在のブロックの残差ブロックを決定し、残差ブロックに対して第１の変換を行うことによって第１の変換係数ブロックを取得する。
第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定する。
決定の結果がＹｅｓの場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定する。
本発明の実施形態において、符号器は、残差ブロックにおける予測残差値に対して第１の変換（「コア変換」、「一次変換」又は「主変換」とも呼ばれる）を行うことによって、第１の変換の後の第１の変換係数ブロックを取得する。次に、第１の変換係数ブロックにおける一部又は全部の変換係数に対してＬＦＮＳＴ（「セカンダリ変換」又は「二次変換」とも呼ばれる）を行うことによって、ＬＦＮＳＴパラメータを決定する。なお、本明細書における第１の変換は、ＬＦＮＳＴとは異なる変換であることに留意されたい。
また、ＬＦＮＳＴは、任意の現在のブロックに対して行われないことに留意されたい。第１の変換の後、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定するために、いくつかの条件（例えば、現在のブロックのサイズパラメータのうちの最小値、現在のブロックのブロックサイズインデックス値など）をチェックする（ｃｈｅｃｋ）必要がある。選択的に、いくつかの実施形態において、上記第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定することは、以下を含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのサイズパラメータのうちの最小値を決定する。
最小値に基づいて、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定する。
さらに、上記最小値に基づいて、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定することは、以下を含むことができる。
最小値が第１の予め設定された閾値以上である場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことを決定する。
ここで、第１の予め設定された閾値は、ＬＦＮＳＴを行うか否かを判断するための予め設定された閾値を表すために用いられることができる。本発明の実施形態において、第１の予め設定された閾値は、８に設定されることができるが、特に限定されない。
換言すると、ＭＩＰモードを用いて現在のブロックの彩度コンポーネントに対してイントラ予測を行う場合に、現在のブロックのサイズパラメータのうちの最小値を決定することができる。例えば、幅と高さの最小値が８以上である場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うと決定することができる。
選択的に、いくつかの実施形態において、上記第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定することは、以下を含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定する。
ブロックサイズインデックス値に基づいて、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定する。
さらに、上記ブロックサイズインデックス値に基づいて、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定することは、
ブロックサイズインデックス値が第２の予め設定された閾値に等しい場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うと決定すること、を含むことができる。
ここで、第２の予め設定された閾値は、ＬＦＮＳＴを行うか否かを判断するための予め設定された閾値を表すために用いられることができる。本発明の実施形態において、第２の予め設定された閾値は、１つの設定された値（例えば、２）、又は複数の設定された値（例えば１、２）のうちの１つに設定されることができるが、特に限定されない。
換言すると、ＭＩＰモードを用いて現在のブロックの彩度コンポーネントに対してイントラ予測を行う場合に、現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄ）を決定することができる。例えば、ｍｉｐＳｉｚｅＩｄの値が２に等しい場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うと決定することができる。
選択的に、いくつかの実施形態において、上記第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定することは、以下を含むことができる。
第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行わない場合に、第１のコスト結果を計算する。
第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行う場合に、第２のコスト結果を計算する。
第１のコスト結果及び第２のコスト結果に基づいて、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定する。
さらに、第１のコスト結果及び第２のコスト結果に基づいて、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定することは、
第１のコスト結果が第２のコスト結果より大きい場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うと決定すること、を含むことができる。
なお、本発明の実施形態において、従来のレート歪み最適化方法が採用され得ることに留意されたい。まず、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行わない場合に、第１のコスト結果を計算する。次に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行う場合に、第２のコスト結果を計算する。第１のコスト結果と第２のコスト結果とを比較し、第１のコスト結果が第２のコスト結果より大きい場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うと決定することができる。
このように、決定の結果がＹｅｓの場合に、即ち、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行う必要がある場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定することができる。
Ｓ３０７：ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込む。
なお、ＬＦＮＳＴパラメータは、ＬＦＮＳＴインデックスを含み、ｌｆｎｓｔ＿ｉｎｄｅｘで表されることができる。いくつかの実施形態において、ＬＦＮＳＴパラメータを決定することは、以下を含むことができる。
第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うと決定される場合に、ＬＦＮＳＴインデックスの値を０より大きく設定する。
第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行わないと決定される場合に、ＬＦＮＳＴインデックスの値を０に設定する。
さらに、Ｓ３０７について、上記ＬＦＮＳＴパラメータを符号化し且つビットストリームに書き込むことは、
ＬＦＮＳＴインデックスを符号化し且つビットストリームに書き込むこと、を含むことができる。
換言すると、ＬＦＮＳＴパラメータ、即ちｌｆｎｓｔ＿ｉｎｄｅｘを決定した後、ｌｆｎｓｔ＿ｉｎｄｅｘが０に等しい場合に、ＬＦＮＳＴを行わないことが示される。ｌｆｎｓｔ＿ｉｎｄｅｘが０より大きい場合に、ＬＦＮＳＴを行う必要があることが示される。符号化のプロセスにおいて、記述子が「ａｅ（ｖ）」であるコンテキスト適応バイナリ算術符号化（Ｃｏｎｔｅｘｔ－ｂａｓｅｄ Ａｄａｐｔｉｖｅ Ｂｉｎａｒｙ Ａｒｉｔｈｍｅｔｉｃ Ｃｏｄｉｎｇ、ＣＡＢＡＣ）を用いてｌｆｎｓｔ＿ｉｎｄｅｘを符号化することができる。
例示的に、表８を参照すると、表８は関連技術に係るＬＦＮＳＴパラメータのシンタックス構造の記述の一例を示している。この場合、第１の変換係数ブロックにおける少なくとも一部の変換係数ブロックに対してＬＦＮＳＴを行うか否かを決定する条件は、treeType = = DUAL_TREE_CHROMA、!IntraMipFlag[ x0 ][ y0 ]、Min( lfnstWidth, lfnstHeight ) >= 16のうちの少なくとも１つを含むことができる。
Figure 2023509951000017
表９Ａと表９Ｂを参照すると、表９Ａと表９Ｂはそれぞれ、本発明の実施形態に係るＬＦＮＳＴパラメータのシンタックス構造の記述の一例を示している。この場合、第１の変換係数ブロックにおける少なくとも一部の変換係数ブロックに対してＬＦＮＳＴを行うか否かを決定する条件は、intra_mip_flag[x0][y0]= = 1&&Min(lfnstWidth, lfnstHeight) >= 8、intra_mip_flag[x0][y0]= = 1&& ｍｉｐＳｉｚｅＩｄ = = 2のうちの少なくとも１つを含むことができる。
具体的に、表９Ａのシンタックス構造に示すように、現在のブロックのサイズパラメータの最小値が８以上である場合（即ち、幅と高さがいずれも８以上である場合）に、ＭＩＰモードを用いて（即ち、intra_mip_flag[x0][y0]==1のとき）現在のブロックのｌｆｎｓｔ＿ｉｎｄｅｘを符号化することができる。又は、決定の条件は、幅と高さがいずれも第１の値（例えば、８）以上であり、且つ幅と高さの合計が第２の値（例えば、１６）以上であると設定されてもよい。表９Ｂのシンタックス構造に示すように、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄ）が２に等しい場合に、ＭＩＰモードを用いて（即ち、intra_mip_flag[x0][y0]==1のとき）現在のブロックのｌｆｎｓｔ＿ｉｎｄｅｘを符号化することができる。又は、決定の条件は、ｍｉｐＳｉｚｅＩｄが複数の設定された値（例えば、１、２）のうちの1つに等しいと設定されてもよい。
Figure 2023509951000018
Figure 2023509951000019
また、現在のブロックに対してＬＦＮＳＴを行うことができると決定される場合に、現在のブロックのために使用されるＬＦＮＳＴ変換カーネル（ｋｅｒｎｅｌで表す）が決定される必要がある。いくつかの実施形態において、上記予測残差値に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定することは、以下を含むことができる。現在のブロックのために使用されるＬＦＮＳＴ変換カーネルを決定し、ＬＦＮＳＴ変換カーネルを利用して予測残差値に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定する。
本発明の実施形態において、ＬＦＮＳＴには４つの変換カーネル候補セットがある。この４つの変換カーネル候補セットは、セット０、セット１、セット２及びセット３を含むことができる。ここで、本発明の実施形態において、ＭＩＰパラメータを利用してＬＦＮＳＴ変換カーネル候補セットを決定することができ、次に、ＬＦＮＳＴ変換カーネル候補セットから、現在のブロックのために使用されるＬＦＮＳＴ変換カーネルを選択する。従って、いくつかの実施形態において、上記方法は、以下をさらに含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックの予測パラメータからＭＩＰパラメータを決定する。
ＭＩＰパラメータに基づいて、ＬＦＮＳＴ変換カーネル候補セットを決定する。
ＬＦＮＳＴ変換カーネル候補セットにおいて、ＬＦＮＳＴインデックスによって示される変換カーネルを、現在のブロックのために使用されるＬＦＮＳＴ変換カーネルとして設定する。
ＬＦＮＳＴインデックスの値を、現在のブロックに対してＬＦＮＳＴを行うこと及びＬＦＮＳＴ変換カーネル候補セットにおけるＬＦＮＳＴ変換カーネルのインデックスを示すように設定する。
ＬＦＮＳＴ変換カーネル候補セットは、２つ又は複数の予めに設定されたＬＦＮＳＴ変換カーネルを含む。
なお、ＭＩＰパラメータは、ＭＩＰモードインデックス値（ｍｏｄｅｌＩｄで表す）及びＭＩＰ転置指示パラメータ（ｉｓＴｒａｎｓｐｏｓｅｄで表す）のうちの少なくとも１つを含むことができる。現在のブロックのために使用されるＬＦＮＳＴ変換カーネルについて、ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行うことを示す場合に、現在のブロックのために使用されるＬＦＮＳＴ変換カーネルを取得するために、選択された変換カーネルに対して行列転置を行う必要がある。
さらに、いくつかの実施形態において、上記ＭＩＰパラメータに基づいて、ＬＦＮＳＴ変換カーネル候補セットを決定することは、以下を含むことができる。
ＭＩＰモードインデックス値に基づいて、ＬＦＮＳＴイントラ予測モードインデックスの値を決定する。
ＬＦＮＳＴイントラ予測モードインデックスの値に基づいて、第５の予め設定されたルックアップテーブルによって、ＬＦＮＳＴ変換カーネル候補セットのインデックス値を決定する。
ＬＦＮＳＴ変換カーネル候補セットのインデックス値に基づいて、複数の候補ＬＦＮＳＴ変換カーネル候補セットから前記ＬＦＮＳＴ変換カーネル候補セットを選択する。
ここで、ＬＦＮＳＴイントラ予測モードインデックスをｐｒｅｄＭｏｄｅＩｎｔｒａで表すことができ、ＬＦＮＳＴ変換カーネル候補セットのインデックス値をｌｆｎｓｔＴｒＳｅｔＩｄｘで表すことができる。
なお、第５の予め設定されたルックアップテーブルは、表１０に示す通りである。ＭＩＰモードインデックス値（即ち、ｍｏｄｅｌＩｄの値）に基づいて、ｐｒｅｄＭｏｄｅＩｎｔｒａの値を決定することができる。次に、ｐｒｅｄＭｏｄｅＩｎｔｒａの値に基づいて、表１０と合わせてｌｆｎｓｔＴｒＳｅｔＩｄｘの値を直接に決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定することができる。ここで、ｌｆｎｓｔＴｒＳｅｔＩｄｘの値は、ＬＦＮＳＴに使用される変換カーネル候補セットを示す。ｍｏｄｅｌＩｄの値は０、１、２、３、４、５を含むことができるため、ｐｒｅｄＭｏｄｅＩｎｔｒａの値も０、１、２、３、４、又は５である。ｐｒｅｄＭｏｄｅＩｎｔｒａとｌｆｎｓｔＴｒＳｅｔＩｄｘとの対応関係は以下の通りである。
Figure 2023509951000020
１つの具体的な実施形態において、上記ＭＩＰモードインデックス値に基づいて、ＬＦＮＳＴイントラ予測モードインデックスの値を決定することは、
ＬＦＮＳＴイントラ予測モードインデックスの値をＭＩＰモードインデックス値に等しく設定すること、を含むことができる。
換言すると、本発明の実施形態において、ｐｒｅｄＭｏｄｅＩｎｔｒａの値をｍｏｄｅｌＩｄの値に等しく設定することができ、次に、ｐｒｅｄＭｏｄｅＩｎｔｒａの値に基づいて、表１０と合わせてｌｆｎｓｔＴｒＳｅｔＩｄｘの値を直接に決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定する。また、本発明の別の具体的な実施形態において、ｍｏｄｅｌＩｄの値をＰＬＡＮＡＲモードの値に直接にマッピングし、次に、ＰＬＡＮＡＲモードに対応のｐｒｅｄＭｏｄｅＩｎｔｒａの値を利用して、ｌｆｎｓｔＴｒＳｅｔＩｄｘの値を決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定する。
いくつかの実施形態において、ＬＦＮＳＴパラメータはＬＦＮＳＴ係数をさらに含む。上記ＬＦＮＳＴパラメータを決定することは、
第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得すること、を含むことができる。
それに応じて、上記ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込むことは、
ＬＦＮＳＴ係数を量子化することによって、量子化係数を取得することと、
量子化係数を符号化し、且つビットストリームに書き込むことと、を含む。
なお、ｌｆｎｓｔ＿ｉｎｄｅｘが０に等しくない場合に、即ち、現在のブロックに対してＬＦＮＳＴを行うと決定する場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得することができる。次に、ＬＦＮＳＴ係数を量子化し、符号化し、且つビットストリーム（ｂｉｔｓｔｒｅａｍ）に書き込む。
なお、ｄ［ｘ］［ｙ］は第１の変換係数ブロックであると仮設し、ここで、ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、…、ｎＴｂＨ－１、ｎＴｂＷとｎＴｂＨはそれぞれ現在のブロックの幅と高さを表す。ｖ［ｘ］はＬＦＮＳＴ係数を含むブロックを表すと仮設し、ここで、ｘ＝０、…、nLfnstOutSize－１、nLfnstOutSize =（nTbW> = 8 && nTbH> = 8）? 48 : 16。
１つの可能な実施態様において、ＬＦＮＳＴ係数を取得するために、水平走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は以下の通りである。
Figure 2023509951000021
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは以下のように決定される。
Figure 2023509951000022
別の可能な実施態様において、走査順序は水平走査順序及び垂直走査順序を含むことができる。ここで、走査順序の決定は、ＭＩＰ転置指示パラメータ（ｉｓＴｒａｎｓｐｏｓｅｄで表す）に関連する。
選択的に、いくつかの実施形態において、上記第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得することは、以下を含むことができる。
ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行うことを示す場合に、垂直走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得する。
ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行わないことを示す場合に、水平走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得する。
具体的に、ｉｓＴｒａｎｓｐｏｓｅｄの値が０に等しい場合に、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行わない。そして、水平走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は以下の通りである。
Figure 2023509951000023
ｉｓＴｒａｎｓｐｏｓｅｄの値が１に等しい場合に、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行う。そして、垂直走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は以下の通りである。
Figure 2023509951000024
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
選択的に、いくつかの実施形態において、上記第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得することは、以下を含むことができる。
ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行うことを示す場合に、水平走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得する。
ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行わないことを示す場合に、垂直走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得する。
具体的に、ｉｓＴｒａｎｓｐｏｓｅｄの値が１に等しい場合に、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行う。そして、水平走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は上記式（１０）に示したようである。
ｉｓＴｒａｎｓｐｏｓｅｄの値が０に等しい場合に、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行わない。そして、垂直走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は上記式（１１）に示したようである。
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
また、本発明の実施形態におけるＬＦＮＳＴは、ＭＩＰモードだけではなく、従来のイントラ予測モード（例えば、角度イントラ予測モード、ＤＣモード及びＰＬＡＮＡＲモードなど）に適用されることができる。その具体的な実現方式は、ＭＩＰモードと類似である。
いくつかの実施形態において、上記ＭＩＰパラメータに基づいて、ＬＦＮＳＴ変換カーネル候補セットを決定することは、以下を含むことができる。
従来のイントラ予測モードのインデックス値に基づいて、ＬＦＮＳＴイントラ予測モードインデックスの値を決定する。
ＬＦＮＳＴイントラ予測モードインデックスの値に基づいて、第６の予め設定されたルックアップテーブルによって、ＬＦＮＳＴ変換カーネル候補セットのインデックス値を決定する。
ＬＦＮＳＴ変換カーネル候補セットのインデックス値に基づいて、複数の候補ＬＦＮＳＴ変換カーネル候補セットからＬＦＮＳＴ変換カーネル候補セットを選択する。
なお、第６の予め設定されたルックアップテーブルは表１１に示す通りである。従来のイントラ予測モードのインデックス値に基づいて、ｐｒｅｄＭｏｄｅＩｎｔｒａの値を決定することができる。次に、ｐｒｅｄＭｏｄｅＩｎｔｒａの値に基づいて、表１１と合わせてｌｆｎｓｔＴｒＳｅｔＩｄｘの値を直接に決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定することができる。ここで、ｌｆｎｓｔＴｒＳｅｔＩｄｘの値を決定するために、従来のイントラ予測モードのインデックス値をｐｒｅｄＭｏｄｅＩｎｔｒａに割り当てることができる。
Figure 2023509951000025
以下、図１に示す符号器１００を参照しながら、本発明の実施形態の符号化方法を具体的に説明する。
本発明の実施形態における現在のブロック（又は「符号化ブロック」と呼ばれる）が、ＣＵ又はＣＵのパーティション（例えば、変換ブロック）であってもよいと理解されるべきである。具体的に、イントラ予測ユニット１０６はＭＩＰモードを用いて現在のブロックを符号化することを決定する場合に、又はイントラ予測ユニット１０６はレート歪み最適化方法で現在のブロックを符号化するためのＭＩＰモードを評価する場合に、イントラ予測ユニット１０６は、現在のブロックのイントラ予測ブロックを取得する。現在のブロックのイントラ予測ブロックは、現在のブロックにおける少なくとも１つのサンプル（ｓａｍｐｌｅｓ）のイントラ予測値を含む。
具体的に、イントラ予測ユニット１０６がＭＩＰモードを用いてイントラ予測ブロックを取得するステップは、以下の通りである。
まず、イントラ予測ユニット１０６は、現在のブロックの隣接サンプルから１つ又は複数の参照サンプルを取得する。例えば、隣接サンプルをダウンサンプリングすることによって、又は隣接サンプルから直接に抽出することによって取得する。
次に、イントラ予測ユニット１０６は、取得した参照サンプル、ＭＩＰ行列及びシフトパラメータを用いて、現在のブロックにおけるサンプル位置に対応の１つ又は複数の部分的な予測サンプルを決定する。ここで、サンプル位置は、現在のブロックにおける予め設定されたサンプル位置であることができ、例として、サンプル位置は均等な水平方向及び垂直方向の座標値を有する。また、シフトパラメータは、シフトナンバーパラメータ及びシフトオフセットパラメータを含み、シフトパラメータは、部分的なサンプルのイントラ予測値を取得するプロセスにおいて、オフセット操作のために用いられることができる。
最後に、現在のブロックの部分的なサンプルに対応の予測サンプルを取得した場合に、イントラ予測ユニット１０６は、現在のブロックにおける部分的なサンプル以外の残りのサンプルに対応の予測サンプルをさらに取得する必要がある。例えば、イントラ予測ユニット１０６は、補間フィルターを利用して残りのサンプルに対応の予測サンプルを取得することができ、補間フィルターの入力は部分的なサンプルと隣接サンプルであることができる。
図６に示すように、図６は、本発明の実施形態に係るＭＩＰモードを用いてイントラ予測ブロックを取得することのフローチャートを示している。このフローは符号器１００で実現されることができ、ここの「現在のブロック」は「符号化ブロック」を指す。
ステップ６０１、イントラ予測ユニット１０６は現在のブロックの隣接サンプルを取得し、例として、隣接サンプルは、図６に示すステップ６０１における現在のブロックに隣接する灰色の正方形としてマークされる。イントラ予測ユニット１０６は隣接サンプルから１つ又は複数の参照サンプルを取得する。図６に示すステップ６０１の例において、選択的に、イントラ予測ユニット１０６は、２つの隣接サンプルの平均値を計算し、且つ当該平均値を参照サンプルとして用いることができる。選択的に、イントラ予測ユニット１０６は１つの隣接サンプルおきに１つの隣接サンプルを参照サンプルを選択する。例えば、図６に示すステップ６０１の例において、イントラ予測ユニット１０６は、現在のブロックの８つの上隣接サンプルから４つの参照サンプルを選択し、且つ現在のブロックの８つの左隣接サンプルから別の４つの参照サンプルを選択する。
ステップ６０１の具体的なプロセスは、以下のように示される。
イントラ予測ユニット１０６は、ブロック分割ユニット１０３から現在のブロックの幅と高さを取得し、幅と高さはそれぞれ、変数ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔで表される。例示として、イントラ予測ユニット２０６は、レート歪み最適化のモード決定方法を呼び出すことによってイントラ予測モードを決定する。現在のブロックは１つ又は複数の変換ブロックに分割される。変数ｎＴｂＷとｎＴｂＨをそれぞれ、変換ブロックの幅と高さとする。イントラ予測モードとしてＭＩＰモードを用いて現在のブロックのイントラ予測値を取得する場合に、イントラ予測ユニット１０６は、ＭＩＰのブロックサイズインデックス値、即ち、ｍｉｐＳｉｚｅＩｄで表す変数を決定する。
選択的に、イントラ予測ユニット１０６は、以下のようにｍｉｐＳｉｚｅＩｄの値を決定する。
－ｎＴｂＷとｎＴｂＨがいずれも４に等しい場合に、ｍｉｐＳｉｚｅＩｄを０に等しく設定する。
－そうでなければ、ｃｂＷｉｄｔｈ又はｃｂＨｅｉｇｈｔが４に等しい場合に、ｍｉｐＳｉｚｅＩｄを１に等しく設定する。
－そうでなければ、ｍｉｐＳｉｚｅＩｄを２に等しく設定する。
具体的に、現在のブロックのサイズパラメータが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、ｍｉｐＳｉｚｅＩｄを２に等しく設定する。
選択的に、イントラ予測ユニット１０６は、以下のようにｍｉｐＳｉｚｅＩｄの値を決定する。
－ｎＴｂＷとｎＴｂＨがいずれも４に等しい場合に、ｍｉｐＳｉｚｅＩｄを０に等しく設定する。
－そうでなければ、ｃｂＷｉｄｔｈ又はｃｂＨｅｉｇｈｔが４に等しいか、又はｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい場合に、ｍｉｐＳｉｚｅＩｄを１に等しく設定する。
－そうでなければ、ｍｉｐＳｉｚｅＩｄを２に等しく設定する。
具体的に、現在のブロックのサイズパラメータが８×８である場合に、ｍｉｐＳｉｚｅＩｄを１に等しく設定する。
さらに、イントラ予測ユニット１０６はｍｉｐＳｉｚｅＩｄに基づいて、ｂｏｕｎｄａｒｙＳｉｚｅとｐｒｅｄＳｉｚｅの値を取得する。具体的は以下の通りである。
－ｍｉｐＳｉｚｅＩｄが０に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅを２に等しく設定し、ｐｒｅｄＳｉｚｅを４に等しく設定する。
－そうでなければ、ｍｉｐＳｉｚｅＩｄが１に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅを４に等しく設定し、ｐｒｅｄＳｉｚｅを４に等しく設定する。
－そうでなければ（ｍｉｐＳｉｚｅＩｄが２に等しい場合に）、ｂｏｕｎｄａｒｙＳｉｚｅを４に等しく設定し、ｐｒｅｄＳｉｚｅを８に等しく設定する。
ｂｏｕｎｄａｒｙＳｉｚｅは、現在のブロックの上隣接参照サンプル及び左隣接参照サンプルの各々から取得される参照サンプル数を表す。
イントラ予測ユニット１０６は、バッファｐＴｅｍｐに記憶された参照サンプルの順序を示すために、変数ｉｓＴｒａｎｓｐｏｓｅｄをさらに取得することができる。例えば、ｉｓＴｒａｎｓｐｏｓｅｄが０に等しいことは、イントラ予測ユニット１０６がまず現在のブロックの上隣接参照サンプルから取得された参照サンプルを呈し、次に、左隣接参照サンプルから取得された参照サンプルを呈することを示す。そうでなければ、ｉｓＴｒａｎｓｐｏｓｅｄが１に等しいことは、イントラ予測ユニット１０６がまず現在のブロックの左隣接参照サンプルから取得された参照サンプルを呈し、次に、上隣接参照サンプルから取得された参照サンプルを呈することを示す。ｉｓＴｒａｎｓｐｏｓｅｄの値は、符号化され且つビットストリームに書き込まれる必要のあるＭＩＰモードのパラメータの１つとして、エントロピー符号化ユニット１１５に送られる。
イントラ予測ユニット１０６は、上記式（１）に示したように、ＭＩＰモードに使用される参照サンプル数を示すために、ｉｎＳｉｚｅの値を取得する。
イントラ予測ユニット１０６は、現在のブロックの隣接参照サンプルを用いて参照サンプル群（アレーｐ［ｘ］として記憶され、ｘは０、…、ｉｎＳｉｚｅ－１である）を取得するために、以下のプロセスを呼び出す。
イントラ予測ユニット１０６は、現在のブロックの上隣接参照サンプル（例えば、アレーｒｅｆＴに記憶されている）からｎＴｂＷ参照サンプルを取得し、且つ現在のブロックの左隣接参照サンプル（例えば、アレーｒｅｆＬに記憶されている）からｎＴｂＨ参照サンプルを取得する。イントラ予測ユニット１０６は、ｂｏｕｎｄａｒｙＳｉｚｅ参照サンプルを取得するためにｒｅｆＴに対してダウンサンプリングを呼び出し、且つｂｏｕｎｄａｒｙＳｉｚｅ参照サンプルをｒｅｆＴに記憶する。イントラ予測ユニット１０６は、ｂｏｕｎｄａｒｙＳｉｚｅ参照サンプルを取得するためにｒｅｆＬに対してダウンサンプリングを呼び出し、且つｂｏｕｎｄａｒｙＳｉｚｅ参照サンプルをｒｅｆＬに記憶する。
イントラ予測ユニット１０６は、バッファｐＴｅｍｐに記憶された参照サンプルの順序を示すために、変数ｉｓＴｒａｎｓｐｏｓｅｄをさらに取得することができる。例えば、ｉｓＴｒａｎｓｐｏｓｅｄが０（又は、ＦＡＬＳＥ）に等しいことは、イントラ予測ユニット１０６がまず現在のブロックの上隣接参照サンプルから取得された参照サンプルを呈し、次に、左隣接参照サンプルから取得された参照サンプルを呈することを示す。そうでなければ、ｉｓＴｒａｎｓｐｏｓｅｄが１（又は、ＴＲＵＥ）に等しいことは、イントラ予測ユニット１０６がまず現在のブロックの左隣接参照サンプルから取得された参照サンプルを呈し、次に、上隣接参照サンプルから取得された参照サンプルを呈することを示す。イントラ予測ユニット１０６は、レート歪み最適化方法を用いることで、又は隣接参照サンプルと現在のブロックとの相関の比較に基づいて、ｉｓＴｒａｎｓｐｏｓｅｄの値を決定することができる。ｉｓＴｒａｎｓｐｏｓｅｄの値は、符号化され且つビットストリームに書き込まれる必要のあるＭＩＰモードのパラメータの１つとして、エントロピー符号化ユニット１１５に送られる。
イントラ予測ユニット１０６は、ｉｓＴｒａｎｓｐｏｓｅｄによって示される順序に基づいて、ｒｅｆＴとｒｅｆＬにおける要素をバッファｐＴｅｍｐに入れる。
選択的に、イントラ予測ユニット１０６は以下のようにｐ［ｘ］を取得し、ｘ＝０、…、ｉｎＳｉｚｅ－１。
－ｍｉｐＳｉｚｅＩｄが２に等しい場合に、p[x]= pTemp[x + 1]- pTemp[0]。
－そうでなければ（ｍｉｐＳｉｚｅＩｄが２より小さい）、p[0]= pTemp[0]- (1 << (BitDepth-1))、p[x]= pTemp[x]- pTemp[0]。
ＢｉｔＤｅｐｔｈは、現在のブロックにおけるサンプルのカラーコンポーネントのビット深度である。ここで、カラーコンポーネントは、ＲＧＢコンポーネントのうちの１つ、ＹＵＶコンポーネントのうちの１つ、又はＹＣｂＣｒコンポーネントのうちの１つであることができ、例として、Ｙコンポーネントなどが挙げられる。
選択的に、イントラ予測ユニット１０６は以下のようにｐ［ｘ］を取得することができ、ｘ＝０、…、ｉｎＳｉｚｅ－１。
－ｍｉｐＳｉｚｅＩｄが２に等しい場合に、p[x]= pTemp[x + 1]- pTemp[0]。
－そうでなければ（ｍｉｐＳｉｚｅＩｄが２より小さい）、p[0]= (1 << (BitDepth-1)) - pTemp[0]、p[x]= pTemp[x]- pTemp[0]。
選択的に、イントラ予測ユニット１０６は、ｍｉｐＳｉｚｅＩｄの値を決定せず、統一的な計算方法でｐ［ｘ］の値を取得することが可能である。例えば、（１＜＜（ＢｉｔＤｅｐｔｈ－１））を付加要素としてバッファｐＴｅｍｐに追加する。この場合、イントラ予測ユニット１０６はｐ［ｘ］をｐＴｅｍｐ［ｘ＋１］－ｐＴｅｍｐ［０］として計算する。
ステップ６０２、イントラ予測ユニット１０６は、参照サンプル群及びＭＩＰ重み付け行列を用いて現在のブロックのＭＩＰ予測値を取得する。ＭＩＰ重み付け行列は、ＭＩＰモードに対応のＭＩＰモードインデックス値（ＭｏｄｅＩｄで表す）及びＭＩＰのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）に基づいて、予め定義されＭＩＰ重み付け行列群から選択される。
イントラ予測ユニット１０６は、現在のブロックにおける１つ又は複数のサンプル位置に対応の部分的な予測サンプルのＭＩＰ予測値（ｐｒｅｄＭｉｐ［ｘ］［ｙ］で表す）を取得する。図６に示すステップ６０２の例において、部分的な予測サンプルは、現在のブロックにおいて灰色の正方形としてマークされるサンプルである。予測モジュール６０１の入力は、ステップ６０１において取得された参照サンプルｐ［ｘ］であり、予測モジュール６０１は、ＭＩＰ重み付け行列及びシフトパラメータを用いて部分的な予測サンプルを計算する。シフトパラメータは、シフトナンバーパラメータ及びシフトオフセットパラメータを含む。
１つの可能な実施形態において、予測モジュール６０１は、その座標を（ｘ，ｙ）にすることで、ｐｒｅｄＭｉｐ［ｘ］［ｙ］で表される予測サンプルを取得する。ｐｒｅｄＭｉｐ［ｘ］［ｙ］の計算式は、式（５）又は式（６）に示すようである。
式（５）又は式（６）において、ｍＷｅｉｇｈｔ［ｉ］［ｊ］はＭＩＰ重み付け行列であり、行列要素は予め定められた定数であってもよく、又は、トレーニング方法などを用いて適応的に更新してもよい。当該トレーニング方法の入力は１つ又は複数の符号化された画像又はブロックであり、又は、外部装置によって符号器１００に提供される他のビットストリームからの画像である。ｆＯはｏＷを決定するためのシフトオフセットパラメータであり、ｓＷはシフトナンバーパラメータであり、p［ｉ］は参照サンプルを用いて計算されたＭＩＰ入力サンプル値であり、ｐＴｅｍｐ［０］は第１の一時的参照値におけるインデックス０に対応の値であり、「＞＞」はＶＶＣにおいて定義される２進右シフト演算子である。ＭＩＰモードを用いて現在のブロックに対してイントラ予測を行うと最終的に決定する場合に、イントラ予測ユニット１０６は、ｍＷｅｉｇｈｔ［ｉ］［ｊ］をエントロピー符号化ユニット１１５にさらに送ることができる。エントロピー符号化ユニット１１５は、ビットストリームにおける１つ又は複数のデータユニットにｍＷｅｉｇｈｔ［ｉ］［ｊ］を書き込むことができる。
予測モジュール６０１は、現在のブロックのサイズと現在のブロックのために用いられるＭＩＰモードとに基づいて、ｓＷとｆＯの値を決定することができる。１つの例において、予測モジュール６０１は、ルックアップテーブルを用いてｓＷとｆＯの値を取得する。
選択的に、予測モジュール６０１は、上記表４を利用することで、現在のブロックのサイズパラメータ及びＭＩＰモードに基づいてｓＷを決定することができる。
選択的に、予測モジュール６０１は、上記表５を利用することで、現在のブロックのサイズパラメータに基づいてｓＷを決定することもできる。
選択的に、予測モジュール６０１はさらに、ｓＷを定数値に直接に設定することができる。例えば、様々なサイズパラメータを有するブロック及び異なるＭＩＰモードに対して、予測モジュール６０１は、ｓＷを５に設定することができる。又は、様々なサイズパラメータを有するブロック及び異なるＭＩＰモードに対して、予測モジュール６０１は、ｓＷを６に設定することができる。又は、様々なサイズパラメータを有するブロック及び異なるＭＩＰモードに対して、予測モジュール６０１は、ｓＷを７に設定することができる。
選択的に、予測モジュール６０１は、上記表６を利用することで、現在のブロックのサイズパラメータ及びＭＩＰモードに基づいてｆＯを決定することができる。
選択的に、予測モジュール６０１は、上記表７を利用することで、現在のブロックのサイズパラメータに基づいてｆＯを決定することもできる。
選択的に、予測モジュール６０１はさらに、ｆＯを定数値（例えば、０～１００）に直接に設定することができる。例えば、様々なサイズパラメータを有するブロック及び異なるＭＩＰモードに対して、予測モジュール６０１は、ｆＯを３２に設定することができる。又は、予測モジュール６０１はｆＯを４６に設定する。又は、予測モジュール６０１はｆＯを５６に設定する。又は、予測モジュール６０１はｆＯを６６に設定する。
イントラ予測ユニット１０６は、ｐｒｅｄＭｉｐにおけるＭＩＰ予測値に対してクリッピング操作を行うことができる。ｉｓＴｒａｎｓｐｏｓｅｄが１（又は、ＴＲＵＥ）に等しい場合に、ｐｒｅｄＳｉｚｅ×ｐｒｅｄＳｉｚｅのアレーｐｒｅｄＭｉｐ［ｘ］［ｙ］（ｘ ＝０、...、ｐｒｅｄＳｉｚｅ－１、ｙ＝０、...、ｐｒｅｄＳｉｚｅ－１）はｐｒｅｄＴｅｍｐ［ｙ］［ｘ］＝ｐｒｅｄＭｉｐ［ｘ］［ｙ］に変換され、次に、ｐｒｅｄＭｉｐ＝ｐｒｅｄＴｅｍｐ。
例示として、選択的に、現在のブロックのサイズパラメータが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、イントラ予測ユニット１０６は、ｍｉｐＳｉｚｅＩｄを２に等しく設定し、且つ８×８のｐｒｅｄＭｉｐを取得する。
選択的に、現在のブロックのサイズパラメータが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、イントラ予測ユニット１０６は、ｍｉｐＳｉｚｅＩｄを１に等しく設定し、且つ４×４のｐｒｅｄＭｉｐを取得する。
ステップ６０３、イントラ予測ユニット１０６は、現在のブロックのイントラ予測値（ｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］としてアレーに記憶され、ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、...、ｎＴｂＨ－１）を以下のように取得する。
－イントラ予測ユニット１０６は、ｎＴｂＷがｐｒｅｄＳｉｚｅより大きく、又は、ｎＴｂＨがｐｒｅｄＳｉｚｅより大きいと決定すると、ｐｒｅｄＭｉｐを用いてｐｒｅｄＳａｍｐｌｅｓを取得するために、アップサンプリングプロセスを呼び出す。イントラ予測ユニット１０６は、現在のブロックにおける部分的なサンプル以外の残りのサンプルに対応の予測サンプルを取得する。図６において、イントラ予測ユニット１０６は、フィルタリングモジュール６０２を利用して、現在のブロックにおける部分的なサンプル以外の残りのサンプルに対応の予測サンプルを取得することができる。フィルタリングモジュール６０２の入力は、ステップ６０２における灰色の正方形としてマークされるサンプルである。フィルタリングモジュール６０２は１つ又は複数の補間フィルターを用いて、当該入力を利用して現在のブロックにおける部分的なサンプル以外の残りのサンプルに対応の予測サンプルを取得することができる。例えば、入力は、参照サンプル及び現在のブロックにおける１つ又は複数のサンプル位置の部分的な予測サンプルを含むことができる。又は、入力は、隣接サンプル及び現在のブロックにおける１つ又は複数のサンプル位置の部分的な予測サンプルを含むことができる。又は、入力は参照サンプル、隣接サンプル及び現在のブロックにおける１つ又は複数のサンプル位置の部分的な予測サンプルを含むことができる。例えば、選択的に、現在のブロックのサイズが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、イントラ予測ユニット１０６は、ｍｉｐＳｉｚｅＩｄが１に等しいと決定し、イントラ予測ユニット１０６はアップサンプリングプロセスを４×４のｐｒｅｄＭｉｐに適用することによって、現在のブロックの８×８のイントラ予測ブロックを取得する。
－そうでなければ、イントラ予測ユニット１０６は、現在のブロックのイントラ予測ブロックを現在のブロックのＭＩＰ予測ブロックに等しく設定し、即ち、ｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］（ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、...、ｎＴｂＨ－１）をｐｒｅｄＭｉｐ［ｘ］［ｙ］に等しく設定する。例えば、具体的に、現在のブロックのサイズパラメータが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、イントラ予測ユニット１０６は、ｍｉｐＳｉｚｅＩｄが２に等しいと決定し、サイズが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）現在のブロックのｐｒｅｄＳａｍｐｌｅｓを取得する。
このように、図６に示したフローのブロック図によれば、ステップ６０３の後、イントラ予測ユニット１０６は、現在のブロック（即ち、ＣＵ）のイントラ予測ブロックを取得することができ、即ち、現在のブロックの少なくとも１つのサンプルのイントラ予測値を決定することができる。
予測ユニット１０２は、現在のブロックのイントラ予測ブロックを出力する。第１の加算器１０７は、分割ユニット１０１の出力における現在のブロックと現在のブロックのイントラ予測ブロックとの差、即ち、残差ブロック（即ち、残差ＣＵ）を計算する。変換ユニット１０８は、残差ブロックを読み出し、且つ残差ブロックに対して１つ又は複数の変換操作を行うことによって係数を取得する。量子化ユニット１０９は係数を量子化し、且つ量子化係数（即ち、レベル）を出力する。
変換ユニット１０８は残差ブロックに対して第１の変換を行い、例として、ＤＣＴに基づいて初期に設計された整数変換が挙げられる。変換ユニット１０８は、二次変換を当該ブロックに適用することが許可されるか否かを決定する。適用が許可されると決定する場合に、変換ユニット１０８は、二次変換を第１の変換を行った後に取得した係数に適用するか否かをさらに決定する。ＬＦＮＳＴは二次変換の一例である。
図７を参照すると、図７は、本発明の実施形態に係るＬＦＮＳＴを行うフローの概略図を示している。図７において、ブロック７０１は残差ブロックを表す。
ステップ７０１、変換ユニット１０８は、ブロック７０１に対して第１の変換（即ち、コア変換）、例として、ＤＣＴに基づいて初期に設計された整数変換を行うことによって、第１の変換に対応の変換係数（「第１の変換係数」と呼ぶ）を含むブロック７０２を取得する。
ステップ７０２、変換ユニット１０８は、ブロック７０２における全部又は一部の第１の変換係数に対して、ＬＦＮＳＴなどの二次変換を行うことが許可されるか否かを決定する。
例示として、選択的に、ＬＦＮＳＴを含む変換ブロックのイントラ予測モードがＭＩＰモードであり、且つ変換ブロックの幅と高さの最小値が８以上である場合に、変換ユニット１０８が変換ブロックに対してＬＦＮＳＴを行うことが許可される。
選択的に、ＬＦＮＳＴを含む変換ブロックのイントラ予測モードがＭＩＰモードであり、且つｍｉｐＳｉｚｅＩｄの値が設定された値（例えば、２）又は複数の設定された値（例えば１、２）のうちの１つに等しい場合に、変換ユニット１０８が変換ブロックに対してＬＦＮＳＴを行うことが許可される。
変換ユニット１０８が変換ブロックに対してＬＦＮＳＴを行うことが許可される場合に、変換ユニット１０８はＬＦＮＳＴパラメータ、例として、ｌｆｎｓｔ＿ｉｎｄｅｘを決定する。ｌｆｎｓｔ＿ｉｎｄｅｘが０に等しいことは、変換ユニット１０８が変換ブロックに対してＬＦＮＳＴを行わないことを示す。ｌｆｎｓｔ＿ｉｎｄｅｘが０より大きいことは、ＬＦＮＳＴ変換カーネル候補セットにおける変換カーネルを用いて変換ブロックに対してＬＦＮＳＴを行うことを示す。
変換ユニット１０８は、従来のレート歪み最適化方法を用いてｌｆｎｓｔ＿ｉｎｄｅｘの値を決定することができる。まず、変換ユニット１０８は、変換ブロックに対してＬＦＮＳＴを行わない場合に、第１のコスト結果を取得する。
変換ユニット１０８は、ＭＩＰパラメータに基づいてＬＦＮＳＴ変換カーネル候補セットを選択する。ＭＩＰパラメータは、ＭＩＰモードインデックス値（即ち、ｍｏｄｅｌＩｄ）及びＭＩＰ転置指示パラメータ（即ち、ｉｓＴｒａｎｓｐｏｓｅｄ）のうちの１つを含むことができる。
変換ユニット１０８は、変数ｐｒｅｄＭｏｄｅＩｎｔｒａの値をｍｏｄｅｌＩｄの値に等しく設定する。変換ユニット１０８はブロック７０２において第１の変換係数の一部、例として、サブブロック７００１、７００２及び７００３における係数を選択し、且つサブブロックにおける係数に対してＬＦＮＳＴを行うための変換カーネルを決定する。サブブロックのサイズは設定された値、例として、８×８であることができる。変換ユニット１０８はｐｒｅｄＭｏｄｅＩｎｔｒａの値に基づいて、ＬＦＮＳＴ変換カーネル候補セットのインデックス値（即ち、ｌｆｎｓｔＴｒＳｅｔＩｄｘ）を決定する。ＭＩＰモードのもとのブロック符号化について、変換ユニット１０８は、表１０に示したようなルックアップテーブルを用いてｌｆｎｓｔＴｒＳｅｔＩｄｘの値を取得することができる。
変換ユニット１０８は、従来のレート歪み最適化方法を用いてｌｆｎｓｔ＿ｉｎｄｅｘの値を決定することができる（即ち、この値が０より大きいことは、ＬＦＮＳＴ変換カーネル候補セットに使用される変換カーネルがｌｆｎｓｔＴｒＳｅｔＩｄｘによって示されることを示す）。変換ユニット１０８はｌｆｎｓｔ＿ｉｎｄｅｘの値を、ＬＦＮＳＴ変換カーネル候補セットにおける変換カーネルのインデックスに設定する。これで、コスト関数には最小値を有し、また、第２のコスト結果が取得される。
第１のコスト結果が第２のコスト結果より大きい場合に、変換ユニット１０８は、変換ブロックに対してＬＦＮＳＴを行うと決定し、且つ変換カーネルのインデックスを示すｌｆｎｓｔ＿ｉｎｄｅｘをエントロピー符号化ユニット１１５に送る。そうでなければ、変換ユニット１０８は変換ブロックに対してＬＦＮＳＴを行わない場合に、ｌｆｎｓｔ＿ｖａｌｕｅを０に等しく設定し、且つＬＦＮＳＴを行わないことを示すｌｆｎｓｔ＿ｉｎｄｅｘをエントロピー符号化ユニット１１５に送る。
ｌｆｎｓｔ＿ｉｎｄｅｘが０に等しくない場合に、変換ユニット１０８は、サブブロック７００１、７００２及び７００３からの係数を用いて変換ブロックに対してＬＦＮＳＴを行い、ＬＦＮＳＴ係数を取得し、且つＬＦＮＳＴ係数をブロック７０３のサブブロック７０１１、７０１２及び７０１３に入れる。ｄ［ｘ］［ｙ］が第１の変換係数のブロックであると仮設し、ここで、ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、...、ｎＴｂＨ－１、ｎＴｂＷとｎＴｂＨはそれぞれ、ブロック７０３の幅と高さである。ｖ［ｘ］がＬＦＮＳＴ係数のブロックであると仮設し、ここで、ｘ＝０、...、nLfnstOutＳｉze－１、nLfnstOutSize =（nTbW> = 8 && nTbH> = 8）? 48:16。
選択的に、変換ユニット１０８は、以下の命令を採用して変換係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（８）に示したようである。ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
選択的に、ｉｓＴｒａｎｓｐｏｓｅｄが０に等しい場合に、変換ユニット１０８は、以下の命令を採用してＬＦＮＳＴ係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（１０）に示したようである。
ｉｓＴｒａｎｓｐｏｓｅｄが１に等しい場合に、変換ユニット１０８は、以下の命令を採用してＬＦＮＳＴ係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（１１）に示したようである。
選択的に、ｉｓＴｒａｎｓｐｏｓｅｄが１に等しい場合に、変換ユニット２０８は、以下の命令を採用してＬＦＮＳＴ係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（１０）に示したようである。
ｉｓＴｒａｎｓｐｏｓｅｄが０に等しい場合に、変換ユニット２０８は、以下の命令を採用してＬＦＮＳＴ係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（１１）に示したようである。
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
さらに、変換ユニット１０８は、従来のイントラ予測モード（即ち、角度イントラ予測モード、ＤＣモード及びＰＬＡＮＡＲモードなど）のもとで符号化される変換ブロックにｌｆｎｓｔ＿ｉｎｄｅｘの値を決定することができる。ＭＩＰモードのもとで変換ブロックのｌｆｎｓｔ＿ｉｎｄｅｘの値を決定するために用いられるレート歪み最適化方法と類似で、変換ブロックに対してＬＦＮＳＴを行わずに第１のコスト結果を決定する。
変換ユニット１０８は、ルックアップテーブルを用いることで、従来のイントラ予測モードのモードインデックス値（ｐｒｅｄＭｏｄｅＩｎｔｒａに割り当てられ）に基づいて、ｌｆｎｓｔＴｒＳｅｔＩｄｘの値を決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定する。具体的は上記表１１に示したようである。
次に、変換ユニット１０８は、従来のレート歪み最適化方法を用いてｌｆｎｓｔ＿ｉｎｄｅｘの値を決定することができる（即ち、この値が０より大きいことは、ＬＦＮＳＴ変換カーネル候補セットに使用される変換カーネルがｌｆｎｓｔＴｒＳｅｔＩｄｘによって示されることを示す）。変換ユニット１０８はｌｆｎｓｔ＿ｉｎｄｅｘの値を、ＬＦＮＳＴ変換カーネル候補セットにおける変換カーネルのインデックスに設定する。これで、コスト関数には最小値を有し、また、第２のコスト結果が取得される。
第１のコスト結果が第２のコスト結果より大きい場合に、変換ユニット１０８は、変換ブロックに対してＬＦＮＳＴを行うと決定し、且つ変換カーネルのインデックスを示すｌｆｎｓｔ＿ｉｎｄｅｘをエントロピー符号化ユニット１１５に送る。そうでなければ、変換ユニット１０８は変換ブロックに対してＬＦＮＳＴを行わない場合に、ｌｆｎｓｔ＿ｖａｌｕｅを０に等しく設定し、且つＬＦＮＳＴを行わないことを示すｌｆｎｓｔ＿ｉｎｄｅｘをエントロピー符号化ユニット１１５に送る。
ｌｆｎｓｔ＿ｉｎｄｅｘが０に等しくない場合に、変換ユニット１０８は、サブブロック７００１、７００２及び７００３からの係数を用いて変換ブロックに対してＬＦＮＳＴを行い、ＬＦＮＳＴ係数を取得し、且つＬＦＮＳＴ係数をブロック７０３のサブブロック７０１１、７０１２及び７０１３に入れる。ｄ［ｘ］［ｙ］が第１の変換係数のブロックであると仮設し、ここで、ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、...、ｎＴｂＨ－１、ｎＴｂＷとｎＴｂＨはそれぞれ、ブロック７０３の幅と高さである。ｖ［ｘ］がＬＦＮＳＴ係数のブロックであると仮設し、ここで、ｘ＝０、...、nLfnstOutＳｉze－１、nLfnstOutSize =（nTbW> = 8 && nTbH> = 8）? 48:16。
選択的に、ｐｒｅｄＭｏｄｅＩｎｔｒａが３４以下である場合に、変換ユニット１０８は、以下の命令を採用してＬＦＮＳＴ係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（１０）に示したようである。
選択的に、ｐｒｅｄＭｏｄｅＩｎｔｒａが３４より大きい場合に、変換ユニット１０８は、以下の命令を採用してＬＦＮＳＴ係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（１１）に示したようである。
選択的に、ｐｒｅｄＭｏｄｅＩｎｔｒａが３４より大きい場合に、変換ユニット１０８は、以下の命令を採用してＬＦＮＳＴ係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（１０）に示したようである。
選択的に、ｐｒｅｄＭｏｄｅＩｎｔｒａが３４以下である場合に、変換ユニット１０８は、以下の命令を採用してＬＦＮＳＴ係数のブロック７０３を取得し、且つｄ［ｘ］［ｙ］におけるＬＦＮＳＴ係数のブロック７０３を量子化ユニット１０９に送る。具体的は上記式（１１）に示したようである。
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
さらに、逆量子化ユニット１１０は再構成係数を出力するために、量子化係数に対してスケーリング操作を行う。逆変換ユニット１１１は、変換ユニット１０８における変換に対応の１つ又は複数の逆変換を行い、且つ再構成残差を出力する。第２の加算器１１２は、再構成残差と予測ユニット１０２からの現在のブロックのイントラ予測ブロックとを加算することによって、再構成ＣＵを算出する。第２の加算器１１２はさらに、その出力をイントラ予測参照として用いられるために、予測ユニット１０２に送る。
フィルタリングユニット１１３の出力は、復号化された画像又はサブ画像であり、これらの復号化された画像又はサブ画像はＤＰＢユニット１１４に送られる。ＤＰＢユニット１１４は、タイミング及び制御情報に基づいて、復号化された画像を出力する。ＤＰＢユニット１１４に記憶された画像は、予測ユニット１０２がインター予測又はイントラ予測を行うための参照として用いられることができる。
エントロピー符号化ユニット１１５は、符号器１００におけるユニットからのパラメータ（復号化された画像の取得に必要である）、制御パラメータ及び補足情報を２進表現に変換し、且つ各データユニットのシンタックス構造に基づいて、上記２進表現を生成されたビットストリーム（又は、「ビデオビットストリーム」と呼ぶ）に書き込む。具体的は表９Ａと表９Ｂに示したようである。
表９Ａにおけるシンタックス構造を用いて、符号化ユニットにおける変換ブロックの幅と高さの最小値が８以上である（即ち、幅と高さがいずれも８以上である）場合に、エントロピー符号化ユニット１１５は、ＭＩＰモードを用いて当該符号化ユニットのｌｆｎｓｔ＿ｉｎｄｅｘを符号化する。別の選択可能な条件は、幅と高さがいずれも第１の値（例えば、８）以上であり、且つ幅と高さの合計が第２の値（例えば、１６）以上であると設定されてもよい。
表９Ｂにおけるシンタックス構造を用いて、符号化ユニットのｍｉｐＳｉｚｅＩｄが２に等しい場合に、エントロピー符号化ユニット１１５は、ＭＩＰモードを用いて符号化ユニットのｌｆｎｓｔ＿ｉｎｄｅｘを符号化する。別の選択可能な条件は、符号化ユニットのｍｉｐＳｉｚｅＩｄが複数の値（例えば、１、２）のうちの１つに等しいと設定されてもよい。
図８を参照すると、図８は、本発明の実施形態に係るＬＦＮＳＴパラメータの符号化のフローチャートを示している。図８に示すように、このフローは以下を含むことができる。
Ｓ８０１：エントロピー符号化ユニット１１５は、ＬＦＮＳＴパラメータを符号化するか否かを決定するために、上記条件をチェックする。
Ｓ８０２：エントロピー符号化ユニット１１５は、コンテキスト適応バイナリ算術符号化（ＣＡＢＡＣ）を用いてＬＦＮＳＴパラメータを符号化する。
なお、ステップＳ８０１において、エントロピー符号化ユニット１１５はＬＦＮＳＴパラメータ、例として、ｌｆｎｓｔ＿ｉｎｄｅｘの値を決定するために、チェックを行う。次に、ステップＳ８０２において、表９Ａと表９Ｂに示した記述子が「ａｅ（ｖ）」であるＣＡＢＡＣを用いてｌｆｎｓｔ＿ｉｎｄｅｘの値を符号化する。
本発明の実施形態において、符号器１００は、プロセッサと符号化プログラムを記憶する記憶媒体とを備えた計算デバイスであってもよい。プロセッサが符号化プログラムを読み出して実行すると、符号器１００は入力ビデオを読み出し且つ対応のビットストリームを生成する。また、符号器１００は、１つ又は複数のチップを備えた計算デバイスであってもよい。チップで集積回路として実装されたユニットは、図１における対応のユニットと類似の接続及びデータ交換機能を有する。
本実施形態において、符号化方法が提供される。現在のブロックの予測パラメータを決定する。予測パラメータは予測モードパラメータを含む。予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定する。予測残差値に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定する。ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込む。このように、ＭＩＰモードでは、符号化性能を確保した上で、複雑度を下げ、同時に符号化のプロセスに必要な記憶スペースを減らし、符号化効率を効果的に高めることができる。また、ＬＦＮＳＴ技術がＭＩＰモード予測に適用される場合に、ＭＩＰパラメータの導入により、ＬＦＮＳＴがより柔軟になり、符号化効率がさらに向上することができる。
本発明の別の実施形態において、図９を参照すると、図９は、本発明の実施形態に係る復号化方法のフローチャートを示している。図９に示すように、当該方法は、以下を含むことができる。
Ｓ９０１：現在のブロックの予測パラメータ及びＬＦＮＳＴパラメータを取得するために、ビットストリームを解析する。予測パラメータは予測モードパラメータを含む。
なお、復号化しようとする画像は複数の画像ブロックに分割されることができ、各復号化しようとする画像ブロックは、復号化ブロックと呼ばれ得る。ここで、各復号化ブロックは、第１の画像コンポーネント、第２の画像コンポーネント及び第３の画像コンポーネントを含むことができる。現在のブロックは、ビデオの画像における第１の画像コンポーネント、第２の画像コンポーネント又は第３の画像コンポーネントの予測が現在実行されようとする復号化ブロックである。
また、予測パラメータは予測モードパラメータを含むことができ、予測モードパラメータは、現在のブロックが採用した予測モードを示すために用いられ、異なる予測モードは、異なる予測モードパラメータに対応することに留意されたい。予測モードは一般に、インター予測モード、従来のイントラ予測モード、及び従来と異なるイントラ予測モードを含む。従来のイントラ予測モードは、ＤＣモード、ＰＬＡＮＡＲモード、角度イントラ予測モードなどを含むことができる。従来と異なるイントラ予測モードは、ＭＩＰモード、ＣＣＬＭモード、ＩＢＣモード、ＰＬＴモードなどを含むことができる。換言すると、符号器は、最適な予測モードを選択して現在のブロックを符号化する。このプロセスにおいて、現在のブロックの予測モードを決定することができ、それに対応して、予測モードパラメータを取得することができる。その後、予測モードパラメータを含む予測パラメータがビットストリームに書き込まれ、符号器から復号器に送られる。
このように、復号器において、ビットストリームを解析することによって現在のブロックの予測パラメータを取得することができ、解析によって取得される予測パラメータに含まれる予測モードパラメータは、現在のブロックに対してＭＩＰモードが使用されるか否かを決定するために用いられることができる。
Ｓ９０２：予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。
なお、現在のブロックに対して、本発明の実施形態において、ＭＩＰモードを用いて現在のブロックの彩度コンポーネントに対してイントラ予測を行う。このプロセスにおいて、まず現在のブロックの隣接サンプル値を取得し、次に、現在のブロックの隣接サンプル値に基づいて、現在のブロックのＭＩＰ入力サンプル値を決定する。
現在のブロックの隣接サンプル値は、現在のブロックの左隣接サンプル値及び現在のブロックの上隣接サンプル値を含むことができる。即ち、現在のブロックの左隣接サンプル値及び上隣接サンプル値に基づいて、現在のブロックのＭＩＰ入力サンプル値を決定することができる。
いくつかの実施形態において、上記現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定することは、以下を含むことができる。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定する。
現在のブロックの隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得する。
上記現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、第２の定数値と第１の一時的参照値におけるインデックス０に対応の値との差に設定し、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、第１の一時的参照値におけるインデックスｉに対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定する。ｉは０より大きい整数である。
上記現在のブロックのブロックサイズインデックス値が予め設定された範囲外にある場合に、ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、第１の一時的参照値におけるインデックス（ｊ＋１）に対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定する。ｊは０以上の整数である。
さらに、上記現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、上記方法はさらに、以下を含むことができる。
現在のブロックの隣接サンプル値のビット深度に基づいて、第２の定数値を決定し、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、第１の一時的参照値におけるインデックス０に対応の値と第２の定数値との差に設定し、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、第１の一時的参照値におけるインデックスｉに対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定する。ｉは０より大きい整数である。
現在のブロックの隣接サンプル値をダウンサンプリングした後、第１の一時的参照値を取得できることに留意されたい。第１の一時的参照値について、具体的には、フィルタリングされた隣接サンプル値をバッファ（ｐＴｅｍｐで表す）にバッファリングされることができる。第１の一時的参照値におけるインデックス０に対応の値は、ｐＴｅｍｐ［０］を指し、第１の一時的参照値におけるインデックスｉに対応の値は、ｐＴｅｍｐ［ｉ］を指す。
本発明の実施態様において、予測パラメータは、予測モードパラメータに加えて、現在のブロックのサイズパラメータをさらに含むことができる。現在のブロックのサイズパラメータは、現在のブロックの幅（ｎＴｂＷで表す）及び高さ（ｎＴｂＨで表す）を含むことができる。また、現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値（即ち、ｍｉｐＳｉｚｅＩｄ）を決定することができる。
また、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）が予め設定された範囲内にあるか否かに基づいて、現在のブロックのサイズパラメータの値が予め設定された範囲内にあるか否かを決定できることに留意されたい。具体的に、ｍｉｐＳｉｚｅＩｄ＝０又は１の場合に、現在のブロックのブロックサイズインデックス値が予め設定された範囲内にあり、即ち、現在のブロックのサイズパラメータの値が予め設定された範囲内にあることが示される。ｍｉｐＳｉｚｅＩｄ＝２の場合に、現在のブロックのブロックサイズインデックス値が予め設定された範囲外にあり、即ち、現在のブロックのサイズパラメータの値が予め設定された範囲内にないことが示される。
換言すると、ＭＩＰ入力サンプル値は、バッファ（ｐＴｅｍｐで表す）、現在のブロックのブロックサイズインデックス値（ＭｉｐＳｉｚｅＩｄで表す）、現在のブロックの隣接サンプル値のビット深度（ＢｉｔＤｅｐｔｈで表す）によって決定され、ＭＩＰ入力サンプル値に対応の入力サンプルの数は、現在のブロックのブロックサイズインデックス値に関連する。最後に、ＭＩＰ入力サンプル値におけるインデックスｘに対応の値（ｐ［ｘ］で表す）が取得されることができる。
さらに、いくつかの実施形態において、上記現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定することは、以下を含むことができる。
第２の定数値を２の累乗に設定する。累乗の指数は整数であり、現在のブロックの隣接サンプル値のビット深度から１を引いたものに等しい。
又は、いくつかの実施形態において、上記現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定することは、以下を含むことができる。
「１」を２進左シフトすることによって第２の定数値を取得する。左シフトされたビット数は、現在のブロックの隣接サンプル値のビット深度から１を引いたものに等しい。
換言すると、現在のブロックの隣接サンプル値のビット深度（ＢｉｔＤｅｐｔｈで表す）が取得された後、第２の定数値は１＜＜（ＢｉｔＤｅｐｔｈ－１）又は２＾（ＢｉｔＤｅｐｔｈ－１）として表されることができる。このように、現在のブロックのサイズパラメータの値が予め設定された範囲内にある場合に、第２の定数値と合わせて現在のブロックのＭＩＰ入力サンプル値を決定することができる。
また、ＭＩＰ入力サンプルは、行列乗算演算に用いられる行列ベクトルであることに留意されたい。現在の関連技術方案は以下の通りである。バッファ（ｐＴｅｍｐで表す）、現在のブロックの種類（即ち、ｍｉｐＳｉｚｅＩｄで表す現在のブロックのブロックサイズインデックス値）、現在のブロックの隣接サンプル値のビット深度（ＢｉｔＤｅｐｔｈで表す）及びＭＩＰ入力サンプルの数に基づいて、ＭＩＰ入力サンプル値におけるインデックスｘに対応の値（ｐ［ｘ］で表す）を最終的に取得する。
１つの可能な実施態様において、ｍｉｐＳｉｚｅＩｄ＝０又は１の場合に、１＜＜（ＢｉｔＤｅｐｔｈ－１）からｐＴｅｍｐ［０］を引いたものをｐ［０］とし、ｘが０でない場合に、ｐＴｅｍｐ［ｘ］からｐＴｅｍｐ［０］を引いたものをｐ［ｘ］とする。具体的は上記式（２）に示した通りである。
別の可能な実施態様において、ｍｉｐＳｉｚｅＩｄ＝０又は１の場合に、ｐＴｅｍｐ［０］から１＜＜（ＢｉｔＤｅｐｔｈ－１）を引いたものをｐ［０］とし、ｘが０でない場合に、ｐＴｅｍｐ［ｘ］からｐＴｅｍｐ［０］を引いたものをｐ［ｘ］とする。具体的は上記式（３）に示した通りである。
もう１つの可能な実施形態において、ｍｉｐＳｉｚｅＩｄ＝２の場合に、ｐＴｅｍｐ［ｘ＋１］からｐＴｅｍｐ［０］を引いたものをｐ［ｘ］とする。具体的は上記式（４）に示した通りである。
上記以外に、本発明の実施形態において、ｍｉｐＳｉｚｅＩｄの値を決定せず、統一的な計算方法でｐ［ｘ］の値を取得することも可能である。この場合、本発明の実施形態において、（１＜＜（ＢｉｔＤｅｐｔｈ－１））を付加要素として、バッファｐＴｅｍｐの末尾に追加する。ｐ［ｘ］を、ｐ［ｘ］＝ｐＴｅｍｐ［ｘ＋１］－ｐＴｅｍｐ［０］に直接に設定することができ、ｘ＝０、...、ｉｎＳｉｚｅ－１。
このように、現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定した後、現在のブロックのＭＩＰ予測値をさらに決定することができる。
Ｓ９０３：ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。
ＭＩＰ予測値は、現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
なお、シフトパラメータは、シフトオフセットパラメータ及びシフトナンバーパラメータを含むことができる。Ｓ９０３について、上記ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定することは、以下を含むことができる。
シフトオフセットパラメータの値に基づいて、ＭＩＰ入力サンプル値の合計とシフトオフセットパラメータとの乗積を決定する。シフトオフセットパラメータの値は、固定の定数である。
シフトナンバーパラメータの値に基づいて第１の定数値を決定する。シフトナンバーパラメータの値は、固定の定数である。
第１のオフセットの値を第１の定数値と上記乗積との差に設定する。
予測パラメータに基づいて、現在のブロックのＭＩＰ重み付け行列を決定する。
ＭＩＰ重み付け行列、ＭＩＰ入力サンプル値、シフトナンバーパラメータ及び第１のオフセットに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。
なお、シフトオフセットパラメータは、シフト補償パラメータ又はオフセット因子と呼ばれてもよく、ｆＯで表されることができる。本発明の実施形態において、シフトオフセットパラメータの値は固定の定数、例えば、３２、４６、５６、６６、又は３２などに設定されることができる。さらに、シフトオフセットパラメータの値は、シフト・オフセット・パラメータ・テーブルに関連するように設定されることができ、シフトオフセットパラメータの値は、ルックアップテーブルによって決定されることができる。本明細書では、それについては限定されない。
なお、シフトナンバーパラメータはシフト因子、シフトビット数又は重みシフト値などと呼ばれてもよく、ｓＷ、ｓｈｉｆｔ又はｗｅｉｇｈｔ ｓｈｉｆｔで表されることができる。本発明の実施形態において、シフトナンバーパラメータは一般的に、ｓＷで表される。本発明の実施形態において、シフトナンバーパラメータの値は固定の定数、例えば、５、６、又は７などに設定されることができる。さらに、シフトナンバーパラメータの値は、シフト・ナンバー・パラメータ・テーブルに関連するように設定されることができ、シフトナンバーパラメータの値は、ルックアップテーブルによって決定されることができる。本明細書では、それについては限定されない。
また、第１のオフセットはｏＷで表されることができ、第１のオフセットは、シフトナンバーパラメータとシフトオフセットパラメータの両方に関連する。
なお、予測パラメータは、予測モードパラメータ及び現在のブロックのサイズパラメータを含むことができる。予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、重み付け行列テーブルは予めに確立されることができ、当該重み付け行列テーブルはメモリ又は記憶ユニットに記憶されている。ここのメモリ又は記憶ユニットは、復号器に集積されてもよいし、又は、単独に設けられてもよい。このように、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄ）及びＭＩＰモードインデックス値（ｍｏｄｅｌＩｄ）に基づいて、現在のブロックのために使用される必要のあるＭＩＰ重み付け行列（ＭＩＰ重み行列、又はＭＩＰ行列とも呼ばれる）は、ルックアップテーブルによって決定されることができ、ｍＷｅｉｇｈｔ［ｘ］［ｙ］で表される。
また、復号器において、シフト・ナンバー・パラメータ・テーブルが予めに確立されることができ、当該シフト・ナンバー・パラメータ・テーブルもメモリ又は記憶ユニットに記憶されている。ここのメモリ又は記憶ユニットは、復号器に集積されてもよいし、又は、単独に設けられてもよい。本発明の実施形態において、シフトナンバーパラメータ（ｓＷ）は以下のいくつかの方法で決定されることができる。
１つの可能な実施形態において、異なるブロックサイズ及び異なるＭＩＰモードインデックス値に対して、シフトナンバーパラメータは異なってもよい。いくつかの実施形態において、上記方法以下をさらに含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのＭＩＰモードインデックス値を取得するようにビットストリームを解析する。
ＭＩＰモードインデックス値に基づいて、第１の予め設定されたルックアップテーブルからＭＩＰモードインデックス値に対応の値をクエリーする。第１の予め設定されたルックアップテーブルは、ＭＩＰモードインデックス値とシフトナンバーパラメータの値との対応関係を記録するために用いられる。
クエリーした値をシフトナンバーパラメータの値として決定する。
なお、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）及びＭＩＰモードインデックス値（ｍｏｄｅｌＩｄ）に基づいて、シフトナンバーパラメータの値をクエリーすることができる。上記表４に示した第１の予め設定されたルックアップテーブルにおいて、異なるｍｉｐＳｉｚｅＩｄ及びｍｏｄｅｌＩｄに対して、ルックアップテーブルによって、行列乗算において必要とされるシフトナンバーパラメータを決定することができる。
ただし、復号器側では、表４をルックアップテーブルの形でメモリ又は記憶ユニットに記憶する必要がある。しかし、記憶にはコストがかかり、ルックアップのプロセスにもコストがかかる。表４におけるシフト因子は、現在のブロックのブロックサイズ及びＭＩＰモードインデックス値の両方に関連するため、メモリの占有量が増え、計算複雑度も増加する。
メモリの占有を低減し、計算複雑度を下げるために、本発明の実施形態において、シフト因子の決定方法を簡略化することができる。
別の可能な実施態様において、シフトナンバーパラメータの値を、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数に設定することができる。例えば、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトナンバーパラメータの値を５に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトナンバーパラメータの値を６に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトナンバーパラメータの値を７に設定することができる。本発明の実施形態において、シフトナンバーパラメータの値を６に設定することが好ましいが、それについては限定されない。
もう１つの可能な実施形態において、シフトナンバーパラメータの値について、上記方法は以下をさらに含む。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定する。
上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定する。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定できることに留意されたい。いくつかの実施形態において、上記現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定することは、以下を含むことができる。
現在のブロックの幅と高さがいずれも４に等しい場合に、現在のブロックのブロックサイズインデックス値を０に設定する。
現在のブロックの幅と高さがいずれも８に等しいか、又は現在のブロックの幅と高さの一方が４に等しい場合に、現在のブロックのブロックサイズインデックス値を１に設定する。
現在のブロックの幅と高さが上記条件を満たさない場合に、現在のブロックのブロックサイズインデックス値を２に設定する。
このように、現在のブロックのブロックサイズインデックス値を決定した後、現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値をさらに決定することができる。
選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定することは、以下を含むことができる。
ブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、現在のブロックのブロックサイズインデックス値に対応のシフトナンバーパラメータの値が５、６又は５にそれぞれ等しいと決定する。
選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定することは、以下を含むことができる。
シフトナンバーパラメータの値を、現在のブロックのブロックサイズインデックス値に対応の第１の予め設定された値に対する現在のブロックの幅又は高さの比率に等しく設定する。
ここで、第１の予め設定された値は、現在のブロックの境界から取得されたＭＩＰ入力サンプル値の数を表す。この場合、上記方法は以下を含むこともできる。
現在のブロックのブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、現在のブロックのブロックサイズインデックス値に対応の第１の予め設定された値が２、４又は４にそれぞれ等しいと決定する。
換言すると、第１の予め設定された値が、現在のブロックの境界から取得されたＭＩＰ入力サンプル値の数を表すとき、現在のブロックのブロックサイズインデックス値が０に等しい場合に、対応の第１の予め設定された値は２に等しく、現在のブロックのブロックサイズインデックス値が１に等しい場合に、対応の第１の予め設定された値は４に等しく、現在のブロックのブロックサイズインデックス値が２に等しい場合に、対応の第１の予め設定された値は４に等しい。このように、対応の第１の予め設定された値に対する現在のブロックの幅又は高さの比率に基づいて、シフトナンバーパラメータの値を決定することができる。
選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定することは、以下を含むことができる。
シフトナンバーパラメータの値を、現在のブロックのブロックサイズインデックス値に対応の第２の予め設定された値に対する現在のブロックの幅又は高さの比率に等しく設定する。
ここで、第２の予め設定された値は、ＭＩＰ重み付け行列を直接に使用することによって取得される現在のブロックのＭＩＰ予測ブロックのサイズを表す。この場合、上記方法は以下を含むこともできる。
現在のブロックのブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、現在のブロックのブロックサイズインデックス値に対応の第２の予め設定された値が４、４又は８にそれぞれ等しいと決定する。
換言すると、第２の予め設定された値が、ＭＩＰ重み付け行列を直接に使用することによって取得される現在のブロックのＭＩＰ予測ブロックのサイズを表すとき、現在のブロックのブロックサイズインデックス値が０に等しい場合に、対応の第２の予め設定された値は４に等しく、現在のブロックのブロックサイズインデックス値が１に等しい場合に、対応の第２の予め設定された値は４に等しく、現在のブロックのブロックサイズインデックス値が２に等しい場合に、対応の第２の予め設定された値は８に等しい。このように、対応の第２の予め設定された値に対する現在のブロックの幅又は高さの比率に基づいて、シフトナンバーパラメータの値を決定することができる。
もう１つの可能な実施形態において、シフト・ナンバー・パラメータ・テーブルを最小化することができ、また、依然としてルックアップテーブルの方法によってシフトナンバーパラメータの値を決定する。選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトナンバーパラメータの値を決定することは、以下を含むことができる。
ブロックサイズインデックス値に基づいて、第２の予め設定されたルックアップテーブルからブロックサイズインデックス値に対応の値をクエリーする。第２の予め設定されたルックアップテーブルは、ブロックサイズインデックス値とシフトナンバーパラメータの値との対応関係を記録するために用いられる。
クエリーした値をシフトナンバーパラメータの値として決定する。
なお、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）のみに基づいて、シフトナンバーパラメータの値をクエリーすることができる。上記表５に示した第２の予め設定されたルックアップテーブルにおいて、各ブロックサイズインデックス値は、固定値に対応することができる。即ち、各ブロックのサイズ又は各ブロックのサイズセットは、表５に示したような固定したシフトナンバーパラメータの値を有することができる。
上記表５によれば、現在のブロックのブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、ブロックサイズインデックス値に対応のシフトナンバーパラメータの値が５、６又は５にそれぞれ等しいと決定することができる。
このように、シフトナンバーパラメータの決定方法を簡略化することで、特にシフト・ナンバー・パラメータ・テーブルを最小化し又はシフトナンバーパラメータの値を固定することで、ルックアップテーブルの記憶量を最小化することができ、計算複雑度を増やさずに、ＭＩＰモードのもとのシフト因子テーブルの記憶に占有されるメモリを低減することができる。
さらに、復号器において、シフト・オフセット・パラメータ・テーブルが予めに確立されることができ、当該シフト・オフセット・パラメータ・テーブルもメモリ又は記憶ユニットに記憶されている。ここのメモリ又は記憶ユニットは、復号器に集積されてもよいし、又は、単独に設けられてもよい。本発明の実施形態において、シフトオフセットパラメータ（ｆＯ）は以下のいくつかの方法で決定されることができる。
１つの可能な実施形態において、異なるブロックサイズ及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータは異なってもよい。いくつかの実施形態において、上記方法以下をさらに含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのＭＩＰモードインデックス値を取得するようにビットストリームを解析する。
ＭＩＰモードインデックス値に基づいて、第３の予め設定されたルックアップテーブルからＭＩＰモードインデックス値に対応の値をクエリーする。第３の予め設定されたルックアップテーブルは、ＭＩＰモードインデックス値とシフトオフセットパラメータの値との対応関係を記録するために用いられる。
クエリーした値をシフトオフセットパラメータの値として決定する。
なお、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）及びＭＩＰモードインデックス値（ｍｏｄｅｌＩｄ）に基づいて、シフトオフセットパラメータの値をクエリーすることができる。上記表６に示した第３の予め設定されたルックアップテーブルにおいて、異なるｍｉｐＳｉｚｅＩｄ及びｍｏｄｅｌＩｄに対して、ルックアップテーブルによって、行列乗算において必要とされるシフトオフセットパラメータを決定することができる。
ただし、復号器側では、表６をルックアップテーブルの形でメモリ又は記憶ユニットに記憶する必要がある。しかし、記憶にはコストがかかり、ルックアップのプロセスにもコストがかかる。表６におけるシフトオフセットパラメータの値は、現在のブロックのブロックサイズ及びＭＩＰモードインデックス値の両方に関連するため、メモリの占有量が増え、計算複雑度も増加する。
メモリの占有を低減し、計算複雑度を下げるために、本発明の実施形態において、シフトオフセットパラメータの決定方法を簡略化することができる。
別の可能な実施態様において、シフトオフセットパラメータの値を、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数に設定することができる。一般的に、当該固定の定数は０～１００の範囲にある。例えば、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータの値を３２に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータの値を４６に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータの値を５６に設定することができる。又は、異なるブロックサイズインデックス値及び異なるＭＩＰモードインデックス値に対して、シフトオフセットパラメータの値を６６に設定することができる。本発明の実施形態において、シフトオフセットパラメータの値を３２に設定することが好ましいが、それについては限定されない。
もう１つの可能な実施形態において、シフトオフセットパラメータの値について、上記方法は以下をさらに含むことができる。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定する。
上記現在のブロックのブロックサイズインデックス値に基づいて、シフトオフセットパラメータの値を決定する。
現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定できることに留意されたい。その後、現在のブロックのブロックサイズインデックス値に基づいて、シフトオフセットパラメータの値をさらに決定することができる。
選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトオフセットパラメータの値を決定することは、以下を含むことができる。
ブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、現在のブロックのブロックサイズインデックス値に対応のシフトオフセットパラメータの値が３４、２３又は４６にそれぞれ等しいと決定する。
選択的に、いくつかの実施形態において、シフト・オフセット・パラメータ・テーブルを最小化することがさらにでき、また、依然としてルックアップテーブルの方法によってシフト因子を決定する。選択的に、いくつかの実施形態において、上記現在のブロックのブロックサイズインデックス値に基づいて、シフトオフセットパラメータの値を決定することは、以下を含むことができる。
ブロックサイズインデックス値に基づいて、第４の予め設定されたルックアップテーブルからブロックサイズインデックス値に対応の値をクエリーする。第４の予め設定されたルックアップテーブルは、ブロックサイズインデックス値とシフトオフセットパラメータの値との対応関係を記録するために用いられる。
クエリーした値をシフトオフセットパラメータの値として決定する。
なお、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）のみに基づいて、シフトオフセットパラメータの値をクエリーすることができる。上記表７に示した第４の予め設定されたルックアップテーブルにおいて、各ブロックサイズインデックス値は、固定値に対応することができる。即ち、各ブロックのサイズ又は各ブロックのサイズセットは、表７に示したような固定したシフトオフセットパラメータの値を有することができる。
上記表７によれば、現在のブロックのブロックサイズインデックス値が０、１又は２にそれぞれ等しい場合に、ブロックサイズインデックス値に対応のシフトオフセットパラメータの値が３４、２３又は４６にそれぞれ等しいと決定することができる。
このように、シフトオフセットパラメータの決定方法を簡略化することで、特にシフト・オフセット・パラメータ・テーブルを最小化し又はシフトオフセットパラメータの値を固定することで、ルックアップテーブルの記憶量を最小化することができ、それで、計算複雑度を増やさずに、ＭＩＰモードのもとのシフト・オフセット・パラメータ・テーブルの記憶に占有されるメモリを低減することができる。
このように、シフトオフセットパラメータ（ｆＯ）及びシフトナンバーパラメータ（ｓＷ）を決定した後、第１の定数値について、選択的に、いくつかの実施形態において、上記シフトナンバーパラメータの値に基づいて第１の定数値を決定することは、以下を含むことができる。
第１の定数値を２の累乗に設定する。累乗の指数は整数であり、シフトナンバーパラメータの値から１を引いたものに等しい。
選択的に、いくつかの実施形態において、上記シフトナンバーパラメータの値に基づいて第１の定数値を決定することは、以下を含むことができる。
「１」を２進左シフトすることによって第１の定数値を取得する。左シフトされたビット数はシフトナンバーパラメータの値から１を引いたものに等しい。
換言すると、シフトナンバーパラメータ（ｓＷ）が取得された後、第１の定数値は、１＜＜（ｓＷ－１）と表記されてもよく、２^（ｓＷ－１）と表記されてもよい。この場合、シフトナンバーパラメータの値を６に設定するとき、３２に等しい第１の定数値を取得することができる。
Figure 2023509951000026
このように、ＭＩＰモードのもとで、ＭＩＰ重み付け行列、ＭＩＰ入力サンプル値、シフトナンバーパラメータ及び第１のオフセットを取得することができ、それで、その後の現在のブロックのＭＩＰ予測値の決定が容易になる。具体的に、いくつかの実施形態において、上記ＭＩＰ重み付け行列、ＭＩＰ入力サンプル値、シフトナンバーパラメータ及び第１のオフセットに基づいて、現在のブロックのＭＩＰ予測値を決定することは、以下を含むことができる。
ＭＩＰ重み付け行列とＭＩＰ入力サンプル値との第１の重み付け和を計算する。
第１の重み付け和と第１のオフセットとの第１の合計を計算する。
第１の合計を２進右シフトすることによって第１の右シフト値を取得する。右シフトされたビット数はシフトナンバーパラメータの値に等しい。
現在のブロックのＭＩＰ予測値を、第１の右シフト値と第１の一時的参照値におけるインデックス０に対応の値との合計に設定する。第１の一時的参照値は、現在のブロックの隣接サンプル値をダウンサンプリングすることによって取得される。
換言すると、ＭＩＰモードのもとで、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）及びＭＩＰモードインデックス値（ｍｏｄｅｌＩｄで表す）に基づいて、ＭＩＰ重み付け行列（ｍＷｅｉｇｈｔで表す）、シフトナンバーパラメータ（ｓＷで表す）及びシフトオフセットパラメータ（ｆＯで表す）を決定することができる。次に、ＭＩＰ入力サンプル値（ｐ［ｘ］で表す）、ｍＷｅｉｇｈｔ、ｓＷ及びｆＯを行列乗算に入力することによって、行列乗算から出力されるＭＩＰ予測値（ｐｒｅｄＭｉｐ［ｘ］［ｙ］で表すことができる）を取得する。ｐｒｅｄＭｉｐ［ｘ］［ｙ］におけるサンプルは、ｐｒｅｄＳｉｚｅ×ｐｒｅｄＳｉｚｅに基づいて行列／アレーの形式で配列される。計算式は上記式（５）又は式（６）に示した通りである。
Ｓ９０４：ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。
なお、ＭＩＰ予測ブロックはＭＩＰ予測値で構成される。ＭＩＰ予測ブロックを取得した後、ＭＩＰ予測ブロックのサイズパラメータと現在のブロックのサイズパラメータが同じであるか否かを判断することによって、現在のブロックのイントラ予測値をさらに決定することができる。具体的に、判断結果に基づいて、ＭＩＰ予測ブロックのサイズパラメータと現在のブロックのサイズパラメータが同じである場合に、現在のブロックのイントラ予測ブロックをＭＩＰ予測ブロックに等しく設定する。この場合、ＭＩＰ予測ブロックは、現在のブロックにおけるすべてのサンプル位置の予測値を含む。ＭＩＰ予測ブロックのサイズパラメータが現在のブロックのサイズパラメータと異なる場合に、ＭＩＰ予測ブロックをフィルタリングすることによって、フィルタリングされた予測ブロックを取得し、フィルタリングされた予測ブロックを現在のブロックのイントラ予測ブロックとして設定する。ここで、フィルタリングは、アップサンプリング又はローパスフィルタリングを含むことができる。
Ｓ９０５：ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。
また、ＬＦＮＳＴは、任意の現在のブロックに対して行われないことに留意されたい。それは、ビットストリームにＬＦＮＳＴパラメータが必ずあるとは限らないことを意味する。この場合、ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定するために、いくつかの条件（例えば、現在のブロックのサイズパラメータのうちの最小値、現在のブロックのブロックサイズインデックス値など）をチェックする（ｃｈｅｃｋ）必要がある。従って、いくつかの実施形態において、ＬＦＮＳＴパラメータを取得するようにビットストリームを解析することは、以下を含むことができる。
ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定する。
ビットストリームにＬＦＮＳＴパラメータがある場合に、ＬＦＮＳＴパラメータを取得するようにビットストリームを解析する。
換言すると、まず、ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定する必要がある。決定の結果がＹｅｓの場合にのみ、即ち、ビットストリームにＬＦＮＳＴパラメータがある場合にのみ、ＬＦＮＳＴパラメータを取得するようにビットストリームを解析するステップを実行することができる。
選択的に、いくつかの実施形態において、上記ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定することは、以下を含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのサイズパラメータのうちの最小値を決定する。
最小値に基づいて、ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定する。
さらに、上記最小値に基づいて、ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定することは、
最小値が第１の予め設定された閾値以上である場合に、ビットストリームにＬＦＮＳＴパラメータがあると決定すること、を含むことができる。
ここで、第１の予め設定された閾値は、ＬＦＮＳＴを行うか否かを判断するための予め設定された閾値を表すために用いられることができる。本発明の実施形態において、第１の予め設定された閾値は、８に設定されることができるが、特に限定されない。
換言すると、ＭＩＰモードを用いて現在のブロックの彩度コンポーネントに対してイントラ予測を行う場合に、現在のブロックのサイズパラメータのうちの最小値を決定することができる。例えば、幅と高さの最小値が８以上である場合に、ビットストリームにＬＦＮＳＴパラメータがあると決定する。この場合、ビットストリームを解析することによって、ＬＦＮＳＴパラメータ、例として、ｌｆｎｓｔ＿ｉｎｄｅｘの値を取得することができる。
選択的に、いくつかの実施形態において、上記ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定することは、以下を含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値を決定する。
ブロックサイズインデックス値に基づいて、ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定する。
さらに、上記ブロックサイズインデックス値に基づいて、ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定することは、
ブロックサイズインデックス値が第２の予め設定された閾値に等しい場合に、ビットストリームにＬＦＮＳＴパラメータがあると決定すること、を含むことができる。
ここで、第２の予め設定された閾値は、ＬＦＮＳＴを行うか否かを判断するための予め設定された閾値を表すために用いられることができる。本発明の実施形態において、第２の予め設定された閾値は、１つの設定された値（例えば、２）、又は複数の設定された値（例えば１、２）のうちの１つに設定されることができるが、特に限定されない。
換言すると、ＭＩＰモードを用いて現在のブロックの彩度コンポーネントに対してイントラ予測を行う場合に、現在のブロックのサイズパラメータに基づいて、現在のブロックのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄ）を決定することができる。例えば、ｍｉｐＳｉｚｅＩｄの値が２に等しい場合に、ビットストリームにＬＦＮＳＴパラメータがあると決定する。この場合、ビットストリームを解析することによって、ＬＦＮＳＴパラメータ、例として、ｌｆｎｓｔ＿ｉｎｄｅｘの値を取得することができる。
いくつかの実施形態において、上記ＬＦＮＳＴパラメータを取得するようにビットストリームを解析することは、
ＬＦＮＳＴインデックスの値を取得するようにビットストリームを解析すること、を含むことができる。
なお、ＬＦＮＳＴインデックスはｌｆｎｓｔ＿ｉｎｄｅｘで表されることができ、また、ＬＦＮＳＴインデックスの値は、現在のブロックに対してＬＦＮＳＴを行うか否かを決定するために用いられる。具体的に、いくつかの実施形態において、当該方法は以下をさらに含むことができる。
ＬＦＮＳＴインデックスの値が０より大きい場合に、現在のブロックに対してＬＦＮＳＴを行うと決定する。
ＬＦＮＳＴインデックスの値が０に等しい場合に、現在のブロックに対してＬＦＮＳＴを行わないと決定する。
即ち、ｌｆｎｓｔ＿ｉｎｄｅｘの値を取得した後、ｌｆｎｓｔ＿ｉｎｄｅｘの値が０より大きい場合に、現在のブロックに対してＬＦＮＳＴを行うと決定する。ｌｆｎｓｔ＿ｉｎｄｅｘの値が０に等しい場合に、現在のブロックに対してＬＦＮＳＴを行わないと決定する。
また、ＬＦＮＳＴパラメータ、例として、ｌｆｎｓｔ＿ｉｎｄｅｘの値を取得した後、ｌｆｎｓｔ＿ｉｎｄｅｘの値が０より大きい場合に、ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示すことが示される。この場合、いくつかの実施形態において、ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定することは、以下を含むことができる。
現在のブロックの量子化係数を取得するようにビットストリームを解析する。
量子化係数を逆量子化することによって、現在のブロックの再構成変換係数ブロックを取得する。
具体的に、逆量子化はスケーリングである。１つの具体的な例において、上記量子化係数を逆量子化することによって、現在のブロックの再構成変換係数ブロックを取得することは、
量子化係数をスケーリングすることによって、現在のブロックの再構成変換係数ブロックを取得すること、を含むことができる。
このように、ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、再構成変換係数ブロックにおける全部又は一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得することができる。
また、現在のブロックに対してＬＦＮＳＴを行うことができると決定される場合に、現在のブロックのために使用されるＬＦＮＳＴ変換カーネル（ｋｅｒｎｅｌで表す）が決定される必要がある。いくつかの実施形態において、上記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得することは、
ＬＦＮＳＴ変換カーネルを利用して、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得すること、を含むことができる。
本発明の実施形態において、ＬＦＮＳＴには４つの変換カーネル候補セットがある。この４つの変換カーネル候補セットは、セット０、セット１、セット２及びセット３を含むことができる。ここで、本発明の実施形態において、ＭＩＰパラメータを利用してＬＦＮＳＴ変換カーネル候補セットを決定することができ、次に、ＬＦＮＳＴ変換カーネル候補セットから、現在のブロックのために使用されるＬＦＮＳＴ変換カーネルを選択する。従って、いくつかの実施形態において、上記方法は、以下をさらに含むことができる。
ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックの予測モードパラメータからＭＩＰパラメータを決定する。
ＭＩＰパラメータに基づいて、ＬＦＮＳＴ変換カーネル候補セットを決定する。
ＬＦＮＳＴ変換カーネル候補セットにおいて、ＬＦＮＳＴインデックスの値によって示される変換カーネルを、現在のブロックのために使用されるＬＦＮＳＴ変換カーネルとして決定する。ＬＦＮＳＴ変換カーネル候補セットは、２つ又は複数の予めに設定されたＬＦＮＳＴ変換カーネルを含む。
なお、ＭＩＰパラメータは、ＭＩＰモードインデックス値（ｍｏｄｅｌＩｄで表す）及びＭＩＰ転置指示パラメータ（ｉｓＴｒａｎｓｐｏｓｅｄで表す）のうちの少なくとも１つを含むことができる。現在のブロックのために使用されるＬＦＮＳＴ変換カーネルについて、ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行うことを示す場合に、現在のブロックのために使用されるＬＦＮＳＴ変換カーネルを取得するために、選択された変換カーネルに対して行列転置を行う必要がある。
さらに、いくつかの実施形態において、上記ＭＩＰパラメータに基づいて、ＬＦＮＳＴ変換カーネル候補セットを決定することは、以下を含むことができる。
ＭＩＰモードインデックス値に基づいて、ＬＦＮＳＴイントラ予測モードインデックスの値を決定する。
ＬＦＮＳＴイントラ予測モードインデックスの値に基づいて、第５の予め設定されたルックアップテーブルによって、ＬＦＮＳＴ変換カーネル候補セットのインデックス値を決定する。
ＬＦＮＳＴ変換カーネル候補セットのインデックス値に基づいて、複数の候補ＬＦＮＳＴ変換カーネル候補セットから前記ＬＦＮＳＴ変換カーネル候補セットを選択する。
ここで、ＬＦＮＳＴイントラ予測モードインデックスをｐｒｅｄＭｏｄｅＩｎｔｒａで表すことができ、ＬＦＮＳＴ変換カーネル候補セットのインデックス値をｌｆｎｓｔＴｒＳｅｔＩｄｘで表すことができる。
なお、第５の予め設定されたルックアップテーブルは、上記表１０に示した通りである。ＭＩＰモードインデックス値（即ち、ｍｏｄｅｌＩｄの値）に基づいて、ｐｒｅｄＭｏｄｅＩｎｔｒａの値を決定することができる。次に、ｐｒｅｄＭｏｄｅＩｎｔｒａの値に基づいて、表１０と合わせてｌｆｎｓｔＴｒＳｅｔＩｄｘの値を直接に決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定することができる。ここで、ｌｆｎｓｔＴｒＳｅｔＩｄｘの値は、ＬＦＮＳＴに使用される変換カーネル候補セットを示す。ｍｏｄｅｌＩｄの値は０、１、２、３、４、５を含むことができるため、ｐｒｅｄＭｏｄｅＩｎｔｒａの値も０、１、２、３、４、又は５である。ｐｒｅｄＭｏｄｅＩｎｔｒａとｌｆｎｓｔＴｒＳｅｔＩｄｘとの対応関係は表１０に示した通りである。
１つの具体的な実施形態において、上記ＭＩＰモードインデックス値に基づいて、ＬＦＮＳＴイントラ予測モードインデックスの値を決定することは、
ＬＦＮＳＴイントラ予測モードインデックスの値をＭＩＰモードインデックス値に等しく設定すること、を含むことができる。
換言すると、本発明の実施形態において、ｐｒｅｄＭｏｄｅＩｎｔｒａの値をｍｏｄｅｌＩｄの値に等しく設定することができ、次に、ｐｒｅｄＭｏｄｅＩｎｔｒａの値に基づいて、表１０と合わせてｌｆｎｓｔＴｒＳｅｔＩｄｘの値を直接に決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定する。また、本発明の別の具体的な実施形態において、ＭＩＰモードインデックス値をＰＬＡＮＡＲモードの値に直接にマッピングし、次に、ＰＬＡＮＡＲモードに対応のｐｒｅｄＭｏｄｅＩｎｔｒａの値を利用して、ｌｆｎｓｔＴｒＳｅｔＩｄｘの値を決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定する。
さらに、ＬＦＮＳＴを行うプロセスにおいて、走査順序は水平走査順序及び垂直走査順序を含むことができる。ここで、走査順序の決定は、ＭＩＰ転置指示パラメータ（ｉｓＴｒａｎｓｐｏｓｅｄで表す）に関連する。
選択的に、いくつかの実施形態において、上記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得することは、以下を含むことができる。
ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行うことを示す場合に、垂直走査順序で上記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。
ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行わないことを示す場合に、水平走査順序で上記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。
具体的に、ｉｓＴｒａｎｓｐｏｓｅｄの値が０に等しい場合に、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行う。そして、水平走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は上記式（１０）に示した通りである。
ｉｓＴｒａｎｓｐｏｓｅｄの値が１に等しい場合に、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行わない。そして、垂直走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は上記式（１１）に示した通りである。
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
選択的に、いくつかの実施形態において、上記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得することは、以下を含むことができる。
ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行うことを示す場合に、水平走査順序で上記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。
ＭＩＰ転置指示パラメータの値が、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行わないことを示す場合に、垂直走査順序で上記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。
具体的に、ｉｓＴｒａｎｓｐｏｓｅｄの値が１に等しい場合に、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行う。そして、水平走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は上記式（１０）に示した通りである。
ｉｓＴｒａｎｓｐｏｓｅｄの値が０に等しい場合に、ＭＩＰモードに使用されるサンプル入力ベクトルに対して転置を行わない。そして、垂直走査順序で第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことができる。具体的は上記式（１１）に示した通りである。
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
Ｓ９０６：第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得する。
Ｓ９０７：現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定する。
なお、復号器では、ビットストリームを解析することによって、ＬＦＮＳＴ係数の量子化値を取得することができる。逆量子化ユニットが当該量子化値を逆量子化する（「スケーリング」と呼ばれ得る）ことによって、再構成変換係数ブロックを取得する。当該再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対して逆のＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得することができる。次に、逆の第１の変換によって、現在のブロックの彩度コンポーネントの再構成残差ブロックを回復することができる。ここで、逆の第１の変換は、符号器における「第１の変換（コア変換）」に対応の逆変換である。なお、規格において、復号器における「逆変換」のみが定義されているため、規格において、「逆のＬＦＮＳＴ」は「ＬＦＮＳＴ」と呼ばれてもよい。
また、現在のブロックの彩度コンポーネントの再構成残差ブロックを回復した後、現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとを加算することによって、現在のブロックの彩度コンポーネントの再構成ブロックを決定することができる。
以下、図２に示した復号器２００を参照しながら、本発明の実施形態の復号化方法を具体的に説明する。
復号器２００の入力ビットストリームは、符号器１００が生成したビットストリームであってもよい。解析ユニット２０１は入力ビットストリームを解析し、且つ入力ビットストリームからシンタックス要素の値を取得する。解析ユニット２０１は、１つ又は複数の復号化された画像を取得するために、シンタックス要素の２進表現を数値に変換し、且つ数値を復号器２００におけるユニットに送る。解析ユニット２０１はさらに、復号化された画像をレンダリングするために、入力ビットストリームから１つ又は複数のシンタックス要素を解析することができる。
図１０を参照すると、図１０は、本発明の実施形態に係るＬＦＮＳＴパラメータの解析のフローチャートを示している。図１０に示すように、当該フローは以下を含むことができる。
Ｓ１００１：解析ユニット２０１は、入力ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定するためにチェックを行う。
なお、ＬＦＮＳＴパラメータはｌｆｎｓｔ＿ｉｎｄｅｘの値を指すことができる。ここで、ＬＦＮＳＴパラメータを表すためのシンタックス構造の例は、上記表８に示したシンタックス構造の例と同じであってもよく、上記表９Ａと表９Ｂに示したシンタックス構造の例と同じであってもよい。
具体的に、現在のブロックのイントラ予測モードがＭＩＰモードである場合に、解析ユニット２０１は、以下の方法を用いて入力ビットストリームからｌｆｎｓｔ＿ｉｎｄｅｘの符号化ビットを取得する。選択的に、当該現在のブロックにおける変換ブロックの幅と高さの最小値が８以上である（即ち、幅と高さがいずれも８以上である）場合に、表９Ａにおけるシンタックス構造を利用することで、解析ユニット２０１は、ＭＩＰモードを用いてｌｆｎｓｔ＿ｉｎｄｅｘビットを読み出す。別の選択可能な条件は、幅と高さが第１の値（例えば、８）に等しく、且つ幅と高さの合計が第２の値（例えば１６）以上であると設定されてもよい。
選択的に、当該現在のブロックのｍｉｐＳｉｚｅＩｄが２に等しい場合に、表９Ｂにおけるシンタックス構造を利用することで、解析ユニット２０１は、ＭＩＰモードを用いてｌｆｎｓｔ＿ｉｎｄｅｘビットを読み出す。別の選択可能な条件は、現在のブロックのｍｉｐＳｉｚｅＩｄが複数の値（例えば、１、２）のうちの１つに等しいと設定されてもよい。
Ｓ１００２：解析ユニット２０１は、ＬＦＮＳＴパラメータに対して適応バイナリ算術復号化を行うことによって、ＬＦＮＳＴパラメータを取得する。
ここで、符号器１００側では、エントロピー符号化ユニット１１５は、表９Ａと表９Ｂに示した記述子が「ａｅ（ｖ）」であるＣＡＢＡＣを用いてＬＦＮＳＴパラメータ（例えば、ｌｆｎｓｔ＿ｉｎｄｅｘの値）を符号化する。復号器２００側では、解析ユニット２０１は、適応バイナリ算術復号化を行うことによって、ｌｆｎｓｔ＿ｉｎｄｅｘビットからｌｆｎｓｔ＿ｉｎｄｅｘの値を取得する。
解析ユニット２０１は、シンタックス要素の値と、シンタックス要素の値に基づいて設定された又は決定された、１つ又は複数の復号化された画像を取得するための１つ又は複数の変数とを、復号器２００におけるユニットに送る。予測ユニット２０２は、現在のブロック（例えば、ＣＵ）のイントラ予測ブロックを決定する。インター復号化モードが現在の復号化ブロックを復号化するために用いられることが示される場合に、予測ユニット２０２は、インター予測ブロックを取得するために、解析ユニット２０１からの関連パラメータをＭＣユニット２０３に送る。イントラ予測モード（ＭＩＰモードインデックス値に基づいて示されるＭＩＰモードを含む）が現在のブロックを復号化するために用いられることが示される場合に、予測ユニット２０２は、イントラ予測ブロックを取得するために、解析ユニット２０１からの関連パラメータをイントラ予測ユニット２０４に送信する。
本発明の実施形態における現在のブロック（又は「復号化ブロック」と呼ばれる）が、ＣＵ又はＣＵのパーティション（例えば、変換ブロック）であってもよいと理解されるべきである。具体的に、ＭＩＰモードを用いて現在のブロックを復号化することが示される場合に、イントラ予測ユニット２０４は、現在のブロックのイントラ予測ブロックを取得する。現在のブロックのイントラ予測ブロックは、現在のブロックにおける少なくとも１つのサンプル（ｓａｍｐｌｅｓ）のイントラ予測値を含む。
具体的に、イントラ予測ユニット２０４がＭＩＰモードを用いてイントラ予測ブロックを取得するステップは、以下の通りである。
まず、イントラ予測ユニット２０４は、現在のブロックの隣接サンプルから１つ又は複数の参照サンプルを取得する。例えば、隣接サンプルをダウンサンプリングすることによって、又は隣接サンプルから直接に抽出することによって取得する。
次に、イントラ予測ユニット２０４は、取得した参照サンプル、ＭＩＰ行列及びシフトパラメータを用いて、現在のブロックにおけるサンプル位置に対応の１つ又は複数の部分的な予測サンプルを決定する。ここで、サンプル位置は、現在のブロックにおける予め設定されたサンプル位置であることができ、例として、サンプル位置は均等な水平方向及び垂直方向の座標値を有する。また、シフトパラメータは、シフトナンバーパラメータ及びシフトオフセットパラメータを含み、シフトパラメータは、部分的なサンプルのイントラ予測値を取得するプロセスにおいて、オフセット操作のために用いられることができる。
最後に、現在のブロックの部分的なサンプルに対応の予測サンプルを取得した場合に、イントラ予測ユニット２０４は、現在のブロックにおける部分的なサンプル以外の残りのサンプルに対応の予測サンプルをさらに取得する必要がある。例えば、イントラ予測ユニット２０４は、補間フィルターを利用して残りのサンプルに対応の予測サンプルを取得することができ、補間フィルターの入力は部分的なサンプルと隣接サンプルであることができる。
図６に示したように、図６は、ＭＩＰモードを用いてイントラ予測ブロックを取得することのフローチャートを示している。このフローは復号器２００で実現されることができ、ここの「現在のブロック」は「復号化ブロック」を指す。
ステップ６０１、イントラ予測ユニット２０４は現在のブロックの隣接サンプルを取得し、例として、隣接サンプルは、図６に示したステップ６０１における現在のブロックに隣接する灰色の正方形としてマークされる。イントラ予測ユニット２０４は隣接サンプルから１つ又は複数の参照サンプルを取得する。図６に示したステップ６０１の例において、選択的に、イントラ予測ユニット２０４は、２つの隣接サンプルの平均値を計算し、且つ当該平均値を参照サンプルとして用いることができる。選択的に、イントラ予測ユニット２０４は１つの隣接サンプルおきに１つの隣接サンプルを参照サンプルを選択する。例えば、図６に示したステップ６０１の例において、イントラ予測ユニット２０４は、現在のブロックの８つの上隣接サンプルから４つの参照サンプルを選択し、且つ現在のブロックの８つの左隣接サンプルから別の４つの参照サンプルを選択する。
ステップ６０１の具体的なプロセスは、以下のように示される。
イントラ予測ユニット２０４は、解析ユニット２０１から現在のブロックの幅と高さを取得し、幅と高さはそれぞれ、変数ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔで表される。解析ユニット２０１からのパラメータに基づいて、現在のブロックは１つ又は複数の変換ブロックに分割される。変数ｎＴｂＷとｎＴｂＨをそれぞれ、変換ブロックの幅と高さとする。イントラ予測モードとしてＭＩＰモードを用いて現在のブロックの予測を取得する場合に、イントラ予測ユニット２０４は、ＭＩＰのブロックサイズインデックス値、即ち、ｍｉｐＳｉｚｅＩｄで表す変数を決定する。
選択的に、イントラ予測ユニット２０４は、以下のようにｍｉｐＳｉｚｅＩｄの値を決定する。
－ｎＴｂＷとｎＴｂＨがいずれも４に等しい場合に、ｍｉｐＳｉｚｅＩｄを０に等しく設定する。
－そうでなければ、ｃｂＷｉｄｔｈ又はｃｂＨｅｉｇｈｔが４に等しい場合に、ｍｉｐＳｉｚｅＩｄを１に等しく設定する。
－そうでなければ、ｍｉｐＳｉｚｅＩｄを２に等しく設定する。
具体的に、現在のブロックのサイズパラメータが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、ｍｉｐＳｉｚｅＩｄを２に等しく設定する。
選択的に、イントラ予測ユニット２０４は、以下のようにｍｉｐＳｉｚｅＩｄの値を決定する。
－ｎＴｂＷとｎＴｂＨがいずれも４に等しい場合に、ｍｉｐＳｉｚｅＩｄを０に等しく設定する。
－そうでなければ、ｃｂＷｉｄｔｈ又はｃｂＨｅｉｇｈｔが４に等しいか、又はｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい場合に、ｍｉｐＳｉｚｅＩｄを１に等しく設定する。
－そうでなければ、ｍｉｐＳｉｚｅＩｄを２に等しく設定する。
具体的に、現在のブロックのサイズパラメータが８×８である場合に、ｍｉｐＳｉｚｅＩｄを１に等しく設定する。
さらに、イントラ予測ユニット２０４はｍｉｐＳｉｚｅＩｄに基づいて、ｂｏｕｎｄａｒｙＳｉｚｅとｐｒｅｄＳｉｚｅの値を取得する。具体的は以下の通りである。
－ｍｉｐＳｉｚｅＩｄが０に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅを２に等しく設定し、ｐｒｅｄＳｉｚｅを４に等しく設定する。
－そうでなければ、ｍｉｐＳｉｚｅＩｄが１に等しい場合に、ｂｏｕｎｄａｒｙＳｉｚｅを４に等しく設定し、ｐｒｅｄＳｉｚｅを４に等しく設定する。
－そうでなければ（ｍｉｐＳｉｚｅＩｄが２に等しい場合に）、ｂｏｕｎｄａｒｙＳｉｚｅを４に等しく設定し、ｐｒｅｄＳｉｚｅを８に等しく設定する。
ｂｏｕｎｄａｒｙＳｉｚｅは、現在のブロックの上隣接参照サンプル及び左隣接参照サンプルの各々から取得される参照サンプル数を表す。
イントラ予測ユニット２０４は、解析ユニット７０１からの、バッファｐＴｅｍｐに記憶された参照サンプルの順序を示すパラメータに基づいて、ＭＩＰ予測値を計算するための参照サンプルをさらに取得することができる。イントラ予測ユニット２０４は、変数ｉｓＴｒａｎｓｐｏｓｅｄを、解析ユニット７０１からの、バッファｐＴｅｍｐに記憶された参照サンプルの順序を示すパラメータに等しく設定する。例えば、ｉｓＴｒａｎｓｐｏｓｅｄが０（又は、ＦＡＬＳＥ）に等しいことは、イントラ予測ユニット２０４がまず現在のブロックの上隣接参照サンプルから取得された参照サンプルを呈し、次に、左隣接参照サンプルから取得された参照サンプルを呈することを示す。そうでなければ、ｉｓＴｒａｎｓｐｏｓｅｄが１（又は、ＴＲＵＥ）に等しいことは、イントラ予測ユニット２０４がまず現在のブロックの左隣接参照サンプルから取得された参照サンプルを呈し、次に、上隣接参照サンプルから取得された参照サンプルを呈することを示す。
イントラ予測ユニット２０４は、上記式（１）に示したように、ＭＩＰモードに使用される参照サンプル数を示すために、ｉｎＳｉｚｅの値を取得する。
イントラ予測ユニット２０４は、現在のブロックの隣接参照サンプルを用いて参照サンプル群（アレーｐ［ｘ］として記憶され、ｘは０、…、ｉｎＳｉｚｅ－１である）を取得するために、以下のプロセスを呼び出す。
イントラ予測ユニット２０４は、現在のブロックの上隣接参照サンプル（例えば、アレーｒｅｆＴに記憶されている）からｎＴｂＷ 参照サンプルを取得し、且つ現在のブロックの左隣接参照サンプル（例えば、アレーｒｅｆＬに記憶されている）からｎＴｂＨ参照サンプルを取得する。イントラ予測ユニット２０４は、ｂｏｕｎｄａｒｙＳｉｚｅ参照サンプルを取得するためにｒｅｆＴに対してダウンサンプリングを呼び出し、且つｂｏｕｎｄａｒｙＳｉｚｅ参照サンプルをｒｅｆＴに記憶する。イントラ予測ユニット２０４は、ｂｏｕｎｄａｒｙＳｉｚｅ参照サンプルを取得するためにｒｅｆＬに対してダウンサンプリングを呼び出し、且つｂｏｕｎｄａｒｙＳｉｚｅ参照サンプルをｒｅｆＬに記憶する。
イントラ予測ユニット２０４は、ｒｅｆＴとｒｅｆＬにおける要素をバッファpＴｅｍｐに入れるために、ｉｓＴｒａｎｓｐｏｓｅｄによって示される順序をさらに取得することができる。
選択的に、イントラ予測ユニット２０４は以下のようにｐ［ｘ］を取得し、ｘ＝０、…、ｉｎＳｉｚｅ－１。
－ｍｉｐＳｉｚｅＩｄが２に等しい場合に、p[x]= pTemp[x + 1]- pTemp[0]。
－そうでなければ（ｍｉｐＳｉｚｅＩｄが２より小さい）、p[0]= pTemp[0]- (1 << (BitDepth-1))、p[x]= pTemp[x]- pTemp[0]。
ＢｉｔＤｅｐｔｈは、現在のブロックにおけるサンプルのカラーコンポーネントのビット深度である。ここで、カラーコンポーネントは、ＲＧＢコンポーネントのうちの１つ、ＹＵＶコンポーネントのうちの１つ、又はＹＣｂＣｒコンポーネントのうちの１つであることができ、例として、Ｙコンポーネントなどが挙げられる。
選択的に、イントラ予測ユニット２０４は以下のようにｐ［ｘ］を取得することができ、ｘ＝０、…、ｉｎＳｉｚｅ－１。
－ｍｉｐＳｉｚｅＩｄが２に等しい場合に、p[x]= pTemp[x + 1]- pTemp[0]。
－そうでなければ（ｍｉｐＳｉｚｅＩｄが２より小さい）、p[0]= (1 << (BitDepth-1)) - pTemp[0]、p[x]= pTemp[x]- pTemp[0]。
選択的に、イントラ予測ユニット２０４は、ｍｉｐＳｉｚｅＩｄの値を決定せず、統一的な計算方法でｐ［ｘ］の値を取得することが可能である。例えば、（１＜＜（ＢｉｔＤｅｐｔｈ－１））を付加要素としてバッファｐＴｅｍｐに追加する。この場合、イントラ予測ユニット２０４はｐ［ｘ］をｐＴｅｍｐ［ｘ＋１］－ｐＴｅｍｐ［０］として計算する。
ステップ６０２、イントラ予測ユニット２０４は、参照サンプル群及びＭＩＰ重み付け行列を用いて現在のブロックのＭＩＰ予測値を取得する。ＭＩＰ重み付け行列は、ＭＩＰモードに対応のＭＩＰモードインデックス値（ＭｏｄｅＩｄで表す）及びＭＩＰのブロックサイズインデックス値（ｍｉｐＳｉｚｅＩｄで表す）に基づいて、予め定義されＭＩＰ重み付け行列群から選択される。イントラ予測ユニット２０４は、解析ユニット２０１からＭｏｄｅＩｄの値を取得する。
イントラ予測ユニット２０４は、現在のブロックにおける１つ又は複数のサンプル位置に対応の部分的な予測サンプルのＭＩＰ予測値（ｐｒｅｄＭｉｐ［ｘ］［ｙ］で表す）を取得する。図６に示したステップ６０２の例において、部分的な予測サンプルは、現在のブロックにおいて灰色の正方形としてマークされるサンプルである。
予測モジュール６０１の入力は、ステップ６０１において取得された参照サンプルｐ［ｘ］であり、予測モジュール６０１は、ＭＩＰ重み付け行列及びシフトパラメータを用いて部分的な予測サンプルを計算する。シフトパラメータは、シフトナンバーパラメータ及びシフトオフセットパラメータを含む。
１つの可能な実施形態において、予測モジュール６０１は、座標（ｘ，ｙ）でサンプルを表すことができ、予測サンプルがｐｒｅｄＭｉｐ［ｘ］［ｙ］で表されることができる。ｐｒｅｄＭｉｐ［ｘ］［ｙ］の計算式は、式（５）又は式（６）に示したようである。
式（５）又は式（６）において、ｍＷｅｉｇｈｔ［ｉ］［ｊ］はＭＩＰ重み付け行列であり、行列要素は予め定められた定数であってもよく、又は、トレーニング方法などを用いて適応的に更新してもよい。当該トレーニング方法の入力は１つ又は複数の符号化された画像又はブロックであり、又は、外部装置によって復号器１００に提供される他のビットストリームからの画像であり、又は、ＭＩＰ重み付け行列を含む入力ビットストリームにおいて特殊なデータユニットを解析することによって解析ユニット２０１から取得される画像である。ｍＷｅｉｇｈｔ［ｉ］［ｊ］は、解析ユニット２０１からの対応の１つ又は複数のパラメータによって示されるＭＩＰモードに基づいて決定される。ｆＯはｏＷを決定するためのシフトオフセットパラメータであり、ｓＷはシフトナンバーパラメータであり、p［ｉ］は参照サンプルを用いて計算されたものであり、即ち、本発明の実施形態におけるＭＩＰ入力サンプル値であり、ｐＴｅｍｐ［０］は参照サンプルにおける第１のサンプルを表し、即ち、本発明の実施形態の第１の一時的参照値におけるインデックス０に対応の値であり、「＞＞」はＶＶＣにおいて定義される２進右シフト演算子である。
予測モジュール６０１は、現在のブロックのサイズと現在のブロックのために用いられるＭＩＰモードとに基づいて、ｓＷとｆＯの値を決定することができる。１つの例において、予測モジュール６０１は、ルックアップテーブルを用いてｓＷとｆＯの値を取得する。
選択的に、予測モジュール６０１は、上記表４を利用することで、現在のブロックのサイズパラメータ及びＭＩＰモードに基づいてｓＷを決定することができる。
選択的に、予測モジュール６０１は、上記表５を利用することで、現在のブロックのサイズパラメータに基づいてｓＷを決定することもできる。
選択的に、予測モジュール６０１はさらに、ｓＷを定数値に直接に設定することができる。例えば、様々なサイズパラメータを有するブロック及び異なるＭＩＰモードに対して、予測モジュール６０１は、ｓＷを５に設定することができる。又は、様々なサイズパラメータを有するブロック及び異なるＭＩＰモードに対して、予測モジュール６０１は、ｓＷを６に設定することができる。又は、様々なサイズパラメータを有するブロック及び異なるＭＩＰモードに対して、予測モジュール６０１は、ｓＷを７に設定することができる。
選択的に、予測モジュール６０１は、上記表６を利用することで、現在のブロックのサイズパラメータ及びＭＩＰモードに基づいてｆＯを決定することができる。
選択的に、予測モジュール６０１は、上記表７を利用することで、現在のブロックのサイズパラメータに基づいてｆＯを決定することもできる。
選択的に、予測モジュール６０１はさらに、ｆＯを定数値（例えば、０～１００）に直接に設定することができる。例えば、様々なサイズパラメータを有するブロック及び異なるＭＩＰモードに対して、予測モジュール６０１は、ｆＯを３２に設定することができる。又は、予測モジュール６０１はｆＯを４６に設定する。又は、予測モジュール６０１はｆＯを５６に設定する。又は、予測モジュール６０１はｆＯを６６に設定する。
イントラ予測ユニット２０４は、ｐｒｅｄＭｉｐにおけるＭＩＰ予測値に対してクリッピング操作を行うことができる。ｉｓＴｒａｎｓｐｏｓｅｄが１（又は、ＴＲＵＥ）に等しい場合に、ｐｒｅｄＳｉｚｅ×ｐｒｅｄＳｉｚｅのアレーｐｒｅｄＭｉｐ［ｘ］［ｙ］（ｘ ＝０、...、ｐｒｅｄＳｉｚｅ－１、ｙ＝０、...、ｐｒｅｄＳｉｚｅ－１）はｐｒｅｄＴｅｍｐ［ｙ］［ｘ］＝ｐｒｅｄＭｉｐ［ｘ］［ｙ］に変換され、次に、ｐｒｅｄＭｉｐ＝ｐｒｅｄＴｅｍｐ。
例示として、選択的に、現在のブロックのサイズパラメータが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、イントラ予測ユニット２０４は、ｍｉｐＳｉｚｅＩｄを２に等しく設定し、且つ８×８のｐｒｅｄＭｉｐを取得する。
選択的に、現在のブロックのサイズパラメータが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、イントラ予測ユニット２０４は、ｍｉｐＳｉｚｅＩｄを１に等しく設定し、且つ４×４のｐｒｅｄＭｉｐを取得する。
ステップ６０３、イントラ予測ユニット２０４は、現在のブロックのイントラ予測値（ｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］としてアレーに記憶され、ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、...、ｎＴｂＨ－１）を以下のように取得する。
－イントラ予測ユニット２０４は、ｎＴｂＷがｐｒｅｄＳｉｚｅより大きく、又は、ｎＴｂＨがｐｒｅｄＳｉｚｅより大きいと決定すると、ｐｒｅｄＭｉｐを用いてｐｒｅｄＳａｍｐｌｅｓを取得するために、アップサンプリングプロセスを呼び出す。イントラ予測ユニット２０４は、現在のブロックにおける部分的なサンプル以外の残りのサンプルに対応の予測サンプルを取得する。図６において、イントラ予測ユニット２０４は、フィルタリングモジュール６０２を利用して、現在のブロックにおける部分的なサンプル以外の残りのサンプルに対応の予測サンプルを取得することができる。フィルタリングモジュール６０２の入力は、ステップ６０２における灰色の正方形としてマークされるサンプルである。フィルタリングモジュール６０２は１つ又は複数の補間フィルターを用いて、当該入力を利用して現在のブロックにおける部分的なサンプル以外の残りのサンプルに対応の予測サンプルを取得することができる。例えば、入力は、参照サンプル及び現在のブロックにおける１つ又は複数のサンプル位置の部分的な予測サンプルを含むことができる。又は、入力は、隣接サンプル及び現在のブロックにおける１つ又は複数のサンプル位置の部分的な予測サンプルを含むことができる。又は、入力は参照サンプル、隣接サンプル及び現在のブロックにおける１つ又は複数のサンプル位置の部分的な予測サンプルを含むことができる。例えば、選択的に、現在のブロックのサイズが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、イントラ予測ユニット２０４は、ｍｉｐＳｉｚｅＩｄが１に等しいと決定し、イントラ予測ユニット２０４はアップサンプリングプロセスを４×４のｐｒｅｄＭｉｐに適用することによって、現在のブロックの８×８のイントラ予測ブロックを取得する。
－そうでなければ、イントラ予測ユニット２０４は、現在のブロックのイントラ予測ブロックを現在のブロックのＭＩＰ予測ブロックに等しく設定し、即ち、ｐｒｅｄＳａｍｐｌｅｓ［ｘ］［ｙ］（ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、...、ｎＴｂＨ－１）をｐｒｅｄＭｉｐ［ｘ］［ｙ］に等しく設定する。例えば、現在のブロックのサイズパラメータが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）場合に、イントラ予測ユニット２０４は、サイズが８×８である（即ち、ｃｂＷｉｄｔｈとｃｂＨｅｉｇｈｔがいずれも８に等しい）現在のブロックのｐｒｅｄＳａｍｐｌｅｓを取得する。
このように、図６に示したフローのブロック図によれば、ステップ６０３の後、イントラ予測ユニット２０４は、現在のブロック（即ち、ＣＵ）のイントラ予測ブロックを取得することができ、即ち、現在のブロックの少なくとも１つのサンプルのイントラ予測値を決定することができる。
スケーリングユニット２０５は、符号器１００における逆量子化ユニット１１０の機能と同じ機能を有する。スケーリングユニット２０５は、再構成係数を取得するために、解析ユニット２０１からの量子化係数（即ち、レベル）に対してスケーリング操作を行う。
変換ユニット２０６は、符号器１００における逆変換ユニット１１１の機能と同じ機能を有する。変換ユニット２０６は、再構成残差を取得するために、１つ又は複数の変換操作（即ち、符号器１００における逆変換ユニット１１１による１つ又は複数の変換操作の逆操作）を行う。
ｌｆｎｓｔ＿ｉｎｄｅｘが０に等しくない場合に、変換ユニット２０６は、二次変換係数ブロックを取得するために、再構成係数に対して二次変換を行う。次に、再構成残差ブロックを取得するために、二次変換係数ブロックに対して第１の変換、例として、ＤＣＴに基づいて初期に設計された整数変換を行う。ＬＦＮＳＴは二次変換の一例である。
図１１を参照すると、図１１は、本発明の実施形態に係るＬＦＮＳＴを行う別のフローの概略図を示している。図１１において、ブロック１１０１は、再構成変換係数を含む再構成変換係数ブロックである。
ステップ１１０１、変換ユニット２０６は、ブロック１１０１における全部又は一部の再構成変換係数に対してＬＦＮＳＴなどの二次変換を行う。
現在のブロックのイントラ予測モードがＭＩＰモードである場合に、変換ユニット２０６は、ＭＩＰパラメータに基づいてＬＦＮＳＴ変換カーネル候補セットを選択する。ＭＩＰパラメータは、ＭＩＰモードインデックス値（即ち、ｍｏｄｅｌＩｄ）及びＭＩＰ転置指示パラメータ（即ち、ｉｓＴｒａｎｓｐｏｓｅｄ）のうちの１つを含むことができる。
変換ユニット２０６は、変数ｐｒｅｄＭｏｄｅＩｎｔｒａの値をｍｏｄｅｌＩｄの値に等しく設定する。変換ユニット２０６は、サブブロック１１００１、１１００２及び１１００３における係数に対してＬＦＮＳＴを行うための変換カーネルを決定する。サブブロックのサイズは設定された値、例として、８×８であることができる。変換ユニット２０６はｐｒｅｄＭｏｄｅＩｎｔｒａの値に基づいて、ＬＦＮＳＴ変換カーネル候補セットのインデックス値（即ち、ｌｆｎｓｔＴｒＳｅｔＩｄｘ）を決定する。ＭＩＰモードのもとのブロック復号化について、変換ユニット２０６は、表１０に示したようなルックアップテーブルを用いてｌｆｎｓｔＴｒＳｅｔＩｄｘの値を取得する。変換ユニット２０６は、ＬＦＮＳＴを行うための変換カーネルを、ｌｆｎｓｔＴｒＳｅｔＩｄｘによって示されるＬＦＮＳＴ変換カーネル候補セット内の、ｌｆｎｓｔ＿ｉｎｄｅｘによって示される変換カーネルとして決定する。
ｌｆｎｓｔ＿ｉｎｄｅｘが０に等しくない場合に、変換ユニット２０６は、サブブロック１１００１、１１００２及び１１００３からの係数を用いて変換ブロックに対してＬＦＮＳＴを行い、ＬＦＮＳＴ係数を取得し、且つＬＦＮＳＴ係数をブロック１１０２のサブブロック１１００１、１１００２及び１１００３に入れる。ｄ［ｘ］［ｙ］が第１の変換係数のブロックであると仮設し、ここで、ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、...、ｎＴｂＨ－１、ｎＴｂＷとｎＴｂＨはそれぞれ、ブロック１１０２の幅と高さである。ｖ［ｘ］がＬＦＮＳＴ係数のブロックであると仮設し、ここで、ｘ＝０、...、nLfnstOutＳｉze－１、nLfnstOutSize =（nTbW> = 8 && nTbH> = 8）? 48:16。
選択的に、変換ユニット２０６は、以下の命令を採用して変換係数のブロック１１０２を取得し、具体的は上記式（８）に示したようである。ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
選択的に、ｉｓＴｒａｎｓｐｏｓｅｄが０に等しい場合に、変換ユニット２０６は、以下の命令を採用して変換係数のブロック１１０２を取得し、具体的は上記式（１０）に示したようである。
ｉｓＴｒａｎｓｐｏｓｅｄが１に等しい場合に、変換ユニット２０６は、以下の命令を採用して変換係数のブロック１１０２を取得し、具体的は上記式（１１）に示したようである。
選択的に、ｉｓＴｒａｎｓｐｏｓｅｄが１に等しい場合に、変換ユニット２０６は、以下の命令を採用して変換係数のブロック１１０２を取得し、具体的は上記式（１０）に示したようである。
ｉｓＴｒａｎｓｐｏｓｅｄが０に等しい場合に、変換ユニット７０６は、以下の命令を採用して変換係数のブロック９０２を取得し、具体的は上記式（１１）に示したようである。
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
また、現在のブロックのイントラ予測モードが従来のイントラ予測モード（即ち、角度イントラ予測モード、ＤＣモード及びＰＬＡＮＡＲモードなど）である場合に、変換ユニット２０６は、表１１に示したルックアップテーブルを用いることで、従来のイントラ予測モードのモードインデックス値（ｐｒｅｄＭｏｄｅＩｎｔｒａに割り当てられ）に基づいて、ｌｆｎｓｔＴｒＳｅｔＩｄｘの値を決定し、即ち、現在のブロックのために選択されたＬＦＮＳＴ変換カーネル候補セットを決定する。変換ユニット２０６は、ＬＦＮＳＴを行うための変換カーネルを、ｌｆｎｓｔＴｒＳｅｔＩｄｘによって示されるＬＦＮＳＴ変換カーネル候補セット内の、ｌｆｎｓｔ＿ｉｎｄｅｘによって示される変換カーネルとして決定する。
ｌｆｎｓｔ＿ｉｎｄｅｘが０に等しくない場合に、変換ユニット２０６は、サブブロック１１００１、１１００２及び１１００３からの係数を用いて変換ブロックに対してＬＦＮＳＴを行い、ＬＦＮＳＴ係数を取得し、且つＬＦＮＳＴ係数をブロック１１０２のサブブロック１１００１、１１００２及び１１００３に入れる。ｄ［ｘ］［ｙ］が第１の変換係数のブロックであると仮設し、ここで、ｘ＝０、...、ｎＴｂＷ－１、ｙ＝０、...、ｎＴｂＨ－１、ｎＴｂＷとｎＴｂＨはそれぞれ、ブロック１１０２の幅と高さである。ｖ［ｘ］がＬＦＮＳＴ係数のブロックであると仮設し、ここで、ｘ＝０、...、nLfnstOutＳｉze－１、nLfnstOutSize =（nTbW> = 8 && nTbH> = 8）? 48:16。
選択的に、ｐｒｅｄＭｏｄｅＩｎｔｒａが３４以下である場合に、変換ユニット２０６は、以下の命令を採用して変換係数のブロック１１０２を取得し、具体的は上記式（１０）に示したようである。
選択的に、ｐｒｅｄＭｏｄｅＩｎｔｒａが３４より大きい場合に、変換ユニット２０６は、以下の命令を採用して変換係数のブロック１１０２を取得し、具体的は上記式（１１）に示したようである。
選択的に、ｐｒｅｄＭｏｄｅＩｎｔｒａが３４より大きい場合に、変換ユニット２０６は、以下の命令を採用して変換係数のブロック１１０２を取得し、具体的は上記式（１０）に示したようである。
選択的に、ｐｒｅｄＭｏｄｅＩｎｔｒａが３４以下である場合に、変換ユニット７０６は、以下の命令を採用して変換係数のブロック９０２を取得し、具体的は上記式（１１）に示したようである。
ｌｏｇ２ＬｆｎｓｔＳｉｚｅは上記式（９）のように決定される。
ステップ９０２、変換ユニット２０６は、ブロック１１０２における変換係数に対して第１の変換（即ち、コア変換）、例として、ＤＣＴに基づいて初期に設計された整数変換を行うことによって、現在のブロックの再構成残差ブロック１１０３を取得する。
さらに、加算器２０７は、現在のブロックの再構成ブロックを取得するために、その入力（予測ユニット２０２からのイントラ予測ブロック及び変換ユニット２０６からの再構成残差ブロック）に対して加算操作を行う。再構成ブロックはまた、イントラ予測モードのもとで符号化される他のブロックの参照として用いられるために、予測ユニット２０２に送られる。
画像又はサブ画像におけるすべてのＣＵが再構成された後、フィルタリングユニット２０８は再構成された画像又はサブ画像に対してインループフィルタリングを実行する。フィルタリングユニット２０８は１つ又は複数のフィルタを含み、例えば、デブロッキングフィルタ、サンプル適応オフセット（ＳＡＯ）フィルタ、適応ループフィルタ（ＡＬＦ）、クロマスケーリング付きルママッピング（ＬＭＣＳ）フィルタ、及びニューラルネットワークベースフィルタなどが挙げられる。又は、フィルタリングユニット２０８は、再構成ブロックが他のブロックを復号化するための参照として用いられないと判断した場合に、再構成ブロックにおける１つ又は複数の目標サンプルに対してインループフィルタリングを行う。
フィルタリングユニット２０８の出力は復号化された画像又はサブ画像であり、これらの復号化された画像又はサブ画像はＤＰＢユニット２０９に送られる。ＤＰＢユニット２０９は、タイミング及び制御情報に基づいて、復号化された画像を出力する。ＤＰＢユニット２０９に記憶された画像はさらに、予測ユニット２０２によるインター予測又はイントラ予測の参照として用いられることができる。
本発明の実施形態において、復号器２００は、プロセッサと、復号化プログラムを記録する記憶媒体とを備えた計算デバイスであってもよい。プロセッサが復号化プログラムを読み出して実行すると、復号器２００は、入力ビットストリームを読み出し、且つ対応する復号化ビデオを生成する。また、復号器２００は、１つ又は複数のチップを備えた計算デバイスであってもよい。チップで集積回路として実装されたユニットは、図２における対応のユニットと類似の接続及びデータ交換機能を有する。
本発明の実施形態において、符号化方法が提供される。現在のブロックの予測パラメータ及びＬＦＮＳＴパラメータを取得するようにビットストリームを解析する。予測パラメータは予測モードパラメータを含む。予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得する。現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定する。このように、ＭＩＰモードでは、復号化性能を確保した上で、複雑度を下げ、同時に復号化のプロセスに必要な記憶スペースを減らし、復号化効率を効果的に高めることができる。また、ＬＦＮＳＴ技術がＭＩＰモード予測に適用される場合に、ＭＩＰパラメータの導入により、ＬＦＮＳＴがより柔軟になり、復号化効率がさらに向上することができる。
本発明のもう１つの実施形態において、上記実施形態と同じ発明思想に基づいて、図１２を参照すると、図１２は、本発明の実施形態に係る符号器１２０の構造の概略図を示している。図１２に示すように、符号器１２０は、第１の決定ユニット１２０１、第１の予測ユニット１２０２、第１の変換ユニット１２０３及び符号化ユニット１２０４を含むことができる。
第１の決定ユニット１２０１は、現在のブロックの予測パラメータを決定するように構成されており、予測パラメータは予測モードパラメータを含む。
第１の決定ユニット１２０１は、予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定するようにさらに構成されている。
第１の予測ユニット１２０２は、ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定し、且つＭＩＰ予測値をフィルタリングすることによって現在のブロックの彩度コンポーネントのイントラ予測値を決定するように構成されており、ＭＩＰ予測値は現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
第１の変換ユニット１２０３は、現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定し、且つ予測残差値に対してＬＦＮＳＴを行うことによってＬＦＮＳＴパラメータを決定するように構成されている。
符号化ユニット１２０４は、ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込むように構成されている。
いくつかの実施形態において、現在のブロックの隣接サンプル値は、現在のブロックの左隣接サンプル値及び上隣接サンプル値を含む。
いくつかの実施形態において、シフトパラメータは、シフトオフセットパラメータ及びシフトナンバーパラメータを含む。
第１の決定ユニット１２０１は具体的に、固定の定数であるシフトオフセットパラメータの値に基づいて、ＭＩＰ入力サンプル値の合計とシフトオフセットパラメータとの乗積を決定し、固定の定数であるシフトナンバーパラメータの値に基づいて第１の定数値を決定し、第１のオフセットの値を第１の定数値と上記乗積との差に設定し、予測パラメータに基づいて、現在のブロックのＭＩＰ重み付け行列を決定し、且つＭＩＰ重み付け行列、ＭＩＰ入力サンプル値、シフトナンバーパラメータ及び第１のオフセットに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定するように構成されている。
いくつかの実施形態において、予測パラメータは、現在のブロックのサイズパラメータをさらに含む。
いくつかの実施形態において、第１の決定ユニット１２０１は、現在のブロックのサイズパラメータに基づいて現在のブロックのブロックサイズインデックス値を決定し、且つ現在のブロックの隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得しするように構成されている。
また、第１の決定ユニット１２０１は、現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、第２の定数値と第１の一時的参照値におけるインデックス０に対応の値との差に設定し、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、第１の一時的参照値におけるインデックスｉに対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定するように構成されており、ｉは０より大きい整数である。
また、第１の決定ユニット１２０１は、現在のブロックのブロックサイズインデックス値が予め設定された範囲外にある場合に、ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、第１の一時的参照値におけるインデックス（ｊ＋１）に対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定するようにさらに構成されており、ｊは０以上の整数である。
いくつかの実施形態において、第１の決定ユニット１２０１は、現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、現在のブロックの隣接サンプル値のビット深度に基づいて、第２の定数値を決定し、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、第１の一時的参照値におけるインデックス０に対応の値と第２の定数値との差に設定し、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、第１の一時的参照値におけるインデックスｉに対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定するようにさらに構成されており、ｉは０より大きい整数である。
いくつかの実施形態において、第１の決定ユニット１２０１は、現在のブロックの幅と高さがいずれも４に等しい場合に、現在のブロックのブロックサイズインデックス値を０に設定し、現在のブロックの幅と高さがいずれも８に等しいか、又は現在のブロックの幅と高さの一方が４に等しい場合に、現在のブロックのブロックサイズインデックス値を１に設定し、現在のブロックの幅と高さが上記条件を満たさない場合に、現在のブロックのブロックサイズインデックス値を２に設定するようにさらに構成されている。
いくつかの実施形態において、第１の決定ユニット１２０１は、現在のブロックの隣接サンプル値をダウンサンプリングすることによって第１の一時的参照値を取得し、現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、第１の一時的参照値の後の１つのデータユニット内で第２の定数値をバッファリングすることによって第２の一時的参照値を取得し、且つＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、第２の一時的参照値におけるインデックス（ｊ＋１）に対応の値と第２の一時的参照値におけるインデックス０に対応の値との差に設定するようにさらに構成されており、ｊは０以上の整数である。
いくつかの実施形態において、第１の決定ユニット１２０１は、第２の定数値を２の累乗に設定するようにさらに構成されており、前記累乗の指数は整数であり、現在のブロックの隣接サンプル値のビット深度から１を引いたものに等しい。
いくつかの実施形態において、第１の決定ユニット１２０１は、「１」を２進左シフトすることによって第２の定数値を取得するようにさらに構成されており、左シフトされたビット数は、現在のブロックの隣接サンプル値のビット深度から１を引いたものに等しい。
いくつかの実施形態において、シフトナンバーパラメータの値は、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数である。
いくつかの実施形態において、シフトナンバーパラメータの値が６に設定される。
いくつかの実施形態において、シフトオフセットパラメータの値は、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数である。
いくつかの実施形態において、シフトオフセットパラメータの値が３２に設定される。
いくつかの実施形態において、第１の決定ユニット１２０１は、第１の定数値を２の累乗に設定するようにさらに構成されており、前記累乗の指数は整数であり、シフトナンバーパラメータの値から１を引いたものに等しい。
いくつかの実施形態において、第１の決定ユニット１２０１は、「１」を２進左シフトすることによって第１の定数値を取得するようにさらに構成されており、左シフトされたビット数はシフトナンバーパラメータの値から１を引いたものに等しい。
いくつかの実施形態において、図１２を参照すると、符号器１２０は第１の計算ユニット１２０５をさらに含むことができる。第１の計算ユニット１２０５は、ＭＩＰ重み付け行列とＭＩＰ入力サンプル値との第１の重み付け和を計算し、第１の重み付け和と第１のオフセットとの第１の合計を計算し、第１の合計を２進右シフトすることによって第１の右シフト値を取得するように構成されており、右シフトされたビット数はシフトナンバーパラメータの値に等しい。
第１の決定ユニット１２０１は、現在のブロックの彩度コンポーネントのＭＩＰ予測値を、第１の右シフト値と第１の一時的参照値におけるインデックス０に対応の値との合計に設定するようにさらに構成されており、第１の一時的参照値は、現在のブロックの隣接サンプル値をダウンサンプリングすることによって取得される。
いくつかの実施形態において、第１の変換ユニット１２０３は、予測残差値に基づいて現在のブロックの残差ブロックを決定し、残差ブロックに対して第１の変換を行うことによって第１の変換係数ブロックを取得するように構成されている。
第１の決定ユニット１２０１は、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うか否かを決定するようにさらに構成されている。
第１の変換ユニット１２０３は、決定の結果が少なくとも一部の変換係数に対してＬＦＮＳＴを行うことである場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定するようにさらに構成されている。
いくつかの実施形態において、第１の決定ユニット１２０１は、ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのサイズパラメータのうちの最小値を決定し、且つ最小値が第１の予め設定された閾値以上である場合に、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことを決定するようにさらに構成されている。
いくつかの実施形態において、ＬＦＮＳＴパラメータはＬＦＮＳＴインデックスを含む。第１の決定ユニット１２０１は、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うと決定される場合に、ＬＦＮＳＴインデックスの値を０より大きく設定し、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行わないと決定される場合に、ＬＦＮＳＴインデックスの値を０に設定するようにさらに構成されている。
符号化ユニット１２０４は、ＬＦＮＳＴインデックスを符号化し、且つビットストリームに書き込むように構成されている。
いくつかの実施形態において、ＬＦＮＳＴパラメータはＬＦＮＳＴ係数をさらに含む。図１２を参照すると、符号器１２０は量子化ユニット１２０６をさらに含むことができる。
第１の変換ユニット１２０３は、第１の変換係数ブロックにおける少なくとも一部の変換係数に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴ係数を取得するように構成されている。
量子化ユニット１２０６は、ＬＦＮＳＴ係数を量子化することによって、量子化係数を取得するように構成されている。
符号化ユニット１２０４は、量子化係数を符号化し、且つビットストリームに書き込むようにさらに構成されている。
本発明の実施形態において、「ユニット」は、回路の一部、プロセッサの一部、プログラムの一部又はソフトウェアの一部などであり得ることが理解され得る。もちろん、「ユニット」は、モジュール又は非モジュールであることもできる。また、本実施形態に係る各構成ユニットは、１つの処理ユニットに集積されてもよいし、各ユニットが単独に物理的に存在してもよいし、２つ以上のユニットは１つのユニットに集積されてもよい。上記集積ユニットは、ハードウェア又はソフトウェア機能モジュールの形式で実現されることができる。
集積ユニットは、ソフトウェアの機能モジュールとして実現され、且つ独立の製品として販売されたり使用されたりする場合、コンピュータ可読記録媒体に記憶されてもよい。この理解によれば、本実施形態の技術的解決策について、本質的な部分、又は従来技術に貢献できた部分、又は当該技術的解決策の全部又は一部は、ソフトウェア製品として表現され得る。このコンピュータソフトウェア製品は、記憶媒体に記憶されており、１つのコンピュータデバイス（パソコン、サーバ、又はネットワークデバイスなどであってもよい）又はプロセッサに本実施形態に記載の方法の全部又は一部のステップを実行させるための複数の命令を含む。前記記憶媒体は、ユニバーサルシリアルバス（ｕｎｉｖｅｒｓａｌ ｓｅｒｉａｌ ｂｕｓ、ＵＳＢ）フラッシュディスク、モバイルハードディスク、読み取り専用メモリ（Ｒｅａd Ｏｎｌｙ Ｍｅｍｏｒｙ、ＲＯＭ）、ランダムアクセスメモリ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＲＡＭ）、磁気ディスク又は光ディスクなどのプログラムコードを記憶可能な各種類の媒体を含む。
従って、本発明の実施形態において、符号器１２０に適用されるコンピュータ記憶媒体が提供される。当該コンピュータ記憶媒体はコンピュータプログラムを記憶しており、当該コンピュータプログラムは、第１のプロセッサによって実行されると、上記実施形態における任意の方法を実行する。
上記符号器１２０の構成及びコンピュータ記憶媒体に基づいて、図１３を参照すると、図１３は、本発明の実施形態に係る符号器１２０の具体的なハードウェア構造の概略図を示している。図１３に示すように、符号器１２０は、第１の通信インターフェース１３０１、第１のメモリ１３０２及び第１のプロセッサ１３０３を含むことができる。各コンポーネントは、第１のバスシステム１３０４を介して結合される。第１のバスシステム１３０４はこれらのコンポーネントの間の接続と通信を実現するために用いられる。第１のバスシステム１３０４はデータバス以外に、電力バス、制御バス及びステータス信号バスをさらに含む。ただし、明確に説明するために、図１３において、各種類のバスがいずれも第１のバスシステム１３０４と表記される。
第１の通信インターフェース１３０１は、他の外部ネットワーク要素との間で情報を受送信するプロセスにおいて、信号を受送信するように構成されている。
第１のメモリ１３０２は、第１のプロセッサ１３０３で実行可能なコンピュータプログラムを記憶するように構成されている。
第１のプロセッサ１３０３は、コンピュータプログラムを実行する際に、以下を実行するように構成されている。
現在のブロックの予測パラメータを決定する。予測パラメータは予測モードパラメータを含む。
予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。
ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値は現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。
現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定する。
予測残差値に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定する。
ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込む。
本発明の実施形態の第１のメモリ１３０２は、揮発性メモリ又は不揮発性メモリであることができ、又は揮発性メモリ及び不揮発性メモリの両方を含むことができる。不揮発性メモリは、読み取り専用メモリ（Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ、ＲＯＭ）、プログラム可能な読み取り専用メモリ（Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ、ＰＲＯＭ）、消去可能なプログラム可能な読み取り専用メモリ（Ｅｒａｓａｂｌｅ ＰＲＯＭ、ＥＰＲＯＭ）、電気的に消去可能なプログラム可能な読み取り専用メモリ（Ｅｌｅｃｔｒｉｃａｌｌｙ ＥＰＲＯＭ、ＥＥＰＲＯＭ）、又はフラッシュメモリ（Ｆｌａｓｈ Ｍｅｍｏｒｙ）であることができる。揮発性メモリは、外部高速キャッシュとして機能するランダムアクセスメモリ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ＲＡＭ）であることができる。例示的であるが限定的ではない例として、様々なＲＡＭが利用可能であり、例えば、スタティックランダムアクセスメモリ（Ｓｔａｔｉｃ ＲＡＭ、ＳＲＡＭ）、ダイナミックランダムアクセスメモリ（Ｄｙｎａｍｉｃ ＲＡＭ、ＤＲＡＭ）、同期ダイナミックランダムアクセスメモリ（Ｓｙｎｃｈｒｏｎｏｕｓ ＤＲＡＭ、ＳＤＲＡＭ）、ダブルデータレート同期ダイナミックランダムアクセスメモリ（Ｄｏｕｂｌｅ Ｄａｔａ Ｒａｔｅ ＳＤＲＡＭ、ＤＤＲＳＤＲＡＭ）、強化された同期ダイナミックランダムアクセスメモリ（Ｅｎｈａｎｃｅｄ ＳＤＲＡＭ、ＥＳＤＲＡＭ）、同期リンクダイナミックランダムアクセスメモリ（Ｓｙｎｃｈ－ｌｉｎｋ ＤＲＡＭ、ＳＬＤＲＡＭ）、ダイレクトランバスランダムアクセスメモリ（Ｄｉｅｒｃｔ Ｒａｍｂｕｓ ＲＡＭ、ＤＲＲＡＭ）が挙げられる。本明細書に記載されるシステム及び方法の第１のメモリ１３０２は、これら及び他の任意の適切なタイプのメモリを含むことができるが、これらに限定されない。
第１のプロセッサ１３０３は、信号処理能力を有する集積回路チップであることができる。実施プロセスにおいて、上記方法実施形態の各ステップは、第１のプロセッサ１３０３のハードウェア形態の集積論理回路（Ｉｎｔｅｇｒａｔｅｄ Ｌｏｇｉｃ Ｃｉｒｃｕｉｔ）又はソフトウェア形態の命令によって完成されることができる。上記第１のプロセッサ１３０３は、汎用プロセッサ、デジタル信号プロセッサ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ、ＤＳＰ）、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ、ＡＳＩＣ）、フィールドプログラム可能なゲートアレイ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ、ＦＰＧＡ）又は他のプログラム可能なロジックデバイス、ディスクリートゲート又はトランジスタロジックデバイス、ディスクリートハードウェアコンポーネントであることができる。プロセッサは、本発明の実施形態に開示された様々な方法、ステップ及び論理ブロック図を実現又は実行することができる。汎用プロセッサは、マイクロプロセッサ又は任意の通常のプロセッサなどであることができる。本発明の実施形態に開示された方法のステップは、直接にハードウェア復号化プロセッサによって実行及び完成されることができ、又は復号化プロセッサにおけるハードウェア及びソフトウェアモジュールの組み合わせによって実行及び完成されることができる。ソフトウェアモジュールは、ランダムアクセスメモリ、フラッシュメモリ、読み取り専用メモリ、プログラム可能な読み取り専用メモリ、又は電気的に消去可能なプログラム可能なメモリ、レジスタなど本技術分野におけるマチュアな記憶媒体に位置することができる。当該記憶媒体は第１のメモリ１３０２に位置する。第１のプロセッサ１３０３は、第１のメモリ１３０２における情報を読み出し、プロセッサのハードウェアと合わせて上記方法のステップを完成する。
本発明に記載されたこれらの実施形態は、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード又はその組合によって実現されることができることが理解され得る。ハードウェアによって実現される場合、処理ユニットは、１つ又は複数の特定用途向け集積回路（ＡＳＩＣ）、デジタル信号処理（ＤＳＰ）、ＤＳＰデバイス（ＤＳＰ Ｄｅｖｉｃｅ、ＤＳＰＤ）、プログラム可能なロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ、ＰＬＤ）、フィールドプログラム可能なゲートアレイ（ＦＰＧＡ）、汎用プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサ、本発明に記載される機能を実行するために用いられるその他の電子ユニット又はその組合で実現されることができる。ソフトウェアによって実現される場合、本発明に記載される技術は、本発明に記載される機能を実行するためのモジュール（例えば、手順、関数など）によって実現されることができる。ソフトウェアコードはメモリに記憶され且つプロセッサによって実行される。メモリは、プロセッサ内又はプロセッサの外部で実現することができる。
選択的に、別の実施形態として、第１のプロセッサ１３０３は、コンピュータプログラムを実行する際に、上記実施形態における任意の方法を実行するように構成されている。
本発明の実施形態において、符号器が提供される。当該符号器は、第１の決定ユニット、第１の予測ユニット、第１の変換ユニット及び符号化ユニットを含むことができる。このように、ＭＩＰモードでは、符号化性能を確保した上で、複雑度を下げ、同時に符号化のプロセスに必要な記憶スペースを減らし、符号化効率を効果的に高めることができる。また、ＬＦＮＳＴ技術がＭＩＰモード予測に適用される場合に、ＭＩＰパラメータの導入により、ＬＦＮＳＴがより柔軟になり、符号化効率がさらに向上することができる。
本発明のもう１つの実施形態において、上記実施形態と同じ発明思想に基づいて、図１４を参照すると、図１４は、本発明の実施形態に係る復号器１４０の構造の概略図を示している。図１４に示すように、復号器１４０は、解析ユニット１４０１、第２の決定ユニット１４０２、第２の予測ユニット１４０３及び第２の変換ユニット１４０４を含むことができる。
解析ユニット１４０１は、現在のブロックの予測パラメータ及びＬＦＮＳＴパラメータを取得するようにビットストリームを解析するように構成されており、予測パラメータは予測モードパラメータを含む。
第２の決定ユニット１４０２は、予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定するように構成されている。
第２の予測ユニット１４０３は、ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定し、且つＭＩＰ予測値をフィルタリングすることによって現在のブロックの彩度コンポーネントのイントラ予測値を決定するように構成されており、ＭＩＰ予測値は現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
第２の変換ユニット１４０４は、ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得し、且つ第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得するように構成されている。
第２の決定ユニット１４０２は、現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定するようにさらに構成されている。
いくつかの実施形態において、現在のブロックの隣接サンプル値は、現在のブロックの左隣接サンプル値及び上隣接サンプル値を含む。
いくつかの実施形態において、シフトパラメータは、シフトオフセットパラメータ及びシフトナンバーパラメータを含む。
第２の決定ユニット１４０２は具体的に、固定の定数であるシフトオフセットパラメータの値に基づいて、ＭＩＰ入力サンプル値の合計とシフトオフセットパラメータとの乗積を決定し、固定の定数であるシフトナンバーパラメータの値に基づいて第１の定数値を決定し、第１のオフセットの値を第１の定数値と上記乗積との差に設定し、予測パラメータに基づいて、現在のブロックのＭＩＰ重み付け行列を決定し、且つＭＩＰ重み付け行列、ＭＩＰ入力サンプル値、シフトナンバーパラメータ及び第１のオフセットに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定するように構成されている。
いくつかの実施形態において、予測パラメータは、現在のブロックのサイズパラメータをさらに含む。
いくつかの実施形態において、第２の決定ユニット１４０２は、現在のブロックのサイズパラメータに基づいて現在のブロックのブロックサイズインデックス値を決定し、且つ現在のブロックの隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得しするように構成されている。
また、第２の決定ユニット１４０２は、現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、第２の定数値と第１の一時的参照値におけるインデックス０に対応の値との差に設定し、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、第１の一時的参照値におけるインデックスｉに対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定するように構成されており、ｉは０より大きい整数である。
また、第２の決定ユニット１４０２は、現在のブロックのブロックサイズインデックス値が予め設定された範囲外にある場合に、ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、第１の一時的参照値におけるインデックス（ｊ＋１）に対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定するようにさらに構成されており、ｊは０以上の整数である。
いくつかの実施形態において、第２の決定ユニット１４０２は、現在のブロックのブロックサイズインデックス値が予め設定された範囲内にある場合に、現在のブロックの隣接サンプル値のビット深度に基づいて、第２の定数値を決定し、ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、第１の一時的参照値におけるインデックス０に対応の値と第２の定数値との差に設定し、ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、第１の一時的参照値におけるインデックスｉに対応の値と第１の一時的参照値におけるインデックス０に対応の値との差に設定するようにさらに構成されており、ｉは０より大きい整数である。
いくつかの実施形態において、第２の決定ユニット１４０２は、現在のブロックの幅と高さがいずれも４に等しい場合に、現在のブロックのブロックサイズインデックス値を０に設定し、現在のブロックの幅と高さがいずれも８に等しいか、又は現在のブロックの幅と高さの一方が４に等しい場合に、現在のブロックのブロックサイズインデックス値を１に設定し、現在のブロックの幅と高さが上記条件を満たさない場合に、現在のブロックのブロックサイズインデックス値を２に設定するようにさらに構成されている。
いくつかの実施形態において、第２の決定ユニット１４０２は、現在のブロックの隣接サンプル値をダウンサンプリングすることによって第１の一時的参照値を取得し、現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、第１の一時的参照値の後の１つのデータユニット内で第２の定数値をバッファリングすることによって第２の一時的参照値を取得し、且つＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、第２の一時的参照値におけるインデックス（ｊ＋１）に対応の値と第２の一時的参照値におけるインデックス０に対応の値との差に設定するようにさらに構成されており、ｊは０以上の整数である。
いくつかの実施形態において、第２の決定ユニット１４０２は、第２の定数値を２の累乗に設定するようにさらに構成されており、前記累乗の指数は整数であり、現在のブロックの隣接サンプル値のビット深度から１を引いたものに等しい。
いくつかの実施形態において、第２の決定ユニット１４０２は、「１」を２進左シフトすることによって第２の定数値を取得するようにさらに構成されており、左シフトされたビット数は、現在のブロックの隣接サンプル値のビット深度から１を引いたものに等しい。
いくつかの実施形態において、シフトナンバーパラメータの値は、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数である。
いくつかの実施形態において、シフトナンバーパラメータの値が６に設定される
いくつかの実施形態において、シフトオフセットパラメータの値は、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数である。
いくつかの実施形態において、シフトオフセットパラメータの値が３２に設定される。
いくつかの実施形態において、第２の決定ユニット１４０２は、第１の定数値を２の累乗に設定するようにさらに構成されており、前記累乗の指数は整数であり、シフトナンバーパラメータの値から１を引いたものに等しい。
いくつかの実施形態において、第２の決定ユニット１４０２は、「１」を２進左シフトすることによって第１の定数値を取得するようにさらに構成されており、左シフトされたビット数はシフトナンバーパラメータの値から１を引いたものに等しい。
いくつかの実施形態において、図１４を参照すると、復号器１４０は第２の計算ユニット１４０５をさらに含むことができる。第２の計算ユニット１４０５は、ＭＩＰ重み付け行列とＭＩＰ入力サンプル値との第１の重み付け和を計算し、第１の重み付け和と第１のオフセットとの第１の合計を計算し、第１の合計を２進右シフトすることによって第１の右シフト値を取得するように構成されており、右シフトされたビット数はシフトナンバーパラメータの値に等しい。
第２の決定ユニット１４０２は、現在のブロックの彩度コンポーネントのＭＩＰ予測値を、第１の右シフト値と第１の一時的参照値におけるインデックス０に対応の値との合計に設定するようにさらに構成されており、第１の一時的参照値は、現在のブロックの隣接サンプル値をダウンサンプリングすることによって取得される。
いくつかの実施形態において、第２の決定ユニット１４０２は、ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定するようにさらに構成されている。
解析ユニット１４０１は、ビットストリームにＬＦＮＳＴパラメータがある場合に、ＬＦＮＳＴパラメータを取得するようにビットストリームを解析するようにさらに構成されている。
いくつかの実施形態において、第２の決定ユニット１４０２は、ＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定する場合に、現在のブロックのサイズパラメータのうちの最小値を決定し、最小値が第１の予め設定された閾値以上である場合に、ビットストリームにＬＦＮＳＴパラメータがあると決定するようにさらに構成されている。
いくつかの実施形態において、図１４を参照すると、復号器１４０は逆量子化ユニット１４０６をさらに含むことができる。
解析ユニット１４０１は、ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの量子化係数を取得するようにビットストリームを解析するようにさらに構成されている。
逆量子化ユニット１４０６は、量子化係数を逆量子化することによって、現在のブロックの再構成変換係数ブロックを取得するように構成されている。
いくつかの実施形態において、逆量子化ユニット１４０６は具体的に、量子化係数をスケーリングすることによって、現在のブロックの再構成変換係数ブロックを取得するように構成されている。
いくつかの実施形態において、解析ユニット１４０１は具体的に、ＬＦＮＳＴインデックスの値を取得するようにビットストリームを解析し、ＬＦＮＳＴインデックスの値が０より大きい場合に、現在のブロックに対してＬＦＮＳＴを行うと決定し、ＬＦＮＳＴインデックスの値が０に等しい場合に、現在のブロックに対してＬＦＮＳＴを行わないと決定するように構成されている。
本実施形態において、「ユニット」は、回路の一部、プロセッサの一部、プログラムの一部又はソフトウェアの一部などであり得ることが理解され得る。もちろん、「ユニット」は、モジュール又は非モジュールであることもできる。また、本実施形態に係る各構成ユニットは、１つの処理ユニットに集積されてもよいし、各ユニットが単独に物理的に存在してもよいし、２つ以上のユニットは１つのユニットに集積されてもよい。上記集積ユニットは、ハードウェア又はソフトウェア機能モジュールの形式で実現されることができる。
集積ユニットは、ソフトウェアの機能モジュールとして実現され、且つ独立の製品として販売されたり使用されたりする場合、コンピュータ可読記録媒体に記憶されてもよい。この理解によれば、本発明の実施形態において、復号器１４０に適用されるコンピュータ記憶媒体が提供される。当該コンピュータ記憶媒体はコンピュータプログラムを記憶しており、当該コンピュータプログラムは、第２のプロセッサによって実行されると、上記実施形態における任意の方法を実行する。
上記復号器１４０の構成及びコンピュータ記憶媒体に基づいて、図１５を参照すると、図１５は、本発明の実施形態に係る復号器１４０の具体的なハードウェア構造の概略図を示している。図１５に示すように、復号器１４０は、第２の通信インターフェース１５０１、第２のメモリ１５０２及び第２のプロセッサ１５０３を含むことができる。各コンポーネントは、第２のバスシステム１５０４を介して結合される。第２のバスシステム１５０４はこれらのコンポーネントの間の接続と通信を実現するために用いられる。第２のバスシステム１５０４はデータバス以外に、電力バス、制御バス及びステータス信号バスをさらに含む。ただし、明確に説明するために、図１５において、各種類のバスがいずれも第２のバスシステム１５０４と表記される。
第２の通信インターフェース１５０１は、他の外部ネットワーク要素との間で情報を受送信するプロセスにおいて、信号を受送信するように構成されている。
第２のメモリ１５０２は、第２のプロセッサ１５０３で実行可能なコンピュータプログラムを記憶するように構成されている。
第２のプロセッサ１５０３は、コンピュータプログラムを実行する際に、以下を実行するように構成されている。
現在のブロックの予測パラメータ及びＬＦＮＳＴパラメータを取得するようにビットストリームを解析する。予測パラメータは予測モードパラメータを含む。
予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。
ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値は現在のブロックの彩度コンポーネントにおける一部のサンプルの予測値である。
ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。
ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。
第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得する。
現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定する。
選択的に、別の実施形態として、第２のプロセッサ１５０３は、コンピュータプログラムを実行する際に、上記実施形態における任意の方法を実行するように構成されている。
第２のメモリ１５０２のハードウェア機能は、第１のメモリ１３０２のハードウェア機能と類似であり、第２のプロセッサ１５０３のハードウェア機能は、第１のプロセッサ１３０３のハードウェア機能と類似である。
本実施形態において、復号器が提供される。当該復号器は、解析ユニット、第２の決定ユニット、第２の予測ユニット及び第２の変換ユニットを含むことができる。このように、ＭＩＰモードでは、復号化性能を確保した上で、複雑度を下げ、同時に復号化のプロセスに必要な記憶スペースを減らし、復号化効率を効果的に高めることができる。また、ＬＦＮＳＴ技術がＭＩＰモード予測に適用される場合に、ＭＩＰパラメータの導入により、ＬＦＮＳＴがより柔軟になり、復号化効率がさらに向上することができる。
本発明のもう１つの実施形態において、図１６は、本発明の実施形態に係る送信デバイスの構造の概略図を示している。図１６に示すように、例示的な送信デバイス１６００が示された。収集ユニット１６０１は、ビデオ信号を取得し且つビデオ信号を符号器１６０２に送る。収集ユニット１６０１は、１つ又は複数のカメラ（深度カメラを含む）を備えたデバイスであってもよい。収集ユニット１６０１は、ビデオを取得するためにビットストリームを部分的に又は完全に復号化するデバイスであってもよい。収集ユニット１６０１は、音声信号をキャプチャするために１つ又は複数の素子をさらに含むことができる。符号器１６０２の１つの具体的な実施形態は、収集ユニット１６０１からの、その入力ビデオとされるビデオ信号を復号化し且つビデオビットストリームを生成する上記実施形態に記載の符号器１００又は符号器１２０である。符号器１６０２は、音声信号を符号化することによって音声ビットストリームを生成するために、１つ又は複数の音声符号器をさらに含むことができる。記憶／送信ユニット１６０３は、符号器１６０２からビデオビットストリームを受信する。記憶／送信ユニット１６０３はさらに、符号器１６０２から音声ビットストリームを受信し、且つビデオビットストリームと音声ビットストリームとを一緒に圧縮することによってメディアファイル（例えば、ＩＳＯベースのメディアファイルフォーマット）又は伝送ストリームを形成する。
選択的に、記憶／送信ユニット１６０３は、メディアファイル又は伝送ストリームを記憶ユニットに書き込み、記憶ユニットの例としては、ハードディスク、デジタルビデオディスク（ｄｉｇｉｔａｌ ｖｅｒｓａｔｉｌｅ ｄｉｓｃ、ＤＶＤ）ディスク、クラウドディスク、携帯型記憶装置が挙げられる。
選択的に、記憶／送信ユニット１６０３は、ビットストリームをトランスポートネットワークに送り、伝送ネットワークの例としては、インターネット、有線ネットワーク、セルラーネットワーク、無線ローカルエリアネットワークなどが挙げられる。
本発明のもう１つの実施形態において、図１７を参照すると、図１７は、本発明の実施形態に係る目標デバイスの構造の概略図を示している。図１７に示すように、例示的な目標デバイス１７００が示された。受信ユニット１７０１は、ネットワークからメディアファイル又は伝送ストリームを受信し、又は、記憶装置からメディアファイル又は伝送ストリームを読み出す。受信ユニット１７０１は、メディアファイル又は伝送ストリームからのビデオビットストリーム及び音声ビットストリームを分離する。受信ユニット１７０１は、ビデオビットストリームを抽出することによって新しいビデオビットストリームを生成することがさらにできる。受信ユニット１７０１は、音声ビットストリームを抽出することによって新しい音声ビットストリームを生成することがさらにできる。復号器１７０２は、１つ又は複数のビデオ復号器を含み、ビデオ復号器の１つの具体的な実施形態は、例として、上記実施形態に記載の復号器２００又は復号器１４０である。
復号器１７０２は、１つ又は複数の音声復号器をさらに含むことができる。復号器１７０２は、復号化ビデオと１つ又は複数のサウンドチャンネルに対応の１つ又は複数の復号化音声とを取得するために、受信ユニット１７０１からのビデオビットストリーム及び音声ビットストリームを復号化する。レンダリングユニット１７０３は、再構成されたビデオが表示に適するように、再構成されたビデオに対して操作を実行する。その操作は、ノイズ除去、合成、色空間の変換、アップサンプリング、ダウンサンプリングなどの知覚的品質を向上させる操作のうちの１つ又は複数を含むことができる。レンダリングユニット１７０３はさらに、表示された音声信号の知覚的品質を向上させるために、復号された音声に対して操作を実行することができる。
本発明のもう１つの実施形態において、図１８を参照すると、図１８は、本発明の実施形態に係る通信システムの構造の概略図を示している。図１８に示すように、例示的な通信システム１８００が示された。ソースデバイス１８０１は、図１６に示した送信デバイス１６００であってもよい。ビットストリームを記憶／伝送するために、記憶／送信ユニット１６０３の出力が、記憶媒体／トランスポートネットワーク１８０２によって処理される。目標デバイス１８０３は、図１７に示した目標デバイス１７００であってもよい。ここで、受信ユニット１７０１は、記憶媒体／トランスポートネットワーク１８０２からビットストリームを取得することができる。受信ユニット１７０１は、メディアファイル又は伝送ストリームから新しいビデオビットストリームを抽出することができる。受信ユニット１７０１は、メディアファイル又は伝送ストリームから新しい音声ビットストリームを抽出することがさらにできる。
なお、本発明において、「含む」、「備える」又は他のバリアントなどの用語は非排他的な含みをカバーすることを意図するため、一連の要素を含むプロセス、方法、物品又は装置は、それらの要素だけではなく、明確にリストされていない他の要素も含み、又はプロセス、方法、物品又は装置の固有の他の要素を含むことができる。制限がない限り、「…を含む」という文によって限定された要素を含むプロセス、方法、物品又は装置に別の同じ要素が存在することを排除しない。
上記本発明の実施形態のシーケンス番号は、実施形態の優劣を示すものではなく、ただ説明するために用いられる。
本発明に係るいくつかの方法実施形態に開示された方法は、矛盾がない限り、任意に組み合わせて、新しい方法実施形態を得ることができる。
本発明に係るいくつかの製品実施形態に開示された特徴は、矛盾がない限り、任意に組み合わせて、新しい製品実施形態を得ることができる。
本発明に係るいくつかの方法又は装置の実施形態に開示された特徴は、矛盾がない限り、任意に組み合わせて、新しい方法実施形態又は装置実施形態を得ることができる。
上記は、ただ本発明の具体的な実施形態であり、本発明の保護範囲はそれに限定されるものではない。当業者が本発明に開示された技術範囲内で容易に想到し得る変更又は置換は全て本発明の範囲内に含まれるべきである。従って、本発明の保護範囲は特許請求の保護範囲によって決められるべきである。

本発明の実施形態において、符号器側では、現在のブロックの予測パラメータを決定した後、予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。現在のブロックの彩度コンポーネントのイントラ予測値に基づいて、現在のブロックの彩度コンポーネントの予測残差値を決定する。予測残差値に対してＬＦＮＳＴを行うことによって、ＬＦＮＳＴパラメータを決定する。ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込む。復号器側では、現在のブロックの予測パラメータ及びＬＦＮＳＴパラメータを取得するようにビットストリームを解析した後、予測モードパラメータがＭＩＰモードを用いて現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、現在のブロックの隣接サンプル値を取得し、且つ現在のブロックの隣接サンプル値に基づいて現在のブロックのＭＩＰ入力サンプル値を決定する。ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、現在のブロックの彩度コンポーネントのＭＩＰ予測値を決定する。ＭＩＰ予測値をフィルタリングすることによって、現在のブロックの彩度コンポーネントのイントラ予測値を決定する。ＬＦＮＳＴパラメータが現在のブロックに対してＬＦＮＳＴを行うことを示す場合に、現在のブロックの再構成変換係数ブロックを決定し、再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対してＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得する。第２の変換係数ブロックに対して第１の変換を行うことによって、現在のブロックの彩度コンポーネントの再構成残差ブロックを取得する。現在のブロックの彩度コンポーネントのイントラ予測値と再構成残差ブロックとに基づいて、現在のブロックの彩度コンポーネントの再構成ブロックを決定する。このように、ＭＩＰモードでは、符号化・復号化の性能を確保した上で、複雑度を下げ、同時に符号化・復号化のプロセスに必要な記憶スペースを減らし、符号化・復号化効率を効果的に高めることができる。また、ＬＦＮＳＴ技術がＭＩＰモード予測に適用される場合に、ＭＩＰパラメータの導入により、ＬＦＮＳＴがより柔軟になり、符号化・復号化効率がさらに向上することができる。

Claims (48)

  1. 符号器に適用される符号化方法であって、前記方法は、
    現在のブロックの予測パラメータを決定することであって、前記予測パラメータは予測モードパラメータを含むことと、
    前記予測モードパラメータがマトリックスベースイントラ予測（Ｍａｔｒｉｘ－ｂａｓｅｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＭＩＰ）モードを用いて前記現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、前記現在のブロックの隣接サンプル値を取得し、且つ前記現在のブロックの前記隣接サンプル値に基づいて前記現在のブロックのＭＩＰ入力サンプル値を決定することと、
    前記ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、前記現在のブロックの前記彩度コンポーネントのＭＩＰ予測値を決定することであって、前記ＭＩＰ予測値は前記現在のブロックの前記彩度コンポーネントにおける一部のサンプルの予測値であることと、
    前記ＭＩＰ予測値をフィルタリングすることによって、前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値を決定することと、
    前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値に基づいて、前記現在のブロックの前記彩度コンポーネントの予測残差値を決定することと、
    前記予測残差値に対して低周波非分離変換（ｌｏｗ－ｆｒｅｑｕｅｎｃｙ ｎｏｎ－ｓｅｐａｒａｂｌｅ ｔｒａｎｓｆｏｒｍ、ＬＦＮＳＴ）を行うことによって、ＬＦＮＳＴパラメータを決定することと、
    前記ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込むことと、を含む、
    ことを特徴とする符号化方法。
  2. 前記現在のブロックの前記隣接サンプル値は、前記現在のブロックの左隣接サンプル値及び上隣接サンプル値を含む、
    ことを特徴とする請求項１に記載の方法。
  3. 前記シフトパラメータは、シフトオフセットパラメータ及びシフトナンバーパラメータを含み、
    それに応じて、前記ＭＩＰ入力サンプル値、前記ＭＩＰ重み付け行列及び前記シフトパラメータに基づいて、前記現在のブロックの前記彩度コンポーネントの前記ＭＩＰ予測値を決定することは、
    固定の定数である前記シフトオフセットパラメータの値に基づいて、前記ＭＩＰ入力サンプル値の合計と前記シフトオフセットパラメータとの乗積を決定することと、
    固定の定数である前記シフトナンバーパラメータの値に基づいて第１の定数値を決定することと、
    第１のオフセットの値を前記第１の定数値と前記乗積との差に設定することと、
    前記予測パラメータに基づいて、前記現在のブロックのＭＩＰ重み付け行列を決定することと、
    前記ＭＩＰ重み付け行列、前記ＭＩＰ入力サンプル値、前記シフトナンバーパラメータ及び前記第１のオフセットに基づいて、前記現在のブロックの前記彩度コンポーネントの前記ＭＩＰ予測値を決定することと、を含む、
    ことを特徴とする請求項１に記載の方法。
  4. 前記予測パラメータは、前記現在のブロックのサイズパラメータをさらに含む、
    ことを特徴とする請求項３に記載の方法。
  5. 前記現在のブロックの前記隣接サンプル値に基づいて前記現在のブロックの前記ＭＩＰ入力サンプル値を決定することは、
    前記現在のブロックの前記サイズパラメータに基づいて、前記現在のブロックのブロックサイズインデックス値を決定することと、
    前記現在のブロックの前記隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得することと、
    前記現在のブロックの前記ブロックサイズインデックス値が予め設定された範囲内にある場合に、前記現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、前記ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、前記第２の定数値と前記第１の一時的参照値におけるインデックス０に対応の値との差に設定し、前記ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、前記第１の一時的参照値におけるインデックスｉに対応の値と前記第１の一時的参照値におけるインデックス０に対応の前記値との差に設定することであって、ｉは０より大きい整数であることと、
    前記現在のブロックの前記ブロックサイズインデックス値が前記予め設定された範囲外にある場合に、前記ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、前記第１の一時的参照値におけるインデックス（ｊ＋１）に対応の値と前記第１の一時的参照値におけるインデックス０に対応の前記値との差に設定することであって、ｊは０以上の整数であることと、を含む、
    ことを特徴とする請求項４に記載の方法。
  6. 前記現在のブロックの前記ブロックサイズインデックス値が前記予め設定された範囲内にある場合に、前記方法はさらに、
    前記現在のブロックの前記隣接サンプル値の前記ビット深度に基づいて、前記第２の定数値を決定し、前記ＭＩＰ入力サンプル値における前記インデックス０に対応の前記値を、前記第１の一時的参照値における前記インデックス０に対応の前記値と前記第２の定数値との差に設定し、前記ＭＩＰ入力サンプル値における前記インデックスｉに対応の前記値を、前記第１の一時的参照値における前記インデックスｉに対応の前記値と前記第１の一時的参照値における前記インデックス０に対応の前記値との差に設定することであって、ｉは０より大きい整数であること、を含む、
    ことを特徴とする請求項５に記載の方法。
  7. 前記現在のブロックの前記サイズパラメータに基づいて、前記現在のブロックの前記ブロックサイズインデックス値を決定することは、
    前記現在のブロックの幅と高さがいずれも４に等しい場合に、前記現在のブロックの前記ブロックサイズインデックス値を０に設定することと、
    前記現在のブロックの前記幅と前記高さがいずれも８に等しいか、又は前記現在のブロックの前記幅と前記高さの一方が４に等しい場合に、前記現在のブロックの前記ブロックサイズインデックス値を１に設定することと、
    前記現在のブロックの前記幅と前記高さが上記条件を満たさない場合に、前記現在のブロックの前記ブロックサイズインデックス値を２に設定することと、を含む、
    ことを特徴とする請求項５に記載の方法。
  8. 前記現在のブロックの前記隣接サンプル値に基づいて前記現在のブロックの前記ＭＩＰ入力サンプル値を決定することは、
    前記現在のブロックの前記隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得することと、
    前記現在のブロックの前記隣接サンプル値のビット深度に基づいて第２の定数値を決定し、前記第１の一時的参照値の後の１つのデータユニット内で前記第２の定数値をバッファリングすることによって第２の一時的参照値を取得することと、
    前記ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、前記第２の一時的参照値におけるインデックス（ｊ＋１）に対応の値と前記第２の一時的参照値におけるインデックス０に対応の値との差に設定することであって、ｊは０以上の整数であることと、を含む、
    ことを特徴とする請求項３に記載の方法。
  9. 前記現在のブロックの前記隣接サンプル値の前記ビット深度に基づいて前記第２の定数値を決定することは、
    前記第２の定数値を２の累乗に設定することであって、前記累乗の指数は整数であり、前記現在のブロックの前記隣接サンプル値の前記ビット深度から１を引いたものに等しいこと、を含む、
    ことを特徴とする請求項５～８のいずれか一項に記載の方法。
  10. 前記現在のブロックの前記隣接サンプル値の前記ビット深度に基づいて前記第２の定数値を決定することは、
    「１」を２進左シフトすることによって前記第２の定数値を取得することであって、前記左シフトされたビット数は、前記現在のブロックの前記隣接サンプル値の前記ビット深度から１を引いたものに等しいこと、を含む、
    ことを特徴とする請求項５～８のいずれか一項に記載の方法。
  11. 前記シフトナンバーパラメータの前記値は、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数である、
    ことを特徴とする請求項３に記載の方法。
  12. 前記シフトナンバーパラメータの値が６に設定される、
    ことを特徴とする請求項１１に記載の方法。
  13. 前記シフトオフセットパラメータの値は、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数である、
    ことを特徴とする請求項３に記載の方法。
  14. 前記シフトオフセットパラメータの値が３２に設定される、
    ことを特徴とする請求項１３に記載の方法。
  15. 前記シフトナンバーパラメータの値に基づいて前記第１の定数値を決定することは、
    前記第１の定数値を２の累乗に設定することであって、前記累乗の指数は整数であり、前記シフトナンバーパラメータの値から１を引いたものに等しいことを含む、
    ことを特徴とする請求項３に記載の方法。
  16. 前記シフトナンバーパラメータの値に基づいて前記第１の定数値を決定することは、
    「１」を２進左シフトすることによって前記第１の定数値を取得することであって、前記左シフトされたビット数は前記シフトナンバーパラメータの値から１を引いたものに等しいこと、を含む、
    ことを特徴とする請求項３に記載の方法。
  17. 前記ＭＩＰ重み付け行列、前記ＭＩＰ入力サンプル値、前記シフトナンバーパラメータ及び前記第１のオフセットに基づいて、前記現在のブロックの前記彩度コンポーネントの前記ＭＩＰ予測値を決定することは、
    前記ＭＩＰ重み付け行列と前記ＭＩＰ入力サンプル値との第１の重み付け和を計算することと、
    前記第１の重み付け和と前記第１のオフセットとの第１の合計を計算することと、
    前記第１の合計を２進右シフトすることによって第１の右シフト値を取得することであって、前記右シフトされたビット数は前記シフトナンバーパラメータの値に等しいことと、
    前記現在のブロックの前記彩度コンポーネントの前記ＭＩＰ予測値を、前記第１の右シフト値と第１の一時的参照値におけるインデックス０に対応の値との合計に設定することであって、前記第１の一時的参照値は、前記現在のブロックの前記隣接サンプル値をダウンサンプリングすることによって取得されることと、を含む、
    ことを特徴とする請求項３に記載の方法。
  18. 前記予測残差値に対して前記ＬＦＮＳＴを行うことによって、前記ＬＦＮＳＴパラメータを決定することは、
    前記予測残差値に基づいて前記現在のブロックの残差ブロックを決定し、前記残差ブロックに対して第１の変換を行うことによって第１の変換係数ブロックを取得することと、
    前記第１の変換係数ブロックにおける少なくとも一部の変換係数に対して前記ＬＦＮＳＴを行うか否かを決定することと、
    決定の結果が前記少なくとも一部の変換係数に対して前記ＬＦＮＳＴを行うことである場合に、前記第１の変換係数ブロックにおける前記少なくとも一部の変換係数に対して前記ＬＦＮＳＴを行うことによって、前記ＬＦＮＳＴパラメータを決定することと、を含む、
    ことを特徴とする請求項１に記載の方法。
  19. 前記第１の変換係数ブロックにおける前記少なくとも一部の変換係数に対して前記ＬＦＮＳＴを行うか否かを決定することは、
    前記ＭＩＰモードを用いて前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値を決定する場合に、前記現在のブロックのサイズパラメータのうちの最小値を決定することと、
    前記最小値が第１の予め設定された閾値以上である場合に、前記第１の変換係数ブロックにおける前記少なくとも一部の変換係数に対して前記ＬＦＮＳＴを行うことを決定することと、を含む、
    ことを特徴とする請求項１８に記載の方法。
  20. 前記ＬＦＮＳＴパラメータはＬＦＮＳＴインデックスを含み、前記ＬＦＮＳＴパラメータを決定することは、
    前記第１の変換係数ブロックにおける前記少なくとも一部の変換係数に対して前記ＬＦＮＳＴを行うと決定される場合に、前記ＬＦＮＳＴインデックスの値を０より大きく設定することと、
    前記第１の変換係数ブロックにおける前記少なくとも一部の変換係数に対して前記ＬＦＮＳＴを行わないと決定される場合に、前記ＬＦＮＳＴインデックスの値を０に設定することと、を含み、
    それに応じて、前記ＬＦＮＳＴパラメータを符号化し、且つ前記ビットストリームに書き込むことは、
    前記ＬＦＮＳＴインデックスを符号化し、且つ前記ビットストリームに書き込むことを含む、
    ことを特徴とする請求項１８に記載の方法。
  21. 前記ＬＦＮＳＴパラメータはＬＦＮＳＴ係数をさらに含み、前記ＬＦＮＳＴパラメータを決定することは、
    前記第１の変換係数ブロックにおける前記少なくとも一部の変換係数に対して前記ＬＦＮＳＴを行うことによって、前記ＬＦＮＳＴ係数を取得することを含み、
    それに応じて、前記ＬＦＮＳＴパラメータを符号化し、且つ前記ビットストリームに書き込むことは、
    前記ＬＦＮＳＴ係数を量子化することによって、量子化係数を取得することと、
    前記量子化係数を符号化し、且つ前記ビットストリームに書き込むことと、を含む、
    ことを特徴とする請求項１８に記載の方法。
  22. 復号器に適用される復号化方法であって、前記方法は、
    現在のブロックの予測パラメータ及び低周波非分離変換（ｌｏｗ－ｆｒｅｑｕｅｎｃｙ ｎｏｎ－ｓｅｐａｒａｂｌｅ ｔｒａｎｓｆｏｒｍ、ＬＦＮＳＴ）パラメータを取得するようにビットストリームを解析することであって、前記予測パラメータは予測モードパラメータを含むことと、
    前記予測モードパラメータがマトリックスベースイントラ予測（Ｍａｔｒｉｘ－ｂａｓｅｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＭＩＰ）モードを用いて前記現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、前記現在のブロックの隣接サンプル値を取得し、且つ前記現在のブロックの前記隣接サンプル値に基づいて前記現在のブロックのＭＩＰ入力サンプル値を決定することと、
    前記ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、前記現在のブロックの前記彩度コンポーネントのＭＩＰ予測値を決定することであって、前記ＭＩＰ予測値は前記現在のブロックの前記彩度コンポーネントにおける一部のサンプルの予測値であることと、
    前記ＭＩＰ予測値をフィルタリングすることによって、前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値を決定することと、
    前記ＬＦＮＳＴパラメータが前記現在のブロックに対して前記ＬＦＮＳＴを行うことを示す場合に、前記現在のブロックの再構成変換係数ブロックを決定し、前記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対して前記ＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得することと、
    前記第２の変換係数ブロックに対して第１の変換を行うことによって、前記現在のブロックの前記彩度コンポーネントの再構成残差ブロックを取得することと、
    前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値と前記再構成残差ブロックとに基づいて、前記現在のブロックの前記彩度コンポーネントの再構成ブロックを決定することと、を含む、
    ことを特徴とする復号化方法。
  23. 前記現在のブロックの前記隣接サンプル値は、前記現在のブロックの左隣接サンプル値及び上隣接サンプル値を含む、
    ことを特徴とする請求項２２に記載の方法。
  24. 前記シフトパラメータは、シフトオフセットパラメータ及びシフトナンバーパラメータを含み、
    それに応じて、前記ＭＩＰ入力サンプル値、前記ＭＩＰ重み付け行列及び前記シフトパラメータに基づいて、前記現在のブロックの前記彩度コンポーネントの前記ＭＩＰ予測値を決定することは、
    固定の定数である前記シフトオフセットパラメータの値に基づいて、前記ＭＩＰ入力サンプル値の合計と前記シフトオフセットパラメータとの乗積を決定することと、
    固定の定数である前記シフトナンバーパラメータの値に基づいて第１の定数値を決定することと、
    第１のオフセットの値を前記第１の定数値と前記乗積との差に設定することと、
    前記予測パラメータに基づいて、前記現在のブロックのＭＩＰ重み付け行列を決定することと、
    前記ＭＩＰ重み付け行列、前記ＭＩＰ入力サンプル値、前記シフトナンバーパラメータ及び前記第１のオフセットに基づいて、前記現在のブロックの前記彩度コンポーネントの前記ＭＩＰ予測値を決定することと、を含む、
    ことを特徴とする請求項２２に記載の方法。
  25. 前記予測パラメータは、前記現在のブロックのサイズパラメータをさらに含む、
    ことを特徴とする請求項２４に記載の方法。
  26. 前記現在のブロックの前記隣接サンプル値に基づいて前記現在のブロックの前記ＭＩＰ入力サンプル値を決定することは、
    前記現在のブロックの前記サイズパラメータに基づいて、前記現在のブロックのブロックサイズインデックス値を決定することと、
    前記現在のブロックの前記隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得することと、
    前記現在のブロックの前記ブロックサイズインデックス値が予め設定された範囲内にある場合に、前記現在のブロックの隣接サンプル値のビット深度に基づいて第２の定数値を決定し、前記ＭＩＰ入力サンプル値におけるインデックス０に対応の値を、前記第２の定数値と前記第１の一時的参照値におけるインデックス０に対応の値との差に設定し、前記ＭＩＰ入力サンプル値におけるインデックスｉに対応の値を、前記第１の一時的参照値におけるインデックスｉに対応の値と前記第１の一時的参照値におけるインデックス０に対応の前記値との差に設定することであって、ｉは０より大きい整数であることと、
    前記現在のブロックの前記ブロックサイズインデックス値が前記予め設定された範囲外にある場合に、前記ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、前記第１の一時的参照値におけるインデックス（ｊ＋１）に対応の値と前記第１の一時的参照値におけるインデックス０に対応の前記値との差に設定することであって、ｊは０以上の整数であることと、を含む、
    ことを特徴とする請求項２５に記載の方法。
  27. 前記現在のブロックの前記ブロックサイズインデックス値が前記予め設定された範囲内にある場合に、前記方法はさらに、
    前記現在のブロックの前記隣接サンプル値の前記ビット深度に基づいて、前記第２の定数値を決定し、前記ＭＩＰ入力サンプル値における前記インデックス０に対応の前記値を、前記第１の一時的参照値における前記インデックス０に対応の前記値と前記第２の定数値との差に設定し、前記ＭＩＰ入力サンプル値における前記インデックスｉに対応の前記値を、前記第１の一時的参照値における前記インデックスｉに対応の前記値と前記第１の一時的参照値における前記インデックス０に対応の前記値との差に設定することであって、ｉは０より大きい整数であること、を含む、
    ことを特徴とする請求項２６に記載の方法。
  28. 前記現在のブロックの前記サイズパラメータに基づいて、前記現在のブロックの前記ブロックサイズインデックス値を決定することは、
    前記現在のブロックの幅と高さがいずれも４に等しい場合に、前記現在のブロックの前記ブロックサイズインデックス値を０に設定することと、
    前記現在のブロックの前記幅と前記高さがいずれも８に等しいか、又は前記現在のブロックの前記幅と前記高さの一方が４に等しい場合に、前記現在のブロックの前記ブロックサイズインデックス値を１に設定することと、
    前記現在のブロックの前記幅と前記高さが上記条件を満たさない場合に、前記現在のブロックの前記ブロックサイズインデックス値を２に設定することと、を含む、
    ことを特徴とする請求項２６に記載の方法。
  29. 前記現在のブロックの前記隣接サンプル値に基づいて前記現在のブロックの前記ＭＩＰ入力サンプル値を決定することは、
    前記現在のブロックの前記隣接サンプル値をダウンサンプリングすることによって、第１の一時的参照値を取得することと、
    前記現在のブロックの前記隣接サンプル値のビット深度に基づいて第２の定数値を決定し、前記第１の一時的参照値の後の１つのデータユニット内で前記第２の定数値をバッファリングすることによって第２の一時的参照値を取得することと、
    前記ＭＩＰ入力サンプル値におけるインデックスｊに対応の値を、前記第２の一時的参照値におけるインデックス（ｊ＋１）に対応の値と前記第２の一時的参照値におけるインデックス０に対応の値との差に設定することであって、ｊは０以上の整数であることと、を含む、
    ことを特徴とする請求項２４に記載の方法。
  30. 前記現在のブロックの前記隣接サンプル値の前記ビット深度に基づいて前記第２の定数値を決定することは、
    前記第２の定数値を２の累乗に設定することであって、前記累乗の指数は整数であり、前記現在のブロックの前記隣接サンプル値の前記ビット深度から１を引いたものに等しいこと、を含む、
    ことを特徴とする請求項２６～２９のいずれか一項に記載の方法。
  31. 前記現在のブロックの前記隣接サンプル値の前記ビット深度に基づいて前記第２の定数値を決定することは、
    「１」を２進左シフトすることによって前記第２の定数値を取得することであって、前記左シフトされたビット数は、前記現在のブロックの前記隣接サンプル値の前記ビット深度から１を引いたものに等しいこと、を含む、
    ことを特徴とする請求項２６～２９のいずれか一項に記載の方法。
  32. 前記シフトナンバーパラメータの前記値は、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数である、
    ことを特徴とする請求項２４に記載の方法。
  33. 前記シフトナンバーパラメータの値が６に設定される、
    ことを特徴とする請求項３２に記載の方法。
  34. 前記シフトオフセットパラメータの値は、ブロックサイズインデックス値及びＭＩＰモードインデックス値に関連しない固定の定数である、
    ことを特徴とする請求項２４に記載の方法。
  35. 前記シフトオフセットパラメータの値が３２に設定される、
    ことを特徴とする請求項３４に記載の方法。
  36. 前記シフトナンバーパラメータの値に基づいて前記第１の定数値を決定することは、
    前記第１の定数値を２の累乗に設定することであって、前記累乗の指数は整数であり、前記シフトナンバーパラメータの値から１を引いたものに等しいこと、を含む、
    ことを特徴とする請求項２４に記載の方法。
  37. 前記シフトナンバーパラメータの値に基づいて前記第１の定数値を決定することは、
    「１」を２進左シフトすることによって前記第１の定数値を取得することであって、前記左シフトされたビット数は前記シフトナンバーパラメータの値から１を引いたものに等しいこと、を含む、
    ことを特徴とする請求項２４に記載の方法。
  38. 前記ＭＩＰ重み付け行列、前記ＭＩＰ入力サンプル値、前記シフトナンバーパラメータ及び前記第１のオフセットに基づいて、前記現在のブロックの前記彩度コンポーネントの前記ＭＩＰ予測値を決定することは、
    前記ＭＩＰ重み付け行列と前記ＭＩＰ入力サンプル値との第１の重み付け和を計算することと、
    前記第１の重み付け和と前記第１のオフセットとの第１の合計を計算することと、
    前記第１の合計を２進右シフトすることによって第１の右シフト値を取得することであって、前記右シフトされたビット数は前記シフトナンバーパラメータの値に等しいことと、
    前記現在のブロックの前記彩度コンポーネントの前記ＭＩＰ予測値を、前記第１の右シフト値と第１の一時的参照値におけるインデックス０に対応の値との合計に設定することであって、前記第１の一時的参照値は、前記現在のブロックの前記隣接サンプル値をダウンサンプリングすることによって取得されることと、を含む、
    ことを特徴とする請求項２４に記載の方法。
  39. 前記ＬＦＮＳＴパラメータを取得するように前記ビットストリームを解析することは、
    前記ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定することと、
    前記ビットストリームに前記ＬＦＮＳＴパラメータがある場合に、前記ＬＦＮＳＴパラメータを取得するように前記ビットストリームを解析することとを含む、
    ことを特徴とする請求項２２に記載の方法。
  40. 前記ビットストリームにＬＦＮＳＴパラメータがあるか否かを決定することは、
    前記ＭＩＰモードを用いて前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値を決定する場合に、前記現在のブロックのサイズパラメータのうちの最小値を決定することと、
    前記最小値が第１の予め設定された閾値以上である場合に、前記ビットストリームに前記ＬＦＮＳＴパラメータがあると決定することと、を含む、
    ことを特徴とする請求項３９に記載の方法。
  41. 前記ＬＦＮＳＴパラメータが前記現在のブロックに対して前記ＬＦＮＳＴを行うことを示す場合に、前記現在のブロックの前記再構成変換係数ブロックを決定することは、
    前記現在のブロックの量子化係数を取得するように前記ビットストリームを解析することと、
    前記量子化係数を逆量子化することによって、前記現在のブロックの前記再構成変換係数ブロックを取得することと、を含む、
    ことを特徴とする請求項２２に記載の方法。
  42. 前記量子化係数を逆量子化することによって、前記現在のブロックの前記再構成変換係数ブロックを取得することは、
    前記量子化係数をスケーリングすることによって、前記現在のブロックの前記再構成変換係数ブロックを取得することを含む、
    ことを特徴とする請求項４１に記載の方法。
  43. 前記ＬＦＮＳＴパラメータを取得するように前記ビットストリームを解析することは、
    ＬＦＮＳＴインデックスの値を取得するように前記ビットストリームを解析することと、
    前記ＬＦＮＳＴインデックスの値が０より大きい場合に、前記現在のブロックに対して前記ＬＦＮＳＴを行うと決定することと、
    前記ＬＦＮＳＴインデックスの値が０に等しい場合に、前記現在のブロックに対して前記ＬＦＮＳＴを行わないと決定することと、を含む、
    ことを特徴とする請求項２２に記載の方法。
  44. 第１の決定ユニット、第１の予測ユニット、第１の変換ユニット、及び符号化ユニットを含む符号器であって、
    前記第１の決定ユニットは、現在のブロックの予測パラメータを決定するように構成されており、前記予測パラメータは予測モードパラメータを含み、
    前記第１の決定ユニットは、前記予測モードパラメータがマトリックスベースイントラ予測（Ｍａｔｒｉｘ－ｂａｓｅｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＭＩＰ）モードを用いて前記現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、前記現在のブロックの隣接サンプル値を取得し、且つ前記現在のブロックの前記隣接サンプル値に基づいて前記現在のブロックのＭＩＰ入力サンプル値を決定するようにさらに構成されており、
    前記第１の予測ユニットは、前記ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、前記現在のブロックの前記彩度コンポーネントのＭＩＰ予測値を決定し、且つ前記ＭＩＰ予測値をフィルタリングすることによって前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値を決定するように構成されており、前記ＭＩＰ予測値は前記現在のブロックの前記彩度コンポーネントにおける一部のサンプルの予測値であり、
    前記第１の変換ユニットは、前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値に基づいて、前記現在のブロックの前記彩度コンポーネントの予測残差値を決定し、且つ前記予測残差値に対して低周波非分離変換（ｌｏｗ－ｆｒｅｑｕｅｎｃｙ ｎｏｎ－ｓｅｐａｒａｂｌｅ ｔｒａｎｓｆｏｒｍ、ＬＦＮＳＴ）を行うことによってＬＦＮＳＴパラメータを決定するように構成されており、
    前記符号化ユニットは、前記ＬＦＮＳＴパラメータを符号化し、且つビットストリームに書き込むように構成されている、
    ことを特徴とする符号器。
  45. 第１のメモリ及び第１のプロセッサを含む符号器であって、
    前記第１のメモリは、前記第１のプロセッサで実行可能なコンピュータプログラムを記憶するように構成されており、
    前記第１のプロセッサは、前記コンピュータプログラムを実行すると、請求項１～２１のいずれか一項に記載の方法を実行するように構成されている、
    ことを特徴とする符号器。
  46. 解析ユニット、第２の決定ユニット、第２の予測ユニット及び第２の変換ユニットを含む復号器であって、
    前記解析ユニットは、現在のブロックの予測パラメータ及び低周波非分離変換（ｌｏｗ－ｆｒｅｑｕｅｎｃｙ ｎｏｎ－ｓｅｐａｒａｂｌｅ ｔｒａｎｓｆｏｒｍ、ＬＦＮＳＴ）パラメータを取得するようにビットストリームを解析するように構成されており、前記予測パラメータは予測モードパラメータを含み、
    前記第２の決定ユニットは、前記予測モードパラメータがマトリックスベースイントラ予測（Ｍａｔｒｉｘ－ｂａｓｅｄ ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ、ＭＩＰ）モードを用いて前記現在のブロックの彩度コンポーネントのイントラ予測値を決定することを示す場合に、前記現在のブロックの隣接サンプル値を取得し、且つ前記現在のブロックの前記隣接サンプル値に基づいて前記現在のブロックのＭＩＰ入力サンプル値を決定するように構成されており、
    前記第２の予測ユニットは、前記ＭＩＰ入力サンプル値、ＭＩＰ重み付け行列及びシフトパラメータに基づいて、前記現在のブロックの前記彩度コンポーネントのＭＩＰ予測値を決定し、且つ前記ＭＩＰ予測値をフィルタリングすることによって前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値を決定するように構成されており、前記ＭＩＰ予測値は前記現在のブロックの前記彩度コンポーネントにおける一部のサンプルの予測値であり、
    前記第２の変換ユニットは、前記ＬＦＮＳＴパラメータが前記現在のブロックに対して前記ＬＦＮＳＴを行うことを示す場合に、前記現在のブロックの再構成変換係数ブロックを決定し、前記再構成変換係数ブロックにおける少なくとも一部の再構成変換係数に対して前記ＬＦＮＳＴを行うことによって、第２の変換係数ブロックを取得し、且つ前記第２の変換係数ブロックに対して第１の変換を行うことによって、前記現在のブロックの前記彩度コンポーネントの再構成残差ブロックを取得するように構成されており、
    前記第２の決定ユニットは、前記現在のブロックの前記彩度コンポーネントの前記イントラ予測値と前記再構成残差ブロックとに基づいて、前記現在のブロックの前記彩度コンポーネントの再構成ブロックを決定するようにさらに構成されている、
    ことを特徴とする復号器。
  47. 第２のメモリ及び第２のプロセッサを含む復号器であって、
    前記第２のメモリは、前記第２のプロセッサで実行可能なコンピュータプログラムを記憶するように構成されており、
    前記第２のプロセッサは、前記コンピュータプログラムを実行すると、請求項２２～４３のいずれか一項に記載の方法を実行するように構成されている、
    ことを特徴とする復号器。
  48. コンピュータプログラムを記憶するコンピュータ記憶媒体であって、
    前記コンピュータプログラムが第１のプロセッサによって実行されると、請求項１～２１のいずれか一項に記載の方法を実行し、又は第２のプロセッサによって実行されると、請求項２２～４３のいずれか一項に記載の方法を実行する、

    ことを特徴とするコンピュータ記憶媒体。
JP2022541305A 2020-01-08 2020-12-29 符号化方法、復号化方法、符号器、復号器及び記憶媒体 Pending JP2023509951A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202062958582P 2020-01-08 2020-01-08
US62/958,582 2020-01-08
PCT/CN2020/141080 WO2021139572A1 (zh) 2020-01-08 2020-12-29 编码方法、解码方法、编码器、解码器以及存储介质

Publications (2)

Publication Number Publication Date
JP2023509951A true JP2023509951A (ja) 2023-03-10
JPWO2021139572A5 JPWO2021139572A5 (ja) 2023-12-08

Family

ID=76788400

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022541305A Pending JP2023509951A (ja) 2020-01-08 2020-12-29 符号化方法、復号化方法、符号器、復号器及び記憶媒体

Country Status (6)

Country Link
US (3) US11843781B2 (ja)
EP (1) EP4090014A4 (ja)
JP (1) JP2023509951A (ja)
KR (1) KR20220122666A (ja)
CN (2) CN114450945A (ja)
WO (1) WO2021139572A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230095387A1 (en) * 2020-02-21 2023-03-30 Interdigital Vc Holdings France Neural network-based intra prediction for video encoding or decoding
WO2023044919A1 (zh) * 2021-09-27 2023-03-30 Oppo广东移动通信有限公司 视频编解码方法、设备、系统、及存储介质
WO2024007120A1 (zh) * 2022-07-04 2024-01-11 Oppo广东移动通信有限公司 编解码方法、编码器、解码器以及存储介质
CN116600107B (zh) * 2023-07-20 2023-11-21 华侨大学 基于ipms-cnn和空域相邻cu编码模式的hevc-scc快速编码方法及装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102695061B (zh) 2011-03-20 2015-01-21 华为技术有限公司 一种权重因子的确定方法和装置,以及一种帧内加权预测方法和装置
US20130003856A1 (en) * 2011-07-01 2013-01-03 Samsung Electronics Co. Ltd. Mode-dependent transforms for residual coding with low latency
US10931947B2 (en) * 2016-05-04 2021-02-23 Sharp Kabushiki Kaisha Systems and methods for coding transform data
CN106254883B (zh) 2016-08-02 2021-01-22 海信视像科技股份有限公司 一种视频解码中的反变换方法和装置
MX2019011211A (es) * 2017-03-21 2019-12-05 Lg Electronics Inc Metodo de transformacion en el sistema de codificacion de imagenes y aparato para el mismo.
WO2019172676A1 (ko) * 2018-03-08 2019-09-12 삼성전자 주식회사 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
CN112385215A (zh) * 2018-07-06 2021-02-19 韩国电子通信研究院 图像编码/解码方法和装置以及存储比特流的记录介质
US11509891B2 (en) * 2018-11-04 2022-11-22 Lg Electronics Inc. Intra prediction method and apparatus in image coding system
CN110519591B (zh) * 2019-08-29 2021-06-01 中南大学 一种基于多用途编码中帧内编码的预测模式快速选择方法

Also Published As

Publication number Publication date
EP4090014A4 (en) 2024-01-03
CN115314710A (zh) 2022-11-08
US20220360785A1 (en) 2022-11-10
US20240056582A1 (en) 2024-02-15
CN114450945A (zh) 2022-05-06
KR20220122666A (ko) 2022-09-02
EP4090014A1 (en) 2022-11-16
WO2021139572A1 (zh) 2021-07-15
US11843781B2 (en) 2023-12-12
US20240056581A1 (en) 2024-02-15

Similar Documents

Publication Publication Date Title
JP7295879B2 (ja) 角度モードで拡張された位置依存型イントラ予測組合せ
JP2021530906A (ja) 広角イントラ予測を伴う位置依存イントラ予測組み合わせ
KR102549987B1 (ko) 영상 처리 방법 및 이를 위한 장치
TWI771679B (zh) 以區塊為基礎之預測技術
KR20190042579A (ko) 크로스-컴포넌트 필터
JP2023509951A (ja) 符号化方法、復号化方法、符号器、復号器及び記憶媒体
CN114731398A (zh) 视频译码中的跨分量自适应环路滤波器
CN113785576B (zh) 编解码视频中的二次变换的使用
CN114041288A (zh) 图像分量的预测方法、编码器、解码器以及存储介质
JP2023510441A (ja) 画像符号化方法、画像復号化方法、並びに関連装置及びシステム
TW202044833A (zh) 使用不同色度格式之三角預測單元模式中之視訊寫碼
US20230118056A1 (en) Context adaptive transform set
JP2022539937A (ja) 画像成分予測方法、符号化器、復号化器、並びに記憶媒体
CN111448798A (zh) 基于块形状的视频编码和解码的方法和装置
CN114128294A (zh) 用于视频数据的帧内预测编码的方法和装置
AU2024201210A1 (en) Transform-based image coding method and device therefor
CN112616057A (zh) 图像预测方法、编码器、解码器以及存储介质
CN114930850A (zh) 基于变换的图像编码方法及其设备
JP2023073286A (ja) イントラ予測のためのデバイスおよび方法
CN112532997B (zh) 图像预测方法、编码器、解码器以及存储介质
KR102482781B1 (ko) 변환에 기반한 영상 코딩 방법 및 그 장치
KR20220024499A (ko) 변환에 기반한 영상 코딩 방법 및 그 장치
JP2024507377A (ja) ビデオ処理の方法、デバイス、及びプログラム
CN116800984A (zh) 编解码方法和装置
CN116800985A (zh) 编解码方法和装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231129

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231129