JP2023006877A - 画像復号装置、画像復号方法及びプログラム - Google Patents

画像復号装置、画像復号方法及びプログラム Download PDF

Info

Publication number
JP2023006877A
JP2023006877A JP2021109715A JP2021109715A JP2023006877A JP 2023006877 A JP2023006877 A JP 2023006877A JP 2021109715 A JP2021109715 A JP 2021109715A JP 2021109715 A JP2021109715 A JP 2021109715A JP 2023006877 A JP2023006877 A JP 2023006877A
Authority
JP
Japan
Prior art keywords
syntax
value
decoding
gpm
prediction mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021109715A
Other languages
English (en)
Other versions
JP2023006877A5 (ja
Inventor
佳隆 木谷
Yoshitaka Kitani
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2021109715A priority Critical patent/JP2023006877A/ja
Priority to CN202280046261.XA priority patent/CN117581546A/zh
Priority to PCT/JP2022/026210 priority patent/WO2023277129A1/ja
Publication of JP2023006877A publication Critical patent/JP2023006877A/ja
Priority to US18/394,445 priority patent/US20240129490A1/en
Publication of JP2023006877A5 publication Critical patent/JP2023006877A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/537Motion estimation other than block-based
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】GPMによる更なる符号化性能の改善を期待すること。【解決手段】本発明に係る画像復号装置200は、復号対象シーケンスの幾何学分割モードの適用の可不可を制御する第1シンタックスを復号し、前記第1シンタックスの値に応じて、前記復号対象シーケンスの幾何学分割モードへのイントラ予測モードの適用の可不可を制御する第2シンタックスの復号有無を制御するように構成されている復号部210を備える。【選択図】図3

Description

本発明は、画像復号装置、画像復号方法及びプログラムに関する。
非特許文献1では、GPM(Geometric Partitioning Mode)が開示されている。
GPMは、矩形ブロックを斜めに2分割しそれぞれを動き補償する。具体的には、GPMにおいて、分割された2領域は、それぞれマージモードの動きベクトルにより動き補償され、重み付き平均により合成される。斜めの分割パターンとしては、角度と位置とによって64パターンが用意されている。
ITU-T H.266/VVC
しかしながら、非特許文献1で開示されているGPMは、マージモードに限定されているため、符号化性能の改善余地があるという問題点があった。 そこで、本発明は、上述の課題に鑑みてなされたものであり、GPMにイントラ予測モードを追加する場合のシグナリング方法を規定することで、復号対象ブロックにおけるGPMの適用の可不可及びGPM適用時における分割領域ごとの予測モードの種別が適切に特定されることで、GPMによる更なる符号化性能の改善を期待することができる画像復号装置、画像復号方法及びプログラムを提供することを目的とする。
本発明の第1の特徴は、画像復号装置であって、復号対象シーケンスの幾何学分割モードの適用の可不可を制御する第1シンタックスを復号し、前記第1シンタックスの値に応じて、前記復号対象シーケンスの幾何学分割モードへのイントラ予測モードの適用の可不可を制御する第2シンタックスの復号有無を制御するように構成されている復号部を備えることを要旨とする。
本発明の第2の特徴は、画像復号方法であって、復号対象シーケンスの幾何学分割モードの適用の可不可を制御する第1シンタックスを復号する工程と、前記第1シンタックスの値に応じて、前記復号対象シーケンスの幾何学分割モードへのイントラ予測モードの適用の可不可を制御する第2シンタックスの復号有無を制御する工程とを有することを要旨とする。
本発明の第3の特徴は、コンピュータを、画像復号装置として機能させるプログラムであって、前記画像復号装置は、復号対象シーケンスの幾何学分割モードの適用の可不可を制御する第1シンタックスを復号し、前記第1シンタックスの値に応じて、前記復号対象シーケンスの幾何学分割モードへのイントラ予測モードの適用の可不可を制御する第2シンタックスの復号有無を制御するように構成されている復号部を備えることを要旨とする。
本発明によれば、GPMにイントラ予測モードを追加する場合のシグナリング方法を規定することで、復号対象ブロックにおけるGPMの適用の可不可及びGPM適用時における分割領域ごとの予測モードの種別が適切に特定されることで、GPMによる更なる符号化性能の改善を期待することができる画像復号装置、画像復号方法及びプログラムを提供することができる。
図1は、一実施形態に係る画像処理システム1の構成の一例を示す図である。 図2は、一実施形態に係る画像符号化装置100の機能ブロックの一例を示す図である。 図3は、一実施形態に係る画像復号装置200の機能ブロックの一例を示す図である。 図4は、非特許文献1に開示されている幾何学分割モードにより、矩形の復号対象ブロックが幾何学分割モードの分割線によって、幾何学形状の分割領域0と分割領域1に2分割されるケースの一例を示す図である。 図5は、本実施形態に係るGPMに対するイントラ予測モードの適用の一例を示す図である。 図6は、非特許文献1で開示されている復号部210で受信する符号化データの構成の一例を示す図である。 図7は、復号部210がSPS単位のGPM関連フラグに基づいてGPMの適用の可不可及びGPMに対するイントラ予測モードの適用の可不可を特定する方法の一例を示すフローチャートである。 図8は、図7の変更例である。 図9は、復号部210による復号対象ブロックのGPMの適用の有無を判定する方法の一例を示すフローチャートである。 図10は、復号部210による復号対象ブロックのブロック単位のGPM分割モード(分割線の種別)を判定する方法の一例を示すフローチャートである。 図11は、復号部210による分割領域0におけるイントラ予測モードの適用の有無の判定方法を示すフローチャートである。 図12は、復号部210による分割領域1におけるイントラ予測モードの適用の有無の判定方法を示すフローチャートである。 図13は、復号部210によるGPM適用イントラ予測モードが1種の場合の分割領域0における予測モードの特定する方法の一例を示すフローチャートである。 図14は、復号部210によるGPM適用イントラ予測モードが1種類の場合の分割領域1における予測モードの特定する方法の一例を示すフローチャートである。 図15は、復号部210によるGPM適用イントラ予測モードが2種類以上の場合の分割領域0における予測モードの特定する方法の一例を示すフローチャートである。 図16は、復号部210によるGPM適用イントラ予測モードが2種類以上の場合の分割領域1における予測モードの特定する方法の一例を示すフローチャートである。
以下、本発明の実施の形態について、図面を参照しながら説明する。なお、以下の実施形態における構成要素は、適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、以下の実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。
<第1実施形態>
以下、図1~図16を参照して、本発明の第1実施形態に係る画像処理システム10について説明する。図1は、本実施形態に係る画像処理システム10について示す図である。
(画像処理システム10)
図1に示すように、本実施形態に係る画像処理システム10は、画像符号化装置100及び画像復号装置200を有する。
画像符号化装置100は、入力画像信号(ピクチャ)を符号化することによって符号化データを生成するように構成されている。画像復号装置200は、符号化データを復号することによって出力画像信号を生成するように構成されている。
ここで、かかる符号化データは、画像符号化装置100から画像復号装置200に対して伝送路を介して送信されてもよい。また、符号化データは、記憶媒体に格納された上で、画像符号化装置100から画像復号装置200に提供されてもよい。
(画像符号化装置100)
以下、図2を参照して、本実施形態に係る画像符号化装置100について説明する。図2は、本実施形態に係る画像符号化装置100の機能ブロックの一例について示す図である。
図2に示すように、画像符号化装置100は、インター予測部111と、イントラ予測部112と、合成部113と、減算器121と、加算器122と、変換・量子化部131と、逆変換・逆量子化部132と、符号化部140と、インループフィルタ処理部150と、フレームバッファ160とを有する。
インター予測部111は、インター予測(フレーム間予測)によってインター予測信号を生成するように構成されている。
具体的には、インター予測部111は、符号化対象フレーム(対象フレーム)とフレームバッファ160に格納される参照フレームとの比較によって、参照フレームに含まれる参照ブロックを特定し、特定された参照ブロックに対する動きベクトル(MV:Motion Vector)を決定するように構成されている。ここで、参照フレームは、対象フレームとは異なるフレームである。
また、インター予測部111は、参照ブロック及び動きベクトルに基づいて符号化対象ブロック(以下、対象ブロック)に含まれるインター予測信号を対象ブロック毎に生成するように構成されている。
また、インター予測部111は、インター予測信号を合成部113に出力するように構成されている。
また、インター予測部111は、図2には図字していないが、インター予測の制御に関する情報(具体的には、インター予測モードや動きベクトルや参照フレームリストや参照フレーム番号等の情報)を符号化部140に出力するように構成されている。
イントラ予測部112は、イントラ予測(フレーム内予測)によってイントラ予測信号を生成するように構成されている。
具体的には、イントラ予測部112は、対象フレームに含まれる参照ブロックを特定し、特定された参照ブロックに基づいてイントラ予測信号を対象ブロック毎に生成するように構成されている。ここで、参照ブロックは、対象ブロックについて参照されるブロックである。例えば、参照ブロックは、対象ブロックに隣接するブロックである。
また、イントラ予測部112は、イントラ予測信号を合成部113に出力するように構成されている。
また、イントラ予測部112は、図2には図字していないが、イントラ予測の制御に関する情報(具体的には、イントラ予測モード等の情報)を符号化部140に出力するように構成されている。
合成部113は、インター予測部111から入力されたインター予測信号又は/且つイントラ予測部112から入力されたイントラ予測信号を、予め設定された重み係数を用いて合成し、合成された予測信号(以下、まとめて予測信号と記載)を減算器121及び加算器122に出力するように構成されている。
ここで、合成部113のインター予測信号又は/且つイントラ予測信号の合成処理に関しては、非特許文献1と同様の構成を本実施形態でも取ること可能であるため、説明は省略する。
減算器121は、入力画像信号から予測信号を減算し、予測残差信号を変換・量子化部131に出力するように構成されている。ここで、減算器121は、イントラ予測又はインター予測によって生成される予測信号と入力画像信号との差分である予測残差信号を生成するように構成されている。
加算器122は、逆変換・逆量子化部132から出力される予測残差信号に合成部113から出力される予測信号を加算してフィルタ処理前復号信号を生成し、かかるフィルタ処理前復号信号をイントラ予測部112及びインループフィルタ処理部150に出力するように構成されている。
ここで、フィルタ処理前復号信号は、イントラ予測部112で用いる参照ブロックを構成する。
変換・量子化部131は、予測残差信号の変換処理を行うとともに、係数レベル値を取得するように構成されている。さらに、変換・量子化部131は、係数レベル値の量子化を行うように構成されていてもよい。
ここで、変換処理は、予測残差信号を周波数成分信号に変換する処理である。かかる変換処理としては、離散コサイン変換(Discrete Cosine Transform、以下、DCTと記す)に対応する基底パタン(変換行列)が用いられてもよく、離散サイン変換(Discrete Sine Transform、以下、DSTと記す)に対応する基底パタン(変換行列)が用いられてもよい。
また、変換処理としては、非特許文献1で開示されている複数の変換基底から予測残差信号の係数の偏りに適したものを水平・垂直方向毎に選択可能とするMTS(Multiple Transform Selection)や、1次変換後の変換係数をさらに低周波数領域に集中させることで符号化性能を改善するLFNST(Low Frequecny Non-Separable Transform)が用いられてもよい。
逆変換・逆量子化部132は、変換・量子化部131から出力される係数レベル値の逆変換処理を行うように構成されている。ここで、逆変換・逆量子化部132は、逆変換処理に先立って、係数レベル値の逆量子化を行うように構成されていてもよい。
ここで、逆変換処理及び逆量子化は、変換・量子化部131で行われる変換処理及び量子化とは逆の手順で行われる。
符号化部140は、変換・量子化部131から出力された係数レベル値を符号化し、符号化データを出力するように構成されている。
ここで、例えば、符号化は、係数レベル値の発生確率に基づいて異なる長さの符号を割り当てるエントロピー符号化である。
また、符号化部140は、係数レベル値に加えて、復号処理で用いる制御データを符号化するように構成されている。
ここで、制御データは、符号化ブロックサイズ、予測ブロックサイズ、変換ブロックサイズ等のブロックサイズに関する情報(フラグやインデックス)を含んでもよい。
また、制御データは、後述する画像復号装置200における逆変換・逆量子化部220の逆変換・逆量子化処理やインター予測部241のインター予測信号生成処理やイントラ予測部242のイントラ予測信号生成処理や合成部243のインター予測信号又は/且つイントラ予測信号の合成処理やインループフィルタ処理部250のフィルタ処理等の制御に必要な情報(フラグやインデックス)を含んでもよい。
なお、非特許文献1では、これらの制御データは、シンタックスと呼称され、その定義は、セマンティクスと呼称されている。
また、制御データは、後述するシーケンス・パラメータ・セット(SPS:Sequence Parameter Set)やピクチャ・パラメータ・セット(PPS:Picutre Parameter Set)やピクチャヘッダ(PH:Picture Header)やスライスヘッダ(SH:Slice Header)等のヘッダ情報を含んでも良い。
インループフィルタ処理部150は、加算器122から出力されるフィルタ処理前復号信号に対してフィルタ処理を行うとともに、フィルタ処理後復号信号をフレームバッファ160に出力するように構成されている。
ここで、例えば、フィルタ処理は、ブロック(符号化ブロック、予測ブロック又は変換ブロック)の境界部分で生じる歪みを減少するデブロッキングフィルタ処理や画像符号化装置100から伝送されるフィルタ係数やフィルタ選択情報、画像の絵柄の局所的な性質等に基づいてフィルタを切り替える適応ループフィルタ処理である。
フレームバッファ160は、インター予測部111で用いる参照フレームを蓄積するように構成されている。
ここで、フィルタ処理後復号信号は、インター予測部111で用いる参照フレームを構成する。
(画像復号装置200)
以下、図3を参照して、本実施形態に係る画像復号装置200について説明する。図3は、本実施形態に係る画像復号装置200の機能ブロックの一例について示す図である。
図3に示すように、画像復号装置200は、復号部210と、逆変換・逆量子化部220と、加算器230と、インター予測部241と、イントラ予測部242と、合成部243と、インループフィルタ処理部250と、フレームバッファ260とを有する。
復号部210は、画像符号化装置100によって生成される符号化データを復号し、係数レベル値を復号するように構成されている。
ここで、復号は、例えば、符号化部140で行われるエントロピー符号化とは逆の手順のエントロピー復号である。
また、復号部210は、符号化データの復号処理によって制御データを取得するように構成されていてもよい。
ここで、制御データは、上述した復号ブロック(上述の画像符号化装置100における符号化対象ブロックと同義。以下、まとめて対象ブロックと記載)のブロックサイズに関する情報を含んでもよい。
また、制御データは、逆変換・逆量子化部220の逆変換・逆量子化処理やインター予測部241やイントラ予測部242の予測画素生成処理やインループフィルタ処理部250フィルタ処理等の制御に必要な情報(フラグやインデックス)が含んでもよい。
また、制御データは、上述したシーケンス・パラメータ・セット(SPS:Sequence Parameter Set)やピクチャ・パラメータ・セット(PPS:Picutre Parameter Set)やピクチャヘッダ(PH:Picture Header)やスライスヘッダ(SH:Slice Header)等のヘッダ情報を含んでもよい。
逆変換・逆量子化部220は、復号部210から出力される係数レベル値の逆変換処理を行うように構成されている。ここで、逆変換・逆量子化部220は、逆変換処理に先立って、係数レベル値の逆量子化を行うように構成されていてもよい。
ここで、逆変換処理及び逆量子化は、変換・量子化部131で行われる変換処理及び量子化とは逆の手順で行われる。
加算器230は、逆変換・逆量子化部220から出力される予測残差信号に予測信号を加算してフィルタ処理前復号信号を生成し、フィルタ処理前復号信号をイントラ予測部242及びインループフィルタ処理部250に出力するように構成されている。
ここで、フィルタ処理前復号信号は、イントラ予測部242で用いる参照ブロックを構成する。
インター予測部241は、インター予測部111と同様に、インター予測(フレーム間予測)によってインター予測信号を生成するように構成されている。
具体的には、インター予測部241は、符号化データから復号した動きベクトル及び参照フレームに含まれる参照信号に基づいてインター予測信号を生成するように構成されている。インター予測部241は、インター予測信号を合成部243に出力するように構成されている。
イントラ予測部242は、イントラ予測部112と同様に、イントラ予測(フレーム内予測)によってイントラ予測信号を生成するように構成されている。
具体的には、イントラ予測部242は、対象フレームに含まれる参照ブロックを特定し、特定された参照ブロックに基づいてイントラ予測信号を予測ブロック毎に生成するように構成されている。イントラ予測部242は、イントラ予測信号を合成部243に出力するように構成されている。
合成部243は、合成部113と同様に、インター予測部111から入力されたインター予測信号又は/且つイントラ予測部112から入力されたイントラ予測信号を、予め設定された重み係数を用いて合成し、合成された予測信号(以下、まとめて予測信号と記載)を加算器122に出力するように構成されている。
加算器122は、逆変換・逆量子化部220から出力される予測残差信号に合成部243から出力される予測信号を加算してフィルタ処理前復号信号を生成し、かかるフィルタ処理前復号信号をインループフィルタ処理部250に出力するように構成されている。
インループフィルタ処理部250は、インループフィルタ処理部150と同様に、加算器230から出力されるフィルタ処理前復号信号に対してフィルタ処理を行うとともに、フィルタ処理後復号信号をフレームバッファ260に出力するように構成されている。
ここで、例えば、フィルタ処理は、ブロック(符号化ブロック、予測ブロック、変換ブロック或いはそれらを分割したサブブロック)の境界部分で生じる歪みを減少するデブロッキングフィルタ処理や、画像符号化装置100から伝送されるフィルタ係数やフィルタ選択情報や画像の絵柄の局所的な性質等に基づいてフィルタを切り替える適応ループフィルタ処理である。
フレームバッファ260は、フレームバッファ160と同様に、インター予測部241で用いる参照フレームを蓄積するように構成されている。
ここで、フィルタ処理後復号信号は、インター予測部241で用いる参照フレームを構成する。
(幾何学分割モード)
以下、図4及び図5を用いて、復号部210とインター予測部241とイントラ予測部242に係る非特許文献1で開示されている幾何学分割モード及び本実施形態に係る第1の幾何学分割モード(GPM)へのイントラ予測モードへの適用について説明する。
図4は、非特許文献1に開示されている幾何学分割モードにより、矩形の復号対象ブロックが幾何学分割モードの分割線L1によって、幾何学形状の分割領域0と分割領域1に2分割されるケースの一例を示す。
ここで、非特許文献1で開示されている幾何学分割モードの分割線L1は、角度と位置とによって64パターンが用意されている。
また、非特許文献1に係るGPMは、分割領域0及び分割領域1のそれぞれに対して、インター予測の1種である通常マージモードを適用し、インター予測(動き補償)画素を生成する。
具体的には、かかるGPMでは、非特許文献1で開示されているマージ候補リストを構築し、かかるマージ候補リスト及び画像符号化装置100から伝送されるマージインデックスに基づいて、各分割領域0/1の動きベクトル及び参照フレームを導出して、参照ブロック、すなわち、インター予測(または、動き補償)ブロックを生成し、最終的に各分割領域0/1のインター予測画素が、予め設定された重みによって加重平均されて合成される。
かかるマージ候補リストの構築方法は、非特許文献1に開示されている方法を本特許に適用できるため、詳細な説明は省略する。
図5は、本実施形態に係るGPMに対するイントラ予測モードの適用の一例を示す。
非特許文献1に係るGPMの予測画素生成は、インター予測(動き補償)の1種である通常マージモードに限定されているため、符号化性能の改善余地があった。
これに対して、本実施形態に係る第1のGPMは、GPMの予測画素生成に通常マージモードに加えて、イントラ予測モードを適用することで、符号化性能の改善を提案する。
ここで、第1のGPMでは、各分割領域0/1に対しては、通常マージモード或いはイントラ予測モードのいずれも適用することができ、さらにイントラ予測モードの種別は復号対象ブロックの分割形状(分割線)に応じて限定する。
また、本実施形態に係る第2のGPMでは、復号対象ブロックにおけるイントラ予測モードを追加適用したGPMの適用の可不可及びGPM適用時の各分割領域0/1における予測モード種別の特定方法に関して提案する。
これにより、イントラ予測モードを追加適用したGPMが適切に復号対象ブロックに適用されると共に、最適な予測モードが特定されることで、結果として符号化性能のさらなる改善余地を実現することができる。
以降で、本実施形態に係る第2のGPMにおけるGPMの適用の可不可及びGPM適用時の各分割領域0/1における予測モード種別の特定方法(または、一般に呼称されるシグナリング方法)について、復号部210が復号する符号化データ(符号化ビットストリーム)自体及び復号部210における符号化データに含まれる制御データ(シンタックス)に基づく特定方法の2つの観点から説明する。
(復号部210が復号する符号化データ)
以下、図6を用いて復号部210で復号される符号化データについて説明する。図6は、非特許文献1で開示されている復号部210で受信する符号化データの構成の一例を示す図である。
図6に示すように、符号化データは、ストリームの先頭にSPS211を含んでもよい。SPS211は、シーケンス(ピクチャの集合)単位での制御データの集合である。各SPS211は、複数のSPSが存在する場合に個々を識別するためのSPS id情報を少なくとも含む。
図6に示すように、符号化データは、SPS211の次に、PPS212を含んでもよい。ここで、PPS212は、ピクチャ(スライスの集合)単位での制御データの集合である。各PPS212は、複数のPPS212が存在する場合に個々を識別するためのPPS id情報を少なくとも含む。また、各PPS212に対応するSPS211を指定するためのSPS id情報を少なくとも含む。
図6に示すように、符号化データは、PPS212の次に、ピクチャヘッダ213を含んでもよい。ピクチャヘッダ213も、ピクチャ(スライスの集合)単位での制御データの集合である。PPS212は、複数のピクチャに対して単一のPPS212を共有することができる。一方、ピクチャヘッダ213は、ピクチャ毎に必ず伝送される。ピクチャヘッダ213は、各ピクチャに対応するPPS212を指定するためのPPS id情報を少なくとも含む。
図6に示すように、符号化データは、ピクチャヘッダ213の次に、スライスヘッダ214Aを含んでもよい。スライスヘッダ214Aは、スライス単位での制御データの集合である。スライスヘッダ214Aは、スライスヘッダの一部として、上述のピクチャヘッダ213の情報を含むこともできる。
図6に示すように、符号化データは、スライスヘッダ214Aの次に、スライスデータ215Aを含んでもよい。スライスデータ215Aは、上述の係数レベル値やサイズデータ等を含んでもよい。
以上のように、各スライスデータ215A/215Bに1つずつスライスヘッダ、ピクチャヘッダ、PPS、SPSが対応する構成となる。上述のように、ピクチャヘッダ213にてどのPPS212を参照するかをPPS idで指定し、さらに、かかるPPS212がどのSPS211を参照するかをSPS idで指定するため、複数のスライスデータ215A/215Bに対して共通のSPS211及びPPS212を用いることができる。
言い換えると、SPS211及びPPS212は、ピクチャごと及びスライスごとに必ずしも伝送する必要がない。例えば、図6に示すように、スライスヘッダ214A/214Bの直前ではSPS211及びPPS212を符号化しないようなストリーム構成とすることもできる。
なお、図6に示す構成は、あくまで一例である。各スライスデータ215A/215Bにスライスヘッダ214A/214B、ピクチャヘッダ213、PPS212、SPS211で指定された制御データが対応する構成となっていれば、ストリームの構成要素として、これら以外の要素が追加されてもよい。また、同様に、伝送に際して図6と異なる構成に整形されてもよい。
(シーケンス単位のGPMの適用可不可の特定方法)
以下、図7及び図8を用いて、復号部210による復号対象シーケンスレベルの制御データに基づくGPMの適用の可不可及びGPMに対するイントラ予測モードの適用の可不可の特定方法について説明する。
図7は、復号部210がSPS単位のGPM関連フラグに基づいてGPMの適用の可不可及びGPMに対するイントラ予測モードの適用の可不可を特定する方法の一例を示すフローチャートである。
図7に示すように、ステップS200-HLS-01において、復号部210は、sps_gpm_enabled_flagの値が1であるか否かについて判定する。
sps_gpm_enabled_flagの値が1である場合は、復号部210は、ステップS200-HLS-02に進み、sps_gpm_enabled_flagの値が1でない場合は、復号部210は、ステップS200-HLS-03に進む。
ここで、sps_gpm_enabled_flagは、復号対象シーケンスの幾何学分割モードの適用の可不可を制御するシンタックス(第1シンタックス)であり、sps_gpm_enabled_flagの値が1である場合は、GPMが有効であることを示し、sps_gpm_enabled_flagの値が0の場合は、GPMが無効であることを示す。
なお、復号部210は、sps_gpm_enabled_flagをステップS200-HLS-01より前に復号することで、ステップS200-HLS-01でsps_gpm_enabled_flagの値を判定することができる。
また、復号部210は、sps_gpm_enabled_flagが存在しない場合は、sps_gpm_enabled_flagの値を0と推定してもよい。
ステップS200-HLS-02において、復号部210は、sps_gpm_intra_enabled_flagを復号して、本処理を終了する。
他方、ステップS200-HLS-03において、復号部210は、sps_gpm_intra_enabled_flagを復号せずに、本処理を終了する。
ここで、sps_gpm_intra_enabled_flagは、復号シーケンスの幾何学分割モードへのイントラ予測モードの適用の可不可を制御するシンタックス(第2シンタックス)であり、sps_gpm_intra_enabled_flagの値が1である場合は、GPMに対してイントラ予測モードを適用することができることを示し、sps_gpm_intra_enabled_flagの値が0である場合は、GPMに対してイントラ予測モードを適用することができないことを示す。
なお、復号部210は、sps_gpm_intra_enabled_flagが存在しない場合は、sps_gpm_intra_enabled_flagの値を0と推定してもよい。
ステップS200-HLS-03において復号部210がsps_gpm_intra_enabled_flagを復号しない理由は、sps_gpm_enabled_flagの値が0、すなわち、GPMが復号対象シーケンスで適用不可であることが前段で特定できているため、sps_gpm_intra_enabled_flagを復号する意味がなく、この方法をとることで、sps_gpm_intra_enabled_flagの不要な復号(符号化)を回避できるところにある。
図8は、図7の変更例である。具体的に、図8は、図7に対して、GPMに追加適用可能なイントラ予測モードが複数ある場合、復号対象ブロックの分割領域でいずれのイントラ予測モードが選択できるか、その最大候補数(種別数)を規定するシンタックス(後述するsps_max_num_gpm_intra_cand、第3シンタックス)の復号判定に関するステップS200-HLS-04、ステップS200-HLS-05及びステップS200-HLS-06が追加されている点が差分である。
図8に示すように、ステップS200-HLS-04において、復号部210は、sps_gpm_intra_enabled_flagの値が1であるかを判定し、sps_gpm_intra_enabled_flagの値が1である場合、ステップS200-HLS-05に進み、sps_gpm_intra_enabled_flagの値が0の場合、ステップS200-HLS-06に進む。
ステップS200-HLS-05において、復号部210は、sps_max_num_gpm_intra_candを復号して、本処理を終了する。
他方、ステップS200-HLS-06において、復号部210は、sps_max_num_gpm_intra_candを復号せずに、本処理を終了する。
ステップS200-HLS-06では、ステップS200-HLS-05におけるsps_gpm_intra_enabled_flagによる判定で、GPMへのイントラ予測モードの適用が不可であると特定できているため、sps_max_num_gpm_intra_candの不要な復号(符号化)を回避している。
ここで、sps_max_num_gpm_intra_candの値は、GPMに適用するイントラ予測モード種別の最大数に設定してもよい。なお、sps_max_num_gpm_intra_candが存在しない場合は、復号部210は、sps_max_num_gpm_intra_candの値を0と推定してもよい。
GPMに適用するイントラ予測モードの種別は、第1のGPMにおける分割線(例えば、図4に示す分割線L1)に応じたイントラ予測モードで構成される。
例えば、GPMに適用するイントラ予測モードの種別は、GPMにおける分割線L1に対して平行なAngularモード又は/且つ垂直なAngularモードを含んでもよい。或いは、GPMに適用するイントラ予測モードの種別は、これらのAngularモード近傍のAngularモードを含んでもよい。
なお、分割線L1に対して平行なAngularモード或いは垂直なAngularモードが2以上ある場合(例えば、分割線L1が正方形ブロックの対角線と同じ角度の場合)は、GPMに適用するイントラ予測モードの種別を、そのどちらか一方に限定してもよい。
例えば、復号対象ブロックからみて、隣接する復号済みブロックの処理順で限定する、すなわち、復号対象ブロックに対して、右や下の隣接ブロックよりも左や上の隣接ブロックから参照画素を取得する方向に限定する方法をとることで、予測画素生成に際するブロック間の復号処理の依存関係を軽減できる。
加えて、GPMに適用するイントラ予測モードの種別は、Angularモード以外に、分割線L1に依存しないイントラ予測モード、例えば、Planarモード又は/且つDCモード等を含んでもよい。
なお、上述では、幾何学分割モードへのイントラ予測モードの適用の可不可を制御するシンタックスやGPMに適用するイントラ予測モード種別の最大候補数を規定するシンタックスについては、シーケンスレベルで復号要否を判定することを説明したが、より細かい粒度で制御するために、例えば、PPS、ピクチャヘッダ或いはスライスヘッダのレベルで復号してもよい。
ただし、制御単位を細かくすると、復号する(符号化する)シンタックスの符号量が増大するため、設計者の意図で、制御単位の微細化による予測性能の改善とシンタックスの符号量が増大のトレードオフを評価して、設計してもよい。
(ブロック単位のGPMの適用の有無の判定方法)
以下、図9を用いて、復号部210による復号対象ブロックのGPMの適用の有無について説明する。図9は、復号部210による復号対象ブロックのGPMの適用の有無を判定する方法の一例を示すフローチャートである。
図9に示すように、ステップS200-01において、復号部210は、sps_gpm_intra_enabled_flagの値が1であるかを判定し、sps_gpm_intra_enabled_flagの値が1である場合は、ステップS200-2に進み、sps_gpm_intra_enabled_flagの値が0である場合は、ステップS200-03に進む。
ステップS200-03において、復号部210は、所定条件1(又は、第1所定条件)を満たすかどうかを判定し、所定条件1を満たす場合は、ステップS200-06に進み、所定条件1を満たさない場合は、ステップS200-07に進む。所定条件1の詳細は後述する。
ステップS200-06において、復号部210は、GpmFlagの値を1と特定して本処理を終了する。ステップS200-06において、復号部210は、GpmFlagの値を0と特定して本処理を終了する。
ここで、GpmFlagは、復号対象ブロックのGPMの適用の有無を特定(制御)する内部パラメータ(第1内部パラメータ又は第2内部パラメータ)であり、GpmFlagの値が1である場合は、復号対象ブロックにGPMが適用される(GPMが有効である)ことを示し、GpmFlagの値が0である場合は、復号対象ブロックにGPMが適用されない(GPMが無効である)ことを示す。
すなわち、GpmFlagは、所定条件1により復号対象ブロックの幾何学分割モードの適用の有無を制御する内部パラメータ(第1内部パラメータ)であるといえる。
所定条件1は、イントラ予測モードが適用されないGPMの適用の有無を判定するための条件であるため、非特許文献1で開示されている同じ条件を用いてもよい。具体的には、以下のすべての諸条件が満たされることである。
・sps_gpm_enabled_flagの値が1である。
・sh_slice_typeがBである。
・general_merge_flagの値が1である。
・復号対象ブロックの幅が8画素以上である。
・復号対象ブロックの高さが8画素以上である。
・復号対象ブロックの幅が128画素未満である。
・復号対象ブロックの高さが128画素未満である。
・復号対象ブロックの幅が復号対象ブロックの高さの8倍未満である。
・復号対象ブロックの高さが復号対象ブロックの幅の8倍未満である。
・regular_merge_flagの値が1である。
・merge_subblock_flagの値が0である。
・clip_flagの値が0である。
ここで、sh_slice_typeは、復号対象のスライスの種別を示すシンタックス(第4シンタックス)であり、非特許文献1では、GPM適用ブロックに対して異なる2つのマージベクトルを各分割領域の予測画素生成に用いるため、動きベクトルがスライス全体で2つあることが自明なBスライスのみに適用可能である(逆に、動きベクトルがスライス全体で1つのみであることが自明なPスライスにはGPMは適用できないことを意味する)。
ここで、general_merge_flag、regular_merge_flag、merge_subblock_flag及びclip_flagに関する諸条件については、非特許文献1と同じ構成をとることが可能であるため、説明を省略する。
また、復号対象ブロックの幅及び高さが8画素以上であるという条件は、動き補償に必要な参照画素数(メモリバンド幅)のワーストケースを削減する狙いがあり、非特許文献1では導入された。具体的に、非特許文献1では、1つの動きベクトルを有する片予測ブロックのブロックサイズの下限値は4×8/8×4画素に設定されており、2つの動きベクトルを有する双予測ブロックのブロックサイズの下限値は8×8画素に設定されている。そのため、双予測ブロックの1種であるGPM適用ブロックも同じ下限値が適用条件として考慮されている。
復号対象ブロックの幅及び高さが128画素未満であるという条件は、画像符号化装置100におけるGPMの適用の有無を評価する仮符号化処理の回数を削減、ひいては、符号化処理量の削減のために、GPMの適用率が低いブロックに対してGPMを適用不可にするという観点で制限されている。
復号対象ブロックの幅(又は、高さ)が、復号対象ブロックの高さ(又は、幅)の8倍未満であるという条件は、画像符号化装置100におけるGPMの適用の有無を評価する仮符号化処理の回数を削減、ひいては、符号化処理量の削減のために、GPMの適用率が低いブロックに対してGPMを適用不可にするという観点で制限されている。
上述のステップS200-03に対して、ステップS200-02では、復号部210は、所定条件2(又は、第2所定条件)を満たすかどうかを判定し、所定条件2を満たす場合は、ステップS200-04に進み、所定条件1を満たさない場合は、ステップS200-05に進む。所定条件2の詳細は後述する。
すなわち、GpmFlagは、所定条件2により復号対象ブロックの幾何学分割モードの適用の有無を制御する内部パラメータ(第2内部パラメータ)であるともいえる。
復号部210は、ステップS200-04において、GpmFlagの値を1と特定して本処理を終了し、ステップS200-05において、GpmFlagの値を0と特定して本処理を終了する。
ここで、所定条件2は、イントラ予測モードが適用されるGPMの適用の有無を判定するための条件であるため、所定条件1に含まれる以下の条件を撤廃してもよい。
・sh_slice_typeがBである。
・復号対象ブロックの幅が8画素以上である。
・復号対象ブロックの高さが8画素以上である。
・復号対象ブロックの幅が復号対象ブロックの高さの8倍未満である。
・復号対象ブロックの高さが復号対象ブロックの幅の8倍未満である。
第1に、sh_slice_typeに関する条件の撤廃については、GPMへのイントラ予測モードにより、Bスライス以外のIスライス及びPスライスにもGPMが適用可能になるため、結果としてGPMの適用ブロック数が増大し、符号化性能の改善が期待できる。
例えば、Iスライスに対しては、各分割領域双方にイントラ予測モードが適用されるGPMが適用可能である。また、例えば、Pスライスに対しては、分割領域の1つにマージモードが適用され、もう1つの分割領域にイントラ予測モードが適用されるGPMが適用可能である。
第2に、前記復号対象ブロックの幅及び高さが8画素以上の条件の撤廃については、GPMの分割領域に少なくとも1つにイントラ予測モードが適用される場合、双予測ブロックのワーストケースのメモリバンド幅を考慮して設定されていたブロックサイズの下限値(8×8画素)を、片予測ブロックのブロックサイズの下限値(4×8/8×4画素)に緩和できる。これにより、非特許文献1ではGPMが適用不可であった小サイズブロックに対して、GPMが適用可能になるため、GPMの適用ブロック数が増大し、符号化性能の改善が期待できる。
なお、片予測ブロックと双予測ブロックのブロックサイズ下限値自体が、ハードウェアデコーダのメモリバンド幅の向上により将来的に緩和される可能性も想定されるが、そのような場合であっても、上述のようにイントラ予測モードの適用によるGPMは、従来のGPMにおける双予測ブロックのワーストケースのメモリバンド幅を考慮したブロックサイズ制限(下限値)を、片予測におけるブロックサイズ制限(下限値)に緩和できる。
第3に、前記復号対象ブロックのアスペクト比に関する条件の撤廃(=復号対象ブロックの幅(又は、高さ)が復号対象ブロックの高さ(又は、幅)の8倍未満の条件の撤廃)については、GPMへのイントラ予測モードの導入により、イントラ予測モードの予測性能が比較的高い小サイズブロックに限定して緩和すれば、GPMの適用ブロック数が増大し、符号化性能の改善が期待できる。
例えば、非特許文献1では、GPMが適用不可である4×16/16×4画素ブロック且つ/又は4×32/32×4画素ブロック且つ/又は8×64/64×8画素ブロックに対して制限を撤廃してもよい。
また、所定条件1と所定条件2の復号対象ブロックの幅及び高さが128画素未満の条件については、エンコーダの性能の向上により将来的に緩和される可能性があるが、そのような場合であっても、イントラ予測モードが適用されるGPMに対する同条件(ブロックサイズ上限値)は維持してもよい。なぜなら、イントラ予測モードはブロックサイズが大きくなるにつれて、復号対象ブロックの左と上の隣接参照画素からの距離が離れるため、予測精度が低下しやすいためである。
(ブロック単位のGPM分割モード(分割線L1の種別)の判定方法)
以下、図10を用いて、復号部210によるブロック単位のGPM分割モード(分割線L1の種別)の判定方法について説明する。図10は、復号部210による復号対象ブロックのブロック単位のGPM分割モード(分割線L1の種別)を判定する方法の一例を示すフローチャートである。
図10に示すように、復号部210は、ステップS200-08において、上述のGpmFlagの値が1であるかを判定し、GpmFlagの値が1である場合は、ステップS200-09に進み、GpmFlagの値が0である場合は、ステップS200-10に進む。
ステップS200-09において、復号部210は、制御データに含まれるgpm_partition_idxを復号して本処理を終了する。
ステップS200-10において、復号部210は、制御データに含まれるgpm_partition_idxを復号せずに本処理を終了する。
ここで、gpm_partition_idxは、復号対象ブロックの幾何学分割モードの分割形状(分割線L1の方向)を特定するシンタックス(第5シンタックス)である。
非特許文献1では、上述の64通りの分割線L1の方向に対して、このgpm_partition_idxの0~63の値が対応しているため、復号部210は、gpm_partition_idxの値を特定(推定)することで、復号対象ブロックの幾何学分割モードの分割形状(分割線L1の方向)を特定できる。
なお、ステップS200-10において、復号部210は、制御データに含まれるgpm_partition_idxを復号せずに本処理を終了しているが、ステップS200-08におけるGpmFlagについての判定で復号対象ブロックにGPMが適用されないことが特定できているため、gpm_partition_idxの不要な復号を回避する(伝送符号量を削減する)狙いがある。
(分割領域0におけるイントラ予測モードの適用の有無の判定方法)
以下、図11を用いて、復号部210による分割領域0におけるイントラ予測モードの適用の有無の判定方法について説明する。図11は、復号部210による分割領域0におけるイントラ予測モードの適用の有無の判定方法を示すフローチャートである。
図11に示すように、ステップS200-11において、復号部210は、上述のGpmFlagの値が1であり、且つ、sps_gpm_intra_enabled_flagが1であるかについて判定する。復号部210は、かかる条件が満たされている場合、ステップS200-12に進み、かかる条件が満たされていない場合、ステップS200-13に進む。
ステップS200-12において、復号部210は、制御データに含まれるgpm_r0_intra_flagを復号して本処理を終了する。
ステップS200-13において、復号部210は、制御データに含まれるgpm_r0_intra_flagを復号せずに本処理を終了する。
ここで、gpm_r0_intra_flagは、復号対象ブロックの幾何学分割モードの分割される分割領域0の予測モードがイントラ予測モードであるか否かを特定するシンタックス(第6シンタックス)である。
復号部210は、gpm_r0_intra_flagの値が1である場合は、分割領域0に対してイントラ予測モードは適用される(有効である)と特定し、gpm_r0_intra_flagの値が0である場合は、分割領域0に対してイントラ予測モードは適用されない(無効である)と特定することができる。
なお、復号部210は、gpm_r0_intra_flagが存在しない場合は、gpm_r0_intra_flagの値を0と推定してもよい。
ステップS200-13において、復号部210は、制御データに含まれるgpm_r0_intra_flagを復号せずに本処理を終了しているが、ステップS200-11における判定で復号対象ブロックにGPMが適用されない又はGPMが適用されても分割領域0にイントラ予測モードがGPMに適用されないことが特定できているため、gpm_r0_intra_flagの不要な復号を回避する(伝送符号量を削減する)狙いがある。
(分割領域1におけるイントラ予測モードの適用の有無の判定方法)
以下、図12を用いて、復号部210による分割領域1におけるイントラ予測モードの適用の有無の判定方法について説明する。図12は、復号部210による分割領域1におけるイントラ予測モードの適用の有無の判定方法を示すフローチャートである。
図12に示すように、ステップS200-11において、復号部210は、上述のGpmFlagの値が1であり、且つ、sps_gpm_intra_enabled_flagが1であるかについて判定する。復号部210は、かかる条件が満たされる場合、ステップS200-14に進み、かかる条件が満たされない場合、ステップS200-15に進む。
ステップS200-14において、復号部210は、gpm_r0_intra_flagが1であり、且つ、MaxNumIntraCandが1より大きいかどうかを判定する。復号部210は、かかる条件が満たされている場合、ステップS200-16に進み、かかる条件が満たされていない場合、ステップS200-17に進む。
ここで、MaxNumIntraCandは、幾何学分割モードに適用可能なイントラ種別の候補の最大数を表す内部パラメータ(第3内部パラメータ)である。
かかる最大数は、幾何学分割モードに適用可能なイントラ種別の候補の最大数から算出される固定値が画像符号化装置100及び画像復号装置200の双方に予め設定されてもよいし、画像符号化装置100から画像復号装置200に伝送されるsps_max_num_gpm_intra_candに基づいて可変値が復号対象シーケンス単位で動的に設定されてもよい。
復号部210は、ステップS200-15において、制御データに含まれるgpm_r1_intra_flagを復号せずに本処理を終了し、ステップS200-16において、制御データに含まれるgpm_r1_intra_flagを復号して本処理を終了し、ステップS200-17において、制御データに含まれるgpm_r1_intra_flagを復号せずに本処理を終了する。
ここで、gpm_r1_intra_flagは、復号対象ブロックの幾何学分割モードの分割される分割領域1の予測モードがイントラ予測モードであるか否かを特定するシンタックス(第7シンタックス)である。
復号部210は、gpm_r1_intra_flagの値が1である場合は、分割領域1に対してイントラ予測モードは適用される(有効である)と特定し、gpm_r1_intra_flagの値が0である場合は、分割領域1に対してイントラ予測モードは適用されない(無効である)と特定することができる。
なお、復号部210は、gpm_r1_intra_flagが存在しない場合は、gpm_r1_intra_flagの値を0と推定してもよい。
ステップS200-15及びS200-17では、復号部210は、制御データに含まれるgpm_r1_intra_flagを復号せずに本処理を終了しているが、ステップS200-11及びS200-16における判定で復号対象ブロックにGPMが適用されない又はGPMが適用されても分割領域1にイントラ予測モードがGPMに適用されないことが特定できているため、gpm_r1_intra_flagの不要な復号を回避する(伝送符号量を削減する)狙いがある。
(GPM適用イントラ予測モードが1種類の場合の分割領域0における予測モードの特定方法)
以下、図13を用いて、復号部210によるGPM適用イントラ予測モードが1種類の場合の分割領域0における予測モードの特定方法について説明する。図13は、復号部210によるGPM適用イントラ予測モードが1種類の場合の分割領域0における予測モードの特定する方法の一例を示すフローチャートである。
図13に示すように、ステップSR0-01において、、復号部210は、上述のgpm_r0_intra_flagの値が1であるかを判定する。復号部210は、かかる条件が満たされている場合、ステップSR0-02に進み、かかる条件が満たされていない場合、ステップSR0-03に進む。
ステップSR0-02において、復号部210は、分割領域0のイントラ予測モードを、GPMに適用可能な1種類のイントラ予測モードに特定し、本処理を終了する。
ステップSR0-03において、復号部210は、MaxNumMergeCandの値が1より大きいかどうかを判定する。復号部210は、かかる条件が満たされている場合、ステップSR0-04に進み、かかる条件が満たされていない場合、ステップSR0-05に進む。
ここで、MaxNumMergeCandは、通常マージモードにおけるマージ候補の最大数を表す内部パラメータ(第4内部パラメータ)である。かかる最大数は、非特許文献1で開示されている設定方法を同じ構成を本実施形態でも取れるため、詳細な説明は省略する。
ステップSR0-04において、復号部210は、merge_gpm_idx0を復号して、分割領域0に対するマージ候補を特定して、本処理を終了する。
ステップSR0-05において、復号部210は、merge_gpm_idx0を復号せず、分割領域0に対するマージ候補を特定して、本処理を終了する。
ここで、merge_gpm_idx0は、分割領域0に対するマージ候補を特定するインデックス(マージインデックス)である。
なお、復号部210は、merge_gpm_idx0が存在しない場合は、merge_gpm_idx0の値を0と推定してもよい。
ここで、ステップSR0-05において、復号部210は、merge_gpm_idx0を復号せずに本処理を終了しているが、ステップSR0-03でMaxNumMergeCandが1であることが特定できる、すなわち、分割領域0に対するマージ候補が0と特定できるため、merge_gpm_idx0の不要な復号を回避する(伝送符号量を削減する)狙いがある。
(GPM適用イントラ予測モードが1種類の場合の分割領域1における予測モードの特定方法)
以下、図14を用いて、復号部210によるGPM適用イントラ予測モードが1種類の場合の分割領域1における予測モードの特定方法について説明する。図14は、復号部210によるGPM適用イントラ予測モードが1種類の場合の分割領域1における予測モードの特定する方法の一例を示すフローチャートである。
図14に示すように、ステップSR1-01において、復号部210は、上述のgpm_r0_intra_flagの値が1であるかを判定する。復号部210は、かかる条件が満たされている場合、ステップSR1-02に進み、かかる条件が満たされていない場合、ステップSR1-03に進む。
ステップSR1-02において、復号部210は、merge_gpm_idx1を復号して、分割領域1に対するマージ候補を特定し、本処理を終了する。
ステップSR1-03において、復号部210は、gpm_r1_intra_flagの値が1であるかを判定する。復号部210は、かかる条件が満たされている場合、ステップSR1-04に進み、かかる条件が満たされていない場合、ステップSR1-05に進む。
ステップSR1-04において、復号部210は、分割領域1のイントラ予測モードを、GPMに適用可能な1種類のイントラ予測モードに特定し、本処理を終了する。
ステップSR1-05において、復号部210は、MaxNumMergeCandの値が2より大きいかどうかを判定する。復号部210は、かかる条件が満たされている場合、ステップSR1-06に進み、かかる条件が満たされていない場合、ステップSR1-07に進む。
ステップSR1-06において、復号部210は、merge_gpm_idx1を復号して、分割領域1に対するマージ候補を特定して、本処理を終了する。
ステップSR1-07において、復号部210は、merge_gpm_idx1を復号せず、分割領域1に対するマージ候補を特定して、本処理を終了する。
ここで、merge_gpm_idx1は、分割領域1に対するマージ候補を特定するインデックス(マージインデックス)である。
なお、復号部210は、merge_gpm_idx1が存在しない場合は、merge_gpm_idx1の値を0と推定してもよい。
ここで、ステップSR1-07において、復号部210は、merge_gpm_idx1を復号せずに本処理を終了しているが、ステップSR1-05でMaxNumMergeCandの値が2であることが特定できる、すなわち、分割領域1に対するマージ候補が、マージ候補2つのうちで、merge_gpm_idx0に基づいて特定された分割領域0に対するマージ候補とは別のマージ候補であることが特定できるため、merge_gpm_idx1の不要な復号を回避する(伝送符号量を削減する)狙いがある。
(GPM適用イントラ予測モードが2種類以上の場合の分割領域0における予測モードの特定方法)
以下、図13及び図15を用いて、復号部210によるGPM適用イントラ予測モードが2種類以上の場合の分割領域0における予測モードの特定方法について説明する。図15は、復号部210によるGPM適用イントラ予測モードが2種類以上の場合の分割領域0における予測モードの特定する方法の一例を示すフローチャートである。
ここで、図13に示すフローチャートに対する図15に示すフローチャートの差分は、それぞれのステップSR0-02及びステップSR0-02Aのみであるため、この2つのステップのみの差分についてのみ説明する。
図13に示すフローチャートでは、GPM適用イントラ予測モードが1種類である前提をおいていたため、ステップSR0-02では、復号部210は、分割領域0の予測モードがステップSR001でイントラ予測モードであると特定できた場合、一意にそのイントラ予測モードの種別が1種類のGPM適用イントラ予測モードであることが特定できる。
他方、図15に示すフローチャートでは、GPM適用イントラ予測モードが2種類以上である前提をおいているため、ステップSR0-02Aでは、復号部210は、分割領域0の予測モードがステップSR0-01でイントラ予測モードであると特定できた場合であっても、intra_gpm_idx0を復号しなければ、分割領域0のイントラ予測モードの種別が特定できないため、intra_gpm_idx0を復号する構成をとっている。
ここで、intra_gpm_idx0は、分割領域0におけるイントラ予測モードの種別を特定(制御)するためのシンタックス(第8シンタックス)である。
intra_gpm_idx0の値のバリエーションは、GPMに適用可能なイントラ予測モードの種別数に応じて設定してもよい。
また、intra_gpm_idx0の値に対応するイントラ予測モードの種別をGPMにおけるイントラ予測モードの選択率から設定してもよい。
例えば、イントラ予測モードの種別が、GPMの分割線L1に対する平行Angularモード及びGPMの分割線L1に対する垂直Angularモードの2種類がある場合は、このうち選択率が高い平行Angularモードをintra_gpm_idx0の値の0に設定し、選択率が低い垂直Angularモードをintra_gpm_idx0の値の1に設定してもよい。
その他の例として、イントラ予測モードの種別が、GPMの分割線L1に対する平行Angularモード、GPMの分割線L1に対する垂直Angularモード及びPlanarモードの3種類がある場合は、このうち選択率が高い順で、平行Angularモードをintra_gpm_idx0の値の0に設定し、Planarモードをintra_gpm_idx0の値の1に設定し、垂直Angularモードをintra_gpm_idx0の値の2に設定してもよい。
なお、上述の選択率については、発明者らが実施した非特許文献1に開示された技術に対応した参照ソフトウェアを用いたシミュレーション実験によって確かめられた値を参考にしており、使用するソフトやシミュレーション条件或いは対象映像シーケンスによって設計者が変更してもよい。
(GPM適用イントラ予測モードが2種類以上の場合の分割領域1における予測モードの特定方法)
以下、図14及び図16を用いて、復号部210によるGPM適用イントラ予測モードが2種類以上の場合の分割領域1における予測モードの特定方法について説明する。図16は、復号部210によるGPM適用イントラ予測モードが2種類以上の場合の分割領域1における予測モードの特定する方法の一例を示すフローチャートである。
ここで、図14に示すフローチャートに対する図16に示すフローチャートの差分は、図14に示すフローチャートのステップSR1-02が、図16に示すフローチャートにおいてステップSR1-07~ステップSR1-11に置換されている点である。この差分についてのみ説明する。
図14に示すフローチャートでは、GPM適用イントラ予測モードが1種類である前提をおいていたため、ステップSR1-02において、復号部210は、分割領域0の予測モードがステップSR1-01でイントラ予測モードであると特定できた場合、分割領域1は明らかにイントラ予測モードが適用されないことが特定できるため、merge_gpm_idx1によりマージ候補を特定している。
他方、図16に示すフローチャートでは、GPM適用イントラ予測モードが2種類以上である前提をおいているため、ステップSR1-01において、復号部210は、分割領域0の予測モードがイントラ予測モードであると特定できた場合であっても、ステップSR1-07で、さらにgpm_r1_intra_flagの値が1であるかを判定しなければ、分割領域1の予測モードがイントラ予測モードであるか否かが特定できない。
そのため、ステップSR1-07において、復号部210は、gpm_r1_intra_flagの値が1であるかを判定し、gpm_r1_intra_flagの値が1である場合は、ステップSR1-08に進み、gpm_r1_intra_flagの値が0である場合は、ステップSR1-09に進む。
ステップSR1-09において、復号部210は、merge_gpm_idx1を復号して、分割領域1に対するマージ候補を特定し、本処理を終了する。
ステップSR1-08において、復号部210は、MaxNumMergeCandの値が2より大きいかどうかを判定する。かかる条件が満たされている場合は、ステップSR1-10に進み、かかる条件が満たされていない場合は、ステップSR1-11に進む。
ステップSR1-10において、復号部210は、intra_gpm_idx1を復号して、分割領域1に対するイントラ予測モードの種別を特定し、本処理を終了する。
ステップSR1-11において、復号部210は、intra_gpm_idx1を復号せずに、分割領域1に対するイントラ予測モードの種別を特定し、本処理を終了する。
ステップSR1-11において、復号部210がintra_gpm_idx1を復号せずに分割領域1に対するイントラ予測モードの種別を特定しているが、これは、ステップSR1-08でMaxNumMergeCandの値が2であることが特定できる、すなわち、分割領域1に対するマージ候補が、マージ候補2つのうちで、merge_gpm_idx0に基づいて特定された分割領域0に対するマージ候補とは別のマージ候補であることが特定できるため、merge_gpm_idx1の不要な復号を回避する(伝送符号量を削減する)狙いがある。
ここで、intra_gpm_idx1は、分割領域1におけるイントラ予測モードの種別を特定するためのシンタックス(第9シンタックス)である。
intra_gpm_idx1の値のバリエーションは、GPMに適用可能なイントラ予測モードの種別数に応じて設定してもよい。
また、intra_gpm_idx1の値に対応するイントラ予測モードの種別をGPMにおけるイントラ予測モードの選択率から設定してもよい。
例えば、イントラ予測モードの種別が、GPMの分割線L1に対する平行Angularモード及びGPMの分割線L1に対する垂直Angularモードの2種類がある場合は、このうち選択率が高い平行Angularモードをintra_gpm_idx1の値の0に設定し、選択率が低い垂直Angularモードをintra_gpm_idx1の値の1に設定してもよい。
その他の例として、イントラ予測モードの種別が、GPMの分割線L1に対する平行Angularモード、GPMの分割線L1に対する垂直Angularモード及びPlanarモードの3種類がある場合は、このうち選択率が高い順で、平行Angularモードをintra_gpm_idx1の値の0に設定し、Planarモードをintra_gpm_idx1の値の1に設定し、垂直Angularモードをintra_gpm_idx1の値の2に設定してもよい。
なお、上述の選択率については、発明者らが実施した非特許文献1に開示された技術に対応した参照ソフトウェアを用いたシミュレーション実験によって確かめられた値を参考にしており、使用するソフトやシミュレーション条件或いは対象映像シーケンスによって設計者が変更してもよい。
復号部210は、上述の図7~図16で説明した方法で特定した復号対象シーケンス及び復号対象ブロックにおける以下の情報を、インター予測部241、イントラ予測部242及び合成部243に送ることで、画像復号装置200において、復号対象ブロックにおけるGPMの適用の可不可及びGPM適用時における分割領域ごとの予測モードの種別が適切に特定されることで、GPMによる更なる符号化性能の改善が期待できる。
・シーケンス単位のGPMの適用の可不可に関する情報
・ブロック単位のGPM適用の有無に関する情報
・ブロック単位のGPM分割モード(分割線L1の種別)に関する情報
・分割領域0におけるイントラ予測モードの適用の有無に関する情報
・分割領域1におけるイントラ予測モードの適用の有無の判定方法
・GPM適用イントラ予測モードが1種類の場合の分割領域0における予測モードの特定方法
・GPM適用イントラ予測モードが1種類の場合の分割領域1における予測モードの特定方法
・GPM適用イントラ予測モードが2種類以上の場合の分割領域0における予測モードの特定方法
・GPM適用イントラ予測モードが2種類以上の場合の分割領域1における予測モードの特定方法
なお、上述では、GPMにより、矩形ブロックが幾何学形状に2分割される事例を参照して、その場合のGPMへのイントラ予測モードの適用時のシグナリング方法について説明したが、GPMにより矩形ブロックが幾何学形状に3分割以上に分割される事例においても、同様の概念で、本実施形態で説明したシグナリング方法は適用できる。
上述の画像符号化装置100及び画像復号装置200は、コンピュータに各機能(各工程)を実行させるプログラムであって実現されていてもよい。
なお、上述の各実施形態では、本発明を画像符号化装置100及び画像復号装置200への適用を例にして説明したが、本発明は、これのみに限定されるものではなく、画像符号化装置100及び画像復号装置200の各機能を備えた画像符号化システム及び画像復号システムにも同様に適用できる。
10…画像処理システム
100…画像符号化装置
111、241…インター予測部
112、242…イントラ予測部
113、243…合成部
121…減算器
122、230…加算器
131…変換・量子化部
132、220…逆変換・逆量子化部
140…符号化部
150、250…インループフィルタ処理部
160、260…フレームバッファ
200…画像復号装置
210…復号部

Claims (14)

  1. 画像復号装置であって、
    復号対象シーケンスの幾何学分割モードの適用の可不可を制御する第1シンタックスを復号し、前記第1シンタックスの値に応じて、前記復号対象シーケンスの幾何学分割モードへのイントラ予測モードの適用の可不可を制御する第2シンタックスの復号有無を制御するように構成されている復号部を備えることを特徴とする画像復号装置。
  2. 前記復号部は、
    前記第1シンタックスの値が1である場合に、前記第2シンタックスを復号するように構成されており、
    前記第1シンタックスの値が1ではない場合に、前記第2シンタックスを復号しないように構成されていることを特徴とする請求項1に記載の画像復号装置。
  3. 前記復号部は、
    前記第2シンタックスの値が1である場合に、前記復号対象シーケンスの幾何学分割モードに適用可能なイントラ予測モードの種別数を制御する第3シンタックスを復号するように構成されており、
    前記第2シンタックスの値が1ではない場合に、前記第3シンタックスを復号しないように構成されていることを特徴とする請求項1又は2に記載の画像復号装置。
  4. 前記復号部は、
    前記第2シンタックスの値が1ではない場合に、第1所定条件により復号対象ブロックの幾何学分割モードの適用の有無を制御する第1内部パラメータの値を推定するように構成されており、
    前記第2シンタックスの値が1である場合に、第2所定条件により前記復号対象ブロックの幾何学分割モードの適用の有無を制御する第2内部パラメータの値を推定するように構成されていることを特徴とする請求項1~3のいずれか一項に記載の画像復号装置。
  5. 前記第2所定条件において復号対象スライスの種別を示す第4シンタックスがBスライス又はPスライスであるという条件を含むことを特徴とする請求項4に記載の画像復号装置。
  6. 前記復号部は、
    前記第1内部パラメータ又は第2部内部パラメータの値が1である場合に、前記復号対象ブロックの幾何学分割モードの分割形状を特定する第5シンタックスを復号するように構成されており、
    前記第1内部パラメータ又は第2部内部パラメータの値が1ではない場合に、前記第5シンタックスを復号しないように構成されていることを特徴とする請求項1~5のいずれか一項に記載の画像復号装置。
  7. 前記復号部は、
    前記第1内部パラメータ又は第2部内部パラメータが有効であり、且つ、前記第2シンタックスの値が1である場合に、前記復号対象ブロックの幾何学分割モードの分割される分割領域0の予測モードがイントラ予測モードであるか否かを特定する第6シンタックスを復号するように構成されており、
    前記第1内部パラメータ又は第2部内部パラメータが有効であり、且つ、前記第2シンタックスの値が1であるという条件を満たさない場合、前記復号対象ブロックの幾何学分割モードの分割される分割領域0の予測モードがイントラ予測モードであるか否かを特定する第6シンタックスを復号しないように構成されていることを特徴とする請求項6に記載の画像復号装置。
  8. 前記復号部は、
    前記第1内部パラメータ又は第2部内部パラメータが有効であり、且つ、前記第2シンタックスの値が1である場合に、
    前記第6シンタックスが有効であり、且つ、幾何学分割モードのイントラ種別の最大数を表す第3内部パラメータが1より大きい場合に、前記復号対象ブロックの幾何学分割モードの分割される分割領域1の予測モードがイントラ予測モードであるか否かを特定する第7シンタックスを復号するように構成されており、
    前記第7シンタックスが有効であり、且つ、前記第3内部パラメータが1より大きいという条件を満たさない場合に、前記第7シンタックスを復号しないように構成されており、
    前記第1内部パラメータ又は第2部内部パラメータが有効であり、且つ、前記第2シンタックスの値が1であるという条件を満たさない場合に、前記第7シンタックスを復号しないように構成されていることを特徴とする請求項7に記載の画像復号装置。
  9. 前記復号部は、
    前記復号対象ブロックの幾何学分割モードに適用可能なイントラ予測モードが1種類である場合であって、
    前記第6シンタックスの値が1である場合に、前記分割領域0の予測モードを前記1種類のイントラ予測モードに推定するように構成されており、
    前記第6シンタックスの値が1ではない場合に、
    復号対象ブロックのマージ候補の最大数を表す第4内部パラメータの値が1より大きい場合に、前記分割領域0に対するマージインデックスを復号し、前記分割領域0のマージ候補を特定するように構成されており、
    前記第4内部パラメータの値が1以下の場合に、前記分割領域0に対するマージインデックスを復号せず、前記分割領域0のマージ候補を特定するように構成されていることを特徴とする、請求項7に記載の画像復号装置。
  10. 前記復号部は、
    前記復号対象ブロックの幾何学分割モードに適用可能なイントラ予測モードが1種類である場合であって、
    前記第6シンタックスの値が1である場合に、前記分割領域1の予測モードをインター予測モードと推定し、前記分割領域1に対するマージインデックスを復号して、前記分割領域1のマージ候補を特定するように構成されており、
    前記第6シンタックスの値が1ではない場合に、
    前記復号対象ブロックの幾何学分割モードの分割される分割領域1の予測モードがイントラ予測モードであるか否かを特定する第7シンタックスの値が1である場合に、前記分割領域1の予測モードを前記1種類のイントラ予測モードと特定するように構成されており、
    前記第7シンタックスの値が1ではない場合に、
    前記復号対象ブロックのマージ候補の最大数が2より大きい場合に、前記分割領域1に対するマージインデックスを復号して、前記分割領域1のマージ候補を特定するように構成されており、
    前記復号対象ブロックのマージ候補の最大数が2以下である場合に、前記分割領域1に対するマージインデックスを復号せず、前記分割領域1のマージ候補を推定するように構成されていることを特徴とする請求項9に記載の画像復号装置。
  11. 前記復号部は、
    前記復号対象ブロックの幾何学分割モードに適用可能なイントラ予測モードが2種類以上である場合であって、
    前記第6シンタックスの値が1である場合に、前記分割領域0のイントラ予測モードの種別を制御する第8シンタックスを復号して、前記分割領域0のイントラ予測モードを特定するように構成されており、
    前記第6シンタックスの値が1ではない場合に、
    前記復号対象ブロックのマージ候補の最大数を表す第4内部パラメータの値が1より大きい場合に、前記分割領域0に対するマージインデックスを復号し、前記分割領域0のマージ候補を特定するように構成されており、
    前記第4内部パラメータの値が1以下である場合に、前記分割領域0に対するマージインデックスを復号せず、前記分割領域0のマージ候補を特定するように構成されていることを特徴とする請求項8に記載の画像復号装置。
  12. 前記復号部は、
    前記復号対象ブロックの幾何学分割モードに適用可能なイントラ予測モードが2種類以上である場合であって、
    前記第6シンタックスの値が1である場合に、
    前記幾何学分割モードのイントラ種別の最大数を表す第6内部パラメータの値が2より大きい場合に、前記分割領域1のイントラ予測モードの種別を制御する第9シンタックスを復号して、前記分割領域1のイントラ予測モードを特定するように構成されており、
    前記第6内部パラメータが2以下である場合に、前記第9シンタックスを復号せず、前記分割領域1のイントラ予測モードを特定するように構成されており、
    前記第6シンタックスの値が1ではない場合、前記分割領域1に対するマージインデックスを復号して、前記分割領域1のマージ候補を特定するように構成されており、
    前記第6シンタックスの値が1ではない場合に、
    前記第7シンタックスの値が1である場合に、前記第9シンタックスを復号して、前記分割領域1のイントラ予測モードを特定するように構成されており、
    前記第7シンタックスの値が1ではない場合に、
    前記第4内部パラメータの値が2より大きい場合に、前記分割領域1に対するマージインデックスを復号し、前記分割領域1のマージ候補を特定するように構成されており、
    前記第4内部パラメータの値が2以下である場合に、前記分割領域1に対するマージインデックスを復号し、前記分割領域1のマージ候補を特定するように構成されていることを特徴とする請求項8又は11に記載の画像復号装置。
  13. 画像復号方法であって、
    復号対象シーケンスの幾何学分割モードの適用の可不可を制御する第1シンタックスを復号する工程と、
    前記第1シンタックスの値に応じて、前記復号対象シーケンスの幾何学分割モードへのイントラ予測モードの適用の可不可を制御する第2シンタックスの復号有無を制御する工程と、を有することを特徴とする画像復号方法。
  14. コンピュータを、画像復号装置として機能させるプログラムであって、
    前記画像復号装置は、
    復号対象シーケンスの幾何学分割モードの適用の可不可を制御する第1シンタックスを復号し、前記第1シンタックスの値に応じて、前記復号対象シーケンスの幾何学分割モードへのイントラ予測モードの適用の可不可を制御する第2シンタックスの復号有無を制御するように構成されている復号部を備えることを特徴とするプログラム。
JP2021109715A 2021-06-30 2021-06-30 画像復号装置、画像復号方法及びプログラム Pending JP2023006877A (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2021109715A JP2023006877A (ja) 2021-06-30 2021-06-30 画像復号装置、画像復号方法及びプログラム
CN202280046261.XA CN117581546A (zh) 2021-06-30 2022-06-30 图像解码装置、图像解码方法及程序
PCT/JP2022/026210 WO2023277129A1 (ja) 2021-06-30 2022-06-30 画像復号装置、画像復号方法及びプログラム
US18/394,445 US20240129490A1 (en) 2021-06-30 2023-12-22 Image decoding device, image decoding method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021109715A JP2023006877A (ja) 2021-06-30 2021-06-30 画像復号装置、画像復号方法及びプログラム

Publications (2)

Publication Number Publication Date
JP2023006877A true JP2023006877A (ja) 2023-01-18
JP2023006877A5 JP2023006877A5 (ja) 2024-01-19

Family

ID=84692759

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021109715A Pending JP2023006877A (ja) 2021-06-30 2021-06-30 画像復号装置、画像復号方法及びプログラム

Country Status (4)

Country Link
US (1) US20240129490A1 (ja)
JP (1) JP2023006877A (ja)
CN (1) CN117581546A (ja)
WO (1) WO2023277129A1 (ja)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4307681A3 (en) * 2018-11-29 2024-04-03 Beijing Bytedance Network Technology Co., Ltd. Interaction between intra block copy mode and inter prediction tools

Also Published As

Publication number Publication date
WO2023277129A1 (ja) 2023-01-05
US20240129490A1 (en) 2024-04-18
CN117581546A (zh) 2024-02-20

Similar Documents

Publication Publication Date Title
CN110393011B (zh) 用于视频编解码中具有帧内方向预测模式的内含帧内编解码工具设定的方法和装置
US9451279B2 (en) Method for decoding a moving picture
CA2968598C (en) Method for deriving a merge candidate block and device using same
US11985326B2 (en) Video decoding method and apparatus, and video encoding method and apparatus for performing inter prediction according to affine model
US20200029082A1 (en) Image processing method for performing processing of encoding tree unit and encoding unit, image decoding and encoding method using same, and device thereof
US12010337B2 (en) Encoders, decoders, methods, and video bit streams, and computer programs for hybrid video coding
JP2023023669A (ja) 画像復号装置、画像復号方法及びプログラム
US20200296374A1 (en) Method and device for image encoding/decoding based on effective transmission of differential quantization parameter
CN114007082B (zh) 一种解码、编码、编解码方法、装置及其设备
CN114830646A (zh) 图像编码方法和图像解码方法
WO2023277129A1 (ja) 画像復号装置、画像復号方法及びプログラム
WO2023021988A1 (ja) 画像復号装置、画像復号方法及びプログラム
CN110771166A (zh) 用于视频编码的装置和方法
US11044472B2 (en) Method and apparatus for performing adaptive filtering on reference pixels based on size relationship of current block and reference block
CN114830642A (zh) 图像编码方法和图像解码方法
WO2023090309A1 (ja) 画像復号装置、画像復号方法及びプログラム
JP7516333B2 (ja) 画像復号装置、画像復号方法及びプログラム
JP7527261B2 (ja) 画像復号装置、画像復号方法及びプログラム
US20240187625A1 (en) Image decoding device, image decoding method, and program
US20230254483A1 (en) Intra prediction method and apparatus for performing adaptive filtering on reference pixel
KR20240082214A (ko) 템플릿 매칭 기반 인터 예측을 이용하는 비디오 코딩방법 및 장치
CN114830643A (zh) 图像编码方法和图像解码方法
CN114830645A (zh) 图像编码方法和图像解码方法
CN114830650A (zh) 图像编码方法和图像解码方法
CN114830641A (zh) 图像编码方法和图像解码方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230724

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240702

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240828

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240910