JP2023028147A - 画像復号装置、画像復号方法及びプログラム - Google Patents

画像復号装置、画像復号方法及びプログラム Download PDF

Info

Publication number
JP2023028147A
JP2023028147A JP2021133666A JP2021133666A JP2023028147A JP 2023028147 A JP2023028147 A JP 2023028147A JP 2021133666 A JP2021133666 A JP 2021133666A JP 2021133666 A JP2021133666 A JP 2021133666A JP 2023028147 A JP2023028147 A JP 2023028147A
Authority
JP
Japan
Prior art keywords
block
prediction
sub
unit
inter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021133666A
Other languages
English (en)
Other versions
JP7516325B2 (ja
Inventor
佳隆 木谷
Yoshitaka Kitani
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2021133666A priority Critical patent/JP7516325B2/ja
Priority to PCT/JP2022/029750 priority patent/WO2023021989A1/ja
Priority to CN202280055358.7A priority patent/CN117795955A/zh
Publication of JP2023028147A publication Critical patent/JP2023028147A/ja
Priority to US18/441,323 priority patent/US20240187625A1/en
Application granted granted Critical
Publication of JP7516325B2 publication Critical patent/JP7516325B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/583—Motion compensation with overlapping blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】予測精度の向上を期待すること。【解決手段】本発明に係る画像復号装置２００は、インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックに対して、重複ブロック動き補償を適用するように構成されている合成部２４３を備える。【選択図】図３

Description

本発明は、画像復号装置、画像復号方法及びプログラムに関する。
非特許文献１では、ＧＰＭ（Ｇｅｏｍｅｔｒｉｃ Ｐａｒｔｉｔｉｏｎｉｎｇ Ｍｏｄｅ）が開示されている。
ＧＰＭは、矩形ブロックを斜めに２分割しそれぞれを動き補償する。具体的には、ＧＰＭにおいて、分割された２領域は、それぞれマージモードの動きベクトルにより動き補償され、重み付き平均により合成される。斜めの分割パターンとしては、角度と位置とによって６４パターンが用意されている。
非特許文献２では、ＯＢＭＣ（Ｏｖｅｒｌａｐｐｅｄ Ｂｌｏｃｋ Ｍｏｔｉｏｎ Ｃｏｍｐｅｎｓａｔｉｏｎ）が開示されている。
ＯＢＭＣは、動き補償される対象ブロックに対して、かかる対象ブロックと異なる動きベクトルで動き補償される予測ブロックが隣接する場合に、かかる対象ブロックとのブロック境界を跨いだ所定領域分だけ隣接ブロックの参照領域を拡大し、かかる対象ブロックの参照領域と拡大した隣接ブロックの参照領域とを加重平均する。
ＩＴＵ-Ｔ Ｈ.２６６/ＶＶＣ ＪＶＥＴ-Ｕ０１００、「Ｃｏｍｐｒｅｓｓｉｏｎ ｅｆｆｉｃｉｅｎｃｙ ｍｅｔｈｏｄｓ ｂｅｙｏｎｄ ＶＶＣ」
しかしながら、非特許文献１で開示されているＧＰＭは、マージモードに限定されているため、符号化性能の改善余地があるという問題点があった。 さらに、非特許文献２では、ＯＢＭＣが開示されているが、ＧＰＭに対するＯＢＭＣの適用方法が規定されておらず、イントラ予測を含めたＧＰＭに対してＯＢＭＣを適切に適用できれば、性能改善の余地があるという問題点があった。
そこで、本発明は、上述の課題に鑑みてなされたものであり、ＧＰＭに対するＯＢＭＣの適用方法を規定することで、予測精度の向上を期待することができる画像復号装置、画像復号方法及びプログラムを提供することを目的とする。
本発明の第１の特徴は、画像復号装置であって、インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックに対して、重複ブロック動き補償を適用するように構成されている合成部を備えることを要旨とする。
本発明の第２の特徴は、画像復号装置であって、インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックのうち、予測種別がインター予測である前記サブブロックに対して、重複ブロック動き補償を適用するように構成されているインター予測部と、前記ブロック境界に面したサブブロックのうち、前記予測種別がイントラ予測である前記サブブロックに対して、前記重複ブロック動き補償を適用しないように構成されているイントラ予測部と、前記インター予測部から出力される前記重複ブロック動き補償が適用された後の動き補償画素と前記イントラ予測部から出力される前記重複ブロック動き補償が適用されていないイントラ予測画素とを加重平均して、前記復号対象ブロックの最終的な予測画素を生成するように構成されている合成部とを備えることを要旨とする。
本発明の第３の特徴は、画像復号装置であって、インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックを構成する動き補償画素を生成するように構成されているインター予測部と、前記復号対象ブロックを構成するイントラ予測画素を生成してインター予測部に出力するように構成されているイントラ予測部とを備え、前記インター予測部は、生成した前記動き補償画素又は前記イントラ予測部から出力された前記イントラ予測画素を加重平均して前記復号対象ブロックの予測画素を合成し、前記復号対象ブロックのブロック境界に面したサブブロックに対して、重複動き補償を適用するように構成されていることを要旨とする。
本発明の第４の特徴は、画像復号装置であって、インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックを構成する動き補償画素を生成するように構成されているインター予測部と、前記復号対象ブロックを構成するイントラ予測画素を生成してインター予測部に出力するように構成されているイントラ予測部とを備え、前記インター予測部は、前記復号対象ブロックのブロック境界に面したサブブロックに対して重複ブロック動き補償を適用するか否かについて判定し、前記動き補償画素に対して、前記イントラ予測部から出力された前記イントラ予測画素を加重平均して前記復号対象ブロックの予測画素を合成するように構成されていることを要旨とする。
本発明の第５の特徴は、画像復号方法であって、インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックに対して、重複ブロック動き補償を適用する工程を有することを要旨とする。
本発明の第６の特徴は、コンピュータを、画像復号装置として機能させるプログラムであって、前記画像復号装置は、インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックに対して、重複ブロック動き補償を適用するように構成されている合成部を備えることを要旨とする。
本発明によれば、ＧＰＭに対するＯＢＭＣの適用方法を規定することで、予測精度の向上を期待することができる画像復号装置、画像復号方法及びプログラムを提供することができる。
図１は、一実施形態に係る画像処理システム１の構成の一例を示す図である。 図２は、一実施形態に係る画像符号化装置１００の機能ブロックの一例を示す図である。 図３は、一実施形態に係る画像復号装置２００の機能ブロックの一例を示す図である。 図４は、非特許文献１に開示されている幾何学分割モードにより、矩形の復号対象ブロックが幾何学分割モードの分割線によって、幾何学形状の分割領域Ａと分割領域Ｂに２分割されるケースの一例を示す図である。 図５は、本実施形態に係るＧＰＭに対するイントラ予測モードの適用方法の一例を示す。 図６は、本実施形態に係るＧＰＭに対するイントラ予測モードの適用方法の一例を示す。 図７は、ＧＰＭの各分割領域Ａ/Ｂの予測画素に対する重み係数ｗの値の一例を示す図である。 図８は、ＧＰＭの分割線の角度を規定するａｎｇｌｅＩｄｘの一例を示す図である。 図９は、ｄｉｓＬｕｔの一例を示す図である。 図１０は、非特許文献２に開示されているＯＢＭＣにより、動き補償される矩形の復号対象ブロックの上側及び左側に面するブロック境界に対してＯＢＭＣが適用される一例を示す図である。 図１１は、インター予測部２４１の動作の一例を示すフローチャートである。 図１２は、本実施形態におけるＧＰＭが適用されるブロックに対するＯＢＭＣの適用の一例を示す。 図１３は、方法１（構成１）に係る合成部２４３の機能ブロックの一例を示す図である。 図１４は、方法２（構成２）に係るインター予測部２４１の機能ブロックの一例を示す図である。 図１５は、方法３（構成３）又は方法４（構成４）に係る画像符号化装置１００の機能ブロックの一例を示す図である。 図１６は、方法３（構成３）又は方法４（構成４）に係る画像復号装置２００の機能ブロックの一例を示す図である。 図１７は、方法３（構成３）に係る合成部２４３の機能ブロックの一例を示す図である。 図１８は、方法４（構成４）に係るインター予測部２４１の機能ブロックの一例を示す図である。
以下、本発明の実施の形態について、図面を参照しながら説明する。なお、以下の実施形態における構成要素は、適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、以下の実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。
＜第１実施形態＞
以下、図１～図１５を参照して、本発明の第１実施形態に係る画像処理システム１０について説明する。図１は、本実施形態に係る画像処理システム１０について示す図である。
（画像処理システム１０）
図１に示すように、本実施形態に係る画像処理システム１０は、画像符号化装置１００及び画像復号装置２００を有する。
画像符号化装置１００は、入力画像信号（ピクチャ）を符号化することによって符号化データを生成するように構成されている。画像復号装置２００は、符号化データを復号することによって出力画像信号を生成するように構成されている。
ここで、かかる符号化データは、画像符号化装置１００から画像復号装置２００に対して伝送路を介して送信されてもよい。また、符号化データは、記憶媒体に格納された上で、画像符号化装置１００から画像復号装置２００に提供されてもよい。
（画像符号化装置１００）
以下、図２を参照して、本実施形態に係る画像符号化装置１００について説明する。図２は、本実施形態に係る画像符号化装置１００の機能ブロックの一例について示す図である。
図２に示すように、画像符号化装置１００は、インター予測部１１１と、イントラ予測部１１２と、合成部１１３と、減算器１２１と、加算器１２２と、変換・量子化部１３１と、逆変換・逆量子化部１３２と、符号化部１４０と、インループフィルタ処理部１５０と、フレームバッファ１６０とを有する。
インター予測部１１１は、インター予測（フレーム間予測）によってインター予測信号を生成するように構成されている。
具体的には、インター予測部１１１は、符号化対象フレーム（対象フレーム）とフレームバッファ１６０に格納される参照フレームとの比較によって、参照フレームに含まれる参照ブロックを特定し、特定された参照ブロックに対する動きベクトル（ＭＶ：Ｍｏｔｉｏｎ Ｖｅｃｔｏｒ）を決定するように構成されている。ここで、参照フレームは、対象フレームとは異なるフレームである。
また、インター予測部１１１は、参照ブロック及び動きベクトルに基づいて符号化対象ブロック（以下、対象ブロック）に含まれるインター予測信号を対象ブロック毎に生成するように構成されている。
また、インター予測部１１１は、インター予測信号を合成部１１３に出力するように構成されている。
また、インター予測部１１１は、図２には図示していないが、インター予測の制御に関する情報（具体的には、インター予測モードや動きベクトルや参照フレームリストや参照フレーム番号等の情報）を符号化部１４０に出力するように構成されている。
イントラ予測部１１２は、イントラ予測（フレーム内予測）によってイントラ予測信号を生成するように構成されている。
具体的には、イントラ予測部１１２は、対象フレームに含まれる参照ブロックを特定し、特定された参照ブロックに基づいてイントラ予測信号を対象ブロック毎に生成するように構成されている。ここで、参照ブロックは、対象ブロックについて参照されるブロックである。例えば、参照ブロックは、対象ブロックに隣接するブロックである。
また、イントラ予測部１１２は、イントラ予測信号を合成部１１３に出力するように構成されている。
また、イントラ予測部１１２は、図２には図示していないが、イントラ予測の制御に関する情報（具体的には、イントラ予測モード等の情報）を符号化部１４０に出力するように構成されている。
合成部１１３は、インター予測部１１１から入力されたインター予測信号又は/且つイントラ予測部１１２から入力されたイントラ予測信号を、予め設定された重み係数を用いて合成し、合成された予測信号（以下、まとめて予測信号と記載）を減算器１２１及び加算器１２２に出力するように構成されている。
ここで、合成部１１３のインター予測信号又は/且つイントラ予測信号の合成処理に関しては、非特許文献１と同様の構成を本実施形態でも取ること可能であるため、説明は省略する。
減算器１２１は、入力画像信号から予測信号を減算し、予測残差信号を変換・量子化部１３１に出力するように構成されている。ここで、減算器１２１は、イントラ予測又はインター予測によって生成される予測信号と入力画像信号との差分である予測残差信号を生成するように構成されている。
加算器１２２は、逆変換・逆量子化部１３２から出力される予測残差信号に合成部１１３から出力される予測信号を加算してフィルタ処理前復号信号を生成し、かかるフィルタ処理前復号信号をイントラ予測部１１２及びインループフィルタ処理部１５０に出力するように構成されている。
ここで、フィルタ処理前復号信号は、イントラ予測部１１２で用いる参照ブロックを構成する。
変換・量子化部１３１は、予測残差信号の変換処理を行うとともに、係数レベル値を取得するように構成されている。さらに、変換・量子化部１３１は、係数レベル値の量子化を行うように構成されていてもよい。
ここで、変換処理は、予測残差信号を周波数成分信号に変換する処理である。かかる変換処理としては、離散コサイン変換（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ、以下、ＤＣＴと記す）に対応する基底パタン（変換行列）が用いられてもよく、離散サイン変換（Ｄｉｓｃｒｅｔｅ Ｓｉｎｅ Ｔｒａｎｓｆｏｒｍ、以下、ＤＳＴと記す）に対応する基底パタン（変換行列）が用いられてもよい。
また、変換処理としては、非特許文献１で開示されている複数の変換基底から予測残差信号の係数の偏りに適したものを水平・垂直方向毎に選択可能とするＭＴＳ（Ｍｕｌｔｉｐｌｅ Ｔｒａｎｓｆｏｒｍ Ｓｅｌｅｃｔｉｏｎ）や、１次変換後の変換係数をさらに低周波数領域に集中させることで符号化性能を改善するＬＦＮＳＴ（Ｌｏｗ Ｆｒｅｑｕｅｃｎｙ Ｎｏｎ-Ｓｅｐａｒａｂｌｅ Ｔｒａｎｓｆｏｒｍ）が用いられてもよい。
逆変換・逆量子化部１３２は、変換・量子化部１３１から出力される係数レベル値の逆変換処理を行うように構成されている。ここで、逆変換・逆量子化部１３２は、逆変換処理に先立って、係数レベル値の逆量子化を行うように構成されていてもよい。
ここで、逆変換処理及び逆量子化は、変換・量子化部１３１で行われる変換処理及び量子化とは逆の手順で行われる。
符号化部１４０は、変換・量子化部１３１から出力された係数レベル値を符号化し、符号化データを出力するように構成されている。
ここで、例えば、符号化は、係数レベル値の発生確率に基づいて異なる長さの符号を割り当てるエントロピー符号化である。
また、符号化部１４０は、係数レベル値に加えて、復号処理で用いる制御データを符号化するように構成されている。
ここで、制御データは、符号化ブロックサイズ、予測ブロックサイズ、変換ブロックサイズ等のブロックサイズに関する情報（フラグやインデックス）を含んでもよい。
また、制御データは、後述する画像復号装置２００における逆変換・逆量子化部２２０の逆変換・逆量子化処理やインター予測部２４１のインター予測信号生成処理やイントラ予測部２４２のイントラ予測信号生成処理や合成部２４３のインター予測信号又は/且つイントラ予測信号の合成処理やインループフィルタ処理部２５０のフィルタ処理等の制御に必要な情報（フラグやインデックス）を含んでもよい。
なお、非特許文献１では、これらの制御データは、シンタックスと呼称され、その定義は、セマンティクスと呼称されている。
また、制御データは、後述するシーケンス・パラメータ・セット（ＳＰＳ：Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）やピクチャ・パラメータ・セット（ＰＰＳ：Ｐｉｃｕｔｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）やピクチャヘッダ（ＰＨ：Ｐｉｃｔｕｒｅ Ｈｅａｄｅｒ）やスライスヘッダ（ＳＨ：Ｓｌｉｃｅ Ｈｅａｄｅｒ）等のヘッダ情報を含んでもよい。
インループフィルタ処理部１５０は、加算器１２２から出力されるフィルタ処理前復号信号に対してフィルタ処理を行うとともに、フィルタ処理後復号信号をフレームバッファ１６０に出力するように構成されている。
ここで、例えば、フィルタ処理は、ブロック（符号化ブロック、予測ブロック又は変換ブロック）の境界部分で生じる歪みを減少するデブロッキングフィルタ処理や画像符号化装置１００から伝送されるフィルタ係数やフィルタ選択情報、画像の絵柄の局所的な性質等に基づいてフィルタを切り替える適応ループフィルタ処理である。
フレームバッファ１６０は、インター予測部１１１で用いる参照フレームを蓄積するように構成されている。
ここで、フィルタ処理後復号信号は、インター予測部１１１で用いる参照フレームを構成する。
（画像復号装置２００）
以下、図３を参照して、本実施形態に係る画像復号装置２００について説明する。図３は、本実施形態に係る画像復号装置２００の機能ブロックの一例について示す図である。
図３に示すように、画像復号装置２００は、復号部２１０と、逆変換・逆量子化部２２０と、加算器２３０と、インター予測部２４１と、イントラ予測部２４２と、合成部２４３と、インループフィルタ処理部２５０と、フレームバッファ２６０とを有する。
復号部２１０は、画像符号化装置１００によって生成される符号化データを復号し、係数レベル値を復号するように構成されている。
ここで、復号は、例えば、符号化部１４０で行われるエントロピー符号化とは逆の手順のエントロピー復号である。
また、復号部２１０は、符号化データの復号処理によって制御データを取得するように構成されていてもよい。
ここで、制御データは、上述した復号ブロック（上述の画像符号化装置１００における符号化対象ブロックと同義。以下、まとめて対象ブロックと記載）のブロックサイズに関する情報を含んでもよい。
また、制御データは、逆変換・逆量子化部２２０の逆変換・逆量子化処理やインター予測部２４１やイントラ予測部２４２の予測画素生成処理やインループフィルタ処理部２５０のフィルタ処理等の制御に必要な情報（フラグやインデックス）が含んでもよい。
また、制御データは、上述したシーケンス・パラメータ・セット（ＳＰＳ：Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）やピクチャ・パラメータ・セット（ＰＰＳ：Ｐｉｃｕｔｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）やピクチャヘッダ（ＰＨ：Ｐｉｃｔｕｒｅ Ｈｅａｄｅｒ）やスライスヘッダ（ＳＨ：Ｓｌｉｃｅ Ｈｅａｄｅｒ）等のヘッダ情報を含んでもよい。
逆変換・逆量子化部２２０は、復号部２１０から出力される係数レベル値の逆変換処理を行うように構成されている。ここで、逆変換・逆量子化部２２０は、逆変換処理に先立って、係数レベル値の逆量子化を行うように構成されていてもよい。
ここで、逆変換処理及び逆量子化は、変換・量子化部１３１で行われる変換処理及び量子化とは逆の手順で行われる。
インター予測部２４１は、インター予測部１１１と同様に、インター予測（フレーム間予測）によってインター予測信号を生成するように構成されている。
具体的には、インター予測部２４１は、符号化データから復号した動きベクトル及び参照フレームに含まれる参照信号に基づいてインター予測信号を生成するように構成されている。インター予測部２４１は、インター予測信号を合成部２４３に出力するように構成されている。
イントラ予測部２４２は、イントラ予測部１１２と同様に、イントラ予測（フレーム内予測）によってイントラ予測信号を生成するように構成されている。
具体的には、イントラ予測部２４２は、対象フレームに含まれる参照ブロックを特定し、特定された参照ブロックに基づいてイントラ予測信号を予測ブロック毎に生成するように構成されている。イントラ予測部２４２は、イントラ予測信号を合成部２４３に出力するように構成されている。
合成部２４３は、合成部１１３と同様に、インター予測部２４１から入力されたインター予測信号又は/且つイントラ予測部２４２から入力されたイントラ予測信号を、予め設定された重み係数を用いて合成し、合成された予測信号（以下、まとめて予測信号と記載）を加算器２３０に出力するように構成されている。
加算器２３０は、逆変換・逆量子化部２２０から出力される予測残差信号に合成部２４３から出力される予測信号を加算してフィルタ処理前復号信号を生成し、かかるフィルタ処理前復号信号をインループフィルタ処理部２５０に出力するように構成されている。
ここで、フィルタ処理前復号信号は、イントラ予測部２４２で用いる参照ブロックを構成する。
インループフィルタ処理部２５０は、インループフィルタ処理部１５０と同様に、加算器２３０から出力されるフィルタ処理前復号信号に対してフィルタ処理を行うとともに、フィルタ処理後復号信号をフレームバッファ２６０に出力するように構成されている。
ここで、例えば、フィルタ処理は、ブロック（符号化ブロック、予測ブロック、変換ブロック或いはそれらを分割したサブブロック）の境界部分で生じる歪みを減少するデブロッキングフィルタ処理や、画像符号化装置１００から伝送されるフィルタ係数やフィルタ選択情報や画像の絵柄の局所的な性質等に基づいてフィルタを切り替える適応ループフィルタ処理である。
フレームバッファ２６０は、フレームバッファ１６０と同様に、インター予測部２４１で用いる参照フレームを蓄積するように構成されている。
ここで、フィルタ処理後復号信号は、インター予測部２４１で用いる参照フレームを構成する。
（幾何学分割モード）
以下、図４～図６を用いて、復号部２１０とインター予測部２４１とイントラ予測部２４２に係る非特許文献１で開示されている幾何学分割モード（ＧＰＭ）及び幾何学分割モード（ＧＰＭ）にイントラ予測モードを適用する第１方法及び第２方法について説明する。
図４は、非特許文献１に開示されている幾何学分割モードにより、矩形の復号対象ブロックが幾何学分割モードの分割線Ｌによって、幾何学形状の分割領域Ａと分割領域Ｂに２分割されるケースの一例を示す。
ここで、非特許文献１で開示されている幾何学分割モードの分割線Ｌは、角度と位置とによって６４パターンが用意されている。
また、非特許文献１に係るＧＰＭは、分割領域Ａ及び分割領域Ｂのそれぞれに対して、インター予測の１種である通常マージモードを適用し、インター予測（動き補償）画素を生成する。
具体的には、かかるＧＰＭでは、非特許文献1で開示されているマージ候補リストを構築し、かかるマージ候補リスト及び画像符号化装置１００から伝送される各分割領域Ａ/Ｂに対する２つのマージインデックス（ｍｅｒｇｅ_ｇｐｍ_ｉｄｘ０、ｍｅｒｇｅ_ｇｐｍ_ｉｄｘ１）に基づいて、各分割領域Ａ/Ｂの動きベクトル（ｍｖＡ、ｍｖＢ）及び参照フレームを導出して、参照ブロック、すなわち、インター予測（又は、動き補償）ブロックを生成し、最終的に各分割領域Ａ/Ｂのインター予測画素が、予め設定された重みによって加重平均されて合成される。
図５及び図６は、ＧＰＭに対するイントラ予測モードの適用方法の一例を示す。
具体的に、図５は、各分割領域Ａ/Ｂに対してイントラ予測（ｍｏｄｅＸ）及びインター予測が適用される場合のＧＰＭの構成例を示す。図６は、各分割領域にＡ/Ｂ対して、異なる２つのイントラ予測（ｍｏｄｅＸ、ｍｏｄｅＹ）が適用される場合のＧＰＭの構成例を示す。
ここで、図５に示すケースのＧＰＭでは、各分割領域Ａ/Ｂに対しては、通常マージモード或いはイントラ予測モードのいずれも適用することができ、さらにイントラ予測モードの種別は、対象ブロックの分割形状（分割線）に応じて限定する。
また、図５及び図６に示すケースのＧＰＭでは、復号対象ブロックにおけるイントラ予測モードを追加適用したＧＰＭの適用の可不可及びＧＰＭ適用時の各分割領域Ａ/Ｂにおける予測モード種別の特定方法に関して規定している。
これにより、イントラ予測モードを追加適用したＧＰＭが適切に復号対象ブロックに適用されると共に、最適な予測モードが特定されることで、結果として符号化性能のさらなる改善余地を実現することができる。
（ＧＰＭの重み係数）
以下、図７を用いて、復号部２１０、インター予測部２４１、イントラ予測部２４２及び合成部２４３に係るＧＰＭの重み係数ｗについて説明する。図７は、ＧＰＭの各分割領域Ａ/Ｂの予測画素に対する重み係数ｗの値の一例を示す図である。
インター予測部２４１又はイントラ予測部２４２によって生成された各分割領域Ａ/Ｂの予測画素が、合成部２４３で重み係数ｗによって合成（加重平均）される。
非特許文献１において、重み係数ｗの値は、０～８の値が用いられており、本実施形態でも、かかる重み係数ｗの値を用いてもよい。ここで、重み係数ｗの値０、８は、非ブレンディング領域（非Ｂｌｅｎｄｉｎｇ領域）を示し、重み係数ｗの値１～７は、ブレンディング領域（Ｂｌｅｎｄｉｎｇ）を示す。
なお、本実施形態において、重み係数ｗの計算方法は、非特許文献１と同様の方法で、画素位置（ｘＬ、ｙＬ）及び対象ブロックサイズから算出されるオフセット値（ｏｆｆｓｅｔＸ、ｏｆｆｓｅｔＹ）、図８に示す幾何学分割モード（ＧＰＭ）の分割線の角度を規定するａｎｇｌｅＩｄｘから算出される変位（ｄｉｐｌａｃｅｍｅｎｔＸ、ｄｉｐｌａｃｅｍｅｎｔＹ）及び図９に示すｄｉｐｌａｃｅｍｅｎｔＸ、ｄｉｐｌａｃｅｍｅｎｔＹから算出されるテーブル値ｄｉｓＬｕｔから、以下のように算出するように構成することができる。
ｗｅｉｇｈｔＩｄｘ＝（（（ｘＬ＋ｏｆｆｓｅｔＸ）＜＜１）＋１）×ｄｉｓＬｕｔ［ｄｉｐｌａｃｅｍｅｎｔＸ］＋（（（ｙＬ＋ｏｆｆｓｅｔＹ）＜＜１）＋１）×ｄｉｓＬｕｔ［ｄｉｐｌａｃｅｍｅｎｔＹ］
ｗｅｉｇｈｔＩｄｘＬ＝ｐａｒｔＦｌｉｐ？３２＋ｗｅｉｇｈｔＩｄｘ：３２－ｗｅｉｇｈｔＩｄｘ
ｗ＝Ｃｌｉｐ３（０，８，（ｗｅｉｇｈｔＩｄｘＬ＋４）＞＞３）
（重複ブロック動き補償）
以下、図１０及び図１１を用いて、復号部２１０及びインター予測部２４１に係る非特許文献２で開示されている重複ブロック動き補償（ＯＢＭＣ：Ｏｖｅｒｌａｐｐｅｄ Ｂｌｏｃｋ Ｍｏｔｉｏｎ Ｃｏｍｐｅｎｓａｔｉｏｎ）について説明する。
図１０は、非特許文献２に開示されているＯＢＭＣにより、動き補償（ＭＣ：Ｍｏｔｉｏｎ Ｃｏｍｐｅｎｓａｔｉｏｎ）される矩形の復号対象ブロックの上側及び左側に面するブロック境界に対してＯＢＭＣが適用される一例を示す。
ここで、非特許文献２で開示されているＯＢＭＣの適用領域は、図１０に示すようなＭＣされる復号対象ブロックの上側及び左側のブロック境界だけでない。具体的に、かかる復号対象ブロックをサブブロックに分割し、かかるサブブロック単位でＭＣされるアフィン予測等の場合は、サブブロックの上側、左側、右側及び下側も、ＯＢＭＣの適用領域となる。
また、非特許文献２で開示されているＯＢＭＣが適用されるか否かについての判定処理及びＯＢＭＣが適用される場合のＯＢＭＣの適用処理は、図１０に示すように、４×４画素のサブブロック（以下、対象サブブロック）の単位で実施される。
なお、非特許文献２では、図１１に示すように、インター予測部２４１が、ＯＢＭＣが適用されるか否かについて判定している。
図１１に示すように、ステップＳ２４１-０１において、インター予測部２４１は、対象サブブロックが有する予測種別がＩｎｔｅｒ予測（インター予測）であるか否かについて判定する。
かかる条件が満たされると判定される場合、本動作は、ステップＳ２４１-０２に進み、かかる条件が満たされないと判定される場合、すなわち、対象サブブロックが有する予測種別がＩｎｔｒａ予測（イントラ予測）であると判定される場合は、本動作は、ステップＳ２４１-０３に進む。
なお、ステップＳ２４１-０３では、インター予測部２４１は、ＯＢＭＣが対象サブブロックにおいて非適用と判定し、本動作は、終了する。
ステップＳ２４１-０２において、インター予測部２４１は、対象サブブロックが有するｏｂｍｃ_ｆｌａｇが１であるか否かについて判定する。
かかる条件が満たされると判定される場合、本動作は、ステップＳ２４１-０４に進み、かかる条件が満たされないと判定される場合、すなわち、ｏｂｍｃ_ｆｌａｇが１であると判定される場合は、本動作は、ステップＳ２４１-０５に進む。
なお、ステップＳ２４１-０５では、インター予測部２４１は、ＯＢＭＣが対象サブブロックにおいて非適用と判定し、本動作は、終了する。
ここで、ｏｂｍｃ_ｆｌａｇは、復号対象ブロック単位のＯＢＭＣの適用可不可を示すシンタックスである。ｏｂｍｃ_ｆｌａｇの値が０の場合は、ＯＢＭＣが適用されないことを示し、ｏｂｍｃ_ｆｌａｇの値が１の場合は、ＯＢＭＣが適用されることを示す。
ｏｂｍｃ_ｆｌａｇの値が０か１のいずれかであるかは、復号部２１０が復号して値を特定するか、或いは、復号せずに値を推定する。
ｏｂｍｃ_ｆｌａｇの復号方法及びｏｂｍｃ_ｆｌａｇの値の特定方法及び推定方法は、非特許文献２と同じ構成を取ることができるため、詳細な説明は省略する。
ステップＳ２４１-０４において、インター予測部２４１は、対象サブブロックに対してブロック境界を跨いだ隣接ブロックが動きベクトル（ＭＶ）を有するか否かについて判定する。
かかる条件が満たされると判定される場合、本動作は、ステップＳ２４１-０６に進み、かかる条件が満たされないと判定される場合、本動作は、ステップＳ２４１-０７に進む。
なお、ステップＳ２４１-０７では、インター予測部２４１は、ＯＢＭＣが対象サブブロックにおいて非適用と判定し、本動作は、終了する。
ステップＳ２４１-０６において、インター予測部２４１は、対象サブブロックが有するＭＶと隣接ブロックが有するＭＶとの差が所定閾値以上であるか否かについて判定する。
かかる条件が満たされると判定される場合、本動作は、ステップＳ２４１-０８に進み、かかる条件が満たされないと判定される場合、本動作は、ステップＳ２４１-０９に進む。
なお、ステップＳ２４１-０８では、インター予測部２４１は、ＯＢＭＣが対象サブブロックにおいて適用と判定し、本動作は、終了する。一方、ステップＳ２４１-０９では、インター予測部２４１は、ＯＢＭＣが対象サブブロックにおいて非適用と判定し、本動作は、終了する。
ここで、所定閾値は、固定値を用いてもよい。例えば、所定閾値を１画素としてもよい。
或いは、所定閾値として、対象サブブロックが有するＭＶの本数に応じた可変値を用いてもよい。例えば、対象サブブロックが１つのＭＶを持つ場合は、所定閾値を１画素とし、対象サブブロックが２つのＭＶを持つ場合は、所定閾値を０.５画素としてもよい。
以上の構成により、非特許文献２では、ＭＶを有する対象サブブロックに対して、隣接ブロックとのＭＶの差が大きい場合に限定して、ＯＢＭＣを適用することで、対象サブブロックと隣接ブロックとの間のブロック境界の不連続性（以下、ブロック境界歪）を解消し、結果として予測性能の向上が期待できる。
（ＧＰＭに対するＯＢＭＣの適用例及び適用制御方法）
以下、図１２を用いて、復号部２１０、インター予測部２４１及びイントラ予測部２４２に係るＧＰＭに対するＯＢＭＣの適用例及び適用制御方法について説明する。
図１０は、本実施形態におけるＧＰＭが適用されるブロックに対するＯＢＭＣの適用例を示す。図１０に示すように、ＧＰＭの分割形状（分割線Ｌ）に応じて、ＯＢＭＣが適用される対象サブブロックには、以下、最大３つのパターンが存在する。
具体的には、第１パターンとして、分割領域Ａに属する対象サブブロックがあり、第２パターンとして、分割領域Ｂに属する対象サブブロックがあり、第３パターンとして、分割領域Ａ/Ｂ双方に属する対象サブブロックがある。
かかる３パターンの対象サブブロックは、分割領域Ａ及び分割領域Ｂに適用される予測種別がインター予測であるかイントラ予測であるかによって更に分けられる。
具体的には、第１パターン及び第２のパターンの対象サブブロックは、インター予測及びイントラ予測の２ケースに分けられる。
一方、第３パターンの対象サブブロックは、異なる２つのインター予測のケース、インター予測及びイントラ予測のケース、異なる２つのイントラ予測のケースの合計３ケースに分けられる。
なお、本実施形態では、対象サブブロックが有する予測種別は、１つのみとする。そのため、第３パターンの対象サブブロックにおいて、対象サブブロックが有する予測種別は、対象サブブロックを構成する２つの予測の組み合わせで決定される。具体的に、異なる２つのインター予測で構成される予測種別は、インター予測として扱い、インター予測及びイントラ予測で構成される予測種別は、インター予測として扱い、異なる２つのイントラ予測で構成される予測種別は、イントラ予測として扱うこととする。
ここで、上述したＯＢＭＣの適用対象である対象サブブロックのうち、予測種別がイントラ予測である対象サブブロックについては、以下の理由により、ＯＢＭＣを適用不可と判定すべきである。なぜなら、同条件の対象サブブロックの予測画素は、対象サブブロックが隣接する参照画素（再構成画素）を用いたイントラ予測によって生成されるため、かかる参照画素と生成した予測画素との間のブロック境界では、インター予測のようにブロック境界歪が定性的に発生しづらい。
以上の理由により、本実施形態では、上述したＯＢＭＣの適用対象である対象サブブロックのうち、予測種別がイントラ予測である対象サブブロックに対してはＯＢＭＣの適用を制限する（ＯＢＭＣを適用不可とする）。
一方で、本実施形態では、上述したＯＢＭＣの適用対象である対象サブブロックのうち、予測種別がインター予測である対象サブブロックに対してはＯＢＭＣを適用可とする。
以降では、本実施形態に係るＧＰＭに対するＯＢＭＣの適用可不可を考慮した最終的な予測画素の生成方法について説明する。
（ＧＰＭに対するＯＢＭＣの適用可不可を考慮した最終予測画素の生成方法）
以下、図３及び図１３～図１８を用いて、本実施形態のインター予測部２４１、イントラ予測部２４２及び合成部２４３に係るＧＰＭに対するＯＢＭＣの適用可不可を考慮した最終予測画素の生成方法について説明する。
［方法１（構成１）］
方法１（構成１）では、図１３に示すように、図３に示す合成部２４３は、予測画素合成部２４３Ａと、ＯＢＭＣ部２４３Ｂとを備えている。
予測画素合成部２４３Ａは、インター予測部２４１又はイントラ予測部２４２から出力される動き補償画素（ＭＣ画素）とイントラ予測画素とを合成した上で、ＯＢＭＣ部２４３Ｂに予測画素を出力するように構成されている。
また、予測画素合成部２４３Ａは、復号対象ブロックがＧＰＭ適用ブロックであれば、インター予測部２４１又はイントラ予測部２４２から出力される予測画素を、前述の重み係数ｗによって合成（加重平均）するように構成されている。
ＯＢＭＣ部２４３Ｂは、予測画素合成部２４３Ａから出力される復号対象ブロックの予測画素に対して、上述したＯＢＭＣの適用制御方法に従って、復号対象ブロックのブロック境界に面したサブブロック単位で、ＯＢＭＣの適用可不可を判定し、最終予測画素を出力するように構成されている。
以上の構成により、以下の２つの効果が期待できる。
第１に、ＧＰＭが適用される復号対象ブロックのブロック境界に面したサブブロックに対して、適切にＯＢＭＣを適用することができる（具体的には、予測種別がインター予測であるサブブロックに対してはＯＢＭＣを適用可とし、予測種別がイントラ予測であるサブブロックに対してはＯＢＭＣを適用不可とする）ため、結果として予測性能の向上が期待できる。
ただし、本構成例には、一部、以下の課題がある。具体的に、予測種別がインター予測であるサブブロックであっても、もともとはインター予測及びイントラ予測の２つの予測種別を持つサブブロックの場合は、インター予測画素とイントラ予測画素との合成後にＯＢＭＣを適用するよりも、ＯＢＭＣの適用後のインター予測画素とイントラ予測とを合成する方がよい。なぜなら、前者については、本来隣接画素とブロック境界歪が発生しづらいイントラ予測画素に対してもＯＢＭＣを適用してしまうことになるが、後者の場合は、そうはならない。この課題を解消する最終予測画素の生成方法については、本構成の変更例として後述する。
第２に、ＧＰＭにより合成（加重平均）された予測画素に対して、ＯＢＭＣの適用可不可を判定してＯＢＭＣを適用できるため、従来のＧＰＭに対して、ＯＢＭＣの処理実行数（処理ステージ）及びＯＢＭＣの実行に必要なメモリバンド幅の増加を必要最小限に抑えることができる。
具体的には、ＧＰＭ適用ブロックは、最大２つのインター予測、すなわち、２つのＭＶから構成されるケースが存在するため、ＧＰＭ適用ブロックにおける参照領域の最悪値（最大値）は、この２つのＭＶの示す参照領域の画素数である。一方で、ＧＰＭ適用ブロックにＯＢＭＣを適用する場合、隣接のＭＶの参照領域が追加で必要となるが、本構成の場合は、ＧＰＭにより合成（加重平均）された予測画素に対してＯＢＭＣを適用するため、ＧＰＭ適用ブロックを構成する最大２つのインター予測それぞれに対してＯＢＭＣを適用することを回避でき、ＯＢＭＣによる追加の参照領域の増加を当該回避パターンに対して１/２に抑えることができる。同様の考え方で、ＯＢＭＣの処理実行数（処理ステージ）も当該回避パターンに対して、１/２に抑えることができる。
［方法２（構成２）］
図１４は、図１３で実現できるＧＰＭに対するＯＢＭＣの適用可不可を考慮した最終予測画素の生成方法（構成）の変更例である。
方法２（構成２）では、図１４に示すように、インター予測部２４１は、ＭＶ導出部２４１Ａと、ＭＣ部２４１Ｂと、ＯＢＭＣ部２４１Ｃとを備えている。
ＭＶ導出部２４１Ａは、フレームバッファ部から出力される参照フレーム及び復号部２１０から出力される制御データに基づいて、ＧＰＭを含むインター予測に必要なＭＶをＭＣ部２４１Ｂに出力するように構成されている。
ＭＣ部２４１Ｂは、ＭＶ導出部２４１Ａから出力されるＭＶ及びフレームバッファ部から出力される参照フレームに基づいて、ＭＣ画素を生成して、ＯＢＭＣ部２４１Ｃに出力するように構成されている。
ＯＢＭＣ部２４１Ｃは、ＭＣ部２４１Ｂから出力されるＭＣ画素に対して、ＯＢＭＣの適用可不可を判定するとともに、ＯＢＭＣが適用可な場合は、ＯＢＭＣを適用して、最終的な動き補償画素を生成して、後段の合成部２４３に出力するように構成されている。
なお、本構成における後段の合成部２４３は、方法１（構成１）で示したＯＢＭＣ部２４３Ｂを備えず、インター予測部２４１又はイントラ予測部２４２から出力される動き補償画素又はイントラ予測画素を合成するように構成されている。
すなわち、上述のＯＢＭＣ部２４３Ｂに対して、ＯＢＭＣ部２４１Ｃは、予測種別がインター予測であるサブブロックのみに対してＯＢＭＣの適用可不可を判定できる。
図１４に示す本構成をとることで、図１３に示す構成１に対して、さらに予測性能の向上が期待できる一方で、ＯＢＭＣに必要なメモリバンド幅とＯＢＭＣの処理実行数は増加する。
具体的に、合成部２４３によるＧＰＭの最終予測画素の生成前に、インター予測画素のみに対して直接ＯＢＭＣを実行できるため、上述した予測種別がインター予測であるサブブロックであっても、もともとはインター予測及びイントラ予測の２つの予測種別を持つサブブロックのイントラ予測画素に対してＯＢＭＣを非適用にできる。これにより、本来隣接画素とブロック境界歪が発生しづらいイントラ予測画素に対してＯＢＭＣを不要に適用することを回避できるため、結果として、予測性能が向上する。
他方、合成部２４３によるＧＰＭの最終予測画素の生成前に、インター予測画素のみに対して直接ＯＢＭＣを実行するため、上述の構成１と比較して、ＯＢＭＣに必要なメモリバンド幅とＯＢＭＣの処理実行数が倍増する。
［方法３（構成３）］
図１５～図１７を用いて、図２、図３及び図１３で実現できるＧＰＭに対するＯＢＭＣの適用可不可を考慮した最終予測画素の生成方法（方法１）或いは図２、図３及び図１４で実現できるＧＰＭに対するＯＢＭＣの適用可不可を考慮した最終予測画素の生成方法（方法２）の変更例である方法３（構成３）について説明する。
方法３（構成３）では、図１５に示すように、図２に対して、イントラ予測部１１２がインター予測部１１１に対してイントラ予測画素を出力する線が追加されている。これにより、後述するが、インター予測部１１１にて、ＧＰＭによる加重平均された最終予測画素を生成できる。すなわち、上述の方法１（構成１）や方法２（構成２）における合成部１１３が不要にできる。
また、方法３（構成３）では、図１６に示すように、図３に対して、イントラ予測部２４２がインター予測部２４１に対してイントラ予測画素を出力する線が追加されている。これにより、後述するが、インター予測部２４１にて、ＧＰＭによる加重平均された最終予測画素を生成できる。すなわち、上述の方法１（構成１）や方法２（構成２）における合成部２４３が不要にできる。
方法３（構成３）では、図１７に示すように、インター予測部２４１（１１１）は、ＭＶ導出部２４１Ａと、ＭＣ部２４１Ｂと、予測画素合成部２４３Ａと、ＯＢＭＣ部２４１Ｃとを備えている。
ここで、ＭＶ導出部２４１Ａ及びＭＣ部２４１Ｂは、図１４に示すＭＶ導出部２４１Ａ及びＭＣ部２４１Ｂと同じ構成を取ることできる。
また、予測画素合成部２４３Ａ及びＯＢＭＣ部２４３Ｂは、図１３に示す合成部２４３の予測画素合成部２４３Ａ及びＯＢＭＣ部２４３Ｂと同じ構成を取ることができる。
以上の構成により期待できる効果は、構成１と同じである。
［方法４（構成４）］
図１５、図１６及び図１８を用いて、図２、図３及び図１３で実現できるＧＰＭに対するＯＢＭＣの適用可不可を考慮した最終予測画素の生成方法（方法１）或いは図２、図３及び図１４で実現できるＧＰＭに対するＯＢＭＣの適用可不可を考慮した最終予測画素の生成方法（方法２）の変更例である方法４（構成４）について説明する。以下、既出の構成に対する差分のみを以下で説明する。
方法４（構成４）では、図１８に示すように、インター予測部２４１（１１１）は、ＭＶ導出部２４１Ａと、ＭＣ部２４１Ｂと、ＯＢＭＣ部２４１Ｃと、予測画素合成部２４３Ａとを備えている。
ここで、ＭＶ導出部２４１Ａ、ＭＣ部２４１Ｂ及びＯＢＭＣ部２４１Ｃは、図１４に示すＭＶ導出部２４１Ａ、ＭＣ部２４１Ｂ及びＯＢＭＣ部２４１Ｃと同じ構成を取ることできる。
また、予測画素合成部２４３Ａは、図１３に示す合成部２４３の予測画素合成部２４３Ａと同じ構成を取ることができる。
以上の構成により期待できる効果は、構成２と同じである。
上述した構成１～構成４のいずれかを選択するかは、符号化性能又は画像復号装置１００における復号処理量とメモリバンド幅の制約のトレードオフに基づいて、設計者の意図で選択してもよい。
上述の画像符号化装置１００及び画像復号装置２００は、コンピュータに各機能（各工程）を実行させるプログラムであって実現されていてもよい。
なお、上述の各実施形態では、本発明を画像符号化装置１００及び画像復号装置２００への適用を例にして説明したが、本発明は、これのみに限定されるものではなく、画像符号化装置１００及び画像復号装置２００の各機能を備えた画像符号化システム及び画像復号システムにも同様に適用できる。
１０…画像処理システム
１００…画像符号化装置
１１１、２４１…インター予測部
１１２、２４２…イントラ予測部
１１３、２４３…合成部
１２１…減算器
１２２、２３０…加算器
１３１…変換・量子化部
１３２、２２０…逆変換・逆量子化部
１４０…符号化部
１５０、２５０…インループフィルタ処理部
１６０、２６０…フレームバッファ
２００…画像復号装置
２１０…復号部
２４１Ａ…ＭＶ導出部
２４１Ｂ…ＭＣ部
２４１Ｃ…ＯＢＭＣ部
２４３Ａ…予測画素合成部
２４３Ｂ…ＯＢＭＣ部

Claims (11)

  1. 画像復号装置であって、
    インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックに対して、重複ブロック動き補償を適用するように構成されている合成部を備えることを特徴とする画像復号装置。
  2. 前記サブブロックは、前記幾何学ブロック分割モードによる加重平均後に生成されたブロックのサブブロックであることを特徴とする請求項１に記載の画像復号装置。
  3. 前記合成部は、前記サブブロックが有する予測種別に基づいて、前記サブブロックに対して前記重複ブロック動き補償を適用するか否かについて制御するように構成されていることを特徴とする請求項１又は２に記載の画像復号装置。
  4. 前記合成部は、
    前記予測種別がインター予測である前記サブブロックに対して前記重複ブロック動き補償を適用すると判定し、
    前記予測種別がイントラ予測である前記サブブロックに対して前記重複ブロック動き補償を適用しないと判定し、
    前記判定結果に基づいて、前記復号対象ブロックの最終的な予測画素を生成するように構成されていることを特徴とする請求項３に記載の画像復号装置。
  5. 画像復号装置であって、
    インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックのうち、予測種別がインター予測である前記サブブロックに対して、重複ブロック動き補償を適用するように構成されているインター予測部と、
    前記ブロック境界に面したサブブロックのうち、前記予測種別がイントラ予測である前記サブブロックに対して、前記重複ブロック動き補償を適用しないように構成されているイントラ予測部と、
    前記インター予測部から出力される前記重複ブロック動き補償が適用された後の動き補償画素と前記イントラ予測部から出力される前記重複ブロック動き補償が適用されていないイントラ予測画素とを加重平均して、前記復号対象ブロックの最終的な予測画素を生成するように構成されている合成部とを備えることを特徴とする画像復号装置。
  6. 画像復号装置であって、
    インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックを構成する動き補償画素を生成するように構成されているインター予測部と、
    前記復号対象ブロックを構成するイントラ予測画素を生成してインター予測部に出力するように構成されているイントラ予測部とを備え、
    前記インター予測部は、
    生成した前記動き補償画素又は前記イントラ予測部から出力された前記イントラ予測画素を加重平均して前記復号対象ブロックの予測画素を合成し、
    前記復号対象ブロックのブロック境界に面したサブブロックに対して、重複動き補償を適用するように構成されていることを特徴とする画像復号装置。
  7. 前記インター予測部は、前記サブブロックが有する予測種別に基づいて、前記サブブロックに対して前記重複ブロック動き補償を適用するか否かについて制御するように構成されていることを特徴とする請求項６に記載の画像復号装置。
  8. 前記インター予測部は、
    前記予測種別がインター予測である前記サブブロックに対して前記重複ブロック動き補償を適用すると判定し、
    前記予測種別がイントラ予測である前記サブブロックに対して前記重複ブロック動き補償を適用しないと判定し、
    前記判定結果に基づいて、前記復号対象ブロックの最終的な予測画素を生成するように構成されていることを特徴とする請求項７に記載の画像復号装置。
  9. 画像復号装置であって、
    インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックを構成する動き補償画素を生成するように構成されているインター予測部と、
    前記復号対象ブロックを構成するイントラ予測画素を生成してインター予測部に出力するように構成されているイントラ予測部とを備え、
    前記インター予測部は、
    前記復号対象ブロックのブロック境界に面したサブブロックに対して重複ブロック動き補償を適用するか否かについて判定し、
    前記動き補償画素に対して、前記イントラ予測部から出力された前記イントラ予測画素を加重平均して前記復号対象ブロックの予測画素を合成するように構成されていることを特徴とする画像復号装置。
  10. 画像復号方法であって、
    インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックに対して、重複ブロック動き補償を適用する工程を有することを特徴とする画像復号方法。
  11. コンピュータを、画像復号装置として機能させるプログラムであって、
    前記画像復号装置は、インター予測又はイントラ予測から構成される幾何学ブロック分割モードが適用される復号対象ブロックのブロック境界に面したサブブロックに対して、重複ブロック動き補償を適用するように構成されている合成部を備えることを特徴とするプログラム。
JP2021133666A 2021-08-18 2021-08-18 画像復号装置、画像復号方法及びプログラム Active JP7516325B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2021133666A JP7516325B2 (ja) 2021-08-18 2021-08-18 画像復号装置、画像復号方法及びプログラム
PCT/JP2022/029750 WO2023021989A1 (ja) 2021-08-18 2022-08-03 画像復号装置、画像復号方法及びプログラム
CN202280055358.7A CN117795955A (zh) 2021-08-18 2022-08-03 图像解码装置、图像解码方法及程序
US18/441,323 US20240187625A1 (en) 2021-08-18 2024-02-14 Image decoding device, image decoding method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021133666A JP7516325B2 (ja) 2021-08-18 2021-08-18 画像復号装置、画像復号方法及びプログラム

Publications (2)

Publication Number Publication Date
JP2023028147A true JP2023028147A (ja) 2023-03-03
JP7516325B2 JP7516325B2 (ja) 2024-07-16

Family

ID=85239491

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021133666A Active JP7516325B2 (ja) 2021-08-18 2021-08-18 画像復号装置、画像復号方法及びプログラム

Country Status (4)

Country Link
US (1) US20240187625A1 (ja)
JP (1) JP7516325B2 (ja)
CN (1) CN117795955A (ja)
WO (1) WO2023021989A1 (ja)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111107356B (zh) 2018-10-27 2023-11-10 华为技术有限公司 图像预测方法及装置

Also Published As

Publication number Publication date
WO2023021989A1 (ja) 2023-02-23
CN117795955A (zh) 2024-03-29
US20240187625A1 (en) 2024-06-06
JP7516325B2 (ja) 2024-07-16

Similar Documents

Publication Publication Date Title
US11792409B2 (en) Method and apparatus for encoding/decoding an image
TWI678917B (zh) 用於視訊編解碼的畫面內-畫面間預測的方法及裝置
RU2696311C1 (ru) Устройство и способ для компенсации движения видео с выбираемым интерполяционным фильтром
US20220159238A1 (en) Method and apparatus for encoding/decoding an image signal
JP6535744B2 (ja) 画像符号化装置、画像復号化装置、及びこれらのプログラム
KR20080073157A (ko) 인터 예측 부호화, 복호화 방법 및 장치
JP7495909B2 (ja) 画像復号装置、画像復号方法及びプログラム
WO2022219888A1 (ja) 画像復号装置、画像復号方法及びプログラム
WO2020137126A1 (ja) 画像復号装置、画像符号化装置、画像復号方法及びプログラム
WO2023021989A1 (ja) 画像復号装置、画像復号方法及びプログラム
JP7564068B2 (ja) 画像復号装置、画像復号方法及びプログラム
US11202082B2 (en) Image processing apparatus and method
WO2023090309A1 (ja) 画像復号装置、画像復号方法及びプログラム
WO2023047820A1 (ja) 画像復号装置、画像復号方法及びプログラム
WO2023047821A1 (ja) 画像復号装置、画像復号方法及びプログラム
WO2023277129A1 (ja) 画像復号装置、画像復号方法及びプログラム
JP7526549B2 (ja) 画像復号装置、画像復号方法及びプログラム
JP7134118B2 (ja) 画像復号装置、画像復号方法及びプログラム
JP7061737B1 (ja) 画像復号装置、画像復号方法及びプログラム
JP7083971B1 (ja) 画像復号装置、画像復号方法及びプログラム
WO2023072121A1 (en) Method and apparatus for prediction based on cross component linear model in video coding system
JP2023107974A (ja) 画像復号装置、画像符号化装置、画像復号方法及びプログラム
JP2022019720A (ja) 画像復号装置、画像復号方法及びプログラム
KR20120023234A (ko) 동영상 부호화를 위한 움직임 추정 방법 및 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230724

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240402

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240513

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240604

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240703

R150 Certificate of patent or registration of utility model

Ref document number: 7516325

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150