JP2023005868A - 画像復号装置、画像復号方法及びプログラム - Google Patents

画像復号装置、画像復号方法及びプログラム Download PDF

Info

Publication number
JP2023005868A
JP2023005868A JP2021108098A JP2021108098A JP2023005868A JP 2023005868 A JP2023005868 A JP 2023005868A JP 2021108098 A JP2021108098 A JP 2021108098A JP 2021108098 A JP2021108098 A JP 2021108098A JP 2023005868 A JP2023005868 A JP 2023005868A
Authority
JP
Japan
Prior art keywords
unit
output
prediction
pixel
image decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021108098A
Other languages
English (en)
Inventor
晴久 加藤
Haruhisa Kato
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2021108098A priority Critical patent/JP2023005868A/ja
Priority to PCT/JP2022/026103 priority patent/WO2023277104A1/ja
Priority to CN202280045467.0A priority patent/CN117693935A/zh
Publication of JP2023005868A publication Critical patent/JP2023005868A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】より符号化効率を向上させること。【解決手段】本発明に係る画像復号装置２００において、合成部２８０は、イントラ予測部２６０によって出力された予測画素及び動き補償部２７０によって出力された予測画素に対して重み係数を用いた重み付け平均処理を施すことで予測画素を生成するように構成されている。【選択図】図１

Description

本発明は、画像復号装置、画像復号方法及びプログラムに関する。
非特許文献１及び非特許文献２には、ＧＰＭ（Ｇｅｏｍｅｔｒｉｃ Ｐａｒｔｉｔｉｏｎｉｎｇ Ｍｏｄｅ）について開示されている。
ＧＰＭは、矩形ブロックを斜めに２分割しそれぞれに対して動き補償処理を施すものである。具体的には、分割された２領域は、それぞれマージベクトルにより動き補償処理が施されて重み付き平均処理を施されることで合成される。斜めの分割は、角度及び位置によって６４パターンが用意されている。
ＩＴＵ-Ｔ Ｈ.２６６ ＶＶＣ ＣＥ４：Ｓｕｍｍａｒｙ ｒｅｐｏｒｔ ｏｎ ｉｎｔｅｒ ｐｒｅｄｉｃｔｉｏｎ ｗｉｔｈ ｇｅｏｍｅｔｒｉｃ ｐａｒｔｉｔｉｏｉｎｇ、ＪＶＥＴ-Ｑ００２４
しかしながら、非特許文献１及び非特許文献２では、その対象が動き補償を伴うマージモードに限定されているため、符号化性能の向上には改善の余地があるという問題点があった。
そこで、本発明は、上述の課題に鑑みてなされたものであり、より符号化効率を向上させることができる画像復号装置、画像復号方法及びプログラムを提供することを目的とする。
本発明の第１の特徴は、画像復号装置であって、予測情報及び量子化値を復号して出力するように構成されている復号部と、前記復号部によって出力された前記量子化値に対して逆量子化処理を施すことで変換係数を生成して出力するように構成されている逆量子化部と、前記逆量子化部によって出力された前記変換係数に対して逆変換処理を施すことで予測残差を生成して出力するように構成されている逆変換部と、前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されている合成部と、前記逆変換部によって出力された前記予測残差と前記合成部によって出力された前記予測画素とを加算して復号済み画素を取得して出力するように構成されている加算器と、前記加算器によって出力された前記復号済み画素を蓄積するように構成されている蓄積部と、前記加算器によって出力された前記復号済み画素及び前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されているイントラ予測部と、前記蓄積部によって蓄積されている前記復号済み画素及び前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されている動き補償部と、を備え、前記合成部は、前記イントラ予測部によって出力された前記予測画素及び前記動き補償部によって出力された前記予測画素に対して重み係数を用いた重み付け平均処理を施すことで前記予測画素を生成するように構成されていることを要旨とする。
本発明の第２の特徴は、画像復号方法であって、予測情報及び量子化値を復号して出力する工程Ａと、前記工程Ａにおいて出力された前記量子化値に対して逆量子化処理を施すことで変換係数を生成して出力する工程Ｂと、前記工程Ｂにおいて出力された前記変換係数に対して逆変換処理を施すことで予測残差を生成して出力する工程Ｃと、前記工程Ａにおいて出力された前記予測情報に基づいて予測画素を生成して出力する工程Ｄと、前記工程Ｃにおいて出力された前記予測残差と前記工程Ｄにおいて出力された前記予測画素とを加算して復号済み画素を取得して出力する工程Ｅと、前記工程Ｅにおいて出力された前記復号済み画素を蓄積する工程Ｆと、前記工程Ｅにおいて出力された前記復号済み画素及び前記工程Ａにおいて出力された前記予測情報に基づいて予測画素を生成して出力する工程Ｇと、前記工程Ｆにおいて蓄積された前記復号済み画素及び前記工程Ａにおいて出力された前記予測情報に基づいて予測画素を生成して出力する工程Ｈと、を備え、前記工程Ｄにおいて、前記工程Ｇにおいて出力された前記予測画素及び前記工程Ｈにおいて出力された前記予測画素に対して重み係数を用いた重み付け平均処理を施すことで前記予測画素を生成することを要旨とする。
本発明の第３の特徴は、コンピュータを、画像復号装置として機能させるプログラムであって、前記画像復号装置は、予測情報及び量子化値を復号して出力するように構成されている復号部と、前記復号部によって出力された前記量子化値に対して逆量子化処理を施すことで変換係数を生成して出力するように構成されている逆量子化部と、前記逆量子化部によって出力された前記変換係数に対して逆変換処理を施すことで予測残差を生成して出力するように構成されている逆変換部と、前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されている合成部と、前記逆変換部によって出力された前記予測残差と前記合成部によって出力された前記予測画素とを加算して復号済み画素を取得して出力するように構成されている加算器と、前記加算器によって出力された前記復号済み画素を蓄積するように構成されている蓄積部と、前記加算器によって出力された前記復号済み画素及び前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されているイントラ予測部と、前記蓄積部によって蓄積されている前記復号済み画素及び前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されている動き補償部と、を備え、前記合成部は、前記イントラ予測部によって出力された前記予測画素及び前記動き補償部によって出力された前記予測画素に対して重み係数を用いた重み付け平均処理を施すことで前記予測画素を生成するように構成されていることを要旨とする。
本発明によれば、より符号化効率を向上させることができる画像復号装置、画像復号方法及びプログラムを提供することができる。
一実施形態に係る画像復号装置２００の機能ブロックの一例を示す図である。 一実施形態に係る画像復号装置２００において単位ブロックを小領域Ａ及び小領域Ｂに分割するケースの一例を示す図である。 一実施形態に係る画像復号装置２００において単位ブロックを小領域Ａ～Ｃに分割するケースの一例を示す図である。 一実施形態に係る画像復号装置２００において、図２の小領域Ａ及び小領域Ｂに対してそれぞれイントラ予測及び動き補償を割り当てて予測画素を生成するケースの一例を示す図である。 一実施形態に係る画像復号装置２００において、図３の小領域Ａ～Ｃに対してそれぞれイントラ予測、動き補償及びイントラ予測を割り当てて予測画素を生成するケースの一例を示す図である。 図６は、重み係数と重み付き平均処理を用いた算出方法の一例を示す図である。 図７は、重み係数と重み付き平均処理を用いた算出方法の一例を示す図である。
以下、本発明の実施の形態について、図面を参照しながら説明する。なお、以下の実施形態における構成要素は、適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、以下の実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。
（第１実施形態）
以下、図１～図７を参照して、本発明の第１実施形態に係る画像復号装置２００について説明する。図１は、本実施形態に係る画像復号装置２００の機能ブロックの一例について示す図である。
図１に示すように、画像復号装置２００は、符号入力部２０１と、復号部２１０と、逆量子化部２２０と、逆変換部２３０と、加算器２４０と、蓄積部２５０と、イントラ予測部２６０と、動き補償部２７０と、合成部２８０と、画像出力部２９０とを有する。
符号入力部２０１は、画像符号装置によって出力された符号情報を取得して出力するように構成されている。
復号部２１０は、符号入力部２０１によって出力された符号情報に対して可変長復号処理を施すことで量子化値及び予測情報を生成して出力するように構成されている。ここで、図１に示すように、復号部２１０は、逆量子化部２２０に対して量子化値を出力し、イントラ予測部２６０、動き補償部２７０及び合成部２８０に対して予測情報を出力するように構成されている。
逆量子化部２２０は、復号部２１０によって出力された量子化値に対して逆量子化処理を施すことで変換係数を生成して出力するように構成されている。ここで、図１に示すように、逆量子化部２２０は、逆変換部２３０に対して変換係数を出力するように構成されている。
逆変換部２３０は、逆量子化部２２０によって出力された変換係数に対して逆変換処理を施すことで予測残差を生成して出力するように構成されている。ここで、図１に示すように、逆変換部２３０は、加算器２４０に対して予測残差を出力するように構成されている。
加算器２４０は、逆変換部２３０によって出力された予測残差及び合成部２８０によって出力された予測画素を取得するように構成されている。ここで、加算器２４０は、かかる予測残差と予測画素とを加算して復号済み画素を取得して出力するように構成されている。ここで、図１に示すように、加算器２４０は、蓄積部２５０、イントラ予測部２６０及び画像出力部２９０に対して復号済み画素を出力するように構成されている。
蓄積部２５０は、加算器２４０によって出力された復号済み画素について累積的に蓄積するように構成されている。蓄積部２５０は、動き補償部２７０からの要求に応じて復号済み画素を出力するように構成されている。
イントラ予測部２６０は、加算器２４０によって出力された復号済み画素及び復号部２１０によって出力された予測情報に基づいて、後述する合成部２８０で設定される小領域における入力画素の近似値としての予測画素を生成するように構成されている。ここで、図１に示すように、イントラ予測部２６０は、合成部２８０に対して予測画素を出力するように構成されている。
動き補償部２７０は、蓄積部２５０を参照して得られた復号済み画素及び復号部２１０によって出力された予測情報に基づいて、後述する合成部２８０で設定される小領域における入力画素の近似値としての予測画素を生成するように構成されている。ここで、図１に示すように、動き補償部２７０は、合成部２８０に対して予測画素を出力するように構成されている。
画像出力部２９０は、加算器２４０によって出力された復号済み画素を出力するように構成されている。
以下、図２～図７を参照して、合成部２８０の機能の一例について説明する。
合成部２８０は、復号部２１０によって出力された予測情報、イントラ予測部２６０によって出力された予測画素及び動き補償部２７０によって出力された予測画素に基づいて、予測画素を生成して出力するように構成されている。
また、合成部２８０は、イントラ予測部２６０によって出力された予測画素及び動き補償部２７０によって出力された予測画素に対して重み係数を用いた重み付け平均処理を施すことで、かかる予測画素を生成するように構成されている。
ここで、合成部２８０の役割は、後段の加算器２４０において復号対象ブロックを高精度に補償するために、かかる復号対象ブロックに最適な複数の予測画素に対する重み係数を選択して、イントラ予測部２６０及び動き補償部２７０から取得した複数の予測画素を重み係数に応じて合成することにある。
なお、重み係数については、単位ブロックの画素ごとに予め設定した任意の値を設定した複数のパターンを用意しておき、合成部２８０は、複数のパターンの重み係数から、復号部２１０から取得した予測情報に従って、画素ごとに使用する重み係数を特定するように構成されている。
複数の予測画素に対する重み係数の合計値は、画素ごとに１になるように設計しておき、かかる重み係数を用いて複数の予測画素に対して重み付け平均処理を施して合成した結果を、合成部２８０による予測画素とする。
重み係数を０以外とした画素は、かかる予測画素を採用し、重み係数を０とした画素は、かかる予測画素を用いないことになるため、概念としては、単位ブロックを複数の小領域に分割することに相当し、複数の予測画素のどの画素をどの割合でどこに適用するかを決定することになる。
ここで、重み係数の分布は、２等分等の矩形形状分布だとより小さな単位ブロックで表現できるため、非矩形形状に分布させることが望ましい。
図２では、単位ブロックを斜めの形状で分布させた場合の例を表し、単位ブロックは、斜めの直線で小領域Ａ及び小領域Ｂに分割されている。
図３の例では、単位ブロックは、複数の直線で小領域Ａと小領域Ｂと小領域Ｃとに分割されている。分割数は、任意の数であってもよい。
図３の例において、それぞれの小領域Ａ～Ｃに対してイントラ予測又は/且つ動き補償を割り当てて予測画素が生成されてもよい。すなわち、合成部２８０は、復号対象ブロックの単位ブロックを分割した複数の小領域Ａ～Ｃの各々において、イントラ予測部２６０によって生成された予測画素又は/且つ動き補償部２７０によって生成された予測画素を採用するように構成されていてもよい。
このとき、分割数が増加すると、イントラ予測等の予測情報を符号化する必要が生じてしまうため、符号化効率を改善できないという問題がある。この問題を解決するため、小領域の分割に応じた予測モードを用いるという手順を取る。
図４は、図２の小領域Ａ及び小領域Ｂに対してそれぞれイントラ予測及び動き補償を割り当てて予測画素を生成する例を示す。他にも、両方の小領域Ａ及び小領域Ｂに異なるイントラ予測を割り当てる等の任意の組み合わせを取ることができる。また、イントラ予測に関しては、デブロッキングフィルタ適用前を利用してもよいしデブロッキングフィルタ適用後を利用してもよい。事前にどちらかを決定しておくことが望ましい。
イントラ予測は、小領域の分割形状に応じてイントラ予測モードを限定してもよい。すなわち、合成部２８０は、小領域においてイントラ予測が割り当てられている場合、小領域の分割形状に応じたイントラ予測モードを用いるように構成されていてもよい。
例えば、合成部２８０は、図４に示すように、イントラ予測モードを、分割形状を構成する直線で分割されている方向に対して平行な方向のモードの１種類だけに限定することができる。
或いは、合成部２８０は、イントラ予測モードを、分割形状を構成する直線で分割されている方向に対して平行な方向のモードと垂直な方向のモードとの２種類だけに限定してもよい。
このように、イントラ予測モードを分割形状の方向に応じたものに限定することで、イントラ予測モードを表す符号量を適応的に削減できる効果が得られる。
復号部２１０は、小領域の分割の種類に応じて限定された予測モードを適応的に復号するように構成されていてもよい。
例えば、復号部２１０は、分割形状を構成する直線で分割されている方向と平行な方向及び垂直な方向にイントラ予測モードを限定する場合、復号部２１０に入力された符号が「０」であれば平行な方向としてイントラ予測モードを復号し、復号部２１０に入力された符号が「１」であれば垂直な方向としてイントラ予測モードを復号するように構成されていてもよい。かかる構成によれば、イントラ予測モードの予測情報が１ビットで表現できるため、符号化効率を大幅に向上させる効果が得られる。
合成部２８０は、予測モードとして、特定のイントラ予測モードを選択肢に含めるように構成されていてもよい。例えば、合成部２８０は、ＰｌａｎａｒモードやＤＣ等の方向に依存しない特定のイントラ予測モードを常に選択肢に加えるように構成されていてもよい。
例えば、合成部２８０は、イントラ予測モードを、分割形状を構成する直線で分割されている方向に対して平行な方向のモードと垂直な方向のモードと方向に依存しないＰｌａｎａｒモードとの３種類だけに限定してもよい。
或いは、合成部２８０は、イントラ予測モードを、分割形状を構成する直線で分割されている方向に対して平行な方向のモードと垂直な方向のモードと方向に依存しないＰｌａｎａｒモードとＤＣモードとの４種類だけに限定してもよい。
また、合成部２８０は、非特許文献１で開示されている復号対象ブロックに隣接する複数の参照画素ラインから予測画素生成に使用する参照画素を選択するＭＲＬが有効な場合、上述の分割形状に応じたイントラ予測モードで参照する参照画素として、ＭＲＬで選択される参照画素を使用してもよい。
図５は、図３の小領域Ａ～Ｃに対して、それぞれイントラ予測、動き補償及びイントラ予測を割り当てている。
それぞれのイントラ予測では、小領域Ａ～Ｃを構成する複数の直線で分割されている方向に応じたイントラ予測モードを全て或いは一部を選択肢に含むことができる。すなわち、合成部２８０は、小領域の分割形状を構成する直線で分割されている方向に応じたイントラ予測モードの少なくとも一部を選択肢に含めるように構成されていてもよい。
合成部２８０は、選択肢に含めるイントラ予測モードの数を復号対象のブロックサイズに基づいて判定してもよい。
例えば、合成部２８０は、単位ブロックのブロックサイズが小さい場合は、小領域の分割形状を構成する直線で分割されている方向に応じた１つのイントラ予測モード及びかかるイントラ予測モード近傍の複数のイントラ予測モードにより生成される予測画素を用いて予測画素を生成してもよい。
また、合成部２８０は、単位ブロックのブロックサイズが大きい場合は、小領域の分割形状を構成する直線で分割されている方向に応じた１つのイントラ予測モードのみより予測画素を生成してもよい。
単位ブロックのサイズにより、隣り合うイントラ予測モード間の各参照画素位置（各参照画素間の距離）が変わるため、上記のように各参照画素位置が離れやすい大サイズブロックでは、分割方向に対して、例えば、１つの平行なイントラ予測モードに限定することで、かかる平行なイントラ予測モード近傍の予測モードによって参照される画素、すなわち、分割形状を構成する分割線から離れた参照画素を予測画素生成に使用して、予測性能の劣化が生じてしまう可能性を回避できる。
他方、上述の各参照画素位置が離れにくい小サイズブロックでは、分割方向に対して、例えば、１つの平行なイントラ予測モード及びかかる平行なイントラ予測モード近傍の予測モードによって参照される画素を予測画素の生成に使用することで、予測性能の向上効果が期待できる。
合成部２８０は、選択肢に含めるイントラ予測モードの数を復号対象のブロックの縦横比に基づいて判定してもよい。
例えば、合成部２８０は、単位ブロックの縦横比が小さい場合は、小領域の分割形状を構成する直線で分割されている方向に応じた１つのイントラ予測モード及びかかるイントラ予測モード近傍の複数のイントラ予測モードにより生成される予測画素を用いて予測画素を生成してもよい。
また、合成部２８０は、単位ブロックの縦横比が大きい場合は、小領域の分割形状を構成する直線で分割されている方向に応じた１つのイントラ予測モードのみより予測画素を生成してもよい。
単位ブロックの縦横比により、隣り合うイントラ予測モード間の各参照画素位置（各参照画素間の距離）が変わるため、上述のように、各参照画素位置が離れやすい非正方ブロックでは、分割方向に対して、例えば、１つの平行なイントラ予測モードに限定することで、かかる平行なイントラ予測モード近傍の予測モードによって参照される画素、すなわち、分割形状を構成する分割線から離れた参照画素を予測画素生成に使用して、予測性能の劣化が生じてしまう可能性を回避できる。
他方、上述の各参照画素位置が離れにくい正方ブロックでは、分割方向に対して、例えば、１つの平行なイントラ予測モード及びかかる平行なイントラ予測モード近傍の予測モードによって参照される画素を予測画素の生成に使用することで、予測性能の向上効果が期待できる。
それぞれの小領域Ａ～Ｃの予測画素は、分割形状に応じた重み係数を用いた重み付き平均処理を施すことで算出される。小領域Ａ～Ｃの合成は、画素単位に重み係数を設定し、複数の予測画素に対して、かかる重み係数を用いた重み付き平均処理を施すことで求められる。
図６は、重み係数と重み付き平均処理を用いた算出方法の一例を示す。
また、イントラ予測と動き補償との組み合わせの場合、イントラ予測は、右下の予測精度が比較的低いため、図６の重み係数に加えて、図７に示すように、イントラ予測の重み係数は、単位ブロックの右下ほど小さくなる点を加味して設計することもできる。すなわち、合成部２８０は、復号対象ブロックの単位ブロックの右下に行くほど重み係数を小さくするように構成されていてもよい。この場合、重み係数ｗを一様に０.５としておくことで明示的な小領域分割を省略することもできる。
また、一般的にイントラ予測が選択されるような領域は、近傍の単位ブロックもイントラ予測が選択されることが多いため、近傍の単位ブロックがイントラ予測か否かによって重み係数を適応的に変更してもよい。すなわち、合成部２８０は、復号対象ブロックの単位ブロックの近傍の単位ブロックがイントラ予測か否かに基づいて、かかる単位ブロックの重み係数を適応的に変更するように構成されていてもよい。
例えば、近傍の単位ブロックのイントラ予測の個数に重み係数を比例させてもよい。すなわち、合成部２８０は、復号対象ブロックの単位ブロックの近傍の単位ブロックのうちイントラ予測が割り当てられている単位ブロックの個数に比例するように重み係数を決定するように構成されていてもよい。近傍にイントラ予測が多い場合は、重みｒを大きくしてイントラ予測の影響を強くし、近傍にイントラ予測が少ない場合は、重みｒを小さくしてイントラ予測の影響を小さくすることで、予測精度向上の効果が期待できる。
また、上述の画像復号装置２００は、コンピュータに各機能（各工程）を実行させるプログラムであって実現されていてもよい。
なお、本実施形態によれば、例えば、動画像通信において総合的なサービス品質の向上を実現できることから、国連が主導する持続可能な開発目標（ＳＤＧｓ）の目標９「レジリエントなインフラを整備し、持続可能な産業化を推進するとともに、イノベーションの拡大を図る」に貢献することが可能となる。
２００…画像復号装置
２０１…符号入力部
２１０…復号部
２２０…逆量子化部
２３０…逆変換部
２４０…加算器
２５０…蓄積部
２６０…イントラ予測部
２７０…動き補償部
２８０…合成部
２９０…画像出力部

Claims (12)

  1. 画像復号装置であって、
    予測情報及び量子化値を復号して出力するように構成されている復号部と、
    前記復号部によって出力された前記量子化値に対して逆量子化処理を施すことで変換係数を生成して出力するように構成されている逆量子化部と、
    前記逆量子化部によって出力された前記変換係数に対して逆変換処理を施すことで予測残差を生成して出力するように構成されている逆変換部と、
    前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されている合成部と、
    前記逆変換部によって出力された前記予測残差と前記合成部によって出力された前記予測画素とを加算して復号済み画素を取得して出力するように構成されている加算器と、
    前記加算器によって出力された前記復号済み画素を蓄積するように構成されている蓄積部と、
    前記加算器によって出力された前記復号済み画素及び前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されているイントラ予測部と、
    前記蓄積部によって蓄積されている前記復号済み画素及び前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されている動き補償部と、を備え、
    前記合成部は、前記イントラ予測部によって出力された前記予測画素及び前記動き補償部によって出力された前記予測画素に対して重み係数を用いた重み付け平均処理を施すことで前記予測画素を生成するように構成されていることを特徴とする画像復号装置。
  2. 前記合成部は、復号対象ブロックの単位ブロックを分割した複数の小領域の各々において、前記イントラ予測部によって生成された前記予測画素又は/且つ前記動き補償部によって生成された前記予測画素を採用するように構成されていることを特徴とする請求項１に記載の画像復号装置。
  3. 前記合成部は、前記小領域においてイントラ予測が割り当てられている場合、前記小領域の分割形状に応じた予測モードを用いるように構成されていることを特徴とする請求項２に記載の画像復号装置。
  4. 前記合成部は、前記分割形状を構成する直線で分割されている方向に基づいて、前記予測モードを選択するように構成されていることを特徴とする請求項３に記載の画像復号装置。
  5. 前記復号部は、前記小領域の分割の種類に応じて限定された予測モードを適応的に復号するように構成されていることを特徴とする請求項２～４のいずれか一項に記載の画像復号装置。
  6. 前記合成部は、前記予測モードとして、特定のイントラ予測モードを選択肢に含めるように構成されていることを特徴とする請求項３に記載の画像復号装置。
  7. 前記合成部は、前記分割形状を構成する直線で分割されている方向に応じたイントラ予測モードの少なくとも一部を選択肢に含めるように構成されていることを特徴とする請求項４に記載の画像復号装置。
  8. 前記合成部は、復号対象ブロックの単位ブロックの右下に行くほど重み係数を小さくするように構成されていることを特徴とする請求項１に記載の画像復号装置。
  9. 前記合成部は、復号対象ブロックの単位ブロックの近傍の単位ブロックがイントラ予測か否かに基づいて、前記単位ブロックの重み係数を適応的に変更するように構成されていることを特徴とする請求項１に記載の画像復号装置。
  10. 前記合成部は、復号対象ブロックの単位ブロックの近傍の単位ブロックのうちイントラ予測が割り当てられている単位ブロックの個数に比例するように重み係数を決定するように構成されていることを特徴とする請求項１に記載の画像復号装置。
  11. 画像復号方法であって、
    予測情報及び量子化値を復号して出力する工程Ａと、
    前記工程Ａにおいて出力された前記量子化値に対して逆量子化処理を施すことで変換係数を生成して出力する工程Ｂと、
    前記工程Ｂにおいて出力された前記変換係数に対して逆変換処理を施すことで予測残差を生成して出力する工程Ｃと、
    前記工程Ａにおいて出力された前記予測情報に基づいて予測画素を生成して出力する工程Ｄと、
    前記工程Ｃにおいて出力された前記予測残差と前記工程Ｄにおいて出力された前記予測画素とを加算して復号済み画素を取得して出力する工程Ｅと、
    前記工程Ｅにおいて出力された前記復号済み画素を蓄積する工程Ｆと、
    前記工程Ｅにおいて出力された前記復号済み画素及び前記工程Ａにおいて出力された前記予測情報に基づいて予測画素を生成して出力する工程Ｇと、
    前記工程Ｆにおいて蓄積された前記復号済み画素及び前記工程Ａにおいて出力された前記予測情報に基づいて予測画素を生成して出力する工程Ｈと、を備え、
    前記工程Ｄにおいて、前記工程Ｇにおいて出力された前記予測画素及び前記工程Ｈにおいて出力された前記予測画素に対して重み係数を用いた重み付け平均処理を施すことで前記予測画素を生成することを特徴とする画像復号方法。
  12. コンピュータを、画像復号装置として機能させるプログラムであって、
    前記画像復号装置は、
    予測情報及び量子化値を復号して出力するように構成されている復号部と、
    前記復号部によって出力された前記量子化値に対して逆量子化処理を施すことで変換係数を生成して出力するように構成されている逆量子化部と、
    前記逆量子化部によって出力された前記変換係数に対して逆変換処理を施すことで予測残差を生成して出力するように構成されている逆変換部と、
    前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されている合成部と、
    前記逆変換部によって出力された前記予測残差と前記合成部によって出力された前記予測画素とを加算して復号済み画素を取得して出力するように構成されている加算器と、
    前記加算器によって出力された前記復号済み画素を蓄積するように構成されている蓄積部と、
    前記加算器によって出力された前記復号済み画素及び前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されているイントラ予測部と、
    前記蓄積部によって蓄積されている前記復号済み画素及び前記復号部によって出力された前記予測情報に基づいて予測画素を生成して出力するように構成されている動き補償部と、を備え、
    前記合成部は、前記イントラ予測部によって出力された前記予測画素及び前記動き補償部によって出力された前記予測画素に対して重み係数を用いた重み付け平均処理を施すことで前記予測画素を生成するように構成されていることを特徴とするプログラム。
JP2021108098A 2021-06-29 2021-06-29 画像復号装置、画像復号方法及びプログラム Pending JP2023005868A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2021108098A JP2023005868A (ja) 2021-06-29 2021-06-29 画像復号装置、画像復号方法及びプログラム
PCT/JP2022/026103 WO2023277104A1 (ja) 2021-06-29 2022-06-29 画像復号装置、画像復号方法及びプログラム
CN202280045467.0A CN117693935A (zh) 2021-06-29 2022-06-29 图像解码装置、图像解码方法及程序

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021108098A JP2023005868A (ja) 2021-06-29 2021-06-29 画像復号装置、画像復号方法及びプログラム

Publications (1)

Publication Number Publication Date
JP2023005868A true JP2023005868A (ja) 2023-01-18

Family

ID=84691814

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021108098A Pending JP2023005868A (ja) 2021-06-29 2021-06-29 画像復号装置、画像復号方法及びプログラム

Country Status (3)

Country Link
JP (1) JP2023005868A (ja)
CN (1) CN117693935A (ja)
WO (1) WO2023277104A1 (ja)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10630979B2 (en) * 2018-07-16 2020-04-21 Tencent America LLC Reference sample padding and filtering for intra prediction in video compression
JP7361522B2 (ja) * 2019-08-05 2023-10-16 日本放送協会 予測ブロック生成装置、画像符号化装置、画像復号装置、及びプログラム

Also Published As

Publication number Publication date
WO2023277104A1 (ja) 2023-01-05
CN117693935A (zh) 2024-03-12

Similar Documents

Publication Publication Date Title
JP6663520B2 (ja) ビデオ符号化のための簡素化されたイントラ予測
JP6886528B2 (ja) 映像コーディングシステムにおけるイントラ予測による映像のデコーディング方法及び装置
CN110662034B (zh) 自适应性滤波方法和使用该方法的视频编码及解码装置
JP2022514870A (ja) 隣接サンプル減少を伴う線形またはアフィン変換を使用するイントラ予測
JP7325540B2 (ja) ブロックベース予測
WO2012087034A2 (ko) 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
US10349071B2 (en) Motion vector searching apparatus, motion vector searching method, and storage medium storing motion vector searching program
JP2022536181A (ja) イントラ予測を用いた符号化
KR20230117490A (ko) 색차 성분에 관한 화면내 예측 부호화/복호화 방법및 장치
US11451771B2 (en) Moving-image decoder using intra-prediction, moving-image decoding method using intra-prediction, moving-image encoder using intra-prediction, moving-image encoding method using intra-prediction, and computer readable recording medium
WO2023277104A1 (ja) 画像復号装置、画像復号方法及びプログラム
US9491455B2 (en) Picture encoding method, picture decoding method, picture encoding apparatus, picture decoding apparatus, picture encoding program, and picture decoding program
JP2022125265A (ja) 復号装置及びプログラム
JP7167212B2 (ja) 符号化装置、復号装置及びプログラム
CN115426500A (zh) 图像解码方法和图像编码方法
WO2020054060A1 (ja) 動画像符号化方法及び動画像符号化装置
JPWO2015045301A1 (ja) 映像符号化装置、映像符号化方法および映像符号化プログラム
JP2021027463A (ja) イントラ予測装置、画像符号化装置、画像復号装置、及びプログラム
KR20190087329A (ko) 복수의 예측 모드 후보군을 사용하여 화면내 예측을 수행하는 영상 부호화/복호화 방법 및 장치
WO2024004280A1 (ja) 画像復号装置、画像復号方法及びプログラム
JP7444599B2 (ja) イントラ予測装置、画像符号化装置、画像復号装置、及びプログラム
JP6917718B2 (ja) 予測装置、符号化装置、復号装置、及びプログラム
JP5957513B2 (ja) 動画像復号化方法
KR102038818B1 (ko) 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR20130050534A (ko) 하다마드 변환을 이용한 부호화 방법 및 이러한 방법을 사용하는 장치

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221208

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230724