JP7189854B2 - 画像復号装置、画像復号方法及びプログラム - Google Patents

画像復号装置、画像復号方法及びプログラム Download PDF

Info

Publication number
JP7189854B2
JP7189854B2 JP2019170787A JP2019170787A JP7189854B2 JP 7189854 B2 JP7189854 B2 JP 7189854B2 JP 2019170787 A JP2019170787 A JP 2019170787A JP 2019170787 A JP2019170787 A JP 2019170787A JP 7189854 B2 JP7189854 B2 JP 7189854B2
Authority
JP
Japan
Prior art keywords
chrominance
unit
inter
luminance
division information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019170787A
Other languages
English (en)
Other versions
JP2021048531A (ja
Inventor
圭 河村
整 内藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2019170787A priority Critical patent/JP7189854B2/ja
Priority to PCT/JP2020/031561 priority patent/WO2021054037A1/ja
Priority to CN202080057655.6A priority patent/CN114270818B/zh
Publication of JP2021048531A publication Critical patent/JP2021048531A/ja
Application granted granted Critical
Publication of JP7189854B2 publication Critical patent/JP7189854B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、画像復号装置、画像復号方法及びプログラムに関する。
従来、イントラ予測又はインター予測、予測残差信号の変換・量子化、エントロピー符号化を用いた画像符号化方式が提案されている(例えば、非特許文献1参照)。
以下、次世代動画像符号化方式であるVVC(Versatile Video Coding)における符号化ユニットの分割方式及びイントラ予測のうちの色差イントラ予測方式について述べる(非特許文献2参照)。
図8に示すように、両方式における符号化ユニットは、四分木、二分木及び三分木を用いて再帰的に分割されるように構成されている。ここで、輝度成分と色差成分との間で、同一の分割パターンを選択してもよいし(シングルツリー)、異なる分割パターンを選択してもよい(デュアルツリー)。
非特許文献2に示すように、色差イントラ予測方式には、輝度イントラ予測方式と同様の色成分内予測方式の他に、再構成した輝度成分から色差成分を線形予測するCCLM(成分間線形予測:Cross-Component Linear Model)方式がある。
また、非特許文献2には、色差成分を符号化する方式として、2つの色差成分を1つにまとめる結合色差符号化方式がある。
さらに、非特許文献1には、輝度予測残差信号から色差残差信号を予測する成分間残差信号予測方式が開示されている。かかる成分間残差信号予測方式は、逆変換した輝度残差信号に係数を掛けた値を、逆変換した色差残差信号に加算する方式である。
ただし、処理の簡素化を実現するため、非特許文献1では、かかる成分間残差信号予測方式は、色形式が4:4:4である場合にのみ、すなわち、成分間の画素数が同一である場合にのみ有効である。また、かかる成分間残差信号予測方式では、変換ユニットごとに、適用の有無を含む係数の絶対値や係数の符号が、それぞれ送られる。
ITU-T H.265 High Efficiency Video Coding Versatile Video Coding(Draft 6)
しかしながら、次世代動画像符号化方式であるVVCでは、符号化ユニット分割が、最新動画像符号化方式HEVC(High Efficiency Video Coding)よりも拡張されているため、従来技術では、色差変換ユニットごとに、成分間残差信号予測方式の適用の有無を送ることにより、符号化性能が低下してしまうという問題点があった。
具体的には、従来技術では、輝度成分と色差成分とで異なる分割形式が適用されており、成分間残差信号予測方式が適用できない場合等について考慮されていない。
そこで、本発明は、上述の課題に鑑みてなされたものであり、成分間残差信号予測方式の適用において、サイド情報の増加を抑えて符号化性能を改善することができる画像復号装置、画像復号方法及びプログラムを提供することを目的とする。
本発明の第1の特徴は、画像復号装置であって、符号化データを復号して、輝度符号化ユニット分割情報と色差符号化ユニット分割情報とを取得するように構成されているユニット構造復号部と、前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、成分間残差信号予測方式を適用することができるか否かについて判定するように構成されている判定部と、前記判定結果に応じて、前記成分間残差信号予測方式の適用の有無及び係数を復号するように構成されている予測方式係数復号部とを備えることを要旨とする。
本発明の第2の特徴は、画像復号方法であって、符号化データを復号して、輝度符号化ユニット分割情報と色差符号化ユニット分割情報とを取得する工程と、前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、成分間残差信号予測方式を適用することができるか否かについて判定する工程と、前記判定結果に応じて、前記成分間残差信号予測方式の適用の有無及び係数を復号する工程とを有することを要旨とする。
本発明の第3の特徴は、コンピュータを、画像復号装置として機能させるプログラムであって、前記画像復号装置は、符号化データを復号して、輝度符号化ユニット分割情報と色差符号化ユニット分割情報とを取得するように構成されているユニット構造復号部と、前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、成分間残差信号予測方式を適用することができるか否かについて判定するように構成されている判定部と、前記判定結果に応じて、前記成分間残差信号予測方式の適用の有無及び係数を復号するように構成されている予測方式係数復号部とを備えることを要旨とする。
本発明によれば、成分間残差信号予測方式の適用において、サイド情報の増加を抑えて符号化性能を改善することができる画像復号装置、画像復号方法及びプログラムを提供することができる。
一実施形態に係る画像処理システム1の構成の一例を示す図である。 一実施形態に係る画像符号化装置100の機能ブロックの一例を示す図である。 一実施形態に係る画像符号化装置100のエントロピー符号化部104の一部の機能ブロックの一例を示す図である。 一実施形態に係る画像復号装置200の機能ブロックの一例を示す図である。 一実施形態に係る画像復号装置200のエントロピー復号部201の一部の機能ブロックの一例を示す図である。 一実施形態に係る画像復号装置200のエントロピー復号部201の動作の一例を示すフローチャートである。 一実施形態に係る画像復号装置200のエントロピー復号部201の動作の一例を示すシンタックス表である。 従来技術を説明するための図である。
以下、本発明の実施の形態について図面を参照しながら、説明する。なお、以下の実施形態における構成要素は適宜、既存の構成要素などとの置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、以下の実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。
(第1実施形態)
図1は、本発明の第1実施形態に係る画像処理システム1の機能ブロックの一例を示す図である。画像処理システム1は、動画像を符号化して符号化データを生成する画像符号化装置100と、画像符号化装置100により生成された符号化データを復号する画像復号装置200とを備える。画像符号化装置100と画像復号装置200との間では、上述の符号化データが、例えば、伝送路を介して送受信される。
<画像符号化装置100>
図2は、画像符号化装置100の機能ブロックの一例を示す図である。図2に示すように、画像符号化装置100は、インター予測部101と、イントラ予測部102と、変換・量子化部103と、エントロピー符号化部104と、逆変換・逆量子化部105と、減算部106と、加算部107と、インループフィルタ部108と、フレームバッファ109と、ユニット分割部110と、ユニット統合部111とを備える。
ユニット分割部110は、入力画像の画面全体を同一正方形に分割し、更に四分木等により再帰的に分割した画像(分割画像)を出力するように構成されている。
インター予測部101は、ユニット分割部110によって入力された分割画像及びフレームバッファ109から入力されるフィルタ後局所復号画像(後述)を用いて、インター予測を行ってインター予測画像を生成して出力するように構成されている。
イントラ予測部102は、ユニット分割部110によって入力された分割画像、フィルタ前局所復号画像及び図示しない制御部により決定された色差イントラ予測方式を用いて、イントラ予測を行ってイントラ予測画像を生成して出力するように構成されている。
変換・量子化部103は、減算部106から入力される残差信号に対して直交変換処理を行い、かかる直交変換処理により得られる変換係数に対して量子化処理を行い、かかる量子化処理により得られる量子化されたレベル値を出力するように構成されている。
エントロピー符号化部104は、変換・量子化部103から入力される量子化されたレベル値及びサイド情報(図示しない制御部により決定された、画素値の再構成に必要な予測モードや動きベクトル等の関連情報)をエントロピー符号化して符号化データとして出力するように構成されている。
逆変換・逆量子化部105は、変換・量子化部103から入力される量子化されたレベル値に対して逆量子化処理を行い、かかる逆量子化処理により得られた変換係数に対して逆直交変換処理を行い、かかる逆直交変換処理により得られる逆直交変換された残差信号を出力するように構成されている。
減算部106は、ユニット分割部110によって入力された分割画像とイントラ予測画像或いはインター予測画像との差分である残差信号を出力するように構成されている。
加算部107は、逆変換・逆量子化部105から入力される逆直交変換された残差信号とイントラ予測画像或いはインター予測画像とを加算して得られる分割画像を出力するように構成されている。
ユニット統合部111は、加算部107から入力される分割画像を統合することで得られたフィルタ前局所復号画像を出力するように構成されている。
インループフィルタ部108は、ユニット統合部111から入力されるフィルタ前局所復号画像に対して、デブロッキングフィルタ処理等のインループフィルタ処理を適用してフィルタ後局所復号画像を生成して出力するように構成されている。
フレームバッファ109は、フィルタ後局所復号画像を蓄積し、適宜、フィルタ後局所復号画像としてインター予測部101に供給する。
以下、図3を参照して、本実施形態に係る画像符号化装置100のエントロピー符号化部104について説明する。図3は、本実施形態に係る画像符号化装置100のエントロピー符号化部104の一部の機能ブロックの一例を示す図である。
図3に示すように、本実施形態に係る画像符号化装置100のエントロピー符号化部104は、判定部104Aと、予測方式係数符号化部104Bとを備える。
判定部104Aは、輝度符号化ユニット分割情報と色差符号化ユニット分割情報とを入力し、成分間残差信号予測方式が適用できるかどうかについて判定し、かかる判定結果を出力するように構成されている。
予測方式係数符号化部104Bは、かかる判定結果と図示しない制御部により決定された係数(成分間残差信号予測係数)とを入力し、かかる判定結果に基づいて、成分間残差信号予測方式の適用の有無、係数の絶対値及び係数の符号化を符号化して、符号化データを出力するように構成されている。
<画像復号装置200>
図4は、本実施形態に係る画像復号装置200のブロック図である。図3に示すように、本実施形態に係る画像復号装置200は、エントロピー復号部201と、逆変換・逆量子化部202と、インター予測部203と、イントラ予測部204と、加算部205と、インループフィルタ部206と、フレームバッファ207と、ユニット統合部208とを備える。
エントロピー復号部201は、符号化データをエントロピー復号し、量子化されたレベル値や、サイド情報を出力するように構成されている。
逆変換・逆量子化部202は、エントロピー復号部201から入力される量子化されたレベル値に対して逆量子化処理を行い、かかる逆量子化処理により得られた結果に対して逆直交変換処理を行って残差信号として出力するように構成されている。
インター予測部203は、フレームバッファ207から入力されるフィルタ後局所復号画像を用いて、インター予測を行ってインター予測画像を生成して出力するように構成されている。
イントラ予測部204は、加算部205から入力されるフィルタ前局所復号画像を用いて、イントラ予測を行ってイントラ予測画像を生成して出力するように構成されている。ここで、フィルタ前局所復号画像とは、残差信号と予測画像とを合算した信号のことである。
加算部205は、逆変換・逆量子化部202から入力される残差信号と予測画像(インター予測部203から入力されるインター予測画像或いはイントラ予測部204から入力されるイントラ予測画像)とを加算して得られる分割画像を出力するように構成されている。
ここで、予測画像とは、インター予測部203から入力されるインター予測画像及びイントラ予測部204から入力されるイントラ予測画像のうち、エントロピー復号により得られた予測方法により算出された予測画像のことである。
ユニット統合部208は、加算部205から入力される分割画像を統合することで得られたフィルタ前局所復号画像を出力するように構成されている。
インループフィルタ部206は、ユニット統合部208から入力されるフィルタ前局所復号画像に対してデユニットフィルタ処理等のインループフィルタ処理を適用してフィルタ後局所復号画像を生成して出力するように構成されている。
フレームバッファ207は、インループフィルタ206から入力されるフィルタ後局所復号画像を蓄積し、適宜、フィルタ後局所復号画像としてインター予測部203に供給するとともに、復号済み画像として出力するように構成されている。
以下、図5を参照して、本実施形態に係る画像復号装置200のエントロピー復号部201について説明する。図5は、本実施形態に係る画像復号装置200のエントロピー復号部201の一部の機能ブロックの一例を示す図である。
図5に示すように、本実施形態に係る画像復号装置200のエントロピー復号部201は、ユニット構造復号部201Aと、判定部201Bと、予測方式係数復号部201Cとを備える。
ユニット構造復号部201Aは、画像符号化装置100によって出力された符号化データを復号して、輝度符号化ユニット分割情報及び色差符号化ユニット分割情報を含むユニット構造を取得するように構成されている。
判定部201Bは、輝度符号化ユニット分割情報及び色差符号化ユニット分割情報に基づいて、成分間残差信号予測方式を適用することができるか否かについて判定するように構成されている。
予測方式係数復号部201Cは、かかる判定結果と符号化データとを入力し、かかる判定結果に基づいて、成分間残差信号予測方式の適用の有無及び係数(係数の絶対値及び係数の符号)を出力するように構成されている。
以下、図6を参照して、本実施形態に係るエントロピー復号部201の動作の一例について説明する。
図6に示すように、ステップS101において、エントロピー復号部201は、符号化データを復号して、輝度符号化ユニット分割情報及び色差符号化ユニット分割情報を取得する。
ステップS102において、エントロピー復号部201は、輝度符号化ユニット分割情報及び色差符号化ユニット分割情報に基づいて、成分間残差信号予測方式を適用することができるか否かについて判定する。
ステップS103において、エントロピー復号部201は、かかる判定結果に応じて、成分間残差信号予測方式の適用の有無及び係数(係数の絶対値及び係数の符号)を復号する。
本実施形態に係る画像処理システム1によれば、成分間残差信号予測方式の適用において、サイド情報の増加を抑えて符号化性能を改善することができる。
(第2実施形態)
以下、本発明の第2実施形態に係る画像処理システム1について、上述の第1実施形態に係る画像処理システム1との相違点に着目して説明する。
本実施形態において、判定部201Bは、色差変換ユニットの位置及び大きさと、かかる色差変換ユニットに対応する輝度成分における輝度変換ユニットの位置及び大きさとが一致しているか否かについて判定するように構成されている。
ここで、判定部201Bは、両者が一致していると判定した場合、成分間残差信号予測方式を適用することができると判定するように構成されている。
一方、判定部201Bは、両者が一致していないと判定した場合、成分間残差信号予測方式を適用することができないと判定するように構成されている。
換言すると、判定部201Bは、図示しない制御部により決定された輝度符号化ユニット分割情報と色差符号化ユニット分割情報を入力し、色差変換ユニットと、成分間で同一位置かつ同一サイズである輝度変換ユニットが存在する場合に、成分間残差信号予測方式を適用することができると判定するように構成されている。
一方、判定部201Bは、図示しない制御部により決定された輝度符号化ユニット分割情報と色差符号化ユニット分割情報を入力し、色差変換ユニットと、成分間で同一位置かつ同一サイズである輝度変換ユニットが存在しない場合に、成分間残差信号予測方式を適用することができないと判定するように構成されている。
本実施形態に係る画像処理システム2によれば、成分間残差信号予測方式を適用することができるか否かについて判定において、判定条件を簡素化して実装複雑度を低減することができる。
(第3実施形態)
以下、本発明の第3実施形態に係る画像処理システム1について、上述の第1実施形態及び第2実施形態に係る画像処理システム1との相違点に着目して説明する。
本実施形態において、判定部201Bは、図示しない制御部により決定されたツリー種別がシングルツリーである場合に、成分間残差信号予測方式を適用することができると判定するように構成されている。
ここで、輝度変換ユニットの予測残差信号が存在する場合にのみ、成分間残差信号予測方式を適用することができると判定するように構成されていてもよい。
一方、判定部201Bは、図示しない制御部により決定されたツリー種別がデュアルツリーである場合に、成分間残差信号予測方式を適用することができないと判定するように構成されている。
なお、図示しない制御部により決定された予測モードがインター予測である場合に、ツリー種別がシングルツリーであると判定してもよい。
本実施形態に係る画像処理システム3によれば、成分間残差信号予測方式を適用することができるか否かについて判定において、判定条件を簡素化して実装複雑度を低減することができる。
(第4実施形態)
以下、図7を参照して、本発明の第4実施形態に係る画像処理システム1について、上述の第3実施形態に係る画像処理システム1との相違点に着目して説明する。
本実施形態において、判定部201Bは、色差変換ユニットの位置及び大きさと、かかる色差変換ユニットに対応する輝度成分における輝度変換ユニットの位置及び大きさとが一致している場合で、且つ、かかる色差変換ユニットにおいて決定された符号化方式が非結合色差符号化である場合に、成分間残差信号予測方式を適用することができると判定するように構成されていてもよい。
一方、判定部201Bは、色差変換ユニットの位置及び大きさと、かかる色差変換ユニットに対応する輝度成分における輝度変換ユニットの位置及び大きさとが一致している場合で、且つ、かかる色差変換ユニットにおいて決定された符号化方式が結合色差符号化である場合に、成分間残差信号予測方式を適用することができないと判定するように構成されていてもよい。
なお、定部201Bは、色差変換ユニットの位置及び大きさと、かかる色差変換ユニットに対応する輝度成分における輝度変換ユニットの位置及び大きさとが一致していない場合には、かかる色差変換ユニットにおいて決定された符号化方式によらず、成分間残差信号予測方式を適用することができないと判定するように構成されていてもよい。
また、判定部201Bは、図示しない制御部により決定されたツリー種別がシングルツリーである場合で、且つ、色差変換ユニットにおいて決定された符号化方式が非結合色差符号化である場合に、成分間残差信号予測方式を適用することができると判定するように構成されていてもよい。
一方、判定部201Bは、図示しない制御部により決定されたツリー種別がシングルツリーである場合で、且つ、色差変換ユニットにおいて決定された符号化方式が結合色差符号化である場合に、成分間残差信号予測方式を適用することができないと判定するように構成されていてもよい。
なお、判定部201Bは、図示しない制御部により決定されたツリー種別がデュアルツリーである場合には、かかる色差変換ユニットにおいて決定された符号化方式によらず、成分間残差信号予測方式を適用することができないと判定するように構成されていてもよい。
以下、図7に、本実施形態に係る画像復号装置200のエントロピー復号部201の動作の一例を示すシンタックス表を示す。
図7において、「transform_unit(x0,y0,tbWidth,tbHight.treeType,subTuIndex,chType)」は、変換ユニットを示す。
ここで、かかる変換ユニットにおいて、「x0」は、原点からの変換ユニットの水平位置を示し、「y0」は、原点からの変換ユニットの垂直位置を示し、「tbWidth」は、変換ユニットの幅を示し、「tbHight」は、変換ユニットの高さを示し、「treeType」は、ツリー種別(シングルツリー又はデュアルツリー)を示し、「subTuIndex」は、小変換ユニット番号を示し、「chType」は、色成分番号を示す。
また、「sps_joint_cbcr_enabled_flag」は、シーケンスにおける結合色差符号化が適用可能であるかどうかを示し、「CuPredMode[chType][x0][y0]==MODE_INTRA」は、当該変換ユニットに対応する符号化ユニットの予測モードがイントラモードであることを示す。
また、「tu_cbf_cb[x0][y0]」は、当該変換ユニットのCb色差成分の残差信号が存在するかどうかを示し、「tu_cbf_cr[x0][y0]」は、当該変換ユニットのCr色差成分の残差信号が存在するかどうかを示す。
また、「tu_joint_cbcr_residual_flag[x0][y0]」は、当該変換ユニットが結合色差予測方式を適用するかどうかを示す。
また、「ChromaTypeArray==3」は、色形式は4:4:4形式であることを示し、「tu_cbf_luma[x0][y0]」は、当該変換ユニットの輝度成分の残差信号が存在するかどうかを示し、「treeType==SINGLE_TREE」は、ツリー種別がシングルツリーであることを示す。
さらに、「intra_chroma_pred_mode==4」は、色差イントラ予測モードが輝度イントラ予測モードと同一であることを示し、「CuPredMode[chType][x0][y0]==MODE_INTER」は、当該変換ユニットに対応する符号化ユニットの予測モードがインターモードであることを示し、「cross_comp_pred(x0,y0,chType)」は、成分間残差信号予測方式の適用の有無及び係数を符号化することを示す。
本実施形態に係る画像処理システム4によれば、成分間残差信号予測方式の適用において、結合色差符号化方式適用時のサイド情報の増加を抑えて符号化性能を改善することができる。
1…画像処理システム
100…画像符号化装置
101、203…インター予測部
102、204…イントラ予測部
103…変換・量子化部
104…エントロピー符号化部
104A、201B…判定部
104B…予測方式係数符号化部
105、202…逆変換・逆量子化部
106…減算部
107、205…加算部
108、206…インループフィルタ部
109、207…フレームバッファ
110…ユニット分割部
111、208…ユニット統合部
200…画像復号装置
201…エントロピー復号部
201A…ユニット構造復号部
201C…予測方式係数復号部

Claims (4)

  1. 画像復号装置であって、
    符号化データを復号して、輝度符号化ユニット分割情報と色差符号化ユニット分割情報とを取得するように構成されているユニット構造復号部と、
    成分間残差信号予測方式を適用することができるか否かについて判定するように構成されている判定部と、
    前記判定結果に応じて、前記成分間残差信号予測方式の適用の有無及び係数を復号するように構成されている予測方式係数復号部とを備え
    前記判定部は、
    前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、色差変換ユニットの位置及び大きさと前記色差変換ユニットに対応する輝度成分における輝度変換ユニットの位置及び大きさとが一致していると判定する場合で、且つ、前記色差変換ユニットにおいて決定された符号化方式が非結合色差符号化であると判定する場合に、前記成分間残差信号予測方式を適用することができると判定するように構成されており、
    前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、前記色差変換ユニットの位置及び大きさと前記色差変換ユニットに対応する前記輝度成分における前記輝度変換ユニットの位置及び大きさとが一致していると判定する場合で、且つ、前記色差変換ユニットにおいて決定された符号化方式が結合色差符号化であると判定する場合に、前記成分間残差信号予測方式を適用することができないと判定するように構成されていることを特徴とする画像復号装置。
  2. 画像復号装置であって、
    符号化データを復号して、輝度符号化ユニット分割情報と色差符号化ユニット分割情報とを取得するように構成されているユニット構造復号部と、
    成分間残差信号予測方式を適用することができるか否かについて判定するように構成されている判定部と、
    前記判定結果に応じて、前記成分間残差信号予測方式の適用の有無及び係数を復号するように構成されている予測方式係数復号部とを備え、
    前記判定部は、
    前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、ツリー種別がシングルツリーであると判定する場合で、且つ、色差変換ユニットにおいて決定された符号化方式が非結合色差符号化であると判定する場合に、前記成分間残差信号予測方式を適用することができると判定するように構成されており、
    前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、前記ツリー種別がシングルツリーであると判定する場合で、且つ、前記色差変換ユニットにおいて決定された符号化方式が結合色差符号化であると判定する場合に、前記成分間残差信号予測方式を適用することができないと判定するように構成されていることを特徴とする画像復号装置。
  3. 符号化データを復号して、輝度符号化ユニット分割情報と色差符号化ユニット分割情報とを取得する工程と、
    成分間残差信号予測方式を適用することができるか否かについて判定する工程と、
    前記判定結果に応じて、前記成分間残差信号予測方式の適用の有無及び係数を復号する工程とを有し、
    前記工程Bにおいて、
    前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、色差変換ユニットの位置及び大きさと前記色差変換ユニットに対応する輝度成分における輝度変換ユニットの位置及び大きさとが一致していると判定する場合で、且つ、前記色差変換ユニットにおいて決定された符号化方式が非結合色差符号化であると判定する場合に、前記成分間残差信号予測方式を適用することができると判定し、
    前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、前記色差変換ユニットの位置及び大きさと前記色差変換ユニットに対応する前記輝度成分における前記輝度変換ユニットの位置及び大きさとが一致していると判定する場合で、且つ、前記色差変換ユニットにおいて決定された符号化方式が結合色差符号化であると判定する場合に、前記成分間残差信号予測方式を適用することができないと判定することを特徴とする画像復号方法。
  4. コンピュータを、画像復号装置として機能させるプログラムであって、
    前記画像復号装置は、
    符号化データを復号して、輝度符号化ユニット分割情報と色差符号化ユニット分割情報とを取得するように構成されているユニット構造復号部と、
    成分間残差信号予測方式を適用することができるか否かについて判定するように構成されている判定部と、
    前記判定結果に応じて、前記成分間残差信号予測方式の適用の有無及び係数を復号するように構成されている予測方式係数復号部とを備え
    前記判定部は、
    前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、色差変換ユニットの位置及び大きさと前記色差変換ユニットに対応する輝度成分における輝度変換ユニットの位置及び大きさとが一致していると判定する場合で、且つ、前記色差変換ユニットにおいて決定された符号化方式が非結合色差符号化であると判定する場合に、前記成分間残差信号予測方式を適用することができると判定するように構成されており、
    前記輝度符号化ユニット分割情報及び前記色差符号化ユニット分割情報に基づいて、前記色差変換ユニットの位置及び大きさと前記色差変換ユニットに対応する前記輝度成分における前記輝度変換ユニットの位置及び大きさとが一致していると判定する場合で、且つ、前記色差変換ユニットにおいて決定された符号化方式が結合色差符号化であると判定する場合に、前記成分間残差信号予測方式を適用することができないと判定するように構成されていることを特徴とするプログラム。
JP2019170787A 2019-09-19 2019-09-19 画像復号装置、画像復号方法及びプログラム Active JP7189854B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019170787A JP7189854B2 (ja) 2019-09-19 2019-09-19 画像復号装置、画像復号方法及びプログラム
PCT/JP2020/031561 WO2021054037A1 (ja) 2019-09-19 2020-08-21 画像復号装置、画像復号方法及びプログラム
CN202080057655.6A CN114270818B (zh) 2019-09-19 2020-08-21 图像解码装置、图像解码方法和程序

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019170787A JP7189854B2 (ja) 2019-09-19 2019-09-19 画像復号装置、画像復号方法及びプログラム

Publications (2)

Publication Number Publication Date
JP2021048531A JP2021048531A (ja) 2021-03-25
JP7189854B2 true JP7189854B2 (ja) 2022-12-14

Family

ID=74878817

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019170787A Active JP7189854B2 (ja) 2019-09-19 2019-09-19 画像復号装置、画像復号方法及びプログラム

Country Status (3)

Country Link
JP (1) JP7189854B2 (ja)
CN (1) CN114270818B (ja)
WO (1) WO2021054037A1 (ja)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019069950A1 (ja) 2017-10-06 2019-04-11 シャープ株式会社 画像符号化装置及び画像復号装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8041131B2 (en) * 2007-10-02 2011-10-18 Cisco Technology, Inc. Variable length coding of coefficient clusters for image and video compression
KR20110069740A (ko) * 2009-12-17 2011-06-23 에스케이 텔레콤주식회사 영상 부호화/복호화 방법 및 장치
US10148974B2 (en) * 2011-03-10 2018-12-04 Sharp Kabushiki Kaisha Image decoding device, image encoding device, and data structure of encoded data
GB2503875B (en) * 2012-06-29 2015-06-10 Canon Kk Method and device for encoding or decoding an image
WO2014050971A1 (ja) * 2012-09-28 2014-04-03 日本電信電話株式会社 イントラ予測符号化方法、イントラ予測復号方法、イントラ予測符号化装置、イントラ予測復号装置、それらのプログラム並びにプログラムを記録した記録媒体
ES2671972T3 (es) * 2013-01-07 2018-06-11 Nec Corporation Señalización de división de unidad de codificación para bloques codificados PCM
WO2015011752A1 (ja) * 2013-07-22 2015-01-29 ルネサスエレクトロニクス株式会社 動画像符号化装置およびその動作方法
JP2015050738A (ja) * 2013-09-04 2015-03-16 ソニー株式会社 復号装置および復号方法、並びに、符号化装置および符号化方法
US10397607B2 (en) * 2013-11-01 2019-08-27 Qualcomm Incorporated Color residual prediction for video coding
US11368681B2 (en) * 2016-07-18 2022-06-21 Electronics And Telecommunications Research Institute Image encoding/decoding method and device, and recording medium in which bitstream is stored
US10638126B2 (en) * 2017-05-05 2020-04-28 Qualcomm Incorporated Intra reference filter for video coding
KR20190083959A (ko) * 2018-01-05 2019-07-15 에스케이텔레콤 주식회사 크로마 블록의 복원 방법 및 이를 이용한 영상 복호화 장치
KR101997604B1 (ko) * 2019-01-22 2019-07-08 에스케이 텔레콤주식회사 영상 부호화/복호화 방법 및 장치
JP6743225B2 (ja) * 2019-03-20 2020-08-19 キヤノン株式会社 画像復号装置、画像復号方法及びプログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019069950A1 (ja) 2017-10-06 2019-04-11 シャープ株式会社 画像符号化装置及び画像復号装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
HELMRICH, Christian et al.,CE7-related: Alternative configuration of CE7-2.2 joint chroma residual coding,Joint Video Experts Team (JVET),2019年07月02日,[JVET-O0935-v1] (version 1)

Also Published As

Publication number Publication date
WO2021054037A1 (ja) 2021-03-25
CN114270818A (zh) 2022-04-01
CN114270818B (zh) 2024-09-27
JP2021048531A (ja) 2021-03-25

Similar Documents

Publication Publication Date Title
KR101894971B1 (ko) 색차 성분 양자화 매개 변수 결정 방법 및 이러한 방법을 사용하는 장치
WO2016197314A1 (en) Robust encoding/decoding of escape-coded pixels in palette mode
WO2015008417A1 (ja) 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム
US11405650B2 (en) Method and apparatus of transform coefficient coding
CN114710977A (zh) 用于视频编解码的跨分量自适应环路滤波器的方法及其装置
US20160088305A1 (en) Method and apparatus for processing video signal
US20240089439A1 (en) Image decoding device, method, and non-transitory computer-readable storage medium
JP7399928B2 (ja) 画像復号装置、画像復号方法及びプログラム
US20240297990A1 (en) Image encoding apparatus, image encoding method, image decoding apparatus, image decoding method, and non-transitory computer-readable storage medium
JP7189854B2 (ja) 画像復号装置、画像復号方法及びプログラム
WO2015151513A1 (ja) 映像符号化装置、方法及びプログラム、並びに映像復号装置、方法及びプログラム
JP7502523B2 (ja) 画像復号装置、画像復号方法及びプログラム
JP7315509B2 (ja) 画像復号装置、画像復号方法及びプログラム
WO2021251398A1 (ja) デブロッキングフィルタ装置、復号装置、及びプログラム
KR20150145753A (ko) 화면 내 블록 복사 기반의 동영상 부호화 및 복호화 방법 및 장치

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210407

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210702

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220817

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221202

R150 Certificate of patent or registration of utility model

Ref document number: 7189854

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150