JP7277354B2 - 画像復号装置、画像復号方法及びプログラム - Google Patents

画像復号装置、画像復号方法及びプログラム Download PDF

Info

Publication number
JP7277354B2
JP7277354B2 JP2019237290A JP2019237290A JP7277354B2 JP 7277354 B2 JP7277354 B2 JP 7277354B2 JP 2019237290 A JP2019237290 A JP 2019237290A JP 2019237290 A JP2019237290 A JP 2019237290A JP 7277354 B2 JP7277354 B2 JP 7277354B2
Authority
JP
Japan
Prior art keywords
offset
chrominance
unit
chroma
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019237290A
Other languages
English (en)
Other versions
JP2021106345A (ja
Inventor
圭 河村
整 内藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2019237290A priority Critical patent/JP7277354B2/ja
Priority to CN202080058154.XA priority patent/CN114270843A/zh
Priority to PCT/JP2020/043745 priority patent/WO2021131463A1/ja
Priority to EP20907590.2A priority patent/EP4002849A4/en
Publication of JP2021106345A publication Critical patent/JP2021106345A/ja
Priority to US17/675,500 priority patent/US20220174302A1/en
Priority to JP2023076470A priority patent/JP2023087089A/ja
Application granted granted Critical
Publication of JP7277354B2 publication Critical patent/JP7277354B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Description

本発明は、画像復号装置、画像復号方法及びプログラムに関する。
従来、イントラ予測又はインター予測、予測残差信号の変換・量子化、エントロピー符号化を用いた画像符号化方式が提案されている（例えば、非特許文献１参照）。
以下、次世代動画像符号化方式であるＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ） Ｄｒａｆｔ ７における符号化ユニットの分割方式及びイントラ予測のうちの色差イントラ予測方式について述べる（非特許文献２参照）。
図８に示すように、両方式における符号化ユニットは、四分木、二分木及び三分木を用いて再帰的に分割されるように構成されている。ここで、輝度成分と色差成分との間で、同一の分割パターンを選択してもよいし（シングルツリー）、異なる分割パターンを選択してもよい（デュアルツリー）。
非特許文献２には、色差ブロックのＱＰ（量子化パラメータ）値の制御方法が開示されている。かかる色差ブロックのＱＰ値は、対応する輝度ブロックのＱＰ値を対応表により変換し、ピクチャやスライスや符号化ブロックに代表される上位の粒度で指定されたオフセットを加算することによって導出される。また、導出された色差ブロックのＱＰ値は、デブロッキングフィルタの決定に利用される。
ＩＴＵ-Ｔ Ｈ.２６５ Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ（Ｄｒａｆｔ ７）
しかしながら、次世代動画像符号化方式であるＶＶＣ Ｄｒａｆｔ ７では、色差ブロックにおけるデブロッキングフィルタ処理には、色差ブロックのＱＰ値が使われており、予測残差信号が存在しない場合に、かかるＱＰ値が存在しないという問題点があった。
そこで、本発明は、上述の課題に鑑みてなされたものであり、色差ブロックにおけるデブロッキングフィルタの決定において、係数が符号化されていないブロックにおけるデブロッキングフィルタ性能を改善することができる画像復号装置、画像復号方法及びプログラムを提供することを目的とする。
また、本発明は、隣接する色差ブロックにおけるデブロッキングフィルタ決定において一貫性が保持されるため、係数が符号化されていないブロック及び復号順序で直前のブロックにおけるデブロッキングフィルタ性能を改善することができる画像復号装置、画像復号方法及びプログラムを提供することを目的とする。
また、本発明は、並列処理単位の異なる色差ブロックにおけるデブロッキングフィルタ決定において並列性が保持されるため、デブロッキングフィルタの並列処理機能性を改善することができる画像復号装置、画像復号方法及びプログラムを提供することを目的とする。
本発明の第１の特徴は、符号化データを復号する画像復号装置であって、前記符号化データの復号結果に基づいて、色差ＱＰオフセットを初期化するように構成されている色差ＱＰオフセット初期化部と、前記符号化データの復号結果に基づいて、色差ＱＰオフセットをセットして導出するように構成されている色差ＱＰオフセット導出部と、前記色差ＱＰオフセット導出部によって導出された前記色差ＱＰオフセットに基づいて、色差ＱＰを導出するように構成されている色差ＱＰ導出部とを具備することを要旨とする。
本発明の第２の特徴は、画像復号方法であって、符号化データの復号結果に基づいて、色差ＱＰオフセットを初期化する工程と、前記符号化データの復号結果に基づいて、色差ＱＰオフセットをセットして導出する工程と、導出された前記色差ＱＰオフセットに基づいて、色差ＱＰを導出する工程とを有することを要旨とする。
本発明の第３の特徴は、コンピュータを、符号化データを復号するように構成されている画像復号装置として機能させるプログラムであって、前記画像復号装置は、前記符号化データの復号結果に基づいて、色差ＱＰオフセットを初期化するように構成されている色差ＱＰオフセット初期化部と、前記符号化データの復号結果に基づいて、色差ＱＰオフセットをセットして導出するように構成されている色差ＱＰオフセット導出部と、前記色差ＱＰオフセット導出部によって導出された前記色差ＱＰオフセットに基づいて、色差ＱＰを導出するように構成されている色差ＱＰ導出部とを具備することを要旨とする。
本発明によれば、色差ブロックにおけるデブロッキングフィルタの決定において、係数が符号化されていないブロックにおけるデブロッキングフィルタ性能を改善することができる画像復号装置、画像復号方法及びプログラムを提供することができる。
また、本発明によれば、隣接する色差ブロックにおけるデブロッキングフィルタ決定において一貫性が保持されるため、係数が符号化されていないブロック及び復号順序で直前のブロックにおけるデブロッキングフィルタ性能を改善することができる画像復号装置、画像復号方法及びプログラムを提供することができる。
また、本発明によれば、並列処理単位の異なる色差ブロックにおけるデブロッキングフィルタ決定において並列性が保持されるため、デブロッキングフィルタの並列処理機能性を改善することができる画像復号装置、画像復号方法及びプログラムを提供することができる。
一実施形態に係る画像処理システム１の構成の一例を示す図である。 一実施形態に係る画像符号化装置１００の機能ブロックの一例を示す図である。 一実施形態に係る画像符号化装置１００のエントロピー符号化部１０４及び画像復号装置２００のエントロピー復号部２０１の一部の機能ブロックの一例を示す図である。 一実施形態に係る画像符号化装置１００のエントロピー符号化部１０４の色差ＱＰオフセット初期化部１０４Ａにおける処理について表すシンタックスの一例を示す図である。 一実施形態に係る画像復号装置２００の機能ブロックの一例を示す図である。 一実施形態に係る画像復号装置２００のエントロピー復号部２０１の動作の一例を示すフローチャートである。 一実施形態に係る画像符号化装置１００のエントロピー符号化部１０４及び画像復号装置２００のエントロピー復号部２０１の一部の機能ブロックの一例を示す図である。 従来技術を説明するための図である。
以下、本発明の実施の形態について図面を参照しながら、説明する。なお、以下の実施形態における構成要素は適宜、既存の構成要素などとの置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、以下の実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。
（第１実施形態）
図１は、本発明の第１実施形態に係る画像処理システム１の機能ブロックの一例を示す図である。画像処理システム１は、動画像を符号化して符号化データを生成する画像符号化装置１００と、画像符号化装置１００により生成された符号化データを復号する画像復号装置２００とを備える。画像符号化装置１００と画像復号装置２００との間では、上述の符号化データが、例えば、伝送路を介して送受信される。
＜画像符号化装置１００＞
図２は、画像符号化装置１００の機能ブロックの一例を示す図である。図２に示すように、画像符号化装置１００は、インター予測部１０１と、イントラ予測部１０２と、変換・量子化部１０３と、エントロピー符号化部１０４と、逆変換・逆量子化部１０５と、減算部１０６と、加算部１０７と、インループフィルタ部１０８と、フレームバッファ１０９と、ブロック分割部１１０と、ブロック統合部１１１とを備える。
ブロック分割部１１０は、入力画像の画面全体を同一正方形に分割し、更に四分木等により再帰的に分割した画像（分割画像）を出力するように構成されている。
インター予測部１０１は、ブロック分割部１１０によって入力された分割画像及びフレームバッファ１０９から入力されるフィルタ後局所復号画像を用いて、インター予測を行ってインター予測画像を生成して出力するように構成されている。
イントラ予測部１０２は、ブロック分割部１１０によって入力された分割画像及び後述のフィルタ前局所復号画像を用いて、イントラ予測を行ってイントラ予測画像を生成して出力するように構成されている。
変換・量子化部１０３は、減算部１０６から入力される残差信号に対して直交変換処理を行い、かかる直交変換処理により得られる変換係数に対して量子化処理を行い、かかる量子化処理により得られる量子化されたレベル値を出力するように構成されている。
エントロピー符号化部１０４は、変換・量子化部１０３から入力される量子化されたレベル値、変換ユニットサイズ及び変換サイズをエントロピー符号化して符号化データとして出力するように構成されている。
逆変換・逆量子化部１０５は、変換・量子化部１０３から入力される量子化されたレベル値に対して逆量子化処理を行い、かかる逆量子化処理により得られた変換係数に対して逆直交変換処理を行い、かかる逆直交変換処理により得られる逆直交変換された残差信号を出力するように構成されている。
減算部１０６は、ブロック分割部１１０によって入力された分割画像とイントラ予測画像或いはインター予測画像との差分である残差信号を出力するように構成されている。
加算部１０７は、逆変換・逆量子化部１０５から入力される逆直交変換された残差信号とイントラ予測画像或いはインター予測画像とを加算して得られる分割画像を出力するように構成されている。
ブロック統合部１１１は、加算部１０７から入力される分割画像を統合することで得られたフィルタ前局所復号画像を出力するように構成されている。
インループフィルタ部１０８は、ブロック統合部１１１から入力されるフィルタ前局所復号画像に対して、デブロッキングフィルタ処理等のインループフィルタ処理を適用してフィルタ後局所復号画像を生成して出力するように構成されている。ここで、フィルタ前局所復号画像は、逆直交変換された残差信号とイントラ予測画像或いはインター予測画像とを加算して得られる信号である。
フレームバッファ１０９は、フィルタ後局所復号画像を蓄積し、適宜、フィルタ後局所復号画像としてインター予測部１０１に供給する。
以下、図３を参照して、本実施形態に係る画像符号化装置１００のエントロピー符号化部１０４について説明する。図３は、本実施形態に係る画像符号化装置１００のエントロピー符号化部１０４の一部の機能ブロックの一例を示す図である。
図３に示すように、本実施形態に係る画像符号化装置１００のエントロピー符号化部１０４は、色差ＱＰオフセット初期化部１０４Ａと、色差ＱＰオフセット導出部１０４Ｂと、色差ＱＰ導出部１０４Ｃとを備える。
色差ＱＰオフセット初期化部１０４Ａは、オフセット値の有効フラグ及び色差ＱＰ分割粒度を入力とするように構成されている。
ここで、色差ＱＰオフセット初期化部１０４Ａは、入力されたオフセット値の有効フラグ及び色差ＱＰ分割粒度に基づいて、色差ＱＰオフセットを初期化するように構成されている。
具体的には、色差ＱＰオフセット初期化部１０４Ａは、オフセット値の有効フラグが有効であり且つ色差ＱＰ分割粒度が所定値以下である場合には、色差ＱＰオフセットをリセット（「０」に設定）して出力するように構成されている。
一方、色差ＱＰオフセット初期化部１０４Ａは、オフセット値の有効フラグが有効でない場合或いは色差ＱＰ分割粒度が所定値以下でない場合には、現状の色差ＱＰオフセットを維持して出力するように構成されている。
図４に、色差ＱＰオフセット初期化部１０４Ａにおける処理について表すシンタックスを示す。
ここで、「ｃｕ_ｃｈｒｏｍａ_ｑｐ_ｏｆｆｓｅｔ_ｅｎａｂｌｅｄ_ｆｌａｇ」は、上述のオフセット値の有効フラグを示し、「ｑｇＯｎＣ」は、色差ブロックの量子化の制御単位の有効フラグを示し、「ｃｂＳｕｂｄｉｖ」は、上述の色差ＱＰ分割粒度を示し、「ＣｕＣｈｒｏｍａＱｐＯｆｆｓｅｔＳｕｂｄｉｖ」は、上述の所定値を示す。
また、「ＩｓＣｕＣｈｒｏｍａＱｐＯｆｆｓｅｔＣｏｄｅｄ」は、符号化ユニットについて色差ＱＰオフセット値の符号化有無フラグを示し、「ＣｕＣｈｒｏｍａＱｐＯｆｆｓｅｔＩｄｘ」は、上述の色差ＱＰオフセットを示す。
なお、ＣｕＣｈｒｏｍａＱｐＯｆｆｓｅｔＩｄｘの代わりに、ＣｕＱｐＯｆｆｓｅｔＣｂ、ＣｕＱｐＯｆｆｓｅｔＣｒ、ＣｕＱｐＯｆｆｓｅｔＣｂＣｒ等の色差符号化方式に対応するシンタックスを用いてもよい。
色差ＱＰオフセット導出部１０４Ｂは、図示しない制御部によって導出された色差ＱＰオフセットフラグ及び色差ＱＰオフセットインデックス、及び、色差ＱＰオフセット初期化部１０４Ａによって初期化された色差ＱＰオフセットを入力とするように構成されている。
ここで、色差ＱＰオフセット導出部１０４Ｂは、入力された色差ＱＰオフセットフラグ、色差ＱＰオフセットインデックス及び色差ＱＰオフセットに基づいて、色差ＱＰオフセットをセットして導出するように構成されている。
具体的には、色差ＱＰオフセット導出部１０４Ｂは、色差ＱＰオフセットフラグが無効であれば、導出後の色差ＱＰオフセットとして、ゼロ値を出力するように構成されている。
一方、色差ＱＰオフセット導出部１０４Ｂは、色差ＱＰオフセットフラグが有効であれば、導出後の色差ＱＰオフセットとして、色差ＱＰオフセットインデックスを色差ＱＰオフセットリストの適用により変換した値を出力するように構成されている。
以下の（式１）は、色差ＱＰオフセットフラグが有効である場合の色差ＱＰオフセット導出部１０４Ｂにおける処理の一例について示す。
ＣｕＱｐＯｆｆｓｅｔＣｘ＝ｃｘ_ｑｐ_ｏｆｆｓｅｔ_ｌｉｓｔ［ＣｕＣｈｒｏｍａＱｐＯｆｆｓｅｔＩｄｘ］ … （式１）
なお、式中のＣｘは、Ｃｂ、Ｃｒ及びＣｂＣｒとして個別に定義されてもよい。
ここで、「ｃｘ_ｑｐ_ｏｆｆｓｅｔ_ｌｉｓｔ［］」は、色差ＱＰオフセットリストを示す。
色差ＱＰ導出部１０４Ｃは、輝度ＱＰ及び色差ＱＰオフセットを入力とするように構成されている。
また、色差ＱＰ導出部１０４Ｃは、入力された輝度ＱＰ及び色差ＱＰオフセットに基づいて、色差ＱＰを導出して出力するように構成されている。
具体的には、色差ＱＰ導出部１０４Ｃは、輝度ＱＰを変換表の適用により変換した値に色差ＱＰオフセット加算して、色差ＱＰを導出するように構成されている。
例えば、以下の（式２）～（式４）は、色差ＱＰ導出部１０４Ｃにおける処理の一例について示す。
ｑＰＣｈｒｏｍａ＝Ｃｌｉｐ３（－ＱｐＢｄＯｆｆｓｅｔ，６３，Ｑｐｙ） … （式２）
ｑＰＣｘ＝ＣｈｒｏｍａＱｐＴａｂｌｅ［ｉ］［ｑＰＣｈｒｏｍａ］ … （式３）
Ｑｐ’ｃｘ＝Ｃｌｉｐ３（－ＱｐＢｄＯｆｆｓｅｔ，６３，ＱｐＣｘ＋ｐｐｓ_ｃｘ_ｑｐ_ｏｆｆｓｅｔ＋ｓｌｉｃｅ_ｃｘ_ｑｐ_ｏｆｆｓｅｔ＋ＣｕＱｐＯｆｆｓｅｔＣｘ）＋ＱｐＢｄＯｆｆｓｅｔ … （式４）
なお、式中のＣｘは、Ｃｂ、Ｃｒ及びＣｂＣｒとして個別に定義されてもよい。
ここで、「ＱｐＢｄＯｆｆｓｅｔ」は、量子化パラメータレンジのオフセットを示し、「Ｑｐｙ」は、量子化パラメータレンジのオフセットを適用前の輝度ＱＰを示し、「ＣｈｒｏｍａＱｐＴａｂｌｅ」は、色差符号化方式に応じた輝度ＱＰから色差量子化パラメータへの変換表を示し、「ｉ」は、色差符号化方式の種別を示し、「ｐｐｓ_ｃｘ_ｑｐ_ｏｆｆｓｅｔ」は、ピクチャごとの輝度ＱＰから色差量子化パラメータへのオフセットを示し、「ｓｌｉｃｅ_ｃｘ_ｑｐ_ｏｆｆｓｅｔ」は、スライスごとのｐｐｓ_ｃｘ_ｑｐ_ｏｆｆｓｅｔへの加算値を示す。
＜画像復号装置２００＞
図４は、本実施形態に係る画像復号装置２００のブロック図である。図３に示すように、本実施形態に係る画像復号装置２００は、エントロピー復号部２０１と、逆変換・逆量子化部２０２と、インター予測部２０３と、イントラ予測部２０４と、加算部２０５と、インループフィルタ部２０６と、フレームバッファ２０７と、ブロック統合部２０８とを備える。
エントロピー復号部２０１は、符号化データをエントロピー復号し、量子化されたレベル値や、画像符号化装置１００で生成された動き補償方式等を出力するように構成されている。
逆変換・逆量子化部２０２は、エントロピー復号部２０１から入力される量子化されたレベル値に対して逆量子化処理を行い、かかる逆量子化処理により得られた結果に対して逆直交変換処理を行って残差信号として出力するように構成されている。
インター予測部２０３は、フレームバッファ２０７から入力されるフィルタ後局所復号画像を用いて、インター予測を行ってインター予測画像を生成して出力するように構成されている。
イントラ予測部２０４は、加算部２０５から入力されるフィルタ前局所復号画像を用いて、イントラ予測を行ってイントラ予測画像を生成して出力するように構成されている。
加算部２０５は、逆変換・逆量子化部２０２から入力される残差信号と予測画像（インター予測部２０３から入力されるインター予測画像或いはイントラ予測部２０４から入力されるイントラ予測画像）とを加算して得られる分割画像を出力するように構成されている。
ここで、予測画像とは、インター予測部２０３から入力されるインター予測画像及びイントラ予測部２０４から入力されるイントラ予測画像のうち、エントロピー復号により得られた予測方法により算出された予測画像のことである。
ブロック統合部２０８は、加算部２０５から入力される分割画像を統合することで得られたフィルタ前局所復号画像を出力するように構成されている。
インループフィルタ部２０６は、ブロック統合部２０８から入力されるフィルタ前局所復号画像に対してデユニットフィルタ処理等のインループフィルタ処理を適用してフィルタ後局所復号画像を生成して出力するように構成されている。
フレームバッファ２０７は、インループフィルタ２０６から入力されるフィルタ後局所復号画像を蓄積し、適宜、フィルタ後局所復号画像としてインター予測部２０３に供給するとともに、復号済み画像として出力するように構成されている。
以下、図３を参照して、本実施形態に係る画像復号装置２００のエントロピー復号部２０１について説明する。
具体的には、エントロピー復号部２０１は、図３に示す画像符号化装置１００のエントロピー符号化部１０４と同様に、色差ＱＰオフセット初期化部１０４Ａと、色差ＱＰオフセット導出部１０４Ｂと、色差ＱＰ導出部１０４Ｃとを備える。
ここで、色差ＱＰオフセット初期化部１０４Ａは、符号化データの復号結果に基づいて、色差ＱＰオフセットを初期化するように構成されている。
以下、図５を参照して、本実施形態に係るエントロピー復号部２０１の動作の一例について説明する。
図６に示すように、ステップＳ１０１において、エントロピー復号部２０１は、画像符号化装置１００から送信された符号化データの復号結果に基づいて、色差ＱＰオフセットを初期化する。
具体的には、エントロピー復号部２０１は、入力されたオフセット値の有効フラグ及び色差ＱＰ分割粒度に基づいて、色差ＱＰオフセットを初期化するように構成されている。
ステップＳ１０２において、エントロピー復号部２０１は、符号化データの復号結果に基づいて、色差ＱＰオフセットをセットして導出する。
具体的には、エントロピー復号部２０１は、符号化データの復号結果である色差ＱＰオフセットフラグ及び色差ＱＰオフセットインデックス、及び、初期化した色差ＱＰオフセットに基づいて、色差ＱＰオフセットをセットして導出する
ステップＳ１０３において、エントロピー復号部２０１は、導出した色差ＱＰオフセットに基づいて、色差ＱＰを導出する。
具体的には、エントロピー復号部２０１は、図示しない輝度ＱＰ及び導出した色差ＱＰオフセットに基づいて、色差ＱＰを導出して出力する
本実施形態に係る画像処理システム１によれば、色差ブロックにおけるデブロッキングフィルタの決定において、係数が符号化されていないブロックにおけるデブロッキングフィルタ性能を改善することができる。
具体的には、デブロッキングフィルタの決定には、ＱＰ値が必要であるが、ＶＶＣ Ｄｒａｆｔ ７では、係数のないブロックのＱＰオフセットが定義されていない場合があってＱＰ値が不定となり、デブロッキングフィルタの決定ができない場合がある。或いは、ＶＶＣ Ｄｒａｆｔ ７において、係数のないブロックのＱＰオフセットが定義されていない場合に、適当な値とみなしてＱＰ値を導出すると、デブロッキングフィルタの決定が不正確になり、性能が低下するという結果になる。
したがって、本実施形態に係る画像処理システム１により、総じてデブロッキングの決定が改善され、結果として性能を改善することができる。
（第２実施形態）
以下、本発明の第２実施形態に係る画像処理システム１について、上述の第１実施形態に係る画像処理システム１との相違点に着目して説明する。
本実施形態において、色差ＱＰオフセット初期化部１０４Ａは、上述のオフセット値の有効フラグが有効であり且つ色差ＱＰ分割粒度が所定値以下である場合、色差ＱＰオフセットの初期化において、復号順序で直前の色差ブロックで設定された色差ＱＰオフセットにセットするように構成されている。
本実施形態に係る画像処理システム２によれば、色差ブロックにおけるデブロッキングフィルタの決定において、係数が符号化されていないブロック及び復号順序で直前のブロックにおけるデブロッキングフィルタ性能を改善することができる。
（第３実施形態）
以下、図７を参照して、本発明の第３実施形態に係る画像処理システム１について、上述の第１実施形態に係る画像処理システム１との相違点に着目して説明する。
図７に示すように、本実施形態において、画像符号化装置１００のエントロピー符号化部１０４及び画像復号装置２００のエントロピー復号部２０１は、図３に示す構成に加えて、ＣＴＵレベル色差ＱＰ初期化部１０４Ｄを備えている。
ＣＴＵレベル色差ＱＰ初期化部１０４Ｄ及び色差ＱＰオフセット初期化部１０４Ａは、色差ＱＰオフセットの初期化を行う粒度が異なる。
ＣＴＵレベル色差ＱＰ初期化部１０４Ｄは、ＣＴＵ（すなわち、再帰的分割されない符号化単位）ごとに、色差ＱＰオフセットの初期化を行うように構成されている。
具体的には、ＣＴＵレベル色差ＱＰ初期化部１０４Ｄは、ＣＴＵごとの初期化において、ＣＴＵごとに、入力によらず色差ＱＰオフセットをリセットして出力するように構成されている。
ここで、ＣＴＵレベルは、再帰的な分割の始点となるユニットであってもよい。
なお、ＣＴＵレベル色差ＱＰ初期化部１０４Ｄは、ＣＴＵごとではなく、ＣＴＵラインごと、Ｔｉｔｌｅごと、Ｓｌｉｃｅごと或いはピクチャごとに、色差ＱＰオフセットを初期化するように構成されていてもよい。
ＣＴＵレベル色差ＱＰ初期化部１０４Ｄは、ＣＴＵラインごとに、色差ＱＰオフセットを初期化する場合、エントロピー符号化同期有効化フラグ（ｅｎｔｒｏｐｙ_ｃｏｄｉｎｇ_ｓｙｎｃ_ｆｌａｇ）と関連付けてもよい。
本実施形態に係る画像処理システム３によれば、並列処理単位の異なる色差ブロックにおけるデブロッキングフィルタ決定において、デブロッキングフィルタの並列処理機能性を改善することができる。
上述の画像符号化装置１００及び画像復号装置２００は、コンピュータに各機能（各工程）を実行させるプログラムであって実現されていてもよい。
なお、上述の各実施形態では、本発明を画像符号化装置１００及び画像復号装置２００への適用を例にして説明したが、本発明は、これのみに限定されるものではなく、画像符号化装置１００及び画像復号装置２００の各機能を備えた画像符号化システム及び画像復号システムにも同様に適用できる。
１…画像処理システム
１００…画像符号化装置
１０１、２０３…インター予測部
１０２、２０４…イントラ予測部
１０３…変換・量子化部
１０４…エントロピー符号化部
１０４Ａ…色差ＱＰオフセット初期化部
１０４Ｂ…色差ＱＰオフセット導出部
１０４Ｃ…色差ＱＰ導出部
１０４Ｄ…ＣＴＵレベル色差ＱＰ初期化部
１０５、２０２…逆変換・逆量子化部
１０６…減算部
１０７、２０５…加算部
１０８、２０６…インループフィルタ部
１０９、２０７…フレームバッファ
１１０…ブロック分割部
１１１、２０８…ブロック統合部
２００…画像復号装置
２０１…エントロピー復号部

Claims (3)

  1. 符号化データを復号するように構成されている画像復号装置であって、
    ＣＴＵ単位ごとに、色差ＱＰオフセットを初期化するように構成されている符号化単位レベル色差ＱＰ初期化部と、
    前記符号化データの復号結果の色差ＱＰ分割粒度に基づいて、前記色差ＱＰオフセットを初期化するように構成されている色差ＱＰオフセット初期化部と、
    前記符号化データの復号結果に基づいて、色差ＱＰオフセットをセットして導出するように構成されている色差ＱＰオフセット導出部と、
    前記色差ＱＰオフセット導出部によって導出された前記色差ＱＰオフセットに基づいて、色差ＱＰを導出するように構成されている色差ＱＰ導出部とを具備することを特徴とする画像復号装置。
  2. ＣＴＵ単位ごとに、色差ＱＰオフセットを初期化する工程と、
    符号化データの復号結果の色差ＱＰ分割粒度に基づいて、前記色差ＱＰオフセットを初期化する工程と、
    前記符号化データの復号結果に基づいて、色差ＱＰオフセットをセットして導出する工程と、
    導出された前記色差ＱＰオフセットに基づいて、色差ＱＰを導出する工程とを有することを特徴とする画像復号方法。
  3. コンピュータを、符号化データを復号するように構成されている画像復号装置として機能させるプログラムであって、
    前記画像復号装置は、
    ＣＴＵ単位ごとに、色差ＱＰオフセットを初期化するように構成されている符号化単位レベル色差ＱＰ初期化部と、
    前記符号化データの復号結果の色差ＱＰ分割粒度に基づいて、前記色差ＱＰオフセットを初期化するように構成されている色差ＱＰオフセット初期化部と、
    前記符号化データの復号結果に基づいて、色差ＱＰオフセットをセットして導出するように構成されている色差ＱＰオフセット導出部と、
    前記色差ＱＰオフセット導出部によって導出された前記色差ＱＰオフセットに基づいて、色差ＱＰを導出するように構成されている色差ＱＰ導出部とを具備することを特徴とするプログラム。
JP2019237290A 2019-12-26 2019-12-26 画像復号装置、画像復号方法及びプログラム Active JP7277354B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2019237290A JP7277354B2 (ja) 2019-12-26 2019-12-26 画像復号装置、画像復号方法及びプログラム
CN202080058154.XA CN114270843A (zh) 2019-12-26 2020-11-25 图像解码装置、图像解码方法和程序
PCT/JP2020/043745 WO2021131463A1 (ja) 2019-12-26 2020-11-25 画像復号装置、画像復号方法及びプログラム
EP20907590.2A EP4002849A4 (en) 2019-12-26 2020-11-25 PICTURE DECODING DEVICE, PICTURE DECODING METHOD AND PROGRAM
US17/675,500 US20220174302A1 (en) 2019-12-26 2022-02-18 Image decoding device, image decoding method, and program
JP2023076470A JP2023087089A (ja) 2019-12-26 2023-05-08 画像復号装置、画像復号方法及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019237290A JP7277354B2 (ja) 2019-12-26 2019-12-26 画像復号装置、画像復号方法及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023076470A Division JP2023087089A (ja) 2019-12-26 2023-05-08 画像復号装置、画像復号方法及びプログラム

Publications (2)

Publication Number Publication Date
JP2021106345A JP2021106345A (ja) 2021-07-26
JP7277354B2 true JP7277354B2 (ja) 2023-05-18

Family

ID=76574341

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019237290A Active JP7277354B2 (ja) 2019-12-26 2019-12-26 画像復号装置、画像復号方法及びプログラム
JP2023076470A Pending JP2023087089A (ja) 2019-12-26 2023-05-08 画像復号装置、画像復号方法及びプログラム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023076470A Pending JP2023087089A (ja) 2019-12-26 2023-05-08 画像復号装置、画像復号方法及びプログラム

Country Status (5)

Country Link
US (1) US20220174302A1 (ja)
EP (1) EP4002849A4 (ja)
JP (2) JP7277354B2 (ja)
CN (1) CN114270843A (ja)
WO (1) WO2021131463A1 (ja)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150071344A1 (en) 2013-09-09 2015-03-12 Apple Inc. Chroma quantization in video coding

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SG11201702743WA (en) * 2014-10-03 2017-06-29 Nec Corp Video coding device, video decoding device, video coding method, video decoding method and program
WO2016063440A1 (ja) * 2014-10-22 2016-04-28 日本電気株式会社 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム
US10200698B2 (en) * 2016-08-09 2019-02-05 Intel Corporation Determining chroma quantization parameters for video coding
US11259023B2 (en) * 2018-04-12 2022-02-22 Qualcomm Incorporated Harmonization of transform-based quantization and dynamic range adjustment scale derivation in video coding
WO2020035066A1 (en) * 2018-08-16 2020-02-20 Mediatek Inc. Methods and apparatuses of chroma quantization parameter derivation in video processing system
US20220264098A1 (en) * 2019-08-22 2022-08-18 Lg Electronics Inc. Image decoding method using chroma quantization parameter, and apparatus therefor
KR102655358B1 (ko) * 2019-08-22 2024-04-04 엘지전자 주식회사 크로마 양자화 파라미터 오프셋 관련 정보를 코딩하는 영상 디코딩 방법 및 그 장치
US20210058620A1 (en) * 2019-08-23 2021-02-25 Qualcomm Incorporated Chroma quantization parameter (qp) derivation for video coding
US11146829B2 (en) * 2019-09-20 2021-10-12 Alibaba Group Holding Limited Quantization parameter signaling in video processing
US11323711B2 (en) * 2019-09-20 2022-05-03 Alibaba Group Holding Limited Method and system for signaling chroma quantization parameter offset
WO2021061019A1 (en) * 2019-09-23 2021-04-01 Huawei Technologies Co., Ltd. Method and apparatus for chrominance quantization parameters signalling
WO2021091214A1 (ko) * 2019-11-05 2021-05-14 엘지전자 주식회사 크로마 양자화 파라미터 오프셋 관련 정보를 코딩하는 영상 디코딩 방법 및 그 장치
EP4082206A1 (en) * 2019-12-23 2022-11-02 InterDigital VC Holdings France, SAS Quantization parameter coding

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150071344A1 (en) 2013-09-09 2015-03-12 Apple Inc. Chroma quantization in video coding

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
Adarsh K. Ramasubramonian et al.，On chroma QP offsets for zero-CBF leading chroma coding blocks，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-Q0476，17th Meeting: Brussels，2020年01月，pp.1-3
Brian Heng, Minhua Zhou and Wade Wan，AHG16: On Propagation of Chroma CU QP Offsets，17th Meeting: Brussels, BE，JVET-Q0267-v1，17th Meeting: Brussels, BE，2019年12月31日，pp.1-5
David Flynn et al.，RExt: CU-adaptive chroma QP offsets，Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11，JCTVC-O0044，15th Meeting: Geneva, CH，2013年10月，pp.1-4
Kei Kawamura and Sei Naito，Initializations and propagation of Chroma QP Offset，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11， JVET-Q0126_r1，17th Meeting: Brussels, BE，2020年01月，pp.1-5
Philippe de Lagrange，AHG15: reset chroma QP offsets when starting a CTU，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-Q0570-v3，17th Meeting: Brussels, BE，2020年01月，pp.1-4
Yu Han et al.，Cu level chroma QP control for VVC，Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11，JVET-O1168，15th Meeting: Gothenburg, SE，2019年07月，pp.1-9

Also Published As

Publication number Publication date
WO2021131463A1 (ja) 2021-07-01
JP2023087089A (ja) 2023-06-22
US20220174302A1 (en) 2022-06-02
EP4002849A4 (en) 2023-06-21
CN114270843A (zh) 2022-04-01
JP2021106345A (ja) 2021-07-26
EP4002849A1 (en) 2022-05-25

Similar Documents

Publication Publication Date Title
KR102640542B1 (ko) 색차 성분 양자화 매개 변수 결정 방법 및 이러한 방법을 사용하는 장치
CA2866781C (en) Chroma slice-level qp offset and deblocking
CA2937449C (en) Method and apparatus for coding of sample adaptive offset information
CN114073094B (zh) 视频编解码的方法和装置
EP3682639A1 (en) System and method for reducing blocking artifacts and providing improved coding efficiency
CA2729771A1 (en) Moving-picture encoding/decoding method and apparatus
TWI768414B (zh) 用於視訊編解碼的跨分量適應性環路濾波的方法及裝置
WO2011078067A1 (ja) 画像処理装置および方法
JP7399928B2 (ja) 画像復号装置、画像復号方法及びプログラム
JP2022522013A (ja) イントラ予測ベースのビデオ信号処理方法及び装置
KR20160068288A (ko) 변환생략을 참조하는 디블록킹 필터링을 이용한 영상의 부호화/복호화 방법 및 이를 이용하는 장치
TWI792200B (zh) 影像或視訊處理方法及裝置
US20240089441A1 (en) Image decoding device, method, and non-transitory computer-readable storage medium
JP7277354B2 (ja) 画像復号装置、画像復号方法及びプログラム
US11570433B2 (en) Image encoding apparatus, image encoding method, image decoding apparatus, image decoding method, and non-transitory computer-readable storage medium
CN110771166A (zh) 用于视频编码的装置和方法
JP7189854B2 (ja) 画像復号装置、画像復号方法及びプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201124

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210407

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220106

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221018

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20221215

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230217

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230404

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230508

R150 Certificate of patent or registration of utility model

Ref document number: 7277354

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150