JP2023145724A - 映像復号化方法、映像符号化方法およびビットストリーム送信方法 - Google Patents

映像復号化方法、映像符号化方法およびビットストリーム送信方法 Download PDF

Info

Publication number
JP2023145724A
JP2023145724A JP2023127350A JP2023127350A JP2023145724A JP 2023145724 A JP2023145724 A JP 2023145724A JP 2023127350 A JP2023127350 A JP 2023127350A JP 2023127350 A JP2023127350 A JP 2023127350A JP 2023145724 A JP2023145724 A JP 2023145724A
Authority
JP
Japan
Prior art keywords
offset
compensation
sao
indicator
filter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023127350A
Other languages
English (en)
Inventor
リー、ジン、ホ
Jin-Ho Lee
キム、ヒ、ヨン
Hui Yong Kim
リム、ソン、チャン
Sung Chang Lim
チェ、ジン、ス
Jin Soo Choi
キム、ジン、ウン
Jin Woong Kim
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=48436669&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2023145724(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of JP2023145724A publication Critical patent/JP2023145724A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】制限されたオフセット補償及びループフィルタに基づく映像符号化及び復号化方法、並びに装置を提供する。【解決手段】映像復号化装置200は、シーケンス、ピクチャ、フレーム、スライス、符号化ユニット(CU)、予測ユニット(PU)及び変換ユニット(TU)のうち少なくとも一つ以上が制限されたオフセット補償をサポートするかどうかを指示する第1の指示子を符号化器から受信し、制限された(constrained)画素適応的オフセット(SAO;sample adaptive offset)補償又は適応的ループフィルタ(ALF;adaptive loop filter)の適用可否を指示する第2の指示子を符号化器から受信し、パラメータを符号化器から受信し、第2の指示子及びパラメータに基づいて復元された映像の画素にSAO補償又はALFを適用する。【選択図】図2

Description

本発明は、デジタル映像に関し、より詳しくは、制限されたオフセット補償及びループフィルタに基づく映像符号化及び復号化方法、並びにその装置に関する。
最近、HD(High Definition)解像度を有する放送サービスが韓国内だけでなく、世界的に拡大されるにつれて、多くのユーザが高解像度、高画質の映像に慣れており、これによって、多くの機関が次世代映像機器に対する開発に拍車を掛けている。また、HDTVと共にHDTVの4倍以上の解像度を有するUHD(Ultra High Definition)に対する関心が増大しながら、より高い解像度、高画質の映像に対する圧縮機術が要求されている。
映像圧縮技術には、時間的に以前及び/又は以後のピクチャから現在ピクチャに含まれている画素値を予測するインター(inter)予測技術、現在ピクチャ内の画素情報を利用して現在ピクチャに含まれている画素値を予測するイントラ(intra)予測技術、照明変化などによる画質の劣化を防止するための加重値予測技術、出現頻度が高いシンボル(symbol)に短い符号を割り当て、出現頻度が低いシンボルに長い符号を割り当てるエントロピー符号化技術などがある。特に、省略モード(skip mode)で現在ブロックに対する予測が実行される場合、以前符号化された領域から予測された値のみを利用して予測ブロックが生成され、別途の動き情報(motion information)やレジデュアル(residual)信号が符号化器から復号化器に送信されない。このような映像圧縮技術により映像データが効率的に圧縮されることができる。
映像符号化及び復号化の際、原本映像と復元映像との間の相違を最小化するために補償(offset compensation)又はループフィルタ(loop filter)が適用されることができる。オフセット補償の場合、原本映像と復元映像との間の画素値の誤差を計算してオフセットを求め、これを復元映像に適用することで、原本映像との歪曲を最小化することができる。ループフィルタの場合、原本映像と復元映像との間の誤差を最小化するウィーナーフィルタ(Wiener filter)に基づくフィルタ係数を誘導した後、これを復元映像に適用することで、原本映像との歪曲を最小化することができる。
一方、圧縮された映像ビットストリーム(bit stream)がエラーが発生しやすいネットワークチャネルを介して送信されることができる。しかし、従来のオフセット補償又はループフィルタは、圧縮された映像ビットストリーム内でエラーが発生する場合、これに対する対応方案がないため、オフセット補償又はループフィルタによりエラーが時間的又は空間的に伝播されることができる。したがって、従来のオフセット補償又はループフィルタは、復元された映像の画質を大きく低下させることができ、圧縮された映像ビットストリームの復号化が不能となるおそれもある。
したがって、エラーに強いオフセット補償又はループフィルタの適用が要求される。
本発明の技術的課題は、制限されたオフセット補償及びフィルタリングに基づく映像符号化及び復号化方法、並びにその装置を提供することである。本発明は、画素適応的オフセット補償又はループフィルタ対象ブロックと周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータを利用して映像符号化及び復号化の際、オフセット補償又はループフィルタの適用を制限する方法を提供する。
一態様において、映像復号化方法が提供される。前記映像復号化方法は、シーケンス(sequence)、ピクチャ(picture)、フレーム(frame)、スライス(slice)、符号化ユニット(CU;coding unit)、予測ユニット(PU;prediction unit)、及び変換ユニット(TU;transform unit)のうち少なくとも一つ以上が制限されたオフセット補償をサポートするかどうかを指示する制限されたオフセット補償指示子を符号化器から受信するステップ、画素適応的オフセット(SAO;sample adaptive offset)補償の実行可否を指示するSAO補償指示子を前記符号化器から受信するステップ、SAOパラメータを前記符号化器から受信するステップ、及び前記SAO補償指示子及び前記SAOパラメータに基づいて復元された映像の画素に画素適応的オフセット補償を実行するステップを含む。
他の態様において、映像復号化方法が提供される。前記映像復号化方法は、シーケンス(sequence)、ピクチャ(picture)、フレーム(frame)、スライス(slice)、符号化ユニット(CU;coding unit)、予測ユニット(PU;prediction unit)、及び変換ユニット(TU;transform unit)のうち少なくとも一つ以上が制限されたオフセット補償をサポートするかどうかを指示する制限されたオフセット補償指示子を復号化器に送信するステップ、画素適応的オフセット(SAO;sample adaptive offset)補償の実行可否を指示するSAO補償指示子を前記復号化器に送信するステップ、SAOパラメータを前記復号化器に送信するステップ、及び前記SAO補償指示子及び前記SAOパラメータに基づいて復元された映像の画素に画素適応的オフセット補償を実行するステップを含む。
他の態様において、映像符号化方法が提供される。前記映像符号化方法は、シーケンス(sequence)、ピクチャ(picture)、フレーム(frame)、スライス(slice)、符号化ユニット(CU;coding unit)、予測ユニット(PU;prediction unit)、及び変換ユニット(TU;transform unit)のうち少なくとも一つ以上が制限されたループフィルタの適用をサポートするかどうかを指示する制限されたループフィルタ指示子を復号化器に送信するステップ、適応的ループフィルタ(ALF;adaptive loop filter)の適用可否を指示するALF適用指示子を前記復号化器に送信するステップ、ALFパラメータを前記復号化器に送信するステップ、及び前記ALF適用指示子及び前記ALFパラメータに基づいて復元された映像の画素にALFを適用するステップを含む。
映像符号化及び復号化の際、エラーに強いオフセット補償又はループフィルタを適用することができる。
映像符号化装置の一実施例に係る構成を示すブロック図である。 映像復号化装置の一実施例に係る構成を示すブロック図である。 提案された映像符号化方法の一実施例を示す。 角度によって決定されるエッジオフセットのタイプを示す。 提案された映像符号化方法で符号化パラメータを利用してエッジオフセットタイプでオフセット種類が決定される場合を示す。 提案された映像復号化方法の一実施例を示す。 提案された映像符号化方法の他の実施例を示す。 提案された映像符号化方法で符号化器が決定するフィルタシェイプの一例を示す。 提案された映像符号化方法で符号化パラメータを利用してBA方法に基づいてフィルタを分類する場合を示す。 提案された映像符号化方法で符号化パラメータを利用してALFを適用する場合の一例を示す。 提案された映像復号化方法の一実施例を示す。 提案された映像復号化方法で使われるフィルタシェイプの一例を示す。
以下、図面を参照して本発明の実施形態に対して具体的に説明する。本明細書の実施例を説明するにあたって、関連した公知構成又は機能に対する具体的な説明が本明細書の要旨を不明にすると判断される場合にはその詳細な説明は省略する。
一構成要素が他の構成要素に“連結されている”又は“接続されている”と言及された場合、該当他の構成要素に直接的に連結されている、又は接続されていることもあるが、中間に他の構成要素が存在することもあると理解されなければならない。また、本発明において、特定構成を“含む”と記述する内容は、該当構成以外の構成を排除するものではなく、追加的な構成が本発明の実施又は本発明の技術的思想の範囲に含まれることができることを意味する。
第1、第2などの用語は、多様な構成要素の説明に使われることができるが、前記構成要素は、前記用語により限定されてはならない。前記用語は、一つの構成要素を他の構成要素から区別する目的にのみ使われる。例えば、本発明の権利範囲を外れない限り、第1の構成要素は第2の構成要素と命名することができ、同様に、第2の構成要素も第1の構成要素と命名することができる。
また、本発明の実施例に開示する構成部は、互いに異なる特徴的な機能を示すために独立的に図示されるものであり、各構成部が分離されたハードウェアや一つのソフトウェア構成単位に構成されることを意味しない。即ち、各構成部は、説明の便宜上、それぞれの構成部として羅列して含むものであり、各構成部のうち少なくとも2個の構成部が統合されて一つの構成部からなり、又は一つの構成部が複数個の構成部に分けられて機能を遂行することができ、このような各構成部の統合された実施例及び分離された実施例も本発明の本質から外れない限り本発明の権利範囲に含まれる。
また、一部の構成要素は、本発明で本質的な機能を遂行する必須な構成要素ではなく、単に性能を向上させるための選択的構成要素である。本発明は、単に性能向上のために使われる構成要素を除いた本発明の本質具現に必須構成部のみを含んで具現されることができ、単に性能向上のために使われる選択的構成要素を除いた必須構成要素のみを含む構造も本発明の権利範囲に含まれる。
図1は、本発明の一実施例に係る映像符号化装置を示すブロック図である。
図1を参照すると、前記映像符号化装置100は、動き予測部110、動き補償部115、イントラ予測部120、減算器125、変換部130、量子化部135、エントロピー符号化部140、逆量子化部145、逆変換部150、加算器155、フィルタ部160、及び参照映像バッファ165を含む。
映像符号化装置100は、入力映像に対してイントラ(intra)モード又はインター(inter)モードに符号化を実行し、ビットストリーム(bit stream)を出力することができる。イントラモードである場合には、イントラ予測部120で予測が実行され、インターモードの場合には、動き予測部110、動き補償部115等を介して予測が実行されることができる。映像符号化装置100は、入力映像の入力ブロックに対する予測ブロックを生成した後、入力ブロックと予測ブロックの差分を符号化することができる。
イントラモードである場合、イントラ予測部120は、現在ブロック周辺の既に符号化されたブロックの画素値を利用して空間的予測を実行することによって予測ブロックを生成することができる。
インターモードである場合、動き予測部110は、動き予測過程で参照映像バッファ165に格納されている参照映像で入力ブロックと最もよくマッチされる領域を探して動きベクトルを求めることができる。動き補償部115は、動きベクトルと参照映像バッファ165に格納されている参照映像を利用して動き補償を実行することによって予測ブロックを生成することができる。
減算器125は、入力ブロックと生成された予測ブロックとの差分によりレジデュアルブロック(residual block)を生成することができる。変換部130は、レジデュアルブロックに対して変換を実行することで、変換係数(transform coefficient)を出力することができる。レジデュアル信号は、元信号と予測信号との差を意味し、又は、元信号と予測信号との差が変換された形態の信号又は元信号と予測信号との差が変換されて量子化された形態の信号を意味する。レジデュアル信号をブロック単位ではレジデュアルブロックという。
量子化部135は、変換係数を量子化パラメータによって量子化した量子化係数(quantized coefficient)を出力することができる。
エントロピー符号化部140は、量子化部135で算出された値又は符号化過程で算出された符号化パラメータ値などに対応するシンボルを確率分布によってエントロピー符号化することで、ビットストリームを出力することができる。
エントロピー符号化が適用される場合、高い発生確率を有するシンボルに少ない数のビットが割り当てられ、低い発生確率を有するシンボルに多い数のビットが割り当てられるようにすることによって映像符号化の圧縮性能を高めることができる。
エントロピー符号化のために、CAVLC(Context-Adaptive Variable Length Coding)、CABAC(Context-Adaptive Binary Arithmetic Coding)などのような符号化方法が使われることができる。例えば、エントロピー符号化部140には可変長さ符号化(VLC;Variable Lenghth Coding/Code)テーブルを使用してエントロピー符号化を実行することができる。エントロピー符号化部140は、対象シンボルの二進化(binarization)方法及び対象シンボル/ビン(bin)の確率モデル(probability model)を導出した後、導出された二進化方法又は確率モデルを使用してエントロピー符号化を実行することもできる。
量子化された係数は、逆量子化部145で逆量子化され、逆変換部150で逆変換されることができる。加算器155は、予測ブロックと逆変換された量子化係数を利用して復元ブロックを生成することができる。
フィルタ部160は、デブロッキングフィルタ(deblocking filter)、SAO(Sample Adaptive Offset)、ALF(Adaptive Loop Filter)のうち少なくとも一つ以上を復元ブロック又は復元ピクチャに適用することができる。フィルタ部160を経た復元ブロックは、参照映像バッファ165に格納されることができる。
図2は、本発明の一実施例に係る映像復号化装置を示すブロック図である。
図2を参照すると、前記映像復号化装置200は、エントロピー復号化部210、逆量子化部220、逆変換部230、イントラ予測部240、動き補償部250、フィルタ部260、参照映像バッファ270、及び加算器280を含む。
映像復号化装置200は、符号化器で出力されたビットストリームの入力を受けてイントラモード又はインターモードに復号化を実行し、再構成された映像、即ち、復元映像を出力することができる。イントラモードである場合には、イントラ予測部240で予測が実行され、インターモードである場合には、動き補償部250を介して予測が実行されることができる。映像復号化装置200は、入力されたビットストリームから復元されたレジデュアルブロックを得て予測ブロックを生成した後、復元されたレジデュアルブロックと予測ブロックとを加えて再構成されたブロック、即ち、復元ブロックを生成することができる。
エントロピー復号化部210は、入力されたビットストリームを確率分布によってエントロピー復号化して量子化された係数(quantized coefficient)形態のシンボルを生成することができる。エントロピー復号化方法は、前述したエントロピー符号化方法に対応して実行されることができる。
量子化された係数は、逆量子化部220で逆量子化され、逆変換部230で逆変換され、量子化された係数が逆量子化/逆変換された結果、レジデュアルブロックが生成されることができる。
イントラモードである場合、イントラ予測部240は、現在ブロック周辺の既に符号化されたブロックの画素値を利用して空間的予測を実行することによって予測ブロックを生成することができる。インターモードである場合、動き補償部250は、動きベクトル及び参照映像バッファ270に格納されている参照映像を利用して動き補償を実行することによって予測ブロックを生成することができる。
加算器280は、レジデュアルブロックと予測ブロックに基づいて復元ブロックを生成することができる。フィルタ部260は、デブロッキングフィルタ、SAO、ALFのうち少なくとも一つ以上を復元ブロックに適用することができる。フィルタ部260は、再構成された映像、即ち、復元映像を出力する。復元映像は、参照映像バッファ270に格納されて画面間予測に使われることができる。
制限されたイントラ予測(CIP;constrained intra prediction)は、映像符号化又は映像復号化の際、エラーに強く(robust)するための技術である。CIP技術は、イントラ予測時に使われる予測対象ブロックの周辺の復元された画素領域が画面間符号化された場合には、前記周辺の復元された画素領域を利用せず、前記予測対象ブロックの周辺の復元された画素領域が画面内符号化された場合には、復元された周辺の画素を利用して補間法(interpolation)又は補外法(extrapolation)によって参照画素を生成する。生成された参照画素に基づいてイントラ予測が実行されることができる。したがって、周辺の画面間符号化されたブロックが参照するピクチャ(picture)が損失されても予測対象ブロックには影響を与えられない。しかし、従来のデブロッキングフィルタリング過程では前記制限されたイントラ予測の適用可否又は符号化パラメータに関係なしで復元された映像に常にフィルタリングを実行するため、復元された映像内のエラーが発生しない領域に伝播されることができる。例えば、画面間符号化されたブロックで発生したエラーが画面内符号化されたブロックに伝播されることができる。したがって、従来のデブロッキングフィルタリング過程は、復元された映像の主観的画質を大きく低下させることができるという問題点を有している。
前記のような問題点を解決するために、制限された画素適応的オフセット(SAO;sample adaptive offset)補償又は適応的ループフィルタ(ALF;adaptive loop filter)の適用可否を指示するフラグを送信する方法が提案されることができる。送信されたフラグによって画素適応的オフセット補償又は適応的ループフィルタを制限的に適用すると決定された場合、現在ブロックと周辺ブロックの符号化パラメータによって画素適応的オフセット補償又は適応的ループフィルタが制限的に適用されることができる。これによって、画面間符号化されたブロックを正常に復元できない場合にも画面内符号化されたブロックは、正常に復号化することができる。即ち、画面間符号化されたブロックのエラーが画面内符号化されたブロックに伝播されることを防止することができ、画面内符号化されたブロックの復元結果が符号化器と復号化器で同一に維持されることができる。
以下、実施例を介して提案される映像符号化及び復号化方法を説明する。まず、制限された画素適応的オフセット補償に基づく映像符号化及び復号化方法を説明する。画素適応的オフセット補償は、インループフィルタリング(in-loop filtering)に含まれることができ、インループフィルタリングは、画素適応的オフセット補償外にデブロッキングフィルタ(deblocking filter)を含むことができる。
図3は、提案された映像符号化方法の一実施例を示す。
ステップS100において、符号化器は、制限されたオフセット補償指示子(indicator)を復号化器に送信する。ステップS110において、符号化器は、画素適応的オフセット(SAO;sample adaptive offset)補償の実行可否を指示するSAO補償指示子を復号化器に送信する。ステップS120において、符号化器は、SAOパラメータを復号化器に送信する。ステップS130において、符号化器は、SAO補償指示子及びSAOパラメータに基づいて復元された映像に対して画素適応的オフセット補償を実行する。
ステップS100で送信される制限されたオフセット補償指示子に対して説明する。
復号化器は、符号化器から送信される制限されたオフセット補償指示子によって符号化対象シーケンス(sequence)、ピクチャ(picture)、フレーム(frame)、フィールド(field)、スライス(slice)、符号化ユニット(CU;coding unit)、予測ユニット(PU;prediction unit)又は変換ユニット(TU;transform unit)のうち少なくとも一つ以上が制限されたオフセット補償をサポートするかどうかを判断することができる。
符号化器は、制限されたオフセット補償指示子をビットストリームに挿入して復号化器に送信することができる。制限されたオフセット補償指示子は、算術符号化(arithmetic coding)又は可変長さ符号化(VLC;variable length coding)などのエントロピー符号化(entropy coding)過程を介してビットストリームに挿入されることができる。制限されたオフセット補償指示子は、ビットストリーム内のシーケンスパラメータセット(SPS;sequence parameter set)、ピクチャパラメータセット(PPS;picture parameter set)、適応パラメータセット(APS;adaptation parameter set)又はスライスヘッダ(slice header)などを利用して送信されることができる。復号化器は、エントロピー復号化(entropy decoding)過程によってビットストリームをパーシング(parsing)して送信される制限されたオフセット補償指示子を得ることができる。
表1は、ビットストリームに挿入される制限されたオフセット補償指示子の一例を示す。表1において、オフセット補償指示子は、シーケンスパラメータセットに挿入される。
Figure 2023145724000002
表1において、constrained_offset_flagが制限されたオフセット補償指示子を示す。constrained_offset_flagの値が0の場合、制限されたオフセット補償をサポートしないことを指示し、constrained_offset_flagの値が1の場合、制限されたオフセット補償をサポートすることを指示することができる。または、エラーに強い画面内予測のためのパラメータであるconstrained_intra_pred_flagの値が1の場合、別途のオフセット補償指示子の挿入なしで制限されたオフセット補償をサポートすることを指示することができる。
表2は、ビットストリームに挿入される制限されたオフセット補償指示子の他の例を示す。表2において、制限されたオフセット補償指示子は、ピクチャパラメータセットに挿入される。
Figure 2023145724000003
表2において、constrained_offset_flagが制限されたオフセット補償指示子を示す。constrained_offset_flagの値が0の場合、制限されたオフセット補償をサポートしないことを指示し、constrained_offset_flagの値が1の場合、制限されたオフセット補償をサポートすることを指示することができる。
表3は、ビットストリームに挿入される制限されたオフセット補償指示子の他の例を示す。表3において、制限されたオフセット補償指示子は、ピクチャパラメータセットに挿入される。
Figure 2023145724000004
表3において、loop_filter_across_tiles_enabled_flag又はloop_filter_across_slices_enabled_flagが制限されたオフセット補償指示子を示す。loop_filter_across_tiles_enabled_flagの値が0の場合、制限されたオフセット補償をサポートすることを指示することができる。または、loop_filter_across_slices_enabled_flagの値が0の場合、制限されたオフセット補償をサポートすることを指示することができる。
または、別途のオフセット補償指示子の挿入なしで符号化器と復号化器で常に制限されたオフセット補償をサポートするようにすることができる。
一方、制限されたオフセット補償指示子が1に設定され、符号化器が制限されたオフセット補償を実行するようになる場合、符号化器は、符号化パラメータを利用することができる。符号化パラメータは、画面内(intra)符号化されたか、画面間(inter)符号化されたかを示す符号化モード(coding mode)、画面内予測モード(intra prediction mode)、画面間予測モード(inter prediction mode)、符号化ブロックフラグ(CBF;coded block flag)、量子化媒介変数(quantization parameter)、動きベクトル(motion vector)、動きベクトル予測器(motion vector predictor)、参照映像索引(reference picture index)、スライス/タイル境界(slice/tile boundary)可否のうち少なくとも一つ以上を含む。
例えば、符号化パラメータは、タイルの境界を含み、制限されたオフセット補償指示子の値が0の場合、オフセット補償がタイル境界を越えて実行されないように制限されることができる。このとき、制限されたオフセット補償指示子は、表3のloop_filter_across_tiles_enabled_flagである。タイルの境界は、タイルの識別子(ID;identifier)に基づいて決定されることができる。または、符号化パラメータは、スライスの境界を含み、制限されたオフセット補償指示子の値が0の場合、オフセット補償がスライス境界を越えて実行されないように制限されることができる。このとき、制限されたオフセット補償指示子は、表3のloop_filter_across_slices_enabled_flagである。スライスの境界は、スライスの識別子に基づいて決定されることができる。
例えば、符号化パラメータを利用して制限されたオフセット補償の適用対象ブロック又は周辺ブロックが画面内符号化されたか又は画面間符号化されたかが判断されることができる。このとき、あるブロックが画面内符号化されたとすると、該当ブロックを画面内モード(intra mode)に符号化されたということができ、あるブロックが画面間符号化されたとすると、該当ブロックを画面間モード(inter mode)に符号化されたということができる。また、例えば、ブロックがPCM(pulse coded modulation)モードに符号化されたとすると、該当ブロックは、画面内符号化されたと判断されることができる。
符号化器が符号化パラメータを利用して制限されたオフセット補償を実行する場合、符号化パラメータによって信頼性程度を決定し、決定された信頼性程度を制限されたオフセット補償実行時に適用することができる。例えば、表4のように、各符号化パラメータによって信頼性程度を判断することができ、一つ以上の符号化パラメータの組合せによって信頼性程度を判断することもできる。
Figure 2023145724000005
表4を参照すると、画面内に符号化されたブロックは、現在スライス内で予測が実行されるため、信頼性が強いと判断することができ、画面間に符号化されたブロックは、以前スライスを介して予測が実行されるため、信頼性が弱いと判断することができる。また、CBF=0であり、又は画面間モードがスキップモードである場合、レジデュアル信号(residual signal)が存在しないため、他のブロックと比較した時、相対的に歪曲が大きく、信頼性が弱いと判断することができる。また、スライス/タイル境界内にあるブロックは、信頼性が強いと判断することができ、境界外にあるブロックは、信頼性が弱いと判断することができる。表3において、制限されたオフセット補償指示子であるloop_filter_across_tiles_enabled_flag又はloop_filter_across_slices_enabled_flagの値が0の場合、信頼性弱い境界外は、許容されない。
制限されたオフセット補償が実行される場合、特に、画素適応的オフセット補償が実行されることができる。符号化器は、原本映像と復元映像との間の画素値誤差を計算してオフセットを求め、これを復元映像に適用して原本映像との歪曲を最小化することで性能を向上させることができる。
ステップS110で送信されるSAO補償指示子は、シーケンスパラメータセット、ピクチャパラメータセット、適応パラメータセット又はスライスヘッダなどに含まれて送信されることができる。SAO補償指示子は、sample_adaptive_offset_enabled_flagである。また、輝度成分と色差成分に対して画素適応的オフセット補償を実行するかどうかをそれぞれのビットストリームに含んでシグナリングすることができる。
ステップS120で送信されるSAOパラメータに対して説明する。
SAOパラメータは、オフセット補償ブロック構造、クアッドツリー深さ、オフセットタイプ(type)、オフセット種類(category)、及びオフセット値のうち少なくとも一つ以上を含むことができる。SAOパラメータは、ビットストリーム内にオフセット補償ブロック構造を含むことができる。SAOパラメータ内にオフセット補償ブロック構造は、sao_split_flagである。このとき、一つのスライスをクアッドツリー(quadtree)に分割してオフセット補償ブロック構造に対する情報をシグナリングすることができる。また、クアッドツリーに分割する深さ(depth)に対する情報もビットストリームに含まれることができ、分割される領域の最小単位は、LCU(largest coding unit)である。
または、SAOパラメータは、オフセットタイプ、オフセット種類、オフセット符号(sign)、及びオフセット値を含むことができる。表5は、画素適応的オフセット補償でオフセットタイプ及びこれによるオフセット種類の個数を示す。
Figure 2023145724000006
表5を参照すると、オフセットタイプの個数は、総7個である。しかし、表5のオフセットタイプは、例示に過ぎず、オフセットタイプの個数は、変わることができる。各オフセットタイプは、互いに異なる個数と互いに異なるオフセット値を有することができる。エッジオフセット(EO;edge offset)は、角度によって4個のオフセットタイプに分類されることができる。エッジオフセットで各オフセットタイプは、条件(condition)によって4個のオフセット種類を有することができる。エッジオフセットでオフセット種類及びオフセット符号は、オフセット補償対象画素と周辺画素とを比較して決定されることができる。即ち、エッジオフセットの場合、オフセット種類及びオフセット符号は、追加的なシグナリングなしで復号化器が判別できる。バンドオフセット(BO;band offset)は、バンドの位置によって2個のオフセットタイプに分類されることができ、各々、16個のオフセット種類を有することができる。バンドオフセットでオフセット種類は、オフセット補償対象画素が有することができる画素値の範囲を16個区間に分けた後、分けられた区間のうちどこに該当するかによって決定されることができる。決定されたオフセットタイプによってオフセットタイプインデックスが符号化されて復号化器にシグナリングされることができ、オフセット種類及びオフセット符号は、シグナリングなしで符号化器と復号化器で各々条件によって分類されることができる。決定されたオフセット種類及びオフセット符号は、各々パーシングされたオフセット値に対応されることができる。オフセットタイプがエッジオフセットに決定された場合、4個のオフセット値が復号化器にシグナリングされることができ、バンドオフセットに決定された場合、16個のオフセット値が復号化器にシグナリングされることができる。
一方、SAOパラメータは、画素適応的オフセット補償の対象ブロック又は対象ブロックの周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータに基づいて決定されることができる。例えば、エッジオフセットタイプでオフセット種類を決定する時、画素適応的オフセット補償の対象ブロックと周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータを利用することができる。例えば、符号化パラメータは、タイルの境界を含み、タイルの境界は、タイルの識別子に基づいて決定されることができる。または、符号化パラメータは、スライスの境界を含み、スライスの境界は、スライスの識別子に基づいて決定されることができる。
図4は、角度によって決定されるエッジオフセットのタイプを示す。エッジオフセットは、角度によって4個のオフセットタイプに分類されることができる。図4において、Cは、画素適応的オフセット補償の対象画素を示し、Nは、周辺画素を示す。
図5は、提案された映像符号化方法で符号化パラメータを利用してエッジオフセットタイプでオフセット種類及びオフセット符号が決定される場合を示す。
図5を参照すると、画素適応的オフセット補償の対象ブロックと左側ブロックが画面内に符号化され、対象ブロックと上位ブロックは、画面間符号化される。即ち、図5において、CとNは、画面内ブロック画素となり、Nは、画面間ブロック画素となる。表6は、オフセット種類が決定される条件を示し、Nは、N又はNとなることができる。前記オフセット種類が1又は2に決定された場合、オフセット符号は、正数になることができ、前記オフセット種類が3又は4に決定された場合、オフセット符号は、負数になることができる。
Figure 2023145724000007
画素適応的オフセット補償の対象画素が画面内に符号化されたブロックに含まれ、画面間に符号化された周辺ブロックの画素にエラーが発生した場合を仮定する。このとき、オフセット種類を決定する時、周辺ブロックのうち画面間に符号化されたブロックの画素は使用せずに、対象ブロック内の画面内に符号化された画素のみを利用してオフセット種類を決定することができる。これは画面内に符号化されたブロックの画素にエラーが伝播されることを防止するためである。または、オフセット種類を決定する時、周辺ブロックのうち、画面間に符号化されたブロックの画素は使用せずに、画面間に符号化されたブロックの画素を画面内に符号化されたブロックの画素に変えてオフセット種類を決定することができる。例えば、図5において、Nの画素値をDの画素値に変えてオフセット種類を決定することができる。または、オフセット種類を決定しないこともある。
符号化器は、SAO補償指示子及びSAOパラメータに基づいて計算されたオフセット値を画素値に加えてオフセット補償された画素値を復元することができる。復号化器は、各オフセット値を復号化した後、各ブロック内の画素毎に条件により分類されるオフセット種類に対応されるオフセット値を利用して画素適応的オフセット補償を実行することができる。
画素適応的オフセット補償は、画素適応的オフセット補償の対象ブロック又は対象ブロックの周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータに基づいて実行されることができる。符号化パラメータは、タイルの境界を含み、画素適応的オフセット補償は、タイルの境界に基づいて実行されることができる。例えば、画素適応的オフセット補償がタイルの境界を越えて実行されないこともある。または、符号化パラメータは、スライスの境界を含み、画素適応的オフセット補償は、スライスの境界に基づいて実行されることができる。画素適応的オフセット補償がスライスの境界を越えて実行されないこともある。
または、画素適応的オフセット補償の対象画素が画面内に符号化されたブロックに含まれ、画面間に符号化された周辺ブロックの画素にエラーが発生した場合を仮定すると、周辺ブロックのうち画面間に符号化されたブロックの画素は使用せずに、対象ブロック内の画面内に符号化された画素のみを利用して画素適応的オフセット補償を実行することができる。これは画面内に符号化されたブロックの画素にエラーが伝播されることを防止するためである。または、周辺ブロックのうち、画面間に符号化されたブロックの画素は使用せずに、画面間に符号化されたブロックの画素を画面内に符号化されたブロックの画素に変えて画素適応的オフセット補償を実行することができる。または、画素適応的オフセット補償を実行しないこともある。
以上の過程を総合すると、符号化器は、一つのスライスをクアッドツリー構造の多様なブロックの大きさに分割し、各ブロック毎にエッジオフセット又はバンドオフセットの中から最適のタイプを率-歪曲最適化(RDO;rate-distortion optimization)を利用して決定し、決定された最適のタイプに対してオフセット種類及びオフセット値を決定することができる。このようなSAOパラメータは、エントロピー符号化されて復号化器に送信されることができる。
以上で説明した制限されたオフセット補償に基づく映像符号化方法は、映像復号化方法にもそのまま適用されることができる。即ち、復号化器は、符号化器から送信される制限されたオフセット補償指示子、SAO補償指示子、SAOパラメータなどを受信してパーシングし、これに基づいて画素適応的オフセット補償を実行する。
図6は、提案された映像復号化方法の一実施例を示す。
ステップS200において、復号化器は、制限されたオフセット補償指示子を符号化器から受信する。表7は、ピクチャパラメータセットに挿入されている制限されたオフセット補償指示子の一例を示す。
Figure 2023145724000008
表7において、constrained_intra_pred_flagの値が1の場合、即ち、制限されたイントラ予測が実行される場合、復号化器は、constrained_in_loop_filter_flagをパーシングして制限されたインループフィルタの適用可否を決定することができる。constrained_in_loop_filter_flagの値が1の場合、制限されたインループフィルタを適用することを指示することができ、constrained_in_loop_filter_flagの値が0の場合、制限されたインループフィルタを適用しないことを指示することができる。制限されたインループフィルタの適用対象は、デブロッキングフィルタ、オフセット補償、ALFのうち少なくとも一つ以上である。
ステップS210において、復号化器は、SAO補償の実行可否を指示するSAO補償指示子を符号化器から受信する。復号化器は、ビットストリーム内のシーケンスパラメータセット、ピクチャパラメータセット、適応パラメータセット又はスライスヘッダなどに含まれて送信されるSAO補償指示子sample_adaptive_offset_enabled_flagをパーシングしてSAO補償の実行可否を決定することができる。また、復号化器は、輝度成分と色差成分の各々にSAO補償の実行可否を決定する情報をビットストリームからパーシングすることができる。
ステップS220において、復号化器は、SAOパラメータを符号化器から受信する。復号化器は、符号化器から送信されるSAOパラメータをパーシングすることができる。例えば、SAOパラメータがビットストリーム内にオフセット補償ブロック構造に対する情報であるsao_split_flagを含む場合、復号化器は、これをパーシングして画素適応的オフセット補償を実行するブロックの構造を決定することができる。また、復号化器は、ビットストリームに含まれているクアッドツリーに分割する深さに対する情報もパーシングすることができる。
SAOパラメータがオフセットタイプとオフセット種類を含む場合、オフセットタイプ及びそれによるオフセット種類は、前述した表5に基づく。オフセットタイプの個数は、総7個である。各オフセットタイプは、互いに異なる個数と互いに異なるオフセット値を有することができる。オフセットタイプがエッジオフセットに決定された場合、復号化器は、4個のオフセット値をビットストリームからパーシングすることができ、バンドオフセットに決定された場合、16個のオフセット値をビットストリームからパーシングすることができる。また、各オフセットタイプによるオフセット種類は、各々パーシングされたオフセット値に対応されることができる。例えば、エッジオフセットでオフセット種類及びオフセット符号は、オフセット補償対象画素と周辺画素とを比較して決定されることができ、バンドオフセットでオフセット種類は、オフセット補償対象画素が有することができる画素値の範囲を16個区間に分けた後、分けられた区間のうちどこに該当するかによって決定されることができる。
一方、オフセットタイプによるオフセット種類を決定する時、対象画素が画面内に符号化されたブロックに属し、周辺画素が画面間に符号化されたブロックに属する場合、対象画素に対するオフセット種類を決定しないこともある。即ち、オフセット補償を実行しないようにオフセット種類の値を0に設定することができる。例えば、オフセット補償指示子内のconstrained_in_loop_filter_flagの値が1であり、(x,y)に位置した画素が画面内に符号化されたブロックに属し、(x+hPos[k],y+vPos[k])に位置した一つ以上の画素が画面間に符号化されたブロックに属する場合、オフセット種類の値が0に設定されることができる。このとき、hPos[k]及びvPos[k]は、オフセットタイプによる周辺画素の位置を示す値であり、表8によって決定されることができる。k=0又は1である。
Figure 2023145724000009
表8を参照すると、例えば、オフセットタイプが2の場合、オフセット補償指示子内のconstrained_in_loop_filter_flagの値が1であり、(x,y)に位置した画素が画面内に符号化されたブロックに属し、(x,y+1)又は(x,y-1)に位置した一つ以上の画素が画面間に符号化されたブロックに属する場合、オフセット種類の値が‘0’に設定されることができる。
一方、制限されたオフセット補償指示子の値が1であり、(x,y)に位置した画素と(x+hPos[k],y+vPos[k])に位置した一つ以上の画素が互いに異なるスライス/タイルに属する場合、即ち、(x+hPos[k],y+vPos[k])に位置した一つ以上の画素が、(x,y)に位置した画素が属するスライス/タイルの外に位置した場合、オフセット種類の値が0に設定されることができる。また、スライス/タイルの境界がピクチャの境界である場合、スライス/タイルの境界外は、画素がないピクチャの外である。
一方、SAOパラメータは、画素適応的オフセット補償の対象ブロック又は対象ブロックの周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータに基づいて決定されることができる。
ステップS230において、復号化器は、SAO補償指示子及びSAOパラメータに基づいて画素適応的オフセット補償を実行する。復号化器は、SAO補償指示子及びSAOパラメータに基づいて計算されたオフセット値を画素値に加えてオフセット補償された画素値を復元することができる。画素適応的オフセット補償は、画素適応的オフセット補償の対象ブロック又は対象ブロックの周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータに基づいて実行されることができる。オフセット種類の値が0に設定された場合、対象画素に画素適応的オフセット補償を実行しないこともある。即ち、RecSaoPicture[x,y]=RecPicture[x,y]である。RecSaoPicture[x,y]は、(x,y)に位置した画素に対して画素適応的オフセット補償を実行した後の画素値を示し、RecPicture[x,y]は、画素適応的オフセット補償を実行する前の復元された画素値を示す。
以下、ALFに基づく映像符号化及び復号化方法を説明する。
図7は、提案された映像符号化方法の他の実施例を示す。
ステップS300において、符号化器は、制限されたループフィルタ指示子を復号化器に送信する。ステップS310において、符号化器は、ALFの適用可否を指示するALF適用指示子を復号化器に送信する。ステップS320において、符号化器は、ALFパラメータを復号化器に送信する。ステップS330において、符号化器は、ALF適用指示子及びALFパラメータに基づいて復元された映像に対してALFを適用する。
ステップS300で送信される制限されたループフィルタ指示子に対して説明する。
復号化器は、符号化器から送信される制限されたループフィルタ指示子によって符号化対象シーケンス、ピクチャ、フレーム、フィールド、スライス、CU、PU又はTUのうち少なくとも一つ以上が制限されたループフィルタを適用するかどうかを判断することができる。
符号化器は、制限されたループフィルタ指示子をビットストリームに挿入して復号化器に送信することができる。制限されたループフィルタ指示子は、算術符号化又はVLCなどのエントロピー符号化過程を介してビットストリームに挿入されることができる。制限されたオフセット補償指示子は、ビットストリーム内のSPS、PPS、APS又はスライスヘッダなどを利用して送信されることができる。復号化器は、エントロピー復号化過程によってビットストリームをパーシングして送信される制限されたオフセット補償指示子を得ることができる。
表9は、ビットストリームに挿入される制限されたループフィルタ指示子の一例を示す。表9において、ループフィルタ指示子は、シーケンスパラメータセットに挿入される。
Figure 2023145724000010
表9において、constrained_filter_flagが制限されたループフィルタ指示子を示す。constrained_filter_flagの値が0の場合、制限されたループフィルタを適用しないことを指示し、constrained_filter_flagの値が1の場合、制限されたループフィルタをサポートすることを指示することができる。または、エラーに強い画面内予測のためのパラメータであるconstrained_intra_pred_flagの値が1の場合、別途のループフィルタ指示子の挿入なしで制限されたループフィルタを適用することを指示することができる。
表10は、ビットストリームに挿入される制限されたループフィルタ指示子の他の例を示す。表10において、制限されたループフィルタ指示子は、ピクチャパラメータセットに挿入される。
Figure 2023145724000011
表10において、constrained_filter_flagが制限されたループフィルタ指示子を示す。constrained_filter_flagの値が0の場合、制限されたループフィルタを適用しないことを指示し、constrained_filter_flagの値が1の場合、制限されたループフィルタを適用することを指示することができる。
または、表3のように、loop_filter_across_tiles_enabled_flag又はloop_filter_across_slices_enabled_flagが制限されたループフィルタ指示子を示すことができる。loop_filter_across_tiles_enabled_flagの値が0の場合、制限されたループフィルタを適用することを指示することができる。または、loop_filter_across_slices_enabled_flagの値が0の場合、制限されたループフィルタを適用することを指示することができる。
または、別途のループフィルタ指示子の挿入なしで符号化器と復号化器で常に制限されたループフィルタを適用するようにすることができる。
一方、制限されたループフィルタ指示子が1に設定され、符号化器が制限されたループフィルタを適用するようになる場合、符号化器は、符号化パラメータを利用することができる。符号化パラメータは、画面内符号化されたか、画面間符号化されたかを示す符号化モード、画面内予測モード、画面間予測モード、CBF、量子化媒介変数、動きベクトル、動きベクトル予測器、参照映像索引、スライス/タイル境界可否のうち少なくとも一つ以上を含む。
例えば、符号化パラメータは、タイルの境界を含み、制限されたループフィルタ指示子の値が0の場合、ループフィルタがタイル境界を越えて適用されないように制限されることができる。このとき、制限されたループフィルタ指示子は、表3のloop_filter_across_tiles_enabled_flagである。タイルの境界は、タイルの識別子(ID;identifier)に基づいて決定されることができる。または、符号化パラメータは、スライスの境界を含み、制限されたループフィルタ指示子の値が0の場合、ループフィルタがスライス境界を越えて適用されないように制限されることができる。このとき、制限されたループフィルタ指示子は、表3のloop_filter_across_slices_enabled_flagである。スライスの境界は、スライスの識別子に基づいて決定されることができる。
例えば、符号化パラメータを利用して制限されたループフィルタの適用対象ブロック又は周辺ブロックが画面内符号化されたか又は画面間符号化されたかが判断されることができる。このとき、あるブロックが画面内符号化されたとすると、該当ブロックを画面内モードに符号化されたということができ、あるブロックが画面間符号化されたとすると、該当ブロックを画面間モードに符号化されたということができる。また、例えば、ブロックがPCMモードに符号化されたとすると、該当ブロックは、画面内符号化されたと判断されることができる。
符号化器が符号化パラメータを利用して制限されたオフセット補償を実行する場合、符号化パラメータによって信頼性程度を決定し、決定された信頼性程度を制限されたオフセット補償実行時に適用することができる。例えば、表4のように、各符号化パラメータによって信頼性程度を判断することができ、一つ以上の符号化パラメータの組合せによって信頼性程度を判断することもできる。表3において、制限されたループフィルタ指示子であるloop_filter_across_tiles_enabled_flag又はloop_filter_across_slices_enabled_flagの値が0の場合、信頼性弱い境界外は、許容されない。
制限されたループフィルタが適用される場合、特に、ALFが適用されることができる。符号化器は、原本映像と復元映像との間の誤差を最小化するウィーナーフィルタ(Wiener filter)に基づくフィルタ係数を誘導した後、これを復元映像に適用して原本映像との歪曲を最小化することができる。
ステップS310で送信されるALF適用指示子は、シーケンスパラメータセット、ピクチャパラメータセット、適応パラメータセット又はスライスヘッダなどに含まれて送信されることができる。ALF適用指示子は、adaptive_loop_filter_flagである。また、輝度成分と色差成分に対するALF適用可否をそれぞれのビットストリームに含んでシグナリングすることができる。また、ALF適用可否は、CU単位又は映像単位に決定されることができる。
ステップS320で送信されるALFパラメータに対して説明する。
ALFパラメータは、フィルタシェイプ(shape)、フィルタ係数(coefficient)、フィルタ分類(classification)方法、フィルタインデックス、フィルタ予測方法、及びフィルタ実行最大深さのうち少なくとも一つ以上を含むことができる。
符号化器は、複数のフィルタシェイプのうち、最適のフィルタシェイプを決定することができる。また、符号化器は、ALFを適用するために使用するフィルタ係数を決定することができる。このとき、フィルタ係数は、一つ以上であり、異なる次数(order)の指数ゴロム(exponential Golomb)コードに符号化されることができる。フィルタ係数を効率的に符号化するためにフィルタ係数間にDPCM(differential pulse code modulation)などのような方法により予測符号化が実行されることができ、あるフィルタ係数は、他のフィルタ係数の和から予測符号化されることもできる。また、ALFを適用すると決定された場合、フィルタ分類方法として領域ベースの適応(RA;region-based adaptation)とブロックベースの適応(BA;block-based adaptation)のうち一つの方法を利用してフィルタを選択することができる。例えば、フィルタ分類方法がRA方法に決定された場合、alf_region_adaptation_flagの値を1に設定し、フィルタ分類方法がBA方法に決定された場合、alf_region_adaptation_flagの値を0に設定する。RA方法が使われる場合、分割された映像領域当たり複数のフィルタのうちいずれか一つのフィルタが選択されることができ、BA方法が使われる場合、画素の変化量及び方向性を考慮して複数のフィルタのうちいずれか一つのフィルタが選択されることができる。このとき、どのフィルタが選択されたかを指示するためにALFパラメータ内のフィルタインデックスを利用することができる。また、ALFが適用される最大深さに対する情報をビットストリームに挿入して特定深さのCUまでのみALFが適用されるようにすることができる。
図8は、提案された映像符号化方法で符号化器が決定するフィルタシェイプの一例を示す。図8を参照すると、各フィルタ内の数字は、フィルタ係数インデックスを示す。符号化器は、フィルタシェイプとフィルタ分類方法に対する情報をALFパラメータ内に含んで復号化器に送信し、決定されたフィルタ分類方法によってフィルタが選択される。フィルタは、最大16個まで存在することができる。選択されたフィルタに基づいてフィルタリングが実行される場合、フィルタシェイプの中央に位置した画素値をフィルタリングする時、各フィルタ係数と各位置に該当する画素値の積の和でフィルタリングを実行することができる。
一方、BA方法に基づいてフィルタを分類する時、ALF適用の対象ブロックと周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータを利用することができる。例えば、符号化パラメータは、タイルの境界を含み、タイルの境界は、タイルの識別子に基づいて決定されることができる。または、符号化パラメータは、スライスの境界を含み、スライスの境界は、スライスの識別子に基づいて決定されることができる。
図9は、提案された映像符号化方法で符号化パラメータを利用してBA方法に基づいてフィルタを分類する場合を示す。例えば、ALF適用の対象ブロックが画面内に符号化され、周辺ブロックが画面間に符号化された場合、4×4ブロック単位で水平又は垂直の方向性を判断する場合、図9において、斜線が引かれていない4×4ブロック内の画素は、画面内ブロックの画素となり、斜線が引かれている画素は、画面間ブロックの画素となることができる。また、‘R’は復元された画素を示し、VAは垂直の方向性を示し、HAは水平の方向性を示す。
例えば、BA方法に基づいてALF適用の対象画素が画面内に符号化されたブロックに含まれ、画面間に符号化された周辺ブロックの画素にエラーが発生した場合を仮定する。このとき、周辺ブロックのうち画面間に符号化されたブロックの画素は使用せずに、対象ブロック内の画面内に符号化された画素のみを利用してフィルタを分類することができる。これは画面内に符号化されたブロックの画素にエラーが伝播されることを防止するためである。または、周辺ブロックのうち、画面間に符号化されたブロックの画素は使用せずに、画面間に符号化されたブロックの画素を画面内に符号化されたブロックの画素に変えてフィルタを分類することができる。例えば、図9において、‘R(0,0)’位置で水平又は垂直の方向性を判断する場合、画面間ブロックに含まれている‘R(-1,0)’又は‘R(0,-1)’値を画面内ブロックの値に変えた後、方向性を判断することができる。または、フィルタを分類しないこともある。
図10は、提案された映像符号化方法で符号化パラメータを利用してALFを適用する場合の一例を示す。
ALFが適用される時にもALF適用の対象ブロック又は対象ブロックの周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータに基づいて決定されることができる。符号化パラメータは、タイルの境界を含み、ALFは、タイルの境界に基づいて適用されることができる。例えば、ALFがタイルの境界を越えて適用されないこともある。または、符号化パラメータは、スライスの境界を含み、ALFは、スライスの境界に基づいて適用されることができる。ALFは、スライスの境界を越えて適用されないこともある。
または、ALF適用の対象画素が画面内に符号化されたブロックに含まれ、画面間に符号化された周辺ブロックの画素にエラーが発生した場合を仮定すると、周辺ブロックのうち画面間に符号化されたブロックの画素は使用せずに、対象ブロック内又は周辺ブロックのうち画面内に符号化された画素のみを利用してALFを適用することができる。これは画面内に符号化されたブロックの画素にエラーが伝播されることを防止するためである。図10-(a)の4×4ブロックの各画素値に図8-(a)のフィルタシェイプを適用する場合、フィルタリング対象画素の位置は、中央部にある‘9’となり、周辺の画素値と該当する位置のフィルタ係数を利用してフィルタを適用する。このとき、図10-(b)のようにフィルタ係数が画面内に符号化されたブロックに含まれている場合にのみフィルタが適用される。即ち、画素値i、j、k、l、m、n、o、pに対してのみフィルタを適用することができる。または、周辺ブロックのうち、画面間に符号化されたブロックの画素は使用せずに、画面間に符号化されたブロックの画素を画面内に符号化されたブロックの画素に変えてALFを適用することができる。または、ALFを適用しないこともある。
符号化器は、ALF適用指示子及びALFパラメータに基づいてALFを適用することができる。ALFは、ALF適用の対象ブロック又は対象ブロックの周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータに基づいて適用されることができる。
以上の過程を総合すると、符号化器は、一つのスライスを符号化ツリーブロック(coding tree block)構造に同期化し、CU単位にフィルタ実行可否、フィルタ実行最大深さ、フィルタ予測方法、フィルタ分類方法、フィルタシェイプ、フィルタ係数などをRDOを利用して決定し、決定された最適のALFパラメータを利用してALFを適用することができる。このようなALFパラメータは、エントロピー符号化されて復号化器に送信されることができる。
以上で説明した制限されたループフィルタに基づく映像符号化方法は、映像復号化方法にもそのまま適用されることができる。即ち、復号化器は、符号化器から送信される制限されたループフィルタ指示子、ALF適用指示子、ALFパラメータなどを受信してパーシングし、これに基づいてALFを適用する。
図11は、提案された映像復号化方法の一実施例を示す。
ステップS400において、復号化器は、制限されたループフィルタ指示子を符号化器から受信する。表11は、ピクチャパラメータセットに挿入されている制限されたループフィルタ指示子の一例を示す。
Figure 2023145724000012
表11において、constrained_intra_pred_flagの値が1の場合、即ち、制限されたイントラ予測が実行される場合、復号化器は、constrained_in_loop_filter_flagをパーシングして制限されたインループフィルタの適用可否を決定することができる。constrained_in_loop_filter_flagの値が1の場合、制限されたインループフィルタを適用することを指示することができ、constrained_in_loop_filter_flagの値が0の場合、制限されたインループフィルタを適用しないことを指示することができる。制限されたインループフィルタの適用対象は、デブロッキングフィルタ、オフセット補償、ALFのうち少なくとも一つ以上である。
ステップS410において、復号化器は、ALF適用可否を指示するALF適用指示子を符号化器から受信する。復号化器は、ビットストリーム内のシーケンスパラメータセット、ピクチャパラメータセット、適応パラメータセット又はスライスヘッダなどに含まれて送信されるALF適用指示子adaptive_loop_filter_enabled_flagをパーシングしてALF適用可否を決定することができる。また、復号化器は、輝度成分と色差成分の各々にALF適用可否を決定する情報又はCU単位のALF適用可否に対する情報などをビットストリームからパーシングすることができる。
ステップS420において、復号化器は、ALFパラメータを符号化器から受信する。
復号化器は、符号化器から送信されるALFパラメータをパーシングすることができる。ALFパラメータは、フィルタシェイプ、フィルタ係数、フィルタ分類方法、フィルタインデックス、フィルタ予測方法、及びフィルタ実行最大深さのうち少なくとも一つ以上を含むことができる。例えば、復号化器は、ビットストリームをパーシングしてフィルタシェイプ及び/又はフィルタ係数を決定することができる。このとき、フィルタ係数の個数は、一つ以上であり、異なる次数の指数ゴロムコードに復号化されることができる。また、フィルタ係数を効率的に復号化するためにフィルタ係数間は、DPCMなどのような方法により予測復号化されることができ、あるフィルタ係数は、他のフィルタ係数の和から予測復号化されることができる。また、フィルタ分類手段としてRA方法とBA方法のうち一つの方法を利用してフィルタを異なって選択することができる。例えば、符号化器が送信したalf_region_adaptation_flagをパーシングして‘1’の場合、RA方法によりフィルタを分類し、‘0’の場合、BA方法によりフィルタを分類することができる。RA方法が使われる場合、分割された映像領域当たり複数のフィルタのうちいずれか一つのフィルタが選択されることができ、BA方法が使われる場合、画素の変化量及び方向性を考慮して複数のフィルタのうちいずれか一つのフィルタが選択されることができる。このとき、どのフィルタが選択されたかを指示するためにALFパラメータ内のフィルタインデックスを利用することができる。
ALFの適用対象画素が属するブロックが画面内に符号化され、周辺画素が属するブロックが画面間に符号化された場合、ブロック単位の水平又は垂直の方向性を判断する時、画面内ブロックの画素のみを利用して判断し、これに対応されるフィルタを決定することができる。例えば、図9において、方向性判断のためにR(0,0)とR(0,2)、R(2,0)とR(2,2)位置で図9の数式を適用することができ、図9において、斜線が引かれている部分が画面間に符号化され、斜線が引かれていない部分が画面内に符号化された場合、復号化器は、ALFの適用対象画素及び周辺画素の両方ともが画面内に属するR(2,2)位置でのみ方向性を判断し、適用するフィルタを決定することができる。
一方、ALFパラメータは、ALF適用の対象ブロック又は対象ブロックの周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータに基づいて決定されることができる。
ステップS430において、復号化器は、ALF適用指示子及びALFパラメータに基づいてALFを適用する。復号化器は、ALF適用指示子及びALFパラメータに基づいてALFを適用することができる。ALFは、ALF適用の対象ブロック又は対象ブロックの周辺ブロックのうち少なくとも一つ以上のブロックの符号化パラメータに基づいて適用されることができる。ALFの適用対象画素が属するブロックが画面内に符号化され、周辺画素が画面間に符号化されたブロックに属する場合、ALFの適用対象画素に対してALFを適用しないこともある。
図12は、提案された映像復号化方法で使われるフィルタシェイプの一例を示す。図12のようなフィルタシェイプで‘9’の位置の画素にALFを適用する場合、適用対象画素周辺の一つ以上の画素が画面間に符号化されたブロックに属する場合、対象画素にALFを適用しないこともある。
本発明は、ハードウェア、ソフトウェア又はそれらの組合せで具現されることができる。ハードウェア具現において、前述した機能を遂行するためにデザインされたASIC(application specific integrated circuit)、DSP(digital signal processing)、PLD(programmable logic device)、FPGA(field programmable gate array)、プロセッサ、制御器、マイクロプロセッサ、他の電子ユニット又はそれらの組合せで具現されることができる。ソフトウェア具現において、前述した機能を遂行するモジュールで具現されることができる。ソフトウェアは、メモリユニットに格納されることができ、プロセッサにより実行される。メモリユニットやプロセッサは、当業者によく知られた多様な手段を採用することができる。
前述した例示的なシステムにおいて、方法は、一連のステップ又はブロックで順序図に基づいて説明されているが、本発明は、ステップの順序に限定されるものではなく、あるステップは、前述と異なるステップと、異なる順序に又は同時に発生することができる。また、当業者であれば、順序図に示すステップが排他的でなく、他のステップが含まれ、又は順序図の一つ又はそれ以上のステップが本発明の範囲に影響を及ぼさずに削除可能であることを理解することができる。

Claims (7)

  1. 映像復号化方法において、
    ビットストリームから、第1の制限されたオフセット補償指示子及び第2の制限されたオフセット補償指示子を受信するステップであって、前記第1の制限されたオフセット補償指示子はSAO補償がタイルの境界を越えて適用されるか否かを指示し、前記第2の制限されたオフセット補償指示子はSAO補償がスライスの境界を越えて適用されるか否かを指示する、ステップと、
    前記ビットストリームから、SAO補償の実行可否を指示するSAO補償指示子を受信するステップ、
    前記ビットストリームから、オフセット値を含むSAOパラメータを受信するステップ、
    映像の画素を復元するステップ、及び、
    前記第1の制限されたオフセット補償指示子、前記第2の制限されたオフセット補償指示子、前記SAO補償指示子及び前記SAOパラメータに基づいて、前記復元された映像の画素にSAO補償を実行するステップ、を含み、
    前記オフセット値は、パーシングされたオフセット値と、SAO補償の対象画素値及び二つの周辺画素値間の比較との両方に基づいて決定されることを特徴とする映像復号化方法。
  2. 前記SAOパラメータは、オフセットタイプ及びオフセット種類のうち少なくとも一つ以上をさらに含むことを特徴とする請求項1に記載の方法。
  3. 前記SAO補償指示子は、輝度成分と色差成分の各々に関して受信されることを特徴とする請求項1に記載の方法。
  4. 映像符号化方法において、
    第1の制限されたオフセット補償指示子及び第2の制限されたオフセット補償指示子を決定するステップであって、前記第1の制限されたオフセット補償指示子はSAO補償がタイルの境界を越えて適用されるか否かを指示し、前記第2の制限されたオフセット補償指示子はSAO補償がスライスの境界を越えて適用されるか否かを指示する、ステップと、
    SAO補償の実行可否を指示するSAO補償指示子を決定するステップ、
    オフセット値を含むSAOパラメータを決定するステップ、
    映像の画素を復元するステップ、及び
    前記第1の制限されたオフセット補償指示子、前記第2の制限されたオフセット補償指示子、前記SAO補償指示子及び前記SAOパラメータに基づいて、前記復元された映像の画素にSAO補償を実行するステップ、を含み、
    前記オフセット値は、パーシングされたオフセット値と、SAO補償の対象画素値及び二つの周辺画素値間の比較との両方に基づいて決定されることを特徴とする映像符号化方法。
  5. 前記SAOパラメータは、オフセットタイプ及びオフセット種類のうち少なくとも一つ以上をさらに含むことを特徴とする請求項4に記載の方法。
  6. 前記SAO補償指示子は、輝度成分と色差成分の各々に関して受信されることを特徴とする請求項4に記載の方法。
  7. 映像符号化装置によって生成されたビットストリームを送信する方法であって、
    第1の制限されたオフセット補償指示子及び第2の制限されたオフセット補償指示子を決定するステップであって、前記第1の制限されたオフセット補償指示子はSAO補償がタイルの境界を越えて適用されるか否かを指示し、前記第2の制限されたオフセット補償指示子はSAO補償がスライスの境界を越えて適用されるか否かを指示する、ステップと、
    SAO補償の実行可否を指示するSAO補償指示子を決定するステップ、
    オフセット値を含むSAOパラメータを決定するステップ、
    映像の画素を復元するステップ、及び
    前記第1の制限されたオフセット補償指示子、前記第2の制限されたオフセット補償指示子、前記SAO補償指示子及び前記SAOパラメータに基づいて、前記復元された映像の画素にSAO補償を実行するステップ、を含み、
    前記オフセット値は、パーシングされたオフセット値と、SAO補償の対象画素値及び二つの周辺画素値間の比較との両方に基づいて決定されることを特徴とするビットストリーム送信方法。
JP2023127350A 2011-09-28 2023-08-03 映像復号化方法、映像符号化方法およびビットストリーム送信方法 Pending JP2023145724A (ja)

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
KR20110098601 2011-09-28
KR10-2011-0098601 2011-09-28
KR1020120019999A KR20130034566A (ko) 2011-09-28 2012-02-28 제한된 오프셋 보상 및 루프 필터를 기반으로 하는 영상 부호화 및 복호화 방법 및 그 장치
KR10-2012-0019999 2012-02-28
KR1020120039412A KR20130034570A (ko) 2011-09-28 2012-04-16 제한된 오프셋 보상 및 루프 필터를 이용한 영상 부호화/복호화 방법 및 그 장치
KR10-2012-0039412 2012-04-16
KR10-2012-0107639 2012-09-27
KR1020120107639A KR101356450B1 (ko) 2011-09-28 2012-09-27 제한된 오프셋 보상 및 루프 필터를 기반으로 하는 영상 부호화 및 복호화 방법 및 그 장치
JP2019175804A JP2020017986A (ja) 2011-09-28 2019-09-26 映像復号化方法、映像符号化方法および記録媒体
JP2021184936A JP2022043032A (ja) 2011-09-28 2021-11-12 映像復号化方法、映像符号化方法およびビットストリーム送信方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021184936A Division JP2022043032A (ja) 2011-09-28 2021-11-12 映像復号化方法、映像符号化方法およびビットストリーム送信方法

Publications (1)

Publication Number Publication Date
JP2023145724A true JP2023145724A (ja) 2023-10-11

Family

ID=48436669

Family Applications (7)

Application Number Title Priority Date Filing Date
JP2014533205A Pending JP2014531851A (ja) 2011-09-28 2012-09-27 制限されたオフセット補償及びループフィルタに基づく映像符号化及び復号化方法、並びにその装置
JP2014083073A Pending JP2014171227A (ja) 2011-09-28 2014-04-14 制限されたオフセット補償及びループフィルタに基づく映像符号化及び復号化方法、並びにその装置
JP2015103817A Pending JP2015181270A (ja) 2011-09-28 2015-05-21 制限されたオフセット補償及びループフィルタに基づく映像符号化及び復号化方法、並びにその装置
JP2017007873A Pending JP2017108424A (ja) 2011-09-28 2017-01-19 映像復号化方法および映像符号化方法
JP2019175804A Pending JP2020017986A (ja) 2011-09-28 2019-09-26 映像復号化方法、映像符号化方法および記録媒体
JP2021184936A Pending JP2022043032A (ja) 2011-09-28 2021-11-12 映像復号化方法、映像符号化方法およびビットストリーム送信方法
JP2023127350A Pending JP2023145724A (ja) 2011-09-28 2023-08-03 映像復号化方法、映像符号化方法およびビットストリーム送信方法

Family Applications Before (6)

Application Number Title Priority Date Filing Date
JP2014533205A Pending JP2014531851A (ja) 2011-09-28 2012-09-27 制限されたオフセット補償及びループフィルタに基づく映像符号化及び復号化方法、並びにその装置
JP2014083073A Pending JP2014171227A (ja) 2011-09-28 2014-04-14 制限されたオフセット補償及びループフィルタに基づく映像符号化及び復号化方法、並びにその装置
JP2015103817A Pending JP2015181270A (ja) 2011-09-28 2015-05-21 制限されたオフセット補償及びループフィルタに基づく映像符号化及び復号化方法、並びにその装置
JP2017007873A Pending JP2017108424A (ja) 2011-09-28 2017-01-19 映像復号化方法および映像符号化方法
JP2019175804A Pending JP2020017986A (ja) 2011-09-28 2019-09-26 映像復号化方法、映像符号化方法および記録媒体
JP2021184936A Pending JP2022043032A (ja) 2011-09-28 2021-11-12 映像復号化方法、映像符号化方法およびビットストリーム送信方法

Country Status (8)

Country Link
US (1) US9270990B2 (ja)
EP (5) EP2763411A4 (ja)
JP (7) JP2014531851A (ja)
KR (20) KR20130034566A (ja)
CN (5) CN105007497B (ja)
BR (5) BR122014023991B1 (ja)
IN (1) IN2014CN03108A (ja)
WO (1) WO2013048151A1 (ja)

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9204148B1 (en) 2011-09-28 2015-12-01 Electronics And Telecommunications Research Institute Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor
US9204171B1 (en) 2011-09-28 2015-12-01 Electronics And Telecommunications Research Institute Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor
GB201119206D0 (en) * 2011-11-07 2011-12-21 Canon Kk Method and device for providing compensation offsets for a set of reconstructed samples of an image
US9253482B2 (en) * 2011-11-08 2016-02-02 Texas Insturments Incorporated Method and apparatus for sample adaptive offset without sign coding
US9277194B2 (en) 2011-11-08 2016-03-01 Texas Instruments Incorporated Method and apparatus for image and video coding using hierarchical sample adaptive band offset
US9749645B2 (en) * 2012-06-22 2017-08-29 Microsoft Technology Licensing, Llc Coded-block-flag coding and derivation
KR101459935B1 (ko) 2013-08-12 2014-11-07 현대자동차주식회사 자동화 수동변속기
JP6253406B2 (ja) * 2013-12-27 2017-12-27 キヤノン株式会社 画像符号化装置、撮像装置、画像符号化方法、及びプログラム
KR101677242B1 (ko) * 2014-02-18 2016-11-17 한국전자통신연구원 컨볼루션 기법 기반의 고속 적응적 샘플 오프셋 필터링 장치 및 방법
US20150237378A1 (en) * 2014-02-20 2015-08-20 Mediatek Inc. Method for controlling sample adaptive offset filtering applied to different partial regions in one frame based on different weighting parameters and related sample adaptive offset filter
KR102298599B1 (ko) * 2014-04-29 2021-09-03 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 샘플 적응 오프셋 필터링에 대한 인코더측 결정
KR102276854B1 (ko) * 2014-07-31 2021-07-13 삼성전자주식회사 인루프 필터 파라미터 예측을 사용하는 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
CN105635732B (zh) * 2014-10-30 2018-12-14 联想(北京)有限公司 自适应样点补偿编码、对视频码流进行解码的方法及装置
EP3203738A4 (en) * 2014-10-31 2017-10-04 Samsung Electronics Co., Ltd. Video encoding method applying multi-offset scheme and apparatus therefor, and video decoding method and apparatus therefor
US9872026B2 (en) 2015-06-12 2018-01-16 Intel Corporation Sample adaptive offset coding
CN105306940B (zh) * 2015-10-27 2019-10-18 中星技术股份有限公司 一种视频编解码样值偏移补偿中边界补偿模式处理方法
KR20170058869A (ko) 2015-11-18 2017-05-29 한국전자통신연구원 인루프 필터를 이용한 비디오 복호화 방법 및 이를 위한 장치
EP3220643A1 (en) * 2016-03-14 2017-09-20 Thomson Licensing Method and device for encoding at least one image unit, and method and device for decoding a stream representative of at least one image unit
US10623738B2 (en) 2017-04-06 2020-04-14 Futurewei Technologies, Inc. Noise suppression filter
CN110692249A (zh) * 2017-04-11 2020-01-14 Vid拓展公司 使用面部连续性的360度视频编码
EP3632267A4 (en) 2017-05-31 2020-11-11 Kurabe Industrial Co., Ltd. VENTILATION MAT
EP3685585A1 (en) * 2017-09-20 2020-07-29 Vid Scale, Inc. Handling face discontinuities in 360-degree video coding
KR20190056888A (ko) 2017-11-17 2019-05-27 삼성전자주식회사 비디오 부호화 장치 및 방법
US10878547B2 (en) 2018-03-20 2020-12-29 Electronics And Telecommunications Research Institute Electronic device for correcting dark images in real time
JP6892555B2 (ja) * 2018-03-29 2021-06-23 日本放送協会 画像符号化装置、画像復号装置、及びプログラム
KR102354261B1 (ko) 2018-06-12 2022-01-20 주식회사 엘지화학 패턴화 전극접착층이 구비된 전기화학소자용 분리막 및 상기 분리막의 제조방법
TWI803648B (zh) 2018-06-12 2023-06-01 南韓商Lg化學股份有限公司 含無機塗層的電化學裝置用之隔板及彼之製造方法
KR20230004921A (ko) * 2019-03-07 2023-01-06 엘지전자 주식회사 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩
KR102491959B1 (ko) * 2019-03-11 2023-01-27 엘지전자 주식회사 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩
US11159791B2 (en) * 2019-03-16 2021-10-26 Mediatek Inc. Method and apparatus for signaling adaptive loop filter parameters in video coding
CN113785571A (zh) 2019-04-03 2021-12-10 Lg 电子株式会社 基于自适应环路滤波器的视频或图像编译
WO2020204414A1 (ko) * 2019-04-03 2020-10-08 엘지전자 주식회사 적응적 루프 필터를 사용하는 비디오 또는 영상 코딩
US20220217405A1 (en) * 2019-04-03 2022-07-07 Lg Electronics Inc. Video or image coding for modifying reconstructed picture
CN110113603A (zh) * 2019-04-22 2019-08-09 屠晓 高清视频处理终端
US20220256201A1 (en) * 2019-05-03 2022-08-11 Mediatek Inc. Methods and Apparatuses of Syntax Signaling and Referencing Constraint in Video Coding System
KR20210135337A (ko) * 2019-05-14 2021-11-12 엘지전자 주식회사 적응적 루프 필터 기반 비디오 또는 영상 코딩
US20220248029A1 (en) * 2019-06-19 2022-08-04 Electronics And Telecommunications Research Institute Image encoding/decoding method and device, and recording medium for storing bitstream
WO2020262915A1 (ko) * 2019-06-24 2020-12-30 엘지전자 주식회사 Alf 또는 lmcs를 사용하는 비디오 또는 영상 코딩
KR20220019243A (ko) * 2019-07-08 2022-02-16 엘지전자 주식회사 인루프 필터링 기반 비디오 또는 영상 코딩
KR20210152576A (ko) 2019-07-09 2021-12-15 엘지전자 주식회사 디블록킹 필터링에 기반한 영상 코딩 방법 및 그 장치
MX2022000354A (es) * 2019-07-11 2022-02-03 Samsung Electronics Co Ltd Metodo y aparato de decodificacion de video, y metodo y aparato de codificacion de video.
JP7377953B2 (ja) * 2019-08-19 2023-11-10 フラウンホッファー-ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ アクセスユニットデリミタおよび適応パラメータセットの使用
WO2021054677A1 (ko) * 2019-09-18 2021-03-25 주식회사 비원 영상기술연구소 인-루프 필터 기반의 영상 부호화/복호화 방법 및 장치
CA3151453A1 (en) 2019-09-18 2021-03-25 Image Technology, Inc. In-loop filter-based image encoding/decoding method and apparatus
US11758133B2 (en) * 2019-10-31 2023-09-12 Apple Inc Flexible block partitioning structures for image/video compression and processing
CN115053522A (zh) * 2019-12-12 2022-09-13 Lg电子株式会社 采用自适应环路滤波器的视频或图像编码
MX2022006965A (es) * 2019-12-12 2022-09-19 Lg Electronics Inc Método y dispositivo para señalización de información de imagen.
WO2021118261A1 (ko) * 2019-12-12 2021-06-17 엘지전자 주식회사 영상 정보를 시그널링하는 방법 및 장치
JP7375200B2 (ja) * 2019-12-12 2023-11-07 エルジー エレクトロニクス インコーポレイティド ピクチャレベルまたはスライスレベルで適用される画像情報をシグナリングする方法及び装置
WO2021118266A1 (ko) * 2019-12-12 2021-06-17 엘지전자 주식회사 디블록킹 필터링을 사용하는 영상 디코딩 방법 및 장치
JP2023513788A (ja) * 2020-02-14 2023-04-03 エルジー エレクトロニクス インコーポレイティド フィルタ利用可能情報を選択的にシグナリングする画像符号化/復号化方法及び装置、並びにビットストリームを伝送する方法

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2810834A1 (fr) 2000-06-27 2001-12-28 Thomson Multimedia Sa Methode d'affichage de sequences d'emissions audiovisuelles a themes
DE60204038T2 (de) * 2001-11-02 2006-01-19 Matsushita Electric Industrial Co., Ltd., Kadoma Vorrichtung zum codieren bzw. decodieren eines audiosignals
US7599438B2 (en) * 2003-09-07 2009-10-06 Microsoft Corporation Motion vector block pattern coding and decoding
EP1574995A1 (en) 2004-03-12 2005-09-14 Thomson Licensing S.A. Method for encoding interlaced digital video data
KR20050099256A (ko) 2004-04-09 2005-10-13 삼성전자주식회사 디블록킹을 이용한 영상처리 장치와 영상처리 방법
CN100551072C (zh) * 2006-06-05 2009-10-14 华为技术有限公司 一种编码中量化矩阵选择方法、装置及编解码方法及系统
CN101491102B (zh) 2006-07-20 2011-06-08 高通股份有限公司 将后处理视为在解码器中执行的视频编码
US9001899B2 (en) * 2006-09-15 2015-04-07 Freescale Semiconductor, Inc. Video information processing system with selective chroma deblock filtering
CN101395922A (zh) * 2006-11-17 2009-03-25 Lg电子株式会社 用于解码/编码视频信号的方法及装置
KR101349836B1 (ko) * 2006-11-17 2014-01-10 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
JP5026092B2 (ja) * 2007-01-12 2012-09-12 三菱電機株式会社 動画像復号装置および動画像復号方法
KR20080114482A (ko) * 2007-06-26 2008-12-31 삼성전자주식회사 다시점 비디오 코딩에서 휘도 보상 방법 및 장치
US20090154567A1 (en) * 2007-12-13 2009-06-18 Shaw-Min Lei In-loop fidelity enhancement for video compression
US8195001B2 (en) * 2008-04-09 2012-06-05 Intel Corporation In-loop adaptive wiener filter for video coding and decoding
US8804831B2 (en) * 2008-04-10 2014-08-12 Qualcomm Incorporated Offsets at sub-pixel resolution
KR101620441B1 (ko) * 2009-06-17 2016-05-24 주식회사 아리스케일 복수의 보간 필터링 방법 및 이를 적용한 부호화 장치
KR20110068792A (ko) * 2009-12-16 2011-06-22 한국전자통신연구원 적응적 영상 부호화 장치 및 방법
US20120294353A1 (en) * 2011-05-16 2012-11-22 Mediatek Inc. Apparatus and Method of Sample Adaptive Offset for Luma and Chroma Components
US20130003829A1 (en) * 2011-07-01 2013-01-03 Kiran Misra System for initializing an arithmetic coder
US10070152B2 (en) * 2011-08-24 2018-09-04 Texas Instruments Incorporated Sample adaptive offset (SAO) parameter signaling
US9584819B2 (en) * 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding
US10097839B2 (en) * 2014-12-19 2018-10-09 Qualcomm Incorporated Palette mode for subsampling format

Also Published As

Publication number Publication date
KR20170059950A (ko) 2017-05-31
BR122020015286B1 (pt) 2023-11-14
CN104902284B (zh) 2018-10-09
KR101977738B1 (ko) 2019-05-15
EP2763411A1 (en) 2014-08-06
BR122014023991A2 (pt) 2019-08-20
KR20190050958A (ko) 2019-05-14
US9270990B2 (en) 2016-02-23
CN105007497A (zh) 2015-10-28
KR20130095240A (ko) 2013-08-27
JP2015181270A (ja) 2015-10-15
BR122020015284B1 (pt) 2023-05-16
KR20140066677A (ko) 2014-06-02
KR20180067486A (ko) 2018-06-20
KR102194038B1 (ko) 2020-12-22
KR20180067487A (ko) 2018-06-20
BR112014007434B1 (pt) 2023-03-21
BR122020015282B1 (pt) 2023-05-16
CN104202610A (zh) 2014-12-10
KR102337652B1 (ko) 2021-12-09
CN103959794B (zh) 2016-09-14
KR20140060478A (ko) 2014-05-20
EP3154267A2 (en) 2017-04-12
JP2014171227A (ja) 2014-09-18
EP3965427A1 (en) 2022-03-09
KR101366650B1 (ko) 2014-02-26
KR101977740B1 (ko) 2019-05-15
KR20130095242A (ko) 2013-08-27
KR20180067485A (ko) 2018-06-20
EP3145196A2 (en) 2017-03-22
KR20210153572A (ko) 2021-12-17
EP2763411A4 (en) 2015-10-07
JP2020017986A (ja) 2020-01-30
JP2014531851A (ja) 2014-11-27
KR101744024B1 (ko) 2017-06-07
KR20200092300A (ko) 2020-08-03
KR20240018540A (ko) 2024-02-13
KR20180067488A (ko) 2018-06-20
EP3154267A3 (en) 2017-08-23
JP2017108424A (ja) 2017-06-15
KR101868121B1 (ko) 2018-06-18
CN103959794A (zh) 2014-07-30
KR101977739B1 (ko) 2019-05-15
CN105007497B (zh) 2019-04-09
KR20130034570A (ko) 2013-04-05
CN104902286B (zh) 2019-01-18
KR102030425B1 (ko) 2019-10-10
US20140286396A1 (en) 2014-09-25
EP3145196A3 (en) 2017-08-23
KR101356450B1 (ko) 2014-02-05
KR20130034614A (ko) 2013-04-05
KR20130095241A (ko) 2013-08-27
CN104902286A (zh) 2015-09-09
KR102631239B1 (ko) 2024-01-31
EP2887674A3 (en) 2015-10-07
WO2013048151A1 (ko) 2013-04-04
KR101977741B1 (ko) 2019-05-15
IN2014CN03108A (ja) 2015-07-03
EP2887674A2 (en) 2015-06-24
KR20200143333A (ko) 2020-12-23
KR20230033014A (ko) 2023-03-07
KR102140328B1 (ko) 2020-07-31
JP2022043032A (ja) 2022-03-15
BR112014007434A2 (pt) 2017-04-04
CN104902284A (zh) 2015-09-09
KR20190113737A (ko) 2019-10-08
KR20130034566A (ko) 2013-04-05
BR122014023991B1 (pt) 2023-03-14

Similar Documents

Publication Publication Date Title
JP2023145724A (ja) 映像復号化方法、映像符号化方法およびビットストリーム送信方法
US9148663B2 (en) Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor
US9204171B1 (en) Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor
US9204148B1 (en) Method for encoding and decoding images based on constrained offset compensation and loop filter, and apparatus therefor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230803