JP2020080568A - 映像符号化/復号化方法及びその装置 - Google Patents

映像符号化/復号化方法及びその装置 Download PDF

Info

Publication number
JP2020080568A
JP2020080568A JP2020027485A JP2020027485A JP2020080568A JP 2020080568 A JP2020080568 A JP 2020080568A JP 2020027485 A JP2020027485 A JP 2020027485A JP 2020027485 A JP2020027485 A JP 2020027485A JP 2020080568 A JP2020080568 A JP 2020080568A
Authority
JP
Japan
Prior art keywords
prediction
pixel
block
filter
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020027485A
Other languages
English (en)
Other versions
JP7053696B2 (ja
Inventor
リー、ジン、ホ
Jin-Ho Lee
キム、フィ、ヨン
Hui Yong Kim
リム、ソン、チャン
Sung Chang Lim
チェ、ジン、ス
Jin Soo Choi
キム、ジン、ウン
Jin Woong Kim
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=47906320&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2020080568(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of JP2020080568A publication Critical patent/JP2020080568A/ja
Priority to JP2021173992A priority Critical patent/JP7241148B2/ja
Application granted granted Critical
Publication of JP7053696B2 publication Critical patent/JP7053696B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Abstract

【課題】映像符号化/復号化効率を向上させることができる映像符号化方法及び装置を提供する。【解決手段】方法は、現在ブロックに対してイントラ予測を実行して予測ブロックを生成するステップ、現在ブロックのイントラ予測モードに基づいて、予測ブロック内のフィルタリング対象ピクセルに対するフィルタリングを実行して最終予測ブロックを生成するステップ及び現在ブロックに対応する復元された差分ブロック及び最終予測ブロックに基づいて復元ブロックを生成するステップを含む。【選択図】図10

Description

本発明は、映像処理に関し、より詳しくは、イントラ予測方法及びその装置に関する。
最近、HD(High Definition)解像度を有する放送サービスが韓国内だけでなく、世界的に拡大されるにつれて、多くのユーザが高解像度、高画質の映像に慣れており、これにより、多くの機関が次世代映像機器に対する開発に拍車をかけている。また、HDTVと共にHDTVの4倍以上の解像度を有するUHD(Ultra High Definition)に対する関心が増大し、より高い解像度、高画質の映像に対する圧縮機術が要求されている。
映像圧縮のために、時間的に以前及び/又は以後のピクチャから、現在ピクチャに含まれているピクセル値を予測するインター(inter)予測技術、現在ピクチャ内のピクセル情報を利用して現在ピクチャに含まれているピクセル値を予測するイントラ(intra)予測技術、出現頻度が高いシンボル(symbol)に短い符号を割り当て、出現頻度が低いシンボルに長い符号を割り当てるエントロピー符号化技術などが使われることができる。
本発明の技術的課題は、映像符号化/復号化効率を向上させることができる映像符号化方法及び装置を提供することである。
本発明の他の技術的課題は、映像符号化/復号化効率を向上させることができる映像復号化方法及び装置を提供することである。
本発明の他の技術的課題は、映像符号化/復号化効率を向上させることができる予測ブロック生成方法及び装置を提供することである。
本発明の他の技術的課題は、映像符号化/復号化効率を向上させることができるイントラ予測方法及び装置を提供することである。
本発明の他の技術的課題は、映像符号化/復号化効率を向上させることができるフィルタリング実行方法及び装置を提供することである。
本発明の一実施形態は、映像復号化方法である。前記方法は、現在ブロックに対してイントラ予測を実行して予測ブロックを生成するステップ、前記現在ブロックのイントラ予測モード(intra prediction mode)に基づいて、前記予測ブロック内のフィルタリング対象ピクセルに対するフィルタリングを実行して最終予測ブロックを生成するステップ、及び前記現在ブロックに対応する復元された差分ブロック(以下、差分ブロックは、残差ブロックと混用して使われることができる)及び前記最終予測ブロックに基づいて復元ブロックを生成するステップを含み、前記フィルタリング対象ピクセルは、前記予測ブロック内のフィルタリング対象領域に含まれている予測ピクセルであり、前記フィルタリング対象ピクセルに適用されるフィルタタイプ(filter type)及び前記フィルタリング対象領域は、前記現在ブロックのイントラ予測モードに基づいて決定される。
前記現在ブロックのイントラ予測モードがDCモードの場合、前記フィルタリング対象領域は、前記予測ブロック内の最も左側に位置した1個の垂直ピクセルラインである左側垂直予測ピクセルライン及び前記予測ブロック内の最も上方に位置した1個の水平ピクセルラインである上方水平予測ピクセルラインを含む。
前記最終予測ブロック生成ステップでは、前記現在ブロックがルマ(luma)成分ブロックである場合、フィルタリングを実行し、前記現在ブロックがクロマ(chroma)成分ブロックである場合、フィルタリングを実行しない。
前記フィルタタイプは、フィルタ形状、フィルタタップ及び複数のフィルタ係数に対する情報を含み、前記最終予測ブロック生成ステップでは、前記現在ブロックの大きさに関係無しに、所定の固定されたフィルタタイプに基づいてフィルタリングを実行する。
前記フィルタリング対象ピクセルが前記予測ブロック内の最も左側上方に位置した左側上方予測ピクセルである場合、前記最終予測ブロック生成ステップでは、前記フィルタリング対象ピクセル、前記フィルタリング対象ピクセルの上方に隣接した上方参照ピクセル及び前記フィルタリング対象ピクセルの左側に隣接した左側参照ピクセルに基づいて3−タップフィルタを適用することによって前記フィルタリング対象ピクセルに対するフィルタリングを実行し、前記上方参照ピクセル及び前記左側参照ピクセルは、各々、前記現在ブロックに隣接した復元された参照ピクセルであり、前記3−タップフィルタで、前記フィルタリング対象ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は2/4であり、前記上方参照ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は1/4であり、前記左側参照ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は1/4である。
前記フィルタリング対象ピクセルが前記左側垂直予測ピクセルラインに含まれている予測ピクセルであり、且つ前記左側上方予測ピクセルでない場合、前記最終予測ブロック生成ステップでは、前記フィルタリング対象ピクセル及び前記フィルタリング対象ピクセルの左側に隣接した左側参照ピクセルに基づいて水平2−タップフィルタを適用することによって前記フィルタリング対象ピクセルに対するフィルタリングを実行し、前記左側参照ピクセルは、前記現在ブロックに隣接した復元された参照ピクセルであり、前記水平2−タップフィルタで、前記フィルタリング対象ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は3/4であり、前記左側参照ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は1/4である。
前記フィルタリング対象ピクセルが前記上方水平予測ピクセルラインに含まれている予測ピクセルであり、且つ前記左側上方予測ピクセルでない場合、前記最終予測ブロック生成ステップでは、前記フィルタリング対象ピクセル及び前記フィルタリング対象ピクセルの上方に隣接した上方参照ピクセルに基づいて垂直2−タップフィルタを適用することによって前記フィルタリング対象ピクセルに対するフィルタリングを実行し、前記上方参照ピクセルは、前記現在ブロックに隣接した復元された参照ピクセルであり、前記垂直2−タップフィルタで、前記フィルタリング対象ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は3/4であり、前記上方参照ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は1/4である。
本発明の他の実施形態は、映像復号化方法である。前記方法は、現在ブロックのイントラ予測モードに基づいて、前記現在ブロック内の予測対象ピクセルに対する予測を実行して予測ブロックを生成するステップ及び前記現在ブロックに対応する復元された差分ブロック及び前記最終予測ブロックに基づいて復元ブロックを生成するステップを含み、前記予測ブロック生成ステップでは、前記現在ブロックのイントラ予測モードが垂直(vertical)モードであり、且つ前記予測対象ピクセルが左側垂直ピクセルライン上のピクセルである場合、第1のオフセットに基づいて前記予測対象ピクセルに対する予測を実行し、前記現在ブロックのイントラ予測モードが水平(horizontal)モードであり、且つ前記予測対象ピクセルが上方水平ピクセルライン上のピクセルである場合、第2のオフセットに基づいて前記予測対象ピクセルに対する予測を実行し、前記左側垂直ピクセルラインは、前記現在ブロック内で最も左側に位置した1個の垂直ピクセルラインであり、前記上方水平ピクセルラインは、前記現在ブロック内で最も上方に位置した1個の水平ピクセルラインである。
前記予測ブロック生成ステップでは、前記現在ブロックのイントラ予測モードが垂直モードであり、且つ前記予測対象ピクセルが前記左側垂直ピクセルライン上のピクセルである場合、前記現在ブロックの上方に隣接した復元された参照ピクセルのうち、前記予測対象ピクセルと同一垂直ライン上に存在する第1の参照ピクセルのピクセル値に、前記第1のオフセット値を加えて前記予測対象ピクセルの予測値を導出し、前記第1のオフセット値は、前記予測対象ピクセルの左側に隣接した第2の参照ピクセルのピクセル値と、前記第1の参照ピクセルの左側に隣接した第3の参照ピクセルのピクセル値と、の差値に基づいて決定される。
前記予測ブロック生成ステップでは、前記現在ブロックがクロマ成分ブロックである場合、前記第1の参照ピクセルのピクセル値を前記予測対象ピクセルの予測値として決定する。
前記予測ブロック生成ステップでは、前記現在ブロックのイントラ予測モードが水平モードであり、且つ前記予測対象ピクセルが前記上方水平ピクセルライン上のピクセルである場合、前記現在ブロックの左側に隣接した復元された参照ピクセルのうち、前記予測対象ピクセルと同一水平ライン上に存在する第1の参照ピクセルのピクセル値に、前記第2のオフセット値を加えて前記予測対象ピクセルの予測値を導出し、前記第2のオフセット値は、前記予測対象ピクセルの上方に隣接した第2の参照ピクセルのピクセル値と、前記第1の参照ピクセルの上方に隣接した第3の参照ピクセルのピクセル値と、の差値に基づいて決定される。
前記予測ブロック生成ステップでは、前記現在ブロックがクロマ成分ブロックである場合、前記第1の参照ピクセルのピクセル値を前記予測対象ピクセルの予測値として決定する。
本発明の他の実施形態は、映像復号化装置である。前記装置は、現在ブロックに対してイントラ予測を実行して予測ブロックを生成する予測ブロック生成部、前記現在ブロックのイントラ予測モード(intra prediction mode)に基づいて、前記予測ブロック内のフィルタリング対象ピクセルに対するフィルタリングを実行して最終予測ブロックを生成するフィルタ部、及び前記現在ブロックに対応する復元された差分ブロック及び前記最終予測ブロックに基づいて復元ブロックを生成する復元ブロック生成部を含み、前記フィルタリング対象ピクセルは、前記予測ブロック内のフィルタリング対象領域に含まれている予測ピクセルであり、前記フィルタリング対象ピクセルに適用されるフィルタタイプ(filter type)及び前記フィルタリング対象領域は、前記現在ブロックのイントラ予測モードに基づいて決定される。
前記現在ブロックのイントラ予測モードがDCモードの場合、前記フィルタリング対象領域は、前記予測ブロック内の最も左側に位置した1個の垂直ピクセルラインである左側垂直予測ピクセルライン及び前記予測ブロック内の最も上方に位置した1個の水平ピクセルラインである上方水平予測ピクセルラインを含む。
前記フィルタリング対象ピクセルが前記予測ブロック内の最も左側上方に位置した左側上方予測ピクセルである場合、前記フィルタ部は、前記フィルタリング対象ピクセル、前記フィルタリング対象ピクセルの上方に隣接した上方参照ピクセル及び前記フィルタリング対象ピクセルの左側に隣接した左側参照ピクセルに基づいて3−タップフィルタを適用することによって前記フィルタリング対象ピクセルに対するフィルタリングを実行し、前記上方参照ピクセル及び前記左側参照ピクセルは、各々、前記現在ブロックに隣接した復元された参照ピクセルであり、前記3−タップフィルタで、前記フィルタリング対象ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は2/4であり、前記上方参照ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は1/4であり、前記左側参照ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は1/4である。
前記フィルタリング対象ピクセルが前記左側垂直予測ピクセルラインに含まれている予測ピクセルであり、且つ前記左側上方予測ピクセルでない場合、前記フィルタ部は、前記フィルタリング対象ピクセル及び前記フィルタリング対象ピクセルの左側に隣接した左側参照ピクセルに基づいて水平2−タップフィルタを適用することによって前記フィルタリング対象ピクセルに対するフィルタリングを実行し、前記左側参照ピクセルは、前記現在ブロックに隣接した復元された参照ピクセルであり、前記水平2−タップフィルタで、前記フィルタリング対象ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は3/4であり、前記左側参照ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は1/4である。
前記フィルタリング対象ピクセルが前記上方水平予測ピクセルラインに含まれている予測ピクセルであり、且つ前記左側上方予測ピクセルでない場合、前記フィルタ部は、前記フィルタリング対象ピクセル及び前記フィルタリング対象ピクセルの上方に隣接した上方参照ピクセルに基づいて垂直2−タップフィルタを適用することによって前記フィルタリング対象ピクセルに対するフィルタリングを実行し、前記上方参照ピクセルは、前記現在ブロックに隣接した復元された参照ピクセルであり、前記垂直2−タップフィルタで、前記フィルタリング対象ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は3/4であり、前記上方参照ピクセルに対応するフィルタタップに割り当てられたフィルタ係数は1/4である。
本発明の他の実施形態は、映像復号化装置である。前記装置は、現在ブロックのイントラ予測モードに基づいて、前記現在ブロック内の予測対象ピクセルに対する予測を実行して予測ブロックを生成する予測ブロック生成部及び前記現在ブロックに対応する復元された差分ブロック及び前記最終予測ブロックに基づいて復元ブロックを生成する復元ブロック生成部を含み、前記予測ブロック生成部は、前記現在ブロックのイントラ予測モードが垂直(vertical)モードであり、且つ前記予測対象ピクセルが左側垂直ピクセルライン上のピクセルである場合、第1のオフセットに基づいて前記予測対象ピクセルに対する予測を実行し、前記現在ブロックのイントラ予測モードが水平(horizontal)モードであり、且つ前記予測対象ピクセルが上方水平ピクセルライン上のピクセルである場合、第2のオフセットに基づいて前記予測対象ピクセルに対する予測を実行し、前記左側垂直ピクセルラインは、前記現在ブロック内で最も左側に位置した1個の垂直ピクセルラインであり、前記上方水平ピクセルラインは、前記現在ブロック内で最も上方に位置した1個の水平ピクセルラインである。
前記予測ブロック生成部は、前記現在ブロックのイントラ予測モードが垂直モードであり、且つ前記予測対象ピクセルが前記左側垂直ピクセルライン上のピクセルである場合、前記現在ブロックの上方に隣接した復元された参照ピクセルのうち、前記予測対象ピクセルと同一垂直ライン上に存在する第1の参照ピクセルのピクセル値に、前記第1のオフセット値を加えて前記予測対象ピクセルの予測値を導出し、前記第1のオフセット値は、前記予測対象ピクセルの左側に隣接した第2の参照ピクセルのピクセル値と、前記第1の参照ピクセルの左側に隣接した第3の参照ピクセルのピクセル値と、の差値に基づいて決定される。
前記予測ブロック生成部は、前記現在ブロックのイントラ予測モードが水平モードであり、且つ前記予測対象ピクセルが前記上方水平ピクセルライン上のピクセルである場合、前記現在ブロックの左側に隣接した復元された参照ピクセルのうち、前記予測対象ピクセルと同一水平ライン上に存在する第1の参照ピクセルのピクセル値に、前記第2のオフセット値を加えて前記予測対象ピクセルの予測値を導出し、前記第2のオフセット値は、前記予測対象ピクセルの上方に隣接した第2の参照ピクセルのピクセル値と、前記第1の参照ピクセルの上方に隣接した第3の参照ピクセルのピクセル値と、の差値に基づいて決定される。
本発明による映像符号化方法によると、映像符号化/復号化効率が向上することができる。
本発明による映像復号化方法によると、映像符号化/復号化効率が向上することができる。
本発明による予測ブロック生成方法によると、映像符号化/復号化効率が向上することができる。
本発明によるイントラ予測方法によると、映像符号化/復号化効率が向上することができる。
本発明によるフィルタリング実行方法によると、映像符号化/復号化効率が向上することができる。
本発明が適用される映像符号化装置の一実施例に係る構成を示すブロック図である。 本発明が適用される映像復号化装置の一実施例に係る構成を示すブロック図である。 一つのユニットが複数の下位ユニットに分割される実施例を概略的に示す概念図である。 イントラ予測過程の実施例を説明するための図面である。 イントラ予測過程の実施例を説明するための図面である。 プラナーモードでのイントラ予測方法の実施例を概略的に示す。 本発明による映像符号化方法の一実施例を概略的に示すフローチャートである。 詳述した差分ブロック生成過程の実施例を概略的に示す。 本発明による映像復号化方法の一実施例を概略的に示すフローチャートである。 詳述した差分ブロック生成過程の実施例を概略的に示す。 本発明によるフィルタリング実行方法の一実施例を概略的に示すフローチャートである。 現在ブロックに隣接した周辺ブロックの符号化パラメータに基づいてフィルタリング実行可否を決定する方法の実施例を概略的に示す。 現在ブロックに隣接した周辺ブロックの存在有無(及び/又は周辺ブロックが可用な(available)ブロックかどうか)に対する情報に基づいてフィルタリング実行可否を決定する方法の実施例を概略的に示す。 現在ブロックのイントラ予測モードに基づいてフィルタリング実行領域を決定する方法の実施例を概略的に示す。 現在ブロックの大きさ及び/又は深さに基づいてフィルタリング実行領域を決定する方法の実施例を概略的に示す。 現在ブロックに隣接した周辺ブロックの符号化モードに基づいてフィルタリング実行領域を決定する方法の実施例を概略的に示す。 現在ブロックのイントラ予測モードによるフィルタタイプ決定方法の実施例を示す。 現在ブロックのイントラ予測モードによるフィルタタイプ決定方法の実施例を示す。 図16a及び図16bの実施例に係るフィルタタイプ決定方法を簡略に示す。 現在ブロックの予測モードが垂直モード及び/又は水平モードである場合に適用されるフィルタタイプの実施例を概略的に示す。 本発明によるフィルタタイプの他の実施例を概略的に示す。 表9に適用されるイントラ予測モード及びフィルタタイプを説明するための図面である。
以下、図面を参照して本発明の実施形態に対して具体的に説明する。本明細書の実施例を説明するにあたって、関連した公知構成又は機能に対する具体的な説明が本明細書の要旨を不明にすると判断される場合にはその詳細な説明は省略する。
一構成要素が他の構成要素に“連結されている”又は“接続されている”と言及された場合、該当他の構成要素に直接的に連結されている、又は接続されていることもあるが、中間に他の構成要素が存在することもあると理解されなければならない。併せて、本発明において、特定構成を“含む”と記述する内容は、該当構成以外の構成を排除するものではなく、追加的な構成が本発明の実施又は本発明の技術的思想の範囲に含まれることができることを意味する。
第1、第2などの用語は、多様な構成要素の説明に使われることができるが、前記構成要素は、前記用語により限定されてはならない。前記用語は、一つの構成要素を他の構成要素から区別する目的にのみ使われる。例えば、本発明の権利範囲を外れない限り、第1の構成要素は第2の構成要素と命名することができ、同様に、第2の構成要素も第1の構成要素と命名することができる。
また、本発明の実施例に示す構成部は、互いに異なる特徴的な機能を示すために独立的に図示されるものであり、各構成部が分離されたハードウェアや一つのソフトウェア構成単位に構成されることを意味しない。即ち、各構成部は、説明の便宜上、それぞれの構成部として羅列して含むものであり、各構成部のうち少なくとも二つの構成部が統合されて一つの構成部からなり、又は一つの構成部が複数個の構成部に分けられて機能を遂行することができ、このような各構成部の統合された実施例及び分離された実施例も本発明の本質から外れない限り本発明の権利範囲に含まれる。
また、一部の構成要素は、本発明で本質的な機能を遂行する必須な構成要素ではなく、単に性能を向上させるための選択的構成要素である。本発明は、単に性能向上のために使われる構成要素を除いた本発明の本質を具現するのに必須な構成部のみを含んで具現されることができ、単に性能向上のために使われる選択的構成要素を除いた必須構成要素のみを含む構造も本発明の権利範囲に含まれる。
図1は、本発明が適用される映像符号化装置の一実施例に係る構成を示すブロック図である。
図1を参照すると、前記映像符号化装置100は、動き予測部111、動き補償部112、イントラ予測部120、スイッチ115、減算器125、変換部130、量子化部140、エントロピー符号化部150、逆量子化部160、逆変換部170、加算器175、フィルタ部180、及び参照ピクチャバッファ190を含む。
映像符号化装置100は、入力映像に対してイントラ(intra)モード又はインター(inter)モードに符号化を実行し、ビットストリームを出力することができる。イントラ予測は画面内予測を意味し、インター予測は画面間予測を意味する。イントラモードの場合、スイッチ115がイントラに転換され、インターモードの場合、スイッチ115がインターに転換されることができる。映像符号化装置100は、入力映像の入力ブロックに対する予測ブロックを生成した後、入力ブロックと予測ブロックとの差分(residual)を符号化することができる。
イントラモードの場合、イントラ予測部120は、現在ブロック周辺の既に符号化されたブロックのピクセル値を利用して空間的予測を実行することで、予測ブロックを生成することができる。
インターモードの場合、動き予測部111は、動き予測過程で参照ピクチャバッファ190に格納されている参照映像で入力ブロックと最もよくマッチされる領域を探して動きベクトルを求めることができる。動き補償部112は、動きベクトルを利用して動き補償を実行することによって予測ブロックを生成することができる。ここで、動きベクトルは、インター予測に使われる2次元ベクトルであり、現在符号化/復号化対象映像と参照映像との間のオフセットを示すことができる。
減算器125は、入力ブロックと生成された予測ブロックとの差分により残差ブロック(residual block)を生成することができる。変換部130は、残差ブロックに対して変換(transform)を実行することで、変換係数(transform coefficient)を出力することができる。そして、量子化部140は、入力された変換係数を量子化パラメータによって量子化し、量子化された係数(quantized coefficient)を出力することができる。
エントロピー符号化部150は、量子化部140で算出された値又は符号化過程で算出された符号化パラメータ値などに基づいてエントロピー符号化を実行することで、ビットストリーム(bit stream)を出力することができる。
エントロピー符号化が適用される場合、高い発生確率を有するシンボル(symbol)に少ない数のビットが割り当てられ、低い発生確率を有するシンボルに多い数のビットが割り当てられてシンボルが表現されることによって、符号化対象シンボルに対するビット列の大きさが減少されることができる。したがって、エントロピー符号化を介して映像符号化の圧縮性能が高まることができる。エントロピー符号化部150は、エントロピー符号化のために、指数ゴロム(exponential golomb)、CAVLC(Context−Adaptive Variable Length Coding)、CABAC(Context−Adaptive Binary Arithmetic Coding)のような符号化方法を使用することができる。
図1の実施例に係る映像符号化装置は、インター予測符号化、即ち、画面間予測符号化を実行するため、現在符号化された映像は、参照映像として使われるために復号化されて格納される必要がある。したがって、量子化された係数は、逆量子化部160で逆量子化され、逆変換部170で逆変換される。逆量子化、逆変換された係数は、加算器175を介して予測ブロックと加えられて復元ブロックが生成される。
復元ブロックは、フィルタ部180を経て、フィルタ部180は、デブロッキングフィルタ(deblocking filter)、SAO(Sample Adaptive Offset)、ALF(Adaptive Loop Filter)のうち少なくとも一つ以上を復元ブロック又は復元ピクチャに適用することができる。フィルタ部180は、適応的インループ(in−loop)フィルタと呼ばれることもある。デブロッキングフィルタは、ブロック間の境界に発生したブロック歪曲を除去することができる。SAOは、コーディングエラーを補償するために、ピクセル値に適正オフセット(offset)値を加えることができる。ALFは、復元された映像と元来の映像を比較した値に基づいてフィルタリングを実行することができる。フィルタ部180を経た復元ブロックは、参照ピクチャバッファ190に格納されることができる。
図2は、本発明が適用される映像復号化装置の一実施例に係る構成を示すブロック図である。
図2を参照すると、前記映像復号化装置200は、エントロピー復号化部210、逆量子化部220、逆変換部230、イントラ予測部240、動き補償部250、加算器255、フィルタ部260、及び参照ピクチャバッファ270を含む。
映像復号化装置200は、符号化器で出力されたビットストリームの入力を受けてイントラモード又はインターモードに復号化を実行することで、再構成された映像、即ち、復元映像を出力することができる。イントラモードの場合、スイッチがイントラに転換され、インターモードの場合、スイッチがインターに転換されることができる。映像復号化装置200は、入力を受けたビットストリームから残差ブロック(residual block)を得て予測ブロックを生成した後、残差ブロックと予測ブロックとを加えて再構成されたブロック、即ち、復元ブロックを生成することができる。
エントロピー復号化部210は、入力されたビットストリームを確率分布によってエントロピー復号化し、量子化された係数(quantized coefficient)形態のシンボルを含むシンボルを生成することができる。エントロピー復号化方法は、前述したエントロピー符号化方法と類似する。
エントロピー復号化方法が適用される場合、高い発生確率を有するシンボルに少ない数のビットが割り当てられ、低い発生確率を有するシンボルに多い数のビットが割り当てられてシンボルが表現されることによって、各シンボルに対するビット列の大きさが減少されることができる。したがって、エントロピー復号化方法を介して映像復号化の圧縮性能が高まることができる。
量子化された係数は、逆量子化部220で逆量子化され、逆変換部230で逆変換され、量子化された係数が逆量子化/逆変換された結果、残差ブロック(residual block)が生成されることができる。
イントラモードの場合、イントラ予測部240は、現在ブロック周辺の既に符号化されたブロックのピクセル値を利用して空間的予測を実行することで、予測ブロックを生成することができる。インターモードの場合、動き補償部250は、動きベクトル及び参照ピクチャバッファ270に格納されている参照映像を利用して動き補償を実行することによって予測ブロックを生成することができる。
残差ブロックと予測ブロックは、加算器255を介して加えられ、加えられたブロックは、フィルタ部260を経ることができる。フィルタ部260は、デブロッキングフィルタ、SAO、ALFのうち少なくとも一つ以上を復元ブロック又は復元ピクチャに適用することができる。フィルタ部260は、再構成された映像、即ち、復元映像を出力することができる。復元映像は、参照ピクチャバッファ270に格納されてインター予測に使われることができる。
以下、ユニット(unit)は、映像符号化及び復号化の単位を意味する。映像符号化及び復号化時の符号化又は復号化単位は、映像を分割して符号化又は復号化する時のその分割された単位を意味するため、符号化ユニット(CU:Coding Unit)、予測ユニット(PU:Prediction Unit)、変換ユニット(TU:Transform Unit)などで呼ばれることもある。また、後述される実施例におけるユニットは、ブロックと呼ばれることもある。一つのユニットは、大きさが小さい下位ユニットに分割されることができる。
図3は、一つのユニットが複数の下位ユニットに分割される実施例を概略的に示す概念図である。
一つのユニットは、ツリー構造(tree structure)下で深さ情報(depth)を有して階層的に分割されることができる。それぞれの分割された下位ユニットは、深さ情報を有することができる。前記深さ情報は、ユニットが分割された回数及び/又は程度を示すため、前記下位ユニットの大きさに対する情報を含むこともできる。
図3の310を参照すると、最も上位ノードはルートノード(root node)と呼ばれることもあり、最も小さい深さ値を有することができる。このとき、最も上位ノードは、レベル0の深さを有することができ、分割されない最初のユニットを示すことができる。
レベル1の深さを有する下位ノードは、最初のユニットが一回分割されたユニットを示すことができ、レベル2の深さを有する下位ノードは、最初のユニットが二回分割されたユニットを示すことができる。例えば、図3の320において、ノードaに対応するユニットaは、最初のユニットで一回分割されたユニットであり、レベル1の深さを有することができる。
レベル3のリーフノード(leaf node)は、最初のユニットが三回分割されたユニットを示すことができる。例えば、図3の320において、ノードdに対応するユニットdは、最初のユニットで三回分割されたユニットであり、レベル3の深さを有することができる。したがって、最も下位ノードであるレベル3のリーフノードは、最も深い深さを有することができる。
以下、後述される実施例において、符号化/復号化対象ブロックは、場合によって、現在ブロックと呼ばれることもある。また、符号化/復号化対象ブロックに対してイントラ予測が実行される場合、前記符号化/復号化対象ブロックは、予測対象ブロックと呼ばれることもある。
一方、映像信号は、一般的に光の3原色成分を示す三つの色信号を含むことができる。
光の3原色成分を示す三つの色信号は、R(Red)、G(Green)、B(Blue)である。前記R、G、B信号は、映像処理のために使われる周波数帯域を減少させるために、一つのルマ(luma)信号及び二つのクロマ(chroma)信号に変換されることができる。このとき、一つの映像信号は、一つのルマ信号と二つのクロマ信号を含むことができる。ここで、ルマ信号は、画面の明るさを示す成分であり、Yに該当し、クロマ信号は、画面の色(color)を示す成分であり、U、V又はCb、Crに該当することができる。人間の目は、ルマ信号に対して敏感であり、クロマ信号に対して鈍感であるため、このような特性を利用してR、G、B信号がルマ信号及びクロマ信号に変換される場合、映像処理に使われる周波数帯域が減少されることができる。以下、後述される実施例において、ルマ成分を有するブロックはルマブロックといい、クロマ成分を有するブロックはクロマブロックという。
図4a及び図4bは、イントラ予測過程の実施例を説明するための図面である。図4aの410、420は、イントラ予測モードの予測方向及び各予測方向に割り当てられたモード値の実施例を示す。また、図4bの430は、符号化/復号化対象ブロックのイントラ予測に使われる参照ピクセルの位置を示す。ピクセルは、サンプルと同じ意味を有することができ、以下、後述される実施例において、ピクセルは、場合によって、サンプルと呼ばれることもある。
図1及び図2の実施例で詳述したように、符号化器及び復号化器は、現在ピクチャ内のピクセル情報に基づいてイントラ予測を実行することで、予測ブロックを生成することができる。即ち、イントラ予測実行時、符号化器及び復号化器は、少なくとも一つの復元された参照ピクセルに基づいて方向性予測及び/又は非方向性予測を実行することができる。ここで、予測ブロックは、イントラ予測実行結果生成されたブロックを意味する。前記予測ブロックは、符号化ユニット(CU)、予測ユニット(PU)、及び変換ユニット(TU)のうち少なくとも一つに該当することができる。また、前記予測ブロックは、2×2、4×4、8×8、16×16、32×32又は64×64などの大きさを有する正方形のブロックであってもよく、2×8、4×8、2×16、4×16、8×16などの大きさを有する長方形のブロックであってもよい。
一方、イントラ予測は、現在ブロックのイントラ予測モードによって実行されることができる。現在ブロックが有することができるイントラ予測モードの個数は、所定の固定された値であってもよく、予測ブロックの大きさによって異なるように決定される値であってもよい。例えば、現在ブロックが有することができるイントラ予測モードの個数は、3、5、9、17、34、35又は36等である。
図4aの410は、イントラ予測モードの予測方向及び各予測方向に割り当てられたモード値の一実施例を示す。図4aの410において、それぞれのイントラ予測モードに割り当てられた番号はモード値を示すことができる。
図4aの410を参照すると、例えば、モード値が0である垂直モードの場合、参照ピクセルのピクセル値に基づいて垂直方向に予測が実行されることができ、モード値が1である水平モードの場合、参照ピクセルのピクセル値に基づいて水平方向に予測が実行されることができる。詳述したモード以外の方向性モードの場合にも、符号化器及び復号化器は、該当角度によって参照ピクセルを利用してイントラ予測を実行することができる。
図4aの410において、2のモード値を有するイントラ予測モードは、DCモードと呼ばれることもあり、34のモード値を有するイントラ予測モードは、プラナー(planar)モードと呼ばれることもある。前記DCモード及びプラナーモードは、非方向性モードに該当することができる。例えば、DCモードの場合、複数の参照ピクセルのピクセル値平均により予測ブロックが生成されることができる。プラナーモードで予測ブロック内のそれぞれの予測ピクセルを生成する方法の実施例は、図5で後述する。
イントラ予測モードの個数及び/又はそれぞれのイントラ予測モードに割り当てられるモード値は、前述した実施例に限定されるものではなく、具現及び/又は必要によって異なるように決められてもよい。例えば、イントラ予測モードの予測方向及び各予測モードに割り当てられるモード値は、図4aの420のように、図4aの410と異なるように決められることもできる。以下、後述される実施例では、説明の便宜上、別の言及がない場合には図4aの410のようなイントラ予測モードに基づいてイントラ予測が実行されると仮定する。
また、以下、垂直モードの右側に位置したイントラ予測モードは、垂直右側モード(vertical−right mode)といい、水平モードの下方に位置したイントラ予測モードは、水平下方モード(horizontal−below mode)という。例えば、図4aの410において、モード値が5、6、12、13、22、23、24、25であるイントラ予測モードは、垂直右側モード413に該当することができ、モード値が8、9、16、17、30、31、32、33であるイントラ予測モードは、水平下方モード416に該当することができる。
一方、図4bの430を参照すると、現在ブロックのイントラ予測に使われる復元された参照ピクセルには、例えば、下方左側(below−left)参照ピクセル431、左側(left)参照ピクセル433、上方左側(above−left)コーナー参照ピクセル435、上方(above)参照ピクセル437、及び上方右側(above−right)参照ピクセル439などがある。ここで、左側参照ピクセル433は、現在ブロック外部左側に隣接した復元された参照ピクセルを意味し、上方参照ピクセル437は、現在ブロック外部上方に隣接した復元された参照ピクセルを意味し、上方左側コーナー参照ピクセル435は、現在ブロック外部の上方左側コーナーに位置した復元された参照ピクセルを意味する。また、下方左側参照ピクセル431は、左側参照ピクセル433で構成された左側ピクセルラインと同一線上に位置したピクセルのうち、前記左側ピクセルライン下方に位置した参照ピクセルを意味し、上方右側参照ピクセル439は、上方参照ピクセル437で構成された上方ピクセルラインと同一線上に位置したピクセルのうち、前記上方ピクセルライン右側に位置した参照ピクセルを意味する。本明細書で、詳述した参照ピクセルの名称は、後述される他の実施例にも同一に適用されることができる。
現在ブロックのイントラ予測に使われる参照ピクセルは、現在ブロックのイントラ予測モードによって変わることができる。例えば、現在ブロックのイントラ予測モードが垂直(vertical)モード(図4aの410において、モード値が0であるイントラ予測モード)の場合、上方参照ピクセル437がイントラ予測に使われることができ、現在ブロックのイントラ予測モードが水平(horizontal)モード(図4aの410において、モード値が1であるイントラ予測モード)の場合、左側参照ピクセル433がイントラ予測に使われることができる。また、モード値が13であるイントラ予測モードが使われる場合には、上方右側参照ピクセル439がイントラ予測に使われることができ、モード値が7であるイントラ予測モードが使われる場合には、下方左側参照ピクセル431がイントラ予測に使われることができる。
イントラ予測モードの予測方向及び予測対象ピクセルに基づいて決定される参照ピクセルの位置が整数位置である場合、符号化器及び復号化器は、該当位置の参照ピクセル値を前記予測対象ピクセルに対する予測ピクセル値として決定することができる。イントラ予測モードの予測方向及び予測対象ピクセルに基づいて決定される参照ピクセルの位置が整数位置でない場合、符号化器及び復号化器は、整数位置の参照ピクセルに基づいて補間された(interpolated)参照ピクセルを生成し、前記補間された参照ピクセルのピクセル値を予測ピクセル値として決定することができる。
前述した実施例によると、符号化器及び復号化器は、復元されたり生成された参照ピクセルに基づいて符号化/復号化対象ブロックに対してイントラ予測を実行することができる。しかし、前述したように、イントラ予測に使われる参照ピクセルは、現在ブロックのイントラ予測モードによって変わることができ、生成された予測ブロックと周辺ブロックとの間には不連続性が発生することができる。例えば、方向性イントラ予測の場合、予測ブロック内の予測ピクセルのうち、参照ピクセルから距離が遠いピクセルであるほど、大きい予測誤差を有することができる。この場合、前記予測誤差により不連続性が発生することができ、符号化効率向上に限界がある。
したがって、詳述した問題点を解決するために、イントラ予測により生成された予測ブロックに対してフィルタリングを実行する符号化/復号化方法が提供されることができる。例えば、参照ピクセルに基づいて生成された予測ブロック内で、大きい予測誤差を有する領域に対して適応的にフィルタを適用することができる。この場合、予測誤差が減少されてブロック間の不連続性が最小化され、符号化/復号化効率が向上することができる。
図5は、プラナーモードでのイントラ予測方法の実施例を概略的に示す。
図5の510は、プラナーモードでのイントラ予測方法の一実施例を示し、図5の530は、プラナーモードでのイントラ予測方法の他の実施例を示す。図5の515及び535は、符号化/復号化対象ブロック(以下、現在ブロックと同じ意味を有する)を示し、ブロック515及びブロック535の大きさは、各々、nS×nSという。
図5において、現在ブロック内のピクセルの位置は、所定の座標により示される。便宜上、現在ブロック内の最も上方左側の座標は(0,0)とする。このとき、座標軸において、下方に行くほどy値が大きくなることができ、右に行くほどx値が大きくなることができる。以下、後述される実施例において、ピクセルの座標は、図5で使われる座標軸と同じ座標軸により示される。
一実施例として、図5の510を参照すると、符号化器及び復号化器は、現在ブロック内の最も下方右側に位置したピクセル(nS−1,nS−1)に対する予測ピクセル、即ち、下方右側予測ピクセル520のピクセル値を導出することができる。符号化器及び復号化器は、上方参照ピクセルのうち、最も右側(nS−1,−1)に位置した参照ピクセル523及び前記下方右側予測ピクセル520に基づいて、現在ブロック内の最も右側に位置した垂直ライン上のピクセルに対する予測ピクセル、即ち、右側垂直ライン予測ピクセルのピクセル値を導出することができ、左側参照ピクセルのうち、最も下方(−1,nS−1)に位置した参照ピクセル526及び前記下方右側予測ピクセル520に基づいて、現在ブロック内の最も下方に位置した水平ライン上のピクセルに対する予測ピクセル、即ち、下方水平ライン予測ピクセルのピクセル値を導出することができる。
このとき、現在ブロック内のピクセルのうち、前記右側垂直ライン上のピクセル及び前記下方水平ライン上のピクセルを除いた残りのピクセルに対する予測値は、上方参照ピクセル、左側参照ピクセル、右側垂直ライン予測ピクセル、及び下方水平ライン予測ピクセルに基づいて加重値を適用することによって求められることができる。
他の実施例として、符号化器及び復号化器は、図5の530のような方法により現在ブロック535内の予測対象ピクセル540に対する予測値を導出することもできる。図5の530において、予測対象ピクセル540の座標は(x,y)とする。図5の530を参照すると、符号化器及び復号化器は、下方左側参照ピクセルのうち、最も上方に位置した参照ピクセル(−1,nS)541、左側参照ピクセルのうち、予測対象ピクセル540、同一水平ライン上に位置した参照ピクセル(−1,y)543、及び上方参照ピクセルのうち、予測対象ピクセル540と同一垂直ライン上に位置した参照ピクセル(x,−1)545、及び上方右側参照ピクセルのうち、最も左側に位置した参照ピクセル(nS,−1)に基づいて平均及び/又は加重値平均を実行することによって予測対象ピクセル540の予測値を導出することができる。
図6は、本発明による映像符号化方法の一実施例を概略的に示すフローチャートである。
図6を参照すると、符号化器は、符号化対象ブロックに対してイントラ予測を実行することによって予測ブロックを生成することができる(S610)。予測ブロック生成方法の具体的な実施例は、図4a及び図4bで詳述したため、ここでは省略する。
また、図6を参照すると、符号化器は、符号化対象ブロック及び/又は符号化対象ブロックに隣接した周辺ブロックの符号化パラメータに基づいて、予測ブロックに対してフィルタリングを実行することができる(S620)。ここで、符号化パラメータは、シンタックス要素(syntax element)のように符号化器で符号化され、復号化器に送信される情報だけでなく、符号化又は復号化過程で類推されることができる情報を含むことができ、映像を符号化又は復号化する時、必要な情報を意味する。符号化パラメータは、例えば、イントラ/インター予測モード、動きベクトル、参照ピクチャインデックス、符号化ブロックパターン(CBP:Coded Block Pattern)、残差信号有無、量子化パラメータ、ブロック大きさ、及びブロックパーティション(partition)情報などを含むことができる。
一例として、符号化器は、符号化対象ブロックのイントラ予測モード、符号化対象ブロックがルマブロックかクロマブロックか、符号化対象ブロックの大きさ(及び/又は深さ)、符号化対象ブロックに隣接した周辺ブロックの符号化パラメータ(例えば、周辺ブロックの符号化モード)及び/又は周辺ブロックの存在有無(及び/又は周辺ブロックが可用な(available)ブロックかどうか)などに対する情報に基づいて予測ブロックに対してフィルタリングを実行することができる。
詳述したフィルタリング実行過程において、符号化器は、常にフィルタリングを実行すると叙述されているが、符号化器は、予測ブロックに対してフィルタリングを実行しなくてもよい。例えば、符号化器は、符号化対象ブロック及び/又は符号化対象ブロックに隣接した周辺ブロックの符号化パラメータに基づいてフィルタリング実行可否を決定することができ、フィルタリングが実行されないと決定する場合、予測ブロックに対してフィルタリングを実行しない。
一方、詳述したフィルタリング過程は、予測ブロック生成過程とは独立的な別個の過程であるが、予測ブロック生成過程と結合されて一つの過程に実行されてもよい。即ち、符号化器は、予測ブロック生成過程で符号化対象ブロック及び/又は周辺ブロックの符号化パラメータに基づいてフィルタリング実行過程に対応されるプロセスを共に適用することによって予測ブロックを生成することもできる。フィルタリング実行方法の具体的な実施例は後述する。
また、図6を参照すると、符号化器は、符号化対象ブロックの位置に該当する原本ブロック及び予測ブロックに基づいて差分ブロックを生成することができる(S630)。ここで、前記予測ブロックは、フィルタリングが実行された予測ブロックであってもよく、フィルタリングが実行されない予測ブロックであってもよい。
図7は、詳述した差分ブロック生成過程の実施例を概略的に示す。図7の710は、原本ブロック及びフィルタリングが実行された予測ブロックに基づいて差分ブロックを生成する過程の実施例を示す。図7の710において、ブロック713は原本ブロック、ブロック716はフィルタリングが実行された予測ブロック、ブロック719は差分ブロックを示す。図7の710を参照すると、符号化器及び復号化器は、原本ブロックでフィルタリングが実行された予測ブロックを減算することで、差分ブロックを生成することができる。図7の720は、原本ブロック及びフィルタリングが実行されない予測ブロックに基づいて差分ブロックを生成する過程の実施例を示す。図7の720において、ブロック723は原本ブロック、ブロック726はフィルタリングが実行されない予測ブロック、ブロック729は差分ブロックを示す。図7の720を参照すると、符号化器及び復号化器は、原本ブロックでフィルタリングが実行されない予測ブロックを減算することで、差分ブロックを生成することができる。
生成された差分ブロックは、変換、量子化、エントロピー符号化などの過程を経て復号化器に送信されることができる。
図8は、本発明による映像復号化方法の一実施例を概略的に示すフローチャートである。
図8を参照すると、復号化器は、復号化対象ブロックに対してイントラ予測を実行することによって予測ブロックを生成することができる(S810)。予測ブロック生成方法の具体的な実施例は、図4a及び図4bで詳述したため、ここでは省略する。
また、図8を参照すると、復号化器は、復号化対象ブロック及び/又は復号化対象ブロックに隣接した周辺ブロックの符号化パラメータに基づいて、予測ブロックに対してフィルタリングを実行することができる(S820)。ここで、符号化パラメータは、シンタックス要素(syntax element)のように符号化器で符号化され、復号化器に送信される情報だけでなく、符号化又は復号化過程で類推されることができる情報を含むことができ、映像を符号化又は復号化する時、必要な情報を意味する。符号化パラメータは、例えば、イントラ/インター予測モード、動きベクトル、参照ピクチャインデックス、符号化ブロックパターン(CBP:Coded Block Pattern)、残差信号有無、量子化パラメータ、ブロック大きさ、及びブロックパーティション(partition)情報などを含むことができる。
一例として、復号化器は、復号化対象ブロックのイントラ予測モード、復号化対象ブロックがルマブロックかクロマブロックか、復号化対象ブロックの大きさ(及び/又は深さ)、復号化対象ブロックに隣接した周辺ブロックの符号化パラメータ(例えば、周辺ブロックの符号化モード)及び/又は周辺ブロックの存在有無(及び/又は周辺ブロックが可用な(available)ブロックかどうか)などに対する情報に基づいて予測ブロックに対してフィルタリングを実行することができる。
詳述したフィルタリング実行過程において、復号化器は、常にフィルタリングを実行すると叙述されているが、復号化器は、予測ブロックに対してフィルタリングを実行しなくてもよい。例えば、復号化器は、復号化対象ブロック及び/又は復号化対象ブロックに隣接した周辺ブロックの復号化パラメータに基づいてフィルタリング実行可否を決定することができ、フィルタリングが実行されないと決定する場合、予測ブロックに対してフィルタリングを実行しない。
一方、詳述したフィルタリング過程は、予測ブロック生成過程とは独立的な別個の過程であるが、予測ブロック生成過程と結合されて一つの過程に実行されてもよい。即ち、復号化器は、予測ブロック生成過程で復号化対象ブロック及び/又は周辺ブロックの符号化パラメータに基づいてフィルタリング実行過程に対応されるプロセスを共に適用することによって予測ブロックを生成することもできる。この場合、復号化器は、予測ブロックに対して別個のフィルタリング過程を実行しない。
復号化器でのフィルタリング実行方法は、符号化器と同様である。フィルタリング実行方法の具体的な実施例は後述する。
また、図8を参照すると、復号化器は、復号化対象ブロックの位置に該当する復元された差分ブロック及び予測ブロックに基づいて復元ブロックを生成することができる(S830)。ここで、前記予測ブロックは、フィルタリングが実行された予測ブロックであってもよく、フィルタリングが実行されない予測ブロックであってもよい。
図9は、詳述した差分ブロック生成過程の実施例を概略的に示す。図9の910は、復元された差分ブロック及びフィルタリングが実行された予測ブロックに基づいて復元ブロックを生成する過程の実施例を示す。図9の910において、ブロック913は復元された差分ブロック、ブロック916はフィルタリングが実行された予測ブロック、ブロック919は復元ブロックを示す。図9の910を参照すると、符号化器及び復号化器は、復元された差分ブロックとフィルタリングが実行された予測ブロックを加算することで、復元ブロックを生成することができる。図9の920は、復元された差分ブロック及びフィルタリングが実行されない予測ブロックに基づいて復元ブロックを生成する過程の実施例を示す。図9の920において、ブロック923は復元された差分ブロック、ブロック926はフィルタリングが実行されない予測ブロック、ブロック929は復元ブロックを示す。図9の920を参照すると、符号化器及び復号化器は、復元された差分ブロックとフィルタリングが実行されない予測ブロックを加算することで、復元ブロックを生成することができる。
図10は、本発明によるフィルタリング実行方法の一実施例を概略的に示すフローチャートである。
図10を参照すると、符号化器及び復号化器は、予測ブロック(及び/又は予測ピクセル)に対するフィルタリング実行可否を決定することができる(S1010)。
詳述したように、符号化器及び復号化器は、以前に復元された参照ピクセルに基づいて符号化/復号化対象ブロックに対してイントラ予測を実行することができる。このとき、イントラ予測に使われる参照ピクセル及び/又はイントラ予測により生成される予測ブロック内の予測ピクセル値は、現在ブロックのイントラ予測モードによって変わることができる。したがって、この場合、符号化器及び復号化器は、イントラ予測に使われた参照ピクセルとの連関性が少さい予測ピクセルに対してフィルタリングを実行することによって予測誤差を減少させることができる。反面、イントラ予測に使われた参照ピクセルとの連関性が大きい予測ピクセルに対してはフィルタリングを実行しないことがより効率的である。
したがって、符号化器及び復号化器は、符号化/復号化対象ブロックのイントラ予測モード、符号化/復号化対象ブロックがルマブロックかクロマブロックか、符号化/復号化対象ブロックの大きさ(及び/又は深さ)、符号化/復号化対象ブロックに隣接した周辺ブロックの符号化パラメータ(例えば、周辺ブロックの大きさ及び/又は周辺ブロックの符号化モード等)、及び周辺ブロックの存在有無(及び/又は周辺ブロックが可用な(available)ブロックかどうか)に対する情報のうち少なくとも一つ以上に基づいて、予測ブロック(及び/又は予測ピクセル)に対するフィルタリング実行可否を決定することができる。
フィルタリング実行可否は、符号化/復号化過程で決定されることもできるが、各条件によって予め決定されてもよい。以下、フィルタリング実行可否決定方法の具体的な実施例が叙述される。
一実施例として、符号化器及び復号化器は、符号化/復号化対象ブロックのイントラ予測モードに基づいて予測ブロックに対するフィルタリング実行可否を決定することができる。詳述したように、イントラ予測に使われる参照ピクセル及び予測方向は、符号化/復号化対象ブロックのイントラ予測モードによって異なるように決定されることができる。
したがって、符号化/復号化対象ブロックのイントラ予測モードに基づいてフィルタリング実行可否を決定することが効率的である。
以下の表1は、イントラ予測モードによるフィルタリング実行可否決定方法の一実施例を示す。表1において、イントラ予測モードの予測方向及び各予測モードに割り当てられるモード値は、詳述した図4aの410と同様に決められていると仮定する。
ここで、イントラ予測モードに割り当てられた値のうち、0は、フィルタリングが実行されないことを示し、1は、フィルタリングが実行されることを示すことができる。
一例として、現在ブロックの予測モードがDCモード(例えば、モード値が2である予測モード)の場合、複数の参照ピクセルのピクセル値平均により予測ブロックが生成されるため、予測ピクセルと参照ピクセルとの間に連関性が少さくなるようになる。したがって、この場合、符号化器及び復号化器は、予測ブロック内の予測ピクセルに対してフィルタリングを実行することができる。他の例として、現在ブロックの予測モードがプラナーモード(例えば、モード値が34である予測モード)の場合、符号化器及び復号化器は、図5で詳述したように、右側垂直ライン予測ピクセル及び下方水平ライン予測ピクセルを導出した後、前記導出された予測ピクセルと参照ピクセルに基づいて加重値を適用することによって現在ブロック内の各ピクセルに対する予測値を導出することができる。したがって、この場合、予測ピクセルと参照ピクセルとの間に連関性が少さくなるため、符号化器及び復号化器は、予測ブロック内の予測ピクセルに対してフィルタリングを実行することができる。
他の例として、現在ブロックのイントラ予測モードが垂直右側モード(例えば、モード値が5、6、12、13、22、23、24、25である予測モード)の場合、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の左側領域に位置した予測ピクセルと左側参照ピクセルとの間の連関性が少さくなることができる。したがって、このような場合には予測ブロック内の左側領域に位置したピクセルに対してフィルタリングが実行されることができる。他の例として、現在ブロックのイントラ予測モードが水平下方モード(例えば、モード値が8、9、16、17、30、31、32、33である予測モード)の場合、符号化器及び復号化器は、左側参照ピクセル及び/又は下方左側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の上方領域に位置した予測ピクセルと上方参照ピクセルとの間の連関性が少さくなることができる。したがって、このような場合には予測ブロック内の上方領域に位置したピクセルに対してフィルタリングが実行されることができる。
また、符号化器及び復号化器は、表1の実施例と違って、垂直モード(例えば、モード値が0である予測モード)及び水平モード(例えば、モード値が1である予測モード)に対しフィルタリングを実行することもできる。現在ブロックのイントラ予測モードが垂直モードの場合、符号化器及び復号化器は、上方参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の左側領域に位置した予測ピクセルと左側参照ピクセルとの間の連関性が少さくなることができる。したがって、このような場合には予測ブロック内の左側領域に位置したピクセルに対してフィルタリングが実行されることができる。他の例として、現在ブロックのイントラ予測モードが水平モード(例えば、モード値が1である予測モード)の場合、符号化器及び復号化器は、左側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の上方領域に位置した予測ピクセルと上方参照ピクセルとの間の連関性が少さくなることができる。したがって、このような場合には予測ブロック内の上方領域に位置したピクセルに対してフィルタリングが実行されることができる。
一方、現在ブロックのイントラ予測モードが詳述した予測モードを除いた残りの予測モード(例えば、モード値が3、4、7、10、11、14、15、18、19、20、21、26、27、28、29である予測モード)のうち一つに該当する場合、符号化器及び復号化器は、上方参照ピクセル及び上方右側参照ピクセルのうち、少なくとも一つの参照ピクセルをイントラ予測に使用することができ、左側参照ピクセル及び下方左側参照ピクセルのうち、少なくとも一つの参照ピクセルをイントラ予測に使用することができる。
したがって、この場合、予測ブロック内の左側領域及び上方領域に位置した予測ピクセルの全てが参照ピクセルとの連関性を維持することができるため、符号化器及び復号化器は、予測ブロックに対してフィルタリングを実行しない。
フィルタリングが実行されるそれぞれの場合に対して現在ブロック及び/又は予測ブロック内でフィルタリングが実行される領域及び/又は現在ブロック内でフィルタリングが実行されるピクセル位置の実施例は後述する。
他の実施例として、符号化器及び復号化器は、現在ブロック(及び/又は予測対象ブロック)の大きさ及び/又は深さに基づいて予測ブロックに対するフィルタリング実行可否を決定することができる。このとき、前記現在ブロックは、CU、PU又はTUのうち少なくとも一つに該当することができる。
以下の表2は、ブロック大きさによるフィルタリング実行可否決定方法の一実施例を示し、以下の表3は、現在ブロックの深さ値によるフィルタリング実行可否決定方法の一実施例を示す。表2及び表3の実施例において、現在ブロックは、TUに該当することができ、前記TUの大きさは、例えば、2×2、4×4、8×8、16×16、32×32、64×64などである。しかし、本発明は、これに限定されるものでなく、現在ブロックは、TUでないCU及び/又はPUなどに該当することもできる。
ここで、イントラ予測モードに割り当てられた値のうち、0は、フィルタリングが実行されないことを示し、1は、フィルタリングが実行されることを示すことができる。
符号化器及び復号化器は、現在ブロックのイントラ予測モード及び現在ブロックの大きさを共に考慮して現在ブロック及び/又は予測ブロックに対するフィルタリング実行可否を決定することもできる。即ち、符号化器及び復号化器は、イントラ予測モードの各々に対して現在ブロックの大きさに基づいてフィルタリング実行可否を決定することができる。この場合、イントラ予測モード毎に現在ブロックの大きさによってフィルタリング実行可否が異なるように決定されることができる。以下の表4は、現在ブロックのイントラ予測モード及び現在ブロックの大きさによるフィルタリング実行可否決定方法の一実施例を示す。
ここで、それぞれのイントラ予測モードに割り当てられた値のうち、0は、フィルタリングが実行されないことを示し、1は、フィルタリングが実行されることを示すことができる。
他の実施例として、符号化器及び復号化器は、現在ブロックがルマブロックに該当するかクロマブロックに該当するかを示す情報、即ち、現在ブロックの色成分情報に基づいて予測ブロックに対するフィルタリング実行可否を決定することができる。例えば、符号化器及び復号化器は、現在ブロックがルマブロックに該当する場合にのみ予測ブロックに対してフィルタリングを実行し、現在ブロックがクロマブロックに該当する場合にはフィルタリングを実行しない。
他の実施例として、符号化器及び復号化器は、現在ブロックに隣接した周辺ブロックの符号化パラメータ、現在ブロックに対してCIP(Constrained Intra Prediction)が適用されるかどうか及び/又は周辺ブロックの存在有無(及び/又は周辺ブロックが可用な(available)ブロックかどうか)に対する情報などに基づいてフィルタリング実行可否を決定することもできる。各々に対するフィルタリング実行可否決定方法の具体的な実施例は後述する。
また、図10を参照すると、現在ブロック及び/又は予測ブロックに対してフィルタリングが実行されると決定された場合、符号化器及び復号化器は、現在ブロック及び/又は予測ブロック内でフィルタリングが実行される領域を決定することができる(S1020)。ここで、前記フィルタリングが実行される領域は、現在ブロック及び/又は予測ブロック内の一つ以上のサンプルに該当することができる。
詳述したように、符号化器及び復号化器は、イントラ予測に使われた参照ピクセルとの連関性が少さい予測ピクセルに対してフィルタリングを実行することによって予測誤差を減少させることができる。即ち、符号化器及び復号化器は、現在ブロック及び/又は予測ブロック内で予測誤差が相対的に大きい領域をフィルタリング実行領域として決定することができる。このとき、符号化器及び復号化器は、現在ブロックのイントラ予測モード、現在ブロックの大きさ(及び/又は深さ)、及び現在ブロックに隣接した周辺ブロックの符号化モードのうち、少なくとも一つに基づいてフィルタリング実行領域を決定することができる。ここで、周辺ブロックの符号化モードは、周辺ブロックがインターモードに符号化/復号化されたか、イントラモードに符号化/復号化されたかを示すことができる。フィルタリング実行領域決定方法の具体的な実施例は後述する。
また、符号化器及び復号化器は、フィルタリング実行領域内のそれぞれの予測ピクセルに対して適用されるフィルタタイプを決定することができる(S1030)。
このとき、前記フィルタタイプは、フィルタ形状(filter shape)、フィルタタップ(filter tap)、及びフィルタ係数(filter coefficient)などに対する情報を含むことができる。複数のイントラ予測モードは、互いに異なる予測方向を有することができ、フィルタリング対象ピクセルの位置によって復元された参照ピクセルの利用方法が変わることができる。したがって、符号化器及び復号化器は、フィルタタイプを適応的に決定することによってフィルタリング効率を向上させることができる。例えば、符号化器及び復号化器は、現在ブロックのイントラ予測モード、現在ブロックの大きさ(及び/又は深さ)及び/又はフィルタリング対象ピクセルの位置に基づいて、それぞれのフィルタリング対象ピクセルに対して適用されるフィルタタイプを決定することができる。フィルタ形状には、水平形状、垂直形状、対角形状などがあり、フィルタタップには、2−タップ、3−タップ、4−タップなどがある。
また、符号化器及び復号化器は、予測ブロックの大きさ及び/又はフィルタリング対象ピクセルの位置などに基づいてフィルタ係数を決定することができる。即ち、符号化器及び復号化器は、予測ブロックの大きさ及び/又はフィルタリング対象ピクセルの位置などによって、フィルタリング対象ピクセルに適用されるフィルタ係数を異なるようにすることができる。したがって、フィルタリング対象ピクセルに対するフィルタ強度が適応的に決定されることができる。一例として、2−タップフィルタが使われる場合、フィルタ係数は[1:3]、[1:7]、[3:5]などになることができる。他の例として、3−タップフィルタが使われる場合、フィルタ係数は[1:2:1]、[1:4:1]、[1:6:1]などになることができる。
一方、フィルタタイプにより決定されるフィルタは、フィルタ形状、フィルタタップ、フィルタ係数などにより定義されるフィルタでなくてもよい。例えば、符号化器及び復号化器は、参照ピクセルのピクセル値に、所定の過程により決定されるオフセット(offset)値を加えることによってフィルタリング過程を実行することもできる。このとき、前記フィルタリング過程は、予測ブロック生成過程と結合されて一つの過程に実行されてもよい。即ち、現在ブロック内の各ピクセルのフィルタリングされた予測ピクセル値は、詳述したフィルタリング過程のみで導出されることができ、このとき、詳述したフィルタリング過程は、予測ピクセル生成過程及び生成された予測ピクセルに対するフィルタリング過程の両方ともを含む一つのプロセスに該当することができる。
フィルタタイプ決定方法の具体的な実施例は後述する。
フィルタ適用領域及びフィルタタイプが決定されると、符号化器及び復号化器は、前記決定されたフィルタ適用領域及びフィルタタイプに基づいて予測ブロック内のそれぞれの予測ピクセルに対するフィルタリングを実行することができる(S1040)。予測ブロックに対してフィルタリングが実行されないと決定された場合、符号化器及び復号化器は、予測ブロック(及び/又は予測ブロック内の各予測ピクセル)に対してフィルタリングを実行しない(S1050)。
図11は、現在ブロックに隣接した周辺ブロックの符号化パラメータに基づいてフィルタリング実行可否を決定する方法の実施例を概略的に示す。
図11において、周辺ブロックの符号化パラメータにはイントラ予測モード(intra prediction mode)、インター予測モード(inter prediction mode)、符号化モード(coding mode)などがある。ここで、周辺ブロックの符号化モードは、周辺ブロックがインターモードに符号化/復号化されたかイントラモードに符号化/復号化されたかを示すことができる。
図11の1110は、現在ブロックに隣接した周辺ブロックのイントラ予測モードに基づいてフィルタリング実行可否を決定する方法の一実施例を示す。図11の1113は現在ブロック(C)を示し、図11の1116は現在ブロックの左側に隣接した左側周辺ブロック(A)を示す。図11の1110において、現在ブロックのイントラ予測モードは、垂直右側モードに該当すると仮定する。このとき、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の左側領域1119に位置したピクセルに対してフィルタリングが実行されることができる。
しかし、図11の1110と同様に、フィルタリング対象領域1119に隣接した左側周辺ブロック(A)1116の予測方向及び現在ブロック(C)1113の予測方向が互いに異なる場合、フィルタリング対象領域1119に対してフィルタリングを実行しないことがより効率的である。したがって、符号化器及び復号化器は、フィルタリング対象領域1119に隣接した周辺ブロック1116の予測方向及び現在ブロック1113の予測方向が互いに異なる場合、フィルタリング対象領域1119に対してフィルタリングを実行しない。反対に、フィルタリング対象領域1119に隣接した周辺ブロック1116の予測方向及び現在ブロック1113の予測方向が互いに同じ、又は類似の場合(例えば、予測角度差値が所定の閾値以下の場合)、フィルタリング対象領域1119に対してフィルタリングを実行することによって予測誤差を減少させることができる。
図11の1120は、現在ブロックに対してCIP(Constrained Intra Prediction)が適用される場合、現在ブロックに隣接した周辺ブロックの符号化モードに基づいてフィルタリング実行可否を決定する方法の一実施例を示す。図11の1123は現在ブロック(C)を示し、図11の1126は現在ブロックの左側に隣接した左側周辺ブロック(A)を示す。図11の1120において、現在ブロックのイントラ予測モードは、垂直右側モードに該当すると仮定する。このとき、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の左側領域1129に位置したピクセルに対してフィルタリングが実行されることができる。
しかし、現在ブロック(C)1123に対してCIPが適用される場合、符号化器及び復号化器は、フィルタリング対象領域1129に隣接した左側周辺ブロック(A)1126の符号化モードによってフィルタリング対象領域1129に対するフィルタリングを実行しない。
現在ブロック1123に対してCIPが適用される場合、符号化器及び復号化器は、現在ブロック1123に対するイントラ予測を実行するにあたって、インターモードに符号化された周辺ブロック内のピクセルを参照ピクセルとして使用しない。例えば、図11の1120において、左側周辺ブロック(A)1126がインターモードに符号化された場合、左側周辺ブロック1126内の参照ピクセル、即ち、左側参照ピクセルは、現在ブロック1123のインター予測に使われない。この場合、符号化器及び復号化器は、イントラモードに符号化されたブロック内の参照ピクセルのピクセル値を前記左側参照ピクセルの位置に入れた後、イントラ予測を実行することができる。即ち、符号化器及び復号化器は、インターモードが適用されるピクセルをイントラ予測に使用しないことで、エラー耐性を強化させることができる。
したがって、図11の1120と同様に、現在ブロック1123に対してCIPが適用され、フィルタリング対象領域1129に隣接した左側周辺ブロック1126の符号化モードがインターモードの場合、符号化器及び復号化器は、フィルタリング対象領域1129に対してフィルタリングを実行しない。
図12は、現在ブロックに隣接した周辺ブロックの存在有無(及び/又は周辺ブロックが可用な(available)ブロックかどうか)に対する情報に基づいてフィルタリング実行可否を決定する方法の実施例を概略的に示す。
図12の1210は現在ブロック(C)を示し、図12の1220は現在ブロックの左側に隣接した周辺ブロック(A)を示す。図12において、現在ブロック1210のイントラ予測モードは、垂直右側モードに該当すると仮定する。このとき、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の左側領域1230に位置したピクセルに対してフィルタリングが実行されることができる。
しかし、フィルタリング対象領域に隣接した周辺ブロックが存在しない、又は可用しない場合、符号化器及び復号化器は、フィルタリング対象領域に対してフィルタリングを実行しない。ここで、フィルタリング対象領域に隣接した周辺ブロックが存在しない、又は可用しない場合には、現在ブロックが現在ピクチャの境界に存在する場合及び現在ブロックに隣接した周辺ブロックが現在ブロックが属するスライス境界の外部に存在する場合などがある。
フィルタリング対象領域に隣接した周辺ブロックが存在しない、又は可用しない場合、符号化器及び復号化器は、可用な参照ピクセルを利用してフィルタリング対象領域に隣接した位置の参照ピクセル値を生成した後、イントラ予測を実行することができる。しかし、この場合、生成された複数の参照ピクセルは、互いに類似の値を有することができ、生成された参照ピクセルの値は、現在ブロック内のピクセル値と類似しないため、生成された参照ピクセルに基づいて現在ブロックに対してフィルタリングを実行することは、符号化効率を減少させることができる。したがって、符号化器及び復号化器は、フィルタリング対象領域に対してフィルタリングを実行しない。
図12を参照すると、現在ブロック(C)1210の周辺には復元されたブロック(B)Dが存在する。また、現在ブロック1210内のフィルタリング対象領域1230に隣接した左側周辺ブロック(A)1220は、現在ブロック1210が属するスライスの境界1240の外部に存在する。このとき、フィルタリング対象領域1230に隣接した左側周辺ブロック(A)1220は、可用しないブロックに該当するため、符号化器及び復号化器は、フィルタリング対象領域1230に対してフィルタリングを実行しない。
図13は、現在ブロックのイントラ予測モードに基づいてフィルタリング実行領域を決定する方法の実施例を概略的に示す。
詳述したように、符号化器及び復号化器は、以前に復元された参照ピクセルに基づいて符号化/復号化対象ブロックに対してイントラ予測を実行することができる。このとき、イントラ予測に使われる参照ピクセル及び/又は予測方向は、現在ブロックのイントラ予測モードによって変わることができるため、現在ブロックのイントラ予測モードを考慮して予測誤差が相対的に大きい領域をフィルタリング実行領域として決定することが効率的である。より詳しくは、予測ブロック内でイントラ予測に使われない参照ピクセルと隣接した領域に位置した予測ピクセルは、前記参照ピクセルとの連関性が低く、大きい予測誤差を有することができる。したがって、符号化器及び復号化器は、予測ブロック内の予測ピクセルのうち、イントラ予測に使われない参照ピクセルに隣接した領域内の予測ピクセルに対してフィルタリングを実行することによって予測誤差を減少させて予測効率を向上させることができる。
図13の1310は、現在ブロックの予測モードがDCモード及び/又はプラナーモードである場合のフィルタリング実行領域の実施例を示す。図13の1310において、1313は予測ブロックを示し、1316はフィルタリング実行領域を示すことができる。
詳述したように、現在ブロックの予測モードがDCモードの場合、複数の参照ピクセルのピクセル値平均により予測ブロック1313が生成されるため、予測ピクセルと参照ピクセルとの間に連関性が少さくなるようになる。したがって、この場合、符号化器及び復号化器は、予測ブロック1313内の最も上方に位置した一つ以上の水平ピクセルライン(以下、上方水平予測ピクセルラインという)及び予測ブロック1313内の最も左側に位置した一つ以上の垂直ピクセルライン(以下、左側垂直予測ピクセルラインという)をフィルタリング実行領域1316として決定することができる。このとき、上方水平予測ピクセルラインに含まれる水平ピクセルラインの個数及び左側垂直予測ピクセルラインに含まれる垂直ピクセルラインの個数は、所定の固定された個数であり、例えば、上方水平予測ピクセルライン及び左側垂直予測ピクセルラインは、各々、1個のピクセルラインを含むことができる。また、後述される図14の実施例と同様に、上方水平予測ピクセルラインに含まれるピクセルラインの個数及び左側垂直予測ピクセルラインに含まれるピクセルラインの個数は、現在ブロック及び/又は予測ブロック1313の大きさに基づいて決定されることもできる。即ち、上方水平予測ピクセルラインに含まれるピクセルラインの個数及び左側垂直予測ピクセルラインに含まれるピクセルラインの個数は、現在ブロック及び/又は予測ブロック1313の大きさによって可変的な値を有することができる。例えば、上方水平予測ピクセルラインに含まれるピクセルラインの個数及び左側垂直予測ピクセルラインに含まれるピクセルラインの個数は、各々、1個、2個又は4個等である。
一方、現在ブロックの予測モードがプラナーモード(例えば、モード値が34である予測モード)の場合にも、予測ピクセルと参照ピクセルとの間の連関性が少さい。したがって、この場合、符号化器及び復号化器は、DCモードと同様に、上方水平予測ピクセルライン及び左側垂直予測ピクセルラインをフィルタリング実行領域1316として決定することができる。
図13の1320は、現在ブロックのイントラ予測モードが垂直右側モード(例えば、モード値が5、6、12、13、22、23、24、25である予測モード)である場合のフィルタリング実行領域の実施例を示す。図13の1320において、1323は予測ブロックを示し、1326はフィルタリング実行領域を示すことができる。
現在ブロックの予測モードが垂直右側モードの場合、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルに基づいて現在ブロックに対するイントラ予測を実行するため、予測ブロック1323内の左側領域に位置した予測ピクセルと左側参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合、符号化器及び復号化器は、予測ブロック1323内の最も左側に位置した一つ以上の垂直ピクセルライン、即ち、左側垂直予測ピクセルラインをフィルタリング実行領域1326として決定し、フィルタリングを実行することによって、予測効率を向上させることができる。このとき、左側垂直予測ピクセルラインに含まれる垂直ピクセルラインの個数は、所定の固定された個数であり、例えば、左側垂直予測ピクセルラインは、1個の垂直ピクセルラインを含むことができる。また、後述される図14の実施例と同様に、左側垂直予測ピクセルラインに含まれる垂直ピクセルラインの個数は、現在ブロック及び/又は予測ブロック1323の大きさに基づいて決定されることもできる。即ち、左側垂直予測ピクセルラインに含まれる垂直ピクセルラインの個数は、現在ブロック及び/又は予測ブロック1323の大きさによって可変的な値を有することができ、例えば、1個、2個又は4個等である。
一方、現在ブロックの予測モードが垂直モードの場合、符号化器及び復号化器は、上方参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の左側領域に位置した予測ピクセルと左側参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合にも符号化器及び復号化器は、左側垂直予測ピクセルラインをフィルタリング実行領域として決定し、フィルタリングを実行することができる。
図13の1330は、現在ブロックのイントラ予測モードが水平下方モード(例えば、モード値が8、9、16、17、30、31、32、33である予測モード)である場合のフィルタリング実行領域の実施例を示す。図13の1330において、1333は予測ブロックを示し、1336はフィルタリング実行領域を示すことができる。
現在ブロックの予測モードが水平下方モードの場合、符号化器及び復号化器は、左側参照ピクセル及び/又は下方左側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック1333内の上方領域に位置した予測ピクセルと上方参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合、符号化器及び復号化器は、予測ブロック1333内の最も上方に位置した一つ以上の水平ピクセルライン、即ち、上方水平予測ピクセルラインをフィルタリング実行領域1336として決定し、フィルタリングを実行することによって、予測効率を向上させることができる。このとき、上方水平予測ピクセルラインに含まれる水平ピクセルラインの個数は、所定の固定された個数であり、例えば、上方水平予測ピクセルラインは、1個のピクセルラインを含むことができる。また、後述される図14の実施例と同様に、上方水平予測ピクセルラインに含まれる水平ピクセルラインの個数は、現在ブロック及び/又は予測ブロック1333の大きさに基づいて決定されることもできる。即ち、上方水平予測ピクセルラインに含まれる水平ピクセルラインの個数は、現在ブロック及び/又は予測ブロック1333の大きさによって可変的な値を有することができ、例えば、1個、2個又は4個等である。
一方、現在ブロックの予測モードが水平モードの場合、符号化器及び復号化器は、左側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の上方領域に位置した予測ピクセルと上方参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合にも符号化器及び復号化器は、上方水平予測ピクセルラインをフィルタリング実行領域として決定し、フィルタリングを実行することができる。
図14は、現在ブロックの大きさ及び/又は深さに基づいてフィルタリング実行領域を決定する方法の実施例を概略的に示す。
現在ブロック(及び/又は予測対象ブロック)の大きさが大きい場合、現在ブロック内で大きい予測誤差を有する領域の大きさも大きく、現在ブロック(及び/又は予測対象ブロック)の大きさが小さい場合、現在ブロック内で大きい予測誤差を有する領域の大きさも小さい。したがって、符号化器及び復号化器は、現在ブロック(及び/又は予測対象ブロック)の大きさ(及び/又は深さ)に基づいてフィルタリング実行領域を決定することによって符号化効率を向上させることができる。このとき、符号化器及び復号化器は、相対的に大きい予測誤差を有する領域をフィルタリング実行領域として決定することができる。
図14の1410は、現在ブロックの大きさが8×8である場合のフィルタリング実行領域の実施例を示す。図14の1410において、1413は現在ブロックを示し、1416はフィルタリング対象領域を示す。図14の1410において、現在ブロック1413のイントラ予測モードは、垂直右側モード(例えば、モード値が6である予測モード)に該当すると仮定する。このとき、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内で前記上方参照ピクセル及び前記上方右側参照ピクセルからの距離が遠い左側領域の予測誤差が大きい。したがって、この場合、符号化器及び復号化器は、予測ブロック内の最も左側に位置した一つ以上の垂直ピクセルライン、即ち、左側垂直予測ピクセルラインをフィルタリング実行領域1416として決定することができる。
図14の1420は、現在ブロックの大きさが32×32である場合のフィルタリング実行領域の実施例を示す。図14の1420において、1423は現在ブロックを示し、1426はフィルタリング対象領域を示す。図14の1420において、現在ブロック1423のイントラ予測モードは垂直右側モード(例えば、モード値が6である予測モード)に該当すると仮定する。このとき、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内で前記上方参照ピクセル及び前記上方右側参照ピクセルからの距離が遠い左側領域の予測誤差が大きい。したがって、この場合、符号化器及び復号化器は、予測ブロック内の最も左側に位置した一つ以上の垂直ピクセルライン、即ち、左側垂直予測ピクセルラインをフィルタリング実行領域1426として決定することができる。
詳述した図14の1410、1420において、左側垂直予測ピクセルラインを構成する垂直ピクセルラインの個数は、現在ブロック1413、1423及び/又は予測ブロックの大きさに基づいて決定されることができる。図14の1410において、現在ブロック1413の大きさは8×8であるため、相対的に小さい値を有する。したがって、この場合、予測誤差が大きい領域の大きさが相対的に小さいため、符号化器及び復号化器は、予測ブロック内で最も左側に位置した順序通りに2個の垂直ピクセルラインをフィルタリング実行領域として決定することができる。反面、図14の1420において、現在ブロック1423の大きさは32×32であるため、相対的に大きい値を有する。したがって、この場合、予測誤差が大きい領域の大きさが相対的に大きいため、符号化器及び復号化器は、予測ブロック内で最も左側に位置した順序通りに4個の垂直ピクセルラインをフィルタリング実行領域として決定することができる。
以下の表5は、ブロック大きさによるフィルタリング実行領域の実施例を示し、以下の表6は、現在ブロックの深さ値によるフィルタリング実行領域の実施例を示す。符号化器及び復号化器は、以下の表5及び表6のように、現在ブロックの大きさ及び/又は深さに基づいてフィルタリング実行領域を決定することができる。
ここで、現在ブロックは、TUに該当することができ、前記TUの大きさは、例えば、2×2、4×4、8×8、16×16、32×32、64×64などである。しかし、本発明は、これに限定されるものでなく、現在ブロックは、TUでないCU及び/又はPUなどに該当することもできる。
現在ブロックの大きさ及び/又は深さによって決定されるフィルタリング実行領域の大きさ及び/又は位置は、前述した実施例に限定されるものではなく、前述した実施例と異なる大きさ及び/又は位置に決定されることもできる。また、前述した実施例では垂直右側モードを中心にフィルタリング実行領域決定方法が叙述されているが、これは説明の便宜のためのものに過ぎず、前記方法は、現在ブロックの予測モードが垂直右側モード外のモードに該当する場合にも同じ又は類似の方法に適用されることができる。
図15は、現在ブロックに隣接した周辺ブロックの符号化モードに基づいてフィルタリング実行領域を決定する方法の実施例を概略的に示す。
図15において、現在ブロック(C)1510のイントラ予測モードは垂直右側モードに該当すると仮定する。このとき、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルを利用して現在ブロック1510に対するイントラ予測を実行するため、予測ブロック内の左側領域をフィルタリング対象領域として決定することができる。
しかし、現在ブロックに隣接した周辺ブロックの符号化モードがインターモードの場合、その周辺ブロック内の復元されたピクセル値は、ネットワークで発生したエラーなどを理由で信頼することができない可能性が高く、符号化モードがインターモードである周辺ブロック内の復元ピクセル値に基づいてフィルタリングを実行することは、符号化効率を低下させることができる。したがって、符号化器及び復号化器は、符号化モードがインターモードである周辺ブロックに隣接した領域に対してはフィルタリングを実行しない。即ち、符号化器及び復号化器は、現在ブロックに隣接した周辺ブロックの符号化モードに基づいてフィルタリング実行領域を決定することができる。
図15を参照すると、現在ブロック1510の左側に隣接した周辺ブロックには、復元された周辺ブロック(A)1520及び復元周辺ブロック(B)1530がある。ここで、周辺ブロック(A)1520の符号化モードはイントラモードであり、周辺ブロック(B)1530の符号化モードはインターモードであると仮定する。このとき、符号化器及び復号化器は、予測ブロック内の左側領域のうち、イントラモードに符号化された周辺ブロック(B)1530に隣接した領域1540のみをフィルタリング対象領域として決定することができる。
図16a及び図16bは、現在ブロックのイントラ予測モードによるフィルタタイプ決定方法の実施例を示す。
図16aの1610は、現在ブロックの予測モードがDCモード及び/又はプラナーモードである場合のフィルタタイプ決定方法の実施例を示す。図16aの1610において、1615は予測ブロックを示し、1620はフィルタリング対象ピクセルに適用されるフィルタタップを示す。
詳述したように、現在ブロックの予測モードがDCモードの場合、複数の参照ピクセルのピクセル値平均により予測ブロック1615が生成されるため、予測ピクセルと参照ピクセルとの間に連関性が少さくなるようになる。したがって、この場合、符号化器及び復号化器は、上方水平予測ピクセルライン(例えば、予測ブロック1615内の最も上方に位置した一つの水平ピクセルライン)及び左側垂直予測ピクセルライン(例えば、予測ブロック1615内の最も左側に位置した一つの垂直ピクセルライン)に含まれている予測ピクセル(例えば、(0,0)、(1,0)、(2,0)、(3,0)、(4,0)、(5,0)、(6,0)、(7,0)、(0,1)、(0,2)、(0,3)、(0,4)、(0,5)、(0,6)、(0,7))をフィルタリング実行領域として決定することができる。また、現在ブロックの予測モードがプラナーモードの場合にも、予測ピクセルと参照ピクセルとの間の連関性が少さい。したがって、この場合、符号化器及び復号化器は、DCモードと同様に、上方水平予測ピクセルライン及び左側垂直予測ピクセルラインに含まれている予測ピクセルをフィルタリング実行領域として決定することができる。
現在ブロックの予測モードがDCモード及び/又はプラナーモードの場合、符号化器及び復号化器は、予測ブロック内の最も左側上方に位置した左側上方予測ピクセル(0,0)に対し、[1/4,2/4,1/4]の3−タップフィルタ1629を適用することができる。
このとき、符号化器及び復号化器は、フィルタリング対象ピクセル(0,0)、フィルタリング対象ピクセルの上方に隣接した参照ピクセル(0,−1)、及びフィルタリング対象ピクセルの左側に隣接した参照ピクセル(−1,0)に基づいて前記フィルタリング対象ピクセルに対するフィルタリングを実行することができる。この場合、フィルタリング対象ピクセルに適用されるフィルタ係数は2/4であり、フィルタリング対象ピクセルの上方に隣接した参照ピクセル及びフィルタリング対象ピクセルの左側に隣接した参照ピクセルに適用されるフィルタ係数は1/4である。
また、現在ブロックの予測モードがDCモード及び/又はプラナーモードの場合、符号化器及び復号化器は、左側垂直予測ピクセルラインに含まれている予測ピクセルのうち、左側上方予測ピクセルを除いたピクセル(例えば、(0,1)、(0,2)、(0,3)、(0,4)、(0,5)、(0,6)、(0,7))の各々に対し、[1/4,3/4]の水平2−タップフィルタ1623を適用することができる。このとき、フィルタリング対象ピクセルの位置が(0,y)と仮定すると、符号化器及び復号化器は、フィルタリング対象ピクセル(0,y)及びフィルタリング対象ピクセルの左側に隣接した参照ピクセル(−1,y)に基づいて前記フィルタリング対象ピクセルに対するフィルタリングを実行することができる。この場合、フィルタリング対象ピクセルに適用されるフィルタ係数は3/4であり、フィルタリング対象ピクセルの左側に隣接した参照ピクセルに適用されるフィルタ係数は1/4である。
また、現在ブロックの予測モードがDCモード及び/又はプラナーモードの場合、符号化器及び復号化器は、上方水平予測ピクセルラインに含まれている予測ピクセルのうち、左側上方予測ピクセルを除いたピクセル(例えば、(1,0)、(2,0)、(3,0)、(4,0)、(5,0)、(6,0)、(7,0))の各々に対し、[1/4,3/4]の垂直2−タップフィルタ1625を適用することができる。このとき、フィルタリング対象ピクセルの位置が(x,0)と仮定すると、符号化器及び復号化器は、フィルタリング対象ピクセル(x,0)及びフィルタリング対象ピクセルの上方に隣接した参照ピクセル(x,−1)に基づいて前記フィルタリング対象ピクセルに対するフィルタリングを実行することができる。この場合、フィルタリング対象ピクセルに適用されるフィルタ係数は3/4であり、フィルタリング対象ピクセルの上方に隣接した参照ピクセルに適用されるフィルタ係数は1/4である。
前述した実施例において、符号化器及び復号化器は、現在ブロックの大きさによって異なるフィルタタイプ(例えば、フィルタ形状、フィルタタップ及び/又はフィルタ係数等)を使用することができる。この場合、符号化器及び復号化器は、現在ブロックの大きさに基づいて適応的にフィルタタイプを決定することができる。しかし、符号化器及び復号化器は、前述した実施例と同様に、現在ブロック及び/又は予測ブロックの大きさに関係無しに常に所定の固定されたフィルタタイプ(例えば、フィルタ形状、フィルタタップ及び/又はフィルタ係数等)を使用することもできる。
図16aの1630は、現在ブロックの予測モードが垂直右側モード(例えば、モード値が5、6、12、13、22、23、24、25である予測モード)である場合のフィルタタイプ決定方法の実施例を示す。図16aの1630において、1635は予測ブロックを示し、1640はフィルタリング対象ピクセルに適用されるフィルタタップを示す。
詳述したように、現在ブロックの予測モードが垂直右側モードの場合、符号化器及び復号化器は、上方参照ピクセル及び/又は上方右側参照ピクセルに基づいて現在ブロックに対するイントラ予測を実行するため、予測ブロック1635内の左側領域に位置した予測ピクセルと左側参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合、符号化器及び復号化器は、左側垂直予測ピクセルライン(例えば、予測ブロック1635内の最も左側に位置した一つの垂直ピクセルライン)に含まれている予測ピクセル(例えば、(0,0)、(0,1)、(0,2)、(0,3)、(0,4)、(0,5)、(0,6)、(0,7))をフィルタリング実行領域として決定することができる。
一方、現在ブロックの予測モードが垂直モード(例えば、モード値が0である予測モード)の場合、符号化器及び復号化器は、上方参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック内の左側領域に位置した予測ピクセルと左側参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合にも符号化器及び復号化器は、左側垂直予測ピクセルラインに含まれている予測ピクセルをフィルタリング実行領域として決定することができる。しかし、垂直モードに適用されるフィルタタイプは、垂直右側モードに適用されるフィルタタイプと異なる。
現在ブロックの予測モードが垂直右側モードの場合、符号化器及び復号化器は、左側垂直予測ピクセルラインに含まれている予測ピクセル(例えば、(0,0)、(0,1)、(0,2)、(0,3)、(0,4)、(0,5)、(0,6)、(0,7))の各々に対し、[1/4,3/4]の対角2−タップフィルタ1640を適用することができる。このとき、フィルタリング対象ピクセルの位置が(0,y)と仮定すると、符号化器及び復号化器は、フィルタリング対象ピクセル(0,y)及びフィルタリング対象ピクセルの左側に隣接した参照ピクセルの下方に隣接した参照ピクセル(−1,y+1)に基づいて前記フィルタリング対象ピクセルに対するフィルタリングを実行することができる。この場合、フィルタリング対象ピクセルに適用されるフィルタ係数は3/4であり、フィルタリング対象ピクセルの左側に隣接した参照ピクセルの下方に隣接した参照ピクセルに適用されるフィルタ係数は1/4である。
図16bの1650は、現在ブロックの予測モードが水平下方モード(例えば、モード値が8、9、16、17、30、31、32、33である予測モード)である場合のフィルタタイプ決定方法の実施例を示す。図16bの1650において、1655は予測ブロックを示し、1660はフィルタリング対象ピクセルに適用されるフィルタタップを示す。
詳述したように、現在ブロックの予測モードが水平下方モードの場合、符号化器及び復号化器は、左側参照ピクセル及び/又は下方左側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック1655内の上方領域に位置した予測ピクセルと上方参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合、符号化器及び復号化器は、上方水平予測ピクセルライン(例えば、予測ブロック1655内の最も上方に位置した一つの垂直ピクセルライン)に含まれている予測ピクセル(例えば、(0,0)、(1,0)、(2,0)、(3,0)、(4,0)、(5,0)、(6,0)、(7,0))をフィルタリング実行領域として決定することができる。
一方、現在ブロックの予測モードが水平モード(例えば、モード値が1である予測モード)の場合、符号化器及び復号化器は、左側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行するため、予測ブロック1655内の上方領域に位置した予測ピクセルと上方参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合にも符号化器及び復号化器は、上方水平予測ピクセルラインに含まれている予測ピクセルをフィルタリング実行領域として決定することができる。しかし、水平モードに適用されるフィルタタイプは、水平下方モードに適用されるフィルタタイプと異なることもある。
現在ブロックの予測モードが水平下方モードの場合、符号化器及び復号化器は、上方水平予測ピクセルラインに含まれている予測ピクセル(例えば、(0,0)、(1,0)、(2,0)、(3,0)、(4,0)、(5,0)、(6,0)、(7,0))の各々に対し、[1/4,3/4]の対角2−タップフィルタ1660を適用することができる。このとき、フィルタリング対象ピクセルの位置が(x,0)と仮定すると、符号化器及び復号化器は、フィルタリング対象ピクセル(x,0)及びフィルタリング対象ピクセルの上方に隣接した参照ピクセルの右側に隣接した参照ピクセル(x+1,−1)に基づいて前記フィルタリング対象ピクセルに対するフィルタリングを実行することができる。この場合、フィルタリング対象ピクセルに適用されるフィルタ係数は3/4であり、フィルタリング対象ピクセルの上方に隣接した参照ピクセルの右側に隣接した参照ピクセルに適用されるフィルタ係数は1/4である。
図16bの1670は、現在ブロックのイントラ予測モード(特に、方向性予測モード)によって適応的にフィルタタイプ(例えば、フィルタ形状、フィルタ係数、フィルタタップ等)を決定する方法の実施例を示す。図16bの1670において、1675は予測ブロックを示し、1680はフィルタリング対象ピクセルに適用されるフィルタタップを示す。
詳述した1630、1650の実施例と同様に、符号化器及び復号化器は、垂直右側モード及び/又は水平下方モードの各々に対して所定の固定されたフィルタタイプを適用することができる。しかし、符号化器及び復号化器は、詳述したフィルタタイプ外にイントラ予測モードによって多様なフィルタタイプを適用することもできる。このとき、符号化器及び復号化器は、現在ブロックのイントラ予測モードに基づいて適応的にフィルタタイプを決定することができる。
一例として、符号化器及び復号化器は、フィルタリング対象ピクセル(x,y)、参照ピクセル(x+2,y−1)、及び参照ピクセル(x+3,y−1)に基づいてフィルタリングを実行する3−タップフィルタ1681を使用することができる。このとき、フィルタリング対象ピクセル(x,y)に適用されるフィルタ係数は12であり、参照ピクセル(x+2,y−1)に適用されるフィルタ係数は3であり、参照ピクセル(x+3,y−1)に適用されるフィルタ係数は1である。他の例として、符号化器及び復号化器は、フィルタリング対象ピクセル(x,y)、参照ピクセル(x+1,y−1)、及び参照ピクセル(x+2,y−1)に基づいてフィルタリングを実行する3−タップフィルタ1683、1685、1687を使用することができる。この場合、フィルタリング対象ピクセル(x,y)に適用されるフィルタ係数は12であり、参照ピクセル(x+1,y−1)に適用されるフィルタ係数は1であり、参照ピクセル(x+2,y−1)に適用されるフィルタ係数は3である(1683)。また、フィルタリング対象ピクセル(x,y)に適用されるフィルタ係数は12であり、参照ピクセル(x+1,y−1)に適用されるフィルタ係数は2であり、参照ピクセル(x+2,y−1)に適用されるフィルタ係数は2である(1685)。また、フィルタリング対象ピクセル(x,y)に適用されるフィルタ係数は8であり、参照ピクセル(x+1,y−1)に適用されるフィルタ係数は6であり、参照ピクセル(x+2,y−1)に適用されるフィルタ係数は2である(1687)。他の例として、符号化器及び復号化器は、フィルタリング対象ピクセル(x,y)、参照ピクセル(x+1,y−1)に基づいてフィルタリングを実行する2−タップフィルタ1689を使用することもできる。このとき、フィルタリング対象ピクセル(x,y)に適用されるフィルタ係数は8であり、参照ピクセル(x+1,y−1)に適用されるフィルタ係数は8である。
一方、現在ブロックのイントラ予測モードが詳述した予測モードを除いた残りの予測モード(例えば、モード値が3、4、7、10、11、14、15、18、19、20、21、26、27、28、29である予測モード)のうち一つに該当する場合、符号化器及び復号化器は、上方参照ピクセル及び上方右側参照ピクセルのうち、少なくとも一つの参照ピクセルをイントラ予測に使用することができ、左側参照ピクセル及び下方左側参照ピクセルのうち、少なくとも一つの参照ピクセルをイントラ予測に使用することができる。
したがって、この場合、予測ブロック内の左側領域及び上方領域に位置した予測ピクセルの全てが参照ピクセルとの連関性を維持することができるため、符号化器及び復号化器は、予測ブロックに対してフィルタリングを実行しない。
また、図10の実施例で詳述したように、符号化器及び復号化器は、現在ブロックの色成分情報に基づいて予測ブロックに対するフィルタリング実行可否を決定することができるため、符号化器及び復号化器は、現在ブロックがルマブロックに該当する場合にのみ図16a及び図16bで詳述したフィルタリング過程を実行することもできる。即ち、前述した実施例に係るフィルタリング過程は、現在ブロックがルマブロックに該当する場合にのみ適用され、現在ブロックがクロマブロックに該当する場合には適用されない。
図17は、図16a及び図16bの実施例に係るフィルタタイプ決定方法を簡略に示す。
図17の1710は、現在ブロックの予測モードがDCモード及び/又はプラナーモードである場合のフィルタタイプの実施例を示す。図17の1710は、図16aの1610に示したフィルタタイプと同じフィルタタイプを示す。
図16aの1610で詳述したように、現在ブロックの予測モードがDCモード(例えば、モード値が2である予測モード)及び/又はプラナーモード(例えば、モード値が34である予測モード)の場合、符号化器及び復号化器は、予測ブロック内の最も左側上方に位置した左側上方予測ピクセル(例えば、図17の1710において、cピクセル)に対し、3−タップフィルタを適用することができる。また、符号化器及び復号化器は、左側垂直予測ピクセルラインに含まれている予測ピクセルのうち、左側上方予測ピクセルを除いたピクセル(例えば、図17の1710において、gピクセル)の各々に対し、水平2−タップフィルタを適用することができる。また、符号化器及び復号化器は、上方水平予測ピクセルラインに含まれている予測ピクセルのうち、左側上方予測ピクセルを除いたピクセル(例えば、図17の1710において、eピクセル)の各々に対し、垂直2−タップフィルタを適用することができる。一実施例として、これは以下の数式1により示される。
(数1)
F_g=(f+3*g+2)>>2
F_e=(d+3*e+2)>>2
F_c=(a+2*c+b+2)>>2
ここで、F_xは、x位置の予測ピクセル値に対してフィルタリングを実行することによって生成された、フィルタリングされた予測ピクセル値を示す。
図17の1730は、現在ブロックの予測モードが垂直右側モード(例えば、モード値が5、6、12、13、22、23、24、25である予測モード)である場合のフィルタタイプの実施例を示す。図17の1730は、図16aの1630に示すフィルタタイプと同じフィルタタイプを示す。
図16aの1630で詳述したように、現在ブロックの予測モードが垂直右側モードの場合、符号化器及び復号化器は、左側垂直予測ピクセルラインに含まれている予測ピクセルの各々(例えば、図17の1730において、iピクセル及びkピクセル)に対し、2−タップフィルタを適用することができる。垂直右側モードで予測方向は対角方向であるため、符号化器及び復号化器は、前記フィルタの形状を対角形状に決定することができる。
一実施例として、これは以下の数式2により示される。
(数2)
F_i=(h+3*i+2)>>2
F_k=(j+3*k+2)>>2
ここで、F_xは、x位置の予測ピクセル値に対してフィルタリングを実行することによって生成された、フィルタリングされた予測ピクセル値を示す。
図17の1750は、現在ブロックの予測モードが水平下方モード(例えば、モード値が8、9、16、17、30、31、32、33である予測モード)である場合のフィルタタイプの実施例を示す。図17の1750は、図16bの1650に示すフィルタタイプと同じフィルタタイプを示す。
図16bの1650で詳述したように、現在ブロックの予測モードが水平下方モードの場合、符号化器及び復号化器は、上方水平予測ピクセルラインに含まれている予測ピクセルの各々(例えば、図17の1750において、mピクセル及びoピクセル)に対し、2−タップフィルタを適用することができる。水平下方モードで予測方向は対角方向であるため、符号化器及び復号化器は、前記フィルタの対角形状に決定することができる。一実施例として、これは以下の数式3により示される。
(数3)
F_m=(l+3*m+2)>>2
F_o=(n+3*o+2)>>2
ここで、F_xは、x位置の予測ピクセル値に対してフィルタリングを実行することによって生成された、フィルタリングされた予測ピクセル値を示す。
図18は、現在ブロックの予測モードが垂直モード及び/又は水平モードである場合に適用されるフィルタタイプの実施例を概略的に示す。
後述される実施例において、第1の参照ピクセル、第2の参照ピクセル、及び第3の参照ピクセルなどの用語は、図18の1810及び図18の1820で各々独立的に使われる。例えば、図18の1810で使われる第1の参照ピクセルは、図18の1820で使われる第1の参照ピクセルと同じものではなく、第2の参照ピクセル及び第3の参照ピクセルも図18の1810及び図18の1820で各々独立的な意味を有することができる。
詳述したように、フィルタタイプにより決定されるフィルタは、フィルタ形状、フィルタタップ、フィルタ係数などにより定義されるフィルタでなくてもよい。例えば、符号化器及び復号化器は、参照ピクセルのピクセル値に、所定の過程により決定されるオフセット値を加えることによってフィルタリング過程を実行することもできる。このとき、前記フィルタリング過程は、予測ブロック生成過程と結合されて一つの一つの過程に実行されてもよい。即ち、現在ブロック内の各ピクセルのフィルタリングされた予測ピクセル値は、詳述したフィルタリング過程のみで導出されることができ、このとき、詳述したフィルタリング過程は、予測ピクセル生成過程及び生成された予測ピクセルに対するフィルタリング過程の両方ともを含む一つのプロセスに該当することができる。このような場合のフィルタリング過程は、参照ピクセルを利用した最終予測ピクセル(及び/又はフィルタリングされた予測ピクセル)生成過程と見なすこともできる。したがって、図18では予測ピクセル生成の観点で実施例を叙述する。
図18の1810は、現在ブロックの予測モードが垂直モードである場合の予測ピクセル生成方法の実施例を示す。
詳述したように、現在ブロックの予測モードが垂直モードの場合、符号化器及び復号化器は、上方参照ピクセルを利用して現在ブロックに対するイントラ予測を実行することによって予測ブロックを生成することができる。このとき、予測ブロック内の左側領域に位置した予測ピクセルと左側参照ピクセルとの間の連関性が少さいため、予測ブロック内の左側領域に位置した予測ピクセルは、大きい予測誤差を有することができる。したがって、符号化器及び復号化器は、現在ブロック1815内の最も左側に位置した一つの垂直ピクセルライン(以下、左側垂直ピクセルラインという)に含まれているピクセル((0,0)、(0,1)、(0,2)、(0,3)、(0,4)、(0,5)、(0,6)、(0,7))の各々に対し、下記のように予測ブロックを生成することができる。
図18の1810を参照すると、左側垂直ピクセルライン上には(0,0)、(0,1)、(0,2)、(0,3)、(0,4)、(0,5)、(0,6)、(0,7)位置のピクセルが存在することができる。図18の1810において、現在予測対象ピクセルは、前記左側垂直ピクセルライン上のピクセルのうち、ピクセル(0,4)と仮定する。
現在ブロック1815の予測モードが垂直モードであるため、符号化器及び復号化器は、上方参照ピクセルのうち、予測対象ピクセルと同一垂直ライン上に位置した第1の参照ピクセル(0,−1)(例えば、上方参照ピクセルのうち、最も左側に位置した参照ピクセル)のピクセル値を予測対象ピクセルの位置に入れることができる。即ち、現在ブロック1815の予測モードが垂直モードの場合、前記第1の参照ピクセルのピクセル値が、予測対象ピクセルの予測ピクセル値として決定されることができる。
しかし、この場合、生成された予測ピクセル値は、大きい予測誤差を有することができるため、符号化器及び復号化器は、前記第1の参照ピクセル値にオフセット値を加えることによって最終予測ピクセル値を導出することができる。ここで、オフセット値を加える過程は、フィルタリング過程に該当することもでき、予測ピクセル生成過程の一部分に該当することもできる。このとき、前記オフセット値は、予測対象ピクセルの左側に隣接した第2の参照ピクセル(−1,4)及び第1の参照ピクセルの左側に隣接した第3の参照ピクセル(−1,−1)に基づいて導出されることができる。例えば、前記オフセット値は、前記第2の参照ピクセルのピクセル値から前記第3の参照ピクセルのピクセル値を引いた値に該当することができる。即ち、符号化器及び復号化器は、前記第1の参照ピクセル値に、前記第2の参照ピクセル値と前記第3の参照ピクセル値との差値を加えることによって予測対象ピクセルの予測値を導出することができる。詳述した予測ピクセル生成過程は、左側垂直ピクセルライン上のピクセルのうち、ピクセル(0,4)でないピクセルにも同じ又は類似に適用されることができる。
詳述した予測ピクセル生成過程は、一例として以下の数式4により示される。
(数4)
p′[x,y]=p[x,−1]+((p[−1,y]−p[−1,−1])>>1)),{x=0、y=0,...,nS−1}
ここで、p′[x,y]は、(x,y)位置の予測対象ピクセルに対する最終予測ピクセル値を示し、p[x,−1]は、上方参照ピクセルのうち、予測対象ピクセルと同一垂直ライン上に位置した第1の参照ピクセルを示す。また、p[−1,y]は、予測対象ピクセルの左側に隣接した第2の参照ピクセルを示し、p[−1,−1]は、第1の参照ピクセルの左側に隣接した第3の参照ピクセルを示す。また、nSは、現在ブロックの高さ(height)を示す。
一方、現在ブロック1815の予測モードが垂直モードの場合、オフセット及び/又はフィルタリングが適用される領域は、前述した実施例に限定されるものではない。例えば、符号化器及び復号化器は、現在ブロック1815内の最も左側に位置した2個の垂直ピクセルラインに対し、詳述した予測ピクセル生成過程を適用することもできる。この場合、予測ピクセル生成過程は、一例として以下の数式5により示される。
(数5)
p′[x,y]=p[x,y]+(p[−1,y]−p[−1,−1]+(1<<x))>>(x+1),{x=0,...,1、y=0,...,7}
ここで、p′[x,y]は、(x,y)位置の予測対象ピクセルに対する最終予測ピクセル値を示し、p[x,y]は、一般的な垂直予測過程により生成される予測ピクセル値を示す。
また、p[−1,y]は、左側参照ピクセルのうち、予測対象ピクセルと同一水平ライン上に位置した参照ピクセルを示し、p[−1,−1]は、上方左側コーナー参照ピクセルを示す。
一方、詳述したオフセット値を加える過程は、現在ブロックがルマブロックである場合にのみ適用され、現在ブロックがクロマブロックである場合には適用されなくてもよい。
例えば、現在ブロックがクロマブロックである場合、符号化器及び復号化器は、オフセット値の適用なく第1の参照ピクセルを予測対象ピクセルの予測ピクセル値として決定することもできる。
図18の1820は、現在ブロックの予測モードが水平モードである場合の予測ピクセル生成方法の実施例を示す。
詳述したように、現在ブロックの予測モードが水平モードの場合、符号化器及び復号化器は、左側参照ピクセルを利用して現在ブロックに対するイントラ予測を実行することによって予測ブロックを生成することができる。このとき、予測ブロック内の上方領域に位置した予測ピクセルと上方参照ピクセルとの間の連関性が少さいため、予測ブロック内の上方領域に位置した予測ピクセルは、大きい予測誤差を有することができる。
したがって、符号化器及び復号化器は、現在ブロック1825内の最も上方に位置した一つの水平ピクセルライン(以下、上方水平ピクセルラインという)に含まれているピクセル((0,0)、(1,0)、(2,0)、(3,0)、(4,0)、(5,0)、(6,0)、(7,0))の各々に対し、下記のように予測ブロック及び/又は予測ピクセルを生成することができる。
図18の1820を参照すると、上方水平ピクセルライン上には(0,0)、(1,0)、(2,0)、(3,0)、(4,0)、(5,0)、(6,0)、(7,0)位置のピクセルが存在することができる。図18の1820において、現在予測対象ピクセルは、前記上方水平ピクセルライン上のピクセルのうち、ピクセル(4,0)と仮定する。
現在ブロック1825の予測モードが水平モードであるため、符号化器及び復号化器は、左側参照ピクセルのうち、予測対象ピクセルと同一水平ライン上に位置した第1の参照ピクセル(−1,0)(例えば、左側参照ピクセルのうち、最も上方に位置した参照ピクセル)のピクセル値を予測対象ピクセルの位置に入れることができる。即ち、現在ブロック1825の予測モードが水平モードの場合、前記第1の参照ピクセルのピクセル値が、予測対象ピクセルの予測ピクセル値として決定されることができる。
しかし、この場合、生成された予測ピクセル値は、大きい予測誤差を有することができるため、符号化器及び復号化器は、前記第1の参照ピクセル値にオフセット値を加えることによって最終予測ピクセル値を導出することができる。ここで、オフセット値を加える過程は、フィルタリング過程に該当することもでき、予測ピクセル生成過程の一部分に該当することもできる。このとき、前記オフセット値は、予測対象ピクセルの上方に隣接した第2の参照ピクセル(4,−1)及び第1の参照ピクセルの上方に隣接した第3の参照ピクセル(−1,−1)に基づいて導出されることができる。例えば、前記オフセット値は、前記第2の参照ピクセルのピクセル値から前記第3の参照ピクセルのピクセル値を引いた値に該当することができる。即ち、符号化器及び復号化器は、前記第1の参照ピクセル値に、前記第2の参照ピクセル値と前記第3の参照ピクセル値との差値を加えることによって予測対象ピクセルの予測値を導出することができる。詳述した予測ピクセル生成過程は、上方水平ピクセルライン上のピクセルのうち、ピクセル(4,0)でないピクセルにも同じ又は類似に適用されることができる。
詳述した予測ピクセル生成過程は、一例として以下の数式6により示される。
(数6)
p′[x,y]=p[−1,y]+((p[x,−1]−p[−1,−1])>>1)),{x=0,...,nS−1、y=0}
ここで、p′[x,y]は、(x,y)位置の予測対象ピクセルに対する最終予測ピクセル値を示し、p[−1,y]は、左側参照ピクセルのうち、予測対象ピクセルと同一水平ライン上に位置した第1の参照ピクセルを示す。また、p[x,−1]は、予測対象ピクセルの上方に隣接した第2の参照ピクセルを示し、p[−1,−1]は、第1の参照ピクセルの上方に隣接した第3の参照ピクセルを示す。また、nSは、現在ブロックの幅(width)を示す。
一方、現在ブロック1825の予測モードが水平モードの場合、オフセット及び/又はフィルタリングが適用される領域は、前述した実施例に限定されるものではない。例えば、符号化器及び復号化器は、現在ブロック1825内の最も上方に位置した2個の水平ピクセルラインに対し、詳述した予測ピクセル生成過程を適用することもできる。この場合、予測ピクセル生成過程は、一例として以下の数式7により示される。
(数7)
p′[x,y]=p[x,y]+(p[x,−1]−p[−1,−1]+(1<<y))>>(y+1),{x=0〜7、y=0〜1}
ここで、p′[x,y]は、(x、y)位置の予測対象ピクセルに対する最終予測ピクセル値を示し、p[x,y]は、一般的な水平予測過程により生成される予測ピクセル値を示す。また、p[x,−1]は、上方参照ピクセルのうち、予測対象ピクセルと同一垂直ライン上に位置した参照ピクセルを示し、p[−1,−1]は、上方左側コーナー参照ピクセルを示す。
一方、図18の1810と同様に、詳述したオフセット値を加える過程は、現在ブロックがルマブロックである場合にのみ適用され、現在ブロックがクロマブロックである場合には適用されなくてもよい。例えば、現在ブロックがクロマブロックである場合、符号化器及び復号化器は、オフセット値の適用なく第1の参照ピクセルを予測対象ピクセルの予測ピクセル値として決定することもできる。
図19は、本発明によるフィルタタイプの他の実施例を概略的に示す。
図19の実施例において、符号化器及び復号化器は、左側参照ピクセル及び/又は下方左側参照ピクセルに基づいて現在ブロックに対するイントラ予測を実行するため、予測ブロック1910内の上方領域に位置した予測ピクセルと上方参照ピクセルとの間の連関性が少さくなることができる。したがって、この場合、符号化器及び復号化器は、上方水平予測ピクセルライン(例えば、予測ブロック1910内の最も上方に位置した一つの水平ピクセルライン)に含まれている予測ピクセルに対してフィルタリングを実行することができる。後述される実施例では上方水平予測ピクセルライン上のピクセルに対してフィルタリングが実行される場合の実施例が叙述されるが、図19によるフィルタリング方法は、左側垂直予測ピクセルライン(例えば、予測ブロック1910内の最も左側に位置した一つの垂直ピクセルライン)上のピクセルに対してフィルタリングが実行される場合にも類似の方法に適用されることができる。
図19を参照すると、符号化器及び復号化器は、予測ブロック1910内の予測されたピクセル、即ち、予測ピクセル(B)1920に対するフィルタリングを実行することができる。前記フィルタリング実行過程は、予測ピクセル1920のピクセル値に適正オフセット値を加える過程に該当することができる。
前記オフセット値は、参照ピクセルに基づいて導出されることができる。一例として、フィルタリング対象ピクセル1920が予測ブロック1910内の最も上方に位置したピクセルである場合、オフセット値の導出に使われる参照ピクセルは、フィルタリング対象ピクセル1920の上方に隣接した参照ピクセル(A)1930である。他の例として、フィルタリング対象ピクセルが予測ブロック1910内の最も左側に位置したピクセルである場合、オフセット値の導出に使われる参照ピクセルは、フィルタリング対象ピクセルの左側に隣接した参照ピクセルである。以下、参照ピクセル1930に基づいてオフセット値を求める過程の実施例が叙述される。
符号化器及び復号化器は、参照ピクセル1930に対してイントラ予測を実行して参照ピクセルの予測値、即ち、予測参照ピクセル値を求めることができる。ここで、前記イントラ予測は、方向性予測である。このとき、符号化器及び復号化器は、現在ブロックの予測モード(及び/又は予測方向)1940と同じイントラ予測モード(及び/又は予測方向)1950に基づいて参照ピクセル1930に対する予測を実行することができる。イントラ予測モードの予測方向及び参照ピクセルに基づいて決定される予測参照ピクセルの位置が整数位置でない場合、符号化器及び復号化器は、整数位置の参照ピクセルに基づいて補間(interpolation)を実行して予測参照ピクセル値を求めることができる。
符号化器及び復号化器は、参照ピクセルと予測参照ピクセルとの間のピクセル値差に基づいてオフセット値を導出することができる。例えば、前記オフセット値は、参照ピクセル値と予測参照ピクセル値との差値を4で割った値に該当することができる。オフセット値が導出されると、符号化器及び復号化器は、予測ピクセル1920のピクセル値に前記導出されたオフセット値を加えてフィルタリングされた予測ピクセルのピクセル値を導出することができる。
詳述したフィルタリング過程は、一例として以下の数式8により示される。
(数8)
Ref1=Aの予測値
Delta=(A−Ref1+2)>>2
B′=B+Delta
ここで、Bは予測ピクセル1920のピクセル値を示し、Aは前記予測ピクセルに対する参照ピクセル1930のピクセル値を示し、Ref1はAに対する予測参照ピクセルのピクセル値を示す。また、B′はフィルタリングされた予測ピクセルのピクセル値を示す。
前述した実施例ではフィルタリング実行可否決定過程、フィルタリング実行領域決定過程、及びフィルタタイプ決定過程などが各々独立的に叙述されているが、符号化器及び復号化器は、前記過程を結合して一つのプロセスで処理することもできる。このとき、符号化器及び復号化器は、前記フィルタリング実行可否決定過程、フィルタリング実行領域決定過程、及びフィルタタイプ決定過程のうち二つ以上を一つのテーブルに基づいて決定することができる。
一実施例として、イントラ予測モードによるフィルタリング実行可否、フィルタリング実行領域、及びフィルタタイプは、一つのテーブルにより示される。このとき、符号化器及び復号化器には前記テーブルが同じに格納されており、符号化器及び復号化器は、イントラ予測モード及び格納されたテーブルに基づいてフィルタリング実行可否、フィルタリング実行領域、及びフィルタタイプを決定することができる。以下の表7は、イントラ予測モードによるフィルタリング実行可否、フィルタリング実行領域、及びフィルタタイプを示すテーブルの一実施例を示す。
表7において、フィルタタイプに割り当てられた値が0の場合、前記フィルタタイプは、予測ブロックに対してフィルタリングが実行されないことを示すことができる。また、フィルタタイプに割り当てられた値が1、2又は3の場合、前記フィルタタイプは、予測ブロックに対してフィルタリングが実行されることを示すことができる。
また、表7において、フィルタタイプに割り当てられた値が1の場合、前記フィルタタイプは、図16aの1610で詳述した、DCモード及び/又はプラナーモードでのフィルタリング実行領域及びフィルタタイプが適用されることを示すことができる。そして、フィルタタイプに割り当てられた値が2の場合、前記フィルタタイプは、図16aの1630で詳述した、垂直右側モードでのフィルタリング実行領域及びフィルタタイプが適用されることを示すことができる。また、フィルタタイプに割り当てられた値が3の場合、前記フィルタタイプは、図16bの1650で詳述した、水平下方モードでのフィルタリング実行領域及びフィルタタイプが適用されることを示すことができる。
他の実施例として、詳述した表7に示すテーブルは、ブロック大きさによるフィルタ適用可否に対する情報を追加に含むことができる。即ち、イントラ予測モードによるフィルタ適用可否、フィルタ適用領域、及びフィルタタイプに対する情報を含むテーブルは、ブロック大きさによるフィルタ適用可否に対する情報を共に含むことができる。このとき、符号化器及び復号化器には前記テーブルが同じに格納されており、符号化器及び復号化器は、イントラ予測モード、現在ブロック(及び/又は予測ブロック)の大きさ、及び格納されたテーブルに基づいてフィルタリング実行可否、フィルタリング実行領域、及びフィルタタイプを決定することができる。
現在ブロック及び/又は予測ブロックの大きさがあまりにも小さい又は大きい場合、前記予測ブロックに対してはフィルタリングを実行しないことが好ましい。例えば、現在ブロック及び/又は予測ブロックが32×32大きさのブロックのように大きいブロックに該当する場合、前記現在ブロック周辺及び/又は前記現在ブロック内部のピクセル間の連関性が大きく、このような場合には予測ブロックに対してフィルタリングを実行することが特に意味がない。したがって、符号化器及び復号化器は、現在ブロック及び/又は予測ブロックの大きさによって適応的にフィルタリング実行可否を決定することによって、フィルタリング効率を向上させることができる。以下の表8は、詳述したように、イントラ予測モードだけでなく、ブロック大きさを共に考慮して構成されたテーブルの一実施例を示す。
表8において、フィルタタイプに割り当てられた0、1、2及び3の値は、表7と同じ意味を有することができる。表8を参照すると、符号化器及び復号化器は、現在ブロック及び/又は予測ブロックの大きさに基づいてフィルタリング実行可否を決定することができ、イントラ予測モードに基づいてフィルタリング実行可否、フィルタリング実行領域、及びフィルタタイプなどを決定することができる。
他の実施例として、イントラ予測モードによるフィルタリング実行可否、フィルタリング実行領域、及びフィルタタイプは、以下の表9のように示される。
図20は、表9に適用されるイントラ予測モード及びフィルタタイプを説明するための図面である。図20の2010は、イントラ予測モードの予測方向及び各予測方向に割り当てられたモード値の実施例を示す。前述した実施例は、主に図4aの410に示すイントラ予測モード(予測方向、モード値)に基づいて叙述されたが、表9の実施例に限って図20の2010に示すイントラ予測モード(予測方向、モード値)が使われると仮定する。
しかし、表9の実施例は、図20の2010に限定されて適用されるものではない。
表9を参照すると、フィルタリング実行領域に割り当てられた値が0の場合及び/又はフィルタタイプに割り当てられた値が0の場合、符号化器及び復号化器は、予測ブロックに対してフィルタリングを実行しない。反面、フィルタリング実行領域に割り当てられた値が0でなく、且つフィルタタイプに割り当てられた値が0でない場合、符号化器及び復号化器は、予測ブロックに対してフィルタリングを実行することができる。
一方、フィルタ適用領域に割り当てられたTxは、予測ブロック内の最も上方に位置したx個の水平ピクセルライン、即ち、上方水平予測ピクセルラインを示し、Lxは、予測ブロック内の最も左側に位置したx個の垂直ピクセルライン、即ち、左側垂直予測ピクセルラインを示すことができる。また、フィルタ適用領域に割り当てられたTxLxは、前記上方水平予測ピクセルライン及び前記左側垂直予測ピクセルラインの両方ともを含む領域を示すことができる。表9の実施例ではxの値が1、2又は4になることができる。しかし、他の実施例として、xは所定の固定された値であってもよく、一例として、xは常に1であってもよい。このとき、前記上方水平予測ピクセルラインは、1個の水平ピクセルラインのみを含み、前記左側垂直予測ピクセルラインも1個の垂直ピクセルラインのみを含むことができる。
表9の0でないフィルタタイプにはa、b、c、d、eがある。表9において、フィルタタイプに割り当てられた値がaの場合、符号化器及び復号化器は、図16aの1610で詳述したフィルタリング実行領域及びフィルタタイプに基づいてフィルタリングを実行することができる。このとき、符号化器及び復号化器は、上方水平予測ピクセルライン(1個のピクセルライン)及び左側垂直予測ピクセルライン(1個のピクセルライン)に含まれる予測ピクセルに対し、図16aの1610で詳述したフィルタ係数に基づいてフィルタリングを実行することができる。表9において、フィルタタイプに割り当てられた値がbの場合、符号化器及び復号化器は、図18で詳述したフィルタリング実行領域及びフィルタタイプに基づいてフィルタリングを実行することができる。現在ブロックの予測モードが垂直モード(例えば、モード値が1である予測モード)の場合、符号化器及び復号化器は、図18の1810のように左側垂直予測ピクセルライン(例えば、2個のピクセルライン)に含まれる予測ピクセルに対してフィルタリングを実行することができる。また、現在ブロックの予測モードが水平モード(例えば、モード値が2である予測モード)の場合、符号化器及び復号化器は、図18の1820のように上方水平予測ピクセルライン(例えば、2個のピクセルライン)に含まれる予測ピクセルに対してフィルタリングを実行することができる。
一方、表9において、フィルタタイプに割り当てられた値がcであり、且つフィルタ適用領域にTxが割り当てられた場合、符号化器及び復号化器は、図16bの1650で詳述したフィルタリング実行領域及びフィルタタイプに基づいてフィルタリングを実行することができる。このとき、符号化器及び復号化器は、上方水平予測ピクセルラインに含まれる予測ピクセルに対して[1,3]の対角フィルタを適用することができる。また、表9において、フィルタタイプに割り当てられた値がbであり、且つフィルタ適用領域にLxが割り当てられた場合、符号化器及び復号化器は、図16aの1630で詳述したフィルタリング実行領域及びフィルタタイプに基づいてフィルタリングを実行することができる。このとき、符号化器及び復号化器は、左側垂直予測ピクセルラインに含まれる予測ピクセルに対して[1,3]の対角フィルタを適用することができる。
表9において、現在ブロックのイントラ予測モードが7又は10の場合、フィルタタイプに割り当てられた値はdである。図20の2020を参照すると、ブロック2023は予測ブロックを示し、現在ブロックのイントラ予測モードが10の場合の予測方向は2025のように示される。このとき、フィルタリングされた予測ピクセル値は、以下の数式9により示される。
(数9)
p′[x,y]=((16−k)*p[x,y]+k*p[x,−1]+8)>>4、k=1<<(3−y)、{x=0,...,7、y=0,...,3}
ここで、p′[x,y]は、フィルタリングされた予測ピクセル値を示し、p[x,y]は、(x,y)位置のフィルタリング前の予測ピクセル値を示すことができる。また、p[x,−1]は、上方参照ピクセルのうち、予測ピクセルと同一垂直線上に位置する参照ピクセルを示すことができる。数式9を参照すると、現在ブロックのイントラ予測モードが10の場合、符号化器及び復号化器は、予測ブロック2023内の最も上方に位置した4個の水平ピクセルラインに対してフィルタリングを実行することができる。現在ブロックのイントラ予測モードが7の場合にも、符号化器及び復号化器は、予測ブロック2023内の最も左側に位置した4個の垂直ピクセルラインに対し、数式9と類似の方法にフィルタリングを実行することができる。
また、図2の2020を参照すると、現在ブロックのイントラ予測モードが24の場合予測方向は2027のように示される。表9において、現在ブロックのイントラ予測モードが24の場合、フィルタタイプに割り当てられた値はeである。現在ブロックのイントラ予測モードが24の場合、フィルタリングされた予測ピクセル値は、以下の数式10により示される。
(数10)
p′[x,y]=p[x,y]+(p[−1,y]−Rp[−1,y]+2)>>2、{x=0、y=0,...,7}
ここで、p′[x,y]は、フィルタリングされた予測ピクセル値を示し、p[x,y]は、(x,y)位置のフィルタリング前の予測ピクセル値を示すことができる。また、p[−1,y]は、左側参照ピクセルのうち、予測ピクセルと同一水平線上に位置する参照ピクセルを示すことができる。Rp[−1,y]は、p[−1,y]の参照ピクセルに対する予測値、即ち、予測参照ピクセル値を示すことができる。符号化器及び復号化器は、前記予測参照ピクセル値を導出するために、p[−1,y]の参照ピクセルに対して現在ブロックの予測モードと同じイントラ予測モードに基づいて予測を実行することができる。
表9において、現在ブロックのイントラ予測モードが13、17、23、31、32の場合にもフィルタタイプに割り当てられた値はeである。したがって、この場合にも符号化器及び復号化器は、数式10と類似の方法にフィルタリングを実行することができる。
表9において、各フィルタタイプに割り当てられた値によって適用されるフィルタは、前述した実施例に限定されるものではない。即ち、各フィルタタイプに割り当てられた値によって適用されるフィルタは具現及び/又は必要によって変わることができ、フィルタ適用可否も前述した実施例と異なるように設定されることもできる。
以下、本発明による予測ピクセルに対するフィルタリング実行過程の一実施例が具体的に叙述される。後述される実施例において、入力はIntraPredMode、nS、p[x,y](x,y=−1,...,nS)及びpredSamples[x,y](x,y=0,...,nS−1)であり、出力はpredSamplesF[x,y](x,y=0,...,nS−1)である。ここで、IntraPredModeは、現在ブロックのイントラ予測モードを示し、nSは、予測ブロックの横の大きさ及び縦の大きさを示し、p[x,y](x,y=−1,...,nS)は、現在ブロック周辺に位置した参照ピクセルのピクセル値を示す。また、predSamples[x,y](x,y=0,...,nS−1)は、予測ピクセル値を示し、predSamplesF[x,y](x,y=0,...,nS−1)は、フィルタリングされた予測ピクセル値を示す。
このとき、イントラ予測モードによるフィルタリング実行可否、フィルタリング実行領域、及びフィルタタイプは、以下の表10により決定されることができる。
表10において、intraPostFilterTypeは、予測ブロックに対して適用されるフィルタタイプ情報を示す。このとき、前記フィルタタイプ情報は、フィルタリング実行可否、フィルタリング実行領域及びフィルタタイプに対する情報の両方ともを含むこともできる。また、intraPostFilterTypeは、intraPostFilterType[IntraPredMode]に示されることもあり、これはintraPostFilterTypeに割り当てられた値がIntraPredModeにより決定されることを意味することができる。
nSが32より小さい場合、符号化器及び復号化器は、intraPostFilterType[IntraPredMode]に割り当てられた値によって、下記の過程によりpredSamplesF[x,y](x,y=0,...,nS−1)を誘導することができる。
もし、intraPostFilterType[IntraPredMode]に割り当てられた値が1の場合、符号化器及び復号化器は、以下の数式11によりpredSamplesF[x,y]値を導出することができる。
(数11)
predSamplesF[0,0]=(p[−1,0]+2*predSamples[0,0]+p[0,−1]+2)>>2
predSamplesF[x,0]=(p[x,−1]+3*predSamples[x,0]+2)>>2(x=1,...,nS−1)
predSamplesF[0,y]=(p[−1,y]+3*predSamples[0,y]+2)>>2(y=1,...,nS−1)
predSamplesF[x,y]=predSamples[x,y](x,y=1,...,nS−1)
intraPostFilterType[IntraPredMode]に割り当てられた値が2の場合、符号化器及び復号化器は、以下の数式12によりpredSamplesF[x、y]値を導出することができる。
(数12)
predSamplesF[0,y]=(p[−1,y+1]+3*predSamples[0、y]+2)>>2(y=0,...,nS−1)
predSamplesF[x,y]=predSamples[x,y](x=1,...,nS−1、y=0,...,nS−1)
intraPostFilterType[IntraPredMode]に割り当てられた値が3の場合、符号化器及び復号化器は、以下の数式13によりpredSamplesF[x,y]値を導出することができる。
(数13)
predSamplesF[x,0]=(p[x+1,−1]+3*predSamples[x,0]+2)>>2(x=0,...,nS−1)
predSamplesF[x,y]=predSamples[x,y](x=0,...,nS−1、y=1,...,nS−1)
intraPostFilterType[IntraPredMode]に割り当てられた値が0の場合、符号化器及び復号化器は、以下の数式14によりpredSamplesF[x,y]値を導出することができる。
(数14)
predSamplesF[x,y]=predSamples[x,y](x,y=0,...,nS−1)
一方、詳述した全ての方法(例えば、フィルタリング実行方法)に対し、符号化器及び復号化器は、現在ブロック(及び/又は予測ブロック)の大きさ及び/又は深さによって適用範囲を異なるように設定することができる。例えば、本発明の適用範囲は、PUの大きさ及び/又はTUの大きさによって異なるように設定されてもよく、CUの深さ値によって異なるように設定されてもよい。
このとき、符号化器及び復号化器は、本発明の適用範囲を決定するために、ブロックの大きさ及び/又はブロックの深さ値を変数として利用することができる。ここで、前記ブロックは、CU、PU及び/又はTUに該当することができる。一例として、ブロックの大きさ値が変数として使われる場合、符号化器及び復号化器は、前記変数以上の大きさを有するブロックにのみ本発明を適用することもでき、他の例として、前記変数以下の大きさを有するブロックにのみ本発明は適用することもできる。また、符号化器及び復号化器は、前記変数値に該当する大きさを有するブロックにのみ本発明を適用することもできる。
以下の表11は、本発明の適用範囲を決定するための変数として使われるブロックの大きさ値が16×16の場合、本発明の適用範囲の実施例を示す。表11において、Oは、該当ブロック大きさに対して本発明が適用されることを示し、Xは、該当ブロック大きさに対して本発明が適用されないことを示すことができる。
表11を参照すると、方法Aの場合、符号化器及び復号化器は、変数として使われるブロック大きさ(16×16)以上の大きさを有するブロックにのみ本発明を適用することができる。方法Bの場合、符号化器及び復号化器は、変数として使われるブロック大きさ(16×16)以下の大きさを有するブロックにのみ本発明を適用することができる。また、方法Cの場合、符号化器及び復号化器は、変数として使われるブロック大きさ(16×16)と同じ大きさを有するブロックにのみ本発明を適用することができる。
一方、一実施例として、本発明の適用範囲を決定するための変数値(ブロックの大きさ値及び/又はブロックの深さ値)は、所定の固定された値であってもよい。このとき、前記変数値は、符号化器及び復号化器に予め格納されており、符号化器及び復号化器は、格納された変数値に基づいて本発明の適用範囲を決定することができる。
他の実施例として、本発明の適用範囲を決定するための変数値は、プロファイル(profile)又はレベル(level)によって変わることもできる。プロファイルに基づいて前記変数値が決定される場合、各プロファイルに該当する変数値は、所定の固定された値であってもよく、レベルに基づいて前記変数値が決定される場合、各レベルに該当する変数値は、所定の固定された値であってもよい。
他の実施例として、本発明の適用範囲を決定するための変数値(ブロックの大きさ値及び/又はブロックの深さ値)は、符号化器により決定されることができる。このとき、符号化器は、前記変数値に対する情報を符号化してビットストリームを介して復号化器に送信することができる。ビットストリームを介して送信される変数値情報は、シーケンスパラメータセット(Sequence Parameter Set:SPS)、ピクチャパラメータセット(Picture Parameter Set:PSP)、及びスライスヘッダ(slice header)などに含まれることができる。復号化器は、受信したビットストリームから前記変数値を導出することができ、導出された変数値に基づいて本発明の適用範囲を決定することができる。
このとき、変数値情報を示すために使われる指示子には多様な類型がある。一実施例として、表11で方法Aが使われて本発明の適用範囲を決定するための変数値がブロックの大きさ値に該当する場合、変数値情報を示すために使われる指示子は、log2_intra_prediction_filtering_enable_max_size_minus2である。例えば、前記変数値が32×32の場合、前記指示子に割り当てられる値は3であり、前記変数値が4×4の場合、前記指示子に割り当てられる値は0である。他の実施例として、表11で方法Aが使われて本発明の適用範囲を決定するための変数値がCUの深さ値に該当する場合、変数値情報を示すために使われる指示子は、intra_prediction_filtering_enable_max_cu_depthである。例えば、この場合、前記指示子に割り当てられた値が0の場合には64×64以上の大きさを有するブロックに本発明が適用されることができ、前記指示子に割り当てられた値が1の場合には32×32以上の大きさを有するブロックに本発明が適用されることができ、前記指示子に割り当てられた値が4の場合には4×4以上の大きさを有するブロックに本発明が適用されることができる。
一方、符号化器は、全てのブロック大きさに対して本発明を適用しないと決定することもできる。このとき、符号化器は、決定された情報を復号化器に送信するために、所定の指示子を利用することができる。一実施例として、符号化器は、intra_prediction_filtering_enable_flagのような指示子をSPS、PPS及び/又はスライスヘッダなどに含ませて復号化器に送信することができる。ここで、intra_prediction_filtering_enable_flagは、シーケンス、ピクチャ及び/又はスライス内の全てのブロックに対して本発明が適用されるかどうかを指示する指示子に該当することができる。他の実施例として、符号化器は、詳述した変数値情報を示す指示子(例えば、intra_prediction_filtering_enable_max_cu_depth)を利用し、全てのブロック大きさに対して本発明を適用しないという情報を復号化器に送信することもできる。このとき、一例として、符号化器は、前記指示子に有効でない(及び/又は許容されない)ブロック大きさ(例えば、2×2大きさ)を示す値(例えば、5)を割り当てることによって、全てのブロック大きさに対して本発明が適用されないことを示すことができる。
前述した実施例によると、本発明は、イントラ予測時に発生する予測誤差を減少させてブロック間の不連続性を最小化して予測効率及び符号化効率を向上させることができる。
前述した実施例において、方法は、一連のステップ又はブロックで順序図に基づいて説明されているが、本発明は、ステップの順序に限定されるものではなく、あるステップは前述と異なるステップと異なる順序に又は同時に発生することができる。また、当該技術分野において、通常の知識を有する者であれば、順序図に示すステップが排他的でなく、他のステップが含まれ、又は順序図の一つ又はそれ以上のステップが本発明の範囲に影響を及ぼさずに削除可能であることを理解することができる。
前述した実施例は、多様な様態の例示を含む。多様な様態を示すための全ての可能な組合せを記述することができないが、該当技術分野の通常の知識を有する者は、他の組合せが可能であることを認識することができる。したがって、本発明は、特許請求の範囲内に属する全ての交替、修正及び変更を含む。

Claims (18)

  1. 映像を復号化する方法であって、
    対象ブロックに対してDCモードのイントラ予測を実行することにより予測ブロックを生成するステップと、
    前記予測ブロックと、前記対象ブロックに対応する復元された差分ブロックとに基づいて、復元ブロックを生成するステップと、
    を備え、
    前記予測ブロックのフィルタリングされた予測ピクセルのピクセル値は、前記イントラ予測の最中における前記DCモード用のフィルタを用いて生成され、
    フィルタリングされた前記予測ピクセルは、前記予測ブロックの最も左側の垂直ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、また前記予測ブロックの最も上側の水平ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、
    前記フィルタのフィルタ形状、前記フィルタのフィルタタップ及び前記フィルタの複数のフィルタ係数の少なくとも一つが、複数のブロックの大きさに対して固定されていることを特徴とする映像復号化方法。
  2. フィルタリングされた前記予測ピクセルにおける、最も左側及び最も上側のフィルタリングされた予測ピクセルのピクセル値は、前記DCモードにより導出された値に基づいて、3−タップフィルタを用いて生成され、上方参照ピクセルは、前記最も左側及び最も上側のフィルタリングされた予測ピクセルの上側の部分に隣接し、左側参照ピクセルは、前記最も左側及び最も上側のフィルタリングされた予測ピクセルの左側に隣接し、
    前記上方参照ピクセル及び前記左側参照ピクセルのそれぞれは、前記対象ブロックに隣接する復元された参照ピクセルのピクセルであることを特徴とする請求項1に記載の方法。
  3. 前記フィルタを用いるか否かは、前記対象ブロックのサイズに基づいて決定され、前記フィルタは、前記対象ブロックが32×32よりも小さいサイズを有する場合に用いられることを特徴とする請求項1に記載の方法。
  4. 映像を符号化する方法であって、
    対象ブロックに対してDCモードのイントラ予測を実行することにより予測ブロックを生成するステップと、
    前記予測ブロックと、前記対象ブロックに対応する復元された差分ブロックとに基づいて、復元ブロックを生成するステップと、
    を備え、
    前記予測ブロックのフィルタリングされた予測ピクセルのピクセル値は、前記イントラ予測の最中における前記DCモード用のフィルタを用いて生成され、
    フィルタリングされた前記予測ピクセルは、前記予測ブロックの最も左側の垂直ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、また前記予測ブロックの最も上側の水平ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、
    前記フィルタのフィルタ形状、前記フィルタのフィルタタップ及び前記フィルタの複数のフィルタ係数の少なくとも一つが、複数のブロックの大きさに対して固定されていることを特徴とする映像復号化方法。
  5. 前記予測ブロック生成部は、前記DCモードによって導出された値に基づいて、フィルタリングされた前記予測ピクセルのうち、最も左側及び最も上側のフィルタリングされた予測ピクセルのピクセル値を、3−タップフィルタを用いて生成し、上方参照ピクセルは、前記最も左側及び最も上側のフィルタリングされた予測ピクセルの上側の部分に隣接し、左側参照ピクセルは、前記最も左側及び最も上側のフィルタリングされた予測ピクセルの左側に隣接し、
    前記上方参照ピクセル及び前記左側参照ピクセルのそれぞれは、前記対象ブロックに隣接する復元された参照ピクセルのピクセルであることを特徴とする請求項4に記載の方法。
  6. 前記予測ブロック生成部は、前記フィルタを用いるか否かを、前記対象ブロックのサイズに基づいて決定し、前記予測ブロック生成部は、前記フィルタを、前記対象ブロックが32×32よりも小さいサイズを有する場合に用いることを決定することを特徴とする請求項4に記載の方法。
  7. 請求項4に記載の方法により生成された前記情報を含むデータストリームを備えるデジタル格納媒体。
  8. 請求項4に記載の方法により生成されたビットストリームを記録する記録媒体。
  9. データストリームを含むデジタル格納媒体であって、前記データストリームは、
    対象ブロックに対する予測モードを示す予測モード情報と、
    を備え、
    前記予測モード情報は、
    前記DCモードが、前記予測モード情報に基づいて、前記対象ブロックに対する前記予測モードとして決定される場合、前記対象ブロックに対してDCモードのイントラ予測を実行することにより予測ブロックが生成され、
    前記予測ブロックのフィルタリングされた予測ピクセルのピクセル値は、前記イントラ予測の最中における前記DCモード用のフィルタを用いて生成され、
    ることを表し、
    フィルタリングされた前記予測ピクセルは、前記予測ブロックの最も左側の垂直ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、また前記予測ブロックの最も上側の水平ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、
    前記フィルタのフィルタ形状、前記フィルタのフィルタタップ及び前記フィルタの複数のフィルタ係数の少なくとも一つが、複数のブロックの大きさに対して固定されていることを特徴とするデジタル格納媒体。
  10. 前記対象ブロックがルマ(luma)成分ブロックである場合、前記フィルタが用いられ、前記対象ブロックがクロマ(chroma)成分ブロックである場合、前記フィルタは用いられないことを特徴とする請求項9に記載のデジタル格納媒体。
  11. 前記フィルタを用いるか否かは、前記対象ブロックのサイズに基づいて決定され、前記フィルタは、前記対象ブロックが32×32よりも小さいサイズを有する場合に用いられることを特徴とする請求項9に記載のデジタル格納媒体。
  12. データストリームを生成する方法であって、
    対象ブロックに対するイントラ予測を実行するステップと、
    前記イントラ予測に基づいて、前記対象ブロックのための予測モードを示す予測モード情報を生成するステップと、
    前記予測モード情報を含む前記データストリームを生成するステップと、
    前記データストリームを用いて対象ブロックの復号化のため、前記予測モード情報は、 前記DCモードが、前記予測モード情報に基づいて、前記対象ブロックに対する予測モードとして決定される場合、前記対象ブロックに対してDCモードのイントラ予測を実行することにより予測ブロックが生成され、
    前記予測ブロックのフィルタリングされた予測ピクセルのピクセル値は、前記イントラ予測の最中における前記DCモード用のフィルタを用いて生成され、
    ることを表し、
    フィルタリングされた前記予測ピクセルは、前記予測ブロックの最も左側の垂直ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、また前記予測ブロックの最も上側の水平ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、
    前記フィルタのフィルタ形状、前記フィルタのフィルタタップ及び前記フィルタの複数のフィルタ係数の少なくとも一つが、複数のブロックの大きさに対して固定されていることを特徴とするデータストリームを生成する方法。
  13. 前記対象ブロックがルマ(luma)成分ブロックである場合、前記フィルタが用いられ、前記対象ブロックがクロマ(chroma)成分ブロックである場合、前記フィルタは用いられないことを特徴とする請求項12に記載の方法。
  14. 前記フィルタを用いるか否かは、前記対象ブロックのサイズに基づいて決定され、前記フィルタは、前記対象ブロックが32×32よりも小さいサイズを有する場合に用いられることを特徴とする請求項12に記載の方法。
  15. 請求項12に記載の方法により生成されたビットストリームを記録する記録媒体。
  16. コンピュータが実行可能なコードを含むビットストリームを格納するコンピュータが読み取り可能な媒体であって、前記コンピュータが実行可能なコードは、実行されるとき、以下のステップ、すなわち、
    前記コンピュータが実行可能なコードにおける対象ブロックのための予測モードを示す予測モード情報を復号化するステップと、
    前記DCモードが、前記予測モード情報に基づいて、前記対象ブロックに対する前記予測モードとして決定される場合、前記対象ブロックに対してDCモードのイントラ予測を実行することにより予測ブロックを生成するステップと、
    を復号化装置に実行させ、
    前記予測ブロックのフィルタリングされた予測ピクセルのピクセル値は、前記イントラ予測の最中における前記DCモード用のフィルタを用いて生成され、
    フィルタリングされた前記予測ピクセルは、前記予測ブロックの最も左側の垂直ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、また前記予測ブロックの最も上側の水平ピクセルラインに位置する一つのピクセル又は複数のピクセルであり、
    前記フィルタのフィルタ形状、前記フィルタのフィルタタップ及び前記フィルタの複数のフィルタ係数の少なくとも一つが、複数のブロックの大きさに対して固定されていることを特徴とするコンピュータが読み取り可能な媒体。
  17. 前記対象ブロックがルマ(luma)成分ブロックである場合、前記フィルタが用いられ、前記対象ブロックがクロマ(chroma)成分ブロックである場合、前記フィルタは用いられないことを特徴とする請求項16に記載のコンピュータが読み取り可能な媒体。
  18. 前記フィルタを用いるか否かは、前記対象ブロックのサイズに基づいて決定され、前記フィルタは、前記対象ブロックが32×32よりも小さいサイズを有する場合に用いられることを特徴とする請求項16に記載のコンピュータが読み取り可能な媒体。
JP2020027485A 2011-06-20 2020-02-20 映像符号化/復号化方法及びその装置 Active JP7053696B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021173992A JP7241148B2 (ja) 2011-06-20 2021-10-25 映像符号化/復号化方法及びその装置

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
KR20110059850 2011-06-20
KR10-2011-0059850 2011-06-20
KR20110065708 2011-07-01
KR10-2011-0065708 2011-07-01
KR10-2011-0119214 2011-11-15
KR1020110119214A KR20120140181A (ko) 2011-06-20 2011-11-15 화면내 예측 블록 경계 필터링을 이용한 부호화/복호화 방법 및 그 장치
KR10-2011-0125353 2011-11-28
KR1020110125353A KR20120140182A (ko) 2011-06-20 2011-11-28 화면내 예측 블록 경계 필터링을 이용한 부호화/복호화 방법 및 그 장치
KR1020120066206A KR101357640B1 (ko) 2011-06-20 2012-06-20 영상 부호화/복호화 방법 및 그 장치
KR10-2012-0066206 2012-06-20

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018153613A Division JP6666968B2 (ja) 2011-06-20 2018-08-17 映像符号化/復号化方法及びその装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021173992A Division JP7241148B2 (ja) 2011-06-20 2021-10-25 映像符号化/復号化方法及びその装置

Publications (2)

Publication Number Publication Date
JP2020080568A true JP2020080568A (ja) 2020-05-28
JP7053696B2 JP7053696B2 (ja) 2022-04-12

Family

ID=47906320

Family Applications (12)

Application Number Title Priority Date Filing Date
JP2014516915A Active JP5976793B2 (ja) 2011-06-20 2012-06-20 映像復号化装置
JP2014070159A Pending JP2014161039A (ja) 2011-06-20 2014-03-28 映像符号化/復号化方法及びその装置
JP2014070145A Pending JP2014161038A (ja) 2011-06-20 2014-03-28 映像符号化/復号化方法及びその装置
JP2014070118A Active JP5982421B2 (ja) 2011-06-20 2014-03-28 映像符号化装置
JP2015206485A Pending JP2016040934A (ja) 2011-06-20 2015-10-20 映像符号化/復号化方法及びその装置
JP2015206503A Pending JP2016040935A (ja) 2011-06-20 2015-10-20 映像符号化/復号化方法及びその装置
JP2016165957A Active JP6422922B2 (ja) 2011-06-20 2016-08-26 映像符号化/復号化方法及びその装置
JP2018032344A Active JP7097192B2 (ja) 2011-06-20 2018-02-26 映像符号化/復号化方法及びその装置
JP2018153613A Active JP6666968B2 (ja) 2011-06-20 2018-08-17 映像符号化/復号化方法及びその装置
JP2020027485A Active JP7053696B2 (ja) 2011-06-20 2020-02-20 映像符号化/復号化方法及びその装置
JP2021173992A Active JP7241148B2 (ja) 2011-06-20 2021-10-25 映像符号化/復号化方法及びその装置
JP2023033845A Pending JP2023065635A (ja) 2011-06-20 2023-03-06 映像符号化/復号化方法及びその装置

Family Applications Before (9)

Application Number Title Priority Date Filing Date
JP2014516915A Active JP5976793B2 (ja) 2011-06-20 2012-06-20 映像復号化装置
JP2014070159A Pending JP2014161039A (ja) 2011-06-20 2014-03-28 映像符号化/復号化方法及びその装置
JP2014070145A Pending JP2014161038A (ja) 2011-06-20 2014-03-28 映像符号化/復号化方法及びその装置
JP2014070118A Active JP5982421B2 (ja) 2011-06-20 2014-03-28 映像符号化装置
JP2015206485A Pending JP2016040934A (ja) 2011-06-20 2015-10-20 映像符号化/復号化方法及びその装置
JP2015206503A Pending JP2016040935A (ja) 2011-06-20 2015-10-20 映像符号化/復号化方法及びその装置
JP2016165957A Active JP6422922B2 (ja) 2011-06-20 2016-08-26 映像符号化/復号化方法及びその装置
JP2018032344A Active JP7097192B2 (ja) 2011-06-20 2018-02-26 映像符号化/復号化方法及びその装置
JP2018153613A Active JP6666968B2 (ja) 2011-06-20 2018-08-17 映像符号化/復号化方法及びその装置

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2021173992A Active JP7241148B2 (ja) 2011-06-20 2021-10-25 映像符号化/復号化方法及びその装置
JP2023033845A Pending JP2023065635A (ja) 2011-06-20 2023-03-06 映像符号化/復号化方法及びその装置

Country Status (11)

Country Link
US (18) US9332262B2 (ja)
EP (7) EP2747433A1 (ja)
JP (12) JP5976793B2 (ja)
KR (12) KR20120140181A (ja)
CN (4) CN103404151B (ja)
BR (4) BR112013021229B1 (ja)
CA (12) CA3026271C (ja)
DK (2) DK2723078T3 (ja)
ES (1) ES2618860T3 (ja)
IN (1) IN2014CN02639A (ja)
WO (1) WO2012177053A2 (ja)

Families Citing this family (93)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL3567855T3 (pl) 2009-03-23 2023-03-13 Ntt Docomo, Inc. Urządzenie do predykcyjnego kodowania wideo, sposób predykcyjnego kodowania wideo, program do predykcyjnego kodowania wideo, urządzenie do predykcyjnego dekodowania wideo, sposób predykcyjnego dekodowania wideo i program do predykcyjnego dekodowania wideo
KR20110113561A (ko) * 2010-04-09 2011-10-17 한국전자통신연구원 적응적인 필터를 이용한 인트라 예측 부호화/복호화 방법 및 그 장치
SG187094A1 (en) * 2010-07-20 2013-03-28 Ntt Docomo Inc Image prediction encoding device, image prediction encoding method, image prediction encoding program, image prediction decoding device, image prediction decoding method, and image prediction decoding program
JP5478740B2 (ja) * 2011-01-12 2014-04-23 三菱電機株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法
KR20120140181A (ko) * 2011-06-20 2012-12-28 한국전자통신연구원 화면내 예측 블록 경계 필터링을 이용한 부호화/복호화 방법 및 그 장치
JP2014131162A (ja) * 2012-12-28 2014-07-10 Nippon Telegr & Teleph Corp <Ntt> イントラ予測符号化方法、イントラ予測復号方法、イントラ予測符号化装置、イントラ予測復号装置、それらのプログラム並びにプログラムを記録した記録媒体
WO2014107073A1 (ko) * 2013-01-04 2014-07-10 삼성전자 주식회사 비디오의 부호화 방법 및 장치, 그 복호화 방법 및 장치
US20140192866A1 (en) * 2013-01-09 2014-07-10 Mitsubishi Electric Research Laboratories, Inc. Data Remapping for Predictive Video Coding
JP6473078B2 (ja) * 2013-04-05 2019-02-20 シャープ株式会社 画像復号装置
KR102217225B1 (ko) * 2013-04-29 2021-02-18 인텔렉추얼디스커버리 주식회사 인트라 예측 방법 및 장치
WO2014178563A1 (ko) 2013-04-29 2014-11-06 인텔렉추얼 디스커버리 주식회사 인트라 예측 방법 및 장치
US10003805B2 (en) 2013-07-01 2018-06-19 Samsung Electronics Co., Ltd. Video encoding and decoding method accompanied with filtering, and device thereof
WO2015032350A1 (zh) * 2013-09-07 2015-03-12 同济大学 一种使用块匹配的图像压缩方法和装置
WO2015042586A1 (en) 2013-09-23 2015-03-26 Morphotrust Usa, Llc Unidirectional opacity watermark
WO2015101329A1 (en) * 2014-01-02 2015-07-09 Mediatek Singapore Pte. Ltd. Method and apparatus for intra prediction coding with boundary filtering control
JP2015216626A (ja) * 2014-04-23 2015-12-03 ソニー株式会社 画像処理装置及び画像処理方法
US9998742B2 (en) * 2015-01-27 2018-06-12 Qualcomm Incorporated Adaptive cross component residual prediction
US20160286224A1 (en) * 2015-03-26 2016-09-29 Thomson Licensing Method and apparatus for generating color mapping parameters for video encoding
EP3284258A4 (en) * 2015-05-28 2019-04-17 HFI Innovation Inc. METHOD AND DEVICE FOR USING A CURRENT PICTURE AS A REFERENCE PICTURE
WO2016200242A1 (ko) * 2015-06-11 2016-12-15 한양대학교 산학협력단 적응적인 디블록킹 필터링을 이용하는 영상 부호화 방법과 영상 복호화 방법 및 장치
US10091506B2 (en) * 2015-06-11 2018-10-02 Sony Corporation Data-charge phase data compression architecture
US10841593B2 (en) 2015-06-18 2020-11-17 Qualcomm Incorporated Intra prediction and intra mode coding
US11463689B2 (en) 2015-06-18 2022-10-04 Qualcomm Incorporated Intra prediction and intra mode coding
KR20180040577A (ko) * 2015-08-17 2018-04-20 엘지전자 주식회사 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
CA2997097C (en) 2015-08-28 2022-06-07 Kt Corporation Method and device for processing video signal
KR102160667B1 (ko) * 2015-09-10 2020-09-28 엘지전자 주식회사 비디오 코딩 시스템에서 인트라 예측 방법 및 장치
ES2844525B1 (es) * 2015-09-11 2022-07-05 Kt Corp Metodo para decodificar un video
WO2017057877A1 (ko) * 2015-09-29 2017-04-06 엘지전자 주식회사 영상 코딩 시스템에서 영상 필터링 방법 및 장치
WO2017069591A1 (ko) * 2015-10-23 2017-04-27 엘지전자 주식회사 영상 코딩 시스템에서 영상 필터링 방법 및 장치
EP3376764A4 (en) * 2015-11-12 2019-12-04 LG Electronics Inc. METHOD AND DEVICE FOR COEFFICIENT-INDUCED INTRAPREDICATION IN A BILDCODING SYSTEM
KR20230143623A (ko) 2016-03-28 2023-10-12 로즈데일 다이나믹스 엘엘씨 인터 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
KR102346713B1 (ko) * 2016-04-12 2022-01-03 세종대학교산학협력단 인트라 예측 기반의 비디오 신호 처리 방법 및 장치
KR20180129863A (ko) * 2016-04-25 2018-12-05 엘지전자 주식회사 영상 코딩 시스템에서 영상 디코딩 방법 및 장치
WO2017188652A1 (ko) 2016-04-26 2017-11-02 인텔렉추얼디스커버리 주식회사 영상 부호화/복호화 방법 및 장치
US10939125B2 (en) * 2016-04-29 2021-03-02 Industry Academy Cooperation Foundation Of Sejong University Method and apparatus for encoding/decoding image signal
CN117061743A (zh) 2016-04-29 2023-11-14 世宗大学校产学协力团 用于对图像信号进行编码/解码的方法和设备
CN113873240A (zh) 2016-06-24 2021-12-31 株式会社Kt 用于处理视频信号的方法和设备
JP6740534B2 (ja) * 2016-07-04 2020-08-19 日本放送協会 符号化装置、復号装置及びプログラム
CN116016910A (zh) * 2016-08-01 2023-04-25 韩国电子通信研究院 图像编码/解码方法
CN109691112B (zh) * 2016-08-31 2023-09-26 株式会社Kt 用于处理视频信号的方法和设备
KR102447450B1 (ko) * 2016-09-05 2022-09-26 엘지전자 주식회사 영상 부호화/복호화 방법 및 이를 위한 장치
CN116366838A (zh) 2016-09-20 2023-06-30 株式会社Kt 对图像进行解码和编码的方法以及传输方法
US10721479B2 (en) * 2016-09-30 2020-07-21 Lg Electronics Inc. Intra prediction method and apparatus in image coding system
KR20180037575A (ko) 2016-10-04 2018-04-12 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN116634182A (zh) * 2016-10-04 2023-08-22 株式会社Kt 对图像进行解码和编码的方法、图像数据的发送方法
CN117395408A (zh) * 2016-10-04 2024-01-12 韩国电子通信研究院 对图像进行编码/解码的方法和设备以及记录介质
JP6895247B2 (ja) * 2016-10-06 2021-06-30 日本放送協会 符号化装置、復号装置及びプログラム
CN117857784A (zh) 2016-10-14 2024-04-09 世宗大学校产学协力团 影像编码/解码方法及比特流的传送方法
CN116916018A (zh) 2016-10-28 2023-10-20 韩国电子通信研究院 视频编码/解码方法和设备以及存储比特流的记录介质
CN109952762B (zh) 2016-10-28 2023-07-04 韩国电子通信研究院 视频编码/解码方法和设备以及存储比特流的记录介质
US11503286B2 (en) 2016-11-28 2022-11-15 Electronics And Telecommunications Research Institute Method and device for filtering
CN117041568A (zh) * 2016-11-29 2023-11-10 韩国电子通信研究院 图像编码/解码方法和用于存储比特流的记录介质
CN110169059B (zh) * 2017-01-13 2023-08-22 谷歌有限责任公司 视频代码化的复合预测
US10728548B2 (en) * 2017-04-04 2020-07-28 Futurewei Technologies, Inc. Processing reference samples used for intra-prediction of a picture block
EP3609182A4 (en) * 2017-04-06 2020-04-08 Panasonic Intellectual Property Corporation of America ENCODING DEVICE AND METHOD, DECODING DEVICE AND METHOD
CN108881907A (zh) * 2017-05-16 2018-11-23 富士通株式会社 用于视频编解码的像素滤波方法和装置及视频编码方法
CN116828206A (zh) 2017-05-17 2023-09-29 株式会社Kt 用于解码视频的方法和用于编码视频的方法
HUE060091T2 (hu) * 2017-05-31 2023-01-28 Lg Electronics Inc Eljárás és eszköz kép dekódolásra intra-predikció alapján képkódoló rendszerben
WO2018221554A1 (ja) * 2017-06-01 2018-12-06 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、符号化方法、復号装置及び復号方法
CN117354505A (zh) * 2017-07-06 2024-01-05 Lx 半导体科技有限公司 图像编码/解码方法、发送方法和数字存储介质
US11831910B2 (en) 2017-08-21 2023-11-28 Electronics And Telecommunications Research Institute Method and apparatus for encoding/decoding video, and recording medium storing bit stream
US10706492B2 (en) * 2017-09-05 2020-07-07 Texas Instruments Incorporated Image compression/decompression in a computer vision system
EP3454556A1 (en) * 2017-09-08 2019-03-13 Thomson Licensing Method and apparatus for video encoding and decoding using pattern-based block filtering
KR20190043482A (ko) 2017-10-18 2019-04-26 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
KR102539068B1 (ko) * 2017-10-31 2023-06-01 삼성전자주식회사 영상 부호화 방법 및 장치, 영상 복호화 방법 및 장치
CN107801024B (zh) 2017-11-09 2019-07-12 北京大学深圳研究生院 一种用于帧内预测的边界滤波方法
CN116684617A (zh) * 2017-11-28 2023-09-01 Lx 半导体科技有限公司 图像编码/解码方法、图像数据的传输方法和存储介质
CN107896330B (zh) 2017-11-29 2019-08-13 北京大学深圳研究生院 一种用于帧内和帧间预测的滤波方法
SG11202012036QA (en) 2018-01-15 2021-01-28 Ki Baek Kim Intra prediction encoding/decoding method and device for chrominance components
WO2019203559A1 (ko) * 2018-04-17 2019-10-24 엘지전자 주식회사 영상 코딩 시스템에서 리그레션 모델 기반 필터링을 사용하는 영상 디코딩 방법 및 장치
KR20190137260A (ko) 2018-06-01 2019-12-11 삼성전자주식회사 이미지 부호화 장치 및 이미지 복호화 장치
WO2019245342A1 (ko) * 2018-06-21 2019-12-26 주식회사 케이티 비디오 신호 처리 방법 및 장치
CA3105023C (en) * 2018-06-25 2023-03-14 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Intra-frame prediction method and device
CN110650349B (zh) 2018-06-26 2024-02-13 中兴通讯股份有限公司 一种图像编码方法、解码方法、编码器、解码器及存储介质
US11277644B2 (en) 2018-07-02 2022-03-15 Qualcomm Incorporated Combining mode dependent intra smoothing (MDIS) with intra interpolation filter switching
US10630979B2 (en) * 2018-07-16 2020-04-21 Tencent America LLC Reference sample padding and filtering for intra prediction in video compression
EP3815377B1 (en) * 2018-07-16 2022-12-28 Huawei Technologies Co., Ltd. Video encoder, video decoder, and corresponding encoding and decoding methods
KR20200028856A (ko) * 2018-09-07 2020-03-17 김기백 인트라 예측을 이용한 영상 부호화/복호화 방법 및 장치
KR20200033760A (ko) * 2018-09-20 2020-03-30 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US11159789B2 (en) 2018-10-24 2021-10-26 City University Of Hong Kong Generative adversarial network based intra prediction for video coding
US11303885B2 (en) 2018-10-25 2022-04-12 Qualcomm Incorporated Wide-angle intra prediction smoothing and interpolation
WO2020130628A1 (ko) * 2018-12-18 2020-06-25 엘지전자 주식회사 다중 참조 라인 인트라 예측에 기반한 영상 코딩 방법 및 그 장치
KR102625986B1 (ko) * 2019-01-10 2024-01-16 후아웨이 테크놀러지 컴퍼니 리미티드 인트라 서브파티션 코딩 툴로 인한 서브파티션 경계를 위한 디블로킹 필터
JP2022065225A (ja) * 2019-03-08 2022-04-27 シャープ株式会社 Lic部、画像復号装置および画像符号化装置
CA3122891A1 (en) 2019-03-12 2020-09-17 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Intra prediction method and apparatus, and computer-readable storage medium
MX2021012370A (es) * 2019-04-10 2022-01-18 Electronics & Telecommunications Res Inst Método y dispositivo para señalizar señales relacionadas con modo de predicción en intra predicción.
CN115211109A (zh) * 2019-09-02 2022-10-18 华为技术有限公司 对通用帧内预测过程的滤波器修改的编码器、解码器及相应方法
CN111787334B (zh) * 2020-05-29 2021-09-14 浙江大华技术股份有限公司 一种用于帧内预测的滤波方法,滤波器及装置
CN113766224B (zh) * 2020-06-05 2022-11-25 杭州海康威视数字技术股份有限公司 图像增强方法及装置
CN111669584B (zh) * 2020-06-11 2022-10-28 浙江大华技术股份有限公司 一种帧间预测滤波方法、装置和计算机可读存储介质
JP7104101B2 (ja) * 2020-06-24 2022-07-20 日本放送協会 符号化装置、復号装置及びプログラム
DE102021117397A1 (de) * 2020-07-16 2022-01-20 Samsung Electronics Co., Ltd. Bildsensormodul, bildverarbeitungssystem und bildkomprimierverfahren
KR102189259B1 (ko) * 2020-08-20 2020-12-09 인텔렉추얼디스커버리 주식회사 인트라 예측 방법 및 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002067589A1 (en) * 2001-02-23 2002-08-29 Seiko Epson Corporation Image processing system, image processing method, and image processing program
WO2009110741A2 (en) * 2008-03-04 2009-09-11 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding image by using filtered prediction block
WO2012096150A1 (ja) * 2011-01-12 2012-07-19 三菱電機株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法

Family Cites Families (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2688369B1 (fr) * 1992-03-03 1996-02-09 Thomson Csf Procede de codage d'images a tres bas debit et dispositif de codage-decodage mettant en óoeuvre ce procede.
KR100403077B1 (ko) * 1996-05-28 2003-10-30 마쯔시다덴기산교 가부시키가이샤 화상예측 복호화 장치 및 그 방법과 화상예측 부호화 장치 및 그 방법
EP0895424B1 (en) * 1997-07-31 2007-10-31 Victor Company of Japan, Ltd. digital video signal inter-block predictive encoding/decoding apparatus and method providing high efficiency of encoding.
AU717480B2 (en) * 1998-08-01 2000-03-30 Korea Advanced Institute Of Science And Technology Loop-filtering method for image data and apparatus therefor
CN101448162B (zh) * 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
US7386048B2 (en) * 2002-05-28 2008-06-10 Sharp Laboratories Of America, Inc. Methods and systems for image intra-prediction mode organization
US7372999B2 (en) * 2002-09-09 2008-05-13 Ricoh Company, Ltd. Image coder and image decoder capable of power-saving control in image compression and decompression
US7227901B2 (en) * 2002-11-21 2007-06-05 Ub Video Inc. Low-complexity deblocking filter
MXPA05007449A (es) * 2003-01-10 2005-09-12 Thomson Licensing Sa Definicion de filtros de interpolacion para ocultamiento de error en una imagen codificada.
US7457362B2 (en) * 2003-10-24 2008-11-25 Texas Instruments Incorporated Loop deblock filtering of block coded video in a very long instruction word processor
KR101000926B1 (ko) 2004-03-11 2010-12-13 삼성전자주식회사 영상의 불연속성을 제거하기 위한 필터 및 필터링 방법
US7539248B2 (en) * 2004-04-29 2009-05-26 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
KR101204788B1 (ko) * 2004-06-03 2012-11-26 삼성전자주식회사 영상의 공간 예측 부호화 방법, 부호화 장치, 복호화 방법및 복호화 장치
JP4050754B2 (ja) * 2005-03-23 2008-02-20 株式会社東芝 ビデオエンコーダ及び動画像信号の符号化方法
KR101246294B1 (ko) * 2006-03-03 2013-03-21 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
KR100882949B1 (ko) * 2006-08-17 2009-02-10 한국전자통신연구원 화소 유사성에 따라 적응적인 이산 코사인 변환 계수스캐닝을 이용한 부호화/복호화 장치 및 그 방법
KR101312260B1 (ko) 2007-01-19 2013-09-25 삼성전자주식회사 에지 영역을 효과적으로 압축하고 복원하는 방법 및 장치
BRPI0813904B1 (pt) * 2007-06-29 2020-12-08 Velos Media International Limited dispositivo de codificação de imagem para codificar imagens de entrada e dispositivo de decodificação de imagem para decodificar dados de imagens codificados
CN101409833B (zh) 2007-10-12 2012-10-03 昆山杰得微电子有限公司 去块效应滤波装置及方法
US8576906B2 (en) * 2008-01-08 2013-11-05 Telefonaktiebolaget L M Ericsson (Publ) Adaptive filtering
JP2009194617A (ja) * 2008-02-14 2009-08-27 Sony Corp 画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体
KR101379187B1 (ko) * 2008-06-23 2014-04-15 에스케이 텔레콤주식회사 블록 변환을 이용한 인트라 예측 방법 및 장치와 그를이용한 영상 부호화/복호화 방법 및 장치
KR101517768B1 (ko) * 2008-07-02 2015-05-06 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
CN101321290B (zh) * 2008-07-17 2010-12-15 北京数码视讯科技股份有限公司 基于数字信号处理器的去块滤波方法
KR101590500B1 (ko) * 2008-10-23 2016-02-01 에스케이텔레콤 주식회사 동영상 부호화/복호화 장치, 이를 위한 인트라 예측 방향에기반한 디블록킹 필터링 장치 및 필터링 방법, 및 기록 매체
US8295360B1 (en) * 2008-12-23 2012-10-23 Elemental Technologies, Inc. Method of efficiently implementing a MPEG-4 AVC deblocking filter on an array of parallel processors
US8514942B2 (en) * 2008-12-31 2013-08-20 Entropic Communications, Inc. Low-resolution video coding content extraction
EP2393296A1 (en) 2009-01-29 2011-12-07 Panasonic Corporation Image coding method and image decoding method
JP2010183162A (ja) 2009-02-03 2010-08-19 Mitsubishi Electric Corp 動画像符号化装置
KR101379185B1 (ko) 2009-04-14 2014-03-31 에스케이 텔레콤주식회사 예측 모드 선택 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
JP5169978B2 (ja) * 2009-04-24 2013-03-27 ソニー株式会社 画像処理装置および方法
JP5597968B2 (ja) 2009-07-01 2014-10-01 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
KR101510108B1 (ko) * 2009-08-17 2015-04-10 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
KR101302660B1 (ko) * 2009-09-14 2013-09-03 에스케이텔레콤 주식회사 고해상도 동영상의 부호화/복호화 방법 및 장치
CN102668566B (zh) * 2009-10-22 2016-05-04 汤姆森特许公司 将dc帧内预测模式用于视频编码和解码的方法和装置
CN101710990A (zh) * 2009-11-10 2010-05-19 华为技术有限公司 视频图像编码处理、解码处理方法和装置及编解码系统
KR20110054244A (ko) * 2009-11-17 2011-05-25 삼성전자주식회사 미디언 필터를 이용한 깊이영상 부호화의 인트라 예측 장치 및 방법
KR101623124B1 (ko) 2009-12-03 2016-05-24 에스케이 텔레콤주식회사 비디오 인코딩 장치 및 그 인코딩 방법, 비디오 디코딩 장치 및 그 디코딩 방법, 및 거기에 이용되는 방향적 인트라 예측방법
CN101783957B (zh) * 2010-03-12 2012-04-18 清华大学 一种视频预测编码方法和装置
KR101503269B1 (ko) * 2010-04-05 2015-03-17 삼성전자주식회사 영상 부호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치, 및 영상 복호화 단위에 대한 인트라 예측 모드 결정 방법 및 장치
US8619857B2 (en) * 2010-04-09 2013-12-31 Sharp Laboratories Of America, Inc. Methods and systems for intra prediction
KR20110113561A (ko) 2010-04-09 2011-10-17 한국전자통신연구원 적응적인 필터를 이용한 인트라 예측 부호화/복호화 방법 및 그 장치
US8644375B2 (en) * 2010-04-09 2014-02-04 Sharp Laboratories Of America, Inc. Methods and systems for intra prediction
EP2559239A2 (en) * 2010-04-13 2013-02-20 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus for intra predicting a block, apparatus for reconstructing a block of a picture, apparatus for reconstructing a block of a picture by intra prediction
MY176988A (en) * 2010-04-13 2020-08-31 Samsung Electronics Co Ltd Video-encoding method and video-encoding apparatus based on encoding units determined in a accordance with a tree structure, and video-decoding units determined in a accordance with a tree structure
KR101791242B1 (ko) * 2010-04-16 2017-10-30 에스케이텔레콤 주식회사 영상 부호화/복호화 장치 및 방법
KR101885258B1 (ko) * 2010-05-14 2018-08-06 삼성전자주식회사 비디오 신호의 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
US20110317757A1 (en) * 2010-06-25 2011-12-29 Qualcomm Incorporated Intra prediction mode signaling for finer spatial prediction directions
CN106851292A (zh) * 2010-07-02 2017-06-13 数码士有限公司 用于帧内预测的解码图像的方法
US9661338B2 (en) * 2010-07-09 2017-05-23 Qualcomm Incorporated Coding syntax elements for adaptive scans of transform coefficients for video coding
HUE054630T2 (hu) * 2010-07-14 2021-09-28 Ntt Docomo Inc Kis komplexitású intra predikció videó kódoláshoz
CN103119937B (zh) * 2010-07-20 2016-02-10 Sk电信有限公司 用于解块滤波的方法和装置以及利用该方法和装置进行编码和解码的方法和装置
KR20120012385A (ko) * 2010-07-31 2012-02-09 오수미 인트라 예측 부호화 장치
KR101373814B1 (ko) * 2010-07-31 2014-03-18 엠앤케이홀딩스 주식회사 예측 블록 생성 장치
US10063854B2 (en) * 2010-08-17 2018-08-28 M&K Holdings Inc. Apparatus for decoding an image
US9008175B2 (en) * 2010-10-01 2015-04-14 Qualcomm Incorporated Intra smoothing filter for video coding
CN107071438B (zh) * 2010-10-08 2020-09-01 Ge视频压缩有限责任公司 编码器和编码方法与解码器和解码方法
KR20120039388A (ko) * 2010-10-15 2012-04-25 에스케이하이닉스 주식회사 반도체 소자의 제조 방법
US20130215963A1 (en) * 2010-10-26 2013-08-22 Humax Co., Ltd. Adaptive intra-prediction encoding and decoding method
HUE063103T2 (hu) * 2010-11-04 2023-12-28 Ge Video Compression Llc Blokk összefûzést és átugrási módot támogató képkódolás
CN107197257B (zh) * 2010-12-08 2020-09-08 Lg 电子株式会社 由编码装置和解码装置执行的内预测方法
WO2012115420A2 (ko) 2011-02-23 2012-08-30 엘지전자 주식회사 필터링을 이용한 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
KR102403793B1 (ko) * 2011-03-06 2022-05-30 엘지전자 주식회사 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
CN107172424B (zh) * 2011-03-30 2020-04-14 Lg 电子株式会社 环路滤波方法及其设备
WO2012134046A2 (ko) * 2011-04-01 2012-10-04 주식회사 아이벡스피티홀딩스 동영상의 부호화 방법
US9042458B2 (en) * 2011-04-01 2015-05-26 Microsoft Technology Licensing, Llc Multi-threaded implementations of deblock filtering
HUE044405T2 (hu) 2011-04-25 2019-10-28 Lg Electronics Inc Képen belüli becslési eljárás, és ezt használó kódoló és dekódoló
US20120294365A1 (en) * 2011-05-17 2012-11-22 Dong Zheng Image and video encoding and decoding
KR101383775B1 (ko) * 2011-05-20 2014-04-14 주식회사 케이티 화면 내 예측 방법 및 장치
KR20120140181A (ko) * 2011-06-20 2012-12-28 한국전자통신연구원 화면내 예측 블록 경계 필터링을 이용한 부호화/복호화 방법 및 그 장치
US9723316B2 (en) 2011-06-24 2017-08-01 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method, image decoding method, and image prediction device
CN107277547B (zh) * 2011-08-29 2020-05-29 苗太平洋控股有限公司 以amvp模式对图像编码的方法
MY195625A (en) * 2012-01-17 2023-02-02 Infobridge Pte Ltd Method Of Applying Edge Offset
CN110868588B (zh) * 2012-01-18 2023-09-15 韩国电子通信研究院 视频解码装置、视频编码装置和计算机可读记录介质
US20150365698A1 (en) * 2013-04-11 2015-12-17 Mediatek Inc. Method and Apparatus for Prediction Value Derivation in Intra Coding
US9451254B2 (en) * 2013-07-19 2016-09-20 Qualcomm Incorporated Disabling intra prediction filtering
US9883197B2 (en) * 2014-01-09 2018-01-30 Qualcomm Incorporated Intra prediction of chroma blocks using the same vector
US20160105685A1 (en) * 2014-10-08 2016-04-14 Qualcomm Incorporated Boundary filtering and cross-component prediction in video coding

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002067589A1 (en) * 2001-02-23 2002-08-29 Seiko Epson Corporation Image processing system, image processing method, and image processing program
WO2009110741A2 (en) * 2008-03-04 2009-09-11 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding image by using filtered prediction block
WO2012096150A1 (ja) * 2011-01-12 2012-07-19 三菱電機株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法及び動画像復号方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
A.ALSHIN AND E.ALSHINA: "Block-size and pixel position independent boundary smoothing for non-directional Intra prediction", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-F252_r3, JPN6019037506, July 2011 (2011-07-01), pages 1 - 4, ISSN: 0004650267 *
HUI YONG KIM ET AL.: "Description of video coding technology proposal by ETRI", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-A127_r2, JPN6019010863, April 2010 (2010-04-01), pages 1 - 9, ISSN: 0004650264 *
JINHO LEE ET AL.: "Mode dependent filtering for intra predicted sample", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11 6TH M, vol. JCTVC-F358_r2, JPN6019037507, July 2011 (2011-07-01), pages 1 - 8, ISSN: 0004650268 *
KAZUO SUGIMOTO ET AL.: "CE6.f: LUT-based adaptive filtering on intra prediction samples", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-E069_r1, JPN6019010870, March 2011 (2011-03-01), pages 1 - 12, ISSN: 0004650266 *
KAZUO SUGIMOTO ET AL.: "LUT-based adaptive filtering on intra prediction samples", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-D109, JPN6019010868, January 2011 (2011-01-01), pages 1 - 4, ISSN: 0004650265 *

Also Published As

Publication number Publication date
CN103780911B (zh) 2019-01-25
EP3217665B1 (en) 2019-11-06
JP2016040934A (ja) 2016-03-24
US11711541B2 (en) 2023-07-25
EP2723078A4 (en) 2014-06-18
EP2747433A1 (en) 2014-06-25
US9225981B2 (en) 2015-12-29
KR20140062455A (ko) 2014-05-23
EP3614668A1 (en) 2020-02-26
BR122021025319B1 (pt) 2022-12-06
CA3026266A1 (en) 2012-12-27
CA3026266C (en) 2020-03-10
CA2944541C (en) 2019-01-15
US20160198189A1 (en) 2016-07-07
US20190379907A1 (en) 2019-12-12
JP2014161038A (ja) 2014-09-04
US10979735B2 (en) 2021-04-13
US9332262B2 (en) 2016-05-03
KR20120140222A (ko) 2012-12-28
KR101488497B1 (ko) 2015-01-30
US10516897B2 (en) 2019-12-24
US20190379905A1 (en) 2019-12-12
JP2016040935A (ja) 2016-03-24
WO2012177053A2 (ko) 2012-12-27
JP2023065635A (ja) 2023-05-12
KR101357640B1 (ko) 2014-02-05
EP2757791B1 (en) 2016-12-21
CN103796029A (zh) 2014-05-14
KR20140066681A (ko) 2014-06-02
US20190110072A1 (en) 2019-04-11
US9154781B2 (en) 2015-10-06
US11689742B2 (en) 2023-06-27
JP6422922B2 (ja) 2018-11-14
EP3217665A1 (en) 2017-09-13
CA3011871C (en) 2021-10-12
US20230336779A1 (en) 2023-10-19
ES2618860T3 (es) 2017-06-22
CA3011871A1 (en) 2012-12-27
KR20120140182A (ko) 2012-12-28
KR20120140181A (ko) 2012-12-28
KR20140066679A (ko) 2014-06-02
CA3011847A1 (en) 2012-12-27
US10986368B2 (en) 2021-04-20
EP2723078B1 (en) 2017-05-03
BR112013021229A2 (pt) 2019-08-13
CA3081215C (en) 2023-02-07
JP2014161037A (ja) 2014-09-04
BR122021025309B1 (pt) 2022-12-06
JP2022031647A (ja) 2022-02-22
US20230319308A1 (en) 2023-10-05
BR112014010333A2 (pt) 2017-10-10
US10205964B2 (en) 2019-02-12
CA3026271A1 (en) 2012-12-27
US20130301720A1 (en) 2013-11-14
JP2017011735A (ja) 2017-01-12
CA2944541A1 (en) 2012-12-27
IN2014CN02639A (ja) 2015-08-07
JP5982421B2 (ja) 2016-08-31
EP4307682A3 (en) 2024-04-17
KR20140066678A (ko) 2014-06-02
JP2014520476A (ja) 2014-08-21
CA3011851C (en) 2020-06-30
CN103780911A (zh) 2014-05-07
US20210227256A1 (en) 2021-07-22
CA2910612A1 (en) 2012-12-27
KR20130106337A (ko) 2013-09-27
JP7097192B2 (ja) 2022-07-07
CA3011853C (en) 2021-01-05
KR20140062454A (ko) 2014-05-23
KR101357641B1 (ko) 2014-02-05
JP7241148B2 (ja) 2023-03-16
KR101451921B1 (ko) 2014-10-23
KR101451919B1 (ko) 2014-10-23
CN103404151A (zh) 2013-11-20
JP2018129815A (ja) 2018-08-16
KR20130106338A (ko) 2013-09-27
US20190379908A1 (en) 2019-12-12
CA3011851A1 (en) 2012-12-27
CN103796029B (zh) 2016-05-18
EP2747432A1 (en) 2014-06-25
EP2757791A2 (en) 2014-07-23
DK3217665T3 (da) 2019-12-16
US20140205000A1 (en) 2014-07-24
EP2723078A2 (en) 2014-04-23
KR101451924B1 (ko) 2014-10-23
US10536717B2 (en) 2020-01-14
KR101451920B1 (ko) 2014-10-23
US20160198191A1 (en) 2016-07-07
DK2723078T3 (en) 2017-08-28
CA3011863C (en) 2020-06-30
KR101451918B1 (ko) 2014-10-23
US10979734B2 (en) 2021-04-13
JP5976793B2 (ja) 2016-08-24
US20170134748A1 (en) 2017-05-11
KR101451923B1 (ko) 2014-10-23
CA2910612C (en) 2018-08-28
US20210203986A1 (en) 2021-07-01
CA2828462A1 (en) 2012-12-27
US10904569B2 (en) 2021-01-26
KR101451922B1 (ko) 2014-10-23
CA3011847C (en) 2021-10-12
US10003820B2 (en) 2018-06-19
JP2019004491A (ja) 2019-01-10
US20140192873A1 (en) 2014-07-10
US9900618B2 (en) 2018-02-20
CN103796030A (zh) 2014-05-14
CA3011853A1 (en) 2012-12-27
BR112013021229B1 (pt) 2022-05-24
CA3011863A1 (en) 2012-12-27
EP2757791A3 (en) 2014-07-30
CN103404151B (zh) 2015-05-20
US20190110073A1 (en) 2019-04-11
US20190379906A1 (en) 2019-12-12
US9591327B2 (en) 2017-03-07
KR20130106336A (ko) 2013-09-27
JP7053696B2 (ja) 2022-04-12
WO2012177053A3 (ko) 2013-04-04
US20160198172A1 (en) 2016-07-07
EP3614668B1 (en) 2023-12-20
CA3185432A1 (en) 2012-12-27
EP4307682A2 (en) 2024-01-17
CA3081215A1 (en) 2012-12-27
US10021416B2 (en) 2018-07-10
CA2828462C (en) 2016-11-22
CA3026271C (en) 2020-03-10
BR112014010333B1 (pt) 2022-05-24
JP6666968B2 (ja) 2020-03-18
US20140204998A1 (en) 2014-07-24
KR20140066680A (ko) 2014-06-02
CN103796030B (zh) 2016-08-17
JP2014161039A (ja) 2014-09-04

Similar Documents

Publication Publication Date Title
JP7241148B2 (ja) 映像符号化/復号化方法及びその装置
KR20200030521A (ko) 디블록킹 필터링의 경계 필터링 강도 결정 방법 및 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210303

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210604

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210625

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211025

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20211025

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20211102

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20211105

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220311

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220331

R150 Certificate of patent or registration of utility model

Ref document number: 7053696

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150