JP2017130947A - 量子化ブロック逆量子化方法 - Google Patents

量子化ブロック逆量子化方法 Download PDF

Info

Publication number
JP2017130947A
JP2017130947A JP2017035017A JP2017035017A JP2017130947A JP 2017130947 A JP2017130947 A JP 2017130947A JP 2017035017 A JP2017035017 A JP 2017035017A JP 2017035017 A JP2017035017 A JP 2017035017A JP 2017130947 A JP2017130947 A JP 2017130947A
Authority
JP
Japan
Prior art keywords
unit
quantization parameter
mode
quantization
intra prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017035017A
Other languages
English (en)
Other versions
JP6275897B2 (ja
Inventor
ソー ミ オー
Soo Mi Oh
ソー ミ オー
ムーノック ヤン
Moonock Yang
ムーノック ヤン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Infobridge Pte Ltd
Original Assignee
Infobridge Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=48191357&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2017130947(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Infobridge Pte Ltd filed Critical Infobridge Pte Ltd
Publication of JP2017130947A publication Critical patent/JP2017130947A/ja
Application granted granted Critical
Publication of JP6275897B2 publication Critical patent/JP6275897B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Auxiliary Devices For Music (AREA)

Abstract

【課題】好適な量子化ブロック逆量子化方法を提供する。【解決手段】量子化ブロックの逆量子化において量子化パラメータを復元する方法は、現在コーディングユニットの差分量子化パラメータを復元するステップS220、左側量子化パラメータ、上側量子化パラメータ及び以前量子化パラメータのうち、1個又は2個の量子化パラメータを利用して現在コーディングユニットの量子化パラメータ予測子を生成するステップS230、差分量子化パラメータ及び量子化パラメータ予測子を利用して現在コーディングユニットの量子化パラメータを生成するステップS240から構成される。量子化ユニットの最小サイズは、ステップS210でピクチャ毎に調整される。【選択図】図5

Description

本発明は、量子化ブロックを逆量子化する方法に関し、より詳しくは、隣接量子化パラメータを利用して量子化パラメータ予測子を生成して量子化パラメータを復元し、前記量子化パラメータを利用して量子化ブロックを逆量子化する方法に関する。
H.264/MPEG−4 AVCでは一つのピクチャが複数個のマクロブロックに分割され、イントラ予測又はインター予測を利用して予測ブロックを生成することによって各々のマクロブロックを符号化する。原本ブロックと予測ブロックとの間の差分値が変換されて変換ブロックが生成され、量子化パラメータ及び量子化マトリクスを利用して前記変換ブロックが量子化される。前記量子化パラメータは、マクロブロック毎に調整され、量子化パラメータ予測子として以前量子化パラメータを利用して符号化される。
一方、現在標準化が進行中であるHEVC(High Efficiency Video Coding)では2倍の圧縮効率を得るために多様なサイズのコーディングユニットが紹介されている。前記コーディングユニットは、H.264のマクロブロックと類似の役割を有する。
しかし、量子化パラメータがコーディングユニット毎に調整されると、コーディングユニットのサイズが小さくなるほど符号化すべき量子化パラメータの数が増加するようになる。したがって、コーディングユニット単位に量子化パラメータを調整すると、量子化パラメータの符号化に必要とするビットの量が増加するようになって圧縮効率を落とす。また、多様なサイズのコーディングユニットが使われるため、量子化パラメータと以前量子化パラメータとの間の連関性(correlation)がH.264での連関性より弱くなるため、多様なサイズのコーディングユニットを使用するために量子化パラメータを符号化及び復号化する新たな方法が要求される。
本発明が達成しようとする目的は、現在コーディングユニットの差分量子化パラメータを復元し、量子化パラメータ予測子を生成し、前記差分量子化パラメータ及び前記量子化パラメータ予測子を利用して現在コーディングユニットの量子化パラメータを生成して量子化ブロックを逆量子化する方法を提供することである。
本発明による量子化ブロックを逆量子化する方法は、現在コーディングユニットの差分量子化パラメータを復元し、現在コーディングユニットの量子化パラメータ予測子を生成し、前記差分量子化パラメータ及び前記量子化パラメータ予測子を利用して現在コーディングユニットの量子化パラメータを生成し、前記量子化パラメータを利用して量子化ブロックを逆量子化することを特徴とする。量子化パラメータ予測子は、左側量子化パラメータ、上側量子化パラメータ及び以前量子化パラメータのうち、1個又は2個の量子化パラメータを利用して生成されることを特徴とする。
本願明細書は、例えば、以下の項目も提供する。
(項目1)
量子化パラメータを復号化する方法において、
現在コーディングユニットの差分量子化パラメータを復元するステップ;
現在コーディングユニットの量子化パラメータ予測子を生成するステップ;及び、
前記差分量子化パラメータ及び前記量子化パラメータ予測子を利用して現在コーディングユニットの量子化パラメータを生成するステップ;を含み、
前記量子化パラメータ予測子は、左側量子化パラメータ、上側量子化パラメータ及び以前量子化パラメータのうち、1個又は2個の量子化パラメータを利用して生成されることを特徴とする方法。
(項目2)
前記量子化パラメータは、量子化ユニット毎に生成され、前記量子化ユニットの最小サイズは、ピクチャ毎に調整されることを特徴とする項目1に記載の方法。
(項目3)
前記量子化ユニットの最小サイズは、前記量子化ユニットの最小サイズの深さを特定するパラメータと最大コーディングユニットのサイズを利用して誘導されることを特徴とする項目2に記載の方法。
(項目4)
前記差分量子化パラメータは、符号化された差分量子化パラメータを算術復号化(arithmetic−decoding)してビンストリング(bin string)を生成し、前記ビンストリングを逆二進化して復元されることを特徴とする項目1に記載の方法。
(項目5)
前記ビンストリングは、前記量子化パラメータが0であるか否かを示すビンを含むことを特徴とする項目4に記載の方法。
(項目6)
前記差分量子化パラメータが0でない場合、前記差分量子化パラメータの符号(sign)を示すビンをさらに含むことを特徴とする項目5に記載の方法。
(項目7)
前記左側量子化パラメータ及び前記上側量子化パラメータが両方とも利用可能な場合、前記左側量子化パラメータ及び前記上側量子化パラメータの平均値が前記量子化パラメータ予測子に設定されることを特徴とする項目1に記載の方法。
(項目8)
前記左側量子化パラメータが利用可能でない場合、前記上側量子化パラメータ及び前記以前量子化パラメータの平均値が前記量子化パラメータ予測子に設定されることを特徴とする項目1に記載の方法。
本発明による方法では、現在コーディングユニットの差分量子化パラメータを復元し、左側量子化パラメータ、上側量子化パラメータ及び以前量子化パラメータのうち、1個又は2個の量子化パラメータを利用して現在コーディングユニットの量子化パラメータ予測子を生成し、前記差分量子化パラメータ及び前記量子化パラメータ予測子を利用して現在コーディングユニットの量子化パラメータを生成し、量子化ユニットの最小サイズは、ピクチャ毎に調整されることを特徴とする。したがって、量子化ユニットの最小サイズをピクチャ毎に調整することによって符号化及び復号化装置の複雑度を減らすことができる。また、複数個の量子化パラメータを利用して量子化パラメータを符号化し、ピクチャ毎に量子化ユニットの最小サイズを送信することによって符号化効率が向上する。
本発明による映像符号化装置を示すブロック図である。 本発明によるイントラ予測モードを説明する概念的ブロック図である。 本発明による量子化パラメータを符号化する方法を説明するフローチャートである。 本発明による映像復号化装置を示すブロック図である。 本発明によるイントラ予測モードにおける予測ブロックを生成する方法を説明するフローチャートである。 本発明によるイントラ予測モードを復元する過程を説明するフローチャートである。 本発明による現在ブロックの参照画素の位置を説明するブロック図である。 本発明によるイントラ予測における予測ブロックを生成する装置を説明するブロック図である。 本発明による量子化パラメータを復号化する方法を説明するフローチャートである。
以下、本発明の多様な実施例を例示図面を参照して詳細に説明する。本発明は、多様な変更を加えることができ、多様な実施例を有することができ、本発明を特定の実施形態に対して限定するものではなく、本発明の思想及び技術範囲に含まれる全ての変更、均等物乃至代替物を含むと理解しなければならない。各図面の説明において、類似の構成要素に対して類似の参照符号を使用した。
図1は、本発明による映像符号化装置100を示すブロック図である。
図1を参照すると、本発明による映像符号化装置100は、ピクチャ分割部101、変換部103、量子化部104、スキャニング部105、エントロピー符号化部106、逆量子化部107、逆変換部108、後処理部110、ピクチャ格納部111、イントラ予測部112、インター予測部113、減算部102及び加算部109を含む。
ピクチャ分割部101は,ピクチャ又はスライスを複数個のLCU(Largest Coding Unit)に分割し、前記各々のLCUを一つ以上のコーディングユニットに分割する。ピクチャ分割部101は、各コーディングユニットの予測モード、予測ユニットのサイズ及び変換ユニットのサイズを決定する。
一つのLCUは、1個又は複数個のコーディングユニット(coding unit)を含む。前記LCUは、分割構造を示すために、再帰的クワッドツリー構造(recursive quadtree structure)を有する。コーディングユニットの最大サイズ及び最小サイズを示す情報がシーケンスパラメータセット(sequence parameter set)に含まれる。前記分割構造は、1個又は複数個の分割コーディングユニットフラグ(split_cu_flag)を利用して表現される。コーディングユニットは、2N×2Nのサイズを有する。
コーディングユニットは、1個又は複数個の予測ユニット(prediction unit)を含む。イントラ予測において、前記予測ユニットのサイズは、2N×2N又はN×Nである。インター予測において、前記予測ユニットのサイズは、2N×2N、2N×N、N×2N又はN×Nである。インター予測において、予測ユニットが非対称パーティション(asymmetric partition)の場合、前記予測ユニットのサイズは、hN×2N、(2−h)N×2N、2N×hN及び2N×(2−h)Nのうち一つである。ここで、hは、1/2である。
コーディングユニットは、1個又は複数個の変換ユニット(transform unit)を含む。変換ユニットは、分割構造を示すために、再帰的クワッドツリー構造(recursive quadtree structure)を有する。分割構造は、1個又は複数個の分割変換ユニットフラグ(split_tu_flag)により表現される。変換ユニットの最大サイズ及び最小サイズを示す情報がシーケンスパラメータセットに含まれる。
イントラ予測部112は、現在予測ユニットのイントラ予測モードを決定し、前記イントラ予測モードを利用して1個又は複数個の予測ブロックを生成する。予測ブロックは、変換ユニットと同じサイズを有する。イントラ予測部112は、現在ブロックの利用可能でない参照画素が存在する場合、参照画素を生成し、現在ブロックのサイズ及びイントラ予測モードに応じて現在ブロックの参照画素を適応的にフィルタリングし、現在ブロックの予測ブロックを生成する。現在ブロックは、前記予測ブロックと同じサイズを有する。
図2は、本発明によるイントラ予測モードを説明する概念的ブロック図である。図2に示すように、イントラ予測モードの数は、35個である。DCモードとプラナー(Planar)モードは、非方向性イントラ予測モードであり、残りは、方向性モードである。
インター予測部113は、ピクチャ格納部111に格納されている一つ以上の参照ピクチャを利用して現在予測ユニットの動き情報を決定し、前記予測ユニットの予測ブロックを生成する。前記動き情報は、一つ以上の参照ピクチャインデックスと一つ以上の動きベクトルを含む。
変換部103は、原本ブロックと予測ブロックを利用して生成される残差信号を変換して変換ブロックを生成する。残差信号は、変換ユニット単位に変換される。変換タイプは、予測モード及び変換ユニットのサイズによって決定される。変換タイプは、DCTベースの整数変換又はDSTベースの整数変換である。
量子化部104は、前記変換ブロックを量子化するための量子化パラメータを決定する。量子化パラメータは、量子化ステップサイズである。量子化パラメータは、基準サイズより大きい又は同じコーディングユニットのサイズを有する量子化ユニット毎に決定される。前記基準サイズは、量子化ユニットの最小サイズである。コーディングユニットのサイズが量子化ユニットの最小サイズより大きい又は同じ場合、前記コーディングユニットが量子化ユニットになる。複数個のコーディングユニットが最小量子化ユニットに含まれることもできる。前記量子化ユニットの最小サイズは、コーディングユニットの許容可能なサイズのうち一つである。
量子化部104は、量子化パラメータ予測子を生成し、量子化パラメータから量子化パラメータ予測子を減算して差分量子化パラメータを生成する。前記差分量子化パラメータは、符号化されて復号器に送信される。コーディングユニット内に送信される残差信号が存在しない場合、前記コーディングユニットの差分量子化パラメータは送信されない。
前記量子化パラメータ予測子は、隣接コーディングユニットの量子化パラメータ及び/又は以前コーディングユニットの量子化パラメータを利用して生成される。
一実施例として、量子化部104は、左側量子化パラメータ、上側量子化パラメータ及び左上側量子化パラメータの順序に検索し、1個又は2個の利用可能な量子化パラメータを利用して前記量子化パラメータ予測子を生成する。例えば、少なくとも2個の量子化パラメータが利用可能な場合は、前記順序に検索された利用可能な最初の2個の量子化パラメータの平均値が前記量子化パラメータ予測子に設定される。一つの量子化パラメータのみが利用可能な場合は、前記利用可能な量子化パラメータが前記量子化パラメータ予測子に設定される。前記左側量子化パラメータは、左側に隣接したコーディングユニットの量子化パラメータである。前記上側量子化パラメータは、上側に隣接したコーディングユニットの量子化パラメータである。前記左上側量子化パラメータは、左上側に隣接したコーディングユニットの量子化パラメータである。
他の実施例として、量子化部104は、左側量子化パラメータ、上側量子化パラメータ及び以前量子化パラメータを前記順序通りに検索し、1個又は2個の利用可能な量子化パラメータを利用して前記量子化パラメータ予測子を生成する。少なくとも2個の量子化パラメータが利用可能な場合、前記順序に検索される最初の2個の利用可能な量子化パラメータの平均値を量子化パラメータ予測子に設定する。一つの量子化パラメータのみが利用可能な場合は、前記利用可能な量子化パラメータが量子化パラメータ予測子に設定される。即ち、前記左側量子化パラメータ及び前記上側量子化パラメータが両方とも利用可能な場合、前記左側量子化パラメータ及び前記上側量子化パラメータの平均値が前記量子化パラメータ予測子に設定される。前記左側量子化パラメータ及び前記上側量子化パラメータのうち一つのみが利用可能な場合、前記利用可能な量子化パラメータと前記以前量子化パラメータの平均値が前記量子化パラメータ予測子に設定される。前記左側量子化パラメータ及び前記上側量子化パラメータが両方とも利用可能でない場合、前記以前量子化パラメータが前記量子化パラメータ予測子に設定される。前記以前量子化パラメータは、符号化の順序上、直前のコーディングユニットの量子化パラメータである。前記平均値は、四捨五入した平均値である。
量子化部104は、量子化マトリクス及び量子化パラメータを利用して変換ブロックを量子化することで、量子化ブロックを生成する。量子化ブロックは、逆量子化部107とスキャニング部105に提供される。
スキャニング部105は、スキャンパターンを決定し、前記スキャンパターンを前記量子化ブロックに適用する。エントロピー符号化のために、CABAC(Context adaptive binary arithmetic coding)が使われる場合、前記スキャンパターンは、下記のように決定される。
イントラ予測では、量子化された変換係数の分布がイントラ予測モード及び変換ユニットのサイズにより変わる。したがって、スキャンパターンは、前記イントラ予測モード及び前記変換ユニットのサイズにより決定される。対角線スキャン(diagonal scan)、垂直スキャン(vertical scan)及び水平スキャン(horizontal scan)の中からスキャンパターンが決定される。量子化ブロックの量子化された変換係数は、重要フラグ(significant flags)、係数符号(coefficient signs)及び係数レベル(coefficient levels)に分離される。前記スキャンパターンは、重要フラグ、係数符号及び係数レベルに各々適用される。
変換ユニットのサイズが第1のサイズより小さい又は同じ場合、垂直モード及び前記垂直モードに隣接した予め決められた個数のイントラ予測モードでは水平スキャンが選択され、水平モード及び前記水平モードに隣接した予め決められた個数のイントラ予測モードでは垂直スキャンが選択され、残りのイントラ予測モードでは対角線スキャンが選択される。前記第1のサイズは、8×8である。
変換ユニットのサイズが前記第1のサイズより大きい場合、全てのイントラ予測モードに対角線スキャンが適用される。
インター予測では、対角線スキャンが使われる。
変換ユニットのサイズが第2のサイズより大きい場合、前記量子化ブロックは、複数個のサブセットに分割されてスキャンされる。前記第2のサイズは、4×4である。サブセットをスキャンするためのスキャンパターンは、前記各サブセットの量子化された変換係数をスキャンするためのスキャンパターンと同じである。各サブセットの量子化された変換係数は、逆方向にスキャンされる。前記サブセットも逆方向にスキャンされる。
0でない最後の係数位置(last non−zero position)が符号化されて復号器に送信される。0でない最後の係数位置は、変換ユニット内での0でない最後の量子化された変換係数の位置を示す。
ノンゼロサブセットフラグ(non−zero subset flags)が決定されて符号化される。ノンゼロサブセットフラグは、サブセットが0でない係数を含むかどうかを示す。ノンゼロサブセットフラグは、DC係数を含むサブセットと0でない最後の係数を含むサブセットでは定義されない。
逆量子化部107は、量子化ブロックの量子化された変換係数を逆量子化する。
逆変換部108は、逆量子化ブロックを逆変換して空間領域が残差信号を生成する。
加算部109は、残差ブロックと予測ブロックを加えて復元ブロックを生成する。
後処理部110は、復元されたピクチャで発生するブロッキングアーチファクトを除去するためのデブロッキングフィルタリング過程を実行する。
ピクチャ格納部111は、後処理部110から後処理された映像を受信し、ピクチャ単位に前記映像を格納する。ピクチャは、フレーム又はフィールドである。
エントロピー符号化部106は、スキャニング部105から受信される1次元係数情報、イントラ予測部112から受信されるイントラ予測情報、インター予測部113から受信される動き情報などをエントロピー符号化する。
図3は、本発明による量子化パラメータを符号化する方法を説明するフローチャートである。
量子化ユニットの最小サイズが決定される(S110)。前記量子化ユニットの最小サイズは、LCUのサイズ又はLCUのサブブロックのサイズと同じである。前記量子化ユニットの最小サイズは、ピクチャ毎に決定される。
量子化パラメータが決定される(S120)。前記量子化パラメータは、量子化ユニット毎に決定される。現在コーディングユニットのサイズが量子化ユニットの最小サイズより大きい又は同じ場合、現在コーディングユニットが量子化ユニットになる。最小量子化ユニットが複数個のコーディングユニットを含む場合、前記量子化パラメータは、前記最小量子化ユニット内の全てのコーディングユニットに対して決定される。
量子化パラメータ予測子が生成される(S130)。前記量子化パラメータ予測子も量子化ユニット毎に決定される。現在コーディングユニットのサイズが量子化ユニットの最小サイズより大きい又は同じ場合、現在コーディングユニットの量子化パラメータ予測子が生成される。最小量子化ユニットが複数個のコーディングユニットを含む場合、符号化の順序上、最初のコーディングユニットに対する量子化パラメータ予測子が決定され、前記決定された量子化パラメータ予測子が前記最小量子化ユニット内の残りのコーディングユニットに対しても使われる。
前記量子化パラメータは、隣接コーディングユニットの量子化パラメータと以前コーディングユニットの量子化パラメータを利用して生成される。
一実施例として、左側量子化パラメータ、上側量子化パラメータ及び左上側量子化パラメータが前記順序に検索され、1個又は2個の利用可能な量子化パラメータを利用して前記量子化パラメータ予測子が生成される。例えば、少なくとも2個の量子化パラメータが利用可能な場合は、前記順序に検索された利用可能な最初の2個の量子化パラメータの平均値が前記量子化パラメータ予測子に設定される。一つの量子化パラメータのみが利用可能な場合は、前記利用可能な量子化パラメータが前記量子化パラメータ予測子に設定される。前記左側量子化パラメータは、左側に隣接したコーディングユニットの量子化パラメータである。前記上側量子化パラメータは、上側に隣接したコーディングユニットの量子化パラメータである。前記左上側量子化パラメータは、左上側に隣接したコーディングユニットの量子化パラメータである。
他の実施例として、左側量子化パラメータ、上側量子化パラメータ及び以前量子化パラメータが前記順序通りに検索され、1個又は2個の利用可能な量子化パラメータを利用して前記量子化パラメータ予測子が生成される。少なくとも2個の量子化パラメータが利用可能な場合、前記順序に検索される最初の2個の利用可能な量子化パラメータの平均値を量子化パラメータ予測子に設定する。一つの量子化パラメータのみが利用可能な場合は、前記利用可能な量子化パラメータが量子化パラメータ予測子に設定される。即ち、前記左側量子化パラメータ及び前記上側量子化パラメータが両方とも利用可能な場合、前記左側量子化パラメータ及び前記上側量子化パラメータの平均値が前記量子化パラメータ予測子に設定される。前記左側量子化パラメータ及び前記上側量子化パラメータのうち一つのみが利用可能な場合、前記利用可能な量子化パラメータと前記以前量子化パラメータの平均値が前記量子化パラメータ予測子に設定される。前記左側量子化パラメータ及び前記上側量子化パラメータが両方とも利用可能でない場合、前記以前量子化パラメータが前記量子化パラメータ予測子に設定される。前記以前量子化パラメータは、符号化の順序上、直前のコーディングユニットの量子化パラメータである。前記平均値は、四捨五入した平均値である。
差分量子化パラメータは、エントロピー符号化される(S150)。前記差分量子化パラメータ(dQP)は、dQPの絶対値とdQPの符号を示す符号フラグ(sign flag)に変換される。dQPの絶対値は、トランケーテッドユーナリ(truncated unary)に二進化される。そして、前記絶対値と符号フラグは、算術的に符号化される。前記絶対値が0の場合、前記符号フラグが存在しない。
一方、量子化ユニットの最小サイズも復号化装置に送信される。
現在標準化が進行中であるHM(HEVC Test Model)では、量子化ユニットの最小サイズを送信するために2ステップが要求される。第1のステップとして、量子化パラメータがLCU毎に調整されるか、又はLCUのサブブロック毎に調整されるかをシーケンスレベルで決定し、もし、シーケンスレベルで前記量子化パラメータがLCUのサブブロック毎に調整されると決定されると、量子化ユニットの最小サイズがピクチャレベルで決定される。量子化パラメータがLCU毎に調整されるか、又はLCUのサブブロック毎に調整されるかを示す1番目のパラメータ(cu_qp_delta_enabled_flag)がシーケンスパラメータセット(sequence parameter set)に含まれる。前記1番目のパラメータは、量子化パラメータがLCUのサブブロック毎に調整されると示す場合、2番目のパラメータ(max_cu_qp_delta_depth)がピクチャパラメータセット(picture paramter
set)に含まれる。前記2番目のパラメータは、LCUより小さいサイズの量子化ユニットサイズを特定する。したがって、量子化ユニットの最小サイズが少なくても一つのピクチャで使われると、符号化過程での複雑度が増加するようになって、2個のパラメータが送信されなければならない。
本発明では、シーケンスレベルで行われる前記量子化ユニットの最小サイズがLCUより小さいかどうかを判断することが省略される。即ち、量子化ユニットの最小サイズは、ピクチャ毎に決定される。したがって、前記量子化ユニットの最小サイズを特定するために一つのパラメータ(例えば、cu_qp_delta_enabled_info)が使われることもできる。前記パラメータは、最小量子化ユニットの深さを特定する。量子化ユニットの最小サイズは、LCUのサイズ又はLCUのサブブロックのサイズである。したがって、量子化ユニットの最小サイズを送信するために要求されるビット量と符号化過程での複雑度が減少される。
前記変換ブロックを量子化するために予め決められた量子化マトリクス及びユーザ定義の量子化マトリクスが使われることができる。一つ以上のユーザ定義のマトリクスが使われると、前記一つ以上のユーザ定義のマトリクスがシーケンスパラメータセット又はピクチャパラメータセットに含まれるべきである。前記ユーザ定義の量子化マトリクスのシグナリングビット数を減らすために、前記ユーザ定義の量子化マトリクスの係数は、DPCM(differential pulse code modulation)方式を利用して符号化される。前記DPCM方式に対して対角線スキャン(diagonal scan)が適用される。
前記ユーザ定義の量子化マトリクスのサイズが予め決められた大きさより大きい場合、前記シグナリングビット数を減らすために、前記ユーザ定義の量子化マトリクスの係数は、ダウンサンプリングされた後、DPCMを利用して符号化される。前記予め決められた大きさは、8×8である。例えば、ユーザ定義の量子化マトリクスのサイズが16×16の場合、前記ユーザ定義の量子化マトリクスのDC係数以外の係数が4:1ダウンサンプリングを利用してダウンサンプリングされる。DC係数は、前記ダウンサンプリングされたマトリクスと別途にシグナリングされる。
図4は、本発明による映像復号化装置200を示すブロック図である。
本発明による映像復号化装置200は、エントロピー復号化部201、逆スキャニング部202、逆量子化部203、逆変換部204、加算部205、後処理部206、ピクチャ格納部207、イントラ予測部208及びインター予測部209を含む。
エントロピー復号化部201は、受信されたビットストリームからイントラ予測情報、インター予測情報及び1次元係数情報を抽出する。エントロピー復号化部201は、インター予測情報をインター予測部209に送信し、イントラ予測情報をイントラ予測部208に送信し、前記係数情報を逆スキャニング部202に送信する。
逆スキャニング部202は、逆スキャンパターンを使用して2次元の量子化ブロックを生成する。CABACがエントロピー符号化方法として使われたと仮定して説明する。逆スキャンパターンは、対角線スキャン、垂直スキャン及び水平スキャンのうち一つである。
イントラ予測では、イントラ予測モード及び変換ユニットのサイズにより逆スキャンパターンが決定される。逆スキャンパターンは、対角線スキャン、垂直スキャン及び水平スキャンの中から選択される。前記選択された逆スキャンパターンは、重要フラグ、係数符号及び係数レベルに各々適用されて量子化ブロックを生成する。
変換ユニットのサイズが前記第1のサイズより小さい又は同じ場合、垂直モード及び前記垂直モードに隣接した予め決められた個数のイントラ予測モードでは水平スキャンが選択され、水平モード及び前記水平モードに隣接した予め決められた個数のイントラ予測モードでは垂直スキャンが選択され、残りのイントラ予測モードでは対角線スキャンが選択される。前記第1のサイズは、8×8である。
変換ユニットのサイズが前記第1のサイズより大きい場合、全てのイントラ予測モードに対角線スキャンが適用される。
インター予測では、対角線スキャンが使われる。
変換ユニットのサイズが第2のサイズより大きい場合、重要フラグ、係数符号及び係数レベル(levels)がサブセット単位に逆スキャンされてサブセットを生成する。サブセットは、逆スキャンされて量子化ブロックを生成する。前記第2のサイズは、4×4である。
各サブセットを生成するために使われる逆スキャンパターンは、量子化ブロックを生成するために使われる逆スキャンパターンと同じである。重要フラグ、係数符号及び係数レベルは、逆方向に逆スキャンされる。サブセットも逆方向に逆スキャンされる。
0でない最後の係数位置(last non−zero position)及びノンゼロサブセットフラグが符号化器から受信される。0でない最後の係数位置は、生成されるサブセットの数を決定するために使われる。ノンゼロサブセットフラグは、逆スキャンパターンを適用して生成されるサブセットを決定するために使われる。DC係数を含むサブセットと0でない最後の係数を含むサブセットに対するノンゼロサブセットフラグは、符号器から送信されないため、逆スキャンパターンを使用して前記DC係数を含むサブセットと0でない最後の係数を含むサブセットを生成しなければならない。
逆量子化部203は、エントロピー復号化部201から差分量子化パラメータを受信し、量子化パラメータ予測子を生成する。量子化パラメータ予測子は、図1の量子化部104による動作と同様の過程を介して生成される。その後、逆量子化部203は、前記差分量子化パラメータと前記量子化パラメータ予測子を加えて現在コーディングユニットの量子化パラメータを生成する。現在コーディングユニットが最小量子化ユニットより大きい又は同じであり、且つ現在コーディングユニットの差分量子化パラメータが符号器から受信されない場合、前記差分量子化パラメータは、0に設定される。
逆量子化部203は、量子化ブロックを逆量子化する。
逆変換部204は、前記逆量子化されたブロックを逆変換して残差ブロックを復元する。逆変換タイプは、予測モード及び変換ユニットのサイズによって決定される。逆変換タイプは、DCTベースの整数変換又はDSTベースの整数変換である。
イントラ予測部208は、受信されたイントラ予測情報を利用して現在予測ユニットのイントラ予測モードを復元し、前記復元されたイントラ予測モードに応じて予測ブロックを生成する。前記予測ブロックは、変換ユニットと同じサイズを有する。イントラ予測部208は、現在ブロックの利用可能でない参照画素が存在する場合、参照画素を生成し、現在ブロックのサイズ及びイントラ予測モードに応じて現在ブロックの参照画素を適応的にフィルタリングする。現在ブロックは、変換ユニットのサイズを有する。
インター予測部209は、受信されたインター予測情報を利用して現在予測ユニットの動き情報を復元し、前記動き情報を利用して予測ブロックを生成する。
後処理部206は、図1の後処理部110と同様に動作する。
ピクチャ格納部207は、後処理部206から後処理された映像を受信し、ピクチャ単位に前記映像を格納する。ピクチャは、フレーム又はフィールドである。
加算部205は、復元された残差ブロックと予測ブロックを加えて復元ブロックを生成する。
図5は、本発明による量子化パラメータの復号化方法を説明するフローチャートである。
量子化ユニットの最小サイズが誘導される(S210)。最小量子化ユニットの深さを特定するパラメータ(cu_qp_delta_enabled_info)がPPSから抽出される。量子化ユニットの最小サイズは、ピクチャ毎に下記のように誘導される。
Log2(MinQUSize)=Log2(MaxCUSize)−cu_qp_delta_enabled_info
MinQUSizeは、量子化ユニットの最小サイズである。MaxCUSizeは、LCUのサイズである。
現在コーディングユニットの差分量子化パラメータ(dQP)が復元される(S220)。dQPは、量子化ユニット毎に復元される。例えば、現在コーディングユニットのサイズが前記量子化ユニットの最小サイズより大きい又は同じ場合、現在コーディングユニットに対してdQPが復元される。現在コーディングユニットが符号化されたdQPを含まない場合、dQPは、0に設定される。量子化ユニットが複数個のコーディングユニットを含む場合、復号化の順序上、0でない係数を少なくとも一つ有する最初のコーディングユニットが符号化されたdQPを含む。
前記符号化されたdQPは、算術復号化され、dQPの絶対値とdQPの符号を示す符号フラグを生成する。dQPの絶対値は、トランケーテッドユーナリ(truncated unary)方式に二進化されたビンストリング(bin string)である。前記絶対値と符号フラグのビンストリングからdQPが復元される。前記絶対値が0の場合、前記符号フラグは存在しない。
現在コーディングユニットの前記量子化パラメータ予測子が生成される(S230)。前記量子化パラメータ予測子は、図3のS130と同様に生成される。量子化ユニットが複数個のコーディングユニットを含む場合、復号化の順序上、最初のコーディングユニットの量子化パラメータ予測子が生成され、前記生成された量子化パラメータ予測子が前記量子化ユニット内の全ての量子化ユニットに使われる。
dQPと前記量子化パラメータ予測子を利用して量子化パラメータが生成される(S240)。
一方、ユーザ定義の量子化マトリクスも復元される。ユーザ定義の量子化マトリクスのセットが符号器からシーケンスパラメータセット又はピクチャパラメータセットを介して受信される。前記ユーザ定義の量子化マトリクスは、逆DPCMを利用して復元される。前記DPCMに対角線スキャンが使われる。前記ユーザ定義の量子化マトリクスの大きさが8×8より大きい場合、前記ユーザ定義の量子化マトリクスは、受信された8×8量子化マトリクスの係数をアップサンプリングして復元される。前記ユーザ定義の量子化マトリクスのDC係数は、シーケンスパラメータセット又はピクチャパラメータセットから抽出されることができる。例えば、前記ユーザ定義の量子化マトリクスのサイズが16×16の場合、受信された8×8量子化マトリクスの係数が1:4アップサンプリングを使用してアップサンプリングされる。
図6は、本発明によるイントラ予測モードにおける予測ブロックを生成する方法を説明するフローチャートである。
現在予測ユニットのイントラ予測情報がエントロピー復号化される(S310)。
前記イントラ予測情報は、モードグループ指示子及び予測モードインデックスを含む。前記モードグループ指示子は、現在予測ユニットのイントラ予測モードがMPMグループ(most probable mode group)に属するかどうかを示すフラグである。前記フラグが1の場合、現在予測ユニットのイントラ予測モードがMPMグループに属する。前記フラグが0の場合、現在予測ユニットのイントラ予測モードが残余モードグループ(residual mode group)に属する。前記残余モードグループは、前記MPMグループに属するイントラ予測モード以外の全てのイントラ予測モードを含む。前記予測モードインデックスは、前記モードグループ指示子により特定されるグループ内での現在予測ユニットのイントラ予測モードを特定する。
前記イントラ予測情報を利用して現在予測ユニットのイントラ予測モードが復元される(S320)。
図7は、本発明によるイントラ予測モードを復元する過程を説明するフローチャートである。現在予測ユニットのイントラ予測モードは、下記の順序に復元される。
隣接予測ユニットのイントラ予測モードを利用してMPMグループが構成される(S321)。前記MPMグループのイントラ予測モードは、左側イントラ予測モード及び上側イントラ予測モードにより適応的に決定される。前記左側イントラ予測モードは、左側に隣接した予測ユニットのイントラ予測モードであり、前記上側イントラ予測モードは、上側に隣接した予測ユニットのイントラ予測モードである。前記MPMグループは、3個のイントラ予測モードで構成される。
前記左側又は上側に隣接した予測ユニットが存在しない場合、前記左側又は上側の隣接予測ユニットのイントラ予測モードは利用可能でないと設定される。例えば、現在予測ユニットがピクチャの左側又は上側の境界に位置すると、左側又は上側に隣接した予測ユニットが存在しない。左側又は上側に隣接した予測ユニットが他のスライス又は他のタイルに属すると、左側又は上側に隣接した予測ユニットのイントラ予測モードは利用可能でないと設定される。左側又は上側に隣接した予測ユニットがインター符号化されると、左側又は上側に隣接した予測ユニットのイントラ予測モードが利用可能でないと設定される。上側に隣接した予測ユニットが他のLCUに属すると、前記左側又は上側に隣接した予測ユニットのイントラ予測モードが利用可能でないと設定される。
左側イントラ予測モード及び上側イントラ予測モードが両方とも利用可能であり、且つ互いに異なる場合は、前記左側イントラ予測モード及び前記上側イントラ予測モードが前記MPMグループに含まれ、1個の追加イントラ予測モードが前記MPMグループに追加される。二つのうち、モード番号が小さいイントラ予測モードにインデックス0が割り当てられ、残りの一つにインデックス1が割り当てられる。または、左側イントラ予測モードにインデックス0が割り当てられ、上側イントラ予測モードにインデックス1が割り当てられてもよい。前記追加イントラ予測モードは、前記左側及び上側イントラ予測モードにより下記のように決定される。
左側及び上側イントラ予測モードのうち、一つが非方向性モード(non−directional mode)であり、他の一つが方向性モード(directional mode)の場合、残りの一つの非方向性モードが前記MPMグループに追加される。例えば、前記左側及び上側イントラ予測モードのうち、一つがDCモードの場合、プラナーモードが前記MPMグループに追加され、前記左側及び上側イントラ予測モードのうち、一つがプラナーモードの場合、DCモードが前記MPMグループに追加される。左側及び上側イントラ予測モードが両方とも非方向性モードの場合、垂直モードが前記MPMグループに追加される。左側及び上側イントラ予測モードが両方とも方向性モードの場合、DCモード又はプラナーモードが前記MPMグループに追加される。
左側イントラ予測モード及び上側イントラ予測モードのうち一つのみが利用可能な場合は、前記利用可能なイントラ予測モードが前記MPMグループに含まれ、2個の追加イントラ予測モードが前記MPMグループに追加される。前記2個の追加イントラ予測モードは、前記利用可能なイントラ予測モードにより下記のように決定される。
前記利用可能なイントラ予測モードが非方向性モードの場合、残りの一つの非方向性モードと垂直モードが前記MPMグループに追加される。例えば、前記利用可能なイントラ予測モードがDCモードの場合、プラナーモードと垂直モードが前記MPMグループに追加される。前記利用可能なイントラ予測モードがプラナーモードの場合、DCモードと垂直モードが前記MPMグループに追加される。前記利用可能なイントラ予測モードが方向性モードの場合、2個の非方向性モード(DCモード及びプラナーモード)が前記MPMグループに追加される。
左側イントラ予測モード及び上側イントラ予測モードが両方とも利用可能であり、且つ互いに同じ場合、前記利用可能なイントラ予測モードがMPMグループに含まれ、2個の追加イントラ予測モードが前記MPMグループに追加される。前記追加される2個のイントラ予測モードは、前記利用可能なイントラ予測モードにより下記のように決定される。
前記利用可能なイントラ予測モードが方向性モードの場合、2個の隣接方向性モードが前記MPMグループに追加される。例えば、前記利用可能なイントラ予測モードがモード23の場合、左側隣接モード(モード1)と右側隣接モード(モード13)が前記MPMグループに追加される。前記利用可能なイントラ予測モードがモード30の場合、2個の隣接モード(モード2とモード16)が前記MPMグループに追加される。前記利用可能なイントラ予測モードが非方向性モードの場合、残りの一つの非方向性モードと垂直モードが前記MPMグループに追加される。例えば、前記利用可能なイントラ予測モードがDCモードの場合、プラナーモードと垂直モードが前記MPMグループに追加される。
左側イントラ予測モード及び上側イントラ予測モードが両方とも利用可能でない場合は、3個の追加イントラ予測モードが前記MPMグループに追加される。前記3個のイントラ予測モードは、DCモード、プラナーモード及び垂直モードである。DCモード、プラナーモード及び垂直モードの順序に又はプラナーモード、DCモード及び垂直モードの順序に、インデックス0、1及び2が前記3個のイントラ予測モードに割り当てられる。
前記モードグループ指示子がMPMグループを示すかどうかを決定する(S322)。
前記モードグループ指示子が前記MPMグループを示す場合、前記予測モードインデックスにより特定されるMPMグループ内のイントラ予測モードが現在予測ユニットのイントラ予測モードとして設定される(S323)。
前記モードグループ指示子が前記MPMグループを示さない場合、前記予測モードインデックスにより特定される前記残余モードグループ内のイントラ予測モードが現在予測ユニットのイントラ予測モードとして設定される(S324)。現在予測ユニットのイントラ予測モードは、前記予測モードインデックス及び前記MPMグループのイントラ予測モードを利用して下記の順序に誘導される。
MPMグループ内の3個のイントラ予測モードのうち、最も小さいモード番号を有するイントラ予測モードが第1の候補に設定され、中間モード番号を有するイントラ予測モードが第2の候補に設定され、最も大きいモード番号を有するイントラ予測モードが第3の候補に設定される。
1)前記予測モードインデックスを第1の候補と比較する。前記予測モードインデックスが前記MPMグループ内の第1の候補のモード番号より大きい又は同じ場合、前記予測モードインデックスの値が1ほど増加する。そうでない場合、前記予測モードインデックスの値は維持される。
2)前記予測モードインデックスを第2の候補と比較する。前記予測モードインデックスが前記MPMグループ内の第2の候補のモード番号より大きい又は同じ場合、前記予測モードインデックスの値が1ほど増加する。そうでない場合、前記予測モードインデックスの値は維持される。
3)前記予測モードインデックスを第3の候補と比較する。前記予測モードインデックスが前記MPMグループ内の第3の候補のモード番号より大きい又は同じ場合、前記予測モードインデックスの値が1ほど増加する。そうでない場合、前記予測モードインデックスの値は維持される。
4)前記最後の予測モードインデックスが現在予測ユニットのイントラ予測モードのモード番号に設定される。
前記予測ブロックのサイズは、前記変換ユニットのサイズを示す変換サイズ情報に基づいて決定される(S330)。変換サイズ情報は、前記変換ユニットのサイズを特定するための1個又は複数個の分割変換フラグ(split_transform_flag)である。
変換ユニットのサイズが現在予測ユニットのサイズと同じ場合、予測ブロックのサイズは、現在予測ユニットのサイズと同じである。
変換ユニットのサイズが現在予測ユニットのサイズより小さい場合、予測ブロックのサイズは、変換ユニットのサイズと同じである。この場合、復元ブロックを生成する過程は、現在予測ユニットの各サブブロック毎に実行される。即ち、現在のサブブロックの予測ブロック及び残差ブロックが生成され、前記予測ブロック及び残差ブロックを加えて復元ブロックを生成する。その後、復号化の順序上、次に位置するサブブロックの予測ブロック、残差ブロック及び復元ブロックが生成される。前記復元されたイントラ予測モードが全てのサブブロックの予測ブロックを生成するのに使われる。現在サブブロックの復元ブロックの一部画素が次のサブブロックの参照画素として使われる。したがって、原本サブブロックにさらに類似の予測ブロックを生成するのが可能である。
次に、現在ブロックの参照画素が全て利用可能かどうかを判断し、一つ以上の参照画素が利用可能でない場合、参照画素を生成する(S340)。現在ブロックは、現在予測ユニット又は現在サブブロックである。前記現在ブロックのサイズは、変換ユニットのサイズである。
図8は、本発明による現在ブロックの参照画素の位置を説明するブロック図である。図8に示すように、現在ブロックの参照画素は、(x=0,...,2N−1、y=−1)に位置する上側参照画素と、(x=−1、y=0,...,2M−1)に位置する左側参照画素と、(x=−1、y=−1)に位置するコーナー参照画素とで構成される。Nは、現在ブロックの横の長さであり、Mは、現在ブロックの縦の長さである。
復元された画素が対応する位置に存在しない、又は他のスライスに位置すると、前記参照画素は、利用可能でないと設定される。CIPモード(constrained intra prediction mode)では、インターモードの復元画素が利用可能でないと設定される。
一つ以上の参照画素が利用可能でない場合、前記画素を対して参照画素が下記のように生成される。
全ての参照画素が利用可能でない場合、全ての参照画素が2L−1の値に代替される。Lの値は、輝度画素の値を表現するのに使われるビットの数である。
利用可能な参照画素が利用可能でない参照画素の片側方向にのみ存在する場合、前記利用可能でない参照画素の値は、前記利用可能でない参照画素に最も近い位置の参照画素の値に代替される。
利用可能な参照画素が利用可能でない参照画素の両側方向に存在する場合、前記利用可能でない参照画素の値は、前記利用可能でない参照画素の各方向に最も近い位置の参照画素の平均値又は予め決められた方向の最も近い位置の参照画素の値に代替される。
次に、前記イントラ予測モード及び現在ブロックのサイズに基づいて前記参照画素が適応的にフィルタリングされる(S350)。現在ブロックのサイズは、変換ブロックのサイズである。
DCモードでは参照画素がフィルタリングされない。垂直モード及び水平モードでも参照画素がフィルタリングされない。前記垂直モード及び水平モード以外の方向性モードでは、参照画素が前記現在ブロックのサイズによって適応的にフィルタリングされる。
現在ブロックのサイズが4×4の場合、全てのイントラ予測モードで前記参照画素がフィルタリングされない。8×8、16×16及び32×32のサイズで、参照画素がフィルタリングされなければならないイントラ予測モードの数は、現在ブロックのサイズが大きくなるほど増加する。例えば、垂直モード及び前記垂直モードに隣接した予め決められた個数のイントラ予測モードでは、参照画素がフィルタリングされない。水平モード及び前記水平モードに隣接した前記予め決められた個数のイントラ予測モードでは、参照画素がフィルタリングされない。前記予め決められた個数は、0〜7のうち一つであり、現在ブロックのサイズが大きくなるほど減少する。
次に、前記復元されたイントラ予測モードに応じて参照画素を利用して現在ブロックの予測ブロックが生成される(S360)。
DCモードでは、参照画素に接しない予測ブロックの予測画素は、(x=0,...,N−1、y=−1)に位置するN個の参照画素と、(x=−1、y=0,...,M−1)に位置するM個の参照画素を平均して生成される。参照画素に接する予測画素は、前記平均値と1個又は2個の接する参照画素を利用して生成される。
垂直モードでは、左側参照画素に接しない予測画素は、垂直参照画素の値を複写して生成される。左側参照画素に接する予測画素は、垂直参照画素及び前記左側隣接参照画素とコーナー参照画素との間の変化量を利用して生成される。
水平モードでも前記と同様の方式により参照画素が生成される。
図9は、本発明によるイントラ予測における予測ブロックを生成する装置300を説明するブロック図である。
本発明による装置300は、パーシング部310、予測モード復号化部320、予測サイズ決定部330、参照画素有効性検査部340、参照画素生成部350、参照画素フィルタリング部360及び予測ブロック生成部370を含む。
パーシング部310は、ビットストリームから現在予測ユニットのイントラ予測情報を復元する。
前記イントラ予測情報は、モードグループ指示子と予測モードインデックスを含む。前記モードグループ指示子は、現在予測ユニットのイントラ予測モードがMPMグループに属するかどうかを示すフラグである。前記フラグが1の場合、現在予測ユニットのイントラ予測モードはMPMグループに属する。前記フラグが0の場合、現在予測ユニットのイントラ予測モードが残余モードグループに属する。前記残余モードグループは、前記MPMグループに属するイントラ予測モード以外の全てのイントラ予測モードを含む。予測モードインデックスは、前記モードグループ指示子により特定されるグループ内での現在予測ユニットのイントラ予測モードを特定する。
予測モード復号化部320は、MPMグループ構成部321及び予測モード復元部322を含む。
MPMグループ構成部321は、現在予測ユニットのMPMグループを構成する。前記MPMグループは、隣接予測ユニットのイントラ予測モードを利用して構成する。前記MPMグループのイントラ予測モードは、左側イントラ予測モード及び上側イントラ予測モードにより適応的に決定される。前記左側イントラ予測モードは、左側に隣接した予測ユニットのイントラ予測モードであり、前記上側イントラ予測モードは、上側に隣接した予測ユニットのイントラ予測モードである。前記MPMグループは、3個のイントラ予測モードで構成される。
MPMグループ構成部321は、前記左側イントラ予測モード及び前記上側イントラ予測モードの有効性を検査する。前記左側又は上側に隣接した予測ユニットが存在しない場合、前記左側又は上側の隣接予測ユニットのイントラ予測モードは利用可能でないと設定される。例えば、現在予測ユニットがピクチャの左側又は上側の境界に位置すると、左側又は上側に隣接した予測ユニットが存在しない。左側又は上側に隣接した予測ユニットが他のスライス又は他のタイルに属すると、左側又は上側に隣接した予測ユニットのイントラ予測モードは利用可能でないと設定される。左側又は上側に隣接した予測ユニットがインター符号化されると、左側又は上側に隣接した予測ユニットのイントラ予測モードが利用可能でないと設定される。上側に隣接した予測ユニットが他のLCUに属すると、前記左側又は上側に隣接した予測ユニットのイントラ予測モードが利用可能でないと設定される。
MPMグループ構成部321は、MPMグループを下記のように構成する。
左側イントラ予測モード及び上側イントラ予測モードが両方とも利用可能であり、且つ互いに異なる場合は、前記左側イントラ予測モード及び前記上側イントラ予測モードが前記MPMグループに含まれ、1個の追加イントラ予測モードが前記MPMグループに追加される。二つのうち、モード番号が小さいイントラ予測モードにインデックス0が割り当てられ、残りの一つにインデックス1が割り当てられる。または、左側イントラ予測モードにインデックス0が割り当てられ、上側イントラ予測モードにインデックス1が割り当てられてもよい。前記追加イントラ予測モードは、前記左側及び上側イントラ予測モードにより下記のように決定される。
左側及び上側イントラ予測モードのうち、一つが非方向性モード(non−directional mode)であり、他の一つが方向性モード(directional mode)の場合、残りの一つの非方向性モードが前記MPMグループに追加される。例えば、前記左側及び上側イントラ予測モードのうち、一つがDCモードの場合、プラナーモードが前記MPMグループに追加され、前記左側及び上側イントラ予測モードのうち、一つがプラナーモードの場合、DCモードが前記MPMグループに追加される。左側及び上側イントラ予測モードが両方とも非方向性モードの場合、垂直モードが前記MPMグループに追加される。左側及び上側イントラ予測モードが両方とも方向性モードの場合、DCモード又はプラナーモードが前記MPMグループに追加される。
左側イントラ予測モード及び上側イントラ予測モードのうち一つのみが利用可能な場合は、前記利用可能なイントラ予測モードが前記MPMグループに含まれ、2個の追加イントラ予測モードが前記MPMグループに追加される。前記2個の追加イントラ予測モードは、前記利用可能なイントラ予測モードにより下記のように決定される。
前記利用可能なイントラ予測モードが非方向性モードの場合、残りの一つの非方向性モードと垂直モードが前記MPMグループに追加される。例えば、前記利用可能なイントラ予測モードがDCモードの場合、プラナーモードと垂直モードが前記MPMグループに追加される。前記利用可能なイントラ予測モードがプラナーモードの場合、DCモードと垂直モードが前記MPMグループに追加される。前記利用可能なイントラ予測モードが方向性モードの場合、2個の非方向性モード(DCモード及びプラナーモード)が前記MPMグループに追加される。
左側イントラ予測モード及び上側イントラ予測モードが両方とも利用可能であり、且つ互いに同じ場合、前記利用可能なイントラ予測モードがMPMグループに含まれ、2個の追加イントラ予測モードが前記MPMグループに追加される。前記追加される2個のイントラ予測モードは、前記利用可能なイントラ予測モードにより下記のように決定される。
前記利用可能なイントラ予測モードが方向性モードの場合、2個の隣接方向性モードが前記MPMグループに追加される。例えば、前記利用可能なイントラ予測モードがモード23の場合、左側隣接モード(モード1)と右側隣接モード(モード13)が前記MPMグループに追加される。前記利用可能なイントラ予測モードがモード30の場合、2個の隣接モード(モード2とモード16)が前記MPMグループに追加される。前記利用可能なイントラ予測モードが非方向性モードの場合、残りの一つの非方向性モードと垂直モードが前記MPMグループに追加される。例えば、前記利用可能なイントラ予測モードがDCモードの場合、プラナーモードと垂直モードが前記MPMグループに追加される。
左側イントラ予測モード及び上側イントラ予測モードが両方とも利用可能でない場合は、3個の追加イントラ予測モードが前記MPMグループに追加される。前記3個のイントラ予測モードは、DCモード、プラナーモード及び垂直モードである。DCモード、プラナーモード及び垂直モードの順序に又はプラナーモード、DCモード及び垂直モードの順序に、インデックス0、1及び2が前記3個のイントラ予測モードに割り当てられる。
予測モード復元部322は、前記モードグループ指示子と前記予測モードインデックスを利用して現在予測ユニットのイントラ予測モードを下記のように誘導する。
予測モード復元部322は、前記モードグループ指示子がMPMグループを示すかどうかを決定する。
前記モードグループ指示子が前記MPMグループを示す場合、予測モード復元部322は、前記予測モードインデックスにより特定されるMPMグループ内のイントラ予測モードを現在予測ユニットのイントラ予測モードとして決定する。
前記モードグループ指示子が前記MPMグループを示さない場合、予測モード復元部322は、前記予測モードインデックスにより特定される前記残余モードグループ内のイントラ予測モードを現在予測ユニットのイントラ予測モードとして決定する。現在予測ユニットのイントラ予測モードは、前記予測モードインデックス及び前記MPMグループのイントラ予測モードを利用して下記の順序に誘導される。
MPMグループ内の3個のイントラ予測モードのうち、最も小さいモード番号を有するイントラ予測モードが第1の候補に設定され、中間モード番号を有するイントラ予測モードが第2の候補に設定され、最も大きいモード番号を有するイントラ予測モードが第3の候補に設定される。
1)前記予測モードインデックスを第1の候補と比較する。前記予測モードインデックスが前記MPMグループ内の第1の候補のモード番号より大きい又は同じ場合、前記予測モードインデックスの値が1ほど増加する。そうでない場合、前記予測モードインデックスの値は維持される。
2)前記予測モードインデックスを第2の候補と比較する。前記予測モードインデックスが前記MPMグループ内の第2の候補のモード番号より大きい又は同じ場合、前記予測モードインデックスの値が1ほど増加する。そうでない場合、前記予測モードインデックスの値は維持される。
3)前記予測モードインデックスを第3の候補と比較する。前記予測モードインデックスが前記MPMグループ内の第3の候補のモード番号より大きい又は同じ場合、前記予測モードインデックスの値が1ほど増加する。そうでない場合、前記予測モードインデックスの値は維持される。
4)前記最後の予測モードインデックスが現在予測ユニットのイントラ予測モードのモード番号に設定される。
予測サイズ決定部330は、変換ユニットのサイズを特定する変換サイズ情報に基づいて予測ブロックのサイズを決定する。前記変換サイズ情報は、変換ユニットのサイズを特定する1個又は複数個の分割変換フラグ(split_transform_flag)である。
変換ユニットのサイズが現在予測ユニットのサイズと同じ場合、予測ブロックのサイズは、現在予測ユニットのサイズと同じである。
変換ユニットのサイズが現在予測ユニットのサイズより小さい場合、予測ブロックのサイズは、変換ユニットのサイズと同じである。この場合、復元ブロックを生成する過程は、現在予測ユニットの各サブブロック毎に実行される。即ち、現在のサブブロックの予測ブロック及び残差ブロックが生成され、前記予測ブロック及び残差ブロックを加えて復元ブロックを生成する。その後、復号化の順序上、次に位置するサブブロックの予測ブロック、残差ブロック及び復元ブロックが生成される。前記復元されたイントラ予測モードが全てのサブブロックの予測ブロックを生成するのに使われる。現在サブブロックの復元ブロックの一部画素が次のサブブロックの参照画素として使われる。したがって、原本サブブロックにさらに類似の予測ブロックを生成するのが可能である。
参照画素有効性検査部340は、現在ブロックの全ての参照画素が利用可能かどうかを決定する。現在ブロックは、前記現在予測ユニット又は前記現在サブブロックである。現在ブロックのサイズは、変換ユニットのサイズである。
参照画素生成部350は、一つ以上の参照画素が利用可能でない場合、参照画素を生成する。
全ての参照画素が利用可能でない場合、全ての参照画素が2L−1の値に代替される。Lの値は、輝度画素の値を表現するのに使われるビットの数である。
利用可能な参照画素が利用可能でない参照画素の片側方向にのみ存在する場合、前記利用可能でない参照画素の値は、前記利用可能でない参照画素に最も近い位置の参照画素の値に代替される。
利用可能な参照画素が利用可能でない参照画素の両側方向に存在する場合、前記利用可能でない参照画素の値は、前記利用可能でない参照画素の各方向に最も近い位置の参照画素の平均値又は予め決められた方向の最も近い位置の参照画素の値に代替される。
参照画素フィルタリング部360は、前記イントラ予測モード及び現在ブロックのサイズに基づいて前記参照画素を適応的にフィルタリングする。
DCモードでは参照画素がフィルタリングされない。垂直モード及び水平モードでも参照画素がフィルタリングされない。前記垂直モード及び水平モード以外の方向性モードでは、参照画素が前記現在ブロックのサイズによって適応的にフィルタリングされる。
現在ブロックのサイズが4×4の場合、全てのイントラ予測モードで前記参照画素がフィルタリングされない。8×8、16×16及び32×32のサイズで、参照画素がフィルタリングされなければならないイントラ予測モードの数は、現在ブロックのサイズが大きくなるほど増加する。例えば、垂直モード及び前記垂直モードに隣接した予め決められた個数のイントラ予測モードでは、参照画素がフィルタリングされない。水平モード及び前記水平モードに隣接した前記予め決められた個数のイントラ予測モードでは、参照画素がフィルタリングされない。前記予め決められた個数は、0〜7のうち一つであり、現在ブロックのサイズが大きくなるほど減少する。
予測ブロック生成部370は、前記復元されたイントラ予測モードに応じて参照画素を利用して現在ブロックの予測ブロックを生成する。
DCモードでは、参照画素に接しない予測ブロックの予測画素は、(x=0,...,N−1、y=−1)に位置するN個の参照画素と、(x=−1、y=0,...,M−1)に位置するM個の参照画素を平均して予測ブロックの予測画素を生成する。そして、参照画素に接する予測画素は、前記平均値と1個又は2個の接する参照画素を利用して生成される。
垂直モードにおいて、左側参照画素に接しない予測画素は、垂直参照画素の値を複写して生成される。そして、左側参照画素に接する予測画素は、垂直参照画素及び左側隣接参照画素とコーナー参照画素との間の変化量を利用して生成される。
水平モードでは、垂直モードと同様の方法により予測画素が生成される。
以上、実施例を参照して説明したが、該当技術分野の熟練された当業者は、特許請求の範囲に記載された本発明の思想及び領域から外れない範囲内で本発明を多様に修正及び変更可能であることを理解することができる。
104 量子化部

Claims (6)

  1. 量子化ブロックを逆量子化する方法において、
    量子化パラメータ予測子を生成するステップ;
    復元された差分量子化パラメータ及び前記量子化パラメータ予測子を利用して量子化パラメータを生成するステップ;及び、
    前記量子化パラメータを利用して前記量子化ブロックを逆量子化するステップ;を含み、
    現在コーディングユニットの左側量子化パラメータ、上側量子化パラメータ及び以前量子化パラメータのうち2個以上が利用可能な場合、前記量子化パラメータ予測子は、予め決められた順序によって決定される利用可能な2個の量子化パラメータを利用して生成され、
    前記予め決められた順序は、前記左側量子化パラメータ、前記上側量子化パラメータ及び前記以前量子化パラメータの順であることを特徴とする方法。
  2. 一つの量子化パラメータのみが利用可能な場合、前記利用可能な量子化パラメータが量子化パラメータ予測子に設定されることを特徴とする請求項1に記載の方法。
  3. 前記量子化パラメータは、量子化ユニット毎に復元され、前記量子化ユニットの最小サイズは、ピクチャパラメータセットによってのみ調整されることを特徴とする請求項1に記載の方法。
  4. 前記量子化ユニットの最小サイズは、前記量子化ユニットの最小サイズの深さを特定するパラメータと最大コーディングユニットのサイズを利用して誘導されることを特徴とする請求項3に記載の方法。
  5. 前記左側及び上側量子化パラメータが利用可能な場合、前記左側及び上側量子化パラメータの平均値が前記量子化パラメータ予測子に設定されることを特徴とする請求項1に記載の方法。
  6. 前記左側量子化パラメータが利用可能でない場合、前記上側及び以前量子化パラメータの平均値が前記量子化パラメータ予測子に設定されることを特徴とする請求項1に記載の方法。
JP2017035017A 2011-11-04 2017-02-27 量子化ブロック逆量子化方法 Active JP6275897B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2011-0114607 2011-11-04
KR20110114607A KR20130049523A (ko) 2011-11-04 2011-11-04 인트라 예측 블록 생성 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015222051A Division JP6101774B2 (ja) 2011-11-04 2015-11-12 量子化ブロック逆量子化方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018001995A Division JP6469265B2 (ja) 2011-11-04 2018-01-10 量子化ブロック逆量子化方法

Publications (2)

Publication Number Publication Date
JP2017130947A true JP2017130947A (ja) 2017-07-27
JP6275897B2 JP6275897B2 (ja) 2018-02-07

Family

ID=48191357

Family Applications (8)

Application Number Title Priority Date Filing Date
JP2014539230A Active JP5841264B2 (ja) 2011-11-04 2012-11-02 量子化ブロック逆量子化方法
JP2015222051A Active JP6101774B2 (ja) 2011-11-04 2015-11-12 量子化ブロック逆量子化方法
JP2017035017A Active JP6275897B2 (ja) 2011-11-04 2017-02-27 量子化ブロック逆量子化方法
JP2018001995A Active JP6469265B2 (ja) 2011-11-04 2018-01-10 量子化ブロック逆量子化方法
JP2019004278A Active JP6648315B2 (ja) 2011-11-04 2019-01-15 量子化ブロック逆量子化方法
JP2020004431A Active JP6906070B2 (ja) 2011-11-04 2020-01-15 イントラ予測における予測ブロックを生成する装置
JP2021106230A Active JP7192045B2 (ja) 2011-11-04 2021-06-28 イントラ予測における予測ブロックを生成する方法
JP2021106229A Active JP7192044B2 (ja) 2011-11-04 2021-06-28 イントラ予測における予測ブロックを生成する方法

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2014539230A Active JP5841264B2 (ja) 2011-11-04 2012-11-02 量子化ブロック逆量子化方法
JP2015222051A Active JP6101774B2 (ja) 2011-11-04 2015-11-12 量子化ブロック逆量子化方法

Family Applications After (5)

Application Number Title Priority Date Filing Date
JP2018001995A Active JP6469265B2 (ja) 2011-11-04 2018-01-10 量子化ブロック逆量子化方法
JP2019004278A Active JP6648315B2 (ja) 2011-11-04 2019-01-15 量子化ブロック逆量子化方法
JP2020004431A Active JP6906070B2 (ja) 2011-11-04 2020-01-15 イントラ予測における予測ブロックを生成する装置
JP2021106230A Active JP7192045B2 (ja) 2011-11-04 2021-06-28 イントラ予測における予測ブロックを生成する方法
JP2021106229A Active JP7192044B2 (ja) 2011-11-04 2021-06-28 イントラ予測における予測ブロックを生成する方法

Country Status (14)

Country Link
US (11) US9264723B2 (ja)
EP (6) EP3402191B8 (ja)
JP (8) JP5841264B2 (ja)
KR (6) KR20130049523A (ja)
CN (8) CN108366260B (ja)
BR (5) BR122020014036B1 (ja)
CA (4) CA2853706C (ja)
ES (1) ES2784007T3 (ja)
HU (1) HUE048753T2 (ja)
MX (6) MX340478B (ja)
PL (1) PL3402191T3 (ja)
SG (9) SG10201600418XA (ja)
TW (7) TWI696380B (ja)
WO (1) WO2013064095A1 (ja)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105847814B (zh) 2010-04-13 2019-01-08 太阳专利托管公司 图像编码方法及图像编码装置
KR20130049522A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
KR20130049523A (ko) 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 장치
KR20130049525A (ko) 2011-11-04 2013-05-14 오수미 잔차 블록 복원을 위한 역변환 방법
US10277915B2 (en) * 2011-11-07 2019-04-30 Qualcomm Incorporated Signaling quantization matrices for video coding
JP6120490B2 (ja) * 2011-11-07 2017-04-26 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
KR20130050407A (ko) 2011-11-07 2013-05-16 오수미 인터 모드에서의 움직임 정보 생성 방법
KR20130058524A (ko) * 2011-11-25 2013-06-04 오수미 색차 인트라 예측 블록 생성 방법
JP6064580B2 (ja) * 2011-12-21 2017-01-25 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム、並びに送信装置、送信方法及び送信プログラム
JP6064581B2 (ja) * 2011-12-21 2017-01-25 株式会社Jvcケンウッド 動画像復号装置、動画像復号方法及び動画像復号プログラム、並びに受信装置、受信方法及び受信プログラム
US11323747B2 (en) * 2013-06-05 2022-05-03 Qualcomm Incorporated Residual differential pulse code modulation (DPCM) extensions and harmonization with transform skip, rotation, and scans
JP6587046B2 (ja) * 2013-07-08 2019-10-09 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置
CN104427338B (zh) * 2013-09-07 2019-11-05 上海天荷电子信息有限公司 一种使用块匹配的图像编码以及图像解码的方法和装置
KR20170118728A (ko) * 2015-02-17 2017-10-25 엘지전자 주식회사 적응적 스캔 오더를 이용하여 비디오 신호를 인코딩, 디코딩하는 방법 및 장치
WO2016205999A1 (en) * 2015-06-23 2016-12-29 Mediatek Singapore Pte. Ltd. Adaptive coding group for image/video coding
EP4178204A1 (en) 2015-08-20 2023-05-10 Nippon Hoso Kyokai Image decoding device, and image decoding method
EP4037316A1 (en) 2016-02-16 2022-08-03 Samsung Electronics Co., Ltd. Method for decoding an image
JP6660868B2 (ja) * 2016-11-15 2020-03-11 Kddi株式会社 動画像符号化装置及び動画像復号装置並びにプログラム
CN108805943B (zh) * 2017-04-27 2022-12-09 腾讯科技(深圳)有限公司 图片转码方法和装置
US11064201B2 (en) 2017-09-06 2021-07-13 Kaonmedia Co., Ltd. Method and device for image encoding/decoding based on effective transmission of differential quantization parameter
US11178405B2 (en) * 2017-10-18 2021-11-16 Samsung Electronics Co., Ltd. Method and apparatus for video decoding, and method and apparatus for video encoding
US11262088B2 (en) 2017-11-06 2022-03-01 International Business Machines Corporation Adjusting settings of environmental devices connected via a network to an automation hub
CN111543056B (zh) 2018-01-02 2023-03-28 三星电子株式会社 编码方法及其设备以及解码方法及其设备
US10491914B2 (en) * 2018-03-29 2019-11-26 Tencent America LLC Transform information prediction
KR102030384B1 (ko) 2018-06-19 2019-11-08 광운대학교 산학협력단 잔차 계수 부호화/복호화 방법 및 장치
US11350093B2 (en) 2018-06-11 2022-05-31 Hanwha Techwin Co., Ltd. Residual coefficient encoding/decoding method and device
US11927280B2 (en) 2018-06-30 2024-03-12 Fujikin Incorporated Diaphragm valve and monitoring method thereof with improved leak detection
EP4346211A3 (en) * 2018-09-03 2024-06-19 Huawei Technologies Co., Ltd. Method and apparatus for intra prediction
US11516506B2 (en) * 2018-10-05 2022-11-29 Lg Electronics Inc. Method and apparatus for processing image service
CN111050169B (zh) * 2018-10-15 2021-12-14 华为技术有限公司 图像编码中量化参数的生成方法、装置及终端
CN109688409B (zh) * 2018-12-28 2021-03-02 北京奇艺世纪科技有限公司 一种视频编码方法及装置
CN109831670B (zh) * 2019-02-26 2020-04-24 北京大学深圳研究生院 一种反量化方法、系统、设备及计算机可读介质
EP3939269A4 (en) * 2019-04-10 2022-06-15 Beijing Dajia Internet Information Technology Co., Ltd. METHOD AND APPARATUS FOR VIDEO CODING USING AN IMPROVED MATRIX-BASED INTRA PREDICTION CODING MODE
EP3958570A4 (en) 2019-04-17 2023-01-25 Lg Electronics Inc. VIDEO CODING/DECODING DEVICE AND METHOD USING A BDPCM, AND TRANSMISSION BITSTREAM METHOD
CA3137163C (en) 2019-04-24 2024-05-14 Bytedance Inc. Constraints on quantized residual differential pulse code modulation representation of coded video
CN113796069B (zh) * 2019-05-01 2024-03-08 字节跳动有限公司 使用量化残差差分脉冲编解码调制编解码的帧内编解码视频
CN112004084B (zh) * 2019-05-27 2022-03-29 北京君正集成电路股份有限公司 一种利用量化参数排序的码率控制优化方法及系统
KR20220012345A (ko) * 2019-06-21 2022-02-03 후아웨이 테크놀러지 컴퍼니 리미티드 기하학적 파티션 모드에 대한 크로마 샘플 가중 도출
CN110464326B (zh) * 2019-08-19 2022-05-10 上海联影医疗科技股份有限公司 一种扫描参数推荐方法、系统、装置及存储介质
US11800110B2 (en) * 2021-04-20 2023-10-24 Tencent America LLC Adaptive scanning with multiple transform selection
US20230069984A1 (en) * 2021-08-24 2023-03-09 Tencent America LLC Hardware friendly design for intra mode coding
US11917144B2 (en) * 2021-09-29 2024-02-27 Mediatek Inc. Efficient in-loop filtering for video coding
CN116095316B (zh) * 2023-03-17 2023-06-23 北京中星微人工智能芯片技术有限公司 视频图像处理方法及装置、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009105732A1 (en) * 2008-02-22 2009-08-27 Qualcomm Incorporated Fast macroblock delta qp decision
WO2012018198A2 (ko) * 2010-07-31 2012-02-09 Oh Soo-Mi 예측 블록 생성 장치
WO2012124461A1 (ja) * 2011-03-11 2012-09-20 ソニー株式会社 画像処理装置および方法
WO2012122798A1 (zh) * 2011-03-11 2012-09-20 华为技术有限公司 编码方法以及装置、解码方法以及装置

Family Cites Families (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8625665B2 (en) * 1996-09-20 2014-01-07 At&T Intellectual Property Ii, L.P. Video coder providing implicit coefficient prediction and scan adaptation for image coding and intra coding of video
EP0944261A3 (en) * 1998-03-17 1999-10-06 Matsushita Electric Industrial Co., Ltd. Video signal processing apparatus
JP2001298368A (ja) * 2000-04-14 2001-10-26 Sakai Yasue 圧縮方法及び装置、伸長方法及び装置、圧縮伸長システム、記録媒体
JP3561485B2 (ja) * 2000-08-18 2004-09-02 株式会社メディアグルー 符号化信号分離・合成装置、差分符号化信号生成装置、符号化信号分離・合成方法、差分符号化信号生成方法、符号化信号分離・合成プログラムを記録した媒体および差分符号化信号生成プログラムを記録した媒体
CN100530977C (zh) * 2001-11-27 2009-08-19 三星电子株式会社 对数据进行编码和译码的方法和装置
CN1206864C (zh) * 2002-07-22 2005-06-15 中国科学院计算技术研究所 结合率失真优化的码率控制的方法及其装置
EP1453004A2 (en) * 2003-02-28 2004-09-01 NTT DoCoMo, Inc. Image encoding apparatus and method
JP2006005438A (ja) * 2004-06-15 2006-01-05 Sony Corp 画像処理装置およびその方法
CN100348051C (zh) * 2005-03-31 2007-11-07 华中科技大学 一种增强型帧内预测模式编码方法
WO2007032600A1 (en) * 2005-07-21 2007-03-22 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding video signal by extending application of directional intra-prediction
JP2007089035A (ja) * 2005-09-26 2007-04-05 Toshiba Corp 動画像符号化方法、装置及びプログラム
US20070274385A1 (en) * 2006-05-26 2007-11-29 Zhongli He Method of increasing coding efficiency and reducing power consumption by on-line scene change detection while encoding inter-frame
JP4254867B2 (ja) 2007-01-31 2009-04-15 ソニー株式会社 情報処理装置および方法、プログラム、並びに記録媒体
EP1983759A1 (en) * 2007-04-19 2008-10-22 Matsushita Electric Industrial Co., Ltd. Estimation of separable adaptive interpolation filters for hybrid video coding
CN100493198C (zh) * 2007-05-31 2009-05-27 北京中星微电子有限公司 算术编码中的概率模型存储方法
US8488668B2 (en) * 2007-06-15 2013-07-16 Qualcomm Incorporated Adaptive coefficient scanning for video coding
US8571104B2 (en) * 2007-06-15 2013-10-29 Qualcomm, Incorporated Adaptive coefficient scanning in video coding
CN100551075C (zh) * 2007-10-15 2009-10-14 中兴通讯股份有限公司 一种低复杂度的帧内预测模式选择方法
KR100940444B1 (ko) * 2007-12-18 2010-02-10 한국전자통신연구원 공간적 에지 검출을 이용한 인트라 예측 모드 구성 방법
US20090161757A1 (en) * 2007-12-21 2009-06-25 General Instrument Corporation Method and Apparatus for Selecting a Coding Mode for a Block
CN101262603B (zh) * 2008-03-27 2011-08-31 方春 一种自适应码率控制方法
CN100596202C (zh) * 2008-05-30 2010-03-24 四川虹微技术有限公司 一种快速帧内模式选择方法
US8897359B2 (en) * 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding
BRPI0904324A2 (pt) * 2008-06-27 2015-06-30 Sony Corp Dispositivo de processamento de imagem, e, método de processamento de imagem
KR101501568B1 (ko) * 2008-07-04 2015-03-12 에스케이 텔레콤주식회사 영상 부호화 및 복호화 장치 및, 방법
CN101729886B (zh) * 2008-10-24 2011-09-28 安凯(广州)微电子技术有限公司 一种视频解码方法、系统和设备
CN101494776B (zh) * 2009-02-13 2011-01-05 北京邮电大学 一种h.264码率控制方法
JP5174737B2 (ja) * 2009-05-05 2013-04-03 国立大学法人広島大学 画像配信システム、符号装置及び復号装置
KR101507344B1 (ko) * 2009-08-21 2015-03-31 에스케이 텔레콤주식회사 가변 길이 부호를 이용한 인트라 예측모드 부호화 방법과 장치, 및 이를 위한기록 매체
JP5649296B2 (ja) * 2009-10-26 2015-01-07 キヤノン株式会社 画像符号化装置
KR101457894B1 (ko) * 2009-10-28 2014-11-05 삼성전자주식회사 영상 부호화 방법 및 장치, 복호화 방법 및 장치
KR101751559B1 (ko) * 2009-10-30 2017-06-27 선 페이턴트 트러스트 복호방법, 복호장치, 부호화 방법 및 부호화 장치
KR101441905B1 (ko) 2009-11-18 2014-09-24 에스케이텔레콤 주식회사 후보 예측 움직임 벡터 집합 선택을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
US20110274162A1 (en) * 2010-05-04 2011-11-10 Minhua Zhou Coding Unit Quantization Parameters in Video Coding
US8588297B2 (en) * 2009-12-23 2013-11-19 Oracle America, Inc. Quantization parameter prediction
KR101768207B1 (ko) * 2010-01-19 2017-08-16 삼성전자주식회사 축소된 예측 움직임 벡터의 후보들에 기초해 움직임 벡터를 부호화, 복호화하는 방법 및 장치
WO2011096770A2 (ko) * 2010-02-02 2011-08-11 (주)휴맥스 영상 부호화/복호화 장치 및 방법
JP2011160359A (ja) * 2010-02-03 2011-08-18 Sharp Corp ブロックノイズ量予測装置、ブロックノイズ量予測方法、画像処理装置、プログラム、及び、記録媒体
US8588303B2 (en) * 2010-03-31 2013-11-19 Futurewei Technologies, Inc. Multiple predictor sets for intra-frame coding
US8929440B2 (en) * 2010-04-09 2015-01-06 Sony Corporation QP adaptive coefficients scanning and application
JP5688136B2 (ja) * 2010-04-23 2015-03-25 エム アンド ケー ホールディングス インコーポレイテッド 映像を符号化する装置及び方法
CN102238376B (zh) * 2010-04-28 2014-04-23 鸿富锦精密工业(深圳)有限公司 图像处理系统及方法
US8902978B2 (en) * 2010-05-30 2014-12-02 Lg Electronics Inc. Enhanced intra prediction mode signaling
WO2011156458A1 (en) * 2010-06-10 2011-12-15 Technicolor Usa, Inc. Methods and apparatus for determining quantization parameter predictors from a plurality of neighboring quantization parameters
CN101888550A (zh) * 2010-06-28 2010-11-17 中兴通讯股份有限公司 一种slice头信息中量化参数编码方法和装置
KR20120012385A (ko) * 2010-07-31 2012-02-09 오수미 인트라 예측 부호화 장치
US9667987B2 (en) 2011-03-10 2017-05-30 Futurewei Technologies, Inc. Using multiple prediction sets to encode extended unified directional intra mode numbers for robustness
CN102685484B (zh) * 2011-03-11 2014-10-08 华为技术有限公司 编码方法以及装置、解码方法以及装置
CN102685483B (zh) 2011-03-11 2014-12-03 华为技术有限公司 解码方法
CN102685485B (zh) * 2011-03-11 2014-11-05 华为技术有限公司 编码方法以及装置、解码方法以及装置
CN102137258B (zh) * 2011-03-22 2013-04-24 宁波大学 一种立体视频码率控制方法
GB2491391B (en) * 2011-06-02 2014-09-03 Canon Kk Encoding mode values representing prediction modes
US9654785B2 (en) * 2011-06-09 2017-05-16 Qualcomm Incorporated Enhanced intra-prediction mode signaling for video coding using neighboring mode
MY165837A (en) * 2011-06-13 2018-05-17 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US9112526B2 (en) * 2011-06-15 2015-08-18 Sony Corporation Binarization of DQP using separate absolute value and sign (SAVS) in CABAC
LT3136729T (lt) * 2011-06-28 2018-02-12 Samsung Electronics Co., Ltd. Vaizdo dekodavimo aparatas su vidine prognoze
KR20110111339A (ko) * 2011-08-23 2011-10-11 한국전자통신연구원 화면내 예측 시스템에서 최적 모드를 예측하는 장치 및 방법
GB2494468B (en) 2011-09-12 2014-01-15 Canon Kk Method and device for encoding or decoding information representing prediction modes
CN106851300B (zh) 2011-09-13 2020-05-26 寰发股份有限公司 基于最可能模式的帧内预测模式的方法及装置
CN103959789B (zh) 2011-10-07 2017-06-06 英迪股份有限公司 利用候选帧内预测模式对帧内预测模式编码/解码的方法和设备
CN107087183B (zh) * 2011-10-24 2020-02-14 英孚布瑞智有限私人贸易公司 对帧内预测模式进行解码的方法
CN105306932B (zh) * 2011-10-24 2018-11-13 英孚布瑞智有限私人贸易公司 用于图像解码的方法和装置
KR20130049523A (ko) 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 장치
KR20130049522A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
KR20130050407A (ko) * 2011-11-07 2013-05-16 오수미 인터 모드에서의 움직임 정보 생성 방법
KR20130050404A (ko) * 2011-11-07 2013-05-16 오수미 인터 모드에서의 복원 블록 생성 방법
KR20130050405A (ko) * 2011-11-07 2013-05-16 오수미 인터 모드에서의 시간 후보자 결정방법
KR20130058524A (ko) * 2011-11-25 2013-06-04 오수미 색차 인트라 예측 블록 생성 방법
AR092786A1 (es) * 2012-01-09 2015-05-06 Jang Min Metodos para eliminar artefactos de bloque
RU2602986C2 (ru) * 2012-01-17 2016-11-20 Инфобридж Пте. Лтд. Способ применения краевого смещения
CN102658478B (zh) 2012-05-11 2014-11-05 山东海华汽车部件有限公司 一种板簧流水装配线

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009105732A1 (en) * 2008-02-22 2009-08-27 Qualcomm Incorporated Fast macroblock delta qp decision
WO2012018198A2 (ko) * 2010-07-31 2012-02-09 Oh Soo-Mi 예측 블록 생성 장치
WO2012124461A1 (ja) * 2011-03-11 2012-09-20 ソニー株式会社 画像処理装置および方法
WO2012122798A1 (zh) * 2011-03-11 2012-09-20 华为技术有限公司 编码方法以及装置、解码方法以及装置

Non-Patent Citations (7)

* Cited by examiner, † Cited by third party
Title
BENJAMIN BROSS ET AL.: "High efficiency video coding (HEVC) text specification draft 6", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-H1003_dJ, JPN6015023757, February 2012 (2012-02-01), pages 27 - 28, ISSN: 0003699726 *
HIROYA NAKAMURA ET AL.: "Non-CE4: Compatible QP prediction with RC and AQ", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-H0204_r2, JPN6015021707, February 2012 (2012-02-01), pages 1 - 11, ISSN: 0003699725 *
KAZUSHI SATO: "CE4: Result of 2.3.d and 2.3.e", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-F420r1, JPN6015021705, July 2011 (2011-07-01), pages 1 - 5, ISSN: 0003699723 *
KENJI KONDO ET AL.: "Improvement of delta-QP Coding", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-F422r1, JPN6015021706, July 2011 (2011-07-01), pages 1 - 8, ISSN: 0003699724 *
MADHUKAR BUDAGAVI AND MINHUA ZHOU: "Delta QP signaling at sub-LCU level", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-D038_r1, JPN6014022889, January 2011 (2011-01-01), pages 1 - 5, ISSN: 0003699720 *
MASAAKI KOBAYASHI AND MASATO SHIMA: "Sub-LCU level delta QP signaling", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-E198, JPN6016038372, March 2011 (2011-03-01), pages 1 - 9, ISSN: 0003699722 *
TZU-DER CHUANG ET AL.: "AhG Quantization: Sub-LCU Delta QP", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-E051_r2, JPN6014022890, March 2011 (2011-03-01), pages 1 - 6, XP008169251, ISSN: 0003699721 *

Also Published As

Publication number Publication date
US9264723B2 (en) 2016-02-16
KR20140066240A (ko) 2014-05-30
EP3843393B1 (en) 2024-06-12
KR20140071438A (ko) 2014-06-11
US9712825B2 (en) 2017-07-18
TW201334547A (zh) 2013-08-16
US20150381984A1 (en) 2015-12-31
JP5841264B2 (ja) 2016-01-13
US11825092B2 (en) 2023-11-21
US20150381983A1 (en) 2015-12-31
CN108495133B (zh) 2021-06-18
CN108184120A (zh) 2018-06-19
JP7192045B2 (ja) 2022-12-19
TWI645708B (zh) 2018-12-21
BR112014010639B1 (pt) 2022-04-12
EP3843393A1 (en) 2021-06-30
CN108184120B (zh) 2021-10-01
CA2853706A1 (en) 2013-05-10
CA3217419A1 (en) 2013-05-10
MX2014005327A (es) 2014-08-08
SG10201600412WA (en) 2016-02-26
US9712824B2 (en) 2017-07-18
CN108366260B (zh) 2020-10-16
US9204151B2 (en) 2015-12-01
CN108184119A (zh) 2018-06-19
JP6648315B2 (ja) 2020-02-14
BR122020014037B1 (pt) 2023-12-12
TWI696380B (zh) 2020-06-11
MX340480B (es) 2016-07-08
JP6101774B2 (ja) 2017-03-22
SG10201600414RA (en) 2016-02-26
MX345037B (es) 2017-01-16
BR122020014038A2 (ja) 2020-10-06
JP2019071668A (ja) 2019-05-09
KR20140074349A (ko) 2014-06-17
JP2021177634A (ja) 2021-11-11
BR122020014035B1 (pt) 2023-12-12
SG10201600418XA (en) 2016-02-26
BR122020014037A2 (ja) 2020-10-06
JP2014534749A (ja) 2014-12-18
BR122020014036B1 (pt) 2023-12-12
TW201907709A (zh) 2019-02-16
US20150381985A1 (en) 2015-12-31
SG10201600413TA (en) 2016-02-26
CN103096070B (zh) 2018-02-27
BR122020014038A8 (pt) 2022-10-04
CA2989193C (en) 2020-08-18
JP2018078636A (ja) 2018-05-17
EP2774377A1 (en) 2014-09-10
BR112014010639A2 (pt) 2017-04-25
TWI615016B (zh) 2018-02-11
MX340479B (es) 2016-07-08
SG11201401926RA (en) 2014-05-29
CA3085029C (en) 2023-12-12
SG10202002042VA (en) 2020-05-28
CA2989193A1 (en) 2013-05-10
SG10202001375VA (en) 2020-04-29
US9699460B2 (en) 2017-07-04
CN108347614A (zh) 2018-07-31
US10742983B2 (en) 2020-08-11
CN108495133A (zh) 2018-09-04
JP2016036178A (ja) 2016-03-17
CN103096070A (zh) 2013-05-08
CN108184119B (zh) 2022-06-17
EP3843392A1 (en) 2021-06-30
MX339983B (es) 2016-06-20
BR122020014038B1 (pt) 2023-12-12
CN108259906A (zh) 2018-07-06
US20180152706A1 (en) 2018-05-31
BR122020014035A2 (ja) 2020-10-06
JP6906070B2 (ja) 2021-07-21
TW202032979A (zh) 2020-09-01
TWI572189B (zh) 2017-02-21
EP3402191B8 (en) 2020-02-26
EP3843401A1 (en) 2021-06-30
JP2021177635A (ja) 2021-11-11
US20140301449A1 (en) 2014-10-09
US10313671B2 (en) 2019-06-04
JP2020074565A (ja) 2020-05-14
MX340478B (es) 2016-07-08
PL3402191T3 (pl) 2020-10-05
JP6275897B2 (ja) 2018-02-07
KR20140066239A (ko) 2014-05-30
HUE048753T2 (hu) 2020-08-28
BR122020014036A2 (ja) 2020-10-06
EP3402191A1 (en) 2018-11-14
TW202333500A (zh) 2023-08-16
TWI803958B (zh) 2023-06-01
US11290719B2 (en) 2022-03-29
US20190253713A1 (en) 2019-08-15
SG10202001287TA (en) 2020-04-29
TW202205859A (zh) 2022-02-01
KR20140074350A (ko) 2014-06-17
ES2784007T3 (es) 2020-09-21
BR122020014037A8 (pt) 2022-10-04
CA3085029A1 (en) 2013-05-10
EP2774377A4 (en) 2015-09-16
US9912950B2 (en) 2018-03-06
CN108259906B (zh) 2022-02-08
US20240048706A1 (en) 2024-02-08
EP3843392B1 (en) 2024-06-19
TW201813381A (zh) 2018-04-01
BR112014010639A8 (pt) 2020-10-06
CN108259907B (zh) 2021-09-03
CA2853706C (en) 2018-01-23
TW201711460A (zh) 2017-03-16
KR101472974B1 (ko) 2014-12-19
CN108366260A (zh) 2018-08-03
US20150117523A1 (en) 2015-04-30
JP7192044B2 (ja) 2022-12-19
WO2013064095A1 (en) 2013-05-10
SG10202002041XA (en) 2020-05-28
EP3402191B1 (en) 2020-01-01
BR122020014035A8 (pt) 2022-10-04
US20220279182A1 (en) 2022-09-01
EP3843400A1 (en) 2021-06-30
BR122020014036A8 (pt) 2022-10-04
CN108259907A (zh) 2018-07-06
KR20130049523A (ko) 2013-05-14
CN108347614B (zh) 2021-09-07
US20150381982A1 (en) 2015-12-31
JP6469265B2 (ja) 2019-02-13
TWI742656B (zh) 2021-10-11
US20200344477A1 (en) 2020-10-29

Similar Documents

Publication Publication Date Title
JP6469265B2 (ja) 量子化ブロック逆量子化方法
JP6360947B2 (ja) 映像データを復号化する方法
JP2016007016A (ja) 量子化ブロックを生成する方法

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171211

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180110

R150 Certificate of patent or registration of utility model

Ref document number: 6275897

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250