JP5788517B2 - ジョイントコンテキストモデルを使用した係数のエントロピーコード化 - Google Patents
ジョイントコンテキストモデルを使用した係数のエントロピーコード化 Download PDFInfo
- Publication number
- JP5788517B2 JP5788517B2 JP2013531941A JP2013531941A JP5788517B2 JP 5788517 B2 JP5788517 B2 JP 5788517B2 JP 2013531941 A JP2013531941 A JP 2013531941A JP 2013531941 A JP2013531941 A JP 2013531941A JP 5788517 B2 JP5788517 B2 JP 5788517B2
- Authority
- JP
- Japan
- Prior art keywords
- transform
- size
- context
- transform unit
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
- H04N19/64—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Algebra (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
予測ユニット40内のイントラ予測ユニット46は、コード化すべきビデオブロックと同じフレーム内の1つ以上の近接するブロックに対するビデオブロックのイントラ予測コード化を実行する。予測ユニット40内の動き推定ユニット42及び動き補償ユニット44は、参照フレームメモリ64に記憶された1つ以上の参照フレーム内の1つ以上の参照ブロックに対するビデオブロックのインター予測コード化を実行する。動き推定ユニット42と動き補償ユニット44とは、高度に統合され得るが、概念的な目的のために別々に示されている。動き推定ユニット42によって実行される動き推定は、ビデオブロックの動きを推定する動きベクトルを生成するプロセスである。動きベクトルは、例えば、参照フレーム内の参照ブロック又はPUに対する現在のビデオフレーム内のビデオブロック又はPUの変位を示し得る。参照ブロックは、絶対値差分和(SAD:sum of absolute difference)、2乗差分和(SSD:sum of square difference)、又は他の差分メトリックによって求められ得る画素差分に関して、符号化すべきビデオブロック又はPUに厳密に一致すると考えられるブロックである。
動き推定ユニット42は、計算された動きベクトルを動き補償ユニット44に送る。動き補償ユニット44によって実行される動き補償は、動き推定によって求められた動きベクトルに基づいて予測ブロックを取り込むか又は生成することを含んでもよい。ビデオエンコーダ20は、コード化されているビデオブロックから予測ブロックを減算することによって残差ビデオブロックを形成する。加算ユニット50は、この減算演算を実行する1つ以上の構成要素を表す。
動き補償ユニット44は、ビデオシーケンスレベル、ビデオフレームレベル、ビデオスライスレベル、ビデオCUレベル、又はビデオPUレベルのうちの1つ以上における予測情報を表すように定められたシンタックス要素を生成してもよい。例えば、動き補償ユニット44は、CU、PU、及びTUのサイズを含むビデオブロック情報、ならびにイントラモード予測に関する動きベクトル情報を含むシンタックス要素を生成してもよい。
ビデオエンコーダ20が現在のビデオブロックから予測ブロックを減算することによって残差ビデオブロックを形成した後、変換ユニット52は、残差ブロックから1つ以上のTUを形成してもよい。変換ユニット52は、離散コサイン変換(DCT)、整数変換、ウェーブレット変換、又は概念的に同様の線形変換などの変換をTUに適用して、残差変換係数を備えるビデオブロックを生成する。この変換では、残差ブロックを画素領域から周波数領域などの変換領域に変換し得る。より具体的には、TUは、変換が施される前に、画素領域に残差ビデオデータを備えてもよく、変換が施された後、残差ビデオデータを表す変換係数を周波数領域に備えてもよい。
幾つかの例では、変換ユニット52は2次元固定小数点変換を備え得る。変換ユニット52は、まずTU内の残差ビデオデータの行に1次元変換を施し、即ち、第1の方向に変換を施し、次いでTU内の残差ビデオデータの列に1次元変換を施し、即ち、第2の方向に変換を施すか、又はこの動作を逆の順序で実行することによってTUに2次元変換を適用することができる。一例として、TUは32×32TUを備えてもよい。変換ユニット52は、まずTU内の画素データの各行に32点1次元変換を施して中間変換係数の32×32TUを生成し、次にTU内の中間変換係数の各列に32点1次元変換を施して変換係数の32×32TUを生成してもよい。
ビデオエンコーダ20は、第1の方向の1次元変換をTU内の残差ビデオデータに施した後、第2の方向への1次元変換を施せるように中間変換係数をバッファリングする。上述のように、HEVC規格では、ビデオコード化効率を向上させるためにより大きい変換単位サイズ、例えば32×32から128×128までのサイズが提案されている。しかしながら、TUサイズを大きくすると、2次元変換の中間バッファリング要件が増大する。例えば、32×32TUの場合、ビデオエンコーダ20は、第1の方向への1次元変換の後1024個の中間変換係数をバッファリングする必要がある。
TUサイズを大きくする中間バッファリング要件を低減させるために、本開示で説明する技法は、2次元変換の各方向が適用された後に第1のサイズのTUに含まれる変換係数のうちの高周波数の変換係数のサブセットをゼロ化することを含む。このようにして、変換ユニット52は、TUの第1のサイズよりも小さい第2のサイズを有する保持される係数ブロックをTU内に生成することができる。
ゼロ化プロセスは、TU内の変換係数のサブセットの値をゼロに等しく設定することを備える。ゼロ化された変換係数は、計算されることも破棄されることもなく、その代わり、単にゼロに設定され、記憶すべき値も符号化すべき値も有さない。本開示によれば、ゼロ化された変換係数は一般に、TU内の保持される低周波数変換係数と比較して高周波数の変換係数である。高周波数の変換係数は、通常、符号化すべきビデオブロックと予測ブロックとの非常に小さい画素差分に相当する残差ビデオデータを表す。従って、高周波数の変換係数に含まれる残差ビデオデータを非常に少なくすることができ、各値をゼロに等しく設定しても、復号後のビデオ品質に対する影響は無視できる程度の影響である。
一例として、変換ユニット52は、第1の方向、例えば行方向の1次元変換を32×32TU内の残差ビデオデータに施し、変換から出力される中間変換係数のうちの2分の1をゼロ化してもよい。ビデオエンコーダ20は次いで、中間変換係数のうちの保持される2分の1の係数にバッファリングを施すだけでよい。次いで、変換ユニット52は、第2の方向、例えば列方向の1次元変換を32×32TU内の保持される中間変換係数に施し、変換から出力される保持される変換係数のうちの2分の1を再びゼロ化してもよい。このようにして、変換ユニット52は、本来32×32のサイズを有するTU内に16×16のサイズを有する有効係数の保持される係数ブロックを生成してもよい。
上述の例では、変換ユニット52は、16×16の保持される係数ブロック、即ちTUの元のサイズの4分の1の係数ブロックを生成するように構成された。他の場合には、変換ユニット52は、コード化プロセスのコード化複雑度要件に応じてゼロ化する係数の割合を高くするか又は低くすることによって異なるサイズを有する保持される係数ブロックを生成するように構成されてもよい。さらに、場合によっては、変換ユニット52は、矩形領域を有する保持される係数ブロックを生成するように構成されてもよい。この場合、各技法では、まず矩形領域の短い方の辺(即ち、保持される変換係数がより少ない方)の方向に1次元変換を施すことによって中間バッファリング要件をさらに低減させることができる。このようにして、ビデオエンコーダ20は、矩形領域の長い方の辺の方向に1次元変換を施す前に中間変換係数のうちの2分の1よりも少ない数をバッファリングすることができる。方形領域の保持される係数ブロックと矩形領域の保持される係数ブロックに対するゼロ化プロセスについては、図3A及び図3Bに関してより詳しく説明する。
変換ユニット52は、量子化ユニット54に得られた変換係数を送り得る。量子化ユニット54は、ビットレートをさらに低減するために変換係数を量子化する。量子化プロセスは、係数の一部又は全部に関連するビット深度を低減させることができる。量子化の程度は、量子化パラメータを調整することによって変更され得る。次いで、エントロピー符号化ユニット56又は量子化ユニット54は、量子化変換係数を含むTUのスキャンを実行し得る。エントロピー符号化ユニット56は、ジグザグスキャン又はTUのサイズに関連する別のスキャン順序を適用して量子化変換係数をスキャンし、エントロピー符号化することのできるシリアル化されたベクトルを生成することができる。
第2のサイズを有する保持される係数ブロックを生成するように本来第1のサイズを有するTUの係数がゼロ化された一例では、エントロピー符号化ユニット56は、第2のサイズのTU用のスキャン順序を使用して保持される係数をスキャンしてもよい。この場合、エントロピー符号化ユニット56は、本来32×32のサイズを有するTU内の16×16のサイズを有する保持される係数ブロックに16×16スキャン順序を適用してもよい。第2のサイズを有する保持される係数ブロックを生成するように本来第1のサイズを有するTUの係数がゼロ化された別の例では、エントロピー符号化ユニット56は、保持される係数ブロックに含まれないTUの係数を飛ばすように修正された第1のサイズのTU用のスキャン順序を使用して保持される係数をスキャンしてもよい。この場合、エントロピー符号化ユニットは、本来32×32のサイズを有するTU内のゼロ化された全ての係数を飛ばすことによって16×16のサイズを有する保持される係数ブロックに32×32スキャン順序を適用してもよい。
エントロピー符号化ユニット56は、量子化変換係数をスキャンして1次元ベクトルを形成した後、量子化変換係数のベクトルをエントロピーコード化する。例えば、エントロピー符号化ユニット56は、CABAC、CAVLC、又は別のエントロピーコード化技法のようなコンテキスト適応型エントロピーコード化を実行し得る。エントロピー符号化ユニット56によるエントロピー符号化の後、符号化されたビットストリームは、ビデオデコーダ30などのビデオデコーダに送信されるか、又は後で送信若しくは検索するためにアーカイブされ得る。
エントロピー符号化ユニット56は、コンテキスト適応型エントロピーコード化を実行するために、例えば、近接する係数の値が非ゼロであるかどうかに関係し得るコンテキストモデルに従って各係数にコンテキストを割り当てる。エントロピー符号化ユニット56はまた、コンテキストモデル内の割り当てられたコンテキストに関連する係数用のコード化プロセスを決定する。次いで、エントロピー符号化ユニット56は、割り当てられたコンテキストに基づいて係数をエントロピー符号化してもよい。例えば、CABACの場合、エントロピー符号化ユニット56は、ジョイントコンテキストモデル内の割り当てられたコンテキストに関連する係数の値(例えば、0又は1)の確率推定値を求めてもよい。エントロピー符号化ユニット56は次いで、係数の実際の符号化された値に基づいてコンテキストモデル内の割り当てられたコンテキストに関連する確率推定値を更新する。
従来、ビデオエンコーダ20は、実装されるビデオ圧縮規格によって支持されるTUの様々なサイズの各々について別個のコンテキストモデルを維持する。ビデオコード化効率を向上させるために、例えば、32×32から128×128までの追加の変換単位サイズが提案されているが、追加のTUサイズによって、追加の変換単位サイズの各々にコンテキストモデルを維持するためにメモリ及び計算要件も増大する。場合によっては、TUサイズが大きくなるにつれて使用されるコンテキストが多くなることがあり、従って、より大きいTUサイズ用のより多くのコンテキストを維持するためにメモリ及び計算要件も増大する可能性がある。
本開示の技法によれば、エントロピー符号化ユニット56は、それぞれの異なるサイズを有する変換単位同士の間で共有されるジョイントコンテキストモデルを使用してビデオ係数のエントロピー符号化を実行するように構成されてもよい。各技法について、主としてCABACのエントロピー符号化技法に関して説明する。しかしながら、場合によっては、各技法が他のコンテキスト適応型エントロピー符号化技法に適用されてもよい。ジョイントコンテキストモデルを2つ又はそれ以上のサイズの変換単位間で共有すると、ビデオエンコーダ20上にコンテキスト及び確率を記憶するのに必要なメモリの量を低減させることができる。さらに、ジョイントコンテキストモデルを共有すると、ビデオスライスの開始時に全てのコンテキストモデルをリセットすることを含む、ビデオエンコーダ20上にコンテキストモデルを維持することについての計算コストを削減することもできる。CABACの場合、各技法は、係数の実際のコード化された値に基づいてコンテキストモデルの確率推定値を頻繁に更新することについての計算コストを削減することもできる。
本開示によれば、エントロピー符号化ユニット56は、それぞれ異なるサイズを有する変換単位同士の間で共有されるジョイントコンテキストモデルを維持し、ジョイントコンテキストモデルに従って変換単位の1つに関連する係数のコンテキストを選択してもよい。次いで、エントロピー符号化ユニット56は、選択されたコンテキストに基づいて変換単位内の有効係数をエントロピー符号化してもよい。一例として、ジョイントコンテキストモデルは、32×32の第1のサイズを有する変換単位と16×16の第2のサイズを有する変換単位との間で共有されてもよい。場合によっては、2つよりも多くのサイズの変換単位が同じジョイントコンテキストモデルを共有してもよい。一例では、ジョイントコンテキストモデルは、変換単位の有意性マップのジョイントコンテキストモデルであってもよい。他の例では、ジョイントコンテキストモデルを他のコード化情報又はシンタックス要素に関連付けてもよい。ジョイントコンテキストモデルを使用するCABAC符号化プロセスについて図5に関してより詳しく説明する。
一例では、エントロピー符号化ユニット56は、保持される係数ブロックを生成するためにゼロ化された係数を含む第1のサイズを有するTUと本来第2のサイズを有するTUとによって共有されるジョイントコンテキストモデルを維持してもよい。場合によっては、保持される係数ブロックは、第2のサイズと等しいサイズを有してもよい。例えば、第1のサイズを有するTUにおいて高周波数係数がゼロ化されるとき、保持される係数ブロックに含まれる係数は、本来第2のサイズを有するTUに含まれる係数と同様の確率統計を有する。この場合、本来第1のサイズを有するTUの係数をゼロ化することによって第2のサイズの保持される係数ブロックが生成されたときに、エントロピー符号化56は、ジョイントコンテキストモデルに従って保持される係数ブロックの係数のコンテキストを選択してもよい。次いで、エントロピー符号化ユニット56は、選択されたコンテキストに基づいて保持される係数ブロック内の有効係数をエントロピー符号化する。CABACの場合、エントロピー符号化ユニット56はまた、係数の実際のコード化された値に基づいてジョイントコンテキストモデル内の選択されたコンテキストに関連する確率推定値を更新する。
別の例では、エントロピー符号化ユニット56は、第1のサイズを有する第1のTUと第2のサイズを有する第2のTUとによって共有されるジョイントコンテキストモデルを維持してもよい。場合によっては、第1のサイズを有する第1のTUに含まれる係数は、第1のTU内の高周波数係数をゼロ化しない場合でも第2のサイズを有する第2のTUに含まれる係数と同様の確率統計を有してもよい。このことは、高周波数係数が、エントロピーコード化のための近接する係数の確率統計に対する影響が無視できるほど少ない残差ビデオデータを表し得るために可能になる。この例では、エントロピー符号化56は、ジョイントコンテキストモデルに従って、第1のサイズと第2のサイズのうちの一方のTU内の係数のコンテキストを選択してもよい。次いで、エントロピー符号化ユニット56は、選択されたコンテキストに基づいてTU内の有効係数をエントロピー符号化する。CABACの場合、エントロピー符号化ユニット56は次いで、係数の実際のコード化された値に基づいてジョイントコンテキストモデル内の選択されたコンテキストに関連する確率推定値を更新してもよい。
エントロピー符号化ユニット56はまた、符号化されているビデオブロックのための動きベクトルと他の予測シンタックス要素とをエントロピー符号化し得る。例えば、エントロピー符号化ユニット56は、本開示で説明する技法を使用してTU内の有効係数の位置を示す有意性マップ、即ち0と1のマップを示すシンタックス要素をエントロピー符号化してもよい。例えば、エントロピー符号化ユニット56は、符号化されたビットストリームで送信できるように動き補償ユニット44によって生成された適切なシンタックス要素を含むヘッダ情報を構築し得る。ビデオエンコーダ20は、CU、PU、及びTUのサイズを含むビデオブロック情報、並びにイントラモード予測に関する動きベクトル情報を示すシンタックス要素をエントロピー符号化してもよい。エントロピー符号化ユニット56は、シンタックス要素をエントロピー符号化するために、シンタックス要素を1つ以上のバイナリビットとして2値化し、コンテキストモデルに従って各バイナリビットのコンテキストを選択することによってCABACを実行してもよい。
逆量子化ユニット58及び逆変換ユニット60は、それぞれ逆量子化及び逆変換を適用して、残差ブロックを、参照フレームの参照ブロックとして後で使用できるように画素領域に再構成する。加算ユニット62は、再構成された残差ブロックを、動き補償ユニット44によって生成された予測ブロックに加算して、参照フレームメモリ64に記憶される参照ブロックを生成する。参照ブロックは、後続のビデオフレーム中のブロックをインター予測する(inter-predict)ために、動き推定ユニット42及び動き補償ユニット44によって参照ブロックとして使用され得る。
図3A及び図3Bは、第1のサイズを有する変換単位内の第2のサイズを有する保持される係数ブロックのそれぞれ方形領域及び矩形領域を示す概念図である。図3A及び図3Bの概念図において、それぞれ異なるボックスは、変換が施された後のTU内の変換係数を表す。ハッチングされた領域内の係数は、保持される変換係数を備え、ハッチングされた領域に含まれない係数(即ち、白又は斜線のボックス)は、2次元変換時にゼロ化された係数を備える。
上述のように、本開示の技法は、2次元変換の各方向の後に第1のサイズのTUに含まれる変換係数のうちの高周波数の変換係数のサブセットをゼロ化することによって、より大きいTUサイズ、例えば32×32から128×128までの中間バッファリング要件を低減させる。このようにして、図2の変換ユニット52は、TUの第1のサイズよりも小さい第2のサイズを有する保持される係数ブロックをTU内に生成することができる。
ゼロ化プロセスは、TU内の変換係数のサブセットの値をゼロに等しく設定することを備える。ゼロ化された変換係数は、計算されることも破棄されることもなく、その代わり、ゼロ化された変換係数は、単にゼロに等しく設定され、記憶すべき値も符号化すべき値も有さない。本開示によれば、ゼロ化された変換係数は一般に、TU内の保持される変換係数と比較して高周波数の変換係数である。高周波数の変換係数は、符号化すべきビデオブロックと予測ブロックとの非常に小さい画素差分に相当する残差ビデオデータを表す。従って、高周波数の変換係数に含まれる残差ビデオデータを非常に少なくすることができ、各値をゼロに等しく設定しても、復号後のビデオ品質に対する影響は無視できる程度の影響である。
図3Aは、16×16の第1のサイズを有するTU70と、TU70内の、8×8の第2のサイズの最終的な方形領域を有する保持される係数ブロック74とを示す。保持される係数ブロック74のサイズ及び形状は、コード化プロセスのコード化複雑度要件に基づいて選択されてもよい。この例では、図2の変換ユニット52は、本来16×16のサイズを有するTU70内に8×8のサイズの方形領域を有する保持される係数ブロック74を生成するように構成されてもよい。変換ユニット52は、保持される係数ブロック74を生成するために、2次元変換の各方向、即ち行方向及び列方向を適用した後より周波数の高い係数のうちの2分の1をゼロ化してもよい。他の場合には、変換ユニット52は、コード化プロセスのコード化複雑度要件に応じてゼロ化する係数の割合を高くするか又は低くするように構成されてもよい。
まず、変換ユニット52は、TU70内の残差ビデオデータの各行に1次元変換を施し、変換から出力される中間変換係数のサブセット(この場合は2分の1)をゼロ化することができる。図3Aの図示の例では、保持される中間変換係数は、TU70の本来の16×16のサイズの2分の1に等しい16×8のサイズの矩形領域を有する保持される中間係数ブロック73(即ち、TU70内の斜線のブロック)に含まれる。ゼロ化後のサブセット(即ち、TU70内の白いブロック)は、TU70の保持される中間係数ブロック73内の係数よりも高い周波数値を有する係数を含んでもよい。図示の例では、変換ユニット52は、TU70の各行における8つの最高周波数値を有する係数のうちの2分の1をゼロ化する。このゼロ化プロセスでは、TU70内に16×8の矩形領域を有する保持される中間係数ブロック73が得られる。他の例では、保持される中間係数ブロック73の領域は異なるサイズ又は形状を備えてもよい。変換ユニット52は、16×16のTU70内の全ての係数のうちで最も高い周波数値を有する係数のうちの2分の1をゼロ化してもよい。このゼロ化プロセスによって、TU70の左上角部に三角形領域を有する保持される中間係数ブロックが得られる。
ビデオエンコーダ20は、第1の方向における変換から出力される中間変換係数のうちの2分の1をゼロ化することによって、第2の方向に変換を適用する前に、保持される中間係数ブロック73内に各係数をバッファリングするだけでよい。ゼロ化後のサブセット(即ち、TU70内の白いブロック)内の係数は、記憶すべき値も、変換すべき値も、符号化すべき値も有さない。このようにして、各技法は、2次元変換を実行する際の中間バッファリング要件を低減させることができる。このことは、HEVC規格に関して提案されているより大きい変換単位サイズ、例えば32×32から128x128までのサイズに特に有用である。
バッファリングに続いて、変換ユニット52は、保持される中間係数ブロック73内の保持される中間変換係数の各列に1次元変換を施し、変換から出力される変換係数のサブセット(この場合は2分の1)をゼロ化してもよい。図3Aの図示の例では、保持される中間変換係数は、TU70の本来の16×16のサイズの4分の1に等しい8×8のサイズの方形領域を有する保持される係数ブロック74(即ち、TU70内のハッチングされたブロック)に含まれる。ゼロ化後のサブセット(即ち、保持される中間係数ブロック73内のハッチングされていない方形領域)は、TU70の保持される係数ブロック74内の係数よりも高い周波数値を有する係数を含んでもよい。図示の例では、変換ユニット52は、保持される中間係数ブロック73の各列における8つの最高周波数値を有する係数のうちの2分の1をゼロ化する。他の例では、変換ユニット52は、16×8の保持される中間係数ブロック73内の全ての係数のうちで最も高い周波数値を有する係数のうちの2分の1をゼロ化してもよい。いずれの場合も、このゼロ化プロセスでは、TU70内に8×8の方形領域を有する保持される係数ブロック74が得られる。
図3Bは、16×16の第1のサイズを有するTU76と、TU76内の、4×16の第2のサイズの最終的な矩形領域を有する保持される係数ブロック78とを示す。保持される係数ブロック78のサイズ及び形状は、コード化プロセスのコード化複雑度要件に基づいて選択されてもよい。より具体的には、保持される係数ブロック78の最終的な矩形領域は、イントラコード化モード、スキャンパターン、及び保持される係数ブロック78に関する最後の有効係数の位置のうちの少なくとも1つに基づいて選択されてもよい。
図3Bの図示の例では、変換ユニット52は、本来16×16のサイズを有するTU76内に4×16のサイズの矩形領域を有する保持される係数ブロック78を生成するように構成されてもよい。変換ユニット52は、最初に、保持される係数ブロック78の最終的な矩形領域の最も短い辺(例えば、列)の方向においてTU76に適用されてもよい。変換ユニット52は、保持される係数ブロック78を生成するために、2次元変換を第1の方向(例えば、列方向)に施した後で係数のうちの4分の3をゼロ化してもよい。他の場合には、変換ユニット52は、コード化プロセスのコード化複雑度要件に応じてゼロ化する係数の割合を高くするか又は低くするように構成されてもよい。
保持される係数ブロック用に矩形が選択されると、各技法では、まず矩形領域の短い方の辺(即ち、保持される変換係数がより少ない方)の方向に1次元変換を施すことによって中間バッファリング要件をさらに低減させることができる。このようにして、ビデオエンコーダ20は、矩形領域の長い方の辺の方向に1次元変換を施す前に中間変換係数のうちの2分の1よりも少ない数をバッファリングすることができる。図3Bの図示の例では、保持される係数ブロック78の最終的な矩形領域の高さ(H)は、矩形領域の幅(W)よりも小さく、従って、垂直方向に保持される中間変換係数の方が少ない。従って、変換ユニット52はまず、TU76の各行に変換が施される前にビデオエンコーダ20がバッファリングする中間変換係数の数が2分の1よりも少なくなる(この場合には4分の1)ようにTU76の各列に変換を施してもよい。
より具体的には、変換ユニット52は、TU76内の残差ビデオデータの各列に1次元変換を施し、変換から出力される中間変換係数のサブセット(この場合は4分の3)をゼロ化してもよい。図3Bの図示の例では、保持される中間変換係数は、TU76の本来の16×16のサイズの4分の1に等しい4×16の矩形領域を有する保持される中間係数ブロック77(即ち、TU76内の斜線のブロック)に含まれる。ゼロ化後のサブセット(即ち、TU76内の白いブロック)は、TU76の保持される中間係数ブロック77内の係数よりも高い周波数値を有する係数を含んでもよい。図示の例では、変換ユニット52は、TU76の各列における12個の最高周波数値を有する係数のうちの4分の3をゼロ化する。このゼロ化プロセスでは、TU76内に4×16の矩形領域を有する保持される中間係数ブロック77が得られる。
ビデオエンコーダ20は、第1の方向における変換から出力される中間変換係数のうちの4分の3をゼロ化することによって、第2の方向に変換を適用する前に、保持される中間係数ブロック77内に各係数をバッファリングするだけでよい。ゼロ化後のサブセット(即ち、TU76内の白いブロック)内の係数は、記憶すべき値も、変換すべき値も、符号化すべき値も有さない。このようにして、各技法は、2次元変換を実行する際の中間バッファリング要件を低減させることができる。このことは、HEVC規格に関して提案されているより大きい変換単位サイズ、例えば32×32から128×128までのサイズに特に有用である。
バッファリング後、変換ユニット52は、保持される係数ブロック77内の係数の行に1次元変換を施してもよい。この例では、TU76はすでに、16×16の本来のサイズの4分の1までゼロ化されているので、変換ユニット52は、変換から出力されるどの変換係数もゼロ化しなくてよい。図3Aの図示の例では、保持される変換係数は、保持される中間係数ブロック77と同じ4×16の矩形領域を有する保持される係数ブロック78(即ち、TU76内のハッチングされたブロック)に含まれる。このゼロ化プロセスでは、TU70内に4×16の矩形領域を有する保持される係数ブロック78が得られる。
図4は、ジョイントコンテキストモデルを使用してビデオ係数をエントロピー復号するための技法を実施することのできる例示的なビデオデコーダを示すブロック図である。図4の例では、ビデオデコーダ30は、エントロピー復号ユニット80と、予測ユニット81と、逆量子化ユニット86と、逆変換ユニット88と、加算ユニット90と、参照フレームメモリ92とを含む。予測ユニット81は、動き補償ユニット82と、イントラ予測ユニット84とを含む。ビデオデコーダ30は、幾つかの例では、ビデオエンコーダ20(図2)に関して説明した符号化パスに一般的に相互関係にある復号パスを実行し得る。
復号プロセス中に、ビデオデコーダ30は、符号化されたビデオフレーム又はビデオスライスと、ビデオエンコーダ20などのビデオエンコーダからの符号化情報を表すシンタックス要素とを含む符号化されたビデオビットストリームを受信する。エントロピー復号ユニット80は、ビットストリームを復号してTU内に量子化された変換係数を生成する。例えば、エントロピー復号ユニット80は、CABAC、CAVLC、又は別のエントロピー符号化技法のようなコンテキスト適応型エントロピー復号を実行し得る。エントロピー復号ユニット80は、本開示で説明する技法を使用してTU内の有効係数の位置を示す有意性マップ、即ち1と0のマップを含むシンタックス要素をエントロピー復号してもよい。エントロピー復号ユニット80は、動きベクトル及び他の予測シンタックス要素をエントロピー復号してもよい。
エントロピー復号ユニット80は、コンテキスト適応型エントロピー復号を実行するために、例えば、事前に復号された近接する係数の値が非ゼロであるかどうかに関係し得るコンテキストモデルに従って、ビットストリーム内に表された符号化された各係数にコンテキストを割り当てる。エントロピー復号ユニット80はまた、コンテキストモデル内の割り当てられたコンテキストに関連する符号化された係数用の符号化プロセスを決定する。次いで、エントロピー復号ユニット80は、割り当てられたコンテキストに基づいて係数をエントロピー復号してもよい。CABACの場合、エントロピー復号ユニット80は、コンテキストモデル内の割り当てられたコンテキストに関連する符号化された係数の値(例えば、0又は1)の確率推定値を求めてもよい。エントロピー復号ユニット80は次いで、係数の復号された実際の値に基づいてコンテキストモデル内の割り当てられたコンテキストに関連する確率推定値を更新する。
従来、ビデオデコーダ30は、実装されるビデオ圧縮規格によって支持されるTUの様々なサイズの各々に別個のコンテキストモデルを維持しなければならない。HEVC規格の場合、ビデオコード化効率を向上させるために、例えば、32×32から128×128までの追加の変換単位サイズが提案されているが、追加のTUサイズによって、追加の変換単位サイズの各々にコンテキストモデルを維持するためにメモリ及び計算要件も増大する。
本開示の技法によれば、エントロピー復号ユニット80は、異なるサイズを有する変換単位同士の間で共有されるジョイントコンテキストモデルを使用してビデオ係数のエントロピー復号を実行するように構成されてもよい。各技法について、主としてCABACのエントロピー復号技法に関して説明する。しかしながら、場合によっては、各技法が他のコンテキスト適応型エントロピーコード化技法に適用されてもよい。ジョイントコンテキストモデルを2つ又はそれ以上のサイズの変換単位間で共有すると、ビデオデコーダ30上にコンテキスト及び確率を記憶するのに必要なメモリの量を低減させることができる。さらに、ジョイントコンテキストモデルを共有すると、ビデオスライスの開始時に全てのコンテキストモデルをリセットすることを含む、ビデオデコーダ30上にコンテキストモデルを維持することについての計算コストを削減することもできる。CABACの場合、各技法は、係数の実際のコード化された値に基づいてコンテキストモデルの確率推定値を頻繁に更新することについての計算コストを削減することもできる。
本開示によれば、エントロピー復号ユニット80は、異なるサイズを有する変換単位同士の間で共有されるジョイントコンテキストモデルを維持し、ジョイントコンテキストモデルに従って1つの変換単位に関連する係数のコンテキストを選択してもよい。次いで、エントロピー復号ユニット80は、選択されたコンテキストに基づいて変換単位内の有効係数をエントロピー復号してもよい。一例として、ジョイントコンテキストモデルは、32×32の第1のサイズを有する変換単位と16×16の第2のサイズを有する変換単位との間で共有されてもよい。場合によっては、2つよりも多くのサイズの変換単位が同じジョイントコンテキストモデルを共有してもよい。一例では、ジョイントコンテキストモデルは、変換単位の有意性マップのジョイントコンテキストモデルであってもよい。他の例では、ジョイントコンテキストモデルを他のコード化情報又はシンタックス要素に関連付けてもよい。ジョイントコンテキストモデルを使用するCABAC復号プロセスについて図6に関してより詳しく説明する。
一例では、エントロピー復号ユニット80は、保持される係数ブロックを生成するためにゼロ化された係数を含む第1のサイズを有するTUと本来第2のサイズを有するTUとによって共有されるジョイントコンテキストモデルを維持してもよい。場合によっては、保持される係数ブロックは、第2のサイズと等しいサイズを有してもよい。例えば、この場合、エントロピー復号ユニット80は、ジョイントコンテキストモデルに従って、本来第1のサイズを有するTU内の第2のサイズを有する保持される係数ブロックの係数のコンテキストを選択してもよい。エントロピー復号ユニット80は次いで、選択されたコンテキストに基づいて、符号化された有効係数を第1のサイズを有するTU内の保持される係数ブロックに算術的に復号する。CABACの場合、エントロピー復号ユニット80はまた、係数の復号された実際の値に基づいてジョイントコンテキストモデル内の選択されたコンテキストに関連する確率推定値を更新する。
別の例では、エントロピー復号ユニット80は、第1のサイズを有する第1のTUと第2のサイズを有する第2のTUとによって共有されるジョイントコンテキストモデルを維持してもよい。この例では、エントロピー復号ユニット80は、ジョイントコンテキストモデルに従って、第1のサイズと第2のサイズのうちの一方のTUに関連する符号化された係数のコンテキストを選択してもよい。次いで、エントロピー復号ユニット80は、選択されたコンテキストに基づいて、符号化された有効係数をTUに復号する。CABACの場合、エントロピー復号ユニット80は次いで、係数の復号された実際の値に基づいてジョイントコンテキストモデル内の選択されたコンテキストに関連する確率推定値を更新してもよい。いずれの場合も、エントロピー復号ユニット80は、第1のサイズ又は第2のサイズのいずれかを有するTU内の復号された量子化変換係数を逆量子化ユニット86に転送する。
逆量子化ユニット86は、上述のようにエントロピー復号ユニット80によってTUに復号された量子化変換係数を逆量子化、即ち脱量子化する。逆量子化プロセスは、各ビデオブロック又はCUについてビデオエンコーダ20によって計算される量子化パラメータQPを使用して量子化の程度を求め、同様に、適用すべき逆量子化の程度を求めることを含み得る。逆変換ユニット88は、逆変換、例えば、逆DCT、逆整数変換、逆ウェーブレット変換、又は概念的に同様の逆変換プロセスをTU内の変換係数に適用して、画素領域において残差ビデオデータを生成する。
幾つかの例では、逆変換ユニット88は2次元固定小数点変換を備え得る。逆変換ユニット88は、まずTU内の変換係数の行に1次元変換を施し、次いでTU内の変換係数の列に1次元逆変換を施すか、又はこの動作を逆の順序で実行することによって、TUに2次元変換を施すことができる。ビデオデコーダ30は、第1の方向の1次元逆変換をTU内の各変換係数に施した後、中間残差データを、第2の方向への1次元逆変換を施せるようにバッファリングする。上述のように、HEVC規格では、ビデオコード化効率を向上させるためにより大きい変換単位サイズ、例えば32×32から128×128までのサイズが提案されている。しかしながら、TUサイズを大きくすると、2次元変換の中間バッファリング要件も増大する。
本開示で説明する各技法は、TUサイズを大きくする中間バッファリング要件を低減させるために、図2のビデオエンコーダ20によって、TUに含まれる変換係数のうちの高周波数の変換係数のサブセットをゼロ化することを含んでもよい。TU内のゼロ化された変換係数は、単にゼロに等しく設定され、記憶すべき値も、変換すべき値も、符号化すべき値も有さない。従って、エントロピー復号ユニット80は、通常第1のサイズを有するTU内の第2のサイズを有する保持される係数ブロックに関連する符号化された係数を表す符号化されたビットストリームを受信する。エントロピー復号ユニット80は、各係数を第1のサイズを有するTU内の保持される係数ブロックに復号する。その場合、TUは、第2のサイズの保持される係数ブロック内の係数とTU内の残りの係数を表すゼロとを含む。
このように、ビデオエンコーダ20において変換係数をゼロ化するプロセスは、ビデオデコーダ30において逆変換を実行する際にTUサイズを大きくする中間バッファリング要件を低減させることができる。一例として、逆変換ユニット88は、第1の方向、即ち行方向の1次元領域逆変換を32×32のサイズを有するTU内の16×16のサイズを有する保持される係数ブロック内の変換係数に施してもよい。行の逆変換の後で、ビデオデコーダ30は、TUの2分の1、即ち32×16の係数のみを備える保持される係数ブロック内の係数から変換された中間残差データをバッファリングするだけでよい。次いで、逆変換ユニット88は、第2の方向、例えば列方向の1次元逆変換をTU内の中間残差データに施してもよい。このようにして、逆変換ユニット88は、16x16のサイズを有する保持される係数ブロック内の残差データを含め、TU内の残りの残差データを表すゼロを加算することによって、本来32×32のサイズを有するTUを生成してもよい。
エントロピー復号ユニット80はまた、予測ユニット81に復号された動きベクトルと他の予測シンタックス要素とを転送する。ビデオデコーダ30は、ビデオ予測単位レベル、ビデオコード化単位レベル、ビデオスライスレベル、ビデオフレームレベル及び/又はビデオシーケンスレベルにおいてシンタックス要素を受信し得る。ビデオフレームがイントラコード化されたフレームとしてコード化されると、予測ユニット81のイントラ予測ユニット84は、現在のフレームの事前に復号されたブロックからのデータに基づいて現在のビデオフレームのビデオブロック用の予測データを生成する。ビデオフレームがインターコード化されたフレームとしてコード化されると、予測ユニット81の動き補償ユニット82は、エントロピー復号ユニット80から受信された復号された動きベクトルに基づいて現在のビデオフレームのビデオブロックの予測ブロックを生成する。予測ブロックは、参照フレームメモリ92に記憶された参照フレームの1つ以上の参照ブロックに関して生成されてもよい。
動き補償ユニット82は、動きベクトルとその他の予測シンタックスとを構文解析することによって、復号すべきビデオブロックについての予測情報を求め、この予測情報を使用して、復号されている現在のビデオブロックのための予測ブロックを生成する。例えば、動き補償ユニット82は、受信されたシンタックス要素の幾つかを使用して、現在のフレームを符号化するために使用されるCUのサイズと、フレームの各CUがどのように分割されるかを記述する分割情報と、各分割がどのように符号化されるかを示すモード(例えば、イントラ予測又はインター予測)と、インター予測スライスタイプ(例えば、Bスライス、Pスライス、又はGPBスライス)と、参照フレームリスト構成コマンドと、参照フレームに適用される補間フィルタと、フレームの各ビデオブロックの動きベクトルと、動きベクトルに関連するビデオパラメータ値と、現在のビデオフレームを復号するためのその他の情報を求める。
符号化後、算術符号化ユニット96は、係数の実際の符号化された値をコンテキストモデル化ユニット94に送り返し、ジョイントコンテキストモデルストア98内において、ジョイントコンテキストモデル内の割り当てられたコンテキストに関連する確率推定値を更新する。コンテキストモデル化ユニット94は、確率状態間を遷移することによってジョイントコンテキストモデル内の割り当てられたコンテキストの確率更新を実行する。例えば、係数の実際のコード化された値が0である場合、より低い状態に遷移することによって係数値が0に等しい確率を高くしてもよい。ジョイントコンテキストモデルの確率推定値を頻繁に更新して係数の実際の符号化された値を反映することによって、ジョイントコンテキストモデル内の同じコンテキストに割り当てられる将来の係数の確率推定値の精度を高めることができ、それによって、算術符号化ユニット96によるビット符号化をさらに低減させることができる。
図示の動作では、ビデオエンコーダ20内のエントロピー符号化ユニット56及びビデオデコーダ30内のエントロピー符号化ユニット80は、第1のサイズを有するTUと第2のサイズを有するTUとによって共有されるジョイントコンテキストモデルを維持してもよい。この場合、第1のサイズ、例えば32×32を有する第1のTUに含まれる係数は、第1のTU内の高周波数係数をゼロ化しない場合でも第2のサイズ、例えば16×16を有する第2のTUに含まれる係数と同様の確率統計を有してもよい。このことは、高周波数係数が、エントロピーコード化のための近接する係数の確率統計に対する影響が無視できるほど少ない残差ビデオデータを表すために可能になる。
Claims (30)
- ビデオデータをコード化する方法であって、
前記ビデオデータの変換係数をエントロピーコード化するための複数のコンテキストモデルを維持することと、ここで、前記複数のコンテキストモデルは、異なる変換単位のサイズに各々使用される1つ以上のコンテキストモデルと、2つ以上の変換単位のサイズに使用される少なくとも1つのジョイントコンテキストモデルとを含む、
第1の変換単位又は第2の変換単位の一方の変換係数をエントロピーコード化するための、第1のサイズを有する前記第1の変換単位と前記第1のサイズとは異なる第2のサイズを有する前記第2の変換単位によって共有される前記ジョイントコンテキストモデルを選択することと、
前記ジョイントコンテキストモデルに従って前記第1の変換単位又は前記第2の変換単位の前記一方と関連する前記変換係数のコンテキストを選択することと、
選択された前記コンテキストに基づいて前記変換単位の前記一方の前記変換係数をエントロピーコード化することと、
を備え、前記変換単位の各々は、複数の変換係数を含む残差ビデオブロックデータ単位を備える、方法。 - 前記ジョイントコンテキストモデルは、有意性マップの前記ジョイントコンテキストモデルを備え、
前記ジョイントコンテキストモデルに従って前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方に関連する前記変換係数の前記有意性マップの構成要素のコンテキストを選択することと、
選択された前記コンテキストに基づいて前記変換単位の前記一方に関連する前記有意性マップの前記構成要素をエントロピーコード化することと、をさらに備える、請求項1に記載の方法。 - 前記ジョイントコンテキストモデルに従って前記変換係数のコンテキストを選択することは、
前記変換単位の前記一方の事前にコード化された近接する変換係数の値に基づいて前記変換係数の所与の1つに前記ジョイントコンテキストモデルのコンテキストを割り当てることと、
前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記変換係数の前記所与の1つの値の確率推定値を決定することと、
前記第1のサイズを有する前記第1の変換単位及び前記第2のサイズを有する前記第2の変換単位の変換係数の実際にコード化された値に基づいて前記ジョイントコンテキストモデルの割り当てられた前記コンテキストと関連する前記確率推定値を更新すること、
を備える、請求項1に記載の方法。 - ビデオデータを復号する方法を含み、
前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方と関連する符号化された変換係数を表すビットストリームを受信すること、
前記ジョイントコンテキストモデルに従って、前記符号化された変換係数のコンテキストを選択すること、
選択された前記コンテキストに基づいて前記変換単位の前記一方に、前記符号化された変換係数をエントロピー復号すること、をさらに備える、請求項1に記載の方法。 - 前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方の前記変換係数を残差画素値に逆変換することをさらに備える、請求項4に記載の方法。
- ビデオデータを符号化する方法を備え、
残差画素値を前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方の内の前記変換係数に変換することと、
前記ジョイントコンテキストモデルに従って前記変換単位の前記一方の前記変換係数のコンテキストを選択することと、
選択された前記コンテキストに基づいて前記変換単位の前記一方の前記変換係数をエントロピー符号化することと、をさらに備える、請求項1に記載の方法。 - 前記第1のサイズの前記第1の変換単位は、32×32変換単位を備え、前記第2のサイズの前記第2の変換単位は16×16変換単位を備える、請求項1に記載の方法。
- 前記ジョイントコンテキストモデルに従ってコンテキストを選択することは、
前記第1の変換単位の事前にコード化された近接する変換係数の値に基づいて前記第1のサイズを有する前記第1の変換単位の第1の変換係数に前記ジョイントコンテキストモデル内のコンテキストを割り当てることと、
前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記第1の変換係数の値の確率推定値を求めることと、
前記第1の変換係数の実際のコード化された値に基づいて前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記確率推定値を更新することと、
前記第2の変換単位の事前にコード化された近接する変換係数の値に基づいて前記第2のサイズを有する前記第2の変換単位の第2の変換係数に前記ジョイントコンテキストモデル内の同じコンテキストを割り当てることと、
前記ジョイントコンテキストモデル内の前記同じ割り当てられたコンテキストに関連する前記第2の変換係数の値の確率推定値を求めることと、
前記第2の変換係数の実際のコード化された値に基づいて前記ジョイントコンテキストモデル内の前記同じ割り当てられたコンテキストに関連する前記確率推定値を更新することと、を備える、請求項1に記載の方法。 - ビデオデータの変換係数をエントロピーコード化するための複数のコンテキストモデルを記憶するように構成されたメモリと、ここで、前記複数のコンテキストモデルは、異なる変換単位のサイズに各々使用される1つ以上のコンテキストモデルと、2つ以上の変換単位のサイズに使用される少なくとも1つのジョイントコンテキストモデルとを含む、
第1の変換単位又は第2の変換単位の一方の変換係数をエントロピーコード化するための、第1のサイズを有する前記第1の変換単位及び前記第1のサイズとは異なる第2のサイズを有する前記第2の変換単位によって共有される前記ジョイントコンテキストモデルを選択し、前記ジョイントコンテキストモデルに従って前記第1の変換単位又は前記第2の変換単位の前記一方に関連する前記変換係数のコンテキストを選択し、選択された前記コンテキストに基づいて前記変換単位の前記一方の前記変換係数をエントロピーコード化するように構成されたプロセッサと、を備え、前記変換単位の各々は、複数の変換係数を含む残差ビデオブロックデータ単位を備える、ビデオコード化装置。 - 前記ジョイントコンテキストモデルは、有意性マップの前記ジョイントコンテキストモデルを備え、前記プロセッサは、
前記ジョイントコンテキストモデルに従って前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方に関連する前記変換係数の前記有意性マップの構成要素のコンテキストを選択し、
選択された前記コンテキストに基づいて前記変換単位の前記一方に関連する前記有意性マップの前記構成要素をエントロピーコード化するように構成される、請求項9に記載のビデオコード化装置。 - 前記プロセッサは、
前記変換単位の前記一方の事前にコード化された近接する変換係数の値に基づいて前記ジョイントコンテキストモデル内のコンテキストを前記変換係数の所与の1つに割り当て、
前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記変換係数の前記所与の1つの値の確率推定値を決定し、
前記第1のサイズを有する前記第1の変換単位及び前記第2のサイズを有する前記第2の変換単位の変換係数の実際のコード化された値に基づいて前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストと関連する前記確率推定値を更新するように構成される、請求項9に記載のビデオコード化装置。 - ビデオ復号装置を備え、前記プロセッサは、
前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方に関連する符号化された変換係数を表すビットストリームを受信し、
前記ジョイントコンテキストモデルに従って前記符号化された変換係数のコンテキストを選択し、
選択された前記コンテキストに基づいて前記符号化された変換係数を前記変換単位の前記一方にエントロピー復号するように構成される、請求項9に記載のビデオコード化装置。 - 前記プロセッサは、前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方の前記変換係数を残差画素値に逆変換するように構成される、請求項12に記載のビデオコード化装置。
- ビデオコード化装置を備え、前記プロセッサは、
残差画素値を前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方内の前記変換係数に変換し、
前記ジョイントコンテキストモデルに従って前記変換単位の前記一方の前記変換係数のコンテキストを選択し、
選択された前記コンテキストに基づいて前記変換単位の前記一方の前記変換係数をエントロピー符号化するように構成される、請求項9に記載のビデオコード化装置。 - 前記第1のサイズの前記第1の変換単位は、32×32変換単位を備え、前記第2のサイズの前記第2の変換単位は16×16変換単位を備える、請求項9に記載のビデオコード化装置。
- 前記プロセッサは、
前記第1の変換単位の事前にコード化された近接する変換係数の値に基づいて前記第1のサイズを有する前記第1の変換単位の第1の変換係数に前記ジョイントコンテキストモデル内のコンテキストを割り当て、
前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記第1の変換係数の値の確率推定値を求め、
前記第1の変換係数の実際のコード化された値に基づいて前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記確率推定値を更新し、
前記第2の変換単位の事前にコード化された近接する変換係数の値に基づいて前記第2のサイズを有する前記第2の変換単位の第2の変換係数に前記ジョイントコンテキストモデル内の同じコンテキストを割り当て、
前記ジョイントコンテキストモデル内の同じ割り当てられた前記コンテキストに関連する前記第2の変換係数の値の確率推定値を求め、
前記第2の変換係数の実際のコード化された値に基づいて前記ジョイントコンテキストモデル内の同じ割り当てられた前記コンテキストに関連する前記確率推定値を更新するように構成される、請求項9に記載のビデオコード化装置。 - ビデオデータの変換係数をエントロピーコード化するための複数のコンテキストモデルを維持するための手段と、ここで、前記複数のコンテキストモデルは、異なる変換単位のサイズに各々使用される1つ以上のコンテキストモデルと、2つ以上の変換単位のサイズに使用される少なくとも1つのジョイントコンテキストモデルとを含む、
第1の変換単位又は第2の変換単位の一方の変換係数をエントロピーコード化するための、第1のサイズを有する前記第1の変換単位と前記第1のサイズとは異なる第2のサイズを有する前記第2の変換単位によって共有される前記ジョイントコンテキストモデルを選択するための手段と、
前記ジョイントコンテキストモデルに従って前記第1の変換単位又は前記第2の変換単位の前記一方に関連する前記変換係数のコンテキストを選択するための手段と、
選択された前記コンテキストに基づいて前記変換単位の前記一方の前記変換係数をエントロピーコード化するための手段とを備え、前記変換単位の各々は、複数の変換係数を含む残差ビデオブロックデータ単位を備える、ビデオコード化装置。 - 前記ジョイントコンテキストモデルは、有意性マップの前記ジョイントコンテキストモデルを備え、
前記ジョイントコンテキストモデルに従って前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方に関連する前記変換係数の前記有意性マップの構成要素のコンテキストを選択するための手段と、
選択された前記コンテキストに基づいて前記変換単位の前記一方に関連する前記有意性マップの前記構成要素をエントロピーコード化するための手段と、をさらに備える、請求項17に記載のビデオコード化装置。 - 前記変換単位の前記一方の事前にコード化された近接する変換係数の値に基づいて前記ジョイントコンテキストモデル内のコンテキストを前記変換係数の所与の1つに割り当てるための手段と、
前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記変換係数の前記所与の1つの値の確率推定値を決定するための手段と、
前記第1のサイズを有する前記第1の変換単位及び前記第2のサイズを有する前記第2の変換単位の変換係数の実際のコード化された値に基づいて前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記確率推定値を更新するための手段と、
をさらに備える、請求項17に記載のビデオコード化装置。 - ビデオ復号装置を備え、
前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方に関連するコード化された変換係数を表すビットストリームを受信するための手段と、
前記ジョイントコンテキストモデルに従って前記コード化された変換係数のコンテキストを選択するための手段と、
選択された前記コンテキストに基づいて前記コード化された変換係数を前記変換単位の前記一方にエントロピー復号するための手段と、をさらに備える、請求項17に記載のビデオコード化装置。 - 前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方の前記変換係数を残差画素値に逆変換するための手段をさらに備える、請求項20に記載のビデオコード化装置。
- ビデオコード化装置を備え、
残差画素値を前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方内の前記変換係数に変換するための手段と、
前記ジョイントコンテキストモデルに従って前記変換単位の前記一方の前記変換係数のコンテキストを選択するための手段と、
選択された前記コンテキストに基づいて前記変換単位の前記一方の前記変換係数をエントロピーコード化するための手段と、をさらに備える、請求項17に記載のビデオコード化装置。 - 前記第1のサイズの前記第1の変換単位は、32×32変換単位を備え、前記第2のサイズの前記第2の変換単位は16×16変換単位を備える、請求項17に記載のビデオコード化装置。
- 実行されたときに、プロセッサに、
ビデオデータの変換係数をエントロピーコード化するための複数のコンテキストモデルを維持させ、ここで、前記複数のコンテキストモデルは、異なる変換単位のサイズに各々使用される1つ以上のコンテキストモデルと、2つ以上の変換単位のサイズに使用される少なくとも1つのジョイントコンテキストモデルとを含む、
第1の変換単位又は第2の変換単位の一方の変換係数をエントロピーコード化するための、第1のサイズを有する前記第1の変換単位及び前記第1のサイズとは異なる第2のサイズを有する前記第2の変換単位によって共有される前記ジョイントコンテキストモデルを選択させ、
前記ジョイントコンテキストモデルに従って前記第1の変換単位又は前記第2の変換単位の前記一方に関連する変換係数のコンテキストを選択させ、
選択された前記コンテキストに基づいて前記変換単位の前記一方の前記変換係数をエントロピーコード化させる、前記ビデオデータをコード化するための命令を備え、前記変換単位の各々は、複数の変換係数を含む残差ビデオブロックデータ単位を備える、コンピュータ可読記憶媒体。 - 前記ジョイントコンテキストモデルは、有意性マップの前記ジョイントコンテキストモデルを備え、前記コンピュータ可読記憶媒体は、前記プロセッサに、
前記ジョイントコンテキストモデルに従って前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方に関連する前記変換係数の前記有意性マップの構成要素のコンテキストを選択させ、
選択された前記コンテキストに基づいて前記変換単位の前記一方に関連する前記有意性マップの前記構成要素をエントロピーコード化させる命令をさらに備える、請求項24に記載のコンピュータ可読記憶媒体。 - 前記命令は、前記プロセッサに、
前記変換単位の前記一方の事前にコード化された近接する変換係数の値に基づいて前記ジョイントコンテキストモデル内のコンテキストを前記変換係数の所与の1つに割り当てさせ、
前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記変換係数の前記所与の1つの値の確率推定値を決定させ、
前記第1のサイズを有する前記第1の変換単位及び前記第2のサイズを有する前記第2の変換単位の変換係数の実際のコード化された値に基づいて前記ジョイントコンテキストモデル内の割り当てられた前記コンテキストに関連する前記確率推定値を更新させる命令を更に備える、請求項24に記載のコンピュータ可読記憶媒体。 - 前記命令は、ビデオデータを復号するための命令を備え、前記プロセッサに、
前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方に関連する符号化された変換係数を表すビットストリームを受信させ、
前記ジョイントコンテキストモデルに従って前記符号化された変換係数のコンテキストを選択させ、
選択された前記コンテキストに基づいて符号化された前記変換係数を前記変換単位の前記一方にエントロピー復号させる命令をさらに備える、請求項24に記載のコンピュータ可読記憶媒体。 - 前記プロセッサに、前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方の前記変換係数を残差画素値に逆変換させる命令をさらに備える、請求項27に記載のコンピュータ可読記憶媒体。
- 前記命令は、ビデオデータを符号化するための命令を備え、
残差画素値を前記第1のサイズを有する前記第1の変換単位又は前記第2のサイズを有する前記第2の変換単位の前記一方内の変換係数に変換させ、
前記ジョイントコンテキストモデルに従って前記変換単位の前記一方の前記変換係数のコンテキストを選択させ、
選択された前記コンテキストに基づいて前記変換単位の前記一方の前記変換係数をエントロピー符号化させる命令をさらに備える、請求項24に記載のコンピュータ可読記憶媒体。 - 前記第1のサイズの前記第1の変換単位は、32×32変換単位を備え、前記第2のサイズの前記第2の変換単位は16×16変換単位を備える、請求項24に記載のコンピュータ可読記憶媒体。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US38917010P | 2010-10-01 | 2010-10-01 | |
US61/389,170 | 2010-10-01 | ||
US13/249,079 | 2011-09-29 | ||
US13/249,079 US8913666B2 (en) | 2010-10-01 | 2011-09-29 | Entropy coding coefficients using a joint context model |
US13/249,020 | 2011-09-29 | ||
US13/249,020 US8902988B2 (en) | 2010-10-01 | 2011-09-29 | Zero-out of high frequency coefficients and entropy coding retained coefficients using a joint context model |
PCT/US2011/054425 WO2012045041A1 (en) | 2010-10-01 | 2011-09-30 | Entropy coding coefficients using a joint context model |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013543317A JP2013543317A (ja) | 2013-11-28 |
JP2013543317A5 JP2013543317A5 (ja) | 2014-10-30 |
JP5788517B2 true JP5788517B2 (ja) | 2015-09-30 |
Family
ID=44789642
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013531941A Active JP5788517B2 (ja) | 2010-10-01 | 2011-09-30 | ジョイントコンテキストモデルを使用した係数のエントロピーコード化 |
Country Status (20)
Country | Link |
---|---|
US (2) | US8902988B2 (ja) |
EP (1) | EP2622861B1 (ja) |
JP (1) | JP5788517B2 (ja) |
KR (1) | KR101528085B1 (ja) |
CN (1) | CN103181169B (ja) |
AU (1) | AU2011308538B2 (ja) |
BR (1) | BR112013007302B1 (ja) |
CA (1) | CA2812313C (ja) |
DK (1) | DK2622861T3 (ja) |
ES (1) | ES2761301T3 (ja) |
HU (1) | HUE046649T2 (ja) |
IL (1) | IL225401A (ja) |
MY (1) | MY168311A (ja) |
PL (1) | PL2622861T3 (ja) |
PT (1) | PT2622861T (ja) |
RU (1) | RU2556465C2 (ja) |
SG (1) | SG189037A1 (ja) |
SI (1) | SI2622861T1 (ja) |
UA (1) | UA106937C2 (ja) |
WO (2) | WO2012045037A2 (ja) |
Families Citing this family (80)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9076239B2 (en) * | 2009-04-30 | 2015-07-07 | Stmicroelectronics S.R.L. | Method and systems for thumbnail generation, and corresponding computer program product |
US9497472B2 (en) * | 2010-11-16 | 2016-11-15 | Qualcomm Incorporated | Parallel context calculation in video coding |
US9049444B2 (en) | 2010-12-22 | 2015-06-02 | Qualcomm Incorporated | Mode dependent scanning of coefficients of a block of video data |
US20120163456A1 (en) | 2010-12-22 | 2012-06-28 | Qualcomm Incorporated | Using a most probable scanning order to efficiently code scanning order information for a video block in video coding |
US10992958B2 (en) | 2010-12-29 | 2021-04-27 | Qualcomm Incorporated | Video coding using mapped transforms and scanning modes |
US8755620B2 (en) | 2011-01-12 | 2014-06-17 | Panasonic Corporation | Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus for performing arithmetic coding and/or arithmetic decoding |
US8687904B2 (en) * | 2011-01-14 | 2014-04-01 | Panasonic Corporation | Image coding method, image coding apparatus, image decoding method, image decoding apparatus, and image coding and decoding apparatus which include arithmetic coding or arithmetic decoding |
JPWO2012120908A1 (ja) * | 2011-03-09 | 2014-07-17 | パナソニック株式会社 | 動画像符号化装置および動画像符号化方法 |
JP5395307B2 (ja) * | 2011-03-09 | 2014-01-22 | パナソニック株式会社 | 動画像復号化装置および動画像復号化方法 |
CN107529706B (zh) * | 2011-06-16 | 2020-11-17 | Ge视频压缩有限责任公司 | 解码器、编码器、解码和编码视频的方法及存储介质 |
US20130003858A1 (en) * | 2011-06-30 | 2013-01-03 | Vivienne Sze | Simplified Context Selection For Entropy Coding of Transform Coefficient Syntax Elements |
US9392301B2 (en) * | 2011-07-01 | 2016-07-12 | Qualcomm Incorporated | Context adaptive entropy coding for non-square blocks in video coding |
UA114674C2 (uk) | 2011-07-15 | 2017-07-10 | ДЖ.І. ВІДІЕУ КЕМПРЕШН, ЛЛСі | Ініціалізація контексту в ентропійному кодуванні |
JPWO2013046504A1 (ja) * | 2011-09-29 | 2015-03-26 | パナソニックIpマネジメント株式会社 | 算術復号装置、画像復号装置、および算術復号方法 |
US8891630B2 (en) | 2011-10-24 | 2014-11-18 | Blackberry Limited | Significance map encoding and decoding using partition set based context assignment |
BR112014011149A2 (pt) | 2011-11-08 | 2017-05-16 | Motorola Mobility Llc | dispositivos e métodos para codificação e / ou de sinalização de deslocamento adaptativo de amostra |
US9955153B2 (en) | 2012-01-05 | 2018-04-24 | Google Technology Holdings LLC | Devices and methods for sample adaptive offset coding |
WO2013103892A1 (en) | 2012-01-05 | 2013-07-11 | General Instrument Corporation | Devices and methods for sample adaptive offset coding and/or selection of edge offset parameters |
US20130182772A1 (en) | 2012-01-13 | 2013-07-18 | Qualcomm Incorporated | Determining contexts for coding transform coefficient data in video coding |
US9654772B2 (en) | 2012-01-19 | 2017-05-16 | Qualcomm Incorporated | Context adaptive entropy coding with a reduced initialization value set |
US9106918B2 (en) | 2012-01-20 | 2015-08-11 | Sony Corporation | Coefficient coding harmonization in HEVC |
CN107257462B (zh) * | 2012-03-26 | 2020-04-28 | Jvc 建伍株式会社 | 图像解码装置、图像解码方法、接收装置 |
US9549176B2 (en) * | 2012-04-06 | 2017-01-17 | Google Technology Holdings LLC | Devices and methods for signaling sample adaptive offset (SAO) parameters |
EP3174295B1 (en) | 2012-04-13 | 2018-12-12 | GE Video Compression, LLC | Low delay picture coding |
CN105187843B (zh) | 2012-04-13 | 2018-06-12 | Jvc建伍株式会社 | 图像解码装置、图像解码方法、接收装置及接收方法 |
RU2616166C2 (ru) * | 2012-05-25 | 2017-04-12 | Сан Пэтент Траст | Способ кодирования изображений, способ декодирования изображений, устройство кодирования изображений, устройство декодирования изображений и устройство кодирования и декодирования изображений |
JP6242385B2 (ja) | 2012-05-29 | 2017-12-06 | 寰發股▲ふん▼有限公司HFI Innovation Inc. | サンプルアダプティブオフセット情報(SampleAdaptiveOffsetInformation)の符号化の方法と装置 |
TWI606719B (zh) * | 2012-05-31 | 2017-11-21 | Jvc Kenwood Corp | Video encoding device, video encoding method, and video encoding program |
CN107707925B (zh) | 2012-06-08 | 2020-08-18 | 太阳专利托管公司 | 图像编码方法和图像编码装置 |
WO2013187060A1 (ja) * | 2012-06-12 | 2013-12-19 | パナソニック株式会社 | 動画像符号化方法、動画像復号化方法、動画像符号化装置および動画像復号化装置 |
US9307264B2 (en) * | 2012-06-22 | 2016-04-05 | Sharp Kabushiki Kaisha | Arithmetic decoding device, arithmetic coding device, image decoding apparatus, and image coding apparatus |
AU2013273686B2 (en) * | 2012-06-27 | 2017-03-02 | Sun Patent Trust | Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus |
CN115442626A (zh) | 2012-06-29 | 2022-12-06 | Ge视频压缩有限责任公司 | 视频数据流、编码器、编码视频内容的方法以及解码器 |
US9344742B2 (en) * | 2012-08-10 | 2016-05-17 | Google Inc. | Transform-domain intra prediction |
US9794569B2 (en) | 2013-01-30 | 2017-10-17 | Intel Corporation | Content adaptive partitioning for prediction and coding for next generation video |
US9554152B2 (en) | 2013-07-12 | 2017-01-24 | Qualcomm Incorporated | Concurrent processing of horizontal and vertical transforms |
US9628800B2 (en) | 2013-11-18 | 2017-04-18 | Qualcomm Incorporated | Adaptive control for transforms in video coding |
US9432696B2 (en) * | 2014-03-17 | 2016-08-30 | Qualcomm Incorporated | Systems and methods for low complexity forward transforms using zeroed-out coefficients |
US9516345B2 (en) | 2014-03-17 | 2016-12-06 | Qualcomm Incorporated | Systems and methods for low complexity forward transforms using mesh-based calculations |
US10063889B2 (en) * | 2014-10-28 | 2018-08-28 | Sony Corporation | Image processing system with conditional coding and method of operation thereof |
WO2016184399A1 (en) * | 2015-05-19 | 2016-11-24 | Mediatek Inc. | Method and apparatus for multi-table based context adaptive binary arithmetic coding |
WO2017041271A1 (en) * | 2015-09-10 | 2017-03-16 | Mediatek Singapore Pte. Ltd. | Efficient context modeling for coding a block of data |
EP3306924A1 (en) * | 2016-10-05 | 2018-04-11 | Thomson Licensing | Method and device for context-adaptive binary arithmetic coding a sequence of binary symbols representing a syntax element related to picture data |
US10999602B2 (en) | 2016-12-23 | 2021-05-04 | Apple Inc. | Sphere projected motion estimation/compensation and mode decision |
US11347764B1 (en) * | 2016-12-31 | 2022-05-31 | Teradata Us, Inc. | Time series table compression |
US10194147B2 (en) * | 2017-01-19 | 2019-01-29 | Google Llc | DC coefficient sign coding scheme |
US11259046B2 (en) | 2017-02-15 | 2022-02-22 | Apple Inc. | Processing of equirectangular object data to compensate for distortion by spherical projections |
US10924747B2 (en) | 2017-02-27 | 2021-02-16 | Apple Inc. | Video coding techniques for multi-view video |
US10587880B2 (en) | 2017-03-30 | 2020-03-10 | Qualcomm Incorporated | Zero block detection using adaptive rate model |
US10469877B1 (en) * | 2017-04-28 | 2019-11-05 | Mozilla Corporation | Systems and methods for reduced complexity entropy coding |
US11093752B2 (en) | 2017-06-02 | 2021-08-17 | Apple Inc. | Object tracking in multi-view video |
US11134272B2 (en) * | 2017-06-29 | 2021-09-28 | Qualcomm Incorporated | Memory reduction for non-separable transforms |
US20190005709A1 (en) * | 2017-06-30 | 2019-01-03 | Apple Inc. | Techniques for Correction of Visual Artifacts in Multi-View Images |
US10754242B2 (en) | 2017-06-30 | 2020-08-25 | Apple Inc. | Adaptive resolution and projection format in multi-direction video |
EP3503557A1 (en) * | 2017-12-22 | 2019-06-26 | Thomson Licensing | Method and apparatus for video encoding and decoding based on context switching |
US10298895B1 (en) * | 2018-02-15 | 2019-05-21 | Wipro Limited | Method and system for performing context-based transformation of a video |
JP7334726B2 (ja) * | 2018-03-28 | 2023-08-29 | ソニーグループ株式会社 | 画像処理装置及び画像処理方法 |
EP3562156A1 (en) * | 2018-04-27 | 2019-10-30 | InterDigital VC Holdings, Inc. | Method and apparatus for adaptive context modeling in video encoding and decoding |
KR20200039591A (ko) | 2018-10-05 | 2020-04-16 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
WO2020073884A1 (en) | 2018-10-08 | 2020-04-16 | Mediatek Singapore Pte. Ltd. | Method and apparatus of last significant coefficient coding in image and video coding |
WO2020130514A1 (ko) * | 2018-12-17 | 2020-06-25 | 엘지전자 주식회사 | 고주파 제로잉을 기반으로 변환 계수 스캔 순서를 결정하는 방법 및 장치 |
US10904563B2 (en) * | 2019-01-02 | 2021-01-26 | Tencent America LLC | Method and apparatus for improved zero out transform |
US11677955B2 (en) * | 2019-01-15 | 2023-06-13 | Lg Electronics Inc. | Image decoding method for coding residual information on basis of high frequency zeroing in image coding system, and device therefor |
KR20210102468A (ko) * | 2019-02-06 | 2021-08-19 | 엘지전자 주식회사 | 축소된 변환을 사용하여 비디오 신호를 처리하기 위한 방법 및 장치 |
CN109831670B (zh) * | 2019-02-26 | 2020-04-24 | 北京大学深圳研究生院 | 一种反量化方法、系统、设备及计算机可读介质 |
CN114143548B (zh) * | 2019-03-11 | 2023-02-14 | 北京达佳互联信息技术有限公司 | 视频编解码中变换系数的编解码 |
JP2020150340A (ja) * | 2019-03-11 | 2020-09-17 | キヤノン株式会社 | 画像符号化装置、画像符号化方法、及びプログラム |
JP2020150338A (ja) | 2019-03-11 | 2020-09-17 | キヤノン株式会社 | 画像復号装置、画像復号方法、及びプログラム |
US20220046246A1 (en) * | 2019-03-12 | 2022-02-10 | Lg Electronics Inc. | Transform-based image coding method and device therefor |
US20220277491A1 (en) * | 2019-05-31 | 2022-09-01 | Electronics And Telecommunications Research Institute | Method and device for machine learning-based image compression using global context |
KR20220021486A (ko) * | 2019-06-19 | 2022-02-22 | 소니그룹주식회사 | 화상 처리 장치 및 방법 |
MX2022001645A (es) * | 2019-08-08 | 2022-04-06 | Lg Electronics Inc | Metodo de codificacion de video con base en transformacion, y dispositivo para el mismo. |
WO2021055640A1 (en) * | 2019-09-17 | 2021-03-25 | Beijing Dajia Internet Information Technology Co., Ltd. | Methods and apparatuses for lossless coding modes in video coding |
WO2021062019A1 (en) * | 2019-09-24 | 2021-04-01 | Beijing Dajia Internet Information Technology Co., Ltd. | Lossless coding modes for video coding |
EP4118823A1 (en) * | 2020-03-12 | 2023-01-18 | InterDigital VC Holdings France | Method and apparatus for video encoding and decoding |
CN111182298B (zh) * | 2020-03-18 | 2022-04-12 | 广州市百果园信息技术有限公司 | 一种编码模式的确定方法、装置、设备和存储介质 |
US20220109863A1 (en) * | 2020-10-02 | 2022-04-07 | Tencent America LLC | Method and apparatus for video coding |
CN113079378B (zh) * | 2021-04-15 | 2022-08-16 | 杭州海康威视数字技术股份有限公司 | 图像处理方法、装置和电子设备 |
US20230100895A1 (en) * | 2021-09-24 | 2023-03-30 | Mediatek Inc. | Video processing circuit for performing size-based parallel in parallel out computation with bubble cycle reduction |
CN115278360B (zh) * | 2022-07-18 | 2023-11-07 | 天翼云科技有限公司 | 一种视频数据处理方法及电子设备 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SE468736B (sv) | 1991-11-15 | 1993-03-08 | Televerket | Foerfarande och apparat foer bildkodning med oeverhoppning av bilder och/eller komponenter |
CA2156889C (en) * | 1994-09-30 | 1999-11-02 | Edward L. Schwartz | Method and apparatus for encoding and decoding data |
US7062098B1 (en) | 2000-05-12 | 2006-06-13 | International Business Machines Corporation | Method and apparatus for the scaling down of data |
JP4230188B2 (ja) | 2002-06-06 | 2009-02-25 | パナソニック株式会社 | 可変長符号化方法および可変長復号化方法 |
US6795584B2 (en) * | 2002-10-03 | 2004-09-21 | Nokia Corporation | Context-based adaptive variable length coding for adaptive block transforms |
US7379608B2 (en) * | 2003-12-04 | 2008-05-27 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. | Arithmetic coding for transforming video and picture data units |
WO2006004847A2 (en) * | 2004-06-30 | 2006-01-12 | Comet Video Technology | Method of data compression including compression of video data |
WO2006118288A1 (ja) * | 2005-05-03 | 2006-11-09 | Matsushita Electric Industrial Co., Ltd. | 動画像符号化方法、動画像復号化方法およびその装置 |
US7813567B2 (en) * | 2007-04-26 | 2010-10-12 | Texas Instruments Incorporated | Method of CABAC significance MAP decoding suitable for use on VLIW data processors |
US7535387B1 (en) * | 2007-09-10 | 2009-05-19 | Xilinx, Inc. | Methods and systems for implementing context adaptive binary arithmetic coding |
KR101375668B1 (ko) * | 2008-03-17 | 2014-03-18 | 삼성전자주식회사 | 변환 계수의 부호화, 복호화 방법 및 장치 |
US7932843B2 (en) * | 2008-10-17 | 2011-04-26 | Texas Instruments Incorporated | Parallel CABAC decoding for video decompression |
EP2257072A1 (en) | 2009-05-27 | 2010-12-01 | Nxp B.V. | Image and video coding |
KR20120046727A (ko) * | 2009-08-06 | 2012-05-10 | 파나소닉 주식회사 | 부호화 방법, 복호 방법, 부호화 장치 및 복호 장치 |
CN102884792B (zh) | 2010-05-12 | 2016-08-17 | 汤姆森许可贸易公司 | 用于统一显著图编码的方法和设备 |
KR20120032457A (ko) | 2010-09-28 | 2012-04-05 | 삼성전자주식회사 | 영상의 변환 방법 및 장치, 역변환 방법 및 장치 |
US9378185B2 (en) | 2010-09-30 | 2016-06-28 | Texas Instruments Incorporated | Transform and quantization architecture for video coding and decoding |
US20130003856A1 (en) | 2011-07-01 | 2013-01-03 | Samsung Electronics Co. Ltd. | Mode-dependent transforms for residual coding with low latency |
US10642921B2 (en) | 2011-11-03 | 2020-05-05 | Texas Instruments Incorporated | Unified forward and inverse transform architecture |
EP2777287A2 (en) | 2011-11-07 | 2014-09-17 | VID SCALE, Inc. | Video and data processing using even-odd integer transforms background |
US9179162B2 (en) | 2011-12-02 | 2015-11-03 | Futurewei Technologies, Inc. | Image transform zero coefficient selection and zero-skip transmission for arbitrary shape transform coding |
-
2011
- 2011-09-29 US US13/249,020 patent/US8902988B2/en not_active Expired - Fee Related
- 2011-09-29 US US13/249,079 patent/US8913666B2/en active Active
- 2011-09-30 CN CN201180050442.1A patent/CN103181169B/zh active Active
- 2011-09-30 PT PT117682583T patent/PT2622861T/pt unknown
- 2011-09-30 SG SG2013020912A patent/SG189037A1/en unknown
- 2011-09-30 EP EP11768258.3A patent/EP2622861B1/en active Active
- 2011-09-30 JP JP2013531941A patent/JP5788517B2/ja active Active
- 2011-09-30 PL PL11768258T patent/PL2622861T3/pl unknown
- 2011-09-30 MY MYPI2013001131A patent/MY168311A/en unknown
- 2011-09-30 HU HUE11768258A patent/HUE046649T2/hu unknown
- 2011-09-30 AU AU2011308538A patent/AU2011308538B2/en active Active
- 2011-09-30 KR KR1020137011349A patent/KR101528085B1/ko active IP Right Grant
- 2011-09-30 WO PCT/US2011/054418 patent/WO2012045037A2/en active Application Filing
- 2011-09-30 BR BR112013007302-0A patent/BR112013007302B1/pt active IP Right Grant
- 2011-09-30 CA CA2812313A patent/CA2812313C/en active Active
- 2011-09-30 DK DK11768258T patent/DK2622861T3/da active
- 2011-09-30 WO PCT/US2011/054425 patent/WO2012045041A1/en active Application Filing
- 2011-09-30 RU RU2013119914/08A patent/RU2556465C2/ru active
- 2011-09-30 UA UAA201305700A patent/UA106937C2/uk unknown
- 2011-09-30 ES ES11768258T patent/ES2761301T3/es active Active
- 2011-09-30 SI SI201131821T patent/SI2622861T1/sl unknown
-
2013
- 2013-03-21 IL IL225401A patent/IL225401A/en active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
AU2011308538A1 (en) | 2013-05-02 |
IL225401A0 (en) | 2013-06-27 |
US20120082231A1 (en) | 2012-04-05 |
WO2012045037A3 (en) | 2012-05-18 |
BR112013007302A2 (pt) | 2016-07-05 |
EP2622861A1 (en) | 2013-08-07 |
IL225401A (en) | 2017-02-28 |
MY168311A (en) | 2018-10-30 |
KR20130095289A (ko) | 2013-08-27 |
BR112013007302B1 (pt) | 2022-02-15 |
RU2556465C2 (ru) | 2015-07-10 |
US20120082232A1 (en) | 2012-04-05 |
AU2011308538B2 (en) | 2015-06-18 |
SG189037A1 (en) | 2013-05-31 |
ES2761301T3 (es) | 2020-05-19 |
JP2013543317A (ja) | 2013-11-28 |
US8902988B2 (en) | 2014-12-02 |
SI2622861T1 (sl) | 2020-01-31 |
RU2013119914A (ru) | 2014-11-20 |
CA2812313A1 (en) | 2012-04-05 |
DK2622861T3 (da) | 2019-11-25 |
PT2622861T (pt) | 2019-12-17 |
US8913666B2 (en) | 2014-12-16 |
CA2812313C (en) | 2016-05-24 |
KR101528085B1 (ko) | 2015-06-10 |
WO2012045041A1 (en) | 2012-04-05 |
CN103181169A (zh) | 2013-06-26 |
EP2622861B1 (en) | 2019-09-11 |
UA106937C2 (uk) | 2014-10-27 |
WO2012045037A2 (en) | 2012-04-05 |
PL2622861T3 (pl) | 2020-04-30 |
CN103181169B (zh) | 2017-05-24 |
HUE046649T2 (hu) | 2020-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5788517B2 (ja) | ジョイントコンテキストモデルを使用した係数のエントロピーコード化 | |
CN108605126B (zh) | 滤波视频数据的经解码块的方法和装置及存储介质 | |
JP6165798B2 (ja) | イントラ予測を使用したビデオ符号化 | |
US20200099934A1 (en) | Using a most probable scanning order to efficiently code scanning order information for a video block in video coding | |
JP2013543317A5 (ja) | ||
US9247254B2 (en) | Non-square transforms in intra-prediction video coding | |
KR101523452B1 (ko) | 비디오 코딩에서 블록에 대한 스캐닝 순서에 기초하여 비디오 블록 내의 마지막 유효 계수의 포지션을 코딩 | |
US9497472B2 (en) | Parallel context calculation in video coding | |
JP6162150B2 (ja) | ビデオコーディング用の残差4分木(rqt)コーディング | |
JP5766874B2 (ja) | 方向性パーティションを用いたイントラ予測モードコーディング | |
US20120163448A1 (en) | Coding the position of a last significant coefficient of a video block in video coding | |
JP2015516768A (ja) | 変換係数コーディング | |
JP2013543713A (ja) | ビデオ符号化のための適応動きベクトル解像度信号伝達 | |
JP5937205B2 (ja) | ビデオコーディングのためのランモードベース係数コーディング | |
JP2014525169A (ja) | ルーマおよびクロマブロックのためのvlc係数コーディング |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140529 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140610 |
|
A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A524 Effective date: 20140909 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140910 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150403 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150630 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150729 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5788517 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |