JP2017192147A - 有意性マップ符号化の計算量低減 - Google Patents

有意性マップ符号化の計算量低減 Download PDF

Info

Publication number
JP2017192147A
JP2017192147A JP2017123995A JP2017123995A JP2017192147A JP 2017192147 A JP2017192147 A JP 2017192147A JP 2017123995 A JP2017123995 A JP 2017123995A JP 2017123995 A JP2017123995 A JP 2017123995A JP 2017192147 A JP2017192147 A JP 2017192147A
Authority
JP
Japan
Prior art keywords
quantized transform
context
block
transform coefficient
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017123995A
Other languages
English (en)
Inventor
チェウン アウイェウン
Auyeung Cheung
チェウン アウイェウン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JP2017192147A publication Critical patent/JP2017192147A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】高効率映像符号化(HEVC)などの映像符号化において、significant_coeff_flagを符号化する計算量を低減する。【解決手段】4×4有意性マップの符号化に関して輝度及び色差を選択するのに同じマッピングを使用して、significant_coeff_flagを符号化する計算量を低減する。15要素のルックアップテーブル及び複数のブランチを削除して、コンテキストインデックスを選択することができ、WDテキストはさらに簡略化される。【選択図】図1

Description

(関連出願の相互参照)
本出願は、米国特許法第119条(e)の下で、2012年1月20日出願の米国仮特許出願番号61/589,183「COMPLEXITY REDUCTION OF SIGNIFICANCE MAP CODING」の優先権を主張するものであり、その開示内容全体は、引用により明示的に本明細書に組み込まれる。
(技術分野)
本発明は、映像符号化の分野に関する。より詳細には、本発明は、映像符号化における計算量低減に関する。
significant_coeff_flagを符号化することに関して、以下の符号化方法、すなわち、輝度に関して9個のコンテキストを有し色差に関して6個のコンテキストを有する4×4位置ベース符号化方法、輝度に関して11個のコンテキストを有し色差に関して11個のコンテキストを有する8×8位置ベース符号化方法、及び輝度に関して7個のコンテキストを有し色差に関して4個のコンテキストを有する16×16/32×32マスクベース符号化方法が利用される。
図1に示すように、4×4位置ベース符号化方法は、輝度102及び色差100に関して種々のグループの有意性マップ(significance map)を有する。従って、色差102及び輝度100に関する種々のマッピングは、有意性マップ内の位置を、対応するコンテキストインデックスインクリメントにマッピングするように用いられる。結果的に、以下の計算、すなわち、コンテキストインクリメントを求めるために2つの15要素マッピングテーブルを使用することと、4×4、8×8、及び16×16/32×32有意性マップの符号化においてコンテキストインクリメントを求めるために輝度/色差判定に基づくブランチを必要とすることと、が存在する。
高効率映像符号化(HEVC)などの映像符号化においてsignificant_coeff_flagを符号化する計算量は、4×4輝度及び色差コンテキストに同じマッピングを使用して低減することができる。結果的に、15要素ルックアップテーブル及び複数のブランチを削除して、significant_coeff_flagのコンテキストインデックスを選択することができ、WDテキストはさらに簡略化される。
一態様では、デバイス内でプログラムされた非零4×4有意性マップの符号化における計算量を低減する方法は、量子化変換係数をスキャンする段階と、非零量子化係数終端位置を求める段階と、量子化変換係数から有意性マップを生成する段階と、を含み、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められる。コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む。本方法はさらに、8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなく、ビデオコンテンツを符号化する段階を含む。デバイスは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートフォン、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、携帯音楽プレーヤー、タブレットコンピュータ、ビデオプレーヤー、DVDライター/プレーヤー、高精細ビデオライター/プレーヤー、テレビジョン、及び家庭用娯楽システムからなるグループから選択される。
別の態様では、エンコーダは、量子化変換係数をスキャンするように構成されハードウェア内でプログラムされたスキャンモジュールと、非零量子化変換係数終端位置を生成するように構成されハードウェア内でプログラムされた第1の生成モジュールと、量子化変換係数から有意性マップを生成するように構成されハードウェア内でプログラムされた第2の生成モジュールとを含み、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められる。コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む。エンコーダはさらに、8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなく、ビデオコンテンツを符号化するようにハードウェア内でプログラムされた符号化モジュールを含む。エンコーダは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートフォン、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、携帯音楽プレーヤー、タブレットコンピュータ、ビデオプレーヤー、DVDライター/プレーヤー、高精細ビデオライター/プレーヤー、テレビジョン、及び家庭用娯楽システムからなるグループから選択されるデバイス内に含まれる。
別の態様では、装置は、量子化変換係数から有意性マップを生成するためのアプリケーションを格納するための非一時的メモリを備え、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有しコンテキストインデックスインクリメントが求められ、装置はさらに、メモリに接続され、アプリケーションを処理するように構成された処理構成要素を備える。アプリケーションはさらに、量子化変換係数をスキャンするようになっている。コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む。アプリケーションはさらに、8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなくビデオコンテンツを符号化するようになっている。
幾つかの実施形態による輝度及び色差に関する種々のグルーピングを含む有意性マップの図表を示す。 輝度及び色差コンテキストが、同じコンテキスト番号、及び同じコンテキストインデックスインクリメントマッピングを有する場合の、幾つかの実施形態による有意性マップの図表を示す。 幾つかの実施形態による有意性マップ符号化の計算量低減方法のフローチャートを示す。 計算量低減有意性マップ符号化方法を実行するように構成された、幾つかの実施形態による例示的なコンピューティングデバイスのブロック図を示す。 幾つかの実施形態によるHEVCエンコーダの概略図を示す。 幾つかの実施形態によるHEVCデコーダの概略図を示す。
ビデオ圧縮を利用して、デジタルビデオ情報が、より効率的に送信及び受信される。ビデオ圧縮は、ビデオシーケンス内の冗長なデータを削減又は削除するための技術を利用する。高効率映像符号化(HEVC)では、ビデオフレームは、符号化ユニット(CU)に分割される。CUは、予測又は変換に関してより小さいブロックに分割することができる。各CUはさらに、予測ユニット(PU)及び変換ユニット(TU)に分割することができる。
CUは、典型的には、Yで示される輝度成分と、U及びVで示される色差成分とを有する。
データブロックを符号化するために、ブロックに関する予測ブロックが得られる。予測ブロックは、イントラ(I)予測(例えば、空間予測)又はインター(P又はB)予測(例えば、時間予測)のいずれかを介して得ることができる。予測ブロックを識別する上で、元のビデオデータブロックとその予測ブロックとの間の差分が求められる。この差分は、予測誤差データと呼ばれ、符号化されたブロックのブロック内の画素値と符号化されたブロックを表すように選択された予測ブロック内の画素値との間の画素の差分を示す。圧縮を向上するために、予測誤差データを変換することができる(例えば、離散コサイン変換(DCT)又は他の変換を用いて)。
変換ブロック内の予測誤差データは、空間的な画素領域内に存在する画素差分値の2次元(2D)配列内に配列することができる。変換は、予測誤差の画素値を、周波数領域などの変換領域内の変換係数の2次元配列に変換する。さらなる圧縮に関して、変換係数は、エントロピー符号化の前に量子化することができる。エントロピー符号化器は、コンテキスト適応型可変長符号化(CAVLC:Context Adaptive Variable Length Coding)、コンテキスト適応型2値算術符号化(CABAC:Context Adaptive Binary Arithmetic Coding)、確率内部分割エントロピー符号化(PIPE:Probability Interval Partitioning Entropy Coding)、又は他のエントロピー符号化などのエントロピー符号化を、量子化変換係数に適用する。
量子化変換係数のブロックをエントロピー符号化するために、通常、スキャン処理が実行され、ブロック内の量子化変換係数の2次元(2D)配列が、特定のスキャン順序に従って、順序付けられた1次元(1D)配列の変換係数(例えば、ベクトル)において処理される。エントロピー符号化は、1D配列の変換係数に適用される。変換ユニット内の量子化変換係数のスキャンにより、エントロピー符号化器に関する2D配列の変換係数がシリアル化される。有意性マップを生成して、有意(例えば、非零)係数位置を示すことができる。スキャンは、有意(例えば、非零)係数の絶対値、及び/又は有意係数の正負符号に適用することができる。
HEVC規格では、4×4非零係数位置が、4×4有意性マップによって符号化される。HEVC規格での4×4有意性マップは、以下のように符号化される。終端有意係数の座標が送信される。次に、スキャン順序内の終端有意係数より前の各係数に関して、1ビットシンボルのsignificant_coeff_flagが送信される。
高効率映像符号化(HEVC)などの映像符号化においてsignificant_coeff_flagを符号化することの計算量は、同じマッピングを使用して色差コンテキスト及び輝度コンテキストを選択して低減することができる。結果的に、15要素のルックアップテーブル及び複数のブランチを削除して、コンテキストインデックスを選択することができ、WDテキストはさらに簡略化される。HM5.0では、デコーダ実行時間の0−3%の低減が観測されている。AI_HE、RA_HE、LB_HEに関するBDレートは、それぞれ0.00%、−0.01%、0.01%である。AI_LC、RA_LC、LB_LCに関するBDレートは、それぞれ0.00%、0.01%、−0.01%である。RA_HE10に関するBDレートは、0.03%である。
図2のグルーピングカラーで示すように、4×4輝度コンテキスト200と同じグルーピングは、4×4色差コンテキスト202のグルーピングに再利用することができる。結果的に、以下の態様、すなわち、以前に用いられていた色差の15要素マッピングテーブルが削除されることと、8×8/16×16/32×32有意性マップの少なくとも1つにおいて初期コンテキストオフセットを求めるための、輝度/色差判定に基づくブランチがさらに削除されることにおいて、計算量が低減される。
コンテキスト削減は、HM5.0に統合されている。シミュレーションが3つのマイクロソフトHPCクラスタで実行され、共通のテスト条件及び参照構成は、以下のとおりである。
・全てのイントラシミュレーションは、AMD Opteron Processor 6136 cluster @ 2.4GHz上で実行される。
・全てのRAシミュレーションは、Intel Xeon X5690 cluster @ 3.47GHz上で実行される。
・全てのLDシミュレーションは、Intel Xeon X5680 cluster @ 3.33GHz上で実行される。
表1は、有意性マップの符号化に関する計算量低減のBDレート及びタイミングを示す。
表1 計算量低減のBDレート
表3に示すように、本明細書で説明する方法は、デコーダ実行時間を0%から3%低減し、−0.01%から0.03%の輝度BDレート平均をもたらした。
表2:有意性マップ符号化計算量低減の平均復号時間
表3:有意性マップ符号化計算量低減の平均BDR
HM5.0に関して変更されたシンタックス要素significant_coeff_flagに関するctxldxlncの導出処理は、以下のとおりである。
この処理に対する入力は、色成分インデックスcIdx、現在のスキャン位置係数(xC,yC)、変換ブロック幅log2TrafoWidth、及び変換ブロック高さlog2TrafoHeightである。この処理の出力は、ctxIdxIncである。
変数sigCtxは、現在の位置(xC,yC)、色成分インデックスcIdx、変換ブロックサイズ、及びシンタックス要素significant_coeff_flagの以前に復号されたバイナリデータに依存する。sigCtxの導出に関して、以下が適用される。
・log2TrafoWidthがlog2TrafoHeightに等しく、log2TrafoWidthが2に等しい場合には、sigCtxは、表4で規定されたctxIdxMap4x4[]を使用して以下のように得られる。
sigCtx=ctxIdxMap4x4[(yC<<2)+xC]

・或いは、log2TrafoWidthがlog2TrafoHeightに等しく、log2TrafoWidthが3に等しい場合には、sigCtxは、表5で規定されたctxIdxMap8x8[]を使用して以下のように得られる。

sigCtx=((xC+yC)==0)?10:ctxIdxMap8x8[((yC>>1)<<2)+(xC>>1)]

sigCtx+=9

・或いは、xC+yCが0に等しい場合には、sigCtxは、以下のようにして得られる。

sigCtx=20

・或いは、xC+yCが0より大きい場合には、sigCtxは、シンタックス要素significant_coeff_flagの以前に復号されたバイナリデータを使用して、以下のようにして得られる。
・変数sigCtxは、以下のように初期化される。

sigCtx=0

・xCが、(1<<log2TrafoWidth)−1よりも小さい場合には、以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC+1][yC]

・xCが、(1<<log2TrafoWidth)−1よりも小さく、yCが(1<<log2TrafoHeight)−1よりも小さい場合には、以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC+1][yC+1]

・xCが、(1<<log2TrafoWidth)−2よりも小さい場合には、以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC+2][yC]

・以下の条件の全てが真の場合、
・yCが、(1<<log2TrafoHeight)−1よりも小さい
・xC%4が0に等しくない、又はyC%4が2に等しくない
以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC][yC+1]

・yCが、(1<<log2TrafoHeight)−2よりも小さく、sigCtxが4よりも小さい場合には、以下が適用される。

sigCtx=sigCtx+significant_coeff_flag[xC][yC+2]

・変数sigCtxは、以下のように変更される。
・cIdxが、0に等しく、xC+yCが、(1<<(max(log2TrafoWidth,log2TrafoHeight)−2))−1よりも大きい場合には、以下が適用される。

sigCtx=((sigCtx+1)>>1)+24

・上記の条件以外の場合には、以下が適用される。

sigCtx=((sigCtx+1)<<1)+21
コンテキストインデックスインクリメントctxIdxIncは、色成分インデックスcIdx及びsigCtxを使用して、以下のように得られる。
・cIdxが0に等しい場合、ctxIdxIncは、以下のように得られる。

ctxIdxInc=sigCtx

・或いは、cIdxが0より大きい場合、ctxIdxIncは、以下のように得られる。

ctxIdxInc=27+sigCtx
表4−ctxIdxMap4x4[i]の仕様
表5−ctxIdxMap8x8[i]の仕様
コンテキストの導出は、輝度に関しては32×32よりも小さい又はそれに等しく、色差に関しては16×16よりも小さい又はそれに等しい最大変換サイズ、及び4×4よりも大きい又はそれに等しい最小変換サイズを前提とする。
表6−significant_coeff_flag ctxIdxに関する変数initValueの値
図3は、幾つかの実施形態による4×4有意性マップ符号化の計算量低減方法のフローチャートを示す。ステップ300において、少なくとも1つの量子化非零変換係数を含む量子化変換係数がスキャンされる。ステップ302において、スキャン順序内の非零量子化係数終端位置が求められる。ステップ304において、非零係数終端位置が符号化される。ステップ306において、非零係数終端位置より前の量子化変換係数の有意性が、輝度及び色差係数に関して同じコンテキスト番号及びコンテキストインクリメントマッピングで符号化される。幾つかの実施形態では、より多い又は少ないステップが実行される。幾つかの実施形態では、ステップの順序は変更される。
図4は、計算量低減有意性マップ符号化方法を実行するように構成された、幾つかの実施形態による例示的なコンピューティングデバイスのブロック図を示す。コンピューティングデバイス400を使用して、画像及びビデオなどの情報を、取得、格納、計算、処理、伝達、及び/又は表示することができる。コンピューティングデバイス400を実装するのに好適なハードウェア構成は、全体が、ネットワークインタフェース402、メモリ404、プロセッサ406、I/Oデバイス408、バス410、及び記憶デバイス412を含む。プロセッサの選択は、十分な速度が選択される限り、決定的ではない。メモリ404は、本技術分野で公知の任意の従来のコンピュータメモリとすることができる。記憶デバイス412は、ハードドライブ、CDROM、CDRW、DVD、DVDRW、Blu−ray(登録商標)、フラッシュメモリカード、又は他の任意の記憶デバイスを含むことができる。コンピューティングデバイス400は、1つ又はそれ以上のネットワークインタフェース402を含むことができる。ネットワークインタフェースの実施例は、イーサネット(登録商標)又は他の種類のLANに接続されたネットワークカードを含む。I/Oデバイス408は、以下のもの、すなわち、キーボード、マウス、モニタ、スクリーン、プリンタ、モデム、タッチスクリーン、ボタンインタフェース、及び他のデバイスのうちの1つ又はそれ以上を含むことができる。計算量低減有意性マップ符号化方法を実行するために使用される計算量低減有意性マップ符号化アプリケーション430は、記憶デバイス412及びメモリ404に格納され、アプリケーションが典型的に処理されるように処理される可能性が高い。コンピューティングデバイス400は、図4に示すより多い又は少ない構成要素を含むことができる。幾つかの実施形態には、計算量低減有意性マップ符号化ハードウェア420が含まれる。図4のコンピューティングデバイス400は、計算量低減有意性マップ符号化方法に関するアプリケーション430及びハードウェア420を含むが、計算量低減有意性マップ符号化方法は、ハードウェア、ファームウェア、ソフトウェア、又はそれらの任意の組み合わせの形で、コンピューティングデバイスに実装することができる。例えば、幾つかの実施形態では、計算量低減有意性マップ符号化アプリケーション430は、メモリ内にプログラムされ、プロセッサを用いて実行される。別の実施例では、幾つかの実施形態において、計算量低減有意性マップ符号化ハードウェア420は、計算量低減有意性マップ符号化方法を実行するように専用に設計されたゲートを含む、プログラムされたハードウェアロジックである。
幾つかの実施形態では、計算量低減有意性マップ符号化アプリケーション430は、幾つかのアプリケーション及び/又はモジュールを含む。幾つかの実施形態では、モジュールはさらに、1つ又はそれ以上のサブモジュールを含む。幾つかの実施形態では、より少ない又は追加のモジュールを含むことができる。
好適なコンピューティングデバイスの実施例は、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、スマートフォン、携帯音楽プレーヤー、タブレットコンピュータ、移動体デバイス、ビデオプレーヤー、ビデオディスクライター/プレーヤー(例えば、DVDライター/プレーヤー、Blu−ray(登録商標)ライター/プレーヤー)、テレビジョン、家庭用娯楽システム、又は他の任意の好適なコンピューティングデバイスを含む。
図5は、幾つかの実施形態によるHEVCエンコーダの概略図を示す。エンコーダ500は、全体的な符号化制御構成要素、変換スケーリング及び量子化構成要素、スケーリング及び逆変換構成要素、イントラピクチャ推定構成要素、イントラピクチャ予測構成要素、デブロッキングフィルタ及びSAOフィルタ構成要素、動き補償構成要素、動き推定構成要素、及びヘッダフォーマット化及びCABAC構成要素を含む。入力ビデオ信号は、エンコーダ500で受信され、符号化ツリーユニット(CTU)に分割される。HEVCエンコーダ構成要素は、ビデオデータを処理し、符号化されたビットストリームを生成する。エンコーダ500は、有意性マップ符号化の計算量低減を実行する。
図6は、幾つかの実施形態によるHEVCデコーダの概略図を示す。デコーダ600は、エントロピー復号構成要素、逆量子化構成要素、逆変換構成要素、現在フレーム構成要素、イントラ予測構成要素、過去フレーム構成要素、動き補償構成要素、デブロッキングフィルタ、及びSAO構成要素を含む。入力ビットストリーム(例えば、符号化されたビデオ)は、デコーダ600によって受信され、ディスプレイ用の復号されたビットストリームが生成される。
計算量低減有意性マップ符号化方法を利用するために、デジタルカメラなどのデバイスを使用してビデオを取得することができる。計算量低減有意性マップ符号化方法を自動的に使用して、ビデオ処理が実行される。計算量低減有意性マップ符号化方法は、ユーザの介在を必要とせずに自動的に実行することができる。
計算量低減有意性マップ符号化方法は、動作中に、輝度コンテキスト及び色差コンテキストを選択するのに同じマッピングを使用することによって、高効率映像符号化(HEVC)などの映像符号化においてsignificant_coeff_flagの符号化の計算量を低減する。結果的に、15要素のルックアップテーブル及び複数のブランチを削除して、コンテキストインデックスを選択することができ、WDテキストはさらに簡略化される。
計算量低減有意性マップ符号化の幾つかの実施形態
1.デバイス内でプログラムされた非零4×4有意性マップの符号化における計算量を低減する方法は、
a.量子化変換係数をスキャンする段階と、
b.非零量子化係数終端位置を求める段階と、
c.量子化変換係数から有意性マップを生成する段階と、
を含み、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められる。
2.コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む、条項1の方法。
3.8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなく、ビデオコンテンツを符号化する段階をさらに含む、条項1の方法。
4.デバイスは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートフォン、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、携帯音楽プレーヤー、タブレットコンピュータ、ビデオプレーヤー、DVDライター/プレーヤー、高精細ビデオライター/プレーヤー、テレビジョン、及び家庭用娯楽システムからなるグループから選択される、条項1の方法。
5.エンコーダは、
a.量子化変換係数をスキャンするように構成されハードウェア内でプログラムされたスキャンモジュールと、
b.非零量子化変換係数終端位置を生成するように構成されハードウェア内でプログラムされた第1の生成モジュールと、
c.量子化変換係数から有意性マップを生成するように構成されハードウェア内でプログラムされた第2の生成モジュールと、
を含み、非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められる。
6.コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む、条項5のエンコーダ。
7.8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなく、ビデオコンテンツを符号化するようにハードウェア内でプログラムされた符号化モジュールをさらに含む、条項5のエンコーダ。
8.エンコーダは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、ハンドヘルドコンピュータ、携帯情報端末、セルラ電話/携帯電話、スマートフォン、スマートアプライアンス、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ付き携帯電話、携帯音楽プレーヤー、タブレットコンピュータ、ビデオプレーヤー、DVDライター/プレーヤー、高精細ビデオライター/プレーヤー、テレビジョン、及び家庭用娯楽システムからなるグループから選択されるデバイス内に含まれる、条項5のエンコーダ。
9.装置は、
a.量子化変換係数から有意性マップを生成するためのアプリケーションを格納するための非一時的メモリを備え、
非零量子化係数終端位置より前の量子化変換係数の有意性は、輝度及び色差に関して同じコンテキスト番号及び同じマッピングを有し、コンテキストインデックスインクリメントが求められ、
装置はさらに、
b.メモリに接続され、アプリケーションを処理するように構成された処理構成要素を備える。
10.アプリケーションはさらに、量子化変換係数をスキャンするようになっている、条項9の装置。
11.コンテキストインクリメントマッピングは、単一の15要素ルックアップテーブルを含む、条項9のエンコーダ。
12.アプリケーションはさらに、8×8、16×16、及び32×32有意性マップの少なくとも1つの輝度/色差判定に基づいてコンテキストオフセットを求めることなくビデオコンテンツを符号化するようになっている、条項9の装置。
詳細が組み込まれた具体的な実施形態に関して本発明を説明しており、本発明の構成及び動作の原理を理解することが容易になっている。このような、本明細書での具体的な実施形態及びその詳細への言及は、特許請求の範囲の範疇に限定されることを意図するものではない。特許請求の範囲によって規定される本発明の思想及び範囲から逸脱することなく、例示目的で選択した実施形態において、他の様々な変更を行うことができることは、当業者に容易に理解されるであろう。

Claims (8)

  1. 4×4ブロックの量子化変換係数のインデクスからコンテキストインデクスを導出して有意性マップ復号処理を適用する際に、前記4×4ブロックの量子化変換係数の輝度成分及び前記4×4ブロックの量子化変換係数の色差成分に対して、
    というマッピングテーブルを用いる復号部、
    を備える復号装置。
  2. 前記マッピングテーブルは、前記量子化変換係数のインデクスと、前記コンテキストインデクスを導出する際に用いられる中間変数sigCtxとをマッピングする、請求項1に記載の復号装置。
  3. 前記復号部は、前記マッピングテーブルを用いて、前記量子化変換係数が非ゼロであるか否かを示すフラグであるsignificant_coeff_flagのコンテキストを割り当てる、請求項1に記載の復号装置。
  4. 復号装置において実行される復号方法であって、
    4×4ブロックの量子化変換係数のインデクスからコンテキストインデクスを導出して有意性マップ復号処理を適用する際に、前記4×4ブロックの量子化変換係数の輝度成分及び前記4×4ブロックの量子化変換係数の色差成分に対して、
    というマッピングテーブルを用いること、
    を含む復号方法。
  5. 前記マッピングテーブルは、前記量子化変換係数のインデクスと、前記コンテキストインデクスを導出する際に用いられる中間変数sigCtxとをマッピングする、請求項4に記載の復号方法。
  6. 前記マッピングテーブルを用いて、前記量子化変換係数が非ゼロであるか否かを示すフラグであるsignificant_coeff_flagのコンテキストを割り当てること、を含む、請求項4に記載の復号方法。
  7. コンピュータプログラムであって、
    4×4ブロックの量子化変換係数のインデクスからコンテキストインデクスを導出して有意性マップ復号処理を適用する際に、前記4×4ブロックの量子化変換係数の輝度成分及び前記4×4ブロックの量子化変換係数の色差成分に対して、
    というマッピングテーブルを用いること、
    を含む処理を復号装置に実行させる、コンピュータプログラム。
  8. 請求項7に記載のコンピュータプログラムを記録した記録媒体。
JP2017123995A 2012-01-20 2017-06-26 有意性マップ符号化の計算量低減 Pending JP2017192147A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201261589183P 2012-01-20 2012-01-20
US61/589,183 2012-01-20

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2016010588A Division JP6176342B2 (ja) 2012-01-20 2016-01-22 有意性マップ符号化の計算量低減

Publications (1)

Publication Number Publication Date
JP2017192147A true JP2017192147A (ja) 2017-10-19

Family

ID=48797196

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2014553480A Active JP6276199B2 (ja) 2012-01-20 2013-01-18 有意性マップ符号化の計算量低減
JP2016010588A Active JP6176342B2 (ja) 2012-01-20 2016-01-22 有意性マップ符号化の計算量低減
JP2017123995A Pending JP2017192147A (ja) 2012-01-20 2017-06-26 有意性マップ符号化の計算量低減
JP2017123996A Pending JP2017192148A (ja) 2012-01-20 2017-06-26 有意性マップ符号化の計算量低減

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2014553480A Active JP6276199B2 (ja) 2012-01-20 2013-01-18 有意性マップ符号化の計算量低減
JP2016010588A Active JP6176342B2 (ja) 2012-01-20 2016-01-22 有意性マップ符号化の計算量低減

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2017123996A Pending JP2017192148A (ja) 2012-01-20 2017-06-26 有意性マップ符号化の計算量低減

Country Status (6)

Country Link
US (4) US20130188728A1 (ja)
EP (2) EP2786575A4 (ja)
JP (4) JP6276199B2 (ja)
KR (5) KR20180030250A (ja)
CN (6) CN103460701B (ja)
WO (1) WO2013109967A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103460701B (zh) * 2012-01-20 2017-06-09 索尼公司 有效度图编码的复杂度降低
US9294766B2 (en) 2013-09-09 2016-03-22 Apple Inc. Chroma quantization in video coding
US20160057564A1 (en) 2014-08-25 2016-02-25 Hyundai Motor Company Bluetooth pairing method using a wired connection
US9781424B2 (en) * 2015-01-19 2017-10-03 Google Inc. Efficient context handling in arithmetic coding
EP3293975A4 (en) * 2015-09-08 2018-10-10 Samsung Electronics Co., Ltd. Device and method for entropy encoding and decoding
CN106851280B (zh) * 2017-01-04 2018-04-13 西安万像电子科技有限公司 图像压缩的方法和装置
CN107948652B (zh) * 2017-11-21 2021-04-13 海信视像科技股份有限公司 一种进行图像转换的方法和设备
BR112021000379A2 (pt) * 2019-04-26 2021-04-13 Huawei Technologies Co., Ltd. Método e aparelho para sinalização de função de mapeamento de parâmetro de quantização de croma
US11856232B2 (en) * 2019-05-28 2023-12-26 Dolby Laboratories Licensing Corporation Quantization parameter signaling
CN114731404A (zh) * 2019-09-23 2022-07-08 交互数字Vc控股法国有限公司 使用基于块区域的量化矩阵进行视频编码和解码
KR20220090250A (ko) 2020-12-22 2022-06-29 주식회사 브로넷 가두리 양식장에 인공 수류를 발생시켜 적조 발생을 저감시키는 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011142817A1 (en) * 2010-05-12 2011-11-17 Thomson Licensing Methods and apparatus for unified significance map coding
WO2012096178A1 (ja) * 2011-01-12 2012-07-19 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置及び画像符号化復号装置
WO2013059652A1 (en) * 2011-10-19 2013-04-25 Sony Corporation Context reduction of significance map coding of 4 x 4 and 8 x 8 transform coefficient in hm4.0
WO2013065702A1 (ja) * 2011-11-04 2013-05-10 シャープ株式会社 算術復号装置、画像復号装置、算術符号化装置、画像符号化装置、および、算術復号方法
WO2013099892A1 (ja) * 2011-12-28 2013-07-04 シャープ株式会社 算術復号装置、画像復号装置、および、算術符号化装置

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5576043A (en) 1978-11-30 1980-06-07 Nippon Steel Corp Steel having partial form memory effect
JP3569963B2 (ja) * 1993-09-08 2004-09-29 ソニー株式会社 画像圧縮装置
US5790706A (en) * 1996-07-03 1998-08-04 Motorola, Inc. Method and apparatus for scanning of transform coefficients
KR20020026175A (ko) * 2000-04-04 2002-04-06 요트.게.아. 롤페즈 웨이브릿 변환을 이용한 비디오 인코딩 방법
WO2001080567A1 (en) * 2000-04-14 2001-10-25 Sony Corporation Decoder and decoding method, recorded medium, and program
CN100566419C (zh) * 2001-07-02 2009-12-02 高通股份有限公司 以无损的方式编码数字图像数据的设备和方法
US7099387B2 (en) * 2002-03-22 2006-08-29 Realnetorks, Inc. Context-adaptive VLC video transform coefficients encoding/decoding methods and apparatuses
CN100508609C (zh) * 2002-04-18 2009-07-01 株式会社东芝 运动图像编码/解码方法和装置
EP1487113B1 (de) * 2002-05-02 2006-10-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Kodierung und Dekodierung von Transformationskoeffizienten in Bild- oder Videokodierern
JP4724351B2 (ja) * 2002-07-15 2011-07-13 三菱電機株式会社 画像符号化装置、画像符号化方法、画像復号装置、画像復号方法、および通信装置
KR100751422B1 (ko) * 2002-12-27 2007-08-23 한국전자통신연구원 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치
US7379608B2 (en) * 2003-12-04 2008-05-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Arithmetic coding for transforming video and picture data units
US20070025441A1 (en) * 2005-07-28 2007-02-01 Nokia Corporation Method, module, device and system for rate control provision for video encoders capable of variable bit rate encoding
KR100736086B1 (ko) * 2005-09-06 2007-07-06 삼성전자주식회사 엔트로피 코딩의 성능 향상 방법 및 장치, 상기 방법을이용한 비디오 코딩 방법 및 장치
KR100873636B1 (ko) 2005-11-14 2008-12-12 삼성전자주식회사 단일 부호화 모드를 이용하는 영상 부호화/복호화 방법 및장치
US7983343B2 (en) * 2006-01-12 2011-07-19 Lsi Corporation Context adaptive binary arithmetic decoding for high definition video
EP2105025B1 (en) * 2007-01-11 2021-04-07 InterDigital VC Holdings, Inc. Methods and apparatus for using syntax for the coded_block_flag syntax element and the coded_block_pattern syntax element for the cavlc 4:4:4 intra, high 4:4:4 intra, and high 4:4:4 predictive profiles in mpeg-4 avc high level coding
KR101356733B1 (ko) * 2007-03-07 2014-02-05 삼성전자주식회사 컨텍스트 기반 적응적 이진 산술 부호화, 복호화 방법 및장치
US8891615B2 (en) 2008-01-08 2014-11-18 Qualcomm Incorporated Quantization based on rate-distortion modeling for CABAC coders
CN101500159B (zh) * 2008-01-31 2012-01-11 华为技术有限公司 一种图像熵编码、熵解码的方法及装置
CN101257625B (zh) * 2008-04-01 2011-04-20 海信集团有限公司 视频编解码中的位置索引方法及视频解码器
US20100040136A1 (en) * 2008-08-13 2010-02-18 Horizon Semiconductors Ltd. Method for performing binarization using a lookup table
US8279924B2 (en) * 2008-10-03 2012-10-02 Qualcomm Incorporated Quantization parameter selections for encoding of chroma and luma video blocks
JP5335912B2 (ja) * 2008-10-30 2013-11-06 ジーブイビービー ホールディングス エス.エイ.アール.エル. 画像符号化装置、画像符号化方法、及び画像符号化プログラム
CN101771868B (zh) * 2008-12-31 2016-03-02 华为技术有限公司 对图像的量化处理方法及装置
CA2751803A1 (en) * 2009-02-13 2010-08-19 Research In Motion Limited Modified entropy encoding for images and videos
US20100278232A1 (en) 2009-05-04 2010-11-04 Sehoon Yea Method Coding Multi-Layered Depth Images
WO2011002914A1 (en) * 2009-06-30 2011-01-06 Massachusetts Institute Of Technology System and method for providing high throughput entropy coding using syntax element partitioning
US8526745B2 (en) * 2009-12-03 2013-09-03 Sony Corporation Embedded graphics coding: reordered bitstream for parallel decoding
EP2559166B1 (en) * 2010-04-13 2017-11-01 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Probability interval partioning encoder and decoder
US9288496B2 (en) * 2010-12-03 2016-03-15 Qualcomm Incorporated Video coding using function-based scan order for transform coefficients
CN102118616A (zh) * 2011-02-24 2011-07-06 深圳市同洲电子股份有限公司 图片解码方法及图片解码器
EP2732628A2 (en) * 2011-07-15 2014-05-21 Motorola Mobility LLC Context modeling techniques for transform coefficient level coding
EP2587802B1 (en) 2011-10-24 2014-07-16 BlackBerry Limited Significance map encoding and decoding using partition selection
US8891630B2 (en) * 2011-10-24 2014-11-18 Blackberry Limited Significance map encoding and decoding using partition set based context assignment
EP2999218A1 (en) 2012-01-12 2016-03-23 MediaTek Inc. Method and apparatus for unification of significance map context selection
US9743116B2 (en) * 2012-01-19 2017-08-22 Huawei Technologies Co., Ltd. High throughput coding for CABAC in HEVC
EP2618578B1 (en) * 2012-01-20 2015-07-15 BlackBerry Limited Methods and devices for context set selection
CN103460701B (zh) * 2012-01-20 2017-06-09 索尼公司 有效度图编码的复杂度降低
KR102293126B1 (ko) 2012-01-20 2021-08-25 지이 비디오 컴프레션, 엘엘씨 변환 계수 코딩

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011142817A1 (en) * 2010-05-12 2011-11-17 Thomson Licensing Methods and apparatus for unified significance map coding
WO2012096178A1 (ja) * 2011-01-12 2012-07-19 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置及び画像符号化復号装置
WO2013059652A1 (en) * 2011-10-19 2013-04-25 Sony Corporation Context reduction of significance map coding of 4 x 4 and 8 x 8 transform coefficient in hm4.0
WO2013065702A1 (ja) * 2011-11-04 2013-05-10 シャープ株式会社 算術復号装置、画像復号装置、算術符号化装置、画像符号化装置、および、算術復号方法
WO2013099892A1 (ja) * 2011-12-28 2013-07-04 シャープ株式会社 算術復号装置、画像復号装置、および、算術符号化装置

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
CHEUNG AUYEUNG AND JUN XU: "Context reduction of significance map coding with CABAC", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-G366_r2, JPN6017014287, November 2011 (2011-11-01), pages 1 - 11, ISSN: 0003756576 *
CHEUNG AUYEUNG: "Complexity reduction of significance map coding", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-H0383_r2, JPN6018008942, February 2012 (2012-02-01), pages 1 - 12, ISSN: 0003756579 *
GERGELY KORODI, JINWEN ZAN AND DA-KE HE: "Encoding and decoding significant coefficient flags for small Transform Units using partition sets", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-G657_r3, JPN6018008941, November 2011 (2011-11-01), pages 1 - 7, ISSN: 0003877489 *
YINJI PIAO ET AL.: "Reduced chroma contexts for significance map coding in CABAC", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-G781, JPN6017014291, November 2011 (2011-11-01), pages 1 - 3, XP055013748, ISSN: 0003756578 *
YINJI PIAO ET AL.: "Reduced contexts for significance map coding of large transform in CABAC", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-G768-r3, JPN6017014289, November 2011 (2011-11-01), pages 1 - 5, ISSN: 0003756577 *

Also Published As

Publication number Publication date
EP2786575A1 (en) 2014-10-08
JP2016105633A (ja) 2016-06-09
KR20140110938A (ko) 2014-09-17
JP2015508619A (ja) 2015-03-19
CN111683255B (zh) 2022-08-02
US20180115782A1 (en) 2018-04-26
JP6276199B2 (ja) 2018-02-07
KR20180030250A (ko) 2018-03-21
JP6176342B2 (ja) 2017-08-09
CN107027037B (zh) 2020-06-23
CN107027037A (zh) 2017-08-08
CN110536141B (zh) 2021-07-06
US11025938B2 (en) 2021-06-01
US20180115781A1 (en) 2018-04-26
US20210243464A1 (en) 2021-08-05
CN107333138A (zh) 2017-11-07
EP3550840A1 (en) 2019-10-09
KR20160035095A (ko) 2016-03-30
CN111683255A (zh) 2020-09-18
KR20160034424A (ko) 2016-03-29
CN110536141A (zh) 2019-12-03
EP2786575A4 (en) 2016-08-03
CN105847827B (zh) 2019-03-08
CN103460701B (zh) 2017-06-09
US20130188728A1 (en) 2013-07-25
CN103460701A (zh) 2013-12-18
CN105847827A (zh) 2016-08-10
JP2017192148A (ja) 2017-10-19
KR20180030251A (ko) 2018-03-21
WO2013109967A1 (en) 2013-07-25
CN107333138B (zh) 2020-06-16

Similar Documents

Publication Publication Date Title
JP6176342B2 (ja) 有意性マップ符号化の計算量低減
RU2563681C2 (ru) Отдельное кодирование позиции последнего значимого коэффициента видеоблока при кодировании видео
US9055290B2 (en) Coding the position of a last significant coefficient within a video block based on a scanning order for the block in video coding
KR102642220B1 (ko) 영상 코딩 시스템에서 컨텍스트 코딩된 사인 플래그를 사용하는 영상 디코딩 방법 및 그 장치
CN115379241B (zh) 用于对最后有效系数标志进行代码化的方法和设备
US20120163448A1 (en) Coding the position of a last significant coefficient of a video block in video coding
JP7384974B2 (ja) 適応乗算係数を用いた画像フィルタリングのための方法および装置
US10992937B2 (en) Coefficient coding with grouped bypass bins

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180313

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180911