JP2019512970A - ディスプレイストリーム圧縮における量子化パラメータの適応計算のための装置および方法 - Google Patents
ディスプレイストリーム圧縮における量子化パラメータの適応計算のための装置および方法 Download PDFInfo
- Publication number
- JP2019512970A JP2019512970A JP2018549570A JP2018549570A JP2019512970A JP 2019512970 A JP2019512970 A JP 2019512970A JP 2018549570 A JP2018549570 A JP 2018549570A JP 2018549570 A JP2018549570 A JP 2018549570A JP 2019512970 A JP2019512970 A JP 2019512970A
- Authority
- JP
- Japan
- Prior art keywords
- value
- buffer
- fullness
- adjustment value
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
- H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
- H04N19/197—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including determination of the initial value of an encoding parameter
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
Abstract
Description
[0031]ビデオ画像、TV画像、静止画像、またはビデオレコーダもしくはコンピュータによって生成された画像のようなデジタル画像は、水平線状および垂直線状に配列されたピクセルまたはサンプルを含み得る。単一画像におけるピクセル数は通常、数万である。各ピクセルは通常、輝度およびクロミナンス情報を含む。圧縮なしでは、画像エンコーダから画像デコーダに伝達されるべき情報の膨大な量が、リアルタイムの画像送信を実現困難にするだろう。送信されるべき情報量を低減するために、JPEG、MPEG、およびH.263規格のような複数の異なる圧縮方法が開発されてきた。
[0035]新規のシステム、装置、および方法の様々な態様が、添付の図面を参照して以下でより十分に説明される。しかしながら、本開示は、多くの異なる形態で具現化され得、本開示全体を通して提示されるいずれの特定の構造または機能にも限定されるとは解釈されるべきではない。むしろ、これらの態様は、本開示が徹底的で完全になるように提供されており、当業者に本開示の範囲を十分に伝達することになる。本明細書における教示に基づいて、本開示の範囲が、本明細書で開示される新規のシステム、装置、および方法のいずれの態様も、本開示のいずれの他の態様からも独立して実施されようと本開示のいずれの他の態様と組み合わせられようと、カバーするように意図されていることを当業者は認識するべきである。たとえば、いずれの数の本明細書で述べられる態様を使用しても、装置は実装され得る、または方法は実施され得る。加えて、本開示の範囲は、本明細書で述べられる本開示の様々な態様に加えて、またはそれ以外に、他の構造、機能性、または構造と機能性を使用して実施されるような装置または方法をカバーするように意図されている。本明細書で開示されるいずれの態様も請求項の1つまたは複数の要素によって具現化され得ることは理解されるべきである。
[0050]上で簡単に言及されたように、ビデオエンコーダ20は、ビデオデータを符号化する。ビデオデータは、1つまたは複数のピクチャを備え得る。ピクチャの各々は、ビデオの一部を形成する静止画像である。いくつかの事例では、ピクチャは、ビデオ「フレーム」と称され得る。ビデオエンコーダ20がビデオデータを符号化するとき、ビデオエンコーダ20は、ビットストリームを生成し得る。ビットストリームは、ビデオデータのコード化表現(coded representation)を形成するビットのシーケンスを含み得る。ビットストリームは、コーディングされたピクチャおよび関連データを含み得る。コーディングされたピクチャは、ピクチャのコード化表現である。
[0053]図2Aは、本開示で説明される態様にしたがった技法を実施し得るビデオエンコーダ20の例を例示するブロック図である。ビデオエンコーダ20は、本開示の技法のうちのいくつかまたは全てを実行するように構成され得る。いくつかの例では、本開示で説明される技法は、ビデオエンコーダ20の様々なコンポーネントの間で共有され得る。いくつかの例では、加えてまたは代わりとして、プロセッサ(図示せず)が、本開示で説明される技法のうちのいくつかまたは全てを実行するように構成され得る。
BF=((BufferCurrentSize*100)/BufferMaxSize)
[0061]BFを計算することに対する上記手法が単なる例であること、および、BFが、特定の実装またはコンテキストに応じて、いずれの数の異なる方法でも計算され得ることに留意されたい。
[0069]図2Bは、本開示で説明される態様にしたがった技法を実施し得るビデオデコーダ30の例を例示するブロック図である。ビデオデコーダ30は、本開示の技法のうちのいくつかまたは全てを実行するように構成され得る。いくつかの例では、本開示で説明される技法は、ビデオデコーダ30の様々なコンポーネントの間で共有され得る。いくつかの例では、加えてまたは代わりとして、プロセッサ(図示せず)が、本開示で説明される技法のうちのいくつかまたは全てを実行するように構成され得る。
[0072]上で説明されたように、エンコーダ20の予測器、量子化器、および再構築器コンポーネント125は、ビデオデータのブロックにおいて歪みをもたらし得る量子化を実行し得る。歪みの量は、ブロックの量子化パラメータ(QP)によって制御され得る。たとえば、エンコーダ20は、ブロックのビデオデータの色成分の値を量子化するための量子化ステップサイズを決定するために、ブロックについてのQPを使用し得る。いくつかの実施形態では、エンコーダ20が各QPについての量子化ステップサイズを記憶する代わりに、エンコーダ20は、QPの関数としてスケーリング行列を指定し得る。各QPについての量子化ステップサイズは、スケーリング行列から導かれることができ、ここにおいて、該導かれた値は、必ずしも2の累乗であるわけではなく、たとえば、導かれた値は、2の累乗でない(non-power of two)こともあり得る。
[0074]ビデオデータの所与のブロックにおける単一の成分の全ての値が0である場合、エンコーダ20は、スキップモードを使用してブロックを効果的にコーディングし得る。スキップモードコーディングのいくつかの実施形態では、エンコーダ20は、デコーダ30によって読み出され得る1ビットフラグをシグナリングし得、これは、現在のブロックが、スキップモードを使用してコーディングされているのか(全ての値が0である場合)、またはスキップモードではコーディングされていないか(ブロックにおける少なくとも1つの値が非0である場合)を示す。
[0075]図3は、デルタサイズユニット可変長コーディング(DSU−VLC)を使用してビデオデータをコーディングする例を図示する。いくつかの実施形態では、エンコーダ20は、(「グループ」とも称される)K長サンプルベクトル302の量子化された残差値を、コーディングされたビットのシーケンス306にコーディングするためにDSU−VLCプロセッサ304を使用し得る。コーディングされたビットのシーケンス306は、プレフィックス308およびサフィックス310を備え得、ここにおいて、サフィックス310は、複数のサフィックス部分を備える。DSU−VLCプロセッサ304は、図2Aで例示されたエントロピーエンコーダ140に対応し得る。本明細書で使用される場合、サンプルは、単一の色成分における値を指し得、たとえばRGB444では、各ピクセルは3つのサンプルを有する。
[0078]図4は、いくつかの実施形態にしたがった、ビデオデータの所与のP×Qブロックのサンプルを複数のサンプルベクトル(グループ)に区分化する例を例示する。図4で例示されているように、ブロック402は、16個のサンプルを備える2×8ブロックであり得る。ブロック402の各サンプルは、ブロック402に対応するビデオデータの特定の色成分の量子化された残差値に対応し得る。サンプルがDSU−VLCプロセッサ304を使用してコーディングされる前に、エンコーダ20は、サンプルを複数のサンプルベクトルに区分化し得る。たとえば、図4は、各々が4つのサンプルを備える4つのサンプルベクトル404(たとえば、サンプルベクトル404A、404B、404C、および404D)に区分化されたブロック402の16個のサンプルを例示している。DSU−VLCプロセッサ304は、各々が(たとえば、図3で例示されたような)プレフィックスおよびサフィックスを有するコード(図示せず)を作り出すようにサンプルベクトル404A−404Dをコーディングし得る。上で説明されたように、(図2Bで例示されたような)デコーダ30は、コードの各々のプレフィクスおよびサフィックスを並行して復号できることがあり、これにより、デコーダ30は、クロックサイクルごとに4つのサンプルを復号することが可能になる。
[0081]いくつかの実施形態では、レートコントローラ120が、(currQPと表示される)ビデオデータの現在のブロックについてのQPを導き得る、または計算し得る。QPを計算するための技法は、2015年4月13日付で出願され、現在では米国出願公開第2015/0296206号として公開されている、米国出願第14/685,430号において開示されており、これは、参照によって全体として本明細書に組み込まれている。そこで説明されているように、レートコントローラ120は、以下の数式を使用して、ビデオデータの前のブロック(たとえば、ビデオデータの、コーディング順序で前のブロック)のQPに基づいて、現在のブロックについてのQP(currQP)を導き得る:
currQP=prevQP+QpAdj*(diffBits>0?1:−1)
ここで、prevQPは、前ブロックに関連付けられたQPであり、diffBitsは、previousBlockBitsとtargetBitsとの間の差分を表し、QpAdjは、diffBitsの大きさに基づいて計算されるQPオフセット値である。previousBlockBitsは、前ブロックをコーディングするために使用されたビット数に対応するのに対し、targetBitsは、現在のブロックを符号化するためのターゲットビット数に対応する。
[0088]DSCでは、バッファ150のバッファフルネスに基づいて、ビデオデータの現在のブロックのQPを更新するために、レートコントローラ120によって様々なモードが使用され得る。たとえば、いくつかの実施形態では、バッファ150のバッファフルネスがある特定のしきい値に下回る、またはしきい値を超えるとき、QpAdjを計算するためにデフォルトの方法を使用する代わりに、currQPを決定するようQpAdjを計算するために、レートコントローラ120によって様々な方法が使用され得る。
[0089]上で説明されたように、いくつかの実施形態では、レートコントローラ120は、バッファ150のバッファフルネスの量に応じて、様々に(differently)QpAdjの値を計算し得る。たとえば、いくつかの実施形態では、レートコントローラ120は、単調な降順で配列されたn個のしきい値に対応し得る、複数のしきい値[P1、P2、...Pn]を維持し得る。加えて、レートコントローラ120は、QpAdjを計算するために使用され得る複数のそれぞれの方法[方法P1、方法P2、...方法Pn]を維持し得る。レートコントローラ120は、バッファ150のバッファフルネスと複数のしきい値との間の関係に基づいて、QpAdjを計算するための特定の方法を選択し得る。たとえば、いくつかの実施形態では、
If(バッファフルネス>=P1)
方法P1がQpAdjを計算するために使用される;
else if(バッファフルネス>=P2)
方法P2がQpAdjを計算するために使用される;
…
else if(バッファフルネス>=Pn)
方法PnがQpAdjを計算するために使用される;
である。
[0095]いくつかの実施形態では、レートコントローラ120は、バッファ150のバッファフルネスが1つまたは複数のしきい値未満であることに基づいて、QpAdj(および結果としてcurrQP)の値を計算するために異なる方法を使用し得る。たとえば、いくつかの実施形態では、レートコントローラ120は、単調な昇順で配列されたm個のしきい値[Q1、Q2、...Qm]、およびQpAdjを計算するためにレートコントローラ120によって使用されるそれぞれの方法[方法Q1、方法Q2、...方法Qm]を維持し得る。たとえば、いくつかの実施形態では、レートコントローラ120は、以下に基づいて、QpAdjを計算するための特定の方法を選択し得る:
If(バッファフルネス<=Q1)
方法Q1がQpAdjを計算するために使用される;
else if(バッファフルネス<=Q2)
方法Q2がQpAdjを計算するために使用される;
…
else if(バッファフルネス<=Qm)
方法QmがQpAdjを計算するために使用される;
[0099]いくつかの実施形態では、バッファ150の状態に基づいてビデオデータの現在のブロックのQP値(currQP)を調整できるために、レートコントローラ120がバッファ150についての正確なバッファフルネス(BF)値を決定できることが必要であり得る。いくつかの実施形態では、バッファ150において利用可能な最大ビット数は、エンコーダ20がビデオデータのブロックを符号化すると、調整され得る。たとえば、スライスの終了時、バッファ150のサイズ(たとえば、スライスの終了時にバッファ150に含まれることができる最大ビット数)がmaxBufferBitsAtSliceEndによって表示され得るような形で、バッファ150のサイズは、スライス中の何らかの固定数のブロックをコーディングした後に一定レートで線形に減少し得る。このように、ビデオデータの所与のスライスの終了時に、バッファ150のBFは、BufferCurrentSize=maxBufferBitsAtSliceEndである場合、100%である。
BF=(((BufferCurrentSize*100)+(bufAdjSize>>1))/bufAdjSize) (1)
の通りにバッファ150のBFを計算し得、ここで、bufferAdjSize=BufferMaxSize-offset,offset=((bufferRateReductionPerBlock)*(numBlocksCoded-numBlocksTh))である。本明細書で使用される場合、numBlocksCodedは、それまでのスライス中の、エンコーダ20によってコーディングされたブロックの数を表し得、numBlocksThは、エンコーダ20によって設定可能であるしきい値パラメータに対応し得る。
BF=(((BufferCurrentSize+offset)*100)+(BufferMaxSize>>1))/BufferMaxSize) (2)
の通りに修正され得る。
[0104]いくつかの実施形態では、レートコントローラ120は、ビデオデータの現在のブロックについてのQP値を計算するとき、最大QP値を強要し得る。(QPしきい値(threshold QP value)とも称される)最大QP値は、ビデオデータをコーディングするときの、量子化ロスまたは歪みの許容可能な量を示す上限の役割を果たし得る。たとえば、いくつかの実施形態では、レートコントローラ120は、上で説明された技法のうちの任意のものを使用して、ビデオデータの現在のブロックについてのcurrQP値を計算し得る。レートコントローラ120はその後、該計算されたcurrQPを最大QP値と比較し得る。該計算されたcurrQPが最大QP値を超える場合、レートコントローラ120は、最大QP値以下になるようにcurrQPを設定し得る。
δ=δdefault;
if(BF>=L1)
δ=δ1 ’;
else if(BF>=L2)
δ=δ2 ’;
…
else if(BF>=Lm)
δ=δm ’;
if(BF<=S1)
δ=δ1 ’’;
else if(BF<=S2)
δ=δ2 ’’;
…
else if(BF<=Sn)
δ=δn ’’;
[0126]上で説明されたように、レートコントローラ120は、maxCalQp=maxFixedQp−δの通りに最大QP値を調整するためにオフセット値δを使用し得る。上記実施では、「以下(less than and equal to)」という指定は、厳密には「より小さい(less than)」によって置き換えられることができる。同様に、「以上(greater than and equal to)」という指定は、厳密には「より大きい(greater than)」によって置き換えられることができる。いくつかの実施形態では、nおよびmは同じであり得るか、または同じでないことがある。
[0134]図10は、バッファフルネス(BF)の異なる範囲に対するオフセットデルタ値を選ぶための実例的なスキームのグラフを例示する。図10で例示されているグラフは、図9で例示されているものと類似しており、ここにおいて、バッファ150のバッファフルネス値は、軸の左側の最小BF(Min BF)から軸の右側の最大BF(Max BF)までの範囲に広がる横軸上で示されている。いくつかの実施形態では、軸上で表されているBF値は、パーセンテージの値に対応し得る。たとえば、Min BFは0%に対応し得るのに対し、Max BFは100%に対応し得る。加えて、図9にあるように、図10のグラフは、横軸に沿って位置する複数のしきい値を示している。図10で例示されているスキームでは、レートコントローラ120は、(横軸の左側に示されている)[12、24]の値を有するn=2つの小さい方のしきい値[S1、S2]、および(横軸の右側に示されている)[88、76]の値を有するm=2つの大きい方のしきい値[L1、L2]を維持し得る。
[0137]いくつかの実施形態では、レートコントローラ120はさらに、コーディングされるべきビデオデータに関連付けられた1つまたは複数のピクチャパラメータ(たとえば、ソースビット深度(source bit depth)、圧縮ビットレート(compressed bitrate)、および/または同様のもの)に基づいて、最大QP(max QP)を調整し得る。たとえば、いくつかの実施形態では、ビデオデータのソースビット深度についてのデフォルトの値は、たとえば、成分ごとに8ビットであり得る。そのようなケースでは、最大QPは、以下の通りに調整され得る:
maxQp=maxQp+((bitDepth−8)≪a)
ここで、パラメータaは、チューニングされ得る(たとえば、パラメータaは、レートコントローラ120によって修正され得る)。たとえば、アドバンスドDSC(A−DSC)では、a=2のデフォルトの値が使用され得る。
maxQp=maxQp+((bitDepth−bd)≪a)
maxQp=maxQp+(((96−bpp)≫m)≪b0)
maxQp=maxQp−(((bpp−96)≫m)≪b1)
ここで、b0およびb1は、maxQpにオフセット量をスケーリングするための所定の固定値に対応し得る。いくつかの実施形態では、m、b0、およびb1の値は、m=4、b0=3、b1=2であり得る。他の実施形態では、最大QPについての上記数式が、デフォルトの圧縮ビットレート値の変化に基づいて修正され得ることは理解される。
・ソースビット深度に基づいて最大QPを修正する。
・圧縮ビットレートに基づいて最大QPをさらに修正する。
[0145]図11は、ビデオデータのブロックをコーディングするための最大QP値を調整することについての実例的なプロセスのフローチャートを図示する。ブロック1102で、レートコントローラ120は、デフォルトの最大QP値を決定し得る。いくつかの実施形態では、最大QP値は、所定の値であり得る。
以下に本願の出願当初の特許請求の範囲に記載された発明を付記する。
[C1] ビデオ情報をコーディングするための装置であって、
コーディングされたビデオ情報を記憶するように構成されたバッファユニットと、
ハードウェアプロセッサとを備え、前記プロセッサは、
前記バッファユニットのバッファフルネスを決定することと、前記バッファフルネスは、前記バッファユニット中で現在占有されているビット数と、前記バッファユニットの現在の容量との間の比を示す、
初期最大量子化パラメータ(QP)値を決定することと、
前記バッファユニットの前記決定されたバッファフルネスに少なくとも部分的に基づいて、調整値を決定することと、
前記決定された調整値を使用して前記初期最大QP値を調整することと、ここにおいて、前記調整された最大QP値は、前記ビデオ情報の前記現在のブロックをコーディングするために使用され得る最大QP値を指定する、
ディスプレイまたは送信のためにビデオデータビットストリームを形成するようにQP値に基づいて、前記QP値が前記調整された最大QP値を超えないことがあるという制限に従い、ビデオ情報の前記現在のブロックをコーディングすることと、
を行うように構成される、
装置。
[C2] 前記ハードウェアプロセッサは、前記バッファユニットの前記バッファフルネスが、より高い第1のフルネスしきい値とより低い第2のフルネスしきい値との間のレベルにあるとき、デフォルトの調整値に前記調整値を設定するようにさらに構成され、前記デフォルトの調整値は0より大きい、C1に記載の装置。
[C3] 前記ハードウェアプロセッサは、前記デフォルトの調整値よりも高い値に前記調整値を設定するようにさらに構成され、ここにおいて、前記バッファユニットの前記バッファフルネスは前記第2のフルネスしきい値より低い、C2に記載の装置。
[C4] 前記ハードウェアプロセッサは、前記デフォルトの調整値よりも低い値に前記調整値を設定するようにさらに構成され、ここにおいて、前記バッファユニットの前記バッファフルネスは前記第1のフルネスしきい値より高い、C2に記載の装置。
[C5] 前記ハードウェアプロセッサは、ビデオ情報の前のブロックをコーディングするのに費やされたビット数に少なくとも部分的に基づいて導かれる複雑度値を決定するようにさらに構成され、前記調整値はさらに、前記決定された複雑度値に少なくとも部分的に基づく、C1に記載の装置。
[C6] 前記QP値はさらに、前記バッファユニットの前記バッファフルネスに少なくとも部分的に基づく、C1に記載の装置。
[C7] 前記調整値はさらに、コーディングされるべき前記ビデオ情報のビット深度に少なくとも部分的に基づく、C1に記載の装置。
[C8] 前記調整値はさらに、コーディングされるべき前記ビデオ情報の圧縮ビットレートに少なくとも部分的に基づく、C1に記載の装置。
[C9] 前記バッファユニットは、固定レートで前記ビデオデータビットストリームにコーディングされたビデオデータのビットを出力するようにさらに構成される、C1に記載の装置。
[C10] ビデオ情報をコーディングするための方法であって、
コーディングされたビデオ情報を記憶するように構成されたバッファユニットのバッファフルネスを決定することと、前記バッファフルネスは、前記バッファユニット中で現在占有されているビット数と、前記バッファユニットの現在の容量との間の比を示す、
初期最大量子化パラメータ(QP)値を決定することと、
前記バッファユニットの前記決定されたバッファフルネスに少なくとも部分的に基づいて、調整値を決定することと、
前記決定された調整値を使用して前記初期最大QP値を調整することと、ここにおいて、前記調整された最大QP値は、前記ビデオ情報の前記現在のブロックをコーディングするために使用され得る最大QP値を指定する、
ディスプレイまたは送信のためにビデオデータビットストリームを形成するようにQP値に基づいて、前記QP値が前記調整された最大QP値を超えないことがあるという制限に従い、ビデオ情報の前記現在のブロックをコーディングすることと、
を備える、方法。
[C11] 前記バッファユニットの前記バッファフルネスが、より高い第1のフルネスしきい値とより低い第2のフルネスしきい値との間のレベルにあるとき、デフォルトの調整値に前記調整値を設定することをさらに備え、前記デフォルトの調整値は0より大きい、C10に記載の方法。
[C12] 前記デフォルトの調整値よりも高い値に前記調整値を設定することをさらに備え、ここにおいて、前記バッファユニットの前記バッファフルネスは前記第2のフルネスしきい値より低い、C11に記載の方法。
[C13] 前記デフォルトの調整値よりも低い値に前記調整値を設定することをさらに備え、ここにおいて、前記バッファユニットの前記バッファフルネスは前記第1のフルネスしきい値より高い、C11に記載の方法。
[C14] ビデオ情報の前のブロックをコーディングするのに費やされたビット数に少なくとも部分的に基づいて導かれる複雑度値を決定することをさらに備え、前記調整値はさらに、前記決定された複雑度値に少なくとも部分的に基づく、C10に記載の方法。
[C15] 前記QP値はさらに、前記バッファユニットの前記バッファフルネスに少なくとも部分的に基づく、C10に記載の方法。
[C16] 前記調整値はさらに、コーディングされるべき前記ビデオ情報のビット深度に少なくとも部分的に基づく、C10に記載の方法。
[C17] 前記調整値はさらに、コーディングされるべき前記ビデオ情報の圧縮ビットレートに少なくとも部分的に基づく、C10に記載の方法。
[C18] 前記バッファユニットは、固定レートで前記ビデオデータビットストリームにコーディングされたビデオデータのビットを出力するようにさらに構成される、C10に記載の方法。
[C19] ビデオ情報をコーディングするための装置であって、
コーディングされたビデオ情報を記憶するためのバッファ手段と、
前記バッファ手段のバッファフルネスを決定するための手段と、前記バッファフルネスは、前記バッファ手段中で現在占有されているビット数と、前記バッファ手段の現在の容量との間の比を示す、
初期最大量子化パラメータ(QP)値を決定するための手段と、
前記バッファ手段の前記決定されたバッファフルネスに少なくとも部分的に基づいて、調整値を決定するための手段と、
前記決定された調整値を使用して前記初期最大QP値を調整するための手段と、ここにおいて、前記調整された最大QP値は、前記ビデオ情報の前記現在のブロックをコーディングするために使用され得る最大QP値を指定する、
ディスプレイまたは送信のためにビデオデータビットストリームを形成するようにQP値に基づいて、前記QP値が前記調整された最大QP値を超えないことがあるという制限に従い、ビデオ情報の前記現在のブロックをコーディングするための手段と、
を備える、装置。
[C20] 前記調整値を決定するための前記手段は、前記バッファ手段の前記バッファフルネスが、より高い第1のフルネスしきい値とより低い第2のフルネスしきい値との間のレベルにあるとき、デフォルトの調整値に前記調整値を設定するように構成され、前記デフォルトの調整値は0より大きい、C19に記載の装置。
[C21] 前記調整値を決定するための前記手段は、前記デフォルトの調整値よりも高い値に前記調整値を設定するようにさらに構成され、ここにおいて、前記バッファ手段の前記バッファフルネスは前記第2のフルネスしきい値より低い、C20に記載の装置。
[C22] 前記調整値を決定するための前記手段は、前記デフォルトの調整値よりも低い値に前記調整値を設定するようにさらに構成され、ここにおいて、前記バッファ手段の前記バッファフルネスは前記第1のフルネスしきい値より高い、C20に記載の装置。
[C23] ビデオ情報の前のブロックをコーディングするのに費やされたビット数に少なくとも部分的に基づいて導かれる複雑度値を決定するための手段をさらに備え、前記調整値はさらに、前記決定された複雑度値に少なくとも部分的に基づく、C19に記載の装置。
[C24] 前記QP値はさらに、前記バッファユニットの前記バッファフルネスに少なくとも部分的に基づく、C19に記載の装置。
[C25] 前記調整値はさらに、コーディングされるべき前記ビデオ情報のビット深度に少なくとも部分的に基づく、C19に記載の装置。
[C26] 前記調整値はさらに、コーディングされるべき前記ビデオ情報の圧縮ビットレートに少なくとも部分的に基づく、C19に記載の装置。
[C27] 前記バッファ手段は、固定レートで前記ビデオデータビットストリームにコーディングされたビデオデータのビットを出力するようにさらに構成される、C19に記載の装置。
Claims (27)
- ビデオ情報をコーディングするための装置であって、
コーディングされたビデオ情報を記憶するように構成されたバッファユニットと、
ハードウェアプロセッサとを備え、前記プロセッサは、
前記バッファユニットのバッファフルネスを決定することと、前記バッファフルネスは、前記バッファユニット中で現在占有されているビット数と、前記バッファユニットの現在の容量との間の比を示す、
初期最大量子化パラメータ(QP)値を決定することと、
前記バッファユニットの前記決定されたバッファフルネスに少なくとも部分的に基づいて、調整値を決定することと、
前記決定された調整値を使用して前記初期最大QP値を調整することと、ここにおいて、前記調整された最大QP値は、前記ビデオ情報の前記現在のブロックをコーディングするために使用され得る最大QP値を指定する、
ディスプレイまたは送信のためにビデオデータビットストリームを形成するようにQP値に基づいて、前記QP値が前記調整された最大QP値を超えないことがあるという制限に従い、ビデオ情報の前記現在のブロックをコーディングすることと、
を行うように構成される、
装置。 - 前記ハードウェアプロセッサは、前記バッファユニットの前記バッファフルネスが、より高い第1のフルネスしきい値とより低い第2のフルネスしきい値との間のレベルにあるとき、デフォルトの調整値に前記調整値を設定するようにさらに構成され、前記デフォルトの調整値は0より大きい、請求項1に記載の装置。
- 前記ハードウェアプロセッサは、前記デフォルトの調整値よりも高い値に前記調整値を設定するようにさらに構成され、ここにおいて、前記バッファユニットの前記バッファフルネスは前記第2のフルネスしきい値より低い、請求項2に記載の装置。
- 前記ハードウェアプロセッサは、前記デフォルトの調整値よりも低い値に前記調整値を設定するようにさらに構成され、ここにおいて、前記バッファユニットの前記バッファフルネスは前記第1のフルネスしきい値より高い、請求項2に記載の装置。
- 前記ハードウェアプロセッサは、ビデオ情報の前のブロックをコーディングするのに費やされたビット数に少なくとも部分的に基づいて導かれる複雑度値を決定するようにさらに構成され、前記調整値はさらに、前記決定された複雑度値に少なくとも部分的に基づく、請求項1に記載の装置。
- 前記QP値はさらに、前記バッファユニットの前記バッファフルネスに少なくとも部分的に基づく、請求項1に記載の装置。
- 前記調整値はさらに、コーディングされるべき前記ビデオ情報のビット深度に少なくとも部分的に基づく、請求項1に記載の装置。
- 前記調整値はさらに、コーディングされるべき前記ビデオ情報の圧縮ビットレートに少なくとも部分的に基づく、請求項1に記載の装置。
- 前記バッファユニットは、固定レートで前記ビデオデータビットストリームにコーディングされたビデオデータのビットを出力するようにさらに構成される、請求項1に記載の装置。
- ビデオ情報をコーディングするための方法であって、
コーディングされたビデオ情報を記憶するように構成されたバッファユニットのバッファフルネスを決定することと、前記バッファフルネスは、前記バッファユニット中で現在占有されているビット数と、前記バッファユニットの現在の容量との間の比を示す、
初期最大量子化パラメータ(QP)値を決定することと、
前記バッファユニットの前記決定されたバッファフルネスに少なくとも部分的に基づいて、調整値を決定することと、
前記決定された調整値を使用して前記初期最大QP値を調整することと、ここにおいて、前記調整された最大QP値は、前記ビデオ情報の前記現在のブロックをコーディングするために使用され得る最大QP値を指定する、
ディスプレイまたは送信のためにビデオデータビットストリームを形成するようにQP値に基づいて、前記QP値が前記調整された最大QP値を超えないことがあるという制限に従い、ビデオ情報の前記現在のブロックをコーディングすることと、
を備える、方法。 - 前記バッファユニットの前記バッファフルネスが、より高い第1のフルネスしきい値とより低い第2のフルネスしきい値との間のレベルにあるとき、デフォルトの調整値に前記調整値を設定することをさらに備え、前記デフォルトの調整値は0より大きい、請求項10に記載の方法。
- 前記デフォルトの調整値よりも高い値に前記調整値を設定することをさらに備え、ここにおいて、前記バッファユニットの前記バッファフルネスは前記第2のフルネスしきい値より低い、請求項11に記載の方法。
- 前記デフォルトの調整値よりも低い値に前記調整値を設定することをさらに備え、ここにおいて、前記バッファユニットの前記バッファフルネスは前記第1のフルネスしきい値より高い、請求項11に記載の方法。
- ビデオ情報の前のブロックをコーディングするのに費やされたビット数に少なくとも部分的に基づいて導かれる複雑度値を決定することをさらに備え、前記調整値はさらに、前記決定された複雑度値に少なくとも部分的に基づく、請求項10に記載の方法。
- 前記QP値はさらに、前記バッファユニットの前記バッファフルネスに少なくとも部分的に基づく、請求項10に記載の方法。
- 前記調整値はさらに、コーディングされるべき前記ビデオ情報のビット深度に少なくとも部分的に基づく、請求項10に記載の方法。
- 前記調整値はさらに、コーディングされるべき前記ビデオ情報の圧縮ビットレートに少なくとも部分的に基づく、請求項10に記載の方法。
- 前記バッファユニットは、固定レートで前記ビデオデータビットストリームにコーディングされたビデオデータのビットを出力するようにさらに構成される、請求項10に記載の方法。
- ビデオ情報をコーディングするための装置であって、
コーディングされたビデオ情報を記憶するためのバッファ手段と、
前記バッファ手段のバッファフルネスを決定するための手段と、前記バッファフルネスは、前記バッファ手段中で現在占有されているビット数と、前記バッファ手段の現在の容量との間の比を示す、
初期最大量子化パラメータ(QP)値を決定するための手段と、
前記バッファ手段の前記決定されたバッファフルネスに少なくとも部分的に基づいて、調整値を決定するための手段と、
前記決定された調整値を使用して前記初期最大QP値を調整するための手段と、ここにおいて、前記調整された最大QP値は、前記ビデオ情報の前記現在のブロックをコーディングするために使用され得る最大QP値を指定する、
ディスプレイまたは送信のためにビデオデータビットストリームを形成するようにQP値に基づいて、前記QP値が前記調整された最大QP値を超えないことがあるという制限に従い、ビデオ情報の前記現在のブロックをコーディングするための手段と、
を備える、装置。 - 前記調整値を決定するための前記手段は、前記バッファ手段の前記バッファフルネスが、より高い第1のフルネスしきい値とより低い第2のフルネスしきい値との間のレベルにあるとき、デフォルトの調整値に前記調整値を設定するように構成され、前記デフォルトの調整値は0より大きい、請求項19に記載の装置。
- 前記調整値を決定するための前記手段は、前記デフォルトの調整値よりも高い値に前記調整値を設定するようにさらに構成され、ここにおいて、前記バッファ手段の前記バッファフルネスは前記第2のフルネスしきい値より低い、請求項20に記載の装置。
- 前記調整値を決定するための前記手段は、前記デフォルトの調整値よりも低い値に前記調整値を設定するようにさらに構成され、ここにおいて、前記バッファ手段の前記バッファフルネスは前記第1のフルネスしきい値より高い、請求項20に記載の装置。
- ビデオ情報の前のブロックをコーディングするのに費やされたビット数に少なくとも部分的に基づいて導かれる複雑度値を決定するための手段をさらに備え、前記調整値はさらに、前記決定された複雑度値に少なくとも部分的に基づく、請求項19に記載の装置。
- 前記QP値はさらに、前記バッファユニットの前記バッファフルネスに少なくとも部分的に基づく、請求項19に記載の装置。
- 前記調整値はさらに、コーディングされるべき前記ビデオ情報のビット深度に少なくとも部分的に基づく、請求項19に記載の装置。
- 前記調整値はさらに、コーディングされるべき前記ビデオ情報の圧縮ビットレートに少なくとも部分的に基づく、請求項19に記載の装置。
- 前記バッファ手段は、固定レートで前記ビデオデータビットストリームにコーディングされたビデオデータのビットを出力するようにさらに構成される、請求項19に記載の装置。
Applications Claiming Priority (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662311586P | 2016-03-22 | 2016-03-22 | |
US62/311,586 | 2016-03-22 | ||
US201662329160P | 2016-04-28 | 2016-04-28 | |
US62/329,160 | 2016-04-28 | ||
US15/465,328 | 2017-03-21 | ||
US15/465,328 US20170280139A1 (en) | 2016-03-22 | 2017-03-21 | Apparatus and methods for adaptive calculation of quantization parameters in display stream compression |
PCT/US2017/023604 WO2017165529A1 (en) | 2016-03-22 | 2017-03-22 | Apparatus and methods for adaptive calculation of quantization parameters in display stream compression |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019512970A true JP2019512970A (ja) | 2019-05-16 |
JP2019512970A5 JP2019512970A5 (ja) | 2020-04-09 |
Family
ID=59899111
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018549570A Pending JP2019512970A (ja) | 2016-03-22 | 2017-03-22 | ディスプレイストリーム圧縮における量子化パラメータの適応計算のための装置および方法 |
Country Status (9)
Country | Link |
---|---|
US (1) | US20170280139A1 (ja) |
EP (1) | EP3434017B1 (ja) |
JP (1) | JP2019512970A (ja) |
KR (1) | KR20180122354A (ja) |
CN (1) | CN108702513B (ja) |
BR (1) | BR112018069086A2 (ja) |
CA (1) | CA3014931A1 (ja) |
TW (1) | TWI743098B (ja) |
WO (1) | WO2017165529A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7447258B2 (ja) | 2020-06-11 | 2024-03-11 | テンセント・アメリカ・エルエルシー | 修正された量子化器 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10638133B2 (en) | 2018-01-31 | 2020-04-28 | Qualcomm Incorporated | Delta quantization parameter (QP) coding options for video |
US10924739B2 (en) * | 2018-10-31 | 2021-02-16 | Ati Technologies Ulc | Efficient quantization parameter prediction method for low latency video coding |
KR102621118B1 (ko) * | 2018-11-01 | 2024-01-04 | 삼성전자주식회사 | 영상 적응적 양자화 테이블을 이용한 영상의 부호화 장치 및 방법 |
JP7434545B2 (ja) * | 2019-10-28 | 2024-02-20 | エルジー エレクトロニクス インコーポレイティド | 色空間変換を用いる画像符号化/復号化方法、装置、及びビットストリームを伝送する方法 |
CN113038136B (zh) * | 2019-12-25 | 2022-10-11 | 成都鼎桥通信技术有限公司 | 一种视频自适应调整方法和装置 |
CN117676141A (zh) * | 2022-09-08 | 2024-03-08 | 华为技术有限公司 | 图像编解码方法、装置、编码器、解码器和系统 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7313318B2 (en) * | 1998-06-17 | 2007-12-25 | Victor Company Of Japan, Limited | Video signal encoding and recording apparatus with variable transmission rate |
US6535251B1 (en) * | 1999-10-26 | 2003-03-18 | Sharplabs Of America, Inc. | Video encoder and method for adjusting quantization step in real time |
JP4492777B2 (ja) * | 2001-08-28 | 2010-06-30 | 日本電気株式会社 | 動画像符号化装置 |
US20090310672A1 (en) * | 2008-06-13 | 2009-12-17 | W&W Communications, Inc. | Method and System for Rate Control in a Video Encoder |
US8879623B2 (en) * | 2009-09-02 | 2014-11-04 | Sony Computer Entertainment Inc. | Picture-level rate control for video encoding a scene-change I picture |
US8483272B2 (en) * | 2010-09-24 | 2013-07-09 | Intel Corporation | System and method for frame level bit rate control without pre-analysis |
US20130142250A1 (en) * | 2011-12-06 | 2013-06-06 | Broadcom Corporation | Region based classification and adaptive rate control method and apparatus |
CN102724510B (zh) * | 2012-06-21 | 2014-05-28 | 中科开元信息技术(北京)有限公司 | 一种基于虚拟编码缓冲区充盈度的码率控制算法 |
US9883180B2 (en) * | 2012-10-03 | 2018-01-30 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Bounded rate near-lossless and lossless image compression |
EP2952003B1 (en) * | 2013-01-30 | 2019-07-17 | Intel Corporation | Content adaptive partitioning for prediction and coding for next generation video |
GB2516021A (en) * | 2013-07-05 | 2015-01-14 | Canon Kk | Method, device, and computer program for pre-encoding and post-decoding high bit-depth content in video encoder and decoder |
US9848193B2 (en) | 2014-04-15 | 2017-12-19 | Qualcomm Incorporated | System and method for selecting quantization parameter (QP) in display stream compression (DSC) |
US9979970B2 (en) * | 2014-08-08 | 2018-05-22 | Qualcomm Incorporated | System and method for determining buffer fullness for display stream compression |
-
2017
- 2017-03-21 US US15/465,328 patent/US20170280139A1/en not_active Abandoned
- 2017-03-22 WO PCT/US2017/023604 patent/WO2017165529A1/en active Application Filing
- 2017-03-22 CA CA3014931A patent/CA3014931A1/en active Pending
- 2017-03-22 EP EP17719370.3A patent/EP3434017B1/en active Active
- 2017-03-22 JP JP2018549570A patent/JP2019512970A/ja active Pending
- 2017-03-22 BR BR112018069086A patent/BR112018069086A2/pt not_active IP Right Cessation
- 2017-03-22 TW TW106109611A patent/TWI743098B/zh active
- 2017-03-22 CN CN201780015800.2A patent/CN108702513B/zh active Active
- 2017-03-22 KR KR1020187026666A patent/KR20180122354A/ko not_active Application Discontinuation
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7447258B2 (ja) | 2020-06-11 | 2024-03-11 | テンセント・アメリカ・エルエルシー | 修正された量子化器 |
Also Published As
Publication number | Publication date |
---|---|
CN108702513A (zh) | 2018-10-23 |
EP3434017C0 (en) | 2024-02-28 |
EP3434017B1 (en) | 2024-02-28 |
TW201737708A (zh) | 2017-10-16 |
TWI743098B (zh) | 2021-10-21 |
WO2017165529A1 (en) | 2017-09-28 |
US20170280139A1 (en) | 2017-09-28 |
EP3434017A1 (en) | 2019-01-30 |
CA3014931A1 (en) | 2017-09-28 |
CN108702513B (zh) | 2022-06-07 |
BR112018069086A2 (pt) | 2019-01-22 |
KR20180122354A (ko) | 2018-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3284253B1 (en) | Rate-constrained fallback mode for display stream compression | |
EP3284257B1 (en) | Quantization parameter (qp) calculation for display stream compression (dsc) based on complexity measure | |
CN108702513B (zh) | 用于在显示流压缩中量化参数的适应性计算的设备及方法 | |
JP6449329B2 (ja) | ディスプレイストリーム圧縮(dsc)において量子化パラメータ(qp)を選択するためのシステムおよび方法 | |
EP3132605B1 (en) | System and method for lagrangian parameter calculation for display stream compression (dsc) | |
US10631005B2 (en) | System and method for coding in block prediction mode for display stream compression (DSC) | |
CN111726628B (zh) | 用于在显示流压缩(dsc)中固定点近似的系统和方法 | |
JP2018515016A (ja) | 表示ストリーム圧縮のための複雑領域検出 | |
US20160301939A1 (en) | Quantization parameter (qp) update classification for display stream compression (dsc) | |
KR102175662B1 (ko) | 디스플레이 스트림 압축 (dsc) 에서의 왜곡을 계산하기 위한 시스템 및 방법들 | |
KR102112942B1 (ko) | 디스플레이 스트림 압축에 대한 지각적 양자화 파라미터 (qp) 가중을 위한 장치 및 방법들 | |
EP3135034A1 (en) | System and method for coding in pattern mode for display stream compression (dsc) | |
US10123045B2 (en) | Modification to block size for transform mode in display stream compression |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181204 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200225 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210318 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210330 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210629 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20211012 |