JP2005524304A - ビデオ符号化システムにおける量子化器パラメータを表示するための方法および装置 - Google Patents

ビデオ符号化システムにおける量子化器パラメータを表示するための方法および装置 Download PDF

Info

Publication number
JP2005524304A
JP2005524304A JP2004500513A JP2004500513A JP2005524304A JP 2005524304 A JP2005524304 A JP 2005524304A JP 2004500513 A JP2004500513 A JP 2004500513A JP 2004500513 A JP2004500513 A JP 2004500513A JP 2005524304 A JP2005524304 A JP 2005524304A
Authority
JP
Japan
Prior art keywords
quantization
level
block
encoded
video sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004500513A
Other languages
English (en)
Other versions
JP4571489B2 (ja
Inventor
ライネマ,ヤニ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Oyj
Original Assignee
Nokia Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=29270538&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2005524304(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Nokia Oyj filed Critical Nokia Oyj
Publication of JP2005524304A publication Critical patent/JP2005524304A/ja
Application granted granted Critical
Publication of JP4571489B2 publication Critical patent/JP4571489B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

デジタルビデオシーケンスを符号化するための方法であって、量子化パラメータ(QP)の表示が、デコード目的のために、エンコードされたビットストリーム中で提供される。QP関連情報は、シーケンスレベル量子化パラメータ値SQPを導入することによって示される。より具体的には、ピクチャ/スライスQPの絶対値を符号化する代わりに、シーケンスレベル量子化パラメータSQPとピクチャ/スライスQPとの差分ΔQPの表示が提供される。これにより、すべてのピクチャ/スライスについて完全なQPを伝送する必要が排除され、統計的により小さい差分値を伝送することが可能になり、従って、伝送ビットレートの低減がもたらされる。差分値はその後、ピクチャ/スライスQPを再構成するために、対応するデコーダにおいて用いられる。

Description

本出願は2002年4月23日提出の米国仮出願番号第60/374,667号に基づくものであり、この米国仮出願の優先権を主張する。
本発明は、デジタルビデオの符号化のための方法、エンコーダ、デコーダおよび装置に関する。より具体的には、本発明は、ビデオ符号化システムにおける量子化パラメータ(QP)値の表示に関する。
デジタルビデオシーケンスは、フィルムに記録された通常の映画のように、一連の静止画像を含み、それらの画像を、典型的には毎秒15〜30フレームのレートで次々に表示することにより動きの幻覚が作り出される。
非圧縮のデジタルビデオシーケンスの各フレームは、画像ピクセルの配列を含む。クオーター共通交換形式(Quarter Common Interchange Format)(QCIF)として知られる、一般に用いられるデジタル画像形式において、1つのフレームは、176×144ピクセル(すなわち、25,344ピクセル)の配列を含む。次に、各ピクセルは、ピクセルに対応する画像の領域の輝度および/または色コンテンツについての情報を伝える一定の数のビットにより表される。一般的に、画像の輝度およびクロミナンスコンテンツを表すために、いわゆるYUVカラーモデルが用いられる。輝度、すなわちY、成分は画像の強度(明るさ)を表すのに対して、画像の色コンテンツは、UおよびVと名付けられた2つのクロミナンスすなわち色差成分により表される。
画像コンテンツの輝度/クロミナンス表現に基づくカラーモデルは、原色(すなわち、赤、緑および青、RGB)を伴う表現に基づくカラーモデルと比較して一定の利点を提供する。人間の視覚系は、色変化に対するよりも強度変化に対してより敏感であり、YUVカラーモデルは、輝度成分(Y)についてよりもクロミナンス成分(U,V)についてより低い空間解像度を用いることによりこの特性を利用している。このように、画像品質の許容できる低下をもって、画像中の色情報を符号化するために必要な情報量が低減できる。
クロミナンス成分のより低い空間解像度は通常、サブサンプリングによって達成される。典型的には、ビデオシーケンスの各フレームは、いわゆる“マクロブロック”に分割され、マクロブロックは、輝度(Y)情報および空間的にサブサンプリングされる関連クロミナンス(U,V)情報を含む。図1は、マクロブロックが形成できる1つの方法を例示している。図1に示されるように、ビデオシーケンスのフレームがYUVカラーモデルを用いて表され、各成分は同じ空間解像度を有している。マクロブロックは、オリジナル画像中の16×16画像ピクセルの領域を、4つの輝度情報ブロックとして表すことにより形成され、各輝度ブロックは、輝度(Y)値の8×8配列と、空間的に対応する2つのクロミナンス(UおよびV)成分とを含み、クロミナンス成分は、水平方向および垂直方向に両方で係数2によりサブサンプリングされて8×8クロミナンス(U,V)値の対応する配列を与える。国際電気通信連合(ITU−T)勧告H.26Lのような特定のビデオ符号化勧告によれば、マクロブロック内で用いられるブロックサイズは、8×8以外、例えば4×8または4×4とすることができる(T. Wiegand, "Joint Model Number 1", Doc. JVT-A003, Joint Video Team (JVT) of ISO/IEC MPEG and ITU-T VCEG, Jan. 2002, Sections 2.2 and 2.3を参照)。ITU−T勧告H.26Lは、マクロブロックを共にまとめて、いわゆる“スライス”を形成することも可能にしている。より具体的には、各スライスは多数の連続的なマクロブロックから符号化順序で形成され、同じフレームのどのような他のスライスも参照することなく独立してデコードできるようにエンコードされる。伝送エラーのため生じ得るデコードされたビデオ中の人工物の伝播を制限する傾向があるので、この段取りは有利である。スライスを構成できる方法には固有の制限は皆無であるが、1つの直接的な方式は、フレームの単独列中の全マクロブロックをスライスとしてまとめることである。この段取りは、QCIF形式画像の16×16マクロブロックへの分割と共に、図2において例示されている。
図2からわかるように、QCIF画像は、11×9個のマクロブロックを含む(この場合には、各々11個の連続マクロブロックの9個のスライスにグループ化されている)。輝度ブロックおよびクロミナンスブロックが8ビット解像度で(すなわち、0から255までの範囲の数により)表されるのであれば、マクロブロック毎に必要とされる総ビット数は、(16×16×8)+2×(8×8×8)=3072ビットである。QCIF形式のビデオフレームを表すために必要なビット数は、従って、99×3072=304,128ビットである。このことは、YUVカラーモデルを用いて表された、QCIF形式の非圧縮ビデオシーケンスを30フレーム/秒のレートで伝送/記録/表示するために必要とされるデータ量が9Mbps(100万ビット/秒)を超えることを意味している。これは極めて高いデータレートであり、必要とされる保存容量、伝送チャンネル容量およびハードウェア性能が非常に大きいため、ビデオ記録、伝送および表示用途での使用には非実用的である。
ビデオデータが、ISDN(Integrated Services Digital Network:統合サービスデジタル網)またはPSTN(Public Service Telephone Network:公衆電話網)のような固定回線網上をリアルタイムで伝送されるのであれば、利用可能なデータ伝送帯域幅は、典型的には64キロビット/秒程度である。伝送が少なくとも部分的に無線通信リンク上で行われる移動ビデオ電話技術において、利用可能な帯域幅は20キロビット/秒と低くなることがある。このことは、低帯域幅通信網上でのデジタルビデオシーケンスの伝送を可能にするために、ビデオデータを表すために用いられる情報量のかなりの低減を達成しなければならないことを意味している。この理由のため、許容できる画像品質を保持しつつ、伝送される情報量を低減するビデオ圧縮手法が開発されてきた。
ビデオ圧縮方法は、ビデオシーケンスの冗長かつ知覚的に関係のない部分を減らすことに基づいている。ビデオシーケンス中の冗長性は、空間、時間およびスペクトル冗長性に分類できる。“空間冗長性”は、フレーム内の近隣ピクセル間の相互関係(類似性)を説明するために用いられる用語である。用語“時間冗長性”は、シーケンスの1フレーム中に現れるオブジェクトがそれに続くフレーム中に現れる可能性があるという事実を表すのに対して、“スペクトル冗長性”は、同じ画像の異なる色成分間の相互関係を意味する。
デジタルビデオシーケンスの各フレームを構成するピクセル間に相当量の空間冗長性があることがよくある。言い換えれば、シーケンスのフレーム内のどんなピクセルの値も、その直近の他のピクセルの値と実質的に同じである。典型的には、ビデオ符号化システムは、数学的変換が画像のピクセルにマクロブロックごとに適用される“ブロックベース変換符号化”として知られている手法を用いて空間冗長性を低減し、この手法においては、2次元離散コサイン変換(DCT)のような数学的変換が画像ピクセルのブロックに適用される。これは、ピクセル値を含む表現からの画像データを、空間周波数成分を表す係数値のセットを含む形式に変換する。画像データのこの代替的表現は、空間冗長性を著しく低減し、その結果、画像データのよりコンパクトな表現を作り出す。
ビデオシーケンス内の他のどのようなフレームも参照することなく、ブロックベース変換符号化を用いて圧縮されるビデオシーケンスのフレームは、INTRA符号化またはIフレームと呼ばれる。
一般に、ビデオ符号化システムは、ビデオシーケンスの個々のフレーム内の空間冗長性を低減するだけでなく、シーケンス中の時間冗長性を減らすために“動き補償予測”として知られている手法も利用する。動き補償を用いると、デジタルビデオシーケンス中のいくつか(しばしば多く)のフレームの画像コンテンツが、“参照”フレームとして知られているシーケンス中の1つ以上の他のフレームから“予測される”。画像コンテンツの予測は、符号化(圧縮)されるフレームと参照フレームとの間での画像のオブジェクトまたは領域の動きを“動きベクトル”を用いて追跡することによって達成される。INTRA符号化の場合のように、ビデオフレームの動き補償予測は、典型的にはマクロブロックごとに実行される。
動き補償予測を用いて圧縮されたビデオシーケンスのフレームは、INTER符号化またはPフレームと一般に呼ばれる。動き補償予測のみでは、ビデオフレームの画像コンテンツの十分に精密な表現が提供されることはめったになく、従って、各INTER符号化フレームにいわゆる“予測エラー”(PE)フレームを提供することが一般に必要である。予測エラーフレームは、INTER符号化フレームのデコードされたバージョンと符号化されるフレームの画像コンテンツとの間の差分を表す。より具体的には、予測エラーフレームは、符号化されるフレーム中のピクセル値と当該フレームの予測されたバージョンに基づいて形成された対応する再構築されたピクセル値との間の差分を表す値を含む。その結果、予測エラーフレームは静止画像と同様な特性を有し、その空間冗長性およびそのフレームを表すのに必要なデータ量(ビット数)を低減するためにブロックベース変換符号化が適用できる。
ビデオ符号化システムの動作をより詳細に例示するために、図3および4を参照する。図3は、圧縮された(エンコードされた)ビデオビットストリームを作り出すためにINTRAおよびINTER符号化の組合せを利用する汎用ビデオエンコーダの概略図である。対応するデコーダが図4に例示されており、本明細書中で後述する。
ビデオエンコーダ100は、カメラまたは他のビデオソース(図示せず)からデジタルビデオ信号を受信するための入力101を備えている。エンコーダは、ブロックベース離散コサイン変換(DCT)を実行するために構成された変換ユニット104、量子化器106、逆量子化器108、逆ブロックベース離散コサイン変換(IDCT)を実行するために構成された逆変換ユニット110、結合器112および116、ならびにフレーム記憶装置120も含んでいる。エンコーダは、動き推定器130、動き場コーダ140および動き補償予測器150をさらに含んでいる。スイッチ102および114は、エンコーダをビデオエンコードのINTRAモードとビデオエンコードのINTERモードとの間で切り替えるために、コントロールマネージャー160により協調的に操作される。エンコーダ100は、遠方の受信端末へのさらなる伝送のため、または、例えば、コンピュータハードドライブのような大容量記憶媒体(図示せず)上での記憶のためにエンコーダ100によって作り出された種々のタイプの情報から単一ビットストリームを形成するビデオ多重コーダ170も含んでいる。
エンコーダ100は以下のように動作する。ビデオソースから入力101へ提供される非圧縮ビデオの各フレームは、好ましくはラスタ−スキャン順序でマクロブロックごとに受信および処理される。新しいビデオシーケンスのエンコードが開始すると、エンコードされる最初のフレームが、INTRA符号化フレームとしてエンコードされる。その後、以下の条件、すなわち、1)符号化されているフレームの現在のマクロブロックが、その予測に用いられる参照フレーム中のピクセル値と非常に異なるため、過剰な予測エラー情報が生成されると判定される(その場合、現在のマクロブロックはINTRA符号化形式で符号化される)、2)あらかじめ定義されたINTRAフレーム繰返し間隔が満了した、または、3)フレームがINTRA符号化形式で提供されることを要求する受信端末からのフィードバックが受信される、の1つが満たされない限り、エンコーダは各フレームをINTER符号化形式で符号化するようにプログラムされる。
INTRA符号化モードにおけるエンコーダ100の動作を説明する。INTRA符号化モードにおいて、コントロールマネージャー160は、入力ライン118からビデオ入力を受信するようにスイッチ102を操作する。ビデオ信号入力は、マクロブロックごとに受信され、各マクロブロックを構成する輝度値およびクロミナンス値のブロックがDCT変換ブロック104に渡される。ここで、2次元離散コサイン変換が実行され、各ブロックについてDCT係数の2次元配列が形成される。
各ブロックについてのDCT係数は量子化器106に送られ、そこで量子化パラメータQPを用いて量子化される。量子化パラメータQPの選択は、コントロールライン115を介してコントロールマネージャー160により制御される。
より詳細には、DCT係数の量子化は、各係数値を量子化パラメータQPにより分割し、結果を最も近い整数に丸めることにより実行される。このように、量子化プロセスは、本来DCT変換ブロック104により生成された係数値と比較して、数値的精度が減少された量子化DCT係数値をもたらす。従って、一般に、量子化DCT係数の各々は、量子化前の対応する係数を表すために必要とされるよりもより少ないデータビット数で表し得る。さらに、特定のDCT係数は、量子化プロセスによってゼロになり、従って、符号化されなければならない係数の数を低減する。これらの効果は両方とも、ある画像ブロックについてのDCT係数を表すために必要とされるデータ量(すなわち、データビット)の低減という結果になる。従って、ビデオシーケンスの各画像を表すために必要とされるデータ量を低減できるさらなるメカニズムが量子化により提供される。量子化は、情報の不可逆的損失も生じさせ、この損失は画質の対応する低下につながる。この画質低下がいつも望ましいものであり得るわけではないが、DCT係数値の量子化は、例えば、エンコードされたビデオシーケンスの伝送のために利用可能な帯域幅または符号化されたビデオの所望の品質を考慮に入れるためビデオシーケンスをエンコードするために必要とされるビット数を調整する可能性を提供する。より具体的には、DCT係数を量子化するために用いられるQP値を増大させることにより、ビデオシーケンスの、品質はより低いがよりコンパクトな表現が作り出される。逆に、QP値を減らすことにより、品質はより高いが、圧縮度合いがより少ないエンコードされたビットストリームを形成できる。
各ブロックについて量子化されたDCT係数は、図1のライン125により示されるように、量子化器106からビデオ多重コーダ170に渡される。ビデオ多重コーダ170は、ジグザグスキャン手順を用いて各ブロックについて量子化変換係数を順序付けし、これにより、量子化変換係数の2次元配列を1次元配列に変換する。典型的には、ビデオ多重コーダ170は次に、1次元配列中の各非ゼロ量子化された係数を、levelおよびrunと呼ばれる2つの値で表し、levelは、量子化された係数の値であり、runは、当該係数に先行する連続したゼロ値係数の数である。runおよびlevel値は、エントロピー符号化を用いてさらに圧縮される。例えば、可変長符号化(VLC)のような方法を用いて、各(run,level)ペアを表す可変長符号語のセットを作り出すことができる。
(run,level)ペアがひとたびエントロピー(例えば、可変長)符号化されると、ビデオ多重コーダ170はさらに、それらを当該情報の種類に適した可変長符号化方法を用いてやはりエントロピー符号化された制御情報と結合させて、符号化された画像情報の単一の圧縮されたビットストリーム135を形成する。(run,level)ペアを表す可変長符号語および、特に、エンコーダから伝送され、DCT係数を量子化するために用いられる量子化パラメータQPに関する制御情報を含んでいるのはこのビットストリームである。
マクロブロックの局所的にデコードされたバージョンも、エンコーダ100中で形成される。これは、量子化器106により出力された各ブロックについての量子化された変換係数を、逆量子化器108を通して渡し、逆DCT変換を逆変換ブロック110中で適用することによって行われる。逆量子化は、量子化器106において実行される量子化操作を逆にすることによって実行される。より具体的には、逆量子化器108は、各量子化されたDCT係数値に量子化パラメータQPを掛けることにより、所定の画像ブロックについてのオリジナルのDCT係数を回復しようと試みる。量子化器106における量子化プロセスの一部として実行される丸め操作のため、オリジナルのDCT係数値を正確に回復することは一般的には可能ではない。これは、回復されたDCT係数値と、本来DCT変換ブロック104により生成さた係数値との間の不一致(それゆえ、上記で呼ばれた情報の不可逆的損失)という結果になる。
逆量子化器108および逆変換ブロック110により実行される操作により、1つのマクロブロックの各ブロックについてのピクセル値の再構成された配列がもたらされる。その結果生じるデコードされた画像データは、結合器112に入力される。INTRA符号化モードにおいて、スイッチ114は、スイッチ114を介した結合器112への入力がゼロになるように設定される。このようにして、結合器112により実行される操作は、デコードされた画像データを未変更のまま送ることに等しい。
現在のフレームの以降のマクロブロックが受信され、前に説明されたエンコードおよびデコードステップをブロック104、106、108、110、および112で受けるにつれて、INTRA符号化されたフレームのデコードされたバージョンがフレーム記憶装置120中に蓄積される。現在のフレームの最後のマクロブロックがINTRA符号化され、続いてデコードされた時、フレーム記憶装置120は、その後受信されるINTER符号化形式のビデオフレームを符号化する際に予測参照フレームとして使用するために利用可能な完全にデコードされたフレームを含んでいる。INTRAまたはINTER符号形式を示すフラッグは、ライン122中で提供される。
INTER符号化モードでのエンコーダ100の動作を説明する。INTER符号化モードにおいて、コントロールマネージャー160は、結合器116の出力を含むその入力をライン117から受信するためにスイッチ102を操作する。結合器116は、入力101からマクロブロックごとにビデオ入力信号を受信する。マクロブロックを構成する輝度およびクロミナンス値のブロックを結合器116が受信するにつれて、結合器は対応する予測エラー情報ブロックを形成する。予測エラー情報は、当該ブロックと、動き補償予測ブロック150において作り出されたその予測との差分を表す。より具体的には、マクロブロックの各ブロックについての予測エラー情報は値の2次元配列を含み、値の各々は、符号化されている輝度またはクロミナンス情報のブロック中のピクセル値と、以下で説明される手順に従いそのブロックについての動き補償予測を形成することにより得られたデコードされたピクセル値との差分を表している。
マクロブロックの各ブロックについての予測エラー情報は、DCT変換ブロック104に渡され、このブロックが、予測エラー値の各ブロックに対して2次元離散コサイン変換を実行して各ブロックについてDCT変換係数の2次元配列を生成する。
各予測エラーブロックについての変換係数は、量子化器106に渡され、そこで、INTRA符号化モードでのエンコーダの動作に関して上記で説明したやり方と類似したやり方で、量子化パラメータQPを用いて量子化される。再度、量子化パラメータQPの選択は、コントロールライン115を介してコントロールマネージャー160により制御される。予測エラー符号化の精度は、利用可能な帯域幅および/または符号化されたビデオの必要とされる品質に応じて調整できる。典型的な離散コサイン変換(DCT)ベースのシステムにおいては、これは、DCT係数DCT係数を量子化する際に用いられる量子化器パラメータ(QP)を特定の精度に変えることによってなされる。
マクロブロックの各ブロックについての予測エラー情報を表す量子化されたDCT係数は、図1のライン125により示されるように、量子化器106からビデオ多重コーダ170に渡される。INTRA符号化モードにおけるように、ビデオ多重コーダ170は、ジグザグスキャン手順を用いて各予測エラーブロックについての変換係数を順序付けし、次に、各非ゼロ量子化係数を(level,run)ペアとして表す。このコーダはさらに、INTRA符号化モードに関して上記で説明したやり方と類似のやり方で、エントロピー符号化を用いて(run,level)ペアを圧縮する。ビデオ多重コーダ170は、ライン126を介して動き場符号化ブロック140から動きベクトル情報(以下で説明される)を、そしてコントロールマネージャー160から制御情報(例えば、量子化パラメータQPの表示を含む)も受信する。このコーダは、動きベクトル情報および制御情報をエントロピー符号化し、エントロピー符号化された動きベクトル、予測エラーおよび制御情報を含む符号化された画像情報の単独ビットストリーム135を形成する。量子化パラメータQPの表示、qzは、ライン124を介して多重xoswe170に提供される。
マクロブロックの各ブロックについての予測エラー情報を表す量子化されたDCT係数も、量子化器106から逆量子化器108に渡される。ここで、それらの係数は、INTRA符号化モードにおけるエンコーダの動作に関連して前に説明されやり方と類似のやり方で逆量子化される。INTER符号化モードにおいて、ビデオシーケンスを表すために必要とされるエンコードされたビデオビットストリームの品質およびビット数は、予測エラー情報を表すDCT係数に適用される量子化の程度を変えることによって調整できる。
その結果生じる逆量子化されたDCT係数のブロックが逆DCT変換ブロック110に適用され、そこで逆DCT変換を受けて予測エラー値の局所的にデコードされたブロックを生成する。予測エラー値の局所的にデコードされたブロックは次に結合器112に入力される。INTER符号化モードにおいて、スイッチ114は、動き補償予測ブロック150により生成されるマクロブロックの各ブロックについての予測ピクセル値も結合器112が受信するように設定される。結合器112は、予測エラー値の局所的にデコードされたブロックの各々を、予測されたピクセル値の対応するブロックと結合して、再構成された画像ブロックを作り出してそれらをフレーム記憶装置120内に保存する。
ビデオ信号の以降のマクロブロックがビデオソースから受信され、前に説明されたエンコードおよびデコードステップをブロック104、106、108、110、112で受けるにつれて、フレームのデコードされたバージョンがフレーム記憶装置120中に蓄積される。フレームの最後のマクロブロックが処理された時、フレーム記憶装置120は、その後受信されるINTER符号化形式のビデオフレームをエンコードする際の予測参照フレームとして使用するために利用可能な完全にデコードされたフレームを含む。
現在のフレームのマクロブロックについての予測の形成を説明する。INTER符号化形式でエンコードされたどのようなフレームも、動き補償予測のための参照フレームを必要とする。このことは必然的に,ビデオシーケンスをエンコードする時、エンコードされる最初のフレームは、それがシーケンス中の最初のフレームであろうと他のフレームであろうと、INTRA符号化された形式でエンコードされなければならないことを意味している。このことは、ひいては、ビデオエンコーダ100がコントロールマネージャー160によりINTER符号化モードに切り替えられると、前にエンコードされたフレームを局所的にデコードすることによって形成された完全な参照フレームが、エンコーダのフレーム記憶装置120中ですでに利用可能であることを意味している。一般に、参照フレームは、INTRA符号化されたフレームかINTER符号化されたフレームを局所的にデコードすることによって形成される。
現在のフレームのマクロブロックについての予測形成における最初のステップは、動き推定ブロック130により実行される。動き推定ブロック130は、符号化されるフレームの現在のマクロブロックを構成する輝度およびクロミナンス値のブロックをライン128を介して受信する。動き推定ブロックは次に、現在のマクロブロックと実質的に対応する参照フレーム中の領域を識別するために、ブロックマッチング操作を実行する。ブロックマッチング操作を実行するために、動き場推定ブロックは、フレーム記憶装置120中に保存された参照フレームデータにライン127を介してアクセスする。より具体的には、動き推定ブロック130は、検査中のマクロブロックと、フレーム記憶装置120中に保存された参照フレームからの最もマッチする候補ピクセル領域との差分を表す差分値(例えば、絶対差分の合計)を計算することによりブロックマッチングを実行する。参照フレームの所定調査領域内の考えられるすべての位置における候補領域についての差分値が生成れ、動き推定ブロック130が最小の計算された差分値を決定する。現在のフレーム中のマクロブロックと、最小の差分値をもたらす参照フレーム中のピクセル値の候補ブロックとの間のオフセットは、当該マクロブロックについての動きベクトルを定義する。
動き推定ブロック130がマクロブロックについての動きベクトルをひとたび生成すると、このブロックは、動きベクトルを動き場符号化ブロック140に出力する。動き場符号化ブロック140は、基底関数および動き係数のセットを含む動きモデルを用いて、動き推定ブロック130から受信された動きベクトルを推定する。より具体的には、動き場符号化ブロック140は、動きベクトルを、基底関数を掛けられた時に、動きベクトルの近似値を形成する動き係数値のセットとして表す。典型的には、2つの動き係数と基底関数のみを有する並進運動モデルが用いられるが、複雑性がより大きい動きモデルも用い得る。
動き係数は、動き場符号化ブロック140から動き補償予測ブロック150に渡される。動き補償予測ブロック150は、動き推定ブロック130により識別されたピクセル値の最もマッチする候補領域もフレーム記憶装置120から受信する。動き場符号化ブロック140により生成された動きベクトルの近似表現と、参照フレームからの最もマッチする候補領域のピクセル値とを用いて、動き補償予測ブロック150は、マクロブロックの各ブロックについての予測されたピクセル値の配列を生成する。予測されたピクセル値の各ブロックは結合器116に渡され、そこで、予測されたピクセル値は、現在のマクロブロックの対応するブロック中の実際の(入力)ピクセル値から減じられ、それによって、マクロブロックについての予測エラーブロックのセットを形成する。
図2に示されるビデオデコーダ200の動作を説明する。デコーダ200は、エンコードされたビデオビットストリーム135をエンコーダ100から受信しこれをその成分部分に多重分離するビデオ多重デコーダ270、逆量子化器210、逆DCT変換器220、動き補償予測ブロック240、フレーム記憶装置250、結合器230、コントロールマネージャー260、および出力280を含む。
コントロールマネージャー260は、INTRA符号化されたフレームかそれともINTER符号化されたフレームがデコードされているかに呼応して、デコーダ200の動作を制御する。デコーダをデコードモード間で切り替えさせるINTRA/INTERトリガ制御信号が、例えば、エンコーダから受信された各圧縮ビデオフレームと関連付けられたピクチャタイプ情報から導き出される。INTRA/INTERトリガ制御信号は、エンコードされたビデオビットストリームからビデオ多重デコーダ270によって抽出され、コントロールライン215を介してコントロールマネージャー260に渡される。
INTRA符号化されたフレームのデコードは、マクロブロックごとに実行される。ビデオ多重デコーダ270は、当該マクロブロックに関連する考えられる制御情報から、マクロブロックのブロックについてのエンコードされた情報を分離する。INTRA符号化されたマクロブロックの各ブロックについてのエンコードされた情報は、ブロックの非ゼロ量子化されたDCT係数についてのVLC符号化されたlevelおよびrun値を表す可変長符号語を含む。ビデオ多重デコーダ270は、エンコーダ100において用いられるエンコード方法に対応する可変長デコード方法を用いて可変長符号語をデコードし、それによって、(level,run)ペア値を復元する。次にこのデコーダは、マクロブロックの各ブロックについての量子化された変換係数値の配列を再構成し、それらを逆量子化器210に渡す。マクロブロックに関連するどのような制御情報も、適切な可変長デコード方法を用いてビデオ多重デコーダにおいてデコードされ、コントロールマネージャー260に渡される。特に、変換係数(すなわち、量子化パラメータQP)に適用される量子化レベルに関する情報が、エンコードされたビットストリームからビデオ多重デコーダ270によって抽出され、コントロールライン217を介してコントロールマネージャー260に供給される。そして今度は、このコントロールマネージャーが、この情報をコントロールライン218を介して逆量子化器210に送る。逆量子化器210は、制御情報に従ってマクロブロックの各ブロックについて量子化されたDCT係数を逆量子化し、今逆量子化されたDCT係数を逆DCT変換器220に提供する。逆量子化器210により実行される逆量子化操作は、エンコーダにおいて逆量子化器108により実行される操作と同一である。
逆DCT変換器220は、マクロブロックの各ブロックについての逆量子化されたDCT係数に対して逆DCT変換を実行し、再構成されたピクセル値を含む画像情報のデコードされたブロックを形成する。マクロブロックの各ブロックについての再構成されたピクセル値は、結合器230を介してデコーダのビデオ出力280に渡され、そこで、例えば表示装置(図示せず)に供給し得る。マクロブロックの各ブロックについての再構成されたピクセル値も、フレーム記憶装置250中に保存し得る。INTRA符号化されたマクロブロックのエンコード/デコードにおいて動き補償予測が用いられないので、コントロールマネージャー260は、ピクセル値の各ブロックそれ自体をビデオ出力280およびフレーム記憶装置250に渡すために結合器230を制御する。INTRA符号化されたフレームのその後のマクロブロックがデコードおよび記憶されるにつれて、デコードされたフレームは、フレーム記憶装置250中で順次アセンブルされ、かくして、その後受信されるINTER符号化されたフレームのデコードに関連して、動き補償予測のための参照フレームとして使用するために利用可能になる。
INTER符号化されたフレームもマクロブロックごとにデコードされる。ビデオ多重デコーダ270は、エンコードされたビットストリーム135を受信し、INTER符号化されたマクロブロックの各ブロックについてのエンコードされた予測エラー情報を、エンコードされた動きベクトル情報および当該マクロブロックに関連する考えられる制御情報から分離する。上記で説明したように、マクロブロックの各ブロックについてのエンコードされた予測エラー情報は典型的には、当該予測エラーブロックの非ゼロ量子化された変換係数についてのlevelおよびrun値を表す可変長符号語を含んでいる。ビデオ多重デコーダ270は、エンコーダ100において用いられるエンコード方法に対応する可変長デコード方法を用いて可変長符号語をデコードし、それによって、(level,run)ペアを復元する。次にこのデコーダは、各予測エラーブロックについての量子化された変換係数値の配列を再構成し、それらを逆量子化器210に渡す。INTER符号化されたマクロブロックに関する制御情報も、適切な可変長デコード方法を用いてビデオ多重デコーダ270においてデコードされ、コントロールマネージャー260に渡される。予測エラーブロックの変換係数に適用される量子化レベル(QP)に関する情報が、エンコードされたビットストリームから抽出され、コントロールライン217を介してコントロールマネージャー260に提供される。そして今度は、コントロールマネージャーは、この情報をコントロールライン218を介して逆量子化器210に送る。逆量子化器210は、制御情報に従ってマクロブロックの各ブロックについての予測エラー情報を表す量子化されたDCT係数を逆量子化し、今逆量子化されたDCT係数を逆DCT変換器220に提供する。再度、逆量子化器210により実行される逆量子化操作は、エンコーダ中の逆量子化器108により実行される操作と同一である。INTRA/INTERフラッグは、ライン215中で提供される。
次に、各ブロックについての予測エラー情報を表す逆量子化されたDCT係数は、逆DCT変換器220において逆変換されて、マクロブロックの各ブロックについての再構成された予測エラー値の配列をもたらす。
マクロブロックに関連したエンコードされた動きベクトル情報は、ビデオ多重デコーダ270によりエンコードされたビデオビットストリーム135から抽出され、デコードされる。このようにして得られたデコードされた動きベクトル情報は、データライン225を介して動き補償予測ブロック240に渡されて、このブロックが、INTER符号化されたマクロブロックをエンコーダ100においてエンコードするために使用されたものと同じ動きモデルを用いてマクロブロックについての動きベクトルを再構成する。再構成された動きベクトルは、元々はエンコーダの動き推定ブロック130により決定される動きベクトルを見積もる。デコーダの動き補償予測ブロック240は、フレーム記憶装置250中に保存された予測参照フレーム中の再構成されたピクセルの領域の位置を特定するために、再構成された動きベクトルを用いる。再構成された動きベクトルにより示されるピクセルの領域は、当該マクロブロックについての予測を形成するために使用される。より具体的には、動き補償予測ブロック240は、参照フレーム中で識別されたピクセルの領域から対応するピクセル値をコピーすることにより、マクロブロックの各ブロックについてのピクセル値の配列を形成する。参照フレームから導き出されたこれらのピクセル値のブロックは、動き補償予測ブロック240から結合器230へ渡され、そこで、デコードされた予測エラー情報と結合される。実際には、予測された各ブロックのピクセル値は、逆DCT変換器220により出力される対応する再構成された予測エラー値に加算される。このようにして、マクロブロックの各ブロックについての再構成されたピクセル値の配列が得られる。再構成されたピクセル値は、デコーダのビデオ出力280に渡され、またフレーム記憶装置250中に保存される。
INTER符号化されたフレームのその後のマクロブロックがデコードおよび保存されるにつれて、デコードされたフレームがフレーム記憶装置250中で順次アセンブルされ、このようにして、他のINTER符号化されたフレームの動き補償予測のための参照フレームとして使用するために利用可能になる。
上記で説明されたように、典型的なビデオエンコードおよびデコードシステム(一般には、ビデオコーデックと呼ばれる)は、動き補償予測および予測エラー符号化に基づいている。動き補償予測は、ビデオフレーム間の動きの分析および符号化ならびに動き情報を用いた画像セグメントの再構成によって得られる。予測エラー符号化は、動き補償された画像セグメントとオリジナル画像の対応するセグメントとの差分を符号化するために用いられる。予測エラー符号化の精度は、利用可能な帯域幅および符号化されたビデオの必要とされる品質に応じて調整できる。典型的な離散コサイン変換(DCT)ベースのシステムにおいて、これは、DCT係数を量子化する際に用いられる量子化パラメータ(QP)を特定の精度に変えることによりなされる。
エンコーダと同期したままでいるためには、符号化されたビデオシーケンスにおいて用いられたQPの正確な値をデコーダが知らなければならないことが注目されるべきである。典型的には、QP値は、スライスあたり1回送られ、画像をエンコードするために必要なビット数の増加につながる。(前に説明されたように、1つのスライスは、画像の一部を含んでおり、ピクチャ中での考えられる伝送エラーの伝播を回避するために、他のスライスから独立して符号化される)。例えば、単独のQP値の符号化が6ビットを取り、各々10個のスライスに分割された20の画像が毎秒伝送されれば、QP情報だけのために1.2kbpsが費やされる。
先行技術の解決策(例えば、T. Wiegandによる文献、"Joint Model Number 1", Doc. JVT-A003, Joint Video Team (JVT) of ISO/IEC MPEG and ITU-T VCEG, Jan. 2002中で提案されたH.26Lビデオ符号化勧告)は、ピクチャ/スライスQPパラメータを、固定または可変長コードで独立して符号化する。これは、上記のように、伝送ビットレートの増大につながる。より具体的には、H.26L Joint Model Number 1によれば、DCT係数値を量子化する際に用いられる量子化パラメータ値QPは、典型的には各ピクチャの最初においてエンコードされたビットストリーム中で示される(T. Wiegand, "Joint Model Number 1", Doc. JVT-A003, Joint Video Team (JVT) of ISO/IEC MPEG and ITU-T VCEG, Jan. 2002, Section 3.3.1を参照)。フレーム内のマクロブロックがスライスに構成されれば、QP値も、フレームの各スライスの最初(例えば、エンコードされたビットストリームの任意のスライスヘッダ部分)に示される。両方の場合において、QP値はそれ自体で示されるか、適切な可変長符号化方式を用いて符号化される。上述のように、この方式は、特にフレームが多くのスライスに分割されおよび/またはエンコードされたビデオシーケンスの伝送に利用できる利用可能な帯域幅が低い状況において、量子化パラメータ情報を表すため必要とされるビット数に関して非常に高価であることが理解されるべきである。このことは、エンコードされたビデオビットストリームが無線通信リンク上を伝送される移動ビデオ用途において特に重要な問題である。この状況において、エンコードされたビデオビットストリームの伝送のために利用可能な帯域幅は、20キロビット/秒と低く、ビットストリーム中に含まれるQP情報は、利用可能な帯域幅全体の大きな比率を占めることがある。
さらに、H.26Lによれば、当該マクロブロックを表すエンコードされたビットストリームの部分に量子化器変更パラメータ(Dquant)を挿入することによってQPの値はマクロブロックレベルにおいて任意に変え得る(T. Wiegand, "Joint Model Number 1", Doc. JVT-A003, Joint Video Team (JVT) of ISO/IEC MPEG and ITU-T VCEG, Jan. 2002, Section 3.4.7を参照)。このことは、QP関連情報の表示に振り向けられるエンコードされたビットストリームの情報量のさらなる増大につながる。前述の事項を考慮して、ビデオ符号化システムにおける量子化パラメータ値に関連する情報を示すための改善されたメカニズムに対する大きな要求があることが理解されるべきである。
本発明は、シーケンスレベルQPを導入することによりQP関連情報を示すための先行技術の解決策を改善する。これにより、エンコーダ用途は、ピクチャ/スライスQPの符号化の際に用いられるビデオシーケンス依存参照QPを決めることが可能になる。現在、本発明によれば、ピクチャ/スライスQPの絶対値を符号化する代わりに、参照シーケンスQPと実際に用いられたピクチャ/スライスQPとの差分を符号化すれば十分である。このように、すべてのピクチャ/スライスについて完全なQPを伝送する必要は全くないが、統計的により小さい差値が伝送され、ピクチャ/スライスQPを再構成するために用いられ、従って、伝送ビットレートの低減につながる。
ビットレート節減は、一定のQPの場合において最も明らかである。この場合、スライスをデコードする際にシーケンスQPが用いられる必要があることを示すためにスライスあたり1ビットだけ伝送すれば十分である。例えば、前に説明された例においては、QPについてのビットレートは、1.2kbpsから0.2kbsまで低減される(今や、各スライスについて6ビットでなく1ビットだけ送られる必要がある)。
本発明の第1の局面によれば、デジタルビデオシーケンスをエンコードする方法が提供され、この方法は、ビデオ符号化用途に適用されて、デジタルビデオシーケンスを表すエンコードされたビデオビットストリームを生成する。このデジタルビデオシーケンスは、多数のフレームを含んでおり、ピクセルの配列を含むシーケンスの各フレームは複数のブロックに分割され、各ブロックは一定数のピクセルを含む。この方法は、動き補償予測をピクセルのブロックに適用することによりデジタルビデオシーケンスのフレームをエンコードするステップを含み、それにより、予測エラー値の対応するブロックを生成する。予測エラー値のブロックを表す量子化された変換係数値のセットを与えるために、変換符号化手法が予測エラー値のブロックに適用され、量子化された変換係数値のセットを与えるために、量子化のレベルが変換係数値のセットに適用される。本発明によれば、この方法は、変換係数値のセットを量子化するためにデジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルを定義するステップをさらに含む。
有利には、本発明の第1の局面に従う方法は、INTER符号化モードで符号化されたフレームについて生成された予測エラー値を表す変換係数値のセットを量子化するために用いられた量子化パラメータ値を示すために上記で説明されたやり方と類似したやり方でINTRAモードで符号化されたフレームについて生成されたピクセル値のブロックを表す変換係数値のセットを量子化するために用いられた量子化パラメータ(QP)値を示すためも用いられる。
有利には、デジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルは、エンコードされているビデオシーケンスに固有である。また、量子化のデフォルトレベルは、ビデオ符号化用途に固有である。
好ましくは、デジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルの表示が提供される。いっそう好ましくは、量子化のデフォルトレベルの表示は、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供される。有利には、デジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルの表示を含むエンコードされたビットストリームは、ビデオデコード装置に伝送される。
有利には、変換係数値のセットを量子化するためにデジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルは、デジタルビデオシーケンスのエンコードの間に更新でき、量子化の更新されたデフォルトレベルを示すさらなる表示が提供される。
量子化の更新されたデフォルトレベルの表示は、好ましくは、ビデオデコード装置に、有利には、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で伝送される。
有利には、変換係数値の前記セットに適用される量子化のレベルは、変換係数値のセットに適用された量子化の実際のレベルが、ビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルと異なるように調整できる。好ましくは、適用された量子化の実際のレベルは、量子化のデフォルトレベルを基準にした差分として表される。有利には、量子化のデフォルトレベルを基準にした差分の表示は、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供される。
本発明の第1の局面に従うビデオエンコード方法の実施の形態において、変換係数値のセットに適用される量子化のレベルは、デジタルビデオシーケンスの特定のフレームについての変換係数のセットに適用される量子化の実際のレベルが、デジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルと異なるように、デジタルビデオシーケンスの1つのフレームから別のフレームにかけて調整できる。有利には、この実施の形態においては、特定のフレームにおいて用いられる量子化の実際のレベルは、量子化のデフォルトレベルを基準にした差分として表され、量子化のデフォルトレベルを基準とした差分の表示は、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供される。
本発明の第1の局面に従うビデオエンコード方法の別の実施の形態においては、デジタルビデオシーケンスの1つのフレームが分割される複数のブロックは、1つ以上のセグメントにグループ化され、変換係数値のセットに適用される量子化のレベルは、フレームの特定のセグメントのための変換係数値のセットに適用される量子化の実際のレベルが、デジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルと異なるように、フレームの1つのセグメントから別のセグメントにかけて調整できる。有利には、この代替の実施の形態においては、特定のセグメントにおいて用いられる量子化の実際のレベルは、量子化のデフォルトレベルを基準とした差分として表され、および量子化のデフォルトレベルを基準とした差分の表示は、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供される。
有利には、デジタルビデオシーケンス全体を通して変換係数値の全てのセットを量子化するために量子化のデフォルトレベルが用いられるのであれば、量子化のデフォルトレベルの表示が、デジタルビデオシーケンス全体を通して変換係数値の全てのセットを量子化するために前記デフォルトレベルが用いられるという表示と共に提供される。
本発明の第2の局面によれば、エンコードされたデジタルビデオシーケンスをデコードする方法が提供され、この方法は、ビデオデコード用途に適用されて、デコードされたデジタルビデオシーケンスを生成する。このデジタルビデオシーケンスは、多数のフレームを含んでおり、シーケンスの各フレームは、ピクセルの配列を含んでおり複数のブロックに分割され、各ブロックは、一定数のピクセルを含んでおり、デジタルビデオシーケンスのフレームは、対応する予測エラー値のブロックを生成するために動き補償予測をピクセルのブロックに適用すること、予測エラー値のブロックを表す変換係数値のセットを生成するために転換符号化手法を予測エラー値のブロックに適用することおよび予測エラー値のブロックを表す量子化された変換係数値のセットを得るために量子化のレベルを変換係数値のセットに適用することによりエンコードされている。本発明によれば、このデコード方法は、量子化された変換係数値のセットを逆量子化するために、エンコードされたデジタルビデオシーケンスのデコード全体を通して用いられる逆量子化のデフォルトレベルを定義するステップを含む。
有利には、逆量子化のデフォルトレベルは、ビデオシーケンスのエンコードの間に変換係数値のセットを量子化するために用いられた量子化のデフォルトレベルと同一である。
有利には、エンコードされたデジタルビデオシーケンスのデコード全体を通して用いられるように定義された逆量子化のデフォルトレベルは、デコードされているエンコードされたビデオシーケンスに固有である。また、逆量子化のデフォルトレベルは、ビデオデコード用途に固有である。
有利には、デコード方法は、逆量子化のデフォルトレベルの表示を、好ましくはエンコードされたデジタルビデオシーケンスを表すビットストリームから取り出すステップを含む。
有利には、逆量子化のデフォルトレベルは、デジタルビデオシーケンスのデコードの間に更新できる。好ましくは、逆量子化のデフォルトレベルの更新は、エンコードされたデジタルビデオシーケンスを表すビットストリームから取り出された、ビデオシーケンスのエンコードの間に用いられた量子化の更新されたデフォルトレベルの表示に応じて実行される。また、逆量子化のデフォルトレベルは、ビデオエンコード装置から伝送された、ビデオシーケンスのエンコードの間に用いられ量子化の更新されたデフォルトレベルの表示に応じて更新される。
有利には、量子化された変換係数値のセットに適用される逆量子化のレベルは、量子化された変換係数値のセットに適用される逆量子化の実際のレベルが、エンコードされたデジタルビデオシーケンスのデコード全体を通して用いられる逆量子化のデフォルトレベルと異なるように調整できる。この場合、逆量子化の実際のレベルは、逆量子化のデフォルトレベルに差分値を加えることにより決定され、差分値は逆量子化のデフォルトレベルと適用される逆量子化の実際のレベルとの差分を表す。好ましくは、差分値の表示は、エンコードされたデジタルビデオシーケンスを表すビットストリームから取り出される。
本発明の第2の局面に従うビデオデコード方法の実施の形態においては、量子化された変換係数値のセットに適用される逆量子化のレベルは、デジタルビデオシーケンスの特定のフレームについての量子化された変換係数のセットに適用される逆量子化の実際のレベルが、エンコードされたデジタルビデオシーケンスのデコード全体を通して用いられる逆量子化のデフォルトレベルと異なるように、デジタルビデオシーケンスの1つのフレームから別のフレームにかけて調整される。有利には、この実施の形態においては、特定のフレームにおいて用いられる逆量子化の実際のレベルは、フレーム固有の差分値を逆量子化のデフォルトレベルに加えることにより決定され、フレーム固有の差分値は、逆量子化のデフォルトレベルと特定のフレームにおいて用いられる逆量子化の実際のレベルとの差分を表す。好ましくは、前記フレーム固有の差分値の表示は、エンコードされたデジタルビデオシーケンスを表すビットストリームから取り出される。
本発明の第2の局面に従うビデオデコード方法の別の実施の形態においては、前記デジタルビデオシーケンスの1つのフレームが分割される複数のブロックは、1つ以上のセグメントにグループ化され、量子化された変換係数値のセットに適用される逆量子化のレベルは、フレームの特定のセグメントについての量子化された変換係数値のセットに適用される逆量子化のレベルが、エンコードされたデジタルビデオシーケンスのデンコード全体を通して用いられる逆量子化のデフォルトレベルと異なるように、フレームの1つのセグメントから別のセグメントにかけて調整できる。有利には、この代替の実施の形態においては、特定のセグメントにおいて用いられる逆量子化の実際のレベルは、セグメント固有の差分値を逆量子化のデフォルトレベルに加えることにより決定され、セグメント固有の差分値は、逆量子化のデフォルトレベルと特定のセグメントにおいて用いられる逆量子化の実際のレベルとの差分を表す。好ましくは、セグメント固有の差分値の表示は、エンコードされたデジタルビデオシーケンスを表すビットストリームから取り出される。
本発明の第3の局面によれば、デジタルビデオシーケンスをエンコードしてそのデジタルビデオシーケンスを表すエンコードされたビデオビットストリームを生成するためのエンコーダが提供され、このデジタルビデオシーケンスは、多数のフレームを含み、シーケンスの各フレームはピクセルの配列を含んでおり、複数のブロックに分割され、各ブロックは一定数のピクセルを含んでいる。本発明の第3の局面に従うビデオエンコーダは、動き補償予測をピクセルのブロックに適用することによってデジタルビデオシーケンスのフレームをエンコードするために構成されており、それによって、予測エラー値の対応するブロックを生成する。このビデオエンコーダはさらに、変換符号化手法を予測エラー値のブロックに適用して予測エラー値の前記ブロックを表す変換係数値のセットを生成するために、および量子化のあるレベルを変換係数値の前記セットに適用して量子化された変換係数値のセットを与えるために構成される。本発明によれば、ビデオエンコーダはさらに、変換係数値のセットを量子化するためにデジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルを定義するために構成される。
有利には、本発明の第3の局面に従うエンコーダーは、INTER符号化モードで符号化されたフレームについて生成された予測エラー値を表す変換係数値のセットを量子化するために用いられた量子化パラメータ値を示すために上記で説明されたやり方と類似したやり方でINTRAモードで符号化されたフレームについて生成されたピクセル値のブロックを表す変換係数値のセットを量子化するために用いられた量子化パラメータ(QP)値を示すようにも構成される。
有利には、ビデオエンコーダにより定義された量子化のデフォルトレベルは、エンコードされているビデオシーケンスに固有である。
有利には、ビデオエンコーダはさらに、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で量子化のデフォルトレベルの表示を提供するために構成される。さらに有利には、エンコーダは、エンコードされたビットストリームを対応するビデオデコーダに伝送するために構成される。
有利には、ビデオエンコーダはさらに、デジタルビデオシーケンスのエンコードの間に量子化のデフォルトレベルを更新し、量子化の更新されたデフォルトレベルの表示を提供するために構成される。好ましくは、エンコーダは、量子化の更新されたデフォルトレベルの表示を対応するビデオデコーダに伝送するようにも構成される。有利には、エンコーダは、量子化の更新されたデフォルトレベルの表示を、デジタルビデオシーケンスを表すエンコードされたビットストリーム中に含む。
好ましくは、ビデオエンコーダはさらに、変換係数値のセットに適用された量子化のレベルを調整し、それによって、量子化のデフォルトレベルと異なる量子化の実際のレベルを適用するために構成される。好ましくは、ビデオエンコーダはさらに、量子化の実際のレベルを量子化のデフォルトレベルを基準にした差分として表し、量子化のデフォルトレベルを基準とした差分の表示を、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供するために構成される。
1つの実施の形態において、本発明の第3の局面に従うビデオエンコーダは、変換係数値のセットに適用される量子化のレベルを、デジタルビデオシーケンスの1つのフレームから別のフレームにかけて調整するために構成される。このように、エンコーダは、デジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルと異なる量子化の実際のレベルを、特定のフレームについての変換係数のセットに適用するために構成される。有利には、この実施の形態に従うビデオエンコーダはさらに、特定のフレームにおいて用いられる量子化の実際のレベルを、量子化のデフォルトレベルを基準とした差分として表し、量子化のデフォルトレベルを基準とした差分の表示を、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供するために構成される。
1つの別の実施の形態において、本発明の第3の局面に従うビデオエンコーダはさらに、デジタルビデオシーケンスのフレームが分割される複数のブロックを1つ以上のセグメントに分割し、変換係数値のセットに適用される量子化のレベルをフレームの1つのセグメントから別のフレームにかけて調整するために構成される。このように、ビデオエンコーダは、デジタルビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトレベルと異なる量子化の実際のレベルを、フレームの特定のセグメントについての変換係数のセットに適用するために構成される。有利には、この別の実施の形態に従うビデオエンコーダはさらに、特定のセグメントで用いられる量子化の実際のレベルを、量子化のデフォルトレベルを基準とした差分として表し、量子化のデフォルトレベルを基準とした差部の表示を、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供するために構成される。
特定の実施の形態において、ビデオエンコーダは、量子化のデフォルトレベルの表示およびデジタルビデオシーケンス全体を通して変換係数値のすべてのセットを量子化するためにデフォルトレベルが用いられることになるという表示を提供するために構成される。
有利には、本発明の第3の局面に従うビデオエンコーダは、マルチメディア端末中に設けられる。より好ましくは、無線通信装置中に実施される。
本発明の第4の局面によれば、エンコードされたデジタルビデオシーケンスをデコードしてデコードされたデジタルビデオシーケンスを生成するためのデコーダが提供される。このデジタルビデオシーケンスは、多数のフレームを含んでおり、シーケンスの各フレームはピクセルの配列を含み複数のブロックに分割され、各ブロックは一定数のピクセルを含んでおり、デジタルビデオシーケンスのフレームは、予測エラー値の対応するブロックを生成するために動き補償予測をピクセルのブロックに適用し、予測エラー値の前記ブロックを表す変換係数値のセットを生成するために変換符号化手法を予測エラー値のブロックに適用し、予測エラー値のブロックを表す量子化された変換係数値のセットを与えるために、量子化のレベルを変換係数値のセットに適用することによりエンコードされる。本発明によれば、ビデオデコーダは、量子化された変換係数値のセットを逆量子化するために、エンコードされたデジタルビデオシーケンスのデコード全体を通して用いられる逆量子化のデフォルトレベルを定義するために構成される。
好ましくは、逆量子化のデフォルトレベルは、ビデオシーケンスのエンコードの間に変換係数値のセットを量子化するために用いられる量子化のデフォルトレベルと同一である。
有利には、エンコードされたデジタルビデオシーケンスのデコード全体を通して用いられるために定義された逆量子化のデフォルトレベルは、デコードされているエンコードされたビデオシーケンスに固有である。
有利には、ビデオデコーダは、逆量子化のデフォルトレベルの表示を、好ましくはエンコードされたデジタルビデオシーケンスを表すビットストリームから取り出すために構成される。
有利には、ビデオデコーダは、好ましくはエンコードされたデジタルビデオシーケンスを表すビットストリームから量子化の更新されたデフォルトレベルの表示を取り出すことにより、デジタルビデオシーケンスのデコードの間に逆量子化のデフォルトレベルを更新するために構成される。また、ビデオデコーダは、ビデオエンコード装置から伝送された量子化の更新されたデフォルトレベルの表示を受信するために構成される。
好ましくは、ビデオデコーダは、量子化された変換係数値のセットに適用される逆量子化のレベルを調整するため、および逆量子化のデフォルトレベルと異なる逆量子化の実際のレベルを量子化された変換係数値のセットに適用するために構成される。有利には、デコーダは、逆量子化のデフォルトレベルに差分値を加算することにより逆量子化の実際のレベルを決定するために構成され、差分値は、逆量子化のデフォルトレベルと適用される逆量子化の実際のレベルとの差分を表す。好ましくは、ビデオデコーダは、エンコードされたデジタルビデオシーケンスを表すビットストリームから差分値の表示を取り出すために構成される。
1つの実施の形態において、本発明の第4の局面に従うビデオデコーダは、量子化された変換係数値に適用される逆量子化のレベルをデジタルビデオシーケンスの1つのフレームから次のフレームにかけて調整するため、およびエンコードされたデジタルビデオシーケンス全体を通して用いられる逆量子化のデフォルトレベルと異なる逆量子化の実際のレベルをデジタルビデオシーケンスの特定のフレームについての量子化された変換係数値のセットに適用するために構成される。有利には、デコーダは、フレーム固有の差分値を逆量子化のデフォルトレベルに加算することにより、特定のフレームにおいて用いられる逆量子化の実際のレベルを決定するために構成され、フレーム固有の差分値は、逆量子化のデフォルトレベルと特定のフレームにおいて用いられる逆量子化の実際のレベルとの差分を表す。好ましくは、ビデオデコーダは、エンコードされたデジタルビデオシーケンスを表すビットストリームからフレーム固有の差分値の表示を取り出すために構成される。
別の実施の形態においては、本発明の第4の局面に従うビデオデコーダが、前記ビデオシーケンスのフレームが分割される複数のブロックが1つ以上のセグメントにグループ化されるエンコードされたデジタルビデオシーケンスをデコードするために構成され、さらに量子化された変換係数値のセットに適用される逆量子化のレベルを、フレームの1つのセグメントから別のセグメントにかけて調整するためおよびエンコードされたデジタルビデオシーケンスのデコード全体を通して用いられる逆量子化のデフォルトレベルと異なる逆量子化の実際のレベルをフレームの特定のセグメントについての量子化された変換係数のセットに適用するために構成される。好ましくは、デコーダは、逆量子化のデフォルトレベルにセグメント固有の差分値を加えることにより、特定のセグメントにおいて用いられる逆量子化の実際のレベルを決定するために構成され、セグメント固有の差分値は、逆量子化のデフォルトレベルと特定のセグメントにおいて用いられる逆量子化の実際のレベルとの差分を表す。好ましくは、ビデオデコーダは、エンコードされたデジタルビデオシーケンスを表すビットストリームからセグメント固有の差分値の表示を取り出すために構成される。
本発明の第5の局面によれば、本発明の第3の局面に従うエンコーダを含むマルチメディア端末が提供される。
本発明の第6の局面によれば、本発明の第4の局面に従うデコーダを含むマルチメディア端末が提供される。
好ましくは、本発明の第5および/または第6の局面に従うマルチメディア端末は、無線接続によって移動通信網と通信するために構成された移動マルチメディア端末である。
本発明の好ましい実施の形態において、ビデオシーケンス固有の量子化パラメータ(QP)が、実際のピクチャ/スライス量子化パラメータを符号化およびデコードする時に、参照として伝送および使用される。このように、すべてのピクチャ/スライスについて完全なQPを伝送する必要は全くないが、ピクチャ/スライスQPを再構成するために統計的により小さい差分値が伝送および使用され、従って、伝送ビットレートの低減につながる。
本発明の実施の形態を、図5〜8に関連して説明する。
図5は、本発明の好ましい実施の形態に従って実施されたビデオエンコーダ600の概略ブロック図である。図5に示されるビデオエンコーダの構造は、図3に例示される先行技術のビデオエンコーダの構造と実質的に同一であり、ビデオエンコードプロセスにおいて用いられるDCT変換係数の量子化および量子化パラメータ(QP)値のシグナリングに関する動作を実行するエンコーダの部分が適宜修正されている。以前説明された先行技術のビデオエンコーダと同一のやり方で機能を実施し動作するビデオエンコーダのすべての部分は、同一の参照番号で識別される。本発明は特に、スライスまたはフレームレベルにおける量子化パラメータ(QP)値のシグナリングに関連しているので、本発明の好ましい実施の形態に従うビデオエンコーダ600は、符号化されるビデオシーケンスのフレームがマクロブロックに分割され、マクロブロックがスライスにさらにグループ化され、量子化パラメータの表示が、各フレームの最初およびフレーム内の各新しいスライスの最初に提供されるビデオ符号化方法に特別に適合されていることが以下の説明全体を通して想定される。そのようなビデオ符号化方法の例は、T. Wiegand, "Joint Model Number 1", Doc. JVT-A003, Joint Video Team (JVT) of ISO/IEC MPEG and ITU-T VCEG, Jan. 2002に記載されるような、前に引用したITU−TH.26Lビデオ符号化勧告である。また、この方法は、量子化パラメータの表示がフレームの最初でのみ与えられるビデオ符号化システムにおいて適用できる。以下の詳細な説明は、スライスレベル量子化パラメータの表示およびシグナリングにおける本発明に従う方法の適用を例示するために具体的に記載されているが、この方法は、まさに同様なやり方でフレーム(ピクチャ)レベル量子化パラメータの表現に適用できることが理解されるべきである。
ビデオエンコーダ600の動作を詳細に検討する。デジタルビデオシーケンスをエンコードする場合、エンコーダ600は、INTRA符号化およびINTER符号化された圧縮ビデオフレームを生成するために図3に関連して前に説明された方法と同様な方法で動作する。本明細書中で前に説明されたように、INTRA符号化モードにおいては、変換係数値の対応する2次元配列を生成するために、離散コサイン変換(DCT)が画像データ(ピクセル値)の各ブロックに適用される。DCT操作は、変換ブロック104において実行され、このようにして生成された係数はその後、量子化器106に渡され、そこで量子化される。INTER符号化モードにおいては、ブロック104において実行されたDCT変換は、予測エラー値のブロックに適用される。この動作の結果として生成された変換係数も量子化器106に渡され、そこでこれらも量子化される。
本発明によれば、新規なビデオシーケンスのエンコードを開始する場合、エンコーダ600は、量子化器106において生成されたDCT係数値を量子化するために、ビデオシーケンスのエンコード全体を通して用いられる量子化のデフォルトまたは参照レベルを決定する。以下の説明全体を通して、量子化のこのデフォルトまたは参照レベルは、“シーケンスレベル量子化パラメータ”、または略してSQPと呼ばれる。所与のビデオシーケンスについてのSQPの選択は、コントロールマネージャー660により制御され、例えば、エンコードされるシーケンスの特性およびエンコーダにより生成されたエンコードされたビットストリームの伝送に利用可能な帯域幅の考慮に基づくことができる。
本発明の好ましい実施の形態において、エンコーダ600はSQPを、INTER符号化モードで動作する場合、すなわち変換ブロック104において生成されたDCT係数が予測エラー値を表す場合の状況において用いられる量子化のデフォルトまたは参照レベルとして決定する。本発明に従う方法は、空間予測を全く利用しない伝統的なINTRA符号化モードにおいて生成されたDCT係数値の量子化にも適用できることが理解されるべきである。しかしながら、INTRAおよびINTER符号化モードにおける変換係数の種々の起源(INTRA符号化モードで生成されるDCT係数がピクセル値から導き出されるのに対して、INTER符号化モードにおいて生成されたDCT係数は、DCT変換を予測エラー値に適用することによって生成される)を仮定すると、INTRAおよびINTER符号化モード両方におけるDCT係数の量子化に最適な単独のSQP値が決定できることはまずないであろう。従って、本発明に従う方法がINTRAおよびINTER符号化モード両方において用いられる実施の形態において、2つのSQP値が好ましくは用いられ、1つはINTRA符号化モードにおいてQP値の最も効率的な表現を提供し、もう1つはINTER符号化の間に使われるQP値の最も効率的な表現を提供する。他のあらゆる点で、本発明に従う方法は、INTRAおよびINTER符号化モード両方において直接的に類似したやり方で適用することができる。当然、別の実施の形態においては、単独のSQP値を、INTRAおよびINTER両方で符号化されたフレームについてのシーケンスレベル量子化パラメータとして定義し、用いることができる。これは、INTRA redictionエラーをDCTで符号化する前に、TNTRA符号化されたマクロブロックに空間予測が適用されるT. Wiegand, “Joint Model Number 1”, Doc. JVT-A003, Joint Video Team (JVT) of ISO/IECM PEG and ITU-T VCEG, Jan. 2002に記載されるような特に現代のビデオ符号化システムにおける実用的なアプローチである。
典型的なビデオシーケンス中の大部分がINTERフレームとしてエンコードされるので、ビットレートの最大の節減は、本発明に従う方法をINTER符号化モードにおけるQP値の表現に適用することによって達成されることがさらに注目されるべきである。従って、本発明の好ましい実施の形態においては、単独のSQP値が用いられ、この値は、INTER符号化モードにおける予測エラー値を表す量子化DCT係数の量子化において用いられる量子化のデフォルトまたは参照値を示す。
シーケンスについて用いられるSQP値を決定し、コントロールマネージャー660は、選択されたSQP値の表示をコントロールライン122を介してビデオ多重コーダ670に提供し、そして今度はこのコーダーがSQP値の表示を、ビデオシーケンスを表す符号化された画像情報のビットストリーム635中に挿入する。好ましくは、この表示は、エンコードされたビデオビットストリーム635のシーケンスヘッダ部分中に提供される。
次にビデオエンコーダ600は、ビデオシーケンスのエンコードを開始する。図3に例示される先行技術のビデオエンコーダ100の説明に関連して説明されたように、エンコードされるシーケンスの最初のフレームは、INTRA形式でエンコードされる。本発明の好ましい実施の形態に従って定義されたSQP値は、INTER符号化モードで生成されたDCT係数値の量子化に固有なので、INTRA符号化モードでのエンコーダ600の動作は、先行技術のビデオエンコーダ100の動作と完全に類似しており、ここではこれ以上詳細に検討しない。
最初のフレームのエンコードがひとたび完了すると、コントロールマネージャー660は、ビデオエンコーダ600をINTER符号化モードに切り替える。INTER符号化モードで、スイッチ102は、結合器116の出力を含むライン117からのその入力を受信するために動作される。結合器116は、ビデオ入力信号をマクロブロックごとに入力101から受信し、マクロブロックの各ブロックについて予測エラー情報のブロックを形成する。各ブロックについての予測エラー情報は、DCT変換器104に渡され、このDCT変換器は、予測エラー値の各ブロックについて2次元離散コサイン変換を実行し、当該ブロックについてのDCT変換係数の2次元配列を生成する。次に各予測エラーブロックについての変換係数は量子化器106に渡され、そこで、前に説明されたように、量子化パラメータQPを用いて量子化される。INTER符号化プロセスの残りは、先行技術のビデオエンコーダ100に関連して前に説明されたように続く。
各マクロブロックが受信される時に、コントロールマネージャー660は、現在処理されているマクロブロックがスライスの最初のマクロブロックであるかどうかを決定する。もしそうなら、コントロールマネージャーは、DCT変換器104において生成されたDCT係数値を量子化する際に用いられる量子化パラメータ値QPを決定する。フレーム、すでに前のスライスまたは同じフレーム中で費やされたビットおよびことによると前のフレーム中のスライスのために費やされたビットを考慮したビットバジェットに基づいてQPについての見積もりをすることが可能であることが注目されるべきである。これを行って、コントロールマネージャー660は、以前に定義されたシーケンスレベル量子化パラメータ値SQPと当該スライスについて用いられる実際のQP値との差分(ΔQP)を決定する。次にコントロールマネージャーは、この差分の表示をコントロールライン624を介してビデオ多重コーダ670に渡し、このコーダは差分値ΔQPの表示をビットストリーム635中にさらに含める。好ましくは、この表示は、当該スライスに固有の制御情報を含むエンコードされたビデオビットストリーム635のスライスヘッダ部分中に提供される。このプロセスは、現在のフレームの全スライスがINTER符号化された形式でエンコードされるまで繰り返され、その時点で、ビデオエンコーダは、ビデオシーケンスの次フレームのエンコードを開始する。
本発明の好ましい実施の形態に従って実施されたビデオデコーダ700を図6に関連して説明する。図6に例示されるビデオデコーダの構造は、図4に示される先行技術のビデオデコーダの構造と実質的に同一であり、DCT変換係数の逆量子化に関する動作を実行するデコーダの部分が適宜修正されている。以前説明された先行技術のビデオデコーダと同一のやり方で機能を実行し動作するビデオデコーダのすべての部分は、同一の参照番号で識別される。
ここでは、図6のビデオデコーダは、図5に関連して説明されたエンコーダに対応していると想定され、従ってエンコーダ600により伝送さたビットストリーム635を受信およびデコードできる。前に説明されたように、本発明の好ましい実施の形態において、エンコーダ600は、INTER符号化モードにおいて用いられるシーケンスレベル量子化パラメータSQPを決定する。それに応じて、デコーダ700は、このSQP値の表示を受信し、INTER符号化されたフレームについてのエンコードされたビットストリーム中で受信された量子化された変換係数値(予測エラー値を表す)のブロックに適用される逆量子化パラメータの決定においてシーケンスレベル量子化パラメータSQPを用いるために適合される。本発明の別の実施の形態においては、同じプロセスを、INTRA符号化されたフレームについてのビットストリームから抽出された量子化された変換係数値にも適用できる。上記で説明されたように、この別の実施の形態においては、2つのSQP値の表示が提供でき、1つはシーケンスのINTRA符号化されたフレームについてであり、1つはINTER符号化されたフレームについてである。さらなる別の実施の形態においては、単独のシーケンスレベル量子化パラメータを、INTRAおよびINTER符号化モード両方で符号化されたフレームについて示し得る。
本発明の好ましい実施の形態に従うビデオデコーダの動作を詳細に説明する。デコーダ700は、ビットストリーム635を受信し、そのビットストリームをその構成部分に分離する。この動作は、ビデオ多重デコーダ770により実行される。
新しいシーケンスのデコードを開始する時に、ビデオ多重デコーダ770は最初に、受信されたビットストリーム635のシーケンスヘッダ部分から、そのシーケンスに関する情報およびパラメータを全体として抽出する。エンコーダ600の記述に関連して上記で説明されたように、本発明の好ましい実施の形態によれば、ビットストリームのシーケンスヘッダ部分は、INTER符号化モードで生成されたDCT係数値の量子化において用いられたシーケンスレベル量子化パラメータSQPの表示を含むために修正される。ビデオ多重デコーダは、ビットストリームからSQP値の表示を抽出し、もしSQP値が、例えば可変長符号化を用いてエンコードされたのであれば、適切なデコードを適用してSQP値を復元する。次にビデオ多重デコーダは、SQP値をデコーダのコントロールマネージャー760に渡し、コントロールマネージャーはそのSQP値をデコーダのメモリ中に保存する。
次にビデオデコーダ700は、ビデオシーケンスのエンコードされたフレームのデコードを開始し、各フレームのデコードは、ビデオビットストリーム635中のフレームに関連する情報をビデオデコーダが受信し始めると直ちに始まる。ビデオ多重デコーダ770は、エンコードされたビットストリーム635中で受信された各圧縮されたビデオフレームと関連するピクチャタイプ情報からINTRA/INTERトリガ制御信号を抽出し、コントロールライン215を介してコントロールマネージャー760にこの信号を渡す。コントロールマネージャー760は、デコーダを正しいデコードモードに切り替えるために、INTRA/INTERトリガ制御信号に応じてデコーダの動作を制御する。
本発明の好ましい実施の形態においては、INTRA形式で符号化されたフレームのデコードは、先行技術のビデオデコーダ200の動作に関連して前に説明されたやり方と類似のやり方で実行される。他方、INTER形式でエンコードされたフレームのデコードは、以下に記載されるように進行する。
受信されたビットストリームからビデオ多重デコーダ770により抽出された、デコードされる次フレームがINTER符号化されたフレームであるという表示をコントロールマネージャー760が受信すると、コントロールマネージャーは、デコーダ700をINTERモードに切り替える。各フレームのマクロブロックがスライスにグループ化される、本発明の好ましい実施の形態に従うエンコーダ600の記述に関連して説明されたように、エンコードされたビットストリーム635は、一定のスライス固有制御情報を含んでおり、この情報は、シーケンスレベル量子化パラメータSQPを基準とした差分値ΔQPとして表されるスライス固有QP値の表示を含んでいる。有利には、各スライスに特に関連する制御情報は、ビットストリーム中で当該スライスに固有のヘッダ部分として提供される。ビットストリームのそのような部分を受信すると、ビデオ多重デコーダは、ビットストリームのスライスヘッダ部分からスライス固有制御情報を抽出し、ビットストリームから取り出されたそのスライスについてのΔQPの表示を、コントロールライン717を介してコントロールマネージャー760に渡す。
次に、コントロールマネージャー760は、そのスライス中のマクロブロックの量子化されたDCT係数に適用される逆量子化のレベルを決定する。これは、そのスライスについてのΔQP値を、前に受信されたデコーダのメモリ中に保存されたシーケンス固有量子化パラメータSQPと結合することによってなされる。本明細書中で以前に説明されたように、デコーダ中で実行される逆量子化操作は、当初適用された量子化のレベルに等しい値、すなわち、DCT係数を量子化するために対応するエンコーダにおいて用いられたQP値を、各量子化されたDCT係数に掛けるステップを伴う。従って、本発明の好ましい実施の形態によれば、コントロールマネージャー760は、スライスについての受信されたΔQP値をSQPに加えることにより、スライスのマクロブロックについての逆量子化のレベルを決定する。次にコントロールマネージャーは、この値をコントロールライン218を介して逆量子化器210に渡す。
スライスの各マクロブロックについてのエンコードされた情報がビットストリーム635中で受信されると、ビデオ多重デコーダ770は、マクロブロックの各ブロックについてのエンコードされた予測エラー情報を、エンコードされた動きベクトル情報から分離する。ビデオ多重デコーダは、各ブロックについての予測エラー値を表す量子化されたDCT変換係数を再構成し、それらを逆量子化器210に渡す。次に逆量子化器210は、コントロールマネージャー760によってΔQPおよびSQP値から構成されたスライスQPに従って、量子化されたDCT係数を逆量子化する。次に逆量子化器は、逆量子化されたDCT係数を逆DCT変換器220に提供する。デコードプロセスの残りは、先行技術のビデオデコーダ200に関連して前に説明されたように続く。
スライス固有ΔQP値を受信するステップ、ΔQPをSQPと結合するステップおよびスライス内のマクロブロックの各ブロックについて量子化されたDCT係数を逆量子化するステップは、現在のINTER符号化されたフレームの全スライスがデコードされるまで、フレームの各スライスについて繰り返される。この時点で、ビデオエンコーダ700は、エンコードされたビデオシーケンスの次フレームのデコードを開始する。
図7は、本発明の好ましい実施の形態に従ってスライス固有QP値が再構成される方法を例示する。図からわかるように、このプロセスは、以下のステップを含む:
1. シーケンスレベル量子化パラメータ(SQP)を取り出すステップ;
2. ピクチャまたはスライスレベル差分量子化パラメータ(ΔQP)を取り出すステップ;
3. ピクチャまたはスライスについての量子化パラメータを得るために、差分量子化パラメータをシーケンスレベル量子化パラメータに加えるステップ;
4. 前記ピクチャまたはスライス量子化パラメータにより、受信された予測エラー符号化係数を構成するステップ。
図8は、本発明に従って動作するために適合させ得るビデオエンコードおよびデコード装置を含む端末装置を示す。より正確には、この図は、ITU−T勧告H.324に従って実施されたマルチメディア端末80を例示する。この端末は、マルチメディア送受信装置と見なすことができる。この端末は、通信網を介した伝送のためにマルチメディアデータストリームを取り込み、エンコードおよび多重化する要素ならびに受信されたマルチメディアコンテンツを受信、多重分離、デコードおよび表示する要素も含んでいる。ITU−T勧告H.324は、端末の全体的な動作を定義し、その様々な構成部分の動作を制御する他の勧告を参照している。この種類のマルチメディア端末は、会話式ビデオ電話のようなリアルタイム用途、または、例えばインターネット中のマルチメディアコンテンツサーバーからのビデオクリップの取得および/またはストリーミングのような非リアルタイム用途において用いることができる。
本発明の文脈において、図8に示されるH.324端末は、本発明の方法の応用に適した多くの代替的マルチメディア端末実施の1つにすぎないことが理解されるべきである。端末装置の位置および実施に関して多数の選択肢が存在することも注目されるべきである。図8に例示されるように、マルチメディア端末は、アナログPSTN(公衆交換電話網)のような固定回線に接続された通信装置中に置くことができる。この場合、マルチメディア端末は、ITU−T勧告V8、V.34、および任意にV.8bis準拠のモデム91を備えている。また、マルチメディア端末は、外部モデムと接続できる。モデムは、マルチメディア端末により生成された多重化されたデジタルデータおよび制御信号を、PSTN上での伝送に適したアナログ形式に変換することを可能にする。モデムはさらに、マルチメディア端末が、PSTNからアナログ形式のデータおよび制御信号を受信すること、ならびにそれらを端末により適切な方法で多重分離および処理できるデジタルデータストリームに変換することを可能にする。
H.324マルチメディア端末は、ISDN(統合サービスデジタル網)のようなデジタル固定回線網に直接接続できるようなやり方で実施することもできる。この場合、モデム91は、ISDNユーザー−ネットワークインタフェースで置き換えられる。図8においては、このISDNユーザー−ネットワークインタフェースは、代替ブロック92で表されている。
H.324マルチメディア端末は、移動通信用途における使用にも適合させ得る。ワイヤレス通信リンクと共に用いられれば、モデム91は、図8における代替ブロック93により表されるような、どのような適切な無線インタフェースででも置き換え得る。例えば、H.324/Mマルチメディア端末は、現行の第2世代GSM移動電話網、または提案されている第3世代UMTS(汎用移動電話システム)への接続を可能にする無線送受信装置を含み得る。
両方向通信、すなわちビデオデータの伝送および受信用に設計されたマルチメディア端末において、本発明に従って実施されたビデオエンコーダおよびビデオデコーダ双方を設けることが有利であることが注目されるべきである。そのようなエンコーダおよびデコーダペアは、“コーデック”と呼ばれる単独の結合された機能ユニットとして実施されることがよくある。
典型的なH.324のマルチメディア端末を、図8に関連してより詳細に説明する。
マルチメディア端末80は、“端末装置”と呼ばれる各種の要素を含んでいる。これには、参照番号81、82および83によりそれぞれ総称して示されるビデオ、オーディオおよびテレマティック装置が含まれる。ビデオ装置81は、例えば、ビデオ画像を取り込むためのビデオカメラ、受信されたビデオコンテンツを表示するためのモニタおよび任意のビデオ処理装置を含み得る。オーディオ装置82は典型的には、例えば発話されたメッセージを取り込むためのマイク、および受信されたオーディオコンテンツを再生するためのスピーカーを含む。オーディオ装置は、付加的なオーディオ処理ユニットも含み得る。テレマティック装置83は、データ端末、キーボード、電子ホワイトボードまたはファックスユニットのような静止画像送受信装置を含み得る。
ビデオ装置81は、ビデオコーデック85に連結されている。ビデオコーデック85は、両方とも本発明に従って実施されたビデオエンコーダ600および対応するビデオデコーダ700を含んでいる(図5および6参照)。ビデオコーデック85は、取り込まれたビデオデータを、通信リンク上でさらに伝送するために適切な形式でエンコードすること、および通信網から受信された圧縮されたビデオコンテンツをデコードすることを担当する。図8に例示される例において、ビデオコーデックは、ITU−T勧告H.26Lに従って実施され、ビデオコーデックのエンコーダおよびデコーダ両方で本発明に従う方法を実施するために適宜修正されている。
端末のオーディオ装置は、図8において参照番号86により示されるオーディオコーデックに連結されている。ビデオコーデック同様、オーディオコーデックはエンコーダ/デコーダペアを含んでいる。オーディオコーデックは、端末のオーディオ装置によって取り込まれたオーディオデータを、通信リンク上での伝送に適した形式に変換し、ネットワークから受信されたエンコードされたオーディオデータを、例えば端末のスピーカーでの再生に適した形式に変換して戻す。オーディオコーデックの出力は、遅延ブロック87に渡される。遅延ブロックは、ビデオ符号化プロセスによって生じた遅延を補償し、こうしてオーディオおよびビデオコンテンツの同期を保証する。
マルチメディア端末のシステム制御ブロック84は、伝送端末と受信端末との間の共通動作モードを設定するために、適切な制御プロトコル(シグナリングブロック88)を用いて、端末−ネットワークシグナリングを制御する。シグナリングブロック88は、伝送端末および受信端末のエンコードおよびデコード能力についての情報を交換し、ビデオエンコーダの様々な符号化モードを可能にするために使用できる。システム制御ブロック84は、データ暗号化の使用も制御する。データ伝送において用いられる暗号化タイプに関する情報は、暗号化ブロック89から多重化装置/多重分離装置(MUX/DMUXユニット)90に渡される。
マルチメディア端末からのデータ伝送の間に、MUX/DMUXユニット90は、エンコードおよび同期させられたビデオおよびオーディオストリームを、テレマティック装置83から入力されたデータおよび考えられる制御データと結合して単一ビットストリームを形成する。暗号化ブロック89により提供されたビットストリームに適用されるデータ暗号化(もしあれば)のタイプに関する情報は、暗号化モードを選択するために用いられる。それに対応して、多重化され、時には暗号化されたマルチメディアビットストリームが受信されている時に、MUX/DMUXユニット90はビットストリームの解読を担当し、ビットストリームを、その構成マルチメディア成分に分割し、デコードおよび再生のためにそれらの成分を適切なコーデックおよび/または端末装置に渡す。
マルチメディア端末80が移動端末であれば、すなわち無線送受信装置93を装備していれば、この端末は付加的要素も含み得ることが当業者により理解されるであろう。1つの実施の形態において、この端末は、ユーザーによるマルチメディア端末80の操作を可能にするディスプレイおよびキーボードを有するユーザーインタフェース、マルチメディア端末の種々の機能を担当するブロックを制御するマイクロプロセッサのような中央処理装置、ランダムアクセスメモリRAM、リードオンリーメモリROM、およびデジタルカメラを含む。マイクロプロセッサの操作命令、すなわち、マルチメディア端末80の基本機能に対応するプログラムコードは、リードオンリーメモリROM中に保存されており、例えばユーザーの制御下で、マイクロプロセッサにより要求される通りに実行できる。プログラムコードに従って、マイクロプロセッサは、移動通信網との接続を形成するために無線送受信装置93を用い、マルチメディア端末80が無線経路上で移動通信網と情報をやり取りできるようにする。
マイクロプロセッサは、ユーザーインタフェースの状態を監視し、デジタルカメラを制御する。ユーザーコマンドに応答して、マイクロプロセッサは、デジタル画像をRAMに記録することをカメラに指示する。ひとたび画像が取り込まれるか、あるいは取り込みプロセスの間に、マイクロプロセッサは、その画像を画像セグメント(例えば、マクロブロック)に分割し、上記の解説で説明されたように、圧縮された画像シーケンスを生成するために、エンコーダを用いてセグメントの動き補償エンコードを実行する。ユーザーは、マルチメディア端末80に命じて、取り込まれた画像をそのディスプレイ上に表示させたり、圧縮された画像シーケンスを、無線送受信装置93を用いて、別のマルチメディア端末、固定回線網(PSTN)と接続されたビデオ電話またはその他の離通信装置に送信することができる。好ましい実施の形態においては、受信者は対応するデコードプロセスを最小の遅延で開始できるように、画像データの伝送は最初のセグメントがエンコードされると直ちに開始される。
特定の実施の形態の文脈において説明したが、これらの教示への多くの修正および様々な変換がなし得ることは当業者にとり明白であろう。従って、本発明は、その1つ以上の好ましい実施の形態に関連して特に提示および説明されてきたが、上記で述べた本発明の範囲および精神を逸脱することなく本発明において一定の修正または変更をなし得ることが当業者により理解されるであろう。
特に、本発明の第2の考えられる実施の形態によれば、シーケンスQPが伝送されるのではなく、代わりに用途固有の定数がシーケンスQPとして用いられる。
本発明の第3の考えられる実施の形態においては、新しいシーケンスQPを伝送する信頼できる方法が利用可能であれば、シーケンスQPは、ビデオシーケンスの変更特性に応じて更新できる。更新されたSQP値は、ビデオシーケンスを表すエンコードされたビットストリーム中に含められるか、関連した制御チャンネル中でエンコーダからデコーダに直接伝送され得る。
本発明の第4の考えられる実施の形態においては、ビデオシーケンス全体についてQPが一定であれば、シーケンスQPの値のみが、すべてのピクチャ/スライスについてのQPとしてこの値が用いられるべきであるという情報と共に伝送される。
先行技術に従う16×16マクロブロックの形成を例示する。 16×16マクロブロックへのQCIFピクチャの再分割およびスライスへの連続したマクロブロックのグループ化を例示する。 先行技術に従う一般的なビデオエンコーダの概略ブロック図である。 先行技術に従い、図3に示されるエンコーダに対応する一般的なビデオデコーダの概略ブロック図である。 本発明の実施の形態に従うビデオエンコーダの概略ブロック図である。 本発明の実施の形態に従い、図5に示されるエンコーダに対応するビデオデコーダの概略ブロック図である。 本発明の1つの考えられる実施の形態に従うデコードプロセスを例示する。各スライスについての量子化パラメータ(QP)は、シーケンスQP(SQP)をスライス固有の差分QP値(ΔQP)に加えることにより得られる。 本発明に従う方法を実施し得るマルチメディア通信端末の概略ブロック図である。

Claims (36)

  1. デジタルビデオシーケンスを表すエンコードされたビデオビットストリームを生成するビデオ符号化用途に用いられる、デジタルビデオシーケンスをエンコードする方法であって、デジタルビデオシーケンスは多数のフレームを含み、前記シーケンスの各フレームは、複数のブロックに分割されたピクセルの配列を含み、各ブロックは一定数の前記ピクセルを含み、
    予測エラー値の対応するブロックを生成するために、動き補償予測をピクセルのブロックに適用することにより、デジタルビデオシーケンスのフレームをエンコードするステップと、
    予測エラー値の前記ブロックを表す変換係数値のセットを生成するために、変換符号化手法を予測エラー値の前記ブロックに適用するステップとを含み、
    変換係数値のセットを量子化するために、デジタルビデオシーケンスのエンコードにおいて用いられる量子化のデフォルトレベルを定義することを特徴とする方法。
  2. 量子化の前記デフォルトレベルは、エンコードされているビデオシーケンスに固有であることを特徴とする請求項1に記載のエンコード方法。
  3. 量子化の前記デフォルトレベルは、ビデオ符号化用途に固有であることを特徴とする請求項1に記載のエンコード方法。
  4. 量子化のデフォルトレベルの表示をデコードプロセスに提供することをさらに特徴とする請求項1〜3のいずれか一項に記載のエンコード方法。
  5. 量子化のデフォルトレベルの前記表示は、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供されることを特徴とする請求項4に記載のエンコード方法。
  6. エンコードされたビットストリームはビデオエンコード装置から対応するビデオデコード装置に伝送されることを特徴とする請求項5に記載のエンコード方法。
  7. デジタルビデオシーケンスのエンコードの間に量子化のデフォルトレベルが更新され、量子化の更新されたデフォルトレベルの表示をデコードプロセスに提供するステップをさらに含むことを特徴とする請求項1〜6のいずれか一項に記載のエンコード方法。
  8. 量子化のデフォルトレベルと異なる量子化のレベルに基づいて予測エラー値の前記ブロックを表す量子化された変換係数値のセットを与えるために、変換係数値の前記セットが量子化されることを特徴とする請求項1〜7のいずれか一項に記載のエンコード方法。
  9. 量子化の前記レベルと量子化のデフォルトレベルとの差分の表示を、デコードプロセスに提供することをさらに特徴とする請求項8に記載のエンコード方法。
  10. 量子化の前記レベルは、デジタルビデオシーケンスの特定のフレームについての変換係数のセットに適用される量子化の実際のレベルが量子化のデフォルトレベルと異なるように、デジタルビデオシーケンスの1つのフレームから別のフレームにかけて調整されることを特徴とする請求項8または9に記載のエンコード方法。
  11. 量子化の前記実際のレベルは、量子化のデフォルトレベルを基準とした差分として表現可能であることを特徴とする請求項10に記載のエンコード方法。
  12. 量子化の前記実際のレベルと量子化のデフォルトレベルとの差分の表示をデコードプロセスに提供することをさらに特徴とする請求項10に記載のエンコード方法。
  13. 前記デジタルビデオシーケンスのフレームが分割されるピクセルの複数のブロックは、1つ以上のセグメントにグループ化され、変換係数値の前記セットに適用される量子化のレベルは、フレームの特定のセグメントについての変換計数のセットに適用される量子化の実際のレベルが量子化のデフォルトレベルと異なるようにフレームの1つのセグメントから別のセグメントにかけて調整されることを特徴とする請求項8〜12のいずれか一項に記載の方法。
  14. 量子化の前記と量子化のデフォルトレベルとの差分の表示をデコードプロセスに提供することをさらに特徴とする請求項13に記載のエンコード方法。
  15. デジタルビデオシーケンスをエンコードしてそのデジタルビデオシーケンスを表すエンコードされたビデオビットストリームを生成するためのビデオエンコーダであって、デジタルビデオシーケンスは、多数のフレームを含み、前記シーケンスの各フレームは、複数のブロックに分割されたピクセルの配列を含み、各ブロックは、一定数の前記ピクセルを含み、
    予測エラー値の対応するブロックを提供するために、動き補償予測をピクセルのブロックに適用することにより、デジタルビデオシーケンスのフレームをエンコードするための手段と、
    予測エラー値の前記ブロックを表す変換係数値のセットを提供するために、予測エラー値の前記ブロックを変換するための手段とを含み、
    変換係数値の前記セットを量子化するために、量子化のデフォルトレベルを選択するための手段を特徴とする方法。
  16. 量子化の前記デフォルトレベルは、エンコードされるビデオシーケンスに固有であることを特徴とする請求項15に記載のビデオエンコーダ。
  17. 量子化の前記デフォルトレベルの表示を、デジタルビデオシーケンスを表すエンコードされたビットストリーム中で提供するための手段をさらに特徴とする請求項15に記載のビデオエンコーダ。
  18. 量子化のデフォルトレベルと異なる量子化のレベルに基づいて予測エラー値の前記ブロックを表す量子化された変換係数値のセットを与えるために、変換係数値の前記セットが量子化されることを特徴とする請求項15〜17のいずれか一項に記載のビデオエンコーダ。
  19. 量子化の前記レベルとエンコードされたビットストリーム中の量子化のデフォルトレベルとの差分の表示を提供するための手段をさらに特徴とする請求項18に記載のビデオエンコーダ。
  20. 量子化のデフォルトレベルが更新でき、ビデオエンコーダは、量子化の更新されたデフォルトレベルの表示を、エンコードされたビットストリーム中で提供するために構成されることを特徴とする請求項15〜19のいずれか一項に記載のビデオエンコーダ。
  21. 量子化のデフォルトレベルと異なる量子化のレベルに基づいて予測エラー値の前記ブロックを表す量子化された変換係数値のセットを与えるために、変換係数値の前記セットが量子化されることを特徴とする請求項20に記載のビデオエンコーダ。
  22. 変換係数値の前記セットに適用される量子化の前記レベルは、デジタルビデオシーケンスの特定のフレームについての変換計数のセットに量子化の実際のレベルを適用するために調整でき、量子化の前記実際のレベルは量子化のデフォルトレベルと異なることを特徴とする請求項18に記載のビデオエンコーダ。
  23. 量子化のデフォルトレベルを基準とした前記差分の表示を、デジタルビデオシーケンスを表すビットストリーム中で提供する手段をさらに特徴とする請求項22に記載のビデオエンコーダ。
  24. 前記デジタルビデオシーケンスのフレームが分割される複数のブロックを1つ以上のセグメントにグループ化するための手段と、
    フレームの特定のセグメントについての変換係数のセットに量子化の実際のレベルの適用するために、変換係数値の前記セットに適用される量子化のレベルをフレームの1つのセグメントから別のセグメントにかけて調整するための手段とをさらに特徴とし、量子化の前記実際のレベルが量子化のデフォルトレベルと異なっており、前記ビデオエンコーダーは、特定のセグメントにおいて用いられる量子化の実際のレベルを量子化のデフォルトレベルを基準とした差分として表すように構成されることを特徴とする請求項18に記載のビデオエンコーダ。
  25. デジタルビデオシーケンスを表すエンコードされたビットストリーム中の量子化のデフォルトレベルを基準とした前記差分の表示を提供するための手段をさらに特徴とする請求項24に記載のビデオエンコーダ。
  26. マルチメディア端末中に設けられる請求項15〜25のいずれか一項に記載のビデオエンコーダ。
  27. 無線通信装置中に設けられる請求項15〜25のいずれか一項に記載のビデオエンコーダ。
  28. デコードされたデジタルビデオシーケンスを生成するビデオデコード用途に用いられる、エンコードされたデジタルビデオシーケンスをデコードする方法であって、デジタルビデオシーケンスは多数のフレームを含み、前記シーケンスの各フレームは複数のブロックに分割されたピクセルの配列を含み、各ブロックは一定数の前記ピクセルを含み、デジタルビデオシーケンスのフレームは、
    予測エラー値の対応するブロックを生成するために、ピクセルのブロックに動き補償予測を適用するステップと、
    予測エラー値の前記ブロックを表す変換係数値のセットを生成するために、予測エラー値の前記ブロックに変化符号化手法を適用するステップと、
    予測エラー値の前記ブロックを表す変換係数値のセットを生成するために、予測エラー値の前記ブロックに変換符号化手法を適用するステップと、
    予測エラー値の前記ブロックを表す量子化された変換係数値のセットを与えるために、変換係数値の前記セットに量子化のレベルを適用するステップによりエンコードされ、量子化の前記レベルの表示は、エンコードされたデジタルビデオシーケンスを含むエンコードされたビットストリーム中で提供され、前記デコード方法は、
    量子化された変換係数値のセットを逆量子化するために、エンコードされたデジタルビデオシーケンスのデコードにおいて用いられる逆量子化のデフォルトレベルを選択するステップを特徴とし、前記デフォルトレベルは、エンコードされたビットストリーム中で提供される量子化の前記レベルの表示に基づいて選択されることを特徴とするデコード方法。
  29. 逆量子化の前記デフォルトレベルは、デコードされているエンコードされたビデオシーケンスに固有であることを特徴とする請求項28に記載のデコード方法。
  30. 逆量子化の前記にデフォルトレベルは、ビデオデコード用途に固有であることを特徴とする請求項28に記載のデコード方法。
  31. 量子化の前記レベルは、量子化された変換係数値の前記セットを与える前記ステップにおいて更新され、前記デコード方法は、量子化の更新されたレベルに応答して逆量子化のデフォルトレベルを更新することをさらに特徴とする請求項28〜30のいずれか一項に記載のデコード方法。
  32. デコードされたデジタルビデオシーケンスを生成するために、エンコードされたデジタルビデオシーケンスをデコードするためのビデオデコーダであって、デジタルビデオシーケンスは多数のフレームを含み、前記シーケンスの各フレームは、複数のブロックに分割されたピクセルの配列を含み、各ブロックは一定数の前記ピクセルを含み、デジタルビデオシーケンスのフレームは、
    予測エラー値の前記ブロックを表す変換係数値のセットを生成するために、予測エラー値の前記ブロックに変化符号化手法を適用するステップと、
    予測エラー値の前記ブロックを表す変換係数値のセットを生成するために、予測エラー値の前記ブロックに変換符号化手法を適用するステップと、
    予測エラー値の前記ブロックを表す量子化された変換係数値のセットを与えるために、変換係数値の前記セットに量子化のレベルを適用するステップとによりエンコードされ、量子化の前記レベルの表示は、エンコードされたデジタルビデオシーケンスを含むエンコードされたビットストリーム中で提供され、前記ビデオデコーダは、
    エンコードされたビットストリームから、エンコードされたデジタルビデオシーケンスを取り出すための手段と、
    量子化された変換係数値のセットを逆量子化するために、エンコードされたデジタルビデオシーケンスのデコードにおいて用いられる逆量子化のデフォルトレベルを選択するための手段を特徴とし、逆量子化の前記デフォルトレベルは、エンコードされたビットストリーム中で提供される量子化の前記レベルの表示に基づいて選択されることを特徴とするビデオデコーダ。
  33. 逆量子化の前記デフォルトレベルは、デコードされているエンコードされたビデオシーケンスに固有であることを特徴とする請求項32に記載のビデオデコーダ。
  34. 量子化の前記レベルは、量子化された変換係数値の前記セットを与えるステップにおいて更新され、前記ビデオデコーダは、量子化の更新されたレベルに応答して逆量子化のデフォルトレベルを更新するために構成されることを特徴とする請求項32または33に記載のビデオデコーダ。
  35. マルチメディア端末中に設けられる請求項32〜34のいずれか一項に記載のビデオデコーダ。
  36. 無線通信装置中に設けられる請求項32〜34のいずれか一項に記載のビデオデコーダ。
JP2004500513A 2002-04-23 2003-04-23 ビデオ符号化システムにおける量子化器パラメータを表示するための方法および装置 Expired - Lifetime JP4571489B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US37466702P 2002-04-23 2002-04-23
PCT/IB2003/001528 WO2003092297A1 (en) 2002-04-23 2003-04-23 Method and device for indicating quantizer parameters in a video coding system

Publications (2)

Publication Number Publication Date
JP2005524304A true JP2005524304A (ja) 2005-08-11
JP4571489B2 JP4571489B2 (ja) 2010-10-27

Family

ID=29270538

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004500513A Expired - Lifetime JP4571489B2 (ja) 2002-04-23 2003-04-23 ビデオ符号化システムにおける量子化器パラメータを表示するための方法および装置

Country Status (12)

Country Link
US (2) US7263125B2 (ja)
EP (1) EP1497990B1 (ja)
JP (1) JP4571489B2 (ja)
KR (2) KR100973216B1 (ja)
CN (2) CN101232618B (ja)
AU (2) AU2003226585A1 (ja)
HK (2) HK1080241B (ja)
IL (2) IL164176A0 (ja)
MX (1) MXPA04010318A (ja)
NO (1) NO338548B1 (ja)
RU (2) RU2322770C2 (ja)
WO (2) WO2004025943A2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010263623A (ja) * 2009-05-04 2010-11-18 Mediatek Singapore Pte Ltd 再構成可能(reconfigurable)、及び、拡張可能(scalable)な暗号化/復号(encryption/decryption)モジュールによるコーディング装置と方法
JP2013153525A (ja) * 2006-05-05 2013-08-08 Microsoft Corp 柔軟量子化
US8767822B2 (en) 2006-04-07 2014-07-01 Microsoft Corporation Quantization adjustment based on texture level
US8897359B2 (en) 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding

Families Citing this family (113)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6765963B2 (en) * 2001-01-03 2004-07-20 Nokia Corporation Video decoder architecture and method for using same
US20020122491A1 (en) 2001-01-03 2002-09-05 Marta Karczewicz Video decoder architecture and method for using same
US7123655B2 (en) 2001-08-09 2006-10-17 Sharp Laboratories Of America, Inc. Method for reduced bit-depth quantization
US7082450B2 (en) 2001-08-30 2006-07-25 Nokia Corporation Implementation of a transform and of a subsequent quantization
US7693220B2 (en) 2002-01-03 2010-04-06 Nokia Corporation Transmission of video information
CN101232618B (zh) * 2002-04-23 2013-03-27 诺基亚有限公司 用于在视频编码系统中指示量化器参数的方法与设备
US8840475B2 (en) * 2002-12-10 2014-09-23 Ol2, Inc. Method for user session transitioning among streaming interactive video servers
US9192859B2 (en) 2002-12-10 2015-11-24 Sony Computer Entertainment America Llc System and method for compressing video based on latency measurements and other feedback
US9108107B2 (en) 2002-12-10 2015-08-18 Sony Computer Entertainment America Llc Hosting and broadcasting virtual events using streaming interactive video
US10201760B2 (en) 2002-12-10 2019-02-12 Sony Interactive Entertainment America Llc System and method for compressing video based on detected intraframe motion
US9138644B2 (en) 2002-12-10 2015-09-22 Sony Computer Entertainment America Llc System and method for accelerated machine switching
US9314691B2 (en) 2002-12-10 2016-04-19 Sony Computer Entertainment America Llc System and method for compressing video frames or portions thereof based on feedback information from a client device
US8366552B2 (en) 2002-12-10 2013-02-05 Ol2, Inc. System and method for multi-stream video compression
US8549574B2 (en) 2002-12-10 2013-10-01 Ol2, Inc. Method of combining linear content and interactive content compressed together as streaming interactive video
US8711923B2 (en) 2002-12-10 2014-04-29 Ol2, Inc. System and method for selecting a video encoding format based on feedback data
US9446305B2 (en) 2002-12-10 2016-09-20 Sony Interactive Entertainment America Llc System and method for improving the graphics performance of hosted applications
US9061207B2 (en) 2002-12-10 2015-06-23 Sony Computer Entertainment America Llc Temporary decoder apparatus and method
US9077991B2 (en) 2002-12-10 2015-07-07 Sony Computer Entertainment America Llc System and method for utilizing forward error correction with video compression
US8964830B2 (en) 2002-12-10 2015-02-24 Ol2, Inc. System and method for multi-stream video compression using multiple encoding formats
US20090118019A1 (en) 2002-12-10 2009-05-07 Onlive, Inc. System for streaming databases serving real-time applications used through streaming interactive video
US8526490B2 (en) 2002-12-10 2013-09-03 Ol2, Inc. System and method for video compression using feedback including data related to the successful receipt of video content
US7724818B2 (en) * 2003-04-30 2010-05-25 Nokia Corporation Method for coding sequences of pictures
EP1507423B1 (en) * 2003-08-11 2009-06-17 Alcatel Lucent A method of providing a multimedia service in a digital wireless communication network
JP5280003B2 (ja) * 2003-09-07 2013-09-04 マイクロソフト コーポレーション 映像コーデックにおけるスライス層
JP4127818B2 (ja) * 2003-12-24 2008-07-30 株式会社東芝 動画像符号化方法及びその装置
EP1719343A4 (en) * 2004-02-23 2011-10-26 Nokia Corp SENDING VIDEO INFORMATION
US7609902B2 (en) * 2004-04-13 2009-10-27 Microsoft Corporation Implementation of discrete cosine transformation and its inverse on programmable graphics processor
FR2878395A1 (fr) * 2004-11-23 2006-05-26 Paul Bazzaz Procede de traitement de signal video
KR100718376B1 (ko) * 2004-12-15 2007-05-14 주식회사 대우일렉트로닉스 Dvd 호환 홀로그래픽 롬 디스크 제조방법
US7961783B2 (en) * 2005-07-07 2011-06-14 Mediatek Incorporation Methods and systems for rate control in video encoder
JP4185086B2 (ja) * 2005-09-28 2008-11-19 株式会社日立国際電気 画像処理装置
US20070147496A1 (en) * 2005-12-23 2007-06-28 Bhaskar Sherigar Hardware implementation of programmable controls for inverse quantizing with a plurality of standards
CN103957409B (zh) * 2006-01-09 2017-12-29 马蒂亚斯·纳罗施克 编码方法和解码方法、编码器和解码器
US20090196342A1 (en) * 2006-08-02 2009-08-06 Oscar Divorra Escoda Adaptive Geometric Partitioning For Video Encoding
US9438962B2 (en) * 2006-09-12 2016-09-06 Ubiquity Video transmitting over a cellular carrier
KR101381600B1 (ko) 2006-12-20 2014-04-04 삼성전자주식회사 텍스처 합성을 이용한 영상의 부호화, 복호화 방법 및 장치
US8073049B2 (en) 2007-02-01 2011-12-06 Google Inc. Method of coding a video signal
US20080212687A1 (en) * 2007-03-02 2008-09-04 Sony Corporation And Sony Electronics Inc. High accurate subspace extension of phase correlation for global motion estimation
US8355435B2 (en) * 2007-06-15 2013-01-15 Freescale Semiconductor, Inc. Transmission of packet data
EP2169962A4 (en) * 2007-07-17 2012-04-11 Nippon Telegraph & Telephone VIDEO CODING DEVICE AND METHOD, VIDEO CODING PROGRAM, AND RECORDING MEDIUM CONTAINING THE PROGRAM
KR101496324B1 (ko) 2007-10-17 2015-02-26 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US9168457B2 (en) 2010-09-14 2015-10-27 Sony Computer Entertainment America Llc System and method for retaining system state
KR101394153B1 (ko) * 2007-12-11 2014-05-16 삼성전자주식회사 양자화 방법 및 장치, 역양자화 방법 및 장치
WO2009133938A1 (ja) * 2008-04-30 2009-11-05 株式会社 東芝 動画像符号化及び復号装置
EP2286595A1 (en) * 2008-06-16 2011-02-23 Dolby Laboratories Licensing Corporation Rate control model adaptation based on slice dependencies for video coding
US8270744B2 (en) * 2008-06-27 2012-09-18 Sony Corporation Image processing apparatus and image processing method
WO2009157579A1 (ja) * 2008-06-27 2009-12-30 ソニー株式会社 画像処理装置及び画像処理方法
US8325796B2 (en) 2008-09-11 2012-12-04 Google Inc. System and method for video coding using adaptive segmentation
US8634466B2 (en) * 2009-03-17 2014-01-21 Freescale Semiconductor, Inc. Video decoder plus a discrete cosine transform unit
US9152875B2 (en) * 2009-06-11 2015-10-06 Texas Instruments Incorporated Preserving text quality in video encoding
EP2457377A1 (en) * 2009-07-23 2012-05-30 Thomson Licensing Methods and apparatus for adaptive transform selection for video encoding and decoding
KR101456498B1 (ko) * 2009-08-14 2014-10-31 삼성전자주식회사 계층적 부호화 단위의 스캔 순서를 고려한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
US20110090952A1 (en) * 2009-10-21 2011-04-21 Cohen Robert A Directional Transforms for Video and Image Coding
US8488007B2 (en) * 2010-01-19 2013-07-16 Sony Corporation Method to estimate segmented motion
US20110255594A1 (en) * 2010-04-15 2011-10-20 Soyeb Nagori Rate Control in Video Coding
PL4024865T3 (pl) 2010-06-10 2024-05-06 Interdigital Vc Holdings, Inc. Sposoby i urządzenie do określania elementów predykcji parametrów kwantyzacji z wielu sąsiadujących parametrów kwantyzacji
US20110310961A1 (en) * 2010-06-17 2011-12-22 Microsoft Corporation Video rate control based on transform-coefficients histogram
CN101888550A (zh) * 2010-06-28 2010-11-17 中兴通讯股份有限公司 一种slice头信息中量化参数编码方法和装置
KR20120016980A (ko) * 2010-08-17 2012-02-27 한국전자통신연구원 영상 부호화 방법 및 장치, 그리고 복호화 방법 및 장치
US9172960B1 (en) * 2010-09-23 2015-10-27 Qualcomm Technologies, Inc. Quantization based on statistics and threshold of luminanceand chrominance
WO2012050832A1 (en) 2010-09-28 2012-04-19 Google Inc. Systems and methods utilizing efficient video compression techniques for providing static image data
CN103238321B (zh) * 2010-09-30 2016-11-02 三星电子株式会社 用于对分层结构的符号进行编解码的视频编解码方法及其装置
US9532059B2 (en) 2010-10-05 2016-12-27 Google Technology Holdings LLC Method and apparatus for spatial scalability for video coding
HUE059647T2 (hu) 2011-01-13 2022-12-28 Canon Kk Képkódoló berendezés, képkódoló eljárás, képdekódoló berendezés, képdekódoló eljárás, és program
JP6056122B2 (ja) * 2011-01-24 2017-01-11 ソニー株式会社 画像符号化装置と画像復号装置およびその方法とプログラム
US9363509B2 (en) * 2011-03-03 2016-06-07 Electronics And Telecommunications Research Institute Method for determining color difference component quantization parameter and device using the method
WO2012118359A2 (ko) 2011-03-03 2012-09-07 한국전자통신연구원 색차 성분 양자화 매개 변수 결정 방법 및 이러한 방법을 사용하는 장치
CN106454381B (zh) * 2011-03-11 2019-05-28 索尼公司 图像处理装置和方法
US9154799B2 (en) 2011-04-07 2015-10-06 Google Inc. Encoding and decoding motion via image segmentation
US8989256B2 (en) 2011-05-25 2015-03-24 Google Inc. Method and apparatus for using segmentation-based coding of prediction information
KR101442127B1 (ko) 2011-06-21 2014-09-25 인텔렉추얼디스커버리 주식회사 쿼드트리 구조 기반의 적응적 양자화 파라미터 부호화 및 복호화 방법 및 장치
US10298939B2 (en) 2011-06-22 2019-05-21 Qualcomm Incorporated Quantization in video coding
MX350245B (es) * 2011-07-12 2017-08-31 Nec Corp Método de codificación de parámetro de cuantificación de imágenes y método de descodificación de parametro de cuantificación de imágenes.
US8891616B1 (en) 2011-07-27 2014-11-18 Google Inc. Method and apparatus for entropy encoding based on encoding cost
US9025899B2 (en) 2011-10-14 2015-05-05 Advanced Micro Devices, Inc. Region-based image compression
KR20130049524A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
US10390016B2 (en) 2011-11-04 2019-08-20 Infobridge Pte. Ltd. Apparatus of encoding an image
KR20130050149A (ko) * 2011-11-07 2013-05-15 오수미 인터 모드에서의 예측 블록 생성 방법
JP6080375B2 (ja) * 2011-11-07 2017-02-15 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
GB2556489B (en) 2011-11-08 2018-11-21 Kt Corp A method of decoding a video signal using a merge mode
US9247257B1 (en) 2011-11-30 2016-01-26 Google Inc. Segmentation based entropy encoding and decoding
HUE052133T2 (hu) * 2012-01-30 2021-04-28 Samsung Electronics Co Ltd Berendezés hierarchikus adategységeken alapuló videokódolásra és -dekódolásra, amely tartalmaz kvantálási paraméter predikciót
US9262670B2 (en) 2012-02-10 2016-02-16 Google Inc. Adaptive region of interest
US9094681B1 (en) 2012-02-28 2015-07-28 Google Inc. Adaptive segmentation
US9521410B2 (en) * 2012-04-26 2016-12-13 Qualcomm Incorporated Quantization parameter (QP) coding in video coding
US9185429B1 (en) 2012-04-30 2015-11-10 Google Inc. Video encoding and decoding using un-equal error protection
US9113164B1 (en) 2012-05-15 2015-08-18 Google Inc. Constant bit rate control using implicit quantization values
US9781447B1 (en) 2012-06-21 2017-10-03 Google Inc. Correlation based inter-plane prediction encoding and decoding
US9167268B1 (en) 2012-08-09 2015-10-20 Google Inc. Second-order orthogonal spatial intra prediction
US9510019B2 (en) 2012-08-09 2016-11-29 Google Inc. Two-step quantization and coding method and apparatus
US9332276B1 (en) 2012-08-09 2016-05-03 Google Inc. Variable-sized super block based direct prediction mode
US9380298B1 (en) 2012-08-10 2016-06-28 Google Inc. Object-based intra-prediction
US9344742B2 (en) 2012-08-10 2016-05-17 Google Inc. Transform-domain intra prediction
US9826229B2 (en) 2012-09-29 2017-11-21 Google Technology Holdings LLC Scan pattern determination from base layer pixel information for scalable extension
US9369732B2 (en) 2012-10-08 2016-06-14 Google Inc. Lossless intra-prediction video coding
US9407915B2 (en) 2012-10-08 2016-08-02 Google Inc. Lossless video coding with sub-frame level optimal quantization values
RU2619198C1 (ru) * 2012-11-08 2017-05-12 Кт Корпорейшен Способ декодирования видеосигнала
EP2920962A4 (en) 2012-11-13 2016-07-20 Intel Corp ADAPTIVE TRANSFORMATION ENCODING OF CONTENT FOR NEXT GENERATION VIDEO
US9350988B1 (en) 2012-11-20 2016-05-24 Google Inc. Prediction mode-based block ordering in video coding
BR112015013768A2 (pt) * 2012-12-18 2017-07-11 Sony Corp dispositivo, e, método de processamento de imagem
US9628790B1 (en) 2013-01-03 2017-04-18 Google Inc. Adaptive composite intra prediction for image and video compression
EP2952003B1 (en) 2013-01-30 2019-07-17 Intel Corporation Content adaptive partitioning for prediction and coding for next generation video
US9681128B1 (en) 2013-01-31 2017-06-13 Google Inc. Adaptive pre-transform scanning patterns for video and image compression
US9247251B1 (en) 2013-07-26 2016-01-26 Google Inc. Right-edge extension for quad-tree intra-prediction
US9392272B1 (en) 2014-06-02 2016-07-12 Google Inc. Video coding using adaptive source variance based partitioning
US9578324B1 (en) 2014-06-27 2017-02-21 Google Inc. Video coding using statistical-based spatially differentiated partitioning
GB2531001B (en) * 2014-10-06 2019-06-05 Canon Kk Method and apparatus for vector encoding in video coding and decoding
EP3259848A4 (en) 2015-04-10 2018-10-24 Red.Com, Llc Video camera with rate control video compression
CN109996076B (zh) * 2016-10-12 2021-08-06 深圳市大疆创新科技有限公司 码率控制的方法、计算机系统和装置
US10356439B2 (en) * 2017-06-29 2019-07-16 Intel Corporation Flexible frame referencing for display transport
JP7313330B2 (ja) 2017-07-05 2023-07-24 レッド.コム,エルエルシー 電子機器でのビデオ画像データ処理
EP3425911A1 (en) * 2017-07-06 2019-01-09 Thomson Licensing A method and a device for picture encoding and decoding
US20220272342A1 (en) * 2019-07-05 2022-08-25 V-Nova International Limited Quantization of residuals in video coding

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06121171A (ja) * 1992-10-07 1994-04-28 Nec Corp 画像符号化装置
JPH114449A (ja) * 1997-06-13 1999-01-06 Asahi Optical Co Ltd 画像圧縮装置および量子化テーブル作成装置
JP2000197049A (ja) * 1998-12-24 2000-07-14 Nec Corp 動画像可変ビットレート符号化装置および方法
JP2000350211A (ja) * 1999-06-07 2000-12-15 Toshiba Corp 動画像符号化方法及び動画像符号化装置
JP2002044604A (ja) * 2000-07-21 2002-02-08 Sharp Corp 情報圧縮記録装置
JP2002058029A (ja) * 2000-08-11 2002-02-22 Toshiba Corp 動画像符号化装置および動画像符号化方法およびプログラムを記録した媒体

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5045103A (en) * 1987-08-07 1991-09-03 Glasstech, Inc. Apparatus for heating and bending glass sheets
US5054103A (en) * 1987-09-24 1991-10-01 Matsushita Electric Works, Ltd. Picture encoding system
US5144426A (en) * 1989-10-13 1992-09-01 Matsushita Electric Industrial Co., Ltd. Motion compensated prediction interframe coding system
JPH0813138B2 (ja) * 1990-11-28 1996-02-07 松下電器産業株式会社 画像符号化装置
US5122875A (en) * 1991-02-27 1992-06-16 General Electric Company An HDTV compression system
US5231484A (en) 1991-11-08 1993-07-27 International Business Machines Corporation Motion video compression system with adaptive bit allocation and quantization
JPH08511385A (ja) * 1993-04-16 1996-11-26 データ トランスレイション,インコーポレイテッド 可変量子化を用いた適応型画像圧縮
US5715009A (en) * 1994-03-29 1998-02-03 Sony Corporation Picture signal transmitting method and apparatus
JP3277677B2 (ja) * 1994-04-01 2002-04-22 ソニー株式会社 信号符号化方法及び装置、信号記録媒体、信号伝送方法、並びに信号復号化方法及び装置
JP3954656B2 (ja) * 1994-09-29 2007-08-08 ソニー株式会社 画像符号化装置及び方法
US6256349B1 (en) * 1995-12-28 2001-07-03 Sony Corporation Picture signal encoding method and apparatus, picture signal transmitting method, picture signal decoding method and apparatus and recording medium
JP3067628B2 (ja) * 1996-01-19 2000-07-17 日本電気株式会社 画像符号化装置
KR100203710B1 (ko) * 1996-04-30 1999-06-15 전주범 비트 발생량 조절기능을 갖는 영상 부호화 시스템
JP3579544B2 (ja) * 1996-08-29 2004-10-20 ペンタックス株式会社 画像圧縮伸張装置
KR100229796B1 (ko) * 1996-08-30 1999-11-15 전주범 열화영상에 대한 보상기능을 갖는 영상 복호화 시스템
JP3924794B2 (ja) * 1996-09-04 2007-06-06 ソニー株式会社 画像圧縮符号化装置及び画像圧縮符号化方法
DE69805583T2 (de) * 1997-02-08 2003-01-23 Matsushita Electric Ind Co Ltd Quantisierungsmatrix für die codierung von stand- und bewegtbildern
US6795501B1 (en) * 1997-11-05 2004-09-21 Intel Corporation Multi-layer coder/decoder for producing quantization error signal samples
WO2000021302A1 (en) * 1998-10-02 2000-04-13 General Instrument Corporation Method and apparatus for providing rate control in a video encoder
US6263022B1 (en) 1999-07-06 2001-07-17 Philips Electronics North America Corp. System and method for fine granular scalable video with selective quality enhancement
US6788740B1 (en) * 1999-10-01 2004-09-07 Koninklijke Philips Electronics N.V. System and method for encoding and decoding enhancement layer data using base layer quantization data
US6480547B1 (en) * 1999-10-15 2002-11-12 Koninklijke Philips Electronics N.V. System and method for encoding and decoding the residual signal for fine granular scalable video
US6677868B2 (en) * 2001-03-16 2004-01-13 Sharp Laboratories Of America, Inc. Entropy coding with adaptive syntax to replace high probability symbols with lower probabilities symbols
CN101448162B (zh) * 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
CN101232618B (zh) * 2002-04-23 2013-03-27 诺基亚有限公司 用于在视频编码系统中指示量化器参数的方法与设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06121171A (ja) * 1992-10-07 1994-04-28 Nec Corp 画像符号化装置
JPH114449A (ja) * 1997-06-13 1999-01-06 Asahi Optical Co Ltd 画像圧縮装置および量子化テーブル作成装置
JP2000197049A (ja) * 1998-12-24 2000-07-14 Nec Corp 動画像可変ビットレート符号化装置および方法
JP2000350211A (ja) * 1999-06-07 2000-12-15 Toshiba Corp 動画像符号化方法及び動画像符号化装置
JP2002044604A (ja) * 2000-07-21 2002-02-08 Sharp Corp 情報圧縮記録装置
JP2002058029A (ja) * 2000-08-11 2002-02-22 Toshiba Corp 動画像符号化装置および動画像符号化方法およびプログラムを記録した媒体

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8767822B2 (en) 2006-04-07 2014-07-01 Microsoft Corporation Quantization adjustment based on texture level
JP2013153525A (ja) * 2006-05-05 2013-08-08 Microsoft Corp 柔軟量子化
JP2014209790A (ja) * 2006-05-05 2014-11-06 マイクロソフト コーポレーション 柔軟量子化
CN105812815A (zh) * 2006-05-05 2016-07-27 微软技术许可有限责任公司 灵活量化
JP2017063486A (ja) * 2006-05-05 2017-03-30 マイクロソフト テクノロジー ライセンシング,エルエルシー 柔軟量子化
US9967561B2 (en) 2006-05-05 2018-05-08 Microsoft Technology Licensing, Llc Flexible quantization
CN105812815B (zh) * 2006-05-05 2019-03-08 微软技术许可有限责任公司 灵活量化
US8897359B2 (en) 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding
US9185418B2 (en) 2008-06-03 2015-11-10 Microsoft Technology Licensing, Llc Adaptive quantization for enhancement layer video coding
US9571840B2 (en) 2008-06-03 2017-02-14 Microsoft Technology Licensing, Llc Adaptive quantization for enhancement layer video coding
US10306227B2 (en) 2008-06-03 2019-05-28 Microsoft Technology Licensing, Llc Adaptive quantization for enhancement layer video coding
JP2010263623A (ja) * 2009-05-04 2010-11-18 Mediatek Singapore Pte Ltd 再構成可能(reconfigurable)、及び、拡張可能(scalable)な暗号化/復号(encryption/decryption)モジュールによるコーディング装置と方法

Also Published As

Publication number Publication date
US20070291849A1 (en) 2007-12-20
US7263125B2 (en) 2007-08-28
CN101232618B (zh) 2013-03-27
US8175148B2 (en) 2012-05-08
AU2003285850A1 (en) 2004-04-30
EP1497990A1 (en) 2005-01-19
AU2003226585A1 (en) 2003-11-10
RU2004133964A (ru) 2005-05-10
US20040013202A1 (en) 2004-01-22
KR20080104060A (ko) 2008-11-28
EP1497990B1 (en) 2019-10-23
IL164176A (en) 2009-11-18
AU2003285850A8 (en) 2004-04-30
IL164176A0 (en) 2005-12-18
MXPA04010318A (es) 2005-02-03
KR100954609B1 (ko) 2010-04-26
HK1080241A1 (en) 2006-04-21
CN101232618A (zh) 2008-07-30
JP4571489B2 (ja) 2010-10-27
RU2350040C1 (ru) 2009-03-20
WO2003092297A1 (en) 2003-11-06
NO338548B1 (no) 2016-09-05
HK1117320A1 (en) 2009-01-09
CN100380980C (zh) 2008-04-09
KR20040106378A (ko) 2004-12-17
WO2004025943A3 (en) 2004-06-10
WO2004025943A2 (en) 2004-03-25
KR100973216B1 (ko) 2010-07-30
EP1497990A4 (en) 2011-03-16
RU2322770C2 (ru) 2008-04-20
CN1647541A (zh) 2005-07-27
NO20044070L (no) 2004-12-23
HK1080241B (zh) 2008-11-07

Similar Documents

Publication Publication Date Title
JP4571489B2 (ja) ビデオ符号化システムにおける量子化器パラメータを表示するための方法および装置
US6879268B2 (en) Adaptive variable length coding of digital video
JP4510465B2 (ja) イメージ/ビデオ符号器及び/又は復号器における変換係数の符号化
JP4234607B2 (ja) 画像/ビデオエンコーダおよび/またはデコーダにおける符号化変換係数
KR101108501B1 (ko) 비디오 시퀀스에서의 움직임 부호화 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060309

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090324

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090623

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090630

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090924

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100105

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100402

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100409

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100611

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100713

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100812

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130820

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4571489

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R157 Certificate of patent or utility model (correction)

Free format text: JAPANESE INTERMEDIATE CODE: R157

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term