JP2006521727A - インタレースデジタルビデオデータのスケーラブル符号化および復号化 - Google Patents

インタレースデジタルビデオデータのスケーラブル符号化および復号化 Download PDF

Info

Publication number
JP2006521727A
JP2006521727A JP2006504438A JP2006504438A JP2006521727A JP 2006521727 A JP2006521727 A JP 2006521727A JP 2006504438 A JP2006504438 A JP 2006504438A JP 2006504438 A JP2006504438 A JP 2006504438A JP 2006521727 A JP2006521727 A JP 2006521727A
Authority
JP
Japan
Prior art keywords
sequence
video
interlaced
base layer
temporal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006504438A
Other languages
English (en)
Other versions
JP4587321B2 (ja
Inventor
マルカン グウェナエル
ボワソン ギョーム
フランソワ エドゥワール
ヴィエロン ジェローム
ロベール フィリップ
ギュイモ クリスティーヌ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2006521727A publication Critical patent/JP2006521727A/ja
Application granted granted Critical
Publication of JP4587321B2 publication Critical patent/JP4587321B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H04N19/615Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Television Systems (AREA)

Abstract

インタレースビデオに対するフルにスケーラブルなエンコーダおよびデコーダ。デジタルビデオデータのインタレースシーケンスをエンコードする本発明の方法は、インタレースビデオシーケンス(I)を第1フィールド(F1)および第2フィールド(F2)に分解し、デジタルフィルリング(SF1)を行って、上記の第1フィールド(F1)の比較的周波数の低い成分(L)および比較的周波数の高い成分(H)を得、空間時間フィルタリング(STF)および動き推定(ME1)を使用して、受信器においてプログレッシブモードビデオシーケンス(V1,V2)を再構成するのに適した基本レイヤ信号(P,MV1)を生成する。有利にもエンコーダにおける空間時間フィルタ(STF)および受信器における逆プロセス(STS)の両方が、空間的および時間的な次元におけるスケーリングを行うことができる。第2フィールド(F2)は拡張信号(FF2,MV2)を生成するために使用され、これらの拡張信号によって受信器は、フルの空間および/または時間的な解像度、またはスケーリングされた空間および/または時間的な解像度を再生することができる。

Description

本発明は、ビデオ圧縮法に関する。さらに詳しくいうと本発明は、デジタルビデオデータのインタレースシーケンスを符号化および復号化する際にスケーラビリティを達成する方法に関する。
発明の背景
今日、ほとんどのビデオ符号化アルゴリズムは、動き補償予測符号化を使用して伝送帯域幅を低減している。このようなハイブリッド方式では時間的な冗長性が動き補償によって低減され、空間的な冗長性が動き補償残差変換符号化によって低減される。テストを目的とした利用可能なMPEGビデオ素材を含むほとんどの標準定義(SD standard definition)のビデオ素材はインタレースされているが、スケーラブルビデオ符号化における最近の研究は、プログレッシブビデオの評価だけに力が注がれて来た。この点についての努力は、例えばMPEG−4に対して払われ、これは"Description of Exploration experiments in Scalable Video Coding", ISO/IEC JEC1/SC29/WG11, MPEG2002/N5414, Awaji, December 2002に記載されている通りである。例えばHDTVに対してWO9003082に記載されている公知のアルゴリズムは、空間的および時間的にスケーラブルなインタレースビデオを伝送するのに十分でない。それは、より広範なスケーラビリティが要求されるからである。新しいディスプレイタイプ、例えば小型モバイルディスプレイは、低い空間および時間解像度のプログレッシブビデオで対処しているが、その他のもの、例えばHDTV受信器には、高い空間解像度および標準の時間解像度を有するインタレースシーケンスが必要である。
発明の要約
本発明の目的は、インタレースビデオのサブバンドまたはウェーブレット符号化を改善することである。インタレースビデオにおいて空間および時間的な次元は密に結合しているため、本発明の方法は空間時間SN比(SNR)との関わり合いにおいて付加的な研究を使用する。
本発明によって解決すべき課題は、インタレースビデオの符号化および復号化において十分な空間的および時間的なスケーラビリティが得られるようにする方法を提供することである。このような方法は、符号化については請求項1に、また復号化については請求項6に記載されている。この符号化方法を利用する装置は請求項10に記載されている。上記の復号化方法を利用する装置は請求項11に記載されている。これは、受信信号をプログレッシブかまたはインタレースの時間解像度レベルの異なるビデオシーケンスに、またさまざまなレベルの空間解像度に変換することができる。
本発明によれば、インタレースデジタルビデオデータはつぎのように処理される。すなわちここでは、空間的、時間的および品質、SNRについての品質上のスケーラビリティがサポートされるように処理されるのであり、すなわち十分な分解操作および空間時間フィルタリングによって、スケーラブルな空間的および/または時間的なサブレゾリューションシーケンスが生成されるのである。
これはインタレースソースビデオ素材を2つのレイヤ、すなわち基本レイヤ(BL base layer)と拡張レイヤ(EL enhancement layer)とに分けるまたは分解することによって達成される。BLには、プログレッシブモードにおける入力ビデオソースのフルにスケーラブルな記述が含まれ、ここでスケーラビリティは空間解像度、時間解像度および品質についてのスケーラビリティである。ELとBLとを組み合わせた場合、ELにより、オリジナルのインタレースビデオ素材を低コストでスケーラブルに再構成することができる。これにはオリジナルの空間解像度、時間解像度およびSNR品質の達成が含まれる。
上記の分解は、インタレースビデオシーケンスの1つおきのフィールドを同じレイヤに関連づけることによって達成可能であり、例えば、1レイヤが偶数フィールドを処理し、別のレイヤが奇数フィールドを処理するのである。有利にも、EL処理の一部に対してBLからの動き推定(ME motion estimation)ベクトルを使用することにより、計算能力を節約することができる。インタレースビデオシーケンスは5つの成分に分解され、これらは2つのレイヤBLおよびELに属する。本発明による受信器は、空間時間解像度およびSNRが異なるさまざまな品質レベルのビデオシーケンスにこれらの成分を結合することができる。
本発明の有利な実施形態は、従属請求項、以下の説明、および図に示されている。
図の簡単な説明
本発明の例示的な実施形態を、添付の図面に関連して説明する。ここで、
図1は、本発明にしたがってスケーラブル符号化を行うビデオコーダの構造を示しており、
図2は、本発明によるスケーラブルビデオデコーダの構造を示している。
本発明の詳細な説明
図1は、本発明によるビデオコーダの構造を示している。入力信号Iは、2αHzの時間解像度、すなわち秒当たり2α個のフィールドまたは秒当たりα個のフレームと、2M×2Nの空間解像度、すなわちそれぞれ2M個のピクセルを有する2N行のフレームまたはそれぞれ2M個のピクセルを有するN行のフィールドとを有するインタレースビデオシーケンスである。分解ブロックSPは、このシーケンスを分配して、フィールドが交互に第1分岐または第2分岐に渡されるようにする。第1分岐は、BL情報とEL情報を生成するが、ここではBL分岐と称される。別の1つの分岐はEL情報だけを形成し、ここではEL分岐と称される。各分岐は秒当たりαフレームの時間解像度と、2M×Nピクセルの空間解像度を有するビデオシーケンスを受け取る。例えば、BLシーケンスF1は、偶数フィールドを含み、ELシーケンスは奇数フィールドを含む。一般的には分解ブロックSPは任意の分解変換を行って、単一のソース表現から2つの表現を形成する。これはまた、さらに高度な処理、例えばロー/ハイフィルタリングのためにさまざまなフィルタもを利用する。
BL分岐はx軸に沿って、すなわち行内でF1シーケンスに空間フィルタリングSF1を行い、F1の比較的周波数の低い部分からM×Nピクセルの空間解像度を有するビデオシーケンスLを生成し、F1の比較的周波数の高い部分から空間解像度拡張信号Hを生成する。簡単な例ではこのフィルタリングは、ローパスフィルタLProwおよびハイパスフィルタHProwによって行うことができ、これらは共に例えばファクタ2の水平サブサンプリングを行う。別のファクタが有利な場合もある。低解像度シーケンスLは、空間時間フィルタSTFに入力され、また動き推定(ME Motion Estimating)ブロックME1に入力される。空間時間フィルタSTFは、3Dウェーブレット変換または2D+tウェーブレット変換とも称される動き補償時間変換を行う。これは例えば、長さ2のHaar変換フィルタ、または長さ9および7または長さ5および3のDaubechiesフィルタとして実現することができる。MEブロックME1は動きベクトルMV1を生成し、これは3つの目的に使用される。すなわち、第1にこれらの動きベクトルは空間時間フィルタリング処理を最適化するために使用される。第2にこれは受信器に伝送され、例えば逆フィルタリング7処理に使用される。また第3にこれらはコーダのEL分岐に使用される。
空間時間フィルタSTFの出力信号Pは伝送され、受信器によって動きベクトルMV1と組み合わされて、例えばM×Nピクセル、αHzのプログレッシブモードビデオシーケンスを再生することができる。有利にも上に述べた実現を使用する場合、空間時間フィルタを設計して、このプログレッシブシーケンスが時間解像度について、またxおよびyの両方向の空間解像度についてスケーラブルであるようにすることも可能である。このフィルタは、ターゲットフレームレートまたはフォーマットに応じて、複数のフィルタリングレベルを有することができるため、例えば、M′×N′の空間解像度および/またはθαHzの時間解像度を達成することができる。ただしここでM′およびN′はそれぞれ[0,M]および[0,N]の範囲にあり、θ∈Q01であり、Q01は[0,1]の範囲にある有理数である。このフィルタリングによって、相異なる空間時間周波数が得られ、その適合のさせ方によって、例えば、データストリーム内での編成によって、基本レイヤを完全にスケーラブルすることができる。このブロックSTFの出力Pは、解像度M′×N′のプログレッシブシーケンスであり、これはオリジナルの2M×2Mフォーマットのサブレゾリューションであり、また本発明のシステムが生成する最も低い空間および時間解像度レベルを表す。
x軸に沿った高周波数フィールドを含む空間解像度エンハンスメント信号Hは、拡張レイヤELに属しており、また高性能受信器によって使用されて、x軸方向に空間解像度がより高い、オリジナルの解像度までのフレームを再構成することができる。
EL分岐により、F2シーケンスに対して動き補償時間フィルタリング(MCTF Motion Compensated Temporal Filtering)が行われる。これは動きベクトル(MV Motion Vector)を使用して、1つの画像におけるオブジェクトの位置が別の画像に対して移動している場合に伝送するデータの量を最小化する。MVの相異なる2つの集合を使用することができる。すなわち、オリジナルのインタレースシーケンスから生成されるMVか、奇数または偶数の同じパリティのフィールドを比較することよって生成されるMVかのいずれかを使用することができる。有利にも、後者の場合にBL分岐のME1ブロックで生成されるMV1ベクトルを使用可能である。それは、例えば連続する2つの偶数フィールド間の動きは、相応する2つの奇数フィールド間の動きに極めて類似しており、またこの逆が成り立つことが多いからである。4つのフィールドのシーケンス内で動きが変化することがなおあり得るため、第2の動き推定ブロックME2においてインタレースシーケンスIから生成されるより良好な動きベクトルMV2を使用することが有利なこともある。このため決定ブロックがEL分岐に組み込まれており、これによってMVのいずれの集合をMCTFに対して使用するかが決定され。この決定情報を伝送することも有利である。
動き補償時間フィルタリング(MCTF)により、フィルタリングされたF2フィールドFF2、すなわちオリジナルのF2フィールドよりもコストの低いF2フィールドを生成することができる。これらのフィルタリングされたフィールドFF2は、入力F2フィールドと同じ空間および時間解像度を有する。コストの低減は、上記の動きベクトルを使用することによって達成される。それは伝送データ量が低減されるからである。動き推定および動き補償は、パリティとは無関係にフィールドにわたって行うことができ、これによってフィールド内およびフィールド間の相関が取り込まれる。さまざまな予測モード(後方、前方または双方向)ならびに多重基準フィールドアルゴリズム(multiple reference fields algorithm)を使用可能である。MV符号化コストおよび推定の複雑度を低減するため、目標とされる要求に応じて、基本レイヤからの動き情報を事前または事後に使用することができる。
本発明の1実施形態では、動き補償時間フィルタリングMCTFによって、上記のインタレースビデオ信号Iまたは第1動き推定ME1の結果も使用する、
伝送に対して有利であるのは、結果的に得られる複数のストリームを1ビットストリームに多重化することである。ここで示した符号化方法により、インタレースされたオリジナルのビデオシーケンスは2つのレイヤ、BLおよびELに分解される。これによって、結果的に得られるビットストリームは、コーダ側でもデコーダ側でも共にさまざまな空間および時間解像度レベルをサポートすることができる。上記のELは複数のレイヤとしてみなすことも可能である。それはこれが複数の解像度のレベルを含むからである。
本発明の1実施形態では、上記の第1基本レイヤ信号P、第1サブシーケンスF1から生成される動きベクトルMV1、第1サブシーケンスF1から生成される比較的周波数の高いストリームH、インタレースシーケンスIから生成される動きベクトルMV2、動き補償時間フィルタリングMCTFから得られる拡張レイヤ信号FF2のうちの少なくともいくつかを伝送する。
具体例として、入力ビデオシーケンスIが、α=30ないしは2αHzが60Hzである標準定義(SD)ビデオ、F1が例えば偶数フィールドを、またF2が例えば奇数フィールドを表し、LProwによって2:1のサブサンプリングが行われ、Lが30Hzにおける共通イメージフォーマット(CIF Common Image Format)シーケンスであり、STFが1レベルの空間時間フィルタとすると、Pは15HzのCIFシーケンスである。
デコーダ側では目的とするアプリケーションに応じて、すなわち、プログレッシブかまたはインタレースモードにおいて復号化のロスがないかまたはあるかに応じて、複数のシナリオを考慮しなければならない。図2は例示的な高性能デコーダを示しており、これは、技術的な要求またはユーザの要求によって選択可能な複数の品質レベルを生成することができる。デコーダモードは、品質セレクタQS(quality selector)によって選択可能である。これは、例えば、送信器またはコンテンツプロバイダ、ないしは受信器の技術的な性能、またはユーザの好みによって制御可能である。さまざまなモードの例は、ロスのの有無、異なるフィールドレート、異なる空間解像度などである。復号化処理は、選択された復号品質に依存する。
デコーダ側から見て最も簡単なモードは、ロスのないプログレッシブモードである。この場合、プログレッシブシーケンスPと動きベクトルMV1とを含む基本レイヤ信号BLだけを完全に復号化するだけでよい。復号化は空間時間合成STS(spatio-temporal systhesis)を使用して行われる。このようにして、再構成されるビデオシーケンスV1は、フルの空間時間解像度、すなわち、M×Nピクセルの空間解像度およびαHzの時間解像度を有するのである。
別のモードは、ロスがあるプログレッシブなモードである。つまり、再構成されるビデオシーケンスV2の空間時間解像度は、ロスのないプログレッシブモードV1で達成される解像度のサブレゾリューションである。復号化に対して空間時間合成STSを使用することによって可能になるのは、任意のM′×N′、θ′αHzのプログレッシブシーケンスを再構成することであり、ここでM′およびN′はそれぞれ]0,M]および]0,N]の範囲にあり、θ′は]0,1]の範囲にある。ここでも基本レイヤだけを復号化すればよい。
フルのオリジナルのインタレースビデオ素材を再構成する場合には、すなわち、情報のロスなしに再構成したい場合、ロスのないインタレースモードが必要である。つまり、基本レイヤBL全体および拡張レイヤELの両方を完全に復号化しなければならないのである。コーダについて述べたように、EL信号は、F1フィールドのx方向における比較的高い周波数に関連する付加的なデータHと、入力インタレースシーケンスから生成される動きベクトルMV2と、F2フィールドに関連する情報FF2とを含む。適切な復号化のためには、すべてのコーダ操作を逆に実行しなければならない。逆フィルタリングは、ふつう合成(synthesis)と称される。ここでは空間合成SS(spatial synthesis)である相応の逆フィルタリングが上記の付加的なデータHおよび再構成されたBL信号V1に適用される場合、この逆フィルタリングによってビデオシーケンスV3が形成される。これは、解像度2M×NおよびαHzのコーダ側におけるオリジナルのF1シーケンスに相応する。同じ解像度を有する、コーダ側からのオリジナルのF2シーケンスは、逆動き補償時間フィルタIMCTF(inverse motion compensated temporal filter)を使用することにより、別のEL信号FF2およびMV2から合成することができる。つぎにF1フィールドは、逆分解操作ISP(inverse splitting operation)によってF2フィールドとマージされ、フルの2M×2Nの空間時間解像度および2αHzないしは秒当たりα個のインタレースフレームを有する完全なインタレースビデオシーケンスV4が再構成される。
別の可能性として、ロスのあるインタレースモードを使用することができる。すなわち、再構成される空間時間解像は、フルの解像度のサブレゾリューションである。上でロスのあるプログレッシブモードに対して示したように、復号化により、任意のM′×N′、θαHzのインタレースシーケンスを再構成することができる。このロスのあるケースが意味するのは、基本レイヤまたは拡張レイヤ、またはこれらの両方が完全には復号化されないことである。これは空間時間合成STSによって行うことができ、さらなる処理のためにV1の代わりにV2を使用することができる。これはまた空間合成SSまたは逆動き補償時間フィルタリングIMCTFによって行うことも可能である。
本発明の別の実施形態では、コーダにおける空間時間フィルタSTFを単純化して、F1シーケンスを直接伝送することができる。この場合、受信器において空間時間合成STSを取り消すことも可能である。
有利にも本発明の方法により、インタレースビデオを含めたスケーラブルビデオを生成することができ、ここでこれスケーラブルビデオは、高解像度インタレースモードのTVおよび低解像度プログレッシブモードのモバイル装置に使用可能な同じビットストリームを有する。このビットストリームは完全に埋め込まれているため、送信器側でも受信器側でも共に所望のすべての空間的または時間的なサブレゾリューションを抽出することができる。
本発明の方法は、すべてのビデオアプリケーション、有利にはすべてのMPEG準拠システムに使用可能である。
本発明にしたがってスケーラブル符号化を行うビデオコーダの構造を示す図である。 本発明によるスケーラブルビデオデコーダの構造を示す図である。

Claims (11)

  1. デジタルビデオデータのインタレースシーケンスを符号化する方法であって、
    ここでは符号化信号の複数のレイヤ、基本レイヤおよび1つまたはそれ以上の拡張レイヤを生成し、
    少なくとも1つの前記基本レイヤは、前記のビデオデータの基本的な再構成に適しており、
    前記拡張レイヤは、当該のビデオデータの基本レイヤ再構成を拡張するのに適している形式の、デジタルビデオデータのインタレースシーケンスを符号化する方法において、
    − 前記のインタレースシーケンス(I)を2つのサブシーケンス(F1,F2)に分解(SP)し、
    − 当該の2つのサブシーケンス(F1,F2)を別個に処理し、
    − 第1のサブシーケンス(F1)を、比較的周波数の低いストリーム(L)と比較的周波数の高いストリーム(H)とに分解(SF1)し、
    − 前記の比較的周波数の低いストリーム(L)を第1デジタルフィルタ(STF)によって処理し、
    − 当該第1フィルタ(STF)の出力を使用して基本レイヤ信号(P)を生成し、
    − また前記の比較的周波数の低いストリーム(L)を、第1の動き推定(ME1)に使用し、ここで結果的に得られる動きベクトル(MV1)は、前記基本レイヤ信号(P)と共にデコーダにおけるプログレッシブモードのビデオシーケンスの再構成に適しており、
    − 前記の第2のサブシーケンスを第2デジタルフィルタ(MCTF)によって処理することを特徴とする、
    デジタルビデオデータのインタレースシーケンスを符号化する方法。
  2. 前記の第1デジタルフィルタ(STF)は、時間的または空間的な次元またはその両方の次元における解像度を変更するのに適している、
    請求項1に記載の方法。
  3. 第2動き推定(ME2)を前記インタレースビデオシーケンス(I)に行う、
    請求項1または2に記載の方法。
  4. 前記第2デジタルフィルタ(MCTF)によって、前記のインタレースビデオ信号(I)または第1動き推定(ME1)の結果も使用する、
    請求項1から3のいずれか1項に記載の方法。
  5. 以下のサブシーケンスのうちの少なくともいくつかを伝送する、すなわち、
    前記の第1サブシーケンス(L)の比較的周波数の低いストリーム(P)、
    前記の第1サブシーケンス(L)の動きベクトル(MV1)、
    前記の第1サブシーケンスの比較的周波数の高いストリーム(H)、
    前記のインタレースシーケンス(I)の動きベクトル(MV2)、
    前記のフィルタリングされた第2サブシーケンス(FF2)のうちの少なくともいくつかを伝送する、
    請求項1から4までのいずれか1項に記載の方法。
  6. ビットストリームを復号化する方法であって、
    該ビットストリームは、複数のサブストリームから構成されており、
    当該のサブストリームは、基本レイヤ(BL)または拡張レイヤ(EL)のいずれかに関連づけられており、
    前記方法は、
    − 復号化品質を選択または決定(QS)するステップと、
    − 前記の基本レイヤ(BL)に関連づけられているサブストリーム(P,MV1)を前記ビットストリームから抽出するステップと、
    − 前記サブストリーム(P,MV1)に逆デジタルフィルタリング(STS)を行ってプログレッシブモードビデオシーケンス(V1)を形成するステップとを有することを特徴とする、
    ビットストリームを復号化する方法。
  7. さらに
    − 前記のプログレッシブモードビデオシーケンス(V1)と、前記の拡張レイヤ(EL)に関連づけられた1つまたはそれ以上のサブストリーム(H)とに逆デジタルフィルタリング(SS)を行い、当該フィルタリング(SS)によって拡張プログレッシブモードビデオシーケンス(V3)を生成するステップを含む、
    請求項6に記載の方法。
  8. さらに
    − 前記の拡張プログレッシブモードビデオシーケンス(V3)と、前記の拡張レイヤ(EL)に関連づけられた1つまたはそれ以上の前記サブストリーム(MV2,FF2)とに逆デジタルフィルタリング(IMCTF,ISP)を行い、当該のフィルタリング(IMCTF,ISP)によって、拡張された空間時間解像度またはフルの空間時間解像度のインタレースビデオシーケンス(V4)を生成するステップを含む、
    請求項6または7に記載の方法。
  9. 前記の基本レイヤ(BL)に関連づけられたサブストリームへの逆デジタルフィルタリング(STS)によって、空間的または時間的にスケーリングされた、または空間的かつ時間的にスケーリングされた、プログレッシブモードビデオシーケンス(V2)の表現を生成する、
    請求項6から8までのいずれか1項に記載の方法。
  10. ビデオ符号化用装置において、
    請求項1から5までのいずれか1項に記載の方法を使用することを特徴とする、
    ビデオ符号化用装置。
  11. ビデオ復号化用装置において、
    請求項6から9までのいずれか1項に記載の方法を使用することを特徴とする、
    ビデオ復号化用装置。
JP2006504438A 2003-03-03 2004-02-20 インタレースデジタルビデオデータのスケーラブル符号化および復号化 Expired - Lifetime JP4587321B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP03290507A EP1455534A1 (en) 2003-03-03 2003-03-03 Scalable encoding and decoding of interlaced digital video data
PCT/EP2004/001658 WO2004080079A1 (en) 2003-03-03 2004-02-20 Scalable encoding and decoding of interlaced digital video data

Publications (2)

Publication Number Publication Date
JP2006521727A true JP2006521727A (ja) 2006-09-21
JP4587321B2 JP4587321B2 (ja) 2010-11-24

Family

ID=32799089

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006504438A Expired - Lifetime JP4587321B2 (ja) 2003-03-03 2004-02-20 インタレースデジタルビデオデータのスケーラブル符号化および復号化

Country Status (12)

Country Link
US (1) US8155192B2 (ja)
EP (2) EP1455534A1 (ja)
JP (1) JP4587321B2 (ja)
KR (1) KR100974397B1 (ja)
CN (1) CN1778116B (ja)
AT (1) ATE506812T1 (ja)
BR (1) BRPI0407963A (ja)
DE (1) DE602004032322D1 (ja)
MX (1) MXPA05009234A (ja)
MY (1) MY145020A (ja)
TW (1) TWI329457B (ja)
WO (1) WO2004080079A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013518517A (ja) * 2010-02-01 2013-05-20 ドルビー ラボラトリーズ ライセンシング コーポレイション 非対称なサンプルを使った画像およびビデオ向上のためのフィルタ処理
WO2017213033A1 (ja) * 2016-06-06 2017-12-14 日本電気株式会社 映像符号化装置、映像符号化方法および記録媒体

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2867328A1 (fr) * 2004-03-02 2005-09-09 Thomson Licensing Sa Procede de decodage d'une sequence d'images codee avec echelonnabilite spatiale et temporelle
US20050201468A1 (en) * 2004-03-11 2005-09-15 National Chiao Tung University Method and apparatus for interframe wavelet video coding
EP1574995A1 (en) * 2004-03-12 2005-09-14 Thomson Licensing S.A. Method for encoding interlaced digital video data
KR100714071B1 (ko) * 2004-10-18 2007-05-02 한국전자통신연구원 적응적으로 세분화된 gop 구조를 이용한 mctf-기반동영상 부호화 및복호화 방법
WO2006043754A1 (en) * 2004-10-21 2006-04-27 Samsung Electronics Co., Ltd. Video coding method and apparatus supporting temporal scalability
KR100664929B1 (ko) 2004-10-21 2007-01-04 삼성전자주식회사 다 계층 기반의 비디오 코더에서 모션 벡터를 효율적으로압축하는 방법 및 장치
US8345762B2 (en) 2005-02-18 2013-01-01 Thomson Licensing Method for deriving coding information for high resolution pictures from low resolution pictures and coding and decoding devices implementing said method
KR20100037659A (ko) * 2005-05-24 2010-04-09 노키아 코포레이션 디지털 방송에서 계층적인 전송/수신을 위한 방법 및 장치
EP1727372A1 (en) * 2005-05-27 2006-11-29 Thomson Licensing Method and apparatus for encoding and decoding video data,
JP2007053554A (ja) * 2005-08-17 2007-03-01 Sony Corp 符号化装置、符号化方法、復号装置、復号方法およびプログラム
US20090161762A1 (en) * 2005-11-15 2009-06-25 Dong-San Jun Method of scalable video coding for varying spatial scalability of bitstream in real time and a codec using the same
FR2894422A1 (fr) * 2005-12-01 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
FR2894423A1 (fr) * 2005-12-05 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
FR2894424A1 (fr) * 2005-12-05 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
CN101356820B (zh) * 2006-01-05 2011-01-26 汤姆森许可贸易公司 层间运动预测方法
KR100809296B1 (ko) * 2006-02-22 2008-03-04 삼성전자주식회사 타입이 일치하지 않는 하위 계층의 정보를 사용하여인터레이스 비디오 신호를 인코딩/디코딩 하는 방법 및장치
CN100584026C (zh) * 2006-03-27 2010-01-20 华为技术有限公司 交织模式下的视频分层编码方法
EP1879399A1 (en) 2006-07-12 2008-01-16 THOMSON Licensing Method for deriving motion data for high resolution pictures from motion data of low resolution pictures and coding and decoding devices implementing said method
US8549556B2 (en) * 2008-04-15 2013-10-01 Shlomo Selim Rakib Contextual advertising
US20100250764A1 (en) * 2009-03-31 2010-09-30 Nokia Corporation Method and Apparatus for Signaling Layer Information of Scalable Media Data
US20100250763A1 (en) * 2009-03-31 2010-09-30 Nokia Corporation Method and Apparatus for Transmitting Information on Operation Points
US9774882B2 (en) 2009-07-04 2017-09-26 Dolby Laboratories Licensing Corporation Encoding and decoding architectures for format compatible 3D video delivery
EP2716041A4 (en) 2011-05-31 2014-10-15 Dolby Lab Licensing Corp VIDEO COMPRESSION WITH RESOLUTION COMPENSATION AND OPTIMIZATION
US10432951B2 (en) 2014-06-24 2019-10-01 Qualcomm Incorporated Conformance and inoperability improvements in multi-layer video coding
US11140368B2 (en) 2017-08-25 2021-10-05 Advanced Micro Devices, Inc. Custom beamforming during a vertical blanking interval
US11539908B2 (en) 2017-09-29 2022-12-27 Advanced Micro Devices, Inc. Adjustable modulation coding scheme to increase video stream robustness
US11398856B2 (en) 2017-12-05 2022-07-26 Advanced Micro Devices, Inc. Beamforming techniques to choose transceivers in a wireless mesh network
US10938503B2 (en) * 2017-12-22 2021-03-02 Advanced Micro Devices, Inc. Video codec data recovery techniques for lossy wireless links
US11699408B2 (en) 2020-12-22 2023-07-11 Ati Technologies Ulc Performing asynchronous memory clock changes on multi-display systems

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04372292A (ja) * 1991-06-20 1992-12-25 Nippon Hoso Kyokai <Nhk> 動きベクトル検出装置
JPH05505499A (ja) * 1990-01-18 1993-08-12 ブリティッシュ・ブロードキャスティング・コーポレーション テレビジョン信号のフィールド繰返数アップ変換
JPH07170514A (ja) * 1993-07-13 1995-07-04 At & T Corp ビデオ信号多層符号化と復号化装置
JPH08172630A (ja) * 1994-12-16 1996-07-02 Matsushita Electric Ind Co Ltd 動画像符号化装置
JPH08186816A (ja) * 1994-12-28 1996-07-16 Pioneer Electron Corp サブバンド符号化方法
JPH1175184A (ja) * 1997-08-28 1999-03-16 Sanyo Electric Co Ltd 画像符号化装置及び画像符号化方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5253056A (en) * 1992-07-02 1993-10-12 At&T Bell Laboratories Spatial/frequency hybrid video coding facilitating the derivatives of variable-resolution images
JP3545000B2 (ja) * 1992-11-02 2004-07-21 ソニー株式会社 画像信号符号化装置、画像信号復号化装置
US6728775B1 (en) * 1997-03-17 2004-04-27 Microsoft Corporation Multiple multicasting of multimedia streams
JP3164031B2 (ja) * 1997-05-30 2001-05-08 日本ビクター株式会社 動画像符号化復号化装置、動画像符号化復号化方法、及び動画像符号化記録媒体
US6058143A (en) * 1998-02-20 2000-05-02 Thomson Licensing S.A. Motion vector extrapolation for transcoding video sequences
US6961383B1 (en) * 2000-11-22 2005-11-01 At&T Corp. Scalable video encoder/decoder with drift control
KR100783396B1 (ko) * 2001-04-19 2007-12-10 엘지전자 주식회사 부호기의 서브밴드 분할을 이용한 시공간 스케일러빌러티방법
US7042946B2 (en) * 2002-04-29 2006-05-09 Koninklijke Philips Electronics N.V. Wavelet based coding using motion compensated filtering based on both single and multiple reference frames
US7116828B2 (en) * 2002-09-25 2006-10-03 Lsi Logic Corporation Integrated video decoding system with spatial/temporal video processing
US7321625B2 (en) * 2002-12-13 2008-01-22 Ntt Docomo, Inc. Wavelet based multiresolution video representation with spatially scalable motion vectors
WO2004111789A2 (en) * 2003-06-10 2004-12-23 Rensselaer Polytechnic Institute A method for processing i-blocks used with motion compensated temporal filtering

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05505499A (ja) * 1990-01-18 1993-08-12 ブリティッシュ・ブロードキャスティング・コーポレーション テレビジョン信号のフィールド繰返数アップ変換
JPH04372292A (ja) * 1991-06-20 1992-12-25 Nippon Hoso Kyokai <Nhk> 動きベクトル検出装置
JPH07170514A (ja) * 1993-07-13 1995-07-04 At & T Corp ビデオ信号多層符号化と復号化装置
JPH08172630A (ja) * 1994-12-16 1996-07-02 Matsushita Electric Ind Co Ltd 動画像符号化装置
JPH08186816A (ja) * 1994-12-28 1996-07-16 Pioneer Electron Corp サブバンド符号化方法
JPH1175184A (ja) * 1997-08-28 1999-03-16 Sanyo Electric Co Ltd 画像符号化装置及び画像符号化方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013518517A (ja) * 2010-02-01 2013-05-20 ドルビー ラボラトリーズ ライセンシング コーポレイション 非対称なサンプルを使った画像およびビデオ向上のためのフィルタ処理
WO2017213033A1 (ja) * 2016-06-06 2017-12-14 日本電気株式会社 映像符号化装置、映像符号化方法および記録媒体

Also Published As

Publication number Publication date
CN1778116B (zh) 2010-09-29
CN1778116A (zh) 2006-05-24
US20070147492A1 (en) 2007-06-28
EP1455534A1 (en) 2004-09-08
WO2004080079A1 (en) 2004-09-16
JP4587321B2 (ja) 2010-11-24
DE602004032322D1 (de) 2011-06-01
EP1606950A1 (en) 2005-12-21
US8155192B2 (en) 2012-04-10
ATE506812T1 (de) 2011-05-15
KR100974397B1 (ko) 2010-08-05
TW200420134A (en) 2004-10-01
MXPA05009234A (es) 2006-05-19
BRPI0407963A (pt) 2006-04-11
EP1606950B1 (en) 2011-04-20
KR20050107488A (ko) 2005-11-11
TWI329457B (en) 2010-08-21
MY145020A (en) 2011-12-15

Similar Documents

Publication Publication Date Title
JP4587321B2 (ja) インタレースデジタルビデオデータのスケーラブル符号化および復号化
US7027512B2 (en) Spatio-temporal hybrid scalable video coding apparatus using subband decomposition and method
US8031776B2 (en) Method and apparatus for predecoding and decoding bitstream including base layer
JP5014989B2 (ja) 基礎階層を利用するフレーム圧縮方法、ビデオコーディング方法、フレーム復元方法、ビデオデコーディング方法、ビデオエンコーダ、ビデオデコーダ、および記録媒体
JP2004502358A (ja) ビデオ系列の圧縮のための符号化方法
US20060008000A1 (en) Fully scalable 3-d overcomplete wavelet video coding using adaptive motion compensated temporal filtering
JP2008503981A (ja) グリッド動き推定/補償を用いたスケーラブルビデオ符号化
KR100679018B1 (ko) 다계층 비디오 코딩 및 디코딩 방법, 비디오 인코더 및디코더
US20060146937A1 (en) Three-dimensional wavelet video coding using motion-compensated temporal filtering on overcomplete wavelet expansions
US20050018771A1 (en) Drift-free video encoding and decoding method and corresponding devices
US20060159173A1 (en) Video coding in an overcomplete wavelet domain
WO2006043754A1 (en) Video coding method and apparatus supporting temporal scalability

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20100311

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20100311

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20100323

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100323

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20100324

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100428

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100511

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100805

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100901

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100902

R150 Certificate of patent or registration of utility model

Ref document number: 4587321

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130917

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term