JP2003527004A - エンハンスメントレイヤフレームの送信を並べ替えることによってレイヤ復号化の複雑さを減少する方法 - Google Patents

エンハンスメントレイヤフレームの送信を並べ替えることによってレイヤ復号化の複雑さを減少する方法

Info

Publication number
JP2003527004A
JP2003527004A JP2001566559A JP2001566559A JP2003527004A JP 2003527004 A JP2003527004 A JP 2003527004A JP 2001566559 A JP2001566559 A JP 2001566559A JP 2001566559 A JP2001566559 A JP 2001566559A JP 2003527004 A JP2003527004 A JP 2003527004A
Authority
JP
Japan
Prior art keywords
frame
enhancement
enhancement layer
frames
base layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2001566559A
Other languages
English (en)
Inventor
デル スファール−ミトルア，ミハエラ ファン
ラダ，ハイデル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Philips Electronics NV filed Critical Philips Electronics NV
Publication of JP2003527004A publication Critical patent/JP2003527004A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34—Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/29—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving scalability at the object level, e.g. video object layer [VOL]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

(57)【要約】 本発明はエンハンスメントレイヤフレームの送信順序を並べ替えることを目的とする。エンハンスメントレイヤフレームの表示順序と送信順序を同一にすることにより、エンハンスメントフレームは復号化された直後に表示されることが可能であるので、デコーダ側において、表示されるまでエンハンスメントレイヤフレームを保持するフレームメモリが必要とされない。メモリの量を減少することは、移動式適用又は低電力消費装置において好適である。

Description

【発明の詳細な説明】
【０００１】 本発明は一般的に、ビデオ符号化に係り、特に、エンハンスメントレイヤフレ
ームの送信順序を並べ替える方法に関する。
【０００２】 ＭＥＰＧ−４ベースレイヤデコーダ及びＭＥＰＧ−２デコーダでは、上述の順
序の点に関し、様々なフレームの送信順序は、表示順序とは異なる。この例を図
１に示す。図面から分かるように、ベースレイヤフレームと対応するエンハンス
メントレイヤフレームの両方の送信順序は、表示順序とは異なる。
【０００３】 図１に示すフレームの並べ替えの理由は、Ｂフレームに対し用いられる双方向
動き補償（ＭＣ）は、Ｂフレームが符号化／復号化されるとき、エンコーダ／デ
コーダ側におけるメモリにおいて予測が行われるアンカフレーム（Ｉフレーム及
びＰフレーム）が既に入手可能であることを必要とするからである。これは、Ｉ
フレーム及びＰフレームが、Ｂフレームの前に、デコーダに送信されることを必
要とする。しかし、一般的にＢフレームは、ＩフレームとＰフレームとの間で表
示されるので、フレームの送信順序と表示順序は、ＭＣ予測によって異なる。
【０００４】 図２に、スケーラブル（階層状にされる）デコーダの１つの例のブロック図を
示す。動作時に、デコーダ２は、図１に示されるような送信順序で符号化された
ベースレイヤフレーム及びエンハンスメントレイヤフレームを受信する。更に、
デコーダ２は、これらのフレームを復号化し、並び替えて、図２に示すような表
示順序にする。
【０００５】 図面から分かるように、デコーダ２は、ベースレイヤビットストリーム及びエ
ンハンスメントレイヤビットストリームを復号化するために２つの別々の経路を
含む。これらの２つの経路は別々であるので、２つのストリームのそれぞれの復
号化処理は、同期する必要はない。
【０００６】 ベースレイヤストリーム用の経路は、ベースレイヤビットストリームをピクチ
ャフレームに変換するために、可変長デコーダ４、逆量子化ブロック６、及び、
逆離散コサイン変換ブロック（ＩＤＣＴ）８を含む。受信した動きベクトルに基
づいて以前にフレームメモリ１４内に記憶されるピクチャフレームに動き補償を
行う動き補償ブロック１２も含まれる。更に、ＩＤＣＴブロック８の出力及び動
き補償ブロック１２の出力を組合わせる加算器１０も含まれる。
【０００７】 エンハンスメントレイヤストリーム用の経路は、エンハンスメントレイヤビッ
トストリームをピクチャフレームに変換するために、可変長デコーダ（ＶＬＤ）
１５、ビットプレーン復号化ブロック１７、及び、別のＩＤＣＴブロック１８を
含む。動作時には、ビットプレーン復号化ブロック１２は、任意の好適なファイ
ン・グラニュラ・スケーラブル復号化（fine granular scalable decoding）技
術を使用し、可変長デコーダ１２の出力を個々のビットプレーンに復号化する。
【０００８】 図面から更に分かるように、現在のフレームに対する全てのビットプレーンが
復号化されるまで個々のビットプレーンを記憶するビットプレーンメモリ１６が
更に含まれる。更に、ＩＤＣＴブロック１８の後に、フレームメモリ２２が含ま
れる。フレームメモリ２２は、図１に示されるように、表示順序とは異なる送信
順序で受信した符号化されたフレームを補償するよう使用される。
【０００９】 例えば、エンハンスメントレイヤフレームが、対応するベースレイヤフレーム
と同一の時間に送信されると、フレームメモリ２２は、ベースレイヤ表示時間と
一致するその表示時間となるまで、エンハンスメントレイヤフレームを記憶する
ことが必要となる。図１の送信順序を再び参照するに、エンハンスメントピクチ
ャＥ３は復号化された後、エンハンスメントフレームＥ２が復号化され表示され
る後まで、フレームメモリ２２内に記憶される。その後に、エンハンスメントフ
レームＥ３はフレームメモリから回収され表示される。従って、このようにして
、フレームの送信順序は、図１に示されるような表示順序に変換される。
【００１０】 デコーダ２は更に、それぞれの経路からのピクチャフレームを組合せ、エンハ
ンスされたビデオ２４を形成するもう１つの加算器２０を含む。エンハンスされ
たビデオ２４は、リアルタイムで直ぐに表示されるか又は時間が経過した後に表
示するために出力フレームメモリ内に記憶され得る。
【００１１】 本発明は、ビデオデータを符号化する方法に関する。本発明の方法は、ベース
レイヤフレームを形成するようビデオデータの一部を符号化することを含む。更
に、エンハンスメントレイヤフレームを形成するようビデオデータの別の一部を
符号化することを含む。更に、エンハンスメントレイヤフレームを表示順序に並
べ替えることを含む。
【００１２】 本発明は更に、ベースレイヤ及びエンハンスメントレイヤを含み、エンハンス
メントレイヤは、表示順序に配列されるエンハンスメントフレームを含むビデオ
信号を復号化する方法に関する。この方法は、ベースレイヤを復号化し、復号化
されたベースレイヤフレームを形成することを含む。更に、エンハンスメントレ
イヤを復号化し、復号化されたエンハンスメントレイヤフレームを形成すること
と、復号化されたベースレイヤフレームを表示順序に並べ替えることを含む。更
に、復号化されたエンハンスメントレイヤフレームを記憶することなく、復号化
されたベースレイヤフレームを復号化されたエンハンスメントレイヤフレームに
組合わせ、ビデオフレームを形成することを含む。
【００１３】 全体を通して同様の参照番号は対応する部分を示す図面を参照する。
【００１４】 本発明は、符号化されたエンハンスメントレイヤフレームの送信順序を並べ替
えることを目的とする。エンハンスメントレイヤフレームの表示順序と送信順序
を同一にすることにより、復号化された直後に表示されることが可能であるので
、デコーダ側において表示されるまでエンハンスメントレイヤフレームを保持す
るフレームメモリが必要でなくなる。メモリの量を減少することは、移動式の適
用又は低電力消費装置において好適である。
【００１５】 エンハンスメントレイヤの送信順序が、ベースレイヤの送信順序と同一である
従来の符号化システムでは、復号化のために２つ以上のフレームの記憶装置が必
要である。図１を参照するに、Ｅ１フレームを記憶するために１つのフレームメ
モリが使用され、Ｅ３フレーム（既に復号化されているが、Ｅ２が受信され、復
号化され、表示されるまで表示されることができない）を記憶するために１つの
フレームメモリが使用され、Ｅ２を復号化し記憶するために１つのフレームメモ
リが使用される。しかし、本発明では、圧縮されたＥ３のデータを記憶するメモ
リはもはや必要でなくなる。
【００１６】 図３に本発明による伝送及び表示順序の一例を示す。説明のために、図３は、
５つのベースレイヤフレーム及び対応するエンハンスメントレイヤフレームのみ
を示す。しかし、実際のシステムでは、本発明は、様々な異なるグループ・オブ
・ピクチャ（ＧＯＰ）に適用され得ることを明記する。
【００１７】 図３から分かるように、ベースレイヤフレームの送信順序は、図１に示される
従来のシステムにおけるベースレイヤフレームの送信順序と同一である。しかし
、本発明では、エンハンスメントフレームの送信順序は、図３に示されるように
、デコーダ側のエンハンスメントフレームの表示順序と同一となるよう並べ替え
られる。
【００１８】 エンハンスメントフレームの送信順序を表示順序と同一となるように並べ替え
ることにより、ＦＧＳフレームは復号化された直後に表示されるので、エンハン
スメントフレーム用のローカルメモリを必要としない。当然ではあるが、表示は
、ＦＧＳの結果がベースレイヤフレームに加えられた後に行われる。
【００１９】 図４に、本発明のデコーダの一例を示す。図面から分かるように、図４のデコ
ーダ２６は、図２に示すデコーダと同一であるが、ＩＤＣＴブロック１８の出力
におけるフレームメモリ２２がもはや必要ではない。上述されたように、エンハ
ンスメントフレームの送信順序が、フレームの実際の表示順序と同一となるよう
並べ替えられているので、このフレームメモリはもはや必要でなくなる。従って
、エンハンスメントレイヤフレームは、ベースレイヤフレームと組み合わされた
後に受信した順序で表示されることが可能である。
【００２０】 動作時には、デコーダ２６は、図３に示すような送信順序でベースレイヤフレ
ーム及びエンハンスメントレイヤフレームを受信する。しかし、図３では、ベー
スレイヤフレームの送信順序は、エンハンスメントレイヤフレームと異なる。こ
れを補償するために、以下に説明されるようにベースレイヤフレームの順序は変
更され、エンハンスメントレイヤフレームのタイミングが変更される。
【００２１】 図５に、本発明のエンハンスメントレイヤフレームの送信タイミングの一例を
示す。図面から分かるように、エンハンスメントレイヤフレームの送信タイミン
グは、対応するベースレイヤフレームに対し遅延される。第１の時間間隔では、
ベースレイヤフレームＩ１が送信される。対応するエンハンスメントレイヤフレ
ームＥ１の送信は、次の時間間隔まで遅延されるので、図４のデコーダ２６は、
ベースレイヤフレームＩ１を復号化し、ベースレイヤフレームＰ３及びエンハン
スメントフレームＥ１を受信するまでフレームメモリ１４内にベースレイヤフレ
ームＩ１をただ記憶する。
【００２２】 図５の第２の時間間隔において、エンハンスメントレイヤフレームＥ１及びベ
ースレイヤフレームＰ３が送信される。このとき、図４のデコーダ２６は、ベー
スレイヤフレームＰ３を復号化し、ここでも、遅延されるエンハンスメントフレ
ームＥ３が受信され復号化されるまでフレームメモリ１４内にベースレイヤフレ
ームＰ３をただ記憶する。更に図４のデコーダ２６は、エンハンスメントレイヤ
フレームＥ１を復号化し、それを、以前にフレームメモリ１４内に記憶された対
応するベースレイヤフレームＩ１と組合せ、エンハンスされたビデオのフレーム
を形成する。
【００２３】 図５の第３の時間間隔において、ベースレイヤフレームＢ２及び対応するエン
ハンスメントレイヤフレームＥ２が同時に送信される。従って、図４のデコーダ
２６は、ベースレイヤフレームＢ２及び対応するエンハンスメントレイヤフレー
ムＥ２を同時に復号化し、その後、復号化されたフレームを組合せ、エンハンス
されたビデオの別のフレームを形成する。
【００２４】 図５の第４の時間間隔では、エンハンスメントレイヤフレームＥ３及びベース
レイヤフレームＰ５が送信される。このとき、図４のデコーダ２６は、ベースレ
イヤフレームＰ５を復号化し、ここでも、遅延されるエンハンスメントフレーム
Ｅ５が受信され復号化されるまでフレームメモリ１４内にベースレイヤフレーム
Ｐ５をただ記憶する。さらに、図４のデコーダ２６は、エンハンスメントレイヤ
フレームＥ３を復号化し、それを、以前にフレームメモリ１４内に記憶された対
応するベースレイヤフレームＰ３と組合せ、もう１つのエンハンスされたビデオ
のフレームを形成する。図５から分かるように、上述の方法は、以後に続く時間
間隔に送信される全てのエンハンスメントレイヤフレームと対応するベースレイ
ヤフレームが復号化され、エンハンスされたビデオシーケンスを形成するよう組
み合わされるまで続けられる。
【００２５】 図６は、本発明のエンコーダの一例を示す。本発明では、エンコーダは、図３
に示される送信順序に従うベースレイヤフレームのストリームとエンハンスメン
トレイヤフレームのストリームを形成する。
【００２６】 図７から分かるように、エンコーダ２８は、ベースレイヤエンコーダ３０及び
エンハンスメントレイヤエンコーダ５４を含む。ベースレイヤエンコーダ３０は
、もとのビデオをＩフレームに、及び、動き補償された結果をＰフレーム及びＢ
フレームに符号化するよう、離散コサイン変換（ＤＣＴ）ブロック３４、量子化
ブロック３６、及び、エントロピーエンコーダ３８を含む。
【００２７】 ベースレイヤエンコーダ３０は更に、逆量子化ブロック４２、ＩＤＣＴブロッ
ク４４、加算器４６、及び、加算器４６のもう１つの入力に接続される補償ブロ
ック４８を含む。動作時には、これらの要素４２、４４、４６、及び４８は、符
号化される現在のフレームの復号化されたバージョンを提供し、これはフレーム
メモリ５０内に記憶される。
【００２８】 動き推定ブロック５２が更に含まれ、現在のフレーム及びフレームメモリ５０
内に記憶される前フレームの復号化されたバージョンから動きベクトルを形成す
る。前フレームの復号化されたバージョンを使用することは、復号化されたバー
ジョンはデコーダ側で受信されるのと同一であるので、デコーダ側で行われる動
き補償をより正確にする。
【００２９】 図面から更に分かるように、動き補償ブロック４８の出力は、減算器３２の１
つの側に接続される。これによって、以前に送信された符号化フレームからの予
測に基づいた動き補償された結果を、符号化される現在のフレームから引算する
ことが可能である。エントロピーエンコーダ３８の出力と動き推定ブロック５２
の出力を組合せ、ベースレイヤストリームを形成するマルチプレクサ４０が更に
含まれる。
【００３０】 エンハンスメントレイヤエンコーダ５４は、もう１つの減算器６２を含む。こ
の減算器６２は、ＤＣＴブロック３４の出力から、逆量子化ブロック４２の出力
を引算し、結果の画像を形成するために使用される。ファイン・グラニュラ・ス
ケーラブル（ＦＥＧ）エンコーダ５８が更に含まれ、減算器６２によって形成さ
れる結果の画像を符号化する。結果の画像は、ビットプレーンＤＣＴ走査及びエ
ントロピー符号化を行うことによって符号化される。フレームメモリ５６がＦＥ
Ｇエンコーダ５８に接続され、各ビットプレーンを復号化された後に記憶するた
めに使用される。現在のフレームの全てのビットプレーンが復号化された後、フ
レームメモリ５６はそのフレームを出力する。
【００３１】 図面から更に分かるように、もう１つのフレームメモリ６０がＦＧＳエンコー
ダ６０の出力に接続される。本発明では、フレームメモリ６０が、エンハンスメ
ントレイヤフレームを図３に示すような送信順序に並べ替える。エンハンスメン
トレイヤフレームの並べ替えを行うために、符号化されたエンハンスメントレイ
ヤフレームはフレームメモリ６０内に記憶され、その後、図５に示されるような
タイミングに従って送信される。
【００３２】 上述されるように、エンハンスメントレイヤフレームの送信順序は、デコーダ
側で表示されるエンハンスメントレイヤフレームと同一の順序にある。これは、
デコーダ側において１つのフレームメモリの必要性を排除するので重要であり、
これは、移動式又は他の低電力適用において好適である。
【００３３】 本発明では、インターエンハンスメント予測を必要とすることなくエンハンス
メントレイヤに本発明を適用することが可能であることに追加して、本発明は一
方向予測（即ち、双方向ＭＣ予測がない）がエンハンスメントレイヤに使用され
る場合にも適用可能である。このシナリオの例を、図８に示す。
【００３４】 本発明は、ベースレイヤの上に複数のエンハンスメントレイヤが使用される場
合にも適用可能である。この場合、各エンハンスメントレイヤは、イントラ−エ
ンハンスメントレイヤ予測を有さないか、又は、一方向予測（そのエンハンスメ
ントレイヤ又は全体的に階層状の符号化構造を有する任意の他のレイヤからの）
を有する。
【００３５】 図８に、本発明を実施し得るシステムの一例を示す。例として、システムは、
テレビジョン、セットトップボックス、デスクトップ、ラップトップ、若しくは
パームトップコンピュータ、携帯型情報端末（ＰＤＡ）、及び、ビデオカセット
レコーダ（ＶＣＲ）、デジタルビデオレコーダ（ＤＶＲ）、ＴｉＶＯ装置等とい
ったビデオ／画像記憶装置、また、上述の及び他の装置の一部又は組合せを表す
。システムは１つ以上のビデオ源６４、１つ以上の入力／出力装置７４、プロセ
ッサ６６、及びメモリ６８を含む。
【００３６】 ビデオ／画像源６４は、例えば、テレビ受像機、ＶＣＲ、又は他のビデオ／画
像記憶装置を表す。或いは、源７４は、例えば、インターネット、広域ネットワ
ーク、メトロポリタンエリアネットワーク、ローカルエリアネットワーク、地上
波放送システム、ケーブルネットワーク、衛星ネットワーク、ワイヤレスネット
ワーク、又は、電話機回路網、及び、上述の種類及び他の種類のネットワークの
一部又は組合せを介し１つのサーバ又は複数のサーバからビデオを受信する１つ
以上のネットワーク接続を表す。
【００３７】 入力／出力装置７４、プロセッサ６６、及びメモリ６８は、通信媒体７２を介
し通信する。通信媒体７２は、例えば、バス、通信ネットワーク、回路、回路カ
ード、又は他の装置の１つ以上の内側接触子、及び、上述の又は他の通信媒体の
一部及び組合せを表す。ビデオ／画像源６４からの入力ビデオデータは、メモリ
６６内に格納される１つ以上のソフトウェアプログラムに従って処理され、プロ
セッサ６６によって実行され、ディスプレイ装置７０に供給される出力ビデオ／
画像を発生させる。
【００３８】 好適な実施例では、図３乃至８に関連して説明されるエンハンスメントレイヤ
フレームの符号化、復号化、及び並べ替えは、システムによって実行されるコン
ピュータ読取り可能なコードによって実施される。コードは、メモリ６８内に記
憶されるか、又は、ＣＤ−ＲＯＭ又はフロッピー（登録商標）ディスクのような
メモリ媒体から読出し／ダウンロードされる。他の実施例では、本発明を実施す
るために、ソフトウェア命令の代わりに、又はソフトウェア命令と組み合わされ
るハードウェア回路が使用され得る。例えば、図４及び７に示される要素は、別
個のハードウェア要素として実施されることが可能である。
【００３９】 本発明は、特定の例によって上述されたが、本発明は本願に開示される例に制
限されることを意図しないことを理解するものとする。尚、本願に説明される枠
の適用は、図面に示される例を越えるものである。本発明は、ベースレイヤにお
いて動き補償（ＭＣ）を用い、ＭＣのない（即ち、フレーム内符号化された）エ
ンハンスメントレイヤを有する全てのスキームに対し適用することが可能である
。従って、この機構は、エンハンスメントレイヤ内において双方向予測が行われ
ない（即ち、イントラ−エンハンスメントレイヤ予測がない）、又は、一方向予
測ＭＣが行われる全てのスケーラブルなスキームに適用することが可能である。
【００４０】 更に、本発明は、エンハンスメントレイヤの結果に対し使用される任意の符号
化アルゴリズム、例えば、プログレッシブ符号化又は通常の量子化、ウェーブレ
ット変換又はＤＣＴ等に対し使用される任意の符号化アルゴリズムに適応可能で
ある。このようなエンハンスメントレイヤ符号化スキームの例として、エンハン
スメントレイヤにおいて予測が行われないＭＥＰＧ−４ファイン・グラニュラ・
スケーラビリティ（ＦＧＳ）方法及びＭＥＰＧ２のＳＮＲスケーラビリティが挙
げられる。
【図面の簡単な説明】
【図１】 従来の符号化システム用の送信順序と表示順序を示す図である。
【図２】 デコーダの一例を示すブロック図である。
【図３】 本発明による送信順序と表示順序の一例を示す図である。
【図４】 本発明によるデコーダの一例を示すブロック図である。
【図５】 本発明によるフレームの送信タイミングの一例を示す図である。
【図６】 本発明によるエンコーダの一例を示すブロック図である。
【図７】 本発明による送信順序と表示順序を示す別の例を示す図である。
【図８】 本発明によるシステムの一例を示すブロック図である。
───────────────────────────────────────────────────── フロントページの続き (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＣＹ， ＤＥ，ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，Ｉ Ｔ，ＬＵ，ＭＣ，ＮＬ，ＰＴ，ＳＥ，ＴＲ)，ＪＰ (72)発明者 ファン デル スファール−ミトルア，ミ ハエラ オランダ国，5656 アーアー アインドー フェン，プロフ・ホルストラーン ６ (72)発明者 ラダ，ハイデル オランダ国，5656 アーアー アインドー フェン，プロフ・ホルストラーン ６ Ｆターム(参考） 5C059 KK08 MA00 MA05 MA14 MA23 MA32 MA35 MC11 MC38 ME01 PP04 RA06 SS02 SS06 SS10 SS20 TA74 TB04 TB17 TC27 UA02 UA05 UA33 UA34 UA36 UA38

Claims (16)

    【特許請求の範囲】
  1. 【請求項１】 ビデオデータの一部を符号化しベースレイヤフレームを形成
    する段階と、 上記ビデオデータの別の一部を符号化しエンハンスメントレイヤフレームを形
    成する段階と、 上記エンハンスメントレイヤフレームを表示順序に並べ替える段階とを含む、
    ビデオデータを符号化する方法。
  2. 【請求項２】 上記表示順序は、ビデオフレームが表示されるときの順序で
    ある請求項１記載の方法。
  3. 【請求項３】 上記表示順序は、Ｉフレームに対応するエンハンスメントフ
    レームと少なくとも１つのＰフレームに対応するエンハンスメントフレームとの
    間に置かれるＢフレームに対応するエンハンスメントフレームを含む請求項１記
    載の方法。
  4. 【請求項４】 上記表示順序は、Ｐフレームに対応するエンハンスメントフ
    レームの間に置かれるＢフレームに対応するエンハンスメントフレームを含む請
    求項１記載の方法。
  5. 【請求項５】 上記エンハンスメントレイヤフレームを上記表示順序で送信
    する段階を更に含む請求項１記載の方法。
  6. 【請求項６】 上記エンハンスメントレイヤフレームの上記送信は、上記ベ
    ースレイヤフレームの送信に対し遅延される請求項５記載の方法。
  7. 【請求項７】 ベースレイヤ及びエンハンスメントレイヤを含み、上記エン
    ハンスメントレイヤは、表示順序に配列されるエンハンスメントフレームを含む
    ビデオ信号を復号化する方法であって、 上記ベースレイヤを復号化し、復号化されたベースレイヤフレームを形成する
    段階と、 上記エンハンスメントレイヤを復号化し、復号化されたエンハンスメントレイ
    ヤフレームを形成する段階と、 任意の上記復号化されたエンハンスメントレイヤフレームを記憶することなく
    、上記復号化されたベースレイヤフレームに上記復号化されたエンハンスメント
    レイヤフレームを組合せ、ビデオフレームを形成する段階とを含む方法。
  8. 【請求項８】 上記表示順序は、上記ビデオフレームが表示されるときの順
    序である請求項７記載の方法。
  9. 【請求項９】 上記エンハンスメントフレームの上記表示順序は、Ｉフレー
    ムに対応するエンハンスメントフレームと少なくとも１つのＰフレームに対応す
    るエンハンスメントフレームとの間に置かれるＢフレームに対応するエンハンス
    メントフレームを含む請求項７記載の方法。
  10. 【請求項１０】 上記表示順序は、Ｐフレームに対応するエンハンスメント
    フレームの間に置かれるＢフレームに対応するエンハンスメントフレームを含む
    請求項７記載の方法。
  11. 【請求項１１】 上記エンハンスメントレイヤフレームは、上記ベースレイ
    ヤに対し遅延される請求項７記載の方法。
  12. 【請求項１２】 ベースレイヤ及びエンハンスメントレイヤを含み、上記エ
    ンハンスメントレイヤは、表示順序に配列されるエンハンスメントフレームを含
    むビデオ信号を復号化する方法であって、 上記ベースレイヤを復号化し、復号化されたベースレイヤフレームを形成する
    段階と、 上記エンハンスメントレイヤを復号化し、復号化されたエンハンスメントレイ
    ヤフレームを形成する段階と、 上記復号化されたベースレイヤフレームを上記表示順序に並べ替える段階と、 上記復号化されたベースレイヤフレームに上記復号化されたエンハンスメント
    レイヤフレームを組合せ、ビデオフレームを形成する段階とを含む方法。
  13. 【請求項１３】 ビデオデータを符号化するコードを含むメモリ媒体であっ
    て、上記コードは、 上記ビデオデータの一部を符号化し、ベースレイヤフレームを形成するコード
    と、 上記ビデオデータの別の一部を符号化し、エンハンスメントレイヤフレームを
    形成するコードと、 上記エンハンスメントレイヤフレームを表示順序に並べ替えるコードとを含む
    メモリ媒体。
  14. 【請求項１４】 ベースレイヤ及びエンハンスメントレイヤを含み、上記エ
    ンハンスメントレイヤは、表示順序に配列されるエンハンスメントフレームを含
    むビデオ信号を復号化するコードを含むメモリ媒体であって、上記コードは、 上記ベースレイヤを復号化し、復号化されたベースレイヤフレームを形成する
    コードと、 上記エンハンスメントレイヤを復号化し、復号化されたエンハンスメントレイ
    ヤフレームを形成するコードと、 任意の上記復号化されたエンハンスメントレイヤフレームを記憶することなく
    、上記復号化されたベースレイヤに上記復号化されたエンハンスメントレイヤフ
    レームを組合せ、ビデオフレームを形成するコードとを含むメモリ媒体。
  15. 【請求項１５】 ビデオデータの一部を符号化し、ベースレイヤフレームを
    形成する第１のエンコーダと、 上記ビデオデータの別の一部を符号化し、エンハンスメントレイヤフレームを
    形成する第２のエンコーダと、 上記エンハンスメントレイヤフレームを表示順序に並べ替えるメモリユニット
    とを含む、ビデオデータを符号化する装置。
  16. 【請求項１６】 ベースレイヤ及びエンハンスメントレイヤを含み、上記エ
    ンハンスメントレイヤは表示順序に配列されるエンハンスメントフレームを含む
    ビデオ信号を復号化する装置であって、 上記ベースレイヤを復号化し、復号化されたベースレイヤフレームを形成する
    第１のデコーダと、 上記エンハンスメントレイヤを復号化し、復号化されたエンハンスメントレイ
    ヤフレームを形成する第２のデコーダと、 任意の上記復号化されたエンハンスメントレイヤフレームを記憶することなく
    、上記復号化されたベースレイヤフレームに上記復号化されたエンハンスメント
    レイヤフレームを組合せ、ビデオフレームを形成する加算器とを含む装置。
JP2001566559A 2000-03-17 2001-03-06 エンハンスメントレイヤフレームの送信を並べ替えることによってレイヤ復号化の複雑さを減少する方法 Pending JP2003527004A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US19036800P 2000-03-17 2000-03-17
US60/190,368 2000-03-17
US09/685,549 2000-10-10
US09/685,549 US6697426B1 (en) 2000-03-17 2000-10-10 Reduction of layer-decoding complexity by reordering the transmission of enhancement layer frames
PCT/EP2001/002532 WO2001069935A1 (en) 2000-03-17 2001-03-06 Reduction of layer-decoding complexity by reordering the transmission of enhancement layer frames

Publications (1)

Publication Number Publication Date
JP2003527004A true JP2003527004A (ja) 2003-09-09

Family

ID=26886038

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001566559A Pending JP2003527004A (ja) 2000-03-17 2001-03-06 エンハンスメントレイヤフレームの送信を並べ替えることによってレイヤ復号化の複雑さを減少する方法

Country Status (4)

Country Link
US (1) US6697426B1 (ja)
EP (1) EP1186176A1 (ja)
JP (1) JP2003527004A (ja)
WO (1) WO2001069935A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8223840B2 (en) 2005-04-27 2012-07-17 Nec Corporation Image decoding method of decoding hierarchy-encoded image data in respective hierarchies, and a device thereof

Families Citing this family (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6940912B2 (en) * 2000-04-21 2005-09-06 Microsoft Corporation Dynamically adaptive multimedia application program interface and related methods
US6891893B2 (en) * 2000-04-21 2005-05-10 Microsoft Corp. Extensible multimedia application program interface and related methods
US7634011B2 (en) * 2000-04-21 2009-12-15 Microsoft Corporation Application program interface (API) facilitating decoder control of accelerator resources
US7649943B2 (en) * 2000-04-21 2010-01-19 Microsoft Corporation Interface and related methods facilitating motion compensation in media processing
JP3561485B2 (ja) * 2000-08-18 2004-09-02 株式会社メディアグルー 符号化信号分離・合成装置、差分符号化信号生成装置、符号化信号分離・合成方法、差分符号化信号生成方法、符号化信号分離・合成プログラムを記録した媒体および差分符号化信号生成プログラムを記録した媒体
US7133449B2 (en) 2000-09-18 2006-11-07 Broadcom Corporation Apparatus and method for conserving memory in a fine granularity scalability coding system
US8127326B2 (en) 2000-11-14 2012-02-28 Claussen Paul J Proximity detection using wireless connectivity in a communications system
CA2428946C (en) * 2000-11-14 2010-06-22 Scientific-Atlanta, Inc. Networked subscriber television distribution
US6907070B2 (en) * 2000-12-15 2005-06-14 Microsoft Corporation Drifting reduction and macroblock-based control in progressive fine granularity scalable video coding
US20020118743A1 (en) * 2001-02-28 2002-08-29 Hong Jiang Method, apparatus and system for multiple-layer scalable video coding
JP2005529515A (ja) * 2002-05-31 2005-09-29 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 非スケーラブルなビデオからスケーラブルなビデオへの変換方法、スケーラブルなビデオから非スケーラブルなビデオへの変換方法
DE60324480D1 (de) 2002-07-11 2008-12-11 Matsushita Electric Ind Co Ltd Virtuelles Anzeigepufferverfahren zur Decodierung von H.264 prediktion Bildern.
US7516470B2 (en) * 2002-08-02 2009-04-07 Cisco Technology, Inc. Locally-updated interactive program guide
US20040068754A1 (en) * 2002-10-02 2004-04-08 Russ Samuel H. Expandable tuning capability
US20040068752A1 (en) * 2002-10-02 2004-04-08 Parker Leslie T. Systems and methods for providing television signals to multiple televisions located at a customer premises
US7908625B2 (en) 2002-10-02 2011-03-15 Robertson Neil C Networked multimedia system
US20040133911A1 (en) * 2002-10-04 2004-07-08 Russ Samuel H. Subscriber network in a satellite system
US7545935B2 (en) * 2002-10-04 2009-06-09 Scientific-Atlanta, Inc. Networked multimedia overlay system
US7360235B2 (en) * 2002-10-04 2008-04-15 Scientific-Atlanta, Inc. Systems and methods for operating a peripheral record/playback device in a networked multimedia system
US20050155052A1 (en) * 2002-10-04 2005-07-14 Barbara Ostrowska Parental control for a networked multiroom system
US20040068739A1 (en) * 2002-10-04 2004-04-08 Russ Samuel H. Networked multimedia system having a multi-room interactive network guide
US8046806B2 (en) * 2002-10-04 2011-10-25 Wall William E Multiroom point of deployment module
US8094640B2 (en) * 2003-01-15 2012-01-10 Robertson Neil C Full duplex wideband communications system for a local coaxial network
US7487532B2 (en) 2003-01-15 2009-02-03 Cisco Technology, Inc. Optimization of a full duplex wideband communications system
EP1595404B1 (en) * 2003-02-18 2014-10-22 Nokia Corporation Picture decoding method
WO2004075555A1 (en) * 2003-02-18 2004-09-02 Nokia Corporation Picture coding method
KR20060105407A (ko) * 2005-04-01 2006-10-11 엘지전자 주식회사 영상 신호의 스케일러블 인코딩 및 디코딩 방법
KR20060109247A (ko) * 2005-04-13 2006-10-19 엘지전자 주식회사 베이스 레이어 픽처를 이용하는 영상신호의 엔코딩/디코딩방법 및 장치
US8761252B2 (en) * 2003-03-27 2014-06-24 Lg Electronics Inc. Method and apparatus for scalably encoding and decoding video signal
FR2866183B1 (fr) * 2004-02-09 2006-08-04 Canon Kk Procedes d'emission et de reception d'une animation, et dispositifs associes
US20050201471A1 (en) * 2004-02-13 2005-09-15 Nokia Corporation Picture decoding method
US7296205B2 (en) * 2004-02-18 2007-11-13 Nokia Corporation Data repair
KR20050112587A (ko) * 2004-05-27 2005-12-01 학교법인 대양학원 동영상 인코딩, 디코딩 장치 및 그 방법
US9124907B2 (en) * 2004-10-04 2015-09-01 Nokia Technologies Oy Picture buffering method
US20060117354A1 (en) * 2004-11-29 2006-06-01 Mark Schutte Consolidating video-on-demand (VOD) services with multi-room personal video recording (MR-PVR) services
US20070143776A1 (en) * 2005-03-01 2007-06-21 Russ Samuel H Viewer data collection in a multi-room network
US20060218581A1 (en) * 2005-03-01 2006-09-28 Barbara Ostrowska Interactive network guide with parental monitoring
US8660180B2 (en) * 2005-04-01 2014-02-25 Lg Electronics Inc. Method and apparatus for scalably encoding and decoding video signal
US20060225105A1 (en) * 2005-04-05 2006-10-05 Scientific-Atlanta, Inc. Networked multi-room system ad insertion
KR100703774B1 (ko) * 2005-04-13 2007-04-06 삼성전자주식회사 인트라 코딩을 선택적으로 적용하여 인트라 ｂｌ 예측모드의 비디오 신호를 인코딩 및 디코딩하는 방법 및 장치
US9049449B2 (en) * 2005-04-13 2015-06-02 Nokia Corporation Coding of frame number in scalable video coding
US8755434B2 (en) * 2005-07-22 2014-06-17 Lg Electronics Inc. Method and apparatus for scalably encoding and decoding video signal
US8139642B2 (en) 2005-08-29 2012-03-20 Stmicroelectronics S.R.L. Method for encoding signals, related systems and program product therefor
US7876998B2 (en) 2005-10-05 2011-01-25 Wall William E DVD playback over multi-room by copying to HDD
US8665942B2 (en) * 2007-01-23 2014-03-04 Sharp Laboratories Of America, Inc. Methods and systems for inter-layer image prediction signaling
US8503524B2 (en) * 2007-01-23 2013-08-06 Sharp Laboratories Of America, Inc. Methods and systems for inter-layer image prediction
US9838701B2 (en) * 2011-08-03 2017-12-05 Mediatek Inc. Method and video decoder for decoding scalable video stream using inter-layer racing scheme
TWI574554B (zh) * 2012-06-29 2017-03-11 Sony Corp 資訊處理設備及資訊處理方法
EP2904804A1 (en) * 2012-10-04 2015-08-12 VID SCALE, Inc. Reference picture set mapping for standard scalable video coding
US10085017B2 (en) * 2012-11-29 2018-09-25 Advanced Micro Devices, Inc. Bandwidth saving architecture for scalable video coding spatial mode
US9930570B2 (en) * 2013-04-17 2018-03-27 Thomson Licensing Method and apparatus for packet header compression
JP6354262B2 (ja) * 2014-03-31 2018-07-11 株式会社Ｊｖｃケンウッド 映像符号化データ送信装置、映像符号化データ送信方法、映像符号化データ受信装置、映像符号化データ受信方法、及び映像符号化データ送受信システム
US10547879B2 (en) * 2016-07-14 2020-01-28 Mediatek Inc. Method and apparatus for streaming video content

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5278647A (en) * 1992-08-05 1994-01-11 At&T Bell Laboratories Video decoder using adaptive macroblock leak signals
CA2126467A1 (en) 1993-07-13 1995-01-14 Barin Geoffry Haskell Scalable encoding and decoding of high-resolution progressive video
US5619256A (en) * 1995-05-26 1997-04-08 Lucent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
KR100204475B1 (ko) 1996-03-29 1999-06-15 배순훈 개선된 프레임 재배열 장치
ES2323358T3 (es) * 1997-04-01 2009-07-14 Sony Corporation Codificador de imagenes, metodo de codificacion de imagenes, descodificador de imagenes, metodo de descodificacion de imagenes, y medio de distribucion.
US6233356B1 (en) * 1997-07-08 2001-05-15 At&T Corp. Generalized scalability for video coder based on video objects

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8223840B2 (en) 2005-04-27 2012-07-17 Nec Corporation Image decoding method of decoding hierarchy-encoded image data in respective hierarchies, and a device thereof

Also Published As

Publication number Publication date
US6697426B1 (en) 2004-02-24
EP1186176A1 (en) 2002-03-13
WO2001069935A1 (en) 2001-09-20

Similar Documents

Publication Publication Date Title
US6697426B1 (en) Reduction of layer-decoding complexity by reordering the transmission of enhancement layer frames
US6944222B2 (en) Efficiency FGST framework employing higher quality reference frames
US5729293A (en) Method and device for transcoding a sequence of coded digital signals
KR100323489B1 (ko) 비디오데이타를가지는비트스트림의트랜스코딩방법및장치
US6130911A (en) Method and apparatus for compressing reference frames in an interframe video codec
EP1737243A2 (en) Video coding method and apparatus using multi-layer based weighted prediction
KR20090026367A (ko) 미세 입자 스케일러빌리티 비디오 코딩에서 확장층에 대한 개선된 예측 구조들
WO2001030085A1 (en) System and method for encoding and decoding the residual signal for fine granular scalable video
EP1149495A1 (en) System and method for encoding and decoding enhancement layer data using base layer quantization data
JP2004533134A (ja) 予測モードのファイン・グラニュラリティ・スケーラビリティを提供するための方法および装置
US20060165303A1 (en) Video coding method and apparatus for efficiently predicting unsynchronized frame
JP2005500754A (ja) 動き補償を備えた完全に組み込まれたｆｇｓ映像符号化
KR20020064931A (ko) 단일-루프 움직임-보상 파인 입상 스케일러빌리티
US20060165301A1 (en) Video coding method and apparatus for efficiently predicting unsynchronized frame
WO2006078115A1 (en) Video coding method and apparatus for efficiently predicting unsynchronized frame
US20040081237A1 (en) Transcoder system for compressed digital video bitstreams
JP2007266749A (ja) 符号化方法
US20080152002A1 (en) Methods and apparatus for scalable video bitstreams
US6160847A (en) Detection mechanism for video channel underflow in MPEG-2 video decoding
US6944346B2 (en) Efficiency FGST framework employing higher quality reference frames
KR100364748B1 (ko) 영상 변환 부호화 장치
JP2005518163A (ja) メモリ−帯域幅が効率的なファイン・グラニュラ・スケーラビリティ（ｆｉｎｅｇｒａｎｕｌａｒｓｃａｌａｂｉｌｉｔｙ：ＦＧＳ）エンコーダ
US20050135478A1 (en) Reduction of layer-decoding complexity by reordering the transmission of enhancement layer frames
JPH07107464A (ja) 画像符号化装置および復号化装置
EP1442599A1 (en) Compression