TW200841745A - Reference frame placement in the enhancement layer - Google Patents

Description

200841745 九、發明說明： 【發明所屬之技術領域】 本揭示案係關於多媒體編碼及經編碼之多媒體内容的傳 達。 本申請案主張2006年12月22曰申請之美國臨時申請案第 60/871，655號，及2007年3月1曰申請之美國臨時申請案第 60/892,356號之權利。該等申請案之全文以引用的方式併 入本文中。 【先前技術】 數位多媒體能力可併入至廣泛範圍之裝置中，包括數位 電視、數位直接廣播系統、無線通信裝置、無線廣播系 統、個人數位助理（PDA)、膝上型電腦或桌上型電腦、數 位照相機、數位記錄裝置、視訊遊戲裝置、視訊遊戲控制 台、蜂巢式電話或衛星無線電電話及類似物。數位多媒體 裝置可實施諸如MPEG-2、MPEG-4或H.264/MPEG-4第10 來執行壓縮以減小或移除多媒體序列中 之冗餘。

部分加強型視訊編碼（AVC)的編碼技術以較有效地傳輸並 (/ #收數位視Λ貝料。此等編碼技術可經由空間及時間預測 方式來傳輸。加強層可向基礎層 添加額外訊框以增加整體訊框速 128003.doc 200841745 率，或添加額外位元以改良信雜比。在一實例中，經調變 乜號之隶可罪。卩分可用以傳輸基礎層，而經調變之信號 之較不可靠部分可用以傳輸加強層。 SVC可用於廣泛各種編碼應用中。通常使用技術之 特疋區域為在無線多媒體廣播應用中。多媒體廣播技術 之實例包括被稱為唯前向鏈路（FL0)、數位多媒體廣播 (DMB)及掌上型數位視訊廣播（DVB-Η)之技術。 【發明内容】 在本揭示案之某些態樣中，一種用於處理多媒體資料之 方法包含：編碼多媒體資料之複數個訊框，其中該複數個 汛框包括一或多個參考訊框；及在基礎層位元流與至少一 加強層位元流之間配置複數個訊框中的每一者以使得該一 或多個參考訊框中之至少一者被配置給加強層位元流。 在本揭示案之某些態樣中，一種用於處理多媒體資料之 口又ί肴I 3 ·編碼模組，其編碼多媒體資料之複數個訊 框，其中該複數個訊框包括一或多個參考訊框，·及一配置 杈組，其在基礎層位元流與至少一加強層&元流之間配置 複數個訊框中的每一者以使得該一或多個參考訊框中之至 少一者被配置給加強層位元流。 在本揭示案之某些態樣中，一種用於處理多媒體資料之 設備包含··用於編碼多媒體資料之複數個訊框的構件，其 中該複數個訊框包括一或多個參考訊框；及用於在基礎層 位元流與至少一加強層位元流之間配置複數個訊框中的每 一者以使得該一或多個參考訊框中之至少一者被配置給加 強層位元流的構件。 128003.doc 200841745 在本揭示案之某些態樣中，一種用於處理多媒體資料之 電驷私式產品包含在上面具有指令之電腦可讀媒體。該等 指令包含··用於編碼多媒體資料之複數個訊框的程式碼， 其中忒複數個訊框包括一或多個參考訊框；及用於在基礎 f位元流與至少一加強層位元流之間配置複數個訊框中的 每一者以使得該一或多個參考訊框中之至少一者被配置給 加強層位元流的程式碼。

ϋ 在本揭不案之某些態樣中，一種用於處理多媒體資料之 方法包含：識別參考加強層位元流之參考訊框之至少一部 分的可縮放編碼機制之基層位元流的至少一訊框；及當接 收到該加強層位元流時，使用由該基礎層位元流之經:別 之訊框參考的該加強層位元流之該參考訊框的該部分來解 碼基礎層位元流的該經識別之訊框。 在本揭不案之某些態樣中，_種用於處理多媒體資料之 設備包含：參考資料分析模組，其識別參考加強層位元流 之參考訊框之至少—部分的可縮放編碼機制之基層位元流 之至少-訊框；及解碼模組，其當接㈣該加㈣位元流 時’使用由該基礎層位元流之經識別之訊框參考的該加強 層位元流之該參考訊框的該部分來解碼基礎層位元流之該 經識別之訊框。 在本揭示案之某些態樣中，—種用於處理多媒體資料之 設備包含：用於識別參考加強層位元流之參考訊框之至少 一部分的可縮放編碼機制之基層位元流之至少—訊框的構 件；及用於當接收到該加強層位元流時使用由該基礎層位 元流之經識別之訊框參考㈣加強層位元流之該參考訊框 128003.doc 200841745 的=部分來解碼基礎層位元流之該經識別之訊框的構件。 在本揭示幸$宜 <。、/、 /、二怨樣中，一種用於處理多媒體資料之 沪2式產品包含在上面具有指令之電腦可讀媒體。該等 二…：用於識別參考加強層位元流之參考訊框之至少 7部分的可縮放編碼機制之基層位元流之至少—訊框的程 ;:、ά及用於虽接收到該加強層位元流時使用由該基礎層 立凡流之經識別之訊框參考的該加強層位元流之該參考訊 :部分來解碼基礎層位元流之該經識別之訊框的程式 石馬〇 、 在：附圖式及以下描述中闡述一或多個實例的細節。其 敛、目標及優點自描述及圖式且自申請專利範圍將顯 而易見。 【實施方式】 ▲本揭示案描述用於在可縮放編碼機制(諸如，可縮放視 成編碼（SVC))中在至少兩個層 二 7 IN yf之間配置多媒體序列之資料

(J =聽之技術。在SVC中’經編碼之多媒體序列包括一基 礎層及一或多個加強層。為 ^ 馮違成說明之目的，將關於一基 礎層幻堇-加強層來描述本揭示案之技術。然而，熟習此 項技咖者應顯而易見的是，該等技術可延伸至利用一個以 上加強層之SVC機制。 基礎層指載利於多媒體解叙最小量資料讀供基礎 位準品質的位元流。加強層指载運額外資料之位元流，該 領外貧料加強經解碼之多媒體之品質。一般而言，加強層 流僅可結合基礎層而解碼’亦即，加強層之訊框含有 對經解碼之基礎層之一或多個訊框的參考。然而，在其他 128003.doc 200841745 二樣中可在無基礎層之情況下至少部分地解碼加強層。 使用1¾層式調變，可在相同載波或副載波上但以導致不 同可靠性之不同傳輸特性來傳輸基礎層及加強層。換言 之，經由經調變之信號之較可靠部分來傳輸基礎層，而經 • 由經調變之信號之較不可靠部分來傳輸加強層。舉例而 . 言’可以不同封包錯誤率（PER)來傳輸基礎層及加強層。 特定言之，可以較低PER傳輸基礎層以用於貫穿覆蓋區域 P 之較可靠接收，而以較高PER傳輸加強層。以此方式，載 運用於解碼基礎層之資料的位元流具有較可靠接收，進而 允許使用者在另外將不提供接收之區域中檢視多媒體序列 之内容（即使係以較低位準品質）。 在未接收到加強層之狀況下，解碼裝置可僅解碼基礎 層 另外’當接收到基礎層及加強層兩者時，解碼裝置可 解碼基礎層加上加強層以提供較高品質。 本揭示案^^礅用於在基礎層與一或多個加強層之間配置 〇 資料之訊框的技術。本文中所述之技術允許在基礎層與加 強層之間的訊框之選擇性安裝以較佳使用加強層中之未使 用之頻寬。在某些態樣中，編碼裝置可將在時間上定位於 經框内編碼之訊框之前及附近的參考訊框配置給加強層。 - 因為經框内編碼之訊框係在未參考任何其他在時間上定位 之訊框的情況下來編碼，所以移動在時間上定位於經框内 編碼之訊框之前及附近的參考訊框並不影響後續訊框之解 碼。 在其他態樣中’編碼裝置可將定位於包括複數個訊框之 128003.doc -10- 200841745 資料區段（例如，超訊框）之末端附近之參考訊框配置給加 強層。在此狀況下，基礎層中之訊框對移動至加強層之泉 考訊框之參考可經消除以減小對後續訊框之解碼的影響。 或者，基礎層中之訊框對移動至加強層之參考訊框之參考 • 可保持，且解碼裝置可基於是否接收到加強層而選擇性地 • 解碼接收到的訊框。所述技術可用以幫助平衡基礎層與一 或多個加強層之間的頻寬。 (、 圖1為說明支援視訊可縮放性之例示性多媒體編碼系統 10的方塊圖。多媒體編碼系統10包括由網路16連接之一編 碼裝置12及一解碼裝置14。編碼裝置12自至少一源獲得 數位多媒體序列，編碼數位多媒體序列且在網路16上將經 編碼之序列傳輸至解碼裝置14。 在某些態樣中，源18可包含一或多個視訊内容提供者， 該一或多個視訊内容提供者（例如，經由衛星）而廣播數位 多媒體序列。在其他態樣中，源18可包含一榻取數位多媒 L) 體序列之影像擷取裝置。在此狀況下，影像擷取裝置可整 合於編碼裝置12内或麵接至編碼裝置12。雖然源18在圖工 中被說明為外部源，但在某些實施例中，編碼裝置η可自 •、編碼裝置12内或搞接至編碼裝置12之記憶體或檔案庫接收 - 多媒體序列。 夕媒體序列可包含待編碼且作為廣播或按需序列（· demand)而傳輸之直播即時或近即時視訊及/或音訊序列， 或可包3待編碼且作為廣播或按需序列而傳輸之預先記錄 且儲存之視訊及/或音訊序列。在某些態樣中，可電腦產 128003.doc 200841745 生多媒體序列之至少-部分，諸如，在遊戲狀況下。 可關於圖片序列而描述自源18接收到之數位多媒體序 列，該圖片序列包括訊框（整個圖片）或域（field)(例如，圖 片之交替奇數或偶數線的域）。另外，每一訊框或域可進 - 一步包括訊框或域之兩個或兩個以上切片或子部分。如本 文中所使用，術語”訊框，，可指代圖片、訊框、域或其切 * 片。 扃碼虞置12編碼多媒體序列以用於傳輸至解碼裝置14。 編碼裝置12可根據視訊壓縮標準來編碼多媒體序列，諸 如動旦專豕組（MPEG)_ 1、MPEG-2、MPEG-4、國際電信 聯盟標準部分（ITU_T)H 263或Ιτυ_τ Η·%*(其對應於 MPEG-4第1〇部分加強型視訊編碼（AVC))。此等編碼及藉 由延伸之解碼方法可針對壓縮訊框之内容以用於傳輸及/ 或儲存之無損耗或有損耗壓縮演算法。壓縮可大體被視為 為自多媒體資料移除冗餘的處理。 Ο 在某些態樣中，本揭示案預期應用於加強型H.264視訊 編碼，其用於在陸地行動多媒體多播（TM3)系統中使用唯 前向鍵路（FLO)空中介面規格”F〇rward Unk 〇nly Air

Interface Specification for Terrestrial Mobile Multimedia • MultlCaSt’’（2006 年 8 月作為技術標準 TIA-1099(，，FLO

SpeC1flcatlon”）公開）來傳送即時多媒體服務。然而，本揭 示案中所述之頻道切換技術並不限於任一特定類型之廣 播、多播、單播或點對點系統。 由ITU-T視訊編碼專家組IS〇/IEC動晝專家組 128003.doc -12- 200841745 (MPEG)編制IL264/MPEG-4(AVC)標準，作為被稱為聯合 視訊工作組（JVT)之集體合作夥伴關係的產物。由ITU-T研 究組於2005年3月在ITU-T推薦標準H.264，Advanced video coding for generic audiovisual services 中描述 H.264標準， 其在本文中可被稱為H.264標準或H.264規格或H.264/AVC 標準或規格。 聯合視訊工作組（JVT)繼續致力於H.264/MPEG-4 AVC之 可縮放視訊編碼（SVC)延伸。演進SVC延伸之規格呈聯合 草案（JD)之形式。由JVT產生之聯合可縮放視訊模型 (JSVM)實施用於可縮放視訊中之工具，其可在系統10内用 於本揭示案中所描述之各種編碼任務。關於精細粒度SNR 可縮放性（FGS)編碼之詳細資訊可在聯合草案文件中找 到，例如在聯合草案 6(SVC JD6)，Thomas Wiegand、Gary Sullivan、Julien Reichel、Heiko Schwarz及 Mathias Wien 之，’Joint Draft 6: Scalable Video Coding"，JVT-S 201， 2006 年 4 月，Geneva 及聯合草案 9(SVC JD9)，Thomas Wiegand、Gary Sullivan、Julien Reichel、Heiko Schwarz 及 Mathias Wien之"Joint Draft 9 of SVC Amendment”， JVT-V 201，2007年 1 月，Marrakech，Morocco 中找到。 編碼裝置12使用一或多個編碼技術來編碼序列之訊框中 的每一者。舉例而言，編碼裝置12可使用框内編碼技術來 編碼訊框中的一或多者。通常被稱為内（”Γ)訊框之使用框 内編碼技術來編碼之訊框在未參考其他訊框之情況下來編 碼。然而，使用框内編碼來編碼之訊框可使用空間預測以 128003.doc •13- 200841745 利用定位於同-訊框中之其他多媒體資料中的冗餘。 爲I裝置12亦可使用框間編碼技術來編碼訊框中的一或 多者。使用框間編碼技術來編碼之訊框參考本文中被稱為 參考訊框之-或多個其他訊框來編碼。框間編碼之訊框可 &括—或多個預測（T，）訊框、雙向（，，B，，）訊框或其組合。P tfl框參考至少―在時間上先前之訊框來編碼，而b訊框參 考至夕纟b間上未來之訊框及至少一在時間上先前之訊 p 框來編碼。在時間上先前之訊框及/或在相上未來之訊 框被稱為參考訊框"。以此方式，框間編碼越過時間訊框 而利用多媒體資料中之冗餘。 編碼裝置12可進-步經組態以藉由將訊框分割為複數個 像素子集且獨立編碼像素子集中之每一者而編碼序列的訊 框。此等像素子集可被稱為區塊或巨集區塊，且可包括 (例如）16x16像素子集，16xl6像素子集包括16列像素及“ 個打像素。編碼裝置12可進一步將每一區塊分割為兩個或 Ο 兩個以上子區塊。作為貫例，16 x 16區塊可包含四個8 x 8子 區塊，或其他子分割區塊。舉例而言，Η·264標準准許編 碼具有各種不同大小（例如，16χ16、16χ8、8χ16、8χ8、 4x4、8x4及4x8)的區塊。另外，藉由延伸，任何大小之子 . 區塊可包括於區塊内，例如，2x16、16x2、2x2、4x16、 8χ2等。大於16列或行之區塊亦為可能的。如本文中所使 用，術語，，區塊”可指任何大小之區塊或子區塊。 無關於訊框是使用框内編碼還是使用框間編碼來編碼， 序列之訊框中之每一者可被特徵化為參考訊框或非參考訊 128003.doc -14- 200841745 框如上所述，術語，，參考訊框，，指包括多媒體資料之訊 框，該多媒體資料由編碼裝置12使用以用於壓縮訊框中之 者之至夕一部分。換言之，參考訊框用於成功解碼依 賴於參考訊框之訊框。參考訊框可為經框内編碼之訊框或 經框間編碼之訊框，亦即，I訊框、B訊框或P訊框。相 反，術語，，非參考訊框”指纟由行動裝置12用於壓縮其他訊 f的訊框。換言之，無其他訊框依賴於來自非參考訊框之 (\ 夕媒體資料來用於成功解碼。因此，若在傳輸中丟失非參 考訊框，則將不存在對解碼序列之其他訊框的影響。類似 於參考吼框，非參考訊框可為經框内編碼之訊框或經框間 、扁碼之Λ框。然而，通常僅使用p訊框及6訊框作為非參考 訊框。 為支援可細放視訊，編碼裝置12在基礎層位元流（本文 中被稱為’基礎層”）與至少一加強層位元流（本文中被稱為 加強層”）之間配置經編碼之訊框。如上所述，基礎層載運 〇 用於夕媒體解碼之最小量資料。因而，基礎層經由經調變 之L號之較可罪部分（例如）以較低PER來傳輸。加強層載 運加強基礎層之經解碼之多媒體之品質的額外資料。加強 層經由經調變之信號之較不可靠部分（例如）以較高PER來 - 傳輸。在某些狀況下，加強層可能僅可結合基礎層來解 碼，亦即，加強層之訊框含有對經解碼之基礎層之一或多 個訊框的參考。然而，在其他狀況下，可在無基礎層之情 況下至少部分地解碼加強層。 在某些態樣中，諸如根據几〇空中介面規格，可能需要 128003.doc •15- 200841745 Γ Ο 基礎層之大小與加強層之大小為大體上相同的。換古之， 編碼裝置12可在加強層中傳輸大體上與在基礎層中傳輸之 位凡之數目相同的數目之位元。在訊框之初始配置導致層 =小之間的不平衡之狀況下，編碼模組12可根據本文中 =之技術來重新配置訊框。如下所述之訊框之重新配置 消除編碼模組12浪費頻寬以發送填充位元（亦即，經添加 以平衡層之大小但未由解碼模組i 4使用的資訊）的需要。 雖然本文中所述之實例針對將來自基礎層之訊框重新配置 給加強層’但類似技術可用於將來自加強層之訊框初始配 置給基礎層。 本文中所述之技術允許在基礎層或加強層内之訊框之選 擇性安裝以在基礎層與加強層之間重新配置訊框。特定言 之，在某些態樣中’可將至少一參考訊框自基礎層移動： 加強層以便在不同層之間達成資料之較佳平衡。在某些態 樣中’編碼裝置可移動在時間上定位於經框内編碼之訊 框之前及附近的參考訊框。舉例而言，編石馬裝置12可移動 在時間上恰定位於經框内編碼之訊框之前的參考訊框。在 其他態樣中’編碼裝置12可移動定位於包括複數個訊框之 貧料區段（例如’超訊框）之末端附近的參考訊框。所述技 術可幫助平衡基礎層與一或多個加強層之間的頻寬。 編碼裝置丨2在網路16上將經編碼之序㈣輸至解碼裝置 14以用於解碼及呈現給解碼裝置14之使用者。網路η可包 含-或多個有線或無線通信網路，包括乙太網路、電話 (例如，POTS)、纜線、電線及光纖系統及/或無線系統中 128003.doc -16 - 200841745 Γ:

V 的一或多者，該等無線系統包含以下各物中之一或多者： 劃碼多重存取（CDMA或CDMA2000)通信系統、劃頻多重 存取（FDMA)系統、正交劃頻多重存取（OFDM)系統、劃時 多重存取（TDMA)系統（諸如，GSM/通用封包無線電服務 (GPRS)/加強型資料GSM環境（EDGE))、TETRA(陸地中繼 式無線電）行動電話系統、寬頻劃碼多重存取（WCDMA)系 統、高資料速率（lxEV_DO或lxEV-DO黃金（Gold)多播）系 統、IEEE 8〇2_11系統、FLO系統、數位媒體廣播（DMB)系 統、掌上型數位視訊廣播（DVB-Η)系統、陸地整體服務數 位廣播（ISDB-T)系統及類似物。 在某些悲樣中’編碼裝置12可編碼、組合並傳輸在一時 段内接收到之訊框。舉例而言，在某些多媒體編碼系統 中，多媒體貧料之複數個訊框被一起分組為有時被稱為 ”超訊框”的多媒體資料區段。如本文中所使用，術語，，超 訊框"指在-時段或時t内所收集以形成資料區段的訊框 群。在制FLO技術之編碼系統巾，超訊框可包含可標稱 地具有30個訊框的二分之一個資料區段。然而，超訊框可 包括任-數目之訊框。技術亦可用於編碼、組合並傳輸其 他資料區段’諸如’用於在可能為或可能不為固定時段之 不同夺奴内接收到之身料區段，或用於個別訊框或資料訊 框之集合。換言之’超訊框可經界^以涵蓋大於或小於二 :广時段之時間間隔或甚至可變時間間隔。注意，貫穿 本揭示案，特定多媒 、貝枓區奴（類如’類似於超訊框之 既心）指特定大小及/或持續時間之任-多媒體資料塊。 128003.doc -17- 200841745 Ο Ο 在某些態樣中，編碼裝置12可形成用以廣播多媒體資料 之-或多個頻道之廣播網路組件的部分。因而，經編碼之 序列中之每一者可對應於多媒體資料頻道。多媒體資料頻 道中之每一者可包含一基礎層及至少一加強層。作為實 例’編碼裝置12可形成用以將經編碼之多媒體資料之—或 夕個頻道廣播至無線裝置的無線基地台、飼服器或任—基 礎架構節點的部分。在此狀況下，編碼裝置12可將經編二 之^料傳輸至諸如解碼裝置14之複數個無線裝置。然而， 為簡單起見，在圖1中說明單一解碼裝置14。 馬装置14自，.周路16接收經編碼之序列且解碼經編碼之 序列。取決於解碼裝置14相對於網路16之位置，解碼裝置 14可能或可能不接收加強層。舉例而言，在無線 當解碼裝置14較接近網路16内之傳輸塔時，解碼裝置叫 接收基礎層及加強層。然而，當解碼裝置14進一步遠離網 路16内之傳輸塔時，解碼裝置14可僅接收基礎層。換言 ^，當解碼裝置U在適用覆蓋區域内時，會由解碼裝置二 較可靠地接收基礎層’因為基礎層係以較高功率來傳輸。 在未接收到加強層之狀況下，解碼裝置14可僅解碼基礎 層。在此狀況下’解碼裝置14能夠呈現由基礎層提供之多 媒體序列之内容(雖然係以最低品質位準)。然而，當接收 到基礎層及加強層兩者時’解碼裝置14能夠解碼並組合基 礎層及加強層之資料以呈現較高品質之視訊。因此，由ς 碼裝置14獲得之視訊在加強層可被解碼且添加至基礎層以 增加經解碼之視訊之品質意義上為可縮放的。然而，可縮 128003.doc -18- 200841745 放性僅在加強層資料存在時為可能的。 解碼裝置14可（例如）實施Α以下各物之部分·數位電 視、無線通信裝置、遊戲裝置、攜帶型數位助理（PDA)、 膝上型電腦或桌上型電腦、數位音樂及視訊裝置(諸如， 以商標"iPod”出售之裝置）或無線電電話（諸如，蜂巢式電 話、衛星電話或基於陸地之無線電電話），或經裝備^用 於視訊及/或音訊串流、視訊電話或兩者的其他無線行動 Ο Ο 終端機。解碼裝置14可與行動裝4或固定裝置相關聯。在 其他態樣中，解碼裝置14可包含耦接至有線網路的有線裝 置。 ’ 圖2為較詳細說明編碼裝置12的方塊圖。如圖2中所示， 編碼裝置12包括一編碼模組2〇、一配置模組22 '一參考資 料產生器24及一調變器/傳輸器26。編碼模組2〇包括一框 内編碼模組28及一框間編碼模組29。 編碼模組20自源18(圖1)接收一或多個輸入多媒體序列 且選擇性編碼接收到之多媒體序列的訊框。特定言之，框 内編碼模組28在未參考其他訊框之情況下編碼序列之訊框 中的一或多者。框内編碼模組28可（例如）在視訊序列開始 時或在場景改變時將序列之訊框編碼為I訊框。或者或另 外’框内編碼模組28可框内編碼訊框以用於框内再新或用 於頻道切換。如上所述，框内編碼模組28可使用空間預測 以利用定位於同一訊框中之其他多媒體資料中的冗餘而編 碼訊框。 框間編碼模組29參考一或多個其他在時間上定位之訊框 128003.doc -19- 200841745 而編碼序列之訊框中的一或多者，亦即，編碼為〗訊框、p 訊框、B訊框或其組合。框間編碼模組29可利用其他在時 間上定位之訊框（亦即，參考訊框）（諸如，在訊框之時間序 列中彼此接近的一或多個訊框）中之冗餘。參考訊框可具 有為與待編碼之訊框之一或多個區塊之匹配或至少部分匹 配的一或多個區塊。在此狀況下，框間編碼模組29可越過 時間訊框參考資料之區塊使用運動補償預測而編碼訊框。 具體而言，框間編碼模組29可將訊框編碼為包含訊框之特 疋分副之一或多個運動向量及殘餘的資料。 參考資料產生器24可產生指示由編碼模組2〇產生之經框 内編碼及經框間編碼之多媒體資料之位置的參考資料。由 參考資料產生器24產生之參考資料可（例如）識別訊框是 框、Ρ訊框、Β訊框還是其他類型訊框。另外，參考資料可 包括識別區塊的一或多個區塊識別符及用以編碼訊框内之 區塊的編碼類型。參考資料亦可包括訊框序號，該等訊框 序號識別多媒體序列内之一或多個參考訊框的位置。 配置模組22在基礎層位元流與至少一加強層位元流之間 配置經編碼之訊框。在某些態樣中，配置模組22基於訊框 是否被用作參考訊框而配置訊框。配置模組22可（例如）最 初將參考訊框指派給基礎層且將非參考訊框指派給加強 層。因為Β訊框通常並未被用作參考訊框且通常參考先前 及後續Ρ訊框，所以此配置機制通常將〗訊框及？訊框配置 給基礎層且將Β訊框配置給加強層。然而，編碼裝置12可 將I訊框或Ρ訊框編碼為非參考訊框且將非參考ζ訊框或ρ訊 128003.doc •20- 200841745 框指派給加強層。類似地，編碼裝置12可將一或多個B訊 框編碼為參考訊框且將參考B訊框指派給基礎層。此外， 配置模組22可使用初始配置機制，在該初始配置機制中將 或夕個非參考訊框初始指派給基礎層。舉例而言，配置 模組22可將所有1訊框及P訊框初始配置給基礎層，而無論 P °孔框為參考矾框還是非參考訊框。此外，配置模組22可 進 乂將或多個非參考B訊框初始配置給基礎層。 在某些態樣中，諸如根據FLO空中介面規格，可能需要 基礎層與加強層大體上為相同大小。在習知編碼系統中， 編碼裝置可藉由在大體上較小之層之位元流中併入填充位 兀（亦即，基礎層與加強層中之位元數目之間的差異超出 預疋限值）而平衡基礎層與加強層。填充位元在解碼處 理期間被解碼器忽略。本文中所述之技術允許在基礎層與 加強層之間選擇性安裝訊框以在層之間較佳地配置位元。 特疋σ之配置模組22可分析基礎層與加強層之間的複 〇 數個訊框之配置且在基礎層與加強層之間重新配置訊框中 的一或多者。配置模組22試圖最小化基礎層與加強層之大 小之間的差異。舉例而言，若基礎層之位元流中之位元數 • 目（亦即，大小）小於加強層之位元流中之位元數目一預定 - #度或臨限值’則配置模組22可將加強層之訊框中之一或 多者重新指派給基礎層。或者，編碼模組20可編碼額外訊 框以包括於基礎層中。以此方式，配置模組22平衡基礎層 與加強層之大小以使得大小大體上相同。編碼模組2〇可另 外將填充位元添加至基礎層或加強層以使得層為相同大 128003.doc -21 - 200841745 小。然而，層之間的差異愈小，由填充位元浪費之頻寬愈 少〇 若加強層之位元流之位元數目（亦即，大小）小於基礎層 之位元數目一預定裕度或臨限值，則配置模組22可將基礎 I之訊框中之—或多者重新指派給加強層以使得大小為大 體上相同。若在基礎層中存在非參考訊框，則配置模組22 可將非參考訊框重新指派給加強層。藉由將非參考訊框移 (、 冑至加強層’當解碼裝置14未接收到加強層時，不存在對 解碼後續訊框的影響。 若在基礎層中不存在非參考訊框，則配置模組U選定至 少一參考訊框以自基礎層移動至加強層。在某些態樣中， 配置模組22可移動在時間上定位於經框内編碼之訊框之前 及附近的參考訊框。舉例而言，配置模組22可重新指派在 時間上恰定位於I訊框或頻道切換訊框（CSF)之前的參考訊 框。CSF—般將被框内編碼以有助於立即存取頻道。因為 Ο 經框内編碼之訊框係在未參考任何其他在時間上定位之訊 框之情況下來編碼，所以移動在時間上恰定位於經框内編 碼之訊框之前的參考訊框並不影響後續訊框之解碼。此 • 外，就參考訊框係由加強層中之一或多個訊框參考而言， ， 若接收到依賴於參考訊框之加強層中的訊框，則將接收到 參考訊框。在其他態樣中，配置模組22可移動在時間上定 位於經框内編碼之訊框之前及附近的參考訊框，例如，經 框内編碼之訊框之前的兩個或三個訊框。 在其他態樣中，配置模組22可移動定位於超訊框或其他 128003.doc -22- 200841745 Ο u 資料區段之末端附近的參考訊框。在此狀況下，編碼裝置 2可凋正或多個參考資料。舉例而言，配置模組22可請 长、扁馬模組2〇重新編碼依賴於經重新指派之參考訊框之基 礎層。的或夕個訊框以包括對基礎層中之不同訊框的參 考。或者，若依賴於經重新指派之訊框之訊框係使用多個 >考訊框來編碼，則參考資料產生器24可僅移除對重新指 派給加強層之參考訊框的參考。當解碼基礎層之後續訊框 時’調^參考資料可減小未接收到加強層的影響。然而， 在某些態樣中’編碼裝置12可不調整任何參考資料，且實 十月為僅留下對經重新指派之訊框的參考。在此狀況下，若 接收到具有參考訊框之加強層，則解碼裝置14可正常解石馬 資料。若未接收到包括參考訊框之加強層，則解碼裝置Μ 可執行錯誤校正以考量參考訊框之遺失資料。 ▲在基礎層與加強層之間配置訊框之後，編碼裝置Η經由 调變器/傳輸器26而在網路16(圖υ上傳輸訊框。調變 = 可包括適當數據機、放大器、滤波器及頻率轉換組 上之-編碼之多媒體序列的調變及無線傳 : 述，調變器/傳輸器26可使用階層式調變以在 相同載波或㈣波上㈣導致不料靠性之不㈣;= 來傳輸基礎層及加強層。換言之，經由_變之^^ :靠部分來傳輸基礎層，而經由經調變之信號之心可= #刀來傳輸加強層。舉例而言，基礎層及加強層 = 咖來傳輸’使得較可#地接收到基礎層。此/ 中，編碼裝置】2可經裝備而用於雙 ^怨樣 且因此可包括 128003.doc -23- 200841745 傳輸組件及接收組件且能夠編碼並解碼多媒體資料。 前述技術可個別實施於編碼裝置12中’或此等技術中之 兩者或兩者以上或全部此等技術可—起實施於編碼裝置 中。編碼裝置12中之組件例示適用於實施本文中所述之技 術之組件。然而，編碼裝置12可包括許多其他組件（若需 要）以及組合上述模組中之一或多者之功能性的較少組 件。然而，為了易於說明，在圖2中未展示此等組件。 〇 編碼裝置12中之組件可實施為一或多個處理器、數位信 號處理器、特殊應用積體電路（ASIC)、場可程式化閉陣列 (FPGA)、離散邏輯、軟體、硬體、韌體或其任何組合。不 同特徵被描繪為模組意欲強調編碼裝置丨2之不同功能態樣 未必暗示此專模組必須由獨立硬體或軟體組件實現。實 ί月為，與一或多個模組相關聯之功能性可整合於共同或獨 立硬體或軟體組件内。因此，本揭示案不應限於編碼裝置 12之實例。 〇 圖3為較詳細說明解碼裝置14的方塊圖。解碼裝置14包 括…解凋變器/接收器3〇、一選擇性解碼模組32及一參考 資料分析模組38。解調變器/接收器3〇經由網路“而接收 經編碼之訊框序列。類似於調變器/傳輸器26，解調變器/ •，收器30可包括適當數據機、放大器、濾波器及頻率轉換 、、且件以支援來自網路16(圖”之經編碼之多媒體序列的接收 及解碼。在某些態樣中，解碼裝置14可經裝備而用於雙向 u且g it匕彳包括#輸組件及接收組件且能夠編碼並解 碼多媒體資料。 128003.doc -24- 200841745 如上所述，編碼裝置12可使用階層式調變以傳輸具有導 致不同可靠性之不同傳輸特性之基礎層及加強層中:經編 碼之訊框序列。因此，在某些情況下，例如，當解碼裝置 14遠離網路16之傳輸塔時，解碼裝置14可僅接收基礎層之 經編碼之訊框。在其他情況下，例如，當解碼裝置Μ較接 近網路16之傳輸塔時，解碼裝置14可自基礎層及加強層接 收訊框。

Ο 料性解組32解碼接收収序列的經編碼之訊框。 特定言之，若接收到加強層，則選擇性解碼模組Μ解碼基 礎層之訊框及加強層之純。在解碼經編碼之訊框時，選 f性解碼模組32❹詩編碼訊框之冗餘而解碼訊框。特 定言之，選擇性解碼模組32使用同一訊框内之空間冗餘以 解碼經框内編碼之訊框。類似地，選擇性解碼模組Μ使用 一或多個參考訊框之時間冗餘以解碼經框間編碼之訊框。 選擇性解碼模組32根據來自參考資料分析模組38之束考 資料而解碼序狀㈣狀純。參考資❹㈣組爛 別指示接收到之經編碼之多媒體序列中的經框内編碼之訊 框或區塊及經框間編碼之訊框或區塊定位之處的來考資 料。另外’參考資料分析模組38可識別指示經框間編碼之 隸之參考訊框的位置的參考資料。選擇性解碼模組城 用經識別之參相框（若可用）來解賴_編碼之訊框。 如上所述，加強層包括自基礎層移動以平 :層：大小的至少-參考訊框。必要時，當接收到加強： 、4 1·生解碼模組32制加強層巾之參考訊框之資料來 128003.doc -25- 200841745 解碼基礎層的至少一訊框。然而，當未接收到加強層時， ^擇陡解碼模組32不具有來自加強層中之參考訊框之資料 來成功解石馬基礎層之訊框。在某些態樣中，選擇性解碼模 組32可解碼與訊框對應之csf，該訊框包括對加強層之遺 失參考況框的參考。在另一實例中，參考遺失參考訊框之 訊框可參考多個參考訊框來編碼，且選擇性解碼模組32可 僅使用其他參考訊框而解碼參考遺失參考訊框的訊框。另 外，錯誤校正模組（未圖示）可使用—或多個錯誤校正演算 法以試圖校正錯誤。 :加強層資料為可用的，亦即，當已成功接收到加強層 ^斗時，選擇性解碼模組32組合給定訊框或巨集區塊之基 石層及加強層多媒體資料。因此，當接收到基礎層及加強 曰時’選擇性解碼模組32組合層以提供高於當僅接收到基 礎層時之品質的品質。 Ο 則述技術可個別實施於解碼裝置14中，或此等技術中之 '者或兩者以上或全部此等技術可—起實施於解碼裝置Μ 中。解碼裝置14中之組件例示適用於實施本文中所述之技 術之組件。“，解碼裝置14可包括許多其他組件（若需 :)。以及組合上述模組中之一或多者之功能性的較少組 此外解㈣置14可包括肖於傳輸及接收經編碼之視 件^適田^組件、解調變組件、頻率轉換組件、滤波組 、大為、、且件，包括射頻（RF)無線組件及天線（適用 …、而為了易於說明，在圖3中未展示此等組件。 解馬衣置14中之組件可實施為一或多個處理器、數位信 128003.d〇( -26- 200841745 號處理器、ASIC、FPGA、離散邏輯、軟體、硬體、韌體 或其任何組合。將不同特徵描繪為模組意欲強調解碼裝置 14之不同功能態樣且未必暗示此等模組必須由獨立硬體或 軟體組件實現。實情為，與一或多個模組相關聯之功能性 可整合於共同或獨立硬體或軟體組件内。因此，本揭示案 不應限於解碼裝置14之實例。 圖4為說明例示性經編碼之多媒體序列4〇之一部分的圖 ζ\ 示圖4中所示之經編碼之序列40可對應於多媒體資料之 頻道。作為實例’經編碼之序列4〇可對應於ESPN、 FOX、MSNBC或另一電視頻道。雖然圖4中所說明之實例 展示用於僅一個頻道之經編碼之序列4 〇，但本揭示案之技 術適用於用於任何數目之頻道的任何數目之經編碼之序 列。 經編碼之序列40包括複數個經編碼之訊框。經編碼之訊 框表不由各種框間編碼技術或框内編碼技術編碼之各別輸 〇 入几忙的、纟二壓細之型式。在圖4之實例中，經編碼之序列 40包括I訊框l、P訊框PisP5&B訊框匕至心。訊框L及I 至Ps為參考訊框。換言之，經編碼之序列40中之至少一其 他吼框具有對訊框11及1>1至1>5中之每一者之資料的至少一 ’ 區塊的參考。作為實例，訊框P4可為訊框B4及B5的參考訊 框。另一方面，訊框1至心為非參考訊框，亦即，無其他 訊框具有對訊框心至心之任何區塊資料的參考。在參看圖 4所述之實例中，雖然所有P訊框及I訊框為參考訊框且所 有B訊框為非參考訊框，但是一或多個P或I訊框可為非參 128003.doc -27- 200841745 考訊框且一或多個B訊框可為參考訊框。 如上所述，配置模組22在基礎層位元流42與加強層位元 流44之間配置經編碼之訊框。雖然在圖4中僅展示一加強 層，但本文中所述之技術可用以將來自基礎層之訊框分配 至一個以上加強層或在加強層之間分配來自基礎層的訊 框。基礎層位7G流42初始包括參考訊框^及匕至^加強 層位元流44初始包括非參考訊框1至^。以虛線說明之訊 p 框（亦即，參考訊框P4)指示訊框之初始位置。雖然圖4中所 說明之訊框之初始配置使得基礎層42包括所有參考訊框且 加強層44包括所有非參考訊框，但配置模組22可將一或多 個非參考訊框（例如，圖4之實例中之訊框心至心中的一者） 初始指派給基礎層42。 如上所述，配置模組22可分析基礎層42與加強層44之間 的訊框之配置且基於分析而重新配置一或多個訊框。舉例 而言，當加強層44含有大體上少於基礎層42之位元的位元 〇 時，配置模組22可將來自基礎層42的訊框中之一或多個重 新配置給加強層44。具體而言，當基礎層42中之位元數目 超出加強層44中之位元數目一臨限值時，配置模組22可重 新配置-或多個訊框。最初，配置模組可將定位於基礎層 ' 4:中的任何非參考訊框重新指派給加強層44。在圖4之實 例中，未有非參考訊框被初始指派給基礎層42。因此，配 置模組22選擇參考訊框中之至少一者以自基礎層42移動至 加強層44。 圖中所不，配置模組將參考訊框P4自基礎層42移動 128003.doc -28- 200841745 =:層::訊：糊上恰定位於經框内編碼之 未參考任何 以移動恰在經框内編瑪二::=況下來編碼’所 影響後續訊框…ρ弓之狀之則的參考訊框並不會不利 加強心 框ω之解碼。^，當未接收到 加強層44時’移動參考訊 之訊框速率且“ 4了在解碼裝置14處導致稍慢 Γ ϋ 計少 在經解碼之多媒體序⑽中產生某些輕 的炎又:。如上所述’參考訊㈣可充當非參考訊框B4至B5 /鞋。參考訊框！>4可繼續充當彼等訊框之參考訊 匡’因為若接收到包括對訊框&之參考之非參考訊框&及 B5,則將有可能接收到參考訊框p4。 說明於圖4中之經編碼之序列4〇僅出於例示性目的。如 上所述，經編碼之相4G可包括訊框料同配置及類型。 舉例而a ’經編碼之序列可包括參考訊框及非參考訊框的 不同配置。此外’在時間上定位於訊框^之前及附近之參 、 中之任者可自基礎層42移動至加強層44。在其他 狀況下，例如，訊框P2或P3中之一者可自基礎層42移動至 曰44然而，在將P2移動至加強層之前首先將最接近 訊框11而定位之參考訊框移動至加強層(亦即，將P3移動至 加強層）可為有利的。 圖5為說明另一例示性經編碼之多媒體序列50之一部分 的圖不。除經編碼之多媒體序列50並不包括I訊框外，經 編碼之多媒體序列50大體上與圖4之經編碼之多媒體序列 只N為，圖4之訊框I】由另一 p訊框（亦即，訊框 128003.doc -29- 200841745 P6)曰代。不同於訊框^，訊框&並非經框内編碼之訊框， 而是為包括對訊框1>4之至少一參考的經框間編碼之訊框。 ^編碼之多媒體序列50亦包括__頻道切換訊框（CSFi)。 在此只例中，CSFi為各別輸入訊框之至少一部分的經框内 、編碼之型式。換言之，哪係在未參考其他訊框之情況下 來編碼’且因此為可獨立解碼的。在某些態樣中，⑽1可 以低於經編碼之序列5〇之其他訊框的品質之品質來編碼。 〇 此外’在序列内之CSF1之時間位置對應於同一多媒體序列 巾之對應經框間編碼之訊框的時間位置之意義上，CSF1可 與經框間編碼之訊框之對應一者在時間上共同定位。在圖 5中說明之實例中，CSFi與訊框？6共同定位。在此狀況 下CSFl可被看作對應訊框Ρό中編碼之多媒體資料之至少 一部分的第二經框内編碼之型式。 在某些態樣中，解碼裝置14可取決於是否接收到加強層 44而選擇性地解碼經編碼之多媒體序列。特定言之，當 〇 接收到加強層44時，解碼裝置14可將訊框？4用作訊框！>6之 參考訊框的來解碼訊框ρό。因此，定位於基礎層42中之訊 框Ρ6參考加強層44中的訊框。然而，若解碼裝置14未接收 到加強層44，則解碼裝置14可解碼CSFi而非訊框匕。因為 ‘ CSFl為經框内編碼之訊框，所以將參考訊框&移動至加強 層44並不影響後續訊框的解碼。 說明於圖5中之經編碼之序列5〇僅出於例示性目的。如 上所述，經編碼之序列5〇可包括訊框的不同配置及類型。 舉例而a，經編碼之序列可包括參考訊框及非參考訊框的 128003.doc -30 - 200841745 不同配置。此外，在時間上定位於CSFi之前及附近之參考 訊框中之任一者可自基礎層42移動至加強層44。舉例而 言，訊框Ρό(亦即，對應於CSFl之時間位置之訊框）可被移 動至加強層位元流44。在其他狀況下，諸如訊框匕或匕之 其他參考訊框可自基礎層42移動至加強層44。在此等狀況 下’若解碼裝置14未接收到加強層44，則解碼裝置14可解 碼後續CSF(亦即，CSFD。 P 圖6為說明另一例示性經編碼之多媒體序列60之一部分 的圖示。除經編碼之多媒體序列60不包括經框内編碼之訊 框（亦即，I訊框或CSF)之外，經編碼之多媒體序列6〇大體 上刀另j與圖4之經編碼之多媒體序列4 〇及圖5之經編碼之多 媒體序列50—致。實情為，說明於圖6中之多媒體序列6〇 之部分包括一基礎層42及一包括全部經框間編碼之訊框的 加強層44。 多媒體序列60之部分包括兩個資料區段（例如，超訊框 〇 SFl&SF2)之部分。超訊框SFi至少包括訊框？1至！>4及訊框 B!SB4。超訊框SF2至少包括訊框Ps及匕以及訊框匕至1。 然而’超訊框SF1&SF2可包括較多或較少訊框。另外，超 訊框SFl& SF2可包括一或多個經框内編碼之訊框（例如，j * 訊框或C S F)。 如圖6中所說明，如由箭頭62所表示，超訊框sf2之第一 °孔汇（亦即’ P 5 )參考超訊框S F 1的最後訊框（亦即，P 4 )。換 言之，編碼模組20使用訊框P4中之時間冗餘而編碼訊框p5 中之一或個區塊。根據本揭示案之技術，配置模組22可將 128003.doc -31 - 200841745 來自基礎層42之參考訊框P4重新指派給加強層44以平衡層 之大小。 在某些狀況下，編碼裝置12可在將訊框P4自基礎層42移 動至加強層44之後即調整訊框P5的前向參考。在某些態樣 中，編碼模組20可參考基礎層42之訊框中之另一訊框來重 新編碼訊框I。在所說明之實例中，如由箭頭64所表示， 編碼裝置20可使用訊框P3中之時間冗餘來重新編碼訊框 ( Ps。在其他態樣中，編碼模組20可初始參考在時間上先前 的一個以上訊框（亦即，訊框Ps及P4)來編碼訊框p5。在此 狀況下’編碼模組20可能不重新編碼訊框ps，而是消除對 P4的參考。 在其他狀況下，編碼裝置12可不調整訊框p5的前向來 考。實情為，編碼裝置12可留下對P4之參考，即使p4定位 於加強層44中亦係如此。在此狀況下，解碼裝置14可基於 是否接收到加強層44而選擇性地解碼接收到之序列。當接 〇 收到加強層44時，解碼裝置14參考加強層中之訊框p4而解 碼Λ框P5。然而，當未接收到加強層44時，解碼裝置μ使 用一或多個錯誤校正技術以重建訊框&或等待經框内編碼 ‘ 之訊框。 ' 說明於圖6中之經編碼之序列60僅出於例示性目的。如 上所述，經編碼之序列60可包括訊框的不同配置及類型。 舉例而言，經編碼之序列可包括參考訊框及非參考訊框的 不同配置。此外，雖然在圖6中所說明之實例中，超訊框 SF1之最後參考訊框被 重新配置給加強層44，作失考訊框 128003.doc -32- 200841745 中之任一者可自基礎層42移動至加強層44。

圖7為說明根據本揭示案之技術之編碼裝置（諸如，編碼 裝置2)重新配置一或多個參考訊框的例示性操作之流程 圖。最初，配置模組22在基礎層位元流與至少一加強層位 元流之間配置經編碼之訊框（7〇)。在某些態樣中，配置模 、、且22基於訊框疋否被用作參考訊框而配置訊框。配置模組 22可（例如）最初將參考訊框指派給基礎層且將非參考訊框 指派給加強層。或者，配置模組22可使用一初始配置機 制’在該初始配置機制中—或多個非參考訊框被初始指派 給基礎層。 配置模組22分析基礎層與加強層之間的訊框配置以判定 同之大小（72)。當加強層 時’配置模組22判定加強 基礎層與加強層是否為大體上相 與基礎層並非為大體上相同大小 詹是否小於基礎層-預定裕度或臨限值（73)。當加強層大 於基礎層-預定臨限值(亦即’加強層包括較多位元)，配 置模組22將來自加強層之至少一訊框重新配置給基礎層 (74)。若存在初始配置給加強層之任何參考訊才匡，則配置 模組22可首先重新配置-或多個參考訊框。另彳，配置模 組22可重新配置始於非參考！訊框及非參考p訊框之非來老 訊框。 當加強層小於基礎層—預定臨限值（亦即，基礎層包括 較多位元）時’配置模組22判定在基礎層中是否存在 非參考訊框㈤。當在基礎層中不存在非參考訊框時，配 置板組22將來自基礎層之非參考訊框重新配置給加強芦 128003.doc -33· 200841745 (76)。藉由將非參考訊框移動至加強層，當解碼裝置μ未 接收到加強層時，不存在對解碼後續訊框的影響。 若在基礎層中不存在非參考訊框，則配置模組22將來自 基礎層的至少一參考訊框重新配置給加強層（77)。在某些 態樣中，配置模組22可移動在時間上定位於經框内編碼之 訊框（亦即，I訊框或頻道切換訊框（CSF))之前及附近之參 考訊框。舉例而言，配置模組22可移動在時間上恰定位於 f) _内編碼之訊框之前的參考訊框。因4經框内編碼之訊 框係在未參考任何其他在時間上定位之訊框之情況下來編 碼，所以移動在時間上恰定位於經框内編碼之訊框之前的 參考訊框並不影響後續訊框之解碼。在其他態樣中，配置 扠組2 2可移動定位於超訊框或其他資料區段之末端附近的 參考訊框。 編碼裝置12可調整包括對經重新配置之參考訊框之參考 的一或多個訊框的參考資料（78)。舉例而言，配置模組22 CJ 可請求編碼模組20重新編碼依賴於經重新指派之參考訊框 之基礎層的一或多個訊框以包括對基礎層中之不同訊框之 參考。或者，若依賴於經重新指派之訊框之訊框係使用多 個簽考訊框來編碼，則參考資料產生器24可僅移除對重新 才曰派π加強層之參考訊框的參考。然而，編碼裝置12可不 調整任何參考資料，且實情為僅留下對經重新指派之參考 孔杧的筝考。在此狀況下，若接收到具有參考訊框之加強 層，則解碼裝置U可正常解碼資料。若未接收到包括參考 訊杧之加強層，則解碼裝置丨4可執行錯誤校正以考量參考 128003.doc -34· 200841745 汛框之遺失資料。以此方式，配置模組22平衡基礎層與加 強層的大小。 冨基礎層與加強層為大體上相同之大小時，編碼裝置^ 2 傳輸該等層之訊框（79)。調變器/傳輸器26可使用階層式調 變以在相同載波或副載波上但以導致不同可靠性的不同傳 輸特性來傳輸基礎層及加強層。舉例而言，基礎層及加強 層可以不同PER來傳輸，使得較可靠地接收到基礎層。 p 圖8為說明解碼裝置（諸如，解碼裝置14)選擇性地解碼 基礎層之訊框的例示性操作之流程圖。解碼裝置丨4接收多 媒體序列之訊框（80)。如上所述，解碼裝置14可取決於解 碼裝置14相對於網路16(圖1)之位置而僅接收基礎層之經編 碼之訊框或接收基礎層及加強層之經編碼之訊框。 解碼裝置14識別具有對加強層中之訊框之内容之參考的 基礎層中之訊框（82)。解碼裝置14可分析接收到之參考資 料以識別所涉及之訊框。解碼裝置14判定是否接收到加強 (J 層（84)。當接收到加強層時，解碼裝置14使用加強層中之 對應參考訊框之資料來解碼基礎層中的經識別之訊框 (86)。 • 當未接收到加強層時，解碼裝置14判定是否存在對應於 • 經識別之訊框或經識別之訊框之後的CSF(87)。當存在對 應於經識別之訊框或經識別之訊框之後的cSF時，解碼裝 置14解碼CSF而非解碼經識別之訊框（88)。當不存在對應 於經識別之訊框的CSF時，解碼裝置14在不具有來自加強 層中之參考訊框之資料的情況下來解碼訊框。在某些態樣 128003.doc -35- 200841745 中例如’ §經識別之訊框包括對一個以上訊框的參考 時解碼裝置14可使用其他參考訊框之資料來解碼經識別 之成框。在其他態樣中，解碼裝置14可使用一或多個錯誤 校正技術以重建經識別之訊框。 基於本文中所述之教示，應顯而易見的是，本文中所揭 示之態樣可獨立於任何其他態樣而實施且此等態樣中之兩 者或兩者以上可以各種方式進行組合。本文中所述之技術 可實施於硬體、軟體、款體或其任一組合中。若實施於硬 體中’則可使用數位硬體、類比硬體或其組合來實現技 術。若實施於軟體中，則可至少部分地由包括電腦可讀媒 體之電腦程式產品來實現技術，電腦可讀媒體上面儲存一 或多個指令或程式碼。 Ο 以實例說明且並非限制’此等電料讀媒體可包含 RAM(諸如，同步動_隨機存取記憶體（SDRAM))、唯讀記 憶體（ROM)、非揮發性隨機存取記憶體（nvram)、歷°、 式化唯讀記憶體酿⑽）、快閃記憶體、 其他光碟儲存器、磁碟儲存器或其他磁性儲存 虞置或可用以載運或儲存呈指令戋資料 知式碼且可由電腦存取的任_其他有形媒體。 與電腦程式產品之電腦可嘈 可由電腦…… 關聯之指令或程式碼 夕個數"β如，由—或多個處理器(諸如，-或 夕個數位處理器(DSP))、通用微處理器 ; 其他等效積體或離散邏輯電路來執行。 、FPGA或 已描述若干態樣及實例。然而，對此等實例之各種修改 128003.doc -36- 200841745 為可月b的’且本文中呈現之概念亦可應用至其他態樣。此 等及其他態樣在以下申請專利範圍之範疇内。 【圖式簡單說明】 圖1為说明支援編碼可縮放性之實例多媒體編碼系統的 方塊圖。 圖2為說明形成圖1之系統之部分的實例編碼裝置之方塊 圖。 〇 圖3為說明形成圖1之系統之部分的實例解碼裝置之方塊 圖。 圖4為說明在加強層位元流中安裝恰在内訊框之前的參 考訊框之實例經編碼之多媒體序列之一部分的圖示。 a圖5為說明在加強層位元流中安裝恰在頻道切換訊框之 則的參考訊框之另-實例經編碼之多媒體序列之一部分的 圖示。 圖6為説明在加強層位元流中安裝位於資料區段之末端 c 4的參考訊框之另—實例經編碼之多媒體序狀-部分的 圖示。 圖7為說明根據本揭示案之技術之編碼裝置在配置一或 多個參考訊框時之例示性操作的流程圖。 ， W 8為說明解碼裝置在選擇性地料基礎層之訊框時之 例不性操作的流程圖。 【主要元件符號說明】 多媒體編碼系統 12 編碼裝置 128003.doc •37· 200841745

C 14 解碼裝置 16 網路 18 源 20 編碼模組 22 配置模組 24 參考資料產生器 26 調變器/傳輸器 28 框内編碼模組 29 框間編碼模組 30 解調變器/接收器 32 選擇性解碼模組 38 參考資料分析模組 40 經編碼之多媒體序列 42 基礎層位元流 44 加強層位元流 50 經編碼之多媒體序列 60 經編碼之多媒體序列 62 箭頭 64 前頭 Βι 訊框 b2 訊框 b3 訊框 b4 訊框 b5 訊框 128003.doc -38 - 200841745 B6 訊框 By 訊框 CSF! 頻道切換訊框 Ii 訊框 Pi 訊框 P2 訊框 Ps 訊框 P4 訊框 Ps 訊框 P6 訊框 SF! 超訊框 sf2 超訊框

128003.doc -39

Claims (1)

1. 200841745 十、申請專利範圍： 1· 一種用於處理多媒體資料之方法，該方法包含·· 編媽多媒體資料之複數個訊框，其中該複數個訊框包 括一或多個參考訊框；及 在一基礎層位元流與至少一加強層位元流之間配置該 複數個訊框中之每—者以使得該_或多個參考訊框中之 至少一者被配置給該加強層位元流。 2.如請求項丨之方法，其中配置該等訊框包含將在時間上 恰定位於該等訊框中之一經框内編碼之訊框之前的該一 或多個參考訊框中的該至少一者配置給該加強層位元 流。 月求員2之方去’其中配置在時間上恰定位於該等訊 杧中之該經框内編碼之訊框之前的該一或多個參考訊框 中的該至少一者包含將在時間上恰定位於一頻道切換訊 C之别的该一或多個參考訊框中之該至少一者配置給該 加強層位元流。 4·如叫求項丨之方法，其中配置該等訊框包含將對應於一 頻道切換訊框之該一或多個參考訊框中的該至少一者配 置給該加強層位元流。 5·如明求項丨之方法，其進一步包含群聚該等訊框中之至 〆某二以形成一資料區段，其中配置該等訊框包含將定 ;“資料區段之一末端附近的該一或多個參考訊框中 之該至少一者配置給該加強層位元流。 6·如請求項1之方法，其中配置該等訊框包含·· 128003.doc 200841745 分析該基礎層位元流與該加強層位元流之間的該等訊 框之一初始配置；及 ° s. ϋ 9· 10. 11. 基於該分析而將來自該基礎層位元流之該一或多個參 考訊框中的該至少一者重新配置給該加強層位元流。 •如請求項6之方法，其中重新配置該一或多個參考訊框 中之/至y者包含當在該基礎層位元流中不存在非來 考訊框時，將來自言亥基礎層位元流之該一或多個參考訊 框中的該至少一者重新配置給該加強層位元流。 如請求項6之方法，其中·· 分析該初始配置包含比較該加強層位元流之—大小與 該基礎層位元流之一大小；且 重新配置该-或多_參考訊框中之該至少一者包含當 ❹強層位元流之一大小小於該基礎層位元流之一大小 ，臨限值#’將來自該基礎層位元流之該—或多個參考 几框中的该至少-者重新配置給該加強層位元流。 :請求項6之方法，其進-步包含將來自該基礎層位元 &之訊框重新配置給該加強層位元流直至該基礎層之一 =與該加強層之-大小之間的_差異被最小化為止。 中之之方法’其進一步包含移除該基礎層位元流 夕兮 、者對配置給该加強層位元流 或多個參考訊框中的該至少一者之一參考。 如請求項10之方法，其中移除 對呤^ 秒除忒荨訊框中之該後續一者 鉍姐 该至少一者的該參考包含重 新、扁螞該基礎層位元流中 汛框之該後續一者以排 128003.doc -2- 200841745 除對配置給該加強層位元流之該一或多個參考訊框中之 該至少一者的該參考。 12.如請求項1 > 士、+ ^ f I 、 方法，其中將該一或多個參考訊框中之該 至夕I配置給該加強層位元流包含將-預測(P)訊框及 内（I)汛框中的一者配置給該加強層位元流。 13·如請求項1之方法，其進一步包含： 、、工由經调變之信號之—較可靠部分來傳輸該基礎 層；及 經由該經調變之信號之-較不可靠部分來 層。 14· 一種用於處理多媒體資料之設備，該設備包含： 編碼杈組，其編碼多媒體資料之複數個訊框，其中 該複數個訊框包括一或多個參考訊框；及 八 配置模組，其在一基礎層位元流與至少一加強層位 元流之間配置該複數個純中之每一者以使得該一或多 個參考訊框中之至少_者被配置給該加強層位元流。 如:月求項14之设備’其中該配置模組將在時間上恰定位 ;έ等Λ杧中之經框内編碼之訊框之前的該一或多個 多考Λ框中的，亥至少一者配置給該加強層位元流。 16·如喷求項15之設備，其中該配置模組將在時間上恰定位 於一頻道切換訊框之前的該_或多個參考訊框中的該至 少一者配置給該加強層位元流。 17·如#求項14之設備，其中該配置模組將對應於一頻道切 換訊框之該一或多個參考訊框中的該至少一者配置給該 128003.doc 200841745 加強層位元流。 18·如請求項14之設備，其中·· 該編碼模組群聚該等訊框中之至少某些以形成一資料 區段，且 • 該配置模組將定位於該資料區段之一末端附近之該一 或多個參考訊框中的該至少一者配置給該加強層位元 流。 C 19.如請求項14之設備，其中該配置模組分析在該基礎層位 元流與該加強層位元流之間的該等訊框之一初始配置， 且基於該分析而將來自該基礎層位元流的該一或多個參 考訊框中之該至少一者重新配置給該加強層位元流。 20.如請求項19之設備，其中當在該基礎層位元流中不存在 非參考訊框時，該配置模組將來自該基礎層位元流之該 一或多個參考訊框中的該至少一者重新配置給該加強層 位元流。 C.) 21·如請求項19之設備，其中該配置模組比較該加強層位元 流之一大小與該基礎層位元流之一大小，且當該加強層 位元流之一大小小於該基礎層位元流之一大小一臨限值 時’將來自該基礎層位元流之該一或多個參考訊框中的 ' 該至少一者重新配置給該加強層位元流。 22·如請求項19之設備，其中該配置模組將來自該基礎層位 元流之訊框重新配置給該加強層位元流直至該基礎層之 一大小與該加強層之一大小之間的一差異被最小化為 止。 128003.doc 200841745 23·如請求項14之設備，其進一 其移除该基礎層位元流中之 置給該加強層位元流之該一 一者之一參考。 步包含一參考資料產生器， 該等訊框之一後續一者對配 或多個參考訊框中的該至少 如月长項23之叹備’其巾該編碼模組重新編碼該基礎層 位元流中之該等後續訊框以排除對配置給該加強層位元 流之該-或多個參考訊框中的該至少―者之該參考。 25. 如請求項14之設備，其中該配置模組將—預測（ρ)訊框及 一内（I)訊框中的一者配置給該加強層位元流。 26. 如請求項14之設備，其進一步包含一調變器/傳輸器，宜 經由-經調變之信號之一較可靠部分來傳輸該基礎層且 經由該經調變之信號之-較不可靠部分來傳輸該加強 層0 27· —種用於處理多媒體資料之設備，該設備包含： 用於編碼多媒體資料之複數個訊框的構件，其中該複 數個訊框包括一或多個參考訊框；及 用於在一基礎層位元流與至少一加強層位元流之間配 置該複數個訊框中之每—者以使得該—或多個參考訊框 至夕、者被配置給該加強層位元流的構件。 28·如請求項27之設備，其中該配置構件將在時間上恰定位 於該等訊框中之一經框内編碼之訊框之前的該一或多個 參考矾框中的該至少一者配置給該加強層位元流。 29·如凊求項28之設備，其中該配置構件將在時間上恰定位 於一頻道切換訊框之前的該一或多個參考訊框中的該至 128003.doc 200841745 少一者配置給該加強層位元流。 30.如請求項27之設備，其中該配置構件將對應於一頻道切 換sfl框之該-或多個參考訊框中的該至少—者配置給該 加強層位元流。 31·如請求項27之設備，其進一步包含用於群聚該等訊框中 之至少某些以形成一資料區段的構件，其中該配置構件 將定位於該資料區段之一末端附近的該一或多個參考訊 框中之該至少一者配置給該加強層位元流。 32·如請求項27之設備，其中該配置構件分析在該基礎層位 元々IL與《亥加強層位元流之間的該等訊框之一初始配置， 且基於该分析而將來自該基礎層位元流的該一或多個參 考訊框中之該至少一者重新配置給該加強層位元流。 33·如請求項32之設備，其中當在該基礎層位元流中不存在 非參考訊框時，該配置構件將來自該基礎層位元流之該 一或多個參考訊框中的該至少一者重新配置給該加強層 位兀流。 34. 如請求項32之設備，其中該配置構件比較該加強層位元 々IL之一大小與該基礎層位元流之一大小且當該加強層位 元流之一大小小於該基礎層位元流之一大小一臨限值 時’將來自該基礎層位元流之該一或多個參考訊框中的 該至少一者重新配置給該加強層位元流。 35. 如請求項32之設備，其中該配置模組將來自該基礎層位 元流之訊框重新配置給該加強層位元流直至該基礎層之 一大小與該加強層之一大小之間的一差異被最小化為 128003.doc -6 - 200841745 止。 36.如請求項27之設備 A雄 一、、ώ A 八返少巴舍用於移除該基礎層伹 元》瓜中之該等訊框之一接捧 七— 後,一者對配置給該加強層位元 &之该一或多個參考訊框中 τ γ的忒至少一者之一參考的構 件0 37.如明求項36之設備’其中該編碼構件重新編碼該基礎層 位兀流中之該等後續訊框以排除對配置給該加強層位元 流之該-或多個參考訊框中的該至少一者的該束考。 38·如請求項27之設備，其中該配置構件將—預測（ρ)訊框及 一内（I)訊框中的-者配置給該加強層位元流。 信號之-較可靠部分來傳輸該基礎層且經由該經調變之 信號之一較不可靠部分來傳輸該加強層的構件。 40. -種用於處理多媒體資料之電腦程式產品，該電腦程式 產品包含一在上面具有指令之電腦可讀媒冑，該等指令 包含： 39.如明求項27之設備’其進_步包含用於經由一經調變之 用於編碼多媒體資料之複數個訊框的程式碼，其中該 複數個訊框包括一或多個參考訊框；及 用於在-基礎層位元流與至少一加強層位元流之間配 置該複數個訊框中之每一者以使得該一或多個參考訊框 中之至少一者被配置給該加強層位元流的程式碼。 .如請求項40之電腦程式產品，其中用於配置該等訊框的 程式碼包含用於將在時間上恰定位於該等訊框中之一經 框内編碼之訊框之前的該一或多個參考訊框中之該至少 128003.doc 〇 〇 200841745 -者配置給該加強層位元流的程式碼。 4=請求項41之電腦程式產品，其中用於配置在時間上恰 疋位於該等訊框中之該經框内編碼之訊框之前的該一或 多個參考訊框中之該至少—者的程式碼包含用於將在時 間上恰定㈣-頻道切換訊框之前的該—或多個參考訊 框中之該至少一者配置給該加強層位元流的程式碼。 ^ »月求項4G之電腦程式產品，其中用於配置該等訊框的 式馬匕3用於將對應於一頻道切換訊框之該一或多個 參考訊框中之該至少_本獅班^ 1 者配置給該加強層位元流的程式 碼。 如π求項40之電腦程式產品，其進一步包含用於群聚該 等訊框中之至少某些以形成-資料區段的程式碼，其中 於配置該等几框的程式碼包含用於將定位於該資料區 段之-末端附近的該一或多個參考訊框中之該至少一者 配置給該加強層位元流的程式碼。 女口月求項40之電腦矛呈式產品，其中用於配置該等訊框的 程式碼包含： 用於刀析在„亥基礎層位元流與該力口強層位元流之間的 該等訊框之一初始配置的程式碼；及 用於基於該分析而將來自該基礎層位元流之該一或多 個參考訊框中之該至少—者重新配置給該加強層位元流 的程式碼。 46·如請求項45之電腦程式產 多個參考訊框中之該至少 品’其中用於重新配置該一或 一者的程式碼包含用於當在該 128003.doc 200841745 基礎層位元流中不存在非參考訊框時將來自該基礎層位 兀流之該一或多個參考訊框中之該至少-者重新配置給 該加強層位元流的程式碼。 47.如請求項45之電腦程式產品，其中·· . 肖於分析該初始配置的程式瑪包含用於比較該加強層 位元流之一大小與該基礎層位元流之一大小的程式 碼；且 〇 歸重新配置該一或多自參考訊框巾之該至少一者的 程式碼包含用於當該加強層位元流之一大小小於該基礎 層位元流之-大小-臨限值時將來自該基礎層位元流之 該一或多個參考訊框中之該至少一者重新配置給該加強 層位元流的程式碼。 48. 如請求項45之電腦程式產品，其進一步包含用於將來自 該基礎層位it流之訊框重新配置給該加強層位元流直至 該基礎層之一大小與該加強層之一大小之間的—差異被 U 最小化為止的程式碼。 49. 如請求項40之電腦程式產品，其進一步包含用於移除該 土礎層位元/爪中之該等訊框之一後續一者對配置給該加 強層位7〇流之該一或多個參考訊框中的該至少一者之一 參考的程式碼。 5〇·如明項49之電腦程式產品，其中用於移除該等訊框之 該後績-|對該—《多個參考訊框中之該至少一者的該 :考的程式碼包含用於重新編碼該基礎層位元流中之該 等Λ框之該後續一者以排除對配置給該加強層位元流之 128003.doc -9- 200841745 該一或多個參考訊框中之該至少一者的該參考的程式 5 1 ·如請求項40之電腦程式產品，其中用於將該一或多個表 考訊框中之該至少一者配置給該加強層位元流的程式碼 包含用於將一預測（P)訊框及一内⑴訊框中之一者配置终 該加強層位元流的程式碼。 52_如請求項40之電腦程式產品，其進一步包含用於經由一 經調變之信號之一較可靠部分來傳輸該基礎層且經由該 經調變之信號之一較不可靠部分來傳輸該加強層的程式 53· —種用於處理多媒體資料之方法，該方法包含： 參考訊框之至少一部分 識別參考一加強層位元流之一 的一可縮放編碼機制之一基礎層位元流之至少一訊 框；及

   訊框的頻道切換訊框。 如請求項53之方法，為 位元流時，解碼一 ，其進一步包含當未接收到該加強層 對應於該基礎層位元流之該經識別之

   56·如請求項53之方法， 其中該基礎層位元流之該經識別之 128003.doc 200841745 訊框係參考該加強層位元流之該參考訊框之 考該基礎層位μ中之至少-參考訊框而編碼，該μ 步包含當未接收到該加強層位元流時，使用該 層位元流中之該至少一參考訊植的資料而解碼該基礎層 位元流的該經識別之訊框。 57. 如請求項53之方法，其進一步包含者 一、 匕3田未接收到該加強層 位元流時’利用一或多個錯誤校 一 天仅止/貝异法來重建基礎層 〇 位元流的該經識別之訊框。 58. —種用於處理多媒體資料之設備，該設備包含·· 一參考資料分析模組，其識 八蠘別參考一加強層位元流之 參考δΚ框之至少' —部分的一环始 了細放編碼機制之一基礎 層位元流之至少一訊框；及 -解碼模組’當接收到該加強層位元料，該解碼模 組使用由該基礎層位元流之該經識別之訊框參考的該加 強層位元流之該參考訊框之該部分而解碼該基礎層位元 流之該經識別之訊框。 59.如請求項58之設備，其中當未接收到該加強層位元流 時，該解碼模組解碼一對應於該基礎層位元流之該經識 別之訊框的頻道切換訊框。 6〇.如請求項58之設備，其中當未接收到該加強層位元流 時，該解碼模組解碼一在該基礎層位元流之該經識別之 訊框之後的頻道切換訊框。 61·如請求項58之設備，其中： 忒基礎層位7C流之該經識別之訊框係參考該加強層位 128003.doc -11 - 200841745 :流之該參考訊框之該部分且參考該基礎層位元流中之 至父一參考訊框來編碼，且 =未接收到該加強層位元流時，該解碼模組使用該基 石《位^•流中之該至少—參考訊框之資料而解碼該基礎 層位兀流之該經識別之訊框。 62.如請求項58之設備’其中當未接收到該加強層位元流

   ϋ 時’㈣碼模組利用—或多個錯誤校正演算法來重建基 礎層位元流之該經識別之訊框。 63· —種用於處理多媒體資料之設備，該設備包含： 用於識別參考一加強層位元流之一參考訊框之至少一 部分的一可縮放編碼機制之一基礎層位元流之至少一訊 框的構件；及 用於當接收到該加強層位元流時使用由該基礎層位元 流之該經識別之訊框參考的該加強層位元流之該參考訊 框之5亥部分而解碼該基礎層位元流之該經識別之訊框的 構件。 64·如請求項63之設備，其中當未接收到該加強層位元流 時’該解碼構件解碼一對應於該基礎層位元流之該經識 別之訊框的頻道切換訊框。 65.如請求項63之設備，其中當未接收到該加強層位元流 時’ δ亥解碼構件解碼一在該基礎層位元流之該經識別之 訊框之後的頻道切換訊框。 66·如請求項63之設備，其中： 該基礎層位元流之該經識別之訊框係參考該加強層位 128003.doc -12- 200841745 兀流之該參考訊框之該冑分且參考該基礎層&元流中之 至少一參考訊框來編媽，且 當未接收到該加強層位元流時，該解碼構件使用該基 礎層位元流中之該至少一參考訊框之資料而解碼該基： 層位元流之該經識別之訊框。 67.如請求項63之設備，其中當未接收到該加強層位元流 時，該解碼構件利用一或多個錯誤校正演算法來重建基 ^ 礎層位元流之該經識別之訊框。 68· —種用於處理多媒體資料之電腦程式產品，該電腦程式 產品包含一在上面具有指令之電腦可讀媒體，該等指令 包含： 用於識別參考一加強層位元流的一參考訊框之至少一 部分的一可縮放編碼機制之一基礎層位元流之至少一訊 框的程式碼；及 用於當接收到該加強層位元流時使用由該基礎層位元 U 抓之该經識別之訊框參考的該加強層位元流之該參考訊 框之忒邛分而解碼該基礎層位元流之該經識別之訊框的 程式碼。 .69.如請求項68之電腦程式產品，其進一步包含用於當未接 ' 收到該加強層位元流時解碼一對應於該基礎層位元流之 忒經識別之訊框的頻道切換訊框的程式碼。 70.如請求項68之電腦程式產品，其進—步包含用於當未接 收到該加強層位元流時解碼一在該基礎層位元流之該經 識別之訊框之後的頻道切換訊框的程式碼。 128003.doc 13 200841745 71 ·如請求項6 8之電腦程式產品，其中該基礎層位元流之該 經識別之訊框係參考該加強層位元流之該參考訊框之該 部分且參考該基礎層位元流中之至少一參考訊框來編 碼，且進一步包含用於當未接收到該加強層位元流時使 • 用該基礎層位元流中之該至少一參考訊框的資料而解碼 . 該基礎層位元流之該經識別之訊框的程式碼。 72·如請求項68之電腦程式產品，其進_步包含用於當未接 〇 收到該加強層位元流時利用一或多個錯誤校正演:法來 重建基礎層位元流之該經識別之訊框的程式碼。# 〇 128003.doc -14-