TW201511526A - 多層視訊編碼層間參考畫面增強 - Google Patents

多層視訊編碼層間參考畫面增強 Download PDF

Info

Publication number
TW201511526A
TW201511526A TW103112667A TW103112667A TW201511526A TW 201511526 A TW201511526 A TW 201511526A TW 103112667 A TW103112667 A TW 103112667A TW 103112667 A TW103112667 A TW 103112667A TW 201511526 A TW201511526 A TW 201511526A
Authority
TW
Taiwan
Prior art keywords
block
picture
ilr
base layer
layer picture
Prior art date
Application number
TW103112667A
Other languages
English (en)
Inventor
何玉文
葉言
Original Assignee
Ｖｉｄ衡器股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ｖｉｄ衡器股份有限公司 filed Critical Ｖｉｄ衡器股份有限公司
Publication of TW201511526A publication Critical patent/TW201511526A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

視訊裝置可以生成增強型層間參考（E-ILR）畫面以協助預測可縮放位元串流的增強層畫面。E-ILR畫面可以包括一個或多個E-ILR塊。E-ILR塊可以使用差分方法、剩餘方法、雙向預測方法和/或單向預測方法來生成。視訊裝置可以確定第一時間實例。該視訊裝置可以從由該第一時間實例表徵的增強層畫面的塊中減去由該第一時間實例表徵的第一基層畫面的塊以生成由該第一時間實例表徵的差分塊。該視訊裝置可以執行對差分塊的運動補償並且將運動補償後的差分塊畫面添加到由該第二時間實例表徵的第二基層畫面的塊上以生成E-ILR塊。

Description

多層視訊編碼層間參考畫面增強
相關申請的交叉引用
本申請要求2013年4月5日提交的美國臨時專利申請No.61/809,115，2013年4月16日提交的美國臨時專利申請No.61/812,687以及2013年7月11日提交的美國臨時專利申請No.61/845,318的權益，該申請的內容通過引用結合於此。
在過去的二十多年，數位視訊壓縮技術已經被開發並且標準化以使得能夠進行有效數位視訊通信、分發和消費。大多數商業上廣泛部署的標準由ISO/IEC和ITU-T開發，諸如MPEG-2和H.264（MPEG-4部分10）。由於視訊壓縮技術的出現和成熟，開發了高效視訊編碼（HEVC）。
隨著智慧型電話和平板電腦兩者在解析度和計算能力上的增長，附加的視訊應用，諸如視訊聊天、移動視訊記錄和共用以及視訊串流傳送需要在異質環境中進行視訊傳輸。考慮各種消費者裝置（例如PC、智慧型電話、平板電腦、TV等）的場景，諸如3屏和N屏，可以允許在計算能力、記憶體/儲存大小、顯示解析度、顯示畫面播放速率等方面上有廣泛不同能力的裝置上的視訊消費。網路和傳輸通道在封包遺失率、可用通道頻寬、突發差錯率等方面上具有廣泛不同的特性。視訊資料可以在有線網路和無線網路的組合上傳送，這進一步使得潛在的傳輸通道特性複雜化。
可縮放（scalable）視訊編碼提供了改善在多樣網路上在具有不同能力的裝置上運行的視訊應用體驗品質的方案。可縮放視訊編碼可以以最高表述（representation）（例如時間解析度、空間解析度、品質等）編碼信號一次，並且使得能夠根據在用戶端裝置上運行的應用所需要的特定速率和表述從視訊串流的子集中解碼。可縮放視訊編碼相比於非可縮放方案節省頻寬和儲存。視訊標準，諸如但不限於MPEG-2視訊、H.263、MPEG4視覺和H.264，具有支援可縮放的一些模式的工具和/或簡檔。
提供了用於實施視訊編碼方法的系統、方法和工具。視訊裝置（例如其可以包括編碼器和/或解碼器）可以生成包括一個或多個層間參考（E-ILR）塊的E-ILR畫面，從而例如協助預測可縮放位元串流的增強層（EL）畫面（例如和/或EL塊）。視訊裝置可以接收E-ILR賦能標記，該E-ILR賦能標記例如可以指示解碼器來執行E-ILR處理。例如視訊裝置可以使用差分增強方法生成E-ILR塊。視訊裝置可以包括被配置成執行以下中的一者或多者的處理器。該處理器可以基於與由第二時間實例表徵的第二基層畫面相關聯的基層運動資訊確定第一時間實例。該基層運動資訊包括下採樣基層塊和/或上採樣基層塊的運動資訊類別和/或運動向量。
該處理器可以從由該第一時間實例表徵的增強層畫面的塊中減去由該第一時間實例表徵的第一基層畫面的塊以生成由該第一時間實例表徵的差分塊。該第一基層畫面的塊可以是第一基層畫面的上採樣塊或下採樣塊。該處理器可以在該差分塊上執行運動補償。該運動補償可以例如根據基層和增強層之間的空間速率使用與第二基層畫面的塊相關聯的基層運動資訊（例如縮放的基層運動資訊）在差分塊上執行。
該處理器可以將運動補償後的差分塊乘以權重。該權重大於或等於零且小於或等於1。該處理器給運動補償後的差分塊添加偏移。該處理器可以將運動補償後的差分塊添加到由該第二時間實例表徵的第二基層畫面的塊以生成由該第二時間實例表徵的E-ILR塊。該第二基層畫面的塊可以是第二基層畫面的上採樣塊或下採樣塊。該處理器可以生成包括E-ILR塊的由第二時間實例表徵的E-ILR畫面。該處理器可以使用由第二時間實例表徵的E-ILR畫面和/或上採樣基層畫面來預測由該第二時間實例表徵的增強層畫面。
視訊裝置可以使用剩餘增強方法來生成E-ILR塊。視訊裝置可以包括被配置成執行以下中的一者或多者的處理器。該處理器可以基於與由第二時間實例表徵的第二基層畫面相關聯的基層運動資訊確定第一時間實例。
該處理器可以從該第二基層畫面的塊中減去由該第一時間實例表徵的第一基層畫面的塊以生成剩餘。該處理器可以在剩餘上執行運動補償。該運動補償可以使用與第二基層畫面相關聯的基層運動資訊而在剩餘上執行。該處理器可以將該剩餘乘以權重。該處理器給該剩餘添加偏移。
該處理器將該剩餘添加到由該第一時間實例表徵的增強層畫面的塊上以生成由該第二時間實例表徵的增強型層間參考（E-ILR）塊。該處理器可以生成包括該E-ILR塊的由該第二時間實例表徵的E-ILR畫面。該處理器可以使用由第二時間實例表徵的E-ILR畫面和/或上採樣基層畫面來預測由該第二時間實例表徵的增強層畫面。第一基層畫面的塊可以是第一基層畫面的上採樣塊或下採樣塊。第二基層畫面的塊可以是第二基層畫面的上採樣塊或下採樣塊。
視訊裝置可以使用雙向預測生成層間參考塊（例如E-ILR塊）。視訊裝置可以包括被配置成執行以下中的一者或多者的處理器。該處理器可以基於與由第三時間實例表徵的第三基層畫面相關聯的第一基層運動資訊確定第一時間實例。該處理器可以基於與由第三時間實例表徵的第三基層畫面相關聯的第二基層運動資訊確定第二時間實例。該處理器可以使用由該第一時間實例表徵的第一基層畫面的塊和由該第二時間實例表徵的第二基層畫面的塊來生成由該第三時間實例表徵的增強型層間參考（E-ILR）塊。該第一基層畫面的塊可以是第一基層畫面的上採樣塊或下採樣塊。該第二基層畫面的塊可以是第二基層畫面的上採樣塊或下採樣塊。
該處理器可以被配置成將該第一基層畫面的塊添加到該第二基層畫面的塊以創建組合基層塊來生成E-ILR塊。該處理器可以將組合基層塊除以二以生成平均基層塊。該處理器可以將由該第一時間實例表徵的第一增強層畫面的塊添加到由第二時間實例表徵的第二增強層畫面的塊以創建組合增強層塊。該處理器將該組合增強層塊除以二以生成平均增強層塊。該處理器將平均基層塊從平均增強層塊中減去以生成差分塊。該處理器可以在差分塊上執行運動補償。該處理器將運動補償後的差分塊乘以權重。該處理器將運動補償後的差分塊添加到由第三時間實例表徵的基層畫面的塊以生成E-ILR塊。該第三基層畫面的塊可以是第三基層畫面的上採樣塊或下採樣塊。
BL‧‧‧基層
BLT‧‧‧在時間T的基層重構畫面
DPB‧‧‧畫面緩衝器
EILR‧‧‧增強型層間參考
EL‧‧‧增強層
ELT‧‧‧在時間T的增強層重構畫面
HEVC‧‧‧高效視訊編碼
ILT‧‧‧在時間T的層間畫面
IP‧‧‧網際網路協定
Iub、IuCS、IuPS、S1、X2‧‧‧介面
R1、R3、R6、R8‧‧‧參考點
Poc‧‧‧畫面序號
T‧‧‧時間
100‧‧‧可縮放視訊編碼系統
101‧‧‧下採樣器
102‧‧‧下採樣器
110‧‧‧上採樣單元
120‧‧‧視訊訊號
121‧‧‧編碼器
122‧‧‧基層位元串流
123‧‧‧解碼器
125‧‧‧層2編碼器
126‧‧‧層2位元串流
200‧‧‧示例預測結構
201‧‧‧左視圖
202‧‧‧右視圖
203‧‧‧第一畫面
204‧‧‧第一I畫面
300‧‧‧單層編碼器
302‧‧‧視訊串流
304‧‧‧變換單元
306‧‧‧量化單元
308‧‧‧熵編碼器
316、322‧‧‧加法器
318‧‧‧預測剩餘
320‧‧‧位元串流
324‧‧‧剩餘係數塊
326‧‧‧預測資訊
328‧‧‧運動資訊和/或預測資訊
330‧‧‧空間預測單元
332‧‧‧運動預測單元
334‧‧‧參考畫面庫
336‧‧‧環路濾波器單元
338‧‧‧預測信號
340‧‧‧邏輯單元
342‧‧‧視訊資訊
344‧‧‧視訊訊號
400‧‧‧塊的單層解碼器
402‧‧‧視訊位元串流
404‧‧‧熵解碼器
406‧‧‧剩餘係數
408‧‧‧編碼模式、預測模式和運動資訊
414‧‧‧加法器
416‧‧‧迴圈濾波單元
418‧‧‧重構視訊訊號
420‧‧‧參考畫面庫
422‧‧‧時間預測單元
424‧‧‧空間預測單元
426‧‧‧剩餘
428‧‧‧視訊訊號
430‧‧‧預測信號
500‧‧‧兩層可縮放視訊轉碼器
502‧‧‧增強層視訊輸入
504‧‧‧下行採樣單元
506‧‧‧基層視訊輸入
508‧‧‧基層編碼器
510、606、612‧‧‧基層位元串流
512‧‧‧基層資訊
514、616、 700‧‧‧層間預測（ILP）處理和管理單元
516‧‧‧增強層編碼器
518、610‧‧‧增強層位元串流
520‧‧‧增強層資訊
522、524、618、620‧‧‧畫面緩衝器
528‧‧‧位元串流多工器
530、602‧‧‧可縮放位元串流
600‧‧‧兩層可縮放視訊解碼器
604‧‧‧解多工器
608‧‧‧基層解碼器
614‧‧‧層間預測資訊
622‧‧‧基層視訊
624‧‧‧增強層視訊
702‧‧‧增強層視訊輸入
704‧‧‧ILP處理單元
706‧‧‧ILP管理單元
708‧‧‧基層DPB
710‧‧‧基層畫面和/或增強層畫面
712、802‧‧‧層間參考（ILR）畫面
714‧‧‧EL DPB
716‧‧‧BL重構畫面
720‧‧‧EL編碼器和/或EL解碼器
800、900、1000、1100、1600、1700‧‧‧圖式
804‧‧‧E-ILR畫面
902、1002‧‧‧BL畫面BLX
904‧‧‧IL參考畫面 ILX
906、1006‧‧‧EL畫面ELX
908、1008、1108‧‧‧基層（BL）畫面BLT
910、1010‧‧‧層間（IL）參考畫面ILT
912、1012‧‧‧增強層（EL）畫面ELT
914、1014‧‧‧BL參考畫面
916‧‧‧IL參考畫面
918、1018‧‧‧EL參考畫面
920、1020‧‧‧塊B(BLX)
922‧‧‧塊MC (ILX, MVILX)
924‧‧‧塊 MC (ELX, MVELX)
926、1026、1132‧‧‧塊B(BLT)
928、1028、1134‧‧‧塊B(ILT)
930、1030、1136‧‧‧塊B(ELT)
932、1032‧‧‧運動向量MVBLX
934、1034‧‧‧運動向量MVILX
936‧‧‧運動向量MVELX
1004‧‧‧IL差分畫面ILX
1016‧‧‧IL差分畫面
1022‧‧‧差分塊MC (ILDX, MVILDX)
1024‧‧‧EL塊B(ELX)
1102‧‧‧BL畫面BL0
1104‧‧‧IL參考畫面IL0
1106、1118‧‧‧EL畫面EL0
1110‧‧‧IL畫面ILT
1112‧‧‧EL畫面ELT
1114‧‧‧BL畫面BL1
1116‧‧‧IL參考畫面IL1
1120‧‧‧運動向量MVBL0
1122‧‧‧運動向量MVBL1
1124‧‧‧運動資訊MVIL0
1126‧‧‧運動資訊MVIL1
1128‧‧‧塊B(BL0)
1130‧‧‧塊MC (IL0, MVIL0)
1138‧‧‧塊B(BL1)
1140‧‧‧塊MC (IL1, MVIL1)
1142‧‧‧塊MC (EL0, MVEL0)
1144‧‧‧塊MC (EL1, MVEL1)
1146‧‧‧運動資訊MVEL0
1148‧‧‧運動資訊MVEL0
1200、1300、1400、1500‧‧‧程序
1802‧‧‧水平
1804‧‧‧垂直
1806‧‧‧水平曲折線（zigzag）
1808‧‧‧垂直曲折線
1810‧‧‧水平光柵
1812‧‧‧垂直光柵
1900‧‧‧2D地圖
2000‧‧‧通信系統
2002、2002a、2002b、2002c、2002d‧‧‧無線發射/接收單元（WTRU）
2003、2004、2005‧‧‧無線電存取網路（RAN）
2006、2007、2009‧‧‧核心網路
2008‧‧‧公共交換電話網路（PSTN）
2010‧‧‧網際網路
2012‧‧‧其他網路
2014a、2014b、2080a、2080b、2080c‧‧‧基地台
2015、2016、2017‧‧‧空中介面
2018‧‧‧處理器
2020‧‧‧收發器
2022‧‧‧發射/接收元件
2024‧‧‧揚聲器/麥克風
2026‧‧‧數字鍵盤
2028‧‧‧顯示器/觸控板
2030‧‧‧不可移除記憶體
2032‧‧‧可移除記憶體
2034‧‧‧電源
2036‧‧‧全球定位系統(GPS)晶片組
2038‧‧‧週邊設備
2040a、2040b、2040c‧‧‧節點B
2042a、2042b‧‧‧無線電網路控制器（RNC）
2044‧‧‧媒體閘道（MGW）
2046‧‧‧移動交換中心（MSC）
2048‧‧‧服務GPRS支援節點（SGSN）
2050‧‧‧閘道GPRS支持節點（GGSN）
2060a、2060b、2060c‧‧‧e節點B
2062‧‧‧移動性管理閘道（MME）
2064‧‧‧服務閘道
2066‧‧‧封包資料網路（PDN）閘道
2082‧‧‧存取服務網路（ASN）閘道
2084‧‧‧移動IP本地代理（MIP-HA）
2086‧‧‧認證、授權、計費（AAA）伺服器
2088‧‧‧閘道
第1圖是具有N層的示例可縮放視訊編碼系統的圖式。
第2圖是針對使用多層視訊編碼的立體（例如2視圖）視訊編碼的時間和層間預測的示例的圖式。
第3圖是示例單層編碼器的圖式。
第4圖是示例單層解碼器的圖式。
第5圖是示例兩層可縮放編碼器的圖式。
第6圖是示例兩層可縮放解碼器的圖式。
第7圖是層間畫面（ILP）處理和管理單元的示例的圖式。
第8圖是層間參考畫面的示例佈置的圖式。
第9圖是使用單向預測編碼塊生成E-ILR塊的示例的圖式。
第10圖是使用差分畫面和單向預測編碼塊生成E-ILR塊的示例的圖式。
第11圖是使用雙向預測編碼塊生成E-ILR塊的示例的圖式。
第12圖是建立針對單向預測模式將參考索引映射到權重清單中的索引的查閱資料表的示例的流程圖。
第13圖是建立針對雙向預測模式將參考索引映射到權重清單中的索引的查閱資料表的示例的流程圖。
第14圖是計算針對單向預測模式的權重估計的示例的流程圖。
第15圖是計算針對雙向預測模式的權重估計的示例的流程圖。
第16圖是用於ILR增強的基於區域的權重的示例的圖式。
第17圖是在參考畫面清單中的增強ILR畫面的示例佈置的圖。
第18圖是用於塊模式編碼的掃描模式的示例圖式。
第19圖是利用水平掃描編碼的2D地圖的示例圖式。
第20A圖是可以在其中實施一個或多個所揭露的實施方式的示例通信系統的系統圖。
第20B圖是示例無線發射/接收單元（WTRU）的系統圖，其中該WTRU可以在如第20A圖所示的通信系統中使用。
第20C圖是示例無線電存取網路和示例核心網路的系統圖，其中該示例核心網路可以在如第20A圖所示的通信系統中使用。
第20D圖是另一示例無線電存取網路和另一示例核心網路的系統圖，其中該示例核心網路可以在如第20A圖所示的通信系統中使用。
第20E圖是另一示例無線電存取網路和另一示例核心網路的系統圖，其中該示例核心網路可以在如第20A圖所示的通信系統中使用。
現在參照各種附圖對示例實施方式進行具體地描述。然而本描述提供了可能實施方式的具體示例，應當理解的是這些細節意在示例性並且絕不限制本申請的範圍。此外，附圖描述了意在示例性的流程圖。其它實施方式被使用。該訊息的次序可以在合適時變化。如果不需要該訊息時，則可以刪除該訊息，並且可以增加附加流。
視訊標準，諸如但不限於MPEG-2視訊、H.263、MPEG4視覺和H.264，可以具有支援可縮放的一些模式的工具和/或簡檔。高效視訊編碼（HEVC）可縮放擴展可以支援空間縮放（例如可縮放位元串流包括多於一種空間解析度的信號）和/或品質縮放（例如可縮放位元串流包括多於一種品質級別的信號）。MPEG可以支援視圖縮放（例如可縮放位元串流包括2D和3D視訊訊號）。
第1圖是具有N層的示例可縮放視訊編碼系統100的圖式。由層1（例如基層）表示的空間和/或時間信號解析度可以在下採樣器101處由輸入視訊訊號120的下採樣來生成。在編碼器121的編碼階段，量化器（例如Q1 ）的適當設置可以導致編碼後的基層位元串流122的特定品質級別。為了編碼一個或多個較高層，例如基層重構（例如Y1 ），可以在對較高層的編碼和/或解碼中使用較高層解析度級別的近似。編碼後的基層可以由解碼器123解碼以創建基層重構信號。上採樣單元110可以執行基層重構信號到層2的解析度的上採樣。上採樣後的基層重構信號可以隨後從輸入視訊訊號120的下採樣版本中減去。例如，輸入視訊訊號120可以在下採樣器102處被下採樣並且隨後上採樣後的基層重構信號可以在124從下採樣後的輸入視訊訊號中減去以生成差分信號。差分信號可以在層2編碼器125處被編碼以創建層2位元串流126。下採樣和上採樣可以通過每個層（例如層1、2、…N）來執行。下採樣和上取樣速率可以根據兩個給定層之間的縮放維度而有所不同。
如第1圖所示，對於較高層n（例如2≦n≦N），差分信號可以通過將上採樣後的較低層信號（例如層n-1信號）從當前層n信號中減去來生成，並且差分信號可以被編碼。如果由兩個層（例如n1和n2）表示的視訊訊號具有相同空間解析度，則對應的下採樣和上採樣操作可以被繞過。層n（例如1≦ n≦ N）或者多個層可以在不使用來自較高層的解碼資訊的情況下被解碼。依據對除了基層之外的每個層的剩餘信號（例如兩個層之間的差分信號）的編碼，如由在第1圖中的系統中所使用的，會引發視覺偽像。視覺偽像可以由量化和/或歸一化剩餘信號以限制其動態範圍的過程、在對剩餘進行編碼期間執行的附加量化和/或因為在剩餘信號中的運動估計與常規運動估計不同而引發。
可縮放視訊編碼（SVC）是H.264的擴展，其使得能夠進行部分位元串流的編碼、傳輸和/或解碼以提供具有較低時間解析度、較低空間解析度、降低的保真度和/或類似的，而例如同時給定該部分位元串流的速率，來保留相對高的重構品質。SVC的設計特徵可以被稱作單迴圈解碼。在單迴圈解碼中，SVC解碼器可以在正被解碼的層建立運動補償迴圈，並且在其他較低層不必建立運動補償迴圈。例如，如果位元串流包括兩層，層1（例如基層）和層2（例如增強層），並且解碼器重構層2視訊，則解碼後的畫面緩衝和/或運動補償後的預測可以針對層2建立（例如並且不針對層1，層2依賴的基層）。SVC可以不必具有來自較低層的將被完全重構的參考畫面。這種建立可以降低解碼器處的計算複雜性和/或儲存複雜性。單迴圈解碼可以通過受限的層間紋理預測來實施，其中例如對於給定層中的當前塊，如果相應較低層塊在受約束的內部模式中編碼，在來自較低層的空間紋理預測可以被允許。當較低層塊在內部模式中編碼時，其可以被重構，無需運動補償操作和/或解碼後的畫面緩衝。
SVC可以使用附加層間預測，諸如來自較低層的運動向量預測、剩餘預測、模式預測等，從而例如提高增強層的率失真效率。層間預測可以指畫面級ILP、塊級ILP和/或類似的。儘管單迴圈解碼可以降低解碼器處的計算複雜性和/或儲存複雜性，但是單迴圈解碼通過嚴重依賴塊級層間預測方法來達到滿意的性能增加了實施複雜性。為了補償由強加單迴圈解碼限制引起的性能代價，編碼器設計和計算複雜性會被增加由此達到期望的性能。
多視圖視訊編碼（MVC）是H.264的擴展。MVC可以提供視圖縮放。在視圖縮放中，基層位元串流被解碼以重構常規2D視訊。附加增強層可以被解碼以重構相同視訊訊號的其他視圖表示。當每個視圖被組合到一起並且由合適的3D顯示來顯示時，用戶可以例如以適當的深度感知體驗3D視訊。
第2圖是針對使用MVC來編碼具有左視圖（例如層1）201和右視圖（例如層2）202的立體視訊的示例預測結構200的圖式。第2圖中左視圖視訊201可以利用IBBP預測結構被編碼。右視圖視訊202可以利用IBBP預測結構被編碼。在右視圖202中，與左視圖201中的第一I畫面204共存的第一畫面203可以被編碼為P畫面。右視圖202中的其他畫面可以被編碼為B畫面，例如第一預測來自右視圖202的時間參考，並且第二預測來自左視圖201的層間參考。立體3D TV（例如使用3D眼鏡）可以顯示3D內容（例如電影、體育直播等）。不像SVC，MVC可以不支援單迴圈解碼特徵。對右視圖（例如層2）視訊202解碼可以使用可用的左視圖（例如層1）視訊201中的畫面，例如如第2圖中所示。由此，運動補償迴圈可以在兩個視圖/層中執行。MVC可以包括高級別語義改變和/或不包含對H.264/AVC的任何塊級改變。MVC可以通過擴展第2圖中的示例來支持對多於兩個視圖的編碼從而執行多個視圖間的層間預測。
3D視訊（例如立體3D視訊）可以包括兩個視圖，例如左視圖和右視圖。立體3D視訊內容傳遞可以通過將兩個視圖打包和/或多工到一個訊框（例如其可以被稱作訊框相容）中並且利用標準（例如H.264/AVC）壓縮和傳送被打包的視訊來實施。在接收機側，在解碼後，訊框可以被解包和顯示為兩個視圖。視圖的多工可以在時間域和/或空間域中執行。當在空間域中執行時，兩個視圖可以由因數2空間下採樣並且通過各種佈置來打包以例如維持相同的畫面大小。例如，並排佈置可以將下採樣後的左視圖放在畫面的左半邊並且將下採樣後的右視圖放在畫面的右半邊。其他佈置可以包括頂和底、逐行、棋牌等等。特定佈置可以被用於實施訊框相容3D視訊並且通過訊框打包佈置SEI訊息來傳達。儘管這種佈置可以利用頻寬需求上最小的增量（例如，可能會有一些增加，因為被打包的訊框可能難以壓縮）實施3D傳遞，空間下採樣可能會造成視圖上的混淆，並可能會降低3D視訊的視覺品質和用戶體驗。可縮放擴展可以被提供給訊框相容（例如兩個視圖被打包到相同訊框中）基層視訊，以及一個或多個增強層被提供從而為改善的3D體驗恢復全解析度視圖。使得能夠進行全解析度MFC的潛在技術可以被關聯到空間縮放技術。
3D可縮放視訊編碼，其稱作3DV，可以被提供。自動立體顯示和應用可以允許沒有眼鏡情況下的3D體驗。為了實施沒有眼鏡情況下的3D體驗，需要多於兩個視圖。編碼多個視圖（例如9個視圖或10個視圖）可能很昂貴。對具有相對大的差距的更少視圖（例如2或3個視圖）與提供視圖的深度資訊的深度地圖一起編碼的混合方法可以被提供。在顯示側，被編碼的視圖和深度地圖可以被解碼，剩餘視圖可以使用解碼後的視圖和使用視圖合成技術的其深度地圖來生成。3DV可以使用各種方法，例如使用H.264/AVC、MVC和或HEVC標準的組合來編碼視圖和深度地圖。基層可以利用一種標準（例如H.264/AVC）被編碼並且一個或多個增強層可以利用另一標準（例如HEVC）編碼。
表1描述了此處討論的縮放的類型，以及支持這些縮放的相應標準。如表1中描述，位元-深度縮放和色度格式縮放可以被綁定到視訊格式（例如高於8位元視訊和高於YUV4:2:0的色度採樣格式）。
提供了各種設計用於HEVC可縮放擴展。例如，HEVC可縮放擴展可以是基於層間參考（ILR）畫面（例如其可以被稱作RefIdx）和/或基於ILR塊（例如，其可以被稱作IntraBL）。RefIdx可以添加層間預測（ILP）過程以生成層間參考畫面。RefIdx可能不使用低級別改變用於增強層（EL）編碼和/或解碼過程。EL轉碼器設計可以再次使用單層HEVC轉碼器，例如進行一些高級別改變（例如參考清單構造）。IntraBL可以在編碼塊級別添加編碼模式以利用來自基層的包括重構的畫面和運動的資訊。
在基於層間預測的過程（例如其可以是RefIdx的過程）中，一個或多個層間參考（ILR）畫面可以從一個或多個基層（BL）重構畫面中生成。ILR畫面可以被標記為用於EL編碼和解碼的長期參考畫面。 ILP過程可以包括將BL重構畫面上採樣到EL的解析度。 ILP過程可以包括將BL運動資訊（例如時間上共存的BL畫面的）映射到ILR畫面的那些上。各種技術，諸如但並不限於交叉平面濾波、邊緣引導的處理等等，可以被用於改善上採樣後的ILR畫面品質。運動映射技術可以被用於改善被用於EL的運動預測的ILR畫面的運動資訊。ILR畫面可以被用於預測例如共存（例如時間共存）EL畫面之類的EL畫面的預測。
ILR畫面的高頻信號由於在BL處遺失並由此不被包括在上採樣後的BL參考畫面中的高頻資訊，可能不會通過使用上採樣後的BL重構畫面（例如僅BL重構畫面）來恢復。遺失的高頻資訊可能由於當生成BL源畫面（例如在編碼器側）時(例如在兩個層具有不同的空間解析度時)對輸入視訊串流從高解析度信號到基層的解析度的降採樣。遺失的高頻資訊可能由於當編碼來自輸入視訊串流的BL時執行的量化。在EL處的時間重構畫面可以具有高頻資訊（例如高頻資訊的一部分）。由此，高頻資訊可以使用EL時間重構畫面來恢復。
RefIdx框架中的差分編碼可以被使用。差分畫面可以通過從重構的EL畫面（例如共存重構EL畫面）中減去上採樣後的BL畫面來生成。差分畫面可以被插入到EL參考畫面清單中。差分編碼可以使用例如如此處描述的加權預測。差分畫面可以不同於通過將基層畫面上採樣到EL的解析度而生成的參考畫面。差分畫面可以被用於差分編碼模式（例如僅用於差分編碼模式）。由於參考清單的大小限制，編碼器可以被限於其能夠應用的差分畫面的數目。組合層間預測和EL間預測的預測方法可以被使用。組合層間預測和EL間預測的預測方法可以基於IntraBL方案和/或可能需要針對EL編碼的塊級改變。
方法、系統和工具提供了通過組合例如上採樣後的BL畫面和具有運動補償的時間重構的EL畫面之增強層間參考畫面。當增強的層間參考畫面例如通過將其標記為長期參考而被視作正常參考畫面時，RefIdx框架可以被使用。
第3圖為示例基於塊的單層視訊轉碼器300的框圖。單層編碼器300可以利用空間預測（例如內部預測）和/或時間預測（例如中間預測和/或運動補償的預測）來預測輸入視訊訊號以實施有效的壓縮。編碼器300可以諸如逐塊地接收輸入視訊串流302。例如，編碼器可以將輸入視訊串流301的一個或多個畫面分割成塊並且諸如逐一地編碼一個或多個塊。編碼器300可以發送輸入視訊302的視訊塊至模式決定和其它編碼器控制邏輯單元340、空間預測單元330和/或運動預測單元332。模式決定邏輯單元340可以被用來諸如根據特定標準例如速率和/或失真考慮確定最合適的預測形式。
編碼器300可以使用輸入視訊串流302和預測信號338（例如，預測塊）的視訊塊在加法器316處生成預測剩餘318。預測信號338可以諸如基於針對當前塊的確定預測形式由模式決策邏輯單元340來確定。預測剩餘318可以為輸入信號302和預測信號338之間的差異信號。
編碼器300可以分別在變換單元304和量化單元306轉換並量化預測剩餘318。通過變換量化預測剩餘318，編碼器300可以生成剩餘係數塊324。剩餘係數塊324可以被稱作量化的剩餘。剩餘係數塊324可以與模式資訊（例如，內部或中間預測）、運動資訊和/或預測資訊（例如，運動向量、參考畫面索引、內部預測模式等）328一起合併並且在熵編碼器308處壓縮。運動資訊可以包括塊的運動資訊類別（例如，與運動資訊關聯的參考畫面索引）以及塊的運動向量（例如，運動量）。熵編碼器308可以使用剩餘係數塊324和編碼模式、運動資訊和/或預測資訊328產生輸出視訊位元串流320。輸出視訊位元串流320可以包括多個畫面的編碼的資訊。畫面可以包括一個或多個塊或一個或多個大小。該塊可以為任意大小，諸如64x64、32x32、16x16、8x8、4x4、矩形等。
編碼器300可以通過應用310處的反向量化和312處的反向變換到量化後的剩餘324來獲取重構後的剩餘以及將加法器322處的重構後剩餘加到預測資訊326（例如，預測塊）的方式生成重構後的視訊資訊342（例如，重構後的視訊塊）。重構後的視訊訊號342可以被稱作未濾波的重構的信號。重構後的視訊訊號342可以被提供給空間預測單元330。重構後的視訊訊號342可以在環路濾波器單元336處經過環路濾波器過程（例如，去塊濾波器、採樣適應偏移、適應環路濾波器和/或等等）。濾波後的重構的視訊訊號344可以被儲存在諸如參考畫面庫334以被用來預測未來視訊訊號。參考畫面庫334可以參考解碼的畫面緩衝器（DPB）。參考畫面庫334可以提供濾波的重構視訊訊號344給運動預測單元332諸如以為了預測輸入視訊302的隨後塊。
第4圖為示例基於塊的單層解碼器400的圖式。解碼器400可以接收諸如已經由第3圖的編碼器300所產生視訊位元串流402（例如，可以為位元串流320）。視訊位元串流402可以包括多個畫面的編碼的資訊。畫面可以包括一個或多個塊或一個或多個大小。該塊可以為任意大小，諸如64x64、32x32、16x16、8x8、4x4、矩形等。解碼器400可以重構將被顯示的視訊訊號。在視訊解碼器400處，位元串流402可以被熵解碼器404解析而生成剩餘係數406和/或與編碼模式、預測模式和運動資訊408有關的資訊。剩餘係數406可以在410處反向量化並且在412處反向變換以獲得重構後的剩餘426。
編碼模式、預測模式和運動資訊408可以經由空間預測單元424使用空間預測和/或經由位元串流402的視訊塊（例如，相同或不同視訊塊）的時間預測單元422使用時間預測來獲得預測信號430。預測信號430和重構後的剩餘426可以在加法器414處被相加以生成重構後的視訊訊號428。重構後的視訊訊號428可以被提供給空間預測單元424。重構後的視訊可以被迴圈濾波單元416濾波以生成濾波後的重構視訊訊號418。濾波後的重構視訊訊號418可以被儲存在參考畫面庫420中。濾波後的重構視訊訊號418可以被顯示和/或被用來解碼視訊訊號塊（例如，位元串流402）。
第5圖為示例兩層可縮放視訊轉碼器500的圖式。兩層可縮放視訊轉碼器500可以包括層間預測。層間預測指畫面級ILP、塊級ILP和/或等等。在第5圖中，增強層視訊輸入502可以被接收。增強層視訊輸入502可以在下行採樣單元504處下採樣以生成基層視訊輸入506。基層編碼器508（例如，HEVC編碼器）可以對基層視訊輸入506（例如，逐個塊、逐個畫面等）進行編碼並且生成基層位元串流510。視訊轉碼器300可以為基層編碼器508的示例。基層編碼器508可以發送基層資訊512（例如，編碼模式資訊、預測模式資訊和/或運動資訊）至層間預測處理以及管理單元514。基層編碼器508可以在基層解碼的畫面緩衝器522中儲存基層重構後的畫面（例如，位元串流的一個或多個畫面）。基層編碼器508可以使用從解碼後的畫面緩衝器522和/或基層資訊512中提取的畫面以編碼基層輸入506並且生成基層位元串流510。
增強層編碼器516可以接收增強層視訊輸入502。增強層視訊輸入502可以為比基層視訊輸入506更高的空間解析度和/或更高的其它視訊參數值。增強層編碼器516可以使用增強層視訊輸入502生成增強層位元串流518。增強層編碼器516可以諸如通過使用空間預測和/或時間預測以與基層視訊轉碼器508大致類似的方式生成EL位元串流518以實施壓縮。增強層編碼器516可以發送增強層資訊520（例如，編碼模式資訊、預測模式資訊和/或運動資訊）至層間預測處理和管理單元514。增強層編碼器516可以在增強層解碼後的畫面緩衝器524中儲存增強層重構後的畫面（例如，位元串流的一個或多個畫面）和/或增強層資訊520。增強層編碼器516可以使用從解碼後的畫面緩衝器524和/或增強層資訊520中提取的畫面來編碼增強層輸入502並且生成增強層位元串流518。
增強層編碼器516可以執行層間預測（ILP）以改進其編碼性能。增強層編碼器516可以通過來自層間預測處理和管理單元514的協助執行ILP。例如，層間預測處理和管理單元514可以提供使用基層視訊輸入506生成的一個或多個參考畫面以提供參考畫面至解碼後的畫面緩衝器524。並不像基於當前增強層中的編碼的視訊訊號提取預測信號的空間和時間預測，層間預測可以基於編碼的視訊訊號從基層輸入506中提取預測信號（例如，和/或當在可縮放系統中多於兩個層時的其它較低層）。畫面級ILP和/或塊級ILP可以被編碼器500使用。位元串流多工器528可以合併基層位元串流510和增強層位元串流518以生成可縮放位元串流530。可縮放位元串流530可以包括多個畫面。畫面可以包括一個或多個塊或一個或多個大小。這些塊可以為任意大小，諸如，64x64、32x32、16x16、8x8、4x4、矩形等。
第6圖為示例兩層可縮放視訊解碼器600的圖式。解碼器600可以對應於可縮放編碼器500。解碼器600可以接收可縮放位元串流602。可縮放位元串流602可以包括多個畫面。畫面可以包括一個或多個畫面或一個或多個大小。這些塊可以為任意大小，諸如，64x64、32x32、16x16、8x8、4x4、矩形等。解碼器600可以提供可縮放位元串流602給解多工器604。解多工器604可以將可縮放位元串流602分割成基層位元串流606和增強層位元串流610。解多工器604還可以發送層間預測資訊614至層間預測處理和管理單元616。
基層解碼器608可以接收基層位元串流606。解碼器400可以為基層解碼器608的示例。基層解碼器608可以解碼基層位元串流606並生成重構的基層視訊622。基層解碼的畫面緩衝器618可以儲存諸如基層視訊622的一個或多個畫面以協助基層解碼器608解碼基層位元串流606。基層解碼的畫面緩衝器618可以提供與基層視訊622（例如，上採樣的基層畫面）有關的資訊給層間預測處理和管理單元616。
增強層解碼器612可以接收增強層位元串流610。增強層解碼器612可以使用來自當前層和/或一個或多個其獨立層（例如，基層）諸如經由ILP的資訊解碼增強層位元串流610。增強層解碼器可以解碼增強層位元串流610以生成重構後的增強層視訊624。增強層解碼後的畫面緩衝器620可以儲存增強層視訊624的一個或多個畫面和/或來自諸如層間預測處理和管理單元616的一個或多個層間畫面以協助增強層解碼器612解碼增強層位元串流610。
第7圖是示例層間預測（ILP）處理和管理單元700的圖式。ILP處理和管理單元514和616是ILP處理和管理單元700的示例。ILP處理和管理單元700可以接收增強層視訊輸入702。增強層視訊輸入702可以被用作ILP處理單元704的最佳化目標。ILP處理和管理單元700可以提供增強層視訊702給ILP處理單元704和/或ILP管理單元706。ILP處理單元704可以接收來自基層DPB 708的基層畫面和/或增強層畫面710。
ILP處理單元704可以生成一個或多個（例如兩個）層間參考（ILR）畫面712。ILR畫面可以由編碼器和/或解碼器使用以編碼和/或解碼當前EL畫面。ILR畫面可以是通過上採樣共存的BL重構畫面716生成的ILR畫面。通過上採樣共存BL重構畫面生成的ILR畫面可以被稱作正常ILR畫面。ILR畫面可以是增強型層間參考（E-ILR）畫面。E-ILR畫面可以通過組合時間EL重構畫面和正常ILR畫面來生成。ILR（例如E-ILR）畫面可以被插入到EL DPB 714。插入位置可以由ILP管理單元706管理。EL DPB 714可以提供一個或多個ILR畫面給EL編碼器和/或EL解碼器720。
第8圖是參考畫面清單中的ILR畫面和/或E-ILR畫面的佈置的示例的圖式800。ILR畫面802和/或E-ILR畫面804可由編碼器和/或解碼器標識。如第8圖所示，E-ILR畫面804可以放置在不同位置（例如清單L0和/或L1的）。例如，E-ILR畫面804可以放置在B片的清單L0中或B片的清單L1中。 E-ILR畫面804可以被放置在P片的清單L0的ILR畫面802之後或者在P片的清單L0的ILR畫面802之前。E-ILR畫面可以通過用信號發送重排序資訊而被重排序。標記可以指示解碼器執行EILR處理。表2描述了此處使用的符號的清單。
中間層（IL）可以是提供用於EL編碼的參考畫面的虛擬畫面層。在共存BL運動被映射到使用運動欄位映射到IL之後，BL畫面的交互編碼塊的運動資訊可以指示用於IL塊的時間對應。層間運動向量可以被提供。例如，層間運動向量可以由等式（1）提供：
正常層間參考畫面可以被提供。例如，正常ILR畫面可以根據等式（2）生成：
第9圖是使用單向預測編碼塊生成E-ILR塊的示例的圖式。第9圖可以被用於解釋生成E-ILR塊的剩餘方法和/或差分方法。圖式900顯示了時間T處的基層（BL）畫面BLT 908、時間T處的層間（IL）參考畫面ILT 910和時間T處的增強層（EL）畫面ELT 912的示例。塊B(BLT ) 926可以是位於BL畫面BLT 908中的塊。塊B(ILT ) 928可以是位於IL畫面ILT 910中的塊。塊B(ELT ) 930可以是位於EL畫面ELT 912中的塊。運動向量MVBLX 932是與塊B(BLT ) 926相關聯的運動向量。運動向量MVILX 934是與塊B(ILT ) 928相關聯的運動向量。運動向量MVELX 936是與塊B(ELT ) 930相關聯的運動向量。
圖式900示出了時間X處的BL畫面BLX 902、時間X處的IL參考畫面 ILX 904和時間X處的EL畫面ELX 906的示例。塊B(BLX ) 920是位於BL畫面BLX 902中的塊。運動補償後的塊MC (ILX , MVILX ) 922是位於IL畫面ILX 904中的塊。運動補償後的塊 MC (ELX , MVELX ) 924 是位於EL畫面ELX 906中的塊。BL參考畫面914、IL參考畫面916和EL參考畫面918可以是各個畫面902、904和906的示例圖像。時間X處的畫面（例如，或塊）可以在時間T處的畫面（例如，或塊）之前被編碼。由此，由時間X表徵的畫面902、904、906可以被用作針對時間T處的EL畫面912的參考畫面。畫面902、904、906、908、910和/或912為畫素域中的畫面。
IL參考畫面ILT 910可以通過上採樣BL畫面BLT 908來生成。塊B(ILT ) 928可以通過上採樣塊B(BLT ) 926來生成。IL參考畫面ILX 904可以通過上採樣BL畫面BLX 902來生成。運動補償後的塊MC (ILX , MVILX ) 922可以通過上採樣塊B(BLX ) 920來生成。由此，IL參考畫面ILT 910和/或塊B(ILT ) 928可以分別被稱作上採樣後的BL畫面910和/或上採樣後的BL塊928。IL參考畫面ILX 904和/或運動補償後的塊MC (ILX , MVILX ) 922可以分別被稱作上採樣後的BL畫面904和/或上採樣後的BL塊922。
塊B(BLT ) 926可以是IL塊B(ILT ) 928的共存塊。如果B(BLT ) 926被編碼為中間模式塊，則E-ILR塊Enh( B(ILT ) )可以使用IL塊B(ILT ) 928來生成（例如，IL塊B(ILT ) 928可以被增強）。例如，E-ILR塊Enh( B(ILT ) ) 可以根據等式(3)來生成（例如針對單向預測模式）：
如果B(BLT ) 926被編碼為中間模式塊，則E-ILR塊Enh( B(ILT ) )可以使用IL塊B(ILT ) 928來生成（例如，IL塊B(ILT ) 928可以被增強）。例如，E-ILR塊Enh( B(ILT ) )可以根據等式（4）來生成（例如針對雙向預測模式）：
包括高頻信號的E-ILR塊可以使用對畫面ELx 906和/或ILx 904運動補償來生成，例如使用等式（3）和/或等式（4）。
權重ω可以在生成E-ILR塊時使用。權重ω可以大於或等於零並且小於或等於1。權重ω(ILx )（例如0≦ω≦1）可以針對一個或多個（例如每個）參考畫面被改變（例如適應改變）。例如，權重可以使用最小均方方法來估計。最佳化目標可以是EL塊B(ELT ) 930和上採樣後的BL塊B(ILT ) 928之間的差。觀測值可以是在時間實例X處EL MC(ELX , MVELx ) 924的重構塊和塊MC(ILX , MVILX ) 922之間的差。權重可以是通過最小化目標和加權的觀測值之間的差異估計的目標和觀測值之間的比率（例如最佳化比率）。
權重ω可以基於不同分類方法來估計。例如，權重可以與諸如list0（清單0）和list1（清單1）之類的清單相關聯。權重可以與來自兩個清單的獨特參考畫面組合相關聯。權重可以與運動向量的精度（諸如整數運動向量、半畫素運動向量、四分之一畫素運動向量等等）相關聯。權重可以與預測模式（例如諸如單向預測、雙向預測等）相關聯。更精細的分類可以在權重的信令負擔的消耗下得到更精確的權重和/或更好的增強品質。編碼器可以通過信令確定何時應用估計的權重。該確定可以基於RD最佳化、TD複雜度最佳化和/或類似的，例如基於應用來作出。在RD複雜度最佳化中。編碼器可以決定在RD性能未被改善到足夠用於增加的計算複雜度的情況下不施加權重。在ILR畫面中的運動補償中使用的插值濾波器可以與BL和/或EL解碼中的那些不同。例如，濾波器可以比用於BL編碼和/或EL編碼的正常插值濾波器（例如雙線性插值濾波器）短以例如降低複雜性。
EL的剩餘可以使用層間差異來預測。E-ILR塊Enh( B(ILT ) )可以使用IL塊B(ILT ) 928來生成（例如IL塊B(ILT )928可以被增強）。例如E-ILR塊Enh( B(ILT ) )可以根據等式（5）和/或等式（6）來生成。
等式（3）和（4）可以通過將運動補償與差分畫面組合來簡化。差分畫面的示例由等式（7）定義。ILX 可以是時間X處的IL差分畫面。Ioffset 可以是偏移值，其可以為2BitDepth-1 。例如，Ioffset 是128用於8位元視訊內容。
一個或多個參考畫面可以被生成以例如協助EL畫面ELT 912的預測。例如，正常IL參考畫面可以通過上採樣共存BL畫面BLT 908以生成上採樣後的BL畫面（或IL參考畫面）ILT 910而被生成。用於EL畫面ELT 912的增強的層間參考（E-ILR）畫面可以被生成。例如，E-ILR畫面可以包括一個或多個塊。塊可以為各種大小。例如塊可以是64x64、32x32、16x16、8x8、4x4、矩形等。E-ILR畫面的塊可以包括一個或多個E-ILR塊和/或一個或多個正常ILR塊（例如通過上採樣共存BL塊生成的塊）。E-ILR塊可以使用此處描述的一種或多種技術（例如剩餘、差分、單向預測、雙向預測等等）來生成。
E-ILR畫面的E-ILR塊可以例如根據等式（5）和/或（6）使用剩餘塊來生成。E-ILR畫面的E-ILR塊可以根據以下中的一者或多者來生成。E-ILR塊可以被用於預測EL畫面ELT 912的塊B(ELT ) 930。可以確定共存塊B(BLT ) 926是交互編碼還是內部編碼。如果確定塊B(BLT ) 926是交互編碼，則用於塊的運動資訊可以被確定。運動資訊可以包括運動資訊類別（例如運動資訊所關聯的參考畫面的索引）和/或塊的運動向量（例如運動的大小）。用於生成剩餘的時間實例可以使用與塊B(BLT ) 926相關的運動資訊來生成。例如塊B(BLT ) 926的運動資訊（例如運動向量MVBLX 932）可以被用於確定時間實例X（例如參考塊B(BLX ) 920和/或BL畫面BLX 902）。
在時間X的BL塊可以被從時間T處的BL塊中減去以生成剩餘。例如，運動補償後的塊MC(ILX , MVILX ) 922可以被從上採樣後的BL塊B(ILT ) 928中減去以生成剩餘。該剩餘可以由時間T表徵。可以確定使用MC塊MC(ILX , MVILX ) 922來基於與上採樣後的BL塊 928相關聯的運動資訊（例如MVILX 934）生成剩餘。
該剩餘可以乘以權重ω。該權重ω大於或等於零且小於或等於1。偏移可以被添加到剩餘以例如補償不同時間實例之間的剩餘信號的DC變化。例如，偏移可以針對單向預測模式根據等式（10）和/或針對雙向預測模式根據（11）添加到剩餘。偏移可以與權重相關聯和/或可以使用權重來估計。如果使用權重和偏移，則權重和偏移可以作為一個參數集用信號發送。該剩餘可以被添加到EL塊MC (ELX , MVELX ) 924以生成由時間T表徵的E-ILR塊（例如Enh( B(ILT ) )）。可以確定使用EL塊MC (ELX , MVELX ) 924來基於與EL塊B(ELT ) 930相關聯的運動資訊（例如MVELX 936）生成E-ILR塊。時間T處的E-ILR塊可以被用於預測EL塊B(ELT ) 930。例如，E-ILR塊可以被用於創建被用於預測EL畫面ELT 912的由時間T表徵的E-ILR畫面。
E-ILR畫面的E-ILR塊可以使用差分塊來生成，例如如參考等式（3）和/或（4）所描述。用於EL畫面ELT 912的E-ILR畫面可以根據以下中的一者或多者來生成。E-ILR塊可以被用於預測EL畫面ELT 912的塊B(ELT ) 930。可以確定共存塊B(BLT ) 926是交互編碼還是內部編碼。如果確定塊B(BLT ) 926是交互編碼，則用於塊的運動資訊可以被確定。運動資訊可以包括運動資訊類別（例如運動來源）和/或塊的運動向量（例如運動的大小）。用於生成差分的時間實例可以使用與塊B(BLT ) 926相關的運動資訊來生成。例如塊B(BLT ) 926的運動資訊（例如運動向量MVBLX 932）可以被用於確定時間實例X（例如參考塊B(BLX ) 920和/或BL畫面BLX 902）。
時間X處的BL塊可以由時間X處的EL塊減去以生成差分塊。例如，運動補償後的塊MC(ILX , MVILX ) 922可以使用與上採樣後的BL塊B(ILT ) 928相關的運動資訊MVILX 934來確定。運動資訊MVILX 934可以通過例如根據增強層和基層之間的空間比率來縮放運動資訊MVBLX 932而被確定。運動補償後的增強層塊MC(ELX , MVELX ) 924可以使用與上採樣後的BL塊B(ELT ) 930相關的運動資訊MVELX 936來確定。運動補償後的塊MC(ILX , MVILX ) 922可以從運動補償後的增強層塊MC(ELX , MVELX ) 924中減去以生成差分塊。該差分塊可以由時間X表徵。
差分塊可以乘以權重ω。該權重ω大於或等於零且小於或等於一。偏移可以被添加到差分塊。例如，偏移可以根據等式（10）和/或（11）被添加到差分塊。偏移可以與權重相關聯和/或利用權重估計。如果權重和偏移被使用，則權重和偏移可以作為一個參數集用信號發送。
差分塊可以被添加到BL畫面的上採樣後的塊以生成由時間T表徵的E-ILR塊。例如差分塊可以被添加到上採樣後的BL塊B(ILT ) 928以生成由時間T表徵的E-ILR塊（例如Enh( B(ILT )）。時間T處的E-ILR塊可以被用於預測EL塊B(ELT ) 930。例如，E-ILR塊可以被用於創建可以被用於預測EL畫面ELT 912的由時間T表徵的E-ILR畫面。
儘管參考由空間縮放表徵的BL和EL而被描述，E-ILR塊可以在BL和EL之間存在其他類型的縮放（例如SNR縮放、標準縮放等）時生成。如果BL和EL之間不存在空間縮放，則類似於參考第9圖描述的剩餘方法可以被執行以生成E-ILR塊。例如，如果BL和EL之間不存在空間縮放，則時間X處的MC BL塊（例如，與時間X處的MC塊相對）可以從時間T處的BL塊（例如與時間T處的上採樣後的BL塊相對）中減去（例如直接減去）以生成剩餘塊，例如無需重採樣過程。如果BL和EL之間不存在空間縮放，則類似於參考第9圖描述的差分方法可以被執行以生成E-ILR塊。例如，如果BL和EL之間不存在空間縮放，則時間X處的MC BL塊（例如與時間X處的MC塊相對）可以從時間X處的MC EL塊中減去（例如直接減去）以生成差分塊，和/或該差分塊可以在時間T處被添加到BL塊（例如與時間T處的上採樣後的BL塊相對）以生成E-ILR塊。
等式(3)、 (4) 可以例如使用差分畫面被轉換到等式（8）和（9）。運動補償操作的數目可以被減半（例如從兩個運動補償操作到一個運動補償操作）。E-ILR塊Enh( B(ILT ) )可以使用等式（8）和/或等式（9）來生成：
第10圖是使用差分塊和單向預測編碼塊生成E-ILR塊的示例的圖式。例如，關於第10圖描述的差分方法可以使用等式（7）、（8）（例如用於單向預測）和/或（9）（例如用於雙向預測）以使用差分塊生成E-ILR塊。圖式1000顯示了時間T處的BL畫面BLT 1008、時間T處的IL參考畫面ILT 1010和時間T處的EL畫面ELT 1012的示例。塊B(BLT ) 1026可以是位於BL畫面BLT 1008中的塊。塊B(ILT )1028可以是位於IL畫面ILT 1010中的塊。塊B(ELT ) 1030可以是位於EL畫面ELT 1012中的塊。運動向量MVBLX 1032是與塊B(BLT ) 1026相關聯的運動向量。運動向量MVILX 1034是與塊B(ILT ) 1028相關聯的運動向量。
圖式1000示出了示例的時間X處的BL畫面BLX 1002、時間X處的IL差分畫面ILX 1004和時間X處的EL畫面ELX 1006的示例。塊B(BLX ) 1020是位於BL畫面BLX 1002中的塊。運動補償後的差分塊MC (ILDX , MVILDX ) 1022是位於IL差分畫面ILDX 1004中的塊。EL塊B(ELX ) 1024可以是位於EL畫面ELX 1006中的塊。BL參考畫面1014和EL參考畫面1018可以是各個畫面1002和1006的示例圖像。IL差分畫面1016可以是時間X處的IL差分畫面IDLX 1004的示例。IL差分畫面ILDX 1004可以通過從增強層畫面ELX 1006中減去BL畫面BLX 1002的上採樣後的版本來生成（例如如果空間解析度對於BL和EL不同）。IL差分畫面ILDX 1004可以通過從增強層畫面ELX 1006中減去BL畫面BLX 1002來生成，例如，如果空間解析度對於兩個層相同。時間X處的畫面（例如或塊）可以在時間T處的畫面（例如或塊）之前被編碼。由此，由時間X表徵的畫面1002、1004、1006可以被用作針對時間T處的EL畫面1012的參考畫面。在塊級實施中，例如E-ILR塊可以被生成，並且畫面1004可以被用作參考畫面。在畫面級實施中，例如，畫面1004可以被用於生成E-ILR畫面。
IL參考畫面ILT 1010可以通過上採樣BL畫面BLT 1008來生成。塊B(ILT ) 1028可以通過上採樣塊B(BLT ) 1026來生成。由此，IL參考畫面ILT 1010和/或塊B(ILT ) 1028可以分別被稱作上採樣後的BL畫面1010和/或上採樣後的BL塊1028。
IL差分畫面1016是差分畫面的示例。利用差分畫面，E-ILR塊和/或畫面的生成可以使用等式（8）和/或（9）來執行。執行運動補償的次數可以使用與參考第9圖描述的差分方法相對的參考第10圖描述的差分方法來減少（例如運動補償根據參考第9圖描述的差分方法執行兩次並且根據參考第10圖描述的差分方法執行一次）。例如由於差分畫面包括包含雜訊的高頻信號，則濾波過程可以被應用。例如，去除雜訊濾波可以在其被用於生成E-ILR塊和/或畫面之前被應用到差分塊（例如MC (ILDX , MVILDX ) 1022）和/或畫面。
一個或多個參考畫面可以被生成以例如協助預測EL畫面ELT 1012。例如，正常IL參考畫面可以通過上採樣共存BL畫面BLT 1008生成上採樣後的BL畫面（或IL參考畫面）ILT 1010而被生成。用於EL畫面ELT 1012 的E-ILR畫面可以被生成。例如，E-ILR畫面可以包括一個或多個塊。該塊可以為各種大小。例如塊可以為64x64、32x32、16x16、8x8、4x4、矩形等。E-ILR畫面的塊可以包括一個或多個E-ILR塊和/或一個或多個正常ILR塊（例如通過上採樣共存BL塊生成的塊）。E-ILR塊可以使用此處描述的一種或多種技術（例如剩餘、差分、單向預測、雙向預測等等）來生成。
E-ILR畫面的E-ILR塊可以使用差分塊來生成，例如如參考等式7-9所描述。用於EL畫面ELT 1012的E-ILR畫面可以根據以下中的一者或多者來生成。E-ILR塊可以被用於預測EL畫面ELT 1012的塊B(ELT ) 1030。可以確定共存塊B(BLT ) 1026是交互編碼還是內部編碼。如果確定塊B(BLT ) 1026是交互編碼，則用於塊的運動資訊可以被確定。運動資訊可以包括運動資訊類別（例如運動資訊所關聯的參考畫面的索引）和/或塊的運動向量（例如運動的大小）。用於生成差分畫面/塊的時間實例可以使用與塊B(BLT ) 1026相關的運動資訊來確定。例如塊B(BLT ) 1026的運動資訊（例如運動向量MVBLX 1032）可以被用於確定時間實例X（例如參考塊B(BLX ) 1020和/或BL畫面BLX 1002）。
時間X處的BL塊可以從時間X處的EL塊減去以生成差分塊。例如，BL塊B(BLX ) 1020的上採樣後版本可以從EL塊B(ELX ) 1024中減去以生成差分塊。差分塊可以由時間X表徵。可以確定使用BL塊B(BLX ) 1020的上採樣後的版本以基於與IL塊B(ILT ) 1028相關聯的運動資訊（例如MVILX 1034）和/或與BL塊B(BLT ) 1026相關聯的運動資訊（例如MVBLX 1032）生成差分塊。
運動補償可以在差分塊上執行以生成運動補償後的差分塊 1022。例如，運動補償可以使用基層運動資訊在差分塊上執行。基層運動資訊可以是縮放的基層運動資訊。例如，基層運動資訊可以基於基層和增強層之間的空間比率而被縮放。基層運動資訊可以是運動資訊MVILX 1034，其通過根據增強層和基層之間的空間比率縮放運動資訊MVBLX 1032來生成。由此，運動補償可以在差分塊上執行以使用縮放的運動資訊MVILX 1034來生成運動補償後的差分塊MC(ILDX , MVILDX ) 1022。
運動補償後的差分塊MC(ILDX , MVILDX ) 1022可以乘以權重ω。該權重ω可以大於或等於零且小於或等於1。偏移可以被添加到運動補償後的差分塊MC(ILDX , MVILDX ) 1022。例如，偏移可以根據等式（7）、（10）和/或（11）被添加到運動補償後的差分塊MC(ILDX , MVILDX ) 1022。偏移Ioffset 可以被添加以將差分塊/畫面的動態範圍移位元到使用運動補償（例如根據等式（7））的動態範圍。在對差分塊進行運動補償之後，Ioffset 可以被減去以恢復差分信號（例如在等式（10）和/或（11）中所示）。例如，偏移O(ILx )和/或O(IL0 , IL1 )可以在加權之後添加（例如如等式（10）和/或（11）中所示）。偏移O(x)可以與權重相關聯以形成模型參數(W, O)組。
運動補償後的差分塊MC(ILDX , MVILDX ) 1022可以被添加到時間T處的BL塊以生成由時間T表徵的E-ILR塊。例如，運動補償後的差分塊MC(ILDX , MVILDX ) 1022可以被添加到上採樣後的BL 塊B(ILT ) 1028以生成由時間T表徵的E-ILR塊（例如Enh( B(ILT )）。時間T處的E-ILR塊可以被用於預測EL塊B(ELT ) 1030。例如，E-ILR塊可以被用於創建用於預測EL畫面ELT 1012的由時間T表徵的E-ILR畫面。
儘管參考由空間縮放表徵的BL和EL描述，E-ILR塊可以在BL和EL之間存在其他類型的縮放（例如SNR縮放、標準縮放等）時生成。如果BL和EL之間不存在空間縮放，則類似於參考第10圖描述的差分方法可以被執行以生成E-ILR塊。例如，如果BL和EL之間不存在空間縮放，則時間X處的BL塊（例如與時間X處的上採樣後的BL塊相對）可以從時間X處的EL塊中減去（例如直接減去）以生成時間X處的差分塊，和/或運動補償後的差分塊可以被添加到時間T處的BL塊（例如與時間T處的上採樣後的BL塊相對）以生成E-ILR快。進一步，運動補償可以使用與時間T處的BL塊（例如與時間T處的上採樣後的BL塊相對）相關聯的運動資訊在差分塊上執行以生成運動補償後的差分。
ILR塊（例如正常ILR塊和/或E-ILR塊）可以使用雙向預測來生成。E-ILR塊可以例如根據等式（4）、（6）和/或（9）使用雙向預測來生成。例如，E-ILR塊可以使用來自兩個或多個其他時間實例的塊生成針對一個時間實例的塊。一個示例參考第11圖提供，但是使用雙向預測生成E-ILR塊可以以其他方式（例如剩餘方法、使用單個運動補償的差分方法（例如參考第10圖所描述）、使用兩個運動補償操作的差分方法（例如參考第9圖所描述）等）執行。
第11圖是使用差分和雙向預測編碼塊生成E-ILR塊的示例的圖式。圖式1100提供了時間R0 處的BL畫面BL0 1102、時間R0 處的IL參考畫面IL0 1104和時間R0 處的EL畫面EL0 1106的示例。圖式1100提供了時間PT 處的BL畫面BLT 1108、時間PT 處的IL畫面ILT 1110和時間PT 處的EL畫面ELT 1112 的示例。圖式1100提供了時間R1 處的BL畫面BL1 1114、時間R1 處的IL參考畫面IL1 1116和時間R1 處的EL畫面EL1 1118的示例。
塊B(BL0 ) 1128可以是位於BL畫面BL0 1102中的塊。運動補償後的塊MC (IL0 , MVIL0 ) 1130可以是位於IL畫面IL0 1104中的塊。運動補償後的塊MC (EL0 , MVEL0 ) 1142可以是位於EL畫面EL0 1106中的。塊B(BLT ) 1132可以是位於BL畫面BLT 1108中的塊。塊 1134可以是位於IL畫面ILT 1110中的塊。塊B(ELT ) 1136可以是位於EL畫面ELT 1112中的塊。塊B(BL1 ) 1138可以是位於BL畫面BL1 1114中的。運動補償後的塊MC (IL1 , MVIL1 ) 1140 可以是位於IL畫面IL0 1116中的塊。運動補償後的塊MC (EL1 , MVEL1 ) 1144可以是位於EL畫面EL0 1118中的塊。時間R0 處的畫面（例如或塊）和/或時間R1 處的畫面（例如或塊）可以在時間PT 處的畫面（例如或塊）之前被編碼。由此，由時間R0 表徵的畫面1102、1104、1106和/或由時間R1 表徵的畫面1114、1116、1118可以作為針對時間PT 處的EL畫面ELT 1112。
IL參考畫面ILT 1110可以通過上採樣BL畫面BLT 1108來生成。塊B(ILT ) 1134可以通過上採樣塊B(BLT ) 1132來生成。IL參考畫面IL0 1104可以通過上採樣BL畫面BL0 1102來生成。運動補償後的塊MC (IL0 , MVIL0 ) 1130可以通過上採樣塊B(BL0 ) 1128來生成。IL參考畫面IL1 1116可以通過上採樣BL畫面BL1 1114來生成。運動補償後的塊MC (IL1 , MVIL1 ) 1140可以通過上採樣塊B(BL1 ) 1138來生成。由此，IL參考畫面ILT 1110和/或塊B(ILT ) 1134可以分別被稱作上採樣後的BL畫面1110和/或上採樣後的BL塊1134。IL參考畫面IL0 1104和/或運動補償後的塊MC (IL0 , MVIL0 ) 1130可以分別被稱作上採樣後的BL畫面1104和/或上採樣後的BL塊1130。IL參考畫面IL1 1116和/或運動補償後的塊 1140可以分別被稱作上採樣後的BL畫面1116和/或上採樣後的BL塊1140。
一個或多個參考畫面可以被生成以例如協助預測EL畫面ELT 1112。例如，正常IL參考畫面可以通過上採樣共存BL畫面BLT 1108生成採樣後的BL畫面（或IL參考畫面）ILT 1110而被生成。用於EL畫面ELT 1112的E-ILR畫面可以被生成。例如，E-ILR畫面可以包括一個或多個塊。該塊可以為各種大小。例如塊可以為64x64、32x32、16x16、8x8、4x4、矩形等。E-ILR畫面的塊可以包括一個或多個E-ILR塊和/或一個或多個正常ILR塊（例如通過上採樣共存BL塊生成的塊）。E-ILR塊可以使用此處描述的一種或多種技術（例如剩餘、差分、單向預測、雙向預測等等）來生成。
E-ILR畫面的E-ILR塊可以使用差分和雙向預測模式來生成。用於EL畫面ELT 1112的E-ILR畫面可以根據以下中的一者或多者來生成。E-ILR塊可以被用於預測EL畫面ELT 1112的塊B(ELT ) 1136。可以確定共存塊B(BLT ) 1132是交互編碼還是內部編碼。如果確定塊B(BLT ) 1132是交互編碼，則用於塊的運動資訊可以被確定。例如，如果塊B(BLT ) 1132被雙向預測，則塊B(BLT ) 1132可以包括兩組運動資訊。運動資訊可以包括運動資訊類別（例如運動資訊來自哪裡）和/或塊的運動向量（例如運動的大小）。用於生成差分的兩個時間實例可以使用與塊B(BLT ) 1132相關的運動資訊來確定。例如塊B(BLT ) 1132的第一運動資訊（例如運動向量MVBL0 1120）可以被用於確定時間實例R0 （例如參考塊B(BL0 ) 1128和/或BL畫面BL0 1102）以及塊B(BLT ) 1132的第二運動資訊（例如運動向量MVBL1 1122）可以被用於確定時間實例R1 （例如參考塊B(BL1 ) 1138和/或BL畫面BL0 1114）。
時間R0 處的BL塊可以被添加到時間R1 處的BL塊以生成組合BL塊。例如，組合BL塊被除以二以生成平均BL塊。例如，運動補償後的塊MC(IL0 , MVIL0 ) 1130可以被添加到運動補償後的塊 1140以生成組合BL塊。組合BL塊被除以二以生成平均BL塊。運動補償後的塊MC(IL0 , MVIL0 ) 1130可以使用與上採樣後的BL塊B(ILT ) 1134相關聯的運動資訊MVIL0 1124來確定。運動補償後的塊MC(IL1 , MVIL1 ) 1140可以使用與上採樣後的BL塊B(ILT ) 1134相關聯的運動資訊MVIL1 1126來確定。
平均BL塊可以使用加權平均來生成。例如，平均BL塊可以根據P = (p0*w0+p1*w1)/(w0+w1)使用加權平均來生成。例如，運動補償後的塊MC(IL0 , MVIL0 ) 1130可以被乘以第一權重，並且運動補償後的塊MC(IL1 , MVIL1 ) 1140可以在將運動補償後的塊MC(IL0 , MVIL0 ) 1130添加到運動補償後的塊MC(IL1 , MVIL1 ) 1140以生成組合BL塊之前乘以第二權重。第一權重和第二權重可以不同。組合塊可以被除以組合的第一權重和第二權重以生成平均BL塊。
時間R0 處的EL塊可以被添加到時間R1 處的EL塊以生成組合EL塊。組合EL塊可以被除以二以生成平均EL塊。例如，運動補償後的EL塊MC (EL0 , MVEL0 ) 1142可以被添加到運動補償後的EL塊MC (EL1 , MVEL1 ) 1144以生成組合EL塊。組合EL塊可以被除以二以生成平均EL塊。運動補償後的EL塊MC (EL0 , MVEL0 ) 1142可以使用與EL塊B(ELT ) 1136相關聯的運動資訊MVEL0 1146來確定。運動補償後的EL塊MC (EL1 , MVEL1 ) 1144可以使用與EL塊B(ELT ) 1136相關聯的運動資訊MVEL0 1148來確定。運動MVEL0 1146和MVEL1 1148可以分別從MVIL0 和MVIL1 中確定，例如因為IL和EL具有相同的空間解析度。
平均EL塊可以使用加權平均來生成。例如，平均BL塊可以根據P = (p0*w0+p1*w1)/(w0+w1)使用加權平均來生成。例如，運動補償後的EL塊MC (EL0 , MVEL0 ) 1142可以被乘以第一權重，並且運動補償後的EL塊MC (EL1 , MVEL1 ) 1144可以在將運動補償後的EL塊MC (EL0 , MVEL0 ) 1142添加到運動補償後的EL塊MC (EL1 , MVEL1 ) 1144以生成組合BL塊之前乘以第二權重。第一權重和第二權重可以不同。組合塊可以被除以組合的第一權重和第二權重以生成平均EL塊。
平均BL塊可以從平均EL塊中減去以生成差分塊。差分塊可以乘以權重ω。該權重ω可以大於或等於零且小於或等於1。偏移可以被添加到差分塊。例如，偏移可以根據等式（7）、（10）和/或（11）被添加到差分塊。差分塊可以被添加到由時間PT 表徵的BL畫面的塊。例如差分塊可以被添加到上採樣後的BL塊B(ILT ) 1134以生成由時間T表徵的E-ILR塊（例如Enh( B(ILT ) )）。時間PT 處的E-ILR塊可以被用於預測EL塊B(ELT ) 1136。例如，塊E-ILR可以被用於創建用於預測EL畫面ELT 1112的由時間PT 表徵的E-ILR畫面。
儘管參考由空間縮放表徵的BL和EL而被描述，E-ILR塊可以在BL和EL之間存在其他類型的縮放（例如SNR縮放、標準縮放等）時生成。例如，如果BL和EL之間不存在空間縮放，則時間R0 處的BL塊（例如與時間R0 處的上採樣後的BL塊相對）和時間R1 處的BL塊（例如與時間R1 處的上採樣後的BL塊相對）可以被用於生成差分塊，和/或時間PT 處的BL塊（例如與時間PT 處的上採樣後的BL塊相對）可以被添加到差分塊以生成E-ILR塊。
在生成用於E-ILR畫面的塊時，替代或除了使用權重參數之外，可以使用偏移。偏移O(x)可以被用於補償DC誤差。權重和/或偏移可以包括一對參數。權重和/或偏移可以描述線性模型。在沒有偏移O(x)的情況下，權重參數不能描述線性模型。在參數估計中，權重和/或偏移可以使用最佳化過程（例如最小均方方法）被聯合估計。例如除了權重外ω可以使用偏移。等式（8）和（9）可以使用偏移被轉換到等式（10）和（11）：
O(ILx )和O(IL0 , IL1 )可以為被用於補償原始畫面和增強的ILR畫面之間的誤差的偏移。O(ILx )和O(IL0 , IL1 )可以與針對單向預測運動的參考畫面和/或針對雙向預測運動的參考畫面對相關聯。
在生成E-ILR塊時應用的權重（例如根據等式（8）和/或（9））可以與一個或多個參考畫面相關聯。在HEVC可縮放擴展中，例如，參考畫面在兩個清單中都出現。查閱資料表可以被用於將參考畫面索引映射到權重清單中的索引。存在多個（例如兩個）查閱資料表，包括例如lut_weight_uni用於單向預測模式，其將單向預測的參考清單和參考索引映射到單向預測的權重清單的索引weight_uni_list。另一個表可以用於雙向預測模式，並且將雙向預測的list0的參考索引和/或list1的參考索引映射到雙向預測的權重清單的索引weight_bi_list。
第12圖是建立針對單向預測模式將參考索引映射到權重清單中的索引的查閱資料表的示例的流程圖。第13圖是建立針對雙向預測模式將參考索引映射到權重清單中的索引的查閱資料表的示例的流程圖。對於針對單向預測和/或針對雙向預測的權重清單中的項（例如每個項），最小均方方法可以被用於基於在權重清單中具有相同索引的一個或多個（例如，每個）塊來估計權重。原始EL畫面的塊可以被用作等式（8）和（9）的最佳化目標，其意味著（8）、（9）中的Enh( B(ILT ) )可以等於參數估計中的原始EL畫面的共存塊。
權重參數信令可以與參考畫面相關聯。可以存在用於權重映射的一個或多個查閱資料表。表可以用於單向預測模式使用，例如諸如等式（3）、（5）、（8）和/或（10）。表可以用於雙向預測模式使用，例如諸如等式（4）、（6）、（9）和/或（11）。對於單向預測模式，權重可以與由畫面序號（POC）標識的參考畫面相關聯。對於雙向模式，權重可以與參考畫面對相關聯。在參考對中，一個參考畫面可以來自list0，其他參考畫面來自list1。例如，如果r0和r1都在兩個清單中，參考畫面對(r0(POC0), r1(POC1))（例如其中第一項來自list0，第二項來自list1）可以被視為與(r1(POC1), r0(POC0))相同。可以存在出現在兩個或更多個清單（例如list0和list1）中的相同參考畫面。由此，POC的清單可以被用於儲存已經被處理的那些參考畫面的POC以移除重複的參考畫面。權重可以使用查閱資料表與參考畫面相關聯。
第12圖可以被用於建立單向映射。程序1200可以包括以下中的一者或多者。程序1200在1202開始，其中lut_weight_uni的大小被重置，size_lut_weight_uni可以等於零，poc_list可以重設，和/或poc_list被設置成空。在1204，可以確定list_0和list_1是否被處理。如果是，則程序1200在1206結束。如果否，則在1208清單list_x（例如list_0或list_1）可以被選擇以ref_idx等於0處理。例如程序第一次進入1208，可以選擇list_0，程序第二次進入1208可以選擇list_1。在1210，可以確定list_x中的參考畫面是否已經被處理。如果是，則程序返回1204。例如，如果list_0中的所有參考畫面已經被處理，則程序1200可以返回到1204，以例如檢查list_1中的所有參考畫面是否已經被處理。如果否，則程序1200可以繼續到1210。在1210，具有ref_idx的參考畫面R可以從list_x中選擇。在1212，可以確定參考畫面R是否在poc_list中。如果是，則在1218，ref_idx可以被增加，例如增加1，並且程序1200可以返回1210。如果否，則在1216查閱資料表和poc_list由此被更新。例如，lut_weight_uni[list_x][ref_idx]可以被設置成等於size_lut_weight_uni，poc_list[size_lut_weight_uni]可以被設置成等於poc(R)，和/或size_lut_weight_uni可以被增加，例如增加1。在1216之後，程序1200可以繼續到1218並且ref_idx可以被增加，例如增加1。在1218之後，程序1200可以返回1210。程序1200可以繼續迴圈1210-1218直到list_x中的所有參考畫面被處理。
第13圖被用於建立雙向映射。程序1300可以包括以下中的一者或多者。程序1300在1302開始，其中lut_weight_uni的大小可以被重置，size_lut_weight_uni可以等於零，poc_list可以被重置，poc_list可以被設置成空，和/或ref-idx0可以等於零。在1304，可以確定list_0是否被處理。如果是，則程序1300可以在1306結束。如果否，則在1308具有ref_idx0的參考畫面R0從list_0中被選擇和/或ref_idx1等於1。在1310，可以確定list_1中的參考畫面是否被處理。如果是，則在1312，ref_idx0可以被增加，例如增加1，並且程序可以返回1304。如果否，則在1314具有ref_idx1的參考畫面R1可以從list_1中被選擇。在1316可以確定(R0, R1)或(R1, R0)是否在poc_list中，如果是，則在1320，則ref_idx1可以被增加，例如增加1，並且程序1300可以返回1310。如果否，則在1318查閱資料表和poc_list由此被更新。例如lut_weight_bi[ref_idx0][ref_idx1]可以被設置成等於size_lut_weight_bi，poc_list[(size_lut_weight_bi)*2]可以被設置成等於poc(R0)，poc_list[(size_lut_weight_bi)*2+1]可以被設置成等於poc(R1)，和/或size_lut_weight_bi可以被增加，例如增加1。在1318之後，程序1300可以繼續到1320並且ref_idx1可以被增加，例如增加1。在1320之後，程序1300可以返回1310。程序1300可以繼續迴圈1310-1320直到list_1中的所有參考畫面被處理。
給定目標信號T和觀測信號O，用於最佳化權重的利用最小均方的解可以等於Cor(T, O)/Cor(O)，其中Cor (T, O)是T和O之間的相關，Cor(O)是O的自相關。第14圖是利用最小均方方法計算針對單向預測模式的權重估計的示例的流程圖。在第14圖中，具有相同權重的單向預測模式編碼的塊可以被遍歷以收集針對權重估計的互相關和自相關。第15圖是利用最小均方計算針對雙向預測模式的權重估計的示例的流程圖。在第15圖中，具有相同權重的雙向預測模式編碼的塊可以被遍歷以收集針對權重估計的互相關和自相關。
程序1400可以包括以下中的一者或多者。程序1400在1402開始，其中單向預測權重清單可以從兩個參考畫面清單中建立。在1404，可以確定單向預測權重清單中的畫面是否完整。如果是，則程序1400可以在1420結束。如果否，則在1406，畫面P從權重清單中被選擇用於權重估計，AO可以被設置成零，和/或AS可以被設置成零。在1408，可以確定當前畫面中的塊是否被處理。如果是，則在1410，用於畫面P的權重例如根據W(P) = AO /AS 被計算，並且程序1400可以返回1404。如果否，則在1412，可以確定當前塊是否使用單向預測以及參考畫面是否為P。如果否，則程序1400可以在1418進行到下一塊並且隨後返回1406。如果是，則在1414，差分塊D和運動補償後的塊S可以例如根據D = B(ELT ) - B(ILT )和/或S = MC(ILDX , MVIL )來計算。在1416，D和S之間的畫素相關(D(i)*S(i))，以及塊內的S的自相關(S(i)*S(i))可以例如根據 += sum(D(i) * S(i))和/或AS += sum(S(i) * S(i))被累積到Ao和As。在1418，程序1400可以進行到下一塊並隨後返回1406。
程序1500可以包括以下中的一者或多者。程序1500在1502開始，其中雙向預測權重清單可以從兩個參考畫面清單中建立。在1504，可以確定雙向預測權重清單中的畫面是否完整。如果是，則程序1500可以在1520結束。如果否，則在1506，項(P0 , P1 )可以從權重清單中被選擇用於權重估計，AO可以被設置成零，和/或AS可以被設置成零。在1508，可以確定當前畫面中的塊是否被處理。如果是，則在1510，用於(P0 , P1 )的權重可以例如根據  = AO /AS 被計算，並且程序1500可以返回1504。如果否，則在1512，可以確定當前塊是否使用雙向預測以及參考畫面是否為 或(P1 , P0 )。如果否，則程序1500可以在1518進行到下一塊並且隨後返回1506。如果是，則在1514，差分塊D和運動補償後的塊S可以例如根據D = B(ELT ) - B(ILT )和/或S = (MC( , MV0 IL ) + MC(ILDX1 , MV1 IL ))/2來計算。在1516，AO += sum(D(i) * S(i))和/或AS += sum(S(i) * S(i))。在1518，程序1500進行到下一塊並且隨後返回1506。
編碼器可以用信號發送畫面（例如每個畫面）的權重和/或偏移資訊到解碼器以例如用於ILP增強處理。用於亮度成分和色度成分的權重和/或偏移可以不同。用於亮度成分和色度成分的權重和/或偏移可以例如分別用信號發送。用於色度的權重可以被設置成1和/或用於色度的偏移可以被設置成0，以例如減少解碼器側的複雜性。權重和/或偏移可以在固定點中編碼。表3提供了用於權重和偏移參數的信令的示例。
第16圖是用於ILR增強的基於區域的權重的示例的圖式。如第16圖所示，權重和/或偏移可以基於區域（例如塊）。圖式1600描述了權重如何被分派到畫面的多於一個區域。畫面以多種方式被劃分成多個區域。例如，畫面可以被均勻劃分、被物件劃分、被運動劃分等。第16圖顯示了均勻劃分的示例。區域（例如每個區域）具有其自身權重和/或偏移。例如，E-ILR畫面的塊（例如每個塊）可以具有其自身權重和/或偏移。單向預測和/或雙向預測塊可以共用相同區域中的權重和/或偏移，例如從而減少權重和偏移編碼負擔。預測編碼可以被應用以對基於區域的的權重和/或偏移進行編碼。權重和/或偏移資訊可以在片的NAL、HEVC中的適應參數集（APS）的NAL等等中傳遞。
在層間參考畫面增強中使用的運動資訊可以來自層間運動，該層間運動可以來自運動欄位映射過程和/或可以從BL壓縮和/或未壓縮運動資訊中導出（例如直接導出）。例如，如果ILR增強從BL中導出運動，在ILR增強過程中的運動補償的塊大小可以不對齊為16x16塊大小。未壓縮的運動相比於壓縮的運動可以提供運動資訊（例如更精確的運動資訊）。多階運動壓縮方法可以被提供以改善EL編碼。這一方法可以被應用於ILR增強。未壓縮運動的塊大小例如可以為4x4。壓縮的運動的塊大小可以例如為16x16。BL可以針對ILR增強提供8x8大小運動。相比於4x4大小的未壓縮的運動，8x8大小的運動可以提供記憶體節省，和/或相比於16x16大小的壓縮的運動更精確。8x8大小的運動可以被壓縮以獲得16x16運動，以例如用於編碼BL的未來畫面。
DPB中的BL運動可以被壓縮以例如節省記憶體大小。這一壓縮後的BL運動以粗顆粒性作出層間運動。如果兩個層的解析度不同，則對BL運動的縮放可能損失精確度。例如BL運動可以針對2x空間縮放被上縮放2x。如果原始BL運動是1/4-pel（畫素）精度，則運動精度為1/2-pel精度。改善在等式（8）和（9）中使用的層間運動精度可以改善ILP。
運動細化可以應用被映射的運動作為細化的中心並且搜索其鄰居（例如最近鄰居）中的一個或多個。運動可以使用等式（12）被細化以接收變化的運動（delta motion）：
MVILx 可以是從BL運動中導出的運動。失真可以使用均方誤差和（SSE）、絕對轉換差異和（SATD）等等來評估。如果共存塊在BL被內部編碼，則MVILx 可以不可用。運動可以從一個或多個相鄰塊的運動中導出。最小失真可以例如使用等式（13）來確定。增強層時間運動可以根據時間距離使用縮放來確定。
從BL導出的運動對於層間參考畫面增強可以是有效的。BL處的運動可以使用考慮速率負擔的速率失真損失由BL編碼器確定。BL編碼器可以考慮ILR增強過程中的速率。運動資訊可以從BL中導出。針對雙向預測模式，BL編碼器可以提供兩組運動資訊，例如list0和list1。ILR增強可以確定來使用list0、list1或兩者。該確定可以基於失真。針對list0和/或list1的運動的失真可以例如使用等式（14）（15）分別確定。等式（16）可以被用於使用list0和list1的雙向預測。編碼器和/或解碼器可以確定以使用由用於ILR增強的最小失真表徵的清單。
運動細化和/或選擇過程可以是顯式或隱式。顯式運動細化和/或選擇可以在編碼器處執行，並且編碼器可以用信號通知細化和/或選擇資訊給解碼器。通過用信號發送細化和/或選擇資訊，解碼複雜性可以通過增加負擔來降低。在隱式模式中，編碼器和解碼器可以執行細化和/或選擇。對於編碼器來說，可能沒有必要用信號發送運動資訊到解碼器。通過這樣做，可以例如通過增加解碼複雜性節省負擔位元。
E-ILR畫面其中之一或更多塊可以使用基於差分的方法（例如參考等式3、4、7、8、9和10描述的）、基於剩餘的方法（例如參考等式5、6描述的）、正常ILR塊生成方法（例如上採樣共存BL塊）、基於單向預測的方法、基於雙向預測的方法、另一E-ILR塊生成方法和/或組合來生成。例如如果使用了多個增強方法，則增強方法可以顯式或隱式地針對區域（例如每個區域）被標記。該模式可以根據一個或多個本地特性，諸如運動（例如大運動、小運動、零運動）、紋理（例如連續色調、不連續色調、顏色數目）、邊緣強度（例如強、中、弱）等等被決定。E-ILR畫面的塊例如基於所使用的生成方法具有不同特性。E-ILR塊可以由增強的和/或增加的高頻資訊、來自基層壓縮的壓縮後的低頻能量損失和/或基層編碼中的減弱的壓縮偽像（例如振鈴、塊）表徵。E-ILR塊生成方法（例如基於差分、基於剩餘、基於單向預測、基於雙向預測等）可以被組合以生成E-ILR畫面。如果E-ILR塊生成方法被組合到一起，則壓縮效率可以被改善。由編碼器使用的用於編碼當前畫面的E-ILR塊生成方法可以被用信號發送（例如顯式地用信號發送）以例如降低解碼複雜度。解碼器可以施加由編碼器用信號發送的E-ILR塊生成方法，例如替代嘗試每一種E-ILR塊生成方法。例如，如果生成方法被隱式地用信號通知，則解碼器可以根據每個塊的本地特性線上推導E-ILR塊生成方法。
兩種或多種E-ILR塊生成方法可以被組合以例如通過增加參考畫面清單的大小和在參考畫面清單中插入E-ILR畫面來生成E-ILR畫面的塊。E-ILR畫面可以被插入在list0、list1或兩者中。第17圖是在參考畫面清單中的增強ILR畫面的示例佈置的圖式。在圖式1700中，一個或多個ILR畫面1702可以被放置在B片的list0中，並且一個或多個E-ILR畫面可以被放置在B片的list1中。在P片中，一個或多個E-ILR畫面1704可以被放置在list0中的一個或多個ILR畫面1702之後。
E-ILR塊生成方法可以被組合以例如使用基於塊的組合（例如顯式組合）來生成E-ILR畫面。E-ILR畫面的塊（例如每個塊）可以使用不同的E-ILR塊生成方法來生成。編碼器和解碼器可以生成E-ILR畫面和/或將E-ILR畫面插入參考畫面清單中。編碼器可以確定被用於E-ILR畫面的塊（例如每個塊）的E-ILR塊生成方法。例如，E-ILR塊生成方法可以基於速率失真最佳化標準來選擇。編碼器可以用信號發送塊的生成方法到解碼器。該資訊可以被嵌入到被用於傳遞層間處理參數集，例如諸如適應參數集（APS）的NAL單元中。基於可變塊大小的編碼（例如基於四叉樹的編碼）可以被用於編碼E-ILR塊生成方法資訊。塊（例如每個塊）的E-ILR塊生成方法資訊可以利用行程長度編碼來進行編碼。
第18圖是用於行程長度編碼的不同掃描模式的示例圖式。例如，用於行程長度編碼的掃描模式可以包括水平1802、垂直1804、水平曲折線（zigzag）1806、垂直曲折線1808、水平光柵1810、垂直光柵1812等等。2D資料地圖可以被轉換到1D地圖，以例如用於利用不同掃描模式進行編碼。行程可以被用於指資料複製的次數。用於2D地圖的行程長度編碼的一種或多種（例如兩種）行程類型可以被提供以例如更有效壓縮資訊。行程可以通過將編碼資料與已轉換的1D順序的即時鄰居相比較來導出。行程可以在常規行程長度編碼中使用。行程可以通過將資料與空間鄰居比較來導出。
第19圖是利用水平掃描編碼的2D地圖1900的示例圖式。在掃描之後被編碼的符號可以被表示為一個或多個參數（例如包括諸如行程、類型和/或值的三個參數）。例如，行程可以指在不改變值的情況下行進的距離。類型可以指行程的類型。值可以指緊跟複製的值之後的資料。方向可以指行進方向。如第19圖中所描述，H可以指示行程以水平掃描順序導出。T可以是從其頂部鄰居導出的行程。對於二進位地圖，值不被編碼，因為其從先前的資料中導出。壓縮比率可以隨不同的掃描模式而不同，因為不同的資料分佈。編碼器可以決定用於地圖（例如每個地圖）的掃描模式和/或可以用信號發送掃描模式到解碼器。
基於塊的組合（例如隱式組合）可以被提供。編碼器和/或解碼器可以生成E-ILR畫面並且將E-ILR畫面插入參考畫面清單中。編碼器和/或解碼器可以應用導出過程（例如相同導出過程）以基於一個或多個特性確定塊的生成方法，例如替代交換塊的生成方法資訊（例如顯式地）。例如，塊可以基於一個或多個本地圖像統計特徵被分類成一種或多種類型，該統計特徵例如可以包括紋理（例如是否塊是平整或者塊是否為邊緣塊）。E-ILR塊生成方法可以基於塊類型被應用。
第20A圖為可以在其中實施一個或者多個所揭露實施方式的示例通信系統2000的圖式。通信系統2000可以是將諸如語音、資料、視訊、訊息、廣播等之類的內容提供給多個無線用戶的多重存取系統。通信系統2000可以通過系統資源（包括無線頻寬）的共用使得多個無線用戶能夠存取這些內容。例如，通信系統2000可以使用一個或多個通道存取方法，例如分碼多重存取（CDMA）、分時多重存取（TDMA）、分頻多重存取（FDMA）、正交FDMA（OFDMA）、單載波FDMA（SC-FDMA）等等。
如第20A圖所示，通信系統2000可以包括無線發射/接收單元（WTRU）2002a、2002b、2002c和/或2002d（通常或統稱為WTRU 2002）、無線電存取網路（RAN）2003/2004/2005、核心網路2006/2007/2009、公共交換電話網路（PSTN）2008、網際網路2010和其他網路2012，但可以理解的是所揭露的實施方式涵蓋任意數量的WTRU、基地台、網路和/或網路元件。WTRU 2002a、2002b、2002c、2002d中的每一個可以是被配置成在無線通訊中操作和/或通信的任何類型的裝置。作為示例，WTRU 2002a、2002b、2002c、2002d可以被配置成發送和/或接收無線信號，並且可以包括無線發射/接收單元（WTRU）、移動站、固定或移動定戶單元、傳呼機、行動電話、個人數位助理（PDA）、智慧型電話、可攜式電腦、隨身型易網機、個人電腦、無線感測器、消費電子產品等等。
通信系統2000還可以包括基地台2014a和基地台2014b。基地台2014a、2014b中的每一個可以是被配置成與WTRU 2002a、2002b、2002c、2002d中的至少一者有無線介面，以便於存取一個或多個通信網路（例如核心網路2006/2007/2009、網際網路2010和/或網路2012）的任何類型的裝置。例如，基地台2014a、2014b可以是基地台收發站（BTS）、節點B、e節點B、家用節點B、家用e節點B、網站控制器、存取點（AP）、無線路由器以及類似裝置。儘管基地台2014a、2014b每個均被描述為單個元件，但是可以理解的是基地台2014a、2014b可以包括任何數量的互聯基地台和/或網路元件。
基地台2014a可以是RAN 2003/2004/2005的一部分，該RAN 2003/2004/2005還可以包括諸如網站控制器（BSC）、無線電網路控制器（RNC）、中繼節點之類的其他基地台和/或網路元件（未示出）。基地台2014a和/或基地台2014b可以被配置成發送和/或接收特定地理區域內的無線信號，該特定地理區域可以被稱作胞元（未示出）。胞元還可以被劃分成胞元扇區。例如與基地台2014a相關聯的胞元可以被劃分成三個扇區。因此，在一種實施方式中，基地台2014a可以包括三個收發器，即針對該胞元的每個扇區都有一個收發器。在一種實施方式中，基地台2014a可以使用多輸入多輸出（MIMO）技術，並且由此可以使用針對胞元的每個扇區的多個收發器。
基地台2014a、2014b可以通過空中介面2015/2016/2017與WTRU 2002a、2002b、2002c、2002d中的一者或多者通信，該空中介面2015/2016/2017可以是任何合適的無線通訊鏈路（例如射頻（RF）、微波、紅外（IR）、紫外（UV）、可見光等）。空中介面2015/2016/2017可以使用任何合適的無線電存取技術（RAT）來建立。
更為具體地，如前所述，通信系統2000可以是多重存取系統，並且可以使用一個或多個通道存取方案，例如CDMA、TDMA、FDMA、OFDMA、SC-FDMA以及類似的方案。例如，在RAN 2003/2004/2005中的基地台2014a和WTRU 2002a、2002b、2002c可以實施諸如通用移動電信系統（UMTS）陸地無線電存取（UTRA）之類的無線電技術，其可以使用寬頻CDMA（WCDMA）來建立空中介面2015/2016/2017。WCDMA可以包括諸如高速封包存取（HSPA）和/或演進型HSPA（HSPA+）。HSPA可以包括高速下行鏈路封包存取（HSDPA）和/或高速上行鏈路分組存取（HSUPA）。
在另一實施方式中，基地台2014a和WTRU 2002a、2002b、2002c可以實施諸如演進型UMTS陸地無線電存取（E-UTRA）之類的無線電技術，其可以使用長期演進（LTE）和/或高級LTE（LTE-A）來建立空中介面2015/2016/2017。
在一種實施方式中，基地台2014a和WTRU 2002a、2002b、2002c可以實施諸如IEEE 802.16（例如全球互通微波存取（WiMAX））、CDMA2000、CDMA2000 1x、CDMA2000 EV-DO、臨時標準2000（IS-2000）、臨時標準95（IS-95）、臨時標準856（IS-856）、全球移動通信系統（GSM）、增強型資料速率GSM演進（EDGE）、GSM EDGE（GERAN）之類的無線電技術。
舉例來講，第20A圖中的基地台2014b可以是無線路由器、家用節點B、家用e節點B或者存取點，並且可以使用任何合適的RAT，以用於促進在諸如公司、家庭、車輛、校園之類的局部區域的通信連接。在一種實施方式中，基地台2014b和WTRU 2002c、2002d可以實施諸如IEEE 802.11之類的無線電技術以建立無線區域網路（WLAN）。在一種實施方式中，基地台2014b和WTRU 2002c、2002d可以實施諸如IEEE 802.15之類的無線電技術以建立無線個人區域網路（WPAN）。在又一種實施方式中，基地台2014b和WTRU 2002c、2002d可以使用基於蜂巢的RAT（例如WCDMA、CDMA2000、GSM、LTE、LTE-A等）以建立超微型（picocell）胞元或毫微微胞元（femtocell）。如第20A圖所示，基地台2014b可以具有至網際網路2010的直接連接。因此，基地台2014b不必經由核心網路2006/2007/2009來存取網際網路2010。
RAN 2003/2004/2005可以與核心網路2006/2007/2009通信，該核心網路可以是被配置成將語音、資料、應用程式和/或網際網路協定語音（VoIP）服務提供到WTRU 2002a、2002b、2002c、2002d中的一者或多者的任何類型的網路。例如，核心網路2006/2007/2009可以提供呼叫控制、帳單服務、基於移動位置的服務、預付費呼叫、網際網路互聯、視訊分配等，和/或執行高級安全性功能，例如用戶認證。儘管第20A圖中未示出，應該理解的是RAN 2003/2004/2005和/或核心網路2006/2007/2009可以直接或間接地與其他RAN進行通信，這些其他RAT可以使用與RAN 2003/2004/2005相同的RAT或者不同的RAT。例如，除了連接到可以採用E-UTRA無線電技術的RAN 2003/2004/2005，核心網路2006/2007/2009也可以與使用GSM無線電技術的其他RAN（未顯示）通信。
核心網路2006/2007/2009也可以用作WTRU 2002a、2002b、2002c、2002d存取PSTN 2008、網際網路2010和/或其他網路2012的閘道。PSTN 2008可以包括提供普通老式電話服務（POTS）的電路交換電話網路。網際網路2010可以包括互聯電腦網路的全球系統以及使用公共通信協定的裝置，該公共通信協定例如傳輸控制協定（TCP）/網際網路協定（IP）網際網路協定套件的中的TCP、用戶資料包通訊協定（UDP）和IP。網路2012可以包括由其他服務提供方擁有和/或操作的無線或有線通信網路。例如，網路2012可以包括連接到一個或多個RAN的另一核心網路，這些RAN可以使用與RAN 2003/2004/2005相同的RAT或者不同的RAT。
通信系統2000中的WTRU 2002a、2002b、2002c、2002d中的一些或者全部可以包括多模式能力，即WTRU 2002a、2002b、2002c、2002d可以包括用於通過多個通信鏈路與不同的無線網路進行通信的多個收發器。例如，第20A圖中顯示的WTRU 2002c可以被配置成與使用基於蜂巢的無線電技術的基地台2014a進行通信，並且與使用IEEE 802無線電技術的基地台2014b進行通信。
第20B圖為示例WTRU 2002的系統框圖。如第20B圖所示，WTRU 2002可以包括處理器2018、收發器2020、發射/接收元件2022、揚聲器/麥克風2024、數字鍵盤2026、顯示器/觸控板2028、不可移除記憶體2030、可移除記憶體2032、電源2034、全球定位系統(GPS)晶片組2036和其他週邊設備2038。應該理解的是，在保持與實施方式一致的同時，WTRU 2002可以包括上述元件的任何子集。此外，實施方式涵蓋基地台2014a和2014b和/或基地台2014a和2014b可以表示的節點，諸如但不限於收發器站（BTS）、節點B、網站控制器、存取點（AP）、家用節點B、演進型家用節點B（e節點B）、家用演進型節點B（HeNB）、家用演進型節點B閘道和代理節點等其它可以包括第20B圖及此處描述的元件的一些或每一個。
處理器2018可以是通用目的處理器、專用目的處理器、常規處理器、數位訊號處理器（DSP）、多個微處理器、與DSP核心相關聯的一個或多個微處理器、控制器、微控制器、專用積體電路（ASIC）、現場可程式設計閘陣列（FPGA）電路、其他任何類型的積體電路（IC）、狀態機等。處理器2018可以執行信號編碼、資料處理、功率控制、輸入/輸出處理和/或使得WTRU 2002能夠操作在無線環境中的其他任何功能。處理器2018可以耦合到收發器2020，該收發器2020可以耦合到發射/接收元件2022。儘管第20B圖中將處理器2018和收發器2020描述為分別的組件，應該理解的是處理器2018和收發器2020可以被一起整合到電子封裝或者晶片中。
發射/接收元件2022可以被配置成通過空中介面2015/2016/2017將信號發送到基地台（例如基地台2014a），或者從基地台（例如基地台2014a）接收信號。例如，在一種實施方式中，發射/接收元件2022可以是被配置成發送和/或接收RF信號的天線。在一種實施方式中，發射/接收元件2022可以是被配置成發送和/或接收例如IR、UV或者可見光信號的發射器/檢測器。在又一實施方式中，發射/接收元件2022可以被配置成發送和接收RF信號和光信號兩者。應該理解的是發射/接收元件2022可以被配置成發送和/或接收無線信號的任意組合。
此外，儘管發射/接收元件2022在第20B圖中被描述為單個元件，但是WTRU 2002可以包括任何數量的發射/接收元件2022。更特別地，WTRU 2002可以使用MIMO技術。因此，在一種實施方式中，WTRU 2002可以包括兩個或更多個發射/接收元件2022（例如多個天線）以用於通過空中介面2015/2016/2017發射和接收無線信號。
收發器2020可以被配置成對將由發射/接收元件2022發送的信號進行調變，並且被配置成對由發射/接收元件2022接收的信號進行解調。如以上所述，WTRU 2002可以具有多模式能力。因此，收發器2020可以包括多個收發器以用於使得WTRU 2002能夠經由多RAT進行通信，例如UTRA和IEEE 802.11。
WTRU 2002的處理器2018可以被耦合到揚聲器/麥克風2024、數字鍵盤2026和/或顯示器/觸控板2028（例如，液晶顯示（LCD）單元或者有機發光二極體（OLED）顯示單元），並且可以從上述裝置接收用戶輸入資料。處理器2018還可以向揚聲器/麥克風2024、數字鍵盤2026和/或顯示器/觸控板2028輸出資料。此外，處理器2018可以存取來自任何類型的合適的記憶體中的資訊，以及向任何類型的合適的記憶體中儲存資料，該記憶體例如可以是不可移除記憶體2030和/或可移除記憶體2032。不可移除記憶體2030可以包括隨機存取記憶體（RAM）、可讀記憶體（ROM）、硬碟或者任何其他類型的記憶體儲存裝置。可移除記憶體2032可以包括訂戶身份模組（SIM）卡、記憶棒、安全數位（SD）記憶卡等類似裝置。在一種實施方式中，處理器2018可以存取來自實體上未位於WTRU 2002上而位於伺服器或者家用電腦（未示出）上的記憶體的資料，以及向上述記憶體儲存資料。
處理器2018可以從電源2034接收電力，並且可以被配置成將電力分配給WTRU 2002中的其他組件和/或對至WTRU 2002中的其他元件的功率進行控制。電源2034可以是任何適用於給WTRU 2002加電的裝置。例如，電源2034可以包括一個或多個乾電池（鎳鎘（NiCd）、鎳鋅（NiZn）、鎳氫（NiMH）、鋰離子（Li-ion）等）、太陽能電池、燃料電池等。
處理器2018還可以耦合到GPS晶片組2036，該GPS晶片組2036可以被配置成提供關於WTRU 2002的當前位置的位置資訊（例如經度和緯度）。WTRU 2002可以通過空中介面2015/2016/2017從基地台（例如基地台2014a、2014b）接收加上或取代GPS晶片組2036資訊之位置資訊，和/或基於從兩個或更多個相鄰基地台接收到的信號的定時來確定其位置。應該理解的是，在保持與實施方式一致的同時，WTRU 2002可以通過任何合適的位置確定方法來獲取位置資訊。
處理器2018還可以耦合到其他週邊設備2038，該週邊設備2038可以包括提供附加特徵、功能性和/或無線或有線連接的一個或多個軟體和/或硬體模組。例如，週邊設備2038可以包括加速度計、電子指南針（e-compass）、衛星收發器、數碼相機（用於照片或者視訊）、通用序列匯流排（USB）埠、震動裝置、電視收發器、免持耳機、藍芽®模組、調頻（FM）無線電單元、數位音樂播放機、媒體播放機、視訊遊戲播放機模組、網際網路瀏覽器等等。
第20C圖為根據實施方式的RAN 2003和核心網路2006的系統圖。如以上所述，RAN 2003可以利用UTRA無線電技術通過空中介面2015與WTRU 2002a、2002b、2002c通信。RAN 2003還可以與核心網路2006通信。如第20C圖所示，RAN 2003可以包含節點B 2040a、2040b、2040c，其中節點B 2040a、2040b、2040c每個可以包含一個或多個收發器，該收發器通過空中介面2015來與WTRU 2002a、2002b、2002c通信。節點B 2040a、2040b、2040c中的每個可以與RAN 2003範圍內的特定單元（未示出）相關聯。RAN 2003還可以包括RNC 2042a、2042b。應該理解的是RAN 2003可以包含任意數量的節點B和RNC而仍然與實施方式保持一致。
如第20C圖所示，節點B 2040a、2040b可以與RNC 2042a進行通信。此外，節點B 2040c可以與RNC 2042b進行通信。節點B 2040a、2040b、2040c可以通過Iub介面與對應的RNC 2042a、2042b進行通信。RNC 2042a、2042b可以通過Iur介面相互進行通信。RNC 2042a、2042b可以分別被配置成控制與其連接的對應的節點B 2040a、2040b、2040c。此外，RNC 2042a、2042b可以分別被配置成實施或者支援其它功能，諸如外環功率控制、負載控制、准許控制、封包排程、切換控制、宏分集、安全性功能、資料加密等等。
第20C圖中所示的核心網路2006可以包括媒體閘道（MGW）2044、移動交換中心（MSC）2046、服務GPRS支援節點（SGSN）2048，和/或閘道GPRS支持節點（GGSN）2050。儘管上述元素中的每個被描述為核心網路2006的一部分，但是應該理解的是這些元素中的任何一個可以被除了核心網路營運商以外的實體擁有和/或營運。
RAN 2003中的RNC 2042a可以通過IuCS介面被連接至核心網路2006中的MSC 2046。MSC 2046可以被連接至MGW 2044。MSC 2046和MGW 2044可以向WTRU 2002a、2002b、2002c提供至電路切換式網路（例如PSTN 2008）的存取，從而便於WTRU 2002a、2002b、2002c與傳統陸線通信裝置之間的通信。
RAN 2003中的RNC 2042a還可以通過IuPS介面被連接至核心網路2006中的SGSN 2048。SGSN 2048可以被連接至GGSN 2050。SGSN 2048和GGSN 2050 可以向WTRU 2002a、2002b、2002c提供至封包交換網路（例如網際網路2010）的存取，從而便於WTRU 2002a、2002b、2002c與IP賦能裝置之間的通信。
如以上所述，核心網路2006還可以連接至其它網路2012，其中該其它網路2012可以包含被其他服務提供者擁有和/或營運的其他有線或無線網路。
第20D圖為根據實施方式的RAN 2004和核心網路2007的系統框圖。如上所述，RAN 2004可以使用E-UTRA無線電技術通過空中介面2016與WTRU 2002a、2002b和2002c進行通信。RAN 2004還可以與核心網路2007進行通信。
RAN 2004可以包括e節點B 2060a、2060b、2060c，儘管應該理解的是RAN 2004可以包含任意數量的e節點B而仍然與實施方式保持一致。e節點B 2060a、2060b、2060c每個可以包含一個或多個收發器，該收發器通過空中介面2016來與WTRU 2002a、2002b，2002c通信。在一種實施方式中，e節點B 2060a、2060b、2060c可以使用MIMO技術。由此，例如e節點B 2060a可以使用多個天線來傳送無線信號至WTRU 2002a並且從WTRU 2002a中接收無線資訊。
e節點B 2060a、2060b、2060c中的每個可以與特定胞元（未示出）相關聯並且可以被配置成在上行鏈路和/或下行鏈路中處理無線電資源管理決定、移交決定、用戶排程。如第20D圖中所示，e節點B 2060a、2060b、2060c可以通過X2介面彼此進行通信。
第20D圖中所示的核心網路2007可以包括移動性管理閘道（MME）2062、服務閘道2064和封包資料網路（PDN）閘道2066。儘管上述元素中的每個被描述為核心網路2007的一部分，但是應該理解的是這些元素中的任何一個可以被除了核心網路營運商以外的實體擁有和/或營運。
MME 2062可以通過S1介面被連接到RAN 2004中的e節點B 2060a、2060b、2060c中的每個並且可以作為控制節點。例如，MME 2062可以負責認證WTRU 2002a、2002b、2002c的用戶、承載啟動/去啟動、在WTRU 2002a、2002b、2002c的初始連接期間選擇特定服務閘道，等等。MME 2062也可以為RAN 2004與使用其他無線電技術（例如GSM或WCDMA）的RAN（未示出）之間的交換提供控制平面功能。
服務閘道2064可以通過S1介面被連接到RAN 2004中的e節點B 2060a、2060b、2060c的每個。服務閘道2064通常可以路由和轉發用戶資料封包至WTRU 2002a、2002b、2002c，或者路由和轉發來自WTRU 2002a、2002b、2002c的用戶資料封包。服務閘道2064也可以執行其他功能，例如在e節點B間切換期間錨定用戶平面、當下行鏈路資料可用於WTRU 2002a、2002b、2002c時觸發傳呼、為WTRU 2002a、2002b、2002c管理和儲存上下文等等。
服務閘道2064也可以被連接到PDN閘道2066，該閘道2066可以向WTRU 2002a、2002b、2002c提供至封包交換網路（例如網際網路2010）的存取，從而便於WTRU 2002a、2002b、2002c與IP賦能裝置之間的通信。
核心網路2007可以促進與其他網路之間的通信。例如，核心網路2007可以向WTRU 2002a、2002b、2002c提供至電路切換式網路（例如PSTN 2008）的存取，從而便於WTRU 2002a、2002b、2002c與傳統陸線通信裝置之間的通信。例如，核心網路2007可以包括，或可以與下述通信：作為核心網路2007和PSTN 2008之間介面的IP閘道（例如，IP多媒體子系統（IMS）服務）。另外，核心網路2007可以向提供WTRU 2002a、2002b、2002c至網路2012的存取，該網路2012可以包含被其他服務提供者擁有和/或營運的其他有線或無線網路。
第20E圖為根據實施方式的RAN 2005和核心網路2009的系統圖。RAN 2005可以為使用IEEE802.16無線電技術通過空中介面2017與WTRU 2002a、2002b、2002c進行通信的存取服務網路（ASN）。如此處所描述，WTRU 2002a、2002b、2002c、RAN 2005和核心網路2009之間的不同功能實體之間的通信線路可以被定義為參考點。
如第20E圖所示，RAN 2005可以包括基地台2080a、2080b、2080c和ASN 閘道2082，儘管應該理解的是RAN 2005可以包含任意數量的基地台和ASN閘道而仍然與實施方式保持一致。基地台 2080a、2080b、2080c分別與RAN 2005中的特定胞元（未示出）相關聯，並且可以分別包括一個或多個收發器，該收發器通過空中介面2017來與WTRU 2002a、2002b、2002c通信。在一種實施方式中，基地台2080a、2080b、2080c可以使用MIMO技術。由此，例如基地台2080a可以使用多個天線來傳送無線信號至WTRU 2002a並且從WTRU 2002a中接收無線資訊。基地台2080a、2080b、2080c還可以提供移動性管理功能，例如切換觸發、隧道建立、無線電資源管理、訊務分類、服務品質（QoS）策略執行，等等。ASN閘道2082可以作為訊務彙聚點且可以負責用戶設定檔的傳呼、快取、路由到核心網路2009，等等。
WTRU 2002a、2002b、2002c與RAN 2005之間的空中介面2017可以被定義為執行IEEE 802.16規範的R1參考點。另外，WTRU 2002a、2002b、2002c中的每個可以建立與核心網路2009的邏輯介面（未示出）。WTRU 2002a、2002b、2002c與核心網路2009間的邏輯介面可以被定義為R2參考點，可以被用來認證、授權、IP主機配置管理、和/或移動管理。
基地台2080a、2080b、2080c中的每個之間的通信鏈路可以被定義為包括用於便於WTRU切換和基地台之間的資料傳輸的協定的R8參考點。基地台2080a、2080b、2080c和ASN閘道2082之間的通信鏈路可以被定義為R6參考點。R6參考點可以包括用於便於基於與每個WTRU 2002a、2002b、2002c相關的移動事件的移動管理的協定。
如第20E圖所示，RAN 2005可以被連接到核心網路2009。RAN 2005和核心網路2009之間的通信鏈路可以被定義為例如包括用於便於資料傳輸和移動管理能力的協定的R3參考點。核心網路2009可以包括移動IP本地代理（MIP-HA）2084，認證、授權、計費（AAA）伺服器2086和閘道2088。儘管每個上述元素被描述為核心網路2009的一部分，但是應該理解的是這些元素中的任意一個可以被除了核心網路營運商以外的實體擁有和/或營運。
MIP-HA 可以負責IP位址管理，且可以使得WTRU 2002a、2002b、2002c在不同的ASN和/或不同的核心網路之間漫遊。MIP-HA 2084可以向WTRU 2002a、2002b、2002c提供至封包交換網路（例如網際網路2010）的存取，從而便於WTRU 2002a、2002b、2002c和IP賦能裝置之間的通信。AAA伺服器2086可以負責用戶認證和支援用戶服務。閘道2088可以促進與其他網路之間的交互工作。例如，閘道2088可以向WTRU 2002a、2002b、2002c提供至電路切換式網路（例如PSTN 2008）的存取，從而便於WTRU 2002a、2002b、2002c與傳統陸線通信裝置之間的通信。另外，閘道2088可以向WTRU 2002a、2002b、2002c提供至網路2012的存取，該網路2012可以包含被其他服務提供者擁有和/或營運的其他有線或無線網路。
雖然在第20E圖中未示出，但應該理解的是RAN 2005可以被連接到其他ASN且核心網路2009可以被連接到其他核心網路。RAN 2005和其他ASN之間的通信鏈路可以被定義為R4參考點，該R4參考點可以包括用於協調RAN 2005和其他ASN之間的WTRU 2002a、2002b、2002c移動性的協定。核心網路2009和其他核心網路之間的通信鏈路可以被定義為R5參考點，該R5參考點可以包括用於便於本地核心網路和受訪核心網路之間的交互工作的協定。
以上描述的流程可以在由電腦或處理器執行的電腦程式、軟體或韌體中實施，其中該電腦程式、軟體或韌體被包含在電腦可讀儲存媒體中。電腦可讀媒體的實例包括電子信號（通過有線或者無線連接而傳送）和電腦可讀儲存媒體。關於電腦可讀儲存媒體的實例包括但不侷限於唯讀記憶體（ROM）、隨機存取記憶體（RAM）、暫存器、快取記憶體、半導體存放裝置、磁媒體（例如，內部硬碟或抽取式磁碟）、磁光媒體以及CD-ROM光碟和數位多功能光碟（DVD）之類的光媒體。與軟體有關的處理器可以被用於實施在WTRU、UE、終端、基地台、RNC或者任何主機電腦中使用的無線電頻率收發器。
 
BL‧‧‧基層
BLT‧‧‧在時間T的基層重構畫面
EL‧‧‧增強層
ELT‧‧‧在時間T的增強層重構畫面
ILT‧‧‧在時間T的層間畫面
T‧‧‧時間
1000‧‧‧圖式
1002‧‧‧BL畫面BLX
1004‧‧‧IL差分畫面ILX
1006‧‧‧EL畫面ELX
1008‧‧‧BL畫面BLT
1010‧‧‧IL參考畫面ILT
1012‧‧‧EL畫面ELT
1014‧‧‧BL參考畫面
1016‧‧‧IL差分畫面
1018‧‧‧EL參考畫面
1020‧‧‧BL塊B(BLX)
1022‧‧‧差分塊MC(ILDX,MVILDX)
1024‧‧‧EL塊B(ELX)
1026、1028、1030‧‧‧塊B(BLT)
1032‧‧‧運動向量MVBLX

Claims (20)

  1. 【第1項】
    一種視訊裝置，該裝置包括：
    一處理器，被配置成：
    基於與由第二時間實例表徵的一第二基層畫面相關聯的基層運動資訊確定一第一時間實例；
    從由該第一時間實例表徵的一增強層畫面的一塊中減去由該第一時間實例表徵的一第一基層畫面的塊以生成由該第一時間實例表徵的一差分塊；
    在該差分塊上執行運動補償；以及
    將運動補償後的差分塊添加到由該第二時間實例表徵的該第二基層畫面的一塊上以生成由該第二時間實例表徵的一增強型層間參考（E-ILR）塊。
  2. 【第2項】
    如申請專利範圍第1項所述的裝置，其中該第一層畫面的該塊是該第一基層畫面的一上採樣塊，以及其中該第二基層畫面的該塊是該第二基層畫面的一上採樣塊。
  3. 【第3項】
    如申請專利範圍第1項所述的裝置，其中該處理器被配置成在將該運動補償後的差分塊添加到該第二基層畫面的該塊上以生成該E-ILR塊之前將該運動補償後的差分塊乘以一權重。
  4. 【第4項】
    如申請專利範圍第3項所述的裝置，其中該權重大於或等於零且小於或等於1。
  5. 【第5項】
    如申請專利範圍第1項所述的裝置，其中該處理器被配置成在將該運動補償後的差分塊添加到該第二基層畫面的該塊上以生成該E-ILR塊之前給該運動補償後的差分塊添加一偏移。
  6. 【第6項】
    如申請專利範圍第1項所述的裝置，其中該運動補償使用與該第二基層畫面之該塊相關聯的該基層運動資訊在該差分塊上執行。
  7. 【第7項】
    如申請專利範圍第6項所述的裝置，其中該基層運動資訊包括一運動資訊類別和一運動向量中的一者或多者。
  8. 【第8項】
    如申請專利範圍第1項所述的裝置，其中該處理器被配置成生成包括該E-ILR塊的由該第二時間實例表徵的一E-ILR畫面。
  9. 【第9項】
    如申請專利範圍第8項所述的裝置，其中該處理器被配置成使用該E-ILR畫面來預測由該第二時間實例表徵的一增強層畫面。
  10. 【第10項】
    一種視訊裝置，該裝置包括：
    一處理器，被配置成：
    基於與由一第二時間實例表徵的一第二基層畫面相關聯的基層運動資訊確定第一時間實例；
    從該第二基層畫面的一塊中減去由該第一時間實例表徵的一第一基層畫面的一運動補償後的塊以生成一剩餘塊；
    將該剩餘塊添加到由該第一時間實例表徵的一增強層畫面的一運動補償後的塊以生成由該第二時間實例表徵的一增強型層間參考（E-ILR）塊。
  11. 【第11項】
    如申請專利範圍第10項所述的裝置，其中該第一基層畫面的該塊是該第一基層畫面的一上採樣塊，以及其中該第二基層畫面的該塊是該第二基層畫面的一上採樣塊。
  12. 【第12項】
    如申請專利範圍第10項所述的裝置，其中該處理器被配置成在將該剩餘塊添加到該增強層畫面的該運動補償後的塊以生成該E-ILR塊之前將該剩餘塊乘以一權重。
  13. 【第13項】
    如申請專利範圍第10項所述的裝置，其中該處理器被配置成在將該剩餘塊添加到該增強層畫面的該運動補償後的塊以生成該E-ILR塊之前給該剩餘塊添加一偏移。
  14. 【第14項】
    如申請專利範圍第10項所述的裝置，其中該處理器被配置成使用與該第二基層畫面之該塊相關聯的該基層運動資訊在該第一基層畫面的一塊上執行運動補償來生成該第一基層畫面的該運動補償後的塊。
  15. 【第15項】
    如申請專利範圍第10項所述的裝置，其中該處理器被配置成生成包括該E-ILR塊的由該第二時間實例表徵的一E-ILR畫面。
  16. 【第16項】
    如申請專利範圍第15項所述的裝置，其中該處理器被配置成使用該E-ILR畫面來預測由該第二時間實例表徵的一增強層畫面。
  17. 【第17項】
    一種視訊裝置，該裝置包括：
    一處理器，被配置成：
    基於與由第三時間實例表徵的一第三基層畫面相關聯的第一基層運動資訊確定一第一時間實例；
    基於與由該第三時間實例表徵的該第三基層畫面相關聯的第二基層運動資訊確定一第二時間實例；以及
    使用由該第一時間實例表徵的一第一基層畫面的一塊和由該第二時間實例表徵的一第二基層畫面的一塊來生成由該第三時間實例表徵的一增強型層間參考（E-ILR）塊。
  18. 【第18項】
    如申請專利範圍第17項所述的裝置，其中該被配置成生成該E-ILR塊的該處理器包括如下該被配置的處理器：
    將該第一基層畫面的該塊添加到該第二基層畫面的該塊以創建一組合基層塊；
    將該組合基層塊除以二以生成一平均基層塊；
    將由該第一時間實例表徵的一第一增強層畫面的一塊添加到由該第二時間實例表徵的一第二增強層畫面的一塊以創建一組合增強層塊；
    將該組合增強層塊除以二以生成一平均增強層塊；
    從該平均增強層塊中減去該平均基層塊以生成一差分塊；以及
    將該差分塊添加到該第三基層畫面的一塊以生成該E-ILR塊。
  19. 【第19項】
    如申請專利範圍第18項所述的裝置，其中該第一基層畫面的該塊是該第一基層畫面的一上採樣塊，其中該第二基層畫面的該塊是該第二基層畫面的一上採樣塊，以及其中該第三基層畫面的該塊是該第三基層畫面的一上採樣塊。
  20. 【第20項】
    如申請專利範圍第18項所述的裝置，其中該處理器被配置成在將該差分塊添加到該第三基層畫面的該塊以生成該E-ILR塊之前，將該差分塊乘以一權重。
TW103112667A 2013-04-05 2014-04-07 多層視訊編碼層間參考畫面增強 TW201511526A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361809115P 2013-04-05 2013-04-05
US201361812687P 2013-04-16 2013-04-16
US201361845318P 2013-07-11 2013-07-11

Publications (1)

Publication Number Publication Date
TW201511526A true TW201511526A (zh) 2015-03-16

Family

ID=50733377

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103112667A TW201511526A (zh) 2013-04-05 2014-04-07 多層視訊編碼層間參考畫面增強

Country Status (7)

Country Link
US (1) US10708605B2 (zh)
EP (2) EP2982117B1 (zh)
JP (2) JP6360154B2 (zh)
KR (2) KR101915156B1 (zh)
CN (2) CN105122805B (zh)
TW (1) TW201511526A (zh)
WO (1) WO2014165721A1 (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2997732A1 (en) * 2013-05-15 2016-03-23 VID SCALE, Inc. Single loop decoding based inter layer prediction
FR3008840A1 (fr) * 2013-07-17 2015-01-23 Thomson Licensing Procede et dispositif de decodage d'un train scalable representatif d'une sequence d'images et procede et dispositif de codage correspondants
US20150195549A1 (en) * 2014-01-08 2015-07-09 Qualcomm Incorporated Support of non-hevc base layer in hevc multi-layer extensions
US10390087B2 (en) 2014-05-01 2019-08-20 Qualcomm Incorporated Hypothetical reference decoder parameters for partitioning schemes in video coding
US20160064039A1 (en) * 2014-08-26 2016-03-03 Microsoft Corporation Thumbnail Generation
US20190191191A1 (en) * 2017-12-19 2019-06-20 Western Digital Technologies, Inc. Hybrid techniques for content distribution with edge devices
US10742736B2 (en) 2017-12-19 2020-08-11 Western Digital Technologies, Inc. Integrated erasure coding for data storage and transmission
US10720124B2 (en) * 2018-01-15 2020-07-21 Microsoft Technology Licensing, Llc Variable pixel rate display interfaces
US11544830B2 (en) 2018-01-23 2023-01-03 Imax Corporation Enhancing image data with appearance controls
WO2019168673A1 (en) * 2018-02-27 2019-09-06 Magic Leap, Inc. Matching meshes for virtual avatars
KR102030630B1 (ko) * 2018-04-30 2019-11-08 서울과학기술대학교 산학협력단 하이브리드 망 기반의 스테레오스코픽 3차원 360도 가상 현실 서비스 제공 시스템
BR112021006706A2 (pt) * 2018-10-09 2021-07-27 V-Nova International Limited decodificador de aprimoramento para sinais de vídeo com melhoria de múltiplos níveis e ajuste de formato de codificação
WO2020084506A1 (en) 2018-10-23 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Harmonized local illumination compensation and intra block copy coding
CN116939198A (zh) 2018-10-23 2023-10-24 北京字节跳动网络技术有限公司 并置的局部照明补偿和修改的帧间预测编解码
US20200186795A1 (en) * 2018-12-07 2020-06-11 Beijing Dajia Internet Information Technology Co., Ltd. Video coding using multi-resolution reference picture management
CN113475072B (zh) * 2019-03-04 2023-12-15 北京字节跳动网络技术有限公司 视频处理中滤波信息的信令
CN111726632B (zh) * 2019-03-18 2022-08-26 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
US20230052774A1 (en) * 2019-12-05 2023-02-16 Electronics And Telecommunications Research Institute Method, apparatus, and recording medium for region-based differential image encoding/decoding
US11677934B2 (en) * 2021-09-24 2023-06-13 Apple Inc. Encoding and decoding video content

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3788823B2 (ja) * 1995-10-27 2006-06-21 株式会社東芝 動画像符号化装置および動画像復号化装置
JP2002315004A (ja) * 2001-04-09 2002-10-25 Ntt Docomo Inc 画像符号化方法及び装置、画像復号方法及び装置、並びに画像処理システム
US7903742B2 (en) 2002-07-15 2011-03-08 Thomson Licensing Adaptive weighting of reference pictures in video decoding
WO2006006793A1 (en) * 2004-07-15 2006-01-19 Samsung Electronics Co., Ltd. Video encoding and decoding methods and video encoder and decoder
DE102004059993B4 (de) 2004-10-15 2006-08-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Bewegungsdaten-Prädiktion sowie Computerprogramm und computerlesbares Medium
KR100746006B1 (ko) * 2005-07-19 2007-08-06 삼성전자주식회사 계층적 구조에 적합하게 시간적 다이렉트 모드로인코딩하며, 디코딩하는 방법 및 장치
JP2009512306A (ja) 2005-10-11 2009-03-19 ノキア コーポレイション スケーラブルビデオコーディングのためのデコードされたピクチャーの効率的なバッファマネージメント
JP5587552B2 (ja) * 2005-10-19 2014-09-10 トムソン ライセンシング スケーラブル映像符号化を用いた多視点映像符号化
WO2007080480A2 (en) 2006-01-09 2007-07-19 Nokia Corporation Error resilient mode decision in scalable video coding
EP1933563A1 (en) * 2006-12-14 2008-06-18 Thomson Licensing Method and apparatus for encoding and/or decoding bit depth scalable video data using adaptive enhancement layer residual prediction
US8711948B2 (en) * 2008-03-21 2014-04-29 Microsoft Corporation Motion-compensated prediction of inter-layer residuals
JP5044518B2 (ja) * 2008-09-17 2012-10-10 株式会社東芝 画像処理装置及びコンピュータ端末
WO2010044757A1 (en) * 2008-10-17 2010-04-22 Agency For Science, Technology And Research Method for encoding a digital picture, encoder, and computer program element
EP2394432A4 (en) * 2009-02-03 2016-12-14 Thomson Licensing METHODS AND APPARATUS FOR MOTION COMPENSATION WITH SMOOTH REFERENCE IMAGE IN BIT DEPTH EXTENSIBILITY
EP3001683A3 (en) * 2011-04-15 2016-04-06 SK Planet Co., Ltd. High speed scalable video coding device and method using multi-track video
GB2492396A (en) * 2011-06-30 2013-01-02 Canon Kk Decoding a Scalable Video Bit-Stream
JP5830993B2 (ja) 2011-07-14 2015-12-09 ソニー株式会社 画像処理装置及び画像処理方法
JP2013042225A (ja) * 2011-08-11 2013-02-28 Jvc Kenwood Corp 動画像復号装置、動画像復号方法及び動画像復号プログラム
CN110035286B (zh) 2012-07-09 2021-11-12 Vid拓展公司 用于多层视频编码的编解码器架构
US9357211B2 (en) * 2012-12-28 2016-05-31 Qualcomm Incorporated Device and method for scalable and multiview/3D coding of video information
US20140254681A1 (en) * 2013-03-08 2014-09-11 Nokia Corporation Apparatus, a method and a computer program for video coding and decoding

Also Published As

Publication number Publication date
JP2018174566A (ja) 2018-11-08
EP2982117B1 (en) 2018-07-25
EP3410715A1 (en) 2018-12-05
US10708605B2 (en) 2020-07-07
JP6360154B2 (ja) 2018-07-18
JP2016535465A (ja) 2016-11-10
KR20150140744A (ko) 2015-12-16
KR102118524B1 (ko) 2020-06-09
CN110855994B (zh) 2023-09-19
KR20180120788A (ko) 2018-11-06
CN105122805A (zh) 2015-12-02
US20160065976A1 (en) 2016-03-03
CN105122805B (zh) 2019-10-15
CN110855994A (zh) 2020-02-28
EP2982117A1 (en) 2016-02-10
KR101915156B1 (ko) 2018-11-06
WO2014165721A1 (en) 2014-10-09
JP6592145B2 (ja) 2019-10-16

Similar Documents

Publication Publication Date Title
JP6592145B2 (ja) 多重レイヤビデオコーディングに対するインターレイヤ基準画像エンハンスメント
US10841615B2 (en) Systems and methods for model parameter optimization in three dimensional based color mapping
JP6574223B2 (ja) 複数レイヤビデオ符号化のためのコーデックアーキテクチャ
US11109044B2 (en) Color space conversion
KR101786414B1 (ko) 보간을 이용하는 루마 및 크로마의 위상 정렬을 위한 컬러 색역 스케일러블 비디오 코딩 디바이스 및 방법
JP2019068451A (ja) ３ｄルックアップテーブル符号化に色域スケーラビリティを提供するシステムおよび方法
US20190014333A1 (en) Inter-layer prediction for scalable video coding
EP2997732A1 (en) Single loop decoding based inter layer prediction