TW201642653A - 高動態範圍視訊編碼色度增強濾波 - Google Patents

高動態範圍視訊編碼色度增強濾波 Download PDF

Info

Publication number
TW201642653A
TW201642653A TW105111986A TW105111986A TW201642653A TW 201642653 A TW201642653 A TW 201642653A TW 105111986 A TW105111986 A TW 105111986A TW 105111986 A TW105111986 A TW 105111986A TW 201642653 A TW201642653 A TW 201642653A
Authority
TW
Taiwan
Prior art keywords
plane
filter
sample
image
cross
Prior art date
Application number
TW105111986A
Other languages
English (en)
Inventor
何玉文
葉言
Original Assignee
Vid衡器股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid衡器股份有限公司 filed Critical Vid衡器股份有限公司
Publication of TW201642653A publication Critical patent/TW201642653A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

可以在高動態範圍(HDR)視訊中使用色度增強濾波。視訊編碼裝置可以識別視訊訊號的圖像內的特性。特性可以包括空間區域、顏色、亮度或邊緣方向。視訊編碼裝置可以確定包括與特性相關聯的一個或多個樣本的樣本集。視訊編碼裝置可以基於特性和樣本集產生跨平面濾波器。跨平面濾波器可以包括高通濾波器。視訊編碼裝置可以將跨平面濾波器應用到樣本集中的樣本的亮度平面分量以確定偏移。視訊編碼裝置可以將偏移添加到與亮度平面分量對應的該樣本的重建色度平面分量。

Description

高動態範圍視訊編碼色度增強濾波
視訊編碼系統可以用於壓縮數位視訊信號。例如,視訊編碼系統可以減少消耗的儲存空間及/或降低與視訊訊號相關聯的傳輸頻寬消耗。例如,基於區塊的混合視訊編碼系統可以被使用。
數位視訊信號可以包括三種顏色平面。該三種顏色平面包括亮度平面、藍色差色度平面和紅色差色度平面。色度平面的像素可以具有比亮度平面的像素小的動態範圍。例如,視訊影像的色度平面可以比視訊影像的亮度平面更平順及/或具有更少細節。視訊影像的色度區塊可以更容易預測(例如精確預測)。例如,色度區塊的預測可以消耗更少的資源及/或導致更少的預測誤差。
高動態範圍(HDR)視訊可以提供比標準動態範圍(SDR)視訊更寬的動態範圍。HDR視訊的動態範圍可以更接近人眼的能力。HDR視訊中的色度假影在較亮的背景下比SDR視訊中的色度假影更可見。HDR視訊編碼可以包括預處理、編碼、解碼及/或後處理。
可以提供系統、方法和機構來實施用於HDR視訊編碼的色度增強濾波。視訊編碼裝置可以識別視訊訊號的圖像內的特性。視訊編碼裝置可以基於識別該特性的所接收的指示來識別該特性。特性可以包括空間區域、顏色、亮度或邊緣方向。視訊編碼裝置可以識別圖像內的多個特性。視訊編碼裝置可以確定包括與特性相關聯的一個或多個樣本的樣本集。例如,當特性包括空間區域時,樣本集可以包括該圖像的空間區域內的樣本。作為另一示例,當特性包括顏色時,樣本集可以包括該圖像內匹配該顏色的樣本(例如在預定顏色範圍內)。作為另一示例,當特性包括亮度時,樣本集可以包括圖像內具有預定亮度範圍內的亮度值的樣本。作為另一示例,當特性包括邊緣方向時,樣本集可以包括該圖像內具有匹配邊緣方向的主要邊緣方向的樣本。樣本集可以基於該多個特性來確定。
視訊編碼裝置可以基於特性和樣本集來產生跨平面濾波器。該跨平面濾波器可以包括高通濾波器。視訊編碼裝置可以基於經由補充增強資訊(SEI)訊息接收一個或多個跨平面濾波器參數來產生跨平面濾波器。視訊編碼裝置可以將該跨平面濾波器應用到樣本集中的樣本的亮度平面分量以確定偏移。視訊編碼裝置可以將該偏移添加到與亮度平面分量對應的該樣本的重建色度平面分量。亮度平面分量和重建色度平面分量可以具有不同的空間維度(spatial dimension)。亮度平面分量和重建色度平面分量可以具有相同的空間維度。重建色度平面分量可以是第一重建色度平面分量。視訊編碼裝置可以將該偏移添加到該樣本的第二重建色度平面分量。視訊編碼裝置可以將該跨平面濾波器應用到樣本集中的一個或多個樣本中的每一個樣本的亮度平面分量。
跨平面濾波器可以被產生以用於樣本集。跨平面濾波器可以包括一個或多個高通濾波器。一個或多個跨平面濾波器參數可以被確定。一個或多個跨平面濾波器參數可以與跨平面濾波器相關聯。一個或多個跨平面濾波器參數可以被編碼到與視訊訊號相關聯的位元流中。一個或多個跨平面濾波器參數可以包括縮放因數、一個或多個跨平面濾波器係數、移位參數、色度增強指示和色度分量指示中的一者或多者。色度增強指示可以表明是否將跨平面濾波器應用到色度分量。
現在參考圖式來描述示意性實施方式的詳細描述。雖然此描述提供了可能實施的詳細示例,應當理解這些細節旨在示意性而絕不限定本申請案的範圍。
各種數位視訊壓縮技術已經被開發並被標準化以實現有效數位視訊通信、分配和消耗。例如,部署的標準(例如,H.261、MPEG-1、MPEG-2、H.263、MPEG-4部分2和H.264/MPEG-4部分10 AVC)已經由ISO/IEC及/或ITU-T開發。作為另一個示例,高效率視訊編碼(HEVC)標準已經由ITU-T視訊編碼專家組(VCEG)和ISO/IEC移動圖像專家組(MPEG)聯合開發。
數位視訊服務可以涉及經由衛星、電纜及/或陸地廣播頻道的TV服務以及經由智慧型電話、平板電腦及/或個人電腦的視訊應用(例如,視訊聊天、行動視訊記錄和共用及/或視訊流)。視訊應用可以在異質環境中發送或接收視訊。例如,稱為考慮不同消費者裝置(例如,PC、智慧型電話、平板電腦、TV)的3螢幕或N螢幕的情形必須適應在計算能力、記憶體/儲存尺寸、顯示解析度、顯示訊框率、顯示色域等方面具有寬變化能力的裝置上的視訊消費。網路及/或傳輸頻道可以在封包丟失率、可用頻道頻寬、叢發誤差率等方面具有變化的特性。視訊資料可以經由有線網路和無線網路的組合被傳送,這可以進一步使基礎傳輸頻道特性複雜。可縮放視訊編碼可以改善經由異質網路在具有不同能力的裝置上運行的視訊應用的體驗品質。可縮放視訊編碼可以用最高表現(例如時間解析度、空間解析度、品質等)編碼視訊訊號。可縮放視訊編碼可以實現從視訊流的子集進行解碼(例如,取決於在特定用戶端裝置上運行的某些應用所需的特定速率和表現)。與非可縮放視訊編碼相比,可縮放視訊編碼可以降低對骨幹網路頻寬及/或儲存的使用。國際視訊標準MPEG-2視訊、H.263、MPEG4視覺和H.264包括支援一些縮放性模式的工具及/或設定檔(profile)。
ITU-R公佈的ITU-R BT.2020規範定義了用於超高解析度TV(UHDTV)應用的視訊格式。如表1所示,與在ITU-R BT.709中定義的高解析度TV(HDTV)視訊格式相比,UHDTV支援更大的空間解析度(例如高達4Kx2K (3840x2160) 和8Kx4K (7680x4320)的解析度)、更高的訊框率(例如高達120Hz)、更高的樣本位元度(例如10位元或12位元)以及更寬的色域。使用BT.2020提供的高保真視訊訊號可以改善用戶體驗。 表1
第1圖是示出BT.709色域(例如內三角形)、P3色域(例如中間三角形)以及BT.2020色域(例如外三角形)的圖,它們覆蓋有CIE 1931顏色空間色度(例如馬蹄形)。馬蹄形可以代表可見顏色(例如人眼可見)的範圍。BT.709色域和BT.2020色域可以分別覆蓋CIE 1931的大約36%和76%。當與能夠在BT.709(HD)顯示上再現的顏色量(color volume)相比時,BT.2020顯示可以增加可再現顏色的量並可以向消費者顯示更生動和更豐富的顏色。P3色域可以在數位電影應用中被使用。
消費者電子裝置中的觀看體驗品質可以用新視訊技術(例如空間解析度從HD改變到UHD;訊框率從60Hz改變到100/120Hz;立體/多視角也被增強;色域從BT.709改變到P3/BT.2020而變得更寬;等等)來改善。
動態範圍可以被定義為在實景或渲染裝置中感知或補獲的最小和最大亮度之間的比。動態範圍可以根據‘光圈級數(f-stop)’或‘光圈數(f-number)’來測量。一個光圈級數可以對應於信號動態範圍的兩倍。亮度可以用每平方公尺燭光(cd)為單位來測量,其也可以稱為“流明(nit)”。例如,在自然場景中,太陽光可以具有6×108 流明的亮度,早晨的藍天可以具有4600流明的亮度,以及晚上的天空可以具有0.005流明或更低的亮度。自然場景可以包括大約100百萬(例如大約27個光圈級數)的動態範圍。經由窗戶看到的天空可以具有大約10000流明的亮度,室內的臉可以具有50流明的亮度,以及室內的暗面可以具有大約1流明的亮度。人眼(例如視覺)可以適應以補獲低於星光或高於太陽光的光(例如其對應於在大約10個數量級變化的光照條件)。消費者顯示器可以支援(例如僅支援)100流明的峰值亮度,這肯定是低於人眼能夠察覺的自然場景的動態範圍。視訊分配環境可以提供標準動態範圍(SDR)內容,典型地支援大約0.1到幾百流明的亮度範圍,導致動態範圍低於10個光圈級數。高動態範圍(HDR)顯示器(例如具有1000至4000流明的峰值亮度)可以提供明顯可感知的品質收益。HDR和寬色域(WCG)可以擴展藝術意向表現的限制。用於HDR/WCG服務遞送鏈的專屬方案可以包括捕獲、預處理、壓縮、解壓縮、後處理以及顯示。商業可得的相機可以用高達14個光圈級數的動態範圍來補獲HDR視訊。
用於HDR/WCG的一個或多個專屬方案可能不與其他專屬方案交互操作。互通性可以是視訊遞送的關鍵因素。在對HDR和WCG內容分配和儲存的MPEG需求中,HDR可以對應於多於16個光圈級數。位於10和16個光圈級數之間的動態範圍可以被認為是中間的或擴展的動態範圍。該中間或擴展的動態範圍可以比實際生活中遇到的動態範圍要小(例如明顯要小)。中間或擴展的動態範圍可以低於人視覺系統的能力。HDR視訊可以提供較接近人眼能力的更寬的動態範圍。HDR的示例天然測試序列可以覆蓋BT.709、P3色域且它們可以被儲存在BT.2020和BT.709容器中,且檔案格式可以是EXR或TIFF。HDR序列的峰值亮度可以是大約4000流明。如第2圖所示,用於將線性信號轉換為非線性信號以用於壓縮的傳送函數(TF)可以是可感知量化器(PQ)(例如不同於一般在SDR編碼中使用的γ函數)。該傳送函數可以是光電傳送函數(OETF)。HDR壓縮的客觀品質評估可以比SDR更複雜,因為HDR壓縮視訊可以包括許多不同類型的失真,例如滲色及/或色帶,還有模糊、成塊、成環及/或閃爍假影。假影可以相對較亮背景更可見。在HDR和WCG中的客觀品質評估考慮的度量可以包括:XYZ中具有傳送函數的PSNR,稱為tPSNR;線性RGB中的PSNR評估,其中γ等於2.2,稱為mPSNR;具有ΔE2000度量的平均絕對值的PSNR,稱為PSNR_DE2000;視覺差預測器(VDP2);視覺資訊保真(VIF);結構相似性(SSIM)等。一個或多個主要度量可以被選擇,例如tPSNR、mPSNR和PSNR_DE2000。HDR的主觀品質評估程序可以包括剪裁的視訊和剪裁的原始視訊之間的並排觀看比較可以被執行且HDR顯示可以被校正(例如峰值亮度、顯示均勻性等)的情形。
第3A圖是示出示例HDR編碼過程300的流程圖。第3B圖是示出示例HDR編碼過程305的流程圖。HDR編碼過程300、305可以包括預處理、編碼、解碼及/或後處理。預處理302(例如,HDR預處理)可以被應用到HDR視訊訊號輸入310。例如,HDR預處理302可以包括應用傳送函數(TF)320、顏色空間轉換(330)、量化340及/或色度格式轉換350。顏色空間轉換330可以包括將HDR視訊訊號輸入310的顏色空間(例如線性浮點RGB)轉換成用於壓縮的顏色空間(例如,10位元YCbCr)。使用TF 320進行的線性到非線性轉換(例如,線性RGB到非線性RGB)可以被應用到輸入的HDR視訊訊號310。浮點到固定點轉換340(例如將浮點中的樣本值量化成10位元)可以針對顏色空間轉換330(例如RGB到YCbCr)的輸出而被執行。色度格式轉換350(例如色度4:4:4到4:2:0)可以針對浮點到固定點轉換340的輸出而被執行。預處理302的輸出可以被編碼360成編碼的位元流370。編碼360可以包括使用單層編解碼器(例如HEVC主10設定檔編解碼器)或可縮放編解碼器(例如SHVC可縮放主10設定檔編解碼器)的壓縮。編碼的位元流370可以被發送給解碼器。
編碼的位元流315(例如編碼的位元流370)可以被解碼325。例如,使用單層編解碼器或可縮放編解碼器的解壓縮325可以被應用到編碼的位元流315。後處理303(例如HDR後處理)可以被應用到解碼325的輸出。HDR後處理303可以包括執行色度格式逆轉換335(例如色度4:2:0到4:4:4)。HDR後處理303可以包括執行從固定點到浮點的逆轉換345(例如10位元到浮點)。HDR後處理303可以包括執行顏色空間逆轉換355(例如YCbCr到RGB)。HDR後處理303可以包括以逆TF 365執行從非線性到線性的轉換。逆TF 365可以是光電傳送函數(EOTF)。HDR後處理303的輸出可以包括HDR視訊訊號375。HDR編碼的性能評估可以不同於SDR編碼的性能評估。HDR編碼的性能評估可以包括預處理和後處理(例如以各種位元速率在E和E’點之間被執行)。在預處理及/或後處理(例如在壓縮之前及/或解壓縮之後)中可能引入失真。工作流涉及一些格式轉換(例如,線性到非線性、一個顏色空間到另一個顏色空間、一個色度格式到另一個色度格式、樣本值範圍轉換等)。客觀品質度量計算(例如,tPSNR、mPSNR、PSNR_DE2000)可以考慮這些格式轉換中的一個或多個。轉換及/或度量計算工具可以被使用。客觀度量計算結果可以是與平臺有關的(例如由於可以使用浮點計算)。在HDR編碼過程中,一個或多個資訊可以被傳訊(例如傳送函數、顏色空間及/或色調映射)。
HEVC中定義的一個或多個工具可以與HDR及/或WCG有關。在HEVC中定義的一個或多個工具可以包括VUI中定義的與一個或多個視訊訊號類型相關的語法元素、色調映射資訊SEI訊息、主顯示顏色量SEI訊息、顏色重新映射資訊SEI訊息、膝(knee)函數資訊SEI訊息及/或圖像參數集中的CGS/BDS查找表。
VUI中定義的與一個或多個視訊訊號類型相關的語法元素可以包括“video_full_range_flag(視訊全範圍標記)”、“color_primaries(顏色原色)”、“transfer_characteristics(傳送特性)”、及/或“matrix_coeffs(矩陣係數)”。VUI中定義的與一個或多個視訊訊號類型相關的語法元素可以定義編碼視訊容器的一個或多個屬性(例如樣本值範圍、顏色原色、傳送函數、顏色空間等)以將視訊樣本代碼等級映射成顯示強度。
色調映射資訊SEI訊息可以包括用於在位元流內傳送一個或多個曲線的一個或多個方法。一個或多個曲線中的每一個曲線可以以不同的映射情況為目標。色調映射資訊SEI訊息可以賦能輸出解碼圖像的一個或多個顏色樣本的重新映射(例如用於針對特定顯示環境的客製化)。
主顯示顏色量SEI訊息可以傳訊在視訊內容分級期間使用的顯示監視器的資訊。所傳訊的資訊可以包括亮度範圍、一個或多個顏色原色及/或白點。
顏色重新映射資訊SEI訊息可以被配置為賦能輸出的圖像的一個或多個重建顏色樣本的重新映射。
膝函數資訊SEI訊息可以被配置為賦能解碼的圖像的一個或多個顏色樣本的映射(例如用於針對特定顯示環境的客製化)。膝函數可以包括分段線性函數。
圖像參數集中的CGS/BDS查找表可以包括定義基層和SHVC增強層之間的顏色映射(例如從BT.709基層到BT.2020增強層)。圖像參數集中的CGS/BDS查找表可以賦能位元度及/或色域縮放性。
當與SDR視訊比較時,HDR視訊中的一個或多個假影(例如色度假影)可以在HDR顯示上更可見(例如,在中以及低位元速率中)。HDR顯示可以是峰值亮度為4000流明的顯示。HDR視訊中的一個或多個假影可以包括一個或多個物件的色調變化(例如,白牆可以表現淡紅色或藍色,且物體的皮膚顏色可能表現不自然)。當場景變得更亮時,一個或多個假影可以變得更嚴重。例如,當視訊是即時播放時,一個或多個假影可能閃爍。一個或多個假影可能降低觀看體驗。客觀度量(例如tPSNR、mPSNR和PSNR_DE2000)可以在XYZ顏色空間而不是在編碼顏色空間(例如YCbCr)中被計算。BT.2020色域中近似的YCbCr到XYZ的轉換可以被計算。例如,等式(1)和(2)可以用於在BT.2020色域中近似YCbCr到XYZ轉換。(1)(2)
編碼顏色空間中的色度分量的失真可以帶來在天然XYZ顏色空間中的三種分量中的一種或多種分量的一個或多個誤差。當與SDR編碼比較時,在HDR編碼期間維持色度品質可能更重要。
可以在HDR編碼及/或SDR編碼中應用跨平面濾波。例如,跨平面濾波可以包括將一個或多個高通濾波器應用到視訊訊號。跨平面濾波可以使用來自亮度分量的高頻資訊來改善及/或增強一個或多個色度分量的品質。例如,高頻亮度資訊可以藉由將高通濾波器應用到視訊訊號的亮度分量而被擷取。將高通濾波器應用到視訊訊號的亮度分量的輸出可以被添加到視訊訊號的一個或多個色度分量中。視訊訊號的一個或多個色度分量可以對應於視訊訊號的亮度分量。跨平面濾波可以用作可縮放編碼中的層間處理的一部分。跨平面濾波可以用作環內及/或環後濾波器(例如在單層編解碼器中)。與SDR視訊相比,HDR視訊可以包括亮度和色度分量的更多細節。跨平面濾波可以被應用到HDR編碼(例如以改善重建色度信號的品質)。
可以確定亮度和色度分量之間的一個或多個相關性。例如,可以針對物件輪廓及/或邊緣區域來確定相關性。跨平面濾波可以被應用到視訊訊號(例如針對色度增強)。跨平面濾波可以包括高通濾波。例如,高通濾波器(例如跨平面濾波器)可以被應用到視訊訊號的亮度分量。可以藉由將高通濾波器應用到視訊訊號的亮度分量來確定輸出。跨平面濾波器的輸出可以被添加到視訊訊號的色度分量(例如其對應於亮度分量)中。示例色度增強濾波過程可以由等式(3)和(4)表示。 Y_offset4C = Y_recfilter_Y4C                        (3)         C_imp = C_rec+Y_offset4C                                  (4)
如等式(3)和(4)中所示,亮度分量可以由Y表示且色度分量可以由C表示。應用到亮度信號的濾波器可以由filter_Y4C表示。重建亮度信號可以由Y_rec表示。濾波的輸出可以由Y_offset4C表示。重建色度信號可以由C_rec表示。重建色度信號可以是Cb分量及/或Cr分量。改善的色度分量可以由C_imp表示。跨平面濾波器可以是一維的、二維可分離的、或二維不可分離的濾波器。跨平面濾波器可以基於輸入信號的色度及/或亮度分量來導出(例如產生)。跨平面濾波器可以基於重建色度及/或亮度信號(例如,藉由使用最小平方法)。跨平面濾波器可以被應用以改善編碼顏色空間中的色度品質。跨平面濾波器可以改善天然XYZ顏色空間中的一個或多個(例如三個)分量。
可以在HDR編碼中執行色度增強濾波。色度增強濾波可以包括跨平面濾波。HDR編碼過程可以包括一個或多個後處理階段(例如,在解碼之後)。一個或多個後處理階段可以包括從4:2:0到4:4:4的色度格式轉換、從10位元固定點到浮點的轉換、從YCbCr到RGB的顏色空間轉換、及/或使用逆傳送函數(例如如第3B圖中所示)的從非線性信號到線性信號的轉換。色度增強濾波可以在一個或多個後處理階段的任何階段之前或之後被應用。例如,色度增強濾波可以被應用到4:2:0格式的視訊訊號的亮度分量。色度增強濾波可以被應用(例如偏移可以被添加)到4:2:0或4:4:4格式的視訊訊號的色度分量。
第4A圖是示出示例HDR編碼過程400的流程圖(例如第3A圖中示出的示例HDR編碼過程300)。第4B圖是示出在視訊編碼裝置405處的色度增強濾波器估計445的示例應用的圖。視訊編碼裝置405可以包括編碼器、解碼器、WTRU等。可以使用來自解碼圖像緩衝器435(DPB)的重建圖像(例如重建亮度信號及/或重建色度信號)及/或輸入至編碼顏色空間(例如YCbCr 4:2:0)中的編碼器的原始圖像來執行色度增強濾波器估計445。輸入視訊訊號415可以使用來自DPB 435的重建圖像而被編碼425。可以在編碼位元流465中包括色度增強濾波器資訊455。色度增強濾波器資訊455可以包括一個或多個色度增強濾波器參數。
第4C圖是示出使用色度增強濾波的示例HDR解碼過程410(例如第3B圖中示出的示例HDR解碼過程305)的流程圖。色度增強濾波器可以被應用到重建亮度信號(例如樣本的重建亮度分量)。色度增強濾波器可以在其他後處理之前被應用(例如在色度上樣本之前,在點A’處被應用)。色度增強濾波輸出可以被添加到4:2:0色度格式的重建色度信號(例如對應於重建亮度分量的重建色度分量)中。例如,色度增強濾波器可以被應用到顏色樣本的亮度平面分量以確定偏移。顏色樣本可以包括亮度樣本和兩個色度樣本。偏移可以被添加到顏色樣本的重建色度分量。顏色樣本的重建色度分量可以對應於顏色樣本的亮度分量。偏移可以在視訊訊號被升取樣之前被添加到顏色樣本的重建色度分量(例如添加到4:2:0格式的重建色度分量)。例如,亮度平面分量和重建色度分量可以具有不同的空間維度(例如4:2:0格式)。當在後處理之前被應用時,色度增強濾波複雜度可以是低的(例如,由於色度解析度在4:2:0色度格式中是1/4圖像尺寸)。色度增強濾波器可以改善色度信號(例如藉由校正壓縮中帶來的一些誤差)。
第5A圖是示出示例HDR編碼過程500的流程圖(例如,第3A圖中示出的示例HDR編碼過程300)。示例HDR編碼過程500可以包括用於4:2:0視訊訊號的壓縮的4:4:4視訊訊號。4:4:4視訊訊號可以被包括在具有4:2:0視訊訊號的編碼位元流中。第5B圖是示出在視訊編碼裝置505處的色度增強濾波器的示例應用的圖。視訊編碼裝置505可以包括編碼器、解碼器、WTRU等。色度增強濾波器估計575的輸入可以包括被應用到來自DPB 555的重建色度信號及/或4:4:4輸入視訊525的從4:2:0到4:4:4的色度升取樣565。視訊編碼裝置505可以接收4:2:0輸入視訊訊號515。來自DPB 555的重建色度信號及/或來自色度增強濾波器估計575的濾波器資訊585可以被編碼545成編碼位元流595。濾波器資訊585可以包括一個或多個色度增強濾波器參數(例如一個或多個指示,及/或一個或多個濾波器係數)。
第5C圖是示出在後處理期間應用色度增強濾波的示例HDR解碼過程510(例如第3B圖中示出的示例HDR解碼過程305)的流程圖。色度增強濾波器可以在後處理期間被應用(例如在點B’,C’或D’處;在升取樣之後)。編碼位元流可以被接收。編碼位元流可以包括一個或多個色度增強濾波器參數。色度增強濾波輸出可以藉由使用重建色度信號(例如重建色度平面分量)而被添加到4:4:4格式的升取樣後的色度信號中。例如,色度增強濾波器可以被應用到顏色樣本的亮度平面分量以確定偏移。該偏移可以被添加到顏色樣本的重建色度平面分量中。顏色樣本的重建色度平面分量可以對應於顏色樣本的亮度平面分量。在對視訊訊號進行升取樣之後,可以將該偏移添加到顏色樣本的重建色度平面分量(例如被添加到4:4:4格式的升取樣後的重建色度平面分量)。例如,亮度平面分量和重建色度平面分量在色度4:4:4格式中可以具有相同的空間維度。當在後處理期間應用色度增強濾波時,色度增強濾波可以校正在色度降取樣及/或升取樣期間引入的一個或多個誤差。當色度增強濾波在後處理期間被應用時,可以改善色度信號。在色度4:2:0格式中,各自的色度和亮度樣本位置可以是不對準的(例如相位移位的)。當確定濾波器的形狀(例如選擇合適的形狀)時,各自的亮度和色度樣本位置之間的相位移位可以被考慮。在色度4:4:4格式中,各自的色度和亮度樣本位置可以被對準(例如被相位對準)。色度增強濾波器的寬度及/或高度可以包括奇數(例如以確保沒有相位移位)。色度增強濾波器形狀可以是一維的、二維方形或二維非方形的。
可以在一個後處理步驟中執行色度升取樣過程(例如4:2:0到4:4:4)和色度增強濾波器過程。例如,在執行色度升取樣時,在每個色度樣本位置,可以計算相應的Y_offset4C(例如根據等式(3)使用鄰近亮度樣本)。根據等式(5),相應Y_offset4C可以被添加到升取樣後的色度樣本中,其中flter_upC可以表示色度升取樣濾波器。 C_out = C_recfilter_upC + Y_offset4C                 (5)
第6A圖是示出示例HDR編碼過程600(例如第3A圖中示出的示例HDR編碼過程300)的流程圖。可以在編碼604中使用來自(例如4:4:4線性RGB格式的)輸入HDR視訊訊號602的資訊。例如,在4:4:4資訊中的色度增強濾波器資訊可以在編碼604中被使用、及/或被包括在編碼位元流606中。第6B圖是示出在視訊編碼裝置605處的色度增強濾波器的示例應用的圖。視訊編碼裝置605可以包括編碼器、解碼器、WTRU等。輸入視訊訊號610(例如4:2:0格式)及/或升取樣的視訊訊號615(例如4:4:4線性RGB視訊訊號)。色度格式逆轉換630(例如色度4:2:0到4:4:4)可以被應用到來自DPB 625的圖像。可以執行從固定點到浮點的逆轉換640(例如10位元到浮點)。可以執行顏色空間逆轉換645(例如YCbCr到RGB)。可以使用逆TF 650執行從非線性到線性的轉換。可以執行色度增強濾波器估計655。色度增強濾波器估計655可以基於升取樣的視訊訊號615(例如4:4:4線性RGB視訊訊號)。濾波器資訊660可以在編碼620中被使用。例如,濾波器資訊可以被包括在編碼位元流665中。濾波器資訊660可以包括一個或多個色度增強濾波器參數(例如一個或多個指示及/或一個或多個濾波器係數)。
第6C圖是示出在後處理之後應用色度增強濾波(例如在點E’,在升取樣之後)的示例HDR解碼過程670的流程圖(例如第3B圖中示出的示例HDR解碼過程305)。示例HDR解碼過程670可以接收編碼位元流。編碼位元流可以包括一個或多個色度增強濾波器參數。一個或多個增強濾波器參數可以表明是否應用色度增強濾波。例如,色度增強濾波器可以被應用到樣本的亮度平面分量以確定偏移。該偏移可以被添加到樣本的一個或多個重建色度平面分量。樣本的一個或多個重建色度平面分量可以對應於樣本的亮度平面分量。在視訊訊號被升取樣之後,偏移可以被添加到樣本的一個或多個重建色度平面分量(例如被添加到4:4:4格式的升取樣後的重建色度分量)。當在後處理之後被應用時,色度增強濾波器可以考慮在預處理中引入的一個或多個失真。色度增強濾波器可以被應用到以浮點表示的線性信號。色度增強濾波器可以校正編碼及/或預處理中產生的一個或多個誤差。
可以基於與視訊訊號的圖像相關聯的特性來產生跨平面濾波器(例如高通濾波器)。例如,特性可以包括空間區域、顏色、亮度、邊緣方向等。包括圖像的一個或多個樣本的樣本集可以被確定。一個或多個樣本可以與特性相關聯。例如,一個或多個樣本可以被確定為與特性相關聯。例如,當特性包括顏色時,樣本集可以包括圖像內匹配該顏色的一個或多個樣本。作為另一示例,當特性包括亮度時,樣本集可以包括圖像內具有在預定亮度範圍內的亮度值的一個或多個樣本。作為另一示例,當特性包括邊緣方向時,樣本集可以包括圖像內具有與邊緣方向匹配的主邊緣方向的一個或多個樣本。跨平面濾波器可以被應用到樣本集中的一個或多個樣本。例如,跨平面濾波器可以被應用到樣本集中的一個或多個樣本的亮度平面分量。可以藉由將跨平面濾波器應用到樣本集中的一個或多個樣本的亮度平面分量來確定一個或多個偏移。一個或多個偏移可以被添加到樣本集中的一個或多個樣本的相應重建色度平面分量(例如,Cr及/或Cb分量)。
可以基於特性確定(例如,產生)跨平面(例如,色度增強)濾波器。空間區域可以是特性的示例。基於空間區域的跨平面濾波器可以包括將跨平面濾波器(例如,高通濾波器)應用到空間區域中的一個或多個樣本。例如,圖像可以被分段成多個空間區域。每個空間區域可以與用於兩個色度分量(例如,Cb、Cr)的色度增強濾波器的集合相關聯。多個空間區域中的一個或多個可以與色度增強濾波器(例如色度增強濾波器的一個集合)相關聯。色度增強濾波器可以基於多個空間區域中的一個或多個被確定(例如以得到更好的濾波性能)。當存在多個空間區域時,色度增強濾波器可以帶來區域邊界問題。色度增強濾波器可以被重疊(例如以降低區域邊界問題的影響)。重疊的色度增強濾波器可能不會消除區域邊界問題。色度增強濾波器可以被應用到感興趣的一個或多個空間區域(例如僅空間區域)(例如,以降低複雜度)。空間區域可以包括二維非重疊矩形。空間區域可以包括不規則形狀。例如,圖像可以被劃分成多個二維非重疊矩形。如果該劃分是偶數,則每個空間區域的位置和尺寸可以不被傳訊。如果劃分是非偶數的,則可以傳訊每個空間區域的左上角位置、寬度及/或高度。視訊編碼裝置可以確定將濾波器應用到空間區域。當視訊編碼裝置確定將濾波器應用到空間區域時,可以發送指示。例如,可以傳訊一個或多個濾波器指示。一個或多個濾波器指示可以包括濾波器開/關旗標及/或濾波器索引。一個或多個濾波器指示可以與每個空間區域相關聯。一個或多個濾波器指示可以與多個空間區域之一相關聯。一個或多個濾波器指示可以表明被應用到各自的空間區域的相關濾波器資訊。
基於特性的跨平面濾波器可以包括將跨平面濾波器(例如高通濾波器)應用到與一個或多個特性(例如亮度、顏色)相關聯的樣本集。可以為圖像定義一個或多個特性。特性可以與濾波器集相關聯。多個特性可以共用跨平面濾波器。跨平面濾波器可以基於屬於一個或多個相關聯樣本集(例如特性集)的一個或多個樣本來確定(例如訓練)。例如,跨平面濾波器可以被應用到屬於一個或多個相關聯特性集的一個或多個樣本。一個或多個樣本可以對應於視訊訊號的圖像中的一個或多個像素。例如,樣本可以對應於像素位置。例如,基於藝術意向的視訊編碼可以包括傳訊藝術意向特性樣本集及/或識別與被傳訊的樣本集相關聯的一個或多個藝術意向樣本位置。當樣本集與藝術意向有關時,色度增強濾波器可以基於屬於藝術意向特性樣本集的一個或多個樣本(例如色度樣本)被產生及/或確定(例如被客制訓練)。色度增強濾波器可以增強樣本集的一個或多個樣本。例如,色度增強濾波器可以被應用到樣本集中的樣本的重建亮度分量以確定偏移。該偏移可以被添加到該樣本的重建色度分量。重建色度分量可以對應於重建亮度分量。
例如,特性可以被識別為邊緣方向。邊緣方向可以包括亮度分量邊緣方向。亮度分量邊緣方向特性可以用於將一個或多個樣本分類到一個或多個樣本集(例如類別)中。邊緣方向θ和邊緣強度s可以被計算為:
gx (i, j)和gy (i, j)可以分別表示位置(i,j)處的水平和垂直方向上的梯度。邊緣方向θ可以被量化為零到180度範圍內的N個離散度(例如8個方向)。第7圖是示出被量化為八個(8)離散度的示例邊緣方向700的圖。以要被分類的樣本為中心的視窗內的梯度長條圖可以被計算為:
在梯度長條圖H(k)中,W可以表示以要被分類的樣本為中心的視窗、及/或k可以表示從0到N-1(例如,包含0和N-1)的邊緣方向範圍。可以確定主邊緣方向。主邊緣方向可以被確定為梯度長條圖H(k)中具有最大值(例如最大值)的方向。主邊緣方向可以被用作樣本的邊緣方向。圖像中具有與邊緣方向匹配的主邊緣方向的每個樣本可以被確定為在樣本集中。可以基於作為樣本集的一部分的樣本的分類來確定(例如,訓練)一個或多個色度增強濾波器。基於該分類,一個或多個色度增強濾波器可以被應用到一個或多個樣本。例如,色度增強濾波器可以被應用到樣本集中的每個樣本。樣本的分類可以基於重建亮度分量(例如,因此其也能夠在解碼器側被攜帶)。針對每個圖像,可以針對每個方向傳訊色度增強濾波器(例如,一個或多個濾波器係數)。可以針對多個方向來傳訊一個色度增強濾波器(例如,一個或多個濾波器係數)(例如,以降低複雜性)。例如,如果亮度樣本的主方向的邊緣強度小於預定義臨界值,色度增強濾波器可以不被應用到該亮度樣本、及/或色度偏移可以被確定為(例如,直接推斷為)零。
可以傳訊色度增強濾波器(例如,跨平面濾波器)資訊。色度增強濾波器資訊可以包括一個或多個色度增強濾波器參數。一個或多個色度增強濾波器參數可以包括縮放因數、一個或多個跨平面濾波器係數、移位參數、色度增強指示及/或色度分量指示中的一個或多個。可以針對每個色度分量傳訊一個或多個跨平面濾波器係數。色度增強指示可以在傳訊訊息中包括賦能旗標。可以針對每個色度分量傳訊該賦能旗標。色度增強濾波器資訊可以作為帶內中繼資料而以片級被傳訊。色度增強濾波器資訊可以作為單獨的NAL單元封包(例如,自適應參數集(APS))而被傳訊。色度增強濾波器資訊可以作為一個或多個帶外訊息(例如,補充增強資訊(SEI)訊息)而被傳訊。每個SEI訊息可以傳訊色度增強濾波器的一個集合(例如,針對一個片/圖像,如果存在被傳訊的多個色度增強濾波器SEI訊息)。經由一個或多個SEI訊息傳訊色度增強濾波器資訊可以藉由擴展SEI訊息定義來實施。表2和表3中示出了經由一個或多個HEVC SEI訊息傳訊色度增強濾波器資訊(例如提出的SEI訊息語法)的示例。 表2 表3
可以表明跨平面濾波器。例如,可以表明一個或多個跨平面濾波器參數。一個或多個跨平面濾波器參數可以表明是否應用跨平面濾波(例如色度增強濾波)。例如,當chroma_enhancement_filter_enabled_flag(色度增強濾波器賦用旗標)等於1時,可以賦能色度增強。當chroma_enhancement_filter_enabled_flag等於0時,可以禁用色度增強。當不存在時,chroma_enhancement_filter_enabled_flag可以被確定為等於0。
num_coeff_hori_minus1加一可以表明一個或多個色度增強濾波器的水平方向中的係數的數量。
num_coeff_verti_minus1加一可以表明一個或多個色度增強濾波器的垂直方向中的係數的數量。
當cb_enhancement_flag(cb_增強_旗標)等於1時,cb_filter_coeff_plus8[i](cb_濾波器_係數_加8[i])、cb_scaling_factor_abs_minus1(cb_縮放_因數__abs_減1)、cb_scaling_factor_sign(cb_縮放_因數_符號)及/或cb_bit_shifting(cb_位元_移位)可以被包括在SEI訊息中。當cb_enhancement_flag等於0時,cb_filter_coeff_plus8 [i]、cb_scaling_factor_abs_minus1、cb_scaling_factor_sign和cb_bit_shifting可以不被包括在SEI訊息中。當在該訊息中不存在時,cb_enhancement_flag可以被確定為等於0。
cb_filter_coeff_plus8[j][i]減8可以指定在位置(i,j)處的色度分量Cb的高通濾波器的濾波器係數。cb_filter_coeff_plus8[j][i]的值可以在0至15(例如,包括0和15)的範圍內。如果濾波器係數cb_filter_coeff[j][i]不是在光柵掃描順序中的最後一個係數,則濾波器係數cb_filter_coeff[j][i]可以被確定(例如,被導出),其中i在範圍[0, num_coeff_hori_minus1]中,且j在範圍[0, num_coeff_verti_minus1]中。例如, cb_filter_coeff[j][i] = cb_filter_coeff_plus8[j][i] -8
示例語法和語義可以假定cb_filter_coeff[j][i]的值在範圍[-8,7]中。cb_filter_coeff[j][i]的值可以在範圍[-8,7]之外。
當一個或多個cb_filter_coeff[j][i]值的和為0(例如,由此保證Cb增強濾波器的高通性質)時,可以確定最後一個係數cb_filter_coeff[num_coeff_verti_minus1][num_coeff_hori_minus1]。例如, cb_filter_coeff[num_coeff_verti_minus1][num_coeff_hori_minus1] =)
cb_scaling_factor_abs_minus1加一以及cb_scaling_factor_sign可以指定變數CbScalingFactor(Cb縮放因數)的值。例如, CbScalingFactor = (1 – 2 *cb_scaling_factor_sign) * (cb_scaling_factor_abs_minus1+1)
cb_scaling_factor_abs的值可以在範圍1至1023(例如包含1和1023)內。
cb_bit_shifting可以指定在縮放過程之後右移位的位元數(例如以增強色度分量Cb)。cb_bit_shifting的值可以在範圍0至31(例如包含0和31)中。
當cr_enhancement_flag(cr_增強_旗標)等於1時,cr_filter_coeff_ plus8[i] (cr_濾波器_係數_加8[i])、cr_scaling_factor_abs_minus1(cr_縮放_因數__abs_減1)、cr_scaling_factor_sign(cr_縮放_因數_符號)及/或cr_bit_shifting(cr_位元_移位)可以被包括在SEI訊息中。當cr_enhancement_flag等於0時,cr_filter_coeff_plus8[i]、cr_scaling_factor_abs_minus1、cr_scaling_factor_sign和cr_bit_shifting可以不被包括在SEI訊息中。當不存在時,cr_enhancement_flag可以被確定為等於0。
cr_filter_coeff_plus8[j][i]減8可以指定在位置(i,j)處的色度分量Cr的高通濾波器的濾波器係數。cr_filter_coeff_plus8[j][i]的值可以在範圍0至15(例如,包括0和15)中。濾波器係數cr_filter_coeff[j][i]可以被確定(例如,如果其不是光柵掃描順序中的最後一個係數),其中i在範圍[0, num_coeff_hori_minus1]中,且j在範圍[0, num_coeff_verti_minus1]中。例如, cr_filter_coeff[j][i] = cr_filter_coeff_plus8[j][i] -8
示例語法和語義可以假定cr_filter_coeff[j][i]的值在範圍[-8,7]中。cr_filter_coeff[j][i]的值在範圍[-8,7]之外。
假定cr_filter_coeff[j][i]值的和為0,由此保證Cr增強濾波器的高通性質,則可以確定係數(例如最後一個係數)cr_filter_coeff[num_coeff_verti_minus1][num_coeff_hori_minus1]。例如, cr_filter_coeff[num_coeff_verti_minus1][num_coeff_hori_minus1] =)
cr_scaling_factor_abs_minus1加一和cr_scaling_factor_sign可以指定變數CrScalingFactor(Cr縮放因數)的值。例如, CrScalingFactor = (1 – 2 *cr_scaling_factor_sign) * (cr_scaling_factor_abs_minus1+1)
cr_scaling_factor_abs的值可以在範圍1至1023(例如,包括1和1023)內。
cr_bit_shifting可以指定在縮放過程之後右移位的位元數(例如,以增強色度分量Cr)。cr_bit_shifting的值可以在範圍0到31(例如,包括0和31)內。
可以如下應用色度增強濾波器。色度增強濾波器的尺寸可以分別在水平及/或垂直方向中被傳訊為filter_width(濾波器寬度)(例如等於num_coeff_hori_minus1+1)和filter_height(濾波器高度)(例如,等於num_coeff_verti_minus1+1)。為了增強位置(x,y)處的“Ch”分量樣本,高通濾波器Ch_filter_coeff(Ch濾波器係數)可以被應用到一個或多個周圍(例如filter_width × filter_height)樣本以產生中間結果z(x,y),如下。“Ch”可以表示Cb或Cr。(6)
一個或多個參數(例如startV、startH、endV及/或endH)可以確定相對於(x,y)的濾波的支援區域。一個或多個參數可以被計算為: endV = filter_height >>1                                 (7) startV = 1-filter_height + endV                             (8) endH = filter_width >>1                                 (9) startH = 1-filter_width + endH                       (10)
(ScaleX ,ScaleY )可以表示水平和垂直方向上的顏色子取樣比。對於4:4:4、4:2:2和4:2:0格式,(ScaleX ,ScaleY )可以分別等於(1, 1), (2, 1)和(2, 2)。
z (x,y )可以被縮放到正常範圍,表示為o (x,y )。可以使用ChScalingFactor/2ch_bit_shifting 來縮放z (x,y )。Abs(x)可以表示變數x的絕對值。縮放的整數實現可以如下確定,                          t(x,y) =z (x,y )*ChScalingFactor                                            (11)o (x,y ) = Sign(t(x,y))*((Abs(t(x,y))+(1<<(ch_bit_shifting-1)))>>ch_bit_shifting)   (12)
可以計算增強的Ch樣本,表示為Chenh (x,y )。例如,Chenh (x,y ) =Ch (x,y ) +o (x,y )                        (13)
等式(13)中的Ch(x,y)可以包括升取樣的色度分量值。色度增強濾波器可以用固定點來表示。當樣本值以大動態範圍中的浮點來表示(例如,根據第6A、6B及6C圖)時,固定點色度增強濾波器可以被應用。濾波器係數可以被表示為浮點值(例如,以保持這樣的大動態範圍的精確度)。表4是當濾波器係數被表示為16位元半浮點時的示例色度增強濾波器傳訊語法表。該16位元半浮點格式可以被用在EXR檔案及/或電腦圖形中。16位元半浮點可以符合IEEE 754半精確度二進位浮點格式(例如,1位元用於符號、5位元用於指數、以及10用於明顯精確度)。16位元半浮點格式可以基於IEEE 754半精確度浮點格式定義而被轉換成單/雙精確度浮點格式。 表4
可以使用一個或多個對稱濾波器(例如,以降低要傳訊的濾波器係數的數量)。例如,當使用左右或上下對稱時,所傳訊的濾波器係數的數量可以被減少大約一半。當使用左右和上下對稱時,所傳訊的濾波器係數的數量可以被降低到大約四分之一。一個或多個對稱濾波器可以降低計算的數量(例如,藉由組合共用相同係數值的濾波器位置)。
增強濾波器可以被應用到亮度分量以改善亮度分量的品質。當增強濾波器(例如亮度增強濾波器)被應用到重建亮度信號時,可以產生增強信號。增強信號可以被添加回重建亮度信號。
第8A圖是在其中可以實施一個或更多個實施方式的示例通信系統100的圖。通信系統100可以是向多個使用者提供內容,例如語音、資料、視訊、訊息發送、廣播等的多重存取系統。通信系統100可以使多個無線使用者經由系統資源分享(包括無線頻寬)存取這些內容。例如,通信系統100可以使用一種或多種頻道存取方法,例如分碼多重存取(CDMA)、分時多重存取(TDMA)、分頻多重存取(FDMA)、正交FDMA(OFDMA)、單載波FMDA(SC-FDMA)等。
如第8A圖所示,通信系統100可以包括無線傳輸/接收單元(WTRU)102a、102b、102c、及/或102d(其通常或整體上被稱為WTRU)、無線電存取網(RAN)103/104/105、核心網路106/107/109、公共交換電話網路(PSTN)108、網際網路110和其他網路112。不過應該理解的是,揭露的實施方式考慮到了任何數量的WTRU、基地台、網路及/或網路元件。WTRU 102a、102b、102c、102d的每一個可以是配置為在無線環境中進行操作及/或通信的任何類型的裝置。作為示例,可以將WTRU 102a、102b、102c、102d配置為發送及/或接收無線信號、並可以包括使用者設備(UE)、基地台、固定或者行動使用者單元、呼叫器、行動電話、個人數位助理(PDA)、智慧型電話、筆記型電腦、隨身型易網機、個人電腦、無線感測器、消費電子產品等等。
通信系統100還可以包括基地台114a和基地台114b。基地台114a、114b的每一個都可以是配置為與WTRU 102a、102b、102c、102d中的至少一WTRU無線介接以便於存取一個或者更多個通信網路(例如,核心網路106/107/109、網際網路110及/或網路112)的任何裝置類型。作為示例,基地台114a、114b可以是基地收發站(BTS)、節點B、演進型節點B(e節點B)、本地節點B、本地e節點B、網站控制器、存取點(AP)、無線路由器等等。雖然基地台114a、114b的每一個被描述為單一元件,但是應該理解的是,基地台114a、114b可以包括任何數量的互連基地台及/或網路元件。
基地台114a可以是RAN 103/104/105的一部分,RAN 103/104/105還可以包括其他基地台及/或網路元件(未顯示),例如基地台控制器(BSC)、無線電網路控制器(RNC)、中繼節點等。可以將基地台114a及/或基地台114b配置為在特定地理區域之內發送及/或接收無線信號,該區域可以被稱為胞元(未顯示)。胞元還可以被劃分為胞元扇區。例如,與基地台114a關聯的胞元可以劃分為三個扇區。因此,在一種實施方式中,基地台114a可以包括三個收發器,即每一個用於胞元的一個扇區。在另一種實施方式中,基地台114a可以使用多輸入多輸出(MIMO)技術,因此可以將多個收發器用於胞元的每一個扇區。
基地台114a、114b可以經由空中介面115/116/117以與WTRU 102a、102b、102c、102d中的一個或者更多個進行通信,該空中介面115/116/117可以是任何合適的無線通訊鏈路(例如,射頻(RF)、微波、紅外(IR)、紫外線(UV)、可見光等)。可以使用任何合適的無線電存取技術(RAT)來建立空中介面115/116/117。
更具體地,如上所述,通信系統100可以是多重存取系統、並可以使用一種或者多種頻道存取方案,例如CDMA、TDMA、FDMA、OFDMA、SC-FDMA等等。例如,RAN 103/104/105中的基地台114a和WTRU 102a、102b、102c可以實施例如通用行動電信系統(UMTS)陸地無線電存取(UTRA)的無線電技術,其可以使用寬頻CDMA(WCDMA)來建立空中介面115/116/117。WCDMA可以包括例如高速封包存取(HSPA)及/或演進的HSPA(HSPA+)的通信協定。HSPA可以包括高速下鏈封包存取(HSDPA)及/或高速上鏈封包存取(HSUPA)。
在另一種實施方式中,基地台114a和WTRU 102a、102b、102c可以實施例如演進型UMTS陸地無線電存取(E-UTRA)的無線電技術,其可以使用長期演進(LTE)及/或高級LTE(LTE-A)來建立空中介面115/116/117。
在其他實施方式中,基地台114a和WTRU 102a、102b、102c可以實施例如IEEE 802.16(即,全球互通微波存取(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000 EV-DO、暫行標準 2000(IS-2000)、暫行標準95(IS-95)、暫行標準856(IS-856)、全球行動通信系統(GSM)、GSM演進的增強型資料速率(EDGE)、GSM EDGE(GERAN)等等的無線電技術。
第8A圖中的基地台114b可以是例如無線路由器、本地節點B、本地e節點B或者存取點、並且可以使用任何適當的RAT以方便例如商業場所、住宅、車輛、校園等等的局部區域中的無線連接。在一種實施方式中,基地台114b和WTRU 102c、102d可以實施例如IEEE 802.11之類的無線電技術來建立無線區域網路(WLAN)。在另一種實施方式中,基地台114b和WTRU 102c、102d可以使用例如IEEE 802.15之類的無線電技術來建立無線個人區域網路(WPAN)。在另一種實施方式中,基地台114b和WTRU 102c、102d可以使用基於蜂巢的RAT(例如,WCDMA、CDMA2000、GSM、LTE、LTE-A等)來建立微微胞元或毫微微胞元。如第8A圖所示,基地台114b可以具有到網際網路110的直接連接。因此,基地台114b可以不需要經由核心網路106/107/109而存取到網際網路110。
RAN 103/104/105可以與核心網路106/107/109通信,所述核心網路106/107/109可以是被配置為向WTRU 102a、102b、102c、102d中的一個或更多個提供語音、資料、應用及/或基於網際網路協定的語音(VoIP)服務等的任何類型的網路。例如,核心網路106/107/109可以提供呼叫控制、計費服務、基於移動位置的服務、預付費呼叫、網際網路連接、視訊分配等及/或執行高階安全功能,例如使用者認證。雖然第8A圖中未示出,應該理解的是,RAN 103/104/105及/或核心網路106/107/109可以與使用和RAN 103/104/105相同的RAT或不同RAT的其他RAN進行直接或間接的通信。例如,除了連接到正在使用E-UTRA無線電技術的RAN 103/104/105之外,核心網路106/107/109還可以與使用GSM無線電技術的另一個RAN(未示出)通信。
核心網路106/107/109還可以充當WTRU 102a、102b、102c、102d存取PSTN 108、網際網路110及/或其他網路112的閘道。PSTN 108可以包括提供普通老式電話服務(POTS)的電路交換電話網路。網際網路110可以包括使用公共通信協定的互連電腦網路和裝置的全球系統,所述協定例如有TCP/IP網際網路協定組中的傳輸控制協定(TCP)、使用者資料包通訊協定(UDP)和網際協定協定(IP)。網路112可以包括被其他服務提供者擁有及/或操作的有線或無線的通信網路。例如,網路112可以包括連接到一個或更多個RAN的另一個核心網路,該RAN可以使用和RAN 103/104/105相同的RAT或不同的RAT。
通信系統100中的WTRU 102a、102b、102c、102d的某些或全部可以包括多模式能力,即WTRU 102a、102b、102c、102d可以包括用於在不同無線鏈路上與不同無線網路進行通信的多個收發器。例如,第8A圖中示出的WTRU 102c可被配置為與可以使用基於蜂巢的無線電技術的基地台114a通信、以及與可以使用IEEE 802無線電技術的基地台114b通信。
第8B圖是示例WTRU 102的系統圖。如第8B圖所示,WTRU 102可以包括處理器118、收發器120、傳輸/接收元件122、揚聲器/麥克風124、鍵盤126、顯示器/觸控板128、非可移式記憶體130、可移式記憶體132、電源134、全球定位系統(GPS)晶片組136和其他週邊裝置138。應該理解的是,在保持與實施方式一致時,WTRU 102可以包括前述元件的任何子組合。而且,實施方式考慮了基地台114a和114b及/或基地台114a和114b可以表示的節點(諸如但不限於收發站(BTS)、節點B、網站控制器、存取點(AP)、本地節點B、演進型本地節點B(e節點B)、本地演進型節點B(HeNB)、本地演進型節點B閘道和代理節點等)可以包括第8B圖所描繪和這裡描述的一些或所有元件。
處理器118可以是通用處理器、專用處理器、常規處理器、數位訊號處理器(DSP)、多個微處理器、與DSP核心相關聯的一或更多個微處理器、控制器、微控制器、專用積體電路(ASIC)、現場可程式設計閘陣列(FPGA)電路、任何其他類型的積體電路(IC)、狀態機等等。處理器118可執行信號解碼、資料處理、功率控制、輸入/輸出處理及/或使WTRU 102運行於無線環境中的任何其他功能。處理器118可以耦合到收發器120,該收發器120可耦合到傳輸/接收元件122。雖然第8圖描述了處理器118和收發器120是單獨的元件,但是應該理解的是,處理器118和收發器120可以一起集成在電子封裝或晶片中。
傳輸/接收元件122可以被配置為經由空中介面115/116/117將信號發送到基地台(例如,基地台114a)、或從基地台(例如,基地台114a)接收信號。例如,在一種實施方式中,傳輸/接收元件122可以是被配置為發送及/或接收RF信號的天線。在另一種實施方式中,傳輸/接收元件122可以是被配置為發送及/或接收例如IR、UV或可見光信號的發射器/偵測器。在另一種實施方式中,傳輸/接收元件122可以被配置為發送和接收RF和光信號兩者。應當理解,傳輸/接收元件122可以被配置為發送及/或接收無線信號的任何組合。
另外,雖然傳輸/接收元件122在第8B圖中描述為單一但是WTRU 102可以包括任意數量的傳輸/接收元件122。更具體的,WTRU 102可以使用例如MIMO技術。因此,在一種實施方式中,WTRU 102可以包括用於通過空中介面115/116/117發送和接收無線信號的兩個或更多個傳輸/接收元件122(例如,多個天線)。
收發器120可以被配置為調製要由傳輸/接收元件122發送的信號及/或解調由傳輸/接收元件122接收的信號。如上面提到的,WTRU 102可以具有多模式能力。因此收發器120可以包括使WTRU 102經由多個例如UTRA和IEEE 802.11之類的RAT進行通信的多個收發器。
WTRU 102的處理器118可以耦合到下述裝置、並且可以從下述裝置中接收使用者輸入資料:揚聲器/麥克風124、鍵盤126及/或顯示器/觸控板128(例如,液晶顯示器(LCD)顯示單元或有機發光二極體(OLED)顯示單元)。處理器118還可以輸出使用者資料到揚聲器/麥克風124、鍵盤126及/或顯示/觸控板128。另外,處理器118可以從任何類型的適當的記憶體存取資訊、並且可以儲存資料到任何類型的適當的記憶體中,例如非可移式記憶體130及/或可移式記憶體132。非可移式記憶體130可以包括隨機存取記憶體(RAM)、唯讀記憶體(ROM)、硬碟或任何其他類型的記憶體裝置。可移式記憶體132可以包括用戶身份模組(SIM)卡、記憶條、安全數位(SD)記憶體等等。在其他實施方式中,處理器118可以從在實體位置上沒有位於WTRU 102上(例如,位於伺服器或家用電腦(未示出)上)的記憶體存取資訊、並且可以將資料儲存在該記憶體中。
處理器118可以從電源134接收電能、並且可以被配置為分配及/或控制到WTRU 102中的其他元件的電能。電源134可以是為WTRU 102供電的任何適當的裝置。例如,電源134可以包括一個或更多個乾電池(例如,鎳鎘(NiCd)、鎳鋅(NiZn)、鎳氫(NiMH)、鋰離子(Li-ion)等等)、太陽能電池,燃料電池等等。
處理器118還可以耦合到GPS晶片組136,該GPS晶片組136可以被配置為提供關於WTRU 102目前位置的位置資訊(例如,經度和緯度)。另外,除了來自GPS晶片組136的資訊或作為其替代,WTRU 102可以經由空中介面115/116/117從基地台(例如,基地台114a、114b)接收位置資訊及/或基於從兩個或更多個鄰近基地台接收的信號的時序來確定其位置。應當理解,在保持實施方式的一致性時,WTRU 102可以用任何適當的位置確定方法獲得位置資訊。
處理器118還可以耦合到其他週邊裝置138,該週邊裝置138可以包括一個或更多個提供附加特性、功能及/或有線或無線連接的軟體及/或硬體模組。例如,週邊裝置138可以包括加速計、電子羅盤、衛星收發器、數位相機(用於照片或視訊)、通用序列匯流排(USB)埠、振動裝置、電視收發器、免持耳機、藍牙(Bluetooth®)模組、調頻(FM)無線電單元、數位音樂播放器、媒體播放器、視訊遊戲機模組、網際網路瀏覽器等等。
第8C圖是根據實施方式的RAN 103和核心網路106的系統圖。如上面提到的,RAN 103可使用UTRA無線電技術以經由空中介面115而與WTRU 102a、102b、102c通信。RAN 103還可以與核心網路106通信。如第8C圖所示,RAN 103可以包括節點B 140a、140b、140c,節點B 140a、140b、140c的每一個包括用於經由空中介面115以與WTRU 102a、102b、102c通信的一個或更多個收發器。節點B 140a、140b、140c的每一個可以與RAN 103內的特定胞元(未顯示)關聯。RAN 103還可以包括RNC 142a、142b。應當理解的是,在保持實施方式的一致性時,RAN 103可以包括任何數量的節點B和RNC。
如第8C圖所示,節點B 140a、140b可以與RNC 142a通信。此外,節點B 140c可以與RNC 142b通信。節點B 140a、140b、140c可以經由Iub介面分別與RNC 142a、142b通信。RNC 142a、142b可以經由Iur介面相互通信。RNC 142a、142b的每一個可以被配置以控制其連接的各個節點B 140a、140b、140c。另外,RNC 142a、142b的每一個可以被配置以執行或支援其他功能,例如外環功率控制、負載控制、允許控制、封包排程、切換控制、巨集分集、安全功能、資料加密等等。
第8C圖中所示的核心網路106可以包括媒體閘道(MGW)144、行動交換中心(MSC)146、服務GPRS支援節點(SGSN)148、及/或閘道GPRS支援節點(GGSN)。儘管前述元件的每一個被描述為核心網路106的部分,應當理解的是,這些元件中的任何一個可以被不是核心網路操作者的實體擁有或操作。
RAN 103中的RNC 142a可以經由IuCS介面而連接至核心網路106中的MSC 146。MSC 146可以連接至MGW 144。MSC 146和MGW 144可以向WTRU 102a、102b、102c提供到電路切換式網路(例如PSTN 108)的存取,以便於WTRU 102a、102b、102c和傳統陸地線路通信裝置之間的通信。
RAN 103中RNC 142a還可以經由IuPS介面而連接至核心網路106中的SGSN 148。SGSN 148可以連接至GGSN 150。SGSN 148和GGSN 150可以向WTRU 102a、102b、102c提供到封包交換網路(例如網際網路110)的存取,以便於WTRU 102a、102b、102c和IP賦能裝置之間的通信。
如上所述,核心網路106還可以連接至網路112,網路112可以包括由其他服務提供者擁有或操作的其他有線或無線網路。
第8D圖是根據實施方式的RAN 104和核心網路107的系統圖。如上面提到的,RAN 104可使用E-UTRA無線電技術經由空中介面116以與WTRU 102a、102b、102c通信。RAN 104還可以與核心網路107通信。
RAN 104可包括e節點B 160a、160b、160c,但可以理解的是,RAN 104可以包括任意數量的e節點B而仍然保持與各種實施方式一致。eNB 160a、160b、160c的每一個可包括用於經由空中介面116以與WTRU 102a、102b、102c通信的一個或更多個收發器。在一種實施方式中,e節點B 160a、160b、160c可以實施MIMO技術。因此,e節點B 160a例如可以使用多個天線以向WTRU 102a發送無線信號及/或從其接收無線信號。
e節點B 160a、160b、160c的每一個可以與特定胞元關聯(未顯示)、並可以被配置為處理無線資源管理決策、切換決策、在上鏈及/或下鏈中的使用者排程等等。如第8D圖所示,e節點B 160a、160b、160c可以經由X2介面相互通信。
第8D圖中所示的核心網路107可以包括移動性管理實體(MME)162、服務閘道164及/或封包資料網路(PDN)閘道166。雖然前述單元的每一個被描述為核心網路107的一部分,應當理解的是,這些單元中的任一個可以由除了核心網路操作者之外的實體擁有及/或操作。
MME 162可以經由S1介面而連接到RAN 104中的e節點B 160a、160b、160c的每一個、並可以作為控制節點。例如,MME 162可以負責認證WTRU 102a、102b、102c的使用者、承載啟動/停用、在WTRU 102a、102b、102c的初始連結期間選擇特定服務閘道等等。MME 162還可以提供控制平面功能,用於在RAN 104和使用例如GSM或者WCDMA的其他無線電技術的其他RAN(未顯示)之間切換。
服務閘道164可以經由S1介面而連接到RAN 104中的eNB 160a、160b、160c的每一個。服務閘道164通常可以向/從WTRU 102a、102b、102c路由和轉發使用者資料封包。服務閘道164還可以執行其他功能,例如在eNB間切換期間錨定使用者平面、當下鏈資料對於WTRU 102a、102b、102c可用時觸發傳呼、管理和儲存WTRU 102a、102b、102c的上下文(context)等等。
服務閘道164還可以連接到PDN閘道166,PDN閘道166可以向WTRU 102a、102b、102c提供到封包交換網路(例如網際網路110)的存取,以便於WTRU 102a、102b、102c與IP賦能裝置之間的通信。
核心網路107可以便於與其他網路的通信。例如,核心網路107可以向WTRU 102a、102b、102c提供到電路切換式網路(例如PSTN 108)的存取, 以便於WTRU 102a、102b、102c與傳統陸地線路通信裝置之間的通信。例如,核心網路107可以包括IP閘道(例如,IP多媒體子系統(IMS)伺服器)、或者與之通信,該IP閘道作為核心網路107與PSTN 108之間的介面。另外,核心網路107可以向WTRU 102a、102b、102c提供到網路112的存取,該網路112可以包括被其他服務提供者擁有及/或操作的其他有線或無線網路。
第8E圖是根據實施方式的RAN 105和核心網路109的系統圖。RAN 105可以是使用IEEE 802.16無線電技術經由空中介面117以與WTRU 102a、102b、102c進行通信的存取服務網路(ASN)。如下面進一步討論的,WTRU 102a、102b、102c、RAN 105和核心網路109的不同功能實體之間的鏈路可以被定義為參考點。
如第8E圖所示,RAN 105可以包括基地台180a、180b、180c和ASN閘道182,但應當理解的是,RAN 105可以包括任何數量的基地台和ASN閘道而與實施方式保持一致。基地台180a、180b、180c的每一個可以與RAN 105中特定胞元(未示出)關聯並可以包括經由空中介面117以與WTRU 102a、102b、102c通信的一個或更多個收發器。在一個實施方式中,基地台180a、180b、180c可以實施MIMO技術。因此,基地台180a例如使用多個天線來向WTRU 102a發送無線信號、或從其接收無線信號。基地台180a、180b、180c可以提供移動性管理功能,例如呼叫切換(handoff)觸發、隧道建立、無線電資源管理、訊務分類、服務品質策略執行等等。ASN閘道182可以充當訊務聚合點、並且負責傳呼、快取用戶設定檔(profile)、路由到核心網路109等等。
WTRU 102a、102b、102c和RAN 105之間的空中介面117可以被定義為使用802.16規範的R1參考點。另外,WTRU 102a、102b、102c的每一個可以與核心網路109建立邏輯介面(未顯示)。WTRU 102a、102b、102c和核心網路 109之間的邏輯介面可以定義為R2參考點,其可以用於認證、授權、IP主機(host)配置管理及/或移動性管理。
基地台180a、180b、180c的每一個之間的通信鏈路可以定義為包括便於WTRU切換和基地台間轉移資料的協定的R8參考點。基地台180a、180b、180c和ASN閘道182之間的通信鏈路可以定義為R6參考點。R6參考點可以包括用於促進基於與WTRU 102a、102b、102c的每一個關聯的移動性事件的移動性管理的協定。
如第8E圖所示,RAN 105可以連接至核心網路109。RAN 105和核心網路109之間的通信鏈路可以定義為包括例如便於資料轉移和移動性管理能力的協定的R3參考點。核心網路109可以包括行動IP本地代理(MIP-HA)184、認證、授權、計費(AAA)伺服器186和閘道188。儘管前述的每個元件被描述為核心網路109的部分,應當理解的是,這些元件中的任一個可以由不是核心網路操作者的實體擁有或操作。
MIP-HA可以負責IP位址管理、並可以使WTRU 102a、102b、102c在不同ASN及/或不同核心網路之間漫遊。MIP-HA 184可以向WTRU 102a、102b、102c提供封包交換網路(例如網際網路110)的存取,以促進WTRU 102a、102b、102c和IP賦能裝置之間的通信。AAA伺服器186可以負責使用者認證和支援使用者服務。閘道188可促進與其他網路互通。例如,閘道可以向WTRU 102a、102b、102c提供電路切換式網路(例如PSTN 108)的存取,以促進WTRU 102a、102b、102c和傳統陸地線路通信裝置之間的通信。此外,閘道188可以向WTRU 102a、102b、102c提供網路112,其可以包括由其他服務提供者擁有或操作的其他有線或無線網路。
儘管未在第8E圖中顯示,應當理解的是,RAN 105可以連接至其他ASN,並且核心網路109可以連接至其他核心網路。RAN 105和其他ASN之間的通信鏈路可以定義為R4參考點,其可以包括協調RAN 105和其他ASN之間的WTRU 102a、102b、102c的移動性的協定。核心網路109和其他核心網路之間的通信鏈路可以定義為R5參考點,其可以包括促進本地核心網路和被訪問核心網路之間的互通的協定。
雖然以特定的組合描述的特徵和元素,但是本領域中具有通常知識者可以理解每個特徵或元素能夠單獨使用或與其他特徵和元素任意結合使用。此外,以上描述的方法可以用電腦程式、軟體及/或韌體實現,其可包含到由電腦及/或處理器執行的電腦可讀媒體中。電腦可讀媒體的示例包括電子信號(經由有線或無線連接傳送)和電腦可讀儲存媒體。電腦可讀儲存媒體的示例包括,但不限制為,唯讀記憶體(ROM)、隨機存取記憶體(RAM)、暫存器、快取記憶體、半導體記憶體裝置、磁性媒體(例如,內部硬碟和抽取式磁碟)、磁光媒體和光學媒體(例如,CD-ROM盤和數位多功能光碟(DVD))。與軟體關聯的處理器用於實現射頻收發器,用於WTRU、UE、終端、基地台、RNC或任何主機電腦。
100‧‧‧通信系統
102、102a、102b、102c、102d‧‧‧無線傳輸/接收單元(WTRU)
103/104/105‧‧‧無線電存取網(RAN)
106/107/109‧‧‧核心網路
108‧‧‧公共交換電話網路(PSTN)
110‧‧‧網際網路
112‧‧‧其他網路
114a、114b‧‧‧基地台
115/116/117‧‧‧空中介面
118‧‧‧處理器
120‧‧‧收發器
122‧‧‧傳輸/接收元件
124‧‧‧揚聲器/麥克風
126‧‧‧鍵盤
128‧‧‧顯示器/觸控板
130‧‧‧非可移式記憶體
132‧‧‧可移式記憶體
134‧‧‧電源
136‧‧‧全球定位系統(GPS)晶片組
138‧‧‧週邊裝置
140a、140b、140c‧‧‧節點B
142a、142b‧‧‧無線電網路控制器(RNC)
144‧‧‧媒體閘道(MGW)
146‧‧‧行動交換中心(MSC)
148‧‧‧服務GPRS支援節點(SGSN)
150‧‧‧閘道GPRS支援節點(GGSN)
160a、160b、160c‧‧‧e節點B
162‧‧‧移動性管理實體(MME)
164‧‧‧服務閘道
166‧‧‧封包資料網路(PDN)閘道
180a、180b、180c‧‧‧基地台
182‧‧‧存取服務網路(ASN)閘道
184‧‧‧行動IP本地代理(MIP-HA)
186‧‧‧認證、授權、計費(AAA)伺服器
188‧‧‧閘道
300、305、400、500、600‧‧‧HDR編碼過程
310‧‧‧HDR視訊訊號輸入
302‧‧‧HDR預處理
303‧‧‧後處理
315、370、465、595、606、665‧‧‧位元流
320‧‧‧應用傳送函數(TF)
325‧‧‧解碼、解壓縮
330‧‧‧顏色空間轉換
335‧‧‧執行色度格式逆轉換
340‧‧‧量化
345、640‧‧‧逆轉換
350‧‧‧色度格式轉換
355、645‧‧‧執行顏色空間逆轉換
360、425、545、604、620‧‧‧編碼
365、650‧‧‧逆TF
375‧‧‧HDR視訊訊號
405、505、605‧‧‧視訊編碼裝置
410、510、670‧‧‧HDR解碼過程
415、610‧‧‧輸入視訊訊號
435、555、625‧‧‧解碼圖像緩衝器(DPB)
445、575‧‧‧色度增強濾波器估計
455、655‧‧‧色度增強濾波器資訊
525‧‧‧4:4:4輸入視訊
565‧‧‧從4:2:0到4:4:4的色度升取樣
515‧‧‧4:2:0輸入視訊訊號
585、660‧‧‧濾波器資訊
602‧‧‧輸入HDR視訊訊號
615‧‧‧視訊訊號
630‧‧‧色度格式逆轉換
700‧‧‧邊緣方向
HDR‧‧‧高動態範圍
IP‧‧‧網際協定協定
Iub、IuCS、IuPS、iur、S1、X2‧‧‧介面
R1、R3、R6、R8‧‧‧參考點
SDR‧‧‧標準動態範圍
第1圖是示出被CIE 1931顏色空間色度覆蓋的,在高解析度(HD)TV中使用的BT.709色域、P3色域以及在超高解析度(UHD)TV中使用的BT.2020色域的圖; 第2圖是示出SDR視訊和HDR視訊的線性光到代碼等級之間的映射的圖; 第3A圖是示出示例HDR編碼過程的流程圖; 第3B圖是示出示例HDR解碼過程的流程圖; 第4A圖是示出使用色度增強濾波的示例HDR編碼過程的流程圖; 第4B圖是示出編碼器處的色度增強濾波器估計的示例應用的圖; 第4C圖是示出在其他後處理之前應用色度增強濾波的示例HDR解碼過程的流程圖; 第5A圖是示出使用色度增強濾波的示例HDR編碼過程的流程圖; 第5B圖是示出編碼器處4:4:4色度格式的色度增強濾波器估計的示例應用的圖; 第5C圖是示出在後處理期間應用色度增強濾波的示例HDR解碼過程的流程圖; 第6A圖是示出使用色度增強濾波的示例HDR編碼過程的流程圖; 第6B圖是示出編碼器處的色度增強濾波器估計的示例應用的圖; 第6C圖是示出在後處理之後應用色度增強濾波的示例HDR解碼過程的流程圖; 第7圖是示出被量化成八(8)個離散度(discrete degree)的示例邊緣方向的圖; 第8A圖示出了可以實施一個或多個揭露的實施方式的示例通信系統的系統圖; 第8B圖示出了可以在第8A圖示出的通信系統中使用的示例無線傳輸/接收單元(WTRU)的系統圖; 第8C圖示出了可以在第8A圖中示出的通信系統中使用的示例無線電存取網和示例核心網路的系統圖; 第8D圖示出了可以在第8A圖中示出的通信系統中使用的示例無線電存取網和示例核心網路的系統圖;以及 第8E圖示出了可以在第8A圖中示出的通信系統中使用的示例無線電存取網和示例核心網路的系統圖。
303‧‧‧後處理
305‧‧‧HDR編碼過程
315‧‧‧位元流
325‧‧‧解碼、解壓縮
335‧‧‧執行色度格式逆轉換
345‧‧‧逆轉換
355‧‧‧執行顏色空間逆轉換
365‧‧‧逆TF
375‧‧‧HDR視訊訊號
HDR‧‧‧高動態範圍
TF‧‧‧應用傳送函數

Claims (44)

  1. 一種視訊編碼的方法,該方法包括: 識別一視訊訊號的一圖像內的一特性; 確定包括與該特性相關聯的一個或多個樣本的一樣本集; 將一跨平面濾波器應用到該樣本集中的一樣本的一亮度平面分量以確定一偏移,該跨平面濾波器包括一高通濾波器;以及 將該偏移添加到與該亮度平面分量對應的該樣本的一重建色度平面分量。
  2. 如申請專利範圍第1項所述的方法,其中該跨平面濾波器被應用到該樣本集中的該一個或多個樣本的每一個樣本的該亮度平面分量。
  3. 如申請專利範圍第1項所述的方法,其中識別該特性是基於識別該特性的一接收到的指示。
  4. 如申請專利範圍第1項所述的方法,其中該特性包括一邊緣方向,該樣本集包括該圖像內具有與該邊緣方向匹配的一主邊緣方向的一樣本。
  5. 如申請專利範圍第1項所述的方法,其中該特性包括一空間區域,該樣本集包括該圖像的該空間區域內的該樣本。
  6. 如申請專利範圍第1項所述的方法,其中該特性包括一顏色,該樣本集包括該圖像內與該顏色匹配的該樣本。
  7. 如申請專利範圍第1項所述的方法,其中該特性包括一亮度,該樣本集包括該圖像內具有在一預定亮度範圍內的一亮度值的一樣本。
  8. 如申請專利範圍第1項所述的方法,其中在該圖像內識別多個特性,以及其中基於該多個特性確定該樣本集。
  9. 如申請專利範圍第1項所述的方法,其中該亮度平面分量和該重建色度平面分量具有不同的空間維度。
  10. 如申請專利範圍第1項所述的方法,其中該亮度平面分量和該重建色度平面分量具有相同的空間維度。
  11. 如申請專利範圍第1項所述的方法,更包括基於經由一SEI訊息接收到一個或多個跨平面濾波器參數來確定應用該跨平面濾波器。
  12. 如申請專利範圍第1項所述的方法,其中該重建色度平面分量是一第一重建色度平面分量,該方法更包括將該偏移添加到該樣本的一第二重建色度平面分量。
  13. 一種視訊編碼裝置,包括:       一處理器,被配置為:       識別一視訊訊號的一圖像內的一特性;       確定包括與該特性相關聯的一個或多個樣本的一樣本集;       將一跨平面濾波器應用到該樣本集中的一樣本的一亮度平面分量以確定一偏移,該跨平面濾波器包括一高通濾波器;以及       將該偏移添加到與該亮度平面分量對應的該樣本的一重建色度平面分量。
  14. 如申請專利範圍第13項所述的視訊編碼裝置,其中該處理器被配置為將該跨平面濾波器應用到該樣本集中的該一個或多個樣本的每一個樣本的該亮度平面分量。
  15. 如申請專利範圍第13項所述的視訊編碼裝置,其中該特性包括一邊緣方向,該樣本集包括該圖像內具有與該邊緣方向匹配的一主邊緣方向的該樣本。
  16. 如申請專利範圍第13項所述的視訊編碼裝置,其中該處理器被配置為基於識別該特性的一接收到的指示來識別該特性。
  17. 如申請專利範圍第13項所述的視訊編碼裝置,其中該特性包括一空間區域,該樣本集包括該圖像的該空間區域內的該樣本。
  18. 如申請專利範圍第13項所述的視訊編碼裝置,其中該特性包括一顏色,該樣本集包括該圖像內與該顏色匹配的該樣本。
  19. 如申請專利範圍第13項所述的視訊編碼裝置,其中該特性包括一亮度,該樣本集包括該圖像內具有在一預定亮度範圍內的一亮度值的該樣本。
  20. 如申請專利範圍第13項所述的視訊編碼裝置,其中該處理器被配置為在該圖像內識別多個特性,以及其中該樣本集是基於該多個特性而被確定。
  21. 如申請專利範圍第13項所述的視訊編碼裝置,其中該亮度平面分量和該重建色度平面分量具有不同的空間維度。
  22. 如申請專利範圍第13項所述的視訊編碼裝置,其中該亮度平面分量和該重建色度平面分量具有相同的空間維度。
  23. 如申請專利範圍第13項所述的視訊編碼裝置,其中該處理器更被配置為基於經由一SEI訊息接收到一個或多個跨平面濾波器參數來確定應用該跨平面濾波器。
  24. 如申請專利範圍第13項所述的視訊編碼裝置,其中該重建色度平面分量是一第一重建色度平面分量,該處理器更被配置為將該偏移添加到一第二重建色度平面分量。
  25. 一種編碼視訊訊號的方法,該方法包括: 識別該視訊訊號的一圖像內的一特性; 確定包括與該特性相關聯的一個或多個樣本的一樣本集; 產生用於該樣本集的一跨平面濾波器,其中該跨平面濾波器包括一高通濾波器;       確定與該跨平面濾波器相關聯的一個或多個跨平面濾波器參數;以及       將該一個或多個跨平面濾波器參數編碼到與該視訊訊號相關聯的一位元流中。
  26. 如申請專利範圍第25項所述的方法,更包括發送識別該特性的一指示。
  27. 如申請專利範圍第25項所述的方法,其中在一SEI訊息中表明該一個或多個跨平面濾波器參數。
  28. 如申請專利範圍第25項所述的方法,其中該一個或多個跨平面濾波器參數包括一縮放因數、一個或多個跨平面濾波器係數、一移位參數、一色度增強指示以及一色度分量指示中的一者或多者。
  29. 如申請專利範圍第28項所述的方法,其中該色度增強指示表明是否將該跨平面濾波器應用到一色度分量。
  30. 如申請專利範圍第25項所述的方法,其中該特性包括一空間區域,該樣本集包括該圖像的該空間區域內的該樣本。
  31. 如申請專利範圍第25項所述的方法,其中該特性包括一顏色,該樣本集包括該圖像內與該顏色匹配的該樣本。
  32. 如申請專利範圍第25項所述的方法,其中該特性包括一亮度,該樣本集包括該圖像內具有在一預定亮度範圍內的一亮度值的一樣本。
  33. 如申請專利範圍第25項所述的方法,其中該特性包括一邊緣方向,該樣本集包括在該圖像內具有與該邊緣方向匹配的一主邊緣方向的該樣本。
  34. 如申請專利範圍第25項所述的方法,其中在該圖像內識別多個特性,以及其中基於該多個特性來確定該樣本集。
  35. 一種視訊編碼裝置,包括: 一處理器,被配置為: 識別一視訊訊號的一圖像內的一特性; 確定包括與該特性相關聯的一個或多個樣本的一樣本集; 產生用於該樣本集的一跨平面濾波器,其中該跨平面濾波器包括一高通濾波器; 確定與該跨平面濾波器相關聯的一個或多個跨平面濾波器參數;以及 將該一個或多個跨平面濾波器參數編碼到與該視訊訊號相關聯的一位元流中。
  36. 如申請專利範圍第35項所述的視訊編碼裝置,其中該處理器更被配置為發送識別該特性的一指示。
  37. 如申請專利範圍第35項所述的視訊編碼裝置,其中在一SEI訊息中表明該一個或多個跨平面濾波器參數。
  38. 如申請專利範圍第35項所述的視訊編碼裝置,其中該一個或多個跨平面濾波器參數包括一縮放因數、一個或多個跨平面濾波器係數、一移位參數、一色度增強指示以及一色度分量指示中的一者或多者。
  39. 如申請專利範圍第38項所述的視訊編碼裝置,其中該色度增強指示表明是否將該跨平面濾波器應用到一色度分量。
  40. 如申請專利範圍第35項所述的視訊編碼裝置,其中該特性包括一空間區域,該樣本集包括該圖像的該空間區域內的該樣本。
  41. 如申請專利範圍第35項所述的視訊編碼裝置,其中該特性包括一顏色,該樣本集包括該圖像內與該顏色匹配的該樣本。
  42. 如申請專利範圍第35項所述的視訊編碼裝置,其中該特性包括一亮度,該樣本集包括該圖像內具有在一預定亮度範圍內的一亮度值的該樣本。
  43. 如申請專利範圍第35項所述的視訊編碼裝置,其中該特性包括一邊緣方向,該樣本集包括在該圖像內具有與該邊緣方向匹配的一主邊緣方向的該樣本。
  44. 如申請專利範圍第35項所述的視訊編碼裝置,其中該處理器被配置為在該圖像內識別多個特性,以及其中基於該多個特性來確定該樣本集。
TW105111986A 2015-04-17 2016-04-18 高動態範圍視訊編碼色度增強濾波 TW201642653A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US201562149494P 2015-04-17 2015-04-17

Publications (1)

Publication Number Publication Date
TW201642653A true TW201642653A (zh) 2016-12-01

Family

ID=55971187

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105111986A TW201642653A (zh) 2015-04-17 2016-04-18 高動態範圍視訊編碼色度增強濾波

Country Status (5)

Country Link
US (1) US10972728B2 (zh)
EP (1) EP3284259A1 (zh)
CN (1) CN107534769B (zh)
TW (1) TW201642653A (zh)
WO (1) WO2016168529A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111713111A (zh) * 2017-12-19 2020-09-25 Vid拓展公司 用于360度视频译码的面不连续性滤波
US12003770B2 (en) 2022-08-09 2024-06-04 Vid Scale, Inc. Face discontinuity filtering for 360-degree video coding

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3403406A1 (en) 2016-01-15 2018-11-21 VID SCALE, Inc. System and method for enhanced motion compensation using adaptive filtering
US10574959B2 (en) * 2017-07-05 2020-02-25 Qualcomm Incorporated Color remapping for non-4:4:4 format video content
US10778978B2 (en) * 2017-08-21 2020-09-15 Qualcomm Incorporated System and method of cross-component dynamic range adjustment (CC-DRA) in video coding
US10728549B2 (en) * 2017-11-06 2020-07-28 Dolby Laboratories Licensing Corporation Adaptive loop filtering for high-dynamic range video
US11962782B2 (en) 2018-01-29 2024-04-16 Interdigital Vc Holdings, Inc. Encoding and decoding with refinement of the reconstructed picture
CN110876061B (zh) * 2018-09-03 2022-10-11 华为技术有限公司 色度块预测方法及装置
WO2020097232A1 (en) * 2018-11-07 2020-05-14 Futurewei Technologies, Inc. Header parameter set for video coding
KR20200095651A (ko) * 2019-02-01 2020-08-11 삼성전자주식회사 고 동적 범위 콘텐트를 재생하는 전자 장치 및 그 방법
GB2586484B (en) * 2019-08-20 2023-03-08 Canon Kk A filter
US11303936B2 (en) * 2020-02-21 2022-04-12 Tencent America LLC Method and apparatus for filtering
US11610340B2 (en) 2020-04-17 2023-03-21 Tencent America LLC Edge enhancement filter
WO2023107378A1 (en) * 2021-12-09 2023-06-15 Beijing Dajia Internet Information Technology Co., Ltd Method and apparatus for cross-component prediction for video coding
WO2023200966A1 (en) * 2022-04-13 2023-10-19 Beijing Dajia Internet Information Technology Co., Ltd Method and apparatus for cross-component prediction for video coding
EP4344201A1 (en) * 2022-09-23 2024-03-27 Dolby Laboratories Licensing Corporation Cross-asset guided chroma reformatting for multi-asset imaging format

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4701783A (en) 1982-09-14 1987-10-20 New York Institute Of Technology Technique for encoding and decoding video with improved separation of chrominance and luminance
US7102669B2 (en) 2002-04-02 2006-09-05 Freescale Semiconductor, Inc. Digital color image pre-processing
EP1509045A3 (en) 2003-07-16 2006-08-09 Samsung Electronics Co., Ltd. Lossless image encoding/decoding method and apparatus using intercolor plane prediction
KR100754388B1 (ko) 2003-12-27 2007-08-31 삼성전자주식회사 레지듀 영상 다운/업 샘플링 방법 및 장치와 그를 이용한영상 부호화/복호화 방법 및 장치
US7397515B2 (en) 2004-01-30 2008-07-08 Broadcom Corporation Method and system for cross-chrominance removal using motion detection
KR101407748B1 (ko) 2004-10-13 2014-06-17 톰슨 라이센싱 복잡도 스케일러블 비디오 인코딩 및 디코딩을 위한 방법 및 장치
JP2008536414A (ja) 2005-04-13 2008-09-04 ゴットフリート・ヴィルヘルム・ライプニッツ・ウニヴェルジテート・ハノーヴァー ビデオの拡張された符号化方法及び装置
TWI314720B (en) 2005-05-31 2009-09-11 Himax Tech Inc 2d yc separation device and yc separation system
US7551232B2 (en) * 2005-11-14 2009-06-23 Lsi Corporation Noise adaptive 3D composite noise reduction
CN101009842B (zh) 2006-01-11 2012-02-01 华为技术有限公司 可分级视频压缩中插值的方法与装置
KR101266168B1 (ko) 2006-08-16 2013-05-21 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8270472B2 (en) 2007-11-09 2012-09-18 Thomson Licensing Methods and apparatus for adaptive reference filtering (ARF) of bi-predictive pictures in multi-view coded video
WO2010001999A1 (ja) 2008-07-04 2010-01-07 株式会社 東芝 動画像符号化/復号化方法及び装置
US8270466B2 (en) 2008-10-03 2012-09-18 Sony Corporation Adaptive decimation filter
CN201726499U (zh) 2010-05-04 2011-01-26 武汉光华芯科技有限公司 复合视频信号亮色分离系统
CN101902653B (zh) 2010-06-25 2013-04-24 杭州爱威芯科技有限公司 一种基于亮度样本的方向预测的场内yc分离方法
US20120008687A1 (en) 2010-07-06 2012-01-12 Apple Inc. Video coding using vector quantized deblocking filters
US9807403B2 (en) 2011-10-21 2017-10-31 Qualcomm Incorporated Adaptive loop filtering for chroma components
US9380302B2 (en) * 2012-02-27 2016-06-28 Texas Instruments Incorporated Sample adaptive offset (SAO) parameter signaling
WO2013164922A1 (ja) 2012-05-02 2013-11-07 ソニー株式会社 画像処理装置及び画像処理方法
US20140086316A1 (en) 2012-09-24 2014-03-27 Louis Joseph Kerofsky Video compression with color space scalability
JP6175505B2 (ja) 2012-09-28 2017-08-02 ヴィド スケール インコーポレイテッド ビデオコーディングにおけるクロマ信号強調のためのクロスプレーンフィルタリング
US9357211B2 (en) 2012-12-28 2016-05-31 Qualcomm Incorporated Device and method for scalable and multiview/3D coding of video information
US9503733B2 (en) 2013-04-10 2016-11-22 ARRIS Enterprises, LLC Re-sampling with phase offset adjustment for luma and chroma to signal adaptive filters in scalable video coding
US9686561B2 (en) * 2013-06-17 2017-06-20 Qualcomm Incorporated Inter-component filtering
WO2016172314A1 (en) 2015-04-21 2016-10-27 Vid Scale, Inc. Artistic intent based video coding

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111713111A (zh) * 2017-12-19 2020-09-25 Vid拓展公司 用于360度视频译码的面不连续性滤波
CN111713111B (zh) * 2017-12-19 2024-04-09 Vid拓展公司 用于360度视频译码的面不连续性滤波
US12003770B2 (en) 2022-08-09 2024-06-04 Vid Scale, Inc. Face discontinuity filtering for 360-degree video coding

Also Published As

Publication number Publication date
EP3284259A1 (en) 2018-02-21
US20180124400A1 (en) 2018-05-03
WO2016168529A1 (en) 2016-10-20
US10972728B2 (en) 2021-04-06
CN107534769B (zh) 2021-08-03
CN107534769A (zh) 2018-01-02

Similar Documents

Publication Publication Date Title
CN108141507B (zh) 利用查找表进行颜色校正
CN107534769B (zh) 用于高动态范围视频译码的色度增强滤波
JP7433019B2 (ja) ビデオコーディングにおけるクロマ信号強調のためのクロスプレーンフィルタリング
TWI764870B (zh) 視訊訊號處理裝置及方法
JP6694031B2 (ja) 3次元ベースのカラーマッピングでのモデルパラメータ最適化のためのシステムおよび方法
JP6564086B2 (ja) マルチレイヤビデオコーディングのコンバインドスケーラビリティ処理
US20180309995A1 (en) High dynamic range video coding
TW201642655A (zh) 基於藝術意向之視訊編碼
TW201637448A (zh) 非4:4:4螢幕內容視訊調色盤編碼