TWI610574B - 於解塊中色度量化參數偏移之使用 - Google Patents

於解塊中色度量化參數偏移之使用 Download PDF

Info

Publication number
TWI610574B
TWI610574B TW102133967A TW102133967A TWI610574B TW I610574 B TWI610574 B TW I610574B TW 102133967 A TW102133967 A TW 102133967A TW 102133967 A TW102133967 A TW 102133967A TW I610574 B TWI610574 B TW I610574B
Authority
TW
Taiwan
Prior art keywords
offset
slice
chrominance
image
level
Prior art date
Application number
TW102133967A
Other languages
English (en)
Other versions
TW201424378A (zh
Inventor
蘇利文蓋瑞J
Original Assignee
微軟技術授權有限責任公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US13/732,369 external-priority patent/US9591302B2/en
Application filed by 微軟技術授權有限責任公司 filed Critical 微軟技術授權有限責任公司
Publication of TW201424378A publication Critical patent/TW201424378A/zh
Application granted granted Critical
Publication of TWI610574B publication Critical patent/TWI610574B/zh

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明提供當決定用於解塊濾波的控制參數時使用色度量化參數(「QP」)偏移的創新。舉例而言,作為編碼的部分,編碼器設定圖像位準色度QP偏移及切片位準色度QP偏移用於圖像切片的編碼。編碼器亦執行切片的至少部分的解塊濾波,其中控制參數的推導僅考慮圖像位準色度QP偏移。編碼器輸出包括編碼內容的位元串流的至少部分。作為解碼的部分,相對應的解碼器設定圖像位準色度QP偏移及切片位準色度QP偏移用於圖像切片的解碼,但是用於解塊濾波的控制參數的推導僅考慮圖像位準色度QP偏移。

Description

於解塊中色度量化參數偏移之使用
本發明係關於解塊中色度量化參數偏移的使用。
【相關申請案之交叉引用】
本申請案主張於2012年7月2日提出申請的美國臨時專利申請案第61/667,381號的權益,該美國臨時專利申請案的揭示內容以引用的方式併入本文。本申請案亦主張於2012年9月29日提出申請的美國臨時專利申請案第61/707,948號的權益,該美國臨時專利申請案的揭示內容以引用的方式併入本文。
工程師使用壓縮(亦稱為源碼或源編碼)以減少數位視訊的位元率。壓縮藉由轉換資訊至較低的位元率形式來減少儲存及傳送視訊資訊的成本。解壓(亦稱為解碼)自壓縮形式重建原始資訊的版本。「編解碼器」為編碼器/解碼器系統。
過去的二十年裡,已經採用各種視訊編解碼標準,包括H.261、H.262(MPEG-2或ISO/IEC 13818-2)、H.263 及H.264(AVC或ISO/IEC 14496-10)標準及MPEG-1(ISO/IEC 11172-2)、MPEG-4 Visual(ISO/IEC 14496-2)及SMPTE 421M標準。近年來,HEVC標準正在發展中。視訊編解碼標準通常定義用於已編碼的視訊位元串流的語法的選擇,詳述當特定特徵用於編碼及解碼時位元串流中的參數。在許多情況中,視訊編解碼標準亦提供關於解碼器應執行以實現正確解碼結果的解碼操作的細節。除了編解碼標準以外,各種專屬編解碼格式定義用於已編碼的視訊位元串流的語法的其他選擇及相對應的解碼操作。
位元串流中的一種參數類型為量化參數(quantization parameter;「QP」)。在編碼期間,編碼器設定QP值以調整品質及位元率。一般而言,對於較低的QP值,已編碼視訊的品質較高但消耗較多的位元。另一方面,對於較高的QP值,已編碼視訊的品質較低且消耗較少的位元。當自已編碼視訊重建視訊內容時,解碼器使用QP值。
諸如相機、動畫輸出、螢幕擷取模組等等的視訊源通常提供視訊,該視訊轉換為諸如YUV格式的格式。YUV格式包括表示亮度值且具有多個樣本值的亮度(或Y)分量以及表示色差值具有多個樣本值的色度分量。色差值的精確定義(及從諸如RGB的另一色空間至YUV色空間或從YUV色空間至諸如RGB的另一色空間的轉換操作)取決於實施。一般而言,亮度/色度色空間可為具有亮度(或光度)分量及一或更多個色度(或彩度)分量的任何色空間,包括YUV、Y’UV、YIQ、Y’IQ及YDbDr以及諸如YCbCr及YCoCg的變 體,其中術語Y表示亮度分量及其他術語表示色度分量。
對於一些編解碼標準及格式,編碼器可針對亮度分量及色度分量設定QP的不同值。以此方式,編碼器可控制如何針對不同的色分量執行量化,及從而調節各分量之間的品質及位元率。然而,控制及使用針對色度分量的QP值的先前方法具有各種缺點,包括高QP情況中缺乏細粒度控制及不能在其他解碼操作中提供適當的回應位準。
概括而言,詳細描述介紹控制及使用色度量化參數(「QP」)值的創新,該等色度量化參數值取決於亮度QP值。更一般而言,創新係關於控制及使用針對合成色分量(例如,色度分量)的QP值,該等合成色分量的QP值取決於針對原色分量(例如,亮度分量)的QP值。
舉例而言,視訊編碼器編碼具有多個色分量的視訊,針對該視訊QP值根據原色分量及至少一個合成色分量之間的關係變化。編碼步驟包括以下步驟:解塊濾波,在解塊濾波期間控制參數(用於控制解塊濾波)的推導至少部分地基於色度QP偏移。色度QP偏移指示與亮度QP值的差異,該差異在別處以訊號表示。圖像位準色度QP偏移可用於指定應用於圖像的色度QP值的差異。除了圖像位準色度QP偏移以外,切片位準色度QP偏移可用於指定應用於切片的色度QP值的差異,該切片為圖像的一部分。當推導出用於解塊濾波的控制參數時,可僅以圖像位準色度QP偏移來指定所考慮的色度QP偏移從而簡化適應性解塊濾波的實施,即使當圖像 位準及切片位準色度QP偏移的組合已經用於位元率控制目的,及此類切片位準色度QP偏移可供編碼器及解碼器使用。編碼器輸出包括編碼視訊的位元串流或位元串流部分的至少部分,該位元串流或位元串流部分的至少部分潛在地包括圖像位準色度QP偏移及切片位準色度QP偏移兩者。
作為另一實例,圖像或視訊編碼器編碼圖像或視訊內容,針對該圖像或視訊內容,QP值根據亮度分量及色度分量之間的關係變化。作為編碼的部分,編碼器設定圖像位準色度QP偏移及切片位準色度QP偏移用於編碼圖像切片。編碼器亦執行對切片的至少部分的解塊濾波,其中用於切片的部分的解塊濾波的控制參數的推導考慮圖像位準色度QP偏移而不是切片位準色度QP偏移。編碼器隨後輸出包括編碼內容的位元串流的至少部分。
或者,視訊解碼器接收包括具有多個色分量的編碼視訊的位元串流或位元串流部分的至少部分,針對該編碼視訊QP值根據原色分量及至少一個合成色分量之間的關係變化。位元串流或位元串流部分潛在地包括圖像位準色度QP偏移及切片位準色度QP偏移兩者。解碼器解碼編碼視訊。解碼步驟包括以下步驟:解塊濾波,在該解塊濾波期間,控制參數的推導至少部分地基於色度QP偏移。可僅以圖像位準色度QP偏移來指定考慮的色度QP偏移從而簡化適應性解塊濾波的實施,即使當圖像位準色度QP偏移及切片位準色度QP偏移的組合已經用於位元率控制,及此類切片位準色度QP偏移可供解碼器使用。
作為另一實例,圖像或視訊解碼器接收包括編碼圖像或視訊內容的至少部分位元串流及解碼內容,針對該內容QP值根據亮度分量及色度分量之間的關係變化。作為解碼的部分,解碼器設定圖像位準色度QP偏移及切片位準色度QP偏移用於解碼圖像的切片。解碼器亦執行對至少部分切片的解塊濾波,其中用於切片部分的解塊濾波的控制參數的推導考慮圖像位準色度QP偏移而不是切片位準色度QP偏移。
編碼或解碼可作為方法的部分、作為適用於執行方法的計算裝置的部分或作為儲存用於引起計算裝置執行方法的電腦可執行指令的有形電腦可讀取媒體的部分實施。
本發明的前述及其他目標、特徵及優點將從以下詳細描述中變得更為明顯,以下詳細描述參閱隨附圖式進行。
32n‧‧‧訊框緩衝儲存區域
36n‧‧‧訊框緩衝儲存區域
46n‧‧‧訊框緩衝儲存區域
100‧‧‧計算系統
110‧‧‧處理單元
115‧‧‧處理單元
120‧‧‧記憶體
125‧‧‧記憶體
130‧‧‧配置
140‧‧‧儲存器
150‧‧‧輸入裝置
160‧‧‧輸出裝置
170‧‧‧通訊連接
201‧‧‧網路環境
202‧‧‧網路環境
210‧‧‧工具
212‧‧‧編碼工具
214‧‧‧重現工具
220‧‧‧編碼器
250‧‧‧網路
270‧‧‧解碼器
300‧‧‧編碼器系統
310‧‧‧視訊源
311‧‧‧源視訊框
320‧‧‧源訊框暫時記憶體儲存區域
321‧‧‧源訊框暫時記憶體儲存區域
322‧‧‧源訊框暫時記憶體儲存區域
330‧‧‧訊框選擇器
331‧‧‧訊框
340‧‧‧編碼器
341‧‧‧源訊框
342‧‧‧記憶體管理控制操作訊號
350‧‧‧解碼程序仿真器
351‧‧‧解碼訊框
360‧‧‧解碼訊框儲存區域
361‧‧‧訊框緩衝器
362‧‧‧訊框緩衝器
369‧‧‧訊框
370‧‧‧暫時編碼資料區域
371‧‧‧資料
380‧‧‧通道編碼器
390‧‧‧通道
400‧‧‧解碼器系統
410‧‧‧通道
420‧‧‧通道解碼器
421‧‧‧編碼資料
430‧‧‧暫時編碼資料區域
431‧‧‧編碼訊框
432‧‧‧MMCO/RPS資訊
450‧‧‧解碼器
451‧‧‧解碼訊框
461‧‧‧訊框緩衝儲存區域/訊框緩衝器
462‧‧‧訊框緩衝儲存區域/訊框緩衝器
469‧‧‧訊框
480‧‧‧輸出定序器
490‧‧‧輸出目的地
500‧‧‧視訊編碼器
505‧‧‧訊框
510‧‧‧移動估計器
515‧‧‧移動資訊
520‧‧‧訊框儲存器
522‧‧‧迴路內解塊濾波器
525‧‧‧訊框
530‧‧‧移動補償器
535‧‧‧訊框
545‧‧‧預測剩餘值
560‧‧‧頻率變換器
566‧‧‧反向頻率變換器
570‧‧‧量化器
576‧‧‧反向量化器
580‧‧‧熵編碼器
590‧‧‧緩衝器
595‧‧‧編碼資料
600‧‧‧一般性解碼器
605‧‧‧訊框
608‧‧‧後處理解塊濾波器
610‧‧‧迴路內解塊濾波器
615‧‧‧移動資訊
620‧‧‧訊框儲存器
625‧‧‧參考訊框
630‧‧‧移動補償器
635‧‧‧移動補償預測
645‧‧‧預測剩餘值
660‧‧‧反向頻率變換器
670‧‧‧反向量化器
680‧‧‧剖析器/熵解碼器
690‧‧‧緩衝器
695‧‧‧編碼資料
701‧‧‧語法片段
702‧‧‧語法片段
800‧‧‧技術
810‧‧‧步驟
820‧‧‧步驟
830‧‧‧步驟
900‧‧‧技術
910‧‧‧步驟
920‧‧‧步驟
930‧‧‧步驟
第1圖為示例性計算系統的圖,在該示例性計算系統中可實施一些所描述的實施例。
第2a圖及第2b圖為示例性網路環境的圖,在該示例性網路環境中可實施一些所描述的實施例。
第3圖為示例性編碼器系統的圖,結合該示例性編碼器系統可實施一些所描述的實施例。
第4圖為示例性解碼器系統的圖,結合該示例性解碼器系統可實施一些所描述的實施例。
第5圖為圖示示例性視訊編碼器的圖,結合該示例性視訊編碼器可實施一些所描述的實施例。
第6圖為圖示示例性視訊解碼器的圖,結合該示例 性視訊解碼器可實施一些所描述的實施例。
第7a圖為顯示圖像參數集合RBSP語法中新的旗標slicelevel_chroma_qp_flag的表,及第7b圖為顯示切片標頭語法中的新值slice_qp_delta_cb及slice_qp_delta_cr的表。
第8圖為圖示用於使用色度QP偏移以在編碼期間控制解塊濾波的一般性技術的流程圖。
第9圖為圖示用於使用色度QP偏移以在解碼期間控制解塊濾波的一般性技術的流程圖。
對於使用多分量色空間表示的視訊內容及其他圖像內容的壓縮,設計的重要態樣為控制每一色分量的量化粒度。此控制通常藉由建立相關於一個色分量(經常稱為原色分量)及另一個色分量(經常稱為合成色分量)的一或更多個量化步階之間的比例縮放關係來實現。通常,原色分量為亮度分量,及一或更多個合成色分量為一或更多個色度分量。
舉例而言,在ITU-T H.264標準中,亮度分量及色度分量的QP之間的關係是根據QP值、檢查表及編碼器控制的偏移,有時連同用於建立頻率特定比例縮放因數的量化比例縮放矩陣來決定。用於QP編碼控制的此態樣的現有設計存在一些缺點。舉例而言,在H.264中色度分量的最大QP值(指示色度的最粗糙的量化)受限於一值,該值實質上小於亮度分量支援的最大QP值(指示亮度的最粗糙的量化)。當量化的粗糙度受限於色度的最大QP值時,此可導致使用過量的位元來編碼視訊內容的色度分量,此使得較少的位元用於編碼 視訊內容的亮度分量及可引起整體品質的降低。
詳細描述介紹控制與原色分量量化粒度相關的合成色分量量化粒度的各種方法。在許多情況中,該等方法減少了先前方法的缺點。特定而言,詳細描述介紹使用具有延伸範圍的色度QP值的創新。
舉例而言,所描述的方法包括使用檢查表的延伸大小,該檢查表可用於建立原色分量及合成色分量之間的關係。作為另一實例,藉由此檢查表建立的QP值函數關係可替代地經由使用簡單的數學運算提供。亦描述在視訊編碼及解碼中控制QP值的額外創新態樣。所描述的技術可應用至視訊編碼/解碼以外的額外應用中,諸如靜止圖像編碼/解碼、醫療掃描內容編碼/解碼、多譜圖像內容編碼/解碼等等。儘管本文描述的操作在某處描述為藉由編碼器(例如,視訊編碼器)或解碼器(例如,視訊解碼器)執行,然而在許多情況中,操作可替代地藉由另一類型的媒體處理工具執行。
本文描述的一些創新係參閱專門針對HEVC標準的語法元素及操作而說明。舉例而言,對HEVC標準的草案版本JCTVC-I1003-2012年4月日內瓦第9次會議的「高效視訊編碼(High efficiency video coding;「HEVC」)文本規範草案7」,JCTVC-I1003_d5進行參閱。本文描述的創新亦可針對其他標準或格式執行。
本文描述的一些創新係參閱YCbCr格式中的色分量的語法元素及操作而說明。本文描述的創新亦可針對諸如Y’UV、YIQ、Y’IQ及YDbDr的其他亮度/色度格式以及諸如 YCoCg的變體實施。應理解Cb及Cr分量的實例在色度分量為U及V、I及Q、Db及Dr、Co及Cg或另一格式的色度分量時亦可同樣應用。
更一般而言,本文描述的實例的各種替代為可能的。舉例而言,可藉由改變所描述的方法動作的排序、拆分、重複或省略某些方法動作等等來改變本文所描述的一些方法。所揭示的技術的各種態樣可組合或分別使用。不同實施例使用所描述的創新中的一或更多者。本文所描述的一些創新解決背景技術中提到的問題中的一或更多者。通常,給定的技術/工具無法解決所有此類問題。
I.示例性計算系統。
第1圖圖示適當的計算系統(100)的一般性實例,在該適當的計算系統(100)中可實施數個所描述的創新。計算系統(100)並非意欲暗示對使用或功能性範圍的任何限制,因為創新可在多種通用或專用計算系統中實施。
參閱第1圖,計算系統(100)包括一或更多個處理單元(110、115)及記憶體(120、125)。在第1圖中,此最基本配置(130)包括在虛線內。處理單元(110、115)執行電腦可執行指令。處理單元可為通用中央處理單元(central processing unit;CPU)、特殊應用積體電路(application-specific integrated circuit;ASIC)中的處理器或任何其他類型的處理器。在多處理系統中,多個處理單元執行電腦可執行指令以增強處理能力。舉例而言,第1圖圖示中央處理單元(110)以及圖形處理單元或共處理單元(115)。有形記憶體(120、125) 可為揮發性記憶體(例如,暫存器、快取記憶體、RAM)、非揮發性記憶體(例如,ROM、EEPROM、快閃記憶體等等)或一或更多個處理單元可存取的該二種記憶體的某一組合。記憶體(120、125)儲存適合於由一或更多個處理單元執行的電腦可執行指令形式的軟體(180),軟體(180)實施用於在解塊濾波中使用色度QP偏移的一或更多個創新。
計算系統可具有額外的特徵結構。舉例而言,計算系統(100)包括儲存器(140)、一或更多個輸入裝置(150)、一或更多個輸出裝置(160)及一或更多個通訊連接(170)。諸如匯流排、控制器或網路的互連機構(未圖示)互連計算系統(100)的部件。通常,作業系統軟體(未圖示)提供操作環境用於在計算系統(100)中執行的其他軟體,及協調計算系統(100)的部件的活動。
有形儲存器(140)可為可移除的或不可移除的,及包括磁碟、磁帶或磁帶盒、CD-ROM、DVD或可用於儲存資訊及可在計算系統(100)內部存取的任何其他媒體。儲存器(140)儲存用於軟體(180)的指令,所述軟體(180)實施用於在解塊濾波中使用色度QP偏移的一或更多個創新。
一或更多個輸入裝置(150)可為觸摸式輸入裝置,諸如鍵盤、滑鼠、筆或軌跡球、聲音輸入裝置、掃描裝置或提供輸入至計算系統(100)的另一裝置。對於視訊編碼,一或更多個輸入裝置(150)可為相機、視訊卡、TV調諧器卡,或接受類比或數位形式的視訊輸入的類似裝置,或讀取視訊樣本至計算系統(100)內的CD-ROM或CD-RW。一或更多個輸出裝 置(160)可為顯示器、列印機、揚聲器、CD燒錄器或提供來自計算系統(100)的輸出的另一裝置。
一或更多個通訊連接(170)賦能通訊媒體至另一計算實體的通訊。通訊媒體以已調制資料訊號形式傳送資訊,該等資訊諸如電腦可執行指令、聲訊或視訊輸入或輸出或其他資料。已調制資料訊號為具有以在訊號中編碼資訊的該方式設定或變化的訊號特徵結構中的一或更多者的訊號。舉例而言(但並非限制),通訊媒體可使用電載波、光學載波、RF載波或其他載波。
可在電腦可讀取媒體的一般上下文中描述創新。電腦可讀取媒體為任何可用的有形媒體,該媒體可在計算環境內存取。舉例而言(但並非限制),對於計算系統(100),電腦可讀取媒體包括記憶體(120、125)、儲存器(140)及以上任何一者的組合。
可在電腦可執行指令的一般上下文中描述創新,諸如包括在程式模組中、在目標真實或虛擬處理器上的計算系統中執行的彼等電腦可執行指令。一般而言,程式模組包括執行特定任務或實施特定抽象資料類型的常式、程式、庫、物件、類、部件、資料結構等等。在各種實施例中,若有需要,程式模組的功能可在程式模組之間組合或拆分。用於程式模組的電腦可執行指令可在本端或分散式計算系統內執行。
術語「系統」及「裝置」在本文可互換使用。除非上下文清楚地指示,否則兩個術語皆不暗指對計算系統或計 算裝置之類型的任何限制。一般而言,計算系統或計算裝置可為本端的或分散的,及可包括具有實施本文所描述的功能的軟體的專用硬體及/或通用硬體的任何組合。
所揭示的方法亦可使用配置用於執行所揭示方法中的任一者的專門計算硬體實施。舉例而言,所揭示的方法可藉由特別設計或配置用於實施所揭示方法中的任一者的積體電路(例如,特殊應用積體電路(application specific integrated circuit;「ASIC」)(諸如ASIC數位訊號處理單元(digital signal process unit;「DSP」))、圖形處理單元(graphics processing unit;「GPU」),或諸如現場可程式閘陣列(field programmable gate array;「FPGA」)的可程式邏輯裝置(programmable logic device;「PLD」))實施。
為了介紹,詳細描述使用如「決定」及「使用」之術語描述計算系統中的電腦操作。該等術語對於由電腦執行的操作係高度抽象化,及不應與由人執行的動作混淆。對應於該等術語的實際電腦操作取決於實施而變化。
II.示例性網路環境。
第2a圖及第2b圖圖示示例性網路環境(201、202),該等示例性網路環境包括視訊編碼器(220)及視訊解碼器(270)。編碼器(220)及解碼器(270)經由網路(250)使用適當的通訊協定連接。網路(250)可包括網際網路或另一電腦網路。
在第2a圖中圖示的網路環境(201)中,每一實時通訊(real-time communication;「RTC」)工具(210)包括用於雙向通訊的編碼器(220)及解碼器(270)兩者。給定編碼器(220) 可產生符合SMPTE 421M標準、ISO-IEC 14496-10標準(亦已知為H.264或AVC)、HEVC標準、另一標準或專屬格式的輸出,同時相對應的解碼器(270)接受來自編碼器(220)的編碼資料。雙向通訊可為視訊會議、視訊電話呼叫或其他雙方通訊情境中的一部分。儘管第2a圖中的網路環境(201)包括二個實時通訊工具(210),然而網路環境(201)可替代地包括三個或三個以上參與多方通訊的實時通訊工具(210)。
實時通訊工具(210)藉由編碼器(220)管理編碼。第3圖圖示示例性編碼器系統(300),該示例性編碼器系統(300)可包括在實時通訊工具(210)中。或者,實時通訊工具(210)使用另一編碼器系統。實時通訊工具(210)亦藉由解碼器(270)管理解碼。第4圖圖示示例性解碼器系統(400),該示例性解碼器系統(400)可包括在實時通訊工具(210)中。或者,實時通訊工具(210)使用另一解碼器系統。
在第2b圖中圖示的網路環境(202)中,編碼工具(212)包括編碼器(220),該編碼器(220)編碼用於傳送至多個重現工具(214)的視訊,該等多個重現工具(214)包括解碼器(270)。單向通訊可設置用於視訊監視系統、網路相機監視系統、遠端桌上會議展示,或編碼視訊及將視訊從一個位置發送至一或更多個其他位置的其他情境。儘管第2b圖中的網路環境(202)包括二個重現工具(214),然而網路環境(202)可包括更多或更少的重現工具(214)。一般而言,重現工具(214)與編碼工具(212)通訊以決定重現工具(214)將接收的視訊串流。重現工具(214)接收串流,緩衝所接收的編碼資料達適當的時段,及開始解 碼與重現。
第3圖圖示示例性編碼器系統(300),該示例性編碼器系統(300)可包括在編碼工具(212)中。或者,編碼工具(212)使用另一編碼器系統。編碼工具(212)亦可包括伺服器端控制器邏輯,該伺服器端控制器邏輯用於管理與一或更多個重現工具(214)的連接。第4圖圖示示例性解碼器系統(400),該示例性解碼器系統(400)可包括在重現工具(214)中。或者,重現工具(214)使用另一解碼器系統。重現工具(214)亦可包括客戶端控制器邏輯,該客戶端控制器邏輯用於管理與編碼工具(212)的連接。
III.示例性編碼器系統。
第3圖為示例性編碼器系統(300)的方塊圖,結合該示例性編碼器系統(300)可實施一些所描述的實施例。編碼器系統(300)可為能夠以多個編碼模式的任一者操作的通用編碼工具,該多個編碼模式諸如有用於實時通訊的低潛時編碼模式、轉碼模式,及用於自檔案或串流進行媒體重現的常規編碼模式,或者編碼器系統(300)可為適用於一個此類編碼模式的專用編碼工具。編碼器系統(300)可實施為作業系統模組、應用程式庫的部分或獨立應用程式。整體而言,編碼器系統(300)從視訊源(310)接收一序列源視訊框(311)及產生編碼資料輸出至通道(390)。輸出至通道的編碼資料可包括語法元素,該等語法元素指示針對色度設定的QP值,諸如圖像位準色度QP偏移及/或切片位準色度QP偏移。
視訊源(310)可為相機、調諧器卡、儲存媒體或其他 數位視訊源。視訊源(310)以(例如)每秒30個訊框的訊框速率產生一序列視訊框。如本文所使用的,術語「訊框」一般代表源圖像資料、編碼圖像資料或重建的圖像資料。對於漸進式視訊,訊框為漸進的視訊框。對於交錯式視訊,在示例性實施例中,交錯的視訊框在編碼之前解交錯。或者,二個互補交錯的視訊場經編碼為交錯的視訊框或分離的場。除了指示漸進的視訊框之外,術語「訊框」亦可指示單個非成對的視訊場、一對互補的視訊場、表示給定時間處的視訊物件的視訊物件平面,或較大的圖像中的感興趣區域。視訊物件平面或區域可為包括一場景的多個物件或區域的較大圖像的部分。
到達的源訊框(311)儲存在源訊框暫時記憶體儲存區域(320)中,該源訊框暫時記憶體儲存區域(320)包括多個訊框緩衝儲存區域(321、322、……、32n)。訊框緩衝器(321、322等等)在源訊框儲存區域(320)中保留一個源訊框。在源訊框(311)中的一或更多者已經儲存在訊框緩衝器(321、322等等)中之後,訊框選擇器(330)週期地從源訊框儲存區域(320)中選擇單獨的源訊框。藉由訊框選擇器(330)選擇訊框用於輸入至編碼器(340)的順序可不同於藉由視訊源(310)產生訊框的順序,例如,訊框可在順序中位於前面,從而暫時地促進向後預測。在編碼器(340)之前,編碼器系統(300)可包括預處理器(未圖示),該預處理器在編碼之前執行對所選擇的訊框(331)的預處理(例如,濾波)。預處理亦可包括色空間轉換為原色分量及合成色分量用於編碼。
編碼器(340)編碼所選擇的訊框(331)以產生編碼訊框(341)及亦產生記憶體管理控制操作(memory management control operation;「MMCO」)訊號(342)或參考圖像集(reference picture set;「RPS」)資訊。若當前訊框不是已編碼的第一訊框,則當執行當前訊框的編碼程序時,編碼器(340)可使用已經儲存在解碼訊框暫時記憶體儲存區域(360)中的一或更多個先前編碼/解碼的訊框(369)。此類儲存的解碼訊框(369)被用作用於當前源訊框(331)內容的訊框間預測的參考訊框。一般而言,編碼器(340)包括多個編碼模組,該多個編碼模組執行編碼任務,諸如移動估計及補償、頻率變換、量化及熵編碼。藉由編碼器(340)執行的確切操作可取決於壓縮格式變化。輸出編碼資料的格式可為Windows媒體視訊格式、VC-1格式、MPEG-x格式(例如,MPEG-1、MPEG-2或MPEG-4)、H.26x格式(例如,H.261、H.262、H.263、H.264)、HEVC格式或其他格式。
舉例而言,在編碼器(340)內,訊框間編碼預測的訊框根據來自參考訊框的預測表示。移動估計器估計源訊框(341)的樣本區塊或其他樣本集合相對於一或更多個參考訊框(369)的移動。當使用多個參考訊框時,多個參考訊框可來自不同的暫時方向或相同的暫時方向。移動估計器輸出經熵編碼的移動資訊,諸如移動矢量資訊。移動補償器應用移動矢量至參考訊框以決定移動補償預測值。編碼器決定區塊的移動補償預測值與相對應的原始值之間的差異(若有)。使用頻率變換、量化及熵編碼進一步編碼該等預測剩餘值。量化可使 用色度QP值。舉例而言,編碼器(340)設定針對圖像、切片及/或視訊的其他部分的亮度QP值及色度QP值及因此量化變換係數。類似地,對於訊框內預測,編碼器(340)可決定針對區塊的訊框內預測值,決定預測剩餘值及編碼預測剩餘值(使用頻率變換、量化及熵編碼)。特定而言,編碼器(340)的熵編碼器壓縮量化的變換系數值以及某些附帶資訊(例如,移動矢量資訊、QP值、模式決定、參數選擇)。典型的熵編碼技術包括指數哥倫布(Exp-Golomb)編碼、算術編碼、差分編碼、霍夫曼編碼、持續長度編碼、可變長度至可變長度(variable-length-to-variable-length;「V2V」)編碼、可變長度至固定長度(variable-length-to-fixed-length;「V2F」)編碼、LZ編碼、詞典編碼、概率區間劃分熵編碼(probability interval partitioning entropy coding;「PIPE」)及以上各者的組合。熵編碼器可針對不同種類的資訊使用不同編碼技術及可從特定編碼技術內的多個編碼表中選擇。
編碼訊框(341)及MMCO/RPS資訊(342)藉由解碼程序仿真器(350)處理。解碼程序仿真器(350)實施解碼器的一些功能,例如,解碼任務以重建參考訊框,該等參考訊框藉由編碼器(340)在移動估計及補償中使用。解碼程序仿真器(350)使用MMCO/RPS資訊(342)以決定是否需要重建給定的編碼訊框(341)及儲存給定的編碼訊框(341)用作後續待編碼的訊框的訊框間預測的參考訊框。若MMCO/RPS資訊(342)指示需要儲存編碼訊框(341),則解碼程序仿真器(350)模仿將藉由接收編碼訊框(341)的解碼器進行的解碼程序及產生相對應的解 碼訊框(351)。如此做,當編碼器(340)已經使用已經儲存在解碼訊框儲存區域(360)中的一或更多個解碼訊框(369)時,解碼程序仿真器(350)亦使用來自儲存區域(360)的一或更多個解碼訊框(369)作為解碼程序的一部分。
解碼訊框暫時記憶體儲存區域(360)包括多個訊框緩衝儲存區域(361、362、……、36n)。解碼程序仿真器(350)使用MMCO/RPS資訊(342)以管理儲存區域(360)的內容,從而識別具有編碼器(340)不再需要用作參考訊框的訊框的任何訊框緩衝器(361、362等等)。在模仿解碼程序之後,解碼程序仿真器(350)在訊框緩衝器(361、362等等)中儲存新解碼的訊框(351),該訊框緩衝器(361、362等等)已經以此方式識別。
編碼訊框(341)及MMCO/RPS資訊(342)亦在暫時編碼資料區域(370)中緩衝。聚集在編碼資料區域(370)中的編碼資料可含有作為基本編碼視訊位元串流的語法的部分之語法元素,該等語法元素指示針對色度設定的QP值,諸如圖像位準色度QP偏移及/或切片位準色度QP偏移。聚集在編碼資料區域(370)中的編碼資料亦可包括關於編碼視訊資料的媒體元資料(例如,作為一或更多個補充增強資訊(supplemental enhancement information;「SEI」)訊息或視訊可用性資訊(video usability information;「VUI」)訊息中的一或更多個參數)。
來自暫時編碼資料區域(370)的聚集資料(371)藉由通道編碼器(380)處理。通道編碼器(380)可分封化用於作為媒 體串流傳輸的聚集資料(例如,根據諸如ISO/IEC 14496-12的媒體容器格式),在此情況下通道編碼器(380)可增加語法元素作為媒體傳輸串流的語法的部分。或者,通道編碼器(380)可組織用於作為檔案儲存的聚集資料(例如,根據諸如ISO/IEC 14496-12的媒體容器格式),在此情況下通道編碼器(380)可增加語法元素作為媒體儲存檔案的語法的部分。或者,更一般地,通道編碼器(380)可實施一或更多個媒體系統多工協定或傳輸協定,在此情況下通道編碼器(380)可增加語法元素作為一或更多個協定的語法的部分。通道編碼器(380)提供輸出至通道(390),該通道(390)表示儲存器、通訊連接或用於輸出的另一通道。
IV.示例性解碼器系統。
第4圖為示例性解碼器系統(400)的方塊圖,結合該示例性解碼器系統(400)可實施一些所描述的實施例。解碼器系統(400)可為能夠以多個解碼模式中的任一者操作的通用解碼工具,諸如用於實時通訊的低潛時解碼模式及用於自檔案或串流的媒體重現的常規解碼模式,或解碼器系統(400)可為適合於一個此類解碼模式的專用解碼工具。解碼器系統(400)可實施為作業系統模組、應用程式庫的部分或單獨的應用程式。整體而言,解碼器系統(400)從通道(410)接收編碼資料及產生重建的訊框針對輸出目的地(490)輸出。編碼資料可包括語法元素,該等語法元素指示針對色度設定的QP值,諸如圖像位準色度QP偏移及/或切片位準色度QP偏移。
解碼器系統(400)包括可通道(410)該通道(410)表示 儲存器、通訊連接或用於編碼資料作為輸入的另一通道。通道(410)產生已經被通道編碼的編碼資料。通道解碼器(420)可處理編碼資料。舉例而言,通道解碼器(420)解分封化已經聚集用於作為媒體串流傳輸的資料(例如,根據諸如ISO/IEC 14496-12的媒體容器格式),在此情況下通道解碼器(420)可剖析所添加的作為媒體傳輸串流的語法的部分的語法元素。或者,通道解碼器(420)分離已經聚集用於作為檔案儲存的編碼視訊資料(例如,根據諸如ISO/IEC 14496-12的媒體容器格式),在此情況下通道解碼器(420)可剖析所添加的作為媒體儲存檔案的語法的部分的語法元素。或者,更一般地,通道解碼器(420)可實施一或更多個媒體系統解多工協定或傳輸協定,在此情況下通道解碼器(420)可剖析所添加的作為一或更多個協定的語法的部分的語法元素。
從通道解碼器(420)輸出的編碼資料(421)儲存在暫時編碼資料區域(430)中直至已經接收足夠量的此資料。編碼資料(421)包括編碼訊框(431)及MMCO/RPS資訊(432)。編碼資料區域(430)中的編碼資料(421)可包含作為基本編碼視訊位元串流的語法的部分之語法元素,該等語法元素指示針對色度設定的QP值,諸如圖像位準色度QP偏移及/或切片位準色度QP偏移。編碼資料區域(430)中的編碼資料(421)亦可包括關於編碼視訊資料的媒體元資料(例如,作為一或更多個SEI訊息或VUI訊息中的一或更多個參數)。一般而言,編碼資料區域(430)暫時儲存編碼資料(421)直至藉由解碼器(450)使用此編碼資料(421)。在彼點,用於編碼訊框(431)及 MMCO/RPS資訊(432)的編碼資料從編碼資料區域(430)轉移至解碼器(450)。當解碼繼續時,添加新的編碼資料至編碼資料區域(430)及保持在編碼資料區域(430)中的最舊的編碼資料經轉移至解碼器(450)。
解碼器(450)週期地解碼編碼訊框(431)以產生相對應的解碼訊框(451)。視情況而定,當執行解碼器(450)的解碼程序時,解碼器(450)可使用一或更多個先前解碼的訊框(469)作為參考訊框用於訊框間預測。解碼器(450)讀取來自解碼訊框暫時記憶體儲存區域(460)的此類先前解碼的訊框(469)。一般而言,解碼器(450)包括多個解碼模組,該多個解碼模組執行解碼任務,諸如熵解碼、反向量化(反向量化可使用色度QP值)、反向頻率變換及移動補償。藉由解碼器(450)執行的確切操作可取決於壓縮格式變化。
舉例而言,解碼器(450)接收用於壓縮訊框或一序列訊框的編碼資料及產生包括解碼訊框(451)的輸出。在解碼器(450)中,緩衝器接收用於壓縮訊框的編碼資料及使得接收的編碼資料對於熵解碼器為可用的。熵解碼器熵解碼經熵編碼量化的資料以及經熵編碼的附帶資訊,通常應用編碼器中執行的熵編碼的逆反。移動補償器應用移動資訊至一或更多個參考訊框以形成重建訊框的子區塊或區塊(一般為區塊)的移動補償預測。訊框內預測模組可空間地自相鄰的先前重建樣本值來預測當前區塊的樣本值。解碼器(450)亦重建預測剩餘值。反向量化器反向量化熵解碼資料,潛在地使用色度QP值。舉例而言,基於位元串流中的語法元素,解碼器(450)設 定針對圖像、切片及/或視訊的其他部分的亮度QP值及色度QP值,及因此反向量化變換係數。反向頻率變換器轉換量化的頻率域資料為空間域資訊。對於預測的訊框,解碼器(450)組合重建的預測剩餘值與移動補償預測以形成重建的訊框。解碼器(450)可類似地組合預測剩餘值與來自訊框內預測的空間預測。視訊解碼器(450)中的移動補償迴路包括適應性的解塊濾波器以消除跨解碼訊框(451)中的區塊邊界列及/或行的間斷。
解碼訊框暫時記憶體儲存區域(460)包括多個訊框緩衝儲存區域(461、462、……、46n)。解碼訊框儲存區域(460)為DPB的實例。解碼器(450)使用MMCO/RPS資訊(432)以識別訊框緩衝器(461、462等等),在該訊框緩衝器中解碼器(450)可儲存解碼訊框(451)。解碼器(450)在彼訊框緩衝器中儲存解碼訊框(451)。
輸出定序器(480)使用MMCO/RPS資訊(432)以識別何時輸出順序中產生的下一個訊框在解碼訊框儲存區域(460)中為可用的。當在輸出順序中產生的下一個訊框(481)在解碼訊框儲存區域(460)中為可用的時,藉由輸出定序器(480)讀取該下一個訊框(481)及將該下一個訊框(481)輸出至輸出目的地(490)(例如,顯示器)。一般而言,藉由輸出定序器(480)從解碼訊框儲存區域(460)輸出訊框的順序可不同於藉由解碼器(450)解碼訊框的順序。
V.示例性視訊編碼器
第5圖為一般性視訊編碼器(500)的方塊圖,結合該 一般性視訊編碼器(500)可實施一些所描述的實施例。編碼器(500)接收包括當前訊框(505)的一序列視訊框及產生編碼資料(595)作為輸出。
編碼器(500)為基於區塊的及使用區塊格式,該區塊格式取決於實施。區塊可在不同階段進一步細分,例如,在頻率變換及熵編碼階段。舉例而言,訊框可劃分為64×64個區塊、32×32個區塊或16×16個區塊,該等區塊可依次被劃分為像素值的更小的區塊及子區塊用於編碼及解碼。
編碼器系統(500)壓縮預測訊框及訊框內編碼訊框。為了介紹,第5圖圖示經由編碼器(500)用於訊框內編碼的「訊框內路徑」及用於訊框間編碼的「訊框間路徑」。許多編碼器(500)的部件用於訊框內編碼及訊框間編碼兩者。藉由彼等部件執行的確切操作可取決於壓縮的資訊類型變化。
若當前訊框(505)為預測訊框,則移動估計器(510)估計當前訊框(505)的像素值的區塊、子區塊或其他集合相對於一或更多個參考訊框的移動。訊框儲存器(520)緩衝一或更多個先前重建的訊框(525)用作參考訊框。當使用多個參考訊框時,多個參考訊框可來自不同的暫時方向或相同的暫時方向。移動估計器(510)輸出附帶資訊移動資訊(515),諸如差分移動矢量資訊。
當移動補償器(530)形成移動補償當前訊框(535)時,移動補償器(530)應用重建的移動矢量至一或更多個重建的參考訊框(525)。移動補償當前訊框(535)的子區塊、區塊等等及原始當前訊框(505)的相對應部分之間的差異(若有)可 為針對子區塊、區塊等等的預測剩餘值(545)。在當前訊框的隨後重建期間,添加重建的預測剩餘值至移動補償當前訊框(535)以獲得重建的訊框,該重建的訊框更靠近原始當前訊框(505)。然而,在有損壓縮中,一些資訊仍然從原始當前訊框(505)丟失。訊框內路徑可包括訊框內預測模組(未圖示),該訊框內預測模組自相鄰的先前重建的像素值來空間地預測當前區塊或子區塊的像素值。
頻率變換器(560)轉換空間域視訊資訊為頻率域(亦即,光譜的,變換)資料。對於基於區塊的視訊框,頻率變換器(560)應用離散餘弦轉換、離散餘弦轉換的整數近似或另一類型的前向區塊變換至像素值資料或預測剩餘值資料的區塊或子區塊,產生頻率變換係數的區塊/子區塊。量化器(570)隨後量化變換係數。舉例而言,量化器(570)以步階對頻率域資料應用非均勻的純量量化,該步階隨逐訊框基礎、逐切片基礎或其他基礎而變化。量化器(570)可使用針對亮度分量及色度分量的QP值,該等QP值包括色度QP值,如第VII節中所描述的。舉例而言,編碼器(500)設定針對圖像、切片及/或視訊的其他部分(諸如編碼單元)的亮度QP值及色度QP值及因此量化變換係數。
當後續的移動估計/補償需要當前訊框的重建版本時,反向量化器(576)對量化的頻率係數資料執行反向量化。反向量化器(576)亦可使用色度QP值。反向頻率變換器(566)執行反向頻率變換,產生重建預測剩餘值或像素值的區塊/子區塊。對於預測訊框,編碼器(500)組合重建的預測剩餘值(545) 與移動補償預測(535)以形成重建的訊框(505)。(儘管第5圖未圖示,在訊框內路徑中,編碼器(500)可組合預測剩餘值與來自訊框內預測的空間預測。)訊框儲存器(520)緩衝重建的當前訊框用於後續的移動補償預測中。
量化及其他有損處理可引起訊框的區塊或子區塊之間邊界處的可見線。舉例而言,若圖像的平穩變化區域(諸如天空區域)中的相鄰區塊經量化至不同的平均位準,則此類「區塊效應(blocking artifacts)」可能發生。為了減少區塊效應,編碼器及解碼器可使用「解塊」濾波以消除參考訊框中區塊及/或子區塊之間的邊界間斷。此濾波在「迴路內」,因為此濾波發生在移動補償迴路內部一編碼器及解碼器對稍後在編碼/解碼中使用的參考訊框執行此濾波。通常在編碼期間賦能迴路內解塊濾波,在此情況下解碼器亦執行迴路內解塊濾波用於正確的解碼。解塊濾波的細節取決於編解碼標準或格式而變化及可為相當複雜的。應用解塊濾波的規則經常可取決於諸如內容/平穩性、編碼模式(例如,訊框內或訊框間)、邊界的不同側面上的區塊/子區塊的移動矢量、區塊/子區塊大小、編碼/未編碼狀態(例如,是否變換係數資訊在位元串流中以訊號表示)的因素而變化。
在第5圖中,編碼器(500)中的移動補償迴路包括訊框儲存器(520)之前或之後的適應性迴路內解塊濾波器(522)。解碼器(500)對重建訊框應用迴路內濾波,以適應地消除跨訊框中的邊界的間斷。第VII節描述實例,在該等實例中解塊濾波取決於色度QP偏移值變化。
熵編碼器(580)壓縮量化器(570)的輸出以及移動資訊(515)及某些附帶資訊(例如,QP值)。熵編碼器(580)提供編碼資料(595)至緩衝器(590),緩衝器(590)將編碼資料多工為輸出位元串流。編碼資料可包括語法元素,該等語法元素指示針對色度設定的QP值,諸如圖像位準色度QP偏移及/或切片位準色度QP偏移。第VII節描述此類語法元素的實例。
控制器(未圖示)接收來自編碼器的各種模組的輸入。在編碼期間控制器估計中間結果,例如,設定QP值及執行位元率失真分析。在編碼期間控制器與其他模組一起工作以設定及改變編碼參數。特定而言,在編碼期間控制器可改變QP值及其他控制參數以控制亮度分量及色度分量的量化。
在一些實施中,在編碼期間控制器可設定圖像位準亮度QP值、切片位準亮度QP值或編碼單元位準亮度QP值以便控制在圖像位準、切片位準或切片內部的編碼單元位準的量化。對於給定切片,亮度QP值可設定為圖像位準亮度QP或切片位準亮度QP,該亮度QP將以圖像位準亮度QP加切片位準亮度QP偏移在位元串流中表示。或者,控制器可設定切片內給定編碼單元的亮度QP值。在此情況下,編碼單元位準亮度QP偏移在位元串流中連同切片位準亮度QP偏移及圖像位準亮度QP值以訊號表示,從而指示編碼單元位準亮度QP值。因此,圖像內部的不同切片可具有不同的指定亮度QP值,及切片內的不同編碼單元可具有不同的指定亮度QP值。控制器亦可設定圖像位準色度QP值或切片位準色度QP值,如以一或更多個色度QP偏移在位元串流中所指示的。色 度QP偏移不直接指定色度QP值,而是在推導過程(如第VII節所描述的)中用於決定色度QP值。控制器亦可指定量化比例縮放矩陣以建立針對亮度分量及/或色度分量的係數的頻率特定比例縮放因數。
QP值控制亮度及色度變換係數的量化的粗糙度。舉例而言,QP值可根據定義的關係控制稱為量化步階(quantization step size;「QSS」)的比例縮放因數。舉例而言,QP值在位元串流中以訊號表示為QP減去26,及QSS為S*2(QP/6)或大約S*2(QP/6),其中S為比例縮放因數,諸如固定值常數、變換特定比例縮放因數或頻率特定比例因數。在一些實施中,基於整數的公式指示近似於S*2(QP/6)的QSS。在此關係中,高QP值表示高的(亦即,粗糙的)QSS及低QP值指示低的(亦即,精細的)QSS。或者,QP可相反地相關於QSS。舉例而言,QP值在位元串流中以訊號表示為25減去QP,及QSS為S*2((51-QP)/6)或大約S*2((51-QP)/6)。在此實例中,相同QSS值可有效地以訊號表示,但是高QP值表示低QSS,及低QP值表示高QSS。更一般而言,本文描述的創新可應用於QP及QSS之間的各種關係,包括上述關係以及其中QP為諸如H.263標準中稱為QUANT的參數的參數的關係及其中QP為諸如H.262標準中稱為quantiser_scale的參數的參數的關係。
一般而言,控制器可設定圖像、切片或視訊的其他部分的亮度QP及色度QP,及隨後在品質及/或位元率方面估計內容的編碼結果(例如,量化變換係數及/或熵編碼量化的 變換係數)。若結果令人滿意,則控制器可選擇設定的亮度QP及色度QP。否則,控制器可調整亮度QP及/或色度QP。舉例而言,若編碼的色度內容品質相對於編碼的亮度內容品質太高,則控制器可調整QP以增加色度QSS及/或減少亮度QSS從而平衡亮度及色度分量之間的品質,同時亦考慮針對速率及/或品質的整體目標。或者,若編碼的色度內容品質相對於編碼的亮度內容品質太低,則控制器可調整QP以減少色度QSS及/或增加亮度QSS從而平衡亮度分量及色度分量之間的品質,同時亦考慮針對速率及/或品質的整體目標。亮度QP及色度QP的設定及調整可在逐圖像基礎、逐切片基礎或其他基礎上重複。
取決於實施及所欲的壓縮類型,編碼器的模組可經添加、省略、拆分成多個模組、與其他模組組合及/或用類似模組替換。在替代的實施例中,具有不同模組及/或其他模組配置的編碼器執行所描述的技術中的一或更多者。編碼器的特定實施例通常使用編碼器(500)的變體或補充版本。編碼器(500)內部的模組之間圖示的關係指示編碼器中的一般資訊流動;為了簡化起見,沒有圖示其他關係。
VI.示例性視訊解碼器
第6圖為一般性解碼器(600)的方塊圖,結合該一般性解碼器(600)可實施數個所描述的實施例。解碼器(600)接收針對壓縮訊框或一序列訊框的編碼資料(695)及產生包括重建的訊框(605)的輸出。為了介紹,第6圖圖示經由解碼器(600)用於訊框內解碼的「訊框內路徑」及用於訊框間解碼的「訊 框間路徑」。解碼器(600)的許多部件用於訊框內解碼及訊框間解碼兩者。藉由彼等部件執行的確切操作可取決於解壓縮的資訊類型而變化。
緩衝器(690)接收針對壓縮訊框的編碼資料(695)及使得接收的編碼資料對於剖析器/熵解碼器(680)為可用的。編碼資料可包括語法元素,該等語法元素指示針對色度設定的QP值,諸如圖像位準色度QP偏移及/或切片位準色度QP偏移。第VII節描述此類語法元素的實例。剖析器/熵解碼器(680)熵解碼經熵編碼的量化資料以及經熵編碼的附帶資訊,通常應用編碼器中執行的熵編碼的逆反。
移動補償器(630)應用移動資訊(615)至一或更多個參考訊框(625)以形成重建訊框(605)的子區塊或區塊的移動補償預測(635)。訊框儲存器(620)儲存一或更多個先前重建的訊框用作參考訊框。
訊框內路徑可包括訊框內預測模組(未圖示),該訊框內預測模組自相鄰的先前重建的像素值來空間地預測當前區塊或子區塊的像素值。在訊框間路徑中,解碼器(600)重建預測剩餘值。反向量化器(670)潛在地使用色度QP值反向量化熵解碼資料。舉例而言,基於位元串流中的語法元素,解碼器(600)針對圖像、切片及/或視訊的其他部分(諸如,編碼單元)設定亮度QP值及色度QP值,並且反向量化器(670)相應地反向量化變換係數。
在一些實施中,在解碼期間解碼器可設定圖像位準亮度QP值、切片位準亮度QP值或編碼單元位準亮度QP值, 如藉由位元串流中的語法元素所指示的,包括圖像位準亮度QP值、切片位準亮度QP偏移(若存在)及編碼單元位準亮度QP偏移(若存在)。圖像內部的不同切片可具有不同的指定亮度QP值,及切片內部的不同編碼單元可具有不同的指定亮度QP值。解碼器亦設定圖像位準色度QP值或切片位準色度QP值,如以一或更多個色度QP偏移在位元串流中所指示的。解碼器亦可使用量化比例縮放矩陣以建立針對亮度分量及/或色度分量的係數的頻率特定比例縮放因數。根據定義的關係,QP值表示量化步階(「QSS」),如上所述。
反向頻率變換器(660)將重建的頻率域資料轉換為空間域資訊。舉例而言,反向的頻率變換器(660)對頻率變換係數應用反向區塊變換,從而產生像素值資料或預測剩餘值資料。反向頻率變換可為反向離散餘弦轉換、反向離散餘弦轉換的整數近似或另一類型的反向頻率變換。
對於預測訊框,解碼器(600)組合重建預測剩餘值(645)與移動補償預測(635)以形成重建訊框(605)。(儘管第6圖中未圖示,在訊框內路徑中,解碼器(600)可組合預測剩餘值與來自訊框內預測的空間預測。)解碼器(600)中的移動補償迴路包括訊框儲存器(620)之前或之後的適應性迴路內解塊濾波器(610)。解碼器(600)對重建訊框應用迴路內濾波,以適應地消除跨訊框中邊界的間斷。在解碼期間解塊濾波的細節(例如,取決於諸如內容/平穩性、編碼模式、針對邊界的不同側面上的區塊/子區塊的移動矢量、區塊/子區塊大小、編碼/未編碼狀態等等的因素的規則)通常反映編碼期間解塊濾波 的細節。
在第6圖中,解碼器(600)亦包括後處理解塊濾波器(608)。後處理解塊濾波器(608)可選地消除重建的訊框中的間斷。其他濾波(諸如解環形濾波)亦可應用為後處理濾波的部分。
取決於實施及所欲的解壓類型,解碼器的各模組可經添加、省略、拆分成多個模組、與其他模組組合及/或以類似模組替換。在替代的實施例中,具有不同模組及/或其他模組配置的解碼器執行所描述的技術中的一或更多者。解碼器的特定實施例通常使用解碼器(600)的變體或補充版本。解碼器(600)內部的各模組之間圖示的關係指示解碼器中的一般資訊流動;為了簡化起見沒有圖示其他關係。
VII.延伸範圍色度QP值的控制及使用
本節介紹用於控制及使用色度QP值的各種創新。
在JCTVC-I1003中的HEVC設計中,針對色度的QP受限於8位元深度的範圍[0,39]。相反,針對亮度的QP可在8位元深度的範圍[0,51]中變化。針對亮度及色度兩者的較高位元深度適當地增加範圍。以此設計,用於色度的QP值在相較於用於亮度的QP值小得多的值處飽和。亦即,用於色度的最高QP值(及最高QSS)比用於亮度的最高QP值(及最高QSS)小得多。當相對於亮度分量過多(低效、不需要的)數量的位元分配給色度分量的編碼時,此限制可引起針對低位元率應用中的速率控制的問題。同樣,設計可能不太適合於多種顏色格式。
特定而言,根據JCTVC-I1003中的HEVC設計,用於色度分量Cb及Cr的QP(亦即,QPCb及QPCr)來源於如下用於亮度分量的QP(QPY)。QPCb及QPCr的值等於QPC的值,如基於針對中間QP指數qPI的檢查而在表1中所指定的。表1指定QPC為qPI的函數。
Figure TWI610574BD00001
中間QP指數qPI可為qPICb(針對Cb色度分量)或qPICr(Cr色度分量)。中間QP指數qPI經推導為:qPICb=Clip3(-QpBdOffsetC,51,QPY+cb_qp_offset),或者qPICr=Clip3(-QpBdOffsetC,51,QPY+cr_qp_offset),其中Clip3為如下定義的函數。當z<x時,Clip3(x,y,z)為x,當z>y時,Clip3(x,y,z)為y,及否則Clip3(x,y,z)為z。值cb_qp_offset及cr_qp_offset為圖像位準色度QP偏移值,該等偏移值可在圖像參數集合(picture parameter set;「PPS」)中以訊號表示。QPY為針對亮度的QP值。QpBdOffsetC為色度QP範圍偏移,該色度QP範圍偏移取決於色度位元深度(對 於較高的位元深度增加色度QP範圍)。用於QpBdOffsetC的示例性值為0、6、12、18、24及36,其中QpBdOffsetC=6*bit_depth_chroma_minus8,及針對每樣本8至14個位元的位元深度,bit_depth_chroma_minus8在包括性範圍0至6中。
在JCTVC-I1003的HEVC設計中,針對亮度及色度的QP的進一步調整可基於位元深度發生。此類型調整亦為如下所述的創新態樣。亦即,亦可進行針對位元深度的此類調整用於如下所述的創新。為了清楚起見,在JCTVC-I1003中的HEVC設計中表示此調整的等式為:QP’Y=QPY+QpBdOffsetY,QP’Cb=QPCb+QpBdOffsetC,及QP’Cr=QPCr+QpBdOffsetC
因此,推導色度QP值(例如,QP’Cb或QP’Cr)的整體過程為:(1)決定來自亮度QP值(QPY)及圖像位準色度QP偏移(例如,cb_qp_offset或cr_qp_offset)的中間QP指數qPI(例如,qPICb或qPICr),(2)經由表檢查操作決定QPC值(例如,QPCb或QPCr),及(3)藉由QpBdOffsetC調整QPC值。
A.表示針對色度的QP的新方法
本文描述的各種創新延伸色度的QP範圍以匹配亮度的QP範圍。相較於JCTVC-I1003中的HEVC設計,本文描述的一些創新修改從QPY推導QPCb及QPCr的過程。
對於本節中描述的新方法,推導色度QP值(例如,QP’Cb或QP’Cr)的整體過程如下:首先,從亮度QP值(QPY)及色度QP偏移決定中間QP指數qPI(例如,qPICb或qPICr)。 色度QP偏移說明圖像位準色度QP偏移,及在一些新方法中色度QP偏移亦可說明切片位準色度QP偏移。接著,經由表檢查操作或其他映射操作決定QPC值(例如,QPCb或QPCr)。隨後,藉由QpBdOffsetC調整QPC的值。
QP’Cb=QPCb+QpBdOffsetC,或QP’Cr=QPCr+QpBdOffsetC
當QpBdOffsetC為零時可跳過最後階段。再次,QpBdOffsetC的示例性值為0、6、12、18、24及36。
1.新方法1
在新方法1中,QPCb及QPCr值等於QPC的值,如表2中所指定的,取決於指數qPI的值。
Figure TWI610574BD00002
相較於表1,表2中指數qPI從51延伸至71。同樣地,相較於表1,色度QP值QPC對於43以上的指數qPI值為 不同的。指數qPI(針對qPICb或qPICr)經如下推導。在該等等式中,上限為71而不是51。
qPICb=Clip3(-QpBdOffsetC,71,QPY+cb_qp_offset)
qPICr=Clip3(-QpBdOffsetC,71,QPY+cr_qp_offset)。
針對每個指數qPI值,QPC及qPI之間的關係可如表所指定。或者,需要僅包含5個項目的表,及可使用如下表示的邏輯實施剩餘部分,其中「>>」表示二進制的補碼運算中所表示的整數的算術右移位:若(qPI<30)
則QPC=qPI
否則若(qPI≧30&&qPI≦34)
則根據表決定QPC
否則
QPC=33+((qPI-34)>>1)
2.新方法2
在新方法2中,QPCb及QPCr的值等於QPC的值,如表3中所指定的,取決於指數qPI的值。
Figure TWI610574BD00003
Figure TWI610574BD00004
相較於表1,色度QP值QPC對於43以上的指數qPI值為不同的。指數qPI(針對qPICb或qPICr)經如下推導。在該等等式中,上限為57而非51,該上限有效地延伸表3直至qPI=57。
qPICb=Clip3(-QpBdOffsetC,57,QPY+cb_qp_offset)
qPICr=Clip3(-QpBdOffsetC,57,QPY+cr_qp_offset)
針對每個指數qPI值,QPC及qPI之間的關係可如表所指定。替代地,需要僅含有5個項目的表,及可使用如下表示的邏輯實施剩餘部分:若(qPI<30)
則QPC=qPI
否則若(qPI≧30&&qPI≦34)
則根據表決定QPC
否則若(qPI>34&&qPI<44)
則QPC=33+((qPI-34)>>1)
否則
QPC=qPI-6
3.新方法3
在新方法3中,QPCb及QPCr的值等於QPC的值,如表4中所指定的,取決於指數qPI的值。
Figure TWI610574BD00005
Figure TWI610574BD00006
相較於表1,表4針對指數qPI從51延伸至71。同樣地,相較於表1,當指數qPI為34及針對43以上的指數qPI值時色度QP值QPC為不同的。指數qPI(針對qPICb或qPICr)經如下推導。在該等等式中,上限為71而不是51。
qPICb=Clip3(-QpBdOffsetC,71,QPY+cb_qp_offset)
qPICr=Clip3(-QpBdOffsetC,71,QPY+cr_qp_offset)
針對每個指數qPI值,QPC及qPI之間的關係可如表所指定。替代地,關係可指定為分段線性函數及使用如下表示的邏輯實施:若(qPI<30)
則QPC=qPI
否則若(qPI≧30&&qPI≦34)
則QPC=qPI-1
否則
QPC=33+((qPI-34)>>1)
4.新方法4
在新方法4中,QPCb及QPCr的值等於QPC的值,如表5中所指定的,取決於指數qPI的值。
Figure TWI610574BD00007
相較於表1,當qPI=34及針對43以上的指數qPI值時,色度QP值QPC為不同的。指數qPI(針對qPICb或qPICr)經如下推導。在該等等式中,上限為57而不是51,此上限有效地延伸表5直至qPI=57。
qPICb=Clip3(-QpBdOffsetC,57,QPY+cb_qp_offset)
qPICr=Clip3(-QpBdOffsetC,57,QPY+cr_qp_offset)
針對每個指數qPI值,QPC及qPI之間的關係可如表所指定。替代地,關係可指定為分段線性函數及使用如下表示的邏輯實施:若(qPI<30)
則QPC=qPI
否則若(qPI≧30&&qPI≦34)
則QPC=qPI-1
否則若(qPI>34&&qPI<44)
則QPC=33+((qPI-34)>>1)
否則
QPC=qPI-6
5.新方法5
新方法5組合新方法3與切片位準色度QP偏移的使用。使用序列參數集合(sequence parameter set;「SPS」)、PPS或其他較高位準語法結構中以訊號表示的旗標可賦能或去能切片位準色度QP偏移的使用。新方法5等同於新方法3,除了指數qPI的值經如下推導:qPICb=Clip3(-QpBdOffsetC,71,QPY+cb_qp_offset+slice_qp_delta_cb)
qPICr=Clip3(-QpBdOffsetC,71,QPY+cr_qp_offset+slice_qp_delta_cr)
變量slice_qp_delta_cb及slice_qp_delta_cr分別為針對Cb分量及Cr分量的切片位準色度QP偏移值,該等變量可在切片標頭中以訊號表示。
6.新方法6
類似地,新方法6組合新方法4與切片位準色度QP偏移的使用。使用SPS、PPS或其他較高位準語法結構中以訊號表示的旗標可賦能或去能切片位準色度QP偏移的使用。新方法6等同於新方法4,除了指數qPI的值經如下推導:qPICb=Clip3(-QpBdOffsetC,57,QPY+ cb_qp_offset+slice_qp_delta_cb)
qPICr=Clip3(-QpBdOffsetC,57,QPY+cr_qp_offset+slice_qp_delta_cr)
7.新方法的優點
對於本節中的新方法,用於決定QPC作為qPI的函數的表經有效地延伸以使得能夠達到較高的色度QP值(根據QP及QSS之間的示例性關係指示針對色度的較高QSS值)。特定而言,表經有效延伸使得針對色度的QP的最大可能值現在為51而不是39(在JCTVC-I1003中)。此允許在高QP情境中針對色度分量更過度(亦即,粗糙的)的量化,此更過度的量化減少針對色度分量的位元率。節省的位元可替代地用於亮度分量,以便改良整體品質。同樣地,對於每一種新方法,可如上所述使用簡單的公式/邏輯實施表。
新方法2、4及6具有以下額外的優點。
首先,阻止藉由針對亮度的QP值及相對應的針對色度的QP值表示的量化步階之間的差異變得太極端,尤其對於延伸的表的高端處的QP值。通常,根據定義的關係(例如,粗略對數關係;在一些實施中,大約QSS=2(QP/6),使得在關係的指數中QSS與QP直接成比例)量化步階(quantization step size;「QSS」)取決於QP值。當既定值用於色度QP偏移(亦即,偏移設定為0)時,藉由QP指數(來源於針對亮度的QP)表示的QSS與針對色度的QSS的比率在JCTVC-I1003中的HEVC設計中與4一樣大(例如,針對亮度QP 51及色度QP 39,約略地28.5比26.5)。在新方法2、4 及6中,相反地,比率最大為2(例如,針對亮度QP 51及色度QP 45,約略地28.5比27.5)。當量化意欲為粗糙的時,限制QSS的比率可幫助阻止針對色度分量的過多的位元使用。
第二,對於針對亮度的QP變化與針對色度的QP變化的比率,在高QP(高QSS)操作處賦能斜率1。對於高QP情況(當qPI>43)時,針對亮度QP+1的變化引起針對色度QP+1的變化,或針對亮度QP-1的變化引起針對色度QP-1的變化。當改變QP值(例如,在調整整體品質對位元率的位元率率控制期間)時,此幫助編碼控制器維持亮度及色度之間的平衡。對於此QP值範圍,亮度及色度量化步階之間的比率保持恆定,此促進位元率的細粒度控制,沒有對亮度及色度之間的平衡的意外變化。
第三,在一些實施中(對於該等實施,在高QP操作處QPC為qPI-6),固定色度QP偏移6可用於在高QP(高QSS)操作處實現針對亮度及色度的相同QSS。在一些情況下,編碼器可希望使用相同QSS編碼所有平面(當QPY=QPC時使得此為可能的)。在JCTVC-I1003中的設計中,此意謂可能需要取決於QP調整色度QP偏移,因為QPY及QPC之間的關係具有可變的差異(參見表1)。相反地,在新方法2、4及6中,針對大於43的qPI值,QPC=qPI-6。因此qPI及QPC之間的差異針對此範圍保持在6處,及固定的色度QP偏移6可實現目標(QPY=QPC)。
第四,實現所欲相對關係(針對亮度及色度的QSS之間)所需的色度QP偏移比在JCTVC-I1003中小得多。舉 例而言,在JCTVC-I1003中,若編碼器欲使用針對亮度及色度兩者的QP 39,則必要的色度QP偏移為12。若表1僅以最末端處所知的相同斜率延伸,則此偏移值變得甚至更大。然而,在方法2、4及6中,相同的相對關係可使用小得多的偏移6實現。
第五,針對色度QP值的延伸範圍不以低的及中間範圍的QP值(針對精細的量化及中間範圍量化)顯著影響針對共用情況的位元率失真效能,因為新方法中的修改主要地在用於共用情況中的QP值範圍外應用。然而,同時對於高QP(高QSS)情況,在位元率失真效能及編碼器撓性方面,使用色度QP的延伸範圍存在益處。對於典型的高QP情況,色度品質的損失(使用延伸範圍色度QP時從較粗糙的量化、節省的位元等等方面損失)大於亮度品質增益的偏移。
用於表示針對色度的QP為針對亮度的QP的函數的新方法中的任一者可與用於建立針對亮度分量及/或色度分量的係數的頻率特定比例縮放因數的量化比例縮放矩陣一起使用。
B.色度QP偏移值的限制
對色度QP偏移值的限制用於示例性實施中,諸如新方法1至6的彼等實施中,從而限制亮度及色度之間巨大的品質差異。特定而言,-12至12的範圍在針對色度QP偏移的示例性實施中為有效的。(在H.264/AVC標準中,色度QP偏移類似地受限於包括性的範圍-12至12。)此範圍具有有用的性質。舉例而言,對於在高QP處的新方法4,由於色度 QP偏移6表示亮度QP等於色度QP的情況,故偏移12表示偏移為0的相對點。在該等色度QP偏移(亦即,偏移0及12)兩者處,較大的QSS正好為2×較小的QSS(例如,針對色度QP 57的QSS 29.5為2×針對色度QP 51的QSS 28.5,針對色度QP 51的QSS 28.5為2×針對色度QP 45的QSS 27.5),例如,QP及QSS之間的關係。
在新方法1至4的情況中,對色度QP偏移值的限制可施加至cb_qp_offset及cr_qp_offset。對於新方法5及6,對色度QP偏移值的限制可施加至值(cb_qp_offset+slice_qp_delta_cb)及(cr_qp_offset+slice_qp_delta_cr)。替代地,對於新方法5及6,對色度QP偏移值的限制可施加至針對cb_qp_offset、slice_qp_delta_cb、cr_qp_offset及slice_qp_delta_cr的單個值。
C.針對切片位準色度QP偏移值的語法及語義
在新方法5及6中,位元串流語法及語義支援切片位準色度QP偏移的訊號表示。切片位準色度QP偏移提供編碼器精密控制圖像內不同區域的色度QP的較大能力。第7a圖圖示PPS RBSP語法中新的旗標slicelevel_chroma_qp_flag,及第7b圖圖示切片標頭語法中新的值slice_qp_delta_cb及slice_qp_delta_cr,以用於示例性實施。熵編碼值slice_qp_delta_cb及slice_qp_delta_cr有條件地存在於切片標頭中,取決於適用的PPS中slicelevel_chroma_qp_flag的值。因此,當不使用切片位準色度QP偏移時,避免切片位準語法額外負擔。在第7a圖圖示 的PPS語法片段(701)中,值cb_qp_offset及cr_qp_offset指定用於分別獲得QPCb及QPCr的基礎偏移,如上所指定的。等於1的值slicelevel_chroma_qp_flag指定語法元素slice_qp_delta_cb及slice_qp_delta_cr存在於相關切片標頭中。否則,語法元素slice_qp_delta_cb及slice_qp_delta_cr不存在於相關切片標頭中。
在(如第7b圖中的語法片段(702)中所圖示的)切片標頭中,slice_qp_delta指定針對切片中所有編碼區塊使用直至藉由編碼單元層中的cu_qp_delta值修改的QPY初始值。針對切片的初始QPY量化參數計算為SliceQPY=26+pic_init_qp_minus26+slice_qp_delta限制slice_qp_delta值使得SliceQPY在包括性的範圍-QpBdOffsetY至+51中。
值slice_qp_delta_cb及slice_qp_delta_cr指定用於分別獲得QPCb及QPCr的Δ偏移,如針對新方法5及6所指定的。當不存在時,該等語法元素的值推斷為0。
D.用於色度的經修改解塊濾波的第一組方法
在JCTVC-I1003中的HEVC設計中,當解塊色度分量的區塊邊緣時,使用QPC值決定所使用的濾波器「強度」(tC參數)。如表1中指定的,使用如下推導的指數qPI決定變量QPC:qPI=((QPQ+QPP+1)>>1),其中QPQ及QPP表示針對邊緣的二側上出現的區塊的亮度QP值。一般想法為基於用於量化邊緣周圍的樣本的QP值調整濾 波器強度。當色度QP偏移(cb_qp_offset及cr_qp_offset)不等於0時,決定針對色度解塊濾波的qPI的方法為低效率的。對於色度QP偏移的不同的非0值,用於色度分量的QP將為不同的,但濾波器強度保持相同。
在一些示例性實施中,當決定用於色度解塊濾波的qPI時,考慮色度QP偏移的效應。在該等實施中,指數qPI經推導為:qPI=Clip3(0,51,(((QPQ+QPP+1)>>1)+cqp_offset)),其中cqp_offset表示分別針對分量Cb及Cr的cb_qp_offset及cr_qp_offset。在該等示例性實施中,針對色度解塊濾波的指數qPI的推導說明色度QP偏移的效應,但是另外當表示針對色度的QP為針對亮度的QP的函數時,該推導基於在JCTVC-I1003中推導qPI的方法。
在其他示例性實施中,當用於表示針對色度的QP為針對亮度的QP的函數的方式的上述新方法中的一者被採用時,用於解塊濾波的指數qPI可經推導為:qPI=Clip3(0,QPmax,(((QPQ+QPP+1)>>1)+cqp_offset)),其中QPmax及cqp_offset取決於使用的新方法。對於新方法1、3及5,例如,QPmax等於71。對於新方法2、4及6,例如,QPmax等於57。對於新方法1至4,cqp_offset表示分別針對分量Cb及Cr的cb_qp_offset及cr_qp_offset。對於新方法5及6,cqp_offset表示分別針對分量Cb及Cr的(cb_qp_offset+slice_qp_delta_cb)及(cr_qp_offset+slice_qp_delta_cr)。更一般而言,當推導指數qPI的值用於解塊濾波時,(QPQ+QPP +1)>>1代替QPY及考慮色度QP偏移。
變量qPI用於解塊濾波中的方式取決於實施。舉例而言,變量qPI隨後用於決定變量QPC,如以上表5中指定的。另一變量Q經推導為:Q=Clip3(0,53,QPC+2*(bS-1)+(slice_tc_offset_div2<<1)),其中bS為邊界濾波強度集合,該邊界濾波強度取決於(訊框內或訊框間的)編碼模式、區塊中的非0變換係數的存在、移動矢量值及/或其他因素而設置,其中slice_tc_offset_div2為針對切片的語法元素slice_tc_offset_div2的值,該切片含有待濾波的邊緣側面上的第一樣本。隨後基於以下表格顯示的Q至tC’的映射決定變量tC’值。
Figure TWI610574BD00008
最後,控制參數tC經推導為:tC=tC’*(1<<(BitDepthC-8))。
E.用於針對色度的經修改解塊濾波的第二組方法
在JCTVC-K0030中的HEVC設計中,當解塊色度分量的區塊邊緣時,使用QPC值決定所使用的濾波器「強度」(tC參數)。如表1中指定的,使用如下推導的指數qPI決定變量QPC:qPI=((QPQ+QPP+1)>>1),其中QPQ及QPP表示針對邊緣二側上出現的區塊的亮度QP值。一般想法為基於用於量化邊緣周圍的樣本的QP值調整濾波器強度。當色度QP偏移(亦即,pic_cb_qp_offset+slice_cb_qp_offset及pic_cr_qp_offset+slice_cr_qp_offset)等於0時,決定qPI的此方法有意義;然而,當色度QP偏移不等於0時,決定qPI的此方法無意義。對於色度QP偏移的不同的非0值,用於色度分量的QP將為不同的,但濾波器強度將保持相同。因此,JCTVC-K0030中描述的解塊濾波設計不提供解塊濾波過程的強度的分量特定客製化。
本節描述當決定參數tC用於控制色度分量的解塊濾波時考慮色度QP偏移的效應的方法。該等方法適當地幫助反映當使用非零QP偏移時用於色度的實際QP。在一些示例性實施中,當決定用於色度解塊濾波的qPI時,考慮色度QP偏移的效應。
此可涉及在編碼樹單元(coding tree unit;「CTU」)基礎上儲存色度QP值。在許多情況下,對出於此目的儲存色度QP值的計算複雜性的影響為相對小的及在任何情況下,說 明實際的色度QP值的適應性解塊濾波的益處通常超過對複雜性的影響。
然而,若對計算複雜性的影響被視為禁止的,則可使用其他方法,該等其他方法提供增加的儲存代價及對色度QP值的變化的反應性之間的妥協。在妥協方法中,解塊濾波可說明圖像位準色度QP偏移,而不說明切片位準QP偏移(或圖像內部的其他細粒度色度QP偏移)。儘管此類妥協方法忽視關於編碼器及解碼器可用的及在位元串流中以訊號表示的色度QP偏移的一些資訊,然而此類妥協方法消除了對實際色度QP值的緩衝要求,同時仍然提供比完全忽視解塊濾波過程中的色度QP值的當前方案更好的效能。
在一個示例性方法中(非妥協方法),考慮在圖像位準處的色度QP偏移的效應以及在切片位準處的色度QP偏移的效應。經修改的等式如下:qPI=Clip3(0,57,(((QPQ+QPP+1)>>1)+cqp_offset)),其中cqp_offset表示針對Cb的pic_cb_qp_offset+slice_cb_qp_offset,並且cqp_offset表示針對Cr的pic_cr_qp_offset+slice_cr_qp_offset。
在另一示例性方法中(亦非妥協的方法),仍然考慮在圖像位準及切片位準兩者處的色度QP偏移的效應。然而,不同於先前的方法,作為簡化,避免剪輯操作。修改的等式如下:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中cqp_offset仍然表示針對Cb的pic_cb_qp_offset+ slice_cb_qp_offset,並且cqp_offset仍然表示針對Cr的pic_cr_qp_offset+slice_cr_qp_offset。
在另一示例性方法(妥協方法)中,考慮僅在圖像位準處指定的色度QP偏移的效應。亦即,即使使用切片位準色度QP偏移及在位元串流中以訊號表示(或使用圖像內部的其他細粒度色度QP偏移及在位元串流中以訊號表示),此切片位準/較細粒度偏移不被視為控制解塊濾波的部分。此妥協方法比考慮圖像位準及切片位準兩者處的色度QP偏移更簡單,及此妥協方法可具有較低的記憶體要求。修改的等式如下:qPI=Clip3(0,57,(((QPQ+QPP+1)>>1)+cqp_offset)),其中cqp_offset表示針對Cb的pic_cb_qp_offset,並且cqp_offset表示針對Cr的pic_cr_qp_offset。
在又一示例性方法(亦妥協方法)中,考慮僅在圖像位準處指定的色度QP偏移的效應。再次,此為更簡單的,及比考慮圖像位準及切片位準兩者處的色度QP偏移(或圖像內部的其他細粒度色度QP偏移)可具有更低的記憶體要求。 作為進一步的簡化,避免剪輯操作。修改的等式如下:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中cqp_offset表示針對Cb的pic_cb_qp_offset,並且cqp_offset表示針對Cr的pic_cr_qp_offset。
儘管本節中的頭兩個方法(非妥協方法)能夠說明圖像位準色度QP偏移及切片位準色度QP偏移兩者,然而其次的二個方法(妥協方法)為簡化,該等方法僅說明圖像位 準處指定的色度QP偏移(而不是切片位準處指定的色度QP偏移)。使用二個妥協方法,對於解塊濾波器的操作,色度QP值或偏移不需要在切片基礎或CTU基礎上儲存。代替地,僅儲存圖像位準偏移(每圖像2個)。
出於位元率控制目的,編碼器仍可使用切片位準色度QP偏移(及/或其他細粒度色度QP偏移)。即使在此類情況中,僅考慮圖像位準色度QP偏移可適用於調整解塊濾波的強度。在許多情境中,色度平面被視為與亮度平面同樣重要或比亮度平面更重要(其中色度QP偏移需要為非0的以將色度QP與亮度QP匹配)。同樣地,當出於控制如何解塊濾波色度分量的目的考慮時,圖像位準色度QP偏移通常(比切片位準色度QP偏移)具有更大的影響。對於位元率控制,一些編碼器可僅使用圖像位準色度QP偏移,而不是切片位準色度QP偏移。因此,即使在控制解塊濾波時不考慮可用的切片位準色度QP偏移(或其他可用的細粒度色度QP偏移),然而考慮圖像位準色度QP偏移存在優點。
變量qPI用於解塊濾波中的方法取決於實施。舉例而言,變量qPI經推導為:qPI=((QPQ+QPP+1)>>1)+cQpPicOffset,其中變量cQpPicOffset提供調整用於針對圖像的Cb分量或Cr分量的圖像位準QP偏移的值,但是藉由不包括用於針對Cb分量或Cr分量的切片位準QP偏移值的調整來避免改變圖像內部的調整量的需要。變量qPI隨後用於決定變量QPC,如以上表5中指定的。另一變量Q隨後如下從QPC推導: Q=Clip3(0,53,QPC+2*(bS-1)+(slice_tc_offset_div2<<1)),其中bS為取決於(訊框內或訊框間的)編碼模式、區塊中的非0變換係數的存在、移動矢量值及/或其他因素而設置的邊界濾波強度,其中slice_tc_offset_div2為針對切片的語法元素slice_tc_offset_div2的值,該切片含有待濾波的邊緣側面上的第一樣本。隨後基於表格6中顯示的Q至tC’的映射決定變量tC’值。最後,控制參數tC經推導為:tC=tC’*(1<<(BitDepthC-8))。
第8圖圖示用於使用色度QP偏移以在編碼期間控制解塊濾波的一般性技術(800)。視訊編碼器(諸如參閱第5圖的一個上述視訊編碼器,或其他圖像或視訊編碼器)執行技術(800)。
編碼器編碼圖像或視訊內容,針對該圖像或視訊內容QP值根據亮度分量及色度分量之間的關係變化。作為編碼的部分,編碼器設定(810)圖像位準色度QP偏移及切片位準色度QP偏移用於編碼圖像切片。針對如藉由色度QP調節的切片的一或更多個部分,編碼器量化變換係數,此藉由圖像位準色度QP偏移及切片位準色度QP偏移指示。出於位元率控制目的,在編碼期間編碼器可調整圖像位準色度QP偏移及/或切片位準色度QP偏移,並且編碼器可針對圖像的不同切片設定不同的切片位準色度QP偏移。編碼器儲存圖像位準色度偏移用於解塊濾波中,但是編碼器不需要儲存切片位準色度QP偏移用於解塊濾波中。
編碼器亦執行(820)切片的至少部分的解塊濾波,該切片的至少部分以圖像位準色度QP偏移及切片位準色度QP偏移編碼。對於解塊濾波,編碼器推導考慮圖像位準色度QP偏移而不是切片位準色度QP偏移的控制參數。舉例而言,控制參數取決於變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中變量QPQ及QPP表示針對切片部分中的邊緣的二側上的區塊的亮度QP值,在該切片部分上執行解塊濾波,及其中變量cqp_offset表示圖像位準色度QP偏移(而不是切片位準色度QP偏移)。圖像位準色度QP偏移可分別地針對圖像的二個不同色度分量(例如,針對Cb及Cr)以訊號表示,使得變量qPI及控制參數的值分別針對二個不同色度分量計算。
編碼器輸出(830)包括編碼內容的至少部分位元串流。位元串流可包括指示針對圖像的圖像位準色度QP偏移的一或更多個語法元素及指示針對切片的切片位準色度QP偏移的一或更多個語法元素。圖像位準色度QP偏移可在位元串流中針對圖像的每一不同色度分量分別以訊號表示,或圖像的不同色度分量可使用位元串流中以訊號表示的相同的圖像位準色度QP偏移。切片位準色度QP偏移可在位元串流中針對切片的每一不同色度分量分別以訊號表示,或切片的不同色度分量可使用位元串流中以訊號表示的相同切片位準色度QP偏移。
第9圖圖示用於使用色度QP偏移以在解碼期間控制解塊濾波的一般性技術(900)。視訊解碼器(諸如參閱第6 圖的一個上述視訊解碼器,或其他圖像或視訊解碼器)執行技術(900)。
解碼器接收(910)包括編碼圖像或視訊內容的位元串流的至少部分。對於圖像或視訊內容,QP的值根據亮度分量及色度分量之間的關係變化。舉例而言,位元串流包括指示針對圖像的圖像位準色度QP偏移的一或更多個語法元素及指示針對圖像中的切片的切片位準色度QP偏移的一或更多個語法元素。圖像位準色度QP偏移可在位元串流中針對圖像的每一不同色度分量分別以訊號表示,或圖像的不同色度分量可使用位元串流中以訊號表示的相同的圖像位準色度QP偏移。切片位準色度QP偏移可在位元串流中針對切片的每一不同色度分量分別以訊號表示,或切片的不同色度分量可使用位元串流中以訊號表示的相同的切片位準色度QP偏移。
解碼器解碼編碼內容。作為解碼的部分,解碼器設定920圖像位準色度QP偏移及切片位準色度QP偏移用於解碼圖像切片。針對如藉由色度QP調節的切片的一或更多個部分,解碼器反向量化變換係數,此藉由圖像位準色度QP偏移及切片位準色度QP偏移指示。解碼器可針對圖像的不同切片設定不同的切片位準色度QP偏移。解碼器儲存圖像位準色度偏移用於解塊濾波中,但是解碼器不需要儲存切片位準色度QP偏移用於解塊濾波中。
解碼器亦執行(930)切片的至少部分的解塊濾波,該切片以圖像位準色度QP偏移及切片位準色度QP偏移編碼。對於解塊濾波,解碼器推導考慮圖像位準色度QP偏移而不是 切片位準色度QP偏移的控制參數。舉例而言,控制參數取決於變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中變量QPQ及QPP表示針對切片部分中的邊緣的二側上的區塊的亮度QP值,在該切片部分上執行解塊濾波,及其中變量cqp_offset表示圖像位準色度QP偏移(而不是切片位準色度QP偏移)。圖像位準色度QP偏移可分別地針對圖像的二個不同色度分量(例如,針對Cb及Cr)以訊號表示,使得變量qPI及控制參數的不同值分別針對二個不同色度分量計算。
F.替代
為了說明,詳細描述包括具有針對一些參數及變量的特定名字的各種實例。本文描述的創新不受限於具有此類名字的參數或變量的實施。代替地,本文描述的創新可使用各種類型的參數及變量實施。
舉例而言,本文描述的一些實例包括參數slicelevel_chroma_qp_flag、cb_qp_offset、cr_qp_offset、slice_qp_delta_cb及slice_qp_delta_cr。在JCTVC-K1003中的HEVC標準版本中,slicelevel_chroma_qp_flag為重新標記的pic_slice_chroma_qp_offsets_present_flag但是具有實質上相同的意義。圖像位準色度QP偏移被稱為pic_cb_qp_offset及pic_cr_qp_offset,而不是cb_qp_offset及cr_qp_offset。切片位準色度QP偏移被稱為slice_cb_qp_offset及slice_cr_qp_offset,與slice_qp_delta_cb及slice_qp_delta_cr 相對。本文描述的實例亦應用於如重新標記的參數。
在本文描述的一些實例中,QP值在位元串流中以訊號表示為QP減去26,及QSS為S*2(QP/6)或約略地S*2(QP/6),其中S為比例縮放因數,諸如固定值常數、變換特定比例縮放因數或頻率特定比例縮放因數。在此關係中,高QP值表示高的(亦即,粗糙的)QSS,而低QP值表示低的(亦即,精細的)QSS。替代地,QP可與QSS反向相關。舉例而言,QP值在位元串流中以訊號表示為25減去QP,及QSS為S*2((51-QP)/6)或大約S*2((51-QP)/6)。在此實例中,相同QSS值可有效地以訊號表示,但是高QP值表示低QSS,及低QP值表示高QSS。更一般而言,本文所描述的創新可應用至QP及QSS之間的各種關係,包括上述關係以及其中QP為諸如H.263標準中稱為QUANT的參數的參數的關係及其中QP為諸如H.262標準中稱為quantiser_scale的參數的參數的關係。
鑒於所揭示的發明的規律可應用於許多可能的實施例,應理解所圖示的實施例僅為本發明的較佳實例及不應視為對本發明範圍的限制。確切而言,本發明的範圍由以下申請專利範圍界定。因此吾主張本發明全部落入該等請求項的範圍及精神內。
800‧‧‧技術
810‧‧‧步驟
820‧‧‧步驟
830‧‧‧步驟

Claims (42)

  1. 一種實施一圖像或視訊編碼器的計算裝置,其中該計算裝置包含一處理單元及記憶體,且其中該計算裝置經配置以執行操作,該等操作包含:編碼圖像或視訊內容,針對該圖像或視訊內容的量化參數(QP)的值根據一亮度分量及色度分量之間的一關係而變化,其中該編碼步驟包括以下步驟:設定一圖像位準色度QP偏移及一切片位準色度QP偏移用於一圖像的一切片的編碼;以及執行對該切片的至少部分的解塊濾波,其中用於該切片的該至少部分的該解塊濾波的一控制參數的推導考慮該圖像位準色度QP偏移而不是該切片位準色度QP偏移,該控制參數取決於一變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中變量QPQ及QPP表示針對該切片的該至少部分中的一邊緣的二側上的區塊的亮度QP值,在該切片的該至少部分上執行解塊濾波,其中變量cqp_offset表示該圖像位準色度QP偏移,及其中該變量qPI被用來決定用於該控制參數之推導中的變量QPC;以及輸出包括該編碼內容的一位元串流的至少部分。
  2. 如請求項1所述之計算裝置,其中該位元串流包括指示針對該圖像的該圖像位準色度QP偏移的一或更多個語法元 素及指示針對該切片的該切片位準色度QP偏移的一或更多個語法元素。
  3. 如請求項1所述之計算裝置,其中該圖像位準色度QP偏移分別針對該圖像的二個不同色度分量以訊號表示,及其中該控制參數的值分別針對該等二個不同色度分量計算。
  4. 如請求項1所述之計算裝置,其中該變量qPI亦根據一剪輯(clip)函數被剪輯。
  5. 如請求項1所述之計算裝置,其中該圖像位準色度QP偏移分別針對該圖像的二個不同色度分量以訊號表示,及其中該切片位準色度QP偏移分別針對該切片的二個不同分量以訊號表示。
  6. 如請求項1所述之計算裝置,其中該等操作進一步包含:儲存該圖像位準色度QP偏移而不是該切片位準色度QP偏移,以在該解塊濾波步驟中使用。
  7. 如請求項6所述之計算裝置,其中針對該圖像的不同切片設定不同的切片位準色度QP偏移。
  8. 如請求項1所述之計算裝置,其中該編碼器在編碼期間調整該圖像位準色度QP偏移及/或該切片位準色度QP偏移以用於速率控制。
  9. 如請求項1所述之計算裝置,其中在該切片的編碼期間該圖像位準色度QP偏移及該切片位準色度QP偏移指示一色度QP,該色度QP調節針對該切片的一或更多個部分的變換係數的量化。
  10. 一種在實施一圖像或視訊解碼器的一計算裝置中的方法,該方法包含以下步驟:接收包括編碼圖像或視訊內容的一位元串流的至少部分,針對該編碼圖像或視訊內容的量化參數(QP)的值根據一亮度分量及色度分量之間的一關係而變化;以及解碼該編碼內容的至少部分,其中該解碼步驟包括以下步驟:設定一圖像位準色度QP偏移及一切片位準色度QP偏移用於一圖像的一切片的解碼;以及執行該切片的至少部分的解塊濾波,其中用於該切片的該至少部分的該解塊濾波的一控制參數的推導考慮該圖像位準色度QP偏移而不是該切片位準色度QP偏移,該控制參數取決於一變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset), 其中變量QPQ及QPP表示針對該切片的該至少部分中的一邊緣的二側上的區塊的亮度QP值,在該切片的該至少部分上執行解塊濾波,其中變量cqp_offset表示該圖像位準色度QP偏移,及其中該變量qPI被用來決定用於該控制參數之推導中的變量QPC
  11. 如請求項10所述之方法,其中該位元串流包括指示針對該圖像的該圖像位準色度QP偏移的一或更多個語法元素及指示針對該切片的該切片位準色度QP偏移的一或更多個語法元素。
  12. 如請求項10所述之方法,其中該圖像位準色度QP偏移分別針對該圖像的二個不同色度分量以訊號表示,及其中該控制參數的值分別針對該等二個不同色度分量計算。
  13. 如請求項10所述之方法,其中該變量qPI根據一剪輯(clip)函數被剪輯。
  14. 如請求項10所述之方法,其中該圖像位準色度QP偏移分別針對該圖像的二個不同色度分量以訊號表示,及其中該切片位準色度QP偏移分別針對該切片的二個不同分量以訊號表示。
  15. 如請求項10所述之方法,其中該方法進一步包含以下步驟:儲存該圖像位準色度QP偏移而不是該切片位準色度QP偏移,以在該解塊濾波步驟中使用。
  16. 如請求項15所述之方法,其中針對該圖像的不同切片設定不同的切片位準色度QP偏移。
  17. 如請求項10所述之方法,其中在該切片的該解碼期間該圖像位準色度QP偏移及該切片位準色度QP偏移指示色度QP,該色度QP調節針對該切片的一或更多個部分的變換係數的反向量化。
  18. 一種儲存電腦可執行指令的電腦可讀取儲存媒體,該等電腦可執行指令用於使一裝置經程式化從而執行操作,該等操作包含:在編碼及/或解碼一圖像的一切片期間設定一圖像位準色度量化參數(QP)偏移及一切片位準色度QP偏移,其中位元串流語法允許針對該圖像的不同切片的不同切片位準色度QP偏移以訊號表示;儲存該圖像位準色度QP偏移以在解塊濾波中使用;以及執行對該切片的至少部分的解塊濾波,其中用於該切片的該至少部分的該解塊濾波的一控制參數的推導考慮該圖像 位準色度QP偏移而不是該切片位準色度QP偏移,該控制參數取決於一變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中變量QPQ及QPP表示針對該切片的該至少部分中的一邊緣的二側上的區塊的亮度QP值,在該切片的該至少部分上執行解塊濾波,其中變量cqp_offset表示該圖像位準色度QP偏移,及其中該變量qPI被用來決定用於該控制參數之推導中的變量QPC
  19. 一種實施一圖像或視訊解碼器的計算裝置,其中該計算裝置包含一處理單元及記憶體,且其中該計算裝置經配置以執行操作,該等操作包含:接收一位元串流的至少部分,該位元串流包括編碼的圖像或視訊內容,針對該圖像或視訊內容的量化參數(QP)的值根據一亮度分量及色度分量之間的一關係而變化;及解碼該編碼內容中至少部分,其中該解碼步驟包括以下步驟:設定一圖像位準色度QP偏移及一切片位準色度QP偏移以用於解碼一圖像的一切片;以及執行對該切片的至少部分的解塊濾波,其中用於該切片的該至少部分的該解塊濾波的一控制參數的推導考慮該圖像位準色度QP偏移而不是該切片位準色度QP偏移,該控制參數取決於一變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset), 其中變量QPQ及QPP表示針對該切片的該至少部分中的一邊緣的二側上的區塊的亮度QP值,在該切片的該至少部分上執行解塊濾波,其中變量cqp_offset表示該圖像位準色度QP偏移,及其中該變量qPI被用來決定用於該控制參數之推導中的變量QPC
  20. 如請求項19所述之計算裝置,其中該位元串流包括指示針對該圖像的該圖像位準色度QP偏移的一或更多個語法元素及指示針對該切片的該切片位準色度QP偏移的一或更多個語法元素。
  21. 如請求項19所述之計算裝置,其中該圖像位準色度QP偏移分別針對該圖像的二個不同色度分量以訊號表示,及其中該切片位準色度QP偏移分別針對該切片的二個不同分量以訊號表示。
  22. 如請求項19所述之計算裝置,其中該等操作進一步包含:儲存該圖像位準色度QP偏移而不是該切片位準色度QP偏移,以在該解塊濾波步驟中使用。
  23. 一種其上儲存有一位元串流之至少部分的電腦可讀取儲存媒體,該位元串流包括編碼圖像或視訊內容,針對該編碼圖像或視訊內容的量化參數(QP)的值根據一亮度分量及色度 分量之間的一關係而變化,其中該位元串流經組織以促進藉由操作來解碼該編碼內容的至少部分,該等操作包含:設定一圖像位準色度量化參數(QP)偏移及一切片位準色度QP偏移以用於解碼一圖像的一切片;及執行對該切片的至少部分的解塊濾波,其中用於該切片的該至少部分的該解塊濾波的一控制參數的推導考慮該圖像位準色度QP偏移而不是該切片位準色度QP偏移,該控制參數取決於一變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中變量QPQ及QPP表示針對該切片的該至少部分中的一邊緣的二側上的區塊的亮度QP值,在該切片的該至少部分上執行解塊濾波,其中變量cqp_offset表示該圖像位準色度QP偏移,及其中該變量qPI被用來決定用於該控制參數之推導中的變量QPC
  24. 如請求項23所述之電腦可讀取儲存媒體,其中該位元串流包括指示針對該圖像的該圖像位準色度QP偏移的一或更多個語法元素及指示針對該切片的該切片位準色度QP偏移的一或更多個語法元素。
  25. 如請求項23所述之電腦可讀取儲存媒體,其中按照位元串流語法,該切片位準色度QP偏移是分別針對該切片的二個不同色度分量以訊號表示,及其中該控制參數的值是分別針對該等二個不同色度分量所推導。
  26. 如請求項23所述之電腦可讀取儲存媒體,其中位元串流語法允許針對該圖像的不同切片來以訊號表示不同的切片位準色度QP偏移。
  27. 如請求項23所述之電腦可讀取儲存媒體,其中按照位元串流語法,該圖像位準色度QP偏移乃分別針對該圖像的二個不同色度分量來以訊號表示。
  28. 如請求項23所述之電腦可讀取儲存媒體,其中在解碼該切片的期間,該圖像位準色度QP偏移及該切片位準色度QP偏移指示一色度QP,該色度QP調節針對該切片的一或更多個部分的變換係數的量化。
  29. 如請求項23所述之電腦可讀取儲存媒體,其中該等操作進一步包含:儲存該圖像位準色度QP偏移。
  30. 一種實施一圖像或視訊編碼器的計算系統,該計算系統包含一或更多個處理單元及記憶體,其中該圖像或視訊編碼器經配置以編碼圖像或視訊內容,針對該圖像或視訊內容的量化參數(QP)的值根據一亮度分量及色度分量之間的一關係而變化,該編碼器包含: 一控制器,該控制器經配置以設定一圖像位準色度QP偏移及一切片位準色度QP偏移,以用於一圖像的一切片的編碼;一解塊濾波器,該解塊濾波器經配置以執行對該切片的至少部分的解塊濾波,其中用於該切片的該至少部分的該解塊濾波的一控制參數的推導考慮該圖像位準色度QP偏移而不是該切片位準色度QP偏移,該控制參數取決於一變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中變量QPQ及QPP表示針對該切片的該至少部分中的一邊緣的二側上的區塊的亮度QP值,在該切片的該至少部分上執行解塊濾波,其中變量cqp_offset表示該圖像位準色度QP偏移,及其中該變量qPI被用來決定用於該控制參數之推導中的變量QPC;以及一緩衝器,該緩衝器經配置以儲存一位元串流的至少部分,該位元串流包括經編碼內容。
  31. 如請求項30所述之計算系統,其中該位元串流包括指示針對該圖像的該圖像位準色度QP偏移的一或更多個語法元素及指示針對該切片的該切片位準色度QP偏移的一或更多個語法元素。
  32. 如請求項30所述之計算系統,其中按照位元串流語法,該圖像位準色度QP偏移乃分別針對該圖像的二個不同色度 分量以訊號表示,及其中該解塊濾波器經配置以分別針對該等二個不同色度分量來推導該控制參數的值。
  33. 如請求項30所述之計算系統,其中位元串流語法允許以訊號表示針對該圖像之不同切片的不同切片位準色度QP偏移。
  34. 如請求項30所述之計算系統,其中按照位元串流語法,該圖像位準色度QP偏移乃分別針對該圖像的二個不同色度分量以訊號表示。
  35. 如請求項30所述之計算系統,其中該控制器經配置以在編碼期間調整該圖像位準色度QP偏移及/或該切片位準色度QP偏移以用於速率控制(rate control)。
  36. 如請求項30所述之計算系統,進一步包含:一量化器,該量化器經配置以按照一色度QP來量化用於該切片的一或更多個部分的變換係數,該色度QP由該圖像位準色度QP偏移及該切片位準色度QP偏移所指示。
  37. 一種實施一圖像或視訊解碼器的計算系統,該計算系統包含一或更多個處理單元及記憶體,該解碼器包含:一緩衝器,該緩衝器經配置以儲存一位元串流的至少部分,該位元串流包括編碼的圖像或視訊內容,針對該圖像或 視訊內容的量化參數(QP)的值根據一亮度分量及色度分量之間的一關係而變化;一剖析器,該剖析器經配置以從該位元串流剖析出指示一圖像位準色度QP偏移的一或更多語法位元以及指示一切片位準色度QP偏移的一或更多語法位元,以用於解碼一圖像的一切片;及一解塊濾波器,該解塊濾波器經配置以執行對該切片的至少部分的解塊濾波,其中用於該切片的該至少部分的該解塊濾波的一控制參數的推導考慮該圖像位準色度QP偏移而不是該切片位準色度QP偏移,該控制參數取決於一變量qPI,該變量qPI經推導為:qPI=(((QPQ+QPP+1)>>1)+cqp_offset),其中變量QPQ及QPP表示針對該切片的該至少部分中的一邊緣的二側上的區塊的亮度QP值,在該切片的該至少部分上執行解塊濾波,其中變量cqp_offset表示該圖像位準色度QP偏移,及其中該變量qPI被用來決定用於該控制參數之推導中的變量QPC
  38. 如請求項37所述之計算系統,其中按照位元串流語法,該切片位準色度QP偏移是分別針對該切片的二個不同分量來以訊號表示的。
  39. 如請求項37所述之計算系統,其中該解塊濾波器經配置以分別推導用於該切片的二個不同色度分量的該控制參數的值。
  40. 如請求項37所述之計算系統,其中位元串流語法允許以訊號表示針對該圖像之不同切片的不同切片位準色度QP偏移。
  41. 如請求項37所述之計算系統,其中按照位元串流語法,該圖像位準色度QP偏移乃分別針對該圖像的二個不同色度分量以訊號表示。
  42. 如請求項37所述之計算系統,進一步包含:一反向量化器,該反向量化器經配置以按照一色度QP來反向量化用於該切片的一或更多個部分的變換係數,該色度QP由該圖像位準色度QP偏移及該切片位準色度QP偏移所指示。
TW102133967A 2012-09-29 2013-09-18 於解塊中色度量化參數偏移之使用 TWI610574B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201261707948P 2012-09-29 2012-09-29
US61/707,948 2012-09-29
US13/732,369 2012-12-31
US13/732,369 US9591302B2 (en) 2012-07-02 2012-12-31 Use of chroma quantization parameter offsets in deblocking

Publications (2)

Publication Number Publication Date
TW201424378A TW201424378A (zh) 2014-06-16
TWI610574B true TWI610574B (zh) 2018-01-01

Family

ID=51394248

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102133967A TWI610574B (zh) 2012-09-29 2013-09-18 於解塊中色度量化參數偏移之使用

Country Status (2)

Country Link
AR (1) AR092669A1 (zh)
TW (1) TWI610574B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3189660B1 (en) * 2014-09-30 2023-07-12 HFI Innovation Inc. Method of adaptive motion vector resolution for video coding
WO2018123444A1 (ja) 2016-12-28 2018-07-05 ソニー株式会社 画像処理装置及び画像処理方法
EP4014492A4 (en) 2019-09-14 2023-01-11 ByteDance Inc. QUANTIZATION PARAMETER OFFSET FOR CHROMA UNLOCK FILTERING
WO2021072177A1 (en) 2019-10-09 2021-04-15 Bytedance Inc. Cross-component adaptive loop filtering in video coding
KR20220073746A (ko) 2019-10-14 2022-06-03 바이트댄스 아이엔씨 비디오 처리에서 크로마 양자화 파라미터 사용
KR20220106116A (ko) 2019-12-09 2022-07-28 바이트댄스 아이엔씨 비디오 코딩에서 양자화 그룹 사용
WO2021138293A1 (en) 2019-12-31 2021-07-08 Bytedance Inc. Adaptive color transform in video coding

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Geert Van der Auwera, Xianglin Wang, "AHG6: Chroma QP Offsets and Chroma Deblocking Filtering," Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 9th Meeting: Geneva, CH, 27 April – 7 May 2012 *
Jun Xu, "Chroma QP extension and signalling enhancement," Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 9th Meeting: Geneva, CH, 27 April – 7 May 2012 *

Also Published As

Publication number Publication date
TW201424378A (zh) 2014-06-16
AR092669A1 (es) 2015-04-29

Similar Documents

Publication Publication Date Title
US11943442B2 (en) Use of chroma quantization parameter offsets in deblocking
US10491898B2 (en) Control and use of chroma quantization parameter values
TWI610574B (zh) 於解塊中色度量化參數偏移之使用

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees