TW201334543A - 判定用於視訊寫碼之解塊濾波的量化參數 - Google Patents

判定用於視訊寫碼之解塊濾波的量化參數 Download PDF

Info

Publication number
TW201334543A
TW201334543A TW101139538A TW101139538A TW201334543A TW 201334543 A TW201334543 A TW 201334543A TW 101139538 A TW101139538 A TW 101139538A TW 101139538 A TW101139538 A TW 101139538A TW 201334543 A TW201334543 A TW 201334543A
Authority
TW
Taiwan
Prior art keywords
video
value
video block
samples
block
Prior art date
Application number
TW101139538A
Other languages
English (en)
Inventor
Der Auwera Geert Van
Marta Karczewicz
Xianglin Wang
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of TW201334543A publication Critical patent/TW201334543A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H04N19/198Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including smoothing of a sequence of encoding parameters, e.g. by averaging, by choice of the maximum, minimum or median value
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一種視訊寫碼器基於一第一量化參數(QP)值及一第二QP值中之至少一者判定一解塊QP值。隨後,該視訊寫碼器將基於解塊濾波器之一解塊濾波器應用至與一第一視訊區塊相關聯之邊緣。該邊緣出現於該第一視訊區塊與一第二視訊區塊之間的一邊界處。該第一視訊區塊與一當前寫碼單元(CU)相關聯,且該第二視訊區塊與一相鄰CU相關聯。該當前CU包括於一第一量化群組中,且該相鄰CU包括於一第二量化群組中。針對該第一量化群組來定義第一QP值。針對該第二量化群組來定義第二QP值。

Description

判定用於視訊寫碼之解塊濾波的量化參數
本發明係關於視訊寫碼,且更特定言之係關於經解碼視訊資料之濾波。
根據35 U.S.C.§119主張優先權
本專利申請案主張2011年10月25日申請之名為「DETERMINING QUANTIZATION PARAMETERS FOR DEBLOCKING FILTERING FOR VIDEO CODING」的臨時申請案第61/551,317號之優先權,且該案已讓渡給本受讓人且特此以引用之方式明確地併入本文中。
可將數位視訊能力併入於廣泛範圍之器件中,包括數位電視、數位直播系統、無線廣播系統、個人數位助理(PDA)、膝上型或桌上型電腦、數位相機、數位記錄器件、數位媒體播放器、視訊遊戲器件、視訊遊戲機、蜂巢式或衛星無線電電話、視訊電話會議器件及其類似者。數位視訊器件實施視訊壓縮技術(諸如,在由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分(進階視訊寫碼(AVC))、當前在開發過程中之高效率視訊寫碼(HEVC)標準定義之標準及此等標準之擴展中所描述的視訊壓縮技術)以更有效率地傳輸、接收及儲存數位視訊資訊。
視訊壓縮技術執行空間(圖片內)預測及/或時間(圖片間)預測,以減少或移除視訊序列中所固有之冗餘。對於基於 區塊之視訊寫碼,可將視訊圖塊分割成視訊區塊,視訊區塊亦可被稱作樹型區塊、寫碼單元(CU)及/或寫碼節點。可使用相對於同一圖片中之相鄰區塊中之參考樣本的空間預測來編碼圖片之框內寫碼(I)圖塊中的視訊區塊。圖片之框間寫碼(P或B)圖塊中之視訊區塊可使用相對於同一圖片中之相鄰區塊中之參考樣本的空間預測或相對於其他參考圖片中之參考樣本之時間預測。圖片可被稱作圖框,且參考圖片可被稱作參考圖框。
大體而言,本發明描述用於將一解塊濾波器應用至寫碼單元(CU)之視訊區塊之樣本的技術。如本文所描述,當前CU與第一視訊區塊相關聯,且相鄰CU與第二視訊區塊相關聯。視訊寫碼器將該解塊濾波器應用至出現於第一視訊區塊與第二視訊區塊之間的邊界處的第一視訊區塊之邊緣。當前CU及相鄰CU處於不同量化群組中,針對該等量化群組定義不同量化參數(QP)值。解塊濾波器係基於一解塊QP值。視訊寫碼器基於針對第一量化群組定義之QP值及/或針對第二量化群組定義之QP值來判定該解塊QP值。
本發明描述一種寫碼視訊資料的方法。該方法包含基於一第一QP值及一第二QP值中之至少一者判定一解塊QP值。該方法亦包含將一基於解塊QP值之解塊濾波器應用至出現於第一視訊區塊與第二視訊區塊之間的邊界處的邊緣。第一視訊區塊與第一CU相關聯,且第二視訊區塊與第二CU相關聯。第一CU包括在第一量化群組中。針對該 第一量化群組來定義第一QP值。第二CU包括在第二量化群組中。針對該第二量化群組來定義第二QP值。
本發明亦描述一種視訊寫碼器件。該視訊寫碼器件包含用於基於第一QP值及第二QP值中之至少一者判定一解塊QP值的構件。另外,視訊寫碼器件包含用於將一基於解塊QP值之解塊濾波器應用至出現於第一視訊區塊與第二視訊區塊之間的邊界處的邊緣的構件。第一視訊區塊與第一CU相關聯,且第二視訊區塊與第二CU相關聯。第一CU包括在第一量化群組中。針對該第一量化群組來定義第一QP值。第二CU包括在第二量化群組中。針對該第二量化群組來定義第二QP值。
本發明亦描述一種包含一或多個處理器之視訊寫碼器件,該一或多個處理器經組態以基於第一QP值及第二QP值中之至少一者判定一解塊QP值。該一或多個處理器亦經組態以將一基於解塊QP值之解塊濾波器應用至出現於第一視訊區塊與第二視訊區塊之間的邊界處的邊緣。第一視訊區塊與第一CU相關聯,且第二視訊區塊與第二CU相關聯。第一CU包括在第一量化群組中。針對該第一量化群組來定義第一QP值。第二CU包括在第二量化群組中。針對該第二量化群組來定義第二QP值。
本發明亦描述一種電腦程式產品,其包含儲存電腦可執行指令之一或多個電腦可讀儲存媒體,該等電腦可執行指令在經執行時組態一視訊寫碼器件以基於第一QP值及第二QP值中之至少一者判定一解塊QP值。該等電腦可執行指 令亦組態該視訊寫碼器件以將一基於解塊QP值之解塊濾波器應用至出現於第一視訊區塊與第二視訊區塊之間的邊界處的邊緣。第一視訊區塊與第一CU相關聯,且第二視訊區塊與第二CU相關聯。第一CU包括在第一量化群組中。針對該第一量化群組來定義第一QP值。第二CU包括在第二量化群組中。針對該第二量化群組來定義第二QP值。
在附圖和以下描述中陳述一或多個實例之細節。其他特徵、目標及優勢將自該描述及該等圖式以及自申請專利範圍顯而易見。
所附圖式說明若干實例。藉由所附圖式中之參考數字指示之元件對應於由以下描述中之相同參考數字所指示的元件。用於類似元件之參考數字上之字母下標並不意欲指示特定數目的該等元件之存在。在本發明中,具有以序數詞(例如,「第一」、「第二」、「第三」等)開始之名稱之元件不一定暗示該等元件具有特定次序。而是,此類序數詞僅用以指代相同或類似類型之不同元件。
視訊寫碼器可應用解塊濾波器以降低與出現於視訊區塊之間的邊界處之邊緣相關聯的區塊假影之可見度。區塊假影可包括初始不存在於視訊區塊中之亮度(明度)及/或色彩(色度)樣本中之明顯不連續性。如本文所使用,術語「樣本」可與術語「像素」互換地使用。
如本文所描述,當前CU可處於第一量化群組中,且相鄰CU可處於第二量化群組中。第一及/或第二量化群組可 包括多個CU。針對第一量化群組定義第一量化參數(QP)值。針對第二量化群組定義第二QP值。因此,當前CU與第一QP值相關聯,且相鄰CU與第二QP值相關聯。
另外,當前CU可與第一視訊區塊相關聯,且相鄰CU可與第二視訊區塊相關聯。第一及第二視訊區塊可為樣本之二維(2D)陣列。第一視訊區塊可具有複數個邊緣。第一視訊區塊之邊緣可對應於與當前CU相關聯之預測單元(PU)或變換單元(TU)之邊緣。
視訊寫碼器可將解塊濾波器應用至第一視訊區塊之邊緣。在一些實例中,若邊緣出現於當前CU與相鄰CU之間的邊界處,則視訊寫碼器基於第一QP值(亦即,針對第一量化群組定義之QP值)或第二QP值(亦即,針對第二量化群組定義之QP值)中之至少一者來判定一解塊QP值。因為視訊寫碼器基於與當前CU相關聯之QP值及與相鄰CU相關聯之QP值來判定解塊QP值,所以視訊寫碼器可能能夠避免應用過強或過弱之解塊濾波器。若僅基於與當前CU相關聯之QP值來判定解塊QP值,則可能應用過強或過弱之解塊濾波器。
圖1為說明可利用本發明之技術之實例視訊寫碼系統10的方塊圖。如本文描述所使用,術語「視訊寫碼器」一般指代視訊編碼器及視訊解碼器兩者。在本發明中,術語「視訊寫碼」或「寫碼」可一般性指代視訊編碼及視訊解碼。
如圖1中所示,視訊寫碼系統10包括源器件12及目的地 器件14。源器件12產生經編碼視訊資料。目的地器件14可解碼由源器件12產生之經編碼視訊資料。源器件12及目的地器件14可包含廣泛範圍器件中之任一者,包括桌上型電腦、筆記型(例如,膝上型)電腦、平板電腦、機上盒、電話手機(諸如所謂的「智慧型」電話)、所謂的「智慧型」板、電視、相機、顯示器件、數位媒體播放器、視訊遊戲機或類似者。在一些實例中,源器件12及目的地器件14可經配備用於無線通信。
目的地器件14可經由通道16自源器件12接收經編碼視訊資料。通道16可包含能夠自源器件12移動經編碼視訊資料至目的地器件14之任何類型的媒體或器件。在一個實例中,通道16可包含使源器件12能夠即時將經編碼視訊資料直接傳輸至目的地器件14之通信媒體。在此實例中,源器件12可根據通信標準(諸如無線通信協定)來調變經編碼視訊資料,且可將經調變視訊資料傳輸至目的地器件14。通信媒體可包含無線或有線通信媒體,諸如射頻(RF)頻譜或一或多個實體傳輸線。通信媒體可形成基於封包之網路(諸如,區域網路、廣域網路或諸如網際網路之全球網路)的部分。通信媒體可包括路由器、交換器、基地台或促進自源器件12至目的地器件14之通信的其他設備。
在另一實例中,通道16可對應於儲存由源器件12產生之經編碼視訊資料的儲存媒體。在此實例中,目的地器件14可經由磁碟存取或卡存取而存取儲存媒體。儲存媒體可包括多種本端存取之資料儲存媒體,諸如藍光光碟、DVD、 CD-ROM、快閃記憶體或用於儲存經編碼視訊資料之其他合適數位儲存媒體。在另一實例中,通道16可包括儲存由源器件12產生之經編碼視訊之檔案伺服器或另一中間儲存器件。在此實例中,目的地器件14可經由串流或下載而存取儲存於檔案伺服器或其他中間儲存器件處之經編碼視訊資料。檔案伺服器可為能夠儲存經編碼視訊資料且將該經編碼視訊資料傳輸至目的地器件14的伺服器類型。實例檔案伺服器包括網站伺服器(例如,用於網站)、FTP伺服器、網路附接儲存(NAS)器件及本端磁碟機。目的地器件14可經由任何標準資料連接(包括網際網路連接)而存取經編碼之視訊資料。資料連接之實例類型可包括無線頻道(例如,Wi-Fi連接)、有線連接(例如,DSL、線纜數據機等)、或該兩者之適合用於存取儲存於檔案伺服器上之經編碼視訊資料的組合。經編碼視訊資料自檔案伺服器之傳輸可為串流傳輸、下載傳輸,或兩者之組合。
本發明之技術不限於無線應用或設定。該等技術可應用於支援多種多媒體應用中之任一者之視訊寫碼,該等多媒體應用諸如:空中電視廣播、有線電視傳輸、衛星電視傳輸、(例如)經由網際網路之串流視訊傳輸、供儲存於資料儲存媒體上之數位視訊之編碼、儲存於資料儲存媒體上之數位視訊之解碼,或其他應用。在一些實例中,視訊寫碼系統10可經組態以支援單向或雙向視訊傳輸以支援諸如視訊串流、視訊播放、視訊廣播及/或視訊電話的應用。
在圖1之實例中,源器件12包括一視訊源18、視訊編碼 器20及一輸出介面22。在一些狀況下,輸出介面22可包括調變器/解調器(數據機)及/或傳輸器。在源器件12中,視訊源18可包括一源,諸如視訊俘獲器件(例如,視訊攝影機)、含有先前俘獲之視訊的視訊存檔、用以自視訊內容提供者接收視訊之視訊饋送介面及/或用於產生電腦圖形資料作為源視訊之電腦圖形系統,或此等源之組合。
視訊編碼器20可編碼經俘獲、預先俘獲或電腦產生之視訊。經編碼視訊資料可經由源器件20之輸出介面22直接傳輸至目的地器件14。經編碼視訊資料亦可儲存於儲存媒體或檔案伺服器上以供目的地器件14稍後存取以用於解碼及/或播放。
目的地器件14包括一輸入介面28、一視訊解碼器30及一顯示器件32。在一些狀況下,輸入介面28可包括接收器及/或數據機。目的地器件14之輸入介面28經由通道16接收經編碼視訊資料。經由通道16傳達或提供於資料儲存媒體上之經編碼視訊資料可包括由視訊編碼器20產生之多種語法元素,其用於由視訊解碼器(諸如視訊解碼器30)用於解碼該視訊資料。此等語法元素可與在通信媒體上傳輸、儲存於儲存媒體上或儲存於檔案伺服器上之經編碼視訊資料包括在一起。
顯示器件32可與目的地器件14整合或可在目的地器件14外部。在一些實例中,目的地器件14可包括整合顯示器件,且亦可經組態以與一外部顯示器件介接。在其他實例中,目的地器件14可為顯示器件。一般而言,顯示器件32 向使用者顯示經解碼視訊資料。顯示器件32可包含多種顯示器件中之任一者,諸如液晶顯示器(LCD)、電漿顯示器、有機發光二極體(OLED)顯示器、或另一類型之顯示器件。
視訊編碼器20及視訊解碼器30可根據視訊壓縮標準(諸如,目前在開發中之高效率視訊寫碼(HEVC)標準)而操作,且可符合HEVC測試模型(HM)。或者,視訊編碼器20及視訊解碼器30可根據諸如ITU-T H.264標準(或者被稱作MPEG-4第10部分,進階視訊寫碼(AVC))之其他專屬或工業標準或此等標準之擴展而操作。然而,本發明之技術不限於任何特定寫碼標準。視訊壓縮標準之其他實例包括MPEG-2及ITU-T H.263。
儘管在圖1之實例中未展示,但視訊編碼器20及視訊解碼器30可各自與音訊編碼器及解碼器整合,或可包括適當之MUX-DEMUX(多工-解多工)單元或其他硬體及軟體,以處置在共同資料串流或單獨資料串流中之音訊及視訊兩者的編碼。若可適用,則在一些實例中,MUX-DEMUX單元可遵照ITU H.223多工器協定,或諸如使用者資料報協定(UDP)之其他協定。再一次,圖1僅為實例,且本發明之技術可適用於不一定包括在編碼與解碼器件之間的任何資料通信之視訊寫碼設定(例如,視訊編碼或視訊解碼)。在其他實例中,資料可自局部記憶體擷取、經由網路串流傳輸或類似者。一編碼器件可編碼資料並將資料儲存至記憶體,及/或一解碼器件可自記憶體擷取並解碼資料。在許 多實例中,編碼及解碼由彼此未通信而是僅編碼資料至記憶體及/或自記憶體擷取及解碼資料的器件來執行。
視訊編碼器20及視訊解碼器30可各自實施為各種合適編碼器電路中之任一者,諸如一或多個微處理器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、軟體、硬體、韌體或其任何組合。當部分地以軟體實施該等技術時,器件可將用於軟體之指令儲存於合適的非暫時性電腦可讀媒體中,且可使用一或多個處理器在硬體中執行指令以執行本發明之技術。視訊編碼器20及視訊解碼器30中之每一者可包括於一或多個編碼器或解碼器中,其中任一者可整合為各別器件中之組合編碼器/解碼器(CODEC)的部分。
如上文簡要提及,視訊編碼器20編碼視訊資料。視訊資料可包含圖片之一或多個序列。該等圖片中之每一者為形成視訊之部分的靜態影像。在一些情況中,圖片可稱作視訊「圖框」。當視訊編碼器20編碼視訊資料時,視訊編碼器20可產生位元流。位元流可包括形成視訊資料之經寫碼表示的位元序列。位元流可包括經寫碼圖片及相關聯資料。經寫碼圖片為圖片之經寫碼表示。
為了產生位元流,視訊編碼器20可針對視訊資料中之圖片序列執行編碼操作。當視訊編碼器20對圖片序列執行編碼操作時,視訊編碼器20可產生一系列經寫碼圖片及相關聯資料。另外,視訊編碼器20可產生含有可應用於一或多個圖片序列之參數的序列參數集(SPS)。另外,視訊編碼 器20可產生含有可整體應用於一或多個圖片之參數的圖片參數集(PPS)。
為了產生經寫碼圖片,視訊編碼器20可將一圖片分割為相等大小之視訊區塊。視訊區塊中之每一者與樹型區塊相關聯。與樹型區塊相關聯之視訊區塊可為視訊樣本之二維(2D)區塊。在一些情況中,樹型區塊亦可稱作最大寫碼單元(LCU)。HEVC之樹型區塊可廣泛類似於先前標準(諸如H.264/AVC)之巨集區塊。然而,樹型區塊不一定限於特定大小且可包括一或多個寫碼單元(CU)。視訊編碼器20可使用四分樹分割來將樹型區塊之視訊區塊分割為與CU相關聯之視訊區塊,因此稱為「樹型區塊」。
在一些實例中,視訊編碼器20可將圖片分割為複數個圖塊。該等圖塊中之每一者可包括整數數目之CU。在一些情況中,圖塊包含整數數目之樹型區塊。在其他情況中,圖塊之邊界可在一樹型區塊內。
作為對一圖片執行編碼操作之一部分,視訊編碼器20可對圖片之每一圖塊執行編碼操作。針對圖塊之編碼操作可產生與該圖塊相關聯之經編碼資料。與圖塊相關聯之經編碼資料可稱作「經寫碼圖塊」。
為了產生圖塊之經寫碼圖塊資料,視訊編碼器20可對圖塊中之每一樹型區塊執行編碼操作。當視訊編碼器20對樹型區塊執行編碼操作時,視訊編碼器20可產生一經寫碼樹型區塊。經寫碼樹型區塊可包含表示樹型區塊之編碼版本之資料。
為了產生經寫碼樹型區塊,視訊編碼器20可遞歸地對樹型區塊之視訊區塊執行四分樹分割,以將該視訊區塊分為逐漸變小之視訊區塊。較小視訊區塊中之每一者可與不同CU相關聯。舉例而言,視訊編碼器20可將樹型區塊之視訊區塊分割為四個相等大小之子區塊,將子區塊中之一或多者分割為四個相等大小之子子區塊,諸如此類。位元流中之一或多個語法元素可指示視訊編碼器20可分割樹型區塊之視訊區塊的最大次數。CU之視訊區塊可在形狀上為正方形。CU之視訊區塊之大小(亦即,CU之大小)可在8×8像素直至樹型區塊之視訊區塊大小(亦即,樹型區塊之大小)的範圍之間,其中最大值為64×64像素或更大。
視訊編碼器20可對樹型區塊之每一非分割CU執行編碼操作。作為對非分割CU執行編碼操作之一部分,視訊編碼器20可產生用於CU之一或多個預測單元(PU)。CU之PU中之每一者可與CU之視訊區塊內之不同視訊區塊相關聯。視訊編碼器20可產生用於CU之每一PU的預測視訊區塊。PU之預測視訊區塊可為樣本區塊。視訊編碼器20可使用框內預測或框間預測以產生用於PU之預測視訊區塊。
當視訊編碼器20使用框內預測來產生用於PU之預測視訊區塊時,視訊編碼器20可基於含有PU之圖片之經解碼樣本來產生用於PU之預測視訊區塊。當視訊編碼器20使用框間預測來產生用於PU之預測視訊區塊時,視訊編碼器20可基於不同於含有PU之圖片的參考圖片之經解碼值來產生用於PU之預測視訊區塊。
當視訊編碼器20使用框間預測來產生用於PU之預測視訊區塊時,視訊編碼器20亦可產生用於PU之運動資訊。PU之運動資訊可指示對應於PU之視訊區塊的另一圖片之一部分。換言之,PU之運動資訊可指示用於PU之「參考樣本」。視訊編碼器20可基於由用於PU之運動資訊指示的其他圖片之部分來產生用於PU之預測視訊區塊。
在視訊編碼器20產生用於CU之一或多個PU之預測視訊區塊後,視訊編碼器20可基於用於CU之PU的預測視訊區塊而產生用於CU之殘餘資料。CU之殘餘資料可指示CU之PU之預測視訊區塊與CU之原始視訊區塊中之樣本之間的差異。
此外,作為對非分割CU執行編碼操作之一部分,視訊編碼器20可對CU之殘餘資料執行遞歸四分樹分割以將CU之殘餘資料分割為與CU之變換單元(TU)相關聯的殘餘資料之一或多個區塊。CU之每一TU可與CU之殘餘資料之不同區塊相關聯。視訊寫碼器20可對CU之每一TU執行變換操作。
當視訊編碼器20對TU執行變換操作時,視訊編碼器20可將一或多個變換應用至與TU相關聯之殘餘資料之區塊以產生與TU相關聯之變換係數區塊(亦即,變換係數之區塊)。舉例而言,視訊編碼器20可將一或多個變換應用至殘餘資料之區塊以產生一或多個變換係數區塊。變換係數區塊可為變換係數之2D矩陣。
在產生一變換係數區塊後,視訊編碼器20可對變換係數 區塊執行量化操作。量化一般指代如下程序:將變換係數量化以可能地減少用以表示該等變換係數之資料之量,從而提供進一步壓縮。該量化程序可減少與該等變換係數中之一些或所有變換係數相關聯的位元深度。舉例而言,在量化期間,n位元變換係數可降值捨位至m位元變換係數,其中n大於m。
視訊編碼器20可使每一CU與一量化參數(QP)值相關聯。與CU相關聯之QP值可判定視訊編碼器20量化與CU相關聯之變換係數區塊的方式。視訊編碼器20可藉由調整與CU相關聯之QP值來調整應用至與CU相關聯之變換係數區塊的量化程度。
在視訊編碼器20量化一變換係數區塊後,視訊編碼器20可掃描經量化變換係數以產生變換係數位準之一維向量。視訊編碼器20可對該一維向量熵編碼。視訊編碼器20亦可對與視訊資料相關聯之語法元素熵編碼。
由視訊編碼器20產生之位元流可包括一系列網路抽象層(NAL)單元。NAL單元中之每一者可為含有NAL中之資料類型之指示及含有該資料之位元組的語法結構。舉例而言,NAL單元可含有表示序列參數集、圖片參數集、寫碼圖塊、補充增強資訊(SEI)、存取單元定界符、填充資料(filler data)或另一類型資料之資料。NAL單元中之資料可包括熵編碼語法結構,諸如熵編碼變換係數區塊、運動資訊等等。
視訊編碼器20可在位元流中包括指示與CU相關聯之QP 值的語法元素。以此方式,視訊編碼器20可傳訊與CU相關聯之QP值。如下文所描述,視訊解碼器30可逆量化變換係數區塊且基於與CU相關聯之QP值來執行解塊操作。
為了有效率地傳訊與CU相關聯之QP值,視訊編碼器20可識別量化群組。每一量化群組可包括在寫碼次序中連續且與相同QP值相關聯之一或多個CU。視訊編碼器20可藉由產生與量化群組相關聯之單一語法元素來傳訊與該量化群組中之每一CU相關聯的QP值。與量化群組相關聯之語法元素指示給定QP值經定義為與量化群組中之每一CU相關聯的QP值。基於與量化群組相關聯之單一語法元素,視訊解碼器30可判定與量化群組中之CU中之每一者相關聯的QP值。以此方式,視訊編碼器20可不需要產生單獨語法元素來傳訊與量化群組中之每一CU相關聯的QP值。
舉例而言,視訊編碼器20可將樹型區塊之視訊區塊分割為四個較小視訊區塊。四個較小視訊區塊可與四個非分割CU相關聯。在此實例中,四個非分割CU在寫碼次序中連續。此外,在此實例中,非分割CU中之每一者可與QP值「8」相關聯。因此,視訊編碼器20可將此等四個非分割CU識別為屬於量化群組。視訊編碼器20可藉由產生與量化群組相關聯之語法元素來傳訊與此等四個非分割CU相關聯的QP值。與量化群組相關聯之語法元素可指示QP值「8」經定義為與四個非分割CU中之每一者相關聯的QP值。
為了進一步增加傳訊與CU相關聯之QP值的效率,與量 化群組相關聯之語法元素可指定差量QP值來替代QP值。差量QP值可為第一QP值與第二QP值之間的差。舉例而言,與第一量化群組相關聯之語法元素可指定一差量QP值,其指示針對第一量化群組定義之QP值與針對第二量化群組定義之QP值之間的差。視訊編碼器20可能夠使用比完整QP值少的位元來傳訊差量QP值。
舉例而言,視訊編碼器20可在編碼當前量化群組中之CU之前編碼相鄰量化群組中之CU。在此實例中,當前量化群組中之每一CU可與QP值「8」相關聯。在此實例中,相鄰量化群組中之每一CU可與QP值「9」相關聯。因此,視訊編碼器20可產生指定差量QP值「-1」的與當前量化群組相關聯的語法元素。視訊編碼器20可能能夠使用比值「8」少的位元來傳訊值「-1」。
可針對一或多個圖塊、圖片或圖片序列來定義最小CU量化群組大小。當視訊編碼器20對樹型區塊之視訊區塊執行四分樹分割時,視訊編碼器20可將樹型區塊之視訊區塊分割為四個視訊區塊的逐漸變小之叢集。視訊區塊中之每一者可與不同CU相關聯。在一些情況中,視訊區塊叢集中之每一視訊區塊可小於最小CU量化群組大小。若視訊區塊叢集中之每一視訊區塊小於最小CU量化群組大小,則視訊編碼器20可使單一QP值與關聯於叢集中之視訊區塊(或CU之每一非分割子CU)的CU相關聯。以此方式,視訊編碼器20可將與叢集中之視訊區塊相關聯之CU(或CU之每一非分割子CU)分組為單一量化群組。
視訊編碼器20接著可產生與量化群組相關聯之語法元素。以此方式,最小CU量化群組大小可防止當叢集之視訊區塊小於該最小CU量化群組大小時視訊編碼器20指派不同QP值至與叢集相關聯之不同CU。藉由防止在叢集中之視訊區塊小於最小CU量化群組大小時視訊編碼器20指派不同QP值至與叢集相關聯之不同CU,該最小CU量化群組大小可控制傳訊QP值所需之位元數目。同時,傳訊用於具有小於樹型區塊之視訊區塊之視訊區塊的CU之QP值可允許較精細之粒度率及視覺品質控制。
舉例而言,可針對圖片定義十六個樣本之最小CU量化群組大小。在此實例中,視訊編碼器20可將圖片中之樹型區塊之視訊區塊分割為與連續寫碼之非分割CU相關聯的四個視訊區塊之叢集。叢集中之視訊區塊中之每一者可為八個樣本寬。因此,叢集中之視訊區塊小於最小CU量化群組大小。因此,視訊編碼器20可將與叢集中之視訊區塊相關聯的CU分組為單一量化群組,且可使與叢集中之視訊區塊相關聯之CU中之每一者與相同QP值相關聯。舉例而言,視訊編碼器20可使關聯於叢集中之視訊區塊之CU中之每一者與QP值「8」相關聯。在此實例中,視訊編碼器20可產生與量化群組相關聯之語法元素,其將QP值「8」定義為與量化群組中之每一CU相關聯的QP值。
視訊編碼器20可傳訊最小CU量化群組大小。舉例而言,視訊編碼器20可傳訊最小CU量化群組大小作為參數「dQpMinCuSize」。在一些實例中,視訊編碼器20可在序 列參數集、圖片參數集或在視訊資料之經寫碼表示中的其他處中傳訊最小CU量化群組大小。
在一些實例中,當與量化群組中之CU之TU相關聯的變換係數區塊中之一或多者包括非零變換係數時,視訊編碼器20僅產生指示針對該量化群組定義之QP值的語法元素。因此,若量化群組中之CU中之每一者的經寫碼區塊旗標(CBF)為假,則視訊編碼器20可不產生指示針對量化群組定義之QP值的語法元素。
視訊解碼器30可接收由視訊編碼器20產生之位元流。位元流可包括由視訊編碼器20編碼之視訊資料之經寫碼表示。當視訊解碼器30接收位元流時,視訊解碼器30可對該位元流執行剖析操作。當視訊解碼器30執行剖析操作時,視訊解碼器30可自位元流提取語法元素。視訊解碼器30可基於自該位元流提取之語法元素而重新建構該視訊資料。基於語法元素重新建構視訊資料之程序可大體上與視訊編碼器20所執行之用以產生語法元素的程序互逆。
在視訊解碼器30提取與CU相關聯之語法元素後,視訊解碼器30可基於語法元素而產生用於CU之PU的預測資料。另外,視訊解碼器30可逆量化與CU之TU相關聯之變換係數區塊。視訊解碼器30可對變換係數區塊執行逆變換以重新建構用於CU之殘餘資料。在產生用於CU之PU之預測資料及重新建構用於CU之TU之殘餘資料後,視訊解碼器30可基於預測資料及殘餘資料來重新建構CU之視訊區塊。以此方式,視訊解碼器30可基於視訊資料之經寫碼表 示中的語法元素來判定CU之視訊區塊。
如上文所論述,視訊編碼器20可藉由產生與量化群組相關聯之語法元素來傳訊與CU相關聯的QP值。與量化群組相關聯之語法元素可將一給定QP值定義為與量化群組中之每一CU相關聯的QP值。視訊解碼器30可基於與CU相關聯之QP值而逆量化與CU之TU相關聯的變換係數區塊。
在重新建構CU之視訊區塊後,視訊解碼器30可識別視訊區塊之邊緣。視訊區塊之邊緣可對應於CU之PU之邊緣(亦即,PU邊緣)及TU之邊緣(亦即,TU邊緣)。PU邊緣可對應於CU之PU之視訊區塊的頂部、底部或側邊。TU邊緣可對應於CU之TU之視訊區塊的頂部、底部或側邊。在本發明中,「外部邊緣」可為出現於與CU相關聯之視訊區塊與與相鄰CU相關聯之視訊區塊之間的邊界處的邊緣。類似地,「內部邊緣」可為出現於同一CU之兩個相鄰PU或TU之間的邊界處的邊緣。
在識別視訊區塊之邊緣後,視訊解碼器30可對視訊區塊之邊緣執行解塊操作。當視訊解碼器30對視訊區塊之外部邊緣執行解塊操作時,視訊解碼器30可判定兩個臨限值tc及β的值。視訊解碼器30可根據與CU相關聯之QP值來判定tc及β之值。在判定tc及β之值後,視訊解碼器30可基於tc及β之值來判定應用「強」濾波器抑或「弱」濾波器。與「弱」濾波器相比,「強」濾波器可修改更遠離外部邊緣的樣本。舉例而言,「強」濾波器可修改當前CU及相鄰CU之視訊區塊之樣本直至離開外部邊緣的三個樣本。另一方 面,「弱」濾波器可修改樣本直至離開外部邊緣的兩個樣本。因此,應用至與當前CU相關聯之視訊區塊及與相鄰CU相關聯之視訊區塊的樣本之解塊濾波器可取決於與當前CU相關聯之QP值,但不取決於與相鄰CU相關聯之QP值。
在一些情況下,視訊解碼器30可執行解塊操作以降低出現在相鄰CU之間的邊界處的外部邊緣的區塊假影之可見度,該等相鄰CU在不同量化群組中。當視訊解碼器30對外部邊緣執行解塊操作時,針對量化群組中之一者定義之QP值可不同於針對另一量化群組定義之QP值。換言之,相鄰CU可與不同於當前CU之QP值的QP值相關聯,使得在當前CU與相鄰CU之間的邊界之兩側上存在不同QP。舉例而言,在兩個相鄰CU(CU-P及CU-Q)之間可存在共用邊界,其中CU-P處於CU-Q左邊或上方。在此實例中,QP-P可為與CU-P相關聯之QP值,且QP-Q可為與CU-Q相關聯之QP值。在此實例中,若當前CU為CU-Q,則視訊解碼器30可僅使用QP-Q來判定tc及β臨限值。因此,視訊寫碼器30可基於QP-Q來應用一解塊濾波器。
然而,若視訊解碼器30將基於與當前CU相關聯之QP值來使用解塊濾波器而不顧及與相鄰CU相關聯之QP值,則解塊濾波器可能過強或過弱。根據本發明之技術,視訊解碼器30可將一基於解塊QP值之解塊濾波器應用至出現於第一視訊區塊與第二視訊區塊之間的邊界處的邊緣。第一視訊區塊可與第一CU相關聯,且第二視訊區塊可與第二CU 相關聯。第一CU及第二CU在不同之量化群組中。視訊解碼器30可基於針對量化群組定義之QP值中之一或多者來判定解塊QP值。舉例而言,視訊解碼器30可基於解塊QP值而識別臨限值tc及β,且接著基於臨限值tc及β來判定是否將解塊濾波器應用至樣本及應用強解塊濾波器抑或弱解塊濾波器。在視訊解碼器30對CU執行解塊操作後,視訊解碼器30可使用CU之樣本來對其他CU之PU執行框內預測或框間預測操作。
視訊編碼器20亦可判定一解塊QP值,且以類似方式基於該解塊QP值應用一解塊濾波器。因此,視訊寫碼器(諸如視訊編碼器20或視訊解碼器30)可基於第一QP值及第二QP值中之至少一者判定一解塊QP值。另外,視訊寫碼器可將一基於解塊QP值之解塊濾波器應用至出現於第一視訊區塊與第二視訊區塊之間的邊界處的邊緣。第一視訊區塊可與第一CU相關聯,且第二視訊區塊可與第二CU相關聯。第一CU包括在第一量化群組中。可針對第一量化群組來定義第一QP值。第二CU可包括在第二量化群組中。可針對第二量化群組來定義第二QP值。
圖2為說明經組態以實施本發明之技術之實例視訊編碼器20的方塊圖。圖2經提供用於解釋目的,且不應視為對如本發明中廣泛例示及描述之技術的限制。出於解釋目的,本發明在HEVC寫碼之上下文中描述視訊編碼器20。然而,本發明之技術可適用於其他寫碼標準或方法。
在圖2之實例中,視訊編碼器20包括複數個功能組件。 視訊編碼器20之功能組件包括預測模組100、殘餘產生模組102、變換模組104、量化模組106、逆量化模組108、逆變換模組110、重新建構模組112、濾波器模組113、經解碼圖片緩衝器114及熵編碼模組116。預測模組100包括運動估計模組122、運動補償模組124及框內預測模組126。在其他實例中,視訊編碼器20可包括更多、更少或不同之功能組件。此外,運動估計模組122及運動補償模組124可經高度整合,但在圖2之實例中出於解釋目的而分開表示。
視訊編碼器20可接收視訊資料。視訊編碼器20可自各種源接收視訊資料。舉例而言,視訊編碼器20可自視訊源18(圖1)或另一源接收視訊資料。視訊資料可表示圖片序列。為了編碼視訊資料,視訊編碼器20可對每一圖片序列執行編碼操作。作為對圖片序列執行編碼操作之一部分,視訊編碼器20可對圖片序列內之每一圖片執行編碼操作。作為對一圖片執行編碼操作之一部分,視訊編碼器20可對圖片中之每一圖塊執行編碼操作。當視訊編碼器20對圖塊執行編碼操作時,視訊編碼器20產生一經寫碼圖塊。經寫碼圖塊為處於經編碼形式之圖塊。經寫碼圖塊可包括圖塊標頭及圖塊資料。圖塊標頭可含有與圖塊相關聯之語法元素。
作為對一圖塊執行編碼操作之一部分,視訊編碼器20可對圖塊中之樹型區塊執行編碼操作。當視訊編碼器20對樹型區塊執行編碼操作時,視訊編碼器20可產生一經寫碼樹 型區塊。該經寫碼樹型區塊可包含表示樹型區塊之經編碼表示之資料。換言之,經寫碼樹型區塊可為樹型區塊之經編碼表示。
作為對樹型區塊執行編碼操作之一部分,預測模組100可對樹型區塊之視訊區塊執行四分樹分割,以將該視訊區塊分為逐漸變小之視訊區塊。較小視訊區塊中之每一者可與不同CU相關聯。舉例而言,預測模組100可將樹型區塊之視訊區塊分割為四個相等大小之子區塊,將子區塊中之一或多者分割為四個相等大小之子子區塊,諸如此類。
與CU相關聯之視訊區塊之大小可在8×8樣本直至樹型區塊之大小的範圍中,其中最大值為64×64樣本或更大。在本發明中,可互換地使用「N×N」及「N乘N」以按垂直及水平尺寸指代視訊區塊之樣本尺寸,例如16×16樣本或16乘16樣本。在本發明中,術語「視訊區塊」可用以指代樣本之2D區塊。一般而言,16×16區塊將在垂直方向上具有十六個樣本(y=16)及在水平方向上具有十六個樣本(x=16)。類似地,N×N區塊大體上在垂直方向上具有N個樣本及在水平方向上具有N個樣本,其中N表示非負整數值。
此外,作為對樹型區塊執行編碼操作之一部分,預測模組100可產生用於樹型區塊之階層式四分樹資料結構。舉例而言,樹型區塊可對應於四分樹資料結構之根節點。若預測模組100將樹型區塊之視訊區塊分割為四個子區塊,則根節點在四分樹資料結構中具有四個子節點。子節點中 之每一者可對應於與子區塊中之一者相關聯的CU。若預測模組100將子區塊中之一者分割為四個子子區塊,則對應於與子區塊相關聯之CU的節點可具有四個子節點,每一子節點對應於與該等子子區塊中之一者相關聯的CU。
四分樹資料結構之每一節點可提供用於對應樹型區塊或CU之語法資料(例如,語法元素)。舉例而言,四分樹中之節點可包括一分裂旗標,其指示對應於該節點之CU之視訊區塊是否被分割(例如,分裂)為四個子區塊。用於CU之語法元素可被遞歸地定義,且可取決於CU之視訊區塊是否分裂為若干子區塊。視訊區塊未被分割之CU可對應於四分樹資料結構中之葉節點。四分樹資料結構中之葉節點可稱作「寫碼節點」。經寫碼樹型區塊可包括基於對應樹型區塊之四分樹資料結構的資料。
視訊編碼器20可對樹型區塊之每一非分割CU執行編碼操作。當視訊編碼器20對非分割CU執行編碼操作時,視訊編碼器20可產生表示非分割CU之經編碼表示的資料。
作為對CU執行編碼操作之一部分,預測模組100可將CU之視訊區塊分割到CU之一或多個PU當中。視訊編碼器20及視訊解碼器30可支援各種PU大小。假定特定CU之大小為2N×2N,視訊編碼器20及視訊解碼器30可支援2N×2N或N×N之PU大小,以及按2N×2N、2N×N、N×2N、N×N、2N×nU、nL×2N、nR×2N或類似者之對稱PU大小的框間預測。視訊編碼器20及視訊解碼器30亦可支援針對2N×nU、2N×nD、nL×2N及nR×2N之PU大小的不對稱分割。在一些 實例中,分割模組100可執行幾何分割以沿著一邊界將CU之視訊區塊分割到CU之PU當中,該邊界不以直角與CU的視訊區塊之側邊相交。
運動估計模組122及運動補償模組124可對CU之每一PU執行框間預測。框間預測可提供時間壓縮。藉由對PU執行框間預測,運動估計模組122及運動補償模組124可基於不同於含有CU之圖片的參考圖片之經解碼樣本而產生用於PU之預測資料。用於PU之預測資料可包括預測視訊區塊及各種語法元素。
此外,當運動估計模組122關於PU執行運動估計操作時,運動估計模組122可產生用於PU之一或多個運動向量。舉例而言,圖塊可為I圖塊、P圖塊或B圖塊。運動估計模組122及運動補償模組124可取決於CU之PU處於I圖塊、P圖塊抑或B圖塊中而對該PU執行不同操作。在I圖塊中,所有PU被框內預測。因此,若PU處於I圖塊中,則運動估計模組122及運動補償模組124不對PU執行框間預測。
若PU處於P圖塊中,則含有PU之圖片與稱作「清單0」之參考圖片清單相關聯。清單0中之參考圖片中之每一者含有可用於解碼次序中之後續圖片之框間預測的樣本。當運動估計模組122關於P圖塊中之PU執行運動估計操作時,運動估計模組122可搜尋清單0中之參考圖片以尋找用於PU之參考樣本。PU之參考樣本可為樣本集合,例如最接近地對應於PU之視訊區塊中之樣本的樣本區塊。運動估計模組122可使用多種度量來判定參考圖片中之樣本集合 對應於PU之視訊區塊中之樣本的接近程度。舉例而言,運動估計模組122可藉由絕對差總和(SAD)、平方差總和(SSD)或其他差度量來判定參考圖片中之樣本集合對應於PU之視訊區塊中之樣本的接近程度。
在識別P圖塊中之PU之參考樣本後,運動估計模組122可產生指示清單0中之含有參考樣本之參考圖片的參考索引及指示PU與參考樣本之間的空間位移的運動向量。在各種實例中,運動估計模組122可產生不同精確程度之運動向量。舉例而言,運動估計模組122可以四分之一樣本精確度、八分之一樣本精確度或其他分數樣本精確度來產生運動向量。在分數樣本精確度之狀況下,可自參考圖片中之整數位置樣本值內插得到參考樣本值。運動估計模組122可輸出用於PU之運動資訊至熵編碼模組116及運動補償模組124。用於PU之運動資訊可包括參考索引及PU之運動向量。運動補償模組124可使用PU之運動資訊來識別及擷取PU之參考樣本。
若PU處於B圖塊中,則含有PU之圖片可與稱作「清單0」及「清單1」之兩個參考圖片清單相關聯。清單0中之參考圖片中之每一者含有可用於解碼次序中之後續圖片之框間預測的樣本。清單1中之參考圖片在解碼次序中在該圖片之前出現但在呈現次序中在該圖片之後出現。在一些實例中,含有B圖塊之圖片可與一清單組合相關聯,該清單組合為清單0與清單1之組合。
此外,若PU處於B圖塊中,則運動估計模組122可對PU 執行單向預測或雙向預測。當運動估計模組122對PU執行單向預測時,運動估計模組122可搜尋清單0或清單1之參考圖片以尋找用於PU之參考樣本。運動估計模組122接著可產生指示清單0或清單1中之含有參考樣本之參考圖片的參考索引,及指示PU與參考樣本之間的空間位移的運動向量。運動估計模組122可輸出用於PU之運動資訊至熵編碼模組116及運動補償模組124。用於PU之運動資訊可包括參考索引、預測方向指示符及PU之運動向量。預測方向指示符可指示參考索引指示清單0抑或清單1中之參考圖片。運動補償模組124可使用PU之運動資訊來識別及擷取PU之參考樣本。
當運動估計模組122對PU執行雙向預測時,運動估計模組122可搜尋清單0中之參考圖片以尋找用於PU之參考樣本,且亦可搜尋清單1中之參考圖片以尋找用於PU之另一參考樣本。運動估計模組122接著可產生指示清單0及清單1中之含有參考樣本之參考圖片的參考索引及指示參考樣本與PU之間的空間位移的運動向量。運動估計模組122可輸出PU之運動資訊至熵編碼模組116及運動補償模組124。用於PU之運動資訊可包括參考索引及PU之運動向量。運動補償模組124可使用運動資訊來識別及擷取PU之參考樣本。
在一些情況中,運動估計模組122未輸出用於PU之運動資訊之完整集合至熵編碼模組116。而是,運動估計模組122可參考另一PU之運動資訊而傳訊PU之運動資訊。舉例 而言,運動估計模組122可判定PU之運動資訊充分類似於相鄰PU之運動資訊。在此實例中,運動估計模組122可在與PU相關聯之CU之四分樹節點中指示一值,該值向視訊解碼器30指示PU具有與相鄰PU相同之運動資訊。在另一實例中,運動估計模組122可在與PU所關聯之CU相關聯之四分樹節點中識別相鄰PU及運動向量差(MVD)。運動向量差指示PU之運動向量與所指示相鄰PU之運動向量之間的差。視訊解碼器30可使用所指示相鄰PU之運動向量及運動向量差來預測PU之運動向量。藉由在傳訊第二PU之運動資訊時參考第一PU之運動資訊,視訊編碼器20可能夠使用較少位元來傳訊第二PU之運動資訊。
作為對CU執行編碼操作之一部分,框內預測模組126可對CU之PU執行框內預測。框內預測可提供空間壓縮。當框內預測模組126對PU執行框內預測時,框內預測模組126可基於同一圖片中之其他PU之經解碼樣本而產生用於PU之預測資料。用於PU之預測資料可包括預測視訊區塊及各種語法元素。框內預測模組126可對I圖塊、P圖塊及B圖塊中之PU執行框內預測。
為了對PU執行框內預測,框內預測模組126可使用多個框內預測模式來產生用於PU之預測資料之多個集合。當框內預測模組126使用框內預測模式來產生用於PU之預測資料集合時,框內預測模組126可在與框內預測模式相關聯之方向及/或梯度上自相鄰PU之視訊區塊延伸樣本跨越PU之視訊區塊。假定針對PU、CU及樹型區塊之自左至右、 自上至下編碼次序,相鄰PU可處於PU之上方、右上方、左上方、或左邊。框內預測模組126可取決於PU之大小而使用各種數目之框內預測模式,例如33種定向框內預測模式。
框內預測模組126可選擇用於PU之預測資料集合中之一者。在各種實例中,框內預測模組126可以各種方式選擇用於PU之預測資料集合。舉例而言,框內預測模組126可藉由計算預測資料集合之速率/失真度量及選擇具有最低速率/失真度量之預測資料集合來選擇用於PU之預測資料集合。
預測模組100可自用於PU之由運動補償模組124產生之預測資料或用於PU之由框內預測模組126產生之預測資料當中選擇用於PU之預測資料。在一些實例中,預測模組100基於預測資料集合之速率/失真度量來選擇用於PU之預測資料。
若預測模組100選擇由框內預測模組126產生之預測資料,則預測模組100可傳訊被用以產生用於PU之預測資料的框內預測模式,亦即選定框內預測模式。預測模組100可以各種方式傳訊選定框內預測模式。舉例而言,選定框內預測模式很可能與相鄰PU之框內預測模式相同。換言之,相鄰PU之框內預測模式可為用於當前PU之最可能模式。因此,預測模組100可產生語法元素以指示選定框內預測模式與相鄰PU之框內預測模式相同。
在預測模組100選擇了用於CU之PU的預測資料後,殘餘 產生模組102可藉由自CU之視訊區塊減去CU之PU之預測資料的預測視訊區塊而產生用於CU之殘餘資料。CU之殘餘資料可包括對應於CU之視訊區塊中之樣本之不同樣本分量的2D殘餘視訊區塊。舉例而言,殘餘資料可包括對應於CU之PU之預測視訊區塊中的樣本之明度分量與CU之原始視訊區塊中的樣本之明度分量之間的差的殘餘視訊區塊。另外,CU之殘餘資料可包括對應於CU之PU之預測視訊區塊中的樣本之色度分量與CU之原始視訊區塊中的樣本之色度分量之間的差的殘餘視訊區塊。
預測模組100可執行四分樹分割以將CU之殘餘視訊區塊分割為子區塊。每一未劃分殘餘視訊區塊可與CU之不同TU相關聯。與CU之TU相關聯的殘餘視訊區塊之大小及位置可或可不基於與CU之PU相關聯的視訊區塊之大小及位置。稱作「殘餘四分樹」(RQT)之四分樹結構可包括與殘餘視訊區塊中之每一者相關聯的節點。CU之TU可對應於RQT之葉節點。
變換模組104可藉由將一或多個變換應用至與TU相關聯之殘餘視訊區塊而產生用於CU之每一TU的一或多個變換係數區塊。變換係數區塊中之每一者可為變換係數之2D矩陣。在各種實例中,變換模組104可將各種變換應用至與TU相關聯之殘餘視訊區塊。舉例而言,變換模組104可將離散餘弦變換(DCT)、方向變換或概念上類似之變換應用至與TU相關聯之殘餘視訊區塊。
在變換模組104產生與TU相關聯之變換係數區塊後,量 化模組106可量化該變換係數區塊中之變換係數。量化模組106可基於與CU相關聯之QP值而量化與CU之TU相關聯的變換係數區塊。視訊編碼器20可以各種方式使QP值與CU相關聯。舉例而言,視訊編碼器20可對與CU相關聯之樹型區塊執行速率失真分析。在速率失真分析中,視訊編碼器20可藉由對樹型區塊執行編碼操作多次而產生樹型區塊之多個經寫碼表示。當視訊編碼器20產生樹型區塊之不同經編碼表示時,視訊編碼器20可使不同QP值與CU相關聯。當給定QP值與樹型區塊之經寫碼表示中的具有最低位元率及失真度量的CU相關聯時,視訊編碼器20可傳訊該給定QP值與CU相關聯。
逆量化模組108及逆變換模組110可分別將逆量化及逆變換應用至變換係數區塊,以自變換係數區塊重新建構殘餘視訊區塊。重新建構模組112可添加經重新建構之殘餘視訊區塊至來自預測模組100所產生之一或多個預測視訊區塊的對應樣本,以產生與TU相關聯之經重新建構之視訊區塊。藉由以此方式重新建構CU之每一TU之視訊區塊,視訊編碼器20可重新建構CU之視訊區塊。
在重新建構模組112重新建構CU之視訊區塊後,濾波器模組113可識別與視訊區塊相關聯之邊緣。每一邊緣可對應於CU之PU或TU之邊緣。在識別邊緣後,濾波器模組113可對所識別邊緣中之一或多者執行解塊操作。舉例而言,濾波器模組113可對所識別邊緣中除了以下各者之每一邊緣執行解塊操作:鄰近於含有CU之圖片之邊界的邊 緣、解塊濾波器針對其被停用之邊緣、及當設定某些旗標時與方塊(tile)或圖塊邊界重合之邊緣。此外,在一些實例中,當邊緣為在垂直或水平方向上小於八個像素之PU邊緣或TU邊緣且該邊緣並不位於8×8樣本柵格上時,濾波器模組113不對該邊緣執行解塊操作。
濾波器模組113可首先對垂直邊緣執行解塊操作,以視訊區塊之左手邊上之邊緣開始,且在幾何次序中繼續經由垂直邊緣至視訊區塊之右手邊。接著,濾波器模組113可對水平邊緣執行解塊操作,以視訊區塊之頂部上之邊緣開始,且在幾何次序中繼續經由水平邊緣至視訊區塊之底部。藉由對一邊緣執行解塊操作,濾波器模組113可減少視訊區塊之對應於邊緣的部分中之區塊假影。
與視訊區塊相關聯之邊緣可包括內部邊緣及外部邊緣。當濾波器模組113將解塊操作應用至與CU之視訊區塊相關聯之內部邊緣時,濾波器模組113可修改CU之視訊區塊之樣本以降低與邊緣相關聯之區塊假影的可見度。當濾波器模組113將解塊操作應用至與當前CU之視訊區塊相關聯之外部邊緣時,濾波器模組113可修改當前CU之視訊區塊之樣本且可修改相鄰CU之視訊區塊之樣本以降低與邊緣相關聯之區塊假影的可見度。
當濾波器模組113對與當前CU相關聯之視訊區塊之外部邊緣執行解塊操作時,濾波器模組113可應用基於一解塊QP值的解塊濾波器。濾波器模組113可基於針對包括當前CU之量化群組定義之QP值及針對包括相鄰CU之量化群組 定義之QP值中的至少一者來判定解塊QP值。濾波器模組113可對與當前CU相關聯之視訊區塊之外部邊緣執行各種解塊操作。舉例而言,濾波器模組113可對與當前CU相關聯之視訊區塊之外部邊緣執行圖6之實例中說明的解塊操作或圖8及圖9之實例中說明的解塊操作。
在對與CU之視訊區塊相關聯之邊緣執行一或多個解塊操作後,濾波器模組113可將CU之經重新建構之視訊區塊儲存於經解碼圖片緩衝器114中。運動估計模組122及運動補償模組124可使用含有經重新建構之視訊區塊的參考圖片來對後續圖片之CU執行框間預測。另外,框內預測模組126可使用經解碼圖片緩衝器114中之經重新建構之視訊區塊來執行框內預測。因此,視訊編碼器20可基於經解碼圖片緩衝器114中之CU之經重新建構視訊區塊來對另一CU之PU執行框內預測或框間預測操作。舉例而言,在將解塊濾波器應用至出現於第一視訊區塊與第二視訊區塊之間的邊界處之邊緣後,視訊編碼器20可使用來自第一視訊區塊或第二視訊區塊之資料來編碼第三視訊區塊。
熵編碼模組116可接收來自視訊編碼器20之其他功能組件之資料。舉例而言,熵編碼模組116可接收來自量化模組106之變換係數區塊且可接收來自預測模組100之語法元素。當熵編碼模組116接收資料時,熵編碼模組116可執行一或多個熵編碼操作以產生熵編碼之資料。舉例而言,視訊編碼器20可對資料執行上下文自適應可變長度寫碼(CAVLC)操作、CABAC操作、可變至可變(variable-to- variable,V2V)長度寫碼操作、基於語法之上下文自適應二進位算數寫碼(SBAC)操作、機率間隔分割熵(PIPE)寫碼操作、或另一類型之熵編碼操作。
作為對資料執行熵編碼操作之一部分,熵編碼模組116可選擇一上下文模型。若熵編碼模組116正執行CABAC操作,則上下文模型可指示特定二進位(bin)之機率的估計。給定已在當前符號之鄰域中寫碼之若干符號,上下文模型化可提供當前符號之條件機率的估計。在CABAC的上下文中,術語「二進位」用以指語法元素之二進位版本之位元。若熵編碼模組116正執行CAVLC操作,則上下文模型可將係數映射至對應碼字。CAVLC中之碼字可經建構而使得相對短之碼對應於較可能符號,而相對長之碼對應於較不可能符號。對適當上下文模型之選擇可影響熵編碼操作之寫碼效率。
在一些情況中,熵編碼模組116可基於藉由對資料之其他集合執行熵編碼操作而產生之資訊來選擇用於資料之上下文模型。舉例而言,與相鄰TU相關聯之殘餘資料有可能含有類似樣本。因此,用於相鄰TU之變換係數區塊有可能含有類似變換係數。因此,相鄰變換係數區塊中二進位之機率有可能為類似的。因此,熵編碼模組116可使用關於第一變換係數區塊中之二進位之機率的資訊來選擇上下文模型以用於熵編碼第二相鄰變換係數區塊。
熵編碼模組116可輸出包括一系列NAL單元之位元流。如上文所論述,NAL單元中之每一者可為含有NAL單元中 之資料類型之指示及含有該資料之位元組的語法結構。
在一些實例中,位元流包括指示針對量化群組而定義之QP值的語法元素。舉例而言,視訊編碼器20可產生視訊資料之經寫碼表示。視訊資料之經寫碼表示可包括複數個語法元素,包括第一語法元素及第二語法元素。第一語法元素可指示第一QP值經定義為與第一量化群組中之每一CU相關聯的QP值。第二語法元素可指示第二QP值經定義為與第二量化群組中之每一CU相關聯的QP值。序列參數集、圖片參數集或位元流之另一部分可包括指示針對量化群組定義之QP值的語法元素。
圖3為說明可實施本發明之技術之實例視訊解碼器30的方塊圖。圖3經提供用於解釋目的,且並非對如本發明中所廣泛例示及描述之技術的限制。出於解釋目的,本發明在HEVC寫碼之上下文中描述視訊解碼器30。然而,本發明之技術可適用於其他寫碼標準或方法。
在圖3之實例中,視訊解碼器30包括複數個功能組件。視訊解碼器30之功能組件包括熵解碼模組150、預測模組152、逆量化模組154、逆變換模組156、重新建構模組158、濾波器模組159及經解碼圖片緩衝器160。預測模組152包括運動補償模組162及框內預測模組164。在一些實例中,視訊解碼器30可執行大體上與關於圖2之視訊編碼器20所描述之編碼遍次(pass)互逆的解碼遍次。在其他實例中,視訊解碼器30可包括更多、更少或不同之功能組件。
視訊解碼器30可接收包含經編碼視訊資料之位元流。換言之,視訊解碼器30可接收視訊資料之經寫碼表示。視訊資料之經寫碼表示可包括複數個語法元素。視訊解碼器30可基於視訊資料之經寫碼表示中的語法元素來判定CU之視訊區塊。
當視訊解碼器30接收位元流時,熵解碼模組150可對該位元流執行剖析操作。作為對位元流執行剖析操作之結果,熵解碼模組150可自位元流提取語法元素。剖析操作可包括位元流之熵解碼。語法元素可包括熵解碼之變換係數區塊。預測模組152、逆量化模組154、逆變換模組156、重新建構模組158及濾波器模組159可執行一重新建構操作,該重新建構操作基於語法元素而產生經解碼視訊資料。
如上文所論述,位元流可包含一系列NAL單元。位元流之NAL單元可包括序列參數集NAL單元、圖片參數集NAL單元、SEI NAL單元等等。作為對位元流執行剖析操作之一部分,熵解碼模組150可執行剖析操作,該等剖析操作對來自序列參數集NAL單元之序列參數集、來自圖片參數集NAL單元之圖片參數集、來自SEI NAL單元之SEI資料等等進行提取及熵解碼。序列參數集為含有應用至零或更多完全寫碼視訊序列之語法元素的語法結構。圖片參數集為含有應用至零或更多完全寫碼圖片之語法元素的語法結構。與給定圖片相關聯之圖片參數集可包括識別與給定圖片相關聯之序列參數集的語法元素。
另外,位元流之NAL單元可包括經寫碼圖塊NAL單元。 作為對位元流執行剖析操作之一部分,熵解碼模組150可執行對來自經寫碼圖塊NAL單元之經寫碼圖塊進行提取及熵解碼之剖析操作。經寫碼圖塊中之每一者可包括圖塊標頭及圖塊資料。圖塊標頭可含有與圖塊有關之語法元素。圖塊標頭中之語法元素可包括識別與含有該圖塊之圖片相關聯之圖片參數集的語法元素。熵解碼模組150可對經寫碼圖塊標頭執行熵解碼操作(諸如CAVLC解碼操作)以恢復圖塊標頭。
在自經寫碼圖塊NAL單元提取圖塊資料後,熵解碼模組150可自圖塊資料提取經寫碼樹型區塊。熵解碼模組150接著可自經寫碼樹型區塊提取經寫碼CU。熵解碼模組150可執行自經寫碼CU提取語法元素之剖析操作。所提取語法元素可包括經熵編碼之係數區塊。熵解碼模組150接著可對語法元素執行熵解碼操作。舉例而言,熵解碼模組150可對係數區塊執行CABAC操作。
在熵解碼模組150對非分割CU執行剖析操作後,視訊解碼器30可對非分割CU執行重新建構操作。為了對非分割CU執行重新建構操作,視訊解碼器30可對CU之每一TU執行重新建構操作。藉由對CU之每一TU執行重新建構操作,視訊解碼器30可重新建構與CU相關聯之殘餘視訊區塊。
作為對TU執行重新建構操作之一部分,逆量化模組154可逆量化(亦即,解量化)與TU相關聯之變換係數區塊。逆 量化模組154可以類似於針對HEVC提出或由H.264解碼標準定義之逆量化程序的方式來逆量化變換係數區塊。逆量化模組154可使用由視訊編碼器20針對變換係數區塊之CU所計算之量化參數QP來判定量化程度,及同樣地逆量化模組154將應用的逆量化程度。
在逆量化模組154逆量化變換係數區塊後,逆變換模組156可產生用於與變換係數區塊相關聯之TU的殘餘視訊區塊。逆變換模組156可將逆變換應用至變換係數區塊以便產生用於TU之殘餘視訊區塊。舉例而言,逆變換模組156可將逆DCT、逆整數變換、逆卡忽南-拉維展(Karhunen-Loeve)變換(KLT)、逆旋轉變換、逆方向變換或另一逆變換應用至變換係數區塊。在一些實例中,逆變換模組156可基於來自視訊編碼器20之傳訊來判定要應用至變換係數區塊之逆變換。在此類實例中,逆變換模組156可基於在與變換係數區塊相關聯之樹型區塊之四分樹之根節點處的經傳訊變換來判定逆變換。在其他實例中,逆變換模組156可根據一或多個寫碼特性(諸如,區塊大小、寫碼模式或類似者)來推斷逆變換。在一些實例中,逆變換模組156可應用級聯逆變換。
若CU之PU係使用框間預測來編碼,則運動補償模組162可執行運動補償以產生用於PU之預測視訊區塊。運動補償模組162可使用用於PU之運動資訊來識別PU之參考樣本。PU之參考樣本可在不同於PU之時間圖片中。用於PU之運動資訊可包括運動向量、參考圖片索引及預測方向。運動 補償模組162可使用用於PU之參考樣本來產生PU之預測視訊區塊。在一些實例中,運動補償模組162可基於鄰近PU之若干PU之運動資訊來預測該PU之運動資訊。在本發明中,若視訊編碼器20使用框間預測來產生PU之預測視訊區塊,則PU為框間預測PU。
在一些實例中,運動補償模組162可藉由基於內插濾波器執行內插而改進PU之預測視訊區塊。待用於具有子樣本精確度之運動補償的內插濾波器之識別符可包括於語法元素中。運動補償模組162可使用與在PU之預測視訊區塊之產生期間由視訊編碼器20使用的內插濾波器相同之內插濾波器來計算用於參考區塊之子整數樣本的內插值。運動補償模組162可根據接收之語法資訊來判定視訊編碼器20所使用之內插濾波器且使用該等內插濾波器來產生預測視訊區塊。
若PU係使用框內預測來編碼,則框內預測模組164可執行框內預測以產生用於PU之預測視訊區塊。舉例而言,框內預測模組164可基於位元流中之語法元素來判定用於PU之框內預測模式。位元流可包括框內預測模組164可使用以預測PU之框內預測模式之語法元素。在一些情況中,語法元素可指示框內預測模組164將使用另一PU之框內預測模式來預測當前PU之框內預測模式。舉例而言,當前PU之框內預測模式有可能與相鄰PU之框內預測模式相同。換言之,相鄰PU之框內預測模式可為用於當前PU之最可能模式。因此,在此實例中,位元流可包括小語法元素,其 指示PU之框內預測模式與相鄰PU之框內預測模式相同。框內預測模組164接著可使用框內預測模式而基於空間相鄰PU之視訊區塊來產生用於PU之預測資料(例如,預測樣本)。
重新建構模組158可使用CU之殘餘視訊區塊及用於CU之PU之預測視訊區塊(亦即,框內預測資料或框間預測資料)(在可適用時),以重新建構CU之視訊區塊。
在重新建構模組158重新建構CU之視訊區塊後,濾波器模組159可識別與視訊區塊相關聯之邊緣。每一邊緣可對應於CU之PU或TU之邊緣。在識別邊緣後,濾波器模組158可對所識別邊緣中之一或多者執行解塊操作以自CU之視訊區塊移除區塊假影。濾波器模組159可以上文關於濾波器模組113描述的方式來執行解塊操作。
當濾波器模組159對與當前CU之視訊區塊相關聯之外部邊緣執行解塊操作時,濾波器模組159可應用基於當前CU之解塊QP值的解塊濾波器。濾波器模組159可基於針對包括當前CU之量化群組定義之QP值及針對包括相鄰CU之量化群組定義之QP值中的至少一者來判定當前CU之解塊QP值。濾波器模組159可將各種外部解塊操作應用至外部邊緣。舉例而言,濾波器模組159可將圖6之實例中說明的解塊操作或圖8及圖9之實例中說明的解塊操作應用至外部邊緣。
在一些實例中,視訊資料之經寫碼表示可包括指示針對量化群組而定義之QP值的語法元素。舉例而言,視訊資料 之經寫碼表示可包括第一語法元素及第二語法元素。第一語法元素可指示第一QP值為針對第一量化群組定義之QP值。第二語法元素可指示第二QP值為針對第二量化群組定義之QP值。在此實例中,濾波器模組159可基於第一語法元素判定第一量化群組中之第一CU與第一QP值相關聯,且可基於第二語法元素判定第二量化群組中之第二CU與第二QP值相關聯。此外,若第一量化群組包括第三CU,則濾波器模組159可基於第一語法元素判定第三CU與第一QP值相關聯。濾波器模組159可基於針對第一量化群組定義之QP值及/或針對第二量化群組定義之QP值來判定一解塊QP值。
經解碼圖片緩衝器160可儲存用於視訊資料之圖片之經解碼樣本。因此,在濾波器模組159對與CU之視訊區塊相關聯之邊緣執行解塊操作後,視訊解碼器30可將CU之視訊區塊儲存於經解碼圖片緩衝器160中。經解碼圖片緩衝器160可提供參考圖片以用於後續運動補償、框內預測及顯示器件(諸如圖1之顯示器件32)上之呈現。舉例而言,視訊解碼器30可基於經解碼圖片緩衝器160中之視訊區塊來對其他CU之PU執行框內預測或框間預測操作。
圖4為說明與CU相關聯之QP值之實例傳訊的概念圖。與LCU相關聯之視訊區塊200並未分割為任何子區塊。在圖4之實例中,視訊區塊200經展示為在視訊區塊202旁。視訊區塊202指示最小CU量化群組大小。量化群組204可僅包括與視訊區塊200相關聯之LCU,此係因為視訊區塊200大 於最小CU量化群組大小。
此外,圖4展示與視訊區塊200相關聯之LCU之經寫碼表示206。經寫碼表示206包括語法值集合M0、指示針對量化群組204定義之QP值的語法元素D0及語法值集合C0。語法值集合M0可指示與視訊區塊200相關聯之LCU之寫碼模式。語法值集合C0可包括與LCU相關聯之變換係數。
圖4亦展示與LCU相關聯之視訊區塊220。視訊區塊220被分割為十個視訊區塊,編號為221至230。視訊區塊221至230中之每一者可與非分割CU相關聯。視訊區塊221與最小CU量化群組大小具有相同大小,亦即視訊區塊221與視訊區塊202大小相同。因為視訊區塊221至少與最小CU量化群組大小一樣大,所以量化群組232可僅包括與視訊區塊221相關聯之CU。視訊區塊230亦與最小CU量化群組大小具有相同大小,亦即視訊區塊230與區塊202大小相同。類似地,因為視訊區塊230至少與最小CU量化群組大小一樣大,所以量化群組234可僅包括與視訊區塊230相關聯之CU。
相對照地,視訊區塊222、223、224及225為各自小於最小CU量化群組大小之視訊區塊的叢集。因為,視訊區塊222-225小於最小CU量化群組大小,所以與視訊區塊222-225相關聯之CU並不屬於不同量化群組。實情為,在圖4之實例中,單一量化群組236包括與視訊區塊222至225相關聯之CU。因此,與視訊區塊222至225相關聯之CU可各自與針對量化群組236定義之單一QP值相關聯(亦即,共用 單一QP值)。視訊區塊226至229為各自小於最小CU量化群組大小之視訊區塊的另一叢集。因此,在圖4之實例中,單一量化群組238包括與視訊區塊226至229相關聯之CU。與視訊區塊226至229相關聯之CU可各自與針對量化群組238定義之單一QP值相關聯(亦即,共用單一QP值)。
圖4亦展示與視訊區塊220相關聯之LCU之實例經寫碼表示240。經寫碼表示240包括語法元素集合M1、D1、C1、M2、M3、M4、M5、M6、M7、D3、C7、M8、C8、M9及M10。語法元素M1可指示用於與視訊區塊221相關聯之CU之寫碼模式。語法元素D1可指示針對量化群組232定義之QP值。語法元素C1可指示與關聯於視訊區塊221之CU相關聯之變換係數。在圖4之實例中,假定與視訊區塊221相關聯之CU與至少一非零變換係數相關聯。
語法元素M2至M5可指示用於與視訊區塊222至225相關聯之CU之寫碼模式。在圖4之實例中,假定與視訊區塊222至225相關聯之CU使用跳過模式而編碼,或與關聯於視訊區塊222至225之CU相關聯的變換係數全部等於零。當視訊編碼器(諸如視訊編碼器20)使用跳過模式來編碼CU時,視訊編碼器不產生與該CU相關聯之變換係數。然而,視訊解碼器(諸如視訊解碼器30)可假定CU之視訊區塊與先前解碼圖片之並列視訊區塊相同。因此,在圖4之實例中,經寫碼表示240並不包括指示與關聯於視訊區塊222至225之CU相關聯的變換係數之語法元素。此外,因為視訊編碼器不產生與關聯於視訊區塊222至225之CU相關聯 的變換係數或因為與關聯於視訊區塊222至225之CU相關聯的變換係數全部等於零,所以經寫碼表示240不包括指示針對量化群組236定義之QP值的語法元素。
語法元素M6至M9可指示用於與視訊區塊226至229相關聯之CU之寫碼模式。此外,在圖4之實例中,假定與視訊區塊226及229相關聯之CU以跳過模式編碼,或與關聯於視訊區塊226及229之CU相關聯的變換係數全部等於零。因此,經寫碼表示240並不包括指示與關聯於視訊區塊226及229之CU相關聯的變換係數之語法元素。
然而,在圖4之實例中亦假定與視訊區塊227及228相關聯之CU均與至少一非零變換係數相關聯。因此,經寫碼表示240包括語法元素C7及C8。語法元素C7指示與關聯於視訊區塊226之CU相關聯之變換係數。語法元素C8指示與關聯於視訊區塊228之CU相關聯之變換係數。
因為量化群組238中之至少一CU與至少一非零變換係數相關聯,所以視訊編碼器傳訊針對量化群組238定義之QP值。因此,經寫碼表示240中之語法元素D3指示針對量化群組238定義之QP值。在圖4之實例中,語法元素D3位於指示量化群組238中之第一CU之寫碼模式的語法元素(亦即,M7)之後,該第一CU與至少一非零變換係數相關聯(亦即,與視訊區塊227相關聯之CU)。經寫碼表示240不包括在語法元素M8之後的指示另一QP值之語法元素,此係因為針對量化群組238定義之QP值與量化群組238中之每一CU相關聯。
語法元素M10可指示用於與視訊區塊230相關聯之CU之寫碼模式。在圖4之實例中,假定與視訊區塊230相關聯之CU係使用跳過模式而編碼,或與關聯於視訊區塊230之CU相關聯的變換係數全部等於零。因此,經寫碼表示240並不包括指示與關聯於視訊區塊230之CU相關聯的變換係數之語法元素。
在圖4之實例中,語法元素D0、D1及D3可藉由指定差量QP值而指示針對量化群組204、232及238定義之QP值。如上文描述,差量QP值可藉由指示QP值與另一QP值之間的差而表達QP值。舉例而言,語法元素D3可藉由指示針對量化群組238定義之QP值與針對量化群組232定義之QP值之間的差來指示針對量化群組238定義之QP值。
圖5A及圖5B為說明量化群組Q3中之當前視訊區塊254之邊緣250及252的概念圖。大體而言,圖5A及圖5B說明當前視訊區塊254,在當前視訊區塊254左邊有第一相鄰視訊區塊256A及在當前視訊區塊254頂部上有第二相鄰視訊區塊256B。以此方式,當前視訊區塊254與第一相鄰視訊區塊256A共用其左邊緣且與第二相鄰視訊區塊256B共用其頂部邊緣。當前視訊區塊254及相鄰視訊區塊256A及256B可為不同CU內之樣本之2D區塊。相鄰視訊區塊256A與量化群組Q2中之CU相關聯。相鄰視訊區塊與量化群組Q1中之CU相關聯。
圖5A說明當前視訊區塊254具有大於或等於最小CU量化群組大小的大小的實例。在此實例中,量化群組Q3僅包括 與當前視訊區塊254相關聯之CU且僅與單一QP值相關聯。在圖5A之實例中,當前視訊區塊254、第一相鄰視訊區塊256A及第二相鄰視訊區塊256B中之每一者具有大於或等於最小CU量化群組大小的大小。在其他實例中,第一相鄰視訊區塊256A及第二相鄰視訊區塊256B中之一者或兩者可具有小於最小CU量化群組大小的大小,且相關聯CU可與一或多個其他視訊區塊包括於其各別量化群組Q2及Q1中。在任一狀況下,與第一相鄰視訊區塊256A及第二相鄰視訊區塊256B相關聯之CU中的每一者可具有不同於與當前視訊區塊254相關聯之CU的QP值。
圖5B說明當前視訊區塊254具有小於最小CU量化群組大小的大小的實例。在此實例中,量化群組Q3包括與當前視訊區塊254相關聯之CU及與一或多個其他視訊區塊相關聯之CU,所有CU均與相同單一QP值相關聯。在圖5B中說明之實例中,第一相鄰視訊區塊256A及第二相鄰視訊區塊256B中之每一者具有大於或等於最小CU量化群組大小的大小。在其他實例中,第一相鄰視訊區塊256A及第二相鄰視訊區塊256B中之一者或兩者可具有小於最小CU量化群組大小的大小,且可與一或多個其他視訊區塊包括於其各別量化群組Q2及Q1中。在任一狀況下,與第一相鄰視訊區塊256A及第二相鄰視訊區塊256B中之每一者相關聯之CU可具有不同於與當前視訊區塊254相關聯之CU的QP值。
根據圖5A及圖5B兩者中說明之實例,與當前視訊區塊254相關聯之CU可具有不同於與相鄰視訊區塊256A相關聯 之CU的QP值。因此,在邊緣250之左邊及右邊可存在不同QP值。類似地,與當前視訊區塊254相關聯之CU可具有不同於與相鄰視訊區塊256B相關聯之CU的QP值。因此,在邊緣252之頂部及底部側上可存在不同QP值。
視訊寫碼器(諸如視訊編碼器20或視訊解碼器30)可基於與當前視訊區塊254相關聯之CU之QP值(亦即,用於明度邊緣之明度QP值及用於色度邊緣之色度QP值)而將解塊濾波器應用至邊緣250或邊緣252處之樣本。然而,與當前視訊區塊254相關聯之CU之QP值僅可適用於處理與當前視訊區塊254相關聯之內部邊緣。當處理與當前視訊區塊254相關聯之外部邊緣(例如,左邊緣250或頂部邊緣252)時,子LCU層級dQP傳訊可導致與相鄰視訊區塊256A及相鄰視訊區塊256B相關聯的CU具有不同於與當前視訊區塊254相關聯之CU之QP值。因此,在邊緣250及252之任一側上可存在不同QP值。僅基於此等QP值中之一者的解塊濾波器可能過強或過弱。因此,根據本發明之技術,視訊寫碼器可基於與當前視訊區塊254相關聯之CU之QP值及與相鄰視訊區塊256A或256B相關聯之CU之QP值而判定一解塊QP值,且可基於該解塊QP值來應用解塊濾波器。在一些情況中,解塊QP值可稱作經修改QP值,QP-M。
圖6為說明由視訊寫碼器執行之第一實例解塊操作300之流程圖。在一些實例中,視訊編碼器(例如,視訊編碼器20)或視訊解碼器(例如,視訊解碼器30)可執行解塊操作300。視訊寫碼器可關於CU之間的邊界處之邊緣而執行解 塊操作300。在一些實例中,視訊區塊可為樣本之4×4或8×8區塊。此外,在一些實例中,視訊寫碼器可關於圖片中之視訊區塊中之每一者的明度樣本及色度樣本而單獨執行解塊操作300。
在視訊寫碼器開始解塊操作300後,視訊寫碼器可判定出現於當前視訊區塊與相鄰視訊區塊之間的邊界處之邊緣的邊界強度(Bs)(302)。當前視訊區塊為與視訊寫碼器當前正在寫碼之CU(亦即,當前CU)相關聯之視訊區塊。邊緣可與當前視訊區塊之左邊或頂部邊緣重合。相鄰視訊區塊為與鄰近當前CU之CU(亦即,相鄰CU)相關聯之視訊區塊。邊緣可與相鄰視訊區塊之右邊或底部邊緣重合。邊緣可對應於與當前CU之TU或PU相關聯之視訊區塊的邊緣。
在一些實例中,視訊寫碼器根據光柵掃描次序來寫碼LCU且根據z掃描次序來寫碼LCU內之CU。在此類實例中,視訊寫碼器尚未寫碼當前CU之右邊相鄰者及下方相鄰者。當前CU之左上、右上、左下及右下相鄰者不與當前CU共用水平或垂直邊界。因此,在此類實例中,相鄰CU僅可為當前CU之上方相鄰者或左邊相鄰者。在圖6之實例中,假定當前CU屬於第一量化群組,且相鄰CU屬於第二量化群組。
視訊寫碼器可以各種方式判定邊界強度。舉例而言,視訊寫碼器可分析當前視訊區塊內之4×4視訊區塊「P」,且可分析相鄰視訊區塊內之4×4視訊區塊「Q」。視訊區塊「P」及視訊區塊「Q」可跨越在當前視訊區塊與相鄰視訊 區塊之間的邊界而彼此相對。為了判定邊緣之邊界強度,視訊寫碼器可判定視訊區塊「P」或視訊區塊「Q」是否與框內預測之CU相關聯。在此實例中,若視訊區塊「P」或視訊區塊「Q」與框內預測之CU相關聯,則視訊寫碼器可判定Bs等於二。在其他實例中,視訊寫碼器可判定該邊緣是否為CU邊緣。若邊緣為CU邊緣,則視訊寫碼器可判定Bs等於四。否則,若邊緣並非CU邊緣,則視訊寫碼器可判定邊界強度等於三。
在此實例中,若視訊區塊「P」或視訊區塊「Q」均不與框內預測之CU相關聯,則視訊寫碼器可判定視訊區塊「P」或視訊區塊「Q」是否與關聯於一或多個非零變換係數位準之當前或相鄰CU之TU相關聯。若視訊區塊「P」抑或視訊區塊「Q」與關聯於一或多個非零變換係數位準之TU相關聯,則視訊寫碼器可判定邊界強度等於一。在其他實例中,視訊寫碼器可判定邊界強度等於二。
否則,在此實例中,若視訊區塊「P」或視訊區塊「Q」均不與關聯於一或多個非零變換係數位準之TU相關聯,則視訊寫碼器可評估一或多個條件。舉例而言,視訊寫碼器可判定視訊區塊「P」抑或視訊區塊「Q」是否與具有不同參考圖片或具有不同數目的運動向量之PU相關聯。另外,視訊寫碼器可判定視訊區塊「P」及視訊區塊「Q」是否各自與具有一個運動向量之PU相關聯且當前CU之PU之運動向量與相鄰CU之PU之運動向量的水平分量或垂直分量之間的差的絕對值是否大於一。另外,若當前CU之 PU及相鄰CU之PU均各自具有兩個運動向量,且對於至少一對運動向量,運動向量之水平分量或垂直分量之間的差的絕對值大於或等於一。在此實例中,若此等條件中之任一者評估為真,則視訊寫碼器可判定邊界強度為一。否則,若條件皆不被評估為真,則視訊寫碼器可判定邊界強度等於零。
另外,視訊寫碼器可基於針對第一量化群組定義之QP值及針對第二量化群組定義之QP值中之至少一者來判定一解塊QP值(304)。視訊寫碼器可取決於視訊寫碼器將解塊濾波器應用至之樣本類型而使用當前CU及相鄰CU之不同QP值。舉例而言,若視訊寫碼器正將解塊濾波器應用至當前視訊區塊與相鄰視訊區塊之間的邊界處的明度樣本,則視訊寫碼器可基於與當前CU相關聯之明度QP值及與相鄰CU相關聯之明度QP值而判定解塊QP值。類似地,若視訊寫碼器正將解塊濾波器應用至當前視訊區塊與相鄰視訊區塊之間的邊界處的色度樣本,則視訊寫碼器可基於與當前CU相關聯之色度QP值及與相鄰CU相關聯之色度QP值而判定解塊QP值。
在一些實例中,當前CU及/或相鄰CU可具有框內脈碼調變(I_PCM)類型。在此類實例中,視訊寫碼器可假定與當前CU及/或相鄰CU相關聯之QP值等於零或另一適當值。
此外,在一些實例中,視訊編碼器可對當前CU及/或相鄰CU執行無損耗編碼。當視訊編碼器對CU執行無損耗編碼時,視訊編碼器可不量化(亦即,按比例調整)與CU相關聯之 變換係數區塊或對CU之視訊區塊執行迴路內濾波。在此類實例中,與CU相關聯之QP'Y值(亦即,明度QP值)可等於零,且與CU相關聯之qprime_y_zero_transquant_bypass_flag可等於真。qprime_y_zero_transquant_bypass_flag可指定:當QP'Y等於0時,應應用無損耗寫碼程序。與CU相關聯之序列參數集可指定qprime_y_zero_transquant_bypass_flag。
視訊寫碼器可以各種方式判定解塊QP值的值。舉例而言,若當前CU及相鄰CU均處於同一量化群組中,則視訊寫碼器可使用與當前CU相關聯之QP值或與相鄰CU相關聯之QP值作為解塊QP,此係因為與當前CU相關聯之QP值及與相鄰CU相關聯之QP值為相同的。
然而,若當前CU及相鄰CU處於不同量化群組中,則視訊寫碼器可基於與當前CU相關聯之QP值及與相鄰CU相關聯之QP值來判定解塊QP值。視訊寫碼器可以各種方式而基於與當前CU相關聯之QP值及與相鄰CU相關聯之QP值來判定解塊QP值。舉例而言,視訊寫碼器可基於與當前CU相關聯之QP值及與相鄰CU相關聯之QP值中的最大值來判定解塊QP值。舉例而言,視訊編碼器可選擇與當前CU相關聯之QP值及與相鄰CU相關聯之QP值中的任一較大值作為解塊QP。在此實例中,視訊寫碼器可基於以下公式而選擇解塊QP值:QP-M=max(QP-P,QP-Q),其中QP-M為解塊QP值,QP-P為與當前CU相關聯之QP值,及QP-Q為與相鄰CU相關聯之QP值。
在視訊寫碼器可判定解塊QP值之方式的另一實例中, 視訊寫碼器可基於與當前CU相關聯之QP值及與相鄰CU相關聯之QP值中的任一較小值而判定解塊QP值。舉例而言,視訊寫碼器可基於以下公式而選擇解塊QP值:QP-M=min(QP-P,QP-Q),其中QP-M為解塊QP值,QP-P為與當前CU相關聯之QP值,及QP-Q為與相鄰CU相關聯之QP值。
在視訊寫碼器可判定解塊QP值之方式的另一實例中,視訊寫碼器可基於與當前CU相關聯之QP值及與相鄰CU相關聯之QP值的平均值而判定解塊QP值。舉例而言,視訊寫碼器可基於以下公式而選擇解塊QP值:QP-M=(QP-P+QP-Q)/2,其中QP-M為解塊QP值,QP-P為與當前CU相關聯之QP值,及QP-Q為與相鄰CU相關聯之QP值。在另一實例中,視訊寫碼器可基於以下公式而選擇解塊QP值:qPL=((QPY+QPP+1)>>1),其中qPL為解塊QP值,QPY為與當前CU相關聯之QP值,QPP為與相鄰CU相關聯之QP值,且「>>」為右移運算子。
在視訊寫碼器可判定解塊QP值之方式的另一實例中,濾波器模組159可基於與當前CU相關聯之QP值及與相鄰CU相關聯之QP值的加權平均值而判定解塊QP值。舉例而言,視訊寫碼器可基於以下公式而選擇解塊QP值:QP-M=p*QP-P+q*QP-Q,其中p+q=1,QP-M為解塊QP值,QP-P為與當前CU相關聯之QP值,QP-Q為與相鄰CU相關聯之QP值,且「p」及「q」為權重。
在判定解塊QP值及邊界強度後,視訊寫碼器可基於該 解塊QP值及邊界強度而識別針對臨限值tc之參數Q的值(306)。在一些實例中,視訊寫碼器可使用以下偽碼來識別針對tc之參數Q的值:若Bs>1,則TcOffset=2若Bs1,則TcOffset=0 Q=Clip3(0,MAX_QP+4,QP+TcOffset),其中MAX_QP=51。
在上述偽碼中,「Bs」指示邊界強度,及「QP」指示解塊QP值。「Clip3(x,y,z)」函數可輸出x(若z<x),輸出y(若z>y),及輸出z(其他)。或者,Clip3可輸出第一參數和第二參數與第三參數中的任一較大者中的較小者。在類似實例中,上述偽碼之最後一行可指定Q=Clip3(0,MAX_QP+2,QP+TcOffset),其中MAX_QP=51。
在另一實例中,視訊寫碼器可將針對tc之參數Q的值識別為Q=Clip3(0,MAX_QP+2,qPL+2*(Bs-1)+(tc_offset_div2<<1)),其中qPL為解塊QP值,Bs為邊界強度,且「tc_offset_div2」為針對tc之解塊參數偏移。
另外,視訊寫碼器可基於解塊QP值來識別針對臨限值β之參數Q的值(308)。在一些實例中,濾波器模組159可使用以下偽碼來識別針對β之參數Q的值:Q=Clip3(0,MAX_QP,QP),其中MAX_QP=51。
在上述偽碼中,「Bs」、「QP」及「Clip3」可具有與上述偽碼中相同的意義。在另一實例中,視訊寫碼器可將針對β之參數Q的值識別為Q=Clip3(0,51,qPL+(beta_offset_div2<<1)),其中qPL指示解塊QP,且「beta_offset_div2」為 針對β之解塊參數偏移。
視訊寫碼器接著可基於針對tc識別之Q值來判定tc值(310)。在識別針對β之Q值後,視訊寫碼器可基於針對β識別之Q值來判定β值(312)。因為視訊寫碼器基於解塊QP值來識別針對臨限值tc及β之Q值,所以視訊寫碼器實際上基於解塊QP值來識別臨限值tc及β。
在一些實例中,視訊寫碼器可使用針對tc及β而識別之Q值作為索引來在一或多個查找表中查找tc及β之值。舉例而言,視訊寫碼器可使用下表來識別tc及β之值。
為了使用Q值作為在此查找表中查找tc或β之值的索引,視訊寫碼器可在查找表中探尋Q值且接著識別在Q值下方的針對tc或β而指定的值。以此方式,可使用解塊QP值(亦即,經修改QP值)來在表1中查找tc及β。
在判定tc及β之值後,視訊寫碼器可基於tc及β判定是否將解塊濾波器應用至跨越當前視訊區塊與相鄰視訊區塊之間的邊界的一或多排樣本(314)。一排樣本可為一系列鄰近樣本,該等樣本垂直於邊緣(且因此垂直於當前視訊區塊 與相鄰視訊區塊之間的邊界)。舉例而言,若邊緣為水平的,則該等排為垂直的。類似地,若邊緣為垂直的,則該等排為水平的。
視訊寫碼器可以各種方式判定是否應用解塊濾波器。舉例而言,邊緣可為八個樣本寬或高。在此實例中,視訊寫碼器可基於tc及β之值來判定是否將解塊濾波器應用至一或多排樣本。在此實例中,視訊寫碼器可計算跨越邊緣之第三排樣本(亦即,i=2)中的活動性等級d 1 。另外,視訊寫碼器可計算跨越邊緣之第六排樣本(亦即,i=5)中的活動性等級d 2 。在此實例中,視訊寫碼器可藉由使d 1 d 2 相加來計算邊緣之活動性d。視訊寫碼器可基於活動性d與β之比較而判定是否將解塊濾波器應用至樣本之所有八排。舉例而言,若活動性d與β相比較低,則視訊寫碼器可判定將解塊濾波器應用至八排樣本。然而,若活動性d與β相比較高,則視訊寫碼器可判定不將解塊濾波器應用至八排樣本中之任一者。此實例可概述於以下等式中:dp0=|p20-2*p10+p00| dp3=|p23-2*p13+p03| dq0=|q20-2*q10+q00| dq3=|q23-2*q13+q03| dpq0=dp0+dq0 dpq3=dp3+dq3 d=dpq0+dqp3
在此實例中,視訊寫碼器可回應於判定值d小於β而判定 應用解塊濾波器。在此實例中,dp0、dp3、dq0及dq3可為樣本活動性之量測值。在上述公式中,p2i、p1i、q0i等為樣本之標籤。標籤具有以下格式:字母、數字、附標。字母指示第一視訊區塊「p」或第二視訊區塊「q」。數字指示在該樣本與視訊區塊p與視訊區塊q之間的邊界之間的樣本數目。附標可指示包括該樣本之排。舉例而言,若邊界為水平的,則附標指示包括該樣本之行。若邊界為垂直的,則附標指示包括該樣本之列。圖7為指示在第一視訊區塊「A」與第二視訊區塊「B」之間的垂直邊界處之樣本之實例標籤的概念圖。本發明可在其他公式中使用此標籤格式。
在其他實例中,視訊寫碼器可進行是否將解塊濾波器應用至當前視訊區塊及相鄰視訊區塊中之樣本排的多個決策。舉例而言,邊緣可為八個樣本寬或高。在此實例中,視訊寫碼器可判定是否將解塊濾波器應用至樣本之最初四排。視訊寫碼器可單獨判定是否將解塊濾波器應用至樣本之其次四排。此可減少判定是否應用解塊濾波器之次數。
回應於判定不將解塊濾波器應用至一排樣本(314之「否」),視訊寫碼器可結束關於該排樣本之操作300。然而,回應於判定將解塊濾波器應用至一排樣本(314之「是」),視訊寫碼器可基於臨限值tc及β判定將強解塊濾波器抑或弱解塊濾波器應用至該排樣本(316)。視訊寫碼器可以各種方式判定將強解塊濾波器抑或弱解塊濾波器應用至該排樣本。
舉例而言,視訊寫碼器可使用以下公式來判定將強解塊濾波器抑或弱解塊濾波器應用至一排樣本i中之明度值。
swi=2(|p2i-2.p1i+p0i|+|q0i-2.q1i+q2i|)<(β/4)及(|p3i-p0i|+|q0i-q3i|)<(β/8)及|p0i-q0i|<((5.tc+1)/2)
在此實例中,視訊寫碼器可單獨判定針對當前視訊區塊中之每一排樣本應用強抑或弱解塊濾波器。因此,若邊緣為八樣本寬或八樣本高,則視訊寫碼器可進行八次單獨判定。
在另一實例中,視訊寫碼器可針對每四排樣本進行一次判定。舉例而言,若當前視訊區塊為八個樣本寬或高,則視訊寫碼器可判定將強抑或弱解塊濾波器應用至最初四排樣本,及可單獨判定將強抑或弱解塊濾波器應用至最後四排樣本。因此,視訊寫碼器可針對八排樣本進行兩次單獨判定。舉例而言,若(sw0 AND sw3)為真,則應將強解塊濾波器應用至排0、1、2及3,否則應應用弱濾波器。
回應於判定將強解塊濾波器應用至一排樣本(316之「是」),視訊寫碼器可將強解塊濾波器應用至該排樣本(318)。在一些實例中,應用強解塊濾波器可修改當前視訊區塊中之樣本直至離開邊界的三個樣本,且可修改相鄰視訊區塊中之樣本直至離開邊界的三個樣本。
視訊寫碼器可以各種方式應用強解塊濾波器。舉例而言,視訊寫碼器可將以下強解塊濾波器應用至該排樣本中之明度值。
p0'=(p2+2 * p1+2 * p0+2 * q0+q1+4)/8 p1'=(p2+p1+p0+q0+2)/4 p2'=(2*p3+3*p2+p1+p0+q0+4)/8 q0'=(p1+2*p0+2*q0+2*q1+q2+4)/8 q1'=(p0+q0+q1+q2+2)/4 q2'=(p0+q0+q1+3*q2+2*q3+4)/8
在上述行中,「p」可表示當前視訊區塊,且「q」可表示相鄰視訊區塊。p0、p1、p2、p3表示當前視訊區塊之分別與當前視訊區塊與相鄰視訊區塊之間的邊界相隔零、一、二及三個樣本的樣本。p0'、p1'及p2'表示當前視訊區塊之分別與當前視訊區塊與相鄰視訊區塊之間的邊界相隔零、一及二個樣本的樣本之經修改值。q0、q1、q2及q3表示相鄰視訊區塊之分別與當前視訊區塊與相鄰視訊區塊之間的邊界相隔零、一、二及三個樣本的樣本。q0'、q1'及q2'表示相鄰視訊區塊之分別與當前視訊區塊與相鄰視訊區塊之間的邊界相隔零、一及二個樣本的樣本之經修改值。
在另一實例中,視訊寫碼器可將以下強解塊濾波器應用至該排樣本中之明度值。
p0'=Clip3(p0-2*tc,p0+2*tc,(p2+2*p1+2*p0+2*q0+q1+4)>>3) p1'=Clip3(p1-2*tc,p1+2*tc,(p2+p1+p0+q0+2)>>2)) p2'=Clip3(p2-2*tc,p2+2*tc,(2*p3+3*p2+p1+p0+q0+4)>>3)) q0'=Clip3(q0-2*tc,q0+2*tc,(p1+2*p0+2*q0+2*q1+q2+4)>>3)) q1'=Clip3(q1-2*tc,q1+2*tc,(p0+q0+q1+q2+2)>>2) q2'=Clip3(q2-2*tc,q2+2*tc,(p0+q0+q1+3*q2+2*q3+4)>>3)
另一方面,若視訊寫碼器判定不將強解塊濾波器應用至一排樣本(316之「否」),則視訊寫碼器可將弱解塊濾波器應用至該排樣本(320)。當視訊寫碼器應用弱解塊濾波器時,視訊寫碼器可修改當前視訊區塊中之樣本直至離開邊界的兩個樣本,且可修改相鄰視訊區塊中之樣本直至離開邊界的兩個樣本。
視訊寫碼器可以各種方式應用弱解塊濾波器。舉例而言,視訊寫碼器可將以下弱解塊濾波器應用至該排樣本中之明度值。
△=(9 *(q0-p0)-3 *(q1-p1)+8)/16
若(△<10* tc),則:△=Clip3(-tc,tc,△) p0'=Clip1Y(p0+△) q0'=Clip1Y(q0-△) △p=Clip3(-tc/2,tc/2,((p2+p0+1)/2-p1+△)/2) p1'=Clip1Y(p1+△p) (p1之解塊取決於決策條件) △q=Clip3(-tc/2,tc/2,((q2+q0+1)/2-q1-△)/2) q1'=Clip1Y(q1+△q) (q1之解塊取決於決策條件)
在上述行中,p0、p1、p2、q0、q1、q2及「Clip3」函數可具有與上文提供之彼等相同的意義。Clip1Y函數可將值限制於由亮度樣本之位元深度判定的可能亮度值範圍。
在一些實例中,p1及q1之解塊濾波可取決於弱濾波器寬度決策。在此類實例中,若視訊寫碼器將弱解塊濾波器應用至邊緣之最初四排,則視訊寫碼器可判定是否 (dp0+dp3)<3β/16。回應於判定(dp0+dp3)<3β/16,視訊寫碼器可根據上述濾波器修改邊緣之最初四排之p1。此外,若視訊寫碼器將弱解塊濾波器應用至邊緣之最初四排,則視訊寫碼器可判定是否(dq0+dq3)<3β/16。回應於判定(dq0+dp3)<3β/16,視訊寫碼器可根據上述濾波器修改邊緣之最初四排之q1。視訊寫碼器可檢查類似條件,且在視訊寫碼器將弱解塊濾波器應用至邊緣之最後四排的情況下應用類似濾波器。
以此方式,邊緣可與第一排集合及第二排集合相關聯,其中第一排集合及第二排集合各自包括四排。當視訊寫碼器應用弱解塊濾波器時,視訊寫碼器可回應於判定第一排集合之第一排中的第一視訊區塊之樣本與第一排集合之第四排中的第一視訊區塊之樣本的總和小於臨限值而將弱解塊濾波器應用至第一排集合中之第一視訊區塊的樣本。另外,視訊寫碼器可回應於判定第一排集合之第一排中的第二視訊區塊之樣本與第一排集合之第四排中的第二視訊區塊之樣本的總和小於臨限值而將弱解塊濾波器應用至第一排集合中之第二視訊區塊的樣本。視訊寫碼器可回應於判定第二排集合之第一排中的第一視訊區塊之樣本與第二排集合之第四排中的第一視訊區塊之樣本的總和小於臨限值而將弱解塊濾波器應用至第二排集合中之第一視訊區塊的樣本。另外,視訊寫碼器可回應於判定第二排集合之第一排中的第二視訊區塊之樣本與第二排集合之第四排中的第二視訊區塊之樣本的總和小於臨限值而將弱解塊濾波器應 用至第二排集合中之第二視訊區塊的樣本。
在一些實例中,視訊寫碼器並不進行關於應用強抑或弱解塊濾波器的判定。實情為,視訊寫碼器可僅應用一種類型之解塊濾波器。舉例而言,視訊寫碼器可將上述濾波器應用至色度值而無需進行關於應用強抑或弱解塊濾波器的判定。在另一實例中,視訊寫碼器可將以下濾波器應用至色度樣本:△=Clip3(-tc,tc,((((q0+p0)<<2)+p1-q1+4)>>3)) p0'=Clip1C(p0+△) q0'=Clip1C(q0-△)
函數Clip1C可將值限制於由色度樣本之位元深度判定的可能色度值範圍。
在另一實例中,視訊寫碼器可將以下濾波器應用至色度樣本:△=(4*(q0-p0)-(q1-p1)+4)/8 △=Clip3(-tc,tc,△) (tc為臨限值,取決於量化參數) p0'=p0+△ q0'=q0-△
圖8為說明由視訊寫碼器執行之第二實例解塊操作400之流程圖。在一些實例中,諸如視訊編碼器(例如,視訊編碼器20)或視訊解碼器(例如,視訊解碼器30)之視訊寫碼器可執行解塊操作400。當視訊寫碼器執行解塊操作400時,視訊寫碼器可將基於第一解塊QP值之解塊濾波器應用至與當前CU相關聯之視訊區塊中的樣本,及可將基於第二解 塊QP值之解塊濾波器應用至與相鄰CU相關聯之視訊區塊中的處於當前CU與相鄰CU之間的邊界處之樣本。因此,應用至不同量化群組中之CU之樣本的解塊濾波器可適用於與該等CU相關聯的QP值。
在視訊寫碼器開始解塊操作400後,視訊寫碼器可判定與當前視訊區塊相關聯之外部邊緣的邊界強度(Bs)(402)。外部邊緣可出現於當前視訊區塊與相鄰視訊區塊之間的邊界處。當前視訊區塊可為與當前CU相關聯之樣本的2D區塊。相鄰視訊區塊可為與相鄰CU相關聯之樣本的2D區塊。在一些實例中,視訊寫碼器可以上文關於圖6描述之方式來判定邊界強度。
另外,視訊寫碼器可判定第一解塊QP值(404)。在一些實例中,第一解塊QP值可等於與當前CU相關聯之QP值。另外,視訊寫碼器可判定第二解塊QP值(406)。在一些實例中,第二解塊QP值可等於與相鄰CU相關聯之QP值。
在判定第一解塊QP值後,視訊寫碼器可基於該第一解塊QP值而識別針對臨限值tc之參數Q的第一值(408)。此外,視訊寫碼器可基於針對tc之參數Q的第一值來判定tc之第一值(410)。視訊寫碼器可以上文關於圖6描述的方式來判定針對tc之參數Q的第一值及tc之第一值。
在識別第一解塊QP值後,視訊寫碼器亦可基於該第一解塊QP值而判定針對臨限值β之參數Q的第一值(412)。視訊寫碼器亦可基於針對β之參數Q的第一值來判定β之第一值(414)。視訊寫碼器可以上文關於圖6描述的方式來判定 針對β之參數Q的第一值及β之第一值。
另外,視訊寫碼器可基於第二解塊QP值及邊界強度來識別針對tc之參數Q的第二值(416)。接著,視訊寫碼器可基於針對tc之參數Q的第二值來判定tc之第二值(418)。視訊寫碼器可以上文關於圖6描述的方式來識別針對tc之參數Q的第二值及tc之第二值。
此外,視訊寫碼器可基於第二解塊QP值及邊界強度來判定針對β之參數Q的第二值(420)。視訊寫碼器接著可基於針對β之參數Q的第二值來判定β之第二值(422)。視訊寫碼器可以上文關於圖6描述的方式來識別針對β之參數Q的第二值及β之第二值。在判定β之第二值後,視訊寫碼器可執行圖9中所示之解塊操作400之部分。以此方式,QP-P值可用以查找用於處理當前邊緣之CU-P側的β及/或tc臨限值,而QP-Q值可用以查找用於處理當前邊緣之CU-Q側的β及/或tc臨限值。
圖9為說明解塊操作400之延續之流程圖。在視訊寫碼器開始圖9中所示的解塊操作400之部分後,視訊寫碼器可基於tc之第一值及β之第一值來判定是否將解塊濾波器應用至跨越邊緣之一排樣本(450)。視訊寫碼器可以上文關於圖6描述的方式來判定是否將解塊濾波器應用至該排樣本。
回應於判定將解塊濾波器應用至該排樣本(450之「是」),視訊寫碼器可基於tc之第一值及β之第一值判定是否將強解塊濾波器應用至該排樣本(452)。視訊寫碼器可以上文關於圖6描述的方式來判定是否應用強解塊濾波 器。回應於判定將強解塊濾波器應用至該排樣本(452之「是」),視訊寫碼器可僅將強解塊濾波器應用至該排中的在當前視訊區塊內之彼等樣本(454)。視訊寫碼器不修改相鄰視訊區塊之樣本。
然而,回應於判定不將強解塊濾波器應用至該排樣本(亦即,回應於判定將弱解塊濾波器應用至該排樣本)(452之「否」),視訊寫碼器可將弱解塊濾波器應用至該排中的在當前視訊區塊內之彼等樣本(456)。視訊寫碼器不修改相鄰視訊區塊之樣本。
在基於tc之第一值及β之第一值判定不應用解塊濾波器(450之「否」)後,在步驟454中應用強解塊濾波器後,或在步驟456中應用弱解塊濾波器後,視訊寫碼器可基於tc之第二值及β之第二值判定是否將解塊濾波器應用至該排樣本(458)。視訊寫碼器可以上文關於圖6描述的方式來判定是否將解塊濾波器應用至該排樣本。回應於判定不將解塊濾波器應用至該排樣本(458之「否」),視訊寫碼器可結束關於該排樣本之解塊操作400。
然而,回應於基於tc之第二值及β之第二值判定將解塊濾波器應用至該排樣本(458之「是」),視訊寫碼器可判定是否將強解塊濾波器應用至該排樣本(460)。回應於判定將強解塊濾波器應用至該排樣本(460之「是」),視訊寫碼器可將強解塊濾波器應用至該排中的在相鄰視訊區塊內之彼等樣本(462)。視訊寫碼器可以上文關於圖6描述的方式來判定是否將強解塊濾波器應用至該排樣本。然而,當在步驟 462中視訊寫碼器應用強解塊濾波器時,視訊寫碼器不修改當前視訊區塊中之樣本。在將強解塊濾波器應用至該排樣本後,視訊寫碼器可結束關於該排樣本之解塊操作400。
回應於判定不將強解塊濾波器應用至該排樣本(亦即,回應於判定將弱解塊濾波器應用至該排樣本)(460之「否」),視訊寫碼器可將弱解塊濾波器應用至該排中的在相鄰視訊區塊內之彼等樣本(464)。視訊寫碼器可以上文關於圖6描述的方式來判定是否將弱解塊濾波器應用至該排樣本。然而,當在步驟464中視訊寫碼器應用弱解塊濾波器時,視訊寫碼器不修改當前視訊區塊之樣本。在將弱解塊濾波器應用至該排樣本後,視訊寫碼器可結束關於該排樣本之解塊操作400。視訊寫碼器可關於跨越邊緣之每一排樣本來執行步驟450至464。
在一些實例中,p1及q1之解塊濾波可取決於弱濾波器寬度決策。在此類實例中,若視訊寫碼器將弱解塊濾波器應用至邊緣之最初四排,則視訊寫碼器可判定是否(dp0+dp3)<3β/16。回應於判定(dp0+dp3)<3β/16,視訊寫碼器可根據以下濾波器修改邊緣之最初四排之p1:△=(9 *(q0-p0)-3 *(q1-p1)+8)/16
若(△<10* tc),則:△=Clip3(-tc,tc,△) △p=Clip3(-tc/2,tc/2,((p2+p0+1)/2-p1+△)/2) p1'=Clip1Y(p1+△p) △q=Clip3(-tc/2,tc/2,((q2+q0+1)/2-q1-△)/2) q1'=Clip1Y(q1+△q)
此外,若視訊寫碼器將弱解塊濾波器應用至邊緣之最初四排,則視訊寫碼器可判定是否(dq0+dq3)<3β/16。回應於判定(dq0+dq3)<3β/16,視訊寫碼器可根據上述濾波器修改邊緣之最初四排之q1。視訊寫碼器可檢查類似條件,且在視訊寫碼器將弱解塊濾波器應用至邊緣之最後四排的情況下應用一類似濾波器。
在一或多個實例中,所描述功能可以硬體、軟體、韌體或其任何組合來實施。若以軟體實施,則功能可作為一或多個指令或程式碼而儲存於電腦可讀媒體上或經由電腦可讀媒體而傳輸,且由基於硬體之處理單元執行。電腦可讀媒體可包括電腦可讀儲存媒體(其對應於諸如資料儲存媒體之有形媒體)或通信媒體,通信媒體包括(例如)根據通信協定促進電腦程式自一處傳送至另一處的任何媒體。以此方式,電腦可讀媒體大體上可對應於(1)非暫時性的有形電腦可讀儲存媒體,或(2)諸如信號或載波之通信媒體。資料儲存媒體可為可由一或多個電腦或一或多個處理器存取以擷取指令、程式碼及/或資料結構以用於實施本發明中所描述之技術的任何可用媒體。電腦程式產品可包括一電腦可讀媒體。
藉由實例而非限制,此等電腦可讀儲存媒體可包含RAM、ROM、EEPROM、CD-ROM或其他光碟儲存器、磁碟儲存器或其他磁性儲存器件、快閃記憶體,或可用以儲 存呈指令或資料結構之形式的所要程式碼且可由電腦存取之任何其他媒體。又,任何連接可適當地稱為電腦可讀媒體。舉例而言,若使用同軸電纜、光纖纜線、雙絞線、數位用戶線(DSL)或無線技術(諸如,紅外線、無線電及微波)而自網站、伺服器或其他遠端源傳輸指令,則同軸電纜、光纖纜線、雙絞線、DSL或無線技術(諸如,紅外線、無線電及微波)包括於媒體之定義中。然而,應理解,電腦可讀儲存媒體及資料儲存媒體不包括連接、載波、信號或其他暫時性媒體,而是有關非暫時性有形儲存媒體。如本文中所使用,磁碟及光碟包括緊密光碟(CD)、雷射光碟、光學光碟、數位影音光碟(DVD)、軟性磁碟及藍光光碟,其中磁碟通常以磁性方式再生資料,而光碟藉由雷射以光學方式再生資料。以上各物之組合亦應包括於電腦可讀媒體之範疇內。
可由諸如一或多個數位信號處理器(DSP)、通用微處理器、特殊應用積體電路(ASIC)、場可程式化邏輯陣列(FPGA)或其他等效整合或離散邏輯電路之一或多個處理器來執行指令。因此,本文中所使用之術語「處理器」可指代上述結構或適於實施本文中所描述之技術的任何其他結構中之任一者。另外,在一些態樣中,可將本文中所描述之功能性提供於經組態以用於編碼及解碼之專用硬體及/或軟體模組內,或併入於組合式編碼解碼器中。又,該等技術可完全實施於一或多個電路或邏輯元件中。
本發明之技術可實施於多種器件或裝置中,該等器件或 裝置包括無線手機、積體電路(IC)或IC集合(例如,晶片集)。在本發明中描述各種組件、模組或單元以強調經組態以執行所揭示技術的器件之功能態樣,但未必要求藉由不同硬體單元來實現。實情為,如上文所描述,各種單元可組合於編碼解碼器硬體單元中,或由互操作性硬體單元(包括如上文所描述之一或多個處理器)之集合結合適合軟體及/或韌體來提供。
已描述各種實例。此等及其他實例係在以下申請專利範圍之範疇內。
10‧‧‧視訊寫碼系統
12‧‧‧源器件
14‧‧‧目的地器件
16‧‧‧通道
18‧‧‧視訊源
20‧‧‧視訊編碼器
22‧‧‧輸出介面
28‧‧‧輸入介面
30‧‧‧視訊解碼器
32‧‧‧顯示器件
100‧‧‧預測模組
102‧‧‧殘餘產生模組
104‧‧‧變換模組
106‧‧‧量化模組
108‧‧‧逆量化模組
110‧‧‧逆變換模組
112‧‧‧重新建構模組
113‧‧‧濾波器模組
114‧‧‧經解碼圖片緩衝器
116‧‧‧熵編碼模組
122‧‧‧運動估計模組
124‧‧‧運動補償模組
126‧‧‧框內預測模組
150‧‧‧熵解碼模組
152‧‧‧預測模組
154‧‧‧逆量化模組
156‧‧‧逆變換模組
158‧‧‧重新建構模組
159‧‧‧濾波器模組
160‧‧‧經解碼圖片緩衝器
162‧‧‧運動補償模組
164‧‧‧框內預測模組
200‧‧‧視訊區塊
202‧‧‧視訊區塊
204‧‧‧量化群組
206‧‧‧經寫碼表示
220‧‧‧視訊區塊
221‧‧‧視訊區塊
222‧‧‧視訊區塊
223‧‧‧視訊區塊
224‧‧‧視訊區塊
225‧‧‧視訊區塊
226‧‧‧視訊區塊
227‧‧‧視訊區塊
228‧‧‧視訊區塊
229‧‧‧視訊區塊
230‧‧‧視訊區塊
232‧‧‧量化群組
234‧‧‧量化群組
236‧‧‧量化群組
238‧‧‧量化群組
240‧‧‧經寫碼表示
250‧‧‧邊緣
252‧‧‧邊緣
254‧‧‧當前視訊區塊
256A‧‧‧相鄰視訊區塊
256B‧‧‧相鄰視訊區塊
300‧‧‧由視訊寫碼器執行之第一實例解塊操作
400‧‧‧由視訊寫碼器執行之第二實例解塊操作
Q1‧‧‧量化群組
Q2‧‧‧量化群組
Q3‧‧‧量化群組
圖1為說明可利用本發明之技術之實例視訊寫碼系統的方塊圖。
圖2為說明可實施本發明之技術之實例視訊編碼器的方塊圖。
圖3為說明可實施本發明之技術之實例視訊解碼器的方塊圖。
圖4為說明針對不同大小之視訊區塊之例示性差量量化參數(QP)值傳訊的概念圖。
圖5A及圖5B為說明將要根據本發明之技術進行解塊濾波之當前視訊區塊之邊緣的概念圖。
圖6為說明由視訊寫碼器執行之第一實例解塊操作之流程圖。
圖7為指示在第一視訊區塊「A」與第二視訊區塊「B」之間的垂直邊界處之樣本之實例標籤的概念圖。
圖8為說明由視訊寫碼器執行之第二實例解塊操作之流程圖。
圖9為說明第二解塊操作之實例延續之流程圖。
10‧‧‧視訊寫碼系統
12‧‧‧源器件
14‧‧‧目的地器件
16‧‧‧通道
18‧‧‧視訊源
20‧‧‧視訊編碼器
22‧‧‧輸出介面
28‧‧‧輸入介面
30‧‧‧視訊解碼器
32‧‧‧顯示器件

Claims (42)

  1. 一種寫碼視訊資料之方法,該方法包含:基於一第一量化參數(QP)值及一第二QP值中之至少一者判定一解塊QP值;及將基於該解塊QP值之一解塊濾波器應用至出現於一第一視訊區塊與一第二視訊區塊之間的一邊界處的一邊緣,其中該第一視訊區塊與一第一寫碼單元(CU)相關聯且該第二視訊區塊與一第二CU相關聯,該第一CU係包括於一第一量化群組中,其中該第一QP值係針對該第一量化群組而定義,該第二CU係包括於一第二量化群組中,其中該第二QP值係針對該第二量化群組而定義。
  2. 如請求項1之方法,其中該第一量化群組包括多個CU。
  3. 如請求項1之方法,其進一步包含:基於該解塊QP值識別臨限值;及基於該等臨限值進行將該解塊濾波器應用至該邊緣的一判定。
  4. 如請求項1之方法,其中判定該解塊QP值包含基於該第一QP值與該第二QP值之一平均值來判定該解塊QP值。
  5. 如請求項1之方法,其中判定該解塊QP值包含基於以下各項中之一者來計算該解塊QP值:該第一QP值及該第二QP值中之一最大值、該第一QP值及該第二QP值中之一最小值、及該第一QP值及該第二QP值之一加權平均值。
  6. 如請求項1之方法, 其中該方法進一步包含:基於該解塊QP值識別臨限值;及基於該等臨限值進行應用一強解塊濾波器抑或一弱解塊濾波器的一判定;及其中應用該解塊濾波器包含:回應於判定應用一強解塊濾波器而應用該強解塊濾波器以修改該第一視訊區塊之樣本直至離開該邊界的三個樣本,及修改該第二視訊區塊之樣本直至離開該邊界的三個樣本;及回應於判定不應用該強解塊濾波器而應用一弱解塊濾波器以修改該第一視訊區塊之樣本直至離開該邊界的兩個樣本,及修改該第二視訊區塊之樣本直至離開該邊界的兩個樣本。
  7. 如請求項6之方法,其中該邊緣與一第一排集合及一第二排集合相關聯,該第一排集合及該第二排集合各自包括四排,且應用該弱解塊濾波器包含:回應於判定該第一排集合之一第一排中的該第一視訊區塊之一樣本與該第一排集合之一第四排中的該第一視訊區塊之一樣本的一總和小於一臨限值而將該弱解塊濾波器應用至該第一排集合中之該第一視訊區塊的樣本;回應於判定該第一排集合之該第一排中的該第二視訊區塊之一樣本與該第一排集合之該第四排中的該第二視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第一排集合中之該第二視訊區塊的樣本; 回應於判定該第二排集合之一第一排中的該第一視訊區塊之一樣本與該第二排集合之一第四排中的該第一視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第二排集合中之該第一視訊區塊的樣本;及回應於判定該第二排集合之該第一排中的該第二視訊區塊之一樣本與該第二排集合之該第四排中的該第二視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第二排集合中之該第二視訊區塊的樣本。
  8. 如請求項1之方法,其中該解塊QP值為一第一解塊QP值,該第一解塊QP值等於該第一QP值,及一第二解塊QP值等於該第二QP值;及其中該方法進一步包含將基於該第二解塊QP值之一解塊濾波器應用至處於該第一視訊區塊與該第二視訊區塊之間的該邊界處的該第二視訊區塊之樣本。
  9. 如請求項1之方法,其中該第二視訊區塊具有一小於一最小CU量化群組大小的大小,及其中該第二量化群組包括多個CU,該第二量化群組中之該等CU中之每一者係與該第二QP值相關聯。
  10. 如請求項1之方法,其中該第二視訊區塊具有一大於或等於一最小CU量化群組大小的大小,及其中該第二量化群組僅包括該第二CU。
  11. 如請求項1之方法,其進一步包含: 接收該視訊資料之一經寫碼表示,該視訊資料之該經寫碼表示包括複數個語法元素,該等語法元素包括一第一語法元素及一第二語法元素,該第一語法元素指示該第一QP值經定義為與該第一量化群組中之每一CU相關聯的一QP值,該第二語法元素指示該第二QP值經定義為與該第二量化群組中之每一CU相關聯的一QP值;及基於該視訊資料之該經寫碼表示中之該等語法元素來解碼該視訊資料。
  12. 如請求項11之方法,其中判定該解塊QP值包含:基於該第一語法元素判定該第一CU與該第一QP值相關聯;及基於該第二語法元素判定該第二CU與該第二QP值相關聯;及其中該第一量化群組包括一第三CU,且該方法進一步包含基於該第一語法元素判定該第三CU與該第一QP值相關聯。
  13. 如請求項1之方法,其進一步包含:在應用該解塊濾波器後,將該第一視訊區塊之該等樣本儲存於一經解碼圖片緩衝器中;基於該第一視訊區塊之處於該經解碼圖片緩衝器中之該等樣本而對一第三CU之一預測單元(PU)執行一框內預測或框間預測操作;及產生該視訊資料之一經寫碼表示,該視訊資料之該經 寫碼表示包括複數個語法元素,該等語法元素包括一第一語法元素及一第二語法元素,該第一語法元素指示該第一QP值經定義為與該第一量化群組中之每一CU相關聯的一QP值,該第二語法元素指示該第二QP值經定義為與該第二量化群組中之每一CU相關聯的一QP值。
  14. 如請求項1之方法,其中寫碼該視訊資料包含編碼該視訊資料,且該方法進一步包含在應用該解塊濾波器後,使用來自該第一視訊區塊或該第二視訊區塊之資料來編碼一第三視訊區塊。
  15. 一種視訊寫碼器件,其包含:用於基於一第一量化參數(QP)值及一第二QP值中之至少一者判定一解塊QP值的構件;及用於將基於該解塊QP值之一解塊濾波器應用至出現於一第一視訊區塊與一第二視訊區塊之間的一邊界處的一邊緣的構件,其中該第一視訊區塊與一第一寫碼單元(CU)相關聯且該第二視訊區塊與一第二CU相關聯,該第一CU係包括於一第一量化群組中,其中該第一QP值係針對該第一量化群組而定義,該第二CU係包括於一第二量化群組中,其中該第二QP值係針對該第二量化群組而定義。
  16. 如請求項15之視訊寫碼器件,其中該第一量化群組包括多個CU。
  17. 如請求項15之視訊寫碼器件,其進一步包含:用於基於該解塊QP值識別臨限值的構件;及 用於基於該等臨限值進行將該解塊濾波器應用至該邊緣的一判定的構件。
  18. 如請求項15之視訊寫碼器件,其中該用於判定該解塊QP值的構件基於該第一QP值與該第二QP值之一平均值來判定該解塊QP值。
  19. 如請求項15之視訊寫碼器件,其中該用於判定該解塊QP值的構件基於以下各項中之一者來判定該解塊QP值:該第一QP值及該第二QP值中之一最大值、該第一QP值及該第二QP值中之一最小值、及該第一QP值及該第二QP值之一加權平均值。
  20. 如請求項15之視訊寫碼器件,其中該視訊寫碼器件進一步包含:用於基於該解塊QP值識別臨限值的構件;及用於基於該等臨限值進行應用一強解塊濾波器抑或一弱解塊濾波器的一判定的構件;及其中該用於應用該解塊濾波器的構件包含:用於回應於判定應用一強解塊濾波器而應用該強解塊濾波器以修改該第一視訊區塊之樣本直至離開該邊界的三個樣本以及修改該第二視訊區塊之樣本直至離開該邊界的三個樣本的構件;及用於回應於判定不應用該強解塊濾波器而應用一弱解塊濾波器以修改該第一視訊區塊之樣本直至離開該邊界的兩個樣本以及修改該第二視訊區塊之樣本直至離開該邊界的兩個樣本的構件。
  21. 如請求項20之視訊寫碼器件,其中該邊緣與一第一排集合及一第二排集合相關聯,該第一排集合及該第二排集合各自包括四排,且該用於應用該弱解塊濾波器的構件包含:用於回應於判定該第一排集合之一第一排中的該第一視訊區塊之一樣本與該第一排集合之一第四排中的該第一視訊區塊之一樣本的一總和小於一臨限值而將該弱解塊濾波器應用至該第一排集合中之該第一視訊區塊的樣本的構件;用於回應於判定該第一排集合之該第一排中的該第二視訊區塊之一樣本與該第一排集合之該第四排中的該第二視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第一排集合中之該第二視訊區塊的樣本的構件;用於回應於判定該第二排集合之一第一排中的該第一視訊區塊之一樣本與該第二排集合之一第四排中的該第一視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第二排集合中之該第一視訊區塊的樣本的構件;及用於回應於判定該第二排集合之該第一排中的該第二視訊區塊之一樣本與該第二排集合之該第四排中的該第二視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第二排集合中之該第二視訊區塊的樣本的構件。
  22. 如請求項15之視訊寫碼器件,其中該解塊QP值為一第一解塊QP值,該第一解塊QP值等於該第一QP值,及一第二解塊QP值等於該第二QP值;及其中該視訊寫碼器件進一步包含用於將基於該第二解塊QP值之一解塊濾波器應用至處於該第一視訊區塊與該第二視訊區塊之間的該邊界處的該第二視訊區塊之該等樣本的構件。
  23. 如請求項15之視訊寫碼器件,其中該第二視訊區塊具有一小於一最小CU量化群組大小的大小,及其中該第二量化群組包括多個CU,該第二量化群組中之該等CU中之每一者係與該第二QP值相關聯。
  24. 如請求項15之視訊寫碼器件,其中該第二視訊區塊具有一大於或等於一最小CU量化群組大小的大小,及其中該第二量化群組僅包括該第二CU。
  25. 如請求項15之視訊寫碼器件,其進一步包含:用於接收視訊資料之一經寫碼表示的構件,該視訊資料之該經寫碼表示包括複數個語法元素,該等語法元素包括一第一語法元素及一第二語法元素,該第一語法元素指示該第一QP值經定義為與該第一量化群組中之每一CU相關聯的一QP值,該第二語法元素指示該第二QP值經定義為與該第二量化群組中之每一CU相關聯的一QP值;及 用於基於該視訊資料之該經寫碼表示中之該等語法元素來解碼該視訊資料的構件。
  26. 如請求項25之視訊寫碼器件,其中該用於判定該解塊QP值的構件包含:用於基於該第一語法元素判定該第一CU與該第一QP值相關聯的構件;及用於基於該第二語法元素判定該第二CU與該第二QP值相關聯的構件;及其中該第一量化群組包括一第三CU,且該視訊寫碼器件進一步包含用於基於該第一語法元素判定該第三CU與該第一QP值相關聯的構件。
  27. 如請求項15之視訊寫碼器件,其進一步包含:用於在應用該解塊濾波器後將該第一視訊區塊之該等樣本儲存於一經解碼圖片緩衝器中的構件;用於基於該第一視訊區塊之處於該經解碼圖片緩衝器中之該等樣本而對一第三CU之一預測單元(PU)執行一框內預測或框間預測操作的構件;及用於產生視訊資料之一經寫碼表示的構件,該視訊資料之該經寫碼表示包括複數個語法元素,該等語法元素包括一第一語法元素及一第二語法元素,該第一語法元素指示該第一QP值經定義為與該第一量化群組中之每一CU相關聯的一QP值,該第二語法元素指示該第二QP值經定義為與該第二量化群組中之每一CU相關聯的一QP值。
  28. 一種視訊寫碼器件,其包含經組態以進行以下動作之一或多個處理器:基於一第一量化參數(QP)值及一第二QP值中之至少一者判定一解塊QP值;及將基於該解塊QP值之一解塊濾波器應用至出現於一第一視訊區塊與一第二視訊區塊之間的一邊界處的一邊緣,其中該第一視訊區塊與一第一寫碼單元(CU)相關聯且該第二視訊區塊與一第二CU相關聯,該第一CU係包括於一第一量化群組中,其中該第一QP值係針對該第一量化群組而定義,該第二CU係包括於一第二量化群組中,其中該第二QP值係針對該第二量化群組而定義。
  29. 如請求項28之視訊寫碼器件,其中該第一量化群組包括多個CU。
  30. 如請求項28之視訊寫碼器件,其中該一或多個處理器經進一步組態以:基於該解塊QP值識別臨限值;及基於該等臨限值進行將該解塊濾波器應用至樣本的一判定。
  31. 如請求項28之視訊寫碼器件,其中該一或多個處理器經組態以基於該第一QP值與該第二QP值之一平均值來判定該解塊QP值。
  32. 如請求項28之視訊寫碼器件,其中該一或多個處理器經組態以基於以下各項中之一者來判定該解塊QP值:該第一QP值及該第二QP值中之一最大值、該第一QP值及該 第二QP值中之一最小值、及該第一QP值及該第二QP值之一加權平均值。
  33. 如請求項28之視訊寫碼器件,其中該一或多個處理器經進一步組態以:基於該解塊QP值識別臨限值;及基於該等臨限值進行應用一強解塊濾波器抑或一弱解塊濾波器的一判定;及其中為了應用該解塊濾波器,該一或多個處理器經組態以:回應於判定應用一強解塊濾波器而應用該強解塊濾波器以修改該第一視訊區塊之樣本直至離開該邊界的三個樣本,及修改該第二視訊區塊之樣本直至離開該邊界的三個樣本;及回應於判定不應用該強解塊濾波器而應用一弱解塊濾波器以修改該第一視訊區塊之樣本直至離開該邊界的兩個樣本,及修改該第二視訊區塊之樣本直至離開該邊界的兩個樣本。
  34. 如請求項32之視訊寫碼器件,其中該邊緣與一第一排集合及一第二排集合相關聯,該第一排集合及該第二排集合各自包括四排,且該一或多個處理器經組態以:回應於判定該第一排集合之一第一排中的該第一視訊區塊之一樣本與該第一排集合之一第四排中的該第一視訊區塊之一樣本的一總和小於一臨限值而將該弱解塊濾波器應用至該第一排集合中之該第一視訊區塊的樣本; 回應於判定該第一排集合之該第一排中的該第二視訊區塊之一樣本與該第一排集合之該第四排中的該第二視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第一排集合中之該第二視訊區塊的樣本;回應於判定該第二排集合之一第一排中的該第一視訊區塊之一樣本與該第二排集合之一第四排中的該第一視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第二排集合中之該第一視訊區塊的樣本;及回應於判定該第二排集合之該第一排中的該第二視訊區塊之一樣本與該第二排集合之該第四排中的該第二視訊區塊之一樣本的一總和小於該臨限值而將該弱解塊濾波器應用至該第二排集合中之該第二視訊區塊的樣本。
  35. 如請求項28之視訊寫碼器件,其中該解塊QP值為一第一解塊QP值,該第一解塊QP值等於該第一QP值,及一第二解塊QP值等於該第二QP值;及其中該一或多個處理器經進一步組態以將基於該第二解塊QP值之一解塊濾波器應用至處於該第一視訊區塊與該第二視訊區塊之間的該邊界處的該第二視訊區塊之該等樣本。
  36. 如請求項28之視訊寫碼器件,其中該第二視訊區塊具有一小於一最小CU量化群組大小的大小,及其中該第二量化群組包括多個CU,該第二量化群組中 之該等CU中之每一者係與該第二QP值相關聯。
  37. 如請求項28之視訊寫碼器件,其中該第二視訊區塊具有一大於或等於一最小CU量化群組大小的大小,及其中該第二量化群組僅包括該第二CU。
  38. 如請求項28之視訊寫碼器件,其中該一或多個處理器經組態以:接收視訊資料之一經寫碼表示,該視訊資料之該經寫碼表示包括複數個語法元素,該等語法元素包括一第一語法元素及一第二語法元素,該第一語法元素指示該第一QP值經定義為與該第一量化群組中之每一CU相關聯的一QP值,該第二語法元素指示該第二QP值經定義為與該第二量化群組中之每一CU相關聯的一QP值;及基於該視訊資料之該經寫碼表示中之該等語法元素來解碼該視訊資料。
  39. 如請求項38之視訊寫碼器件,其中為了判定該解塊QP值,該一或多個處理器經組態以:基於該第一語法元素判定該第一CU與該第一QP值相關聯;及基於該第二語法元素判定該第二CU與該第二QP值相關聯;及其中該第一量化群組包括一第三CU,且該一或多個處理器經進一步組態以基於該第一語法元素判定該第三CU與該第一QP值相關聯。
  40. 如請求項28之視訊寫碼器件,其中該一或多個處理器經組態以:在應用該解塊濾波器後將該第一視訊區塊之該等樣本儲存於一經解碼圖片緩衝器中;基於該第一視訊區塊之處於該經解碼圖片緩衝器中之該等樣本而對一第三CU之一預測單元(PU)執行一框內預測或框間預測操作;及產生視訊資料之一經寫碼表示,該視訊資料之該經寫碼表示包括複數個語法元素,該等語法元素包括一第一語法元素及一第二語法元素,該第一語法元素指示該第一QP值經定義為與該第一量化群組中之每一CU相關聯的一QP值,該第二語法元素指示該第二QP值經定義為與該第二量化群組中之每一CU相關聯的一QP值。
  41. 如請求項28之視訊寫碼器件,其進一步包含用於在應用該解塊濾波器後使用來自該第一視訊區塊或該第二視訊區塊之資料來編碼一第三視訊區塊的構件。
  42. 一種電腦程式產品,其包含儲存電腦可執行指令之一或多個電腦可讀儲存媒體,該等電腦可執行指令在經執行時組態一視訊寫碼器件以:基於一第一量化參數(QP)值及一第二QP值中之至少一者判定一解塊QP值;及將基於該解塊QP值之一解塊濾波器應用至出現於一第一視訊區塊與一第二視訊區塊之間的一邊界處的一邊緣,其中該第一視訊區塊與一第一寫碼單元(CU)相關聯 且該第二視訊區塊與一第二CU相關聯,該第一CU係包括於一第一量化群組中,其中該第一QP值係針對該第一量化群組而定義,該第二CU係包括於一第二量化群組中,其中該第二QP值係針對該第二量化群組而定義。
TW101139538A 2011-10-25 2012-10-25 判定用於視訊寫碼之解塊濾波的量化參數 TW201334543A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201161551317P 2011-10-25 2011-10-25
US13/495,821 US9161046B2 (en) 2011-10-25 2012-06-13 Determining quantization parameters for deblocking filtering for video coding

Publications (1)

Publication Number Publication Date
TW201334543A true TW201334543A (zh) 2013-08-16

Family

ID=48135971

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101139538A TW201334543A (zh) 2011-10-25 2012-10-25 判定用於視訊寫碼之解塊濾波的量化參數

Country Status (3)

Country Link
US (1) US9161046B2 (zh)
TW (1) TW201334543A (zh)
WO (1) WO2013063113A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017045101A1 (en) * 2015-09-14 2017-03-23 Mediatek Singapore Pte. Ltd. Advanced deblocking filter in video coding
CN106576164A (zh) * 2014-06-27 2017-04-19 三菱电机株式会社 用于预测和过滤图片中的颜色分量的方法和解码器

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112013003102B1 (pt) 2011-02-22 2022-04-19 Sun Patent Trust Método de codificação de imagem, método de decodificação de imagem, aparelho de codificação de imagem, e aparelho de decodificação de imagem
EP2680583B1 (en) 2011-02-22 2018-04-11 Tagivan Ii Llc Filter method, dynamic image encoding device, dynamic image decoding device, and dynamic image encoding/decoding device
US9729879B2 (en) * 2011-03-10 2017-08-08 Hfi Innovation Inc. Method and apparatus of deblocking filter
LT2736253T (lt) 2011-07-19 2020-04-27 Tagivan Ii Llc Filtravimo būdas, judančio vaizdo dekodavimo būdas, judančio vaizdo kodavimo būdas, judančio vaizdo dekodavimo aparatas, judančio vaizdo kodavimo aparatas ir judančio vaizdo kodavimo/dekodavimo aparatas
EP2774371B1 (en) * 2011-11-03 2020-08-26 Sun Patent Trust Efficient rounding for deblocking
US9282344B2 (en) * 2011-11-04 2016-03-08 Qualcomm Incorporated Secondary boundary filtering for video coding
MX353742B (es) * 2012-01-30 2018-01-26 Samsung Electronics Co Ltd Método y aparato de codificación y decodificación de video de base de unidad de datos jerárquica que comprende la predicción del parámetro de cuantificación.
KR20130090465A (ko) * 2012-02-06 2013-08-14 삼성전자주식회사 순차 주사 기반의 디블록킹 필터링 장치 및 방법
US10587898B2 (en) * 2012-03-12 2020-03-10 Sun Patent Trust Image coding method, and image decoding method
US10230956B2 (en) 2012-09-26 2019-03-12 Integrated Device Technology, Inc. Apparatuses and methods for optimizing rate-distortion of syntax elements
US10277907B2 (en) 2012-10-25 2019-04-30 Integrated Device Technology, Inc. Rate-distortion optimizers and optimization techniques including joint optimization of multiple color components
WO2014107709A2 (en) * 2013-01-07 2014-07-10 Vid Scale, Inc. Enhanced deblocking filters for video coding
US9473784B2 (en) * 2013-05-20 2016-10-18 Texas Instruments Incorporated Sample adaptive offset (SAO) filtering in video coding
US9294766B2 (en) * 2013-09-09 2016-03-22 Apple Inc. Chroma quantization in video coding
US20150085922A1 (en) * 2013-09-25 2015-03-26 Magnum Semiconductor, Inc. Apparatuses and methods for reducing rate and distortion costs during encoding by modulating a lagrangian parameter
US9521423B2 (en) * 2014-06-26 2016-12-13 Sony Corporation Data encoding and decoding apparatus, method and storage medium
US9883184B2 (en) 2014-10-07 2018-01-30 Qualcomm Incorporated QP derivation and offset for adaptive color transform in video coding
WO2016200115A1 (ko) * 2015-06-07 2016-12-15 엘지전자(주) 디블록킹 필터링을 수행하는 방법 및 장치
EP3244614A1 (en) * 2016-05-13 2017-11-15 Thomson Licensing A method and a device for decoding an intra predicted block of a picture and corresponding coding method and coding device
CN117221589A (zh) * 2016-06-22 2023-12-12 Lx 半导体科技有限公司 图像编码/解码设备以及传输图像数据的设备
US10448056B2 (en) * 2016-07-15 2019-10-15 Qualcomm Incorporated Signaling of quantization information in non-quadtree-only partitioned video coding
US11496747B2 (en) * 2017-03-22 2022-11-08 Qualcomm Incorporated Intra-prediction mode propagation
WO2018191224A1 (en) * 2017-04-11 2018-10-18 Vid Scale, Inc. 360-degree video coding using face continuities
US10764582B2 (en) * 2017-06-29 2020-09-01 Qualcomm Incorporated Reducing seam artifacts in 360-degree video
EP3649782A4 (en) * 2017-07-05 2021-04-14 Telefonaktiebolaget LM Ericsson (PUBL) DECODING A BLOCK OF VIDEO SAMPLE
CN117061771A (zh) * 2017-09-20 2023-11-14 Vid拓展公司 用于编码的方法和装置和用于解码的方法和装置
GB2599314B (en) * 2017-10-09 2022-06-15 Canon Kk Method and apparatus for deblocking filtering a block of pixels
KR102186463B1 (ko) * 2018-01-08 2020-12-03 삼성전자주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
US10904529B2 (en) * 2018-01-19 2021-01-26 Qualcomm Incorporated Quantization group for video coding
WO2019189279A1 (en) * 2018-03-30 2019-10-03 Sharp Kabushiki Kaisha Systems and methods for partitioning video blocks at a boundary of a picture for video coding
US10491897B2 (en) 2018-04-13 2019-11-26 Google Llc Spatially adaptive quantization-aware deblocking filter
CN118018765A (zh) * 2018-09-05 2024-05-10 华为技术有限公司 视频解码方法及视频解码器
WO2020089825A1 (en) * 2018-10-31 2020-05-07 Beijing Bytedance Network Technology Co., Ltd. Quantization parameters under coding tool of dependent quantization
GB2619640B (en) * 2019-07-05 2024-06-05 V Nova Int Ltd Quantization of residuals in video coding
US11616962B2 (en) * 2019-07-15 2023-03-28 Tencent America LLC Method and apparatus for video coding
WO2021051046A1 (en) 2019-09-14 2021-03-18 Bytedance Inc. Quantization parameter for chroma deblocking filtering
EP4022931A4 (en) * 2019-09-23 2023-01-04 Huawei Technologies Co., Ltd. APPARATUS AND METHOD FOR PERFORMING UNBLOCKING
BR122023020161A2 (pt) * 2019-10-03 2024-02-27 Huawei Technologies Co., Ltd Processo de codificação para modo de partição geométrica
WO2021072177A1 (en) 2019-10-09 2021-04-15 Bytedance Inc. Cross-component adaptive loop filtering in video coding
CN114586370B (zh) 2019-10-14 2024-01-23 字节跳动有限公司 在视频编解码中使用色度量化参数的方法、装置及介质
EP4055827A4 (en) 2019-12-09 2023-01-18 ByteDance Inc. USING QUANTIFICATION GROUPS IN VIDEO CODING
CN114902657A (zh) * 2019-12-31 2022-08-12 字节跳动有限公司 视频编解码中的自适应颜色变换
US11516514B2 (en) * 2020-03-27 2022-11-29 Tencent America LLC High level control for deblocking operations
CN112004090A (zh) * 2020-07-14 2020-11-27 浙江大华技术股份有限公司 目标边界确定方法、计算机设备及存储介质

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2320661B8 (en) * 2001-11-29 2015-09-02 Godo Kaisha IP Bridge 1 Coding distortion removal method
US7167522B2 (en) 2003-02-27 2007-01-23 Texas Instruments Incorporated Video deblocking filter
US7539248B2 (en) * 2004-04-29 2009-05-26 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
JP2005348093A (ja) 2004-06-03 2005-12-15 Sony Corp 画像処理装置、そのプログラムおよびその方法
TWI327436B (en) 2004-11-15 2010-07-11 Nvidia Corp Video processing
TWI264951B (en) 2005-05-19 2006-10-21 Cheertek Inc Deblock filter method for applying on video encoding/decoding and the apparatus thereof
WO2008083296A2 (en) 2006-12-28 2008-07-10 Vidyo, Inc. System and method for in-loop deblocking in scalable video coding
JP2008271472A (ja) 2007-04-25 2008-11-06 Nec Electronics Corp ビデオ再生装置、ビデオ再生方法、及びプログラム
US8532199B2 (en) 2008-01-24 2013-09-10 Panasonic Corporation Dynamic image compression device
US8380001B2 (en) 2009-02-27 2013-02-19 Vixs Systems, Inc. Edge adaptive deblocking filter and methods for use therewith

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106576164A (zh) * 2014-06-27 2017-04-19 三菱电机株式会社 用于预测和过滤图片中的颜色分量的方法和解码器
WO2017045101A1 (en) * 2015-09-14 2017-03-23 Mediatek Singapore Pte. Ltd. Advanced deblocking filter in video coding

Also Published As

Publication number Publication date
US20130101031A1 (en) 2013-04-25
US9161046B2 (en) 2015-10-13
WO2013063113A1 (en) 2013-05-02

Similar Documents

Publication Publication Date Title
JP7368414B2 (ja) 画像予測方法および装置
US9161046B2 (en) Determining quantization parameters for deblocking filtering for video coding
TWI499285B (zh) 判定視訊寫碼之解塊濾波之邊界強度值
JP6141386B2 (ja) 深度範囲パラメータのシグナリング
JP6162150B2 (ja) ビデオコーディング用の残差4分木(rqt)コーディング
JP6162212B2 (ja) マージシグナリングおよびループフィルタオン/オフシグナリング
US8995523B2 (en) Memory efficient context modeling
AU2012332318B2 (en) Adaptive center band offset filter for video coding
TW201742458A (zh) 二值化二次轉換指數
US20130272423A1 (en) Transform coefficient coding
CN112514386B (zh) 网格编解码量化系数编解码
JP2019515580A (ja) イントラ予測モードのネイバーベースのシグナリング
TWI527440B (zh) 在視訊寫碼中針對高效率視訊寫碼(hevc)延伸之多層之低複雜度支援
TW201513639A (zh) 於視訊寫碼程序中用於係數層級寫碼之萊斯(rice)參數初始化
CN107431816B (zh) 对视频数据进行编码的方法、装置、设备和存储媒体
TW201517599A (zh) 內部運動補償延伸
CN114097244A (zh) 以4:4:4色度格式进行视频编解码的方法和装置
CN112335251B (zh) 以分组的旁路位元的系数编码