TW202308375A - 用於視訊譯碼的濾波器的聯合截取操作 - Google Patents
用於視訊譯碼的濾波器的聯合截取操作 Download PDFInfo
- Publication number
- TW202308375A TW202308375A TW111121769A TW111121769A TW202308375A TW 202308375 A TW202308375 A TW 202308375A TW 111121769 A TW111121769 A TW 111121769A TW 111121769 A TW111121769 A TW 111121769A TW 202308375 A TW202308375 A TW 202308375A
- Authority
- TW
- Taiwan
- Prior art keywords
- filter operation
- output
- filter
- video data
- video
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
視訊轉碼器或視訊解碼器被配置為:重構視訊資料以產生經重構的視訊資料。視訊轉碼器或視訊解碼器亦可以並行地對經重構的視訊資料執行複數個迴路濾波器操作,其中複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對第一濾波器的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。第一濾波器操作可以是跨分量取樣自我調整偏移(CCSAO)濾波器操作。
Description
本專利申請案主張享受於2021年6月14日提出申請的美國臨時專利申請案第63/210,438號的權益,將上述申請案的全部內容經由引用的方式併入本文中。
本案內容係關於視訊編碼和視訊解碼。
數位視訊能力可以被合併到各種各樣的設備中,包括數位電視機、數位直播系統、無線廣播系統、個人數位助理(PDA)、膝上型電腦或桌上型電腦、平板電腦、電子書閱讀器、數位相機、數位記錄設備、數位媒體播放機、視訊遊戲裝置、視訊遊戲控制台、蜂巢或衛星無線電電話(所謂的「智慧型電話」)、視訊電話會議設備、視訊資料串流設備等。數位視訊設備實現視訊譯碼技術(諸如在由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4(第10部分,高級視訊譯碼(AVC))、ITU-T H.265/高效率視訊譯碼(HEVC)、ITU-T H.266/通用視訊譯碼(VVC)所定義的標準和此類標準的擴展以及專有視訊轉碼器/格式(諸如由開放媒體聯盟開發的AOMedia Video 1(AV1))中描述的那些技術)。經由實現此類視訊譯碼技術,視訊設備可以更加高效地發送、接收、編碼、解碼及/或儲存數位視訊資訊。
視訊譯碼技術包括空間(圖片內(intra-picture))預測及/或時間(圖片間(inter-picture))預測以減少或去除在視訊序列中固有的冗餘。對於基於塊的視訊譯碼,視訊切片(例如,視訊圖片或視訊圖片的一部分)可以被分割為視訊塊,視訊塊亦可以被稱為譯碼樹單元(CTU)、譯碼單元(CU)及/或譯碼節點。圖片的經訊框內編碼(I)的切片中的視訊塊是使用相對於同一圖片中的相鄰塊中的參考取樣的空間預測來編碼的。圖片的經訊框間編碼(P或B)的切片中的視訊塊可以使用相對於同一圖片中的相鄰塊中的參考取樣的空間預測或者相對於其他參考圖片中的參考取樣的時間預測。圖片可以被稱為訊框,並且參考圖片可以被稱為參考訊框。
概括而言,本案內容描述了用於視訊譯碼的迴路濾波的技術。具體而言,本案內容描述了用於兩個或兩個以上迴路濾波操作的聯合截取操作的技術。實例迴路濾波操作可以包括跨分量取樣自我調整偏移(CCSAO)濾波器、取樣自我調整偏移(SAO)濾波器及/或雙邊濾波器(BIF)。本案內容的技術可以降低迴路濾波器設計的實現複雜度,包括減少實現迴路濾波器所需的記憶體數量。本案內容的技術可以進一步增加視訊譯碼中的迴路濾波器的輸送量,從而減少譯碼程序中的延遲。
在一個實例中,本案內容描述了一種對視訊資料進行譯碼的方法,該方法包括:重構視訊資料以產生經重構的視訊資料;並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。在一個實例中,該第一濾波器操作是CCSAO濾波器操作。
在另一實例中,本案內容描述了一種被配置為對視訊資料進行譯碼的裝置,該裝置包括:被配置為儲存視訊資料的記憶體;及與該記憶體相通訊的一或多個處理器,該一或多個處理器被配置為:重構該視訊資料以產生經重構的視訊資料;並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。在一個實例中,該第一濾波器操作是CCSAO濾波器操作。
在另一實例中,本案內容描述了一種被配置為對視訊資料進行譯碼的裝置,該裝置包括:用於重構視訊資料以產生經重構的視訊資料的單元;用於並行地對該經重構的視訊資料執行複數個迴路濾波器操作的單元,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及用於對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作的單元。在一個實例中,該第一濾波器操作是CCSAO濾波器操作。
在另一實例中,本案內容描述了一種儲存指令的非暫時性電腦可讀取儲存媒體,該等指令在被執行時使得被配置為對視訊資料進行譯碼的設備的一或多個處理器進行以下操作:重構該視訊資料以產生經重構的視訊資料;並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。在一個實例中,該第一濾波器操作是CCSAO濾波器操作。
在附圖和以下描述中闡述了一或多個實例的細節。根據描述、附圖和請求項,其他特徵、目的和優點將是顯而易見的。
概括而言,本案內容描述了用於視訊譯碼的迴路濾波的技術。具體而言,本案內容描述了用於兩個或兩個以上迴路濾波操作的聯合截取操作的技術。實例迴路濾波操作可以包括跨分量取樣自我調整偏移(CCSAO)濾波器、取樣自我調整偏移(SAO)濾波器及/或雙邊濾波器(BIF)。本案內容的技術可以降低迴路濾波器設計的實現複雜度,包括實現迴路濾波器所需的記憶體數量的減少。本案內容的技術可以進一步增加視訊譯碼中的迴路濾波器的輸送量,從而減少譯碼程序中的延遲。
圖1是示出可以執行本案內容的技術的實例視訊編碼和解碼系統100的方塊圖。概括而言,本案內容的技術涉及對視訊資料進行譯碼(編碼及/或解碼)。通常,視訊資料包括用於處理視訊的任何資料。因此,視訊資料可以包括原始的未經編碼的視訊、經編碼的視訊、經解碼(例如,經重構)的視訊、以及視訊中繼資料(例如,訊號傳遞資料)。
如圖1中所示,在該實例中,系統100包括源設備102,源設備102提供要被目的地設備116解碼和顯示的、經編碼的視訊資料。具體地,源設備102經由電腦可讀取媒體110來將視訊資料提供給目的地設備116。源設備102和目的地設備116可以包括各種各樣的設備中的任何一種,包括桌上型電腦、筆記型電腦(亦即,膝上型電腦)、行動設備、平板電腦、機上盒、諸如智慧型電話之類的電話手機、電視機、相機、顯示設備、數位媒體播放機、視訊遊戲控制台、視訊資料串流設備、廣播接收器設備等。在一些情況下,源設備102和目的地設備116可以被配備用於無線通訊,並且因此可以被稱為無線通訊設備。
在圖1的實例中,源設備102包括視訊源104、記憶體106、視訊轉碼器200以及輸出介面108。目的地設備116包括輸入介面122、視訊解碼器300、記憶體120以及顯示設備118。根據本案內容,源設備102的視訊轉碼器200和目的地設備116的視訊解碼器300可以被配置為應用用於在濾波(例如,迴路濾波)期間執行截取操作的技術。因此,源設備102表示視訊編碼設備的實例,而目的地設備116表示視訊解碼設備的實例。在其他實例中,源設備和目的地設備可以包括其他部件或佈置。例如,源設備102可以從諸如外部相機之類的外部視訊源接收視訊資料。同樣,目的地設備116可以與外部顯示設備對接,而不是包括整合顯示設備。
如圖1中所示的系統100僅是一個實例。通常,任何數位視訊編碼及/或解碼設備可以執行用於在濾波(例如,迴路濾波)期間執行截取操作的技術。源設備102和目的地設備116僅是此類譯碼設備的實例,其中源設備102產生經譯碼的視訊資料以用於傳輸給目的地設備116。本案內容將「譯碼」設備代表為執行對資料的譯碼(編碼及/或解碼)的設備。因此,視訊轉碼器200和視訊解碼器300分別表示譯碼設備(具體地,視訊轉碼器和視訊解碼器)的實例。在一些實例中,源設備102和目的地設備116可以以基本上對稱的方式進行操作,使得源設備102和目的地設備116中的每一者皆包括視訊編碼和解碼用部件。因此,系統100可以支援在源設備102和目的地設備116之間的單向或雙向視訊傳輸,例如,以用於視訊資料串流、視訊重播、視訊廣播或視訊電話。
通常,視訊源104表示視訊資料(亦即,原始的未經編碼的視訊資料)的源,並且將視訊資料的順序的一系列圖片(亦被稱為「訊框」)提供給視訊轉碼器200,視訊轉碼器200對圖片的資料進行編碼。源設備102的視訊源104可以包括視訊擷取裝置,諸如攝像機、包含先前擷取的原始視訊的視訊存檔、及/或用於從視訊內容提供者接收視訊的視訊饋送介面。作為另外的替代方式,視訊源104可以產生基於電腦圖形的資料作為源視訊,或者產生即時視訊、被存檔的視訊和電腦產生的視訊的組合。在每種情況下,視訊轉碼器200可以對被擷取的、預擷取的或電腦產生的視訊資料進行編碼。視訊轉碼器200可以將圖片從所接收的次序(有時被稱為「顯示次序」)重新排列為用於譯碼的譯碼次序。視訊轉碼器200可以產生包括經編碼的視訊資料的位元串流。隨後,源設備102可以經由輸出介面108將經編碼的視訊資料輸出到電腦可讀取媒體110上,以便由例如目的地設備116的輸入介面122接收及/或取回。
源設備102的記憶體106和目的地設備116的記憶體120表示通用記憶體。在一些實例中,記憶體106、120可以儲存原始視訊資料,例如,來自視訊源104的原始視訊以及來自視訊解碼器300的原始的經解碼的視訊資料。補充或替代地,記憶體106、120可以儲存由例如視訊轉碼器200和視訊解碼器300分別可執行的軟體指令。儘管記憶體106和記憶體120在該實例中被示為與視訊轉碼器200和視訊解碼器300分開,但是應當理解的是,視訊轉碼器200和視訊解碼器300亦可以包括用於在功能上類似或等效目的的內部記憶體。此外,記憶體106、120可以儲存例如從視訊轉碼器200輸出的並且輸入到視訊解碼器300的經編碼的視訊資料。在一些實例中,記憶體106、120的部分可以被分配為一或多個視訊緩衝器,例如,以儲存原始的經解碼及/或經編碼的視訊資料。
電腦可讀取媒體110可以表示能夠將經編碼的視訊資料從源設備102輸送到目的地設備116的任何類型的媒體或設備。在一個實例中,電腦可讀取媒體110表示通訊媒體,其使得源設備102能夠例如經由射頻網路或基於電腦的網路,來即時地向目的地設備116直接發送經編碼的視訊資料。根據諸如無線通訊協定之類的通訊標準,輸出介面108可以對包括經編碼的視訊資料的傳輸訊號進行調制,並且輸入介面122可以對所接收的傳輸訊號進行解調。通訊媒體可以包括任何無線或有線通訊媒體,諸如射頻(RF)頻譜或一或多條實體傳輸線。通訊媒體可以形成諸如以下各項的基於封包的網路的一部分:區域網路、廣域網、或諸如網際網路之類的全球網路。通訊媒體可以包括路由器、交換機、基地台、或對於促進從源設備102到目的地設備116的通訊而言可以是有用的任何其他設備。
在一些實例中,源設備102可以將經編碼的資料從輸出介面108輸出到存放裝置112。類似地,目的地設備116可以經由輸入介面122從存放裝置112存取經編碼的資料。存放裝置112可以包括各種分散式或本端存取的資料儲存媒體中的任何一種,諸如硬碟、藍光光碟、DVD、CD-ROM、快閃記憶體、揮發性或非揮發性記憶體、或用於儲存經編碼的視訊資料的任何其他適當的數位儲存媒體。
在一些實例中,源設備102可以將經編碼的視訊資料輸出到檔案伺服器114或者可以儲存由源設備102產生的經編碼的視訊資料的另一中間存放裝置。目的地設備116可以經由資料串流或下載來從檔案伺服器114存取被儲存的視訊資料。
檔案伺服器114可以是能夠儲存經編碼的視訊資料並且將該經編碼的視訊資料發送給目的地設備116的任何類型的伺服器設備。檔案伺服器114可以表示網頁伺服器(例如,用於網站)、被配置為提供檔案傳輸通訊協定服務(諸如檔案傳輸通訊協定(FTP)或基於單向傳輸的檔遞送(FLUTE)協定)的伺服器、內容遞送網路(CDN)設備、超本文傳輸協定(HTTP)伺服器、多媒體廣播多播服務(MBMS)或增強型MBMS(eMBMS)伺服器、及/或網路附加儲存(NAS)設備。檔案伺服器114可以補充或替代地實現一或多個HTTP資料串流協定,諸如基於HTTP的動態自我調整資料串流(DASH)、HTTP即時資料串流(HLS)、即時資料串流協定(RTSP)、HTTP動態資料串流等。
目的地設備116可以經由任何標準資料連接(包括網際網路連接)來從檔案伺服器114存取經編碼的視訊資料。這可以包括適於存取被儲存在檔案伺服器114上的經編碼的視訊資料的無線通道(例如,Wi-Fi連接)、有線連接(例如,數位用戶線路(DSL)、纜線數據機等)、或這兩者的組合。輸入介面122可以被配置為根據上文論述的用於從檔案伺服器114取回或接收媒體資料的各種協定或者用於取回媒體資料的其他此類協定中的任何一或多個進行操作。
輸出介面108和輸入介面122可以表示無線發射器/接收器、數據機、有線聯網單元(例如,乙太網路卡)、根據各種IEEE 802.11標準中的任何一種標準進行操作的無線通訊部件、或其他實體部件。在其中輸出介面108和輸入介面122包括無線部件的實例中,輸出介面108和輸入介面122可以被配置為根據蜂巢通訊標準(諸如4G、4G-LTE(長期進化)、改進的LTE、5G等)來傳輸資料(諸如經編碼的視訊資料)。在其中輸出介面108包括無線發射器的一些實例中,輸出介面108和輸入介面122可以被配置為根據其他無線標準(諸如IEEE 802.11規範、IEEE 802.15規範(例如,ZigBee™)、Bluetooth™標準等)來傳輸資料(諸如經編碼的視訊資料)。在一些實例中,源設備102及/或目的地設備116可以包括相應的片上系統(SoC)設備。例如,源設備102可以包括用於執行被賦予視訊轉碼器200及/或輸出介面108的功能的SoC設備,並且目的地設備116可以包括用於執行被賦予視訊解碼器300及/或輸入介面122的功能的SoC設備。
本案內容的技術可以被應用於視訊譯碼,以支援各種多媒體應用中的任何一種,諸如空中電視廣播、有線電視傳輸、衛星電視傳輸、網際網路資料串流視訊傳輸(諸如基於HTTP的動態自我調整資料串流(DASH))、被編碼到資料儲存媒體上的數位視訊、對被儲存在資料儲存媒體上的數位視訊的解碼、或其他應用。
目的地設備116的輸入介面122從電腦可讀取媒體110(例如,通訊媒體、存放裝置112、檔案伺服器114等)接收經編碼的視訊位元串流。經編碼的視訊位元串流可以包括由視訊轉碼器200定義的諸如以下語法元素之類的訊號傳遞資訊(其亦被視訊解碼器300使用):該語法元素具有描述視訊塊或其他譯碼單元(例如,切片、圖片、圖片組、序列等)的特性及/或處理的值。顯示設備118將經解碼的視訊資料的經解碼的圖片顯示給使用者。顯示設備118可以表示各種顯示設備中的任何一種,諸如液晶顯示器(LCD)、電漿顯示器、有機發光二極體(OLED)顯示器、或另一種類型的顯示設備。
儘管在圖1中未圖示,但是在一些實例中,視訊轉碼器200和視訊解碼器300可以各自與音訊編碼器及/或音訊解碼器整合,並且可以包括適當的MUX-DEMUX單元或其他硬體及/或軟體,以處理包括公共資料串流中的音訊和視訊兩者的經多工的串流。
視訊轉碼器200和視訊解碼器300各自可以被實現為各種適當的編碼器及/或解碼器電路中的任何一種,諸如一或多個微處理器、數位訊號處理器(DSP)、特殊應用積體電路(ASIC)、現場可程式設計閘陣列(FPGA)、個別邏輯、軟體、硬體、韌體、或其任何組合。當該等技術部分地用軟體實現時,設備可以將用於軟體的指令儲存在適當的非暫時性電腦可讀取媒體中,並且使用一或多個處理器,用硬體來執行指令以執行本案內容的技術。視訊轉碼器200和視訊解碼器300中的每一者可以被包括在一或多個編碼器或解碼器中,編碼器或解碼器中的任一者可以被整合為相應設備中的組合編碼器/解碼器(CODEC)的一部分。包括視訊轉碼器200及/或視訊解碼器300的設備可以包括積體電路、微處理器、及/或無線通訊設備(諸如蜂巢式電話)。
視訊轉碼器200和視訊解碼器300可以根據視訊譯碼標準(諸如ITU-T H.265(亦被稱為高效率視訊譯碼(HEVC)標準)或對其的擴展(諸如多視圖及/或可伸縮視訊譯碼擴展))進行操作。替代地,視訊轉碼器200和視訊解碼器300可以根據其他專有或行業標準(諸如ITU-T H.266,亦被稱為通用視訊譯碼(VVC))進行操作。在其他實例中,視訊轉碼器200和視訊解碼器300可以根據專有視訊轉碼器/格式(諸如AOMedia Video 1(AV1)、AV1的擴展及/或AV1的後續版本(例如,AV2))操作。在其他實例中,視訊轉碼器200和視訊解碼器300可以根據其他專有格式或行業標準操作。然而,本案內容的技術不限於任何特定的譯碼標準或格式。通常,視訊轉碼器200和視訊解碼器300可以被配置為結合使用兩個或兩個以上濾波器(包括兩個或兩個以上迴路濾波器)的任何視訊譯碼技術來執行本案內容的技術。
通常,視訊轉碼器200和視訊解碼器300可以執行對圖片的基於塊的譯碼。術語「塊」通常代表包括要被處理的(例如,在編碼及/或解碼程序中要被編碼、被解碼或以其他方式使用的)資料的結構。例如,塊可以包括亮度及/或色度資料的取樣的二維矩陣。通常,視訊轉碼器200和視訊解碼器300可以對以YUV(例如,Y、Cb、Cr)格式表示的視訊資料進行譯碼。亦即,視訊轉碼器200和視訊解碼器300可以對亮度和色度分量進行譯碼,而不是對用於圖片的取樣的紅色、綠色和藍色(RGB)資料進行譯碼,其中色度分量可以包括紅色色相和藍色色相色度分量兩者。在一些實例中,視訊轉碼器200在進行編碼之前將所接收的經RGB格式化的資料轉換為YUV表示,並且視訊解碼器300將YUV表示轉換為RGB格式。替代地,預處理和後處理單元(未圖示)可以執行這些轉換。
概括而言,本案內容可以涉及對圖片的譯碼(例如,編碼和解碼)以包括對圖片的資料進行編碼或解碼的程序。類似地,本案內容可以涉及對圖片的塊的譯碼以包括對用於塊的資料進行編碼或解碼(例如,預測及/或殘差譯碼)的程序。經編碼的視訊位元串流通常包括用於表示譯碼決策(例如,譯碼模式)以及將圖片分割為塊的語法元素的一系列值。因此,關於對圖片或塊進行譯碼的引用通常應當被理解為對形成圖片或塊的語法元素的值進行譯碼。
HEVC定義了各種塊,包括譯碼單元(CU)、預測單元(PU)和變換單元(TU)。根據HEVC,視訊解碼器(諸如視訊轉碼器200)根據四叉樹結構來將譯碼樹單元(CTU)分割為CU。亦即,視訊解碼器將CTU和CU分割為四個相等的、不重疊的正方形,並且四叉樹的每個節點具有零個或四個子節點。沒有子節點的節點可以被稱為「葉節點」,並且此類葉節點的CU可以包括一或多個PU及/或一或多個TU。視訊解碼器可以進一步分割PU和TU。例如,在HEVC中,殘差四叉樹(RQT)表示對TU的分割。在HEVC中,PU表示訊框間預測資料,而TU表示殘差資料。經訊框內預測的CU包括訊框內預測資訊,諸如訊框內模式指示。
作為另一實例,視訊轉碼器200和視訊解碼器300可以被配置為根據VVC進行操作。根據VVC,視訊解碼器(諸如視訊轉碼器200)將圖片分割為複數個譯碼樹單元(CTU)。視訊轉碼器200可以根據樹結構(諸如四叉樹-二叉樹(QTBT)結構或多類型樹(MTT)結構)分割CTU。QTBT結構去除了多種分割類型的概念,諸如在HEVC的CU、PU和TU之間的分割。QTBT結構包括兩個級別:根據四叉樹分割而被分割的第一級別、以及根據二叉樹分割而被分割的第二級別。QTBT結構的根節點對應於CTU。二叉樹的葉節點對應於譯碼單元(CU)。
在MTT分割結構中,可以使用四叉樹(QT)分割、二叉樹(BT)分割以及一或多個類型的三叉樹(TT)(亦被稱為三元樹(TT))分割來對塊進行分割。三叉樹或三元樹分割是其中塊被分為三個子塊的分割。在一些實例中,三叉樹或三元樹分割將塊劃分為三個子塊,而不經由中心劃分原始塊。MTT中的分割類型(例如,QT、BT和TT)可以是對稱的或不對稱的。
當根據AV1轉碼器操作時,視訊轉碼器200和視訊解碼器300可以被配置為對塊中的視訊資料進行譯碼。在AV1中,可以處理的最大譯碼塊被稱為超級塊。在AV1中,超級塊可以是128x128亮度取樣或64x64亮度取樣。然而,在後續視訊譯碼格式(例如,AV2)中,超級塊可以由不同(例如,更大)的亮度取樣大小來定義。在一些實例中,超級塊是塊四叉樹的頂層。視訊轉碼器200可以進一步將超級塊劃分為更小的譯碼塊。視訊轉碼器200可以使用正方形或非正方形分割來將超級塊和其他譯碼塊分割為更小的塊。非正方形塊可以包括N/2xN、NxN/2、N/4xN和NxN/4塊。視訊轉碼器200和視訊解碼器300可以對每個譯碼塊執行單獨的預測和變換程序。
AV1亦定義了視訊資料的瓦片。瓦片是超級塊的矩形陣列,其可以獨立於其他瓦片進行譯碼。亦即,視訊轉碼器200和視訊解碼器300可以分別對瓦片內的譯碼塊進行編碼和解碼,而不使用來自其他瓦片的視訊資料。然而,視訊轉碼器200和視訊解碼器300可以跨越瓦片邊界執行濾波。瓦片的大小可以是均勻的或不均勻的。基於瓦片的譯碼可以實現針對編碼器和解碼器實現的並行處理及/或多執行緒。
在一些實例中,視訊轉碼器200和視訊解碼器300可以使用單個QTBT或MTT結構來表示亮度分量和色度分量中的每一者,而在其他實例中,視訊轉碼器200和視訊解碼器300可以使用兩個或兩個以上QTBT或MTT結構,諸如用於亮度分量的一個QTBT/MTT結構以及用於兩個色度分量的另一個QTBT/MTT結構(或者用於相應色度分量的兩個QTBT/MTT結構)。
視訊轉碼器200和視訊解碼器300可以被配置為使用四叉樹分割、QTBT分割、MTT分割、超級塊分割或其他分割結構。
在一些實例中,CTU包括亮度取樣的譯碼樹塊(CTB)、具有三個取樣陣列的圖片的色度取樣的兩個對應的CTB、或者單色圖片或使用三個單獨的色彩平面和用於對取樣進行譯碼的語法結構來譯碼的圖片的取樣的CTB。CTB可以是取樣的NxN塊(針對N的某個值),使得將分量劃分為CTB是一種分割。分量是來自以4:2:0、4:2:2或4:4:4的色彩格式組成圖片的三個陣列(一個亮度和兩個色度)之一的陣列或單個取樣,或者是以單色格式組成圖片的陣列或陣列的單個取樣。在一些實例中,譯碼塊是取樣的M×N塊(針對M和N的某些值),使得將CTB劃分成譯碼塊是一種分割。
可以以各種方式在圖片中對塊(例如,CTU或CU)進行群組。作為一個實例,磚塊可以代表圖片中的特定瓦片內的CTU行的矩形區域。瓦片可以是圖片中的特定瓦片列和特定瓦片行內的CTU的矩形區域。瓦片列代表CTU的矩形區域,其具有等於圖片的高度的高度以及由語法元素(例如,諸如在圖片參數集中)指定的寬度。瓦片行代表CTU的矩形區域,其具有由語法元素指定的高度(例如,諸如在圖片參數集中)以及等於圖片的寬度的寬度。
在一些實例中,可以將瓦片分割為多個磚塊,其之每一者磚塊可以包括瓦片內的一或多個CTU行。沒有被分割為多個磚塊的瓦片亦可以被稱為磚塊。然而,作為瓦片的真實子集的磚塊可以不被稱為瓦片。圖片中的磚塊亦可以以切片來排列。切片可以是圖片的整數個磚塊,其可以唯一地被包含在單個網路抽象層(NAL)單元中。在一些實例中,切片包括多個完整的瓦片或者僅包括一個瓦片的完整磚塊的連續序列。
本案內容可以可互換地使用「NxN」和「N乘N」來代表塊(諸如CU或其他視訊塊)在垂直和水平維度態樣的取樣維度,例如,16x16個取樣或16乘16個取樣。通常,16x16 CU在垂直方向上將具有16個取樣(y = 16),並且在水平方向上將具有16個取樣(x = 16)。同樣地,NxN CU通常在垂直方向上具有N個取樣,並且在水平方向上具有N個取樣,其中N表示非負整數值。CU中的取樣可以按行和列來排列。此外,CU不一定需要在水平方向上具有與在垂直方向上相同的數量的取樣。例如,CU可以包括NxM個取樣,其中M不一定等於N。
視訊轉碼器200對用於CU的表示預測及/或殘差資訊以及其他資訊的視訊資料進行編碼。預測資訊指示將如何預測CU以便形成用於CU的預測塊。殘差資訊通常表示在編碼之前的CU的取樣與預測塊之間的逐取樣差。
為了預測CU,視訊轉碼器200通常可以經由訊框間預測或訊框內預測來形成用於CU的預測塊。訊框間預測通常代表根據先前經譯碼的圖片的資料來預測CU,而訊框內預測通常代表根據同一圖片的先前經譯碼的資料來預測CU。為了執行訊框間預測,視訊轉碼器200可以使用一或多個運動向量來產生預測塊。視訊轉碼器200通常可以執行運動搜尋,以辨識例如在CU與參考塊之間的差異態樣與CU緊密匹配的參考塊。視訊轉碼器200可以使用絕對差之和(SAD)、平方差之和(SSD)、平均絕對差(MAD)、均方差(MSD)、或其他此類差計算來計算差度量,以決定參考塊是否與當前CU緊密匹配。在一些實例中,視訊轉碼器200可以使用單向預測或雙向預測來預測當前CU。
VVC的一些實例亦提供仿射運動補償模式,其可以被認為是訊框間預測模式。在仿射運動補償模式下,視訊轉碼器200可以決定表示非平移運動(諸如放大或縮小、旋轉、透視運動或其他不規則的運動類型)的兩個或兩個以上運動向量。
為了執行訊框內預測,視訊轉碼器200可以選擇訊框內預測模式來產生預測塊。VVC的一些實例提供六十七種訊框內預測模式,包括各種方向性模式、以及平面模式和DC模式。通常,視訊轉碼器200選擇訊框內預測模式,訊框內預測模式描述要根據其來預測當前塊(例如,CU的塊)的取樣的、當前塊的相鄰取樣。假設視訊轉碼器200以光柵掃瞄次序(從左到右、從上到下)對CTU和CU進行解碼,則此類取樣通常可以是在與當前塊相同的圖片中在當前塊的上方、左上方或左側。
視訊轉碼器200對表示用於當前塊的預測模式的資料進行編碼。例如,對於訊框間預測模式,視訊轉碼器200可以對表示使用各種可用訊框間預測模式中的哪一種的資料以及用於對應模式的運動資訊進行編碼。對於單向或雙向訊框間預測,例如,視訊轉碼器200可以使用高級運動向量預測(AMVP)或合併模式來對運動向量進行編碼。視訊轉碼器200可以使用類似的模式來對用於仿射運動補償模式的運動向量進行編碼。
AV1包括兩種用於對視訊資料的譯碼塊進行編碼和解碼的通用技術。這兩種通用技術是訊框內預測(例如,訊框內預測或空間預測)和訊框間預測(例如,訊框間預測或時間預測)。在AV1的上下文中,當使用訊框內預測模式來預測視訊資料的當前訊框的塊時,視訊轉碼器200和視訊解碼器300不使用來自視訊資料的其他訊框的視訊資料。對於大多數訊框內預測模式,視訊轉碼器200基於當前塊中的取樣值與從同一訊框中的參考取樣產生的預測值之間的差來對當前訊框的塊進行編碼。視訊轉碼器200基於訊框內預測模式來決定從參考取樣產生的預測值。
在諸如對塊的訊框內預測或訊框間預測之類的預測之後,視訊轉碼器200可以計算用於該塊的殘差資料。殘差資料(諸如殘差塊)表示在塊與用於該塊的預測塊之間的逐取樣差,該預測塊是使用對應的預測模式來形成的。視訊轉碼器200可以將一或多個變換應用於殘差塊,以在變換域而非取樣域中產生經變換的資料。例如,視訊轉碼器200可以將離散餘弦變換(DCT)、整數變換、小波變換或概念上類似的變換應用於殘差視訊資料。另外,視訊轉碼器200可以在第一變換之後應用二次變換,諸如模式相關的不可分離二次變換(MDNSST)、訊號相關變換、Karhunen-Loeve變換(KLT)等。視訊轉碼器200在應用一或多個變換之後產生變換係數。
如上面提到的,在任何變換以產生變換係數之後,視訊轉碼器200可以執行對變換係數的量化。量化通常代表如下的程序:在該程序中,對變換係數進行量化以可能減少用於表示變換係數的資料量,從而提供進一步的壓縮。經由執行量化程序,視訊轉碼器200可以減小與一些或所有變換係數相關聯的位元深度。例如,視訊轉碼器200可以在量化期間將
n位元的值向下捨入為
m位元的值,其中
n大於
m。在一些實例中,為了執行量化,視訊轉碼器200可以執行對要被量化的值的按位元右移。
在量化之後,視訊轉碼器200可以掃瞄變換係數,從而從包括經量化的變換係數的二維矩陣產生一維向量。可以將掃瞄設計為將較高能量(並且因此較低頻率)的變換係數放在向量的前面,並且將較低能量(並且因此較高頻率)的變換係數放在向量的後面。在一些實例中,視訊轉碼器200可以利用預定義的掃瞄次序來掃瞄經量化的變換係數以產生經序列化的向量,並且隨後對向量的經量化的變換係數進行熵編碼。在其他實例中,視訊轉碼器200可以執行自我調整掃瞄。在掃瞄經量化的變換係數以形成一維向量之後,視訊轉碼器200可以例如根據上下文自我調整二進位算術譯碼(CABAC)來對一維向量進行熵編碼。視訊轉碼器200亦可以對用於描述與經編碼的視訊資料相關聯的中繼資料的語法元素的值進行熵編碼,以供視訊解碼器300在對視訊資料進行解碼時使用。
為了執行CABAC,視訊轉碼器200可以將上下文模型內的上下文指派給要被發送的符號。上下文可以涉及例如符號的相鄰值是否為零值。概率決定可以是基於被指派給符號的上下文的。
視訊轉碼器200亦可以例如在圖片標頭、塊標頭、切片標頭中為視訊解碼器300產生語法資料(諸如基於塊的語法資料、基於圖片的語法資料和基於序列的語法資料)、或其他語法資料(諸如序列參數集(SPS)、圖片參數集(PPS)或視訊參數集(VPS))。同樣地,視訊解碼器300可以對此類語法資料進行解碼以決定如何解碼對應的視訊資料。
以這種方式,視訊轉碼器200可以產生位元串流,其包括經編碼的視訊資料,例如,描述將圖片分割為塊(例如,CU)以及用於該塊的預測及/或殘差資訊的語法元素。最終,視訊解碼器300可以接收位元串流並且對經編碼的視訊資料進行解碼。
通常,視訊解碼器300執行與由視訊轉碼器200執行的程序相反的程序,以對位元串流的經編碼的視訊資料進行解碼。例如,視訊解碼器300可以使用CABAC,以與視訊轉碼器200的CABAC編碼程序基本上類似的、但是相反的方式來對用於位元串流的語法元素的值進行解碼。語法元素可以定義用於將圖片分割為CTU、以及根據對應的分割結構(諸如QTBT結構)對每個CTU進行分割以定義CTU的CU的分割資訊。語法元素亦可以定義用於視訊資料的塊(例如,CU)的預測和殘差資訊。
殘差資訊可以由例如經量化的變換係數來表示。視訊解碼器300可以對塊的經量化的變換係數進行逆量化和逆變換以重現用於該塊的殘差塊。視訊解碼器300使用經訊號通知的預測模式(訊框內預測或訊框間預測)和相關的預測資訊(例如,用於訊框間預測的運動資訊)來形成用於該塊的預測塊。視訊解碼器300隨後可以對預測塊和殘差塊(在逐個取樣的基礎上)進行組合以重現原始塊。視訊解碼器300可以執行額外處理,諸如執行去塊程序以減少沿著塊的邊界的視覺偽影。
概括而言,本案內容可能涉及「用訊號通知」某些資訊(諸如語法元素)。術語「用訊號通知」通常可以代表對用於語法元素的值及/或用於對經編碼的視訊資料進行解碼的其他資料的傳送。亦即,視訊轉碼器200可以在位元串流中用訊號通知用於語法元素的值。通常,用訊號通知代表在位元串流中產生值。如上面提到的,源設備102可以基本上即時地或不是即時地(諸如可能在將語法元素儲存到存放裝置112以供目的地設備116稍後取回時發生)將位元串流傳輸到目的地設備116。
根據本案內容的技術,如將在下文更詳細地解釋的,視訊轉碼器200和視訊解碼器300可以被配置為:重構視訊資料以產生經重構的視訊資料;並行地對經重構的視訊資料執行複數個迴路濾波器操作,其中複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對第一濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。在一個實例中,第一濾波器操作是CCSAO濾波器操作。
在增強型壓縮模型(ECM 1.0)中(在ECM-1.0:https://vcgit.hhi.fraunhofer.de/ecm/VVCSoftware_VTM/-/tree/ECM-1.0處可獲得),被稱為取樣自我調整偏移(SAO)和雙邊濾波器(BIF)的兩個濾波器被配置為並行地操作。在ECM 1.0中,SAO和BIF兩者被配置為使用經去塊的取樣(例如,在應用去塊濾波器之後的取樣)作為輸入,並且雙邊濾波器和SAO濾波器兩者的輸出偏移在一起被聯合地截取。這些經截取的輸出取樣進一步被提供給自我調整迴路濾波器(ALF)作為輸入取樣。
跨分量取樣自我調整偏移(CCSAO)是目前正在ECM的探索實驗中研究的迴路濾波器。與SAO和BIF濾波器一樣,跨分量SAO亦將來自去塊濾波器的經去塊的取樣作為輸入。在一個實例中,CCSAO濾波器與SAO和BIF並行地操作。然而,由CCSAO產生的偏移僅被添加到SAO和BIF的經截取的輸出。給定這種實現,實例CCSAO設計具有若干缺點。一個缺點來自需要對每個取樣進行額外的截取操作,這增加了視訊轉碼器和視訊解碼器兩者的額外的計算複雜度。另一缺點來自需要產生SAO和BIF的經截取的輸出,並且隨後在添加CCSAO的偏移之前將經截取的輸出儲存在記憶體中。在一些實例中,這種實現可能增加記憶體要求,或者可能在取樣的處理中增加額外的延遲。
與SAO類似,CCSAO濾波器被配置為將經重構的取樣分類為不同的類別。隨後,CCSAO濾波器可以針對每個類別推導一個偏移,並且將該偏移添加到該類別中的經重構的取樣中。然而,與僅使用當前取樣的一個亮度/色度分量作為輸入的SAO不同,CCSAO濾波器利用所有三個分量(例如,YUV或YCbCr)來將當前取樣分類為不同的類別。為了促進並行處理,將來自去塊濾波器的輸出取樣用作CCSAO濾波器的輸入。圖2是示出CCSAO程序400的實例的方塊圖。
在圖2中,使用去塊濾波器(DBF)、SAO濾波器和CCSAO濾波器對亮度(Y)和色度(U,V)取樣進行濾波。DBF Y 402A被配置為對經重構的視訊資料的亮度(Y)取樣執行去塊濾波。DBF U 402B被配置為對經重構的視訊資料的第一色度(U)取樣執行去塊濾波。DBF V 402B被配置為對經重構的視訊資料的第二色度(V)取樣執行去塊濾波。
SAO Y 404A對DBF Y 402A的輸出執行SAO濾波。SAO U 404B對DBF U 402B的輸出執行SAO濾波。SAO V 404C對DBF V 402C的輸出執行SAO濾波。CCSAO Y 406A、CCSAO U 406B和CCSAO V 406C中的每一者被配置為對DBF Y 402A、DBF U 402B和DBF V 402c的輸出執行CCSAO濾波。加法器408A對CCSAO Y 406A和SAO Y 404A的輸出的取樣值求和。加法器408B對CCSAO U 406B和SAO U 404B的輸出的取樣值求和。加法器408C對CCSAO V 406C和SAO V 404C的輸出的取樣值求和。
在CCSAO設計的一個實例中,為了實現更好的複雜度/效能權衡,僅使用帶偏(BO)來增強經重構的取樣的品質。對於給定的亮度/色度取樣,選擇三個候選取樣將給定取樣分類為不同的類別:一個共置Y取樣、一個共置U取樣和一個共置V取樣。視訊轉碼器200和視訊解碼器300可以將這三個選擇的取樣的取樣值分類為三個不同的帶{
},並且可以使用聯合索引
i來指示給定取樣的類別。決定一個偏移並且將其添加到落入該類別的經重構的取樣,這可以被公式化為:
(1)
在等式(1)中,{
,
,
}是三個選擇的共置取樣,其用於對當前取樣進行分類;{
}是分別應用於{
,
,
}全範圍的等分帶數量;
是內部譯碼位元深度;
和
是在應用CCSAO濾波器之前和之後的經重構的取樣;
是被應用於第i BO類別的CCSAO偏移的值。Clip1是截取函數。在CCSAO的一個實例中,可以從九(9)個候選位置中選擇共置亮度取樣,而共置色度取樣位置是固定的,如在圖3中圖示的。圖3是示出用於CCSAO分類器的候選位置的實例的概念圖。圖3圖示用於共置亮度取樣的九個候選410(標記為0-8)、以及位置4處的共置U色度取樣412和位置4處的共置V色度取樣414。
與SAO類似,可以將不同的分類器應用於不同的局部區域,以進一步增強整體圖像品質。在訊框級別用訊號通知用於每個分類器的參數(例如,
,
、
、
的位置和偏移),並且在譯碼樹塊(CTB)級別顯式地用訊號通知並且切換要使用哪個分類器。在一個實例中,對於每個分類器,{
}的最大值被設置為{16,4,4},並且偏移被約束在範圍[-15,15]內。在一個實例中,儘管每訊框的最大分類器被約束為4,但是可以使用其他約束。
圖4是示出用於SAO、BIF和CCSAO的聯合截取的一個實例的流程圖。在圖4的實例CCSAO設計中,所有三個濾波器(SAO 420、BIF 422和CCSAO 424)將來自去塊濾波器426的經去塊的取樣作為輸入,並且每個濾波器產生輸出偏移。SAO 420和BIF 422的輸出偏移由加法器428添加到來自去塊濾波器426的取樣,並且對加法器428的求和輸出進行截取。隨後,加法器430將CCSAO 424的輸出偏移與求和SAO 420和BIF 422的經截取輸出取樣(例如,加法器428的輸出)求和。隨後,將加法器430的輸出發送到自我調整迴路濾波器(ALF)。在其他實例中,將加法器430的輸出儲存在記憶體(諸如解碼圖片緩衝器)中。圖4的實例CCSAO設計可能表現出若干缺點:
1) 第一缺點是每個取樣要求額外的截取操作,這增加了額外的計算複雜度。截取操作基本上確保經濾波的取樣值沒有欠位或溢位,並且確保最終的經濾波的值在指定的動態範圍內。基於分量(亮度或色度)並且取決於輸入視訊的位元深度,動態範圍可能不同。
2) 第二缺點是在添加CCSAO 424的輸出偏移之前,需要產生SAO 420和BIF 422的經截取的輸出並且將其儲存在記憶體中,這可能在一些實現中增加記憶體要求,或者可能在取樣的處理中增加額外的延遲。
鑒於上述缺點,本案內容描述了用於在應用兩個或兩個以上濾波器(例如,迴路濾波器)時進行聯合截取的以下技術。本案內容的技術可以以任何組合的方式使用或者可以與濾波器的任何組合一起使用。下文參考CCSAO濾波器描述本案內容的技術,但是本案內容的技術不限於此。本案內容的技術可以適用於不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的任何濾波器操作的聯合截取(當此類濾波器操作與其他濾波器操作並行地執行時)。當濾波器操作在同一輸入上並且不一定同時操作時,它們是並行地執行的。例如,參照圖4,SAO 420、BIF 422和CCSAO 424並行地操作,因為它們各自將去塊濾波器426的輸出作為輸入。
通常,視訊轉碼器200和視訊解碼器300可以被配置為:重構視訊資料以產生經重構的視訊資料;並行地對經重構的視訊資料執行複數個迴路濾波器操作,其中複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對第一濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。在一個實例中,第一濾波器操作是CCSAO濾波器操作。然而,第一濾波器可以是與其他濾波器操作並行地執行的另一濾波器(例如,除BIF或SAO之外)。在一個實例中,複數個迴路濾波器操作亦包括雙邊濾波器(BIF)操作或取樣自我調整偏移(SAO)濾波器操作中的至少一項。在一個實例中,視訊轉碼器200和視訊解碼器300可以被配置為:在執行複數個迴路濾波器操作之前對經重構的視訊資料執行去塊濾波操作。替代地,視訊轉碼器200和視訊解碼器300亦可以被配置為:在執行兩個或兩個以上迴路濾波器操作之後執行自我調整迴路濾波操作。
在本案內容的第一實例中,如圖5中所示,在加法器500處執行單個聯合截取操作。去塊濾波器426產生經去塊的輸出取樣。由去塊濾波器426產生的輸出取樣用作SAO 420、BIF 422和CCSAO 424的輸入。SAO 420、BIF 422和CCSAO中的每一者產生輸出偏移。加法器500將由SAO 420、BIF 422和CCSAO 424計算的輸出偏移相加,並且將其添加到從去塊濾波器426產生的經去塊的取樣。在加法器500計算總和之後,加法器500對總和執行聯合截取操作。圖5的技術緩解了上述缺點,同時保持了與圖4中提出的CCSAO技術相同的客觀和主觀品質。
在圖5的實例中,為了對CCSAO 424的第一輸出和複數個迴路濾波器操作(例如,去塊濾波器426、SAO 420或BIF 422)中的第二迴路濾波器的至少第二輸出執行聯合截取操作,視訊轉碼器200及/或視訊解碼器300被配置為:將CCSAO 424的第一輸出與SAO 420、BIF 422和去塊濾波器426的相應輸出相加以產生第一總和;及對第一總和執行聯合截取操作。
在本案內容的第二實例中,為了避免SAO濾波器、BIF和CCSAO濾波器的偏移的溢位,視訊轉碼器200和視訊解碼器300可以向每個濾波器的輸出偏移應用截取操作,如圖6中所示。
再次,在圖6的實例中,去塊濾波器426產生經去塊的輸出取樣。由去塊濾波器426產生的輸出取樣用作SAO 420、BIF 422和CCSAO 424的輸入。SAO 420、BIF 422和CCSAO中的每一者產生輸出偏移。使用截取函數600來對SAO 420的輸出偏移進行截取。使用截取函數602來對BIF 422的輸出偏移進行截取。使用截取函數604來對CCSAO 424的輸出偏移進行截取。加法器606將SAO 420、BIF 422和CCSAO 424中的每一者的經截取的輸出添加到由去塊濾波器426產生的經去塊的取樣,以產生總和。隨後,加法器606對該總和進行截取。
在圖6的實例中,為了對CCSAO 424的第一輸出和複數個迴路濾波器操作(例如,去塊濾波器426、SAO 420或BIF 422)的第二迴路濾波器的至少第二輸出執行聯合截取操作,視訊轉碼器200及/或視訊解碼器300被配置為:對SAO 420、BIF 422和CCSAO 424中的每一者的相應輸出進行截取(例如,使用截取函數600、602和604),以產生相應的經截取的輸出。視訊轉碼器200和視訊解碼器300可以將SAO 420、BIF 422和CCSAO 424的相應的經截取的輸出與來自去塊濾波器426的取樣相加在一起(例如,使用加法器606)以產生第一總和,並且對第一總和執行聯合截取操作(例如,在加法器606的輸出處)。
在本案內容的第三實例中,由於可以在位元串流中用訊號通知SAO濾波器和CCSAO濾波器的偏移,因此可以應用位元串流約束來避免SAO和CCSAO的偏移的溢位。因此,如圖7中所示,截取可以僅應用於BIF的輸出偏移。
再次,在圖7的實例中,去塊濾波器426產生經去塊的輸出取樣。由去塊濾波器426產生的輸出取樣用作SAO 420、BIF 422和CCSAO 424的輸入。SAO 420、BIF 422和CCSAO中的每一者產生輸出偏移。使用截取函數700來對BIF 422的輸出偏移進行截取。加法器702將截取函數700的經截取的輸出與SAO和CCSAO 424中的每一者的輸出偏移以及由去塊濾波器426產生的經去塊的取樣相加在一起,以產生總和。隨後,加法器702對該總和進行截取。
在圖7的實例中,為了對CCSAO 424的第一輸出和複數個迴路濾波器操作(例如,去塊濾波器426、SAO 420或BIF 422)的第二迴路濾波器的至少第二輸出執行聯合截取操作,視訊轉碼器200及/或視訊解碼器300被配置為:對BIF 422的第三輸出進行截取(例如,使用截取函數700),以產生BIF的經截取的輸出。視訊轉碼器200和視訊解碼器300可以將BIF 422的經截取的輸出與CCSAO 424的第一輸出以及SAO 420和去塊濾波器426的相應輸出相加在一起,以產生第一總和。隨後,視訊轉碼器200和視訊解碼器300可以對第一總和執行聯合截取操作(例如,在加法器702的輸出處)。
在本案內容的第四實例中,由於在先前的轉碼器中應用SAO,因此可以相對於圖4重用SAO的控制邏輯,如圖8中所示。圖8是示出對BIF 422的輸出偏移以及SAO 420和去塊濾波器426的輸出的總和的一個實例聯合截取的流程圖。
再次,在圖8的實例中,去塊濾波器426產生經去塊的輸出取樣。由去塊濾波器426產生的輸出取樣用作SAO 420、BIF 422和CCSAO 424的輸入。SAO 420、BIF 422和CCSAO中的每一者產生輸出偏移。加法器800將SAO 420的輸出偏移添加到去塊濾波器426的輸出並且產生總和(例如,SAO總和)。該SAO總和(例如,將SAO偏移添加到經去塊的取樣的結果)可以由截取函數804來截取。BIF 422的輸出偏移可以由截取函數802來截取。在一些實例中,亦可以對CCSAO 424的輸出偏移進行截取。隨後,可以經由加法器806將BIF 422(例如,由截取函數802截取的)和CCSAO 424的輸出偏移添加到經截取的SAO總和。隨後,加法器806可以對所得的總和進行截取。
在圖8的實例中,為了對CCSAO 424的第一輸出和複數個迴路濾波器操作(例如,去塊濾波器426、SAO 420或BIF 422)的第二迴路濾波器的至少第二輸出執行聯合截取操作,視訊轉碼器200及/或視訊解碼器300被配置為:對BIF 422的第三輸出進行截取(例如,使用截取函數802)以產生第一經截取的輸出。視訊轉碼器200及/或視訊解碼器300可以對SAO 420和去塊濾波器426的相應輸出進行求和以建立第一總和,並且可以對第一總和進行截取以形成第二經截取的輸出。視訊轉碼器200及/或視訊解碼器300可以進一步對CCSAO 424的第一經截取的輸出、第二經截取的輸出和第一輸出進行求和(例如,使用加法器806)以建立第二總和,並且隨後可以對第二總和執行聯合截取操作(例如,在加法器806的輸出處)。
圖9是示出可以執行本案內容的技術的實例視訊轉碼器200的方塊圖。圖9是出於解釋的目的而提供的,並且不應當被認為對如在本案內容中泛泛地舉例說明和描述的技術進行限制。出於解釋的目的,本案內容根據VVC(正在開發的ITU-T H.266)和HEVC(ITU-T H.265)的技術描述了視訊轉碼器200。然而,本案內容的技術可以由被配置為其他視訊譯碼標準和視訊譯碼格式(諸如AV1和AV1視訊譯碼格式的後續版本)的視訊編碼設備來執行。
在圖9的實例中,視訊轉碼器200包括視訊資料記憶體230、模式選擇單元202、殘差產生單元204、變換處理單元206、量化單元208、逆量化單元210、逆變換處理單元212、重構單元214、濾波器單元216、解碼圖片緩衝器(DPB)218和熵編碼單元220。視訊資料記憶體230、模式選擇單元202、殘差產生單元204、變換處理單元206、量化單元208、逆量化單元210、逆變換處理單元212、重構單元214、濾波器單元216、DPB 218和熵編碼單元220中的任何一者或全部可以在一或多個處理器中或者在處理電路中實現。例如,視訊轉碼器200的單元可以被實現為一或多個電路或邏輯元件,作為硬體電路的一部分,或者作為處理器、ASIC或FPGA的一部分。此外,視訊轉碼器200可以包括額外或替代的處理器或處理電路以執行這些和其他功能。
視訊資料記憶體230可以儲存要由視訊轉碼器200的部件來編碼的視訊資料。視訊轉碼器200可以從例如視訊源104(圖1)接收被儲存在視訊資料記憶體230中的視訊資料。DPB 218可以充當參考圖片記憶體,其儲存參考視訊資料以在由視訊轉碼器200對後續視訊資料進行預測時使用。視訊資料記憶體230和DPB 218可以由各種記憶體設備中的任何一種形成,諸如動態隨機存取記憶體(DRAM)(包括同步DRAM(SDRAM))、磁阻RAM(MRAM)、電阻性RAM(RRAM)、或其他類型的記憶體設備。視訊資料記憶體230和DPB 218可以由相同的記憶體設備或單獨的記憶體設備來提供。在各個實例中,視訊資料記憶體230可以與視訊轉碼器200的其他部件在晶片上(如所示的),或者相對於那些部件在晶片外。
在本案內容中,對視訊資料記憶體230的引用不應當被解釋為限於在視訊轉碼器200內部的記憶體(除非如此具體地描述),或者在視訊轉碼器200外部的記憶體(除非如此具體地描述)。確切而言,對視訊資料記憶體230的引用應當被理解為儲存視訊轉碼器200接收以用於編碼的視訊資料(例如,用於要被編碼的當前塊的視訊資料)的參考記憶體。圖1的記憶體106亦可以提供對來自視訊轉碼器200的各個單元的輸出的臨時儲存。
圖示圖9的各個單元以説明理解由視訊轉碼器200執行的操作。這些單元可以被實現為固定功能電路、可程式設計電路、或其組合。固定功能電路代表提供特定功能並且關於可以被執行的操作而預先設置的電路。可程式設計電路代表可以被程式設計以執行各種任務並且以可以被執行的操作來提供靈活功能的電路。例如,可程式設計電路可以執行軟體或韌體,軟體或韌體使得可程式設計電路以由軟體或韌體的指令所定義的方式進行操作。固定功能電路可以執行軟體指令(例如,以接收參數或輸出參數),但是固定功能電路執行的操作類型通常是不可變的。在一些實例中,這些單元中的一或多個單元可以是不同的電路塊(固定功能或可程式設計的),並且在一些實例中,這些單元中的一或多個單元可以是積體電路。
視訊轉碼器200可以包括由可程式設計電路形成的算數邏輯單位(ALU)、基本功能單元(EFU)、數位電路、類比電路及/或可程式設計核。在其中使用由可程式設計電路執行的軟體來執行視訊轉碼器200的操作的實例中,記憶體106(圖1)可以儲存視訊轉碼器200接收並且執行的軟體的指令(例如,目標代碼),或者視訊轉碼器200內的另一記憶體(未圖示)可以儲存此類指令。
視訊資料記憶體230被配置為儲存所接收的視訊資料。視訊轉碼器200可以從視訊資料記憶體230取回視訊資料的圖片,並且將視訊資料提供給殘差產生單元204和模式選擇單元202。視訊資料記憶體230中的視訊資料可以是要被編碼的原始視訊資料。
模式選擇單元202包括運動估計單元222、運動補償單元224和訊框內預測單元226。模式選擇單元202可以包括額外功能單元,其根據其他預測模式來執行視訊預測。作為實例,模式選擇單元202可以包括調色板單元、塊內複製單元(其可以是運動估計單元222及/或運動補償單元224的一部分)、仿射單元、線性模型(LM)單元等。
模式選擇單元202通常協調多個編碼通路(pass),以測試編碼參數的組合以及針對此類組合所得到的率失真值。編碼參數可以包括將CTU分割為CU、用於CU的預測模式、用於CU的殘差資料的變換類型、用於CU的殘差資料的量化參數等。模式選擇單元202可以最終選擇編碼參數的具有比其他測試的組合更佳的率失真值的組合。
視訊轉碼器200可以將從視訊資料記憶體230取回的圖片分割為一系列CTU,並且將一或多個CTU封裝在切片內。模式選擇單元202可以根據樹結構(諸如上述的MTT結構、QTBT結構、超級塊結構或四叉樹結構)來分割圖片的CTU。如前述,視訊轉碼器200可以經由根據樹結構來分割CTU,從而形成一或多個CU。此類CU通常亦可以被稱為「視訊塊」或「塊」。
通常,模式選擇單元202亦控制其部件(例如,運動估計單元222、運動補償單元224和訊框內預測單元226)以產生用於當前塊(例如,當前CU,或者在HEVC中為PU和TU的重疊部分)的預測塊。為了對當前塊進行訊框間預測,運動估計單元222可以執行運動搜尋以辨識在一或多個參考圖片(例如,被儲存在DPB 218中的一或多個先前經譯碼的圖片)中的一或多個緊密匹配的參考塊。具體地,運動估計單元222可以例如根據絕對差之和(SAD)、平方差之和(SSD)、平均絕對差(MAD)、均方差(MSD)等,來計算表示潛在參考塊將與當前塊的類似程度的值。運動估計單元222通常可以使用在當前塊與正被考慮的參考塊之間的逐取樣差來執行這些計算。運動估計單元222可以辨識從這些計算所得到的具有最低值的參考塊,其指示與當前塊最緊密匹配的參考塊。
運動估計單元222可以形成一或多個運動向量(MV),該運動向量限定相對於當前塊在當前圖片中的位置而言參考塊在參考圖片中的位置。隨後,運動估計單元222可以將運動向量提供給運動補償單元224。例如,對於單向訊框間預測,運動估計單元222可以提供單個運動向量,而對於雙向訊框間預測,運動估計單元222可以提供兩個運動向量。隨後,運動補償單元224可以使用運動向量來產生預測塊。例如,運動補償單元224可以使用運動向量來取回參考塊的資料。作為另一實例,若運動向量具有分數取樣精度,則運動補償單元224可以根據一或多個內插濾波器來對用於預測塊的值進行內插。此外,對於雙向訊框間預測,運動補償單元224可以取回用於由相應的運動向量標識的兩個參考塊的資料並且例如經由逐取樣平均或加權平均來將所取回的資料進行組合。
當根據AV1視訊譯碼格式操作時,運動估計單元222和運動補償單元224可以被配置為使用平移運動補償、仿射運動補償、重疊塊運動補償(OBMC)及/或複合訊框間-訊框內預測來對視訊資料的譯碼塊(例如,亮度譯碼塊和色度譯碼塊兩者)進行編碼。
作為另一實例,對於訊框內預測或訊框內預測譯碼,訊框內預測單元226可以根據與當前塊相鄰的取樣來產生預測塊。例如,對於方向性模式,訊框內預測單元226通常可以在數學上將相鄰取樣的值進行組合,並且跨越當前塊在所定義的方向上填充這些計算出的值以產生預測塊。作為另一實例,對於DC模式,訊框內預測單元226可以計算當前塊的相鄰取樣的平均值,並且產生預測塊以包括針對預測塊的每個取樣的該得到的平均值。
當根據AV1視訊譯碼格式操作時,訊框內預測單元226可以被配置為使用定向訊框內預測、非定向訊框內預測、遞迴濾波器訊框內預測、根據亮度的色度(CFL)預測、塊內複製(IBC)及/或調色板模式來對視訊資料的譯碼塊(例如,亮度譯碼塊和色度譯碼塊兩者)進行編碼。模式選擇單元202可以包括用於根據其他預測模式來執行視訊預測的額外的功能單元。
模式選擇單元202將預測塊提供給殘差產生單元204。殘差產生單元204從視訊資料記憶體230接收當前塊的原始的未經編碼的版本,並且從模式選擇單元202接收預測塊。殘差產生單元204計算在當前塊與預測塊之間的逐取樣差。所得到的逐取樣差定義了用於當前塊的殘差塊。在一些實例中,殘差產生單元204亦可以決定殘差塊中的取樣值之間的差,以使用殘差差分脈衝譯碼調制(RDPCM)來產生殘差塊。在一些實例中,可以使用執行二進位減法的一或多個減法器電路來形成殘差產生單元204。
在其中模式選擇單元202將CU分割為PU的實例中,每個PU可以與亮度預測單元和對應的色度預測單元相關聯。視訊轉碼器200和視訊解碼器300可以支援具有各種大小的PU。如上所指出的,CU的大小可以代表CU的亮度譯碼塊的大小,而PU的大小可以代表PU的亮度預測單元的大小。假設特定CU的大小為2Nx2N,則視訊轉碼器200可以支援用於訊框內預測的2Nx2N或NxN的PU大小、以及用於訊框間預測的2Nx2N、2NxN、Nx2N、NxN或類似的對稱的PU大小。視訊轉碼器200和視訊解碼器300亦可以支援針對用於訊框間預測的2NxnU、2NxnD、nLx2N和nRx2N的PU大小的非對稱分割。
在其中模式選擇單元202不將CU進一步分割為PU的實例中,每個CU可以與亮度譯碼塊和對應的色度譯碼塊相關聯。如上面,CU的大小可以代表CU的亮度譯碼塊的大小。視訊轉碼器200和視訊解碼器300可以支援2Nx2N、2NxN 或 Nx2N 的CU大小。
對於其他視訊譯碼技術(舉一些實例,諸如塊內複製模式譯碼、仿射模式譯碼和線性模型(LM)模式譯碼),模式選擇單元202經由與譯碼技術相關聯的相應單元來產生用於正被編碼的當前塊的預測塊。在一些實例中(諸如調色板模式譯碼),模式選擇單元202可以不產生預測塊,而是替代地產生指示基於所選擇的調色板來重構塊的方式的語法元素。在此類模式下,模式選擇單元202可以將這些語法元素提供給熵編碼單元220以進行編碼。
如前述,殘差產生單元204接收用於當前塊和對應的預測塊的視訊資料。隨後,殘差產生單元204為當前塊產生殘差塊。為了產生殘差塊,殘差產生單元204計算在預測塊與當前塊之間的逐取樣差。
變換處理單元206將一或多個變換應用於殘差塊,以產生變換係數的塊(本文中被稱為「變換係數塊」)。變換處理單元206可以將各種變換應用於殘差塊,以形成變換係數塊。例如,變換處理單元206可以將離散餘弦變換(DCT)、方向變換、Karhunen-Loeve變換(KLT)、或概念上類似的變換應用於殘差塊。在一些實例中,變換處理單元206可以對殘差塊執行多種變換,例如,初級變換和二次變換(諸如旋轉變換)。在一些實例中,變換處理單元206不對殘差塊應用變換。
當根據AV1操作時,變換處理單元206可以將一或多個變換應用於殘差塊以產生變換係數的塊(本文中被稱為「變換係數塊」)。變換處理單元206可以將各種變換應用於殘差塊以形成變換係數塊。例如,變換處理單元206可以應用水平/垂直變換組合,其可以包括離散餘弦變換(DCT)、非對稱離散正弦變換(ADST)、翻轉ADST(例如,逆序ADST)和恒等變換(IDTX)。當使用恒等變換時,將在垂直或水平方向之一跳過變換。在一些實例中,可以跳過變換處理。
量化單元208可以對變換係數塊中的變換係數進行量化,以產生經量化的變換係數塊。量化單元208可以根據與當前塊相關聯的量化參數(QP)值來對變換係數塊的變換係數進行量化。視訊轉碼器200(例如,經由模式選擇單元202)可以經由調整與CU相關聯的QP值來調整被應用於與當前塊相關聯的變換係數塊的量化程度。量化可能引起資訊損失,並且因此,經量化的變換係數可能具有與由變換處理單元206所產生的原始變換係數相比較低的精度。
逆量化單元210和逆變換處理單元212可以將逆量化和逆變換分別應用於經量化的變換係數塊,以從變換係數塊重構殘差塊。重構單元214可以基於經重構的殘差塊和由模式選擇單元202產生的預測塊來產生與當前塊相對應的重構塊(儘管潛在地具有某種程度的失真)。例如,重構單元214可以將經重構的殘差塊的取樣與來自由模式選擇單元202所產生的預測塊的對應取樣相加,以產生經重構的塊。
濾波器單元216可以對經重構的塊執行一或多個濾波器操作。例如,濾波器單元216可以執行去塊操作以減少沿著CU的邊緣的塊效應偽影。在一些實例中,可以跳過濾波器單元216的操作。在一些實例中,濾波器單元216可以被配置為執行兩個或兩個以上迴路濾波操作,包括CCSAO、SAO和BIF。濾波器單元216亦可以被配置為執行上述聯合截取操作中的一或多個聯合截取操作。
當根據AV1操作時,濾波單元216可以對經重構的塊執行一或多個濾波器操作。例如,濾波器單元216可以執行去塊操作以減少沿CU邊緣的塊狀偽影。在其他實例中,濾波器單元216可以應用約束定向增強濾波器(CDEF),其可以在去塊之後被應用,並且可以包括基於估計的邊緣方向來應用不可分離的、非線性的、低通方向濾波器。濾波器單元216亦可以包括在CDEF之後應用的迴路恢復濾波器,並且可以包括可分離的、對稱正規化維納濾波器或雙自導濾波器。
視訊轉碼器200將經重構的塊儲存在DPB 218中。例如,在其中不執行濾波器單元216的操作的實例中,重構單元214可以將經重構的塊儲存到DPB 218中。在其中執行濾波器單元216的操作的實例中,濾波器單元216可以將經濾波的重構塊儲存到DPB 218中。運動估計單元222和運動補償單元224可以從DPB 218取回由經重構的(並且潛在地經濾波的)塊形成的參考圖片,以對後續經編碼的圖片的塊進行訊框間預測。另外,訊框內預測單元226可以使用在DPB 218中的當前圖片的經重構的塊來對當前圖片中的其他塊進行訊框內預測。
通常,熵編碼單元220可以對從視訊轉碼器200的其他功能部件接收的語法元素進行熵編碼。例如,熵編碼單元220可以對來自量化單元208的經量化的變換係數塊進行熵編碼。作為另一實例,熵編碼單元220可以對來自模式選擇單元202的預測語法元素(例如,用於訊框間預測的運動資訊或用於訊框內預測的訊框內模式資訊)進行熵編碼。熵編碼單元220可以對作為視訊資料的另一實例的語法元素執行一或多個熵編碼操作,以產生經熵編碼的資料。例如,熵編碼單元220可以執行上下文自我調整變長譯碼(CAVLC)操作、CABAC操作、可變-可變(V2V)長度譯碼操作、基於語法的上下文自我調整二進位算術譯碼(SBAC)操作、概率區間分割熵(PIPE)譯碼操作、指數哥倫布編碼操作、或對資料的另一種類型的熵編碼操作。在一些實例中,熵編碼單元220可以在其中語法元素未被熵編碼的旁路模式下操作。
視訊轉碼器200可以輸出位元串流,其包括重構切片或圖片的塊所需要的經熵編碼的語法元素。具體地,熵編碼單元220可以輸出位元串流。
根據AV1,熵編碼單元220可以被配置為符號到符號自我調整多符號算術解碼器。AV1中的語法元素包括N個元素的字母表,並且上下文(例如,概率模型)包括N個概率的集合。熵編碼單元220可以將概率儲存為n位元(例如,15位元)累積分佈函數(CDF)。熵編碼單元22可以利用基於字母大小的更新因數來執行遞迴縮放,以更新上下文。
關於塊描述了上述操作。此類描述應當被理解為用於亮度譯碼塊及/或色度譯碼塊的操作。如前述,在一些實例中,亮度譯碼塊和色度譯碼塊是CU的亮度分量和色度分量。在一些實例中,亮度譯碼塊和色度譯碼塊是PU的亮度分量和色度分量。
在一些實例中,不需要針對色度譯碼塊重複關於亮度譯碼塊執行的操作。作為一個實例,不需要重多工於辨識用於亮度譯碼塊的運動向量(MV)和參考圖片的操作來辨識用於色度塊的MV和參考圖片。確切而言,可以對用於亮度譯碼塊的MV進行縮放以決定用於色度塊的MV,並且參考圖片可以是相同的。作為另一實例,對於亮度譯碼塊和色度譯碼塊,訊框內預測程序可以是相同的。
視訊轉碼器200表示被配置為對視訊資料進行編碼的設備的實例,該設備包括:記憶體,其被配置為儲存視訊資料;及一或多個處理單元,其在電路中實現並且被配置為:重構視訊資料以產生經重構的視訊資料;並行地對經重構的視訊資料執行複數個迴路濾波器操作,其中複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對第一濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。
圖10是示出可以執行本案內容的技術的實例視訊解碼器300的方塊圖。圖10是出於解釋的目的而提供的,並且不對在本案內容中泛泛地舉例說明和描述的技術進行限制。出於解釋的目的,本案內容根據VVC(正在開發的ITU-T H.266)和HEVC(ITU-T H.265)的技術描述了視訊解碼器300。然而,本案內容的技術可以由被配置用於其他視訊譯碼標準的視訊譯碼設備來執行。
在圖10的實例中,視訊解碼器300包括譯碼圖片緩衝器(CPB)記憶體320、熵解碼單元302、預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310、濾波器單元312和解碼圖片緩衝器(DPB)134。CPB記憶體320、熵解碼單元302、預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310、濾波器單元312和DPB 134中的任何一者或全部可以在一或多個處理器中或者在處理電路中實現。例如,視訊解碼器300的單元可以被實現為一或多個電路或邏輯元件,作為硬體電路的一部分,或者作為處理器、ASIC或FPGA的一部分。此外,視訊解碼器300可以包括額外或替代的處理器或處理電路以執行這些和其他功能。
預測處理單元304包括運動補償單元316和訊框內預測單元318。預測處理單元304可以包括加法單元,其根據其他預測模式來執行預測。作為實例,預測處理單元304可以包括調色板單元、塊內複製單元(其可以形成運動補償單元316的一部分)、仿射單元、線性模型(LM)單元等。在其他實例中,視訊解碼器300可以包括更多、更少或不同的功能部件。
當根據AV1操作時,補償單元316可以被配置為使用平移運動補償、仿射運動補償、OBMC及/或複合訊框間-訊框內預測來對視訊資料的譯碼塊(例如,亮度譯碼塊和色度譯碼塊兩者)進行解碼,如前述。訊框內預測單元318可以被配置為使用定向訊框內預測、非定向訊框內預測、遞迴濾波器訊框內預測、CFL預測、塊內複製(IBC)及/或調色板模式來對視訊資料的解碼塊(例如,亮度譯碼塊和色度譯碼塊兩者)進行解碼,如前述。
CPB記憶體320可以儲存要由視訊解碼器300的部件解碼的視訊資料,諸如經編碼的視訊位元串流。例如,可以從電腦可讀取媒體110(圖1)獲得被儲存在CPB記憶體320中的視訊資料。CPB記憶體320可以包括儲存來自經編碼的視訊位元串流的經編碼的視訊資料(例如,語法元素)的CPB。此外,CPB記憶體320可以儲存除了經譯碼的圖片的語法元素之外的視訊資料,諸如表示來自視訊解碼器300的各個單元的輸出的臨時資料。DPB 314通常儲存經解碼的圖片,視訊解碼器300可以輸出經解碼的圖片,及/或在解碼經編碼的視訊位元串流的後續資料或圖片時使用經解碼的圖片作為參考視訊資料。CPB記憶體320和DPB 314可以由各種記憶體設備中的任何一種形成,諸如DRAM,包括SDRAM、MRAM、RRAM或其他類型的記憶體設備。CPB記憶體320和DPB 314可以由相同的記憶體設備或單獨的記憶體設備來提供。在各個實例中,CPB記憶體320可以與視訊解碼器300的其他部件在晶片上,或者相對於那些部件在晶片外。
補充或替代地,在一些實例中,視訊解碼器300可以從記憶體120(圖1)取回經譯碼的視訊資料。亦即,記憶體120可以如上文所論述地利用CPB記憶體320來儲存資料。同樣,當視訊解碼器300的一些或全部功能是用要被視訊解碼器300的處理電路執行的軟體來實現時,記憶體120可以儲存要被視訊解碼器300執行的指令。
圖示圖10中示出的各個單元以説明理解由視訊解碼器300執行的操作。這些單元可以被實現為固定功能電路、可程式設計電路、或其組合。類似於圖9,固定功能電路代表提供特定功能並且關於可以被執行的操作而預先設置的電路。可程式設計電路代表可以被程式設計以執行各種任務並且以可以被執行的操作來提供靈活功能的電路。例如,可程式設計電路可以執行軟體或韌體,軟體或韌體使得可程式設計電路以由軟體或韌體的指令所定義的方式進行操作。固定功能電路可以執行軟體指令(例如,以接收參數或輸出參數),但是固定功能電路執行的操作的類型通常是不可變的。在一些實例中,這些單元中的一或多個單元可以是不同的電路塊(固定功能或可程式設計的),並且在一些實例中,這些單元中的一或多個單元可以是積體電路。
視訊解碼器300可以包括由可程式設計電路形成的ALU、EFU、數位電路、類比電路及/或可程式設計核。在其中由在可程式設計電路上執行的軟體執行視訊解碼器300的操作的實例中,片上或片外記憶體可以儲存視訊解碼器300接收並且執行的軟體的指令(例如,目標代碼)。
熵解碼單元302可以從CPB接收經編碼的視訊資料,並且對視訊資料進行熵解碼以重現語法元素。預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310和濾波器單元312可以基於從位元串流中提取的語法元素來產生經解碼的視訊資料。
通常,視訊解碼器300逐塊地重構圖片。視訊解碼器300可以單獨地對每個區塊執行重構操作(其中當前正在被重構(亦即,被解碼)的塊可以被稱為「當前塊」)。
熵解碼單元302可以對定義經量化的變換係數塊的經量化的變換係數的語法元素以及諸如量化參數(QP)及/或變換模式指示之類的變換資訊進行熵解碼。逆量化單元306可以使用與經量化的變換係數塊相關聯的QP來決定量化程度,並且同樣地,決定供逆量化單元306應用的逆量化程度。逆量化單元306可以例如執行按位元左移操作以對經量化的變換係數進行逆量化。逆量化單元306從而可以形成包括變換係數的變換係數塊。
在逆量化單元306形成變換係數塊之後,逆變換處理單元308可以將一或多個逆變換應用於變換係數塊,以產生與當前塊相關聯的殘差塊。例如,逆變換處理單元308可以將逆DCT、逆整數變換、逆Karhunen-Loeve變換(KLT)、逆旋轉變換、逆方向變換或另一逆變換應用於變換係數塊。
此外,預測處理單元304根據由熵解碼單元302進行熵解碼的預測資訊語法元素來產生預測塊。例如,若預測資訊語法元素指示當前塊是經訊框間預測的,則運動補償單元316可以產生預測塊。在這種情況下,預測資訊語法元素可以指示在DPB 314中的要從其取回參考塊的參考圖片、以及標識相對於當前塊在當前圖片中的位置而言參考塊在參考圖片中的位置的運動向量。運動補償單元316通常可以以與關於運動補償單元224(圖9)所描述的方式基本類似的方式來執行訊框間預測程序。
作為另一實例,若預測資訊語法元素指示當前塊是經訊框內預測的,則訊框內預測單元318可以根據由預測資訊語法元素指示的訊框內預測模式來產生預測塊。再次,訊框內預測單元318通常可以以與關於訊框內預測單元226(圖9)所描述的方式基本上類似的方式來執行訊框內預測程序。訊框內預測單元318可以從DPB 314取回當前塊的相鄰取樣的資料。
重構單元310可以使用預測塊和殘差塊來重構當前塊。例如,重構單元310可以將殘差塊的取樣與預測塊的對應取樣相加來重構當前塊。
濾波器單元312可以對經重構的塊執行一或多個濾波器操作。例如,濾波器單元312可以執行去塊操作以減少沿著經重構的塊的邊緣的塊效應偽影。不一定在所有實例中皆執行濾波器單元312的操作。在一些實例中,濾波器單元312可以被配置為執行兩個或兩個以上迴路濾波操作,包括CCSAO、SAO和BIF。濾波器單元316亦可以被配置為執行上述聯合截取操作中的一或多個聯合截取操作。
視訊解碼器300可以將經重構的塊儲存在DPB 314中。例如,在其中不執行濾波器單元312的操作的實例中,重構單元310可以將經重構的塊儲存到DPB 314中。在其中執行濾波器單元312的操作的實例中,濾波器單元312可以將經濾波的重構塊儲存到DPB 314中。如上所論述的,DPB 314可以將參考資訊(諸如用於訊框內預測的當前圖片以及用於後續運動補償的先前經解碼的圖片的取樣)提供給預測處理單元304。此外,視訊解碼器300可以從DPB 314輸出經解碼的圖片(例如,經解碼的視訊),以用於在諸如圖1的顯示設備118之類的顯示設備上的後續呈現。
以這種方式,視訊解碼器300表示視訊解碼設備的實例,該視訊解碼設備包括:記憶體,其被配置為儲存視訊資料;及一或多個處理單元,其在電路中實現並且被配置為:重構視訊資料以產生經重構的視訊資料;並行地對經重構的視訊資料執行複數個迴路濾波器操作,其中複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對第一濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。
圖11是示出根據本案內容的技術的用於對當前塊進行編碼的實例方法的流程圖。當前塊可以包括當前CU。儘管關於視訊轉碼器200(圖1和9)進行了描述,但是應當理解的是,其他設備可以被配置為執行與圖11的方法類似的方法。
在該實例中,視訊轉碼器200最初預測當前塊(350)。例如,視訊轉碼器200可以形成用於當前塊的預測塊。隨後,視訊轉碼器200可以計算用於當前塊的殘差塊(352)。為了計算殘差塊,視訊轉碼器200可以計算在原始的未經編碼的塊與用於當前塊的預測塊之間的差。隨後,視訊轉碼器200可以對殘差塊進行變換以及對殘差塊的變換係數進行量化(354)。接下來,視訊轉碼器200可以掃瞄殘差塊的經量化的變換係數(356)。在掃瞄期間或在掃瞄之後,視訊轉碼器200可以對變換係數進行熵編碼(358)。例如,視訊轉碼器200可以使用CAVLC或CABAC來對變換係數進行編碼。隨後,視訊轉碼器200可以輸出塊的經熵編碼的資料(360)。
圖12是示出根據本案內容的技術的用於對視訊資料的當前塊進行解碼的實例方法的流程圖。當前塊可以包括當前CU。儘管關於視訊解碼器300(圖1和10)進行了描述,但是應當理解的是,其他設備可以被配置為執行與圖12的方法類似的方法。
視訊解碼器300可以接收用於當前塊的經熵編碼的資料(諸如經熵編碼的預測資訊和用於與當前塊相對應的殘差塊的變換係數的經熵編碼的資料)(370)。視訊解碼器300可以對經熵編碼的資料進行熵解碼以決定用於當前塊的預測資訊並且重現殘差塊的變換係數(372)。視訊解碼器300可以例如使用如由用於當前塊的預測資訊所指示的訊框內或訊框間預測模式來預測當前塊(374),以計算用於當前塊的預測塊。隨後,視訊解碼器300可以對所重現的變換係數進行逆掃瞄(376),以建立經量化的變換係數的塊。隨後,視訊解碼器300可以對變換係數進行逆量化並且將逆變換應用於變換係數以產生殘差塊(378)。最終,視訊解碼器300可以經由將預測塊和殘差塊進行組合來對當前塊進行解碼(380)。
圖13是示出根據本案內容的技術的用於對當前塊進行濾波的實例方法的流程圖。圖13的技術可以由視訊轉碼器200和視訊解碼器300的一或多個結構部件(包括視訊轉碼器200的濾波單元216(參見圖9)及/或視訊解碼器300的濾波單元312(參見圖10))執行。圖13的技術可以在視訊轉碼器200的重構迴路中執行,該重構迴路通常在圖11的變換和量化殘差塊(354)程序之後執行。圖13的技術亦可以由視訊解碼器300執行,並且通常可以在圖12的組合預測塊和殘差塊(380)程序之後發生。
在本案內容的一個實例中,視訊轉碼器200和視訊解碼器300可以被配置為:重構視訊資料以產生經重構的視訊資料(1200)。在視訊編碼的實例中,視訊轉碼器200可以被配置為:在重構迴路中重構視訊資料,以產生經重構的視訊資料。在視訊解碼的實例中,視訊解碼器300可以被配置為:對視訊資料進行解碼,以產生經重構的視訊資料。
視訊轉碼器200和視訊解碼器300亦可以被配置為:並行地對經重構的視訊資料執行複數個迴路濾波器操作,其中複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作(1202)。視訊轉碼器200和視訊解碼器300亦可以被配置為:對第一濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作(1204)。在一個實例中,第一濾波器操作是CCSAO濾波器操作。在另一實例中,複數個迴路濾波器操作亦包括雙邊濾波器操作或SAO濾波器操作中的至少一項。
在本案內容的另一實例中,視訊轉碼器200和視訊解碼器300可以被配置為:在執行複數個迴路濾波器操作之前,對經重構的視訊資料執行去塊濾波操作。視訊轉碼器200和視訊解碼器300亦可以被配置為:在執行複數個迴路濾波器操作之後,執行自我調整迴路濾波操作。
在一個實例中,為了對CCSAO濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的至少第二輸出執行聯合截取操作,視訊轉碼器200和視訊解碼器300被配置為:將CCSAO濾波器操作的第一輸出與SAO濾波器操作、雙邊濾波器操作和去塊濾波器操作的相應輸出相加,以產生第一總和;及對第一總和執行聯合截取操作。
在另一實例中,為了對CCSAO濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的至少第二輸出執行聯合截取操作,視訊轉碼器200和視訊解碼器300被配置為:對SAO濾波器操作、雙邊濾波器操作和CCSAO濾波器操作中的每一項的相應輸出進行截取,以產生相應的經截取的輸出;將SAO濾波器操作、雙邊濾波器操作和CCSAO濾波器操作的相應的經截取的輸出與來自去塊濾波器操作的取樣相加在一起,以產生第一總和;及對第一總和執行聯合截取操作。
在另一實例中,為了對CCSAO濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的至少第二輸出執行聯合截取操作,視訊轉碼器200和視訊解碼器300被配置為:對雙邊濾波器操作的第三輸出進行截取,以產生雙邊濾波器操作的經截取的輸出;將雙邊濾波器操作的經截取的輸出與CCSAO濾波器操作的第一輸出以及SAO濾波器操作和去塊濾波器操作的相應輸出相加在一起,以產生第一總和;及對第一總和執行聯合截取操作。
在另一實例中,為了對CCSAO濾波器操作的第一輸出和複數個迴路濾波器操作中的第二迴路濾波器操作的至少第二輸出執行聯合截取操作,視訊轉碼器200和視訊解碼器300被配置為:對雙邊濾波器操作的第三輸出進行截取,以產生第一經截取的輸出;將SAO濾波器操作和去塊濾波器操作的相應輸出相加以建立第一總和;對第一總和進行截取以形成第二經截取的輸出;將第一經截取的輸出、第二經截取的輸出和CCSAO濾波器操作的第一輸出相加以建立第二總和;及對第二總和執行聯合截取操作。
下文描述了本案內容的額外態樣。
態樣1A-一種對視訊資料進行譯碼的方法,該方法包括:重構視訊資料;及對經重構的視訊資料執行兩個或兩個以上迴路濾波器操作,包括對該兩個或兩個以上迴路濾波器操作的輸出執行聯合截取操作。
態樣2A-根據態樣1A所述的方法,其中該兩個或兩個以上迴路濾波器操作包括雙邊濾波器(BIF)、取樣自我調整偏移(SAO)濾波器和跨分量SAO(CCSAO)濾波器。
態樣3A-根據態樣1A-2A中任一項所述的方法,亦包括:在執行該兩個或兩個以上迴路濾波器操作之前,對經重構的視訊資料執行去塊濾波操作。
態樣4A-根據態樣1A-3A中任一項所述的方法,亦包括:在執行該兩個或兩個以上迴路濾波器操作之後,執行自我調整迴路濾波操作。
態樣5A-根據態樣1A-4A中任一項所述的方法,其中執行該兩個或兩個以上迴路濾波器操作包括:將SAO濾波器、BIF和CCSAO濾波器的該輸出與來自去塊濾波器的取樣相加在一起;及對總和執行截取操作。
態樣6A-根據態樣1A-4A中任一項所述的方法,其中執行該兩個或兩個以上迴路濾波器操作包括:對SAO濾波器、BIF和CCSAO濾波器中的每一者的該輸出進行截取;將該SAO濾波器、該BIF和CCSAO濾波器的經截取的輸出與來自去塊濾波器的取樣相加在一起;及對總和執行截取操作。
態樣7A-根據態樣1A-4A中任一項所述的方法,其中執行該兩個或兩個以上迴路濾波器操作包括:對BIF的該輸出進行截取;將該BIF的經截取的輸出與SAO濾波器和CCSAO濾波器的輸出以及來自去塊濾波器的取樣相加在一起;及對總和執行截取操作。
態樣8A-根據態樣1A-4A中任一項所述的方法,其中執行該兩個或兩個以上迴路濾波器操作包括:對BIF的該輸出進行截取;將SAO濾波器的輸出與去塊濾波器的取樣相加在一起以建立第一總和;對該第一總和進行截取以形成第一經截取的輸出;將該BIF的經截取的輸出與該第一經截取的輸出和CCSAO濾波器的輸出相加,以建立第二經截取的輸出;及對該第二經截取的輸出執行截取操作。
態樣9A-根據態樣1A-8A中任一項所述的方法,其中譯碼包括解碼。
態樣10A-根據態樣1A-8A中任一項所述的方法,其中譯碼包括編碼。
態樣11A-一種用於對視訊資料進行譯碼的設備,該設備包括用於執行根據態樣1A-10A中任一項所述的方法的一或多個單元。
態樣12A-根據態樣11A所述的設備,其中該一或多個單元包括在電路中實現的一或多個處理器。
態樣13A-根據態樣11A和12A中任一項所述的設備,亦包括:用於儲存該視訊資料的記憶體。
態樣14A-根據態樣11A-13A中任一項所述的設備,亦包括:被配置為顯示經解碼的視訊資料的顯示器。
態樣15A-根據態樣11A-14A中任一項所述的設備,其中該設備包括相機、電腦、行動設備、廣播接收器設備或機上盒中的一者或多者。
態樣16A-根據態樣11A-15A中任一項所述的設備,其中該設備包括視訊解碼器。
態樣17A-根據態樣11A-16A中任一項所述的設備,其中該設備包括視訊轉碼器。
態樣18A-一種具有被儲存在其上的指令的電腦可讀取儲存媒體,該等指令在被執行時使得一或多個處理器執行根據態樣1A-10A中任一項所述的方法。
態樣1B-一種對視訊資料進行譯碼的方法,該方法包括:重構視訊資料以產生經重構的視訊資料;並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。
態樣2B-根據態樣1B所述的方法,其中該複數個迴路濾波器操作亦包括該雙邊濾波器操作或該SAO濾波器操作中的至少一項。
態樣3B-根據態樣1B所述的方法,亦包括:在執行該複數個迴路濾波器操作之前,對經重構的視訊資料執行去塊濾波操作。
態樣4B-根據態樣1B所述的方法,亦包括:在執行該複數個迴路濾波器操作之後,執行自我調整迴路濾波操作。
態樣5B-根據態樣1B所述的方法,其中該第一濾波器操作是跨分量取樣自我調整偏移(CCSAO)濾波器操作。
態樣6B-根據態樣5B所述的方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括:將該CCSAO濾波器操作的該第一輸出與該SAO濾波器操作、該雙邊濾波器操作和去塊濾波器操作的相應輸出相加,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣7B-根據態樣5B所述的方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括:對該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作中的每一項的相應輸出進行截取,以產生相應的經截取的輸出;將該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作的該相應的經截取的輸出與來自去塊濾波器操作的取樣相加在一起,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣8B-根據態樣5B所述的方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括:對該雙邊濾波器操作的第三輸出進行截取,以產生該雙邊濾波器操作的經截取的輸出;將該雙邊濾波器操作的該經截取的輸出與該CCSAO濾波器操作的該第一輸出以及該SAO濾波器操作和去塊濾波器操作的相應輸出相加在一起,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣9B-根據態樣5B所述的方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括:對該雙邊濾波器操作的第三輸出進行截取,以產生第一經截取的輸出;將該SAO濾波器操作和去塊濾波器操作的相應輸出相加以建立第一總和;對該第一總和進行截取以形成第二經截取的輸出;將該第一經截取的輸出、該第二經截取的輸出和該CCSAO濾波器操作的該第一輸出相加以建立第二總和;及對該第二總和執行該聯合截取操作。
態樣10B-根據態樣1B所述的方法,其中解碼包括編碼,並且其中重構該視訊資料以產生該經重構的視訊資料包括:在視訊轉碼器的重構迴路中重構該視訊資料,以產生該經重構的視訊資料。
態樣11B-根據態樣1B所述的方法,其中譯碼包括解碼,並且其中重構該視訊資料以產生該經重構的視訊資料包括:對該視訊資料進行解碼以產生該經重構的視訊資料。
態樣12B-一種被配置為對視訊資料進行譯碼的裝置,該裝置包括:記憶體,其被配置為儲存視訊資料;及與該記憶體相通訊的一或多個處理器,該一或多個處理器被配置為:重構該視訊資料以產生經重構的視訊資料;並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。
態樣13B-根據態樣12B所述的裝置,其中該複數個迴路濾波器操作亦包括該雙邊濾波器操作或該取樣自我調整偏移(SAO)濾波器操作中的至少一項。
態樣14B-根據態樣12B所述的裝置,其中該一或多個處理器亦被配置為:在執行該複數個迴路濾波器操作之前,對經重構的視訊資料執行去塊濾波操作。
態樣15B-根據態樣12B所述的裝置,其中該一或多個處理器亦被配置為:在執行該複數個迴路濾波器操作之後,執行自我調整迴路濾波操作。
態樣16B-根據態樣12B所述的裝置,其中該第一濾波器操作是跨分量取樣自我調整偏移(CCSAO)濾波器操作。
態樣17B-根據態樣16B所述的裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為:將該CCSAO濾波器操作的該第一輸出與該SAO濾波器操作、該雙邊濾波器操作和去塊濾波器操作的相應輸出相加,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣18B-根據態樣16B所述的裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為:對該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作中的每一項的相應輸出進行截取,以產生相應的經截取的輸出;將該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作的該相應的經截取的輸出與來自去塊濾波器操作的取樣相加在一起,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣19B-根據態樣16B所述的裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為:對該雙邊濾波器操作的第三輸出進行截取,以產生該雙邊濾波器操作的經截取的輸出;將該雙邊濾波器操作的該經截取的輸出與該CCSAO濾波器操作的該第一輸出以及該SAO濾波器操作和去塊濾波器操作的相應輸出相加在一起,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣20B-根據態樣16B所述的裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為:對該雙邊濾波器操作的第三輸出進行截取,以產生第一經截取的輸出;將該SAO濾波器操作和去塊濾波器操作的相應輸出相加以建立第一總和;對該第一總和進行截取以形成第二經截取的輸出;將該第一經截取的輸出、該第二經截取的輸出和該CCSAO濾波器操作的該第一輸出相加以建立第二總和;及對該第二總和執行該聯合截取操作。
態樣21B-根據態樣12B所述的裝置,其中該裝置是視訊轉碼器,並且其中為了重構該視訊資料以產生該經重構的視訊資料,該一或多個處理器亦被配置為:在該視訊轉碼器的重構迴路中重構該視訊資料,以產生該經重構的視訊資料。
態樣22B-根據態樣12B所述的裝置,其中該裝置是視訊解碼器,並且其中為了重構該視訊資料以產生該經重構的視訊資料,該一或多個處理器亦被配置為:對該視訊資料進行解碼以產生該經重構的視訊資料。
態樣23B-一種被配置為對視訊資料進行譯碼的裝置,該裝置包括:用於重構視訊資料以產生經重構的視訊資料的單元;用於並行地對該經重構的視訊資料執行複數個迴路濾波器操作的單元,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及用於對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作的單元。
態樣24B-一種儲存指令的非暫時性電腦可讀取儲存媒體,該等指令在被執行時使得被配置為對視訊資料進行譯碼的設備的一或多個處理器進行以下操作:重構該視訊資料以產生經重構的視訊資料;並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。
態樣1C-一種對視訊資料進行譯碼的方法,該方法包括:重構視訊資料以產生經重構的視訊資料;並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。
態樣2C-根據態樣1C所述的方法,其中該複數個迴路濾波器操作亦包括該雙邊濾波器操作或該SAO濾波器操作中的至少一項。
態樣3C-根據態樣1C-2C中任一項所述的方法,亦包括:在執行該複數個迴路濾波器操作之前,對經重構的視訊資料執行去塊濾波操作。
態樣4C-根據態樣1C-3C中任一項所述的方法,亦包括:在執行該複數個迴路濾波器操作之後,執行自我調整迴路濾波操作。
態樣5C-根據態樣1C-4C中任一項所述的方法,其中該第一濾波器操作是跨分量取樣自我調整偏移(CCSAO)濾波器操作。
態樣6C-根據態樣5C所述的方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括:將該CCSAO濾波器操作的該第一輸出與該SAO濾波器操作、該雙邊濾波器操作和去塊濾波器操作的相應輸出相加,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣7C-根據態樣5C所述的方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括:對該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作中的每一項的相應輸出進行截取,以產生相應的經截取的輸出;將該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作的該相應的經截取的輸出與來自去塊濾波器操作的取樣相加在一起,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣8C-根據態樣5C所述的方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括:對該雙邊濾波器操作的第三輸出進行截取,以產生該雙邊濾波器操作的經截取的輸出;將該雙邊濾波器操作的該經截取的輸出與該CCSAO濾波器操作的該第一輸出以及該SAO濾波器操作和去塊濾波器操作的相應輸出相加在一起,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣9C-根據態樣5C所述的方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括:對該雙邊濾波器操作的第三輸出進行截取,以產生第一經截取的輸出;將該SAO濾波器操作和去塊濾波器操作的相應輸出相加以建立第一總和;對該第一總和進行截取以形成第二經截取的輸出;將該第一經截取的輸出、該第二經截取的輸出和該CCSAO濾波器操作的該第一輸出相加以建立第二總和;及對該第二總和執行該聯合截取操作。
態樣10C-根據態樣1C-9C中任一項所述的方法,其中譯碼包括編碼,並且其中重構該視訊資料以產生該經重構的視訊資料包括:在視訊轉碼器的重構迴路中重構該視訊資料,以產生該經重構的視訊資料。
態樣11C-根據態樣1C-9C中任一項所述的方法,其中譯碼包括解碼,並且其中重構該視訊資料以產生該經重構的視訊資料包括:對該視訊資料進行解碼以產生該經重構的視訊資料。
態樣12C-一種被配置為對視訊資料進行譯碼的裝置,該裝置包括:記憶體,其被配置為儲存視訊資料;及與該記憶體相通訊的一或多個處理器,該一或多個處理器被配置為:重構該視訊資料以產生經重構的視訊資料;並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是雙邊濾波器操作或取樣自我調整偏移(SAO)濾波器操作的第一濾波器操作;及對該第一濾波器操作的第一輸出和該複數個迴路濾波器操作中的第二迴路濾波器操作的第二輸出執行聯合截取操作。
態樣13C-根據態樣12C所述的裝置,其中該複數個迴路濾波器操作亦包括該雙邊濾波器操作或該取樣自我調整偏移(SAO)濾波器操作中的至少一項。
態樣14C-根據態樣12C-13C中任一項所述的裝置,其中該一或多個處理器亦被配置為:在執行該複數個迴路濾波器操作之前,對經重構的視訊資料執行去塊濾波操作。
態樣15C-根據態樣12C-14C中任一項所述的裝置,其中該一或多個處理器亦被配置為:在執行該複數個迴路濾波器操作之後,執行自我調整迴路濾波操作。
態樣16C-根據態樣12C-15C中任一項所述的裝置,其中該第一濾波器操作是跨分量取樣自我調整偏移(CCSAO)濾波器操作。
態樣17C-根據態樣16C所述的裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為:將該CCSAO濾波器操作的該第一輸出與該SAO濾波器操作、該雙邊濾波器操作和去塊濾波器操作的相應輸出相加,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣18C-根據態樣16C所述的裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為:對該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作中的每一項的相應輸出進行截取,以產生相應的經截取的輸出;將該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作的該相應的經截取的輸出與來自去塊濾波器操作的取樣相加在一起,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣19C-根據態樣16C所述的裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為:對該雙邊濾波器操作的第三輸出進行截取,以產生該雙邊濾波器操作的經截取的輸出;將該雙邊濾波器操作的該經截取的輸出與該CCSAO濾波器操作的該第一輸出以及該SAO濾波器操作和去塊濾波器操作的相應輸出相加在一起,以產生第一總和;及對該第一總和執行該聯合截取操作。
態樣20C-根據態樣16C所述的裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為:對該雙邊濾波器操作的第三輸出進行截取,以產生第一經截取的輸出;將該SAO濾波器操作和去塊濾波器操作的相應輸出相加以建立第一總和;對該第一總和進行截取以形成第二經截取的輸出;將該第一經截取的輸出、該第二經截取的輸出和該CCSAO濾波器操作的該第一輸出相加以建立第二總和;及對該第二總和執行該聯合截取操作。
態樣21C-根據態樣12C-20C中任一項所述的裝置,其中該裝置是視訊轉碼器,並且其中為了重構該視訊資料以產生該經重構的視訊資料,該一或多個處理器亦被配置為:在該視訊轉碼器的重構迴路中重構該視訊資料,以產生該經重構的視訊資料。
態樣22C-根據態樣12C-20C中任一項所述的裝置,其中該裝置是視訊解碼器,並且其中為了重構該視訊資料以產生該經重構的視訊資料,該一或多個處理器亦被配置為:對該視訊資料進行解碼以產生該經重構的視訊資料。
要認識到的是,根據實例,本文描述的任何技術的某些動作或事件可以以不同的循序執行,可以被添加、合併或完全省略(例如,並非所有描述的動作或事件對於實施該等技術都是必要的)。此外,在某些實例中,動作或事件可以例如經由多執行緒處理、中斷處理或多個處理器併發地而不是順序地執行。
在一或多個實例中,所描述的功能可以用硬體、軟體、韌體或其任何組合來實現。若用軟體來實現,則該等功能可以作為一或多個指令或代碼被儲存在電腦可讀取媒體上或者經由其進行傳輸並且由基於硬體的處理單元執行。電腦可讀取媒體可以包括電腦可讀取儲存媒體,其對應於諸如資料儲存媒體之類的有形媒體或者通訊媒體,該通訊媒體包括例如根據通訊協定來促進電腦程式從一個地方傳送到另一個地方的任何媒體。以這種方式,電腦可讀取媒體通常可以對應於(1)非暫時性的有形電腦可讀取儲存媒體、或者(2)諸如訊號或載波之類的通訊媒體。資料儲存媒體可以是可以由一或多個電腦或者一或多個處理器存取以取回用於實現在本案內容中描述的技術的指令、代碼及/或資料結構的任何可用的媒體。電腦程式產品可以包括電腦可讀取媒體。
舉例而言而非進行限制,此種電腦可讀取儲存媒體可以包括RAM、ROM、EEPROM、CD-ROM或其他光碟儲存、磁碟儲存或其他磁存放裝置、快閃記憶體、或者能夠用於以指令或資料結構的形式儲存期望的程式碼以及能夠由電腦存取的任何其他媒體。此外,任何連接被適當地稱為電腦可讀取媒體。例如,若使用同軸電纜、光纖光纜、雙絞線、數位用戶線路(DSL)或者無線技術(諸如紅外線、無線電和微波)從網站、伺服器或其他遠端源傳輸指令,則同軸電纜、光纖光纜、雙絞線、DSL或者無線技術(諸如紅外線、無線電和微波)被包括在媒體的定義中。然而,應當理解的是,電腦可讀取儲存媒體和資料儲存媒體不包括連接、載波、訊號或其他暫時性媒體,而是替代地針對非暫時性的有形儲存媒體。如本文所使用的,磁碟和光碟包括壓縮光碟(CD)、鐳射光碟、光碟、數位多功能光碟(DVD)、軟碟和藍光光碟,其中磁碟通常磁性地複製資料,而光碟利用鐳射來光學地複製資料。上述各項的組合亦應當被包括在電腦可讀取媒體的範疇之內。
指令可以由一或多個處理器來執行,諸如一或多個DSP、通用微處理器、ASIC、FPGA、或其他等效的整合或個別邏輯電路。因此,如本文所使用的,術語「處理器」和「處理電路」可以代表前述結構中的任何一者或者適於實現本文描述的技術的任何其他結構。另外,在一些態樣中,本文描述的功能可以在被配置用於編碼和解碼的專用硬體及/或軟體模組內提供,或者被併入經組合的轉碼器中。此外,該技術可以完全在一或多個電路或邏輯元件中實現。
本案內容的技術可以在多種多樣的設備或裝置中實現,包括無線手機、積體電路(IC)或一組IC(例如,晶片組)。在本案內容中描述了各種部件、模組或單元以強調被配置為執行所揭示的技術的設備的功能性態樣,但是不一定需要經由不同的硬體單元的實現。確切而言,如前述,各種單元可以被組合在轉碼器硬體單元中,或者由可交互動操作的硬體單元的集合(包括如前述的一或多個處理器)結合適當的軟體及/或韌體來提供。
已經描述了各個實例。這些和其他實例在所附的請求項的範疇內。
100:視訊編碼和解碼系統
102:源設備
104:視訊源
106:記憶體
108:輸出介面
110:電腦可讀取媒體
112:存放裝置
114:檔案伺服器
116:目的地設備
118:顯示設備
120:記憶體
122:輸入介面
200:視訊轉碼器
202:模式選擇單元
204:殘差產生單元
206:變換處理單元
208:量化單元
210:逆量化單元
212:逆變換處理單元
214:重構單元
216:濾波器單元
218:解碼圖片緩衝器(DPB)
220:熵編碼單元
222:運動估計單元
224:運動補償單元
226:訊框內預測單元
230:視訊資料記憶體
300:視訊解碼器
302:熵解碼單元
304:預測處理單元
306:逆量化單元
308:逆變換處理單元
310:重構單元
312:濾波器單元
314:解碼圖片緩衝器(DPB)
316:運動補償單元
318:訊框內預測單元
320:CPB記憶體
350:方塊
352:方塊
354:方塊
356:方塊
358:方塊
360:方塊
370:方塊
372:方塊
374:方塊
376:方塊
378:方塊
380:方塊
400:CCSAO程序
402A:DBF Y
402B:DBF U
402C:DBF V
404A:SAO Y
404B:SAO U
404C:SAO V
406A:CCSAO Y
406B:CCSAO U
406C:CCSAO V
408A:加法器
408B:加法器
408C:加法器
410:候選
412:共置U色度取樣
414:共置V色度取樣
420:SAO
422:BIF
424:CCSAO
426:去塊濾波器
428:加法器
430:加法器
500:加法器
600:截取函數
602:截取函數
604:截取函數
606:加法器
700:截取函數
702:加法器
800:加法器
802:取函數
804:截取函數
806:加法器
1200:方塊
1202:方塊
1204:方塊
U:色度
V:色度
Y:亮度
圖1是示出可以執行本案內容的技術的實例視訊編碼和解碼系統的方塊圖。
圖2是示出可以與本案內容的技術結合使用的CCSAO程序的實例的方塊圖。
圖3是示出用於CCSAO分類器的候選位置的實例的概念圖,該CCSAO分類器可以與本案內容的技術結合使用。
圖4是示出本案內容的一個實例中的複數個迴路濾波器的處理的一個實例的流程圖。
圖5是示出本案內容的另一實例中的用於SAO、BIF和CCSAO的聯合截取的一個實例的流程圖。
圖6是示出本案內容的另一實例中的用於SAO、BIF和CCSAO的偏移截取的一個實例的流程圖。
圖7是示出本案內容的另一實例中的應用於BIF的輸出偏移的截取的一個實例的流程圖。
圖8是示出本案內容的另一實例中的對BIF和SAO和的輸出偏移的聯合截取的一個實例的流程圖。
圖9是示出可以執行本案內容的技術的實例視訊轉碼器的方塊圖。
圖10是示出可以執行本案內容的技術的實例視訊解碼器的方塊圖。
圖11是示出根據本案內容的技術的用於對當前塊進行編碼的實例方法的流程圖。
圖12是示出根據本案內容的技術的用於對當前塊進行解碼的實例方法的流程圖。
圖13是示出根據本案內容的技術的用於對當前塊進行濾波的實例方法的流程圖。
國內寄存資訊(請依寄存機構、日期、號碼順序註記)
無
國外寄存資訊(請依寄存國家、機構、日期、號碼順序註記)
無
420:SAO
422:BIF
424:CCSAO
426:去塊濾波器
500:加法器
Claims (24)
- 一種對視訊資料進行譯碼的方法,該方法包括以下步驟: 重構視訊資料以產生經重構的視訊資料; 並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是一雙邊濾波器操作或一取樣自我調整偏移(SAO)濾波器操作的一第一濾波器操作;及 對該第一濾波器操作的一第一輸出和該複數個迴路濾波器操作中的一第二迴路濾波器操作的一第二輸出執行聯合截取操作。
- 根據請求項1之方法,其中該複數個迴路濾波器操作亦包括該雙邊濾波器操作或該SAO濾波器操作中的至少一項。
- 根據請求項1之方法,亦包括以下步驟: 在執行該複數個迴路濾波器操作之前,對該經重構的視訊資料執行一去塊濾波操作。
- 根據請求項1之方法,亦包括以下步驟: 在執行該複數個迴路濾波器操作之後,執行一自我調整迴路濾波操作。
- 根據請求項1之方法,其中該第一濾波器操作是一跨分量取樣自我調整偏移(CCSAO)濾波器操作,並且該第二濾波器操作是該雙邊濾波器操作或該SAO濾波器操作中的一項。
- 根據請求項5之方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括以下步驟: 將該CCSAO濾波器操作的該第一輸出與該SAO濾波器操作、該雙邊濾波器操作和一去塊濾波器操作的相應輸出相加,以產生一第一總和;及 對該第一總和執行該聯合截取操作。
- 根據請求項5之方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括以下步驟: 對該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作中的每一項的相應輸出進行截取,以產生相應的經截取的輸出; 將該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作的該相應的經截取的輸出與來自一去塊濾波器操作的取樣相加在一起,以產生一第一總和;及 對該第一總和執行該聯合截取操作。
- 根據請求項5之方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括以下步驟: 對該雙邊濾波器操作的一第三輸出進行截取,以產生該雙邊濾波器操作的一經截取的輸出; 將該雙邊濾波器操作的該經截取的輸出與該CCSAO濾波器操作的該第一輸出以及該SAO濾波器操作和一去塊濾波器操作的相應輸出相加在一起,以產生一第一總和;及 對該第一總和執行該聯合截取操作。
- 根據請求項5之方法,其中對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作包括以下步驟: 對該雙邊濾波器操作的一第三輸出進行截取,以產生一第一經截取的輸出; 將該SAO濾波器操作和一去塊濾波器操作的相應輸出相加以建立一第一總和; 對該第一總和進行截取以形成一第二經截取的輸出; 將該第一經截取的輸出、該第二經截取的輸出和該CCSAO濾波器操作的該第一輸出相加以建立一第二總和;及 對該第二總和執行該聯合截取操作。
- 根據請求項1之方法,其中譯碼包括編碼,並且其中重構該視訊資料以產生該經重構的視訊資料包括以下步驟: 在一視訊轉碼器的一重構迴路中重構該視訊資料,以產生該經重構的視訊資料。
- 根據請求項1之方法,其中譯碼包括解碼,並且其中重構該視訊資料以產生該經重構的視訊資料包括以下步驟: 對該視訊資料進行解碼以產生該經重構的視訊資料。
- 一種被配置為對視訊資料進行譯碼的裝置,該裝置包括: 一記憶體,其被配置為儲存視訊資料;及 與該記憶體相通訊的一或多個處理器,該一或多個處理器被配置為: 重構該視訊資料以產生經重構的視訊資料; 並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是一雙邊濾波器操作或一取樣自我調整偏移(SAO)濾波器操作的一第一濾波器操作;及 對該第一濾波器操作的一第一輸出和該複數個迴路濾波器操作中的一第二迴路濾波器操作的一第二輸出執行聯合截取操作。
- 根據請求項12之裝置,其中該複數個迴路濾波器操作亦包括該雙邊濾波器操作或該取樣自我調整偏移(SAO)濾波器操作中的至少一項。
- 根據請求項12之裝置,其中該一或多個處理器亦被配置為: 在執行該複數個迴路濾波器操作之前,對該經重構的視訊資料執行一去塊濾波操作。
- 根據請求項12之裝置,其中該一或多個處理器亦被配置為: 在執行該複數個迴路濾波器操作之後,執行一自我調整迴路濾波操作。
- 根據請求項12之裝置,其中該第一濾波器操作是一跨分量取樣自我調整偏移(CCSAO)濾波器操作,並且該第二濾波器操作是該雙邊濾波器操作或該SAO濾波器操作中的一項。
- 根據請求項16之裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為: 將該CCSAO濾波器操作的該第一輸出與該SAO濾波器操作、該雙邊濾波器操作和一去塊濾波器操作的相應輸出相加,以產生一第一總和;及 對該第一總和執行該聯合截取操作。
- 根據請求項16之裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為: 對該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作中的每一項的相應輸出進行截取,以產生相應的經截取的輸出; 將該SAO濾波器操作、該雙邊濾波器操作和該CCSAO濾波器操作的該相應的經截取的輸出與來自一去塊濾波器操作的取樣相加在一起,以產生一第一總和;及 對該第一總和執行該聯合截取操作。
- 根據請求項16之裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為: 對該雙邊濾波器操作的一第三輸出進行截取,以產生該雙邊濾波器操作的一經截取的輸出; 將該雙邊濾波器操作的該經截取的輸出與該CCSAO濾波器操作的該第一輸出以及該SAO濾波器操作和一去塊濾波器操作的相應輸出相加在一起,以產生一第一總和;及 對該第一總和執行該聯合截取操作。
- 根據請求項16之裝置,其中為了對該CCSAO濾波器操作的該第一輸出和該複數個迴路濾波器操作中的該第二迴路濾波器操作的至少該第二輸出執行該聯合截取操作,該一或多個處理器亦被配置為: 對該雙邊濾波器操作的一第三輸出進行截取,以產生一第一經截取的輸出; 將該SAO濾波器操作和去塊濾波器操作的相應輸出相加以建立一第一總和; 對該第一總和進行截取以形成一第二經截取的輸出; 將該第一經截取的輸出、該第二經截取的輸出和該CCSAO濾波器操作的該第一輸出相加以建立一第二總和;及 對該第二總和執行該聯合截取操作。
- 根據請求項12之裝置,其中該裝置是一視訊轉碼器,並且其中為了重構該視訊資料以產生該經重構的視訊資料,該一或多個處理器亦被配置為: 在該視訊轉碼器的一重構迴路中重構該視訊資料,以產生該經重構的視訊資料。
- 根據請求項12之裝置,其中該裝置是一視訊解碼器,並且其中為了重構該視訊資料以產生該經重構的視訊資料,該一或多個處理器亦被配置為: 對該視訊資料進行解碼以產生該經重構的視訊資料。
- 根據請求項12之裝置,其中該裝置是一無線通訊設備。
- 一種儲存指令的非暫時性電腦可讀取儲存媒體,該等指令在被執行時使得被配置為對視訊資料進行解碼的一設備的一或多個處理器進行以下操作: 重構該視訊資料以產生經重構的視訊資料; 並行地對該經重構的視訊資料執行複數個迴路濾波器操作,其中該複數個迴路濾波器操作包括不是一雙邊濾波器操作或一取樣自我調整偏移(SAO)濾波器操作的一第一濾波器操作;及 對該第一濾波器操作的一第一輸出和該複數個迴路濾波器操作中的一第二迴路濾波器操作的一第二輸出執行聯合截取操作。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202163210438P | 2021-06-14 | 2021-06-14 | |
US63/210,438 | 2021-06-14 | ||
US17/806,192 US20220400292A1 (en) | 2021-06-14 | 2022-06-09 | Joint clipping operating for filters for video coding |
US17/806,192 | 2022-06-09 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW202308375A true TW202308375A (zh) | 2023-02-16 |
Family
ID=82361300
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW111121769A TW202308375A (zh) | 2021-06-14 | 2022-06-13 | 用於視訊譯碼的濾波器的聯合截取操作 |
Country Status (3)
Country | Link |
---|---|
EP (1) | EP4356613A1 (zh) |
TW (1) | TW202308375A (zh) |
WO (1) | WO2022266589A1 (zh) |
-
2022
- 2022-06-10 WO PCT/US2022/072862 patent/WO2022266589A1/en active Application Filing
- 2022-06-10 EP EP22736463.5A patent/EP4356613A1/en active Pending
- 2022-06-13 TW TW111121769A patent/TW202308375A/zh unknown
Also Published As
Publication number | Publication date |
---|---|
EP4356613A1 (en) | 2024-04-24 |
WO2022266589A1 (en) | 2022-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114258675A (zh) | 用于视频编码的跨分量自适应环路滤波 | |
US20220030232A1 (en) | Multiple adaptive loop filter sets | |
CN114223202A (zh) | 低频不可分离变换(lfnst)信令 | |
CN114424570B (zh) | 用于视频编解码的变换单元设计 | |
CN116325729A (zh) | 用于视频译码的基于神经网络的滤波过程中的激活函数设计 | |
TW202205865A (zh) | 解塊濾波器參數訊號傳遞 | |
CN114830657A (zh) | 视频译码中具有减少的归零的低频不可分离变换(lfnst) | |
TW202308377A (zh) | 視訊譯碼中的用信號通知的具有多個分類器的自我調整迴路濾波器 | |
JP2024514081A (ja) | ビデオコーディングのためのイントラモード依存多重変換選択 | |
TW202147855A (zh) | 用於視訊譯碼的自我調整縮放列表控制 | |
TW202308375A (zh) | 用於視訊譯碼的濾波器的聯合截取操作 | |
US20220400292A1 (en) | Joint clipping operating for filters for video coding | |
US20230300328A1 (en) | Adaptive loop filter with samples before deblocking filter and samples before sample adaptive offsets | |
CN117426097A (zh) | 用于视频译码的滤波器的联合截取操作 | |
TW202304201A (zh) | 使用重疊區塊運動補償、組合訊框間-訊框內預測及/或亮度映射和色度縮放的視訊譯碼 | |
TW202348030A (zh) | 用於視訊譯碼中的訊框間譯碼的多重變換選擇的靈活啟動 | |
TW202306388A (zh) | 用於視訊譯碼中的幾何分割模式的運動向量候選構造 | |
TW202315406A (zh) | 用於視訊譯碼的多條輔助線的候選列表 | |
TW202320548A (zh) | 用於高位元深度視訊譯碼的上下文譯碼語法元素的基於歷史的自我調整解釋 | |
WO2024147920A1 (en) | Adaptive video filter classifier methods | |
WO2024081862A1 (en) | Transforming video data using non-separable primary transforms | |
TW202241133A (zh) | 用於高位元深度視訊譯碼的瑞斯參數推導 | |
TW202241131A (zh) | 針對用於視訊譯碼的符號預測的上下文建模 | |
WO2024011113A1 (en) | Filtering in parallel with deblocking filtering in video coding | |
TW202348031A (zh) | 用於視訊譯碼的ccsao、雙邊濾波器和自我調整迴路濾波器的虛擬邊界處理 |