TW202147847A - 視訊譯碼中的參考圖片清單約束和訊號傳遞 - Google Patents

Abstract

揭示示例性技術和設備。一種用於對視訊資料進行譯碼的示例性設備包括：配置為儲存視訊資料的記憶體；及利用電路來實現並耦合到記憶體的一或多個處理器。該一或多個處理器被配置為：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片。基於該條目等於無參考圖片，該一或多個處理器被配置為決定與該條目相關聯的附加資訊。該一或多個處理器被配置為：基於該附加資訊來檢查針對該條目的約束，並根據該約束對當前圖片進行譯碼。

Description

視訊譯碼中的參考圖片清單約束和訊號傳遞

本專利申請案主張於2020年5月14日提出申請的美國臨時專利申請案第63/024,863號和2020年5月21日提出申請的美國臨時專利申請案第63/028,416號的優先權，故以引用方式將該兩份申請案的全部內容併入本文。

本案內容係關於視訊編碼和視訊解碼。

數位視訊能力可以併入到各種各樣的設備中，該等設備包括數位電視、數位直接廣播系統、無線廣播系統、個人數位助理（PDAs）、膝上型電腦或桌上型電腦、平板電腦、電子書閱讀器、數位相機、數位記錄設備、數位媒體播放機、視訊遊戲設備、視訊遊戲機、蜂巢或衛星無線電話、所謂的「智慧型電話」、視訊電話會議設備、視訊串流設備等等。數位視訊設備實現視訊譯碼技術，例如，由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分、高級視訊譯碼（AVC）、ITU-T H.265/高效率視訊譯碼（HEVC）所規定的標準、以及該等標準的擴展裡所描述的彼等技術。視訊設備可以藉由實現該等視訊譯碼技術，更高效地發送、接收、編碼、解碼及/或儲存數位視訊資訊。

視訊譯碼技術包括空間（訊框內）預測及/或時間（訊框間）預測以減少或消除視訊序列中固有的冗餘。對於基於區塊的視訊譯碼，可以將視訊切片（例如，視訊圖片或視訊圖片的一部分）劃分為視訊區區塊，視訊區塊亦可以稱為譯碼樹單元（CTUs）、譯碼單元（CUs）及/或譯碼節點。使用相對於同一圖片中相鄰區塊中的參考取樣的空間預測，對圖片的訊框內譯碼（I）切片中的視訊區塊進行編碼。圖片的訊框間譯碼（P或B）切片中的視訊區塊可以使用相對於同一圖片中相鄰區塊中的參考取樣的空間預測，或者使用相對於其他參考圖片中的參考取樣的時間預測。圖片可以稱為訊框，而參考圖片可以稱為參考訊框。

視訊譯碼標準和視訊譯碼標準草案可能需要檢查某些約束以確保與標準的一致性。但是，在一些實例中，需要檢查的資訊可能是不可用的。例如，與「無參考圖片」（例如，不可用的參考圖片）有關的資訊可能是不可用的。根據本案內容的技術，可以決定與無參考圖片相關聯的附加資訊，從而視訊編解碼器可以檢查約束。

通常，本案內容描述了用於視訊譯碼的技術。特定言之，本案內容描述了用於參考圖片清單約束和訊號傳遞的技術。

在一個實例中，一種方法包括：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於該附加資訊來檢查針對該條目的約束；及根據該約束，對該當前圖片進行譯碼。

在另一個實例中，一種設備包括被配置為儲存視訊資料的記憶體、以及利用電路來實現並耦合到該記憶體的一或多個處理器，該一或多個處理器被配置為：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於該附加資訊來檢查針對該條目的約束；及根據該約束，對該當前圖片進行譯碼。

在另一個實例中，一種非暫態電腦可讀取媒體儲存有指令，當該等指令被執行時，使一或多個處理器進行以下操作：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於該附加資訊來檢查針對該條目的約束；及根據該約束，對該當前圖片進行譯碼。

在另一個實例中，一種設備包括：用於判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片的構件；用於基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊的構件；用於基於該附加資訊來檢查針對該條目的約束的構件；及用於根據該約束，對該當前圖片進行譯碼的構件。

在附圖和下文的說明書中闡述了一或多個實例的細節。根據說明書、附圖以及申請專利範圍，其他特徵、物件和優點將變得顯而易見。

在一些草案視訊譯碼標準中，瞬時解碼器刷新（IDR）圖片是視訊解碼器可以用來開始對經譯碼視訊序列（CVS）進行解碼的圖片。在一些實例中，即使視訊解碼器可能不需要參考圖片清單來對IDR圖片進行解碼，參考圖片清單亦可以與IDR圖片相關聯。在一些實現中，出於位元串流一致性目的，視訊譯碼器可以檢查與參考圖片相關聯的約束。位元串流一致性可以是任何視訊譯碼標準的組成部分，以使一個製造商的視訊編碼器可以與其他製造商的視訊解碼器無瑕疵地運行。

IDR圖片參考圖片清單中的參考圖片可能是「無參考圖片」或者是不可用的。這是因為當視訊解碼器開始對IDR圖片進行解碼時，解碼圖片緩衝區中可能沒有圖片，因為IDR圖片可能是視訊解碼器在CVS中解碼的第一張圖片。如此，在一些實例中，可能無法檢查對不可用參考圖片的約束。

根據本案內容的技術，視訊譯碼器可以決定與不可用參考圖片相關聯的附加資訊，基於該另外資訊來檢查約束，並且對當前圖片進行譯碼。用此方式，視訊解碼器可以檢查對不可用參考圖片的約束，以確保位元串流一致性。

圖1是圖示可以執行本案內容的技術的示例性視訊編碼和解碼系統100的方塊圖。本案內容的技術通常針對於視訊資料的譯碼（編碼及/或解碼）。通常，視訊資料包括用於處理視訊的任何資料。因此，視訊資料可以包括原始的、未編碼的視訊、編碼的視訊、解碼的（例如，重構的）視訊以及視訊中繼資料（例如，訊號傳遞資料）。

如圖1中所示，在該實例中，系統100包括源設備102，其提供要由目的地設備116進行解碼和顯示的經編碼的視訊資料。特定言之，源設備102經由電腦可讀取媒體110，將視訊資料提供給目的地設備116。源設備102和目的地設備116可以包括廣泛的設備中的任何設備，其包括桌上型電腦、筆記型（例如，膝上型）電腦、行動設備、平板電腦、機上盒、電話手持設備（例如，智慧手機）、電視、相機、顯示設備、數位媒體播放機、視訊遊戲機、視訊串流設備、廣播接收器設備等等。在一些情況下，源設備102和目的地設備116可以被配備用於無線通訊，因此可以稱為無線通訊設備。

在圖1的實例中，源設備102包括視訊源104、記憶體106、視訊編碼器200和輸出介面108。目的地設備116包括輸入介面122、視訊解碼器300、記憶體120和顯示設備118。根據本案內容，源設備102的視訊編碼器200和目的地設備116的視訊解碼器300可以被配置為應用參考圖片清單約束和訊號傳遞的技術。因此，源設備102表示視訊編碼設備的實例，而目的地設備116表示視訊解碼設備的實例。在其他實例中，源設備和目的地設備可以包括其他元件或佈置。例如，源設備102可以從諸如外部相機之類的外部視訊源接收視訊資料。同樣，目的地設備116可以與外部顯示設備對接，而不是包括整合顯示設備。

如圖1中所示的系統100僅僅是一個實例。通常，任何數位視訊編碼及/或解碼設備皆可以執行用於參考圖片清單約束和訊號傳遞的技術。源設備102和目的地設備116僅僅是此種譯碼設備的實例，其中源設備102產生用於向目的地設備116傳輸的經譯碼的視訊資料。本案內容將「譯碼」設備稱為執行資料的譯碼（編碼及/或解碼）的設備。因此，視訊編碼器200和視訊解碼器300分別表示譯碼設備（特定言之，視訊編碼器和視訊解碼器）的實例。在一些實例中，源設備102和目的地設備116可以以基本上對稱的方式操作，使得源設備102和目的地設備116中的每一個包括視訊編碼和解碼用元件。因此，系統100可以支援源設備102和目的地設備116之間的單向或雙向視訊傳輸，例如，用於視訊串流傳輸、視訊重播、視訊廣播或視訊電話。

通常，視訊源104代表視訊資料（亦即，原始的、未編碼的視訊資料）的源，並將視訊資料的圖片的連續序列（亦稱為「訊框」）提供給視訊編碼器200，其中視訊編碼器200對圖片的資料進行編碼。源設備102的視訊源104可以包括視訊擷取設備（例如，攝像機）、包含先前擷取的原始視訊的視訊檔案及/或用於從視訊內容提供者接收視訊的視訊饋送介面。作為另一替代方案，視訊源104可以產生基於電腦圖形的資料作為源視訊，或者即時視訊、存檔視訊和電腦產生的視訊的組合。在每種情況下，視訊編碼器200對擷取的、預擷取的或電腦產生的視訊資料進行編碼。視訊編碼器200可以將圖像從接收到的順序（有時稱為「顯示順序」）重新排列為用於譯碼的譯碼順序。視訊編碼器200可以產生包括有編碼的視訊資料的位元串流。隨後，源設備102可以經由輸出介面108將編碼的視訊資料輸出到電腦可讀取媒體110上，以經由例如目的地設備116的輸入介面122進行接收及/或取得。

源設備102的記憶體106和目的地設備116的記憶體120代表通用記憶體。在一些實例中，記憶體106、120可以儲存原始視訊資料，例如，來自視訊源104的原始視訊和來自視訊解碼器300的原始的經解碼的視訊資料。另外地或替代地，記憶體106、120可以儲存可由例如視訊編碼器200和視訊解碼器300分別執行的軟體指令。儘管在該實例中，將記憶體106和記憶體120與視訊編碼器200和視訊解碼器300分開地示出，但應當理解，視訊編碼器200和視訊解碼器300亦可以包括內部記憶體，以實現功能上相似或等效的目的。此外，記憶體106、120可以儲存編碼的視訊資料（例如，從視訊編碼器200輸出並輸入到視訊解碼器300）。在一些實例中，可以將記憶體106、120的一部分分配為一或多個視訊緩衝器，例如，用於儲存原始的、解碼及/或編碼的視訊資料。

電腦可讀取媒體110可以代表能夠將編碼的視訊資料從源設備102傳輸到目的地設備116的任何類型的媒體或設備。在一個實例中，電腦可讀取媒體110代表用於使源設備102能夠即時地例如經由射頻網路或基於電腦的網路將編碼的視訊資料直接發送到目的地設備116的通訊媒體。輸出介面108可以根據諸如無線通訊協定之類的通訊標準，對包括編碼的視訊資料的傳輸信號進行解調，並且輸入介面122可以對接收到的傳輸信號進行解調。通訊媒體可以包括任何無線或有線通訊媒體，例如射頻（RF）頻譜或一或多條實體傳輸線。通訊媒體可以形成諸如區域網路、廣域網路或全球網路（例如，網際網路）的基於封包的網路的一部分。通訊媒體可以包括路由器、交換機、基地台或者促進從源設備102到目的地設備116的通訊的任何其他裝備。

在一些實例中，源設備102可以將編碼的資料從輸出介面108輸出到儲存設備112。類似地，目的地設備116可以經由輸入介面122，從儲存設備112存取編碼的資料。儲存設備112可以包括多種分散式或本端存取的資料儲存媒體（例如，硬碟、藍光光碟、DVD、CD-ROM、快閃記憶體、揮發性或非揮發性記憶體）或者用於儲存編碼的視訊資料的任何其他適當的數位儲存媒體中的任何一種。

在一些實例中，源設備102可以將編碼的視訊資料輸出到檔案伺服器114或者可以儲存源設備102所產生的編碼的視訊資料的另一個中間儲存設備。目的地設備116可以經由串流傳輸或下載，從檔案伺服器114存取所儲存的視訊資料。檔案伺服器114可以是能夠儲存編碼的視訊資料並將該編碼的視訊資料發送到目的地設備116的任何類型的伺服器設備。檔案伺服器114可以代表網路伺服器（例如，用於網站）、檔案傳輸通訊協定（FTP）伺服器、內容交付網路設備，或網路附加儲存（NAS）設備。目的地設備116可以經由包括網際網路連接的任何標準資料連接，從檔案伺服器114存取編碼的視訊資料。這可以包括適合於存取已儲存在檔案伺服器114上的編碼視訊資料的無線通道（例如，Wi-Fi連接）、有線連接（例如，數位用戶線（DSL）、電纜資料機等等）或二者的組合。檔案伺服器114和輸入介面122可以被配置為根據串流傳輸協定、下載傳輸協定或者其組合進行操作。

輸出介面108和輸入介面122可以代表無線發射器/接收器、數據機、有線網路元件（例如，乙太網路卡）、根據各種IEEE 802.11標準中的任何一種進行操作的無線通訊元件，或者其他實體元件。在其中輸出介面108和輸入介面122包括無線元件的實例中，輸出介面108和輸入介面122可以被配置為根據諸如4G、4G-LTE（長期進化）、高級LTE、5G等等之類的蜂巢通訊標準，來傳輸諸如編碼的視訊資料之類的資料。在輸出介面108包括無線發射器的一些實例中，輸出介面108和輸入介面122可以被配置為根據其他無線標準（例如，IEEE 802.11規範、IEEE 802.15規範（例如，ZigBee™）、Bluetooth™標準等等），來傳輸諸如編碼的視訊資料之類的資料。在一些實例中，源設備102及/或目的地設備116可以包括各自的片上系統（SoC）設備。例如，源設備102可以包括SoC設備以執行歸屬於視訊編碼器200及/或輸出介面108的功能，而目的地設備116可以包括SoC設備以執行歸屬於視訊解碼器300及/或輸入介面122的功能。

本案內容的技術可以應用於支援各種多媒體應用中的任何一種的視訊譯碼，該等多媒體應用諸如為空中電視廣播、有線電視傳輸、衛星電視傳輸、網際網路串流視訊傳輸（如，基於HTTP的動態可適性串流媒體（DASH）、編碼到資料儲存媒體上的數位視訊），對儲存在資料儲存媒體上的數位視訊的解碼，或者其他應用。

目的地設備116的輸入介面122從電腦可讀取媒體110（例如，通訊媒體、儲存設備112、檔案伺服器114等等）接收編碼的視訊位元串流。編碼的視訊位元串流可以包括由視訊編碼器200定義的而且由視訊解碼器300使用的訊號傳遞資訊，例如，具有描述視訊區塊或其他譯碼單元（例如，切片、圖片、圖片群組、序列等等）的特性和處理的值的語法元素。顯示設備118向使用者顯示經解碼的視訊資料的解碼圖片。顯示設備118可以代表多種顯示設備中的任何一種，例如液晶顯示器（LCD）、電漿顯示器、有機發光二極體（OLED）顯示器，或者另一種類型的顯示設備。

儘管沒有在圖1中示出，但在一些實例中，視訊編碼器200和視訊解碼器300可以分別與音訊編碼器及/或音訊解碼器整合在一起，並且可以包括適當的MUX-DEMUX單元或者其他硬體及/或軟體，以處理包括共用資料串流中的音訊和視訊兩者的多工串流。若適用的話，MUX-DEMUX單元可以符合ITU H.223多工器協定或其他協定（例如，使用者資料包通訊協定（UDP））。

視訊編碼器200和視訊解碼器300各自可以實現為多種適當的編碼器及/或解碼器電路中的任何一種，例如一或多個微處理器、數位訊號處理器（DSPs）、特殊應用積體電路（ASICs）、現場可程式設計閘陣列（FPGAs）、離散邏輯、軟體、硬體、韌體或者其任意組合。當部分地以軟體實現該等技術時，設備可以將用於軟體的指令儲存在適當的非暫態電腦可讀取媒體中，並使用一或多個處理器以硬體方式執行該等指令以執行本案內容的技術。視訊編碼器200和視訊解碼器300中的每一個可以被包括在一或多個編碼器或解碼器中，編碼器或解碼器中的任何一個可以整合為相應設備中的組合編碼器/解碼器（CODEC）的一部分。包括視訊編碼器200及/或視訊解碼器300的設備可以包括積體電路、微處理器及/或無線通訊設備（例如，蜂巢式電話）。

視訊編碼器200和視訊解碼器300可以根據諸如ITU-T H.265之類的視訊譯碼標準（亦稱為高效視訊譯碼（HEVC））或者其擴展（例如，多視圖及/或可擴展的視訊編碼擴展）進行操作。或者，視訊編解碼器200和視訊解碼器300可以根據諸如ITU-T H.266（亦稱為通用視訊譯碼（VVC））之類的其他專有或工業標準來操作。在以下文件中描述了VVC標準的近期草案：Bross, et al. 「Versatile Video Coding (Draft 9),」 ITU-T SG 16 WP 3和 ISO/IEC JTC 1/SC 29/WG 11的聯合視訊專家組 (JVET), 18th Meeting：經由電視電話會議方式, 15–24 Apr. 2020, JVET-R2001-v8（以下簡稱「VVC草案9」）。然而，本案內容的技術並不限於任何特定的譯碼標準。

通常，視訊編碼器200和視訊解碼器300可以執行圖片的基於區塊的譯碼。術語「區塊」通常是指包括要處理的資料的結構（例如，在編碼及/或解碼程序中使用的編碼、解碼或其他方式）。例如，一個區塊可以包括亮度及/或色度資料的取樣的二維矩陣。通常，視訊編碼器200和視訊解碼器300可以對以YUV（例如，Y、Cb、Cr）格式表示的視訊資料進行譯碼。亦即，不是對圖片的取樣的紅色、綠色和藍色（RGB）資料進行譯碼，而是視訊編碼器200和視訊解碼器300可以對亮度和色度分量進行譯碼，其中色度分量可以包括紅色和藍色色度分量。在一些實例中，視訊編碼器200在編碼之前，將接收到的RGB格式的資料轉換成YUV表示，而視訊解碼器300將YUV表示轉換成RGB格式。或者，預處理和後處理單元（未圖示）可以執行該等轉換。

本案內容通常可以涉及圖片的譯碼（例如，編碼和解碼），以包括對圖片的資料進行編碼或解碼的程序。類似地，本案內容可以涉及對圖片的區塊的譯碼，以包括對該等區塊的資料進行編碼或解碼的程序（例如，預測及/或殘餘譯碼）。編碼的視訊位元串流通常包括用於語法元素的一系列值，其中該等語法元素表示譯碼決策（例如，譯碼模式）以及將圖片劃分成區塊。因此，對圖片或區塊進行譯碼的提及，通常應當被理解為用於形成該圖片或區塊的語法元素的譯碼值。

HEVC定義了各種區塊，其包括譯碼單元（CUs）、預測單元（PUs）和變換單元（TUs）。根據HEVC，視訊譯碼器（例如，視訊編碼器200）根據四元樹結構，將譯碼樹單元（CTU）劃分為CU。亦即，視訊譯碼器將CTU和CU劃分為四個相等的、不重疊的正方形，並且四元樹的每個節點具有零個或四個子節點。沒有子節點的節點可以稱為「葉節點」，並且此種葉節點的CU可以包括一或多個PU及/或一或多個TU。視訊譯碼器可以進一步分割PU和TU。例如，在HEVC中，殘餘四元樹（RQT）表示TU的劃分。在HEVC中，PU表示訊框間預測資料，而TU表示殘差資料。訊框內預測的CU包括訊框內預測資訊（例如，訊框內模式指示）。

再舉一個實例，視訊編解碼器200和視訊解碼器300可以被配置為根據VVC進行操作。根據VVC，視訊譯碼器（例如，視訊編碼器200）將圖片劃分為複數個譯碼樹單元（CTUs）。視訊編碼器200可以根據諸如四元樹-二元樹（QTBT）結構或多類型樹（MTT）結構之類的樹結構，對CTU進行劃分。QTBT結構消除了多個分區類型的概念，例如HEVC的CU、PU和TU之間的分隔。QTBT結構包括兩個層級：根據四元樹劃分而劃分的第一層級、根據二元樹劃分而劃分的第二層級。QTBT結構的根節點對應於CTU。二元樹的葉節點對應於譯碼單元（CUs）。

在MTT劃分結構中，可以使用四元樹（QT）分割、二元樹（BT）分割和一或多個類型的三元樹（TT）（亦稱為三元型樹（TT））分割，對區塊進行劃分。三元樹或三元型樹分割是將一個區塊分割成三個子區塊的劃分。在一些實例中，三元樹或三元型樹分割將一個區塊劃分為三個子區塊，而不穿過中心來劃分原始區塊。MTT中的劃分類型（例如，QT、BT和TT）可以是對稱的，亦可以是不對稱的。

在一些實例中，視訊編碼器200和視訊解碼器300可以使用單個QTBT或MTT結構來表示亮度和色度分量中的每一個，而在其他實例中，視訊編碼器200和視訊解碼器300可以使用兩個或更多QTBT或MTT結構，例如一個QTBT/MTT結構用於亮度分量，另一個QTBT/MTT結構用於兩個色度分量（或者兩個QTBT/MTT結構用於相應的色度分量）。

視訊編碼器200和視訊解碼器300可以被配置為使用每個HEVC的四元樹劃分、QTBT劃分、MTT劃分或其他劃分結構。為了便於說明起見，相對於QTBT劃分提供了本案內容的技術的描述。但是，應當理解的是，本案內容的技術亦可以應用於被配置為使用四元樹劃分或其他類型的劃分的視訊譯碼器。

在一些實例中，CTU包括亮度取樣的譯碼樹區塊（CTB）、具有三個取樣陣列的圖片的色度取樣的兩個對應的CTB，或單色圖片或者使用三個獨立的色彩平面和語法結構（用於對取樣進行譯碼）進行譯碼的圖片的取樣的CTB。CTB可以是某個N值的NxN取樣區塊，使得組成元素到CTB的分割是一種分區。組成元素是來自以4:2:0、4:2:2或4:4:4的顏色格式組成圖片的三個陣列（亮度和兩個色度）之一的陣列或單個取樣，或者是以單色格式組成圖片的陣列中的該陣列或單個取樣。在一些實例中，譯碼區塊是針對一些M和N值的取樣的MxN取樣區塊，使得CTB到譯碼區塊的分割是一種分區。

可以以各種方式，在圖片中對區塊（例如，CTU或CU）進行群組。舉一個實例，磚塊（brick）可以代表圖片中特定瓦片（tile）內的某個矩形區域的CTU行。瓦片可以是圖片中的特定瓦片列和特定瓦片行內的CTU的矩形區域。瓦片列是指高度等於圖片的高度、並且具有（例如，諸如在圖片參數集中）由語法元素指定的寬度的矩形區域的CTU。瓦片行是指具有由語法元素指定的高度（例如，諸如在圖片參數集中提供的）、並且寬度等於圖片的寬度的矩形區域的CTU。

在一些實例中，可將一個瓦片劃分成多個磚塊，每個磚塊可以包括該瓦片內的一或多個CTU行。沒有被劃分為多​​個磚塊的瓦片，亦可以稱為磚塊。但是，作為瓦片的一個真實子集的磚塊不能稱為瓦片。

亦可以將圖片中的磚塊排列在切片中。切片可以是圖片中能夠專門地被包含在單個網路抽象層（NAL）單元中的整數數量磚塊。在一些實例中，一個切片包括多個完整瓦片，或者僅包括一個瓦片的連續序列的磚塊。

本案內容可以互換地使用「NxN」和「N乘N」來代表區塊（例如，CU或其他視訊區塊）的以垂直和水平維度的取樣尺寸，例如16x16取樣或16乘16取樣。通常，一個16x16 CU在垂直方向上將有16個取樣（y = 16），在水平方向上將有16個取樣（x = 16）。同樣地，一個NxN CU通常在垂直方向上具有N個取樣，在水平方向上具有N個取樣，其中N表示非負整數值。可以按行和列來排列CU中的取樣。此外，CU在水平方向上不必具有與垂直方向上相同數量的取樣。舉例而言，CU可以包含NxM個取樣，其中M不一定等於N。

視訊編碼器200對用於表示預測及/或殘差資訊以及其他資訊的CU的視訊資料進行編碼。預測資訊指示將如何預測CU，以便形成用於該CU的預測區塊。殘差資訊通常表示在編碼之前的CU的取樣與預測區塊之間的逐取樣差異。

為了預測CU，視訊編碼器200通常可以經由訊框間預測或訊框內預測來形成用於CU的預測區塊。訊框間預測通常代表從先前譯碼的圖片的資料中預測CU，而訊框內預測通常代表從同一圖片的先前譯碼的資料中預測CU。為了執行訊框間預測，視訊編碼器200可以使用一或多個運動向量來產生預測區塊。視訊編碼器200通常可以例如在CU與參考區塊之間的差異方面，執行運動搜尋以識別與CU緊密匹配的參考區塊。視訊編碼器200可以使用絕對差之和（SAD）、平方差之和（SSD）、平均絕對差（MAD）、均方差（MSD）或其他此類差值計算來計算差值度量，以決定參考區塊是否緊密匹配當前CU。在一些實例中，視訊編碼器200可以使用單向預測或雙向預測來預測當前CU。

VVC的一些實例亦提供仿射運動補償模式，其可以被認為是訊框間預測模式。在仿射運動補償模式中，視訊編碼器200可以決定表示非平移運動的兩個或更多運動向量，例如縮小或放大、旋轉、透視運動或其他不規則運動類型。

為了執行訊框內預測，​​視訊編碼器200可以選擇訊框內預測模式來產生預測區塊。VVC的某些實例提供了67種訊框內預測模式，其包括各種定向模式以及平面模式和DC模式。通常，視訊編碼器200選擇訊框內預測模式，該訊框內預測模式描述了相對於當前區塊（例如，CU的區塊）的相鄰取樣，從相鄰取樣中預測當前區塊的取樣。假設視訊編碼器200以光柵掃瞄順序（從左到右、從上到下）對CTU和CU進行譯碼，則該等取樣通常可以在與當前區塊相同的圖片中的當前區塊的上方、左上方或左側。

視訊編碼器200對表示當前區塊的預測模式的資料進行編碼。舉例而言，對於訊框間預測模式，視訊編碼器200可以對表示使用各種可用訊框間預測模式中的哪一個模式的資料、以及對應模式的運動資訊進行編碼。對於單向或雙向訊框間預測，例如，視訊編碼器200可以使用高級運動向量預測（AMVP）或合併模式，來對運動向量進行編碼。視訊編碼器200可以使用類似模式來對仿射運動補償模式的運動向量進行編碼。

在諸如區塊的訊框內預測或訊框間預測之類的預測之後，視訊編碼器200可以計算該區塊的殘差資料。殘差資料（例如，殘差區塊）表示該區塊與使用相應預測模式形成的針對該區塊的預測區塊之間的逐取樣差異。視訊編碼器200可以向殘差區塊應用一或多個變換，以在變換域而非取樣域中產生經變換的資料。舉例而言，視訊編碼器200可以向殘差視訊資料應用離散餘弦變換（DCT）、整數變換、小波變換或概念上類似的變換。另外，視訊編碼器200可以在第一變換之後應用次級變換，例如依賴於模式的不可分離次級變換（MDNSST）、依賴於信號的變換、Karhunen-Loeve變換（KLT）等等。視訊編碼器200在應用該一或多個變換之後，產生變換係數。

如前述，在進行任何變換以產生變換係數之後，視訊編碼器200可以執行變換係數的量化。量化通常代表此種程序：對變換係數進行量化，以可能地減少用於表示該等變換係數的資料量，從而提供進一步壓縮。藉由執行量化程序，視訊編碼器200可以減小與一些或所有該等變換係數相關聯的位元深度。例如，視訊編碼器200可以在量化期間，將n 位元值捨入為m 位元值，其中n 大於m 。在一些實例中，為了執行量化，視訊編碼器200可以執行待量化的值的按位元右移。

在量化之後，視訊編碼器200可以掃瞄變換係數，從而根據包括量化的變換係數的二維矩陣產生一維向量。可以將該掃瞄設計為將較高能量（因此頻率較低）的變換係數放在向量的前面，並將較低能量（因此頻率較高）的變換係數放在向量的後面。在一些實例中，視訊編碼器200可以利用預定義的掃瞄順序來掃瞄經量化的變換係數，以產生經序列化的向量，隨後對向量的經量化的變換係數進行熵編碼。在其他實例中，視訊編碼器200可以執行可適性掃瞄。在掃瞄量化的變換係數以形成一維向量之後，視訊編碼器200可以例如根據上下文可適性二元算術譯碼（CABAC）對一維向量進行熵編碼。視訊編碼器200亦可以對語法元素的值進行熵編碼，該語法元素描述與編碼的視訊資料相關聯的中繼資料，以供視訊解碼器300在對視訊資料進行解碼時使用。

為了執行CABAC，視訊編碼器200可以將上下文模型內的上下文指派給要發送的符號。例如，該上下文可以涉及符號的相鄰值是否為零值。機率決定可以基於指派給符號的上下文。

視訊編碼器200進一步可以在例如圖片標頭、區塊標頭、切片標頭或其他語法資料（例如，序列參數集（SPS）、圖片參數集（PPS）或視訊參數集（VPS））中，產生針對視訊解碼器300的語法資料（例如，基於區塊的語法資料、基於圖片的語法資料、以及基於序列的語法資料）。視訊解碼器300可以類似地對此類語法資料進行解碼，以決定如何解碼對應的視訊資料。

用此方式，視訊編碼器200可以產生包括編碼的視訊資料的位元串流，例如，用於描述將圖片劃分成區塊（例如，CU）的語法元素、以及該等區塊的預測及/或殘差資訊的語法元素。最終，視訊解碼器300可以接收位元串流，並對編碼的視訊資料進行解碼。

通常，視訊解碼器300執行與視訊編碼器200所執行的程序相互的程序，以解碼位元串流的編碼的視訊資料。舉例而言，視訊解碼器300可以以與視訊編碼器200的CABAC編碼程序實質上相似的方式（儘管相互），使用CABAC，對位元串流的語法元素的值進行解碼。語法元素可以定義劃分資訊，以用於將圖片劃分為CTU、以及根據相應的分割結構（例如，QTBT結構）對每個CTU進行劃分，以定義CTU的CU。該等語法元素可以進一步規定用於視訊資料的區塊（例如，CU）的預測和殘差資訊。

可以經由例如量化的變換係數來表示殘差資訊。視訊解碼器300可以對區塊的量化的變換係數進行逆量化和逆變換，以再現該區塊的殘差區塊。視訊解碼器300使用訊號傳遞的預測模式（訊框內或訊框間預測）和相關的預測資訊（例如，用於訊框間預測的運動資訊）來形成用於該區塊的預測區塊。隨後，視訊解碼器300可以組合預測區塊和殘差區塊（在逐個取樣的基礎上）以再現原始區塊。視訊解碼器300可以執行其他的處理，例如執行解區塊處理以減少沿區塊的邊界的視覺偽像。

根據本案內容的技術，一種方法包括：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於附加資訊來檢查針對該條目的約束；並根據約束，對當前圖片進行譯碼。

根據本案內容的技術，一種設備包括被配置為儲存視訊資料的記憶體、以及利用電路來實現並耦合到記憶體的一或多個處理器，該一或多個處理器被配置為：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於附加資訊來檢查針對該條目的約束；並根據約束，對當前圖片進行解碼。

根據本案內容的技術，一種非暫態電腦可讀取媒體儲存有指令，當該等指令被執行時，使一或多個處理器進行以下操作：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於附加資訊來檢查針對該條目的約束；並根據約束，對當前圖片進行譯碼。

根據本案內容的技術，一種設備包括：用於判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片的構件；用於基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊的構件；用於基於附加資訊來檢查針對該條目的約束的構件；及用於根據約束，對當前圖片進行譯碼的構件。

根據本案內容的技術，一種方法包括：判斷包含當前圖片的層是否為從屬層；基於包含當前圖片的層為從屬層，訊號傳遞或解析參考圖片清單；及基於參考圖片清單，對視訊資料進行譯碼。

根據本案內容的技術，一種方法包括：判斷是否針對瞬時解碼器刷新（IDR）切片賦能​​層間預測；基於賦能層間預測，訊號傳遞或解析參考圖片清單；及基於參考圖片清單，對視訊資料進行譯碼。

根據本案內容的技術，一種方法包括：判斷是否針對切片賦能層間預測；判斷該切片是否為IDR切片；基於賦能層間預測，並且該切片為IDR切片，決定該切片為I切片；及基於I切片對視訊資料進行譯碼。

根據本案內容的技術，一種方法包括：判斷是否在針對IDR切片的圖片標頭中訊號傳遞了參考圖片清單；判斷是否存在該IDR切片不具有參考圖片清單訊號傳遞的指示；基於訊號傳遞了參考圖片清單、不存在該IDR切片沒有參考圖片清單訊號傳遞的指示，或者兩者，將一或多個參考圖片添加到為空的參考圖片清單中；及基於參考圖片清單，對視訊資料進行譯碼。

根據本案內容的技術，一種方法包括：判斷參考圖片清單中的條目是否等於無參考圖片；基於該條目不等於無參考圖片，避免至少一項動作；及基於參考圖片清單，對視訊資料進行譯碼。

根據本案內容的技術，一種方法包括：判斷是否需要資訊來檢查約束或者對視訊資料進行解碼；基於需要資訊來檢查約束或者對視訊資料進行解碼，將該資訊添加到圖片中；及基於該資訊對視訊資料進行譯碼。

根據本案內容的技術，一種方法包括：判斷圖片是否等於無參考圖片；基於圖片等於無參考圖片，為該圖片產生層間參考圖片；及基於層間參考圖片，對視訊資料進行解碼。

根據本案內容的技術，一種方法包括：判斷IDR圖片是否具有參考圖片清單訊號傳遞；判斷該IDR圖片是否具有不可用的參考圖片；基於該IDR圖片具有參考圖片清單訊號傳遞並且該IDR圖片具有不可用的參考圖片，產生不可用的參考圖片；及基於所產生的不可用參考圖片，對視訊資料進行譯碼。

根據本案內容的技術，一種方法包括：決定用於第一切片的第一參考圖片清單，第一參考圖片清單包括複數個條目，其中該等條目中的至少一個條目是層間參考圖片；決定用於第二切片的第二參考圖片清單，第二參考圖片清單包括第一參考圖片清單中除了該至少一個層間參考圖片之外的複數個條目；及基於第一參考圖片清單和第二參考圖片清單，對視訊資料進行譯碼。

根據本案內容的技術，一種方法包括：判斷是否將當前圖片的子圖片視作為圖片；基於該子圖片未被視為圖片，使用與參考圖片具有不同的子圖片佈局的當前圖片，對視訊資料進行譯碼。

根據本案內容的技術，一種設備包括被配置為儲存視訊資料的記憶體、以及利用電路來實現並耦合到記憶體的一或多個處理器，該一或多個處理器被配置為執行本案內容的任何技術。

根據本案內容的技術，一種設備包括：用於執行本案內容的任何技術的一或多個構件。

根據本案內容的技術，一種電腦可讀取儲存媒體編碼有指令，當該等指令被執行時，使可程式設計處理器執行本案內容的任何技術。

本案內容通常涉及「訊號傳遞」某些資訊（例如，語法元素）。術語「訊號傳遞」通常可以代表傳送用於語法元素的值及/或用於對編碼的視訊資料進行解碼的其他資料。亦即，視訊編碼器200可以在位元串流中訊號傳遞用於語法元素的值。通常，訊號傳遞是指在位元串流中產生值。如前述，源設備102可以基本即時地或者不即時地，將位元串流傳輸到目的地設備116，例如在將語法元素儲存到儲存設備112以便稍後由目的地設備116取得時，可能發生此種情形。

圖2A和圖2B是圖示示例性四元樹二元樹（QTBT）結構130以及對應的譯碼樹單元（CTU）132的概念圖。實線表示四元樹分離，而虛線表示二元樹分離。在二元樹的每個分離（亦即，非葉）節點中，訊號傳遞一個標誌以指示使用哪種分離類型（亦即，水平或垂直），在該實例中，0表示水平分離，而1表示垂直分離。對於四元樹分離，由於四元樹節點將一個區塊水平和垂直分離為大小相等的4個子區塊，因此無需指示分離類型。因此，視訊編碼器200可以對QTBT結構130的區域樹層級（亦即，實線）的語法元素（例如，分離資訊）和QTBT結構130的預測樹層級（亦即，虛線）的語法元素（例如，分離資訊）進行編碼，並且視訊解碼器300可以對其進行解碼。視訊編碼器200可以對QTBT結構130的終端葉節點表示的CU的視訊資料（例如，預測和變換資料）進行編碼，並且視訊解碼器300可以對其進行解碼。

一般而言，圖2B的CTU 132可以與規定區塊的大小的參數相關聯，區塊的大小與第一層級和第二層級的QTBT結構130的節點相對應。該等參數可以包括CTU大小（其以取樣來代表CTU 132的大小）、最小四元樹大小（MinQTSize，其代表最小允許的四元樹葉節點大小）、最大二元樹大小（MaxBTSize，其代表最大允許二元樹根節點大小）、最大二元樹深度（MaxBTDepth，其代表最大允許二元樹深度）和最小二元樹大小（MinBTSize，其代表最小允許二元樹蔓葉線節點大小）。

對應於CTU的QTBT結構的根節點可以在QTBT結構的第一層級具有四個子節點，可以根據四元樹劃分來劃分每個子​​節點。亦即，第一層級的節點是葉節點（沒有子節點）或者具有四個子節點。QTBT結構130的實例表示此種節點，例如包括具有用於分支的實線的父節點和子節點。若第一層級的節點不大於最大允許的二元樹根節點大小（MaxBTSize），則可以經由相應的二元樹進一步對該等節點進行劃分。可以反覆運算一個節點的二元樹分離，直到分離產生的節點達到最小允許的二元樹葉節點大小（MinBTSize）或最大允許的二元樹深度（MaxBTDepth）為止。QTBT結構130的實例將此種節點表示為具有用於分支的虛線。二元樹葉節點稱為解碼單元（CU），其用於預測（例如，訊框內或訊框間預測）和變換，而無需任何進一步的劃分。如前述，CU亦可以稱為「視訊區塊」或「區塊」。

在QTBT劃分結構的一個實例中，將CTU大小設置為128x128（亮度取樣和兩個相應的64x64色度取樣），將MinQTSize設置為16x16，將MaxBTSize設置為64x64，將MinBTSize（對於寬度和高度二者）設置為4，將MaxBTDepth設置為4。首先，對CTU應用四元樹劃分以產生四元樹葉節點。四元樹葉節點的大小可以從16x16（亦即，MinQTSize）到128x128（亦即，CTU大小）。若四元樹葉節點為128x128，則由於該大小超過MaxBTSize（亦即，在該實例中為64x64），因此不會經由二元樹進一步分離葉四元樹節點。否則，將經由二元樹，對四元樹葉節點進一步劃分。因此，四元樹葉節點亦是二元樹的根節點，並且二元樹的深度為0。當二元樹的深度達到MaxBTDepth（在該實例中為4）時，不允許進一步分離。當二元樹節點的寬度等於MinBTSize（在該實例中為4）時，表示不允許進一步的垂直分離。類似地，高度等於MinBTSize的二元樹節點意味著該二元樹節點不允許進一步的水平分離。如前述，將二元樹的葉節點稱為CU，並且根據預測和變換對其進行進一步處理而無需進一步劃分。

圖3是圖示可以執行本案內容的技術的示例性視訊編碼器200的方塊圖。提供圖3以便於解釋的目的，故其不應被認為是對本案內容中廣泛例示和描述的技術的限制。為了便於說明起見，本案內容描述了根據VVC（在開發中的ITU-T H.266）和HEVC（ITU-T H.265）技術的視訊編碼器200。但是，被配置為實現其他視訊譯碼標準的視訊編碼設備可以執行本案內容的技術。

在圖3的實例中，視訊編碼器200包括視訊資料記憶體230、模式選擇單元202、殘差產生單元204、變換處理單元206、量化單元208、逆量化單元210、逆變換處理單元212、重構單元214、濾波單元216、解碼圖片緩衝器（DPB）218和熵編碼單元220。視訊資料記憶體230、模式選擇單元202、殘差產生單元204、變換處理單元206、量化單元208、逆量化單元210、逆變換處理單元212、重構單元214、濾波單元216、DPB 218和熵編碼單元220中的任何一個或全部可以在一或多個處理器中或者在處理電路中實現。例如，可以將視訊編解碼器200的單元實現成作為硬體電路的一部分，或者處理器的一部分的一或多個電路或邏輯元件、ASIC或FPGA。此外，視訊編碼器200可以包括另外的或替代的處理器或處理電路，以執行該等功能和其他功能。

視訊資料記憶體230可以儲存將由視訊編碼器200的元件編碼的視訊資料。視訊編碼器200可以從例如視訊源104（圖1）接收儲存在視訊資料記憶體230中的視訊資料。DPB 218可以充當參考圖片記憶體，該參考圖片記憶體儲存參考視訊資料，以供視訊編碼器200預測後續視訊資料時使用。視訊資料記憶體230和DPB 218可以由多種記憶體設備（例如，動態隨機存取記憶體（DRAM）（其包括同步DRAM（SDRAM））、磁阻RAM（MRAM）、電阻性RAM（RRAM）或其他類型的記憶體設備）中的任何一個形成。視訊資料記憶體230和DPB 218可以由相同的記憶體設備或不同的記憶體設備提供。在各個實例中，視訊資料記憶體230可以與視訊編碼器200的其他元件一起在晶片上，如圖所示，或者相對於彼等元件在晶片外。

在本案內容中，對視訊資料記憶體230的引用不應被解釋為限於視訊編解碼器200內部的記憶體（除非如此具體地描述），亦不應被解釋為限於視訊編碼器200之外的記憶體（除非如此具體地描述）。而是，對視訊資料記憶體230的引用應當被理解為儲存視訊資料的參考記憶體，其中視訊編碼器200接收該視訊資料（例如，要編碼的當前區塊的視訊資料）以進行編碼。圖1的記憶體106亦可以提供對來自視訊編碼器200的各個單元的輸出的臨時儲存。

圖示圖3的各個單元以幫助理解由視訊編碼器200執行的操作。該等單元可以實現為固定功能電路、可程式設計電路或者其組合。固定功能電路代表提供特定功能、並在可以執行的操作上預先設置的電路。可程式設計電路代表可以被程式設計以執行各種任務，並且在可以執行的操作中提供靈活功能的電路。例如，可程式設計電路可以執行使可程式設計電路以軟體或韌體的指令所定義的方式進行操作的軟體或韌體。固定功能電路可以執行軟體指令（例如，用於接收參數或輸出參數），但是固定功能電路執行的操作的類型通常是不可變的。在一些實例中，該等單元中的一或多個單元可以是不同的電路區塊（固定功能或可程式設計），並且在一些實例中，該等單元中的一或多個可以是積體電路。

視訊編碼器200可以包括由可程式設計電路形成的算數邏輯單元（ALUs）、基本功能單元（EFUs）、數位電路、類比電路及/或可程式設計核心。在使用由可程式設計電路執行的軟體來執行視訊編碼器200的操作的實例中，記憶體106（圖1）可以儲存視訊編碼器200接收並執行的軟體的指令（例如，目標代碼），或者視訊編碼器200中的另一個記憶體（未圖示）可以儲存此種指令。

視訊資料記憶體230被配置為儲存接收到的視訊資料。視訊編碼器200可以從視訊資料記憶體230取得視訊資料的圖片，並將視訊資料提供給殘差產生單元204和模式選擇單元202。視訊資料記憶體230中的視訊資料可以是將進行編碼的原始視訊資料。

模式選擇單元202包括運動估計單元222、運動補償單元224和訊框內預測單元226。模式選擇單元202可以包括其他功能單元，以根據其他預測模式來執行視訊預測。舉例而言，模式選擇單元202可以包括調色板單元、區塊內複製單元（其可以是運動估計單元222及/或運動補償單元224的一部分）、仿射單元、線性模型（LM）單元等等。

模式選擇單元202通常協調多個編碼通道，以測試編碼參數的組合以及針對此類組合的最終速率失真值。編碼參數可以包括：CTU到CU的劃分、用於CU的預測模式、用於CU的殘差資料的變換類型、用於CU的殘差資料的量化參數等等。模式選擇單元202可以最終選擇具有比其他測試的組合更好的速率失真值的編碼參數的組合。

視訊編碼器200可以將從視訊資料記憶體230取得的圖片劃分為一系列CTU，並將一或多個CTU封裝在切片中。模式選擇單元202可以根據樹結構（例如，上文所描述的HEVC的QTBT結構或四元樹結構）來劃分圖片的CTU。如前述，視訊編碼器200可以根據樹結構，藉由劃分CTU來形成一或多個CU。此種CU通常亦可以稱為「視訊區塊」或「區塊」。

通常，模式選擇單元202亦控制其元件（例如，運動估計單元222、運動補償單元224和訊框內預測單元226）以產生針對當前區塊（例如，當前CU，或者在HEVC中，PU和TU的重疊部分）的預測區塊。對於當前區塊的訊框間預測，運動估計單元222可以執行運動搜尋以識別一或多個參考圖片（例如，儲存在DPB 218中的一或多個先前譯碼的圖片）中的一或多個緊密匹配的參考區塊。特定言之，運動估計單元222可以例如根據絕對差之和（SAD）、平方差之和（SSD）、平均絕對差（MAD）、均方差（MSD）等等，來計算表示潛在參考區塊與當前區塊有多麼相似的值。運動估計單元222通常可以使用當前區塊與正考慮的參考區塊之間的逐取樣差異來執行該等計算。運動估計單元222可以識別具有由該等計算所產生的最小值的參考區塊，該參考區塊指示與當前區塊最緊密匹配的參考區塊。

在一些實例中，運動估計單元222可以對照約束來檢查參考圖片，例如以確保參考圖片通過約束（例如，參考圖片符合約束條件）。在一些實例中，運動估計單元222可以決定當前圖片的參考圖片等於無參考圖片。基於該條目等於無參考圖片，運動估計單元222可以決定與無參考圖片相關聯的附加資訊。運動估計單元222可以基於附加資訊，來檢查針對無參考圖片的約束。基於無參考圖片通過了約束，視訊編碼器200可以對當前圖片進行編碼，如關於圖3和圖6所進一步論述的。

運動估計單元222可以形成一或多個運動向量（MVs），該等MV定義參考圖片中的參考區塊相對於當前圖片中的當前區塊的位置。隨後，運動估計單元222可以將運動向量提供給運動補償單元224。例如，對於單向訊框間預測，運動估計單元222可以提供單個運動向量，而對於雙向訊框間預測，運動估計單元222可以提供兩個運動向量。隨後，運動補償單元224可以使用運動向量來產生預測區塊。例如，運動補償單元224可以使用運動向量來取得參考區塊的資料。再舉一個實例，若運動向量具有分數取樣精度，則運動補償單元224可以根據一或多個內插濾波器，對用於預測區塊的值進行內插。此外，對於雙向訊框間預測，運動補償單元224可以例如經由逐取樣平均或加權平均，來取得由相應的運動向量識別的兩個參考區塊的資料，並對取得的資料進行組合。

再舉一個實例，對於訊框內預測或訊框內預測解碼，訊框內預測單元226可以根據與當前區塊相鄰的取樣來產生預測區塊。例如，對於定向模式，訊框內預測單元226通常可以在數學上組合相鄰取樣的值，並在當前區塊上沿定義的方向填充該等計算的值以產生預測區塊。再舉一個實例，對於DC模式，訊框內預測單元226可以計算與當前區塊的相鄰取樣的平均值，並且產生預測區塊以包括針對預測區塊的每個取樣的該所得平均值。

模式選擇單元202將預測區塊提供給殘差產生單元204。殘差產生單元204從視訊資料記憶體230接收當前區塊的原始未編碼版本，並從模式選擇單元202接收預測區塊。殘差產生單元204計算當前區塊和預測區塊之間的逐取樣差異。所得的逐取樣差異定義了當前區塊的殘差區塊。在一些實例中，殘差產生單元204亦可以決定殘差區塊中的取樣值之間的差，以使用殘差差分脈衝碼調制（RDPCM）來產生殘差區塊。在一些實例中，可以使用執行二元減法的一或多個減法器電路，來形成殘差產生單元204。

在模式選擇單元202將CU劃分為PU的實例中，每一個PU可以與亮度預測單元和對應的色度預測單元相關聯。視訊編碼器200和視訊解碼器300可以支援具有各種大小的PU。如前述，CU的大小可以代表CU的亮度譯碼區塊的大小，而PU的大小可以代表PU的亮度預測單元的大小。假設特定CU的大小為2Nx2N，則視訊編碼器200可以支援2Nx2N或NxN的PU大小來用於訊框內預測，並支援2Nx2N、2NxN、Nx2N、NxN等等的對稱PU大小來用於訊框間預測。視訊編碼器200和視訊解碼器300亦可以對於訊框間預測，支援PU大小為2NxnU、2NxnD、nLx2N和nRx2N的非對稱劃分。

在模式選擇單元202不將CU進一步劃分成PU的實例中，每個CU可以與亮度譯碼區塊和對應的色度譯碼區塊相關聯。如前述，CU的大小可以代表CU的亮度譯碼區塊的大小。視訊編碼器200和視訊解碼器300可以支援2Nx2N、2NxN或Nx2N的CU大小。

對於其他視訊譯碼技術（例如，區塊內複製模式譯碼、仿射模式譯碼和線性模型（LM）模式譯碼，僅舉幾個實例），模式選擇單元202經由與譯碼技術相關聯的各個單元，針對正在編碼的當前區塊來產生預測區塊。在一些實例中（例如，調色板模式譯碼），模式選擇單元202可以不產生預測區塊，而是產生語法元素，該等語法元素指示基於所選的調色板來重構區塊的方式。在此種模式下，模式選擇單元202可以將該等語法元素提供給熵編碼單元220以進行編碼。

如前述，殘差產生單元204接收當前區塊和對應的預測區塊的視訊資料。隨後，殘差產生單元204產生當前區塊的殘差區塊。為了產生殘差區塊，殘差產生單元204計算預測區塊和當前區塊之間的逐取樣差。

變換處理單元206將一或多個變換應用於殘差區塊以產生變換係數的區塊（本文稱為「變換係數區塊」）。變換處理單元206可以將各種變換應用於殘差區塊以形成變換係數區塊。例如，變換處理單元206可以將離散餘弦變換（DCT）、方向變換、Karhunen-Loeve變換（KLT）或者概念上類似的變換應用於殘差區塊。在一些實例中，變換處理單元206可以對殘差區塊執行多個變換（例如，主變換和次要變換（如，旋轉變換））。在一些實例中，變換處理單元206不向殘差區塊應用變換。

量化單元208可以對變換係數區塊中的變換係數進行量化，以產生量化的變換係數區塊。量化單元208可以根據與當前區塊相關聯的量化參數（QP）值，來量化變換係數區塊的變換係數。視訊編碼器200（例如，經由模式選擇單元202）可以藉由調整與CU相關聯的QP值，來調整應用於與當前區塊相關聯的變換係數區塊的量化程度。量化可能導致資訊的丟失，因此，量化後的變換係數的精度可能比變換處理單元206產生的原始變換係數的精度低。

逆量化單元210和逆變換處理單元212可以將逆量化和逆變換分別應用於量化的變換係數區塊，以根據變換係數區塊來重建殘差區塊。重構單元214可以基於重構的殘差區塊和由模式選擇單元202產生的預測區塊，來產生與當前區塊相對應的重構區塊（儘管可能具有一定程度的失真）。例如，重構單元214可以將重構的殘差區塊的取樣添加到模式選擇單元202所產生的預測區塊中的對應取樣，以產生重構的區塊。

濾波單元216可以對重構的區塊執行一或多個濾波操作。例如，濾波單元216可以執行解區塊操作以減少沿著CU的邊緣的區塊狀偽影。在一些實例中，可以跳過濾波單元216的操作。

視訊編碼器200將重構的區塊儲存在DPB 218中。例如，在不需要濾波單元216的操作的實例中，重構單元214可以將重構的區塊儲存到DPB 218中。在需要濾波單元216的操作的實例中，濾波單元216可以將濾波後的重構區塊儲存到DPB 218中。運動估計單元222和運動補償單元224可以從DPB 218取得參考圖片，該參考圖片由重構（並且可能濾波）的區塊形成，以對隨後編碼的圖片進行訊框間預測。另外，訊框內預測單元226可以使用當前圖片的DPB 218中的重構區塊，對當前圖片中的其他區塊進行訊框內預測。

通常，熵編碼單元220可以對從視訊編碼器200的其他功能元件接收的語法元素進行熵編碼。例如，熵編碼單元220可以對來自量化單元208的量化的變換係數區塊進行熵編碼。再舉一個實例，熵編碼單元220可以對來自模式選擇單元202的預測語法元素（例如，用於訊框間預測的運動資訊或者用於訊框內預測的訊框內模式資訊）進行熵編碼。熵編碼單元220可以對作為視訊資料的另一個實例的語法元素執行一或多個熵編碼操作，以產生熵編碼的資料。例如，熵編碼單元220可以執行上下文可適性可變長度譯碼（CAVLC）操作、CABAC操作、變數至變數（V2V）長度譯碼操作、基於語法的上下文可適性二元算術譯碼（SBAC）操作、機率間隔分割熵（PIPE）譯碼操作、指數葛籣布編碼操作，或者對資料的另一種類型的熵編碼操作。在一些實例中，熵編碼單元220可以在不對語法元素進行熵編碼的旁通模式下操作。

視訊編碼器200可以輸出位元串流，該位元串流包括用於重構切片或圖片的區塊所需要的經熵編碼的語法元素。特定言之，熵編碼單元220可以輸出位元串流。

關於區塊描述了上文所描述的操作。此種描述應當被理解為用於亮度譯碼區塊及/或色度譯碼區塊的操作。如前述，在一些實例中，亮度譯碼區塊和色度譯碼區塊是CU的亮度和色度分量。在一些實例中，亮度譯碼區塊和色度譯碼區塊是PU的亮度和色度分量。

在一些實例中，不需要針對色度譯碼區塊重複針對亮度譯碼區塊執行的操作。舉一個實例，不需要重複用於識別亮度譯碼區塊的運動向量（MV）和參考圖片的操作，來識別用於色度區塊的MV和參考圖片。相反，可以縮放用於亮度譯碼區塊的MV以決定用於色度區塊的MV，並且參考圖片可以是相同的。再舉一個實例，對於亮度譯碼區塊和色度譯碼區塊，訊框內預測處理可以是相同的。

視訊編碼器200表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且耦合到記憶體的一或多個處理器，該一或多個處理器被配置為：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於附加資訊來檢查針對該條目的約束；及根據約束，對當前圖片進行編碼。

視訊編碼器200表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷包含當前圖片的層是否為從屬層；基於包含當前圖片的層為從屬層，訊號傳遞參考圖片清單；及基於參考圖片清單，對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否針對瞬時解碼器刷新（IDR）切片賦能​​了層間預測；基於賦能了層間預測，訊號傳遞參考圖片清單；及基於參考圖片清單，對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否針對切片賦能了層間預測；判斷該切片是否為IDR切片；基於賦能了層間預測，並且該切片為IDR切片，決定該切片為I切片；及基於I切片對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否在針對IDR切片的圖片標頭中訊號傳遞參考圖片清單；判斷是否存在關於該IDR切片不具有參考圖片清單訊號傳遞的指示；基於訊號傳遞參考圖片清單、不存在關於該IDR切片沒有參考圖片清單訊號傳遞的指示，或者兩者，將一或多個參考圖片添加到為空的參考圖片清單中；及基於參考圖片清單，對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷參考圖片清單中的條目是否等於無參考圖片；基於該條目不等於無參考圖片，避免至少一項動作；及基於參考圖片清單，對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否需要資訊來檢查約束或者對視訊資料進行解碼；基於需要資訊來檢查約束或者對視訊資料進行解碼，將該資訊添加到圖片中；及基於該資訊對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷圖片是否等於無參考圖片；基於圖片等於無參考圖片，為該圖片產生層間參考圖片；及基於層間參考圖片，對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷IDR圖片是否具有參考圖片清單訊號傳遞；判斷該IDR圖片是否具有不可用的參考圖片；基於該IDR圖片具有參考圖片清單訊號傳遞並且該IDR圖片具有不可用的參考圖片，產生不可用的參考圖片；及基於所產生的不可用參考圖片，對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：決定用於第一切片的第一參考圖片清單，第一參考圖片清單包括複數個條目，其中該等條目中的至少一個條目是層間參考圖片；決定用於第二切片的第二參考圖片清單，第二參考圖片清單包括第一參考圖片清單中除了該至少一個層間參考圖片之外的複數個條目；及基於第一參考圖片清單和第二參考圖片清單，對視訊資料進行編碼。

視訊編碼器200亦表示被配置為對視訊資料進行編碼的設備的實例，該設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否將當前圖片的子圖片視作為圖片；基於該子圖片未被視為圖片，使用與參考圖片具有不同的子圖片佈局的當前圖片，對視訊資料進行編碼。

圖4是圖示可以執行本案內容的技術的示例性視訊解碼器300的方塊圖。提供圖4以便於解釋的目的，故其不應被認為是對本案內容中廣泛例示和描述的技術的限制。為了便於說明起見，本案內容描述了根據VVC（在開發中的ITU-T H.266）和HEVC（ITU-T H.265）的技術的視訊解碼器300。但是，本案內容的技術可以由被配置為實現其他視訊譯碼標準的視訊譯碼設備來執行。

在圖4的實例中，視訊解碼器300包括譯碼圖片緩衝器（CPB）記憶體320、熵解碼單元302、預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310、濾波單元312和解碼圖片緩衝器（DPB）314。CPB記憶體320、熵解碼單元302、預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310、濾波單元312和DPB 314中的任何一個或全部，可以在一或多個處理器中或者在處理電路中實現。例如，可以將視訊解碼器300的單元實現成作為硬體電路的一部分，或者處理器的一部分的一或多個電路或邏輯元件、ASIC或FPGA。此外，視訊解碼器300可以包括另外的或替代的處理器或處理電路，以執行該等功能和其他功能。

預測處理單元304包括運動補償單元316和訊框內預測單元318。預測處理單元304可以包括用於根據其他預測模式來執行預測的其他單元。舉例而言，預測處理單元304可以包括調色板單元、區塊內複製單元（其可以形成運動補償單元316的一部分）、仿射單元、線性模型（LM）單元等等。在其他實例中，視訊解碼器300可以包括更多、更少或者不同的功能元件。

CPB記憶體320可以儲存將由視訊解碼器300的元件解碼的視訊資料（例如，編碼的視訊位元串流）。例如，可以從電腦可讀取媒體110（圖1）中獲得儲存在CPB記憶體320中的視訊資料。CPB記憶體320可以包括儲存來自編碼的視訊位元串流的經編碼的視訊資料（例如，語法元素）的CPB。而且，CPB記憶體320可以儲存除經解碼圖片的語法元素之外的視訊資料，例如，表示來自視訊解碼器300的各個單元的輸出的臨時資料。DPB 314通常儲存解碼的圖片，視訊解碼器300在解碼編碼的視訊位元串流的後續資料或圖片時，可以輸出及/或使用該解碼圖片作為參考視訊資料。CPB記憶體320和DPB 314可以由諸如DRAM（其包括SDRAM、MRAM、RRAM或其他類型的記憶體設備）之類的各種記憶體設備中的任何一個來形成。CPB記憶體320和DPB 314可以由相同的記憶體設備或不同的記憶體設備來提供。在各個實例中，CPB記憶體320可以與視訊解碼器300的其他元件一起在晶片上，或者相對於彼等元件在晶片外。

另外地或替代地，在一些實例中，視訊解碼器300可以從記憶體120（圖1）中取得譯碼的視訊資料。亦即，記憶體120可以如上文參照CPB記憶體320所論述的來儲存資料。類似地，當視訊解碼器300的一些或全部功能利用由視訊解碼器300的處理電路執行的軟體來實現時，記憶體120可以儲存將由視訊解碼器300執行的指令。

圖示圖4的各個單元以幫助理解由視訊解碼器300執行的操作。該等單元可以實現為固定功能電路、可程式設計電路或者其組合。類似於圖3，固定功能電路代表提供特定功能、並在可以執行的操作上預先設置的電路。可程式設計電路代表可以被程式設計以執行各種任務，並且在可以執行的操作中提供靈活功能的電路。例如，可程式設計電路可以執行軟體或韌體，軟體或韌體使可程式設計電路以軟體或韌體的指令所定義的方式進行操作。固定功能電路可以執行軟體指令（例如，用於接收參數或輸出參數），但是固定功能電路執行的操作的類型通常是不可變的。在一些實例中，該等單元中的一或多個單元可以是不同的電路區塊（固定功能或可程式設計），並且在一些實例中，該等單元中的一或多個可以是積體電路。

視訊解碼器300可以包括ALU、EFU、數位電路、類比電路及/或由可程式設計電路形成的可程式設計核心。在經由在可程式設計電路上執行的軟體來執行視訊解碼器300的操作的實例中，片上或片外記憶體可以儲存視訊解碼器300接收並執行的軟體的指令（例如，目標代碼）。

熵解碼單元302可以從CPB接收編碼的視訊資料，並且對視訊資料進行熵解碼以再現語法元素。預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310和濾波單元312可以基於從位元串流中提取的語法元素來產生解碼的視訊資料。

通常，視訊解碼器300在逐區塊的基礎上重建圖片。視訊解碼器300可以單獨地對每個區區塊執行重構操作（其中當前正在進行重構即解碼的區塊可以稱為「當前區塊」）。

熵解碼單元302可以對定義量化的變換係數區塊的量化的變換係數的語法元素、以及諸如量化參數（QP）及/或變換模式指示之類的變換資訊進行熵解碼。逆量化單元306可以使用與量化的變換係數區塊相關聯的QP來決定量化的度，並且同樣地，決定用於逆量化單元306應用的逆量化度。例如，逆量化單元306可以執行按位元左移運算以對量化的變換係數進行逆量化。逆量化單元306可以由此形成包括變換係數的變換係數區塊。

在逆量化單元306形成變換係數區塊之後，逆變換處理單元308可以將一或多個逆變換應用於變換係數區塊以產生與當前區塊相關聯的殘差區塊。例如，逆變換處理單元308可以向該等變換係數區塊應用逆DCT、逆整數變換、逆Karhunen-Loeve變換（KLT）、逆旋轉變換、逆方向變換或者另一種逆變換。

此外，預測處理單元304根據由熵解碼單元302進行熵解碼的預測資訊語法元素，來產生預測區塊。例如，若預測資訊語法元素指示當前區塊是訊框間預測的，則運動補償單元316可以產生預測區塊。在此種情況下，預測資訊語法元素可以指示DPB 314中的從其取得參考區塊的參考圖片、以及識別參考圖片中的參考區塊相對於當前圖片中的當前區塊的位置的運動向量。運動補償單元316通常可以以與關於運動補償單元224（圖3）所描述的方式基本上相似的方式，來執行訊框間預測處理。在一些實例中，在DPB 314中可能不存在參考圖片。例如，當前圖片可以是具有參考圖片清單的IDR圖片，其中該參考圖片清單不具有參考圖片條目或者具有至少一個對應於「無參考圖片」的條目，亦即，由於視訊解碼器300對從IDR圖片起始的視訊位元串流開始進行解碼，而因此參考圖片未進行解碼。在包括視訊解碼器300的設備對視訊位元串流執行隨機存取，以便例如對位元串流的資料執行搜索、掃瞄、快進、倒帶或其他特技模式存取的情況下，可能發生此種情況。在此種情況下，視訊解碼器300可以從IDR圖片開始解碼，已訊號傳遞了該IDR圖片的參考圖片，但其尚未被解碼，因此未儲存在DPB 314中。

在一些實例中，預測處理單元304可以對照約束來檢查參考圖片，例如以確保參考圖片通過約束（例如，參考圖片符合約束條件）。在一些實例中，預測處理單元304可以決定當前圖片的參考圖片等於無參考圖片。基於該條目等於無參考圖片，預測處理單元304可以決定與無參考圖片相關聯的附加資訊。預測處理單元304可以基於附加資訊，來檢查針對無參考圖片的約束。基於無參考圖片通過了約束，視訊解碼器200可以對當前圖片進行解碼，如關於圖4和圖7所進一步論述的。

再舉一個實例，若預測資訊語法元素指示當前區塊是訊框內預測的，則訊框內預測單元318可以根據由預測資訊語法元素指示的訊框內預測模式來產生預測區塊。再次，訊框內預測單元318通常可以用與關於訊框內預測單元226（圖3）所描述的方式基本上相似的方式來執行訊框內預測處理。訊框內預測單元318可以從DPB 314取得當前區塊的相鄰取樣的資料。

重構單元310可以使用預測區塊和殘差區塊來重構當前區塊。例如，重構單元310可以將殘差區塊的取樣添加到預測區塊的對應取樣以重構當前的區塊。

濾波單元312可以對重構的區塊執行一或多個濾波操作。例如，濾波單元312可以執行解區塊操作，以減少沿著重構區塊的邊緣的區塊狀偽像。不一定在所有實例中皆執行濾波單元312的操作。

視訊解碼器300可以將重構的區塊儲存在DPB 314中。例如，在不執行濾波單元312的操作的實例中，重構單元310可以將重構的區塊儲存到DPB 314中。在執行濾波單元312的操作的實例中，濾波單元312可以將濾波的重構區塊儲存到DPB 314中。如前述，DPB 314可以向預測處理單元304提供參考資訊，例如用於訊框內預測的當前圖片的取樣以及用於後續運動補償的先前解碼的圖片。此外，視訊解碼器300可以從DPB 314輸出解碼的圖片（例如，解碼的視訊），以便隨後在諸如圖1的顯示設備118之類的顯示設備上呈現。

用此方式，視訊解碼器300表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且耦合到記憶體的一或多個處理器，該一或多個處理器被配置為：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於附加資訊來檢查針對該條目的約束；及根據約束，對當前圖片進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷包含當前圖片的層是否為從屬層；基於包含當前圖片的層為從屬層，對參考圖片清單進行解析；及基於參考圖片清單，對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否針對瞬時解碼器刷新（IDR）切片賦能​​了層間預測；基於賦能了層間預測，對參考圖片清單進行解析；及基於參考圖片清單，對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否針對切片賦能了層間預測；判斷該切片是否為IDR切片；基於賦能了層間預測，並且該切片為IDR切片，決定該切片為I切片；及基於I切片對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否在針對IDR切片的圖片標頭中訊號傳遞參考圖片清單；判斷是否存在關於該IDR切片不具有參考圖片清單訊號傳遞的指示；基於訊號傳遞參考圖片清單、關於不存在該IDR切片沒有參考圖片清單訊號傳遞的指示，或者兩者，將一或多個參考圖片添加到為空的參考圖片清單中；及基於參考圖片清單，對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷參考圖片清單中的條目是否等於無參考圖片；基於該條目不等於無參考圖片，避免至少一項動作；及基於參考圖片清單，對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否需要資訊來檢查約束或者對視訊資料進行解碼；基於需要資訊來檢查約束或者對視訊資料進行解碼，將該資訊添加到圖片中；及基於該資訊對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷圖片是否等於無參考圖片；基於圖片等於無參考圖片，為該圖片產生層間參考圖片；及基於層間參考圖片，對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷IDR圖片是否具有參考圖片清單訊號傳遞；判斷該IDR圖片是否具有不可用的參考圖片；基於該IDR圖片具有參考圖片清單訊號傳遞並且該IDR圖片具有不可用的參考圖片，產生不可用的參考圖片；及基於所產生的不可用參考圖片，對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：決定用於第一切片的第一參考圖片清單，第一參考圖片清單包括複數個條目，其中該等條目中的至少一個條目是層間參考圖片；決定用於第二切片的第二參考圖片清單，第二參考圖片清單包括第一參考圖片清單中除了該至少一個層間參考圖片之外的複數個條目；及基於第一參考圖片清單和第二參考圖片清單，對視訊資料進行解碼。

視訊解碼器300亦表示視訊解碼設備的實例，該視訊解碼設備包括被配置為儲存視訊資料的記憶體、以及在電路中實現並且被配置為執行以下操作的一或多個處理單元：判斷是否將當前圖片的子圖片視作為圖片；基於該子圖片未被視為圖片，使用與參考圖片具有不同的子圖片佈局的當前圖片，對視訊資料進行解碼。

如上文所提及的，在一些草案視訊編碼標準中，即使視訊解碼器可能不需要參考圖片清單來解碼IDR圖片，IDR圖片亦可能具有關聯的參考圖片清單。在一些實現中，出於位元串流一致性目的，視訊譯碼器可以檢查與參考圖片相關聯的約束。IDR圖片參考圖片清單中的參考圖片可以是「無參考圖片」或者是不可用的。這是因為當視訊解碼器開始對IDR圖片進行解碼時，解碼圖片緩衝區中可能沒有圖片，因為IDR圖片可能是視訊解碼器在CVS中進行解碼的第一張圖片。這樣，在一些實例中，可能無法檢查對不可用參考圖片的約束。

在VVC草案9中，視訊解碼層（VCL）網路抽象層（NAL）或切片可以具有IDR NAL單元類型。可選地，此種IDR切片可以具有在切片標頭中訊號傳遞的參考圖片清單，經由在SPS中訊號傳遞的sps_idr_rpl_present_flag來表示該參考圖片清單。sps_idr_rpl_present_flag等於1表示在IDR圖片的切片標頭中存在參考圖片清單語法元素。sps_idr_rpl_present_flag等於0表示在IDR圖片的切片標頭中不存在參考圖片清單語法元素。

根據VVC草案9，視訊資料可以包括多層，並且某些層可以使用層間預測，視訊編碼器200可以藉由向視訊解碼器300訊號傳遞vps_independent_layer_flag來在VPS中指示該層間預測。

vps_independent_layer_flag[i]等於1表示具有索引i的層不使用層間預測。vps_independent_layer_flag[i]等於0表示索引為i的層可以使用層間預測，並且在VPS中存在語法元素vps_direct_ref_layer_flag[i][j]，j在0到i − 1（包括0和i-1）之間。當不存在時，視訊解碼器300推斷vps_independent_layer_flag[i]的值等於1。

視訊編碼器200可以將圖片劃分成多於一個的子圖片，並且視訊編碼器200可以在SPS中訊號傳遞子圖片佈局。可以將子圖片視作為由sps_subpic_tained_as_pic_flag指示的圖片。例如，sps_subpic_tained_as_pic_flag可以向視訊解碼器300指示是否將子圖片視為圖片。被視為圖片的子圖片是視訊解碼器300可以獨立解碼的子圖片（例如，子圖片的解碼不依賴於圖片的其他子圖片）。

sps_subpic_rated_as_pic_flag[i] 等於1表示在不包括迴路濾波操作的解碼程序中（例如，由視訊解碼器300執行），將經譯碼層視訊序列（CLVS）之每一者經譯碼圖片的第i個子圖片視為圖片。sps_subpic_tained_as_pic_flag[i] 等於0表示在不包括迴路濾波操作的解碼程序中（例如，由視訊解碼器300執行），CLVS之每一者經譯碼圖片的第i個子圖片不被視為圖片。若不存在，則視訊解碼器300推斷sps_subpic_tained_as_pic_flag[i]的值等於1。

視訊編碼器200可以在圖片標頭或切片標頭中，訊號傳遞參考圖片清單。視訊編碼器200可以訊號傳遞指示參考圖片清單資訊的位置的語法元素。例如，pps_rpl_info_in_ph_flag等於1表示參考圖片清單資訊存在於PH語法結構中，而不存在於引用不包含PH語法結構的PPS的切片標頭中。pps_rpl_info_in_ph_flag等於0表示參考圖片清單資訊不存在於PH語法結構中，但可以存在於引用PPS的切片標頭中。當不存在時，視訊解碼器300可以推斷pps_rpl_info_in_ph_flag的值等於0。

現在論述用於IDR圖片的參考圖片清單訊號傳遞。在本節中闡述了用於定址IDR圖片的參考圖片清單訊號傳遞的技術的各種實例。

根據VVC草案9，當視訊編碼器200指示IDR具有參考圖片清單時（例如，視訊編碼器200訊號傳遞sps_idr_rpl_present_flag等於1），視訊編碼器200可以在切片標頭中訊號傳遞針對非IDR VCL NAL或IDR VCL NAL的參考圖片清單。

if( !pps_rpl_info_in_ph_flag  &&  ( ( nal_unit_type  !=  IDR_W_RADL  &&               nal_unit_type  !=  IDR_N_LP )  | |  sps_idr_rpl_present_flag ) )
ref_pic_lists( )

但是，可能存在IDR圖片具有非I切片的情況，例如，IDR圖片使用層間預測（ILP），並且由於sps_idr_rpl_present_flag等於0且pps_rpl_info_in_ph_flag等於0，因此不訊號傳遞參考圖片清單。因為視訊解碼器300需要參考圖片清單來解碼任何非I切片，因此這將引起問題。

在本案內容中，揭示用於解決該問題的幾種技術。所揭示的技術中的每一種技術皆可以單獨地使用，亦可以與其他所揭示的技術或任何其他方法結合使用。

在一個實例中，若（例如，經由語法元素或其他方式）指示包含圖片的層是從屬（非獨立）層（例如，該層使用其他層進行層間預測），則視訊編碼器200可以訊號傳遞參考圖片清單。

可以例如經由以下在＜CHANGE＞和＜/CHANGE＞之間進行的相對於VVC草案9的更改來實現上文的實例。

if( !pps_rpl_info_in_ph_flag  &&  ( ＜CHANGE＞ !vps_independent_layer_flag[ GeneralLayerIdx[ nuh_layer_id ] ] ＜/CHANGE＞  | |  ( ( nal_unit_type  !=  IDR_W_RADL  &&  nal_unit_type  !=  IDR_N_LP )  | |  sps_idr_rpl_present_flag ) )  )
ref_pic_lists( )

若sps_idr_rpl_present_flag等於0，＜CHANGE＞ vps_independent_layer_flag[GeneralLayerIdx[nuh_layer_id]]等於1，＜/CHANGE＞，並且nal_unit_type等於IDR_W_RADL或IDR_N_LP，將參考圖片清單RefPicList[0]和RefPicList[1]皆匯出為空（亦即，包含0個條目），並且以下情況適用於等於0或1的每個i：

推斷RplsIdx[i]的值等於sps_num_ref_pic_lists[i]。

推斷num_ref_entries [i] [RplsIdx [i]]的值等於0。

推斷NumRefIdxActive [i]的值等於0。

在另一個實例中，可能要求，若IDR切片具有層間預測，則應當（例如，經由語法元素或其他方式）指示IDR切片應當具有訊號傳遞的參考圖片清單。例如，可能要求視訊編碼器200訊號傳遞IDR切片具有訊號傳遞的參考圖片清單，訊號傳遞參考圖片清單，並且視訊解碼器300可以解析該訊號傳遞的參考圖片清單。

在一個實例中，可以經由以下在＜CHANGE＞和＜/CHANGE＞之間進行的相對於VVC草案9的更改來實現上文的實例： ＜CHANGE＞若vps_independent_layer_flag[GeneralLayerIdx[nuh_layer_id]]等於0，並且引用SPS的切片的nal_unit_type等於IDR_W_RADL或IDR_N_LP，則sps_idr_rpl_present_flag應當等於1。＜/CHANGE＞

在另一個實例中，可以經由以下在＜CHANGE＞和＜/CHANGE＞之間進行的相對於VVC草案9的更改來實現上文的實例： ＜CHANGE＞若vps_independent_layer_flag[GeneralLayerIdx [nuh_layer_id]]等於0，並且切片引用SPS具有nal_unit_type等於IDR_W_RADL或IDR_N_LP，則sps_idr_rpl_present_flag或pps_rpl_info_in_ph_flag的值應等於1。＜/CHANGE＞

在另一種示例性約束中，若賦能了層間預測，並且切片類型是IDR，並且（例如，經由語法元素或其他方式）指示沒有針對IDR切片訊號傳遞參考圖片清單，則視訊譯碼器（例如，視訊編碼器200或視訊解碼器300）可以要求切片類型等於I_SLICE（例如，該切片是I切片）。在沒有此種要求的情況下，可以將切片類型設置為從屬層中的IDR切片中的P_SLICE或B_SLICE，但是無法針對此類切片來訊號傳遞參考圖片清單。

在一個實例中，可以經由以下在＜CHANGE＞和＜/CHANGE＞之間進行的相對於VVC草案9的更改來實現上文的示例性約束：

＜CHANGE＞若vps_independent_layer_flag[ GeneralLayerIdx[nuh_layer_id]]等於0，sps_idr_rpl_present_flag等於0，並且pps_rpl_info_in_ph_flag等於0，並且nal_unit_type等於IDR_W_RADL或IDR_N_LP，則sh_slice_type應當等於2。＜/CHANGE＞

在另一個實例中，可以經由以下在＜CHANGE＞和＜/CHANGE＞之間進行的相對於VVC草案9的更改來實現上文的示例性約束：當以下兩個條件皆為真時，sh_slice_type的值應當等於2： nal_unit_type的值在IDR_W_RADL到CRA_NUT的範圍內（包括端點）。 vps_independent_layer_flag [GeneralLayerIdx [nuh_layer_id]]的值等於1，或者當前圖片是當前AU中的第一張圖片，＜CHANGE＞或者sps_idr_rpl_present_flag的值等於0，並且pps_rpl_info_in_ph_flag等於0。＜/CHANGE ＞

在另一個實例中，僅針對於以下情況：在圖片標頭中沒有訊號傳遞參考圖片清單，並且（例如，經由語法元素或其他方式）指示IDR沒有參考圖片清單訊號傳遞，例如，當視訊編碼器200訊號傳遞sps_idr_rpl_present_flag等於0時，視訊譯碼器（例如，視訊編碼器200或視訊解碼器300）才可以將IDR的參考圖片清單設置為空。

視訊編碼器200可以藉由訊號傳遞一標誌（例如，pps_rpl_info_in_ph_flag等於0），來指示此種情況，其中該標誌指示在圖片標頭中不存在參考圖片清單資訊。若在圖片標頭中訊號傳遞參考圖片清單，則視訊解碼器300可以僅匯出用於IDR切片的活動條目的數量等於0，而不將參考圖片清單設置為空。

否則，若在圖片標頭中訊號傳遞參考圖片清單時，將IDR的參考圖片清單設置為空，則可能會違反以下約束，即對於圖片的所有切片或子圖片皆應當具有相同的參考圖片清單。另外，可以僅針對獨立層將參考圖片清單設置為空，這是因為視訊解碼器300解碼從屬層可能需要參考圖片清單。

在一個實例中，可以經由以下在＜CHANGE＞和＜/CHANGE＞之間進行的相對於VVC草案9的更改來實現實例4： 8.3.2參考圖片清單構造的解碼程序 ... ＜CHANGE＞若sps_idr_rpl_present_flag等於0並且nal_unit_type等於IDR_W_RADL或IDR_N_LP，則以下情形適用於等於0或1的每個i。 推斷NumRefIdxActive [i]的值等於0。 若pps_rpl_info_in_ph_flag等於0，則適用以下情形：＜/CHANGE＞ 推斷RplsIdx [i]的值等於sps_num_ref_pic_lists[i]。 推斷num_ref_entries[i] [RplsIdx [i]]的值等於0。 在另一個實例中，可以如下表示。 ＜CHANGE＞若sps_idr_rpl_present_flag等於0並且nal_unit_type等於IDR_W_RADL或IDR_N_LP，並且vps_independent_layer_flag [GeneralLayerIdx[nuh_layer_id]]等於1，則以下情形適用於等於0或1的每個i。 推斷NumRefIdxActive [i]的值等於0。 若pps_rpl_info_in_ph_flag等於0，則適用以下情形：＜/CHANGE＞ 推斷RplsIdx[i]的值等於sps_num_ref_pic_lists [i]。 推斷num_ref_entries [i] [RplsIdx [i]]的值等於0。

視訊編碼器200或視訊解碼器300可以被配置為執行上文論述的示例性解碼程序。例如，視訊編碼器200可以執行示例性解碼程序，以產生用於儲存在DPB 218中的參考資料。

現在論述參考圖片清單約束和「無參考圖片」。下文闡述用於解決參考圖片清單約束和「無參考圖片」的技術的各種實例。

在參考圖片清單的構造期間，參考圖片清單的條目可以指示在DPB中可能不存在的圖片。例如，當視訊編碼器200或視訊解碼器300構造參考圖片清單時，參考圖片清單的條目可以指向分別不存在於DPB 218或DPB 314中的圖片。視訊編碼器200或視訊解碼器300可以在參考圖片清單推導處理中，將此種參考圖片設置為等於「無參考圖片」。例如，CVS中的第一圖片的參考圖片清單可以包括「無參考圖片」的條目。特定言之，此種條目可以是用於參考圖片識別符的預定值，該預定值指示沒有參考圖片可用（例如，因為未接收到該圖片的資料或者資料被破壞或者無法進行解碼）。

但是，VVC草案9對參考圖片清單的條目施加了位元串流一致性約束。當圖片等於「無參考圖片」時（例如，不存在圖片和相關聯資訊），視訊編碼器200或視訊解碼器300可能無法檢查此種位元串流一致性約束。

在本案內容中，揭示用於解決該問題的幾種技術。每種揭示的技術可以單獨地使用，亦可以與其他所揭示的技術或任何其他方法結合使用。

在一個實例中，可以向VVC草稿9添加以下的條件：將與參考圖片清單的條目有關的所有位元串流一致性約束應用於不等於RefPicList0或RefPicList1的「無參考圖片」的條目。換言之，位元串流一致性約束不應用於「無參考圖片」的條目。例如，視訊編碼器200或視訊解碼器300可以實現該條件。

在一個實例中，可以經由以下在＜CHANGE＞和＜/CHANGE＞之間進行的相對於VVC草案9的更改來實現上文的實例。 位元串流一致性的要求是，以下約束將適用＜CHANGE＞用於不等於「無參考圖片」的RefPicList [0]或RefPicList [1]中的條目＜/CHANGE＞： - 約束

在另一個實例中，將檢查約束的必需資訊或者在解碼程序中所需的資訊添加到圖片，在圖片等於「無參考圖片」時產生該圖片。例如，視訊編碼器200可以將所需的資訊添加到圖片中。

例如，此種所需資訊可以包括以下各項中的任何一種或者其任意組合：1）TemporalId；2）ph_non_reference_picture_flag；3）取決於圖片是否是層間參考圖片（ILRP）的layerID設置；4）縮放訊窗、裁剪訊窗、子圖片佈局、瓦片分區；或5）包括VPS、SPS、PPS等等的參數集資訊。

在一個實例中，將「無參考圖片」的TemporalId設置為等於當前圖片的TemporalId。在一個實例中，將ph_non-reference_picture_flag設置為等於0。在一個實例中，若該圖片是非ILRP，則將layerID設置為等於當前圖片層ID，否則，將layerID設置為等於參考層的值layerID（例如，等於第一參考層的layerID）。在另一個實例中，layerID的值可以是任何參考層的值。在一個實例中，可以將縮放訊窗、裁剪訊窗、子圖片佈局、瓦片分區資訊設置為等於當前圖片的彼等資訊。在一個實例中，可以將參數集資訊設置為等於當前圖片的參數集資訊。

在該實例中，視訊譯碼器（例如，視訊編碼器200或視訊解碼器300）可以針對等於「無參考圖片」的圖片，利用用於層間參考圖片（ILRP）的產生程序。當DPB 218或DPB 314分別是滿的，並且ILRP仍然需要DPB 218或DPB 314中的空間用於當前圖片（例如，對於當前圖片仍然需要ILRP）時，可以從DPB 218或DPB 314中碰撞（移除）ILRP。例如，當位元串流中的層數大於DPB 218或DPB 314中的最大圖片數時，可能發生此種情況。

在另一個實例中，諸如視訊編碼器200或視訊解碼器300之類的視訊譯碼器可以不允許ILRP等於「無參考圖片」。在此種情況下，可能不需要ILRP的產生程序。

在一個實例中，可以如下地實現上文的實例： ＜CHANGE ＞對於層間參考圖片，不應存在等於「無參考圖片」的條目。 ＜/CHANGE＞

另外，例如，當sps_idr_rpl_present_flag等於1時，可以將產生不可用參考圖片的程序應用於具有參考圖片清單訊號傳遞的IDR圖片。例如，視訊編碼器200或視訊解碼器300可以應用以下程序：為具有參考圖片清單訊號傳遞的IDR圖片產生不可用的參考圖片。

在另一種替代方案中，對於參考圖片等於「無參考圖片」的任何圖片，引動產生不可用參考圖片的程序。例如，視訊編碼器200或視訊解碼器300可以將產生不可用參考圖片的程序應用於具有等於「無參考圖片」的參考圖片的任何圖片。

例如，諸如視訊編碼器200或視訊解碼器300之類的視訊譯碼器可以根據以下的約束，排除具有訊號傳遞的參考圖片清單（例如，sps_idr_rpl_present_flag等於1或pps_rpl_info_in_ph_flag等於1）的IDR圖片和IDR圖片的IDR子圖片：此種IDR圖片在參考圖片清單中不應當具有等於「無參考圖片」的條目。

因為當訊號傳遞用於IDR圖片的參考圖片清單時，IDR圖片可以是CVS中的第一圖片，並且IDR圖片在DPB中可能沒有任何圖片被指示為參考。具有用於IDR的參考圖片清單的應用之一是位元串流合併用例。在位元串流合併用例中，將來自不同位元串流的圖片的幾個切片或子圖片合併到新位元串流中的一個圖片裡。在此種情況下，可能需要圖片的所有切片皆具有相同的參考圖片集，並且原始位元串流中的IDR切片需要具有參考圖片清單以滿足此種約束。

在另一個實例中，可以去除VVC草案9中的「切片的RefPicList[0]或RefPicList [1]之每一者ILRP條目應當為活動條目」約束。因為可以在SPS中訊號傳遞參考圖片清單，並且可以經由多個切片經由SPS參考圖片清單索引來引用參考圖片清單，所以可以去除該約束。例如，一個切片可以使用包括ILRP的整個參考圖片清單，而另一個切片可以使用相同的參考圖片清單，但是指定較短數量的活動參考圖片並且排除ILRP。因此，諸如視訊編解碼器200或視訊解碼器300之類的視訊譯碼器可以被配置為不實現該約束。有了此種約束，第二切片需要使用另一個參考圖片清單，這需要另外的訊號傳遞。

在另一個實例中，諸如視訊編碼器200或視訊解碼器300之類的視訊譯碼器可以實現來自VVC草案9的修改後的約束，該約束要求當前圖片和參考圖片具有相同的子圖片佈局，使得僅在將子圖片被視為圖片時才應用該約束。例如，對於當前子圖片或者包含當前切片的子圖片（VCL NAL），subpic_tained_as_pic_flag等於1。

在一個實例中，可以經由以下在＜CHANGE＞和＜/CHANGE＞之間進行的相對於VVC草案9的更改來實現上文的實例，並在＜DELETE＞和＜/DELETE＞之間顯示刪除。每個更改可以單獨地使用，亦可以組合地使用。 8.1.2譯碼圖片的解碼程序 對於當前圖片CurrPic，解碼程序的操作如下： 1. 在第8.2節中詳細說明了NAL單元的解碼。 2. 第8.3節中的程序使用切片標頭層及以上中的語法元素來指定以下解碼程序： –如第8.3.1節所詳細說明的，匯出與圖像順序計數有關的變數和功能。僅需要針對圖片的第一切片引動該程序。 –在針對圖片的每個切片的解碼程序開始時，引動第8.3.2節中指定的參考圖片清單構造的解碼程序，以匯出參考圖片清單0（RefPicList [0]）和參考圖片清單1（RefPicList [1]）。 –引動第8.3.3節中用於參考圖片標記的解碼程序，其中可以將參考圖片標記為「未用於參考」或「用於長期參考」。僅需要針對圖片的第一切片引動該程序。 –在當前圖片為＜CHANGE＞ sps_idr_rpl_present_flag等於1或pps_rpl_info_in_ph_flag等於1的IDR圖片＜/CHANGE＞具有NoOutputBeforeRecoveryFlag等於1的CRA圖片或NoOutputBeforeRecoveryFlag等於1的GDR圖片時，引動第8.3.4節中指定的用於產生不可用參考圖片的解碼程序，僅需要針對圖片的第一切片引動該程序。 遵循以下約束是位元串流一致性的要求： –對於等於0或1的每個i，num_ref_entries[i][RplsIdx [i]]不得小於NumRefIdxActive [i]。 –經由RefPicList[0]或RefPicList[1]之每一者活動條目所引用的圖片應當存在於DPB中，並且其TemporalId應當小於或等於當前圖片的TemporalId。 –經由RefPicList[0]或RefPicList[1]之每一者條目引用的圖片不應是當前圖片，並且應當具有等於0的ph_non_reference_picture_flag。 –圖片的切片的RefPicList[0]或RefPicList[1]中的STRP條目和同一切片或同一圖片的不同切片的RefPicList [0]或RefPicList [1]中的LTRP條目不得引用相同的圖片。 –在RefPicList[0]或RefPicList[1]中不應存在此種LTRP條目：對於該條目，當前圖片的PicOrderCntVal與該條目引用的圖片的PicOrderCntVal之間的差異大於或等於2²⁴ 。 –令setOfRefPics為RefPicList[0]中與當前圖片具有相同nuh_layer_id的所有條目以及RefPicList [1]中與當前圖片具有相同nuh_layer_id的所有條目所引用的唯一圖片的集合。setOfRefPics中的圖片的數量應當小於或等於MaxDpbSize − 1（包括端點），其中如第A.4.2節中所述地規定MaxDpbSize，並且setOfRefPics對於圖片的所有切片均應當相同。 –在當前切片的nal_unit_type等於STSA_NUT時，RefPicList[0]或RefPicList[1]中將沒有此種活動條目：其具有的TemporalId等於當前圖片的TemporalId並且nuh_layer_id等於當前圖片的nuh_layer_id。 –在當前圖片是按照解碼順序的STSA圖片之後的圖片時，其中STSA圖片具有與當前圖片相等的TemporalId和與當前圖片相等的nuh_layer_id，在解碼順序上，STSA圖片之前不應有任何圖片的TemporalId等於當前圖片的TemporalId，並且不應有任何圖片的nuh_layer_id等於當前圖片的nuh_layer_id（其被包括成RefPicList[0]或RefPicList[1]中的活動條目）。 –在TemporalId等於特定值tId、nuh_layer_id等於特定值layerId、並且子圖片索引等於特定值subpicIdx的當前子圖片是按照解碼順序、跟隨著TemporalId等於tId、nuh_layer_id等於layerId、並且子圖片索引等於subpicIdx的STSA子圖片的子圖片時，則不應有TemporalId等於tId並且nuh_layer_id等於layerId的圖片按解碼順序位於包含STSA子圖片的圖片（其被包括成RefPicList[0]或RefPicList[1]中的活動條目）之前。 –在nuh_layer_id等於特定值layerId的當前圖片是IRAP圖片時，RefPicList [0]或RefPicList [1]中的條目所引用的圖片，在輸出順序或解碼順序上均不應在nuh_layer_id等於layerId的按解碼順序的任何先前IRAP圖片（若存在）之前。 –在nuh_layer_id等於特定值layerId並且子圖片索引等於特定值subpicIdx的當前子圖片是IRAP子圖片時，RefPicList [0]或RefPicList [1]中的條目所引用的圖片，在輸出順序或解碼順序上均不應在按解碼順序（若存在）在任何前面的圖片之前，其中該等任何前面的圖片包含nuh_layer_id等於layerId和子圖片索引等於subpicIdx的IRAP子圖片。 –在當前圖片不是與NoOutputBeforeRecoveryFlag等於1的CRA圖片相關聯的RASL圖片時，在RefPicList[0]或RefPicList[1]中的活動條目所引用的圖片將不存在，其中用於針對與當前圖片相關聯的CRA圖片來產生不可用參考圖片的解碼程序產生該圖片。 –在當前子圖片不是NoOutputBeforeRecoveryFlag等於1的CRA圖片中與CRA子圖片相關聯的RASL子圖片時，在RefPicList[0]或RefPicList[1]中的活動條目所引用的圖片將不存在，其中用於針對包含與當前子圖片相關聯的CRA子圖片的CRA圖片來產生不可用參考圖片的解碼程序產生該圖片。 –在nuh_layer_id等於特定值layerId的當前圖片不是以下任意一項時，在RefPicList[0]或RefPicList[1]中的條目所引用的圖片將不存在，其中用於針對與當前圖片相關聯的IRAP或GDR圖片產生不可用參考圖片的解碼程序產生該圖片： ＜CHANGE＞具有的sps_idr_rpl_present_flag等於1或者pps_rpl_info_in_ph_flag等於1的IDR圖片＜/CHANGE＞ 具有的NoOutputBeforeRecoveryFlag等於1的CRA圖片 與NoOutputBeforeRecoveryFlag等於1的CRA圖片相關聯的圖片，該圖片按解碼順序位於與同一CRA圖片相關聯的領先圖片之前 與NoOutputBeforeRecoveryFlag等於1的CRA圖片相關聯的領先圖片 具有的NoOutputBeforeRecoveryFlag等於1的GDR圖片 具有的NoOutputBeforeRecoveryFlag等於1並且nuh_layer_id等於layerId的GDR圖片的恢復圖片 –在nuh_layer_id等於特定值layerId、並且子圖片索引等於特定值subpicIdx的當前子圖片不是以下任意一項時，在RefPicList[0]或RefPicList[1]中的條目所引用的圖片將不存在，其中用於針對包含與當前子圖片相關聯的IRAP或GDR子圖片的IRAP或GDR圖片產生不可用參考圖片的解碼程序產生該圖片： ＜CHANGE＞其sps_idr_rpl_present_flag等於1或者pps_rpl_info_in_ph_flag等於1的IDR圖片中的IDR子圖片＜/CHANGE＞ 其NoOutputBeforeRecoveryFlag等於1的CRA圖片中的CRA子圖片 與其NoOutputBeforeRecoveryFlag等於1的CRA圖片中的CRA子圖片相關聯的子圖片，該子圖片按解碼順序位於與相同CRA圖片相關聯的領先圖片之前 與其NoOutputBeforeRecoveryFlag等於1的CRA圖片中的CRA子圖片相關聯的領先子圖片 其NoOutputBeforeRecoveryFlag等於1的GDR圖片中的GDR子圖片 其NoOutputBeforeRecoveryFlag等於1並且nuh_layer_id等於layerId的GDR圖片的恢復圖片中的子圖片 –在當前圖片在解碼順序和輸出順序上均跟隨具有相同nuh_layer_id值的IRAP圖像時，在輸出順序或解碼順序上，在該IRAP圖像之前不應存在RefPicList[0]或RefPicList[1]中的活動條目所引用的圖片。 –在當前子圖片在解碼順序和輸出順序上均跟隨具有相同nuh_layer_id值並且具有相同子圖片索引值的IRAP子圖片時，在輸出順序或解碼順序上，在包含該IRAP子圖片的圖片之前不應存在RefPicList[0]或RefPicList [1]中的活動條目所引用的圖片。 –在當前圖片在解碼順序和輸出順序上均跟隨具有相同nuh_layer_id值的IRAP圖片以及與該IRAP圖片相關聯的領先圖片（若有的話）時，在輸出順序或解碼順序上，在該IRAP圖片之前不應存在RefPicList[0]或RefPicList [1]中的條目所引用的圖片。 –在當前圖片在解碼順序和輸出順序上均跟隨具有相同nuh_layer_id值和相同子圖片索引值的IRAP子圖片以及與該IRAP子圖片相關聯的領先子圖片（若有的話）時，在輸出順序或解碼順序上，在包含該IRAP子圖片的圖片之前不應存在RefPicList[0]或RefPicList [1]中的條目所引用的圖片。 –在當前圖片是RADL圖片時，RefPicList[0]或RefPicList[1]中不應存在是以下任何一項的活動條目： RASL圖片 按解碼順序在相關聯IRAP圖片之前的圖片 –在其nuh_layer_id等於特定值layerId並且子圖片索引等於特定值subpicIdx的當前子圖片是RADL子圖片時，RefPicList[0]或RefPicList[1]中不應存在是以下任何一項的活動條目： nuh_layer_id等於layerId的圖片包含其子圖片索引等於subpicIdx的RASL子圖片 以解碼順序在包含相關聯的IRAP子圖片的圖片之前的圖片 –當前圖片的一個切片的RefPicList[0]或RefPicList[1]之每一者ILRP條目所引用的圖片應當與當前圖片位於同一AU中。 –當前圖片的一個切片的RefPicList[0]或RefPicList[1]之每一者ILRP條目所引用的圖片應存在於DPB中，其nuh_layer_id refPicLayerId應當小於當前圖片的nuh_layer_id，並且應當為IRAP圖片或者具有的TemporalId小於或等於Max( 0，vps_max_tid_il_ref_pics_plus1[currLayerIdx] [refLayerIdx] − 1 )，其中currLayerIdx和refLayerIdx分別等於GeneralLayerIdx[nuh_layer_id]和GeneralLayerIdx[refpicLayerId ]。 –＜DELETE＞切片的RefPicList[0]或RefPicList[1]之每一者ILRP條目均應當為活動條目。＜/DELETE＞ –當vps_independent_layer_flag[GeneralLayerIdx[nuh_layer_id]]等於0 ＜CHANGE＞時，其子圖片索引subPicIdx具有sps_subpic_treated_as_pic_flag[ subPicIdx]等於1的當前子圖片＜/CHANGE＞，並且sps_num_subpics_minus1大於0，下文兩個條件中的任意一個（但不是兩個）應當成立： RefPicList[0]或RefPicList[1]之每一者活動條目引用的圖片具有與當前圖片相同的子圖片佈局（亦即，該圖片和當前圖片所引用的SPS分別具有相同的sps_num_subpics_minus1值、以及具有相同的sps_subpic_ctu_top_left_x[j]、sps_subpic_ctu_top_left_y[j]、sps_subpic_width_minus1[j]和sps_subpic_height_minus1[j]值，其中j的每個值在0到sps_num_subpics_minus1範圍內，包括端點）。 RefPicList[0]或RefPicList[1]之每一者活動條目所引用的圖片是針對其sps_num_subpics_minus1的值等於0的ILRP。 8.3.4.1用於產生不可用參考圖片的一般解碼程序 在當前圖片是＜CHANGE＞sps_idr_rpl_present_flag等於1或pps_rpl_info_in_ph_flag等於1的IDR圖片＜/CHANGE＞、NoOutputBeforeRecoveryFlag等於1的CRA圖片或者NoOutputBeforeRecoveryFlag等於1的GDR圖片時，每個經譯碼圖片皆會引動該程序一次。 當引動該程序時，適用以下條件： 　–對於每個RefPicList[i] [j]，其中i的範圍為0到1（含端點），j的範圍為0到num_ref_entries [i] [RplsIdx [i]] − 1（含端點），其等於「無參考圖片」，按照第8.3.4.2節的規定來產生該圖片，並且應用以下內容： –＜DELETE＞將所產生圖片的nuh_layer_id的值設置為等於當前圖片的nuh_layer_id。＜/DELETE＞ –若st_ref_pic_flag[i][RplsIdx[i]][j]等於1，並且inter_layer_ref_pic_flag[i][RplsIdx[i]][j]等於0，則將所產生的圖片的PicOrderCntVal的值設置為等於RefPicPocList[i][j]，並且將所產生的圖片標記為「用於短期參考」。 ＜CHANGE＞將所產生圖片的nuh_layer_id的值設置為等於當前圖片的nuh_layer_id。＜/CHANGE＞ –否則，當st_ref_pic_flag[i][RplsIdx[i]][j]等於0並且inter_layer_ref_pic_flag[i][RplsIdx[i]] [j]等於0時，將用於所產生圖片的PicOrderCntVal的值設置為等於RefPicLtPocList[i][j]，將所產生圖片的ph_pic_order_cnt_lsb的值推斷為等於(RefPicLtPocList[i][j]& (MaxPicOrderCntLsb-1) )，並將產生的圖片標記為「用於長期參考」。 ＜CHANGE＞將所產生圖片的nuh_layer_id的值設置為等於當前圖片的nuh_layer_id。 –否則，當st_ref_pic_flag[i][RplsIdx[i]][j]等於0並且inter_layer_ref_pic_flag [i] [RplsIdx [i]] [j]等於1時，將用於所產生的圖片的PicOrderCntVal的值設置為等於當前圖片的PicOrderCntVal，並將所產生的圖片標記為「用於長期參考」。 將所產生圖片的nuh_layer_id的值設置為等於vps_layer_id [DirectRefLayerIdx [0]]。 在另一種替代方案中，將nuh_layer_id設置為等於訊號傳遞的層間圖片的層ID，例如，等於vps_layer_id[DirectRefLayerIdx [GeneralLayerIdx[nuh_layer_id]][ilrp_idx[i][RplsIdx][j]]。＜/CHANGE＞ –將所產生的參考圖片的PicOutputFlag的值設置為等於0。 –將RefPicList [i] [j]設置為所產生的參考圖片。 –＜CHANGE＞將所產生的圖片的TemporalId的值設置為等於當前圖片的TemporalId。 在另一種替代方案中，將所產生圖片的TemporalId的值設置為等於0或者任何其他預設值。 –將所產生圖片的ph_non_reference_picture_flag的值設置為等於0。 –將包括內容和參數集ID在內的參數集資訊設置為與當前圖片的參數集資訊相同。另外，若所產生的圖片是ILRP，則替換PPS和SPS的nuh_layer_id，並將其設置為等於vps_layer_id[DirectRefLayerIdx[0]]。＜/CHANGE＞

在以上實例中，vps_layer_id[DirectRefLayerIdx[0]]指示用於層間預測的第一參考層的nuh_layer_id。

在上文的實例中，假設經由sps_idr_rpl_present_flag等於1或pps_rpl_info_in_ph_flag等於1，來指示IDR圖片/子圖片的切片標頭中的參考圖片清單的存在性。但是，可以不需要此種標誌，這是因為可以在圖片標頭中訊號傳遞IDR的參考圖片清單，而與sps_idr_rpl_present_flag的值無關。在一個實例中，可以從VVC草案9中刪除sps_idr_rpl_present_flag，並且視訊編碼器200可以始終訊號傳遞IDR圖片的參考圖片清單。在此種情況下，在上文的實例中，在指示存在針對IDR的參考圖片清單的情況下，可以將「其sps_idr_rpl_present_flag等於1或pps_rpl_info_in_ph_flag等於1的IDR圖片/子圖片」替換為僅僅IDR圖片/子圖片。

在一個實例中，若從VVC草稿9中刪除了sps_idr_rpl_present_flag，則如下所示地簡化切片標頭中的參考圖片清單訊號傳遞的條件，其中在＜DELETE＞和＜/DELETE＞之間圖示刪除：

slice_header( ) {	描述
…
if( !pps_rpl_info_in_ph_flag  ＜DELETE＞ &&  ( ( nal_unit_type  !=  IDR_W_RADL  &&          nal_unit_type  !=  IDR_N_LP )  | |  sps_idr_rpl_present_flag ) ＜/DELETE＞ )
ref_pic_lists( )

在此種情況下，當視訊編碼器200不訊號傳遞參考圖片清單資訊時，無需推斷參考圖片清單資訊。亦可以從VVC草案9中刪除該程序，如下所示，在＜DELETE＞和＜/ DELETE＞之間： ＜DELETE＞若sps_idr_rpl_present_flag等於0並且nal_unit_type等於IDR_W_RADL或IDR_N_LP，則將參考圖片清單RefPicList[0]和RefPicList[1]皆匯出為空，即包含0個條目，以下適用於等於0或1的每個i： –推斷RplsIdx [i]的值等於sps_num_ref_pic_lists [i]。 –推斷num_ref_entries [i] [RplsIdx [i]]的值等於0。 –推斷NumRefIdxActive [i]的值等於0。＜/DELETE＞

圖5是根據本案內容，圖示示例性參考圖片清單技術的流程圖。視訊編碼器200或視訊解碼器300可以判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片（330）。例如，視訊編碼器200或視訊解碼器300可以決定在DPB 218或DPB 314中分別不存在參考圖片清單中的條目。

基於該條目不等於參考圖片，視訊編碼器200或視訊解碼器300可以決定與該條目相關聯的附加資訊（332）。例如，視訊編碼器200或視訊解碼器300可以決定以下中的任何一項：時間識別符（例如，TemporalId）、指示無參考圖片是否是非參考圖片的、無參考圖片的圖片標頭語法元素（例如，ph_non_reference_picture_flag），或者一或多個參數集（例如，VPS、SPS、PPS等）。

視訊編碼器200或視訊解碼器300可以基於附加資訊來檢查針對該條目的約束（334）。例如，視訊編碼器200或視訊解碼器300可以利用附加資訊來檢查與參考圖片有關的一或多個約束。可以在視訊譯碼標準（例如，VVC草案9）中闡述了該等約束。

視訊編碼器200或視訊解碼器300可以根據約束，對當前圖片進行譯碼（336）。例如，基於對通過的約束的檢查，視訊編碼器200可以對當前圖片進行編碼，或者視訊解碼器300可以對當前圖片進行解碼。

在一些實例中，視訊編碼器200或視訊解碼器300可以對以IDR圖片開始的視訊資料進行解碼。視訊編碼器200或視訊解碼器300可以決定解碼順序中在IDR圖片之前的至少一個圖片沒有被解碼，並且決定該條目對應於解碼順序中在IDR圖片之前的該至少一個圖片。

在一些實例中，需要附加資訊來檢查約束。在一些實例中，該附加資訊包括時間識別符。在一些實例中，作為決定附加資訊的一部分，視訊編碼器200或視訊解碼器300可以決定條目的時間識別符等於當前圖片的時間識別符。在一些實例中，作為決定附加資訊的一部分，視訊編碼器200或視訊解碼器300可以決定條目的時間識別符等於預定的預設值。

在一些實例中，附加資訊包括條目的圖片標頭語法元素，條目的圖片標頭語法元素指示該條目是否是非參考圖片。在一些實例中，作為決定附加資訊的一部分，視訊編碼器200或視訊解碼器300可以將圖片標頭語法元素的值決定為等於0。

在一些實例中，附加資訊包括一或多個參數集。在一些實例中，作為決定附加資訊的一部分，視訊編碼器200或視訊解碼器300可以決定一或多個參數集等於當前圖片的一或多個參數集。

在一些實例中，視訊編碼器200或視訊解碼器300可以判斷無參考圖片是否為層間參考圖片（ILRP）。基於無參​​考圖片是ILRP，視訊編碼器200或視訊解碼器300可以替換第一網路抽象層（NAL）單元標頭層識別符，該識別符指示圖片參數集和序列參數集的第一NAL單元所屬於的層，其等於指示第二NAL單元標頭識別符的視訊參數集層識別符，該第二NAL單元標頭識別符指示用於層間預測的第一參考層。

在一些實例中，視訊編碼器200或視訊解碼器300可以基於附加資訊來產生圖片。在一些實例中，視訊編碼器200或視訊解碼器300可以基於所產生的圖片來檢查約束。在一些實例中，所產生的圖片是僅針對當前圖片的第一切片來產生的。

在一些實例中，視訊編碼器200或視訊解碼器300可以決定當前圖片為瞬時解碼器刷新圖片。視訊編碼器200或視訊解碼器300可以決定序列參數集語法元素，該序列參數集語法元素指示在切片標頭中不存在參考圖片清單。視訊編碼器200或視訊解碼器300可以決定在圖片標頭中不存在指示參考圖片清單資訊的圖片參數集語法元素。基於當前圖片是瞬時解碼器刷新圖片，序列參數集語法元素指示在切片標頭中不存在參考圖片清單，並且圖片參數集語法元素指示在圖片標頭中不存在參考圖片清單資訊，視訊解碼器300可以推斷參考圖片清單結構索引的值等於指示參考圖片清單語法結構的數量的序列參數集語法元素，並推斷指示參考圖片清單語法結構中的條目數量的語法元素的值。

圖6是圖示用於對當前區塊進行編碼的示例性方法的流程圖。當前區塊可以包括當前CU。儘管相對於視訊編碼器200（圖1和3）進行了描述，但應當理解，其他設備可以被配置為執行與圖6類似的方法。

在該實例中，視訊編碼器200在初始時預測當前區塊（350）。舉例而言，視訊編碼器200可以形成針對當前區塊的預測區塊。在一些實例中，作為形成當前區塊的預測區塊的一部分，視訊編碼器200可以執行圖5的技術中的一些技術。隨後，視訊編碼器200可以針對當前區塊來計算殘差區塊（352）。為了計算殘差區塊，視訊編碼器200可以計算原始未編碼的區塊與當前區塊的預測區塊之間的差。隨後，視訊編碼器200可以對殘差區塊進行變換，並量化殘差區塊的變換係數（354）。接下來，視訊編碼器200可以掃瞄殘差區塊的經量化的變換係數（356）。在掃瞄期間或者在掃瞄之後，視訊編碼器200可以對變換係數進行熵編碼（358）。例如，視訊編碼器200可以使用CAVLC或CABAC，對變換係數進行編碼。隨後，視訊編碼器200可以輸出區塊的經熵編碼的資料（360）。

圖7是圖示用於對視訊資料的當前區塊進行解碼的示例性方法的流程圖。當前區塊可以包括當前CU。儘管相對於視訊解碼器300（圖1和4）進行了描述，但應當理解，其他設備可以被配置為執行與圖7類似的方法。

視訊解碼器300可以接收當前區塊的經熵編碼的資料（例如，經熵編碼的預測資訊和用於對應於當前區塊的殘差區塊的變換係數的經熵編碼的資料）（370）。視訊解碼器300可以對熵編碼的資料進行熵解碼，以決定當前區塊的預測資訊並再現殘差區塊的變換係數（372）。在一些實例中，作為形成當前區塊的預測區塊的一部分，視訊編碼器200可以執行圖5的技術中的一些技術。視訊解碼器300可以例如使用如針對當前區塊的預測資訊所指示的訊框內或訊框間預測模式來預測當前區塊（374），以計算針對當前區塊的預測區塊。在一些實例中，作為預測當前區塊的一部分，視訊解碼器300可以執行圖5的技術中的一些技術。隨後，視訊解碼器300可以對再現的變換係數進行逆掃瞄（376），以建立量化的變換係數的區塊。隨後，視訊解碼器300可以對變換係數進行逆量化，並將逆變換應用於變換係數以產生殘差區塊（378）。視訊解碼器300可以藉由組合預測區塊和殘餘區塊，來最終解碼當前區塊（380）。

藉由決定與不可用參考圖片相關聯的附加資訊，以及基於該附加資訊來檢查約束，視訊譯碼器可以檢查針對不可用參考圖片的約束，以確保位元串流一致性，從而使視訊編碼器能夠向各種不同製造商的視訊解碼器提供經編碼的視訊。

本案內容包括下文的非限制性實例。

條款1A。一種對視訊資料進行譯碼的方法，該方法包括：判斷包含當前圖片的層是否為從屬層；基於包含當前圖片的層為從屬層，訊號傳遞或解析參考圖片清單；及基於參考圖片清單，對視訊資料進行譯碼。

條款2A。一種對視訊資料進行譯碼的方法，該方法包括：判斷是否針對瞬時解碼器刷新（IDR）切片賦能​​層間預測；基於賦能層間預測，訊號傳遞或解析參考圖片清單；及基於參考圖片清單，對視訊資料進行譯碼。

條款3A。一種對視訊資料進行譯碼的方法，該方法包括：判斷是否針對切片賦能層間預測；判斷該切片是否為IDR切片；基於賦能層間預測，並且該切片為IDR切片，決定該切片為I切片；及基於I切片對視訊資料進行譯碼。

條款4A。一種對視訊資料進行譯碼的方法，該方法包括：判斷是否在針對IDR切片的圖片標頭中訊號傳遞了參考圖片清單；判斷是否存在該IDR切片不具有參考圖片清單訊號傳遞的指示；基於訊號傳遞參考圖片清單、不存在關於該IDR切片沒有參考圖片清單訊號傳遞的指示，或者兩者，將一或多個參考圖片添加到為空的參考圖片清單中；及基於參考圖片清單，對視訊資料進行譯碼。

條款5A。一種對視訊資料進行譯碼的方法，該方法包括：判斷參考圖片清單中的條目是否等於無參考圖片；基於該條目不等於無參考圖片，避免至少一項動作；及基於參考圖片清單，對視訊資料進行譯碼。

條款6A。一種對視訊資料進行譯碼的方法，該方法包括：判斷是否需要資訊來檢查約束或者對視訊資料進行解碼；基於需要資訊來檢查約束或者對視訊資料進行解碼，將該資訊添加到圖片中；及基於該資訊對視訊資料進行譯碼。

條款7A。根據條款6A所述的方法，其中該資訊包括以下中的至少一項：時間ID、圖片標頭非參考圖片標誌、層ID、縮放訊窗、裁剪訊窗、子圖片佈局、瓦片分割或參數集資訊。

條款8A。一種對視訊資料進行譯碼的方法，該方法包括：判斷圖片是否等於無參考圖片；基於圖片等於無參考圖片，為該圖片產生層間參考圖片；及基於層間參考圖片，對視訊資料進行譯碼。

條款9A。一種對視訊資料進行譯碼的方法，該方法包括：判斷IDR圖片是否具有參考圖片清單訊號傳遞；判斷該IDR圖片是否具有不可用的參考圖片；基於該IDR圖片具有參考圖片清單訊號傳遞並且該IDR圖片具有不可用的參考圖片，產生不可用的參考圖片；及基於所產生的不可用參考圖片，對視訊資料進行譯碼。

條款10A。一種對視訊資料進行譯碼的方法，該方法包括：決定用於第一切片的第一參考圖片清單，第一參考圖片清單包括多個條目，其中該等條目中的至少一個條目是層間參考圖片；決定用於第二切片的第二參考圖片清單，第二參考圖片清單包括第一參考圖片清單中除了該至少一個層間參考圖片之外的多個條目；及基於第一參考圖片清單和第二參考圖片清單，對視訊資料進行譯碼。

條款11A。一種對視訊資料進行譯碼的方法，該方法包括：判斷是否將當前圖片的子圖片視作為圖片；基於該子圖片未被視為圖片，使用與參考圖片具有不同的子圖片佈局的當前圖片，對視訊資料進行譯碼。

條款12A。根據條款1A-11A中的任何一項所述的方法，其中譯碼包括解碼。

條款13A。根據條款1A-12A中的任何一項所述的方法，其中譯碼包括編碼。

條款14A。一種用於對視訊資料進行譯碼的設備，該設備包括：用於執行條款1A-13A中的任何一項所述的方法的一或多個構件。

條款15A。根據條款14A所述的設備，其中該一或多個構件包括在電路中實現的一或多個處理器。

條款16A。根據條款14A和15A中的任何一項所述的設備，進一步包括：用於儲存該視訊資料的記憶體。

條款17A。根據條款14A-16A中的任何一項所述的設備，進一步包括：被配置為顯示解碼的視訊資料的顯示器。

條款18A。根據條款14A-17A中的任何一項所述的設備，其中該設備包括相機、電腦、行動設備、廣播接收器設備或機上盒中的一或多個。

條款19A。根據條款14A-18A中的任何一項所述的設備，其中該設備包括視訊解碼器。

條款20A。根據條款14A-19A中的任何一項所述的設備，其中該設備包括視訊編碼器。

條款21A。一種具有其上儲存的指令的電腦可讀取儲存媒體，當該等指令被執行時，使一或多個處理器執行條款1A-13A中的任何一項所述的方法。

條款1B。一種對視訊資料進行譯碼的方法，該方法包括：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於該附加資訊來檢查針對該條目的約束；並根據該約束，對該當前圖片進行譯碼。

條款2B。根據條款1B所述的方法，其中該當前圖片是瞬時解碼器刷新（IDR）圖片，該方法進一步包括：對以該IDR圖片開始的該視訊資料進行解碼；決定解碼順序中在該IDR圖片之前的至少一個圖片沒有被解碼；並決定該條目對應於解碼順序中在該IDR圖片之前的該至少一個圖片。

條款3B。根據條款1B或2B所述的方法，其中該附加資訊被要求用於檢查該約束。

條款4B。根據條款1B-3B的任何組合所述的方法，其中該附加資訊包括時間識別符。

條款5B。根據條款4B所述的方法，其中決定該附加資訊包括：決定該條目的該時間識別符等於該當前圖片的時間識別符或者等於預定的預設值。

條款6B。根據條款1B-5B的任何組合所述的方法，其中該附加資訊包括該條目的指示該條目是否是非參考圖片的圖片標頭語法元素。

條款7B。根據條款6B所述的方法，其中決定該附加資訊包括：將該圖片標頭語法元素的值決定為等於0。

條款8B。根據條款1B-7B的任何組合所述的方法，其中該附加資訊包括一或多個參數集。

條款9B。根據條款8B所述的方法，其中決定該附加資訊包括：決定該一或多個參數集等於該當前圖片的一或多個參數集。

條款10B。根據條款1B-9B的任何組合所述的方法，進一步包括：判斷該條目是否是層間參考圖片（ILRP）；及基於該條目是ILRP，替換指示圖片參數集和序列參數集中的第一網路抽象層（NAL）單元所歸屬的層的第一NAL單元標頭層識別符，該圖片參數集和序列參數集等於指示第二NAL單元標頭識別符的視訊參數集層識別符，該第二NAL單元標頭識別符指示用於層間預測的第一參考層。

條款11B。根據條款1B-10B的任何組合所述的方法，進一步包括：基於該附加資訊來產生圖片；及基於所產生的圖片來檢查該約束。

條款12B。根據條款11B所述的方法，其中所產生的圖片是僅針對該當前圖片的第一切片來產生的。

條款13B。根據條款1B-12B的任何組合所述的方法，進一步包括：決定該當前圖片是瞬時解碼器刷新圖片；決定在切片標頭中不存在指示參考圖片清單的序列參數集語法元素；決定在圖片標頭中不存在指示參考圖片清單資訊的圖片參數集語法元素；及基於該當前圖片是瞬時解碼器刷新圖片、在切片標頭中不存在指示該參考圖片清單的該序列參數集語法元素、以及在圖片標頭中不存在指示該參考圖片清單資訊的該圖片參數集語法元素，推斷參考圖片清單結構索引的值等於指示參考圖片清單語法結構的數量的序列參數集語法元素，並推斷指示該參考圖片清單語法結構中的條目數量的語法元素的值。

條款14B。一種用於對視訊資料進行譯碼的設備，該設備包括：被配置為儲存該視訊資料的記憶體；及利用電路來實現並耦合到該記憶體的一或多個處理器，該一或多個處理器被配置為：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於該附加資訊來檢查針對該條目的約束；並根據該約束，對該當前圖片進行譯碼。

條款15B。根據條款14B所述的設備，其中該當前圖片是瞬時解碼器刷新（IDR）圖片，並且其中該一或多個處理器進一步被配置為：對以該IDR圖片開始的該視訊資料進行解碼；決定解碼順序中在該IDR圖片之前的至少一個圖片沒有被解碼；並決定該條目對應於解碼順序中在該IDR圖片之前的該至少一個圖片。

條款16B。根據條款14B或15B所述的設備，其中該附加資訊被要求用於檢查該約束。

條款17B。根據條款14-16B的任何組合所述的設備，其中該附加資訊包括時間識別符。

條款18B。根據條款17B所述的設備，其中作為決定該附加資訊的一部分，該一或多個處理器被配置為：決定該條目的該時間識別符等於該當前圖片的時間識別符或者等於預定的預設值。

條款19B。根據條款14B-18B的任何組合所述的設備，其中該附加資訊包括該條目的指示該條目是否是非參考圖片的圖片標頭語法元素。

條款20B。根據條款19B所述的設備，其中作為決定該附加資訊的一部分，該一或多個處理器被配置為將該圖片標頭語法元素的值決定為等於0。

條款21B。根據條款14B-20B所述的設備，其中該附加資訊包括參數集資訊。

條款22B。根據條款21B所述的設備，其中作為決定該附加資訊的一部分，該一或多個處理器被配置為：決定該條目的該參數集資訊等於該當前圖片的該參數集資訊。

條款23B。根據條款14B-22B的任何組合所述的設備，其中該一或多個處理器進一步被配置為：判斷該條目是否是層間參考圖片（ILRP）；及基於該條目是ILRP，替換指示圖片參數集和序列參數集中的第一網路抽象層（NAL）單元所歸屬的層的第一NAL單元標頭層識別符，該圖片參數集和序列參數集等於指示第二NAL單元標頭識別符的視訊參數集層識別符，該第二NAL單元標頭識別符指示用於層間預測的第一參考層。

條款24B。根據條款14B-23B的任何組合所述的設備，其中該一或多個處理器進一步被配置為：基於該附加資訊來產生圖片；及基於所產生的圖片來檢查該約束。

條款25B。根據條款24B所述的設備，其中該一或多個處理器被配置為：所產生的圖片是僅針對該當前圖片的第一切片來產生的。

條款26B。根據條款14B-25B的任何組合所述的設備，其中該一或多個處理器進一步被配置為：決定該當前圖片是瞬時解碼器刷新圖片；決定在切片標頭中不存在指示參考圖片清單的序列參數集語法元素；決定在圖片標頭中不存在指示參考圖片清單資訊的圖片參數集語法元素；及基於該當前圖片是瞬時解碼器刷新圖片、在切片標頭中不存在指示該參考圖片清單的該序列參數集語法元素、以及在圖片標頭中不存在指示該參考圖片清單資訊的該圖片參數集語法元素，推斷參考圖片清單結構索引的值等於指示參考圖片清單語法結構的數量的序列參數集語法元素，並推斷指示該參考圖片清單語法結構中的條目數量的語法元素的值。

條款27B。根據條款14B-26B的任何組合所述的設備，進一步包括：被配置為擷取該視訊資料的相機。

條款28B。根據條款14B-27B的任何組合所述的設備，進一步包括：被配置為顯示該視訊資料的顯示設備。

條款29B。一種儲存有指令的非暫態電腦可讀取媒體，當該等指令被執行時，使一或多個處理器進行以下操作：判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片；基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊；基於該附加資訊來檢查針對該條目的約束；並根據該約束，對該當前圖片進行譯碼。

條款30B。一種用於對視訊資料進行譯碼的設備，該設備包括：用於判斷當前圖片的參考圖片清單中的條目是否等於無參考圖片的構件；用於基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊的構件；用於基於該附加資訊來檢查針對該條目的約束的構件；及用於根據該約束，對該當前圖片進行譯碼的構件。

應當認識到，根據實例，本文所描述的任何技術的某些動作或事件可以以不同的循序執行、可以進行添加、合併或者完全省略（例如，並非所有描述的動作或事件皆是實施該技術所必需的）。此外，在某些實例中，可以例如經由多執行緒處理、中斷處理或多個處理器併發地而不是順序地執行動作或事件。

在一或多個實例中，所描述的功能可以利用硬體、軟體、韌體或者其任意組合來實現。當利用軟體實現時，可以將該等功能儲存在電腦可讀取媒體上，或者作為電腦可讀取媒體上的一或多個指令或代碼進行傳輸，並由基於硬體的處理單元來執行。電腦可讀取媒體可以包括電腦可讀取儲存媒體，電腦可讀取儲存媒體對應於諸如資料儲存媒體或通訊媒體之類的有形媒體，其中通訊媒體包括促進例如根據通訊協定，將電腦程式從一個地方傳送到另一個地方的任何媒體。用此方式，電腦可讀取媒體通常可以對應於：（1）非暫態的有形電腦可讀取儲存媒體；或者（2）諸如信號或載波波形之類的通訊媒體。資料儲存媒體可以是一或多個電腦或者一或多個處理器能夠進行存取以取得用於實現本案內容中描述的技術的指令、代碼及/或資料結構的任何可用媒體。電腦程式產品可以包括電腦可讀取媒體。

舉例而言（但並非限制），此種電腦可讀取儲存媒體可以包括RAM、ROM、EEPROM、CD-ROM或者其他光碟儲存器、磁碟儲存器或其他磁性儲存設備、快閃記憶體或者能夠用於儲存具有指令或資料結構形式的期望的程式碼並能夠由電腦進行存取的任何其他媒體。此外，可以將任何連接適當地稱作電腦可讀取媒體。舉例而言，若指令是使用同軸電纜、光纖電纜、雙絞線、數位用戶線（DSL）或者諸如紅外線、無線電和微波之類的無線技術，從網站、伺服器或其他遠端源傳輸的，則該同軸電纜、光纖電纜、雙絞線、DSL或者諸如紅外線、無線電和微波之類的無線技術包括在該媒體的定義中。但是，應當理解的是，電腦可讀取儲存媒體和資料儲存媒體並不包括連接、載波波形、信號或者其他暫態媒體，而是針對於非暫態的有形儲存媒體。如本文所使用的，磁碟和光碟包括壓縮光碟CD、雷射光碟、光碟、數位多功能光碟（DVD）、軟碟和藍光光碟，其中磁碟通常磁性地再現資料，而光碟則用雷射來光學地再現資料。上述的組合亦應當包括在電腦可讀取媒體的保護範圍之內。

指令可以由諸如一或多個數位訊號處理器（DSPs）、通用微處理器、特殊應用積體電路（ASICs）、現場可程式設計閘陣列（FPGA）之類的一或多個處理器或者其他等同的積體或個別邏輯電路來執行。因此，如本文所使用的，術語「處理器」和「處理電路」可以代表前述的結構或者適合於實現本文所描述的技術的任何其他結構中的任何一種。此外，在一些態樣中，本文所描述的功能可以提供在被配置為實現編碼和解碼的專用硬體及/或軟體模組中，或者併入到組合的編解碼器中。此外，該等技術可以在一或多個電路或邏輯元件中完全實現。

本案內容的技術可以使用多種多樣的設備或裝置來實現，其包括使用無線手持裝置、積體電路（IC）或者一組IC（例如，晶片集）。本案內容中描述了各種元件、模組或單元，以強調被配置為執行所揭示的技術的設備的功能態樣，但不一定需要由不同的硬體單元來實現。相反，如前述，各個單元可以組合在編解碼器硬體單元中，或者經由協調的硬體單元集合（其包括如前述的一或多個處理器）結合適當的軟體及/或韌體來提供。

描述了各個實例。該等和其他實例落入所附請求項的保護範圍之內。

100:視訊編碼和解碼系統 102:源設備 104:視訊源 106:記憶體 108:輸出介面 110:電腦可讀取媒體 112:輸入介面 114:檔案伺服器 116:目的地設備 118:顯示設備 120:記憶體 122:輸入介面 130:四元樹二元樹（QTBT）結構 132:譯碼樹單元（CTU） 200:視訊編碼器 202:模式選擇單元 204:殘差產生單元 206:變換處理單元 208:量化單元 210:逆量化單元 212:逆變換處理單元 214:重構單元 216:濾波單元 218:解碼圖片緩衝器（DPB） 220:熵編碼單元 222:運動估計單元 224:運動補償單元 226:訊框內預測單元 230:視訊資料記憶體 300:視訊解碼器 302:熵解碼單元 304:預測處理單元 306:逆量化單元 308:逆變換處理單元 310:重構單元 312:濾波單元 314:解碼圖片緩衝器 316:運動補償單元 318:訊框內預測單元 320:CPB記憶體 330:操作 332:操作 334:操作 336:操作 350:操作 352:操作 354:操作 356:操作 358:操作 360:操作 370:操作 372:操作 374:操作 376:操作 378:操作 380:操作

圖1是圖示可以執行本案內容的技術的示例性視訊編碼和解碼系統的方塊圖。

圖2A和圖2B是圖示示例性四元樹二元樹（QTBT）結構和相應的譯碼樹單元（CTU）的概念圖。

圖3是圖示可以執行本案內容的技術的示例性視訊編碼器的方塊圖。

圖4是圖示可以執行本案內容的技術的示例性視訊解碼器的方塊圖。

圖5是根據本案內容，圖示示例性參考圖片清單技術的流程圖。

圖6是圖示示例性視訊編碼技術的流程圖。

圖7是圖示示例性視訊解碼技術的流程圖。

國內寄存資訊(請依寄存機構、日期、號碼順序註記) 無 國外寄存資訊(請依寄存國家、機構、日期、號碼順序註記) 無

330:操作

332:操作

334:操作

336:操作

Claims (30)

1. 一種對視訊資料進行譯碼的方法，該方法包括以下步驟： 判斷針對一當前圖片的一參考圖片清單中的一條目是否等於無參考圖片； 基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊； 基於該附加資訊來檢查針對該條目的一約束；及 根據該約束，對該當前圖片進行譯碼。
2. 如請求項1所述之方法，其中該當前圖片是一瞬時解碼器刷新（IDR）圖片，該方法進一步包括以下步驟： 對以該IDR圖片開始的該視訊資料進行解碼； 決定解碼順序中在該IDR圖片之前的至少一個圖片沒有被解碼；及 決定該條目對應於解碼順序中在該IDR圖片之前的該至少一個圖片。
3. 如請求項1所述之方法，其中該附加資訊被要求用於檢查該約束。
4. 如請求項1所述之方法，其中該附加資訊包括一時間識別符。
5. 如請求項4所述之方法，其中決定該附加資訊之步驟包括以下步驟：決定該條目的該時間識別符等於該當前圖片的一時間識別符或者等於一預定的預設值。
6. 如請求項1所述之方法，其中該附加資訊包括該條目的指示該條目是否是一非參考圖片的一圖片標頭語法元素。
7. 如請求項6所述之方法，其中決定該附加資訊之步驟包括以下步驟：將該圖片標頭語法元素的一值決定為等於0。
8. 如請求項1所述之方法，其中該附加資訊包括一或多個參數集。
9. 如請求項8所述之方法，其中決定該附加資訊之步驟包括以下步驟：決定該一或多個參數集等於該當前圖片的一或多個參數集。
10. 如請求項1所述之方法，進一步包括以下步驟： 判斷該條目是否是一層間參考圖片（ILRP）；及 基於該條目是一ILRP，替換指示一圖片參數集和一序列參數集中的一第一網路抽象層（NAL）單元所歸屬的層的第一NAL單元標頭層識別符，該圖片參數集和序列參數集等於指示一第二NAL單元標頭識別符的一視訊參數集層識別符，該第二NAL單元標頭識別符指示用於層間預測的一第一參考層。
11. 如請求項1所述之方法，進一步包括以下步驟： 基於該附加資訊來產生一圖片；及 基於該所產生的圖片來檢查該約束。
12. 如請求項11所述之方法，其中該所產生的圖片是僅針對該當前圖片的一第一切片來產生的。
13. 如請求項1所述之方法，進一步包括以下步驟： 決定該當前圖片是一瞬時解碼器刷新圖片； 決定在切片標頭中不存在指示一參考圖片清單的一序列參數集語法元素； 決定在圖片標頭中不存在指示參考圖片清單資訊的一圖片參數集語法元素；及 基於該當前圖片是一瞬時解碼器刷新圖片、在切片標頭中不存在指示該參考圖片清單的該序列參數集語法元素、以及在圖片標頭中不存在指示該參考圖片清單資訊的該圖片參數集語法元素，推斷一參考圖片清單結構索引的一值等於指示參考圖片清單語法結構的一數量的一序列參數集語法元素，以及推斷指示該參考圖片清單語法結構中的一條目數量的一語法元素的一值。
14. 一種用於對視訊資料進行譯碼的設備，該設備包括： 記憶體，其被配置為儲存該視訊資料；及 利用電路來實現並耦合到該記憶體的一或多個處理器，該一或多個處理器被配置為： 判斷針對一當前圖片的一參考圖片清單中的一條目是否等於無參考圖片； 基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊； 基於該附加資訊來檢查針對該條目的一約束；及 根據該約束，對該當前圖片進行譯碼。
15. 如請求項14所述之設備，其中該當前圖片是一瞬時解碼器刷新（IDR）圖片，並且其中該一或多個處理器進一步被配置為： 對以該IDR圖片開始的該視訊資料進行解碼； 決定解碼順序中在該IDR圖片之前的至少一個圖片沒有被解碼；及 決定該條目對應於解碼順序中在該IDR圖片之前的該至少一個圖片。
16. 如請求項14所述之設備，其中該附加資訊被要求用於檢查該約束。
17. 如請求項14所述之設備，其中該附加資訊包括一時間識別符。
18. 如請求項17所述之設備，其中作為決定該附加資訊的一部分，該一或多個處理器被配置為：決定該條目的該時間識別符等於該當前圖片的一時間識別符或者等於一預定的預設值。
19. 如請求項14所述之設備，其中該附加資訊包括該條目的指示該條目是否是一非參考圖片的一圖片標頭語法元素。
20. 如請求項19所述之設備，其中作為決定該附加資訊的一部分，該一或多個處理器被配置為將該圖片標頭語法元素的一值決定為等於0。
21. 如請求項14所述之設備，其中該附加資訊包括參數集資訊。
22. 如請求項21所述之設備，其中作為決定該附加資訊的一部分，該一或多個處理器被配置為：決定該條目的該參數集資訊等於該當前圖片的該參數集資訊。
23. 如請求項14所述之設備，其中該一或多個處理器進一步被配置為： 判斷該條目是否是一層間參考圖片（ILRP）；及 基於該條目是一ILRP，替換指示一圖片參數集和一序列參數集中的一第一網路抽象層（NAL）單元所歸屬的層的一第一NAL單元標頭層識別符，該圖片參數集和序列參數集等於指示一第二NAL單元標頭識別符的一視訊參數集層識別符，該第二NAL單元標頭識別符指示用於層間預測的一第一參考層。
24. 如請求項14所述之設備，其中該一或多個處理器進一步被配置為： 基於該附加資訊來產生一圖片；及 基於該所產生的圖片來檢查該約束。
25. 如請求項24所述之設備，其中該一或多個處理器被配置為：僅針對該當前圖片的一第一切片來產生該所產生的圖片。
26. 如請求項14所述之設備，其中該一或多個處理器進一步被配置為： 決定該當前圖片是一瞬時解碼器刷新圖片； 決定在切片標頭中不存在指示一參考圖片清單的一序列參數集語法元素； 決定在圖片標頭中不存在指示參考圖片清單資訊的一圖片參數集語法元素；及 基於該當前圖片是一瞬時解碼器刷新圖片、在切片標頭中不存在指示該參考圖片清單的該序列參數集語法元素、以及在圖片標頭中不存在指示該參考圖片清單資訊的該圖片參數集語法元素，推斷一參考圖片清單結構索引的一值等於指示參考圖片清單語法結構的一數量的一序列參數集語法元素，以及推斷指示該參考圖片清單語法結構中的一條目數量的一語法元素的一值。
27. 如請求項14所述之設備，進一步包括： 被配置為擷取該視訊資料的一相機。
28. 如請求項14所述之設備，進一步包括： 被配置為顯示該視訊資料的一顯示設備。
29. 一種儲存指令的非暫態電腦可讀取媒體，當該等指令被執行時，使一或多個處理器進行以下操作： 判斷針對一當前圖片的一參考圖片清單中的一條目是否等於無參考圖片； 基於該條目等於無參考圖片，決定與該條目相關聯的附加資訊； 基於該附加資訊來檢查針對該條目的一約束；及 根據該約束，對該當前圖片進行譯碼。
30. 一種用於對視訊資料進行譯碼的設備，該設備包括： 用於判斷針對一當前圖片的一參考圖片清單中的一條目是否等於無參考圖片的構件； 基於該條目等於無參考圖片，用於決定與該條目相關聯的附加資訊的構件； 用於基於該附加資訊來檢查針對該條目的一約束的構件；及 用於根據該約束，對該當前圖片進行譯碼的構件。

Images