TW202147840A - 視訊譯碼中的子圖片提取和約束 - Google Patents

視訊譯碼中的子圖片提取和約束 Download PDF

Info

Publication number
TW202147840A
TW202147840A TW110116851A TW110116851A TW202147840A TW 202147840 A TW202147840 A TW 202147840A TW 110116851 A TW110116851 A TW 110116851A TW 110116851 A TW110116851 A TW 110116851A TW 202147840 A TW202147840 A TW 202147840A
Authority
TW
Taiwan
Prior art keywords
picture
sub
current
current sub
video
Prior art date
Application number
TW110116851A
Other languages
English (en)
Inventor
瓦迪姆 賽萊金
勇 何
張耀仁
莫哈美德 克班
Original Assignee
美商高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商高通公司 filed Critical 美商高通公司
Publication of TW202147840A publication Critical patent/TW202147840A/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

揭示用於對視訊資料進行解碼的示例性技術和設備。一種示例性設備包括被配置為儲存視訊資料的記憶體以及在電路系統中實現並通訊地耦合至該記憶體的一或多個處理器。該一或多個處理器被配置為：從該視訊資料的位元串流中提取當前子圖片，以及對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中該當前子圖片與該當前圖片相關聯。該一或多個處理器被配置為：至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及基於經更新的虛擬邊界來對該當前子圖片進行解碼。

Description

視訊譯碼中的子圖片提取和約束
本專利申請案主張享受於2020年5月11日提出申請的美國臨時專利申請案第63/023,044的優先權，以引用方式將上述申請案的完整內容併入本文。
本案內容係關於視訊編碼和視訊解碼。
可以將數位視訊功能納入多種設備，該等設備包括：數位電視、數位直播系統、無線廣播系統、個人數位助理（PDA）、膝上型或桌面型電腦、平板電腦、電子書閱讀器、數位相機、數位記錄設備、數位媒體播放機、視訊遊戲設備、視訊遊戲控制台、蜂巢式或衛星無線電電話、所謂的「智慧手機」、視訊電話會議設備、視訊串流設備等等。數位視訊設備可實現視訊譯碼技術，例如在由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分、高級視訊譯碼（AVC）、ITU-T H.265/高效視訊譯碼（HEVC）以及該等標準的擴展中定義的標準中描述的彼等技術。經由實現此種視訊譯碼技術，視訊設備可以更有效地傳輸、接收、編碼、解碼及/或儲存數位視訊資訊。
視訊譯碼技術包括空間（圖片內）預測及/或時間（圖片間）預測以減少或去除視訊序列中固有的冗餘。對於基於區塊的視訊譯碼，可以將視訊切片（例如，視訊圖片或視訊圖片的一部分）劃分為視訊區塊，該等視訊區塊亦可以被稱為譯碼樹單元（CTU）、譯碼單元（CU）及/或譯碼節點。相對於同一圖片中相鄰區塊中的參考取樣，使用空間預測對圖片的內譯碼（I）切片中的視訊區塊進行編碼。圖片的間譯碼（P或B）切片中的視訊區塊可使用相對於同一圖片中相鄰區塊中參考取樣的空間預測，或相對於其他參考圖片中的參考取樣的時間預測。圖片可以被稱為訊框，並且參考圖片可以被稱為參考訊框。
大體而言，本案內容描述了用於對視訊資料進行譯碼的技術，具體而言，子圖片提取、子圖片參考圖片列表（RPL）約束以及子圖片重新排序約束。
當從具有虛擬邊界的圖片中提取子圖片時，虛擬邊界可以位於子圖片之外。此舉可以導致可能對解碼品質產生負面影響的解碼錯誤。
在一個實例中，一種方法包括以下步驟：從該視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，該當前子圖片與該當前圖片相關聯；至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及基於經更新的虛擬邊界來對該當前子圖片進行解碼。
在另一個實例中，一種設備包括：記憶體，其被配置為儲存該視訊資料；及一或多個處理器，其在電路系統中實現並通訊地耦合至該記憶體，該一或多個處理器被配置為：從該視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中該當前子圖片與該當前圖片相關聯；至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及基於經更新的虛擬邊界來對該當前子圖片進行解碼。
在另一個實例中，一種非暫時性電腦可讀取儲存媒體被編碼有指令，該等指令在被執行時，使一或多個處理器：從該視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中該當前子圖片與該當前圖片相關聯；至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界，以及基於經更新的虛擬邊界來對該當前子圖片進行解碼。
在另一個實例中，該設備包括：用於從該視訊資料的位元串流中提取當前子圖片的構件；用於對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析的構件，其中該當前子圖片與該當前圖片相關聯；用於至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界的構件，以及用於基於經更新的虛擬邊界來對該當前子圖片進行解碼的構件。
在附圖和下文的描述中闡述了一或多個實例的細節。其他特徵、目標和優點從說明書、附圖以及申請專利範圍將是顯而易見的。
一些示例性設備和視訊譯碼標準草案可以支援對圖片使用虛擬邊界並且可以支援將子圖片視為圖片（例如，作為圖片處理）。當子圖片被視為圖片（例如，作為圖片處理）時，視訊解碼器可獨立於同一圖片內的另一子圖片來提取子圖片並對該子圖片進行解碼。當視訊解碼器從具有虛擬邊界的圖片中提取子圖片時，虛擬邊界可以在子圖片之外。此舉可能會導致解碼錯誤，解碼錯誤可能會對經解碼視訊的品質產生負面影響。
此外，一些視訊譯碼標準草案包含參考圖片列表約束。該等參考圖片列表約束可能無法適應此種使用情況，亦即從僅具有一個子圖片的層間參考圖片來預測具有多個子圖片的圖片。
此外，一些視訊譯碼標準草案不要求在發生子圖片重新排序時將子圖片視為圖片。此舉可能會導致解碼不匹配，解碼不匹配可能會對經解碼視訊的品質產生負面影響。
根據本案內容的技術，當提取具有虛擬邊界的圖片的子圖片時，可以更新圖片的虛擬邊界。此外，可以改變參考圖片列表約束以適應此種使用情況：即從僅具有一個子圖片的層間參考圖片來預測具有多個子圖片的圖片。另外，可以添加約束，使得當子圖片被重新排序時，子圖片被視為圖片。此種技術可以提高解碼品質及/或提高解碼效能。
圖1是說明可以執行本案內容的技術的示例性視訊編碼和解碼系統100的方塊圖。大體而言，本案內容的技術係關於對視訊資料進行譯碼（編碼及/或解碼）。大體而言，視訊資料包括用於處理視訊的任何資料。因此，視訊資料可以包括原始的未編碼的視訊、編碼視訊、解碼（例如，經重構的）視訊以及視訊中繼資料，例如信號傳遞資料。
如圖1所示，在該實例中，系統100包括源設備102，其提供要由目的地設備116解碼和顯示的編碼視訊資料。具體而言，源設備102經由電腦可讀取媒體110向目的地設備116提供視訊資料。源設備102和目標設備116可以包括多種設備中的任何一種，包括桌面式電腦、筆記型電腦（亦即膝上型電腦）、行動設備、平板電腦、機上盒、電話手持設備（例如智慧手機）、電視機、照相機、顯示設備、數位媒體播放機、視訊遊戲控制台、視訊串流設備、廣播接收器設備等等。在一些情況下，源設備102和目的地設備116可以被配備用於無線通訊，因此可以被稱為無線通訊設備。
在圖1的實例中，源設備102包括視訊源104、記憶體106、視訊編碼器200和輸出介面108。目的地設備116包括輸入介面122、視訊解碼器300、記憶體120和顯示設備118。根據本案內容，源設備102的視訊編碼器200和目的地設備116的視訊解碼器300可以被配置為應用用於子圖片提取、子圖片參考圖片列表（RPL）約束和子圖片重新排序約束的技術。因此，源設備102表示視訊編碼設備的實例，而目的地設備116表示視訊解碼設備的實例。在其他實例中，源設備和目的地設備可以包括其他元件或佈置。例如，源設備102可以從諸如外部攝像機的外部視訊源接收視訊資料。同樣，目的地設備116可以與外部顯示設備介面連接，而不是包括整合顯示設備。
圖1所示的系統100僅是一個實例。大體而言，任何數位視訊編碼及/或解碼設備可以執行用於子圖片提取、子圖片RPL約束和子圖片重新排序約束的技術。源設備102和目的地設備116僅僅是此類譯碼設備的實例，其中源設備102產生經譯碼的視訊資料以傳輸到目的地設備116。本案內容將「譯碼」設備稱為執行資料的譯碼（編碼及/或解碼）的設備。因此，視訊編碼器200和視訊解碼器300分別表示譯碼設備的實例，具體而言，分別是視訊編碼器和視訊解碼器。在一些實例中，源設備102和目的地設備116可以以基本上對稱的方式操作，從而使得源設備102和目的地設備116之每一者包括視訊編碼和解碼用元件。因此，系統100可以支援源設備102與目的地設備116之間的單向或雙向視訊傳輸，例如，用於視訊串流、視訊重播、視訊廣播或視訊電話。
通常，視訊源104表示視訊資料的來源（亦即，原始、未編碼的視訊資料），並將視訊資料的一系列順序的圖片（亦被稱為「訊框」）提供給視訊編碼器200，視訊編碼器200對圖片的資料進行編碼。源設備102的視訊源104可以包括視訊擷取設備（例如攝像機，包含先前擷取的原始視訊的視訊檔案及/或視訊饋送介面），以從視訊內容提供者接收視訊。作為另一替代方案，視訊源104可以產生基於電腦圖形的資料作為源視訊，或者即時視訊、歸檔視訊和電腦產生的視訊的組合。在每種情況下，視訊編碼器200對擷取的、預擷取的或電腦產生的視訊資料進行編碼。視訊編碼器200可以將圖像從接收的順序（有時被稱為「顯示順序」）重新排列為用於譯碼的譯碼順序。視訊編碼器200可以產生包括編碼視訊資料的位元串流。隨後，源設備102可以經由輸出介面108將編碼視訊資料輸出到電腦可讀取媒體110上，以經由例如目的地設備116的輸入介面122進行接收及/或取得。
源設備102的記憶體106和目的設備116的記憶體120代表通用記憶體。在一些實例中，記憶體106、120可以儲存原始視訊資料，例如，來自視訊源104的原始視訊和來自視訊解碼器300的原始、經解碼視訊資料。附加地或可替代地，記憶體106、120可以儲存分別可由例如視訊編碼器200和視訊解碼器300執行的軟體指令。儘管在該實例中記憶體106和記憶體120與視訊編碼器200和視訊解碼器300分開圖示，但應當理解的是：視訊編碼器200和視訊解碼器300亦可以包括內部記憶體，以實現功能上相似或等效的目的。此外，記憶體106、120可以儲存編碼的視訊資料，例如從視訊編碼器200輸出並輸入到視訊解碼器300的編碼的視訊資料。在一些實例中，可以分配記憶體106、120的一些部分作為一或多個視訊緩衝器，例如，以儲存原始、解碼及/或編碼視訊資料。
電腦可讀取媒體110可以代表能夠將編碼視訊資料從源設備102傳輸到目的地設備116的任何類型的媒體或設備。在一個實例中，電腦可讀取媒體110表示通訊媒體，以使源設備102能夠例如經由射頻網路或基於電腦的網路將編碼視訊資料直接即時傳輸到目的地設備116。輸出介面108可以根據通訊標準（例如無線通訊協定）來解調包括編碼視訊資料的傳輸信號，並且輸入介面122可以對接收到的傳輸信號進行解調。通訊媒體可以包括任何無線或有線通訊媒體，例如射頻（RF）頻譜或一或多條實體傳輸線。通訊媒體可以形成基於封包的網路的一部分，例如區域網路、廣域網路或例如網際網路的全球網路。通訊媒體可以包括路由器、交換機、基地站或促進從源設備102到目的地設備116的通訊的任何其他設備。
在一些實例中，源設備102可以將編碼資料從輸出介面108輸出到儲存設備112。類似地，目的地設備116可以經由輸入介面122存取來自儲存設備112的編碼資料。儲存設備112可以包括各種分散式或本端存取的資料儲存媒體中的任何一種，例如硬碟、藍光光碟、DVD、CD-ROM、快閃記憶體、揮發性或非揮發性記憶體或用於儲存編碼視訊資料的任何其他合適的數位儲存媒體。
在一些實例中，源設備102可以將編碼的視訊資料輸出到檔案伺服器114或可以儲存由源設備102產生的編碼的視訊資料的另一中間儲存設備。目的地設備116可以經由串流或下載來存取來自檔案伺服器114的儲存的視訊資料。檔案伺服器114可以是能夠儲存編碼視訊資料並將該編碼視訊資料傳輸到目的地設備116的任何類型的伺服器設備。檔案伺服器114可以代表網頁伺服器（例如，用於網站）、檔案傳輸通訊協定（FTP）伺服器、內容遞送網路設備或網路附加儲存（NAS）設備。目的地設備116可以經由包括網際網路連接的任何標準資料連接來存取來自檔案伺服器114的編碼視訊資料。該連接可以包括適合存取儲存在檔案伺服器114上的編碼視訊資料的無線通道（例如，Wi-Fi連接）、有線連接（例如，數位用戶線路（DSL）、纜線數據機等）或該二者的組合。檔案伺服器114和輸入介面122可以被配置為根據串流傳輸協定、下載傳輸協定或其組合來操作。
輸出介面108和輸入介面122可以代表無線傳輸器/接收器、數據機、有線網路元件（例如，乙太網路卡）、根據各種IEEE 802.11標準中的任何一種進行操作的無線通訊元件，或者其他實體元件。在輸出介面108和輸入介面122包括無線元件的實例中，輸出介面108和輸入介面122可以被配置為根據蜂巢通訊標準（例如，4G、4G-LTE（長期進化）、高級LTE、5G等）來傳輸資料（例如編碼視訊資料）。在輸出介面108包括無線傳輸器的一些實例中，輸出介面108和輸入介面122可以配置為根據其他無線標準（例如，IEEE 802.11規範、IEEE 802.15規範（例如，ZigBee™ ）、Bluetooth™ 標準等）來傳輸資料（例如編碼視訊資料）。在一些實例中，源設備102及/或目的地設備116可以包括各自的晶片上系統（SoC）元件。例如，源設備102可以包括SoC元件以執行貢獻於視訊編碼器200及/或輸出介面108的功能，並且目的地設備116可以包括SoC元件以執行貢獻於視訊解碼器300及/或輸入介面122的功能。
本案內容的技術可以應用於支援各種多媒體應用中的任何一種的視訊譯碼，例如空中電視廣播、有線電視傳輸、衛星電視傳輸、網際網路串流視訊傳輸，例如HTTP上的動態自我調整串流（DASH）、編碼到資料儲存媒體上的數位視訊，對儲存在資料儲存媒體上的數位視訊進行解碼，或者其他應用。
目的地設備116的輸入介面122從電腦可讀取媒體110（例如，通訊媒體、儲存設備112、檔案伺服器114等）接收經編碼視訊位元串流。經編碼視訊位元串流可以包括由視訊編碼器200定義的信號傳遞資訊，其亦由視訊解碼器300使用，例如具有描述視訊區塊或其他譯碼單元（例如，切片、圖片、圖片群組、序列等）的特性及/或處理的值的語法元素。顯示設備118向使用者顯示解碼視訊資料的經解碼圖片。顯示設備118可以代表多種顯示設備中的任何一種，例如液晶顯示器（LCD）、電漿顯示器、有機發光二極體（OLED）顯示器或另一種類型的顯示設備。
儘管未在圖1中顯示，但在一些實例中，視訊編碼器200和視訊解碼器300可以分別與音訊編碼器及/或音訊解碼器整合在一起，並且可以包括適當的MUX-DEMUX單元或其他硬體及/或軟體，以用於處理共用資料串流中包括音訊和視訊二者的多工串流。若適用，MUX-DEMUX單元可以符合ITU H.223多工器協定或其他協定，例如使用者資料包通訊協定（UDP）。
視訊編碼器200和視訊解碼器300可以各自實現為各種合適的編碼器及/或解碼器電路系統中的任何一種，例如一或多個微處理器、數位信號處理器（DSP）、特殊應用積體電路（ASIC）、現場可程式設計閘陣列（FPGA）、離散邏輯單元、軟體、硬體、韌體或其任何組合。當該等技術部分地以軟體實現時，設備可將用於軟體的指令儲存在合適的非暫時性電腦可讀取媒體中，並使用一或多個處理器以硬體方式執行指令以執行本案內容的技術。視訊編碼器200和視訊解碼器300中的每一個可以包括在一或多個編碼器或解碼器中，其中的任意一個可以整合作為相應設備中的組合編碼器/解碼器（CODEC）的一部分。包括視訊編碼器200及/或視訊解碼器300的設備可以包括積體電路、微處理器及/或無線通訊設備，例如蜂巢式電話。
視訊編碼器200和視訊解碼器300可以根據視訊譯碼標準（例如ITU-T H.265，亦被稱為高效視訊譯碼（HEVC）或其擴展，例如多視圖及/或可調節視訊譯碼擴展）來進行操作。或者，視訊編碼器200和視訊解碼器300可以根據其他專有或工業標準（例如ITU-T H.266，亦被稱為多功能視訊譯碼（VVC））來操作。Bross等人的「Versatile Video Coding (Draft 9)」，ITU-T SG 16 WP 3和ISO/IEC JTC 1/SC 29/WG 11的聯合視訊專家組（JVET），第18次會議，遠端會議，2020年4月15日-24日，JVET-R2001-v8（以下簡稱「VVC草案9」）中描述了VVC標準的最新草案。然而，本案內容的技術不限於任何特定的譯碼標準。
通常，視訊編碼器200和視訊解碼器300可以執行圖片的基於區塊的譯碼。術語「區塊」通常是指包括待處理的資料的結構（例如，待編碼及/或解碼，或者在編碼及/或解碼程序中以其他方式待使用）。例如，區塊可以包括亮度及/或色度資料的取樣的二維矩陣。通常，視訊編碼器200和視訊解碼器300可以對以YUV（例如，Y、Cb、Cr）格式表示的視訊資料進行譯碼。亦即，視訊編碼器200和視訊解碼器300可以對亮度和色度分量進行譯碼，而不是對圖片取樣的紅、綠和藍（RGB）資料進行譯碼，其中色度分量可以包括紅色和藍色色度分量。在一些實例中，視訊編碼器200在編碼之前將接收到的RGB格式的資料轉換成YUV表示，並且視訊解碼器300將YUV表示轉換成RGB格式。或者，預處理和後處理單元（未圖示）可以執行該等轉換。
本案內容通常可以提及圖片的譯碼（例如，編碼和解碼）以包括對圖片的資料進行編碼或解碼的程序。類似地，本發明可以提及對圖片的區塊的譯碼以包括對區塊的資料進行編碼或解碼的程序，例如，預測及/或殘差譯碼。編碼視訊位元串流通常包括語法元素的一系列值，該等值表示譯碼決策（例如，譯碼模式）以及將圖片劃分為區塊。因此，提及對圖片或區塊進行譯碼通常應理解為對形成圖片或區塊的語法元素的值進行譯碼。
HEVC定義了各種區塊，包括譯碼單元（CU）、預測單元（PU）和變換單元（TU）。根據HEVC，視訊譯碼器（例如，視訊編碼器200）根據四叉樹結構將譯碼樹單元（CTU）劃分為CU。亦即，視訊譯碼器將CTU和CU劃分為四個相等、不重疊的正方形，並且四叉樹的每個節點具有零個或四個子節點。沒有子節點的節點可以被稱為「葉節點」，並且此種葉節點的CU可以包括一或多個PU及/或一或多個TU。視訊譯碼器可進一步劃分PU和TU。例如，在HEVC中，殘差四叉樹（RQT）表示TU的劃分。在HEVC中，PU表示間預測資料，而TU表示殘差資料。內預測的CU包括內預測資訊，例如內模式指示。
作為另一實例，視訊編碼器200和視訊解碼器300可以被配置為根據VVC操作。根據VVC，視訊譯碼器（例如，視訊編碼器200）將圖片劃分為複數個譯碼樹單元（CTU）。視訊編碼器200可根據樹結構（例如四叉樹-二叉樹（QTBT）結構或多類型樹（MTT）結構）來劃分CTU。QTBT結構消除了多個劃分類型的概念，例如HEVC的CU、PU和TU之間的分隔。QTBT結構包括兩個級別：根據四叉樹分區來劃分的第一級，以及根據二叉樹分區來劃分的第二級。QTBT結構的根節點對應於CTU。二叉樹的葉節點對應於譯碼單元（CU）。
在MTT分區結構中，可以使用四叉樹（QT）分區、二叉樹（BT）分區以及一或多個類型的三叉樹（TT）（亦被稱為三元樹（TT））分區來對區塊進行劃分。三叉樹或三元樹分區是將一個區塊分離為三個子區塊的一種分區方式。在一些實例中，三叉樹或三元樹分區將一個區塊劃分為三個子區塊，而不是經由中心來對原始區塊進行劃分。MTT中的分區類型（例如，QT、BT和TT）可以是對稱的或不對稱的。
在一些實例中，視訊編碼器200和視訊解碼器300可以使用單個QTBT或MTT結構來表示亮度和色度分量中的每一個，而在其他實例中，視訊編碼器200和視訊解碼器300可以使用兩個或更多個QTBT或MTT結構，例如，一個QTBT/MTT結構用於亮度分量，另一個QTBT/MTT結構用於兩個色度分量（或兩個QTBT/MTT結構用於相應的色度分量）。
視訊編碼器200和視訊解碼器300可以被配置為對每個HEVC、QTBT分區、MTT分區或其他分區結構使用四叉樹分區。為了說明的目的，針對QTBT分區提供了對本案內容的技術的描述。然而，應當理解的是：本案內容的技術亦可以應用於被配置為使用四叉樹分區或其他類型分區的視訊譯碼器。
在一些實例中，CTU包括亮度取樣的譯碼樹區塊 (CTB)、具有三個取樣陣列的圖片的色度取樣的兩個相應CTB，或者單色圖片或使用三個單獨的顏色平面和用於對取樣譯碼的語法結構來譯碼的圖片的取樣的CTB。CTB可以是針對某個N值的NxN取樣區塊，使得將分量劃分為CTB是分區。分量是來自以4:2:0、4:2:2或 4:4:4顏色格式組成圖片的三個陣列（亮度和兩個色度）中的一個的陣列或單個取樣，或者組成單色格式圖片的陣列或陣列的單個取樣。在一些實例中，譯碼區塊是針對某個M和N值的MxN取樣區塊，使得將CTB劃分為譯碼區塊是分區。
可以用各種方式將區塊（例如，CTU或CU）分類在圖片中。作為一個實例，磚塊（brick）可以指圖片中特定瓦片（tile）之內的CTU行的矩形區域。瓦片可以是圖片中特定瓦片列和特定瓦片行之內的CTU的矩形區域。瓦片列是指CTU的矩形區域，其具有等於圖片高度的高度和由語法元素指定的寬度（例如，如在圖片參數集中指定的）。瓦片行是指CTU的矩形區域，其具有由語法元素指定的高度（例如，諸如在圖片參數集中）以及與圖片寬度相等的寬度。
在一些實例中，可以將瓦片劃分成多個磚塊，每個磚塊可以包括瓦片內的一或多個CTU行。沒有被劃分為多個磚塊的瓦片亦可以被稱為磚塊。但是，作為瓦片的真實子集的磚塊不能被稱為瓦片。
圖片中的磚塊亦可以佈置為切片。切片可以是圖片的整數個磚塊，其可以排他地包含在單個網路抽象層（NAL）單元中。在一些實例中，切片包括多個完整瓦片或僅一個瓦片的連續的完整磚塊序列。
本案內容可互換地使用「NxN」和「N乘N」來代表區塊（例如CU或其他視訊區塊）的取樣尺寸在垂直維度和水平維度態樣的取樣維度，例如，16x16個取樣或16乘16個取樣。通常，16x16 CU在垂直方向上將具有16個取樣（y=16），並且在水平方向上將具有16個取樣（x=16）。同樣地，NxN CU通常在垂直方向上具有N個取樣，在水平方向上具有N個取樣，其中N表示非負整數值。CU中的取樣可以按行和列排列。此外，CU在水平方向上不一定具有與垂直方向上相同數量的取樣。例如，CU可以包括N×M個取樣，其中M不一定等於N。
視訊編碼器200對表示預測及/或殘差資訊以及其他資訊的CU的視訊資料進行編碼。預測資訊指示將如何預測CU以便形成用於CU的預測區塊。殘差資訊通常代表編碼之前的CU取樣與預測區塊之間的逐取樣差異。
為了預測CU，視訊編碼器200通常可經由間預測或內預測來形成用於CU的預測區塊。間預測通常是指根據先前譯碼的圖片的資料來預測CU，而內預測通常是指根據同一圖片的先前譯碼的資料來預測CU。為了執行間預測，視訊編碼器200可使用一或多個運動向量來產生預測區塊。視訊編碼器200通常可以執行運動搜尋以辨識例如在CU與參考區塊之間的差異態樣與CU緊密匹配的參考區塊。視訊編碼器200可以使用絕對差之和（SAD）、平方差之和（SSD）、平均絕對差（MAD）、均方差（MSD）或其他此類差異來計算差值度量，以決定參考區塊是否與當前CU緊密匹配。在一些實例中，視訊編碼器200可使用單向預測或雙向預測來預測當前CU。
VVC的某些實例亦提供了仿射運動補償模式，其可以被視為間預測模式。在仿射運動補償模式中，視訊編碼器200可以決定表示非平移運動（例如放大或縮小、旋轉、透視運動或其他不規則運動類型）的兩個或更多個運動向量。
為了執行內預測，視訊編碼器200可以選擇內預測模式以產生預測區塊。VVC的某些實例提供了67種內預測模式，包括各種方向模式以及平面模式和DC模式。通常，視訊編碼器200選擇內預測模式，該內預測模式描述與當前區塊（例如，CU的區塊）相鄰的取樣，從該等相鄰取樣預測當前區塊的取樣。假設視訊編碼器200以光柵掃瞄順序（從左到右，從上到下）對CTU和CU進行譯碼，則此類取樣通常可以在與當前區塊相同的圖片中當前區塊的上方、上方左側，或左側。
視訊編碼器200對表示當前區塊的預測模式的資料進行編碼。例如，對於間預測模式，視訊編碼器200可以對表示使用各種可用間預測模式中的何者的資料，以及相應模式的運動資訊進行編碼。對於單向或雙向間預測，例如，視訊編碼器200可使用高級運動向量預測（AMVP）或合併模式來對運動向量進行編碼。視訊編碼器200可使用類似模式來對仿射運動補償模式的運動向量進行編碼。
在預測（例如區塊的內預測或間預測）之後，視訊編碼器200可計算該區塊的殘差資料。殘差資料（例如殘差區塊）表示該區塊與使用相應預測模式形成的該區塊的預測區塊之間的逐取樣差異。視訊編碼器200可將一或多個變換應用於殘差區塊，以在變換域而非取樣域中產生經變換的資料。例如，視訊編碼器200可將離散餘弦變換（DCT）、整數變換、小波變換或概念上類似的變換應用於殘差視訊資料。另外，視訊編碼器200可在第一變換之後應用次級變換，例如，與模式有關的不可分離的次級變換（MDNSST）、與信號有關的變換、Karhunen-Loeve變換（KLT）等等。視訊編碼器200在應用一或多個變換之後產生變換係數。
如前述，在進行任何變換以產生變換係數之後，視訊編碼器200可以執行變換係數的量化。量化通常是指以下程序：對變換係數進行量化以可能減少用於表示變換係數的資料量，從而提供進一步壓縮。經由執行量化程序，視訊編碼器200可以減小與一些或所有變換係數相關聯的位元深度。舉例而言，視訊編碼器200可在量化期間將n 位元值向下取整為m 位元值，其中n 大於m 。在一些實例中，為了執行量化，視訊編碼器200可以執行待量化的值的按位元右移。
在量化之後，視訊編碼器200可以掃瞄變換係數，從而從包括量化變換係數的二維矩陣產生一維向量。可以將掃瞄設計為將較高能量（因此頻率較低）的變換係數放在向量的前部，並將較低能量（因此頻率較高）的變換係數放在向量的後部。在一些實例中，視訊編碼器200可以利用預定義的掃瞄順序來掃瞄量化的變換係數以產生序列化的向量，隨後對向量的量化的變換係數進行熵編碼。在其他實例中，視訊編碼器200可以執行自我調整掃瞄。在掃瞄量化的變換係數以形成一維向量之後，視訊編碼器200可以例如根據上下文自我調整二進位算術譯碼（CABAC）對一維向量進行熵編碼。視訊編碼器200亦可以對語法元素的值進行熵編碼，該等語法元素描述與編碼視訊資料相關聯的中繼資料，以供視訊解碼器300在解碼視訊資料時使用。
為了執行CABAC，視訊編碼器200可以將上下文模型內的上下文指派給要傳輸的符號。上下文可以關於例如符號的相鄰值是否為零值。概率決定可以基於指派給符號的上下文。
視訊編碼器200亦可以例如在圖片標頭、區塊標頭、切片標頭或其他語法資料（例如序列參數集（SPS）、圖片參數集（PPS）或視訊參數集（VPS））中向視訊解碼器300產生語法資料，例如基於區塊的語法資料、基於圖片的語法資料和基於序列的語法資料。視訊解碼器300可以類似地解碼此類語法資料以決定如何對相應視訊資料進行解碼。
以此方式，視訊編碼器200可以產生包括編碼的視訊資料的位元串流，例如，描述將圖片劃分成區塊（例如，CU）的語法元素以及針對區塊的預測及/或殘差資訊。最終，視訊解碼器300可以接收位元串流並對編碼的視訊資料進行解碼。
通常，視訊解碼器300執行與視訊編碼器200所執行的程序相逆的程序以對位元串流的編碼視訊資料進行解碼。例如，視訊解碼器300可以使用CABAC以與視訊編碼器200的CABAC編碼程序基本相似（儘管與之相逆）的方式來對位元串流的語法元素的值進行解碼。語法元素可定義分區資訊，以用於將圖片劃分為CTU，以及根據相應分區結構（例如，QTBT結構）對每個CTU進行劃分以定義CTU的CU。語法元素亦可以定義針對視訊資料的區塊（例如，CU）的預測和殘差資訊。
殘差資訊可以由例如量化的變換係數來表示。視訊解碼器300可以對區塊的經量化的變換係數進行逆量化和逆變換以再現該區塊的殘差區塊。視訊解碼器300使用用信號傳達的預測模式（內預測或間預測）和相關的預測資訊（例如，用於間預測的運動資訊）來形成針對該區塊的預測區塊。視訊解碼器300隨後可以（逐個取樣地）對預測區塊和殘差區塊進行組合以再現原始區塊。視訊解碼器300可以執行附加處理，例如執行解區塊程序以減少沿區塊的邊界的視覺偽影。
一些示例性設備（例如視訊編碼器200和視訊解碼器300）和視訊譯碼標準草案可以支援對圖片使用虛擬邊界並且可以支援將子圖片視為圖片（例如，作為圖片處理或譯碼，譯碼例如編碼或解碼）。當子圖片被視為圖片（例如，作為圖片進行處理或譯碼，譯碼例如編碼或解碼）時，視訊解碼器可獨立於同一圖片內的另一子圖片來提取子圖片並對該子圖片進行解碼。當視訊解碼器從具有虛擬邊界的圖片中提取子圖片時，虛擬邊界可能在子圖片之外。此舉可能會導致解碼錯誤，解碼錯誤可能會對經解碼視訊的品質產生負面影響。
根據本案內容的技術，一種方法包括以下步驟：從視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，當前子圖片與當前圖片相關聯；至少部分基於虛擬邊界語法元素來更新虛擬邊界；及基於經更新的虛擬邊界來對當前子圖片進行解碼。
根據本案內容的技術，一種設備包括：記憶體，其被配置為儲存該視訊資料；及一或多個處理器，其在電路系統中實現並通訊地耦合至該記憶體，該一或多個處理器被配置為：從視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中當前子圖片與當前圖片相關聯；至少部分基於虛擬邊界語法元素來更新虛擬邊界；及基於經更新的虛擬邊界來對當前子圖片進行解碼。
根據本案內容的技術，一種非暫時性電腦可讀取儲存媒體被編碼有指令，該等指令在被執行時，使一或多個處理器：從視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中當前子圖片與當前圖片相關聯；至少部分基於虛擬邊界語法元素來更新虛擬邊界，以及基於經更新的虛擬邊界來對當前子圖片進行解碼。
根據本案內容的技術，一種設備包括：用於從視訊資料的位元串流中提取當前子圖片的構件；用於對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析的構件，其中當前子圖片與當前圖片相關聯；用於至少部分基於虛擬邊界語法元素來更新虛擬邊界的構件，以及用於基於經更新的虛擬邊界來對當前子圖片進行解碼的構件。
本案內容可以概括地提及「用信號傳送」某些資訊，例如語法元素。術語「用信號傳送」通常可以代表語法元素及/或用於對編碼視訊資料進行解碼的其他資料的值的通訊。亦即，視訊編碼器200可以用信號傳送位元串流中的語法元素的值。通常，用信號傳送是指在位元串流中產生值。如前述，源設備102可以基本即時地或不即時地將位元串流傳輸到目的地設備116，例如在將語法元素儲存到儲存設備112以供稍後由目的地設備116取得時可能發生。
圖2是說明可以執行本案內容的技術的示例性視訊編碼器200的方塊圖。提供圖2是為了解釋的目的，並且不應被認為是對本案內容中廣泛例示和描述的技術的限制。為了說明的目的，本案內容描述了根據VVC（正在開發的ITU-T H.266）和HEVC（ITU-T H.265）的技術的視訊編碼器200。然而，本案內容的技術可以由被配置為其他視訊譯碼標準的視訊編碼設備來執行。
在圖2的實例中，視訊編碼器200包括視訊資料記憶體230、模式選擇單元202、殘差產生單元204、變換處理單元206、量化單元208、逆量化單元210、逆變換處理單元212、重構單元214、濾波器單元216、解碼圖片緩衝器（DPB）218和熵編碼單元220。視訊資料記憶體230、模式選擇單元202、殘差產生單元204、變換處理單元206、量化單元208、逆量化單元210、逆變換處理單元212、重構單元214、濾波器單元216、DPB 218以及熵編碼單元220中的任意一個或全部可以在一或多個處理器中或在處理電路系統中實現。例如，視訊編碼器200的單元可以被實現為一或多個電路或邏輯元件，作為硬體電路系統的一部分，或者作為處理器、ASIC或FPGA的一部分。此外，視訊編碼器200可包括額外的或替代的處理器或處理電路系統，以執行該等和其他功能。
視訊資料記憶體230可以儲存要由視訊編碼器200的元件編碼的視訊資料。視訊編碼器200可以從例如視訊源104（圖1）接收儲存在視訊資料記憶體230中的視訊資料。DPB 218可以用作參考圖片記憶體，該參考圖片記憶體儲存參考視訊資料，以供視訊編碼器200預測後續視訊資料時使用。視訊資料記憶體230和DPB 218可以由多種記憶體設備中的任何一種形成，例如動態隨機存取記憶體（DRAM），包括同步DRAM（SDRAM）、磁阻性RAM（MRAM）、電阻性RAM（RRAM）或其他類型的記憶體設備。視訊資料記憶體230和DPB 218可以由同一記憶體設備或分離的記憶體設備提供。在各個實例中，視訊資料記憶體230可以與視訊編碼器200的其他元件一起在晶片上，如圖所示，或者相對於彼等元件在晶片外。
在本案內容中，除非如此具體地描述，否則針對視訊資料記憶體230的引用不應解釋為限於視訊編碼器200內部的記憶體；或者除非如此具體地描述，否則對視訊資料記憶體230的引用不應解釋為限於視訊編碼器200外部的記憶體。而是，對視訊資料記憶體230的引用應被理解為儲存視訊編碼器200所接收的用於編碼的視訊資料（例如，用於待編碼的當前區塊的視訊資料）的參考記憶體。圖1的記憶體106亦可以提供對視訊編碼器200的各個單元的輸出的臨時儲存。
圖示圖2的各個單元以幫助理解由視訊編碼器200執行的操作。該等單元可以實現為固定功能電路、可程式設計電路或其組合。固定功能電路是指提供特定功能並在可以被執行的操作上預先設置的電路。可程式設計電路是指可以被程式設計以執行各種任務並且在可以執行的操作中提供靈活功能的電路。例如，可程式設計電路可以執行使可程式設計電路以軟體或韌體的指令所定義的方式操作的軟體或韌體。固定功能電路可以執行軟體指令（例如，以接收參數或輸出參數），但固定功能電路執行的操作類型通常是不可變的。在一些實例中，該等單元中的一或多個單元可以是不同的電路區塊（固定功能或可程式設計的），並且在一些實例中，該等單元中的一或多個單元可以是積體電路。
視訊編碼器200可以包括從可程式設計電路形成的算術邏輯單位（ALU）、基本功能單元（EFU）、數位電路、類比電路及/或可程式設計核。在使用由可程式設計電路執行的軟體來執行視訊編碼器200的操作的實例中，記憶體106（圖1）可以儲存視訊編碼器200所接收和執行的軟體的指令（例如，目標代碼），或者視訊編碼器200之內的另一記憶體（未圖示）可以儲存該等指令。
視訊資料記憶體230被配置為儲存接收到的視訊資料。視訊編碼器200可以從視訊資料記憶體230取得視訊資料的圖片，並將視訊資料提供給殘差產生單元204和模式選擇單元202。視訊資料記憶體230中的視訊資料可以是待編碼的原始視訊資料。
模式選擇單元202包括運動估計單元222、運動補償單元224和內預測單元226。模式選擇單元202可以包括附加功能單元，以根據其他預測模式來執行視訊預測。作為實例，模式選擇單元202可以包括調色板單元、訊框內區塊複製單元（其可以是運動估計單元222及/或運動補償單元224的一部分）、仿射單元、線性模型（LM）單元，等等。
模式選擇單元202通常協調多個編碼通路，以測試編碼參數的組合以及針對該等組合的所得速率失真值。編碼參數可以包括將CTU劃分為CU、用於CU的預測模式、用於CU的殘差資料的變換類型、用於CU的殘差資料的量化參數，等等。模式選擇單元202可以最終選擇具有比其他被測組合更好的速率失真值的編碼參數的組合。
視訊編碼器200可將從視訊資料記憶體230取得到的圖片劃分為一系列CTU，並將一或多個CTU封裝在切片內。模式選擇單元202可以根據樹結構（例如上述HEVC的QTBT結構或四叉樹結構）來劃分圖片的CTU。如前述，視訊編碼器200可根據樹結構經由劃分CTU來形成一或多個CU。此種CU亦通常可以被稱為「視訊區塊」或「區塊」。
大體而言，模式選擇單元202亦控制其元件（例如，運動估計單元222、運動補償單元224和內預測單元226）以產生針對當前區塊（例如，當前CU，或在HEVC中，PU和TU的重疊部分）的預測區塊。對於當前區塊的間預測，運動估計單元222可以執行運動搜尋以辨識一或多個參考圖片（例如，儲存在DPB 218中的一或多個先前譯碼的圖片）中的一或多個緊密匹配的參考區塊。具體而言，運動估計單元222可以例如根據絕對差之和（SAD）、平方差之和（SSD）、平均絕對差（MAD）、均方差（MSD）等來計算表示潛在參考區塊與當前區塊的相似程度的值。運動估計單元222通常可使用當前區塊與所考慮的參考區塊之間的逐取樣差異來執行該等計算。運動估計單元222可辨識具有由該等計算產生的最低值的參考區塊，最低值指示與當前區塊最緊密匹配的參考區塊。
運動估計單元222可形成一或多個運動向量（MV），其相對於當前圖片中的當前區塊的位置，定義參考圖片中的參考區塊的位置。運動估計單元222隨後可以將運動向量提供給運動補償單元224。例如，對於單向間預測，運動估計單元222可以提供單個運動向量，而對於雙向間預測，運動估計單元222可以提供兩個運動向量。運動補償單元224隨後可使用運動向量來產生預測區塊。例如，運動補償單元224可以使用運動向量來取得參考區塊的資料。作為另一實例，若運動向量具有分數取樣精度，則運動補償單元224可根據一或多個內插濾波器對預測區塊的值進行內插。此外，對於雙向間預測，運動補償單元224可以取得由相應運動向量辨識的兩個參考區塊的資料，並對經取得的資料進行組合（例如經由逐取樣平均或加權平均）。
作為另一實例，對於內預測或內預測譯碼，內預測單元226可以根據與當前區塊相鄰的取樣來產生預測區塊。例如，對於定向模式，內預測單元226通常可以經由數學的方式對相鄰取樣的值進行組合，並在當前區塊上沿定義的方向填充該等計算出的值以產生預測區塊。作為另一實例，對於DC模式，內預測單元226可以計算相鄰取樣到當前區塊的平均值，並且產生預測區塊以包括針對預測區塊的每個取樣的該所得平均值。
模式選擇單元202將預測區塊提供給殘差產生單元204。殘差產生單元204從視訊資料記憶體230接收當前區塊的原始未編碼版本，並從模式選擇單元202接收預測區塊。殘差產生單元204計算當前區塊和預測區塊之間的逐取樣差異。所得的逐取樣差異定義了針對當前區塊的殘差區塊。在一些實例中，殘差產生單元204亦可決定殘差區塊中的取樣值之間的差以使用殘差差分脈衝代碼調制（RDPCM）來產生殘差區塊。在一些實例中，可以使用執行二進位減法的一或多個減法器電路來形成殘差產生單元204。
在模式選擇單元202將CU劃分為PU的實例中，每個PU可以與亮度預測單元和相應的色度預測單元相關聯。視訊編碼器200和視訊解碼器300可以支援具有各種大小的PU。如前述，CU的大小可以指的是CU的亮度譯碼區塊的大小，而PU的大小可以指的是PU的亮度預測單元的大小。假設特定CU的大小為2Nx2N，則視訊編碼器200可支援用於內預測的2Nx2N或NxN的PU大小，以及用於間預測的2Nx2N、2NxN、Nx2N、NxN或類似的對稱PU大小。視訊編碼器200和視訊解碼器300亦可支援針對用於間預測的2NxnU、2NxnD、nLx2N和nRx2N的PU大小的非對稱劃分。
在模式選擇單元202不進一步將CU劃分為PU的實例中，每個CU可與亮度譯碼區塊和相應色度譯碼區塊相關聯。如前述，CU的大小可以指CU的亮度譯碼區塊的大小。視訊編碼器200和視訊解碼器300可以支援2N×2N、2N×N或N×2N的CU大小。
對於其他視訊譯碼技術（例如，內區塊複製模式譯碼、仿射模式譯碼和線性模型（LM）模式譯碼，僅舉幾例），模式選擇單元202會經由與譯碼技術相關聯的各個單元來產生針對正在被編碼的當前區塊的預測區塊。在一些實例（例如調色板模式譯碼）中，模式選擇單元202可以不產生預測區塊，而是產生指示在其中基於所選擇的調色板來對區塊進行重構的方式的語法元素。在此種模式中，模式選擇單元202可以將該等語法元素提供給熵編碼單元220以進行編碼。
如前述，殘差產生單元204接收當前區塊和相應預測區塊的視訊資料。殘差產生單元204隨後產生當前區塊的殘差區塊。為了產生殘差區塊，殘差產生單元204計算預測區塊和當前區塊之間的逐取樣差異。
變換處理單元206將一或多個變換應用於殘差區塊以產生變換係數的區塊（在本文中被稱為「變換係數區塊」）。變換處理單元206可以將各種變換應用於殘差區塊以形成變換係數區塊。例如，變換處理單元206可以將離散餘弦變換（DCT）、方向變換、Karhunen-Loeve變換（KLT）或概念上類似的變換應用於殘差區塊。在一些實例中，變換處理單元206可以對殘差區塊執行多個變換，例如主變換和次變換，例如旋轉變換。在一些實例中，變換處理單元206不將變換應用於殘差區塊。
量化單元208可以對變換係數區塊中的變換係數進行量化，以產生量化的變換係數區塊。量化單元208可以根據與當前區塊相關聯的量化參數（QP）值來對變換係數區塊的變換係數進行量化。視訊編碼器200（例如，經由模式選擇單元202）可經由調整與CU相關聯的QP值來調整應用於與當前區塊相關聯的變換係數區塊的量化程度。量化可能會導致資訊丟失，因此，量化的變換係數的精度可能會比變換處理單元206產生的原始變換係數的精度低。
逆量化單元210和逆變換處理單元212可以分別對量化的變換係數區塊應用逆量化和逆變換，以從變換係數區塊重構殘差區塊。重構單元214可以基於重構的殘差區塊和由模式選擇單元202產生的預測區塊來產生與當前區塊相對應的重構區塊（儘管可能具有某種程度的失真）。例如，重構單元214可以將重構的殘差區塊的取樣添加到來自模式選擇單元202產生的預測區塊的相應取樣，以產生重構區塊。
濾波器單元216可對重構區塊執行一或多個濾波操作。例如，濾波器單元216可以執行解區塊操作以減少沿著CU的邊緣的區塊狀偽影。在一些實例中，可以跳過濾波器單元216的操作。
視訊編碼器200將重構的區塊儲存在DPB 218中。例如，在不需要濾波器單元216的操作的實例中，重構單元214可以將重構區塊儲存到DPB 218。在需要濾波器單元216的操作的實例中，濾波器單元216可以將經濾波的重構區塊儲存到DPB 218。運動估計單元222和運動補償單元224可從DPB 218取得由重構的（並且可能經濾波的）區塊形成的參考圖片，以對隨後編碼的圖片的區塊進行間預測。此外，內預測單元226可以使用當前圖片的DPB 218中的重構區塊來對當前圖片中的其他區塊進行內預測。
通常，熵編碼單元220可以對從視訊編碼器200的其他功能元件接收的語法元素進行熵編碼。例如，熵編碼單元220可以對來自量化單元208的量化的變換係數區塊進行熵編碼。作為另一實例，熵編碼單元220可以對來自模式選擇單元202的預測語法元素（例如，用於間預測的運動資訊或用於內預測的模式內資訊）進行熵編碼。熵編碼單元220可以對作為視訊資料的另一實例的語法元素執行一或多個熵編碼操作，以產生熵編碼資料。例如，熵編碼單元220可以執行上下文自我調整可變長度譯碼（CAVLC）操作、CABAC操作、可變到可變（V2V）長度譯碼操作、基於語法的上下文自我調整二進位算術譯碼（SBAC）操作、概率區間劃分熵（PIPE）譯碼操作、指數Golomb編碼操作或對資料的另一種熵編碼操作。在一些實例中，熵編碼單元220可以在語法元素未被熵編碼的旁通模式下操作。
視訊編碼器200可輸出包括重構切片或圖片的區塊所需的熵編碼語法元素的位元串流。特別地，熵編碼單元220可以輸出位元串流。
針對區塊描述了上述操作。此種描述應該被理解為用於亮度譯碼區塊及/或色度譯碼區塊的操作。如前述，在一些實例中，亮度譯碼區塊和色度譯碼區塊是CU的亮度和色度分量。在一些實例中，亮度譯碼區塊和色度譯碼區塊是PU的亮度和色度分量。
在一些實例中，不必針對色度譯碼區塊重複針對亮度譯碼區塊執行的操作。作為一個實例，不需要重複用於辨識用於亮度譯碼區塊的運動向量（MV）和參考圖片的操作來辨識用於色度區塊的MV和參考圖片。而是，可以調節用於亮度譯碼區塊的MV以決定用於色度區塊的MV，並且參考圖片可以是相同的。作為另一實例，對於亮度譯碼區塊和色度譯碼區塊，內預測程序可以是相同的。
圖3是說明可以執行本案內容的技術的示例性視訊解碼器300的方塊圖。提供圖3是為了解釋的目的，並且不對本案內容中廣泛例示和描述的技術進行限制。為了說明的目的，本案內容描述了根據VVC（正在開發的ITU-T H.266）和HEVC（ITU-T H.265）的技術的視訊解碼器300。然而，本案內容的技術可以由被配置為其他視訊譯碼標準的視訊譯碼設備來執行。
在圖3的實例中，視訊解碼器300包括譯碼圖片緩衝器（CPB）記憶體320、熵解碼單元302、預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310、濾波器單元312以及解碼圖片緩衝器（DPB）314。CPB記憶體320、熵解碼單元302、預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310、濾波器單元312和DPB 314中的任意一個或全部可以在一或多個處理器中或在處理電路系統中實現。例如，視訊解碼器300的單元可以被實現為一或多個電路或邏輯元件，作為硬體電路系統的一部分，或者作為處理器、ASIC或FPGA的一部分。此外，視訊解碼器300可包括額外的或替代的處理器或處理電路系統，以執行該等和其他功能。
預測處理單元304包括運動補償單元316和內預測單元318。預測處理單元304可以包括附加單元，以根據其他預測模式來執行預測。作為實例，預測處理單元304可以包括調色板單元、訊框內區塊複製單元（其可以形成運動補償單元316的一部分）、仿射單元、線性模型（LM）單元，等等。在其他實例中，視訊解碼器300可以包括更多、更少或不同的功能元件。
CPB記憶體320可以儲存將由視訊解碼器300的元件解碼的視訊資料（例如經編碼視訊位元串流）。可以例如從電腦可讀取媒體110（圖1）獲得儲存在CPB記憶體320中的視訊資料。CPB記憶體320可以包括儲存來自經編碼視訊位元串流的編碼視訊資料（例如，語法元素）的CPB。而且，CPB記憶體320可以儲存除經譯碼圖片的語法元素之外的視訊資料，例如表示來自視訊解碼器300的各個單元的輸出的臨時資料。DPB 314通常儲存經解碼圖片，當對經編碼視訊位元串流的後續資料或圖片進行解碼時，視訊解碼器300可以輸出及/或使用解碼圖片當作參考視訊資料。CPB記憶體320和DPB 314可以由各種記憶體設備中的任何一個（例如，DRAM（包括SDRAM）、MRAM、RRAM或其他類型的記憶體設備）形成。CPB記憶體320和DPB 314可以由同一記憶體設備或分離的記憶體設備提供。在各個實例中，CPB記憶體320可以與視訊解碼器300的其他元件一起在晶片上，或者相對於彼等元件在晶片外。
附加地或替代地，在一些實例中，視訊解碼器300可以從記憶體120（圖1）取得經譯碼的視訊資料。亦即，記憶體120可以如上文針對CPB記憶體320論述的一般儲存資料。同樣，當視訊解碼器300的一些或全部功能在要由視訊解碼器300的處理電路系統執行的軟體中實現時，記憶體120可以儲存要由視訊解碼器300執行的指令。
圖示圖3的各個單元以幫助理解由視訊解碼器300執行的操作。該等單元可以實現為固定功能電路、可程式設計電路或其組合。與圖2類似，固定功能電路是指提供特定功能並在可以被執行的操作上預先設置的電路。可程式設計電路是指可以被程式設計以執行各種任務並且在可以執行的操作中提供靈活功能的電路。例如，可程式設計電路可以執行使可程式設計電路以軟體或韌體的指令所定義的方式操作的軟體或韌體。固定功能電路可以執行軟體指令（例如，以接收參數或輸出參數），但固定功能電路執行的操作類型通常是不可變的。在一些實例中，該等單元中的一或多個單元可以是不同的電路區塊（固定功能或可程式設計的），並且在一些實例中，該等單元中的一或多個單元可以是積體電路。
視訊解碼器300可包括ALU、EFU、數位電路、類比電路及/或由可程式設計電路形成的可程式設計核心。在視訊解碼器300的操作由在可程式設計電路上執行的軟體執行的實例中，晶片上或晶片外記憶體可以儲存視訊解碼器300接收並執行的軟體的指令（例如，目標代碼）。
熵解碼單元302可以從CPB接收經編碼視訊資料，並對視訊資料進行熵解碼以再現語法元素。預測處理單元304、逆量化單元306、逆變換處理單元308、重構單元310和濾波器單元312可以基於從位元串流中提取的語法元素來產生經解碼視訊資料。
通常，視訊解碼器300逐區塊地重構圖片。視訊解碼器300可單獨地對每個區區塊執行重構操作（其中當前正在重構的亦即被解碼的區塊可以被稱為「當前區塊」）。
熵解碼單元302可對定義以下內容的語法元素進行熵解碼：量化的變換係數區塊的量化的變換係數，以及變換資訊，諸如量化參數（QP）及/或變換模式指示。逆量化單元306可以使用與量化的變換係數區塊相關聯的QP來決定量化度，並且同樣地，決定逆量化度以供逆量化單元306應用。逆量化單元306可以例如執行按位元左移操作以對量化的變換係數進行逆量化。逆量化單元306從而可以形成包括變換係數的變換係數區塊。在一些實例中，熵解碼單元302可從視訊資料的位元串流提取當前子圖片，並且對指示圖片的虛擬邊界的虛擬邊界語法元素進行解析。
在逆量化單元306形成變換係數區塊之後，逆變換處理單元308可以將一或多個逆變換應用於變換係數區塊以產生與當前區塊相關聯的殘差區塊。例如，逆變換處理單元308可以將逆DCT、逆整數變換、逆Karhunen-Loeve變換（KLT）、逆旋轉變換、逆方向變換或另一種逆變換應用於變換係數區塊。
此外，預測處理單元304根據由熵解碼單元302進行熵解碼的預測資訊語法元素來產生預測區塊。例如，若預測資訊語法元素指示當前區塊是間預測的，則運動補償單元316可以產生預測區塊。在此種情況下，預測資訊語法元素可以指示DPB 314中的從其取得參考區塊的參考圖片，以及用於辨識參考圖片中的參考區塊相對於當前圖片中的當前區塊位置的位置的運動向量。運動補償單元316通常可以用與針對運動補償單元224所描述的方式基本相似的方式來執行間預測程序（圖2）。
作為另一實例，若預測資訊語法元素指示當前區塊是內預測的，則內預測單元318可以根據由預測資訊語法元素指示的內預測模式來產生預測區塊。再次，內預測單元318通常可以用與針對內預測單元226（圖2）所描述的方式基本相似的方式來執行內預測程序。內預測單元318可以從DPB 314取得針對當前區塊的相鄰取樣的資料。
重構單元310可以使用預測區塊和殘差區塊來重構當前區塊。例如，重構單元310可以將殘差區塊的取樣添加到預測區塊的相應取樣以重構當前區塊。在一些實例中，重構單元310可以基於更新的虛擬邊界來對當前子圖片進行解碼。
濾波器單元312可對重構區塊執行一或多個濾波操作。例如，濾波器單元312可以執行解區塊操作以減少沿著重構區塊的邊緣的區塊狀偽影。不一定在所有實例中皆執行濾波器單元312的操作。
視訊解碼器300可以將重構區塊儲存在DPB 314中。例如，在不執行濾波器單元312的操作的實例中，重構單元310可以將重構區塊儲存到DPB 314。在執行濾波器單元312的操作的實例中，濾波器單元312可以將經濾波的重構區塊儲存到DPB 314。如上文所論述的，DPB 314可以向預測處理單元304提供參考資訊，例如用於內預測的當前圖片以及用於隨後的運動補償的先前解碼的圖片的取樣。此外，視訊解碼器300可以從DPB 314輸出經解碼圖片（例如，解碼的視訊），以便隨後在顯示設備（例如圖1的顯示設備118）上呈現。
以此種方式，視訊解碼器300代表視訊解碼設備的實例，其包括：記憶體，其被配置為儲存視訊資料；及一或多個處理器，其在電路系統中實現並通訊地耦合至該記憶體，該一或多個處理器被配置為：從視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中當前子圖片與當前圖片相關聯；至少部分基於虛擬邊界語法元素來更新虛擬邊界；及基於經更新的虛擬邊界來對當前子圖片進行解碼。
圖4是說明可以執行本案內容的技術的另一個示例性視訊編碼和解碼系統的方塊圖。圖4的實例包括源設備102，其包括視訊編碼器200；及目的地設備136，其包括位元串流提取器250和視訊解碼器300。位元串流提取器250可以被配置為：從視訊資料的位元串流中提取當前子圖片。在一些實例中，位元串流提取器250可以被配置為：對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，當前子圖片與當前圖片相關聯。例如，位元串流提取器250可以包括與視訊解碼器300的熵解碼單元302類似的熵解碼單元252(示為EDU 252)，其可以對虛擬邊界語法元素進行解析。更新虛擬邊界單元254（示為UVBU 254）可以至少部分基於虛擬邊界語法元素來更新虛擬邊界。視訊解碼器300可以基於經更新的虛擬邊界來對當前子圖片進行解碼。
在一些實例中，歸因於位元串流提取器250的技術中的一項或多項可由視訊解碼器300執行。在一些實例中，位元串流提取器可以不是目的地設備136的一部分，而是可以是伺服器的一部分。在一些實例中，例如，位元串流提取器250可以被實現為可以在目的地設備116、目的地設備136或伺服器上執行的應用程式。
以此種方式，位元串流提取器250代表位元串流提取器設備的實例，其包括：被配置為儲存視訊資料的記憶體；及一或多個處理器，其在電路系統中實現並通訊地耦合至該記憶體，該一或多個處理器被配置為：從視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，當前子圖片與當前圖片相關聯；及至少部分基於虛擬邊界語法元素來更新虛擬邊界。
如上文所論述的，一些視訊譯碼標準草案（例如VVC草案9）可以支援對圖片使用虛擬邊界並且可以支援將子圖片視為圖片。當子圖片被視為圖片時，視訊解碼器可獨立於同一圖片內的另一子圖片來提取子圖片並對該子圖片進行解碼。當視訊解碼器從具有虛擬邊界的圖片中提取子圖片時，虛擬邊界可以在子圖片之外。此舉可能會導致解碼錯誤，解碼錯誤可能會對經解碼視訊的品質產生負面影響。
子圖片是一些視訊譯碼標準（例如，VVC草案9）的特徵。子圖片可被指定為可獨立提取且可獨立解碼。子圖片在視埠相關的360度視訊或感興趣區域應用中可以很有用。例如，當一個人在觀看視埠相關的360度視訊時移動其頭部，視圖可能會移動，從而可以提取和解碼新的子圖片以與其他圖片及/或子圖片一起顯示在視埠中。
虛擬邊界可用於自我調整迴路濾波操作。當自我調整迴路濾波器以要濾波的取樣為中心並且濾波器的一部分延伸越過虛擬邊界時，可以改變濾波器使得不使用虛擬邊界另一側的不是當前要濾波的取樣。因此，若虛擬邊界位於當前子圖片之外（例如，不在當前子圖片內部或當前子圖片的真實邊界處），則在應用自我調整迴路濾波時，要包括在濾波器範本中的取樣可以在可能無法用於濾波操作的其他子圖片或者圖片中。例如，可以包含虛擬邊界的另一子圖片可能尚未被解碼，因此另一子圖片的取樣可能不可用於濾波操作。因此，可能需要移動所提取的子圖片的虛擬邊界。
此外，一些視訊譯碼標準草案（例如VVC草案9）包含參考圖片列表約束。該等參考圖片列表約束可能無法適應此種使用情況，亦即從僅具有一個子圖片的層間參考圖片來預測具有多個子圖片的圖片。
此外，一些視訊譯碼標準草案（例如VVC草案9）不要求在發生子圖片重新排序時將子圖片視為圖片。此舉可能會導致解碼不匹配，解碼不匹配可能會對經解碼視訊的品質產生負面影響。
VVC是由ITU-T和ISO/IEC的JVET開發的，意欲針對更廣泛的應用實現超越HEVC的實質性壓縮能力。VVC草案9指定了規範的位元串流和圖片格式、高級語法（HLS）和語義，以及解析和解碼程序。VVC草案9亦在附件中規定了簡介/層級/級別（PTL）限制、位元組串流格式、假設參考解碼器和補充增強資訊（SEI）。
VVC草案9從HEVC繼承了許多高級功能，例如NAL單元和參數集概念、瓦片和波前並行處理、分層譯碼以及使用SEI訊息進行補充資料信號傳遞。VVC草案9中引入了其他高級功能，包括矩形切片和子圖片概念、圖片解析度調適、混合NAL單元類型、圖片標頭（PH）、漸變解碼刷新（GDR）圖片、虛擬邊界，以及用於參考圖片管理的參考圖片列表（RPL）。
在VVC草案9中對參數集語法元素指定了許多信號傳遞條件或語義約束，並且由視訊解碼器300可以從語法元素匯出的變數在解碼程序中被視訊解碼器300使用。
下文描述了VVC草案9中可能存在的一或多個問題。許多與子圖片相關的問題在VVC草案9中指出如下：1）VVC草案9子圖片子位元串流提取程序中缺少針對子圖片ID映射和基於子圖片的虛擬邊界的重寫程序；2）應更新基於子圖片的RPL約束以適應以下用例：當具有多個子圖片的圖片是從僅具有一個子圖片的層間參考圖片預測的；3）在子圖片重新排序發生時不要求將子圖片視為圖片，此舉可能導致解碼不匹配。可能需要約束來避免此種不匹配。
現在論述子圖片子位元串流提取。VVC草案9規定了當視訊譯碼器（例如視訊編碼器200或視訊解碼器300）沒有外部構件來提供替換參數集（包括general_level_idc、圖片寬度和高度、sps_num_subpics_minus1和pps_num_subpics_minus1、子圖片位置、瓦片/切片佈局和一致性訊窗）時，用於子圖片子位元串流提取的重寫程序。
在子圖片提取程序之後，每層可能僅有一個子圖片。映射到入位元串流（inBitstream）中第0個子圖片的子圖片ID可以不等於提取的子圖片的子圖片ID。結果，可能需要子圖片ID映射重寫以在出位元串流（outBitstream）中辨識提取的子位元串流切片NAL單元。此外，由視訊編碼器200在入位元串流中用信號通知的子圖片虛擬邊界位置可以不與新圖片寬度和高度對準，並且一些虛擬邊界位置可以在新圖片邊界之外。因此，當該資訊存在時，可能有必要重寫SPS虛擬邊界資訊。
為了解決該問題，視訊編碼器200、位元串流提取器250或視訊解碼器300可以遵循如下指定的附加技術：
1）去除針對不等於subpicIdx的每個j並且在所有參考的SPS和PPS NAL單元中的SPS和PPS中的子圖片ID語法元素（例如，sps_subpic_id[j]和pps_subpic_id[j]）。換言之，對於不等於subpicIdx的每個j，當視訊解碼器300重寫或更新SPS或PPS時，sps_subpic_id[j]或pps_subpic_id[j]分別不存在於SPS或PPS中。例如，視訊解碼器300可以重寫與當前子圖片相關聯的PPS，其中重寫的PPS不包括用於除當前子圖片之外的子圖片的PPS子圖片辨識符。類似地，視訊解碼器300可以重寫與當前子圖片相關聯的SPS，其中重寫的SPS不包括當前子圖片之外的子圖片的SPS子圖片辨識符。
2）變數numVerVBs、subpicVBx、numHorVBs和subpicVBy推導如下： numVerVBs = 0; for( i = 0; i ＜ sps_num_ver_virtual_boundaries; i++) { if( sps_virtual_boundary_pos_x[ i ]  ＞  (sps_subpic_ctu_top_left_x[ subpicIdx ] * CtbSizeY / 8) && sps_virtual_boundary_pos_x[ i ] ＜ min( ( sps_subpic_ctu_top_left_x[ subpicIdx ] +  sps_subpic_width_minus1[ subpicIdx ] + 1 ) * CtbSizeY, pps_pic_width_in_luma_samples ) / 8 ) subpicVBx[ numVerVBs ++ ] = sps_virtual_boundary_pos_x[ i ]  - sps_subpic_ctu_top_left_x[ subpicIdx ] * CtbSizeY / 8 numHorVBs = 0; for( i = 0; i ＜ sps_num_hor_virtual_boundaries; i++) { if( sps_virtual_boundary_pos_y[ i ]  ＞  (sps_subpic_ctu_top_left_y[ subpicIdx ] * CtbSizeY / 8) && sps_virtual_boundary_pos_y[ i ] ＜ min( ( sps_subpic_ctu_top_left_y[ subpicIdx ] +  sps_subpic_height_minus1[ subpicIdx ] + 1 ) * CtbSizeY, pps_pic_height_in_luma_samples ) / 8 ) subpicVBy[ numHorVBs ++ ] = sps_virtual_boundary_pos_y[ i ]  - sps_subpic_ctu_top_left_y[ subpicIdx ] * CtbSizeY / 8 l 當sps_virtual_boundaries_present_flag等於1時，將所有參考SPS NAL單元中的sps_num_ver_virtual_boundaries、sps_virtual_boundary_pos_x[]、sps_num_hor_virtual_boundaries和sps_virtual_boundary_pos_y[]的值重寫為等於numVerVBs、subpicVBx[i]、numHorVBs和subpicVBy[j]，並且i在0至numVerVB的範圍內，不包括端點，j在0至numHorVB的範圍內，不包括端點。去除所提取的子圖片之外的虛擬邊界。當numVerVB和numHorVB二者皆等於0時，將所有參考的SPS NAL單元中sps_virtual_boundaries_present_flag的值重寫為0，並去除語法元素 sps_num_ver_virtual_boundaries、sps_virtual_boundary_pos_x[i]、sps_num_hor_virtual_boundaries和sps_virtual_boundary_pos_y[i]。
例如，位元串流提取器250或視訊解碼器300可以從視訊資料的位元串流中提取當前子圖片。位元串流提取器250或視訊解碼器300可以對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，當前子圖片與當前圖片相關聯。例如，位元串流提取器250或視訊解碼器300可以解析sps_num_ver_virtual_boundaries、sps_virtual_boundary_pos_x[i]、sps_num_hor_virtual_boundaries和sps_virtual_boundary_pos_y[i]。位元串流提取器250或視訊解碼器器300可以至少部分基於虛擬邊界語法元素來更新虛擬邊界（例如，對於當前子圖片）。例如，位元串流提取器250或視訊解碼器300可以將sps_num_ver_virtual_boundaries、sps_virtual_boundary_pos_x[]、sps_num_hor_virtual_boundaries和sps_virtual_boundary_pos_y[]分別重寫為等於numVerVBs、subpicVBx[i]、numHorVBs和subpicVBy[j]，如上文所描述的。視訊解碼器300可以基於經更新的虛擬邊界來對當前子圖片進行解碼。
現在論述子圖片RPL約束。在VVC草案9中，在當前圖片不是獨立層並且具有多個子圖片時，每個子圖片可以是從具有相同子圖片佈局的參考圖片的具有相同子圖片ID的共置子圖片預測的，或是從僅具有一個子圖片的層間參考圖片的預測，如下所示：
當vps_independent_layer_flag[GeneralLayerIdx[nuh_layer_id]]等於0並且 sps_num_subpics_minus1大於0時，下列兩個條件之一（但不是兩者）可以（例如，應當）為真：1）RefPicList[0]或RefPicList[1]中每個活動條目引用的圖片與當前圖片具有相同的子圖片佈局（例如，該圖片引用的SPS和當前圖片具有相同的sps_num_subpics_minus1值，以及對於0至sps_num_subpics_minus1範圍內（包括端點）的每個j值，具有分別相同的sps_subpic_ctu_top_left_x[j]、sps_subpic_ctu_top_left_y[j]、sps_subpic_width_minus1[j]和sps_subpic_height_minus1[j]值；或者2）RefPicList[0]或RefPicList[1]中每個活動條目引用的圖片是sps_num_subpics_minus1的值等於0針對的層間參考圖片（ILRP）。
此外，存在如下所示的限制子圖片的活動條目的RPL約束。「位元串流一致性的要求是以下兩個約束皆適用： -對於0至sps_num_subpics_minus1範圍內（包括端點）的任何兩個不同的i和j值，SubpicIdVal[i]不應等於SubpicIdVal[j]。 -對於0至sps_num_subpics_minus1範圍內（包括端點）的每個i值，在當前圖片的SubpicIdVal[i]的值不等於參考圖片的SubpicIdVal[i]的值時，當前圖片的第i個子圖片中經譯碼切片的RPL的活動條目不應包括該參考圖片。」
僅具有一個子圖片的參考層應該被排除在上述約束之外，因為整個圖片被用作參考。例如，視訊編碼器200、位元串流提取器250或視訊解碼器300可以排除以上針對僅具有一個子圖片的參考層的約束。例如，視訊編碼器200、位元串流提取器250或視訊解碼器300可以決定參考層具有多於一個子圖片，其中重寫PPS及/或SPS至少部分基於具有多於一個子圖片的參考層。例如，視訊解碼器300可以決定當前圖片的參考圖片為僅具有一個子圖片的層間參考圖片，其中參考圖片中共置子圖片的子圖片辨識符和當前子圖片的子圖片辨識符具有不同的值。
RPL約束可以更新如下，在＜CHANGE＞和＜/CHANGE＞之間顯示來自VVC草案9的更改：
對於0至sps_num_subpics_minus1範圍內（包括端點）的每個i值，若＜CHANGE＞參考圖片具有多於一個子圖片，並且＜/CHANGE＞當前圖片的SubpicIdVal[i]的值不等於參考圖片的SubpicIdVal[i]的值，則當前圖片的第i個子圖片中經譯碼切片的RPL的活動條目不應包括該參考圖片。
例如，位元串流提取器250或視訊解碼器300可以決定當前圖片的參考圖片是否具有多於一個子圖片，以及至少部分基於參考圖片不具有多於一個子圖片，將參考圖片添加為當前子圖片的參考圖片列表中的活動條目。以此種方式，當參考圖片僅具有一個子圖片時，位元串流提取器250或視訊解碼器300可以避免施加約束。
為了實現當前層和參考層二者皆僅具有一個子圖片但子圖片ID不同的情況，本案內容描述了僅在當前層圖片具有多於1個子圖片時應用該約束的實例。例如，視訊編碼器200、位元串流提取器或視訊解碼器300可以僅在當前層圖片具有多於一個子圖片時應用約束。
＜CHANGE＞若當前圖片中具有多於一個子圖片，則＜/CHANGE＞對於0至sps_num_subpics_minus1範圍內（包括端點）的每個i值，若＜CHANGE＞參考圖片具有多於一個子圖片，並且＜/CHANGE＞ SubpicIdVal[i]的值不等於參考圖片的SubpicIdVal[i]的值，則當前圖片的第i個子圖片中經譯碼切片的RPL的活動條目不應包括該參考圖片。
例如，視訊解碼器300可以決定當前圖片的參考圖片是否具有多於一個子圖片以及當前圖片是否具有多於一個子圖片。至少部分基於參考圖片不具有多於一個子圖片，或者當前圖片不具有多於一個子圖片，或者參考圖片和當前圖片二者不具有多於一個子圖片，視訊解碼器300可以將參考圖片添加為當前子圖片的參考圖片列表中的活動條目。以此種方式，當參考圖片、當前圖片或參考圖片和當前圖片二者僅具有一個子圖片時，視訊解碼器300可避免應用約束。
在另一個實例中，對於同一層內的圖片，RPL約束可以表示如下：對於0至sps_num_subpics_minus1範圍內的每個i值（包括端點），在當前圖片的SubpicIdVal[i]的值不等於＜CHANGE＞同一層中的＜/CHANGE＞參考圖片的SubpicIdVal[i]的值的情況下，當前圖片的第i個子圖片中經譯碼切片的RPL的活動條目不應包括該參考圖片。
在一些實例中，任何或所有前述約束可以僅適用於當前圖片的子圖片被視為圖片的情況，例如，當關聯的sps_subpic_treated_as_pic_flag[i]等於1時。例如，視訊編碼器200、位元串流提取器250或視訊解碼器300可以決定當前子圖片將被作為圖片處理，其中重寫PPS及/或SPS至少部分基於當前子圖片被作為圖片處理。在一些實例中，視訊編碼器200、位元串流提取器250或視訊解碼器300可以決定當前子圖片將被作為圖片處理；及決定參考層具有多於一個子圖片，其中重寫PPS及/或SPS是基於當前子圖片正在作為圖片被處理並且參考層具有多於一個子圖片。例如，視訊解碼器300可以決定當前圖片具有多於一個子圖片以及決定當前子圖片將被作為圖片處理，其中當前圖片的參考圖片中共置子圖片的子圖片辨識符與當前子圖片的子圖片辨識符具有相同的值。例如，視訊解碼器300可以決定當前圖片具有多於一個子圖片以及決定當前子圖片不將被作為圖片處理，其中當前圖片的參考圖片中共置子圖片的子圖片辨識符與當前子圖片的子圖片辨識符具有不同的值。
在上述約束之一的一個實例中，約束可以表示如下：對於0至sps_num_subpics_minus1範圍內（包括端點）的每個i值，當＜CHANGE＞sps_subpic_treated_as_pic_flag[i]等於1並且＜/CHANGE＞當前圖片的SubpicIdVal[i]的值不等於＜CHANGE＞同一層＜/CHANGE＞中的參考圖片的SubpicIdVal[i]的值，當前圖片的第i個子圖片中經譯碼切片的RPL的活動條目不應包括該參考圖片。
例如，視訊解碼器300可以決定當前子圖片是否將被作為圖片處理，並且至少部分基於當前子圖片將不被作為圖片處理，將參考圖片添加為當前子圖片的參考圖片列表中的活動條目。以此種方式，在當前子圖片不被作為圖片處理時，視訊解碼器300可以避免應用該約束。
現在論述子圖片重新排序約束。當子圖片不被視為圖片時（例如，sps_subpic_treated_as_pic_flag[i]等於0），VVC草案9允許對子圖片重新排序。子圖片重新排序可以意味著參考圖片中的共置子圖片ID與當前子圖片ID不同。若允許此種參考，則當子圖片被重新排序時（例如被視訊解碼器300重新排序），參考可能在重建中產生不匹配。
在一個實例中，增加了以下約束：若子圖片被重新排序，例如，參考圖片中的共置子圖片具有不同的ID，則當前子圖片應該被視為圖片，例如，sps_subpic_treated_as_pic_flag[i]等於1。例如，若當前子圖片被重新排序，則視訊編碼器200或視訊解碼器300可將當前子圖片視為圖片。
例如，視訊解碼器300可以決定當前子圖片是否被重新排序，並且至少部分基於當前子圖片被重新排序，將當前子圖片視為圖片。
在一個實例中，該約束可以表示如下：對於0至sps_num_subpics_minus1範圍內（包括端點）的每個i值，在當前圖片的SubpicIdVal[i]的值不等於同一層中的參考圖片的SubpicIdVal[i]的值時，sps_subpic_treated_as_pic_flag[i]應該等於1。
在另一實例中，若圖片中存在至少一個經重新排序的子圖片，則約束可以要求圖片的所有子圖片皆被視為圖片。例如，若當前圖片的至少一個子圖片被重新排序，則視訊編碼器200或視訊解碼器300可以將當前圖片的所有子圖片視為圖片。
例如，在當前圖片包括多於一個子圖片時，視訊解碼器300可以至少部分基於當前子圖片被重新排序，將當前圖片的所有子圖片視為圖片。
在一個實例中，該約束可以表示如下：對於0至sps_num_subpics_minus1範圍內（包括端點）的任意i值，在當前圖片的SubpicIdVal[i]的值不等於同一層中的參考圖片的SubpicIdVal[i]的值時，對於0至sps_num_subpics_minus1範圍內（包括端點）的每個j值，sps_subpic_treated_as_pic_flag[j]應該等於1。
另外，在一些實例中，以上約束可以僅應用於子圖片中的P切片或B切片。例如，視訊解碼器300可以決定當前子圖片中的切片是P切片還是B切片；及進一步基於切片是P切片或B切片以及當前子圖片被重新排序，將當前子圖片視為圖片。
圖5是說明本案內容的示例性子圖片提取技術的流程圖。視訊解碼器300或位元串流提取器250可以從視訊資料的位元串流中提取當前子圖片（330）。例如，視訊解碼器300可以開始對當前子圖片進行解碼，或者位元串流提取器250可以從位元串流中提取當前子圖片。
視訊解碼器300或位元串流提取器250可以對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，當前子圖片與當前圖片相關聯（332）。例如，視訊解碼器300或位元串流提取器250可以解析sps_num_ver_virtual_boundaries、sps_virtual_boundary_pos_x[i]、sps_num_hor_virtual_boundaries和sps_virtual_boundary_pos_y[i]。
視訊解碼器300或位元串流提取器250可以至少部分基於虛擬邊界語法元素來更新虛擬邊界（例如，對於當前子圖片）（334）。例如，視訊解碼器300或位元串流提取器250可以將sps_num_ver_virtual_boundaries、sps_virtual_boundary_pos_x[i]、sps_num_hor_virtual_boundaries和sps_virtual_boundary_pos_y[i]的值分別重寫為等於numVerVBs、subpicVBx[ i ]、numHorVBs和subpicVBy[ j ]，如上文所論述的。此舉可以去除所提取的當前子圖片之外的虛擬邊界。
視訊解碼器300可以基於經更新的虛擬邊界來對當前子圖片進行解碼（336）。例如，視訊解碼器300可以在對當前子圖片進行解碼時使用經更新的虛擬邊界。
在一些實例中，位元串流提取器250或視訊解碼器300可以重寫與當前子圖片相關聯的PPS，其中經重寫的PPS不包括用於除當前子圖片之外的子圖片的PPS子圖片辨識符。例如，位元串流提取器250或視訊解碼器300可針對不等於subpicIdx的每個j從PPS中去除其他子圖片的PPS子圖片辨識符，例如pps_subpic_id[j]。
在一些實例中，位元串流提取器250或視訊解碼器300可以決定當前子圖片將被作為圖片處理；及決定參考層具有多於一個子圖片，其中重寫PPS是基於當前子圖片正在作為圖片被處理並且參考層具有多於一個子圖片。
在一些實例中，位元串流提取器250或視訊解碼器300可以重寫與當前子圖片相關聯的SPS，其中重寫的SPS不包括當前子圖片之外的子圖片的SPS子圖片辨識符。例如，位元串流提取器250或視訊解碼器300可針對不等於subpicIdx的每個j從SPS中去除其他子圖片的SPS子圖片辨識符，例如sps_subpic_id[j]。
在一些實例中，位元串流提取器250或視訊解碼器300可以決定當前子圖片將被作為圖片處理；及決定參考層具有多於一個子圖片，其中重寫SPS是基於當前子圖片正在作為圖片被處理並且參考層具有多於一個子圖片。
在一些實例中，位元串流提取器250或視訊解碼器300可以決定當前圖片的參考圖片不具有多於一個子圖片，以及至少部分基於參考圖片不具有多於一個子圖片，將參考圖片添加為當前子圖片的參考圖片列表中的活動條目。在此種情況下，視訊解碼器300可以基於經更新的虛擬邊界和參考圖片列表來對當前子圖片進行解碼。例如，視訊解碼器300可避免應用以下約束：參考圖片可以不是當前子圖片的參考圖片列表中的活動條目，除非參考圖片中存在多於一個子圖片。在一些實例中，參考圖片和當前圖片在同一層中。
在一些實例中，視訊解碼器300可以決定當前圖片的參考圖片是否具有多於一個子圖片並且決定當前圖片是否具有多於一個子圖片。至少部分基於參考圖片不具有多於一個子圖片，當前圖片不具有多於一個子圖片，或者參考圖片和當前圖片二者不具有多於一個子圖片，視訊解碼器300可以將參考圖片添加為當前子圖片的參考圖片列表中的活動條目。在此種情況下，視訊解碼器300可以基於經更新的虛擬邊界和參考圖片列表來對當前子圖片進行解碼。例如，視訊解碼器300可避免應用以下約束：參考圖片可以不是當前子圖片的參考圖片列表中的活動條目，除非參考圖片中存在多於一個子圖片，當前圖片中存在多於一個子圖片，或者參考圖片和當前圖片二者中皆存在多於一個子圖片。
在一些實例中，視訊解碼器300可以決定當前子圖片是否被作為圖片處理；及至少部分基於當前子圖片不將被作為圖片處理，將參考圖片添加為當前子圖片的參考圖片列表中的活動條目。在此種情況下，視訊解碼器300可以基於經更新的虛擬邊界和參考圖片列表來對當前子圖片進行解碼。例如，視訊解碼器300可以解析sps_subpic_treated_as_pic_flag[i]以決定當前子圖片是否被視為圖片。例如，視訊解碼器300可避免應用以下約束：參考圖片可以不是當前子圖片的參考圖片列表中的活動條目，除非當前子圖片被視為圖片。在一些實例中，參考圖片和當前圖片在同一層中。
在一些實例中，視訊解碼器300可以決定當前子圖片是否被重新排序。在一些實例中，作為決定當前子圖片是否被重新排序的一部分，視訊解碼器300可以決定參考圖片中的共置子圖片是否具有與當前子圖片相同的辨識符。至少部分基於當前子圖片被重新排序，視訊解碼器300可以將當前子圖片作為圖片來處理。
在一些實例中，圖片包括多於一個子圖片，並且視訊解碼器300至少部分基於當前子圖片被重新排序，可以將當前圖片的所有子圖片作為圖片來處理。
在一些實例中，視訊解碼器300可以決定當前子圖片中的切片是P切片還是B切片，並且進一步基於切片是P切片或B切片並且子圖片被重新排序，將當前子圖片作為圖片處理。
在一些實例中，視訊解碼器300可以決定當前圖片具有多於一個子圖片以及決定當前子圖片將被作為圖片處理，其中當前圖片的參考圖片中共置子圖片的子圖片辨識符與當前子圖片的子圖片辨識符具有相同的值。在一些實例中，視訊解碼器300可以決定當前圖片的參考圖片為僅具有一個子圖片的層間參考圖片，其中參考圖片中共置子圖片的子圖片辨識符和當前子圖片的子圖片辨識符具有不同的值。在一些實例中，視訊解碼器300可以決定當前圖片具有多於一個子圖片以及決定當前子圖片不將被作為圖片處理，其中當前圖片的參考圖片中共置子圖片的子圖片辨識符與當前子圖片的子圖片辨識符具有不同的值。
圖6是圖示用於對當前區塊進行編碼的示例性方法的流程圖。當前區塊可以包括當前CU。儘管針對視訊編碼器200（圖1和圖2）進行了描述，但應該理解的是：其他設備可以被配置為執行與圖6類似的方法。
在該實例中，視訊編碼器200最初預測當前區塊（350）。舉例而言，視訊編碼器200可形成當前區塊的預測區塊。視訊編碼器200隨後可以計算當前區塊的殘差區塊（352）。為了計算殘差區塊，視訊編碼器200可計算原始未編碼區塊與當前區塊的預測區塊之間的差。視訊編碼器200隨後可以對殘差區塊進行變換並對殘差區塊的變換係數進行量化（354）。接下來，視訊編碼器200可以對殘差區塊的經量化的變換係數進行掃瞄（356）。在掃瞄期間或在掃瞄之後，視訊編碼器200可對變換係數進行熵編碼（358）。例如，視訊編碼器200可以使用CAVLC或CABAC對變換係數進行編碼。視訊編碼器200隨後可以輸出區塊的熵編碼資料（360）。
圖7是圖示用於對視訊資料的當前區塊進行解碼的示例性方法的流程圖。當前區塊可以包括當前CU。儘管針對視訊解碼器300（圖1和圖3）進行了描述，但應該理解的是：其他設備可以被配置為執行與圖7類似的方法。
視訊解碼器300可接收當前區塊的熵編碼資料，例如，熵編碼預測資訊和與當前區塊相對應的殘差區塊的變換係數的熵編碼資料（370）。視訊解碼器300可以對熵編碼資料進行熵解碼以決定針對當前區塊的預測資訊並再現殘差區塊的變換係數（372）。在一些實例中，作為熵解碼資料的一部分，視訊解碼器300可以對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，當前子圖片與該當前圖片相關聯。
視訊解碼器300可例如使用由針對當前區塊的預測資訊所指示的內預測或間預測模式來預測當前區塊（374），以計算針對當前區塊的預測區塊。視訊解碼器300隨後可以變換對再現的變換係數進行逆掃瞄（376），以建立經量化的變換係數的區塊。隨後，視訊解碼器300可對變換係數進行逆量化，並將逆變換應用於變換係數以產生殘差區塊（378）。視訊解碼器300可經由對預測區塊和殘差區塊進行組合來最終對當前區塊進行解碼（380）。在一些實例中，在對視訊資料進行解碼的同時，視訊解碼器300可以執行圖5的一或多個技術。
經由在提取具有虛擬邊界的圖片的子圖片時更新圖片的虛擬邊界，更改RPL約束以適應包括從僅具有一個子圖片的層間參考圖片預測出的多個子圖片的圖片的用例，以及添加該約束：當子圖片被重新排序時子圖片被視為圖片，可以提高視訊解碼品質及/或視訊解碼效能。
本案內容包括以下非限制性實例。
條款1A、一種對視訊資料進行譯碼的方法，該方法包括以下步驟：從參考的網路抽象層（NAL）單元中去除第一序列參數集（SPS）子圖片辨識（ID）語法元素；從參考的圖片參數集（PPS）NAL單元中去除第一PPS子圖片ID語法元素；決定第二SPS子圖片ID語法元素是否等於子圖片索引；基於該第二SPS子圖片ID語法元素不等於該子圖片索引，從SPS中去除該第二SPS子圖片ID語法元素；決定第二PPS子圖片ID語法元素是否等於該子圖片索引；基於該第二PPS子圖片ID語法元素不等於該子圖片索引，從PPS中去除該第二PPS子圖片ID語法元素；避免用信號傳送或解析該第一SPS子圖片ID語法元素、該第一PPS子圖片ID語法元素、該第二SPS子圖片ID語法元素以及該第二PPS子圖片ID語法元素；及對該視訊資料進行譯碼。
條款2A、根據條款1A之方法，亦包括以下步驟：去除所提取的子圖片之外的虛擬邊界。
條款3A、一種用於對視訊進行譯碼的方法，該方法包括以下步驟：決定參考圖片是否有多於一個子圖片；基於該參考圖片僅具有一個子圖片，避免對參考圖片列表（RPL）進行約束；及基於該RPL對該視訊資料進行譯碼。
條款4A、根據條款3A之方法，亦包括以下步驟：決定當前圖片的子圖片是否被視為圖片；基於該子圖片不被視為圖片，避免對該RPL進行約束。
條款5A、根據條款3A或4A之方法，亦包括以下步驟：決定當前層圖片是否具有多於1個子圖片；基於該當前層圖片不具有多於1個子圖片，避免對該RPL進行約束。
條款6A、一種用於對視訊資料進行譯碼的方法，該方法包括以下步驟：決定當前圖片的子圖片是否被重新排序；基於該子圖片被重新排序，將該子圖片視為圖片；及基於該子圖片被視為該圖片，對該視訊資料進行譯碼。
條款7A、根據條款6A之方法，其中決定子圖片是否被重新排序包括：決定參考圖片中的共置子圖片是否具有不同的ID。
條款8A、條款6A或7A的任何組合的方法，亦包括以下步驟：用信號傳輸或解析語法元素，該語法元素指示將該子圖片視為該圖片。
條款9A、根據條款6A-8A的任意組合之方法，亦包括以下步驟：基於該子圖片被重新排序，將該當前圖片的所有子圖片視為圖片。
條款10A、根據條款6A-9A的任意組合之方法，亦包括以下步驟：決定該子圖片中的切片是P切片還是B切片；及基於該切片是P切片或B切片以及該子圖片被重新排序，將該子圖片視為該圖片。
條款11A、根據條款1A-10A的任意組合之方法。
條款12A、根據條款1A-11A中任意條款之方法，其中譯碼包括解碼。
條款13A、根據條款1A-12A中任意條款之方法，其中譯碼包括編碼。
條款14A、一種用於對視訊資料進行譯碼的設備，該設備包括用於執行根據條款1A-13A中任意條款之方法的一或多個構件。
條款15A、根據條款14A之設備，其中該一或多個構件包括電路系統中實現的一或多個處理器。
條款16A、根據條款14A和15A中任意條款之設備，亦包括用於儲存該視訊資料的記憶體。
條款17A、根據條款14A-16A中任意條款之設備，亦包括被配置為顯示經解碼視訊資料的顯示器。
條款18A、根據條款14A-17A中任意條款之設備，其中該設備包括下列中的一項或多項：照相機、電腦、行動設備、廣播接收器設備或機上盒。
條款19A、根據條款14A-18A中任意條款之設備，其中該設備包括視訊解碼器。
條款20A、根據條款14A-19A中任意條款之設備，其中該設備包括視訊編碼器。
條款21A、       一種具有儲存在其上的指令的電腦可讀取儲存媒體，當被執行時，該等指令使得一或多個處理器執行根據條款1-13中任意條款之方法。
條款1B、一種對視訊資料進行解碼的方法，該方法包括以下步驟：從該視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，該當前子圖片與該當前圖片相關聯；至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及基於經更新的虛擬邊界來對該當前子圖片進行解碼。
條款2B、根據條款1B之方法，亦包括以下步驟：重寫與該當前子圖片相關聯的圖片參數集(PPS)，其中重寫的PPS不包括除該當前子圖片之外的子圖片的PPS子圖片辨識符。
條款3B、根據條款2B之方法，亦包括以下步驟：決定該當前子圖片將作為圖片被處理；及決定參考層具有多於一個子圖片，其中該重寫該PPS是基於該當前子圖片作為圖片被處理並且該參考層具有多於一個子圖片。
條款4B、根據條款1B-3B的任意組合之方法，亦包括以下步驟：重寫與該當前子圖片相關聯的序列參數集（SPS），其中重寫的SPS不包括除該當前子圖片之外的子圖片的SPS子圖片辨識符。
條款5B、根據條款4B之方法，亦包括以下步驟：決定該當前子圖片將作為圖片被處理；及決定參考層具有多於一個子圖片，其中該重寫該SPS是基於該當前子圖片作為圖片被處理並且該參考層具有多於一個子圖片。
條款6B、根據條款1B、2B或4B的任意組合之方法，亦包括以下步驟：決定該當前圖片的參考圖片不具有多於一個子圖片；及至少部分基於參考圖片不具有多於一個子圖片，將該參考圖片添加為該當前子圖片的參考圖片列表中的活動條目。
條款7B、根據條款6B之方法，其中該參考圖片和該當前圖片在同一層。
條款8B、根據條款1B-7B的任意組合之方法，亦包括以下步驟：決定該當前圖片的參考圖片是否具有多於一個子圖片；決定該當前圖片是否具有多於一個子圖片；及至少部分基於該參考圖片不具有多於一個子圖片，該當前圖片不具有多於一個子圖片，或者該參考圖片和該當前圖片二者不具有多於一個子圖片，將該參考圖片添加為該當前子圖片的參考圖片列表中的活動條目，其中對該當前子圖片進行解碼包括：基於該等經更新的虛擬邊界和該參考圖片列表來對該當前子圖片進行解碼。
條款9B、根據條款1B-2B、4B或6B-8B的任意組合之方法，亦包括以下步驟：決定該當前子圖片不會作為圖片被處理；及至少部分基於該當前子圖片不會作為該圖片被處理，將參考圖片添加為該當前子圖片的參考圖片列表中的活動條目，其中對該當前子圖片進行解碼包括：基於該等經更新的虛擬邊界和該參考圖片列表來對該當前子圖片進行解碼。
條款10B、根據條款9B之方法，其中該參考圖片和該當前圖片在同一層。
條款11B、根據條款1B-10B的任意組合之方法，亦包括以下步驟：決定該當前子圖片被重新排序；及至少部分基於該當前子圖片被重新排序，將該當前子圖片作為圖片進行處理。
條款12B、根據條款11B之方法，其中決定該當前子圖片被重新排序包括：決定參考圖片中的共置子圖片是否與該當前子圖片具有相同的辨識符；及基於該參考圖片中的該共置子圖片與該當前子圖片具有相同的辨識符，決定該當前子圖片被重新排序。
條款13B、根據條款11B或12B之方法，其中該當前圖片包括多於一個子圖片，並且其中該方法亦包括以下步驟：至少部分基於該當前子圖片被重新排序的，將該當前圖片的所有子圖片作為圖片進行處理。
條款14B、根據條款11B或12B之方法，亦包括以下步驟：決定該當前子圖片中的切片是P切片還是B切片；及進一步基於該切片是P切片或B切片以及該當前子圖片被重新排序，將該當前子圖片作為圖片進行處理。
條款15B、根據條款1B-8B或條款11B-14B中任意條款之方法，亦包括以下步驟：決定該當前圖片具有多於一個子圖片，以及決定該當前子圖片將被作為圖片處理，其中該當前圖片的參考圖片中共置子圖片的子圖片辨識符與該當前子圖片的該子圖片辨識符具有相同的值。
條款16B、根據條款1B-11B或條款13B-14B中任意條款之方法，亦包括以下步驟：決定該當前圖片的參考圖片為僅具有一個子圖片的層間參考圖片，其中該參考圖片中共置子圖片的子圖片辨識符和該當前子圖片的子圖片辨識符具有不同的值。
條款17B、根據條款1B-11B或條款13B-14B或條款16B中任意條款之方法，亦包括以下步驟：決定該當前圖片具有多於一個子圖片，以及決定該當前子圖片不將被作為圖片處理，其中該當前圖片的參考圖片中共置子圖片的子圖片辨識符與該當前子圖片的該子圖片辨識符具有不同的值。
條款18B、一種用於對視訊資料進行解碼的設備，該設備包括：記憶體，其被配置為儲存該視訊資料；及一或多個處理器，其在電路系統中實現並通訊地耦合至該記憶體，其中該一或多個處理器被配置為：從該視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中該當前子圖片與該當前圖片相關聯；至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及基於經更新的虛擬邊界來對該當前子圖片進行解碼。
條款19B、根據條款18B之設備，其中該一或多個處理器亦被配置為：重寫與該當前子圖片相關聯的圖片參數集(PPS)，其中重寫的PPS不包括除該當前子圖片之外的子圖片的PPS子圖片辨識符。
條款20B、根據條款19B之設備，其中該一或多個處理器亦被配置為：決定該當前子圖片將作為圖片被處理；及決定參考層具有多於一個子圖片，其中該一或多個處理器被配置為：重寫該PPS是基於該當前子圖片將作為該圖片被處理的該決定以及該參考層具有多於一個子圖片的該決定。
條款21B、根據條款18B-20B的任意組合之設備，其中該一或多個處理器亦被配置為：重寫與該當前子圖片相關聯的序列參數集（SPS），其中重寫的SPS不包括除該當前子圖片之外的子圖片的SPS子圖片辨識符。
條款22B、根據條款21B之設備，其中該一或多個處理器亦被配置為：決定該當前子圖片將作為圖片被處理；及決定參考層具有多於一個子圖片，其中該一或多個處理器基於該當前子圖片將作為該圖片被處理的該決定以及該參考層具有多於一個子圖片的該決定，來重寫該SPS。
條款23B、根據條款18B、19B或21B的任意組合之設備，其中該一或多個處理器被配亦被配置：決定該當前圖片的參考圖片不具有多於一個子圖片；及至少部分基於該當前圖片的該參考圖片不具有多於一個子圖片的該決定，將該參考圖片添加為該當前子圖片的參考圖片列表中的活動條目。
條款24B、根據條款23B之設備，其中該參考圖片和該當前圖片在同一層。
條款25B、根據條款18B-24B的任意組合之設備，其中該一或多個處理器亦被配置為：決定該當前圖片的參考圖片是否具有多於一個子圖片；決定該當前圖片是否具有多於一個子圖片；及至少部分基於該當前圖片的參考圖片是否有多於一個子圖片的該決定以及該當前圖片是否具有多於一個子圖片參考圖片的該決定，將該參考圖片添加為該當前子圖片的參考圖片列表中的活動條目，其中該參考圖片或該當前圖片中的至少一個不具有多於一個子圖片。
條款26B、根據條款18B-19B、21B或23B-25B的任意組合之設備，其中該一或多個處理器亦被配置為：決定該當前子圖片不會作為圖片被處理；及至少部分基於該當前子圖片不會作為圖片被處理，將參考圖片添加為該當前子圖片的參考圖片列表中的活動條目，其中該一或多個處理器被配置為：基於該等經更新的虛擬邊界和該參考圖片列表，對該當前子圖片進行解碼。
條款27B、根據條款26B之設備，其中該參考圖片和該當前圖片在同一層。
條款28B、根據條款18B-27B的任意組合之設備，其中該一或多個處理器亦被配置為：決定該當前子圖片被重新排序；及至少部分基於該當前子圖片被重新排序的該決定，將該當前子圖片作為圖片進行處理。
條款29B、根據條款28B之設備，其中要決定該當前子圖片被重新排序，該一或多個處理器被配置為：決定參考圖片中的共置子圖片是否與該當前子圖片具有相同的辨識符；及基於該參考圖片中的該共置子圖片與該當前子圖片具有相同的辨識符，決定該當前子圖片被重新排序。
條款30B、根據條款28B或29B之設備，其中該當前圖片包括多於一個子圖片，並且其中該一或多個處理器亦被配置為：至少部分基於該當前子圖片被重新排序的該決定，將該當前圖片的所有子圖片作為圖片進行處理。
條款31B、根據條款28B或29B之設備，其中該一或多個處理器亦被配置為：決定該當前子圖片中的切片是P切片還是B切片；及進一步基於關於該當前子圖片中的切片是P切片或B切片的該決定以及關於該當前子圖片被重新排序的該決定，將該當前子圖片作為圖片進行處理。
條款32B、根據條款18B-25B或條款28B-31B中任意條款之設備，其中該一或多個處理器亦被配置為：決定該當前圖片具有多於一個子圖片，以及決定該當前子圖片將被作為圖片處理，其中該當前圖片的參考圖片中共置子圖片的子圖片辨識符與該當前子圖片的該子圖片辨識符具有相同的值。
條款33B、根據條款18B-28B或條款30B-31B中任意條款之設備，其中該一或多個處理器亦被配置為：決定該當前圖片的參考圖片為僅具有一個子圖片的層間參考圖片，其中該參考圖片中共置子圖片的子圖片辨識符和該當前子圖片的子圖片辨識符具有不同的值。
條款34B、根據條款18B-28B或條款30B-31B或條款33B中任意條款之設備，其中該一或多個處理器亦被配置為：決定該當前圖片具有多於一個子圖片，以及決定該當前子圖片不將被作為圖片處理，其中該當前圖片的參考圖片中共置子圖片的子圖片辨識符與該當前子圖片的該子圖片辨識符具有不同的值。
條款35B、根據條款18B-34B中任意條款之設備，亦包括：被配置為顯示該視訊資料的顯示器。
條款36B、根據條款18B-35B中任意條款之設備，其中該設備包括行動電話。
條款37B、一種儲存指令的非暫時性電腦可讀取儲存媒體，該等指令在被執行時，使一或多個處理器：從該視訊資料的位元串流中提取當前子圖片；對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中該當前子圖片與該當前圖片相關聯；至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及基於經更新的虛擬邊界來對該當前子圖片進行解碼。
條款38B、一種用於對視訊資料進行解碼的設備，該設備包括：用於從該視訊資料的位元串流中提取當前子圖片的構件；用於對指示當前圖片的虛擬邊界的虛擬邊界語法元素進行解析的構件，其中該當前子圖片與該當前圖片相關聯；用於至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界的構件；及用於基於經更新的虛擬邊界來對該當前子圖片進行解碼的構件。
應該認識到的是：根據實例，本文中描述的技術中的任一種技術的某些動作或事件可以不同的順序執行，可以添加、合併或一起省略（例如，對於技術的實施而言，不是所有所描述的動作或事件皆是必要的）。此外，在某些實例中，動作或事件可以併發執行（例如，經由多執行緒處理、中斷處理或多處理器）而不是順序執行。
在一或多個實例中，可以用硬體、軟體、韌體，或其任意組合來實現所描述的功能。若用軟體來實現，則該等功能可以作為一或多個指令或代碼儲存在電腦可讀取媒體上，或者經由電腦可讀取媒體傳輸，以及由基於硬體的處理單元執行。電腦可讀取媒體可以包括電腦可讀取儲存媒體，其與諸如資料儲存媒體的有形媒體，或通訊媒體（其包括例如，根據通訊協定促進將電腦程式從一個地點轉移到另一個地點的任何媒體）相對應。以此種方式，電腦可讀取媒體通常可以對應於（1）非暫時性的有形電腦可讀取儲存媒體或者（2）通訊媒體（諸如信號或載波）。資料儲存媒體可以是可以由一或多個電腦或一或多個處理器存取以便取得用於本案內容中描述的技術的實現的指令、代碼及/或資料結構的任何可用媒體。電腦程式產品可以包括電腦可讀取媒體。
經由舉例而非限制的方式，此種電腦可讀取儲存媒體可以包括RAM、ROM、EEPROM、CD-ROM或其他光碟儲存、磁碟儲存或其他磁儲存設備、快閃記憶體或者可以用於儲存具有指令或資料結構形式的所期望的程式碼並可以由電腦存取的任何其他媒體。此外，任何連接皆可以被適當地稱為電腦可讀取媒體。例如，若使用同軸電纜、光纖線纜、雙絞線、數位用戶線路（DSL），或諸如紅外線、無線電和微波的無線技術，從網站、伺服器，或其他遠端源傳輸指令，則，同軸電纜、光纖線纜、雙絞線、DSL，或諸如紅外線、無線電和微波的無線技術包含在媒體的定義中。然而，應該理解的是：電腦可讀取儲存媒體和資料儲存媒體不包括連接、載波、信號或其他暫時性媒體，而是針對非暫時性、有形的儲存媒體。如本文中所使用的，磁碟（disk）和光碟（disc）包括壓縮光碟（CD）、鐳射光碟、光碟、數位多功能光碟（DVD）、軟碟和藍光光碟，其中磁碟通常磁性地複製資料，而光碟則用鐳射來光學地複製資料。上述各項的組合亦應該包括在電腦可讀取媒體的範疇之內。
指令可由諸如一或多個數位信號處理器（DSP）、通用微處理器、特殊應用積體電路（ASIC）、現場可程式設計閘陣列（FPGA）或其他等效整合或離散邏輯電路系統的一或多個處理器執行。因此，如本文中所使用的，術語「處理器」和「處理電路系統」可以代表前述結構或適於本文中所描述的技術的實現的任何其他結構中的任何一個。此外，在一些態樣中，本文中描述的功能可以在配置用於編碼和解碼或者併入組合轉碼器的專用硬體及/或軟體模組中提供。此外，該等技術可以在一或多個電路或邏輯單元中完全實現。
本案內容的技術可以在多種設備或裝置中實現，該等設備或裝置包括無線手持設備、積體電路（IC）或一組IC（例如，晶片組）。本案內容中描述了各種元件、模組或單元以強調被配置為執行所揭示技術的設備的功能態樣，但不一定要求由不同的硬體單元來實現。而是如前述，各個單元可以組合在轉碼器硬體單元中，或者由可交互操作的硬體單元的集合來提供，其包括如前述的一或多個處理器結合合適的軟體及/或韌體。
已經描述了各個實例。該等實例和其他實例在下文請求項的範疇之內。
100:視訊編碼和解碼系統 102:源設備 104:視訊源 106:記憶體 108:輸出介面 110:電腦可讀取媒體 112:儲存設備 114:檔案伺服器 116:目的地設備 118:顯示設備 120:記憶體 122:輸入介面 136:目的地設備 200:視訊編碼器 202:模式選擇單元 204:殘差產生單元 206:變換處理單元 208:量化單元 210:逆量化單元 212:逆變換處理單元 214:重構單元 216:濾波器單元 218:解碼圖片緩衝器（DPB） 220:熵編碼單元 222:運動估計單元 224:運動補償單元 226:內預測單元 230:視訊資料記憶體 250:位元串流提取器 252:熵解碼單元 254:更新虛擬邊界單元 300:視訊解碼器 302:熵解碼單元 304:預測處理單元 306:逆量化單元 308:逆變換處理單元 310:重構單元 312:濾波器單元 314:解碼圖片緩衝器（DPB） 316:運動補償單元 318:內預測單元 320:CPB記憶體 330:步驟 332:步驟 334:步驟 336:步驟 350:步驟 352:步驟 354:步驟 356:步驟 358:步驟 360:步驟 370:步驟 372:步驟 374:步驟 376:步驟 378:步驟 380:步驟
圖1是說明可以執行本案內容的技術的示例性視訊編碼和解碼系統的方塊圖。
圖2是說明可以執行本案內容的技術的示例性視訊編碼器的方塊圖。
圖3是說明可以執行本案內容的技術的示例性視訊解碼器的方塊圖。
圖4是說明可以執行本案內容的技術的另一個示例性視訊編碼和解碼系統的方塊圖。
圖5是說明本案內容的示例性子圖片提取技術的流程圖。
圖6是說明視訊編碼的實例的流程圖。
圖7是說明視訊解碼的實例的流程圖。
國內寄存資訊(請依寄存機構、日期、號碼順序註記) 無 國外寄存資訊(請依寄存國家、機構、日期、號碼順序註記) 無
330:步驟
332:步驟
334:步驟
336:步驟

Claims (37)

  1. 一種對視訊資料進行解碼的方法，該方法包括以下步驟： 從該視訊資料的一位元串流中提取一當前子圖片； 對指示一當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，該當前子圖片與該當前圖片相關聯； 至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及 基於該等經更新的虛擬邊界來對該當前子圖片進行解碼。
  2. 根據請求項1之方法，亦包括以下步驟： 重寫與該當前子圖片相關聯的一圖片參數集(PPS)，其中該重寫的PPS不包括除該當前子圖片之外的子圖片的PPS子圖片辨識符。
  3. 根據請求項2之方法，亦包括以下步驟： 決定該當前子圖片將作為一圖片被處理；及 決定一參考層具有多於一個子圖片， 其中該重寫該PPS是基於該當前子圖片作為該圖片被處理並且該參考層具有多於一個子圖片。
  4. 根據請求項1之方法，亦包括以下步驟： 重寫與該當前子圖片相關聯的一序列參數集（SPS），其中該重寫的SPS不包括除該當前子圖片之外的子圖片的SPS子圖片辨識符。
  5. 根據請求項4之方法，亦包括以下步驟： 決定該當前子圖片將作為一圖片被處理；及 決定一參考層具有多於一個子圖片， 其中該重寫該SPS是基於該當前子圖片作為該圖片被處理並且該參考層具有多於一個子圖片。
  6. 根據請求項1之方法，亦包括以下步驟： 決定該當前圖片的一參考圖片不具有多於一個子圖片；及 至少部分基於該參考圖片不具有多於一個子圖片，將該參考圖片添加為該當前子圖片的一參考圖片列表中的一活動條目。
  7. 根據請求項6之方法，其中該參考圖片和該當前圖片在一同一層。
  8. 根據請求項1之方法，亦包括以下步驟： 決定該當前圖片的一參考圖片是否具有多於一個子圖片； 決定該當前圖片是否具有多於一個子圖片，以及 至少部分基於該參考圖片不具有多於一個子圖片，該當前圖片不具有多於一個子圖片，或者該參考圖片和該當前圖片二者不具有多於一個子圖片，將該參考圖片添加為該當前子圖片的一參考圖片列表中的一活動條目， 其中對該當前子圖片進行解碼之步驟包括以下步驟：基於該等經更新的虛擬邊界和該參考圖片列表來對該當前子圖片進行解碼。
  9. 根據請求項1之方法，亦包括以下步驟： 決定該當前子圖片不會作為一圖片被處理；及 至少部分基於該當前子圖片不會作為該圖片被處理，將一參考圖片添加為該當前子圖片的一參考圖片列表中的一活動條目， 其中對該當前子圖片進行解碼之步驟包括以下步驟：基於該等經更新的虛擬邊界和該參考圖片列表來對該當前子圖片進行解碼。
  10. 根據請求項9之方法，其中該參考圖片和該當前圖片在一同一層。
  11. 根據請求項1之方法，亦包括以下步驟： 決定該當前子圖片被重新排序；及 至少部分基於該當前子圖片被重新排序，將該當前子圖片作為一圖片進行處理。
  12. 根據請求項11之方法，其中決定該當前子圖片被重新排序之步驟包括以下步驟： 決定一參考圖片中的一共置子圖片是否與該當前子圖片具有一相同的辨識符；及 基於該參考圖片中的該共置子圖片與該當前子圖片具有該相同的辨識符，決定該當前子圖片被重新排序。
  13. 根據請求項11之方法，其中該當前圖片包括多於一個子圖片，並且其中該方法亦包括以下步驟： 至少部分基於該當前子圖片被重新排序，將該當前圖片的所有子圖片作為圖片進行處理。
  14. 根據請求項11之方法，亦包括以下步驟： 決定該當前子圖片中的一切片是一P切片還是一B切片；及 進一步基於該切片是一P切片或一B切片以及該當前子圖片被重新排序，將該當前子圖片作為該圖片進行處理。
  15. 根據請求項1之方法，亦包括以下步驟： 決定該當前圖片具有多於一個子圖片；及 決定該當前子圖片將作為一圖片被處理， 其中該當前圖片的一參考圖片中的一共置子圖片的一子圖片辨識符與該當前子圖片的該子圖片辨識符具有一相同的值。
  16. 根據請求項1之方法，亦包括以下步驟： 決定該當前圖片的一參考圖片是僅具有一個子圖片的一層間參考圖片， 其中該參考圖片中一共置子圖片的一子圖片辨識符和該當前子圖片的該子圖片辨識符具有不同的值。
  17. 根據請求項1之方法，亦包括以下步驟： 決定該當前圖片具有多於一個子圖片，以及 決定該當前子圖片將不會作為一圖片被處理， 其中該當前圖片的一參考圖片中的一共置子圖片的一子圖片辨識符與該當前子圖片的該子圖片辨識符具有不同的值。
  18. 一種用於對視訊資料進行解碼的設備，該設備包括： 記憶體，其被配置為儲存該視訊資料；及 一或多個處理器，其在電路系統中實現並且通訊地耦合至該記憶體，其中該一或多個處理器被配置為： 從該視訊資料的一位元串流中提取一當前子圖片； 對指示一當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中該當前子圖片與該當前圖片相關聯； 至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及 基於該等經更新的虛擬邊界來對該當前子圖片進行解碼。
  19. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 重寫與該當前子圖片相關聯的一圖片參數集(PPS)，其中該重寫的PPS不包括除該當前子圖片之外的子圖片的PPS子圖片辨識符。
  20. 根據請求項19之設備，其中該一或多個處理器亦被配置為： 決定該當前子圖片將作為一圖片被處理；及 決定一參考層具有多於一個子圖片， 其中該一或多個處理器被配置為重寫該PPS是基於關於該當前子圖片將作為該圖片被處理的該決定以及關於該參考層具有多於一個子圖片的該決定。
  21. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 重寫與該當前子圖片相關聯的一序列參數集（SPS），其中該重寫的SPS不包括除該當前子圖片之外的子圖片的SPS子圖片辨識符。
  22. 根據請求項21之設備，其中該一或多個處理器亦被配置為： 決定該當前子圖片將作為一圖片被處理；及 決定一參考層具有多於一個子圖片， 其中該一或多個處理器基於關於該當前子圖片將作為該圖片被處理的該決定以及關於該參考層具有多於一個子圖片的該決定，重寫該SPS。
  23. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 決定該當前圖片的一參考圖片不具有多於一個子圖片；及 至少部分基於關於該當前圖片的該參考圖片不具有多於一個子圖片的該決定，將該參考圖片添加為該當前子圖片的一參考圖片列表中的一活動條目。
  24. 根據請求項23之設備，其中該參考圖片和該當前圖片在一同一層。
  25. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 決定該當前圖片的一參考圖片是否具有多於一個子圖片； 決定該當前圖片是否具有多於一個子圖片；及 至少部分基於關於該當前圖片的一參考圖片是否有多於一個子圖片的該決定以及關於該當前圖片是否具有多於一個子圖片參考圖片的該決定，將該參考圖片添加為該當前子圖片的一參考圖片列表中的一活動條目， 其中該參考圖片或該當前圖片中的至少一個不具有多於一個子圖片。
  26. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 決定該當前子圖片不會作為一圖片被處理；及 至少部分基於該當前子圖片不會作為一圖片被處理的該決定，將一參考圖片添加為該當前子圖片的一參考圖片列表中的一活動條目， 其中該一或多個處理器被配置為：基於該等經更新的虛擬邊界和該參考圖片列表來對該當前子圖片進行解碼。
  27. 根據請求項26之設備，其中該參考圖片和該當前圖片在一同一層。
  28. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 決定該當前子圖片被重新排序；及 至少部分基於關於該當前子圖片被重新排序的該決定，將該當前子圖片作為一圖片進行處理。
  29. 根據請求項28之設備，其中為了決定該當前子圖片被重新排序，該一或多個處理器被配置為： 決定一參考圖片中的一共置子圖片是否與該當前子圖片具有一相同的辨識符；及 基於該參考圖片中的該共置子圖片與該當前子圖片具有該相同的辨識符，決定該當前子圖片被重新排序。
  30. 根據請求項28之設備，其中該當前圖片包括多於一個子圖片，並且其中該一或多個處理器亦被配置為： 至少部分基於關於該當前子圖片被重新排序的該決定，將該當前圖片的所有子圖片作為圖片進行處理。
  31. 根據請求項28之設備，其中該一或多個處理器亦被配置為： 決定該當前子圖片中的一切片是一P切片還是一B切片；及 進一步基於關於該當前子圖片中的一切片是一P切片或一B切片的該決定以及關於該當前子圖片被重新排序的該決定，將該當前子圖片作為該圖片進行處理。
  32. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 決定該當前圖片具有多於一個子圖片；及 決定該當前子圖片將作為一圖片被處理， 其中該當前圖片的一參考圖片中的一共置子圖片的一子圖片辨識符與該當前子圖片的該子圖片辨識符具有一相同的值。
  33. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 決定該當前圖片的一參考圖片是僅具有一個子圖片的一層間參考圖片， 其中該參考圖片中一共置子圖片的一子圖片辨識符和該當前子圖片的該子圖片辨識符具有不同的值。
  34. 根據請求項18之設備，其中該一或多個處理器亦被配置為： 決定該當前圖片具有多於一個子圖片；及 決定該當前子圖片將不會作為一圖片被處理， 其中該當前圖片的一參考圖片中的一共置子圖片的一子圖片辨識符與該當前子圖片的該子圖片辨識符具有不同的值。
  35. 根據請求項18之設備，亦包括： 一顯示器，其被配置為顯示該視訊資料。
  36. 根據請求項18之設備，其中該設備包括一行動電話。
  37. 一種儲存指令的非暫時性電腦可讀取儲存媒體，當被執行時，該等指令使一或多個處理器： 從該視訊資料的一位元串流中提取一當前子圖片； 對指示一當前圖片的虛擬邊界的虛擬邊界語法元素進行解析，其中該當前子圖片與該當前圖片相關聯； 至少部分基於該等虛擬邊界語法元素來更新該等虛擬邊界；及 基於該等經更新的虛擬邊界來對該當前子圖片進行解碼。
TW110116851A 2020-05-11 2021-05-11 視訊譯碼中的子圖片提取和約束 TW202147840A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US202063023044P 2020-05-11 2020-05-11
US63/023,044 2020-05-11
US17/314,959 US11683528B2 (en) 2020-05-11 2021-05-07 Sub-picture extraction and constraints in video coding
US17/314,959 2021-05-07

Publications (1)

Publication Number Publication Date
TW202147840A true TW202147840A (zh) 2021-12-16

Family

ID=78413330

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110116851A TW202147840A (zh) 2020-05-11 2021-05-11 視訊譯碼中的子圖片提取和約束

Country Status (7)

Country Link
US (1) US11683528B2 (zh)
EP (1) EP4150911A2 (zh)
KR (1) KR20230008724A (zh)
CN (1) CN115398903A (zh)
BR (1) BR112022022082A2 (zh)
TW (1) TW202147840A (zh)
WO (1) WO2021231291A2 (zh)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11570470B2 (en) * 2017-09-28 2023-01-31 Vid Scale, Inc. Complexity reduction of overlapped block motion compensation
US11089335B2 (en) * 2019-01-14 2021-08-10 Mediatek Inc. Method and apparatus of in-loop filtering for virtual boundaries
US11159791B2 (en) * 2019-03-16 2021-10-26 Mediatek Inc. Method and apparatus for signaling adaptive loop filter parameters in video coding
MX2021014687A (es) * 2019-09-23 2022-01-11 Electronics & Telecommunications Res Inst Metodo y dispositivo de codificacion/decodificacion de imagenes y medio de grabacion que almacena flujo de bits.
WO2021125912A1 (ko) * 2019-12-20 2021-06-24 주식회사 윌러스표준기술연구소 비디오 신호 처리 방법 및 이를 위한 장치
US11800096B2 (en) * 2020-03-31 2023-10-24 Tencent America LLC Method for signaling virtual boundary signaling with subpictures in coded video stream

Also Published As

Publication number Publication date
US11683528B2 (en) 2023-06-20
WO2021231291A2 (en) 2021-11-18
US20210352330A1 (en) 2021-11-11
BR112022022082A2 (pt) 2022-12-13
WO2021231291A3 (en) 2022-02-24
EP4150911A2 (en) 2023-03-22
CN115398903A (zh) 2022-11-25
KR20230008724A (ko) 2023-01-16

Similar Documents

Publication Publication Date Title
CN111602395B (zh) 用于视频译码的量化组
CN114342389A (zh) 视频编解码和变换单元的以高层语法信令通知的最大和最小块大小
CN113170162A (zh) 用于视频译码的共享候选列表和并行候选列表推导
TW202147847A (zh) 視訊譯碼中的參考圖片清單約束和訊號傳遞
CN115004712A (zh) 用于视频译码的经解码图片缓冲器（dpb）参数信令通知
CN115486066A (zh) 在视频编解码中的独立子图片信令通知
CN113545054A (zh) 视频编解码中子块变换的简化
CN113545051A (zh) 使用块大小限制的视频数据块的重构
CN115668921A (zh) 用于视频译码的语法元素的一般约束
CN114375575A (zh) 用于视频编解码的高层语法中的子图片信令
EP4122200A1 (en) High level syntax for video with mixed nal unit types
TW202143735A (zh) 用於視訊資料的語法元素的訊號傳遞
US11943429B2 (en) Subpicture signaling in video coding
CN115398921A (zh) 确定是否对在切片报头中的视频数据的图片的图片报头数据进行译码
CN115299056A (zh) 视频译码中的子块合并候选者的信令数量
TW202141988A (zh) 用於視訊譯碼中的變換跳過區塊的高級約束
EP4118828A1 (en) Coded video sequence start access unit in video coding
CN114846801A (zh) 基于色度变换跳过的用于色度的lfnst信令
CN115462072A (zh) 视频译码中的高级去块滤波(dbf)、自适应环路滤波(alf)和采样自适应偏移(sao)控制以及自适应参数集(aps)数量约束
TW202127891A (zh) 用於視訊編碼的高階語法中子圖像的訊令編號
TW202147840A (zh) 視訊譯碼中的子圖片提取和約束
TWI840427B (zh) 用於置零轉換之掃描及最後係數位置寫碼
CN114402600A (zh) 用于视频编解码的参数集信令通知
TW202404371A (zh) 視訊譯碼中用於多種顏色分量的基於神經網路的濾波程序
CN116724551A (zh) 用于视频译码的帧内预测的最可能模式