TW201742464A - 用於產生用於視訊圖像之區域嵌套訊息之方法及系統 - Google Patents

用於產生用於視訊圖像之區域嵌套訊息之方法及系統 Download PDF

Info

Publication number
TW201742464A
TW201742464A TW106115367A TW106115367A TW201742464A TW 201742464 A TW201742464 A TW 201742464A TW 106115367 A TW106115367 A TW 106115367A TW 106115367 A TW106115367 A TW 106115367A TW 201742464 A TW201742464 A TW 201742464A
Authority
TW
Taiwan
Prior art keywords
region
nested
image
message
area
Prior art date
Application number
TW106115367A
Other languages
English (en)
Inventor
阿達許 克里許納 瑞瑪蘇布雷蒙尼安
羅傑爾斯 喬爾 索爾
益魁 王
丹姆裘 瑞斯諾斯基
山斯立 唐 巴格戴西
馬塔 卡茲維克茲
Original Assignee
高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 高通公司 filed Critical 高通公司
Publication of TW201742464A publication Critical patent/TW201742464A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167Position within a video image, e.g. region of interest [ROI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明描述用於產生一區域嵌套訊息之系統、方法及電腦可讀媒體。在一些實例中,獲得一視訊位元串流,且使用該視訊資料來產生一經編碼視訊位元串流。該經編碼視訊位元串流包括一區域嵌套訊息,該區域嵌套訊息含有複數個嵌套訊息及定義該經編碼視訊位元串流之一圖像之至少一第一區域的區域資料。舉例而言,該區域嵌套訊息之一第一嵌套訊息包括一第一資料集及指示該圖像之該第一區域與該第一資料集相關聯之一第一區域識別符。

Description

用於產生用於視訊圖像之區域嵌套訊息之方法及系統
本申請案係關於視訊寫碼。更具體而言,本申請案係關於產生用於視訊圖像之區域嵌套訊息。
諸多裝置及系統允許處理並輸出視訊資料以供消費。數位視訊資料包括大量資料以滿足消費者及視訊提供者的需求。舉例而言,視訊資料之消費者期望具有高保真度、解析度、圖框速率及其類似者的最高品質之視訊。因此,需要滿足此等需求之大量視訊資料對通信網路及處理並儲存該視訊資料之裝置添加負擔。 各種視訊寫碼技術可用於壓縮視訊資料。根據一或多個視訊寫碼標準執行視訊編碼。舉例而言,視訊寫碼標準包括高效率視訊寫碼(HEVC)、高階視訊寫碼(AVC)、動畫專家組(MPEG)寫碼或其類似者。視訊寫碼通常運用利用視訊影像或序列中存在的冗餘的預測方法(例如,框間預測、框內預測或其類似者)。視訊寫碼技術的重要目標為將視訊資料壓縮成使用較低位元率的形式,同時避免視訊品質的降級或使其最小化。隨著不斷演進的視訊服務變得可用,需要具有較佳寫碼效率的編碼技術。
在一些實施中,描述用於產生待應用於視訊圖像之一或多個區域之訊息及/或後設資料的技術及系統。圖像之區域可包括該圖像之空間部分(且並非整個圖像)。在一些狀況下,技術及系統可發信一或多個圖像之區域集及訊息及/或資料(例如,後設資料)集,且可使該等訊息及/或該資料之子集與該等所規定區域之子集相關聯。該等訊息可包括補充增強資訊(SEI)訊息或可被包括在視訊位元串流中或包括有視訊位元串流的任何其他合適的訊息。 在一些實例中,該等訊息可包括關於視訊圖像的區域嵌套訊息。該等區域嵌套訊息可用於發信圖像區域集(例如,使用定義每一圖像區域之區域資料)以及與該等圖像區域集相關聯的資訊。區域嵌套訊息可經發信用於圖像且該區域嵌套訊息中之資訊可包括嵌套在該區域嵌套訊息中之一或多個訊息(本文中被稱作「嵌套訊息」或「可區域嵌套訊息」)。 該區域嵌套訊息之嵌套訊息可包括可應用於該圖像之一或多個區域之一或多個資料集(例如,後設資料或其他資料集)。在一些實例中,嵌套訊息中之資料集可定義可由解碼器裝置、播放器裝置或其他裝置對一或多個區域執行之功能。在一些說明性實施例中,資料集可包括用於對圖像之一或多個區域執行膠卷粒紋合成功能之膠卷粒紋特性,用於對一或多個區域執行色調映射功能之色調映射資訊,及/或用於對視訊圖像之區域執行功能之任何其他合適的資料。在一些狀況下,嵌套訊息中之資料集可規定一或多個區域特有之內容之特性。在一項說明性實例中,該資料集可包括關於與該一或多個區域相關聯之內容之最大照度的資訊。在其他狀況下,嵌套訊息中之該資料集可規定可由解碼器裝置、播放器裝置或其他裝置用於根據裝置之約束或根據裝置操作之條件來處理一或多個區域特定之內容的提示或資訊。舉例而言,資料集可包括關於編碼器可考慮適合用於處理內容之第一濾波器係數集,且該解碼器裝置、播放器或其他裝置可選擇使用彼等係數,或可使用該第一係數集來導出第二係數集以將其應用於屬於與該資料集相關聯之該一或多個區域之內容。 關於圖像之區域嵌套訊息可包括定義圖像之每一區域僅一次之區域資料,且區域嵌套訊息中之嵌套訊息可包括識別嵌套資訊中之資料集欲應用於之區域的區域識別符或與該等區域識別符相關聯。舉例而言,定義區域之區域資料可被含在區域嵌套訊息中,其中該區域經定義用於經指派至該區域之嵌套訊息應用於其之一或多個圖像。在一些狀況下,區域嵌套訊息之嵌套訊息可包括一或多個區域識別符。可將區域識別符指派至嵌套訊息中之資料集以指示該資料集欲應用於的區域。使用此技術,區域資料並非必須針對每一嵌套訊息或針對欲應用於圖像之每一資料集單獨地發信。 在一些實例中,區域嵌套訊息中之嵌套訊息包括資料集(例如,後設資料,或其他資料集)及指示該資料集可應用於之圖像之任何區域的一或多個區域識別符。在一些實例中,嵌套訊息包括定義多個功能之多個資料集,且亦包括用以指示該等資料集欲應用於之圖像之區域的該多個資料集之一或多個區域識別符。在一些狀況下,區域嵌套訊息之多個嵌套訊息可應用於同一圖像中之共同區域。舉例而言,區域嵌套訊息之第一嵌套訊息可包括可應用於第一區域之一或多個資料集,且區域嵌套訊息之第二嵌套訊息可包括可應用於第一區域之一或多個資料集。 在一些狀況中,區域嵌套訊息可在同一區域嵌套訊息中多於一次地定義相同區域;然而,在此狀況中,與區域之兩個情況相關聯之識別符將不同以區別該等情況。此等實例可在重複之區域與一或多個其他區域重疊時且在一或多個資料集應用於區域時發生,在該狀況中,可需要由指示符指示的不同性質來判定可應用於重疊區域中之一或多個像素之資料集。 在一些實例中,區域嵌套訊息為區域嵌套補充增強資訊(SEI)訊息。區域嵌套SEI訊息可包括定義圖像之多個區域的複數個區域資料,及具有資料集及區域識別符之多個嵌套SEI訊息。 根據編碼視訊資料之至少一個實例,提供編碼視訊資料之方法。該方法包括:獲得該視訊資料。該方法進一步包括:使用該視訊資料產生包括區域嵌套訊息之經編碼視訊位元串流。該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之圖像之至少第一區域的區域資料。該區域嵌套訊息之第一嵌套訊息包括第一資料集,以及指示該圖像之該第一區域與該第一資料集相關聯之第一區域識別符。 在編碼視訊資料之另一實例中,提供包括經組態以儲存視訊資料之記憶體及處理器的設備。處理器經組態以獲得視訊資料且可獲得視訊資料。處理器經進一步組態以且可使用視訊資料產生包括區域嵌套訊息之經編碼視訊位元串流。該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之圖像之至少第一區域的區域資料。該區域嵌套訊息之第一嵌套訊息包括第一資料集,以及指示該圖像之該第一區域與該第一資料集相關聯之第一區域識別符。 在編碼視訊資料之另一實例中,提供儲存有指令的非暫時性電腦可讀媒體,該等指令在由一或多個處理器執行時致使該一或多個處理器: 獲得視訊資料;及使用該視訊資料產生包括區域嵌套訊息之經編碼視訊位元串流,該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之圖像之至少第一區域之區域資料,其中該區域嵌套訊息之第一嵌套訊息包括第一資料集以及指示該圖像之第一區域與第一資料集相關聯之第一區域識別符。 在編碼視訊資料之另一實例中,提供包括用於獲得視訊資料的構件之設備。該設備進一步包括用於使用該視訊資料產生包括區域嵌套訊息之經編碼視訊位元串流的構件。該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之圖像之至少第一區域的區域資料。該區域嵌套訊息之第一嵌套訊息包括第一資料集,以及指示該圖像之該第一區域與該第一資料集相關聯之第一區域識別符。 在一些態樣中,區域嵌套訊息為區域嵌套補充增強資訊(SEI)訊息,且其中該複數個嵌套訊息為嵌套SEI訊息。 在一些態樣中,使用該第一資料集來基於該第一區域識別符對該第一區域執行第一功能。 在一些態樣中,該第一資料集基於該第一區域識別符規定該第一區域之特性。 在一些態樣中,定義該圖像之區域之該第一區域之該區域資料被包括在該區域嵌套訊息中一次。 在一些態樣中,該第一嵌套訊息進一步包括第二資料集,其中該第二資料集與該第一區域識別符相關聯以指示該第一區域與該第二資料集相關聯。 在一些態樣中,該區域嵌套訊息包括定義該圖像之複數個區域的複數個區域資料,且該第一嵌套訊息之該第一資料集與該圖像之該複數個區域中之多個區域相關聯。在一些態樣中,該第一嵌套訊息進一步包括第二區域識別符,該第二區域識別符指示與該第一資料集相關聯之該圖像之該複數個區域中之第二區域。在一些態樣中,該第一資料集可獨立地應用於該第一區域及該第二區域中之每一者。 在一些態樣中,該區域嵌套訊息包括第二嵌套訊息,該第二嵌套訊息包括第二資料集及指示該第一區域與該第二資料集相關聯之第一區域識別符。 在一些態樣中,該區域嵌套訊息進一步包括該圖像之複數個區域之數目。 在一些態樣中,該區域資料定義該第一區域之一或多個邊界或定義包含在該第一區域中之樣本。 在一些態樣中,該區域資料定義該第一區域之一或多個邊界自該圖像之一或多個邊界之一或多個偏移。 在一些態樣中,該區域資料將該第一區域定義為矩形區域。 在一些態樣中,當圖像之樣本在圖像之兩個或多於兩個區域中時,可應用於兩個或多於兩個區域中之區域的第一類型之嵌套訊息可應用於樣本,該區域在該兩個或多於兩個區域間具有最大區域識別符值。在一些態樣中,可應用於兩個或多於兩個區域中之另一區域的第一類型之另一嵌套訊息不可應用於樣本,該另一區域在該兩個或多於兩個區域間不具有最大區域識別符值。 在一些態樣中,其中該區域嵌套訊息進一步包括識別該區域嵌套訊息之用途之語法元素。 在一些態樣中,該區域嵌套訊息進一步包括該區域嵌套訊息中之複數個嵌套訊息之數目。 在一些態樣中,複數個嵌套訊息之嵌套訊息具有與在嵌套訊息未被嵌套在區域嵌套訊息中之情況下相同之持續性。 在一些態樣中,該區域嵌套訊息包括關於該第一嵌套訊息之索引集,該索引集指示該第一資料集欲應用於之一或多個區域。 在一些態樣中,該索引集包括至少該第一區域識別符。 在一些態樣中,該設備包含具有用於俘獲圖像之攝影機的行動裝置。 根據解碼視訊資料之至少一項實例,提供解碼視訊資料之方法。該方法包含接收視訊位元串流。該方法進一步包含:自該視訊位元串流獲得區域嵌套訊息,該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之一圖像之至少一第一區域的區域資料,其中該區域嵌套訊息之第一嵌套訊息包括第一資料集及指示該圖像之該第一區域與該第一資料集相關聯之第一區域識別符。 在解碼視訊資料之另一實例中,提供包括經組態以儲存視訊資料之記憶體及處理器的設備。該處理器經組態以接收視訊位元串流且可接收視訊位元串流。處理器經進一步組態以且可自視訊位元串流獲得區域嵌套訊息,該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之圖像之複數個區域之複數個區域資料,其中該區域嵌套訊息之第一嵌套訊息包括第一資料集以及指示該圖像之該第一區域與該第一資料集相關聯之第一區域識別符。 在解碼視訊資料之另一實例中,提供儲存有指令之非暫時性電腦可讀媒體,該等指令在由一或多個處理器執行時致使該一或多個處理器:接收視訊位元串流;以及自該視訊位元串流獲得區域嵌套訊息,該區域嵌套訊息包括複數個嵌套訊息以及定義該經編碼視訊位元串流之圖像之複數個區域之複數個區域資料,其中該區域嵌套訊息之第一嵌套訊息包括第一資料集以及致使該圖像之該第一區域與該第一資料集相關聯之第一區域識別符。 在解碼視訊資料之另一實例中,提供包括用於接收視訊位元串流的構件之設備。該設備進一步包括用於自該視訊位元串流獲得區域嵌套訊息的構件,該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之圖像之複數個區之複數個區域資料,其中該區域嵌套訊息之第一嵌套訊息包括第一資料集以及指示該圖像之第一區域與第一資料集相關聯之第一區域識別符。 在一些態樣中,使用該第一資料集來基於該第一區域識別符對該第一區域執行第一功能。在一些態樣中,方法、設備及非暫時性電腦可讀媒體進一步包括解碼圖像且使用第一資料集對圖像之第一區域執行第一功能。基於第一區域識別符對第一區域執行第一功能。 在一些態樣中,該第一資料集基於該第一區域識別符規定該第一區域之特性。 在一些態樣中,區域嵌套訊息為區域嵌套補充增強資訊(SEI)訊息,且其中該複數個嵌套訊息為嵌套SEI訊息。 在一些態樣中,定義該圖像之第一區域之區域資料被包括在區域嵌套訊息中一次。 在一些態樣中,該第一嵌套訊息進一步包括第二資料集,其中該第二資料集與該第一區域識別符相關聯以指示該第一區域與該第二資料集相關聯。 在一些態樣中,該區域嵌套訊息包括定義該圖像之複數個區域的複數個區域資料,且該第一嵌套訊息之該第一資料集與該圖像之該複數個區域中之多個區域相關聯。 在一些態樣中,該第一嵌套訊息進一步包括第二區域識別符,該第二區域識別符指示與該第一資料相關聯之該圖像之該複數個區域中之第二區域。 在一些態樣中,該第一資料集可獨立地應用於該第一區域及該第二區域中之每一者。 在一些態樣中,該區域嵌套訊息包括第二嵌套訊息,該第二嵌套訊息包括第二資料集及指示該第一區域與該第二資料集相關聯之第一區域識別符。 在一些態樣中,該區域嵌套訊息進一步包括該圖像之複數個區域之數目。 在一些態樣中,該區域資料定義該第一區域之一或多個邊界或定義含在該第一區域中之樣本。 在一些態樣中,該區域資料定義該第一區域之一或多個邊界自該圖像之一或多個邊界之一或多個偏移。 在一些態樣中,該區域資料將該第一區域定義為矩形區域。 在一些態樣中,當圖像之樣本在圖像之兩個或多於兩個區域中時,可應用於兩個或多於兩個區域中之一區域的第一類型之嵌套訊息可應用於樣本,該區域在該兩個或多於兩個區域間具有最大區域識別符值。在一些態樣中,可應用於兩個或多於兩個區域中之另一區域的第一類型之另一嵌套訊息不可應用於該樣本,該另一區域在兩個或多於兩個區域間不具有最大區域識別符值。 在一些態樣中,該區域嵌套訊息進一步包括識別該區域嵌套訊息之用途之語法元素。 在一些態樣中,該區域嵌套訊息進一步包括該區域嵌套訊息中之複數個嵌套訊息之數目。 在一些態樣中,複數個嵌套訊息之嵌套訊息具有與在嵌套訊息未被嵌套在區域嵌套訊息中之情況下相同之持續性。 在一些態樣中,該區域嵌套訊息包括關於該第一嵌套訊息之索引集,該索引集指示該第一資料集欲應用於之一或多個區域。 在一些態樣中,該索引集包括至少該第一區域識別符。 在一些態樣中,設備包括用於顯示經重新映射之一或多個樣本之顯示器。在一些態樣中,設備包括具有攝影機之行動裝置。 發明內容既不意欲識別所主張標的物之關鍵或基本特徵,亦不意欲用於用以判定所主張標的物之範疇的隔離。應參考本專利之整個說明書之適當部分、任何或全部圖式及每一請求項來理解標的物。 在參考以下說明書、申請專利範圍及隨附圖式時,上述連同其他特徵及實施例將變得較顯而易見。
下文提供本發明的某些態樣及實施例。此等態樣及實施例中之一些可單獨地應用且其中之一些可以組合方式應用,如熟習此項技術者將明瞭。在以下描述中,出於闡釋之目的,闡明特定細節以便提供對本發明之實施例的透徹理解。然而,將瞭解,可在無此等具體細節之情況下實踐各種實施例。圖及說明並非意欲為限制性。 後續描述僅提供例示性實施例,且並不意欲限制本發明的範疇、適用性或組態。確切而言,例示性實施例的後續描述將為熟習此項技術者提供用於實施例示性實施例之啟用描述。應理解可在不脫離如隨附申請專利範圍所闡明之本發明之精神及範疇之情況下對功能及元件的配置做出各種改變。 在以下描述給出具體細節以提供對實施例之透徹理解。然而,熟習此項技術者將理解,可在無此等具體細節之情況下實踐實施例。舉例而言,電路、系統、網路、程序及其他組件可以方塊圖形式展示為組件以便不以不必要細節模糊實施例。在其他情況中,眾所周知電路、程序、演算法、結構及技術可經展示無不必要細節以便避免模糊實施例。 此外,應注意,個別實施例可被描述為程序,其被描繪為流程圖、作業圖、資料流程圖、結構圖或方塊圖。雖然流程圖可將操作闡述為順序程序,但操作中之諸多操作可並行或同時地執行。另外,可重新配置操作之次序。程序可在其操作完成時終止,但可具有圖中未包括之額外步驟。過程可對應於方法、功能、程序、副常式、子程式等。當程序對應於功能時,其終止可對應於將該功能返回到呼叫功能或主功能。 術語「電腦可讀媒體」包括(但不限於)可攜式或非可攜式儲存裝置、光學儲存裝置,及能夠儲存、含有或攜載指令及/或資料之各種其他媒體。電腦可讀媒體可包括可將資料儲存於其中且不包括以無線方式或經由有線連接傳播之載波及/或暫時電子信號之非暫時性媒體。非暫時性媒體之實例可包括但不限於磁碟或磁帶、光學儲存媒體(諸如光碟(CD)或數位通用光碟(DVD))、快閃記憶體、記憶體或記憶體裝置。電腦可讀媒體其上可儲存有程式碼及/或機器可執行指令,該程式碼及/或機器可執行指令可表示程序、函式、子程式、程式、常式、子常式、模組、軟體封裝、類別或指令、資料結構或程式語句之任何組合。碼段可藉由傳遞及/或接收資訊、資料、引數、參數或記憶體內容來耦合至另一碼段或硬體電路。資訊、引數、參數、資料等可包括記憶體共用、訊息傳遞、權標傳遞、網路傳輸或其類似者來傳遞、轉發或傳輸。 此外,實施例可由硬體、軟體、韌體、中間軟體、微碼、硬體描述語言或其任何組合來實施。當以軟體、韌體、中間軟體或微碼實施時,用以執行必要任務的程式碼或碼段(例如,電腦程式產品)可被儲存在電腦可讀或機器可讀媒體中。處理器可執行必要任務。 本文中描述使用視訊編碼器、解碼器、視訊播放器及其他視訊處理裝置之視訊處理及視訊寫碼之數個系統及方法。在一些實例中,處理視訊資料之一或多個系統及方法經描述用於提供區域嵌套訊息,該等區域嵌套訊息各自包括多個嵌套訊息及定義多個區域之資料。區域嵌套訊息之實例為區域嵌套補充增強資訊(SEI)訊息。舉例而言,可針對圖像產生區域嵌套SEI訊息,且可包括定義圖像之複數個區域之區域資料以及含有用於對複數個區域執行功能之資料的複數個嵌套SEI訊息。下文進一步詳細地描述此等系統及方法之細節。 隨著更多裝置及系統為消費者提供消費數位視訊資料之能力,對高效視訊寫碼技術之需要變得更重要。需要視訊寫碼以減少處置數位視訊資料中存在之大量資料所需要之儲存及傳輸要求。可使用各種視訊寫碼技術來將視訊資料壓縮成使用較低位元率同時維持高視訊品質之形式。 圖1為說明包括編碼裝置104及解碼裝置112之系統100之實例的方塊圖。編碼裝置104可為源裝置之部分,且解碼裝置112可為接收裝置之部分。源裝置及/或接收裝置可包括電子裝置,諸如移動或靜止電話手機(例如,智慧型電話、蜂巢式電話或其類似者)、桌上型電腦、膝上型或筆記型電腦、平板電腦、機上盒、電視、攝影機、顯示裝置、數位媒體播放器、視訊遊戲控制台、視訊串流裝置,網際網路協定(IP)攝影機或任何其他適合電子裝置。在一些實例中,源裝置及接收裝置可包括用於無線通信之一或多個無線收發器。本文中所描述之寫碼技術適用於各種多媒體應用程式中之視訊寫碼,包括串流視訊傳輸(例如,經由網際網路)、電視廣播或傳輸、編碼數位視訊以供儲存在資料儲存媒體上、解碼經儲存在資料儲存媒體上之數位視訊,或其他應用程式。在一些實例中,系統100可支援單向或雙向視訊傳輸以支援諸如視訊會議、視訊串流、視訊播放、視訊廣播、遊戲及/或視訊電話之應用程式。 編碼裝置104 (或編碼器)可用於使用視訊寫碼標準或協定來對視訊資料進行編碼以產生編碼視訊位元串流。視訊寫碼標準包括ITU-TH.261、ISO/IECMPEG-1可視化、ITU-TH.262或ISO/IECMPEG-2可視化、ITU-TH.263、ISO/IECMPEG-4可視化及ITU-TH.264(亦稱作ISO/IECMPEG-4AVC),包括其可縮放視訊寫碼(SVC)及多視圖視訊寫碼(MVC)擴展。ITU-T視訊寫碼專家組(VCEG)及ISO/IEC動畫專家組(MPEG)之視訊寫碼聯合協作團隊(JCT-VC)已完成最新視訊寫碼標準,高效率視訊寫碼(HEVC)。HEVC之各種擴展處理多層視訊寫碼且亦由JCT-VC研發,包括HEVC之多視圖擴展(稱作MV-HEVC),及HEVC之可縮放擴展(稱作SHVC),或其任何其他適合寫碼協定。 本文中描述之諸多實施例使用HEVC標準或其擴展來描述實例。然而,本文中所描述之技術及系統亦可應用於其他寫碼標準,諸如,AVC、MPEG、其擴展,或已獲得或尚未獲得或制定之其他適合寫碼標準。因此,雖然可參考特定視訊寫碼標準來描述本文中所描述之技術及系統,但熟習此項技術者將瞭解,描述不應解釋為僅適用於特定標準。 參考圖1,視訊源102可將視訊資料提供至編碼裝置104。視訊源102可為源裝置之部分,或可為除源裝置外之裝置之部分。視訊源102可包括視訊俘獲裝置(例如,視訊攝影機、攝影機電話、視訊電話或其類似者)、含有所儲存視訊之視訊封存、提供視訊資料之視訊伺服器或內容提供器、自視訊伺服器或內容提供器接收視訊之視訊饋送介面、用於產生電腦圖形視訊資料之電腦圖形系統、此等源之組合,或任何其他適合視訊源。 來自視訊源102之視訊資料可包括一或多個輸入圖像或圖框。圖像或圖框為視訊之部分的靜止影像。編碼裝置104之編碼器引擎106 (或編碼器)對視訊資料進行編碼以產生編碼視訊位元串流。在一些實例中,編碼視訊位元串流(或「視訊位元串流」或「位元串流」)為一系列一或多個寫碼視訊序列。寫碼視訊序列(CVS)包括以在基層中具有隨機存取點圖像且具有某些性質之存取單元(AU)開始直至且不包括在基層中具有隨機存取點圖像且具有某些性質之下一AU的一系列AU。舉例而言,開始CVS之隨機存取點圖像之某些性質可包括等於1之RASL旗標(例如,NoRaslOutputFlag)。否則,隨機存取點圖像(具有等於0之RASL旗標)不開始CVS。存取單元(AU)包括一或多個寫碼圖像及對應於共用相同輸出時間之寫碼圖像之控制資訊。圖像之經寫碼圖塊以位元串流級囊封至稱作網路抽象層(NAL)單元之資料單元中。舉例而言,HEVC視訊位元串流可包括一或多個CVS,該一或多個CVS包括NAL單元。NAL單元中之每一者具有NAL單元標頭。在一項實例中,標頭針對H.264/AVC (惟多層擴展除外)為一位元組且針對HEVC為兩位元組。NAL單元標頭中之語法元素呈指定位元且因此對所有種類之系統及輸送層(諸如,輸送串流、即時輸送(RTP)協定、檔案格式,及其他)可見。 HEVC標準中存在兩種類NAL單元,包括視訊寫碼層(VCL) NAL單元及非VCL NAL單元。VCL NAL單元包括寫碼圖像資料之一個圖塊或圖塊段(下文所描述),且非VCL NAL單元包括與一或多個寫碼圖像有關之控制資訊。在一些狀況下,NAL單元可被稱作封包。HEVC AU包括含有寫碼圖像資料之VCL NAL單元及對應於寫碼圖像資料之非VCL NAL單元(若存在)。 NAL單元可含有位元序列,該等位元形成視訊資料之寫碼表示(例如,編碼視訊位元串流、位元串流之CVS,或其類似者),諸如視訊中之圖像之寫碼表示。編碼器引擎106藉由將每一圖像分割成多個圖塊來產生圖像之寫碼表示。圖塊獨立於其他圖塊使得圖塊中之資訊經寫碼而不相依於相同圖像內之其他圖塊之資料。圖塊包括一或多個圖塊段,包括獨立圖塊段,且若存在,相依於先前圖塊段之一或多個相依圖塊段。接著將圖塊分割成明度樣本及色度樣本之寫碼樹形區塊(CTB)。明度樣本的CTB及色度樣本的一或多個CTB連同樣本的語法被稱作編碼樹形單元(CTU)。在一些狀況下,CTU亦可被稱作最大寫碼單元(LCU)。CTU為HEVC編碼之基本處理單元。可將CTU分裂成多個不同大小之寫碼單元(CU)。CU含有被稱作寫碼區塊(CB)之明度及色度樣本陣列。 可將明度及色度CB進一步分裂成預測區塊(PB)。PB為使用相同運動參數來進行框間預測或框內區塊複製預測(在可用或經啟用以供使用時)的明度或色度分量之樣本的區塊。明度PB及一或多個色度PB連同相關聯語法形成預測單元(PU)。針對框內預測,運動參數集(例如,一或多個運動向量、參考索引或其類似者)在位元串流中發信用於每一PU且用於對明度PB及一或多個色度PB之框間預測。針對框內區塊複製預測,運動參數集(例如,一或多個區塊向量,或其類似者)亦可發信用於每一PU且可用於框內區塊複製預測。CB亦可經分裂成一或多個變換區塊(TB)。TB表示將相同二維變換應用於其以對預測殘餘信號進行寫碼之色彩分量之樣本的正方形區塊。變換單元(TU)表示明度及色度樣本之TB,及對應語法元素。 CU之大小對應於寫碼模式之大小且形狀可為正方形。舉例而言,CU之大小可為8×8個樣本、16×16個樣本、32×32個樣本、64×64個樣本,或高達對應CTU之大小的任何其他適當大小。片語「N×N」在本文中用於以垂直及水平尺寸方面(例如,8個像素× 8個像素)指代視訊區塊之像素尺寸。區塊中之像素可經配置成列及行。在一些實施例中,區塊不可能在水平方向具有與在垂直方向相同數目個像素。舉例而言,與CU相關聯之語法資料可描述將CU分割成一或多個PU。分割模式可在CU為框內預測模式編碼或框間預測模式編碼之間不同。PU可被分割成非正方形形狀。舉例而言,與CU相關聯之語法資料亦可描述根據CTU將CU分割成一或多個TU。TU之形狀可為正方形或非正方形。 根據HEVC標準,可使用變換單元(TU)執行變換。TU可針對不同CU不同。TU可基於給定CU內之PU之大小而定大小。TU可為與PU相同或比其小的大小。在一些實例中,可使用稱作殘餘四元樹(RQT)之四元樹結構將對應於CU之殘餘樣本細分成較小單元。RQT之葉節點可對應於TU。可變換與TU相關聯之像素差值以產生變換係數。可接著藉由編碼器引擎106將變換係數量化。 一旦將視訊資料之圖像分割成CU,編碼器引擎106使用預測模式預測每一PU 。接著將預測單元或預測區塊從原始視訊資料減去以獲得殘餘(下文加以描述)。針對每一CU,可使用語法資料在位元串流內發信預測模式。預測模式可包括框內預測(或圖像內預測)或框間預測(或圖像間預測)。框內預測利用圖像內之空間相鄰樣本之間的相關性。例如,使用框內預測,使用(例如) DC預測來找到PU之平均值、平面預測來使平面表面配合PU、方向預測來從鄰近資料外推或任何其他適合類型之預測來從相同圖像中之鄰近圖像資料預測每一PU。框間預測使用圖像之間的時間相關性以便導出對圖像樣本之區塊之運動補償預測。例如,使用框間預測,使用運動補償預測自一或多個參考圖像(在輸出次序中在當前圖像之前或之後)中之音訊資料據預測每一PU。舉例而言,可在CU層級處作出是使用圖像間抑或圖像內預測來對圖像區域進行寫碼之決策。 在一些實例中,圖像之一或多個圖塊經指派圖框類型。圖塊類型包括I圖塊、P圖塊及B圖塊。I圖塊(圖框內,可獨立解碼)為僅由框內預測寫碼之圖像之圖塊,且因此可獨立解碼,此係因為I圖框僅需要框內之資料來預測圖框之任何預測單元或預測區塊。P圖塊(單向預測圖框)為可用框內預測及用單向框間預測寫碼的圖像之圖塊。用框內預測或框間預測來寫碼P圖塊內之每一預測單元或預測區塊。當框間預測應用時,僅藉由一個參考圖像來預測預測單元或預測區塊,且因此參考樣本僅來自一個圖框之一個參考區域。B圖塊(雙向預測圖框)為可用框內預測且用框間預測(例如,雙向預測或單向預測)來寫碼之圖像之圖塊。B圖塊之預測單元或預測區塊可自兩個參考圖像雙向預測,其中每一圖像有助於一個參考區域且兩個參考區域之樣本集經加權重(例如,具有相對權重或具有不同權重)以產生雙向預測區塊之預測信號。如上文所闡釋,獨立地寫碼一個圖像之圖塊。在一些狀況中,可將圖像寫碼為僅一個圖塊。 PU可包括與預測過程相關之資料(例如,運動參數或其他合適的資料)。舉例而言,當使用框內預測對PU進行編碼時,PU可包括描述PU之框內預測模式之資料。作為另一實例,當使用框間預測時對PU進行編碼時,PU可包括定義PU之運動向量之資料。定義PU之運動向量之資料可(例如)描述運動向量之水平分量(∆x)、運動向量之垂直分量(∆y)、運動向量之解析度(例如,整數精度、四分之一像素精度或八分之一像素精度)、運動向量指向之參考圖像,參考索引、運動向量之參考圖像清單(例如,清單0、清單1或清單C),或其任何組合。 編碼裝置104可接著執行變換及量化。舉例而言,在預測之後,編碼器引擎106可計算對應於PU之殘餘值。殘餘值可包含所寫碼之像素之當前區塊(PU)與用於預測當前區塊(例如,當前區塊之預測版本)之間的像素差值舉例而言,在產生預測區塊(例如,發佈框間預測或框內預測)之後,編碼器引擎106可藉由將由預測單元產生之預測區塊自當前區塊減去來產生參與區塊。參與區塊包括量化當前區塊之像素值與預測區塊之像素值之間的差的像素差值集。在一些實例中,可以二維區塊格式(例如,像素值之二維矩陣或陣列)表示。在此等實例中,參與區塊為像素值之二維表示。 使用區塊變換來變換在執行預測之後可能剩餘之任何殘餘資料,此可能基於離散餘弦變換、離散正弦變換、整數變換、小波變換、其他適合變換函數,或其任何組合。在一些狀況中,可將一或多個區塊變換(例如,大小32 × 32、16 × 16、8 × 8、4 × 4或其他合適大小)應用於每一CU中之殘餘資料。在一些實施例中,TU可用於由編碼器引擎106實施之變換及量化程序。具有一或多個PU之給定CU亦可包括一或多個TU。如下文進一步詳細描述,可使用區塊變換將殘餘值變換成變換係數,且接著使用TU將其量化並進行掃描以產生序列化變換係數以供熵編碼。 在一些實施例中,在使用CU之PU進行框內預測或框間預測寫碼之後,編碼器引擎106可計算關於CU之TU之殘餘資料。PU可包含在空間域(或像素域)中之像素資料。TU可在應用區塊變換之後包含在變換域中之係數。如先前所述,殘餘資料可對應於未編碼圖像之像素與對應於PU之預測值之間的像素差值。編碼器引擎106可形成包含關於CU之殘餘資料之TU,且接著變換TU以產生關於CU之變換係數。 編碼器引擎106可執行變換係數之量化。量化藉由量化變換係數而提供進一步壓縮以減少用於表示係數之資料量。舉例而言,量化可減少與係數中之一些或全部相關聯之位元深度。在一項實例中,具有n位元值之係數可在量化期間向下捨入至m位值,其中n大於m。 一旦執行量化,寫碼視訊位元串流包括經量化變換係數、預測資訊(例如,預測模式、運動向量或其類似者)、分割資訊及任何其他適合資料,諸如,其他語法資料。可接著藉由編碼器引擎106對寫碼視訊位元串流之不同元素進行熵編碼。在一些實例中,編碼器引擎106可利用預定義掃描次序來掃描量化變換係數以產生可經熵編碼之串行化向量。在一些實例中,編碼器引擎106可執行自適應掃描。在掃描經量化變換係數以形成向量(例如,一維向量)之後,編碼器引擎106可對該向量進行熵編碼。舉例而言,編碼器引擎106可使用上下文自適應可變長度寫碼、上下文自適應二進位演算法寫碼、基於語法之上下文自適應二進位演算法寫碼、概率區間分割熵寫碼或另一適合熵編碼技術。 如先前所描述,視訊位元串流包括一群組NAL單元,包括VCL NAL單元及非VCL NAL單元。VCL NAL單元包括形成寫碼視訊位元串流之寫碼圖像資料。例如,形成寫碼視訊位元串流之位元序列存在在VCL NAL單元中。除其他資訊外,非VCL NAL單元亦可含有具有與編碼視訊位元串流有關之高級資訊之參數集。舉例而言,參數集可包括視訊參數集(VPS)、序列參數集(SPS)及圖像參數集(PPS)。參數集之目標之實例包括位元率效率、誤差彈性及提供系統層介面。每一圖塊參考單個作用中PPS、SPS及VPS以存取解碼裝置112可用於解碼圖塊之資訊。識別符(ID)可經寫碼用於每一參數集,包括VPS ID、SPS ID及PPS ID。SPS包括SPS ID及VPS ID。PPS包括PPS ID及SPS ID。每一圖塊標頭包括PPS ID。使用ID,可針對給定圖塊識別作用中參數集。 PPS包括適用於給定圖像中之所有圖塊之資訊。由於上述情況,因此圖像中之所有圖塊係指相同PPS。不同圖像中之圖塊亦可係指相同PPS。SPS包括適用於相同寫碼視訊序列(CVS)或位元串流中之所有圖像之資訊。如先前所描述,寫碼視訊序列為一系列存取單元(AU),該系列存取單元以在基礎層中且具有某些性質的(上文所描述)隨機存取點圖像(例如,瞬時解碼參考(IDR)圖像或斷鏈存取(BLA)圖像,或其他適當隨機存取點圖像)開始,直至且不包括具有在基礎層中且具有某些性質之隨機存取點圖像之下一AU (或位元串流之結束)。SPS中之資訊可不會在寫碼視訊序列內逐圖像改變。寫碼視訊序列中之圖像可使用相同SPS。VPS包括適用於寫碼視訊序列或位元串流內之所有層之資訊。VPS包括具有適用於整個寫碼視訊序列之語法元素的語法結構。在一些實施例中,可隨編碼位元串流帶內傳輸VPS、SPS或PPS。在一些實施例中,與含有寫碼視訊資料之NAL單元相比,可以單獨傳輸帶外傳輸VPS、SPS或PPS。 視訊位元串流還可包括補償增強資訊(SEI)訊息。舉例而言,SEI NAL單元可為視訊位元串流之部分。在一些狀況中,SEI訊息可含有解碼程序並不需要之資訊。舉例而言,SEI訊息中之資訊對解碼器解碼位元串流之視訊圖像並非必要的,但解碼器可使用SEI訊息之資訊來改良圖像(例如,經解碼輸出)之顯示或處理。SEI訊息中之資訊可為嵌入式後設資料。在一項說明性實例中,SEI訊息中之資訊可由解碼器側實體用於改良內容之可視性在一些情況中,某些應用標準可要求此SEI訊息存在於位元串流中以使得為符合應用標準之所有裝置帶來品質之改良(例如,針對訊框相容平面立體3DTV視訊格式攜載圖框包裝SEI訊息,其中除諸多其他實例外,SEI訊息亦經攜載用於視訊之每一圖框,處置恢復點SEI訊息,將全螢幕掃描矩形SEI訊息用於DVB)。 編碼裝置104之輸出110可經由通信鏈路120將構成經編碼視訊位元串流資料之NAL單元發送至接收裝置之解碼裝置112。解碼裝置112之輸入114可接收NAL單元。通信鏈路120可包括由無線網路、有線網路、或有線及無線網路之組合提供的信號。無線網路可包括任何無線介面或無線介面之組合且可包括任何適合無線網路(例如,網際網路或其他廣域網路、基於封包之網路、WiFiTM 、射頻(RF)、UWB、WiFi直連、蜂巢式、長期演進(LTE)、WiMaxTM 或其類似者)。有線網路可包括任何有線介面(例如,光纖、乙太網、電力線乙太網、經由同軸纜線之乙太網、數位信號線(DSL)或其類似者)。可使用各種設備(諸如,基地台、路由器、存取點、網橋、閘道器、交換器或其類似者)來實施有線及/或無線網路。可根據通信標準(諸如,無線通信協定)來調變經編碼視訊位元串流,並將其傳輸至接收裝置。 在一些實例中,編碼裝置104可將經編碼視訊位元串流儲存在儲存器108中。輸出110可自編碼器引擎106或自儲存器108擷取經編碼視訊位元串流資料。儲存器108可包括各種分散式或本端存取資料儲存媒體中之任何者。舉例而言,儲存器108可包括硬碟機、儲存碟、快閃記憶體、揮發性或非揮發性記憶體,或用於儲存經編碼視訊資料之任何其他適合數位儲存媒體。 解碼裝置112之輸入114接收經編碼視訊位元串流資料且可將視訊位元串流資料提供至解碼器引擎116或儲存器118以供由解碼器引擎116稍後使用。解碼器引擎116可藉由熵解碼(例如,使用熵解碼器)並提取構成經編碼視訊資料之一或多個寫碼視訊序列之元素來對經編碼視訊位元串流資料進行解碼。解碼器引擎116可接著重新縮放且對經編碼視訊位元串流資料執行逆變換。接著將殘餘資料傳遞至解碼器引擎116之預測級。解碼器引擎116接著預測像素塊(例如,PU)。在一些實例中,將預測新增至逆變換(殘餘資料)之輸出。 解碼裝置112可將解碼視訊輸出至視訊目的地裝置122,該視訊目的地裝置可包括用於向內容之消費者顯示經解碼視訊資料之顯示器或其他輸出裝置。在一些態樣中,視訊目的地裝置122可為包括解碼裝置112之接收裝置之部分。在一些態樣中,視訊目的地裝置122可為除接收裝置外之單獨裝置之部分。 在一些實施例中,視訊編碼裝置104及/或視訊解碼裝置112可分別與音訊編碼裝置及音訊解碼裝置整合。視訊編碼裝置104及/或視訊解碼裝置112亦可包括實施上文所描述之寫碼技術所需之其他硬體或軟體,諸如,一或多個微處理器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、軟體、硬體、韌體或其任何組合。視訊編碼裝置104及視訊解碼裝置112可整合成相應裝置中之組合式編碼/解碼器(編解碼器)之部分。下文參考圖8描述編碼裝置104之具體細節之實例。下文參考圖9描述解碼裝置112之具體細節之實例。 HEVC標準之擴展包括多視圖視訊寫碼擴展(稱作MV-HEVC),且可縮放視訊寫碼擴展(稱作SHVC)。MV-HEVC及SHVC擴展共用分層寫碼之概念,其中不同層被包括在編碼視訊位元串流中。藉由唯一層識別符(ID)來定址寫碼視訊序列中之每一層。層ID可存在於NAL單元之標頭中以識別與NAL單元相關聯之層。在MV-HEVC中,不同層可表示視訊位元串流中之相同場景之不同視圖。在SHVC中,提供以不同空間解析度(或圖像解析度)或以不同重構保真度表示視訊位元串流之不同可縮放層。可縮放層可包括基層(具有層ID=0)及一或多個增強層(具有層ID=1、2、…,n)。基層可符合HEVC之第一版本之設定檔且表示位元串流中最低可用層。如與基層相比,增強層已使空間解析度、時間解析度或圖框速率及/或重構保真度(或品質)增加。增強層可經分層組織且可(或可不)相依於下部層。在一些實例中,可使用單個標準編解碼器來對不同層進行寫碼(例如,使用HEVC、SHVC或其他編碼標準來對所有層進行編碼)。在一些實例中,可使用多標準編解碼器來對不同層進行寫碼。舉例而言,可使用AVC來對基層進行寫碼,而可使用HEVC標準的SHVC及/或MV-HEVC擴展來對一或多個增強層進行寫碼。 一般而言,層包括一組VCL NAL單元及一組對應之非VCL NAL單元。NAL單元經指派特定層ID值。在層可相依於下部層之意義上,層可為階層式。層組是指位元串流內表示之自足式之一組層,意味著層組內之層可在解碼過程中相依於層組中之其他層,但不相依於用於解碼之任何其他層。因此,層組中之層可形成可表示視訊內容之獨立位元串流。層組中之該組之層可藉由副位元串流提取程序之操作自另一位元串流獲得。層組可對應於在解碼器想要根據某些參數操作時將被解碼的該組之層。 如先前所描述,補償增強資訊(SEI)訊息可被包括在視訊位元串流中。HEVC規範包括並非解碼寫碼圖像所需要但提供可對解碼器側實體處理經解碼圖像(例如,用於改良經解碼輸出之顯示或處理以增強內容之可視性)有益的額外資訊之數個SEI訊息。解碼寫碼圖像亦需要一些SEI訊息,諸如與一致性有關的彼等訊息,及其他訊息。雖然在一些狀況下並不要求解碼器剖析或處理SEI訊息,但一些應用標準可強加要求某些SEI訊息存在於視訊位元串流中之要求,且在一些狀況下,要求使用此等SEI訊息中之資訊來進行特定處理。在一些實例中,嵌套SEI訊息(例如,可縮放嵌套SEI訊息)包括一或多個SEI訊息且指示一或多個SEI訊息適用於一或多個位元串流子集(例如,適用於一組層)。 圖2為實例性視訊位元串流200之部分的圖。視訊位元串流200包括VPS 231、SPS 232及PPS 233。如先前所描述,視訊位元串流200之圖像中之每一圖塊參考作用中VPS、SPS及PPS (例如,使用VPS ID、SPS ID及PPS ID)來存取解碼裝置可用於解碼圖塊之資訊。PPS 233可包括應用於給定圖像(諸如圖像230)中之所有圖塊之資訊。SPS 232可包括應用於視訊位元串流200中之所有圖像或視訊位元串流200之相同寫碼視訊序列(CVS)中之所有圖像之資訊。VPS 231可包括應用於視訊位元串流200內之所有層或視訊位元串流200之CVS之資訊。舉例而言,VPS 231可包括具有應用於整個寫碼視訊序列之語法元素之語法結構。在圖2中所展示之實例中,VPS 231、SPS 232及PPS 233在頻帶內用視訊位元串流200發信。在其他實例中,與含有寫碼視訊資料之位元串流200之NAL單元相比,可在單獨傳輸中頻帶外傳輸VPS 231、SPS 232及/或PPS 233。 視訊位元串流亦包括與圖像230有關之資訊,包括SEI訊息234、SEI訊息235、SEI訊息236、圖塊237及圖塊238。雖然圖2之實例中展示圖像230之僅兩個圖框237及238,但圖像230可分割成多於兩個圖塊。此外,在一些狀況中,除圖2中所展示之資訊外的資訊可包括在圖像230之視訊位元串流200中。 資料集(例如,後設資料或其他資料)可包括在SEI訊息(諸如,SEI訊息234、235及236)中。資料集可由解碼器裝置、播放器裝置或接收器側上之其他裝置使用來對圖像執行一或多個功能(例如,在解碼圖像之前或之後,但通常在之後)。舉例而言,SEI訊息中之資料集可經執行或使用以對圖像執行一或多個功能。在另一實例中,SEI訊息中之資料集可規定一或多個區域特定之內容之特性。在另一實例中,SEI訊息中之資料集可提供解碼器裝置、播放器裝置或其他裝置可用於處理一或多個區域之內容的提示或其他資訊(例如,根據裝置之約束或根據裝置操作之條件)。SEI訊息中之資料集亦可用於各種其他用途。 在一項說明性實例中, SMPTE-2094-1標準描述對視訊內容之色彩容量變換有用之動態後設資料,諸如在預期(例如,終端使用者裝置之)目標顯示器與主控顯示器(例如,視訊生產側處之參考監視器)相比具有不同照度、色彩容量或傳送特性時。舉例而言,後設資料可受主控顯示器之特性約束(例如,如SMPTE ST 2086:201x中所定義),但確保維持創造性意圖,但亦可使用內容相依性後設資料。自編碼器發送之後設資訊可在目標顯示器具有不同特性時對欲顯示之圖像有益。SMPTE-2094有關文件中已規定數個應用,亦規定後設資料之不同攜載以支援此等應用。儘管視訊標準之上下文中之應用可係指視訊串流化,視訊廣播、視訊電話、視訊會議及其他此類用途狀況,但本文件中之措詞「應用」亦用於係指根據SMPTE-2094執行色彩容量變換中之一些的特定狀況。此些「應用」之實例包括在以較小色彩容量或較低照度顯示內容時,當在標準動態範圍(SDR)顯示器處顯示高動態範圍(HDR)內容時,及其他應用。亦可規定其他「應用」。 跨越各種應用之包括在SEI訊息中之資料(例如,對應於SMPTE-2094-1之後設資料)之共同特徵包括目標顯示器特性(例如,原色、白點,以及其他特性)、持續性及後設資料應用於之區域之描述。在一些狀況中,一或多個後設資料集可經發送用於(SMPTE-2094標準之)不同「應用」中之區域(例如,矩形區域或其他形狀之區域),用於不同目標顯示器,及用於其他用途。舉例而言,發送至解碼器之後設資料(例如,SMPTE-2094-1後設資料或其他後設資料)可與後設資料應用於其之區域相關聯。 返回至圖2,SEI訊息234、SEI訊息235及SEI訊息236中之每一者包括與圖像230之不同區域相關聯(例如,定義)之區域資料以及與對應於特定SEI訊息之圖像230之區域相關聯之後設資料。舉例而言,SEI訊息234包括定義圖像230之第一區域之區域1資料241及第一後設資料242集,該第一後設資料集定義可對第一區域執行之功能、第一區域之特性、與裝置約束或操作條件有關之提示及/或其他資訊,或其類似者。第一區域可類似於圖4A中所展示之區域1 402。SEI訊息235包括定義圖像230之第二區域之區域2資料243以及定義功能、特性、提示或應用於第二區之類似者之第二後設資料244集。第二區域可類似於圖4A中所展示之區域2 404。SEI訊息236亦包括定義圖像之第一區域之區域1資料241,但包括定義另一功能、其他特性、其他提示或應用於第一區域之類似者之第三後設資料245集。 存在關於視訊內容之後設資料(例如,與圖像有關之SMPTE-2094後設資料或其他資料)的各種問題。作為一項實例,針對可應用於圖像區域之後設資料,為支援不同應用,可針對相同區域發信多於一個後設資料集,在此狀況下,針對可應用於彼區域之每一後設資料集發信定義給定區域之資料。舉例而言,如圖2中所展示,定義圖像230之第一區域之區域1資料241經發信用於SEI訊息234中之後設資料242及SEI訊息236中之後設資料245兩者。然而,針對每一個別後設資料集處理(例如,發信及/或接收)區域(例如,區域資料)係低效的。後設資料集之數目可變得非常大。舉例而言,在給定時間例項處針對十個目標顯示器中之每一者及十五個應用中之每一者可存在三個後設資料集。個別地針對此等後設資料集中之每一者處理區域資料可產生問題。 存在關於SEI訊息之其他問題。舉例而言,可以區域特定方式應用一些SEI訊息。不具有支援不同區域特定應用之共同框架將導致對跨越SEI訊息之區域特定語法元素之重複定義。可能具有區域特定應用或功能之SEI訊息之一項說明性實例包括膠卷粒紋特性SEI訊息,其用於將關於膠卷粒紋合成之參數模型輸送至解碼器。可在圖像之不同部分中(例如,在圖像之不同區域中)以不同方式感知膠卷粒紋特性。啟用基於區域之發信將有助於描述此等特性。舉例而言,此基於區域之發信將有助於在同一圖像中存在自然影像(膠卷粒紋模型可應用於其)及人工產生內容(其可能不具有與其相關聯的任何膠卷粒紋)兩者的混合式內容。 可具有區域特定應用之SEI訊息之另一說明性實例為色調映射資訊SEI訊息。發信色調映射資訊SEI訊息以提供資訊或資料集以使得能夠將定製的所輸出解碼圖像之色彩樣本重新映射至特定顯示環境。在一項說明性實例中,數個視訊應用(例如,新聞廣播、運動賽事或其他視訊應用)允許用於在顯示器上同時顯示自不同源顯現之資料的畫中畫模式。此兩個(或多於兩個)視訊源之特性可為非常不同的。舉例而言,可在光照條件受控制之工作室中俘獲主視訊(使用整個顯示區顯示),且可在光照機器不同(例如,黑暗)之自然環境中俘獲插入的圖像(顯示為在整個顯示區上方之較小視窗)。當同一視訊中存在具有不同特性之不同內容(來自不同源)時,允許經調準於特定源之色調映射將為有益的。 可能具有區域特定應用之SEI訊息之其他說明性實例為後濾波提示SEI訊息及色度重新取樣濾波提示SEI訊息。舉例而言,使用後濾波提示SEI訊息來指示對設計供用於解碼圖像之後處理之後濾波器有用的資訊或資料集。濾波器對處理內容非常有用以便減輕處理之效應,及/或增強所顯示內容之品質。視訊信號(或內容)之特性基於內容之區域之特性而變化。類似情況適用於色度重新取樣濾波提示SEI訊息。 可具有區域特定應用之SEI訊息之另一說明性實例為色彩重新映射資訊SEI訊息。色彩重新映射資訊(CRI) SEI訊息具有數個用途,其中之一者為使來自一個色彩表示之內容適應於另一色彩表示(例如,自BT.2020至BT.709,色彩容量轉換,或其他色彩表示調適或轉換)。CRI SEI訊息之另一用途為使視訊信號再成形以滿足各種應用要求。此處再次,針對固定內容及具有不同特性之內容,待應用之SEI訊息之CRI參數可跨越同一圖像內之不同區域不同。 可具有區域特定應用之SEI訊息之另一說明性實例為拐點功能資訊SEI訊息。拐點功能資訊之基於區域之發信的動機類似於色調映射資訊之動機-提供資訊以實現將定製的解碼圖像之色彩樣本映射至特定顯示環境。不同之處在於色調映射資訊在非線性域中應用映射功能,而拐點功能資訊在線性光域中應用映射功能。 在所有上述實例中,SEI訊息之當前發信僅允許發信應用於整個圖像之資訊。允許基於區域發信無需重新定義實際SEI訊息將為有益的。 此外,現有SEI訊息可再用於使用區域特定發信之不同應用。在一項說明性實例中,SMPTE 2094-30標準使用在色彩重新映射資訊(CRI) SEI訊息中發信之資訊。避免針對SMPTE 2094-30標準重新定義CRI SEI訊息將係有益的。然而,SMPTE 2094-30中可存在未包括在CRI SEI訊息中之某些語法元素。此外,SMPTE-2094特定之CRI SEI訊息的擴展可並非純熟且高效的設計。 本文中所描述之實施例包括用於產生待應用於視訊圖像之區域之視訊及/或資料集(例如,後設資料或其他資料)的方法及系統。在一些狀況中,方法及系統可發信圖像之區域集(或子集)、訊息及/或資料(例如,後設資料或其他資料)集,以及訊息中之每一者對區域之應用。舉例而言,視訊及/或資料子集可與規定之區域之子集相關聯。訊息可包括補充增強資訊(SEI)訊息或可被包括在視訊寫碼及視訊應用標準(諸如H.265/HEVC、H.264/AVC、BDA、MPEG、DVB或其他標準)之視訊位元串流中或包括有該視訊位元串流的任何其他合適的訊息。本文中所描述之實例可單獨地或與一或多個其他實例、實施例或實施組合應用。與迴圈之特定反覆相關聯之一或多個語法元素可與迴圈之所有反覆相關聯且在迴圈外部發信,或反之亦然。 在一些實例中,區域嵌套訊息可經產生用於視訊圖像。區域嵌套訊息可經產生用於圖像且可用於發信圖像區域集(例如,使用定義每一圖像區域之區域資料)、作為區域嵌套訊息中之嵌套訊息之訊息集(本文中被稱作「嵌套訊息」或「可區域嵌套訊息」)及嵌套訊息與圖像區域之關聯性。舉例而言,區域集(包括一或多個區域)可連同與區域相關聯之嵌套訊息集規定在區域嵌套訊息中。圖像之區域可包括圖像之空間部分或子集(例如,如圖4中所展示)。 圖像之區域嵌套訊息中定義之嵌套訊息可包括可應用於該圖像之一或多個區域之一或多個資料集(例如,後設資料或其他資料集)。在一些實例中,嵌套訊息中之資料集定義可由解碼器裝置、播放器裝置或其他裝置對一或多個區域執行之功能。舉例而言,資料集可定義任何合適功能,諸如使用膠卷粒紋特性SEI訊息、色調映射資訊SEI訊息、後濾波提示SEI訊息、色度重新取樣濾波提示SEI訊息、色彩重新映射資訊SEI訊息、拐點功能資訊SEI訊息或用於對視訊圖像之區域執行功能之任何其他合適資料執行之功能。在一些實例中,嵌套訊息中之資料集定義含在一或多個區域中之內容之特性。在一項說明性實例中,資料集可包括規定含在一或多個區域中之內容之最大照度之資訊。在一些狀況中,資料集中之特性或其他資訊可由將應用於一或多個區域之另一功能使用。在一些實例中,嵌套訊息中之該資料集可規定可由解碼器裝置、播放器裝置或其他裝置用於根據裝置之約束或根據裝置操作之條件來處理含在一或多個區域之內容的提示或其他資訊。在一項說明性實例中,資料集可包括關於編碼器可考慮適合用於處理內容之第一濾波器係數集,且該解碼器裝置、播放器或其他裝置可選擇使用彼等係數,以將其應用於屬於與該資料集相關聯之該一或多個區域之內容。在另一實例中,裝置可使用第一係數集導出第二係數集,且可將第二係數集應用於一或多個區域之內容。 區域嵌套訊息中之區域資料可定義圖像之每一區域一次,且區域嵌套訊息中之嵌套訊息可與識別嵌套訊息中之資料集待應用之區域的區域識別符相關聯。舉例而言,區域嵌套訊息之嵌套訊息可包括指示嵌套訊息中之任何資料待應用之區域的一或多個區域識別符。可將區域識別符指派至嵌套訊息中之資料集以指示該資料集欲應用於的區域。在一些狀況中,僅區域嵌套訊息中之一或多個資料集可應用於之圖像之區域係由區域嵌套訊息之區域資料定義。舉例而言,若圖像含有四個區域,但區域嵌套訊息中之一或多個資料集僅可用於四個區域中之兩者,則僅一或多個資料集可應用於之兩個區域經定義在區域嵌套訊息中。在一些狀況中,圖像之所有區域可定義在區域嵌套訊息中。在一些實例中,索引集可被包括在指示或指向嵌套訊息中之一或多個資料應用於之一或多個區域(例如,使用區域識別符)的嵌套訊息。使用此技術,區域資料並非必須針對每一嵌套訊息或針對欲應用於圖像之每一資料集單獨地發信。 區域嵌套訊息之一項實例為區域嵌套補充增強資訊(SEI)訊息。關於圖像之區域嵌套SEI訊息可包括定義圖像之至少一個區域之區域資料,且亦可包括具有資料集及一或多個區域識別符之多個嵌套SEI訊息。舉例而言,可產生並發信規定一或多個嵌套SEI訊息應用於其之矩形區域(或具有其他合適的形狀之區域)的區域嵌套SEI訊息。出於說明目的下文使用含有嵌套SEI訊息之嵌套SEI訊息來描述各種實例,但熟習此項技術者將瞭解由實例涵蓋之概念亦可應用於含有嵌套訊息之其他類型之嵌套訊息。 在一些實例中,裝置(例如,編碼裝置或其他合適的裝置)可發信一或多個圖像之區域集及後設資料集或SEI訊息之清單。舉例而言,裝置可發信圖像之區域集及與圖像之區域中之一或多者相關聯之後設資料集的清單。在另一實例中,裝置可發信圖像之區域集及與區域中之一或多者相關聯之SEI訊息。SEI訊息可包括定義可對圖像之區域執行的功能,定義區域之特性,定義裝置可使用來處理區域且與裝置之約束或操作條件有關之提示或其他資訊或其類似者的資料集或後設資料。在一些態樣中,如上文所描述,區域集可在區域嵌套SEI訊息中發信,且嵌套SEI訊息可包括嵌套SEI訊息及與區域及相關聯之後設資料。 圖3為說明經產生用於視訊位元串流之圖像之區域嵌套SEI訊息350之實例的圖。區域嵌套SEI訊息350可由裝置產生,諸如編碼裝置104或可將區域嵌套SEI訊息350儲存在視訊位元串流中或用視訊位元串流將區域嵌套SEI訊息350傳輸至接收裝置(諸如解碼裝置112或可解碼或以其他方式處理區域嵌套SEI訊息350的其他裝置)的其他裝置。區域嵌套SEI訊息350包括定義圖像中之多個區域之區域資料351且亦包括多個嵌套SEI訊息(嵌套SEI訊息352及嵌套SEI訊息353)。雖然多個區域係由區域資料351定義,但在一或多個後設資料集僅可用於一個區域時之狀況下可定義僅一個區域。 區域資料351包括區域1資料354、區域2資料355至區域N資料356。區域1資料354定義圖像中之第一區域,區域2資料355定義圖像中之第二區域,且區域N資料356定義圖像中之第N區域。由關於給定區域嵌套SEI訊息之區域資料定義之區域之數目可包括任何合適數目個區域(例如,兩個區域、三個區域、五個區域或任何其他合適數目個區域),其可由用於定義視訊內容之應用或標準定義。在一些狀況中,編碼器可基於發信之應用或後設資料及內容而作出針對圖像定義之區域之數目的判定。舉例而言,在位元串流中或用位元串流發信用於圖像之區域之數目,且解碼器、播放器、顯示器或其他裝置自位元串流獲得區域資訊。 在一些實例中,區域資料351可包括在區域嵌套SEI訊息350中規定之圖像之多個區域,使得與經發信用於此等區域之後設資料相關聯之資訊可應用於區域中之一或多者。舉例而言,語法元素可包括在指示區域之數目之嵌套SEI訊息350之語法中(例如,下文的實例性語法中所展示之rns_num_rect_regions,其亦可被重寫為regional_nesting_num_ rect_regions)。 區域資料351可以各種方式定義圖像之不同區域。在一些實例中,區域經規定成矩形區域。在其他實例中,區域可被規定為任何其他合適的形狀。舉例而言,可發信非矩形區域,且發信與指示後設資料可應用於的區域及樣本相關聯的語法元素。 在一些實例中,區域資料351可包括規定區域之邊界的語法元素集。在一些實施中,可藉由規定區域邊界自圖像之對應邊界之偏移來定義區域之邊界。下文在實例性語法結構中展示規定區域之邊界偏移的語法元素的實例(例如,rns_rect_region_left_offset[ i ]、rns_rect_region_top_offset[ i ]、 rns_rect_region_ right_offset[ i ],及rns_rect_region_bottom_offset[ i ])。舉例而言,rns_rect_ region_left_offset[ i ]規定第i矩形區域之左上樣本自嵌套SEI訊息中規定之左圖像邊界的水平偏移。在一些實施中,區域資料351包括與規定矩形區域之左上及右下樣本之區域的邊界相關聯之語法元素。亦可使用其他形式之發信邊界,諸如發信矩形區域之右上及左下樣本,或任何其他合適形式之發信邊界。 在一些實例中,在圖像之邊界上規定區域。存在不同類型之圖像邊界,包括解碼圖像邊界及輸出圖像邊界(或一致性剪裁邊界或窗)。經解碼圖像邊界為經解碼且儲存在經解碼圖像緩衝器中的圖像邊界。然而,在輸出之前,圖像可經重新定大小(例如,重新定大小成小於經解碼圖像的大小)。舉例而言,經解碼圖像可由於一或多種原因而不同於輸出圖像,諸如此係因為圖像解析度並非最小寫碼單元(CU)大小的倍數,此係因為經解碼圖像具有可不呈現用於輸出之一些資訊或內容,或出於其他原因。 在一些實例中,在經解碼圖像邊界上規定區域。可以亮度樣本位置(或圖像之其他色彩分量,諸如色度)為單位規定圖像之矩形區域(或其他形狀)之偏移。在一項說明性實例中,第i矩形區域含有色度樣本,該等色度樣本具有自SubWidthC * regional_nesting_rect_left_offset[ i ]至pic_width_in_luma_samples - ( SubWidthC * regional_nesting_rect_right_offset[ i ] + 1 ) (包括兩者)的水平圖像座標,及自SubHeightC * regional_nesting_rect_top_offset[ i ]至pic_height_in_luma_samples - (SubHeightC * regional_nesting_rect_ bottom_offset[ i ] + 1 ) (包括兩者)的垂直圖像座標。SubWidthC及SubHeightC用於依據樣本單元按比例調整語法元素。舉例而言,在4:2:0視訊中,若邊界並非在偶數列及行處開始,則不清楚色度值是否屬於區域。如此,在使用4:2:0視訊之此實例中,可使用兩個樣本單位之單位,在此狀況下SubWidthC及SubHeightC皆為2。在另一實例中,針對4:4:4視訊,SubWidthC及SubHeightC將為1。 在一些實例中,在一致性裁剪窗上規定區域。舉例而言,在一些狀況下,可藉由使用任意樣本值來延伸圖像區域及在參數集(例如,PPS、SPS、VPS或其類似者)中規定一致性裁剪窗來寫碼不表示最小CU大小之整數倍的圖像大小舉例而言,裁剪窗可包括用以指示經寫碼圖像之輸出區域之參數。在一些實例中,裁剪窗參數可指示輸出圖像小於經解碼圖像的時間。 在一些實例中,在由圖像邊界規定之區域上規定區域,該等圖像邊界由於圖像寬度及圖像高度相關聯之位元串流中之語法元素規定。舉例而言,若存在規定除經解碼圖像邊界及輸出圖像邊界外之邊界的其他構件,則可在彼等邊界上規定區域。 在一些實例中,基於全螢幕矩形之發信而發信區域。在一些狀況中,全螢幕矩形可提供一致性裁剪窗參數以指示輸出圖像小於經解碼圖像之時間。舉例而言,全螢幕矩形語法可規定一或多個矩形相對於一致性裁剪窗的座標(例如,由作用中參數集(諸如,SPS、PPS或VPS)規定)。在一項說明性實例中,可以相對於明度取樣柵格的十六分之一明度樣本間隔為單位規定每一座標。熟習此項技術者將瞭解可將任何間隔用於座標。全螢幕矩形可包括在SEI訊息中,或可在位元串流中發信或在位元串流外部傳達。全螢幕矩形可基於上文所描述區域ID與全域嵌套SEI訊息350相關聯。 區域資料351亦可包括與一或多個區域相關聯之樣本(例如,圖像之像素)。在一項實例中,區域1資料354可包括第一區域之ID,定義第一區域之邊界之資訊,以及與第一區域相關聯之樣本。語法元素集可用於規定第一區域之區域ID、邊界及樣本。在一些實施中,區域可包括在區域之邊界範圍內之所有樣本。在一些實施中,除位於區域之邊界內之樣本外,在區域之邊界上之樣本,或經導出在區域之邊界附近的樣本亦與經發信用於應用於區域之後設資料相關聯。舉例而言,可將第一區域之區域ID映射至在第一區域之邊界內之像素,且亦可將其映射至在邊界上之像素及/或經導出在第一區域之邊界附近之樣本。 在一些實施中,經發信用於任何特定改頭像之區域不重疊,使得不存在於經規定用於給定圖像之多於一個區域相關聯之樣本。在其他實施中,用於圖像之區域可重疊,在此狀況下樣本可屬於多個區域。 在一些實例中,區域資料351可包括關於由區域資料351定義之每一區域之ID。舉例而言,區域1資料354可包括關於第一區域之第一ID,且區域2資料355可包括關於第二區域之第二ID。下文展示用於發信區域ID之語法元素之實例(例如,rns_rect_region_id[ i ],指示關於在SEI訊息中規定之第i矩形區域之識別符)。區域ID可用於確定特定嵌套SEI訊息中之後設資料對與識別符相關聯之區域的適用性。在一些狀況中,不同區域之區域ID可與該等區域與其相關聯的嵌套SEI訊息352及353中之後設資料357、359相關聯。在一些狀況中,區域ID可用於指示圖像中之區域之優先順序。在一項說明性實例中,當樣本與多於一個區域相關聯時,可應用於樣本之後設資料為與來自包括樣本之區域間的包括樣本且具有識別符之最大值之區域相關聯。舉例而言,第一嵌套SEI訊息352 (及後設資料357)可應用於第一區域,且第二嵌套SEI訊息353 (及後設資料359)可應用於第二區域。在此實例中,若圖像中之樣本在第一區域且在第二區域中,且第二區域具有高於第一區域之區域ID,則將藉由解碼器或其他裝置將嵌套SEI訊息353之後設資料359應用於樣本。在一些實例中,在選擇具有相同類型或用途且可經定義用於圖像之重疊區域之多個後設資料時,使用此優先順序。舉例而言,基於優先順序選擇SEI訊息及/或後設資料應用可受限於相同類型之嵌套SEI訊息。在一項說明性實例中,若區域1及區域2重疊,且若色調映射SEI應用於區域1且CRI訊息應用於區域2,則不存在任何優先順序問題。然而,在第一類型之嵌套SEI (例如,嵌套色調映射SEI)應用於區域1且第一類型之另一嵌套SEI應用於區域2時可發生問題,在此狀況下,可能需要優先順序來解決兩個區域之重疊像素。 發信具有優先順序之區域可有助於使發信更高效。舉例而言,如在圖4A中所展示,圖像400A含有兩個區域,包括第一區域402 (區域1)及第二區域404 (區域2)。第二區域404為圖像之中間的小矩形區域,且第一區域402為圖像之其餘部分。在一項實例中,圖像之第一區域402具有所施加之一個後設資料集(例如,後設資料357),且圖像之剩餘部分(第二區域404)具有所施加的另一後設資料集(例如,後設資料359)。第一區域402可發信作為具有比第二區域404低之優先順序之完整圖像。舉例而言,使用優選順序識別符(ID),僅兩個區域必須規定,其中第二區域404具有較高優先順序ID。在無優先順序ID之情況下,必須規定五個區域,如圖4B中所展示。舉例而言,在無優先順序ID之情況下,圖像將不能夠具有重疊區域,此係因為其將不清楚將如何處置重疊之區域。在一項說明性實例中,如圖4B中所展示,不使用優先順序將導致發信五個區域,此係因為該等區域將必須為不重疊的。 在一些態樣中,裝置(例如,編碼裝置或其他裝置)可產生區域資料351以使得其規定(例如,使用語法元素)用於在嵌套SEI訊息中定義區域之邊界及可應用樣本之單元。舉例而言,語法元素之值可規定所使用的單位為樣本位置。在一些實施中,用作用以描述區域之邊界的單位的樣本位置對應於明度樣本位置。舉例而言,可以明度樣本位置為單位規定矩形區域之偏移。在一些實施中,樣本位置可對應於圖像之分量(例如,明度分量、色度分量中的一或多者、明度及色度分量的組合,或其類似者)中之一或多者之位置。在另一實例中,另一值可規定為寫碼樹單元(CTU)的單元。在另一實例中,又一值可規定單位為影像塊。在一些實例中,基於影像塊在位元串流中是否經啟用而將約束包括在語法元素上。 在一些實施例中,可將約束新增至區域嵌套SEI訊息350之語法或語意以使得規定區域之一或多個語法元素表示有效區域或表示非空區域。舉例而言,約束可指示樣本位置之座標小於或大於另一樣本位置之另一座標。在一項說明性實例中,可新增指示左上樣本位置之水平座標小於區域之右下樣本位置之水平座標的約束。在另一說明性實例中,可新增左上樣本位置之垂直座標小於區域之右下樣本位置之垂直座標之類似約束。在規定影像邊界之其他形式以確保所規定區域為非空或為有效區域時可新增類似約束。此約束之一項說明性實例如下:SubWidthC * (regional_nesting_rect_left_offset[ i ]+regional_nesting_rect_right_offset [ i ])之值應小於pic_width_in_luma_samples,且SubHeightC * (regional_nesting_rect_top_offset[ i ]+regional_nesting_rect_bottom_offset [ i ])之值應小於pic_height_in_luma_samples。 在一些實施例中,可將約束新增至嵌套SEI訊息350之語法或語意以使得當針對圖像之兩個或多於兩個區域定義特定類型(或用途)之嵌套SEI訊息之一或多個例項時,區域之識別符(例如,區域ID,其可使用諸如rns_rect_region_id或regional_nesting_rect_region_id的語法元素發信) 之值針對兩個或多於兩個區域中之任何者不應為相同的。在一些實例中,SEI訊息之類型由payloadType變數定義。在一些實例中,SEI訊息之類型由payloadType變數及SEI訊息中之語法元素之子集的值之組合來定義。此約束之一項說明性實例如下:位元串流一致性之要求為regional_nesting_rect_region_id[ i ]之值在區域嵌套SEI訊息中針對0至regional_nesting_num_rect_regions - 1範圍(包括0、regional_nesting_num_rect_regions - 1)中之任何兩個不同值不應相同;當listOfRegionNestableMessageTypes中之特定類型之SEI訊息存在於一個區域嵌套SEI訊息中且應用於當前圖像之區域清單listA且listOfRegionNestableMessageTypes中之同一類型之另一SEI訊息存在於區域嵌套SEI訊息中且應用於當前圖像中的區域之清單listB,位元串流一致性之要求為針對藉由自listA選擇一者且自listB選擇另一者形成之任何對或區域,兩個區域之regional_nesting_rect_region_id[ ]之值不應為相同的直至兩個區域為完全相同的且兩個SEI訊息為完全相同的。 如先前所闡釋,裝置可產生區域嵌套SEI訊息350使得其將嵌套SEI訊息352及353之區域特定應用發信至解碼器或其他裝置。返回至圖3,區域嵌套SEI訊息350經展示為具有兩個嵌套SEI訊息,包括嵌套SEI訊息352及嵌套SEI訊息353。熟習此項技術者將瞭解區域嵌套SEI訊息350可包括任何合適數目個嵌套SEI訊息。嵌套在區域嵌套SEI訊息350中之嵌套SEI訊息之數目可基於圖像之區域之數目,基於欲應用於圖像之應用或功能之數目,基於編碼器或其他裝置確定針對圖像之區域應規定之特性之數目,或基於其他參數。 不同嵌套SEI訊息352及353可由編碼器或其他裝置產生且由解碼器或其他裝置用於不同用途。嵌套SEI訊息352及353具有實現SEI訊息352、353之用途的不同後設資料。在一項實例中,SEI訊息352或353之後設資料可由解碼器裝置、播放器或其他裝置用於執行與SEI訊息352或353的用途有關的功能。在另一實例中,SEI訊息352或353之後設資料可根據SEI訊息352或353的用途而規定圖像(例如,圖像之區域)之特性。不同嵌套SEI訊息352及353可已定義指示嵌套SEI訊息之用途之類型。舉例而言,嵌套SEI訊息352可具有第一類型且可用於第一用途,且嵌套SEI信息353可具有第二類型且可用於第二用途。嵌套SEI訊息352及353可用於可應用於視訊圖像之區域之任何用途。嵌套SEI訊息352、353之SEI或後設資料類型之說明性實例可包括膠卷粒紋特性SEI訊息、後濾波提示SEI訊息、色度重新取樣濾波提示SEI訊息、色調映射資訊SEI訊息、拐點功能資訊SEI訊息、色度重新映射資訊SEI訊息,或可以區域為基礎應用於圖像之一或多個區域之任何其他SEI訊息或資料。 在一項說明性實例中,嵌套SEI訊息352可用於自第一動態範圍轉換成第二動態範圍,諸如自高動態範圍(HDR)轉換成標準動態範圍(SDR)。例如,用高動態範圍/寬色域(HDR/WCG)主控之源內容可經變換用於在具有較小色彩容量(例如,與藉以主控內容之範圍或色域相比,較低照度範圍或較小色域,或較低照度範圍及較小色域)之顯示器(諸如,SDR顯示器)上呈現。在此實例中,嵌套SEI訊息352可包括CRI SEI訊息,且嵌套SEI訊息352之後設資料357可包括用以執行動態範圍轉換之資料。舉例而言,後設資料357可包括預查找表、色彩重新映射矩陣及後查找表。預查找表及後查找表可包括不同或類似分段線性函數(例如,關於每一色彩分量之分段線性函數)。色彩重新映射矩陣可包括線性模型,諸如在存在三個色彩分量時之3×3矩陣。舉例而言,色彩重新映射矩陣可跨越每一圖像樣本之所有色彩分量應用且可用於映射色彩分量之係數。 在另一說明性實例中,嵌套SEI訊息353可用於色調映射,且可包括色調映射資訊SEI訊息。嵌套SEI訊息353之後設資料359可包括用於對由一或多個區域ID 360規定之一或多個區域執行色調映射之資料。 在一些實施中,裝置可產生區域嵌套SEI訊息350以使得其規定嵌套SEI訊息(例如,嵌套SEI訊息352、353)之語意使得嵌套SEI訊息或後設資料集中之每一者可用於嵌套SEI訊息(例如,如由一或多個區域ID 358及360指示)中所規定之區域中之一或多者。在一些狀況中,一或多個區域識別符(ID)、索引或指標可被包括在嵌套SEI訊息中或與其相關聯以指示嵌套SEI訊息可應用於哪些區域。舉例而言,針對每一嵌套SEI訊息(例如,嵌套SEI訊息352、353)或後設資料集(例如,後設資料357、359),裝置可產生區域嵌套SEI訊息350以將索引、識別符或指標集發信至與嵌套SEI訊息相關聯之區域清單,索引、識別符或指標集指示欲將嵌套SEI訊息或後設資料集應用於由該等索引、識別符或指標中之每一者指示的每一區域。如圖3中所展示,嵌套SEI訊息352中定義之一或多個區域ID 358指示後設資料357欲應用之圖像之一或多個區域(由區域資料351定義)。舉例而言,一或多個區域ID 358可被包括作為指向對應區域之索引或指標。在一些狀況中,解碼器(或其他裝置)可將後設資料357僅應用於由一或多個區域ID 358規定之圖像之一或多個區域(且因此執行功能,解釋特性,或使用與後設資料357相關聯之提示或其他資訊)。解碼器亦可將後設資料359僅應用於由一或多個區域ID 360規定之圖像之一或多個區域。區域ID 358及360並未定義區域之參數,但參考由區域資料351定義之區域。因此,區域並非必須針對區域嵌套SEI訊息350中之每一嵌套SEI訊息重新定義。藉由針對區域嵌套SEI訊息350中之所有嵌套SEI僅定義區域一次,節省位元組之數目,此可增加寫碼效率、頻寬及其他益處。 在一些實施中,裝置可產生區域嵌套SEI訊息350以含有可與當前圖像相關聯之一或多個SEI訊息之索引、識別符或指標清單。在一些實例中,替代將SEI訊息明確嵌套在區域嵌套SEI訊息350內,可發信SEI訊息之索引、識別符或指示清單。索引、識別符或指標可包括在SEI訊息中發信之一或多個識別符、SEI訊息之有效負載類型或其他形式之識別。 在一些實施中,裝置可產生區域嵌套SEI訊息350以使得其包括識別區域嵌套SEI訊息350之用途之一或多個語法元素。舉例而言,用途並不與嵌套SEI訊息350中之嵌套SEI訊息之用途及/或語意矛盾,且可控管嵌套訊息全部促進之全部用途。在一項實例中,ID值1可指示嵌套SEI訊息一起(例如,色調映射器、濾波器等)用於提供舊型顯示器中之視訊內容之最佳再現性。在另一實例中,ID值可由外部應用標準使用。在一些實例中,可發信確定區域嵌套SEI訊息350中之嵌套SEI訊息之用途或使用SEI訊息之應用之一或多個識別符。在一些實例中,識別符亦可用於規定嵌套SEI訊息350內之一或多個語法元素之語法及語意。在下文所展示之實例性語法中展示識別符之實例性語法元素(例如,展示為rns_id 或regional_nesting_id)。 在一些實施中,裝置可產生區域嵌套SEI訊息350以使得其包括在嵌套SEI訊息350中發信之SEI訊息或後設資料之數目。用於發信數目之實例性語法元素在下文所展示之實例性語法中展示(例如,為num_seis_in_rns_minus1或num_sei_messages_in_regional_ nesting_minus1)。在一些實施中,裝置可發信用於導出在嵌套SEI訊息中發信之SIE訊息或後設資料集之數目的數目。 在一些實施中,區域嵌套SEI訊息350可經產生以包括指示所發信位元組之數目的數目,後續接著與和嵌套SEI訊息350相關聯之每一嵌套SEI訊息(嵌套SEI訊息352、353)或每一後設資料集(例如,後設資料357、359)相關聯之彼等位元組。位元組之解釋可由在HEVC或其他相關規範之外的構件規定,或可基於區域嵌套SEI訊息350之識別符的值。 在一些實施中,嵌套SEI訊息(例如,區域嵌套SEI訊息350)之持續性是在嵌套在嵌套SEI訊息中之嵌套SEI訊息或後設資料集中的彼等方面規定。可應用於第一圖像(或在可應用時,可應用於接入單元)之SEI訊息之持續性或持續性範疇指示SEI訊息可應用於之含有第一圖像之層內之圖像(或在可用時,指示接入單元)。在一些狀況中,每一嵌套SEI訊息具有與在SEI訊息非嵌套式的情況下相同之持續性範疇。下文在表1中展示不同SEI訊息類型之持續性範疇之實例。在一些狀況中,嵌套SEI訊息獨立地應用於區域嵌套SEI訊息中所定義之區域,且嵌套SEI訊息之持續性獨立地應用於每一窗口。在一些實例中,嵌套SEI訊息之持續性可被忽略且持續性可在嵌套SEI訊息內由所發信之一或多個語法元素規定或由語意規定。 表1:嵌套SEI訊息之持續性 在一些實施中,裝置可產生區域嵌套SEI訊息350以包括規定明確發信之某些其他語法元素之語法元素。舉例而言,語法元素可指示在區域嵌套SEI訊息350中明確地發信與一或多個嵌套SEI訊息(嵌套SEI訊息352、353)應用於之應用相關聯之語法元素、與目標系統相關聯之語法元素,或與應用及目標系統有關之語法元素。下文展示此語法元素之實例(例如,作為rns_info_present_flag)。舉例而言,區域嵌套SEI訊息350可發信嵌套SEI訊息(嵌套SEI訊息352、353)或後設資料集(例如,後設資料357、359)可應用於之應用有關之語法元素。在一些狀況中,此等語法元素可包括應用識別符及應用版本。作為另一實例,區域嵌套SEI訊息350可發信嵌套SEI訊息或後設資料集可應用於目標系統有關之語法元素。在一些狀況中,此等語法元素可包括與目標系統及對應白點座標相關聯之顯示器原色。在一些狀況中,此等語法元素可包括與目標顯示器相關聯之最小及最大照度。 在一些實施中,裝置可產生區域嵌套SEI訊息350以在每一嵌套SEI訊息(例如,嵌套SEI訊息352、353)或後設資料集(例如,後設資料357、359)之每一可用區域內發信子集區域。在一些實例中,裝置可在區域嵌套SEI訊息350中發信規定其中規定子集區域之域的語法元素。舉例而言,語法元素之一個值(例如,0或1)可規定域為YCbCr,且另一值(例如,1或0)可規定域為空間域。在一些實例中,裝置可發信或導出針對可用區域規定之多個範圍或邊界。在一些實例中,裝置可發信規定所規定之範圍或邊界之類型的語法元素。舉例而言,一個語法元素可規定:規定下界及上界。在另一實例中,另一語法元素或值可規定:規定圓碟。在另一實例中,可規定規定橢圓區域之語法元素之又一值。在一些實例中,裝置可發信或導出多個與每一範圍或界限時間相關聯之值且可發信彼等值。在一些實例中,裝置可發信指示嵌套SEI訊息應用於之可用區域內之子集區域係在所規定範圍或界限內抑或在所規定範圍/界限外部的旗標。 圖5為說明經產生用於視訊位元串流之圖像之區域嵌套SEI訊息570之另一實例的圖。區域嵌套SEI訊息570可由裝置產生,諸如編碼裝置104或可將區域嵌套SEI訊息570儲存在視訊位元串流中或用視訊位元串流將區域嵌套SEI訊息570傳輸至接收裝置(諸如解碼裝置112或可解碼或以其他方式處理區域嵌套SEI訊息350的其他裝置)的其他裝置。 區域嵌套SEI訊息570類似於區域嵌套SEI訊息350,且包括在圖像中定義多個區域之區域資料571且亦包括多個嵌套SEI訊息572及573。區域資料571類似於區域資料351,且包括區域1資料574、區域2資料575直至區域N資料576。上文關於區域嵌套SEI訊息350所描述之所有實例可應用於區域嵌套SEI訊息570。雖然多個區域係由區域資料571定義,但在一或多個後設資料集僅可用於一個區域時之狀況下可定義僅一個區域。 區域嵌套SEI訊息570含有可應用於同一圖像中之至少一個共同區域之多個嵌套訊息572及573。嵌套SEI訊息572包括指示嵌套SEI訊息572待應用於之用途的類型。舉例而言,嵌套SEI訊息572可用於自第一動態範圍轉換至第二動態範圍,在此狀況下嵌套SEI訊息572可為CRI SEI訊息。嵌套SEI訊息572包括多個資料集及多個區域識別符(ID)。資料集包括後設資料577及後設資料578,該後設資料577及後設資料578皆可在圖像之不同區域上用於所識別用途(例如,自HDR轉換至SDR,或其他用途)。舉例而言,後設資料577及後設資料578可包括用於嵌套SEI訊息572之用途(例如,HDR至SDR轉換,或其他用途)之後設資料之不同值。熟習此項技術者將瞭解嵌套SEI訊息572可包括多於兩個後設資料集及多於三個區域ID。 後設資料577及578之每一集可應用於之一或多個區域係由區域ID所識別,包括區域1 ID 579、區域2 ID 580及區域3 ID 581。可將不同區域ID 579、580、581映射至後設資料577、578之集合中之一者或兩者。舉例而言,後設資料577可映射至區域1 ID 579及區域2 ID 580兩者或與其相關聯,向後設資料577將應用於之解碼器或其他裝置指示第一區域(由區域1 ID 579識別且由區域1資料574定義)及第二區域(由區域2 ID 580識別且由區域2資料575定義)。可將後設資料578映射至區域3 ID 581或與其相關聯,指示後設資料578將應用於第三區域(由區域3 ID 581識別且由區域資料571定義)。在一項說明性實例中,後設資料577可包括可應用於具有某些特性(例如,色彩特性)之視訊之CRI SEI訊息之後設資料之第一版本,且第一區域及第二區域可包括具有某些特性之樣本。在此實例中,後設資料578可為可應用於具有不同特性之視訊之CRI SEI訊息之後設資料之第二版本,且第三區域可包括具有不同特性之樣本。在另一說明性實例中,圖像之內容可含有具有不同特性之三個區域-圖像可含有諸如天空之明亮區域,諸如覆蓋在物件之陰影中之區域的黑暗區域,及具有適度亮度之圖像之區域部分。當欲將此內容呈現於具有不同於使用來控制該內容之特性的特性之顯示器中時,可將一或多個CRI SEI訊息應用於該內容以便使該內容適應於該顯示器。在此狀況下,將不同CRI訊息應用於具有不同特性之三個區域(諸如明亮、黑暗及適度明亮區域)可為有益的。適度明亮之區域可在無需任何處理之情況下顯示且可發信作為區域3。明亮區域及黑暗區域將必須使用CRI訊息藉由以下步驟來映射:將此等區域發信作為區域1及區域2,將區域1及區域2映射至CRI後設資料577及後設資料578(例如,使用區域1 ID 579及區域2 ID 580),及在位元串流中發送對應CRI後設資料577 (用於區域1)及後設資料578 (用於區域2)。 其他嵌套SEI訊息573包括不同於嵌套SEI訊息572之類型,該類型指示嵌套SEI訊息573將應用於之用途。舉例而言,嵌套SEI訊息573可用於濾波經解碼視訊圖像,用於執行色調映射,或用於可在區域特定基礎上應用之另一合適用途。嵌套SEI訊息573包括後設資料582及後設資料583以及區域1 ID 579及區域3 ID 581。熟習此項技術者將瞭解嵌套SEI訊息573可包括多於兩個後設資料集及多於兩個區域ID。 後設資料582及後設資料583皆可用於在圖像之不同區域上之嵌套SEI訊息573之識別用途(例如,經解碼圖像濾波,或其他用途)。舉例而言,後設資料582及後設資料583可包括用於該用途(例如,經解碼圖像濾波,或其他用途)之後設資料之不同值。後設資料582及583之每一集合可應用於之一或多個區域由區域ID (包括區域1 ID 579及區域3 ID 581)識別。可將後設資料582映射至區域1 ID 579或與其相關聯,向解碼器或其他裝置指示後設資料582將應用於第一區域(由區域1 ID 579識別且由區域1資料574定義)。可將後設資料583映射至區域3 ID 581或與其相關聯,指示後設資料583將應用於第三區域(由區域3 ID 581識別且由區域資料571定義)。 如圖5中所展示,區域嵌套SEI訊息570允許由多個嵌套SEI訊息共用所定義區域(例如,由區域1資料574定義之第一區域及由區域資料571中未展示之其他區域資料定義之第三區域),而無需針對每一嵌套SEI訊息重新定義區域。舉例而言,兩個嵌套SEI訊息572及573之用途或應用可定義或使用類似或相同區域。替代針對嵌套SEI訊息572及573中之兩者重新定義區域兩次,嵌套SEI訊息572及573可藉由包括區域1 ID 579及區域3 ID 581而包括區域資料571的指標。 圖6為說明使用本文中所描述技術中之一或多者編碼視訊資料之程序600之實例的流程圖。在區塊602處,程序600包括獲得視訊資料。舉例而言,視訊資料可包括使用裝置之攝影機俘獲之圖像。在另一實例中,視訊資料可自儲存裝置獲得。 在區塊604處,程序600包括使用視訊資料產生經編碼視訊位元串流。經編碼視訊位元串流可使用本文中所描述之寫碼技術來產生。該經編碼視訊位元串流包括一區域嵌套訊息,該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之一圖像之至少一第一區域之區域資料。在一些實例中,區域資料可定義圖像之複數個區域(例如,使用多個區域資料集)。該區域嵌套訊息之第一嵌套訊息包括第一資料集,及指示該圖像之該第一區域與該第一資料集相關聯之第一區域識別符。舉例而言,第一區域識別符可與第一嵌套訊息中之第一資料集相關聯或可映射至該第一資料集,且可指示(例如,向解碼器、播放器、顯示器或其他合適的裝置)將第一資料集應用於第一區域,第一資料集可由將應用於第一區域之另一功能使用,及/或以其他方式指示第一資料集將用於第一區域之內容。 在一些實施中,區域嵌套訊息為區域嵌套補充增強資訊(SEI)訊息,且該複數個嵌套訊息為嵌套SEI訊息。區域嵌套訊息之實例為圖3中所展示之區域嵌套SEI訊息350。區域嵌套訊息之另一實例為圖5中所展示之區域嵌套SEI訊息570。 在一些實例中,使用該第一資料集來基於該第一區域識別符對該第一區域執行第一功能。資料集可定義任何合適功能,諸如使用膠卷粒紋特性SEI訊息、色調映射資訊SEI訊息、後濾波提示SEI訊息、色度重新取樣濾波提示SEI訊息、色彩重新映射資訊SEI訊息、拐點功能資訊SEI訊息或用於對視訊圖像之區域執行功能之任何其他合適資料執行之功能。 在一些態樣中,該第一資料集基於該第一區域識別符規定該第一區域之特性。舉例而言,第一資料集可包括關於第一區域之內容之最大照度之資訊,第一區域之內容之最小照度,第一區域之內容之色彩特性,或區域內容之其他特性。在另一實例中,第一資料集可包括解碼器裝置、播放器裝置、顯示器裝置或其他裝置可用於根據裝置之約束或根據裝置操作之條件處理第一區域之內容。 在一些態樣中,定義該圖像之第一區域之區域資料被包括在區域嵌套訊息中一次。在此等狀況下,區域未必經重新定義用於每一嵌套訊息,使得區域資料並非必須針對每一嵌套訊息或針對欲應用於圖像之每一資料集單獨地發信。 在一些實例中,該第一嵌套訊息進一步包括第二資料集,且該第二資料集與該第一區域識別符相關聯以指示該第一區域與該第二資料集相關聯。舉例而言,第一區域識別符可與第一嵌套訊息中之第二資料集相關聯或可映射至該第二資料集,且可指示(例如,向解碼器、播放器、顯示器或其他合適的裝置)將第二資料集應用於第一區域,第二資料集可由將應用於第一區域之另一功能使用,及/或以其他方式指示第二資料集將用於第一區域之內容。 在一些實例中,該區域嵌套訊息包括定義該圖像之複數個區域的複數個區域資料,且該第一嵌套訊息之該第一資料集與該圖像之該複數個區域中之多個區域相關聯及/或可應用於多個區域。舉例而言,第一資料集可與第一嵌套訊息中之多個區域相關聯或可映射至該等多個區域。在一些狀況下,該第一嵌套訊息進一步包括第二區域識別符,該第二區域識別符指示與該第一資料相關聯之該圖像之該複數個區域中之第二區域。舉例而言,第二區域識別符可與第一嵌套訊息中之第一資料集相關聯或可映射至該第一資料集,且可指示(例如,向解碼器、播放器、顯示器或其他合適的裝置)將第一資料集應用於第二區域,第一資料集可由將應用於第二區域之另一功能使用,及/或以其他方式指示第一資料集將用於第二區域之內容。在此等狀況下,該第一資料集可獨立地應用於該第一區域及該第二區域中之每一者(或以其他方式與其相關聯)。舉例而言,第一資料集可藉由解碼器、播發器、顯示器或其他合適裝置獨立地應用於第一區域及第二區域。 在一些實例中,該區域嵌套訊息包括第二嵌套訊息,且該第二嵌套訊息包括與第一區域識別符相關聯之第二資料集,因此指示該第一區域與該第二資料集相關聯。舉例而言,第一區域識別符可與第二嵌套訊息中之第二資料集相關聯或可映射至該第二資料集,且可指示(例如,向解碼器、播放器、顯示器或其他合適的裝置)將第二資料集應用於第一區域,第二資料集可由將應用於第一區域之另一功能使用,及/或以其他方式指示第二資料集將用於第一區域之內容。在此等實例中,第一資料集及第二資料集欲應用於第一區域(例如,藉由解碼器裝置、播發器裝置、顯示器裝置或其他合適的裝置)。關於第一區域之區域資料僅必須針對區域嵌套訊息包括一次,且第一識別符可與第一資料集及第二資料集相關聯以指示將兩個資料集應用於第一區域。 在一些態樣中,該區域嵌套訊息進一步包括該圖像之複數個區域之數目。 在一些實例中,複數個區域資料定義該第一區域之一或多個邊界或定義含在該第一區域中之樣本。在一些實例中,該區域資料定義該第一區域之一或多個邊界自該圖像之一或多個邊界之一或多個偏移。在一些實例中,該區域資料將該第一區域定義為矩形區域。 在一些實施中,當圖像之樣本在圖像之兩個或多於兩個區域中時,可應用於兩個或多於兩個區域中之一區域的第一類型之嵌套訊息可應用於該樣本,該區域在該兩個或多於兩個區域間具有最大區域識別符值之。在一些狀況下,可應用於兩個或多於兩個區域中之另一區域的第一類型之另一嵌套訊息不可應用於該樣本,該另一區域在兩個或多於兩個區域間不具有最大區域識別符值。 在一些實例中,該區域嵌套訊息進一步包括識別該區域嵌套訊息之用途之語法元素。在一些狀況下,該區域嵌套訊息進一步包括該區域嵌套訊息中之複數個嵌套訊息之數目。 在一些實例中,複數個嵌套訊息之嵌套訊息具有與在嵌套訊息未被嵌套在區域嵌套訊息中之情況下相同之持續性。舉例而言,嵌套訊息之持續性可在將其新增至區域嵌套訊息時不改變。 在一些實例中,區域嵌套訊息包括關於第一嵌套訊息之索引集。索引集指示第一資料集將應用於之一或多個區域。舉例而言,索引集可包括至少第一區域識別符。 圖7為說明使用本文中所描述之技術中之一或多者解碼視訊資料之程序700之實例的流程圖。在702處,程序700包括:接收視訊位元串流。視訊位元串流可包括複數個經編碼圖像,且可使用語法元素及具有資訊之變數來解碼該等圖像並處理該等經解碼圖像。 在區塊704處,程序700包括自視訊位元串流獲得區域嵌套訊息。該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之圖像之至少第一區域的區域資料。該區域嵌套訊息之第一嵌套訊息包括第一資料集,及指示該圖像之該第一區域與該第一資料集相關聯之第一區域識別符。 在一些實例中,使用該第一資料集來基於該第一區域識別符對該第一區域執行第一功能。資料集可定義任何合適功能,諸如使用膠卷粒紋特性SEI訊息、色調映射資訊SEI訊息、後濾波提示SEI訊息、色度重新取樣濾波提示SEI訊息、色彩重新映射資訊SEI訊息、拐點功能資訊SEI訊息或用於對視訊圖像之區域執行功能之任何其他合適資料執行之功能。 程序700(在由解碼裝置執行時)亦可包括解碼圖像及使用第一資料集對圖像之第一區域執行第一功能。基於第一區域識別符對第一區域執行第一功能。可使用本文中所描述寫碼技術解碼圖像(及視訊位元串流之其他圖像)。 在一些實例中,該第一資料集基於該第一區域識別符規定該第一區域之特性。舉例而言,第一資料集可包括關於第一區域之內容之最大照度之資訊,第一區域之內容之最小照度,第一區域之內容之色彩特性,或區域內容之其他特性。在另一實例中,第一資料集可包括解碼器裝置、播放器裝置、顯示器裝置或其他裝置可用於根據裝置之約束或根據裝置操作之條件處理第一區域之內容。 在一些實施中,區域嵌套訊息為區域嵌套補充增強資訊(SEI)訊息,且該複數個嵌套訊息為嵌套SEI訊息。區域嵌套訊息之實例為圖3中所展示之區域嵌套SEI訊息350。區域嵌套訊息之另一實例為圖5中所展示之區域嵌套SEI訊息570。 在一些態樣中,定義該圖像之第一區域之區域資料被包括在區域嵌套訊息中一次。在此等狀況下,區域未必經重新定義用於每一嵌套訊息,使得區域資料並非必須針對每一嵌套訊息或針對欲應用於圖像之每一資料集單獨地發信。 在一些實例中,第一嵌套訊息進一步包括第二資料集,且第二資料集與第一區域識別符相關聯以指示第一區域與第二資料集相關聯(例如,欲將第二資料集應用於第一區域或可用於對第一區域執行另一功能,或其他合適適用性)。 在一些實例中,該區域嵌套訊息包括定義該圖像之複數個區域的複數個區域資料,且該第一嵌套訊息之該第一資料集與該圖像之該複數個區域中之多個區域相關聯。在一些狀況下,該第一嵌套訊息進一步包括第二區域識別符,該第二區域識別符指示與該第一資料相關聯之該圖像之該複數個區域中之第二區域。在此等狀況下,該第一資料集可獨立地應用於該第一區域及該第二區域中之每一者。 在一些實例中,區域嵌套訊息包括第二嵌套訊息,且第二嵌套訊息包括第二資料集及第一區域識別符,因此指示第一區域與第二資料集相關聯。在此等實例中,第一資料集及第二資料集可應用於第一區域(例如,藉由解碼器裝置、播發器裝置、顯示器裝置或其他合適的裝置)。關於第一區域之區域資料僅必須針對區域嵌套訊息包括一次,且第一識別符可與第一資料集及第二資料集相關聯以指示將兩個資料集應用於第一區域。 在一些態樣中,該區域嵌套訊息進一步包括該圖像之複數個區域之數目。 在一些實例中,該區域資料定義該第一區域之一或多個邊界或定義含在該第一區域中之樣本。在一些實例中,複數個區域資料定義該第一區域之一或多個邊界自該圖像之一或多個邊界之一或多個偏移。在一些實例中,複數個區域資料將複數個區域定義為矩形區域。 在一些實施中,當圖像之樣本在圖像之兩個或多於兩個區域中時,可應用於兩個或多於兩個區域中之一區域的第一類型之嵌套訊息可應用於該樣本,該區域在兩個或多於兩個區域間具有最大區域識別符值。在一些狀況下,可應用於兩個或多於兩個區域中之另一區域的第一類型之另一嵌套訊息不可應用於該樣本,該另一區域在兩個或多於兩個區域間不具有最大區域識別符值。 在一些實例中,該區域嵌套訊息進一步包括識別該區域嵌套訊息之用途之語法元素。在一些狀況下,該區域嵌套訊息進一步包括該區域嵌套訊息中之複數個嵌套訊息之數目。 在一些實例中,複數個嵌套訊息之嵌套訊息具有與在嵌套訊息未被嵌套在區域嵌套訊息中之情況下相同之持續性。舉例而言,嵌套訊息之持續性可在將其新增至區域嵌套訊息時不改變。 在一些實例中,區域嵌套訊息包括關於第一嵌套訊息之索引集。索引集指示第一資料集將應用於之一或多個區域。舉例而言,索引集可包括至少第一區域識別符。 在一些實例中,程序600及700可由計算裝置或設備(諸如圖1中所展示之系統100)執行。舉例而言,程序600可由圖1及圖8中所展示之編碼裝置104,或由另一視訊源側裝置或視訊傳輸裝置執行。程序700可由圖1及圖9中所展示之解碼裝置112或由另一用戶端側裝置(諸如播放器裝置、播放器或任一其他用戶端側裝置)執行。在一些狀況中,計算裝置或設備可包括處理器、微處理器、微電腦或經組態以實施程序600及700之步驟之裝置之其他組件。在一些實例中,計算裝置或設備可包括經組態以俘獲包括視訊圖框之視訊資料(例如,視訊序列)的攝影機。在一些實例中,俘獲視訊資料之攝影機或其他俘獲裝置與計算裝置分離,在此狀況下,計算裝置接收或獲得所俘獲視訊資料。計算裝置可進一步包括經組態以傳遞視訊資料之網路介面。網路介面可經組態以傳遞基於網際網路協定(IP)之資料或其他類型之資料。在一些實例中,計算裝置或設備可包括用於顯示輸出視訊內容(諸如視訊位元串流之圖像之樣本)之顯示器。 程序600及700經說明為邏輯流程圖,其操作表示可以硬體、電腦指令或其組合實施之一系列操作。在電腦指令之上下文中,操作表示在由一或多個處理器執行時執行該等所敍述操作的經儲存在一或多個電腦可讀儲存媒體上之電腦可執行指令。通常,電腦可執行指令包括執行特定功能或實施特定資料類型之常式、程式、物件、組件、資料結構及其類似者。描述操作之次序並非意欲解釋為限制性,且所描述操作中之任何數目者可以任何次序及/或並行組合以實施程序。 另外,程序600及700可在經組態有可執行指令之一或多個電腦系統之控制下執行,且可經實施為在一或多個處理器上、藉由硬體或其組合來共同執行之程式碼(例如,可執行指令、一或多個電腦程式,或一或多個應用程式)。如上文所述,程式碼可經儲存在電腦可讀或機器可讀儲存媒體上,例如,呈包含可由一或多個處理器執行之複數個指令之電腦程式形式。電腦可讀或機器可讀儲存媒體可為非暫時性的。 描述提供上文所描述技術之實例的各種說明性實施例。實施例經展示為標準之語法元素、變數、語意及其他部分(其實例包括在標準文件JCTVC-Z1005中)的新增及刪除。針對實施例1,標準之語法及語意之新增經指示在「<insert>」符號與「<insertend>」符號之間(例如,「<insert>所新增文字<insertend>」)。針對後續實施例2至6,相對於實施例1之語法元素之新增經展示在「<insert>」符號與「<insertend>」符號之間(例如,「<insert>所新增文字<insertend>」),且刪除經展示在「<delete>」符號與「<deleteend>」符號之間(例如,「<delete>所新增文字< deleteend>」)。實施例 1 在此實施例中,經由SEI訊息-區域嵌套SEI訊息發信圖像之區域及SEI訊息及相關聯後設資料。 SEI有效負載語法結構 關於區域嵌套SEI訊息之payloadType值可基於HEVC規範中之其他SEI訊息設定成不同值。 區域嵌套SEI訊息語法結 區域嵌套SEI訊息語意 區域嵌套SEI訊息提供用以使SEI訊息與圖像之區域(該等區域在SEI訊息中規定)相關聯之機制。 區域嵌套SEI訊息含有一或多個SEI訊息。當SEI訊息嵌套在區域嵌套SEI訊息中時,將SEI訊息之語意解釋為可獨立地應用於SEI訊息中規定之每一區域。在當前圖像中之特定樣本存在於由與當前圖像相關聯之區域嵌套SEI訊息規定之多於一個區域中時,應用於特定樣本之SEI訊息可由SEI訊息中之其他語法元素或由在此規範之外的構件判定。 每一嵌套SEI訊息具有與在SEI訊息非嵌套式的情況下相同之持續性範疇。 以下限制應用於將SEI訊息嵌套在區域嵌套SEI訊息中為位元串流一致性之要求: - 具有等於以下值之payloadType的SEI訊息不應嵌套於區域嵌套SEI訊息中:0 (緩衝週期)、1 (圖像定時)、2 (全螢幕)、3 (濾波器有效負載)、4 (所暫存之使用者資料)、5 (未暫存之使用者資料)、6 (恢復點)、9 (場景資訊)、15 (圖像快照)、16 (逐步細化分段開始)、17 (逐步細化分段結束)、45 (圖框包裝配置)、47 (顯示器定向)、56 (綠色後設資料)、128 (圖像之結構)、129 (作用中參數集)、130 (解碼單元資訊)、131 (時間子層零索引)、132 (經解碼圖像雜湊)、133 (可縮放嵌套)、134 (區域再新)、135 (無顯示器)、136 (時間寫碼)、137 (主控顯示器色彩容量)、138 (分段矩形圖框包裝)、139 (時間運動約束影像塊集)、143 (解交錯欄位)、144 (內容光位準)、145 (相依RAP)、146 (經寫碼區域)、160 (層不存在)、161 (層間約束影像塊集)、162 (bsp嵌套)、163 (bsp初始到達時間)、164 (替補位元串流性質)、165 (alpha色板資訊)、166 (疊對資訊)、167 (時間mv預測)、168 (圖框欄位資訊)、176 (三維參考顯示器)、177 (深度表示資訊)、178 (多視圖場景)、179 (多視圖獲取)、180 (多視圖位置)、181 (替代深度)、182 (替代特性)及183 (周圍觀看環境)。[Ed.(AR):上述情形當前包括全部,惟膠卷粒紋特性、後濾波器提示、色調映射資訊、重新取樣濾波器提示及色度重新映射資訊SEI訊息除外。] 注意:與可縮放嵌套SEI訊息不同,嵌套在區域嵌套SEI信息中之SEI訊息不應被提取且發送作為單獨SEI訊息,此係因為在嵌套SEI訊息中發信之值可能不可應用於可應用區域外部。rns_id 含有可用於識別一或多個區域嵌套SEI訊息之用途之識別數字。rns_id之值應在0至232 - 2範圍(包括0、232 - 2)中。 可使用自0至255及自512至231 - 1的rns_id值,如由應用程式所確定。自256至511及自231 至232 - 2的rns_id值經保留用於供由ITU-T | ISO/IEC未來使用。經歷在256至511(包括256、511)範圍中或在231 至232 - 2 (包括231 、232 - 2)範圍中的rns_id值之解碼器應忽略該值。rns_region_size_type_idc 規定在SEI訊息中規定區域之邊界的單位。當rns_region_size_type_idc等於0時,語法元素rns_region_left_top_[ ]、rns_region_left_top_y[ ]、rns_region_bottom_right_x[ ]及rns_region_bottom_right_y[ ]以樣本為單位。當rns_region_size_type_idc等於1時,語法元素rns_region_left_top_[ ]、rns_region_left_top_y[ ]、rns_region_bottom_right_x[ ]及rns_region_bottom_right_y[ ]以CTU為單位。當rns_region_size_type_idc等於2時,語法元素rns_region_left_top_[ ] rns_region_left_top_y[ ]、rns_region_bottom_right_x[ ]及rns_region_bottom_right_y[ ]以影像塊為單位加以規定。rns_num_rect_regions 規定由SEI訊息規定之矩形區域之數目。rns_num_rect_regions之值應在1至255範圍(包括1、255)中。等於0之rns_num_rect_regions之值經保留以供由ITU-T | ISO/IEC未來使用。rns_rect_region_id [ i ]指示用於SEI訊息中規定之第i矩形區域之識別符。 除非由本說明中未規定之一些構件另有指示,否則當樣本屬於多於一個矩形區域時,與具有rns_rect_region_id[ ]之最大值且包括樣本之區域相關聯之SEI訊息可應用於樣本。 注意- rns_rect_region_id[ i ]可用作用於指示在與不同後設資料集相關聯之多於一個區域可應用於圖像之給定樣本或區域時應該應用對應於哪些區域之後設資料參數的優先順序編號。 在一些替代方案中,針對與當前圖像相關聯之一或多個區域嵌套SEI訊息中規定之每一區域,將rns_rect_region_id[ i ]之值限制成唯一的。當rns_rect_region_id[ i ]之值針對與當前圖像相關聯之一或多個區域嵌套SEI訊息中規定之兩個區域相等時,可能要求將與區域之邊界相關聯之語法元素之子集之值限制成相等的。在一些替代方案中,語法元素子集可包括語法元素rns_region_left_top_[ ] rns_region_left_top_y[ ]、rns_region_bottom_right_x[ ],及rns_region_bottom_right_y[ ]。舉例而言,可新增以下約束: 當rns_rect_region_id[ i ]之值針對可應用於當前圖像之一或多個區域嵌套SEI訊息中所規定之任何兩個區域相等時,rns_region_left_top_[ ]、rns_region_left_top_y[ ]、rns_region_bottom_right_x[ ],及rns_region_bottom_right_y[ ]之值應相等為位元串流一致性的要求。rns_rect_region_left_top_x [ i ]規定SEI訊息中規定之第i矩形區域之左上單元之水平座標。其中定義rns_rect_region_left_top_x[ i ]之單元係由rns_region_size_type_idc語法元素規定。rns_rect_region_left_top_y [ i ]規定SEI訊息中規定之第i矩形區域之左上單元之垂直座標。其中定義rns_rect_region_left_top_y[ i ]之單元係由rns_region_size_type_idc語法元素規定。rns_rect_region_bottom_right_x [ i ]規定SEI訊息中規定之第i矩形區域之右下單元之水平座標。其中定義rns_rect_region_bottom_right_x[ i ]之單元係由rns_region_size_type_idc語法元素規定。rns_rect_region_bottom_right_y [ i ]規定SEI訊息中規定之第i矩形區域之右下單元之垂直座標。其中定義rns_rect_region_bottom_right_y[ i ]之單元係由rns_region_size_type_idc語法元素規定。num_seis_in_rns_minus1 加1規定SEI訊息中規定之SEI訊息之數目。num_seis_in_rns_minus1之值應在0至255範圍(包括0、255)中。regional_nesting_zero_bit 應等於0。rns_num_data_bytes [ i ]規定由緊在語法元素rns_num_data_bytes[ i ]之rns_data_byte[ i ] [ j ]之後的例項發信之資料之位元組之數目。rns_num_data_bytes[ i ]之值應在0至255範圍(包括0、255)中。rns_data_byte [ i ] [ j ]可具有任何值。除非由未在本說明書中之構件另有規定,否則解碼器應忽略rns_data_byte[ i ] [ j ]之值。 在替代方案中,可將以下約束中之一或多者新增至區域嵌套SEI訊息之語意: - 在tiles_enabled_flag之值針對與當前圖像相關聯PPS等於0時,具有等於2之rns_region_size_type_idc之值的區域嵌套SEI訊息不應與當前圖像相關聯。 在另一替代方案中,嵌套SEI訊息之持續性經更動控制,且替代地語法元素在區域嵌套SEI訊息中發信以指示區域嵌套SEI信息之持續性之結束及其內之內容。可針對區域之子集或針對嵌套SEI訊息之子集規定持續性之結束。 在另一替代方案中,語法元素rns_num_rect_regions之值範圍經規定成相依於語法元素rns_region_size_type_idc。 在另一替代方案中,發信第一語法元素以指示在區域嵌套SEI訊息中規定之區域之形狀,且可取決於第一語法元素之值而發信與矩形區域相關聯之語法元素。 在另一替代方案中,僅在rns_num_rect_regions大於0時才在存在語法元素rns_region_size_type_idc之前移動語法元素rns_num_rect_regions。實施例 2 在此實施例中,語法類似於實施例1之語法,惟rns_num_data_bytes及rns_data_byte語法元素在SEI訊息之迴圈外部發信除外。 rns_num_data_bytes 規定作為緊在語法元素rns_num_data_bytes之後的rns_data_byte發信之資料之位元組之數目。rns_num_data_bytes之值應在0至255範圍(包括0、255)中。 語法元素之剩餘部分之語意保持與實施例1中定義相同。 在一項替代方案中,語法元素rns_num_data_bytes經寫碼為ue(v)元素,或具有經規定在位元串流中或藉由在位元串流外部之構件規定之固定數目個位元。實施例 3 在此實施例中,語法結構類似於實施例1中之語法結構,其中可能不發信rns_data_byte,且發信與目標顯示器系統有關之資訊及與所嵌套之SEI訊息相關聯之應用。 等於1之rns_info_present_flag 規定明確地發信語法元素application_identifier、application_version、targeted_system_prim_chromaticity_x[ ]、targeted_system_prim_chromaticity_y[ ]、targeted_display_max_luminance及targeted_display_min_luminance。等於0之target_sytem_info_present_flag規定未明確地發信語法元素application_identifier、application_version、targeted_system_prim_chromaticity_x[ ]、targeted_system_prim_chromaticity_y[ ]、targeted_display_max_luminance及targeted_display_min_luminance,且規定此等語法元素之值未規定。application_identifier 為可用於識別SEI訊息之識別符。application_identifier為在0至255(包括0、255)之範圍中之整數。application_version 指示與SEI訊息相關聯之版本。application_version應在0至255(包括0、255)之範圍中。targeted_system_prim_chromaticity_x [ c ]及targeted_system_prim_chromaticity_y [ c ] (針對c在0至2 (包括0、2)之範圍中)用於規定以0.0001為單位之目標顯示器之原色。targeted_system_prim_chromaticity_x [ 4 ]及targeted_system_prim_chromaticity_y [ 4 ]用於規定以0.0001為單位之目標顯示器之白點色度。targeted_display_max_luminance 用於導出對應於SEI訊息之目標顯示器之最大照度。targeted_display_max_luminance之值係以0.01燭光/平方公尺為單位規定。targeted_display_min_luminance 用於導出對應於SEI訊息之目標顯示器之最小照度。targeted_display_min_luminance之值係以0.0001燭光/平方公尺為單位規定。 語法元素之剩餘部分之語意保持與實施例1中定義相同。 在一項替代方案中,可不發信語法元素rns_info_present_flag且可發信語法元素rns_num_data_bytes,且語法元素application_identifier、application_version、targeted_system_prim_chromaticity_x[ ]、targeted_system_prim_chromaticity_y[ ]、targeted_display_max_luminance,及targeted_display_min_luminance之存在可能相依於rns_num_data_bytes之值。 在另一替代方案中,可在如下含有SEI訊息之迴圈內部發信語法元素application_identifier、application_version、 targeted_system_prim_chromaticity_x[ ]、targeted_system_prim_ chromaticity_y[ ]、targeted_display_max_luminanc,and targeted_display_min_ luminance,在此狀況下,迴圈之第i反覆中之語法元素與第iSEI訊息相關聯。 實施例 4 在此實施例中,針對SEI訊息之迴圈之每一反覆發信區域清單之索引,且與反覆相關聯之索引用於規定由於反覆可用將SEI信息及任何後設資料發信至之區域。 wns_num_applicable_regions_minus1 [ i ]加1規定在SEI訊息中規定之區域集間在第i反覆中發信之SEI訊息及後設資料可應用於之區域之數目。wns_num_applicable_regions_minus1[ i ]之值應在0至wns_num_rect_regions - 1 (包括0、wns_num_rect_regions - 1)之範圍中。wns_applicable_region_idx [ i ][ j ]規定可應用於第i SEI訊息或語法結構之第j區域之索引。用於表示wns_applicable_region_idx[ i ][ j ]的位元之數目等於Ceil(Log2(wns_num_region_minus1 + 1))。實施例 5 此實施例類似於實施例4,其中針對每一可用區域,發信子集區域以指示對應SEI訊息及後設資料可應用於之可應用區域之子集。在此實施例中,SEI訊息中規定之區域已被稱作窗,且樣本已被稱作為像素。發信此子集區域之實例如下: 等於1之wns_pixel_selector_flag [ i ][ j ]規定像素選擇器經規定用於語法元素集之第i SEI訊息之第j可應用窗。等於0之wns_pixel_selector_flag[ i ][ j ]規定像素選擇器未規定英語語法元素之第i SEI訊息之第j可應用窗。wns_selector_domain_id [ i ][ j ]規定像素選擇器經定義用於語法元素集之第i SEI訊息之第j可用窗之域。wns_selector_domain_id[ i ][ j ]之值應在0至255範圍(包括0、255)中。 等於0之wns_selector_domain_id[ i ][ j ]規定像素選擇器經定義於空間域且像素選擇器範圍經規定在像素域中。等於1之wns_selector_domain_id[ i ][ j ]規定像素選擇器經定義在YCbCr域中。 可使用wns_selector_domain_id[ i ][ j ]之自32至63及自128至255之值,如由應用程式所判定。自3至31且自64至127之wns_selector_domain_id[ i ][ j ]之值經保留供由ITU-T | ISO/IEC未來使用。經歷在3至31 (包括3、31)之範圍中或在64至127 (包括64、127)範圍中之wns_selector_domain_id[ i ][ j ]之值的解碼器應忽略該值。wns_selector_num_comps_minus1 [ i ][ j ]加1規定針對語法元素集之第i SEI訊息之第j可應用窗定義之範圍說明符之數目。wns_selector_num_comps_minus1[ i ][ j ]之值應在0至2(包括0、2)之範圍中wns_selector_range_idc [ i ][ j ][ k ]規定用以導出像素選擇器之wns_selector_range_val[ ][ ][ ][ ]之解釋。wns_selector_range_idc[ i ][ j ][ k ]之值應在0至15(包括0、15)之範圍中 陣列NumValsSelectorRange[ i ][ j ][ k ]之值經如下導出: wns_selector_range_val [ i ][ j ][ k ] [ m ] (針對m在0至NumValsSelectorRange[ i ][ j ][ k ] - 1 (包括0、NumValsSelectorRange[ i ][ j ][ k ] - 1)範圍中)用於導出對應於第j可應用窗之像素選擇器。 等於1之wns_selector_range_outside_flag [ i ][ j ][ k ]規定由用於第j可應用窗之第k像素選擇器指示之可應用區域在由第k像素選擇器規定之區域外部。等於0之wns_selector_range_outside_flag[ i ][ j ][ k ]規定由用於第j可應用窗之第k像素選擇器指示之可應用區域在由第k像素選擇器規定之區域內。實施例 6 此實施例類似於實施例1,其中針對每一可應用於區域,基於偏移規定區域邊界。 rns_region_size_type_idc 規定在SEI訊息中規定區域之邊界的單位。當rns_region_size_type_idc等於0時,語法元素rns_region_left_offset[ ]、rns_region_top_offset[ ]、rns_region_right_offset[ ],及rns_region_bottom_offset[ ]以樣本為單位。當rns_region_size_type_idc等於1時,語法元素rns_region_left_offset[ ]、rns_region_top_offset[ ]、rns_region_right_offset[ ],及rns_region_bottom_offset[ ]以CTU為單位。當rns_region_size_type_idc等於2時,語法元素rns_region_left_offset[ ]、rns_region_top_offset[ ]、rns_region_right_offset[ ],及rns_region_bottom_offset[ ]以影像塊為單位規定。rns_rect_region_left_offset [ i ]規定第i矩形區域之左上樣本自SEI訊息中規定之左圖像邊界的水平偏移。其中rns_rect_region_left_offset[ i ]之單元係由rns_region_size_type_idc語法元素規定。rns_rect_region_top_offset [ i ]規定第i矩形區域之左上單元自SEI訊息中規定之頂部圖像邊界的垂直偏移。其中rns_rect_region_top_offset[ i ]之單元係由rns_region_size_type_idc語法元素規定。rns_rect_region_right_offset [ i ]規定第i矩形區域之右下單元自SEI訊息中規定之右圖像邊界的水平偏移。其中rns_rect_region_right_offset[ i ]之單元係由rns_region_size_type_idc語法元素規定。rns_rect_region_bottom_offset [ i ]規定第i矩形區域之右下單元自SEI訊息中規定之下部圖像邊界的垂直偏移。其中rns_rect_region_bottom_offset[ i ]之單元係由rns_region_size_type_idc語法元素規定。 在rns_region_size_type_idc等於0時,第i矩形區域經定義為具有自rns_region_left_offset[ i ]開始至pic_width_in_luma_samples - rns_region_right_offset[ i ] + 1之水平座標,及自rns_region_top_offset[ i ]至pic_height_in_luma_samples - rns_region_bottom_offset[ i ] + 1之垂直座標的區域。 在rns_region_size_type_idc等於1時,第i矩形區域經定義為具有自CtbSizeY * rns_region_left_offset[ i ]開始至CtbSizeY * (PicWidthInCtbsY - rns_region_right_offset[ i ] + 1) - 1之水平座標,及自CtbSizeY * rns_region_top_offset[ i ]至CtbSizeY * (PicHeightInCtbsY - rns_region_bottom_offset[ i ] + 1) - 1之垂直座標的區域。 在rns_region_size_type_idc等於2時,第i矩形區域經定義為具有自columnPosStartInLumaSamples[rns_region_left_offset[ i ] ]開始至columnPosStartInLumaSamples[num_tile_columns_minus1 - rns_region_right_offset[ i ] + 1 ] - 1之水平座標,及自rowPosStartInLumaSamples[ rns_region_top_offset[ i ] ]至rowPosStartInLumaSamples[ num_tile_rows_minus1 - rns_region_bottom_offset[ i ] + 1 ] - 1之垂直座標的區域,其中columnPosStartInLumaSamples[ j ] (針對j在0至num_tile_columns_minus1 + 1 (包括0、num_tile_columns_minus1 + 1)範圍中),及rowPosStartInLumaSamples[ k ] (針對k在範圍0至num_tile_rows_minus1 + 1 (包括0、num_tile_rows_minus1 + 1)範圍中)經如下導出: columnPosStartInLumaSamples[ 0 ] = ColumnWidthInLumaSamples[ 0 ] rowPosStartInLumaSamples[ 0 ] = RowHeightInLumaSamples[ 0 ] for( j = 1; j <= num_tile_columns_minus1; j++ ) columnPosStartInLumaSamples[ j ] = columnPosStartInLumaSamples[ j - 1 ] + ColumnWidthInLumaSamples[ j ] for( k = 1; k <= num_tile_rows_minus1; k++ ) rowPosStartInLumaSamples[ k ] = rowPosStartInLumaSamples[ k - 1 ] +RowHeightInLumaSamples[ k ] 在一些替代方案中,以樣本位置之倍數為單位發信語法元素。此倍數可為固定(例如,可以兩個樣本位置為單位規定偏移)或基於位元串流中之其他語法元素或由其他構件規定。在一些替代方案中,亦可發信負偏移值且該等偏移值可經寫碼以允許正或負值。 在一些替代方案中,可不發信語法元素中之一或多者。在未發信時,值可被推斷成預設值且與預設值相關聯之語意可應用。舉例而言,在一些替代方案中,可不發信語法元素rns_region_size_type_idc且用於規定區域之邊界之單元經設定成樣本位置(例如,亮度樣本位置)。針對上文替代方案或實例所描述之方法中之一些可不僅應用於實施例中所描述之語意,但亦可應用於用於描述樣本位置之語法元素之其他值。 在一些替代方案中,可使用固定數目個位元發信語法元素中之一或多者,且在其他替代方案中,可使用可變數目個位元發信一或多個語法元素。舉例而言,在此實施例中,可使用固定數目個位元(諸如8個位元)發信語法元素rns_region_size_type_idc、 rns_num_rect_regions,及num_seis_in_rns_minus1中之一或多者,或可使用可變數目個位元(例如,使用指數哥倫布碼)來發信語法元素rns_region_left_offset[ ]、rns_region_top_offset[ ]、 rns_region_right_offset[ ],及rns_region_bottom_offset[ ]中之一或多者。在一個替代方案中,使用固定數目個位元(可為8的倍數)發信區域嵌套SEI訊息中之所有語法元素,且可不發信由regional_nesting_zero_bit指示之位元組對準位元。在一些替代方案中,可使用固定數目個位元發信僅未包括在嵌套SEI訊息內之區域嵌套SEI訊息中之彼等語法元素,且可使用固定數目或可變數目個位元(例如,使用指數哥倫布碼)來發信嵌套SEI訊息內部之語法元素。用於表示語法元素之位元之數目可為固定值或可在位元串流中或藉由其他構件發信。實施例 7 在此實施例中,語法及語意類似於先前實施例,且新增約束以使得充分定義SEI在各種區域上之應用。 清單listOfRegionNestableSEIMessages包括以下類型之SEI訊息: - 具有tone_map_id之特定值之色調映射資訊SEI訊息 - 具有knee_function_id之特定值之拐點功能資訊SEI訊息 - 具有color_remap_id之特定值之色彩重新映射資訊SEI訊息 - 膠卷粒紋特性SEI訊息 - 後濾波器提示SEI訊息 - 色度重新取樣濾波器提示SEI訊息 當listOfRegionNestableSEIMessages中之特定類型之SEI訊息存在於一個區域嵌套SEI訊息中且應用於當前圖像之區域清單listA且listOfRegionNestableSEIMessages中之同一類型之另一SEI訊息存在於區域嵌套SEI訊息中且應用於當前圖像中的區域之清單listB,位元串流一致性之要求為針對藉由自listA選擇一者且自listB選擇另一者形成之任何對或區域,兩個區域之rns_rect_region_id[ ]之值不應為相同的直至兩個區域為完全相同的且兩個SEI訊息為完全相同的。 在一些實例中,不允許一個區域之rns_rect_region_id[ ]之值等於同一區域嵌套(RN)SEI訊息中定義之任何其他區域之rns_rect_region_id[ ]。在一些實例中,允許RN SEI訊息中之任何兩個區域之rns_rect_region_id[ ]之值相同,只要屬於listOfRegionNestableSEIMessages之同一類型之兩個SEI信息(一個SEI應用於一個區域且另一SEI應用於另一區域)皆不應用於同一圖像。 在一些實例中,listOfRegionNestableSEIMessages亦包括使用者資料暫存SEI訊息及使用者資料未暫存SEI訊息中之一者或任一者。 本文中所描述之與區域嵌套訊息有關之技術可使用經壓縮視訊或使用未經壓縮視訊圖框(在壓縮之前或之後)實施。實例性視訊編碼及解碼系統包含源裝置,所述源裝置提供經編碼視頻數據以稍後由目的地裝置進行解碼。特定而言,源裝置經由電腦可讀媒體將視訊資料提供至目的地裝置。源裝置及目的地裝置可包括廣泛範圍之裝置中之任一者,包括桌上型電腦、筆記型(即,膝上型)電腦、平板電腦、機上盒、電話手機(例如,所謂「智慧型」電話)、所謂「智慧型」板、電視機、攝影機、顯示裝置、數位媒體播放器、視訊遊戲主機、視訊串流裝置,或其類似者。在一些狀況下,源裝置及目的地裝置可經配備以供無線通信。 目的地裝置可接收經編碼視訊資料以經由電腦可讀媒體進行解碼。電腦可讀媒體可包含能夠將經編碼視訊資料自源裝置移動至目的地裝置之任何類型之媒體或裝置。在一個實例中,電腦可讀媒體可包含通信媒體以使得源裝置能夠即時地將經編碼視訊資料直接傳輸至目的地裝置。可根據通信標準(例如,無線通信協定)來調變經編碼視訊資料,並將其傳輸至目的地裝置。通信媒體可包含任何無線或有線通信媒體,諸如,射頻(RF)頻譜或一或多個物理傳輸線。通信媒體可形成基於封包之網路之部分,諸如區域網路、廣域網路或諸如網際網路之全球網路。通信媒體可包含路由器、交換機、基地台或可用於促進從源裝置到目的地裝置之通信之任何其他設備。 在一些實例中,可將編碼資料自輸出介面輸出至儲存裝置。類似地,可藉由輸入介面自儲存裝置存取編碼資料。儲存裝置可包含各種分佈式或本地存取資料儲存媒體中之任何者,諸如硬碟機、藍光光碟、DVD、CD-ROM、快閃記憶體、揮發性或非揮發性儲存器或任何其他適於儲存經編碼視訊資料之數位儲存媒體。在又一實例中,儲存裝置可對應於檔案伺服器或可儲存由源裝置產生之經編碼視訊之另一中間儲存裝置。目的地裝置可經由串流處理或下載自儲存裝置存取所儲存視訊資料。檔案伺服器可為能夠儲存經編碼視訊資料且將彼經編碼視訊資料傳輸至目的地裝置之任何類型之伺服器。實例性檔案伺服器包括網頁伺服器(例如,用於網站)、FTP伺服器、網路附加儲存(NAS)裝置或本地磁碟機。目的地裝置可經由任何標準資料連接(包括網際網路連接)來存取經編碼視訊資料。此可包含無線頻道(例如,Wi-Fi連接)、有線連接(例如,DSL、纜線數據機等等),或適於存取儲存於檔案伺服器上之經編碼視訊資料之兩者之組合。來自儲存裝置之經編碼視訊資料之傳輸可為串流式傳輸、下載傳輸或其組合。 本發明之技術未必限於無線應用或設定。該等技術可應用於支持各種多媒體應用中之任何者之視訊編碼,諸如無線電視廣播、有線電視傳輸、衛星電視傳輸、網際網路串流式視訊傳輸,諸如經由HTTP之動態自適應串流化處理(DASH)、經編碼至資料儲存媒體上之數位視訊、對儲存於資料儲存媒體上之數位視訊之解碼或其他應用。在一些實例中,系統可經組態以支持單向或雙向視訊傳輸以支持例如視訊串流化處理、視訊播放、視訊廣播及/或視訊電話之應用。 在一項實例中,源裝置包括視訊源、視訊編碼器及輸出介面。目的地裝置可包含輸入介面、視訊解碼器及顯示裝置。源裝置之視訊編碼器可經組態以應用本文中所揭示之技術。在其他實例中,源裝置及目的地裝置可包括其他組件或配置。舉例而言,源裝置可自外部視訊源(諸如,外部攝影機)接收視訊資料。同樣地,目的地裝置可與外部顯示裝置介接,而非包括整合式顯示裝置。 上述實例系統僅為一項實例。用於並行處理視訊資料之技術可由任何數位視訊編碼及/或解碼裝置執行。儘管本發明之技術通常由視訊編碼裝置執行,但技術亦可由視訊編碼器/解碼器(通常稱作為「CODEC」)執行。此外,本發明之技術亦可由視訊預處理器執行。源裝置及目的地裝置僅為其中源裝置產生經編碼視訊資料以供傳輸至目的地裝置之此等編碼裝置之實例。在一些實例中,源裝置及目的地裝置可以基本上對稱方式操作使得裝置中之每一者包括視訊編碼及解碼組件。因此,實例性系統可支援視訊裝置之間的單向或雙向視訊傳輸,例如,用於視訊串流化、視訊播放、視訊廣播或視訊電話。 視訊源可包括視訊俘獲裝置,諸如視訊攝影機、含有先前所俘獲視訊之視訊封存,及/或用以自視訊內容提供器接收視訊之視訊饋送介面。作為又一替代方案,視訊源可產生基於電腦圖形資料作為源視訊,或直播視訊、經封存視訊及電腦-產生視訊之組合。在一些狀況下,若視訊源為視訊攝影機,則源裝置及目的地裝置可形成所謂攝影機電話或視訊電話。然而,如上文所提及,本發明中所描述之技術通常可應用於視訊解碼,且可應用於無線及/或有線應用。在每一狀況下,所俘獲、預俘獲或電腦產生視訊可由視訊編碼器進行編碼。可接著由輸出介面將經編碼視訊資訊輸出至電腦可讀媒體上。 如所述,電腦可讀媒體可包括瞬時性媒體,諸如無線廣播或有線網路傳輸;或儲存媒體(即,非暫時性儲存媒體),諸如,硬碟機、快閃磁碟機、光碟、數位視訊磁碟、藍光光碟,或其他電腦可讀媒體。在一些實例中,網路伺服器(未展示)可自源裝置接收經編碼視訊資料且將經編碼視訊資料提供至目的地裝置,例如,經由網路傳輸。類似地,媒體生產設施(諸如,光碟衝壓設施)之計算裝置可自源裝置接收經編碼視訊資料且產生含有經編碼視訊資料之光碟。因此,在各種實例中,電腦可讀媒體可被理解為包括各種形式之一或多個電腦可讀媒體。 目的地裝置之輸入介面自電腦可讀媒體接收資訊。電腦可讀媒體之資訊可包括由視訊編碼器定義之語法資訊,該語法資訊亦由視訊解碼器使用,其包括描述區塊及其他經編碼單元(例如,圖像組(GOP))之特性及/或處理之語法元素。顯示裝置向使用者顯示經解碼視訊資料,且可包含各種顯示裝置中之任一者,諸如,陰極射線管(CRT)、液晶顯示器(LCD)、電漿顯示器、有機發光二極體(OLED)顯示器或另一類型之顯示裝置。已描述本發明之各種實施例。 分別在圖8及圖9中展示編碼裝置104及解碼裝置112之具體細節。圖8為說明可實施本發明中所描述之技術中之一或多者之實例性編碼裝置104的方塊圖。舉例而言,編碼裝置104可產生本文中所描述之語法結構(例如,VPS、SPS、PPS或其他語法元素之語法結構)。編碼裝置104可對視訊圖塊內之視訊區塊執行框內預測及框間預測寫碼。如先前所描述,框內寫碼至少部分地依賴於空間預測以減少或移除給定視訊圖框或圖像內之空間冗餘。框間寫碼至少部分地依賴於時間預測以減少或移除視訊序列之鄰近或周圍框內之時間冗餘。框內模式(I模式)可指數個基於空間之壓縮模式中之任一者。框間模式(例如,單向預測(P模式)或雙向預測(B模式))可係指數個基於時間之壓縮模式中之任一者。 編碼裝置104包括分割單元35、預測處理單元41、濾波器單元63、圖像記憶體64、求和器50、變換處理單元52、量化單元54及熵編碼單元56。預測處理單元41包括運動估計單元42、運動補償單元44及框內預測處理單元46。為視訊區塊重新構造,編碼裝置104亦包括逆量化單元58、逆變換處理單元60及求和器62。濾波器單元63意欲表示一或多個環路濾波器,例如,去塊濾波器、自適應環路濾波器(ALF),及樣本自適應偏移(SAO)濾波器。儘管濾波器單元63在圖8中經展示為在環路濾波器中,但在其他配置中,濾波器單元63可經實施為後環路濾波器。後處理裝置57可對由編碼裝置104產生之經編碼視訊資料執行額外處理。本發明之技術可在一些例項中由編碼裝置104實施。然而,在其他情況中,可藉由後處理裝置57實施本發明之技術中之一或多者。 如圖8中所展示,編碼裝置104接收視訊資料,且分割單元35將資料分割成視訊區塊。分割亦可包括分割成圖塊、圖塊段、影像塊或其他較大單元,以及視訊區塊分割,例如根據LCU及CU的四元樹結構。編碼裝置104通常說明待編碼之視訊圖塊內之編碼視訊區塊之組件。可將圖塊劃分成多個視訊區塊(且可能劃分成稱作影像塊之數組視訊區塊)。預測處理單元41可基於誤差結果(例如,編碼速率及失真水平,或其類似者)針對當前視訊區塊選擇複數個可能寫碼模式中之一者,諸如複數個框內預測寫碼模式中之一者或複數個框間預測寫碼模式中之一者。預測處理單元41可將所得框內或框間經編碼區塊提供至求和器50以產生殘餘區塊資料,以及至求和器62以重構經編碼區塊供用作參考圖像。 預測處理單元41內之框內預測處理單元46可相對於與待編碼的當前區塊相同的圖框或圖塊中之一或多個相鄰區塊執行當前視訊區塊之框內預測寫碼以提供空間壓縮。預測處理單元41內之運動估計單元42及運動補償單元44相對於一或多個參考圖像中之一或多個預測區塊執行對當前視訊區塊之框間預測寫碼以提供時間壓縮。 運動估計單元42可經組態以根據視訊序列之預定圖案而判定視訊圖塊之框間預測模式。預定圖案可將序列中之視訊圖塊指定為P圖塊、B圖塊或GPB圖塊。運動估計單元42及運動補償單元44可高度整合,但出於概念目的予以單獨說明。由運動估計單元42執行之運動估計為產生運動向量之程序,該等運動向量估計視訊區塊之運動。舉例而言,運動向量可指示當前視訊圖框或圖像內之視訊區塊之預測單元(PU)相對於參考圖像內預測區塊之位移。 預測區塊為經發現在像素差方面接近匹配待寫碼之視訊區塊之PU,該像素差可藉由以下各項來判定:絕對差值和(SAD)、平方差值和(SSD)或其他差值度量。在一些實例中,編碼裝置104可計算儲存在圖像記憶體64中之參考圖像之分段整數(sub-integer)像素位置之值。舉例而言,編碼裝置104可內插參考圖像之四分之一像素位置、八分之一像素位置或其他分數像素位置的值。因此,運動估計單元42可相對於全像素位置及分數像素位置執行運動搜索且輸出具有分數像素精度之運動向量。 運動估計單元42藉由比較框間寫碼圖塊中之視訊區塊之PU的位置與參考圖像之預測區塊的位置來計算該PU之運動向量。參考圖像可選自第一參考圖像清單(清單0)或第二參考圖像清單(清單1),該清單中之每一者識別儲存在圖像記憶體64中之一或多個參考圖像。運動估計單元42將所計算運動向量發送至熵編碼單元56及運動補償單元44。 由運動補償單元44執行之運動補償可涉及:基於由運動估計判定之運動向量而提取或產生預測區塊,可能對子像素精度執行插值。在接收到關於當前視訊區塊之PU之運動向量時,運動補償單元44可將運動向量指向之預測區塊定位於參考圖像清單中。編碼裝置104藉由將預測區塊之像素值自所寫碼之當前視訊區塊之像素值減去從而形成像素差值來形成殘餘視訊區塊。像素差值形成區塊之殘餘資料,且可包括明度及色度差分量兩者。求和器50表示執行此減法運算之(多個)組件。運動補償單元44亦可產生與在解碼視訊圖塊之視訊區塊中供解碼裝置112使用之視訊區塊及視訊圖塊相關聯之語法元素。 框內預測處理單元46可框內預測當前區塊,作為由運動估計單元42及運動補償單元44執行之框間預測之替代方案,如上文所描述。特定而言,框內預測處理單元46可判定框內預測模式以用於對當前區塊進行編碼。在一些實例中,框內預測處理單元46可(例如)在單獨編碼步驟期間使用各種框內預測模式來對當前區塊進行編碼,且框內預測處理單元46可自所測試模式選擇適當框內預測模式來使用。舉例而言,框內預測處理單元46可針對各種所測試框內預測模式使用速率失真分析來計算速率失真值,且在所測試模式中可選擇具有最佳速率失真特性之框內預測模式。速率失真分析通常判定經編碼區塊與原始未經編碼區塊(其經編碼以產生經編碼區塊)之間的失真(或錯誤)量,以及用於產生經編碼區塊之位元率(即,位元之數目)。框內預測處理單元46可依據各種經編碼區塊之失真及速率來計算比率以判定哪一框內預測模式展現區塊之最佳速率失真值。 在任何狀況下,在針對區塊選擇框內預測模式之後,框內預測處理單元46可將指示區塊之所選擇框內預測模式之資訊提供至熵編碼單元56。熵編碼單元56可對指示所選擇框內預測模式之資訊進行編碼。編碼裝置104可在所傳輸位元串流組態資料中包括各種區塊之編碼上下文之定義以及最可能框內預測模式之指示、框內預測模式指數表及用於上下文中之每一者之經修改的框內預測模式指數表。位元串流組態資料可包括複數個框內預測模式指數表及複數個經修改之框內預測模式指數表(還稱作碼字映射表)。 在預測處理單元41經由框間預測或框內預測產生關於當前視訊區塊之預測區塊之後,編碼裝置104藉由將預測區塊自當前視訊區塊減去來形成殘餘視訊區塊。殘餘區塊中之殘餘視訊資料可被包括在一或多個TU中且應用於變換處理單元52。變換處理單元52使用變換(諸如,離散餘弦變換(DCT)或概念上類似變換)將殘餘視訊資料變換成殘餘變換係數。變換處理單元52可將來自像素域之殘餘視訊資料轉換成變換域,諸如,頻域。 變換處理單元52可將所得變換係數發送至量化單元54。量化單元54量化變換係數以進一步減小位元率。量化程序可減少與係數中之一些或全部相關聯之位元深度。量化程度可藉由調整量化參數來修改。在一些實例中,量化單元54可接著對包括經量化變換係數之矩陣執行掃描。替代地,熵編碼單元56可執行掃描。 在量化之後,熵編碼單元56對經量化變換係數進行熵編碼。舉例而言,熵編碼單元56可執行上下文自適應可變長度寫碼(CAVLC)、上下文自適應二進位演算法寫碼(CABAC)、基於語法之上下文自適應二進位演算法寫碼(SBAC)、概率區間分割熵(PIPE)寫碼或另一熵編碼技術。在由熵編碼單元56進行之熵編碼之後,可將經編碼位元串流傳輸至解碼裝置112或封存以供稍後由解碼裝置112進行傳輸或擷取。熵編碼單元56亦可對用於正寫碼之當前視訊圖塊之運動向量及其他語法元素進行熵編碼。 逆量化單元58及逆變換處理單元60分別應用逆量化及逆變換以重構像素域中之殘餘區塊以供稍後用作參考圖像之參考區塊。運動補償單元44可藉由將殘餘區塊新增至參考圖像清單內之參考清單中之一者之預測區塊來計算參考區塊。運動補償單元44亦可將一或多個內插濾波器應用於經重構殘餘區塊以計算供用於運動估計之子整數像素值。求和器62將經重構之殘餘區塊加入至由運動補償單元44產生之運動補償預測區塊以產生參考區塊以儲存在圖像記憶體64中。參考區塊可由運動估計單元42及運動補償單元44用作參考區塊以對隨後視訊圖框或圖像中之區塊進行框間預測。 以此方式,圖8之編碼裝置104表示經組態以產生編碼視訊位元串流之語法之視訊編碼器之實例。編碼裝置104可(例如)產生關於區域嵌套SEI訊息之語法,如上文所描述。編碼裝置104可執行本文中所描述之技術中之任何者,包括上文關於圖6所描述之程序。已描述已關於編碼裝置104之本發明之技術,但如上文所提及,本發明之技術中之一些技術亦可由後處理裝置57實施。 圖9為說明實例性解碼裝置之方塊圖。解碼裝置112包括熵解碼單元80、預測處理單元81、逆量化單元86、逆變換處理單元88、求和器90、濾波器單元91及圖像記憶體92。預測處理單元81包括運動補償單元82及框內預測處理單元84。解碼裝置112可在一些實例中,執行通常與自圖8關於編碼裝置104所描述之編碼步驟互逆之解碼步驟。解碼裝置112可執行本文中所描述之技術中之任何者,包括上文關於圖7所描述之程序。 在解碼程序期間,解碼裝置112接收表示經編碼視訊圖塊之視訊區塊之經編碼視訊位元串流及由編碼裝置104發送之相關聯語法元素。在一些實施例中,解碼裝置112可接收來自編碼裝置104之經編碼視訊位元串流。在一些實施例中,解碼裝置112可自網路實體79 (諸如,伺服器、媒體感知網路元件(MANE)、視訊編輯器/拼接器或經組態以實施上文所描述之技術中之一或多者之其他此類裝置)接收經編碼視訊位元串流。網路實體79可或可不包括編碼裝置104。本發明中所描述之技術中之一些可在網路實體79將經編碼視訊位元串流傳輸至解碼裝置112之前由網路實體79實施。在一些視訊解碼系統中,網路實體79及解碼裝置112可為單獨裝置之部分,而在其他情況中,關於網路實體79所描述之功能性可由包含解碼裝置112之相同裝置執行。 解碼裝置112之熵解碼單元80對位元串流進行熵解碼以產生經量化係數、運動向量及其他語法元素。熵解碼單元80將運動向量及其他語法元素轉發至預測處理單元81。解碼裝置112可接收視訊圖塊等級及/或視訊區塊等級之語法元素。熵解碼單元80可處理及剖析一或多個參數集中之固定長度語法元素及可變長度語法元素,例如,VPS、SPS及PPS。 在視訊圖塊經寫碼為框內寫碼(I)圖塊時,預測處理單元81之框內預測處理單元84可基於來自當前圖框或圖像之先前經解碼區塊之所發信框內預測模式及資料來產生關於當前視訊圖塊之視訊區塊之預測資料。當視訊圖框經寫碼為框間寫碼(即,B、P或GPB)圖塊時,預測處理單元81之運動補償單元82基於自熵解碼單元80接收之運動向量及其他語法元素來產生當前時序圖塊之視訊區塊之預測區塊。可由參考圖像清單內之參考圖像中之一者產生預測區塊。解碼裝置112可基於圖像記憶體92中所儲存之參考圖像來使用預設構造技術構造參考圖框清單(清單0及清單1)。 運動補償單元82藉由剖析運動向量及其他語法元素來判定當前視訊圖塊之視訊區塊之預測資訊,且使用預測資訊來產生所解碼之當前視訊區塊之預測區塊。舉例而言,運動補償單元82可使用參數集中之一或多個語法元素來判定用於對視訊圖塊之視訊區塊進行寫碼之預測模式(例如,框內或框間預測)、框間預測圖塊類型(例如,B圖塊、P圖塊或GPB圖塊)、關於圖塊之一或多個參考圖像清單之構造資訊、關於圖塊之每一框間編碼視訊區塊之運動向量、關於圖塊之每一框間編碼視訊區塊之框間預測狀態及用以對當前視訊圖塊中之視訊區塊進行解碼之其他資訊。 運動補償單元82亦可基於內插濾波器執行內插。運動補償單元82可使用如在對視訊區塊進行編碼期間由編碼裝置104所使用之內插濾波器來計算參考區塊之分段整數像素的內插值。在此狀況下,運動補償單元82可依據所接收語法元素來判定由編碼裝置104所使用之內插濾波器且使用內插濾波器來產生預測區塊。 逆量化單元86使在位元串流中提供且由熵解碼單元80解碼之經量化變換係數逆量化,或解量化。逆量化程序可包括使用視訊圖塊中之每一視訊區塊之由編碼裝置104計算之量化參數來判定量化之程度及同樣地應該應用之逆量化之程度。逆變換處理單元88將逆變換(例如,逆DCT或其他合適逆變換)、逆整數變換或概念上類似逆變換程序應用於變換係數以便在像素域中產生殘餘區塊。 在運動補償單元82基於運動向量及其他語法元素來產生當前視訊區塊之預測區塊之後,解碼裝置112藉由對來自逆變換處理單元88之殘餘區塊與由運動補償單元82產生之對應預測區塊求和來形成經解碼之視訊區塊。求和器90表示執行此加法運算之(多個)組件。若期望,則亦可使用其他環路濾波器(在編碼環路中或在編碼環路之後)來平滑像素過渡,或以其他方式改進視訊品質。濾波器單元91意欲表示一或多個環路濾波器,例如,去塊濾波器、自適應環路濾波器(ALF),及樣本自適應偏移(SAO)濾波器。儘管濾波器單元91在圖9中經展示為在環路濾波器中,但在其他配置中,濾波器單元91可經實施為後環路濾波器。接著將給定圖框或圖像中之經解碼視訊區塊儲存在參考圖像記憶體92中,該參考圖像記憶體儲存用於後續運動補償之參考圖像。圖像記憶體92還儲存經解碼視訊供稍後在顯示裝置(例如,圖1中所展示之視訊目的地裝置122)上呈現。 在前述描述中,參考其具體實施例描述應用之方面,但熟習此項技術者將認識到本發明並不限於其。因此,雖然本文中已詳細地描述應用之說明性實施例,但應理解發明性概念可另外以不同方式體現及使用,且所附申請專利範圍意欲被解釋為包括此等變化,除由先前技術限制。上文所描述本發明之各種特徵及態樣可單獨地或共同地使用。此外,實施例可用於除本文中所描述之彼等外之任何數目個環境及應用而不脫離本說明書之較廣泛精神及範疇。因此,說明書及圖式應視為說明性而非限制性。出於說明之目的,方法是以特定次序進行描述。應瞭解,在替代實施例中,方法可以不同於所描述之次序的次序來執行。 在組件經描述為「經組態以」執行某些操作之情況下,可(例如)藉由設計電子電路或其他硬體以執行操作、藉由程式化可程式化電子電路(例如,微處理器或其他合適電子電路)以執行操作或其任何組合來完成此組態。 結合本文中所揭示之實施例描述之各種說明性邏輯區塊、模組、電路及演算法步驟可實施為電子硬體、電腦軟體、韌體或其組合。為清楚地說明硬體及軟體之此可互換性,上文通常已就其功能性態樣描述了各種說明性組件、區塊、模組、電路及步驟。此功能性是實施為硬體抑或軟體取決於強加於整個系統之特定應用及設計約束。雖然熟習此項技術者可針對每一特定應用以變化方式實施所描述功能性,但不應將此等實施決策解釋為導致對本發明之範疇的脫離。 本文中所描述之技術還可以電子硬體、電腦軟體、韌體或其任一組合來實施。此等技術可以各種裝置中之任一者實施,例如通用電腦、無線通信裝置收集,或具有多個用途(包含無線通信裝置收集及其他裝置中之應用)的積體電路裝置。經描述為模組或組件之任何特徵可一起實施於整合式邏輯裝置中或單獨地實施為離散但可整合邏輯裝置。若以軟體實施,則技術可至少部分地由包括程式碼之電腦可讀資料儲存媒體實現,該程式碼在被執行時執行上文所描述之方法中之一或多者。電腦可讀資料儲存媒體可形成可包括包裝材料之電腦程式產品之部分。電腦可讀媒體可包含記憶體或資料儲存媒體,諸如,隨機存取記憶體(RAM),諸如同步動態隨機存取記憶體(SDRAM)、唯讀記憶體(ROM)、非揮發性隨機存取記憶體(NVRAM)、電可抹除可程式化唯讀記憶體(EEPROM)、FLASH記憶體、磁性或光學資料儲存媒體,及其類似者。技術另外或替代地可至少部分地由電腦可讀通信媒體實現,該電腦可讀通信媒體攜載或傳遞呈可由電腦存取、讀取及/或執行之指令或資料結構形式之程式碼,諸如,經傳播信號或波。 程式碼可由處理器執行,該處理器可包括一或多個處理器,諸如一或多個數位信號處理器(DSP)、通用微處理器、專用積體電路(ASIC)、場可程式化邏輯陣列(FPGA)或其他等效積體或離散邏輯電路。此處理器可經組態以執行本發明中所描述之技術中之任何者。通用處理器可為微處理器,但在替代方案中,處理器可為任一常規處理器、控制器、微控制器或狀態機。亦可將處理器實施為計算裝置之組合,例如DSP與微處理器之組合、多個微處理器、結合DSP核心之一或多個微處理器或任一其他此類組態。因此,如本文中所使用之術語「處理器」可係指前述結構、前述結構之任何組合或適於實施本文中所描述之技術之任何其他結構或設備中之任一者。另外,在一些態樣中,本文中所描述之功能性可提供在經組態以用於編碼及解碼或併入於組合式視訊編碼解碼器(CODEC)中之專用軟體模組或硬體模組內。
35‧‧‧分割單元
41‧‧‧預測處理單元
42‧‧‧運動估計單元
44‧‧‧運動補償單元
46‧‧‧框內預測處理單元
50‧‧‧求和器
52‧‧‧變換處理單元
54‧‧‧量化單元
56‧‧‧熵編碼單元
57‧‧‧後處理裝置
58‧‧‧逆量化單元
60‧‧‧逆變換處理單元
62‧‧‧求和器
63‧‧‧濾波器單元
64‧‧‧圖像記憶體
79‧‧‧網路實體
80‧‧‧熵解碼單元
81‧‧‧預測處理單元
82‧‧‧運動補償單元
84‧‧‧框內預測處理單元
86‧‧‧逆量化單元
88‧‧‧逆變換處理單元
90‧‧‧求和器
91‧‧‧濾波器單元
92‧‧‧圖像記憶體
100‧‧‧系統
102‧‧‧視訊源
104‧‧‧編碼裝置
106‧‧‧編碼器引擎
108‧‧‧儲存器
110‧‧‧輸出
112‧‧‧解碼裝置
114‧‧‧輸入
116‧‧‧解碼器引擎
118‧‧‧儲存器
120‧‧‧通信鏈路
122‧‧‧視訊目的地裝置
200‧‧‧視訊位元串流
230‧‧‧圖像
231‧‧‧視訊參數集(VPS)
232‧‧‧序列參數集(SPS)
233‧‧‧圖像參數集(PPS)
234‧‧‧補充增強資訊(SEI)訊息
235‧‧‧補充增強資訊(SEI)訊息
236‧‧‧補充增強資訊(SEI)訊息
237‧‧‧圖塊
238‧‧‧圖塊
241‧‧‧區域1資料
242‧‧‧第一後設資料
243‧‧‧區域2資料
244‧‧‧第二後設資料
245‧‧‧第三後設資料
350‧‧‧區域嵌套SEI訊息
351‧‧‧區域資料
352‧‧‧第一嵌套補充增強資訊(SEI)訊息
353‧‧‧第二嵌套補充增強資訊(SEI)訊息
354‧‧‧區域1資料
355‧‧‧區域2資料
356‧‧‧區域N資料
357‧‧‧後設資料
358‧‧‧區域識別符(ID)
359‧‧‧後設資料
360‧‧‧區域識別符(ID)
400A‧‧‧圖像
402‧‧‧第一區域
404‧‧‧第二區域
570‧‧‧區域嵌套補充增強資訊(SEI)訊息
571‧‧‧區域資料
572‧‧‧嵌套補充增強資訊(SEI)訊息
573‧‧‧嵌套補充增強資訊(SEI)訊息
574‧‧‧區域1資料
575‧‧‧區域2資料
576‧‧‧區域N資料
577‧‧‧色彩重新映射資訊(CRI)後設資料
578‧‧‧後設資料
579‧‧‧區域1識別符
580‧‧‧區域2識別符
581‧‧‧區域3識別符
582‧‧‧後設資料
583‧‧‧後設資料
600‧‧‧程序
602‧‧‧區塊
604‧‧‧區塊
700‧‧‧程序
702‧‧‧區塊
704‧‧‧區塊
下文參考以下圖式圖來詳細描述本發明的說明性實施例: 圖1為根據一些實例說明編碼裝置及解碼裝置的實例的框圖。 圖2為根據一些實例說明具有多個補充增強資訊(SEI)訊息之視訊位元串流之實例的圖。 圖3為根據一些實施例說明區域嵌套SEI訊息之實例的圖。 圖4A為根據一些實例說明具有經優先化之區域之圖像之實例的圖。 圖4B為根據一些實例說明不具有經優先化之區域之圖像之實例的圖。 圖5為根據一些實例說明區域嵌套SEI訊息之另一實例的圖。 圖6根據一些實例說明編碼視訊資料之程序之實例的流程圖。 圖7根據一些實例說明解碼視訊資料之程序之實例的流程圖。 圖8為根據一些實施例說明實例性視訊編碼裝置的方塊圖。 圖9為根據一些實例說明實例性視訊解碼裝置的方塊圖。
350‧‧‧區域嵌套補充增強資訊(SEI)訊息
351‧‧‧區域資料
352‧‧‧第一嵌套補充增強資訊(SEI)訊息
353‧‧‧第二嵌套補充增強資訊(SEI)訊息
354‧‧‧區域1資料
355‧‧‧區域2資料
356‧‧‧區域N資料
357‧‧‧後設資料
358‧‧‧區域識別符(ID)
359‧‧‧後設資料
360‧‧‧區域識別符(ID)

Claims (70)

  1. 一種設備,其包含: 一記憶體,其經組態以儲存視訊資料;及 一處理器,其經組態以: 獲得該視訊資料;及 使用該視訊資料產生包括一區域嵌套訊息之一經編碼視訊位元串流,該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之一圖像之至少一第一區域的區域資料,其中該區域嵌套訊息之一第一嵌套訊息包括一第一資料集及指示該圖像之該第一區域與該第一資料集相關聯之一第一區域識別符。
  2. 如請求項1之設備,其中該區域嵌套訊息為一區域嵌套補充增強資訊(SEI)訊息,且其中該複數個嵌套訊息為嵌套SEI訊息。
  3. 如請求項1之設備,其中該第一資料集係用以基於該第一區域識別符對該第一區域執行一第一功能。
  4. 如請求項1之設備,其中該第一資料集基於該第一區域識別符規定該第一區域之一特性。
  5. 如請求項1之設備,其中定義該圖像之該第一區域之該區域資料被包括在該區域嵌套訊息中一次。
  6. 如請求項1之設備,其中該第一嵌套訊息進一步包括一第二資料集,其中該第二資料集與該第一區域識別符相關聯以指示該第一區域與該第二資料集相關聯。
  7. 如請求項1之設備,其中該區域嵌套訊息包括定義該圖像之複數個區域的複數個區域資料,且其中該第一嵌套訊息之該第一資料集與該圖像之該複數個區域中之多個區域相關聯。
  8. 如請求項7之設備,其中該第一嵌套訊息進一步包括一第二區域識別符,該第二區域識別符指示與該第一資料集相關聯之該圖像之該複數個區域中之一第二區域。
  9. 如請求項8之設備,其中該第一資料集可獨立地應用於該第一區域及該第二區域中之每一者。
  10. 如請求項1之設備,其中該區域嵌套訊息包括一第二嵌套訊息,該第二嵌套訊息包括一第二資料集及指示該第一區域與該第二資料集相關聯之該第一區域識別符。
  11. 如請求項1之設備,其中該區域嵌套訊息進一步包括該圖像之複數個區域之一數目。
  12. 如請求項1之設備,其中該區域資料定義該第一區域之一或多個邊界或定義含在該第一區域中之樣本。
  13. 如請求項1之設備,其中該區域資料定義該第一區域之一或多個邊界自該圖像之一或多個邊界之一或多個偏移。
  14. 如請求項1之設備,其中該區域資料將該第一區域定義為一矩形區域。
  15. 如請求項1之設備,其中當該圖像之一樣本在該圖像之兩個或多於兩個區域中時,可應用於該兩個或多於兩個區域中之一區域的一第一類型之一嵌套訊息可應用於該樣本,該區域在該兩個或多於兩個區域間具有一最大區域識別符值。
  16. 如請求項15之設備,其中可應用於該兩個或多於兩個區域中之另一區域的該第一類型之另一嵌套訊息不可應用於該樣本,該另一區域在該兩個或多於兩個區域間不具有該最大區域識別符值。
  17. 如請求項1之設備,其中該區域嵌套訊息進一步包括識別該區域嵌套訊息之一用途之一語法元素。
  18. 如請求項1之設備,其中該區域嵌套訊息進一步包括該區域嵌套訊息中之該複數個嵌套訊息之一數目。
  19. 如請求項1之設備,其中該複數個嵌套訊息之一嵌套訊息具有與在該嵌套訊息未被嵌套在該區域嵌套訊息中之情況下相同的一持續性。
  20. 如請求項1之設備,其中該區域嵌套訊息包括關於該第一嵌套訊息之一索引集,該索引集指示該第一資料集欲應用於之一或多個區域。
  21. 如請求項20之設備,其中該索引集包括至少該第一區域識別符。
  22. 如請求項1之設備,其中該設備包含具有用於俘獲圖像之一攝影機的一行動裝置。
  23. 一種解碼視訊資料之方法,該方法包含: 接收一視訊位元串流;及 自該視訊位元串流獲得一區域嵌套訊息,該區域嵌套訊息包括複數個嵌套訊息及定義該視訊位元串流之一圖像之至少一第一區域的區域資料,其中該區域嵌套訊息之一第一嵌套訊息包括一第一資料集及指示該圖像之該第一區域與該第一資料集相關聯之一第一區域識別符。
  24. 如請求項23之方法,其中使用該第一資料集來基於該第一區域識別符對該第一區域執行一第一功能。
  25. 如請求項24之方法,其進一步包含: 解碼該圖像;及 使用該第一資料集對該圖像之該第一區域執行該第一功能,其中該第一功能係基於該第一區域識別符對該第一區域執行。
  26. 如請求項23之方法,其中該第一資料集基於該第一區域識別符規定該第一區域之一特性。
  27. 如請求項23之方法,其中該區域嵌套訊息為一區域嵌套補充增強資訊(SEI)訊息,且其中該複數個嵌套訊息為嵌套SEI訊息。
  28. 如請求項23之方法,其中定義該圖像之該第一區域之區域資料被包括在該區域嵌套訊息中一次。
  29. 如請求項23之方法,其中該第一嵌套訊息進一步包括一第二資料集,其中該第二資料集與該第一區域識別符相關聯以指示該第一區域與該第二資料集相關聯。
  30. 如請求項23之方法,其中該區域嵌套訊息包括定義該圖像之複數個區域的複數個區域資料,且其中該第一嵌套訊息之該第一資料集與該圖像之該複數個區域中之多個區域相關聯。
  31. 如請求項30之方法,其中該第一嵌套訊息進一步包括一第二區域識別符,該第二區域識別符指示與該第一資料集相關聯之該圖像之該複數個區域中之一第二區域。
  32. 如請求項31之方法,其中該第一資料集可獨立地應用於該第一區域及該第二區域中之每一者。
  33. 如請求項23之方法,其中該區域嵌套訊息包括一第二嵌套訊息,該第二嵌套訊息包括一第二資料集及指示該第一區域與該第二資料集相關聯之該第一區域識別符。
  34. 如請求項23之方法,其中該區域嵌套訊息進一步包括該圖像之複數個區域之一數目。
  35. 如請求項23之方法,其中該區域資料定義該第一區域之一或多個邊界或定義含在該第一區域中之樣本。
  36. 如請求項23之方法,其中該區域資料定義該第一區域之一或多個邊界自該圖像之一或多個邊界之一或多個偏移。
  37. 如請求項23之方法,其中該區域資料將該第一區域定義為一矩形區域。
  38. 如請求項23之方法,其中當該圖像之一樣本在該圖像之兩個或多於兩個區域中時,可應用於該兩個或多於兩個區域中之一區域的一第一類型之一嵌套訊息可應用於該樣本,該區域在該兩個或多於兩個區域間具有一最大區域識別符值。
  39. 如請求項38之方法,其中可應用於該兩個或多於兩個區域中之另一區域的該第一類型之另一嵌套訊息不可應用於該樣本,該另一區域在該兩個或多於兩個區域間不具有該最大區域識別符值。
  40. 如請求項23之方法,其中該區域嵌套訊息進一步包括識別該區域嵌套訊息之一用途之一語法元素。
  41. 如請求項23之方法,其中該區域嵌套訊息進一步包括該區域嵌套訊息中之該複數個嵌套訊息之一數目。
  42. 如請求項23之方法,其中該複數個嵌套訊息之一嵌套訊息具有與在該嵌套訊息未被嵌套在該區域嵌套訊息中之情況下相同的一持續性。
  43. 如請求項23之方法,其中該區域嵌套訊息包括關於該第一嵌套訊息之一索引集,該索引集指示該第一資料集欲應用於之一或多個區域。
  44. 如請求項43之方法,其中該索引集包括至少該第一區域識別符。
  45. 一種設備,其包含: 一接收器,其經組態一接收一視訊位元串流; 一記憶體,其經組態以儲存該視訊位元串流之視訊資料;及 一處理器,其經組態以自該視訊位元串流獲得一區域嵌套訊息,該區域嵌套訊息包括複數個嵌套訊息及定義該視訊位元串流之一圖像之至少一第一區域的區域資料,其中該區域嵌套訊息之一第一嵌套訊息包括一第一資料集及指示該圖像之該第一區域與該第一資料集相關聯之一第一區域識別符。
  46. 如請求項45之設備,其中該第一資料集係用以基於該第一區域識別符對該第一區域執行一第一功能。
  47. 如請求項46之設備,其中該處理器經進一步組態以: 解碼該圖像;及 使用該第一資料集對該圖像之該第一區域執行該第一功能,其中該第一功能係基於該第一區域識別符對該第一區域執行。
  48. 如請求項45之設備,其中該第一資料集基於該第一區域識別符規定該第一區域之一特性。
  49. 如請求項45之設備,其中該區域嵌套訊息為一區域嵌套補充增強資訊(SEI)訊息,且其中該複數個嵌套訊息為嵌套SEI訊息。
  50. 如請求項45之設備,其中定義該圖像之該第一區域之區域資料被包括在該區域嵌套訊息中一次。
  51. 如請求項45之設備,其中該第一嵌套訊息進一步包括一第二資料集,其中該第二資料集與該第一區域識別符相關聯以指示第一區域與該第二資料集相關聯。
  52. 如請求項45之設備,其中該區域嵌套訊息包括定義該圖像之複數個區域的複數個區域資料,且其中該第一嵌套訊息之該第一資料集與該圖像之該複數個區域中之多個區域相關聯。
  53. 如請求項52之設備,其中該第一嵌套訊息進一步包括一第二區域識別符,該第二區域識別符指示與該第一資料集相關聯之該圖像之該複數個區域中之一第二區域。
  54. 如請求項53之設備,其中該第一資料集可獨立地應用於該第一區域及該第二區域中之每一者。
  55. 如請求項45之設備,其中該區域嵌套訊息包括一第二嵌套訊息,該第二嵌套訊息包括一第二資料集及指示該第一區域與該第二資料集相關聯之該第一區域識別符。
  56. 如請求項45之設備,其中該區域嵌套訊息進一步包括該圖像之複數個區域之一數目。
  57. 如請求項45之設備,其中該區域資料定義該第一區域之一或多個邊界或定義含在該第一區域中之樣本。
  58. 如請求項45之設備,其中該區域資料定義該第一區域之一或多個邊界自該圖像之一或多個邊界之一或多個偏移。
  59. 如請求項45之設備,其中該區域資料將該第一區域定義為一矩形區域。
  60. 如請求項45之設備,其中當該圖像之一樣本在該圖像之兩個或多於兩個區域中時,可應用於該兩個或多於兩個區域中之一區域的一第一類型之一嵌套訊息可應用於該樣本,該區域在該兩個或多於兩個區域間具有一最大區域識別符值。
  61. 如請求項60之設備,其中可應用於該兩個或多於兩個區域中之另一區域的該第一類型之另一嵌套訊息不可應用於該樣本,該另一區域在該兩個或多於兩個區域間不具有該最大區域識別符值。
  62. 如請求項45之設備,其中該區域嵌套訊息進一步包括識別該區域嵌套訊息之一用途之一語法元素。
  63. 如請求項45之設備,其中該區域嵌套訊息進一步包括該區域嵌套訊息中之該複數個嵌套訊息之一數目。
  64. 如請求項45之設備,其中該複數個嵌套訊息之一嵌套訊息具有與在該嵌套訊息未被嵌套在該區域嵌套訊息中之情況下相同的一持續性。
  65. 如請求項45之設備,其中該區域嵌套訊息包括關於該第一嵌套訊息之一索引集,該索引集指示該第一資料集欲應用於之一或多個區域。
  66. 如請求項65之設備,其中該索引集包括至少該第一區域識別符。
  67. 如請求項45之設備,其進一步包含: 一顯示器,其用於顯示該視訊資料。
  68. 如請求項45之設備,其中該設備包含具有一攝影機的一行動裝置。
  69. 一種儲存有指令之非暫時性電腦可讀媒體,該等指令在由一或多個處理器執行時致使該一或多個處理器進行以下操作: 獲得視訊資料;及 使用該視訊資料產生包括一區域嵌套訊息之一經編碼視訊位元串流,該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之一圖像之至少一第一區域的區域資料,其中該區域嵌套訊息之一第一嵌套訊息包括一第一資料集及指示該圖像之該第一區域與該第一資料集相關聯之一第一區域識別符。
  70. 一種用於解碼視訊資料之設備,其包含: 用於獲得視訊資料的構件;及 用於使用該視訊資料產生包括一區域嵌套訊息之一經編碼視訊位元串流的構件,該區域嵌套訊息包括複數個嵌套訊息及定義該經編碼視訊位元串流之一圖像之至少一第一區域的區域資料,其中該區域嵌套訊息之一第一嵌套訊息包括一第一資料集及指示該圖像之該第一區域與該第一資料集相關聯之一第一區域識別符。
TW106115367A 2016-05-10 2017-05-09 用於產生用於視訊圖像之區域嵌套訊息之方法及系統 TW201742464A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201662334354P 2016-05-10 2016-05-10
US201662336435P 2016-05-13 2016-05-13
US201662405161P 2016-10-06 2016-10-06
US15/588,516 US10554981B2 (en) 2016-05-10 2017-05-05 Methods and systems for generating regional nesting messages for video pictures

Publications (1)

Publication Number Publication Date
TW201742464A true TW201742464A (zh) 2017-12-01

Family

ID=58708076

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106115367A TW201742464A (zh) 2016-05-10 2017-05-09 用於產生用於視訊圖像之區域嵌套訊息之方法及系統

Country Status (10)

Country Link
US (2) US10554981B2 (zh)
EP (1) EP3456054B1 (zh)
JP (1) JP6816166B2 (zh)
KR (1) KR102156993B1 (zh)
CN (1) CN109196868B (zh)
AU (1) AU2017263318A1 (zh)
BR (1) BR112018073052A2 (zh)
CA (1) CA3019859A1 (zh)
TW (1) TW201742464A (zh)
WO (1) WO2017196727A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111567057A (zh) * 2018-01-12 2020-08-21 索尼公司 信息处理装置和方法

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10554981B2 (en) 2016-05-10 2020-02-04 Qualcomm Incorporated Methods and systems for generating regional nesting messages for video pictures
JP6891882B2 (ja) * 2016-05-25 2021-06-18 ソニーグループ株式会社 画像処理装置、および画像処理方法、並びにプログラム
US11503314B2 (en) * 2016-07-08 2022-11-15 Interdigital Madison Patent Holdings, Sas Systems and methods for region-of-interest tone remapping
UA124806C2 (uk) * 2016-10-05 2021-11-24 Долбі Леборетеріз Лайсенсінг Корпорейшн Обмін повідомленнями з інформацією про вихідний колірний об'єм
WO2019182705A1 (en) * 2018-03-21 2019-09-26 Futurewei Technologies, Inc. Signaling a cancel flag in a video bitstream
US11012657B2 (en) * 2018-06-08 2021-05-18 Lg Electronics Inc. Method for processing overlay in 360-degree video system and apparatus for the same
JP7490555B2 (ja) * 2018-08-08 2024-05-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 三次元データ符号化方法、三次元データ復号方法、三次元データ符号化装置、及び三次元データ復号装置
WO2020214899A1 (en) * 2019-04-19 2020-10-22 Beijing Dajia Internet Information Technology Co., Ltd. Supplemental enhancement information message for embedded image
CN113994704B (zh) * 2019-06-18 2024-05-17 松下电器(美国)知识产权公司 编码装置、解码装置、编码方法和解码方法
CN114586361A (zh) * 2019-09-23 2022-06-03 瑞典爱立信有限公司 具有子图片片位置导出的片段位置信令
US11265357B2 (en) * 2019-10-10 2022-03-01 Microsoft Technology Licensing, Llc AV1 codec for real-time video communication
CN114556954B (zh) * 2019-12-04 2024-06-04 谷歌有限责任公司 混合动态范围内容的重映射
US20220279185A1 (en) * 2021-02-26 2022-09-01 Lemon Inc. Methods of coding images/videos with alpha channels
US20240171780A1 (en) * 2021-03-25 2024-05-23 Nokia Technologies Oy General region-based hash
US20240205460A1 (en) * 2021-04-12 2024-06-20 Telefonaktiebolaget Lm Ericsson (Publ) Message referencing
WO2023171513A1 (en) * 2022-03-08 2023-09-14 Sharp Kabushiki Kaisha Systems and methods for signaling sublayer non-reference information in video coding
CN114501070B (zh) * 2022-04-14 2022-07-19 全时云商务服务股份有限公司 视频会议同步额外信息的编解码方法、处理方法和系统
WO2024039540A1 (en) * 2022-08-15 2024-02-22 Bytedance Inc. Signaling of neural-network post-filter purposes and output chroma format
WO2024091399A1 (en) * 2022-10-24 2024-05-02 Op Solutions, Llc Systems and methods for region packing based encoding and decoding

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101255226B1 (ko) * 2005-09-26 2013-04-16 한국과학기술원 스케일러블 비디오 코딩에서 다중 roi 설정, 복원을위한 장치 및 방법
US20100142613A1 (en) * 2007-04-18 2010-06-10 Lihua Zhu Method for encoding video data in a scalable manner
WO2010095410A1 (ja) * 2009-02-20 2010-08-26 パナソニック株式会社 記録媒体、再生装置、集積回路
JP2011041249A (ja) * 2009-05-12 2011-02-24 Sony Corp データ構造および記録媒体、並びに、再生装置、再生方法、プログラム、およびプログラム格納媒体
JP4957831B2 (ja) * 2009-08-18 2012-06-20 ソニー株式会社 再生装置および再生方法、並びに記録装置および記録方法
WO2012017603A1 (ja) * 2010-08-06 2012-02-09 パナソニック株式会社 再生装置、集積回路、再生方法、プログラム
US10244257B2 (en) * 2011-08-31 2019-03-26 Nokia Technologies Oy Video coding and decoding
RU2612577C2 (ru) * 2012-07-02 2017-03-09 Нокиа Текнолоджиз Ой Способ и устройство для кодирования видеоинформации
US9521393B2 (en) * 2013-01-07 2016-12-13 Qualcomm Incorporated Non-nested SEI messages in video coding
CN105981387B (zh) * 2013-10-15 2019-09-27 诺基亚技术有限公司 用于处理视频的方法、装置和计算机可读存储介质
US10645404B2 (en) * 2014-03-24 2020-05-05 Qualcomm Incorporated Generic use of HEVC SEI messages for multi-layer codecs
US9716900B2 (en) * 2014-06-20 2017-07-25 Qualcomm Incorporated Extensible design of nesting supplemental enhancement information (SEI) messages
JP6331882B2 (ja) * 2014-08-28 2018-05-30 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
US10554981B2 (en) 2016-05-10 2020-02-04 Qualcomm Incorporated Methods and systems for generating regional nesting messages for video pictures

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111567057A (zh) * 2018-01-12 2020-08-21 索尼公司 信息处理装置和方法
US11729366B2 (en) 2018-01-12 2023-08-15 Sony Group Corporation Information processing apparatus and method

Also Published As

Publication number Publication date
EP3456054B1 (en) 2023-12-13
AU2017263318A1 (en) 2018-10-18
JP2019515572A (ja) 2019-06-06
CA3019859A1 (en) 2017-11-16
BR112018073052A2 (pt) 2019-02-26
US20200204809A1 (en) 2020-06-25
EP3456054A1 (en) 2019-03-20
US10554981B2 (en) 2020-02-04
CN109196868B (zh) 2021-05-25
EP3456054C0 (en) 2023-12-13
US20170332085A1 (en) 2017-11-16
US11159805B2 (en) 2021-10-26
CN109196868A (zh) 2019-01-11
KR102156993B1 (ko) 2020-09-16
JP6816166B2 (ja) 2021-01-20
KR20190004709A (ko) 2019-01-14
WO2017196727A1 (en) 2017-11-16

Similar Documents

Publication Publication Date Title
US11159805B2 (en) Methods and systems for generating regional nesting messages for video pictures
US11368684B2 (en) Adaptation parameter sets (APS) for adaptive loop filter (ALF) parameters
CA2952460C (en) Systems and methods for selectively signaling different numbers of video signal information syntax structures in a parameter set
US11190758B2 (en) Block-based quantized residual domain pulse code modulation assignment for intra prediction mode derivation
TW201806388A (zh) 用於產生及處理視訊之內容色域體積信息之方法及系統
TW201926991A (zh) 色度量化參數偏移
TW201735608A (zh) 用於產生對視訊之顏色再映射資訊之補充增強資訊訊息之方法及系統
WO2023107790A1 (en) Adaptive film grain synthesis
WO2023019071A1 (en) Green metadata signaling
CN117769835A (zh) 绿色元数据信令