TW201511531A

TW201511531A - 用於視訊編碼之方法及裝置

Info

Publication number: TW201511531A
Application number: TW103123619A
Authority: TW
Inventors: Miska Matias Hannuksela
Original assignee: Nokia Corp
Priority date: 2013-07-09
Filing date: 2014-07-09
Publication date: 2015-03-16
Also published as: KR20160030560A; CN105531999B; US11184634B2; EP3020186A4; CN105531999A; EP3020186B1; US20200228827A1; US20220086480A1; EP3020186A1; US10609407B2; KR101967398B1; US11818385B2; US20150016531A1; WO2015004606A1; US20240080473A1; TWI573444B

Abstract

揭示各種供用於視訊編碼及解碼之方法、裝置及電腦程式產品。於一些實施例中，一種方法包含下列步驟之至少一者：編碼移動像場被儲存，但是僅供用於層間移動預測，之一指示進入一位元流；編碼該等移動像場用途之限定範疇之一指示進入一位元流；編碼是否使用移動像場供用於預測之一指示進入一位元流；編碼供用於儲存移動資訊的儲存參數之一指示進入一位元流。

Description

用於視訊編碼之方法及裝置

發明領域

本申請一般係有關用於視訊編碼與解碼之一裝置、一方法以及一電腦程式。

發明背景

這部份旨在提供被引用於申請專利範圍中之本發明的一背景或脈絡。此處之說明可包含可被實行之概念，但不必定是先前已被構思或實行之一者。因此，除非本文另有指明，否則在這部份中被說明者將不是本申請中之說明以及申請專利範圍之先前技術並且這部份中之內含不被承認為先前技術。

一視訊編碼系統可包含轉換一輸入視訊成為適用於儲存/發送之一壓縮表示的一編碼器以及可解壓縮該被壓縮的視訊表示回至一可見形式的一解碼器。該編碼器可放棄原始視訊序列中的一些資訊，以便以更精密形式代表視訊，例如，以較低於可能是所需的位元率而致能視訊資訊之儲存/發送。

用以提供三維(3D)視訊內容之各種技術目前被探討以及被產生。尤其是，強力的研究已專注於各種多視圖應用上，於其中一觀看者是可自一特定觀看點僅看到一對立體視訊以及可自一不同的觀看點看到另一對立體視訊。對於此等多視圖應用之最可行的方法之一者已呈現為，其中僅一限定數目的輸入視圖，例如，一單一或一立體視訊加上一些附加資料，被提供至一解碼器端，並且所有所需的視圖接著將利用解碼器局域性地被形成(亦即，被合成)而被顯示在一顯示器上。

一些視訊編碼標準引介標頭在片段層及下面者，以及在片段層上面之層的一參數集合概念。一參數集合之例子可包含所有的圖像、圖像族群、以及序列位準資料，例如，圖像大小、顯示窗、被採用之選擇編碼模式、巨區塊分配映圖、以及其他者。各個參數集合例子可以包含一唯一的識別符。各個片段標頭可包含對一參數集合識別符之一參考，並且當解碼該片段時，被稱為參數集合之參數數值可被使用。參數集合將不定期變化的圖像、GOP、以及序列位準資料之發送與解碼順序自序列、GOP、以及圖像邊界解耦合。只要它們在被參考之前被解碼，則參數集合可使用一可靠的發送協定而頻帶外地被發送。如果參數集合頻帶內地被發送，則它們可被重複多次以改進比較至習知的視訊編碼機構之誤差彈性。參數集合可在一會期建立時被發送。但是，於一些系統中，主要傳播者，參數集合之可靠的頻帶外發送可能不是可行的，但是參數集合則是於參數集合NAL單元中頻帶內地被傳送。

發明概要

一些實施例提供用以編碼以及解碼視訊資訊之方法。在本發明一些實施例中提供用於視訊編碼之一方法、裝置以及電腦程式產品。

本發明各種範例論點被提供於詳細之說明中。

依據一第一論點，提供一方法，其包含至少下列者：編碼進入一位元流指示是否一層之移動像場被儲存之一指示，其中該等移動像場僅供用於層間移動預測。

依據一第二論點，提供一方法，其包含下列之至少一者：a)編碼移動像場被儲存，但是僅供用於層間移動預測，之一指示進入一位元流；b)編碼移動像場用途之受限定制範疇之一指示進入一位元流；c)編碼是否使用供用於預測的移動像場之一指示進入一位元流；d)編碼供用於儲存移動資訊的儲存參數之一指示進入一位元流。

依據一第三論點，提供一裝置，其包含至少一個處理器與至少一個包含電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，使用該等至少一個處理器，以導致該裝置進行至少下列者：編碼進入一位元流一指示指示是否一層之移動像場被儲存，其中該等移動像場僅供用於層間移動預測。

依據一第四論點，提供一裝置，其包含至少一個處理器與至少一個包含電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，使用該等至少一個處理器，以導致該裝置進行下列之至少一者：a)編碼移動像場被儲存，但是僅供用於層間移動預測，之一指示進入一位元流；b)編碼移動像場用途之受限定制範疇之一指示進入一位元流；c)編碼是否使用供用於預測的移動像場之一指示進入一位元流；d)編碼供用於儲存移動資訊的儲存參數之一指示進入一位元流。

依據一第五論點，提供一裝置，其包含至少處理構件及記憶體構件，其中該裝置進一步包含編碼構件，該編碼構件被組態以編碼指示是否移動像場被儲存之至少一指示進入一位元流，其中該等移動像場僅供用於層間移動預測。

依據一第六論點，提供一編碼器，其包含至少一個處理器與至少一個包含電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，以使用該等至少一個處理器，導致該編碼器進行至少下列步驟：編碼指示是否一層之移動像場被儲存之一指示進入一位元流，其中該等移動像場僅供用於層間移動預測。

依據一第七論點，提供一電腦程式產品，其包含一個或更多個序列之一個或更多個指令，其當藉由一個或多個處理器被執行時，導致一裝置進行至少下列步驟：編碼指示是否移動像場被儲存之一指示進入一位元流，其中該等移動像場僅供用於層間移動預測。

依據一第八方面論點，提供一電腦程式產品，其包含一個或更多個序列之一個或更多個指令，其當藉由一個或多個處理器被執行時，導致一裝置至少進行下列之至少一者：a)編碼移動像場被儲存，但是僅供用於層間移動預測，之一指示進入一位元流；b)編碼移動像場用途之受限定制範疇之一指示進入一位元流；c)編碼是否使用供用於預測的移動像場之一指示進入一位元流；d)編碼供用於儲存移動資訊的儲存參數之一指示進入一位元流。

依據一第九論點，提供一方法，其包含至少下列步驟：自一位元流解碼指示是否移動像場被儲存之一指示，其中該等移動像場僅供用於層間移動預測。

依據一第十論點，提供一方法，其包含下列之至少一者：a)自一位元流解碼移動像場被儲存，但是僅供用於層間移動預測，之一指示；b)自一位元流解碼移動像場用途之受限定制範疇之一指示；c)自一位元流解碼是否使用供用於預測的移動像場之一指示；d)自一位元流解碼供用於儲存移動資訊的儲存參數之一指示。

依據一第十一論點，提供一裝置，其包含至少一個處理器與至少一個包含電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，以使用該等至少一個處理器，導致該裝置進行至少下列步驟：自一位元流解碼指示是否移動像場被儲存之一指示，其中該等移動像場僅供用於層間移動預測。

依據一第十二論點，提供一裝置，其包含至少用以處理之構件以及記憶體構件，該裝置進一步包含用以解碼被組態以自一位元流解碼移動像場是否被儲存之至少一指示的構件，其中移動像場是僅供用於層間移動預測。

依據一第十三論點，提供一種裝置，其包含至少一處理器與至少一包含電腦程式碼之記憶體，該等至少一記憶體與該電腦程式碼被組態，以使用該等至少一處理器，而導致該裝置進行下列之至少一者：a)自一位元流解碼移動像場被儲存，但是僅供用於層間移動預測，之一指示；b)自一位元流解碼移動像場用途之受限定制範疇之一指示；c)自一位元流解碼是否使用供用於預測的移動像場之一指示；d)自一位元流解碼供用於儲存移動資訊的儲存參數之一指示。

依據一第十四論點，提供一電腦程式產品，其包含一個或更多個序列之一個或更多個指令，其當藉由一個或多個處理器被執行時，導致一裝置至少進行至少下列步驟：自一位元流解碼指示是否移動像場被儲存之一指示，其中該等移動像場僅供用於層間移動預測。

依據一第十五論點提供一電腦程式產品，其包含一個或更多個序列之一個或更多個指令，其當藉由一個或多個處理器被執行時，導致一裝置至少進行下列之至少一者：a)自一位元流解碼移動像場被儲存，但是僅供用於層間移動預測之一指示；b)自一位元流解碼移動像場用途之受限定制範疇之一指示；c)自一位元流解碼是否使用供用於預測的移動像場之一指示；d)自一位元流解碼供用於儲存移動資訊的儲存參數之一指示。

依據一實施例，一步驟a)包含二個或更多個下列者：i.編碼成為/自一位元流解碼是否移動像場被使用在一層之內以供用於時間移動向量預測之一指示； ii.編碼成為/自一位元流解碼是否層間移動預測允許被使用之一指示；iii.編碼成為/解碼自一位元流是否對角線移動預測允許被使用之一指示。

依據一實施例，該指示被指定於一序列參數集合。

依據一實施例，移動像場被儲存作為在某一層編碼一目前圖像之部份。

依據一實施例，於步驟b)該受限定制範疇界定某些時間子層或圖像型式的任一者或兩者。

依據一實施例，步驟c)包含使用供用以推論將被使用於預測之移動像場之一特定演算法。

依據一實施例，步驟c)包含將對於控制移動像場標記之一命令或一語法元素編碼進入/解碼自一位元流。

依據一實施例，步驟d)包含指示儲存移動資訊的空間解析度或精確度。

依據一實施例，步驟d)包含指示移動資訊中哪些參數是移動預測所需要的。

依據一實施例，步驟d)包含指示減低移動像場儲存空間之移動資訊參數之限制。

依據一實施例，該裝置是一移動式設備。

AMVP‧‧‧先進移動向量預測

APS‧‧‧適應性參數集合

BLA‧‧‧斷續鏈接存取

CRA‧‧‧完全隨機存取

CTU‧‧‧編碼樹單元

CU‧‧‧編碼單元

DCT‧‧‧離散餘弦轉換

DPB‧‧‧解碼圖像緩衝器

FIR‧‧‧有限脈衝響應

GOP‧‧‧圖像族群

HEVC‧‧‧高效能視訊編碼

HRD‧‧‧假設性參考解碼器

IDR‧‧‧即時解碼更新

MMCO‧‧‧記憶體管理控制操作

MVC‧‧‧多視圖視訊編碼

NAL‧‧‧網路提取層

POC‧‧‧圖像順序計數

PU‧‧‧預測單元

RADL‧‧‧隨機存取可解碼前導

RAP‧‧‧隨機存取點

RASL‧‧‧隨機存取跳躍前導

RPS‧‧‧參考圖像集合

RTP‧‧‧及時輸送協定

SNR‧‧‧信號-對-雜訊比

STSA‧‧‧階梯式時間子層存取

SVC‧‧‧可調整視訊編碼

TMVP‧‧‧時間移動向量預測器

TSA‧‧‧時間子層存取

TU‧‧‧轉換單元

VBV‧‧‧視訊緩衝檢驗器

VPS‧‧‧視訊參數集合

X‧‧‧目前預測單元

A₀、A₁‧‧‧空間候選者

B₀、B₁、B₂‧‧‧空間候選者

C₀、C₁‧‧‧時間候選者

10‧‧‧系統

11‧‧‧移動式電話網路

14‧‧‧移動式電話

16‧‧‧個人數位助理

18‧‧‧整合訊息設備

20‧‧‧桌上型電腦

22‧‧‧筆記型電腦

24‧‧‧基地台

25‧‧‧無線連接

26‧‧‧網路伺服器

28‧‧‧網際網路

30‧‧‧外殼

32‧‧‧顯示器

34‧‧‧鍵盤

36‧‧‧麥克風

38‧‧‧耳機

40‧‧‧電池

42‧‧‧紅外線埠

44‧‧‧天線

46‧‧‧智慧卡

48‧‧‧卡讀取器

50‧‧‧電子式設備

52‧‧‧無線電界面電路

54‧‧‧編解碼器電路

56‧‧‧控制器

58‧‧‧記憶體

1016-1022‧‧‧編碼方法流程步驟

為對本發明實施範例有更完整的理解，接著將配合附圖參考下列說明，於其中：圖1展示依據一實施例之視訊編碼系統的方塊圖；圖2展示依據一實施例之用於視訊編碼的裝置；圖3展示包含多數個裝置之用於視訊編碼的配置；圖4展示依據一實施例之方法的高階流程圖，以及圖5展示候選移動向量預測器之來源。

較佳實施例之詳細說明

於下面中，本發明許多實施例將於一視訊編碼配置之脈絡中被說明。但是，應注意到，本發明是不受限定於這特定的配置。實際上，不同的實施例可廣泛應用於任何環境中，其需有非可調整、可調整及/或多視圖視訊編碼之改進。例如，本發明可以是可應用至視訊編碼系統，其類似訊流系統、DVD播放器、數位電視接收器、個人視訊記錄器、個人電腦上之系統與電腦程式、手持電腦與通訊設備、以及網路元件，例如，其中視訊資料被處理的代碼轉換器與雲端計算配置。

H.264/AVC標準是由國際電信聯盟電信標準化部門(ITU-T)之視訊編碼專家群組(VCEG)以及國際標準化組織(ISO)/國際電工委員會(IEC)之移動圖像專家群組(MPEG)的聯合視訊團隊(JVT)而被開發。該H.264/AVC標準由兩個親系標準化機構被公開，並且其被稱為ITU-T推薦H.264及ISO/IEC國際標準14496-10，同時也是習知如MPEG-4第10部分之高級視訊編碼(AVC)。已有多數H.264/AVC標準版本，集成新的延伸或特點至該規格。這些延伸包含可調整視訊編碼(SVC)以及多視圖視訊編碼(MVC)。

H.265/HEVC標準在VCEG及MPEG之視訊編碼(JCT-VC)上由聯合協作團隊被產生。該H.265/HEVC標準將由兩個親系標準化機構被公開，並且被稱為ITU-T推薦H.265以及ISO/IEC國際標準23008-2，其同時也是習知如MPEG-H第2部份之高效能視訊編碼(HEVC)。於目前正進行標準化規劃以產生H.265/HEVC之延伸，包含可調整、多視圖、三維、以及保真度範圍延伸。

一用於品質調整(同時也習知如信號-對-雜訊或SNR)及/或空間調整之可調整視訊編解碼器可如後所述地被實行。對於一基底層，一習見之非可調整視訊編碼器以及解碼器被使用。該基底層之重構/解碼圖像被包含於一增強層之參考圖像緩衝器中。使用參考圖像列表於像框間預測之H.264/AVC、HEVC、以及相似編解碼器，基底層解碼圖像可相似於增強層之解碼參考圖像地被塞進入用於一增強層圖像之編碼/解碼的一參考圖像列表中。因此，編碼器可選擇一基本層參考圖像作為像框間預測參考並且可指示其之使用，例如，以編碼位元流中之一參考圖像索引。解碼器自位元流(例如，自一參考圖像索引)解碼，其中一基本層圖像被使用作為對於增強層之一像框間預測參考。當一解碼基本層圖像被使用作為對於一增強層之一預測參考時，其被稱為一層間參考圖像。

各種用以提供三維(3D)視訊內容之技術是目前所探討與發展的。尤其是，強力之研究已專注於各種多視圖應用上，其中一觀看者是可自一特定觀看點僅看到一組立體視訊以及自一不同的觀看點而看到另一組立體視訊。對於此等多視圖應用之多數可行的方法之一者已呈現為，其中僅一限定數目的視圖，例如，一單一或立體視訊加上一些補充資料，被提供至將被顯示在一顯示器上之解碼器的一解碼器端並且接著所有所需的視圖局域性地被形成(亦即，被合成)。

一些關鍵性界定、位元流及編碼結構、以及H.264/AVC及HEVC之概念於這部份中被說明作為實施例被實行之視訊編碼器、解碼器、編碼方法、解碼方法、以及位元流結構之範例。一些關鍵性界定、位元流及編碼結構、以及H.264/AVC之概念是相同於HEVC中之概念-因此，它們將共同地在下面被說明。本發明之論點是不受限定於H.264/AVC或HEVC，反而本說明提供一基礎，而使本發明可部分地或完全地被實現於其上。

當說明H.264/AVC以及HEVC以及於實施範例中時，共同標誌用於算術運算器、邏輯運算器、關係運算器、位元式運算器、分配運算器、以及範圍標誌，例如，如於H.264/AVC或草案HEVC中被指定者可被使用。進一步地，常用數學函數，例如，如於H.264/AVC或草案HEVC中被指定者可被使用，並且運算器之一共同順序或優先序以及執行順序(自左方至右方或自右方至左方)，例如，於H.264/AVC或草案HEVC中所被指定者可被使用。

當說明H.264/AVC以及HEVC以及於實施範例中時，下列說明可被使用以指定各個語法元素之分析處理程序。

-b(8)：具有任何位元串樣型之位元組(8位元)。

-se(v)：左位元首先之符號整數指數哥倫布編碼(Exp-Golomb-coded)語法元素。

-u(n)：使用n位元之無符號整數。當於語法表中n是“v”時，位元數目以依據其他語法元素數值的方式而變化。對於這描述符之配對處理過程利用自位元流之n個的下一位元被指定而被解釋作為最主要位元首先被寫入之無符號整數之二進制表示。

-ue(v)：左方位元首先之無符號整數指數哥倫布編碼語法元素。

一指數哥倫布位元串可被轉換至一碼數(codeNum)，例如，使用下面之列表：

對應至一指數哥倫布位元串的一codeNum可被轉換至se(v)，例如，使用下面之列表：

當說明H.264/AVC以及HEVC以及於實施範例中時，語法結構、語法元素之語義、以及解碼處理程序可如隨後說明地被指定。於位元流中之語法元素以粗體型式被表示。各個語法元素利用其之名稱(具下劃線的所有小寫字母)、選項性地其之一個或二個語法類別、以及用於其之編碼表示方法的一個或二個描述符而被說明。解碼處理程序依據語法元素的數值以及至先前被解碼之語法元素的數值而作用。當一語法元素數值被使用於語法列表或文字中時，藉由小寫和大寫字母之混合並且不需任何下劃線地被命名。以大寫字母開始之變量被導出以供用於目前語法結構以及所有從屬語法結構之解碼。以大寫字母開始之變量可被使用於稍後語法結構之解碼處理程序中而不需提及變量之原始語法結構。以小寫字母開始之變量僅被使用在它們被導出之脈絡內。於一些情況中，用於語法元素數值或變量數值之"助記符"名稱與他們的數位數值互換地被使用。有時"助記符"名稱被使用而不需任何相關的數位數值。數值以及名稱之關聯被指定於本文內。該等名稱是由一個或多個利用一下劃線字符被分開的文字族群所構成。各個族群以一大寫字母開始並且可包含更多的大寫字母。

當說明H.264/AVC及HEVC以及於實施範例中時，一語法結構可使用下列者被指定。被包含於大括號中的一敘述族群是一複合敘述並且在功能上如一單一敘述地被處理。一"while(當)"結構指定一條件是否為真之測試，並且如果為真，則重複地指定一敘述(或複合敘述)評估，直至該條件是不再為真。一"do…while(執行…當)"結構指定一次之一敘述評估，之後接著一條件是否為真之測試，並且如果為真，則指定敘述之重複的評估，直至該條件不再為真。一"if…else(如果…否則)"結構指定一條件是否為真之測試，並且如果該條件是為真，則指定一主要敘述之評估，否則，指定一另外敘述之評估。如果不需要另外的敘述評估的話，則結構之"else(否則)"部份以及相關的另外敘述被省略。一"for(對於)"結構指定一啟始敘述之評估，之後接著一條件之測試，並且如果該條件為真，則指定一主要敘述之重複的評估，之後接著一依序的敘述直至該條件不再為真。

相似於許多早期的視訊編碼標準，用於無誤差位元流之位元流語法及語義以及解碼處理程序被指定於H.264/AVC及HEVC中。該編碼處理程序不被指定，但是編碼器必須產生一致的位元流。位元流及解碼一致性可藉由假設參考解碼器損失被驗證，但是在編碼中工具之使用是可選擇並且沒有解碼處理程序被指定供用於錯誤位元流。

分別地用於輸入至一H.264/AVC或HEVC編碼器以及一H.264/AVC或HEVC解碼器之輸出的基本單元是一圖像。一圖像可以是一像框或一像場。一像框包含光影樣本以及對應的色度樣本之矩陣。一像場是一像框之一組交錯樣本列，並且當源信號被交錯組合時則可被使用作為編碼器輸入。色度圖像當比較至光影圖像時則可被次取樣。例如，於4：2：0取樣樣型中，色度圖像之空間解析度是沿著兩座標軸之光影圖像的一半。

於H.264/AVC中，一巨型區塊是16x16之光影樣本區塊以及對應的色度樣本區塊。例如，於4：2：0取樣樣型中，一巨型區塊於每個色度元素各包含一個8x8之色度樣本區塊。於H.264/AVC中，一圖像被分割成一個或多個片段族群，並且一片段族群包含一個或多個片段。於H.264/AVC中，一片段包含在一特定片段族群內之光柵掃描中連續地被排序之一整數個的巨型方塊。

於草案HEVC標準中，視訊圖像被分割成為覆蓋圖像區域之編碼單元(CU)。一CU包含一個或多個界定供用於在CU內之樣本的預測處理程序之預測單元(PU)以及一個或多個界定供用於該CU中之樣本的預測誤差編碼處理程序之轉換單元(TU)。一般，一CU包含具有自一預定集合的可能CU大小之可選擇大小之一矩形樣本區塊。具有最大允許大小之一CU一般被稱為CTU(編碼樹單元)並且該視訊圖像被分割成為非重疊CTU。一CTU可進一步被分離成為一較小的CU之組合，例如，藉由遞歸地分離該CTU及所產生CU。各個產生的CU一般具有至少一個PU以及至少與其相關的TU。各個PU和TU可進一步被分離成為較小的PU以及TU，以便分別地增加預測及預測誤差編碼處理之粒度。PU分離可藉由以對稱或非對稱方式垂直或水平地分離CU成為四個大小相等的方形PU或分離該CU成為兩個矩形PU而被實現。使影像成為CU之劃分，以及使CU成為PU及TU之劃分一般被傳信於位元流中而允許解碼器複製這些單元之預期結構。

於草案HEVC標準中，一圖像可依像塊方式被分割，其是矩形的並且包含整數個CTU。於HEVC之目前工作草案中，分割成像塊形成一規則性網格，其中像塊之高度以及寬度最大彼此各相差一個CTU。於草案HEVC 中，一片段包含整數個CU。如果像塊不是在使用中，則該等CU在像塊內或在一圖像內以CTU之光柵掃瞄順序被掃瞄。在一CTU之內，CU具有一特定掃瞄順序。

於HEVC之工作草案(WD)5中，用於圖像分割的一些關鍵性界定及概念如下面所述地被界定。一分割被界定如一集合成為子集合之劃分以至於該集合之各個元件恰好是該等子集合之一者。

於一HEVCWD5中之一基本編碼單元是一樹塊。一樹塊是具有三個樣本陣列之一圖像的一NxN之光影樣本區塊以及二個對應色度樣本區塊，或一單色圖像或使用三個各別之彩色平面被編碼之一圖像的一NxN之樣本區塊。一樹塊可被分割以供用於不同的編碼以及解碼處理。一樹塊分割是對於具有三樣本陣列之一圖像的一光影樣本區塊以及產生自一樹塊之分割之二對應的色度樣本方塊，或對於一單色圖像或一使用三個各別之彩色平面被編碼的圖像產生自一樹塊之分割的一光影樣本區塊。各個樹塊被指定一分割信號以辨識用於像框內或像框間預測以及用於轉換編碼之區塊大小。該分割是一遞歸的四叉樹分割。該四叉樹之根部是與該樹塊相關聯。該四叉樹被分離一直至到達一葉子為止，其被稱為編碼節點。該編碼節點是二支束之根部節點，預測樹以及轉換樹。該預測樹指定預測區塊之位置以及大小。預測樹以及相關聯的預測資料被稱為一預測單元。轉換樹指定轉換區塊之位置以及大小。轉換樹以及相關聯的轉換資料被稱為一轉換單元。用於光影以及色度之分離資訊對於預測樹是相同的並且對於轉換樹可能是或可能不是相同的。編碼節點以及相關聯的預測以及轉換單元一起形成一編碼單元。

於一HEVC WD5中，圖像被分割成為片段以及像塊。一片段可以是一序列之樹狀區塊，但是(當稱為一所謂的細粒度片段時)也可具有其邊界在一樹塊內轉換單元以及預測單元重合之位置。在一片段內之樹狀區塊以一光柵掃瞄順序被編碼並且被解碼。對於主要的編碼圖像，使各個圖像成為片段之劃分是一分割。

於一HEVC WD5中，一像塊被界定如共同發生在一行以及一列中之一整數的樹狀區塊，在像塊之內以光柵掃瞄方式連續地被排序。對於主要的編碼圖像，使各個圖像成為像塊之劃分是一分割。像塊在圖像之內以光柵掃瞄方式連續地被排序。雖然一片段包含樹狀區塊，其在一像塊內之光柵掃瞄是連續的，這些樹狀區塊在圖像內之光柵掃瞄不一定得是連續的。片段以及像塊不需要包含相同的樹狀區塊序列。一像塊可包括被包含在多於一片段中之樹狀區塊。同樣地，一片段可包括被包含在許多像塊中之樹狀區塊。

於H.264/AVC以及HEVC中，圖像內預測可能跨越片段邊界而失能。因此，片段可被視為分離一編碼圖像使成為可獨立解碼的片塊之一方式，並且片段因此被視為用於發送之基本單元。於許多情況中，編碼器可於位元流中指示哪種型式之圖像內預測因跨越片段邊界被關閉，並且解碼器操作考慮這資訊，例如，當斷定哪種預測來源是可用時。例如，如果鄰近巨型區塊或CU存在於一不同的片段時，來自一鄰近巨型區塊或CU之樣本可被視為非可供用於像框內預測。

一語法元素可被界定為位元流中表示之一資料元素。一語法結構可被界定為零個或以一指定順序一起呈現於位元流中之更多個語法元素。

分別地用於一H.264/AVC或HEVC編碼器之輸出以及一H.264/AVC或HEVC解碼器之輸入的基本單元，是一網路提取層(NAL)單元。對於在封包導向網路上之輸送或儲存於結構性檔案，NAL單元可被封裝成為封包或相似結構。一位元組流格式已被指定於H.264/AVC以及HEVC中以供用於不提供訊框結構之發送或儲存環境。位元組流格式藉由附帶一開始數碼於各個NAL單元之前而彼此分隔NAL單元。為避免NAL單元邊界之假性偵測，編碼器可執行一位元組-導向開始數碼仿效預防演算法，如果一開始數碼將發生，其將增加一仿效預防位元組至NAL單元酬載。為了致能在封包導向及訊流導向系統之間的直接閘道操作，開始數碼仿效預防可經常被進行而無視於位元組串流格式是否正使用中。

NAL單元包含一標頭以及酬載。於H.264/AVC中，NAL單元標頭指示NAL單元之型式以及被包含於該NAL單元中之一編碼片段是否為一參考圖像或一非參考圖像之一部份。H.264/AVC包含一2位元nal_ref_idc語法元素，其當等於0時則指示被包含於NAL單元中之一編碼片段是為一非參考圖像之一部份，並且當大於0時則指示被包含於NAL單元中之一編碼片段是為一參考圖像之一部份。用於SVC以及MVC NAL單元之標頭可另外地包含關於調整性以及多視圖階層之各種指示。

於HEVC中，一個二位元組NAL單元檔頭被使用於所有指定的NAL單元型式上。該NAL單元檔頭包含一個保留之位元、一個六位元NAL單元型式指示、一個六位元保留像場(其被稱為nuh_layer_id)以及用於空間位準之一個三位元Temporal_id_plus1指示。該Temporal_id_plus1語法元素可以被視為用於該NAL單元之一時間識別符，並且一零為基礎的TemporalId變量可如下所述地被導出：TemporalId=Temporal_id_plus1-1。TemporalId等於0對應至最低時間位準。Temporal_id_plus1之數值是需要為非零以便避免涉及二NAL單元檔頭位元組之開始數碼仿真。藉由排除具有較大於或等於一選擇數值的一TemporalId之所有VCL NAL單元以及包含所有其他VCL NAL單元所產生的位元流將保持一致。因而，具有TemporalId等於TID之一圖像不使用任何具有TemporalId大於TID之一圖像作為像框間預測參考。一子層或一時間子層可被界定而作為一時間可調整位元流之一時間可調整層，包含具有一TemporalId變量之特定數值的VCL NAL單元以及相關聯的非VCL NAL單元。於不損失其之一般性情況，於一些實施範例中，一變量LayerId可如下所述地自nuh_layer_id數值被導出：LayerId=nuh_layer_id。於下面，除非另有指示，否則LayerId、nuh_layer_id以及layer_id可互換使用。

可預期地，在NAL單元檔頭中之nuh_layer_id及/或相似語法元素將於調整性層次結構上攜帶資訊。例如，如果大於一特定識別符數值之所有NAL單元自位元流被移除，則LayerId數值可被映射至描述不同調整性維度之變量或語法元素之數值，例如，quality_id或相似者、dependency_id或相似者、任何其他型式的層識別符、視圖順序索引或相似者、視圖識別符、NAL單元是否關於深度或紋理結構之一指示，亦即，depth_flag或相似者、或相似於指示一有效的子位元流抽取之SVC的priority_id之一識別符。nuh_layer_id及/或相似語法元素可被分割成為指示調整性質之一個或多個語法元素。例如，在nuh_layer_id及/或相似語法元素之中的一特定位元數目可被使用於dependency_id或相似者，而在nuh_layer_id及/或相似語法元素之中的另一特定位元數目可被使用於quality_id相似者。另外地，LayerId數值或相似於描述不同調整性維度之變量或語法元素之數值之一映射可被提供，例如，於一視訊參數集合、一序列參數集合或另一語法結構中。

NAL單元可被分類成為視訊編碼層(VCL)NAL單元以及非VCL NAL單元。VCL NAL單元是典型編碼片段NAL單元。於H.264/AVC中，編碼片段NAL單元包含代表一個或多個編碼巨型方塊(其各對應至非壓縮圖像中之一樣本區塊)的語法元素。於HEVC中，編碼片段NAL單元包含代表一個或多個CU之語法元素。

於H.264/AVC中，一編碼片段NAL單元可被指示而作為一即時解碼更新(IDR)圖像中之一編碼片段或一非IDR圖像中之編碼片段。

於一草案HEVC標準中，一編碼片段NAL單元可被指示而為下列型式之一者：

於一草案HEVC標準中，對於圖像型式之縮寫可被界定如下：尾端(TRAIL)圖像、時間子層存取(TSA)、階梯式時間子層存取(STSA)、隨機存取可解碼前導(RADL)圖像、隨機存取跳躍前導(RASL)圖像、斷續鏈接存取(BLA)圖像、即時解碼更新(IDR)圖像、完全隨機存取 (CRA)圖像。

一隨機存取點(RAP)圖像(其也可或另外地被稱為像框內隨機存取點(IRAP)圖像)，是其中各個片段或片段部份具有範圍在16至23中之nal_unit_type之一圖像。一RAP圖像僅包含像框內編碼片段，並且可以是一BLA圖像、一CRA圖像或一IDR圖像。位元流中之第一圖像是一RAP圖像。假設當它們需要被致動時，所必須的參數集合是可用的，解碼順序中之RAP圖像以及所有依序的非RASL圖像可正確地被解碼，而不必進行於解碼順序中先前於RAP圖像的任何圖像之解碼處理程序。於一位元流中可以有僅包含不是RAP圖像之像框內編碼片段的圖像。

於HEVC中，一CRA圖像可以是解碼順序中之位元流中的第一圖像，或可以稍後地出現於該位元流中。HEVC中之CRA圖像允許所謂的前導圖像，其於解碼順序中是在CRA圖像之後，但是在輸出順序中卻是領先於CRA圖像。一些的前導圖像，所謂的RASL圖像，可以使用在CRA圖像之前被解碼的圖像作為一參考。如果隨機存取在CRA圖像被進行，則在解碼以及輸出順序中在一CRA圖像之後的圖像是可解碼的，並且因此完全隨機存取如同一IDR圖像之完全隨機存取功能性般地被達成。

一CRA圖像可以具有相關聯的RADL或RASL圖像。當在解碼順序中一CRA圖像是位元流中之第一圖像時，該CRA圖像是解碼順序中一編碼視訊序列之第一圖像，並且任何相關聯的RASL圖像不藉由解碼器被輸出並且可能不是可解碼的，因為它們可能包含涉及不存在於位元流中之圖像。

一前導圖像是輸出順序中在相關聯的RAP圖像之前的一圖像。該相關聯的RAP圖像是解碼順序中先前的RAP圖像(如果呈現的話)。一前導圖像可以是一RADL圖像或一RASL圖像之任一者。

所有的RASL圖像是一相關聯的BLA或CRA圖像之前導圖像。當該相關聯的RAP圖像是位元流中之一BLA圖像或是第一編碼圖像時，由於RASL圖像可能包含涉及不存在於位元流中之圖像，RASL圖像不被輸出並且可能無法正確地可解碼。但是，如果解碼在RASL圖像之相關聯的RAP圖像之前自一RAP圖像開始的話，則一RASL圖像可正確地被解碼。RASL圖像不被使用作為用於非RASL圖像之解碼處理程序的參考圖像。當呈現時，於解碼順序中，所有的RASL圖像領先相同之相關聯的RAP圖像之所有的尾端圖像。於HEVC標準之一些早期草案中，一RASL圖像涉及一被標記為放棄(TFD)之圖像。

所有的RADL圖像都是前導圖像。RADL圖像是不被使用作為用於相同相關聯的RAP圖像之尾端圖像的解碼處理程序之參考圖像。當呈現時，在解碼順序中所有的RADL圖像領先相同相關聯的RAP圖像之所有的尾端圖像。RADL圖像不涉及在解碼順序中先前於相關聯的RAP圖像之任何圖像並且因此當自相關聯的RAP圖像開始解碼時可正確地被解碼。於HEVC標準之一些早期草案中，一 RADL圖像涉及一可解碼前導圖像(DLP)。

當解碼是自CRA圖像開始時，可解碼前導圖像可以是，例如，可正確地被解碼。換言之，可解碼前導圖像僅使用在解碼順序中啟始CRA圖像或依序的圖像作為像框間預測中之參考。當解碼是自啟始CRA圖像開始時，非可解碼前導圖像是，例如，不能正確地被解碼。換言之，在解碼順序中，非可解碼前導圖像使用先前於啟始CRA圖像之圖像作為像框間預測中之參考。

當自一CRA圖像開始之一位元流的一部份被包含於另一位元流中時，與CRA圖像相關聯之RASL圖像可能無法正確地可解碼，因為一些它們的參考圖像可能不被呈現於組合之位元流中。為了明確地形成此一疊接操作，CRA圖像之NAL單元型式可被改變以指示其是一BLA圖像。與一BLA圖像相關聯之RASL圖像可能無法正確地可解碼，因此不被輸出/被顯示。進一步地，與一BLA圖像相關聯的RASL圖像可自解碼中被省略。

一BLA圖像可以是在解碼順序中位元流的第一圖像，或可以稍後地出現於於該位元流中。各個BLA圖像開始一新的編碼視訊序列，並且在解碼處理程序上具有如一IDR圖像之相似效應。但是，一BLA圖像包含指定一非空參考圖像集合之語法元素。當一BLA圖像具有nal_unit_type等於BLA_W_LP時，其可具有相關聯的RASL圖像，其不藉由解碼器被輸出並且可能不是可解碼的，因為它們可包含涉及不出現於該位元流中之圖像。當一BLA 圖像具有nal_unit_type等於BLA_W_LP時，其也可具有相關聯的RADL圖像，其被指定而將被解碼。當一BLA圖像具有nal_unit_type等於BLA_W_DLP時，其不具有相關聯的RASL圖像，但是可具有相關聯的RADL圖像，其被指定將被解碼。BLA_W_DLP也可被稱為BLA_W_RADL。當一BLA圖像具有nal_unit_type等於BLA_N_LP時，其不具有任何相關聯的前導圖像。

具有nal_unit_type等於IDR_N_LP之一IDR圖像不具有呈現於位元流中之相關聯的前導圖像。具有nal_unit_type等於IDR_W_DLP之一IDR圖像不具有呈現於位元流中之相關聯的RASL圖像，但是可具有於位元流中之相關聯的RADL圖像。IDR_W_DLP也可被稱為IDR_W_RADL。

當nal_unit_type之數值是等於TRAIL_N、TSA_N、STSA_N、RADL_N、RASL_N、RSV_VCL_N10、RSV_VCL_N12、或RSV_VCL_N14時，被解碼之圖像不被使用作為對於相同時間子層之任何其他圖像的一參考。亦即，於一草案HEVC標準中，當nal_unit_type之數值是等於TRAIL_N、TSA_N、STSA_N、RADL_N、RASL_N、RSV_VCL_N10、RSV_VCL_N12、或RSV_VCL_N14時，被解碼之圖像不被包含於具有相同TemporalId數值之任何圖像的任何RefPicSetStCurrBefore、RefPicSetStCurrAfter以及RefPicSetLtCurr中。具有nal_unit_type等於TRAIL_N、 TSA_N、STSA_N、RADL_N、RASL_N、RSV_VCL_N10、RSV_VCL_N12、或RSV_VCL_N14之一編碼圖像可以被忽略而不影響具有TemporalId相同數值之其他圖像的可解碼性。

一尾端圖像可被界定作為在輸出順序中緊接在相關聯的RAP圖像之後的一圖像。作為一尾端圖像之任何圖像不具有nal_unit_type等於RADL_N、RADL_R、RASL_N或RASL_R。作為一前導圖像之任何圖像可能在解碼順序中，受限定於領先與相同RAP圖像相關聯的所有尾端圖像。沒有RASL圖像是呈現於與具有nal_unit_type等於BLA_W_DLP或BLA_N_LP之一BLA圖像相關聯的位元流中。沒有RADL圖像是呈現於與具有nal_unit_type等於BLA_N_LP之一BLA圖像相關聯的或是呈現於與具有nal_unit_type等於IDR_N_LP之一IDR圖像相關聯的位元流中。與一CRA或BLA圖像相關聯的任何RASL圖像可能於輸出順序中受限定於領先與CRA或BLA圖像相關聯的任何RADL圖像。與一CRA圖像相關聯的任何RASL圖像可能在輸出順序中是受限定於跟隨在解碼順序中是在CRA圖像之前的任何其他RAP圖像。

於HEVC中，有二圖像型式，TSA以及STSA圖像型式，其可被使用以指示時間子層切換點。如果具有TemporalId高至N之時間子層已被解碼直至TSA或STSA圖像(不包括)以及TSA或STSA圖像具有TemporalId等於N+1，則TSA或STSA圖像將致能具有TemporalId等於N+1 之所有的依序圖像(依解碼順序)之解碼。TSA圖像型式可能強加限制在TSA圖像它本身以及在解碼順序中跟隨該TSA圖像的相同子層中之所有的圖像。這些圖像無一者被允許使用解碼順序中在TSA圖像之前相同子層中之任何圖像的像框間預測。TSA定義可進一步地強加限制在解碼順序中跟隨TSA圖像的較高子層中之圖像上。如果圖像屬於如TSA圖像之相同或較高子層的話，則這些圖像無一者被允許參考在解碼順序中TSA圖像之前的一圖像。TSA圖像具有TemporalId大於0。STSA是相似於TSA圖像，但是其不強加限制在解碼順序中跟隨STSA圖像之較高子層中之圖像上，並且因此致能僅向上切換至STSA圖像存在之子層上。

一非VCL NAL單元可以是，例如，下列型式之一者：一序列參數集合、一圖像參數集合、一增補加強資訊(SEI)NAL單元、一存取單元分隔符、一序列NAL單元之末端、一訊流NAL單元之末端、或一充填符資料NAL單元。參數集合可能是用於解碼圖像之重建所需的，而許多其他的非VCL NAL單元不是用於解碼樣本數值之重建所必需的。

經由一編碼視訊序列而保持不改變之參數可以被包含於一序列參數集合(SPS)中。除了可能是解碼處理程序必需的參數之外，序列參數集合可選擇性地包含視訊可用性資訊(VUI)，其包含可能是對於緩衝、圖像輸出時序、顯現以及資源預留重要的參數。有下列三NAL單元被指定於H.264/AVC中以攜帶序列參數集合：序列參數集合NAL單元，其包含用於序列中之H.264/AVC VCL NAL單元的所有資料；序列參數集合延伸NAL單元，其包含用以輔助編碼圖像之資料；以及用於MVC以及SVC VCL NAL單元之子集合序列參數集合。一圖像參數集合(PPS)包含很可能於許多編碼圖像中未被改變之此等參數。

參數集合語法結構可以具有延伸機構，例如，其可被使用以包含特定於一編碼標準之延伸的參數。一延伸機構之範例語法在下面被提供以供用於SPS：

一編碼標準或一編碼機構之特定版本的解碼器可以忽略sps_extension_data_flag，而於該編碼標準或編碼機構之另一版本中，一延伸語法結構可被指定並且可出現在sps_extension_data_flag位元之內。相似延伸機構也可被指定以供用於其他型式之參數集合。

於一草案HEVC中，同時也有一第三型式之參數集合，其於此處被稱為適應性參數集合(APS)，其包含很可能是於許多編碼片段中未被改變的參數。於一草案HEVC中，APS語法結構包含關於脈絡為基礎之適應式二進制算術編碼(CABAC)、適應式樣本偏移、適應式迴路過濾、以及解塊效應過濾之參數或語法元素。於一草案HEVC中，一APS是一NAL單元並且被編碼而不必來自任何其他的NAL單元之參考或預測。一識別符，其被稱為aps_id語法元素，被包含於APS NAL單元中，並且被包含以及被使用於片段檔頭中以涉及一特定的APS。但是，APS不被包含於最後H.265/HEVC標準中。

H.265/HEVC也包含另一型式之一參數集合，其被稱為一視訊參數集合(VPS)。一視訊參數集合RBSP可包含一個或多個序列參數集合RBSP所參考之參數。

在VPS、SPS、以及PPS之間的關係以及層次結構可在下面被說明。VPS於參數集合層次結構中存在於SPS上方之一位準以及於調整性及/或3DV脈絡中。VPS可包含對於跨越整個編碼視訊序列中所有(調整性或視圖)層之所有片段的共同參數。SPS包含於整個編碼視訊序列中一特定(調整性或視圖)層之所有片段中之共同參數，並且其可被複數個(調整性或視圖)層所共用。PPS包含於一特定層表示(於一存取單元中之一調整性或視圖層之表示)的所有片段之共同參數並且其是很可能被複數個層表示中的所有片段所共用。

VPS可以提供關於一位元流中之層的從屬關係之資訊，以及可應用至整個編碼視訊序列中跨越所有(調整性或視圖)層的所有片段之許多其他資訊。於HEVC、VPS之一可調整延伸中可以，例如，包含自NAL單元檔頭被導出之LayerId數值至一個或多個可調整尺度數值之一映射，例如，對應至對於相似於SVC以及MVC被界定之層的dependency_id、quality_id、view_id、以及depth_flag。VPS可包含供用於一個或多個層之概示及位準資訊以及供用於一層表示之一個或多個時間子層(包含在特定TemporalId數值及之下的VCL NAL單元)之概示及/或位準。VPS也可以提供呈現於位元流中之最大層數目。例如，語法元素vps_max_layers_minus1可被包含於語法中並且vps_max_layer_minus1+1可以指示呈現於位元流中之最大層數目。位元流中之實際層數目可以是較小於或等於vps_max_layer_minus1+1。

意欲為VPS之一部份的一VPS延伸之範例語法被提供於下面。所呈現的VPS延伸提供有關之從屬關係。應了解，VPS延伸語法被提供作為一範例並且其他相似及/或延伸的語法結構可藉由不同實施例而等效地被應用。

所呈現的VPS延伸語義可如下列段落中所述地被明定。

vps_extension_byte_alignment_reserved_one_bit是等於1並且被使用以達成下一個語法元素至一位元組邊界之對齊。

scalability_mask[i]等於1指示對應至第i個調整維度的dimension_id語法元素被呈現。scalability_mask[i]等於0指示對應至第i個調整維度的dimension_id語法元素是不呈現。對應至scalability_mask[i]中之I的各個數值之調整維度可被明定，例如，以包含下列者或其他調整維度之任何子集合。

dimension_id_len_minusl[j]+1指定位元中之dimension_id[i][j]語法元素的長度。vps_nuh_layer_id_present_flag指示layer_id_in_nuh[i]語法是否呈現。layer_id_in_nuh[i]指定第i層之VCL NAL單元中的nuh_layer_id語法元素之數值。當不呈現時，layer_id_in_nuh[i]之數值被推論是為等於i。layer_id_in_nuh[i]是較大於layer_id_in_nuh[i-1]。變量LayerIdxInVps[layer_id_in_nuh[i]]被設定為等於i。dimension_id[i][j]指定第i層之第j個調整維度型式識別符。當不呈現時，dimension_id[i][j]之數值被推論是等於0。被使用於dimension_id[i][j]表示之位元數目是dimension_id_len_minus1[j]+1位元。

direct_dependency_flag[i][j]等於0指定具有索引j之層不是用於具有索引I之層的一直接參考層。direct_dependency_flag[i][j]等於1指定具有索引j之層可以是用於具有索引i之層的一直接參考層。當對於0至vps_max_num_layers_minus1之範圍中的i及j，direct_dependency_flag[i][j]是不呈現時，其被推論將是等於0。

變量NumDirectRefLayers[i]以及RefLayerId[i][j]可如下所述地被導出：

direct_dep_type_len_minus2+2指定

direct_dependency_type[i][j]語法元素之位元數目。

direct_dependency_type[i][j]等於0指示樣本預測可被使用並且移動預測不被使用於自藉由j被辨識的層預測藉由i被辨識的層。direct_dependency_type[i][j]等於1指示移動預測可被使用並且樣本預測不被使用於自藉由j被辨識的層預測藉由i被辨識的層。

direct_dependency_type[i][j]等於2指示樣本以及移動預測兩者皆可被使用於自藉由j被辨識的層預測藉由i被辨識的層。

變量NumSamplePredRefLayers[i]、NumMotionPredRefLayers[i]、SamplePredEnabledFlag[i][j]、MotionPredEnabledFlag[i][j]、NumDirectRefLayers[i]、RefLayerId[i][j]、MotionPredRefLayerId[i][j]、及SamplePredRefLayerId[i][j]可如下所述地被導出：

H.264/AVC以及HEVC語法允許有許多參數集合之實例，並且各實例藉由一唯一的識別符被辨識。於 H.264/AVC中，各個片段檔頭包含圖像參數集合之識別符，其是作用於包含片段之圖像的解碼，並且各個圖像參數集合包含作用序列參數集合之識別符。因此，圖像以及序列參數集合之發送不必須得精確地與片段之發送同步。相反地，作用序列以及圖像參數集合在它們被參考之前隨時地被接收是足夠的，比較至被使用於片段資料之協定，其允許使用更可靠的發送機構之參數集合以“頻帶外”方式之發送。例如，參數集合可被包含作為用於及時輸送協定(RTP)會期之會期說明中的參數。如果參數集合以頻帶內方式被發送，它們可被重複以改進誤差健全性。

一SEI NAL單元可包含一個或多個SEI訊息，其不是用於輸出圖像之解碼所需的，但是協助相關處理程序，例如，圖像輸出時序、顯現、誤差檢測、誤差隱匿、以及資源預留。許多SEI訊息被指定於H.264/AVC和HEVC中，並且使用者資料SEI訊息致能機構以及公司以指定供他們獨自使用的SEI訊息。H.264/AVC以及HEVC包含供用於指定的SEI訊息之語法以及語義，但是無用以處理接受者中之訊息的處理程序被界定。因此，當它們產生SEI訊息時，編碼器是需要遵循H.264/AVC標準或HEVC標準，並且解碼器不需要分別地遵循H.264/AVC標準或HEVC標準以處理供用於輸出順序遵循之SEI訊息。於H.264/AVC以及HEVC中包含SEI訊息之語法以及語義的理由之一是允許不同的系統規格相同地解釋增補資訊並且因此進行相互操作。其意欲於編碼端中以及於解碼端中，系統規格可需要使用特定SEI訊息，並且另外地用以處理接受者中之特定SEI訊息的處理程序可被指定。

一編碼圖像是一圖像之一編碼表示。於H.264/AVC中之一編碼圖像包含用於圖像解碼所需的VCL NAL單元。於H.264/AVC中，一編碼圖像可以是一主要編碼圖像或一冗餘編碼圖像。一主要編碼圖像被使用於有效位元流的解碼處理程序中，而一冗餘編碼圖像是一冗餘表示，其僅當主要編碼圖像無法成功地被解碼時才被解碼。於一草案HEVC中，沒有冗餘編碼圖像被指定。

於H.264/AVC以及HEVC中，一存取單元包含一主要編碼圖像以及與其相關聯的那些NAL單元。於HEVC中，一存取單元被界定作為一組NAL單元，該組NAL單元依據一指定的分類規則而是彼此相關聯的、在解碼順序中是連續的、並且正好包含一編碼圖像。於H.264/AVC中，在一存取單元內之NAL單元的出現順序是受限定，如下所述。一選項存取單元分隔符NAL單元可指示一存取單元之開始。其之後是接著零個或更多個SEI NAL單元。主要編碼圖像之編碼片段接著出現。於H.264/AVC中，主要編碼圖像之編碼片段之後可接著用於零個或更多個冗餘編碼圖像之編碼片段。一冗餘編碼圖像是一圖像或一圖像之一部份的編碼表示。如果主要編碼圖像未被解碼器所接收，例如，由於發送中之損失或實際儲存媒體中之一毀損，則一冗餘編碼圖像可被解碼。

於H.264/AVC中，一存取單元也可包含一輔助編碼圖像，其是增補主要編碼圖像之一圖像並且可被使用，例如，於顯示處理程序中。一輔助編碼圖像可以，例如，被使用作為指定解碼圖像中之樣本透明度位準的一最初通道或最初平面。一最初通道或平面可被使用於一層狀組合或顯現系統，其中輸出圖像藉由在彼此頂部上至少部份透明之重疊圖像而被形成。一輔助編碼圖像具有相同如一單色冗餘編碼圖像之語法和語義限制。於H.264/AVC中，一輔助編碼圖像包含如主要編碼圖像之相同巨塊數目。

於HEVC中，一存取單元可被界定作為依據一指定的分類規則而彼此相關聯的一組NAL單元，其在解碼順序中是連續的，並且正好地包含一編碼圖像。除了包含編碼圖像之VCL NAL單元外，一存取單元也可包含非VCL-NAL單元。於HEVC中，一存取單元之解碼形成一解碼圖像。

於H.264/AVC中，一編碼視訊序列被界定為解碼順序中之一連續存取單元序列，其自一IDR存取單元，包括性，至下一個IDR存取單元，不包括性，或至位元流端點，視何者較早出現。於HEVC中，一編碼視訊序列被界定而為解碼順序中之一存取單元序列，其包含位元流中之第一存取單元的一CRA(完全隨機存取)存取單元，以及IDR存取單元或一BLA(斷續鏈路存取)存取單元，其之後接著零個或更多個非IDR並且非BLA存取單元，包含高至但是不包含任何依序的IDR或BLA存取單元的所有依序存取單元。

一圖像族群(GOP)以及其之特性可如下列所述地被界定。一GOP可無關於任何先前圖像是否被解碼而被解碼。一開放式GOP是一圖像族群，於其中當解碼開始自開放式GOP之啟始像框內圖像時，在輸出順序中先前於啟始像框內圖像之圖像可能不是正確地可解碼。換言之，一開放式GOP之圖像可能涉及(於像框間預測中)屬於一先前GOP之圖像。一H.264/AVC解碼器可自一H.264/AVC位元流中恢復點SEI訊息辨識開始一開放式GOP的一像框內圖像。一HEVC解碼器可辨識開始一開放式GOP的一像框內圖像，因為一特定NAL單元型式、CDR NAL單元型式，被使用於其之編碼片段。一封閉式GOP是一圖像族群，於其中當解碼自封閉式GOP之啟始像框內圖像開始時，所有的圖像可正確地被解碼。換言之，在一封閉式GOP中沒有圖像涉及先前GOP中的任何圖像。於H.264/AVC和HEVC中，一封閉式GOP自一IDR存取單元開始。於HEVC中，一封閉式GOP也可自BLA W DLP或一BLA N LP圖像開始。結果，比較至開放式GOP結構時，封閉式GOP結構具有更多誤差彈性可能，但其成本是可能降低壓縮效率。開放式GOP編碼結構由於有較大彈性之參考圖像的選擇，而可能是具有更高的壓縮效能。

H.264/AVC和HEVC之位元流語法指示一特定圖像是否為用於任何其他圖像之像框間預測的一參考圖像。任何編碼型式(I，P，B)的圖像可以是H.264/AVC和HEVC 中之參考圖像或非參考圖像。NAL單元檔頭指示NAL單元之型式以及被包含於NAL單元中之一編碼片段是否為一參考圖像或一非參考圖像之一部份。

許多混合視訊編解碼器，包含H.264/AVC以及HEVC，於二相位中編碼視訊資訊。於第一相位中，預測編碼被應用，例如，所謂的樣本預測及/或所謂的語法預測。

於樣本預測中，某一圖像區域或“區塊”中之像素或樣本數值被預測。這些像素或樣本數值可被預測，例如，使用一個或多個之下列方式：

- 移動補償機構(其也可被稱為時間預測或移動補償時間預測或移動補償預測或MCP)，其包含尋找以及指示於密切地對應至正被編碼的區塊之先前被編碼視訊像框的一者中之一區域。

- 視圖間預測，其包含尋找以及指示於密切地對應至正被編碼的區塊之先前被編碼視圖元件的一者中之一區域。

- 視圖合成預測，其包含合成一預測區塊或一影像區域，其中一預測區塊依據重建/解碼距離資訊被導出。

- 使用重建/解碼樣本之層間預測，例如，所謂的SVC之IntraBL(基底層)模式。

- 層間殘差預測，於其中，例如，一參考層之編碼殘差或導自一重建/解碼參考層圖像以及一對應的重建/解碼增強層圖像之一差量的一導出殘差可被使用於預測目前增強層區塊之一殘差區塊。一殘差區塊可被添加，例如，至一移動補償預測區塊以得到供用於目前增強層區塊之一最後預測區塊。

- 像框內預測，其中像素或樣本數值可藉由包含尋找以及指示一空間區域關係之空間機構而被預測。

於語法預測中，其也可被稱為參數預測，語法元素及/或語法元素數值及/或自語法元素導出之變量自早期被編(解)碼之語法元素及/或早期被導出之變量而被預測。非限定性之語法預測範例被提供如下：

- 於移動向量預測中，移動向量，例如，用於像框間及/或視圖間預測，可相對於一區塊特定預測移動向量而差分地被編碼。於許多視訊編解碼器中，預測移動向量以一預定方式被產生，例如，藉由計算被編碼或被解碼之相鄰區塊的移動向量之中值。產生移動向量預測之另一方式，有時被稱為先進移動向量預測(AMVP)，是用以自時間參考圖像中之相鄰區塊及/或共同定位區塊而產生一候選者預測列表並且傳信所選擇之候選者作為移動向量預測器。除了預測移動向量數值之外，先前被編碼/被解碼圖像之參考索引可被預測。該參考索引一般自時間參考圖像中之相鄰區塊及/或共同定位區塊被預測。移動向量之差分編碼一般在跨越片段邊界時不被引動。

- 區塊分割，例如，自CTU被分割至CU並且向下至PU，可被預測。

- 於過濾參數預測中，例如，供用於樣本適應式偏移之過濾參數可被預測。

使用來自一先前編碼影像之影像資訊的預測方法也可被稱為像框間預測方法，其也可被稱為時間預測與移動補償。使用在相同影像內之影像資訊的預測方法也可被稱為像框內預測方法。

第二相位是編碼在預測像素區塊或樣本以及原始像素區塊或樣本之間的誤差者。這可藉由使用一指定轉換而轉換像素或樣本數值中之差量而被達成。這轉換可以是，例如，離散餘弦轉換(DCT)或其之一不同者。在轉換該差量之後，轉換之差量被量化並且被熵編碼。

藉由變化量化處理程序之保真度，編碼器可控制在像素或樣本表示的精確度(亦即，圖像視覺品質)以及所產生的編碼視訊表示大小(亦即，檔案大小或發送位元率)之間的平衡。

解碼器藉由應用相似於被編碼器所使用的一預測機構而重建輸出視訊，以便形成一像素或樣本區塊之預測表示(使用由編碼器所產生以及被包含於影像之壓縮表示中的移動或空間資訊)以及預測誤差解碼(預測誤差編碼之反向操作以回復空間領域中被量化的預測誤差信號)。

在應用像素或樣本預測以及誤差解碼處理程序之後，解碼器組合預測以及預測誤差信號(像素或樣本數值)以形成輸出視訊像框。

解碼器(以及編碼器)也可應用另外的過濾處理程序，以便在傳送它之前改進輸出視訊之品質以供用於顯示及/或儲存作為用於視訊序列中即將到來的圖像之一預測參考。

於許多視訊編解碼器中，包含H.264/AVC以及HEVC，移動資訊藉由與各個移動補償影像區塊相關聯的移動向量被指示。這些移動向量之各者代表於被編碼(於編碼器中)或被解碼(在解碼器)之圖像中的影像區塊以及於先前被編碼或被解碼之影像(或圖像)之一者中的預測來源區塊之位移。H.264/AVC以及HEVC，如許多其他視訊壓縮標準，劃分一圖像成為一些矩形網格，對於其各者，在參考圖像之一者中的一相似區塊被指示以供用於像框間預測。預測區塊之位置被編碼作為一移動向量，其指示相對於正被編碼之區塊的預測區塊之位置。

H.264/AVC以及HEVC包含一圖像順序計數(POC)之概念。對於各圖像之一POC數值被導出並且因於輸出順序中具有增加圖像位置而不會減少。因此POC指示圖像之輸出順序。POC可被使用於解碼處理程序中，例如，用於雙向預測片段之時間直接模式中的移動向量之隱含調整，以供用於加權預測中之隱含地被導出之加權，以及用於參考圖像列表啟始化。進一步地，POC可被使用於輸出順序遵循之確認。於H.264/AVC中，POC被指定而相對至先前的IDR圖像或包含標記所有圖像如“未被使用以供參考”之一記憶體管理控制操作的一圖像。

像框間預測處理程序可具特徵於使用一個或多個下列因數。

移動向量表示之精確度。例如，移動向量可以是四分之一像素精確度，並且於小數像素位置之樣本數值可使用一有限脈衝響應(FIR)濾波器被得到。

用於像框間預測之區塊分割。許多編碼標準，包含H.264/AVC以及HEVC，允許區塊大小以及形狀之選擇，於其中一移動向量被應用於編碼器中之移動補償預測，並且於位元流中指示所選擇的大小以及形狀，因而解碼器可重建在編碼器中所完成的移動補償預測。

用於像框間預測之參考圖像數目。像框間預測之來源是先前被解碼之圖像。許多編碼標準，包含H.264/AVC以及HEVC，依據區塊為基礎而致能供用於像框間預測之複數個參考圖像的儲存以及被使用之參考圖像的選擇。例如，於H.264/AVC中參考圖像可依據巨型區塊或巨型區塊分割為基礎並且於HEVC中則依據PU或CU為基礎而被選擇。許多編碼標準，例如，H.264/AVC以及HEVC，包含位元流中之語法結構，其致能解碼器以產生一個或多個參考圖像列表。對於一參考圖像列表之一參考圖像索引可被使用以指示複數個參考圖像之哪一者被使用於一特定區塊之像框間預測。一參考圖像索引可於一些框間編碼模式中利用一編碼器被編碼成為位元流或其可於一些其他框間編碼模式中被導出(藉由一編碼器以及一解碼器)，例如，使用鄰近的區塊。

移動向量預測。為了於位元流中有效地表示移動向量，移動向量可相對於一區塊特定預測移動向量而差分地被編碼。於許多視訊編解碼器中，預測移動向量以預定方式被產生，例如，藉由計算被編碼或被解碼之相鄰區塊的移動向量之中值。產生移動向量預測之另一方式，有時被稱為先進移動向量預測(AMVP)，其是自時間參考圖像中之相鄰區塊及/或共同定位區塊而產生一候選者預測列表並且傳信被選擇候選者作為移動向量預測器。除了預測移動向量數值之外，先前被編碼/被解碼圖像之參考索引可被預測。參考索引可被預測，例如，自時間參考圖像中之相鄰區塊及/或共同定位區塊。移動向量之差分編碼可能因跨越片段邊界而失能。

多個假設移動補償預測。H.264/AVC以及HEVC致能於P片段(此處被稱為單向預測片段)中之單一預測區塊的使用或用於雙向預測片段(其也被稱為B片段)之二移動補償預測區塊的一線性組合。於B片段中之分別的區塊可以是雙向預測、單向預測、或像框內預測，並且P片段中之分別的區塊可以是單向預測或像框內預測。用於一雙向預測圖像之參考圖像可以不受限定於輸出順序中之依序圖像以及先前圖像，但是任何參考圖像可被使用。於許多編碼標準中，例如，H.264/AVC以及HEVC，一參考圖像列表，被稱為參考圖像列表0，被構成以供用於P片段，並且二參考圖像列表，列表0以及列表1，被構成以供用於B片段。對於B片段，當向前方向中之預測時可以涉及來自參考圖像列表0中之一參考圖像的預測，並且向後方向中之預測時可以涉及來自參考圖像列表1中之一參考圖像的預測，即使用於預測之參考圖像可具有彼此相關或相關於目前圖像之任何解碼或輸出順序。

加權預測。許多編碼標準使用1之一預測加權以供用於像框間(P)圖像之預測區塊以及0.5之一預測加權以供用於一B圖像之各預測區塊(導致平均)。H.264/AVC允許用於P以及B片段兩者之加權預測。於隱含式加權預測中，加權是成比例於圖像順序計數(POC)，而於顯式加權預測中，預測加權是明確地被指示。

於許多視訊編解碼器中，在移動補償之後的預測殘差是首先藉由一轉換核心(類似DCT)被轉換並且接著被編碼。這樣做的理由是，在殘差以及轉換之中往往還存在一些相關性而可於許多情況中有助於減低這相關性並且提供更有效之編碼。

於一草案HEVC中，各個PU具有與其相關聯的預測資訊，其界定何種預測是將被應用於PU內之像素(例如，用於像框間預測PU之移動向量資訊以及用於像框內預測PU之像框內預測方向性資訊)。同樣地，各個TU是與一資訊相關聯，其說明在TU內之樣本的預測誤差解碼處理程序(包含，例如，DCT係數資訊)。其可在CU位準被傳信預測誤差編碼是否被應用於各CU。於沒有預測誤差殘差與CU相關聯情況中，其可被考慮為沒有TU供用於CU。

於一些編碼格式以及編解碼器中，在所謂的短期以及長期參考圖像之間需要一區分。這區分可影響一些解碼處理程序，例如，時間直接模式或隱含式加權預測中之移動向量調整。如果被使用於時間直接模式之兩參考圖像是短期參考圖像，則被使用於該預測中之移動向量可依據在目前圖像以及各個參考圖像之間的圖像順序計數差量而調整。但是，如果用於時間直接模式之至少一參考圖像是一長期參考圖像，移動向量之原定調整可被使用，例如，調整該移動為一半以可被使用。同樣地，如果一短期參考圖像被使用於隱含式加權預測，則預測加權可依據在目前圖像的POC以及參考圖像的POC之間的POC差量被調整。但是，如果一長期參考圖像被使用於隱含式加權預測，則一原定預測加權可被使用，例如，0.5，在供用於雙向預測區塊之隱含式加權預測中。

一些視訊編碼格式，例如，H.264/AVC，包含frame_num語法元素，其被使用於關於複數個參考圖像之各種解碼處理程序。於H.264/AVC中，供用於IDR圖像之frame_num的數值是0。在解碼順序中，供用於非IDR圖像之frame_num的數值是等於先前參考圖像的frame_num被增量1(於模數算術，亦即，在frame_num的一最大數值之後，frame_num之數值回至0)。

供用於(被解碼)參考圖像標記之一語法結構可存在於一視訊編碼系統中。例如，當圖像之解碼已被完成時，解碼參考圖像標記語法結構，如果呈現的話，則可被使用以適應地標記圖像為“未供使用於參考”或“供使用於長期參考”。如果解碼參考圖像標記語法結構是不呈現並且被標記為“供使用於參考”之圖像數目不再增加，則一滑動視窗參考圖像標記可被使用，其基本上標記最早(在解碼順序中)被解碼的參考圖像作為未供使用於參考。

H.264/AVC指定用於解碼參考圖像標記之處理程序，以便控制解碼器中之記憶體消耗。被使用於像框間預測之參考圖像的最大數目，被稱為M，被決定於序列參數集合中。當一參考圖像被解碼時，其被標記為“被使用於供參考”。如果導致更多於M圖像之參考圖像的解碼被標記為“被使用於供參考”，則至少一圖像被標記為“未被使用於供參考”。有二種型式之操作以供用於解碼參考圖像標記：適應式記憶體控制以及滑動視窗。用於解碼參考圖像標記之操作模式依據圖像為基礎被選擇。適應式記憶體控制致動顯現傳信哪個圖像被標記為“未被使用於供參考”並且也可指定長期索引至短期參考圖像。適應式記憶體控制可能需要位元流中之記憶體管理控制操作(MMCO)參數的存在。MMCO參數可被包含於一解碼參考圖像標記語法結構中。如果滑動視窗操作模式是使用中並且有M個圖像被標記為“被使用於供參考”，則在那些被標記為“被使用於供參考”的短期參考圖像之中的第一解碼圖像之短期參考圖像被標記為“未被使用於供參考”。換言之，滑動視窗操作模式導致在短期參考圖像之中的先入先出緩衝操作。

H.264/AVC中之記憶體管理控制操作之一者導致所有的參考圖像(除了目前圖像之外)將被標記為“未被使用於供參考”。一即時解碼更新(IDR)圖像僅包含像框內編碼片段並且導致參考圖像之一相似“重設”。

於一草案HEVC中，參考圖像標記語法結構以及相關之解碼處理程序已為一參考圖像集合(RPS)語法結構所取代，並且解碼處理程序被使用於一相似目的。對於一圖像有效或作用之一參考圖像集合包含在解碼順序中所有被使用作為對於該圖像之參考的參考圖像以及被保持標記為“被使用於供參考”以供用於任何依序圖像的所有參考圖像。有六個參考圖像集合之子集，其為RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr、以及RefPicSetLtFoll。六個子集之標誌是如後所述。“Curr”涉及被包含於目前圖像之參考圖像列表中的參考圖像並且因此可被使用作為對於目前圖像之像框間預測參考。“Foll”涉及不被包含於目前圖像之參考圖像列表中之參考圖像，但是在解碼順序中可被使用於依序的圖像中作為參考圖像。“St”涉及短期參考圖像，其一般可經由他們的POC數值之某一數目最不主要位元被辨識。“Lt”涉及長期參考圖像，相對至可藉由上述某一數目最不主要位元之被表示之目前圖像，其可明確地被辨識並且一般具有一較大的POC數值之差量。“0”涉及具有一比目前圖像較小的POC數值之那些參考圖像。“1”涉及具有一比目前圖像較大之POC數值的那些參考圖像。RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0以及RefPicSetStFoll1是整體地被稱為參考圖像集合之短期子集。RefPicSetLtCurr以及RefPicSetLtFoll整體地被稱為參考圖像集合之長期子集。

於HEVC中，一參考圖像集合可被指定於一圖像參數集合中並且可經由一索引至參考圖像集合而採納於片段檔頭中之使用。一參考圖像集合也可被指定於一片段檔頭中。一參考圖像集合之一長期子集合一般僅被指定於一片段檔頭中，而相同參考圖像集合之短期子集合則可被指定於圖像參數集合或片段檔頭中。一參考圖像集合可獨立地被編碼或可自另一參考圖像集合被預測(習知為像框間-RPS預測)。當一參考圖像集合是獨立地被編碼時，語法結構包含高至遍歷不同型式的參考圖像之三個迴路；具有較低於目前圖像的POC數值之短期參考圖像、具有較高於目前圖像的POC數值之短期參考圖像、以及長期參考圖像。各個迴路項目指定將被標記為“被使用於供參考”之一圖像。一般而言，圖像被指定一差分POC數值。像框間-RPS預測所揭露的事實是目前圖像之參考圖像集合可自一先前解碼圖像之參考圖像集合被預測。這是因為目前圖像的所有參考圖像是先前圖像或先前被解碼之圖像本身的參考圖像。僅需指示這些圖像之何者應是參考圖像並且將被使用於目前圖像之預測。在兩個型式的參考圖像集合編碼中，一旗標(used_by_curr_pic_X_flag)對於各參考圖像另外地被傳送以指示該參考圖像是否被使用作為目前圖像之參考(被包含於一*Curr列表中)或不是(被包含於一*Foll列表中)。被包含於被目前片段所使用之參考圖像集合中的圖像被標記為“被使用於供參考”，並且不被包含於被目前片段所使用之參考圖像集合中的圖像被標記為“未被使用於供參考”。如果目前圖像是一IDR圖像，則RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr、以及RefPicSetLtFoll是都被設定為空白。

一解碼圖像緩衝器(DPB)可被使用於編碼器中及/或解碼器中。有二個理由以緩衝解碼圖像，供用於像框間預測參考以及供用於重新排列解碼圖像成為輸出順序。由於H.264/AVC以及HEVC對於參考圖像標記以及輸出重新排列兩者提供一很大的彈性，供用於參考圖像緩衝以及輸出圖像緩衝之各別的緩衝器可能浪費記憶體資源。因此，DPB可包含供用於參考圖像以及輸出重新排列之一統一的解碼圖像緩衝處理程序。當一解碼圖像不再被使用作為一參考並且是不再需要供用於輸出時，該解碼圖像可自DPB被移除。

於H.264/AVC以及HEVC之許多編碼模式中，供用於像框間預測之參考圖像藉由一索引被指示至一參考圖像列表。該索引可藉由CABAC或變量長度編碼而被編碼。一般而言，索引愈小，則對應的語法元素可能成為愈短。於H.264/AVC以及HEVC中，二參考圖像列表(參考圖像列表0以及參考圖像列表1)被產生以供用於各個雙向預測(B)片段，並且一參考圖像列表(參考圖像列表0)被形成以供用於各像框間編碼(P)片段。此外，於一草案HEVC標準中，對於一B片段，在最後參考圖像列表(列表0以及列表1)已被建構之後，一組合列表(列表C)可被構成。組合列表可被使用在B片段內之單向預測(同時也習知如單方向預測)。但是，於最後H.265/HEVC標準中，沒有組合列表被建構。

一參考圖像列表，例如，參考圖像列表0以及參考圖像列表1，可於二個步驟中被建構成：第一，一啟始參考圖像列表被產生。啟始參考圖像列表可被產生，例如，依據frame_num、POC、Temporal_id、或在預測層次結構(例如一GOP結構)上之資訊、或其任何組合為基礎。第二，啟始參考圖像列表可藉由參考圖像列表重新排列(RPLR)命令而被重新排列，其同時也習知如參考圖像列表修改語法結構，其可被包含於片段檔頭中。RPLR命令指示被排列至各別的參考圖像列表之開始的圖像。這第二步驟也可被稱為參考圖像列表修改處理程序，並且RPLR命令可被包含於一參考圖像列表修改語法結構中。如果參考圖像集合被使用，則參考圖像列表0可被啟始化以首先包含RefPicSetStCurr0，接著是RefPicSetStCurr1，接著是RefPicSetLtCurr。參考圖像列表1可被啟始化以首先包含RefPicSetStCurr1，接著是RefPicSetStCurr0。啟始參考圖像列表可經由參考圖像列表修改語法結構被修改，其中在啟始參考圖像列表中之圖像可經由針對地列表之一項目索引被辨識。

因為多視圖視訊提供給編碼器以及解碼器，採用像框間視圖冗餘之可能性，解碼視圖間像框也可被包含於參考圖像列表中。

移動向量預測機構以及相關之編碼模式範例被提供於下面之段落中。

除了一差分移動向量被編碼之移動補償巨區塊模式之外，於H.264/AVC中，一P巨區塊也可以所謂的P_Skip型式被編碼。對於這編碼型式，沒有差分移動向量、參考索引、或量化預測誤差信號被編碼成為位元流。利用P_Skip型式被編碼之一巨區塊的參考圖像於參考圖像列表0中具有索引0。被使用於重建P_Skip巨區塊之移動向量使用平均移動向量預測被得到，以供用於巨區塊而不需添加任何差分移動向量。P_Skip可以是有利於壓縮效能，尤其是移動像場是平穩的區域中。

於H.264/AVC之B片段中，四種不同型式的像框間預測被支援：來自參考圖像列表0之單向預測、來自參考圖像列表1之單向預測、雙向預測、直接預測，以及B_skip。像框間預測型式可針對各巨區塊分割而分別地被選擇。B片段採用一相似巨區塊分割作為P片段。對於一雙向預測巨區塊分割，預測信號藉由移動補償列表0以及列表1預測信號之一加權平均被形成。參考索引、移動向量差量、以及量化預測誤差信號可被編碼以供用於單向預測以及雙向預測B巨區塊分割。

二個直接模式被包含於H.264/AVC中，時間直接及空間直接，以及它們之一者可被選擇以供一片段檔頭中之一片段的使用，雖然他們的使用可能進一步地受限定，例如，於圖表或一類似者中。於時間直接模式中，對於參考圖像列表1之參考索引I被設定為0，且對於參考圖像列表0之參考索引被設定，以指向參考圖像，其被使用於參考圖像列表1中之具有索引0的參考圖像之併置區塊(比較至目前區塊cb)中，如果該參考圖像是可用的話，或被設定為0如果該參考圖像是不可用的話。對於cb之移動向量預測器實際上藉由考慮在參考圖像列表1中具有索引0之參考圖像的一併置區塊內之移動資訊被導出。供用於一時間直接區塊之移動向量預測器自併置區塊而藉由調整一移動向量被導出。該調整是成比例於與列表0以及列表1中所推論的參考索引相關聯的目前圖像以及參考圖像之間的圖像順序計數差量，以及藉由依據正使用之參考圖像列表而選擇供用於移動向量預測器之符號。

在H.264/AVC之空間直接模式中，空間相鄰區塊之移動資訊被利用。空間直接模式中之移動向量預測可被劃分成為三步驟：參考索引判定、單向或雙向預測之判定、以及移動向量預測。於第一步驟中，具有最小非負參考索引(亦即，非像框內區塊)之參考圖像是選自鄰近區塊A、B與C的參考圖像列表0以及參考圖像列表1之各者(其中A是在目前區塊左方上之相鄰區塊，B是在目前區塊上方之相鄰區塊並且C是在目前區塊頂部右側上之相鄰區塊)。如果無非負參考索引存在於鄰近區塊A、B以及C之參考圖像列表0中，並且同樣沒有非負參考索引存在於鄰近區塊A、B以及C之參考圖像列表1中，則參考索引0被選擇以供用於兩個參考圖像列表。

對於H.264/AVC空間直接模式之單向或雙向預測的使用如下所述地被決定：如果供用於兩參考圖像列表之一最小非負參考索引被發現於參考索引判定步驟中，則雙向預測被使用。如果供用於參考圖像列表0或參考圖像列表1之任一者但不是兩者的一最小非負參考索引被發現於參考索引判定步驟中，則分別地來自參考圖像列表0或參考圖像列表1之任一者的單向預測被使用。

對於H.264/AVC空間直接模式之移動向量預測中，某些情況被檢查，例如，一負參考索引是否於第一步驟中被斷定，並且如果被滿足，則一零移動向量被決定。否則，移動向量預測器相似於使用空間相鄰區塊A、B以及C的移動向量之P區塊的移動向量預測器而被導出。

於H.264/AVC中，沒有移動向量差量或參考索引是呈現於位元流中以供用於一直接模式區塊，而量化預測誤差信號可被編碼並且因此呈現於位元流中。於H.264/AVC中，一B_skip巨區塊模式是相似於直接模式，但是無預測誤差信號被編碼並且被包含於位元流中。

H.265/HEVC包含二個移動向量預測機構，亦即，先進移動向量預測(AMVP)以及合併模式。於AMVP 或合併模式中，一移動向量候選者之列表被導出以供用於一PU。有二種候選者：空間候選者以及時間候選者，其中時間候選者也可被稱為TMVP候選者。候選者移動向量預測器之來源被呈現於圖5中。X表示目前預測單元。圖5a中之A₀、A₁、B₀、B₁、B₂是空間候選者而圖5b中之C₀、C₁是時間候選者。

一候選者列表導出可被進行，例如，如下所述地，而應當理解的是，對於候選者列表導出的其他可能性存在。如果候選者列表之佔用度不是最大，如果空間候選者是可用的話並且不是先前地存在於候選者列表中，則空間候選者首先被包含於候選者列表中。在那之後，如果候選者列表之佔用度尚未是最大時，則一時間候選者被包含於候選者列表中。如果候選者之數目仍然未到達最大的允許數目時，則組合的雙向預測候選者(供用於B片段)以及一零移動向量被添加於其中。在候選者列表已被構成之後，編碼器自候選者決定最後移動資訊，例如，基於一位元率-失真最佳化(RDO)決定，並且將所選擇的候選者之索引編碼成為位元流。同樣地，解碼器自位元流解碼所選擇的候選者之索引、建構候選者列表、並且使用該解碼的索引以自候選者列表而選擇一移動向量預測器。

於H.265/HEVC中，AMVP以及合併模式可以是具特徵於下面所述者。於AMVP中，編碼器指示單向預測或雙向預測是否被使用以及哪些參考圖像被使用，且編碼一移動向量差量。於合併模式中，僅自候選者列表被選擇之候選者被編碼進入位元流而指示目前預測單元具有如預測器所指示之相同移動資訊。因此，合併模式產生共用相同移動資訊之鄰近預測區塊所構成的區域，其對於各區域僅傳信一次。於H.265/HEVC中，在AMVP以及合併模式之間的另一差異是AMVP之候選者的最大數目是2而合併模式則是5。

先進移動向量預測，例如，可如後所述地操作，而先進移動向量預測之其他相似實現也是可能的，例如，具有不同候選者位置集合以及具有候選者位置集合之候選者位置。二個空間移動向量預測器(MVP)可被導出並且一時間移動向量預測器(TMVP)可被導出。它們可在下列位置中被選擇：被安置於目前預測區塊(B₀、B₁、B₂)之上面的三個空間移動向量預測器候選者位置以及在左方(A₀、A₁)上之二者。第一移動向量預測器，其是可供用於(例如，存在於相同片段，被像框間編碼，等等)在各個候選者位置集合，(B₀、B₁、B₂)或(A₀、A₁)，之一預先被界定順序，可被選擇以代表移動向量競爭中之預測方向(上方或左方)。供用於時間移動向量預測器之一參考索引可藉由編碼器被指示於片段檔頭中(例如，一collocated_ref_idx語法元素)。自併置之圖像所得到的移動向量可依據時間移動向量預測器、併置圖像、以及目前圖像之參考圖像的圖像順序計數差量比例被調整。此外，一冗餘檢查可在候選者中被進行以移除相同候選者，其可能導致候選者列表中之零移動向量的含入。移動向量預測器可被指示於位元流中，例如，藉由指示空間移動向量預測器方向(上方或左方)或時間移動向量預測器候選者之選擇。

合併/合併模式/處理程序/機構可操作，例如，如隨後所述，而合併模式之其他相似實現也是可能的，例如，藉由不同候選者位置集合以及具有候選者位置集合之候選者位置。

於合併/合併模式/處理程序/機構中，其中一區塊/PU的所有移動資訊被預測並且被使用而不需任何修改/更正。用於一PU之上述移動資訊可以包含一個或多個下列者：1)資訊，有關“PU是否為僅使用參考圖像列表0之單向預測”或“PU是否為僅使用參考圖像列表1之單向預測”或“PU是否為同時使用參考圖像列表0以及列表1之雙向預測”；2)對應至參考圖像列表0的移動向量數值，其可包含一水平以及垂直移動向量元素；3)於參考圖像列表0中之參考圖像索引及/或藉由對應至參考圖像列表0的移動向量被指示之一參考圖像的識別符，其中一參考圖像之識別符可以是，例如，一圖像順序計數數值、一層識別符數值(用於層間預測)、或一圖像順序計數數值以及一層識別符數值之一組對；4)參考圖像之參考圖像標記的資訊，例如，參考圖像是否被標記為“使用於短期參考”或“使用於長期參考”之資訊；5)-7)分別地相同如2)-4)，但卻是用於參考圖像列表1。

同樣地，預測移動資訊使用相鄰區塊及/或時間參考圖像中之共同定位區塊的移動資訊被施行。一列表，時常被稱為一合併列表，可藉由包含與可用之相鄰/共同定位區塊相關聯的移動預測候選者被構成，並且該列表中所選擇的移動預測候選者之索引被傳信以及所選擇之候選者的移動資訊被複製至目前PU之移動資訊。當合併機構被採用於一整個CU並且供用於該CU之預測信號被使用作為重建信號，亦即預測殘差不被處理時，這型式的編碼/解碼CU一般被稱為跳躍模式或合併為基礎的跳躍模式。除了跳躍模式之外，合併機構也可被採用於分別的PU(不一定是如於跳躍模式中之整個CU)，並且在這情況中，預測殘差可被採用以改進預測品質。這型式的預測模式一般被稱作為一跨合併模式。

於供用於AMVP之合併列表及/或候選者列表或任何相似移動向量候選者列表中的候選者之一者可以是一TMVP候選者或一類似者，其可自一被指示或被推論的參考圖像內，例如，於片段檔頭中被指示的參考圖像，之併置區塊被導出。於HEVC中，將被使用於得到一併置分割之參考圖像列表依據片段檔頭中之collocated_from_l0_flag語法元素被選擇。當旗標是等於1時，其指定包含併置分割之圖像自列表0被導出，否則圖像自列表1被導出。當collocated_from_l0_flag不呈現時，其被推論將是等於1。片段檔頭中之collocated_ref_idx指定包含併置分割之圖像的參考索引。當目前片段是一P片段時，collocated_ref_idx涉及列表0中之一圖像。如果collocated_from_l0是1，當目前片段是一B片段時，collocated_ref_idx涉及列表0中之一圖像，否則其涉及列表1中之一圖像。collocated_ref_idx通常涉及一有效列表項目，並且所產生之圖像對於一編碼圖像的所有片段是相同。當collocated_ref_idx不呈現時，其被推論是等於0。

於HEVC中，當移動編碼模式是合併模式時，於合併列表中供用於時間移動向量預測之所謂的目標參考索引被設定為0。當於HEVC中，利用時間移動向量預測之移動編碼模式是先進移動向量預測模式時，目標參考索引數值明顯被指示(例如，每一個PU)。

於HEVC中，一候選者預測移動向量(PMV)之可用性可如下所述地被決定(對於空間以及時間候選者二者)(SRTP=短期參考圖像，LRTP=長期參考圖像)：

於HEVC中，當目標參考索引數值已被決定時，時間移動向量預測之移動向量數值可如下所述地被導出：在與目前預測單元之底部右方相鄰區塊併置(圖5b中之位置C₀)的區塊之移動向量PMV被得到。併置區塊存在之圖像可如上所述被決定，例如，依據片段檔頭中之傳信參考索引。如果在位置C₀之PMV是不可用的，則在併置圖像之位置C₁的移動向量PMV(參看圖5b)被得到。在併置區塊被決定之可用的移動向量PMV相對於一第一圖像順序計數差量以及一第二圖像順序計數差量之比率被調整。第一圖像順序計數差量在包含併置區塊的圖像以及併置區塊之移動向量的參考圖像之間被導出。第二圖像順序計數差量在目前圖像以及目標參考圖像之間被導出。如果併置區塊之移動向量的目標參考圖像以及參考圖像之一者，但不是兩者，是一長期參考圖像(而其他者則是一短期參考圖像)，則TMVP候選者可被考慮為不可用的。如果併置區塊之移動向量的目標參考圖像以及參考圖像兩者都是長期參考圖像，則沒有POC-為基礎的移動向量調整可被應用。

移動參數型式或移動資訊可包含但是不受限定於下列之一個或多個型式：

- 一預測型式之一指示(例如，像框內預測、單向預測、雙向預測)及/或一些參考圖像；

- 一預測方向之一指示，例如，像框間(亦即，時間)預測、層間預測、視圖間預測、視圖合成預測(VSP)、以及元件間預測(其中每參考圖像及/或每預測型式可被指示並且其中在一些實施例中，視圖間以及視圖-合成預測可共同地被視為一預測方向)及/或一參考圖像型式之一指示，例如，一短期參考圖像及/或一長期參考圖像及/或一層間參考圖像(例如，其中每參考圖像可被指示)。

- 對於一參考圖像列表之一參考索引及/或一參考圖像的任何其他識別符(其中，例如，每參考圖像可被指示以及其型式可取決於預測方向及/或參考圖像型式，並且其可伴隨著其他有關的資訊片段，例如，參考索引應用之參考圖像列表或其類似者)；

- 一水平移動向量元件(其可被指示，例如，每個預測區塊或每個參考索引或其類似者)；

- 一垂直移動向量元件(其可被指示，例如，每個預測區塊或每個參考索引或其類似者)；

- 一個或多個參數，例如，圖像順序計數差量及/或在包含或關聯於移動參數之圖像以及其之參考圖像之間的一相對攝影機分離，其可被使用於一個或多個移動向量預測處理程序中之水平移動向量元件及/或垂直移動向量元件的調整(其中該等一個或多個參數可被指示，例如，每個參考圖像或每個參考索引或其類似者)；

- 移動參數及/或移動資訊施加之一區塊的座標，例如，光影樣本單元中的區塊之頂部-左方樣本的座標；

- 移動參數及/或移動資訊施加之一區塊的範圍(例如，一寬度以及一高度)。

一般而言，移動向量預測機構，例如，呈現在上面作為範例的那些移動向量預測機構，可以包含某些預先被界定或被指示之移動參數的預測或遺傳質。

一與一圖像相關聯的移動像場可被考慮以包含一組對於每個被編碼圖像區塊被產生的移動資訊。例如，一移動像場是可藉由一區塊之座標所存取。例如，一移動像場可被使用於TMVP中或任何其他移動預測機構中，其中異於目前(解)編碼圖像之供用於預測之一來源或一參考被使用。

不同的空間粒度或單元可被應用以表示及/或儲存一移動像場。例如，空間單元之一規則性網格可被使用。例如，一圖像可被劃分成為某一大小之矩形區塊(在圖像邊緣，例如，在右方邊緣上以及底部邊緣上可能具有例外的區塊)。例如，空間單元大小可以是等於獨特移動可利用編碼器被指示於位元流中之一最小的尺寸，例如，光影樣本單元中之一4x4區塊。例如，一所謂的壓縮移動像場可被使用，其中空間單元可以是等於一預先界定或指示的尺寸，例如，光影樣本單元中之一16x16區塊，其大小可以是較大於用以指示獨特移動之最小的尺寸。例如，一HEVC編碼器及/或解碼器可以一方式被實行，其中移動資料儲存減低(MDSR)或移動像場壓縮對於各被解碼移動像場被進行(在使用移動像場於圖像之間的任何預測之前)。於一HEVC實行例中，於光影樣本單元中，MDSR可藉由保留可應用至壓縮移動像場中之16x16區塊的頂部-左方樣本的移動而將移動資料之粒度減低至16x16方塊。編碼器可以編碼關於壓縮移動像場之空間單元的指示作為一個或多個語法元素及/或語法元素數值，例如，於一序列位準語法結構中，例如，一視訊參數集合或一序列參數集合。於一些編解碼方法及/或設備中，一移動像場可依據移動預測之區塊分割(例如，依據HEVC標準之預測單元)被表示及/或被儲存。於一些編解碼方法及/或設備中，一規則性網格以及區塊分割之一組合可被應用，因而關聯較大於一預先界定或指示的空間單元大小之分割的移動關聯於那些分割被表示及/或被儲存，而與較小於或未對齊於一預先界定或指示的空間單元大小或網格相關聯之分割的移動被表示及/或被儲存以供用於預先界定或指示之單元。

許多視訊編碼標準指定供用於位元流之緩衝模式以及緩衝參數。此等緩衝模式可被稱為假設性參考解碼器(HRD)或視訊緩衝檢驗器(VBV)。一標準遵循位元流遵循著有一組緩衝參數被指定於對應標準中之緩衝模式。此等供用於一位元流之緩衝參數可以明確地或隱喻地被傳信。“隱喻地被傳信”意味著，例如，依據概示以及位準之原定緩衝參數數值適用。HRD/VBV參數在其他方面之中被使用，以強加限制於符合位元流之位元率變化上。

[164]HRD遵循檢查可以涉及，例如，下列二型式之位元流：這第一型式之位元流，被稱為型式I位元流，是對於位元流中的所有存取單元僅包含VCL NAL單元以及充填資料NAL單元之一NAL單元串流。第二型式的位元流，被稱為型式II位元流，除了對於位元流中的所有存取單元之VCL NAL單元以及充填位元資料NAL單元之外，亦可包含除充填位元資料NAL單元及/或語法元素外之另外的非VCL NAL單元，例如，來自NAL單元流而形成一位元組流之leading_zero_8bit、zero_byte、start_code_prefix_one_3bytes、以及trailing_0_8bits。

二種型式的HRD參數(NAL HRD參數與VCL HRD參數)也可被使用。HRD參數可經由被包含於序列參數集合語法結構中之視訊可用性資訊被指示。

緩衝以及圖像時序參數(例如，被包含於序列參數集合以及圖像參數集合中，於VCL NAL單元中以及緩衝週期與圖像時序SEI訊息中參考)可被傳送至HRD，以一時間方式，在位元流中(藉由非VCL NAL單元)，或藉由自位元流外部地頻帶外構件，例如，使用一傳信機構，例如，被包含於例如，依據會期說明協定(SDP)被格式化之一會期說明之媒體線路中的媒體參數而被傳送。為計數HRD中之位元目的，僅實際上呈現於位元流中之適當位元可被計數。當一非VCL NAL單元之內容藉由一些存在位元流內外之其他構件被傳送以供應用時，如果非VCL NAL單元是於位元流中，當將被使用時，非VCL NAL單元的內容之表示可能使用或可能不使用相同語法。

HRD可以包含一編碼圖像緩衝器(CPB)、一即時解碼處理程序、一解碼圖像緩衝器(DPB)、以及輸出剪輯。

CPB可基於解碼單元而操作。一解碼單元可以是一存取單元或其可以是一存取單元之一子集合，例如，一整數之NAL單元。解碼單元的選擇可於位元流中利用一編碼器被指示。

HRD可如下所述地操作。依據一指定的到達時間排程而流進入CPB中而與解碼單元相關聯的資料可利用假設性訊流排程器(HSS)被傳送。該到達時間排程可利用編碼器被決定並且被指示，例如，經由圖像時序SEI訊息，及/或該到達時間排程可被導出，例如，基於一位元率，其可被指示，例如，作為視訊可用性資訊中的HRD參數之部份(其可被包含於序列參數集合中)。視訊可用性資訊中之HRD參數可包含許多參數集合，各者供用於不同的位元率或傳送時間排程。與各個解碼單元相關聯的資料可在CPB移除時間藉由即時的解碼處理程序而即時地被移除並且被解碼。一CPB移除時間可被決定，例如，使用一啟始CPB緩衝延遲，其可利用編碼器被決定並且被指示，例如，經由一緩衝週期SEI訊息，並且對於各圖像之差分移除延遲被指示，例如，藉由圖像時序SEI訊息。各個解碼圖像被安置於DPB中。一解碼圖像可在DPB輸出時間稍後或不再是預測間參考所需的時間自DPB被移除。因此，HRD的CPB之操作可包含位元流到達時序、解碼單元之解碼單元移除以及解碼時序，因而HRD的DPB之操作可包含自DPB之圖像移除、圖像輸出、以及目前解碼圖像標記與儲存。

HRD可被使用以檢查位元流以及解碼器之遵循性。

HRD之位元流遵循性需求可包含，例如，下列者及/或其類似者。CPB需是不溢位(相對於可被指示之尺寸，例如，在視訊可用性資訊的HRD參數之內)或欠位(亦即，一解碼單元之移除時間不能是較小於解碼單元的最後位元之到達時間)。DPB中之圖像數目需要是較小於或等於一特定最大數目，其可被指示，例如，於序列參數集合中。被使用作為預測參考的所有圖像可能需要被呈現於DPB中。其可能是需要用以自DPB輸出連續圖像之區間是不較小於一特定最小區間。

HRD之解碼器遵循性需求可包含，例如，下列者及/或其類似者。聲明遵循一特定概示以及位準之一解碼器可能需要順利地解碼對於解碼器遵循性被指定的所有遵循位元流，假設VCL NAL單元中參考之所有序列參數集合以及圖像參數集合，以及適當的緩衝週期以及圖像時序SEI訊息，以一時間方式，於位元流(藉由非VCL NAL單元)或藉由外部構件被傳送至解碼器。可以有二種型式之遵循性可由一解碼器被聲明：輸出時序遵循性以及輸出順序遵循性。

為檢查一解碼器之遵循性，遵循於所聲明的概示以及位準之測試位元流可利用一假設性訊流排程器(HSS)被傳送至HRD以及至待測解碼器(DUT)兩者。利用HRD輸出的所有圖像也可能需要利用DUT被輸出，並且對於利用HRD被輸出的各圖像，對於對應的圖像而利用DUT被輸出之所有樣本的數值也可能需要是等於利用HRD被輸出之樣本的數值。

對於輸出時序解碼器遵循性，例如，HSS可藉由選自那些被指示於視訊可用性資訊之HRD參數中之傳送時間排程、或藉由“插入”的傳送時間排程而操作。相同傳送時間排程可被使用於HRD以及DUT兩者。對於輸出時序解碼器遵循性，圖像輸出的時序(相對於第一位元之傳送時間)可被需求是相同於對於HRD和DUT兩者且高至一固定延遲。

對於輸出順序解碼器遵循性，HSS可“藉由自DUT要求”而傳送位元流至DUT，這意味著僅當DUT需要更多位元以進行其之處理時，則HSS傳送位元(以解碼順序方式)。HSS可藉由指定於該位元流中之一時間排程而傳送位元流至HRD，以至於位元率以及CPB大小被限制。圖像輸出順序可要求對於HRD以及DUT兩者是相同的。

於可調整之視訊編碼中，一視訊信號可被編碼進入一基底層以及一個或多個增強層。一增強層可以增強時間解析度(亦即，像框率)、空間解析度、或簡單地增強藉由另一層或其部份被表示之視訊內容品質。各層與所有其之相關層是在一特定空間解析度、時間解析度以及品質位準之視訊信號的一表示。於這文件中，吾人指示與所有其之相關層一起的一可調整層作為一“可調整層表示”。對應至一可調整層表示的一可調整位元流之部份可被抽取以及被解碼以產生在某一保真度之一原始信號表示。

SVC使用一層間預測機構，其中某些資訊可自除了目前重建層或下一個較低層外之層被預測。可以是層間預測之資訊包含像框內紋理結構、移動以及殘差資料。層間移動預測包含區塊編碼模式、檔頭資訊之預測等等，其中來自較低層之移動可被使用於較高層的預測。於像框內編碼之情況中，來自周圍巨區塊或來自較低層之併置巨區塊之一預測是可能的。這些預測技術不採用來自較早編碼存取單元之資訊，並且因此，被稱為像框內預測技術。進一步地，來自較低層的殘差資料也可被採用於目前層之預測。

如之前所指示，MVC是H.264/AVC之一延伸。許多H.264/AVC之定義、概念、語法結構、語義以及解碼處理程序也因此或具有某些概括性或限定性地應用至MVC。MVC的一些定義、概念、語法結構、語義以及解碼處理程序將被說明於下。

MVC中之一存取單元被界定為NAL單元之一集合，其在解碼順序中是連續的並且正好地包含由一個或多個視圖元件構成之主要編碼圖像。除了主要的編碼圖像之外，一存取單元也可包含一個或多個冗餘編碼圖像、一個輔助編碼圖像、或不包含一編碼圖像之片段或片段資料分割的其他NAL單元。當可能影響解碼之解碼錯誤、位元流錯誤或其他錯誤不發生時，一存取單元之解碼形成包含一個或多個解碼視圖元件之一解碼圖像。換言之，MVC中之一存取單元包含供用於一輸出時間實例之視圖的視圖元件。

MVC中之一視圖元件被稱為一單一存取單元中之一視圖的一編碼表示。

視圖間預測可被使用於MVC中並且涉及自相同存取單元之不同視圖元件的解碼樣本之一視圖元件的預測。MVC中，視圖間預測同樣地如像框間預測地被實現。例如，視圖間參考圖像被安置於相同參考圖像列表中作為用於像框間預測之參考圖像，並且一參考索引以及一移動向量相似於視圖間以及參考圖像間地被編碼或被推論。

一錨式圖像是一編碼圖像，於其中所有的片段可以僅參考在相同存取單元內之片段，亦即，視圖間預測可被使用，但是無像框間預測被使用，並且輸出順序中之所有下面的編碼圖像，不使用來自解碼順序中先前於編碼圖像的任何圖像之像框間預測。視圖間預測可被使用於IDR視圖元件，其是一非基本視圖之部份。於MVC中之一基本視圖是於一編碼視訊序列中具有視圖順序索引之最小數值的一視圖。該基本視圖可無關於其他視圖地被解碼並且不使用視圖間預測。基本視圖可利用僅支援單一視圖概示之H.264/AVC解碼器被解碼，例如，H.264/AVC之基線(Baseline)概示或高概示。

於MVC標準中，許多MVC解碼處理程序之子程序使用H.264/AVC標準之各別的子程序，其於H.264/AVC標準之子程序規格中之“視圖元件”、“像框視圖元件”、以及“像場視圖元件”，分別地取代為“圖像”、“像框”、以及“像場”。同樣地，用詞“圖像”、“像框”、以及“像場”通常被使用於下列中以分別地表示“視圖元件”、“像框視圖元件”、以及“像場視圖元件”。

於可調整多視圖編碼中，相同位元流可包含複數個視圖之編碼視圖元件並且至少一些編碼視圖元件可使用品質及/或空間調整性被編碼。

許多視訊編碼器採用拉格朗(Lagrangian)成本函數以找出位元率-失真最佳編碼模式，例如，所需的巨區塊模式以及相關的移動向量。這型式之成本函數使用一加權係數或λ以將由於有損編碼方法以及表示一影像區域中之像素/樣本數值所需的資訊之精確式或估計式數量的精確式或估計式影像失真連繫在一起。該拉格朗成本函數可利用下列之方程式被表示：C=D+λ R

其中C是將被最小化之拉格朗成本，D是具有目前被考慮的模式以及移動向量之影像失真(例如，在原始的影像區塊中以及編碼影像區塊中之間的像素/樣本數值之均方根誤差)，λ是一拉格朗係數並且R是代表重建解碼器中之影像區塊所需的資料(包含代表候選者移動向量之資料數量)之所需的位元數目。

於下列，“層”用詞被使用於任何調整性型式之脈絡中，包含視圖調整性以及深度增強。一增強層涉及任何型式的增強，例如，SNR、空間、多視圖、深度、位元深度、色度格式、及/或色彩域階增強。一基底層也涉及任何型式之基本操作點，例如，一基本視圖、用於SNR/空間調整性之一基底層，或用於深度增強視訊編碼之一紋理結構基本視圖。

可調整視訊編解碼可藉由習知如單迴路解碼的一概念被實現，其中解碼參考圖像僅對於被解碼的最高層被重建，而在較低層的圖像可能無法完全地被解碼或在使用它們於層間預測之後，可能被忽略。於單迴路解碼中，當比較於多迴路解碼時，解碼器進行移動補償並且僅供用於重播(被稱為“所需層”或“目標層”)所需的可調整層之完全圖像被重建，因而減低解碼複雜性。除了所需層外之所有層不需要完全地被解碼，因為所有或部份的編碼圖像資料不是用以重建所需層之所需要的。但是，較低層(較低於目標層)可被使用於層間語法或參數預測，例如，層間移動預測。另外地或不同地，較低層可被使用於層間像框內預測並且因此較低層之像框內編碼區塊可能必須被解碼。另外地或不同地，層間殘差預測可被應用，其中較低層之殘差資訊可被使用於目標層之解碼並且殘差資訊可能需要被解碼或被重建。於一些編碼配置中，一單解碼迴路是用於多數圖像之解碼所需的，而一第二解碼迴路可選擇性被應用以重建所謂的基本表示(亦即，被解碼之基底層圖像)，其可能是作為預測參考所需的，但不是用於輸出或顯示。

有正在進行之標準化活動以指定HEVC之一多視圖延伸(其可被稱為MV-HEVC)、HEVC之一深度增強多視圖延伸(其可被稱為3D-HEVC)、以及HEVC之一可調整延伸(其可被稱為SHVC)。一多迴路解碼操作已被設想將被使用於所有這些規格中。

於利用多迴路編解碼之可調整視訊編碼機構中，對於各被編(解)碼層之解碼參考圖像可被保留於一解碼圖像緩衝器(DPB)中。用於DPB之記憶體消耗因此可顯著地較高於具有單迴路編解碼操作之可調整視訊編碼機構。但是，比較於單層編碼，多迴路編解碼可具有其他優點，例如，相對地較少添加部份。

於具有多迴路解碼之可調整視訊編碼中，增強層可自先前已在基本(參考)層中被解碼之圖像地被預測。此等圖像可被儲存於基底層之DPB中並且可被標記為被使用以供參考。於某些情況中，被標記為被使用於供參考之一圖像可被儲存在快速記憶體中，以便提供快速隨機存取至其之樣本，並且在圖像被假設將被顯示之後仍然可被儲存，以便被使用作為用於預測之參考。這強加需求於記憶體機構上。為了緩和此等記憶體之需求，於多迴路多層視訊編碼機構中(例如，MVC)，一習見的設計假設層間預測之被限制使用。用於增強視圖之層間/視圖間預測被允許來自位於相同存取單元的基本視圖之一解碼圖像，換言之，代表在同時實體之場景。於此等設計中，對於各參考視圖，可用於預測增強視圖的參考圖像數目被增加1。

已被提出在具有被標記使用作為參考之多迴路編解碼操作圖像的可調整視訊編碼中，不需要自所有層中的相同存取單元發起。例如，一較小數目的參考圖像可被保留於比較至基底層的一增強層中。在一些實施例中，一時間層間預測，其也可被稱為一對角線層間預測或對角線預測，可被使用以改進此等編碼情節中之壓縮效能。一般而言，對角線預測可以涉及跨越多於一調整性領域或調整性型式之預測的任何預測。例如，對角線預測可涉及不同之預測，如發生自一不同元件型式(例如，自深度至紋理結構)以及發生自一不同的時間瞬間(例如，自編解碼順序中之一先前存取單元的一圖像至目前存取單元中之一圖像)。

一解碼處理程序可參考一層識別符列表TargetDecLayerIdList而被指定，其指定層識別符數值之列表，例如，nuh_layer_id數值。層識別符數值可以是在將被解碼之NAL單元的增加順序之TargetDecLayerIdList。TargetDecLayerIdList可以包含層識別符以供用於有意利用解碼器被輸出之層以及所有取決於解碼處理程序之輸出層的層。

正進行工作以指定可調整以及多視圖延伸至HEVC標準。HEVC之多視圖延伸，被稱為MV-HEVC，是相似於H.264/AVC之MVC延伸。相似於MVC，於MV-HEVC中，視圖間參考圖像可被包含於正被編碼或被解碼之目前圖像之參考圖像列表中。HEVC之可調整延伸，被稱為SHVC，被預計指定以便它使用多迴路解碼操作(不同於H.264/AVC之SVC延伸)。目前，對於SHVC之實現調整性的二種設計被探討。一者是參考索引為基礎，於其中一層間參考圖像可被包含於一個或多個正被編碼或被解碼之目前圖像的參考圖像列表中(如上所述)。另一者可以被稱為IntraBL或TextureRL，其中一特定編碼模式，例如，於CU位準中，被使用以供使用被解碼/被重建的一參考層圖像之樣本數值而供用於一增強層圖像中之預測。SHVC發展具有集中在空間以及粗粒度品質調整發展上。

可能使用許多相同語法結構、語義、以及解碼處理程序於MV-HEVC以及參考索引為基礎的SHVC。進一步地，也可能使用相同語法結構、語義以及解碼處理程序於深度編碼。此後，HEVC之可調整多視圖延伸(SMV-HEVC)用詞被使用以涉及一編碼處理程序、一解碼處理程序、語法、以及語義，於其中大量相同編解碼工具被使用而無視於調整型式，並且其中參考索引為基礎的方法被使用而不需在片段檔頭之下的語法、語義、或解碼處理程序中之改變。SMV-HEVC可以是不受限定於多視圖、空間以及粗粒度品質調整，但也是可支援其他型式的調整，例如，深度增強視訊。

對於增強層編碼，HEVC之相同概念以及編碼工具可被使用於SHVC、MV-HEVC、及/或SMV-HEVC中。但是，另外的層間預測工具，其採用已先前被編碼之資料(包含重建圖像樣本以及移動參數，即移動資訊)於參考層中以有效地編碼一增強層，可被整合至SHVC、MV-HEVC、及/或SMV-HEVC編解碼器。

於MV-HEVC、SMV-HEVC、以及參考索引為基礎的SHVC辦法中，區塊位階語法以及解碼處理程序不被改變以供支援層間紋理結構預測。僅高階語法被修改(比較至HEVC之語法)，因而來自相同存取單元之一參考層的重建圖像(如果必須的話則往上取樣)可被使用作為用以編碼目前增強層圖像之參考圖像。層間參考圖像以及時間參考圖像被包含在參考圖像列表中。傳信的參考圖像索引被使用以指示目前預測單元(PU)是否自一時間參考圖像或一層間參考圖像被預測。這特點之使用可利用編碼器被控制並且被指示於位元流中，例如，於一視訊參數集合、一序列參數集合、一圖像參數、及/或一片段檔頭中。該等指示可以是，例如，特定於一增強層、一參考層、一對增強層以及參考層、特定TemporalId數值、特定圖像型式(例如，IRAP圖像)、特定片段型式(例如，P以及B片段，但不是I片段)、一特定POC數值之圖像、及/或特定存取單元。該等指示之範疇及/或持久性可隨指示自身被指示及/或可被推論。

MV-HEVC、SMV-HEVC、以及一參考索引為基礎的SHVC辦法中之參考列表可使用一特定處理程序被啟始化，於其中層間參考圖像，如果有的話，可被包含於啟始參考圖像列表中，如後面所述地被構成。例如，時間參考可以相同於HEVC中之參考列表構造的方式而首先地被添加進入參考列表(L0、L1)中。在那之後，層間參考可在時間參考之後被添加。層間參考圖像可以，例如，自層從屬資訊被終止(例如，如上面所述地自VPS延伸所導出之RefLayerId[i]變量)。如果目前增強層片段是一P片段的話，則層間參考圖像可被添加至啟始參考圖像列表L0，並且如果目前增強層片段是一B片段的話，則層間參考圖像可被添加至啟始參考圖像列表L0以及L1兩者。層間參考圖像可以一特定順序被添加至參考圖像列表，其中兩參考圖像列表可能是，但不需要是相同。例如，比較於啟始參考圖像列表0者，添加層間參考圖像進入啟始參考圖像列表1中的一相對順序可被使用。例如，層間參考圖像可以nuh_layer_id之一遞增順序被塞進入啟始參考圖像0中，而一相對順序可被使用以啟始化啟始參考圖像列表1。

於編碼及/或解碼處理程序中，層間參考圖像可以如一長期參考圖像地被處理。

在SMV-HEVC以及一參考索引為基礎的SHVC辦法中，層間移動參數預測可藉由設定層間參考圖像作為用於TMVP導出之併置圖像被進行。在二層之間的一移動像場映射處理程序可被進行，例如，以避免在TMVP導出中之區塊位準解碼處理程序修改。用於多視圖編碼之一移動像場映射也可被進行，但是MV-HEVC之一現有草案不包含此一處理程序。移動像場映射特點之使用可利用編碼器被控制並且被指示於位元流中，例如，於一視訊參數集合、一序列參數集合、一圖像參數、及/或一片段檔頭中。例如，該指示可以是特定於一增強層、一參考層、一對增強層以及參考層、特定TemporalId數值、特定圖像型式(例如，RAP圖像)、特定片段型式(例如，P及B片段，但不是I片段)、一特定POC數值之圖像、及/或特定存取單元。該等指示之範疇及/或持續性可與指示它們自身一起被指示及/或可被推論。

在用於空間調整之一移動像場映射處理程序中，往上取樣層間參考圖像之移動像場基於分別的參考層圖像之移動像場被獲得。對於往上取樣層間參考圖像之各區塊的移動參數(例如，其可包含一水平及/或垂直移動向量數值及一參考索引)及/或一預測模式可自參考層圖像之併置區塊的對應移動參數及/或預測模式被導出。被使用於往上取樣層間參考圖像中之移動參數及/或預測模式的導出之區塊大小可以是，例如16×16。該16×16區塊大小是相同於其中參考圖像之壓縮移動像場被使用的HEVC TMVP導出處理程序中。

在一TextureRL為基礎的SHVC辦法中，層間紋理結構預測可在CU位準被進行，一新的預測模式(被稱為TextureRL模式)因之被引介。併置往上取樣基底層區塊被使用作為以TextureRL模式被編碼的增強層CU之預測。對於增強層編碼器之一輸入CU，CU模式可被決定，例如，在像框內、像框間以及TextureRL模式之中。TextureRL特點之使用可利用編碼器被控制並且被指示於位元流中，例如，於一視訊參數集合、一序列參數集合、一圖像參數、及/或一片段檔頭中。例如，該等指示可以是特定於一增強層、一參考層、一對增強層及參考層、特定TemporalId數值、特定圖像型式(例如，RAP圖像)、特定片段型式(例如，P及B片段，但不是I片段)、一特定POC數值之圖像、及/或特定存取單元。該等指示之範疇及/或持續性可與指示它們自身一起被指示及/或可被推論。進一步地，TextureRL可在CU位準利用編碼器被選擇且可對於每個CU被指示於位元流中，例如，使用一CU位準旗標(texture_rl_flag)，其可以是熵編碼，例如，使用脈絡適應式算術編碼(例如，CABAC)。

TextureRL預測CU之殘差可如隨後所述地被編碼。TextureRL預測CU之轉換處理程序可以是相同如供用於像框內預測CU，其中一離散正弦轉換(DST)被應用至具有4x4大小的光影元件之TU，並且一離散餘弦轉換(DCT)被應用至其他型式的TU。一TextureRL預測CU之轉換係數編碼可以是相同於像框間預測CU，其中no_residue_flag可被使用以指示整個CU之係數是否被跳過。

於一TextureRL為基礎的SHVC辦法中，除了空間以及時間相鄰的PU之外，併置參考層區塊之移動參數也可被使用以形成合併候選者列表。基底層合併候選者可在一被併置至目前PU之中央位置的位置被導出並且可被塞入合併列表的一特定位置中，例如，作為合併列表中之第一候選者。於空間調整性之情況中，參考層移動向量可依據在二層間之空間解析度比率被調整。對於具有併置基底層候選者之各空間相鄰的候選者的刪剪(複製的候選者檢查)可被進行。對於併置基底層合併候選者以及空間合併候選者導出，某一最大數目之合併候選者可被使用；例如，四個合併候選者可在被安置於六個不同位置的候選者之中被選擇出。時間合併候選者可以如HEVC合併列表相同方式被導出。當候選者數目沒達到最大數目之合併候選者(其可利用編碼器被決定且可被指示於位元流中並且可被指定至變量MaxNumMergeCand)時，另外的候選者(包含組合的雙向預測候選者以及零合併候選者)可被產生並且被添加在合併列表末端，而相似於或相同於HEVC合併列表構造。

於一些編碼及/或解碼配置，一參考索引為基礎的調整以及一區塊位準調整方法，如TextureRL為基礎的方法，可被組合。例如，多視圖視訊-加-深度編碼及/或解碼可如隨後所述地被進行。一TextureRL方法可被使用在相同視圖元件之間。例如，一深度視圖元件可以是使用來自相同視圖之一紋理結構視圖元件的一TextureRL方法之層間預測。一參考索引為基礎的方法可被使用於視圖間預測，並且在一些實施例中，視圖間預測僅可被應用在相同元件型式的視圖元件之間。

同時也進行工作以指定深度增強視訊編碼延伸至HEVC標準，其可被稱為3D-HEVC，於其中紋理結構視圖及深度視圖可被編碼於一單一位元流，其中一些紋理結構視圖可以是可兼容於HEVC。換言之，一HEVC解碼器可解碼此一位元流的一些紋理結構視圖並且可省略其餘的紋理結構視圖以及深度視圖。

其他型式的調整性以及可調整視訊編碼包含位元深度調整性，其中基底層圖像可以每光影及/或色度樣本比增強層圖像(例如，10或12位元)較低位元深度(例如，8位元)方式被編碼；色度格式調整性，其中增強層圖像比基底層圖像(例如，4：2：0格式)在色度上提供較高的保真度及/或較高的空間解析度(例如，以4：4：4色度格式被編碼)；以及色彩階域調整性，其中增強層圖像具有比基底層圖像之一更豐富/更廣泛的色彩表示範圍，例如，增強層可具有UHDTV(ITU-RBT.2020)色彩階域並且基底層可具有ITU-RBT.709色彩階域。任何數目之此等其他型式的調整性可被實現，例如，藉由一參考索引為基礎方法或一區塊為基礎方法，例如，如上所述。

一種分類不同型式的預測的方式是考慮跨越哪些領域或預測跨越過之調整性型式。這分類可能會導致成為一個或多個下列預測型式，其也可被稱為預測方向：

- 時間預測，例如，通常是來自相同調整層、視圖以及元件型式(紋理或深度)之一早期圖像的樣本數值或移動向量者。

- 視圖間預測(其也可被稱為跨視圖預測)，指示預測是發生在通常相同時刻或存取單元的視圖元件以及相同元件型式之間。

- 層間預測，參看通常是發生在相同時刻、相同元件型式以及相同視圖的層之間的預測。

- 元件間預測，其可被界定而包含被使用於解碼處理程序中之語法元素數值、樣本數值、變量數值的預測，或自一型式之一元件圖像至另一型式的一元件圖像之任何類似者的預測。例如，元件間預測可包含來自一深度視圖元件之一紋理結構視圖元件的預測，或反之亦然。

使用來自一先前被編碼影像之影像資訊的預測方法也可被稱為像框間預測方法。像框間預測有時可被考慮而僅包含移動補償空間預測，同時其有時也可被考慮而包含所有型式的預測，於其中一樣本之重建/解碼區塊被使用作為預測來源，因此包含，例如，習見的視圖間預測。像框間預測可被考慮以僅包含樣本預測，但是其另外地可被考慮以包含樣本以及語法兩預測。語法及樣本預測結果，一樣本像素之預測區塊可被得到。

如果預測，例如，預測變量數值及/或預測區塊，不使用任何形式的預測誤差或殘差編碼而藉由編碼器被精細化，則預測可被稱為繼承式。例如，於HEVC之合併模式中，預測移動資訊不被精細化，例如，藉由編解碼移動向量差量，並且因此合併模式可被考慮作為移動資訊繼承之範例。

本發明許多實施例係關於可調整視訊編碼，其包含空間、品質、多視圖及/或深度調整性。視訊編碼機構可以採用在圖像之間的一預測機構。如所討論地，預測可於編碼器中被進行，例如，經由在目前圖像中的一目前被編碼區塊(Cb)以及圖像(其被選擇作為一參考)中的一參考區塊(Rb)之間的區塊分割及區塊匹配之一處理程序。因此該預測之參數可被界定作為移動資訊(MI)，例如，其包含下列者或更多者：Cb之空間座標(例如，Cb頂部-左方像素之座標)；一參考索引refIdx或其相似者，其指定被選擇作為參考圖像之參考圖像列表中的圖像；一移動向量(MV)，其確定在參考圖像中之Cb及Rb的空間座標之間的偏移；以及移動分割的大小及形狀(匹配區塊之大小及形狀)。

與一圖像相關聯的一移動像場可被考慮以包含被產生以供用於每個被編碼的圖像區塊之一組移動資訊。一移動像場可以是，例如，利用一區塊座標而可存取。一移動像場可被使用，例如，於時間移動向量預測或任何其他移動預測機構中，其中除了目前被解碼/被編碼圖像之外，一來源或一參考被使用於預測。

視訊編碼機構可以採用一時間移動向量預測機構，例如，H.264/AVC中之時間直接模式或H.265/HEVC的合併以及AVMP模式中之時間移動向量預測器(TMVP)候選者。於一時間移動向量預測機構中，另一圖像的移動資訊之至少一子集合被使用以導出供用於目前圖像之移動資訊或移動資訊預測器。時間移動向量預測因此需要參考圖像之移動資訊的儲存。

於H.265/HEVC中，序列參數集合包含sps_temporal_mvp_enabled_flag語法元素，其指示片段檔頭是否包含slice_temporal_mvp_enabled旗標。如果sps_temporal_mvp_enabled_flag是等於0，則無時間移動向量預測器被使用於編碼視訊序列中。 slice_temporal_mvp_enabled_flag指定時間移動向量預測器是否可被使用於像框間預測。當slice_temporal_mvp_enabled_flag是等於1時，片段檔頭中有語法元素以辨識被使用於導出時間移動向量預測器之併置圖像。

當一層間參考圖像之一移動像場被使用以預測或導出目前圖像之移動資訊時，時間移動向量預測也可被使用於可調整視訊編碼中。

移動像場映射可被使用，例如，當一層間參考圖像(而非目前圖像)是屬於不同的空間解析度時。在用於空間調整性之一移動像場映射處理程序中，往上取樣層間參考圖像之移動像場基於分別參考層圖像的移動像場而被獲得。對於往上取樣層間參考圖像之各區塊的移動參數(例如，其可包含一水平及/或垂直移動向量數值及一參考索引)及/或一預測模式可自參考層圖像中之併置區塊的對應移動參數及/或預測模式被導出。

移動資訊之儲存可被進行，例如，依據移動分割之最小尺寸，例如，於H.264/AVC情況中之4x4(光影樣本)。於另一範例中，移動資訊之空間粒度可預先被界定，例如，以一編碼標準，並且編碼移動資訊可再取樣或被轉換至空間粒度。例如，移動資訊可以16x16區塊(光影樣本)方式被儲存於H.265/HEVC中。

習知增加一旗標於SPS延伸中以指示併置圖像上限制，以至於併置圖像是一層間參考圖像而非用於非基底層編碼的一時間參考圖像。因而，在目前增強層內之時間參考圖像的移動資訊不需要被儲存。旗標之語義被建議如下：當collocated_picture_constraint_flag等於1時，則指定被使用於層間預測之併置圖像是受限定於CVS中。當collocated_picture_constraint_flag是等於1時，被使用於層間預測之併置圖像將是具有nuh_layer_id不等於目前圖像者之參考圖像。當collocated_picture_constraint_flag是等於0時，對於被使用於層間預測之併置圖像沒有限制藉由這旗標被傳信。當不存在時，collocated_picture_constraint_flag被推論為等於0。

編解碼器實行例可具有用於移動資訊儲存之不同方法。假設移動資訊被儲存以供用於一規則性區塊網格，下面一範例方法可以儲存各區塊於網格中：

1.移動-補償預測區塊(2位元)數目之指示。0指示沒有預測區塊(例如，當像框內編碼被使用時)，1指示單向預測，並且2指示雙向預測；

2.用於參考圖像列表0及列表1之參考圖像列表索引。於H.265/HEVC中，索引可能是受限定於，例如，包括0至15，並且因此需8位元用於參考索引儲存。另外地，參考圖像列表必須對於圖像之各片段被儲存。

3.供用於移動向量(單向預測)或二移動向量(雙向預測)之水平以及垂直移動向量元件。儲存一移動向量元件所需的位元數目，例如，可以取決於位準限定、圖像限度、及/或特定限制，其可以是，例如，藉由明確地被指示於位元流中之一編碼概示而被推論。一般，例如，每移動向量元件可能需要2位元組。

假設上面之第1項可被儲存於不需要一完整的二位元組儲存量之一移動向量元件之上遺留之備用位元中，則其可採用，例如，9位元組以儲存對於一單一區塊之移動資訊。在16x16移動區塊大小(屬於光影樣本)中，每區塊使用9位元組於移動資訊之一移動像場是大約需要2.3%的儲存空間以儲存一4：2：0色度格式之參考圖像的樣本數值。

例如，於H.264/AVC中，僅儲存參考索引於參考圖像列表0(如果呈現的話)或儲存於參考圖像列表1是足夠的，並且僅有一對水平及垂直移動向量元件。其因此可每區塊採用5位元組以儲存移動資訊於一移動像場中。於4x4移動區塊大小(屬於光影樣本)中，每區塊使用5位元組於移動資訊的一移動像場是大約需要20.8%的儲存空間以供儲存4：2：0色度格式之參考圖像的樣本數值。

如可了解地，於儲存空間使用的這些範例中，被使用於移動像場儲存之記憶體數量可能是巨大的，並且因此其將是有益於指示哪些移動像場是時間移動向量預測機構或其類似者(例如，H.265/HEVC之TMVP機構或其類似者)實際所需的，以便允許解碼器中之記憶體使用最佳化。

於H.265/HEVC中，sps_temporal_mvp_enabled_flag指示HEVC基底層/視圖(具有nuh_layer_id等於0)中之TMVP機構是可能正使用中(當旗標是等於1時)或不是正使用中(當旗標是等於0時)。當sps_temporal_mvp_enabled_flag是等於1時，slice_temporal_mvp_enabled_flag是呈現於片段檔頭中並且指示TMVP機構是否正供目前圖像使用中。

可有HEVC之可調整延伸的“黑盒子”實行例，於其中基底層解碼/編碼藉由一現存的HEVC v1實行例被實行而不必改變。惟若sps_temporal_mvp_enabled_flag是等於1時，基底層解碼/編碼之此一實行例將儲存移動像場。

基底層移動像場可被使用於下列用途之任一者或兩者上：在基底層圖像之間的時間移動向量預測以及層間移動預測。如果基底層移動像場僅被使用於層間移動預測，則在存取單元已結束解碼之後(或，更精確地，在可使用一基底層作為移動預測參考之存取單元內的所有層之解碼已結束之後)，被使用於基底層移動像場之記憶體可被解除配置或被使用於其他的用途上。但是，當sps_temporal_mvp_enabled_flag被使用以控制基底層移動像場之儲存時，其不能被使用以指示基底層移動像場是僅被使用於層間移動預測並且不被使用於基底層內之時間移動向量預測。

如果一第一增強層，於其中collocated_picture_constraint_flag(如上所述)被設定為等於1，被使用作為一第二增強層之層間預測的參考，第一增強層中之圖像的移動像場之儲存可能是供用於層間移動預測所需的。換言之，上述之 collocated_picture_constraint_flag是不足以決定增強層圖像之移動像場是否需要被儲存。

雖然習知的方法著眼於控制在一序列內之整個層的移動像場記憶體使用，在一層之內可能需要更精細粒度及/或指示以減低一移動像場可能需要的儲存空間。對於移動像場儲存之總記憶體使用接著可被控制並且可能是較小於假設移動像場被儲存各者之參考圖像之最大數量的記憶體使用。

本實施例允許編碼器以一個或多個下列方式而指示或控制用於解碼器之移動像場儲存：a)基底層之移動像場是將被儲存，但可能是僅供用於層間移動預測所需(並且不是用於基底層中之任何其他圖像的移動預測所需要)。於下面部份“A”中將有更詳細的討論；b)關於移動像場儲存及/或使用存在於序列位準語法結構中之指示，但其可能是受限定於僅應用在一層內之一些圖像中。於下面部份“B”中將更詳細地被討論；c)一圖像之移動像場的儲存或標記可藉由一稍後之圖像(例如，使用參考移動像場集合語法)被控制。一移動像場之儲存或標記可以是不同於一對應的參考圖像之儲存或對應的標記。其將於下面部份“C”中更詳細地被討論；d)一移動像場所需的儲存空間可藉由具有各種被指示之限制的編碼器被控制。其將於下面部份“D”中更詳細地被討論。

部份A)用於移動像場儲存之序列位準指示

在一些實施例中，下列之二個或更多個利用編碼器被指示於位元流中及/或利用解碼器自該位元流被解碼：1)一指示，其能夠指示移動像場是否可被使用在對於時間移動向量預測之一層內或不被使用在對於時間移動向量預測之一層內。這指示可以是逐層地；2)一指示，其能夠指示層間移動預測是否可被使用或層間移動預測是否不被使用。這指示可以是特定於一組對層；3)一指示，其能夠指示對角線移動預測是否可被使用或對角線移動預測是否不被使用。這指示可以是特定於一組對層。

例如，於H.265/HEVC之脈絡及/或其之延伸中，一指示，其能夠指示移動像場是否可被使用在對於時間移動向量預測之一層內或不被使用在對於時間移動向量預測之一層內，例如，其可被指定於SPS延伸中。例如，下列語法可被使用：

collocated_picture_constraint_flag之語義可被指定，例如，如隨後所述地或以任何相似方式。collocated_picture_constraint_flag等於1指示下列者：

- 對於具有nuh_layer_id等於0之編碼片段部份NAL單元，collocated_picture_constraint_flag等於1時則指示slice_temporal_mvp_enabled_flag是不呈現或是等於0。

-對於具有nuh_layer_id較大於0之編碼片段部份NAL單元，collocated_picture_constraint_flag等於1時則指示併置圖像，如果有的話，是一層間參考圖像。

應了解，collocated_picture_constraint_flag之語義或其類似者可藉由其他措辭等效地被指定。例如，下列措辭可被使用：collocated_picture_constraint_flag等於1指示下列者：

- 於具有nuh_layer_id等於0之編碼片段部份NAL單元中，對其這SPS是致動SPS，slice_temporal_mvp_enabled_flag是不呈現或是等於0。

- 在具有nuh_layer_idnuhLayerIdA較大於0之編碼片段部份NAL單元中，對其這SPS是致動層SPS，併置圖像，如果有的話，具有不等於nuhLayerIdA之nuh_layer_idnuhLayerIdB。

當collocated_picture_constraint_flag是等於0時，對於併置圖像沒有限制被指示。當不呈現時，collocated_picture_constraint_flag被推論為等於0。

collocated_picture_constraint_flag或其類似者可被使用，例如，以供決定移動像場之儲存是否為所需，以及一指示，其能夠指示層間移動預測是否可被使用或不被使用。例如，於H.265/HEVC及/或其之延伸的脈絡中，一指示，其能夠指示層間移動預測是否可被使用或層間移動預測是否不被使用，其可經由VPS延伸之direct_dependency_type[i][j]語法元素被進行。

在一些實施例中，當上面之指示1至3任何一者指示移動預測可被使用時，一解碼器可儲存移動像場作為解碼一圖像之部份。

在一些實施例中，當下列至少一者是為真時，則一編碼器及/或一解碼器可將作為解碼/編碼一目前圖像之部份的移動像場儲存在一特定層(例如，層A)：

- 其被指示，於位元流中，時間移動向量預測可在層之內被使用。

- 其被指示，於位元流中，層間及/或對角線預測可被使用並且可使用目前圖像作為用於移動預測之一參考的圖像可以是呈現於位元流中並且是將被解碼。

例如，如果圖像之移動像場被指示在層A不被使用於作為任何其他圖像的移動預測，並且如果層A可被使用作為用於其他層的層間及/或對角線移動預測之參考，但是那些其他層無一者是呈現於位元流中或不是將被解碼，則圖像之移動像場(在層A)不需要被儲存並且解碼器可決定不儲存圖像之移動像場(在層A)。否則，圖像的移動像場(在層A)可能是用於其他層的層間及/或對角線移動預測之所需並且因此解碼器儲存移動像場。

編碼器及/或解碼器可以得出結論，當它們可能被使用於相同層中之其他圖像的時間移動向量預測時或當它們可被使用用於層間移動預測時，目前圖像之移動像場或移動向量必須被儲存。當HEVC及/或HEVC延伸被使用時，編碼器及/或解碼器可以得出下之結論，當下列之至少一者為真時，目前圖像之移動像場或移動向量必須被儲存：

-sps_temporal_mvp_enabled_flag是等於1且collocated_picture_constraint_flag是等於0。

-collocated_picture_constraint_flag是等於1且有一nuh_layer_id數值nuhLayerIdA，以至於MotionPredRefLayerId[nuhLayerIdA][mIdx]對於在0至NumMotionPredRefLayers[nuhLayerIdA]-1之範圍中的任何mIdx，是等於目前圖像之nuh_layer_id數值並且nuhLayerIdA是在TargetDecLayerIdList之中。

編碼器及/或解碼器可以得出下之結論，當圖像被標記為“未被使用於參考”時或當圖像是不被使用於相同層中之其他圖像的時間移動向量預測並且可以使用圖像作為用於層間移動預測的一參考之相同存取單元中的所有圖像已被解碼時，則一圖像之移動像場或移動向量不再是需要被儲存。當HEVC及/或HEVC延伸被使用時，編碼器及/或解碼器可以得出下之結論，當下列之至少一者為真時，則一圖像之移動像場或移動向量不再是需要被儲存：

- 圖像被標記為“未被使用作為參考”。

- 供用於圖像之collocated_picture_constraint_flag是等於1並且包含該圖像之存取單元已被解碼。

- 供用於圖像之collocated_picture_constraint_flag是等於1並且在TargetDecLayerIdList的那些數值之中沒有nuh_layer_id數值nuhLayerIdA保持自包含圖像之存取單元被解碼，以至於對於在0至NumMotionPredRefLayers[nuhLayerIdA]-1範圍中之任何mIdx，MotionPredRefLayerId[nuhLayerIdA][mIdx]是等於該圖像之thenuh_layer_id數值。

部份B)用於移動像場儲存之序列位準子層式指示

在一些實施例中，指示係關於存在於序列位準語法結構之移動像場儲存及/或使用，但是可能是受限定於僅應用至一層內之一些圖像。該限定之範疇可利用編碼器被決定且被指示於位元流中並且利用解碼器自位元流被解碼。例如，該等指示可以僅應用至某一時間子層及/或圖像型式(例如，IRAP)。不同的範疇可被選擇以供用於不同層或組對層之不同的指示或相同型式的指示。

部份C)移動像場被儲存之彈性控制

在一些實施例中，當儲存緩衝器中之移動像場是不再需要用於空間、層間或對角線移動預測時，一編碼器及/或解碼器可以解配置一移動像場儲存緩衝器或使用一移動像場儲存緩衝器以供儲存另一移動像場。在一些實施例中，當儲存緩衝器中之移動像場是不再需要用於空間、層間或對角線移動預測時，一編碼器及/或一解碼器可標記一移動像場或一對應的參考圖像，例如，作為“移動像場不需要用於預測”或任何類似者。同樣地，當一移動像場被解碼且被儲存時，其或對應的參考圖像可藉由編碼器及/或解碼器被標記作為“需要用於預測之移動像場”或任何類似者。

被儲存及/或被標記為“需要用於預測之移動像場”的移動像場之最大數目可能是受限定的。這數目可預先被界定，例如，於一編碼標準中及/或可利用編碼器被決定並且被指示於位元流中。該最大數目可利用解碼器自位元流被解碼。該最大數目可以是特定於時間子層並且可以是利用編碼器對於在位元流內之一個或多個時間子層分別地被指示。該最大數目可以較低於參考圖像之最大數目。

被儲存及/或被標記為“需要用於預測之移動像場”之移動像場可使用一特定演算法藉由編碼器及/或解碼器被推論及/或可以利用編碼器被決定以及利用編碼器被指示於位元流中並且自位元流利用解碼器被解碼。

該特定演算法可預先被界定，例如，於一編碼標準中。在一些實施例中，許多演算法可以被指定，例如，於一編碼標準中及/或控制該等演算法之許多參數值可被使用。編碼器可以決定該等許多演算法之何者是正使用中以及控制演算法之哪些參數數值是被使用並且於位元流中指示那些者。同樣地，解碼器可解碼該等許多演算法之何者是正使用中以及來自位元流之控制演算法的哪些參數數值是被使用。例如，一演算法可以實現移動像場之先進先出(FIFO)緩衝。依據該演算法之一動作可被觸發，例如，當佔據移動像場儲存緩衝器之數目達到或是即將超過最大數目時。例如，一動作可以是依據FIFO緩衝被選擇的一移動像場被解配置或被標記為“不需要用於預測之移動像場”。

在一些實施例中，編碼器可於位元流中編碼及/或解碼器可以自位元流解碼，相似於用以控制移動像場標記之H.264/AVC的MMCO之命令。

在一些實施例中，編碼器可以於位元流中編碼及/或解碼器可以自位元流解碼，相似於H.265/HEVC中之一參考圖像集合(RPS)的一參考移動像場集合(RMFS)。一RFMS語法結構可以包含語法元素，被包含於RFMS中之移動像場的識別符可自該語法元素得到。該等識別符可以是，例如，圖像識別符，例如，圖像順序計數或其之一部份(例如，某一數量之POC數值的最不主要位元)、圖像順序計數差量(例如，比較至目前圖像之圖像順序計數)、及/或frame_num數值或其相似者。一RFMS語法結構，例如，可以具有如一RPS語法結構之相同語法，但是一RFMS語法結構可以應用至一移動像場而不是解碼樣本陣列(一RPS語法結構可以應用至其者)。編碼器及/或解碼器可以保留那些的移動像場，其被包含於記憶體之RFMS中者(例如，於一解碼移動像場緩衝器中者)及/或被標記為“需要用於預測之移動像場”(或其類似者)。編碼器及/或解碼器可以自記憶體(例如，自一解碼移動像場緩衝器)及/或標記它們作為“不需要用於預測之移動像場”(或其類似者)而移除不被包含於RFMS中的那些移動像場。

在一些實施例中，RPS之語法被附加以指示具有被包含於RPS中之被解碼圖像的一移動像場是否被儲存。例如，一旗標可被包含以供用於RPS中之各圖像，當旗標是1時，其指定移動像場之儲存或存在，或當旗標是0時，移動像場之不存在。編碼器及/或解碼器可儲存被指示以呈現及/或標記它們作為“需要用於預測之移動像場”(或其類似者)的那些移動像場。編碼器及/或解碼器可以移除被指示為存在及/或標記它們作為“不需要用於預測的移動像場”(或其類似者)的那些移動像場。

編碼器可能需要依據不大於移動像場最大數目之RFMS或RPS而保留被標記為“不需要用於預測之移動像場”(或其類似者)的移動像場數目。

在一些實施例中，編碼器可以於位元流中編碼及/或解碼器可以自位元流解碼一第一圖像方式之指示，例如，存在於一片段檔頭中，其指示該圖像是否可被使用作為相同層中之任何依序圖像之用於TMVP或其類似者的併置圖像。另外地或此外地，在一些實施例中，編碼器可以於位元流中編碼及/或解碼器可以自位元流解碼一第二圖像方式之指示，例如，存在於一片段檔頭中，其指示該圖像是否可被使用作為用於相同層或其他層中之任何依序圖像的TMVP或其類似者之一併置圖像。在一些實施例中，第一及/或第二圖像似之指示可以被使用以控制移動像場或對應圖像之儲存及/或標記。例如，如果第二指示為假(亦即，圖像不被使用作為用於任何依序圖像之TMVP或其類似者的併置圖像)，則移動像場或對應的圖像可以被標記為“不需要用於預測的移動像場”。於另一範例中，如果第一指示為假(亦即，圖像不被使用作為用於相同層中之任何依序圖像的TMVP或其類似者之併置圖像)，則在移動像場或對應圖像之何者可以被標記為“不需要用於預測的移動像場”之後，移動像場或對應的圖像可以被標記為“需要用於預測的移動像場”直至可以使用該圖像作為併置圖像的所有圖像已被解碼為止。例如，在其中圖像存在已被解碼(假設沒有對角線預測是在使用中)的存取單元之後，一圖像(於其中第一指示為假)可被標記為“不需要用於預測的移動像場”。

在一些實施例中，如上所述之第一圖像方式的指示及/或第二圖像方式的指示可以是特定於某一時間子層。例如，如果第一或第二圖像方式的指示對於具有TemporalId等於tIdA的一圖像是為真，則該圖像可以被使用作為在具有TemporalId較大於或等於tIdA之相同層內的那些依序的圖像之用於TMVP或其類似者的併置圖像。

在一些實施例中，可考慮移動像場被儲存於一被解碼移動像場緩衝器(DMFB)或其類似者中，其中該DMFB可相似於一被解碼圖像緩衝器地操作。編碼器可以於位元流中編碼並且解碼器可以自該位元流解碼關於該DMFB之操作的語法元素及/或語法元素數值。例如，限制可對於DMFB之編碼標準被指定，例如，當其達到DMFB中之移動像場緩衝器的最大數目時及/或達到DMFB之最大記憶體使用時。

部份D)移動資訊被儲存之彈性控制

在一些實施例中，編碼器可以於位元流中指示並且解碼器可以自該位元流解碼用以儲存移動資訊的一空間關係或精確度。例如，光影樣本之一區塊大小(於其中被解碼/被編碼移動資訊被再取樣)可被指示。例如，其可被指示移動資訊可以用32x32光影樣本區塊方式被儲存。在一些實施例中，區塊大小可以空間地變化。在一些實施例中，區塊大小可以依據對應圖像的預測單元被選擇。

在一些實施例中，編碼器可以於位元流中指示並且解碼器可以自該位元流解碼何者移動資訊之參數是或可能是移動預測中所需的。例如，一個或多個的下列指示可利用編碼器被編碼及/或利用解碼器被解碼：

-僅層間參考圖像被使用於一特定增強層並且因此移動向量數值可能被限制至，例如，在空間及/或SNR調整性之情況中的(0,0)以及用於具有平行攝影機設置之多視圖編碼的(x,0)。因此，針對增強層之移動像場儲存可被調整以僅儲存移動向量成份之一子集合。

-僅層間參考圖像被使用(於樣本預測)並且僅某一參考層可以被使用作為用於一特定增強層的樣本預測之來源(例如，利用direct_dependency_type[i][j]被指示)。因此，用於特定增強層的移動像場儲存可被調整以省略參考索引儲存或指示何者參考圖像是被使用於樣本預測的任何其他儲存。

-僅單向預測被使用。

在一些實施例中，編碼器可以於位元流中推論或指示並且解碼器可以自該位元流推論或解碼移動資訊的參數上之可幫助減低對於移動像場之儲存空間的限制。例如，一個或多個下列者可以利用編碼器被推論或被編碼及/或利用解碼器被推論或被解碼：

-移動向量精確度。例如，特定型式之圖像或層，例如，深度圖像或層，可以被推論以具有整數光影樣本精確度之移動向量並且因此用於深度圖像之移動像場需要以整數樣本精確度方式被儲存。於另一範例中，編碼器可以於位元流中編碼並且解碼器可以自該位元流解碼以及指示移動向量精確度。於另一範例中，一第一層(例如，代表一紋理結構視圖)，可被使用作為用於另一層(例如，代表一深度視圖)之移動預測參考，但是無移動預測在第一層之內發生。在這情況中，第一層之移動像場可依據不同型式的層或利用編碼器於位元流中之一指示而被量化至一完全圖像樣本精確度。

-最大(絕對值)水平及/或垂直移動向量長度。

-最大參考索引。

-在移動像場對應的一圖像以及移動像場中之任何被使用的參考圖像之間的最大POC差量。

在一些實施例中，例如，可指定於一編碼標準中，一個或更多個上述或任何其他的移動像場相關參數或參數數值或參數限制如何影響對於一移動像場之記憶體使用。此記憶體使用可被考慮於，例如，對於編碼標準位準指定之限制及/或可能影響最大數目或移動像場儲存緩衝器。此記憶體使用可以是標稱值且一編碼器及/或一解碼器製作可以實際上對於不同的參數使用另一記憶體配置。例如，對於單一移動向量元件之記憶體使用可以被指定於位元log2(2*最大絕對移動向量長度/移動向量精確度)，其中移動向量精確度是，例如，對於四分之一像素移動向量精確度為¼，對於一半像素移動向量精確度為½，且以此類推。例如，如果最大絕對移動向量長度是511且移動向量精確度為¼，則需要12位元以儲存移動向量元件。對於單一區塊之移動資訊之記憶體使用可以被捨入，例如，至完全位元組以便提供較易之記憶體存取。

圖1展示依據一範例實施例之一視訊編碼系統區塊圖，其為一範例裝置或電子式設備50之分解區塊圖，其包含依據本發明一實施例之一編解碼器。圖2展示依據一範例實施例之一裝置佈局。圖1及2之元件將接著被說明。

電子式設備50可以，例如，是一移動式終端機或一無線通訊系統之使用者設備。但是，將了解，本發明實施例可以被製作在任何電子式設備或裝置之內，其需要編碼與解碼或編碼或解碼視訊影像。

裝置50可以包含用以配合及保護設備之外殼30。裝置50進一步地可以包含晶體液晶晶體顯示形式之顯示器32。於本發明的其他實施例中，顯示器可以是適於顯示一影像或視訊的任何適當顯示技術。裝置50可以進一步地包含一鍵盤34。於本發明的其他實施例，任何適當的資料或使用者界面機構可以被採用。例如，使用者界面可以被製作如一虛擬鍵盤或資料輸入系統而作為一觸控顯示器之部份。該裝置可包含一麥克風36或其可為數位或類比信號輸入的任何適當音訊輸入。裝置50可以進一步包含一音訊輸出設備，於本發明實施例中其可以為下列任何一者：一耳機38、擴音機、或一類比音訊或數位音訊輸出連接。裝置50同時也可包含一供電之電池40(或於本發明的其他實施例中，設備可以是由任何適當的移動式能量設備，例如，太陽能、燃料電池或發條發電機)。該裝置可進一步包含供短範圍通訊至其他設備的一紅外線接埠42。於其他的實施例中，裝置50可以進一步包含任何適當的短範圍通訊解決辦法，例如，一藍牙無線連接或一USB/火線有線連接。

裝置50可以包含用以控制裝置50之一控制器56或處理器。控制器56可以連接到記憶體58，其於本發明實施例中可以儲存影像與音訊資料形式之兩者資料及/或同時也可以儲存製作於控制器56之指令。控制器56可以進一步連接到編解碼器電路54，其適於進行音訊及/或視訊資料之編碼及解碼或協助被控制器56施行之編碼及解碼。

裝置50可以進一步包含一讀卡器48與一智慧卡46，例如一UICC與UICC讀取器，以提供使用者資訊且適於提供用以認證之認證資訊及在一網路之使用者授權。

裝置50可以包含無線電界面電路52，其連接到控制器且適於產生無線通訊信號，例如，用以與一胞式通訊網路、一無線通訊系統或一無線本地區域性網路通訊。裝置50可以進一步包含一天線44，其連接到無線電界面電路52而用以發送在無線電界面電路52產生之無線電頻率信號至其他的裝置且用以自其他的裝置接收無線電頻率信號。

在本發明一些實施例中，裝置50包含能記錄或檢測分別的像框之一攝影機，其接著傳送至編解碼器54或控制器以供處理。在本發明一些實施例中，該裝置可在發送及/或儲存前自另一設備接收視訊影像資料以供處理。在本發明一些實施例中，裝置50可以無線地或有線的連接接收影像以供編碼/解碼。

圖3展示依據一範例實施例用於視訊編碼之一配置，其包含多數個裝置、網路及網路元件。關於圖3，本發明實施例可被採用於其中之一系統範例被展示。系統10包含多數個通訊設備，其可經由一個或更多個網路而通訊。系統10可以包含有線或無線網路之任何組合，包含，但是不受限制於一無線胞式電話網路(例如GSM、UMTS、CDMA網路等等)、一無線本地的區域性網路(WLAN)，例如由任何IEEE802.x標準所定義、一藍牙個人區域網路、一以太本地的區域性網路、一代符環本地的區域性網路、一寬域網路、及網際網路。

系統10可以包含適於實作本發明實施例之有線與無線通訊設備或裝置50。例如，被展示於圖3之系統展示一移動式電話網路11及一網際網路28之表示。至網際網路28之連接可以包含，但是不受限制於，長範圍無線連接、短範圍無線連接、及各種有線的連接，包含，但是不受限制於，電話線、電纜線、電力線、及相似通訊通道。

被展示於系統10之範例通訊設備可以包含，但是不受限制於，一電子式設備或裝置50、一個人數位助理(PDA)及一移動式電話14之組合、一PDA16、一被整合訊息設備(IMD)18、一桌上型電腦20、一筆記型電腦22。當被移動個體攜帶時，裝置50可以靜止或移動。裝置50同時也可以安置於輸送模式，包含，但是不受限制於，一汽車、一卡車、一計程車、一公車、一火車、一船、一飛機、一腳踏車、一摩托車或任何相似適當的輸送模式。

一些或進一步的裝置可以傳送及接收電話與訊息且經由至一基地台24之一無線連接25與服務提供者通訊。基地台24可以連接到一網路伺服器26，其允許在移動式電話網路11與網際網路28之間通訊。系統可以包含另外的通訊設備與各種型式通訊設備。

通訊設備可使用各種發送技術通訊，包含，但是不受限制於，數碼分割多重存取(CDMA)、供移動式通訊之廣域系統(GSM)、通用移動式電信系統(UMTS)、時間分割多重存取(TDMA)、頻率分割多重存取(FDMA)、發送控制協定-網際網路協定(TCP-IP)、短訊息服務(SMS)、多媒體訊息服務(MMS)、電子郵件、即時訊息服務(IMS)，藍牙、IEEE802.11及任何相似無線通訊技術。涉及實作本發明各種實施例之一通訊設備可以使用各種媒體通訊，包含，但是不受限制於，無線電、紅外線、雷射、電纜線連接、及任何適當的連接。

在上面，實施範例已經參考一編碼器被說明，其需要了解，所產生之位元串流與解碼器中具有對應的元件。類似地，其中參考一解碼器被說明之實施範例中，需要了解該編碼器具有結構及/或電腦程式以產生利用解碼器被解碼之位元串流。

在上面，實施範例已經借助於位元串流語法被說明。但是，需要了解，對應的結構及/或電腦程式可以存在於編碼器以產生位元串流及/或存在於解碼器以解碼位元串流。

在上面，一些實施例已經關於特定型式的參數集合被說明。但是，需要了解，實施例可用任何型式之參數集合或位元串流的其他語法結構被實現。

在上面，一些實施例已經被說明，其相關於將指示、語法元件、及/或語法結構編碼成為一位元串流或成為一被編碼視訊序列及/或自一位元串流或自一被編碼視訊序列解碼指示、語法元件、及/或語法結構。但是，需要了解，該實施例可被實現，其相關於自一位元串流或一被編碼視訊序列，包含視訊編碼層資料，例如被編碼片段，將指示、語法元件、及/或語法結構編碼成為一語法結構或一外部資料單元，及/或自一位元串流或一被編碼視訊序列，包含視訊編碼層資料，例如被編碼片段，自一語法結構或一外部資料單元解碼指示、語法元件、及/或語法結構。例如，在一些實施例中，依據在上面任何實施例之一指示可被編碼成為一視訊參數集合或一序列參數集合，其例如，使用一控制協定，例如，SDP，自一被編碼視訊序列被外部地傳送。繼續相同範例，一接收器可以得到該視訊參數集合或該序列參數集合，例如，使用該控制協定，且提供該視訊參數集合或該序列參數集合供解碼。

雖然上面範例說明操作在一電子式設備之內編解碼器中之本發明實施例，將了解，如下面說明，本發明可被製作為任何視訊編解碼器之部份。因此，例如，本發明實施例可以被製作於一視訊編解碼器，其可經固定或有線的通訊路徑執行視訊編碼。

因此，使用者設備可以包含一視訊編解碼器，例如，那些上述本發明實施例中被說明者。將了解使用者設備用詞有意涵蓋任何適當型式的無線使用者設備，例如移動式電話、輕便資料處理設備或輕便網路瀏覽器。

進一步地，公用地面移動式網路(PLMN)之元件同時也可包含上述之視訊編解碼器。

一般而言，本發明各種實施例可被製作於硬體或特定用途電路、軟體、邏輯或其任何組合。例如，一些論點可被製作於硬體，而其他的論點可以被製作於韌體或軟體，其可被一控制器、微處理器或其他的計算設備所執行，雖然本發明不受限制於此。雖本發明各種論點可以被展示且被說明如區塊圖、流程圖、或使用一些其他的圖形表示，應了解，此處被說明之這些方塊、裝置、系統、技術或方法可以被製作於，非限制性範例，硬體、軟體、韌體、特定用途電路或邏輯、一般用途硬體或控制器或其他的計算設備、或其一些組合。

本發明實施例可以被製作於利用移動式設備之資料處理器可執行的電腦軟體，例如處理器項目，或利用硬體，或利用軟體與硬體組合。進一步地，應該注意到，圖中任何邏輯流程方塊可以代表程式步驟、或互連邏輯電路、方塊與功能，或程式步驟與邏輯電路、方塊與功能組合。軟體可以被儲存於實際的媒體，如記憶體晶片、或被製作在處理器之內的記憶體方塊、例如硬碟或軟碟之磁式媒體、及光學媒體，例如，DVD與其資料變化、CD。

本發明各種實施例可借助於存在於一記憶體之電腦程式碼被製作且導致有關的裝置施行本發明。例如，一終端機設備可以包含電路與電子元件以處理、接收及發送資料，一記憶體中電腦程式碼，及一處理器，當執行該電腦程式碼時，導致該終端機設備施行一實施例特點。再進一步地，一網路設備可以包含電路與電子元件以處理、接收及發送資料，一記憶體中電腦程式碼，及一處理器，當執行該電腦程式碼時，導致該網路設備施行一實施例特點。

記憶體可以是適於區域性技術環境的任何型式且可以使用任何適當的資料儲存技術被製作，例如半導體為基礎的記憶體設備、磁記憶體設備與系統、光學記憶體設備與系統、固定記憶體與移動式記憶體。資料處理器可以是適於區域性技術環境的任何型式，且可以包含一個或更多個一般用途電腦、特定用途電腦、微處理器、數位信號處理器(DSP)及處理器為基礎的多核心處理器結構，作為非限制性範例。

本發明實施例可以實施於各種元件，例如積體電路模組。積體電路之設計使用高度自動化的處理程序。複雜且有效力之軟體工具可用以轉換一邏輯位準設計成為備妥被蝕刻且被形成於一半導體基片之一半導體電路設計。

程式，例如，那些的由加州聖荷西山景鎮Synopsys公司所提供者，其使用所建立之設計法則以及預儲存設計模組資料庫自動地引導線路且安置元件於一半導體晶片。一旦半導體電路設計已經被完成，所產生之設計，於一標準化電子格式(例如，Opus、GDSII、或其類似者)可以被發送至一半導體製造設備或"fab"以供製造。

圖4展示依據一實施例之編碼方法流程圖。該實施例包含之步驟有：編碼移動像場被儲存，但是僅供用於層間移動預測，之一指示進入一位元串流(1016)；編碼移動像場用途之受限制範疇之一指示進入一位元串流(1018)；編碼是否使用供用於預測的移動像場之一指示進入一位元串流(1020)；編碼供用於儲存移動資訊的儲存參數之一指示進入一位元串流(1022)。一個或更多個先前的步驟可被進行。

上面之說明以範例及非限制性範例方式提供本發明實施範例的完全與資訊式說明。但是，對於那些熟習本技術者應明白，當參考上面說明而配合附圖及附加申請專利範圍閱讀時，各種修改及調適可以成為明顯。但是，所有的本發明技術之此等及相似修改將仍然落在本發明範疇之內。

依據一範例，提供一方法，其包含下列之至少一者：a)編碼移動像場被儲存，但是僅供用於層間移動預測，之一指示進入一位元串流；b)編碼移動像場用途之受限制範疇之一指示進入一位元串流；c)編碼是否使用供用於預測的移動像場之一指示進入一位元串流；d)編碼供用於儲存移動資訊的儲存參數之一指示進入一位元串流。

依據一第一實施例，一步驟a)包含二個或更多個下列者：i.編碼是否移動像場被使用在一層之內以供用於時間移動向量預測之一指示進入一位元串流；ii.編碼是否層間移動預測允許被使用之一指示進入一位元串流；iii.編碼是否對角線移動預測允許被使用之一指示進入一位元串流。

依據一第二實施例，於步驟b)該受限制範疇界定某些時間子層或圖像型式的任一者或兩者。

依據一第三實施例，步驟c)包含使用供用以推論將被使用於預測之移動像場之一特定演算法。

依據一第四實施例，步驟c)包含將對於控制移動像場標記之一命令或一語法元件編碼於位元串流。

依據一第五實施例，步驟d)包含指示儲存移動資訊的空間解析度或精確度。

依據一第六實施例，步驟d)包含指示移動資訊中哪些參數是移動預測所需要的。

依據一第七實施例，步驟d)包含指示減低移動像場儲存空間之移動資訊參數之限制。

依據一第二範例，提供一裝置，其包含至少一個處理器與至少一個包含電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，使用該等至少一個處理器，導致該裝置進行下列之至少一者：a)編碼移動像場被儲存之一指示進入一位元串流，但是該等移動像場僅供用於層間移動預測；b)編碼移動像場用途之受限制範疇之一指示進入一位元串流；c)編碼是否使用供用於預測的移動像場之一指示進入一位元串流；d)編碼供用於儲存移動資訊的儲存參數之一指示進入一位元串流。

依據一第三範例，提供一電腦程式產品，其包含一個或更多個序列之一個或更多個指令，其當藉由一個或更多個處理器被執行時，導致一裝置至少進行下列之至少一者：a)編碼移動像場被儲存之一指示，但是該等移動像場僅供用於層間移動預測進入一位元串流；b)編碼移動像場用途之受限制範疇之一指示進入一位元串流；c)編碼是否使用供用於預測的移動像場之一指示進入一位元串流；d)編碼供用於儲存移動資訊的儲存參數之一指示進入一位元串流。

依據一第四範例，提供一方法，其包含下列之至少一者：a)自一位元串流解碼移動像場被儲存，但是僅供用於層間移動預測，之一指示；b)自一位元串流解碼移動像場用途之受限制範疇之一指示；c)自一位元串流解碼是否使用供用於預測的移動像場之一指示；d)自一位元串流解碼供用於儲存移動資訊的儲存參數之一指示。

依據一第五範例，提供一裝置，其包含至少一個處理器與至少一個包含電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，以使用該等至少一個處理器，導致該裝置進行下列之至少一者：a)自一位元串流解碼移動像場被儲存，但是僅供用於層間移動預測，之一指示；b)自一位元串流解碼移動像場用途之受限制範疇之一指示；c)自一位元串流解碼是否使用供用於預測的移動像場之一指示；d)自一位元串流解碼供用於儲存移動資訊的儲存參數之一指示。

依據一第六範例，提供一電腦程式產品，其包含一個或更多個序列之一個或更多個指令，其當藉由一個或更多個處理器被執行時，導致一裝置至少進行下列之至少一者：a)自一位元串流解碼移動像場被儲存，但是僅供用於層間移動預測，之一指示；b)自一位元串流解碼移動像場用途之受限制範疇之一指示；c)自一位元串流解碼是否使用供用於預測的移動像場之一指示；d)自一位元串流解碼供用於儲存移動資訊的儲存參數之一指示。

X‧‧‧目前預測單元

A₀‧‧‧空間候選者

A₁‧‧‧空間候選者

B₀‧‧‧空間候選者

B₁‧‧‧空間候選者

B₂‧‧‧空間候選者

C₀‧‧‧時間候選者

C₁‧‧‧時間候選者

Claims

一種方法，其至少包含下列步驟：編碼指示是否一層之移動像場被儲存之一指示進入一位元流，其中該等移動像場僅供用於層間移動預測。
依據請求項1之方法，其中該編碼包含二個或更多個下列步驟：- 編碼是否移動像場被使用在一層之內以供用於時間移動向量預測之一指示進入一位元流；- 編碼是否層間移動預測允許被使用之一指示進入一位元流；- 編碼是否對角線移動預測允許被使用之一指示進入一位元流。
依據請求項2之方法，其中該指示被指定於一序列參數集合。
依據請求項1之方法，包含儲存移動像場作為在某一層編碼一目前圖像之部份。
一種裝置，其包含至少一個處理器與至少一個含有電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，以使用該等至少一個處理器，導致該裝置進行至少下列步驟：編碼指示是否一層之移動像場被儲存之一指示進入一位元流，其中該等移動像場僅供用於層間移動預測。
依據請求項5之裝置，其被組態以進行二個或更多個下列步驟：- 編碼是否移動像場被使用在一層之內以供用於時間移動向量預測之一指示進入一位元流；- 編碼是否層間移動預測允許被使用之一指示進入一位元流；- 編碼是否對角線移動預測允許被使用之一指示進入一位元流。
依據請求項6之裝置，其進一步地被組態以指定一序列參數集合中之指示。
依據請求項5之裝置，進一步地被組態以儲存移動像場作為在某一層編碼一目前圖像之部份。
依據請求項5之裝置，其是一移動式設備。
一種裝置，其至少包含處理構件與記憶體構件，其中該裝置進一步地包含編碼構件，該編碼構件被組態以編碼指示是否移動像場被儲存之至少一指示進入一位元流，其中該等移動像場僅供用於層間移動預測。
一種編碼器，其包含至少一個處理器與至少一個含有電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，以使用該等至少一個處理器，導致該編碼器進行至少下列步驟：編碼指示是否移動像場被儲存之一指示進入一位元流，其中該等移動像場僅供用於層間移動預測。
一種電腦程式產品，其包含一個或更多個指令之一個或更多個序列，其當藉由一個或更多個處理器被執行時，導致一裝置至少進行至少下列步驟：編碼指示是否移動像場被儲存之一指示進入一位元流，其中該等移動像場僅供用於層間移動預測。
一種方法，其包含至少下列步驟：自一位元流解碼指示是否移動像場被儲存之一指示，其中該等移動像場僅供用於層間移動預測。
一種裝置，其包含至少一個處理器與至少一個含有電腦程式碼之記憶體，該等至少一個記憶體與該電腦程式碼被組態，以使用該等至少一個處理器，導致該裝置進行至少下列步驟：自一位元流解碼指示是否移動像場被儲存之一指示，其中該等移動像場僅供用於層間移動預測。
一種裝置，其至少包含處理構件與記憶體構件，其中該裝置進一步地包含解碼構件，該解碼構件被組態以自一位元流解碼是否移動像場被儲存之至少一指示，其中該等移動像場僅供用於層間移動預測。
一種電腦程式產品，其包含一個或更多個指令之一個或更多個序列，其當藉由一個或更多個處理器被執行時，導致一裝置至少進行至少下列步驟：自一位元流解碼指示是否移動像場被儲存之一指示，其中該等移動像場僅供用於層間移動預測。