TWI530162B - 用於視訊寫碼之參考圖像清單建構 - Google Patents

用於視訊寫碼之參考圖像清單建構 Download PDF

Info

Publication number
TWI530162B
TWI530162B TW101134813A TW101134813A TWI530162B TW I530162 B TWI530162 B TW I530162B TW 101134813 A TW101134813 A TW 101134813A TW 101134813 A TW101134813 A TW 101134813A TW I530162 B TWI530162 B TW I530162B
Authority
TW
Taiwan
Prior art keywords
reference image
image
list
images
current
Prior art date
Application number
TW101134813A
Other languages
English (en)
Other versions
TW201334542A (zh
Inventor
王益魁
陳盈
Original Assignee
高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 高通公司 filed Critical 高通公司
Publication of TW201334542A publication Critical patent/TW201334542A/zh
Application granted granted Critical
Publication of TWI530162B publication Critical patent/TWI530162B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/12—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal

Description

用於視訊寫碼之參考圖像清單建構
本發明係關於視訊寫碼，且更特定言之，係關於用於寫碼視訊資料之技術。
本申請案主張以下各申請案之權利：2011年9月23日申請之美國臨時申請案第61/538,787號；2011年9月26日申請之美國臨時專利申請案第61/539,433號；及2011年9月30日申請之美國臨時專利申請案第61/542,034號，該等申請案中之每一者之全部內容以全文引用之方式併入本文中。
數位視訊能力可併入至廣泛範圍之器件中，該等器件包括數位電視、數位直播系統、無線廣播系統、個人數位助理(PDA)、膝上型或桌上型電腦、平板型電腦、電子書閱讀器、數位攝影機、數位記錄器件、數位媒體播放器、視訊遊戲器件、視訊遊戲控制台、蜂巢式或衛星無線電電話、所謂的「智慧型電話」、視訊電傳會議器件、視訊串流器件，及其類似者。數位視訊器件實施視訊壓縮技術，諸如以下各者中所描述之彼等技術：由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分(進階視訊寫碼(AVC))定義之標準、目前在開發中的高效率視訊寫碼(HEVC)標準，及此等標準之擴展。視訊器件可藉由實施此等視訊壓縮技術而更有效率地傳輸、接收、編碼、解 碼及/或儲存數位視訊資訊。
視訊壓縮技術執行空間(圖像內)預測及/或時間(圖像間)預測，以減少或移除視訊序列中所固有之冗餘。對於基於區塊之視訊寫碼，可將視訊切片(亦即，視訊圖像或視訊圖像之一部分)分割成視訊區塊，視訊區塊亦可被稱作樹區塊、寫碼樹區塊(CTB)、寫碼樹單元(CTU)、寫碼單元(CU)及/或寫碼節點。使用相對於相同圖像中之相鄰區塊中之參考樣本的空間預測來編碼圖像之經框內寫碼(I)切片中的視訊區塊。圖像之經框間寫碼(P或B)切片中之視訊區塊可使用相對於相同圖像中之相鄰區塊中之參考樣本的空間預測或相對於其他參考圖像中之參考樣本之時間預測。圖像可被稱作圖框，且參考圖像可被稱作參考圖框。
空間預測或時間預測導致寫碼用於區塊之預測性區塊。殘餘資料表示待寫碼之原始區塊與預測性區塊之間的像素差。根據指向形成預測性區塊之參考樣本之區塊的運動向量及指示經寫碼區塊與預測性區塊之間的差異之殘餘資料來編碼經框間寫碼區塊。根據框內寫碼模式及殘餘資料來編碼經框內寫碼區塊。為了進行進一步壓縮，可將殘餘資料自像素域變換至變換域，從而產生殘餘變換係數，可接著量化殘餘變換係數。可掃描最初配置成二維陣列之經量化之變換係數，以便產生變換係數之一維向量，且可應用熵寫碼以達成甚至更多壓縮。
大體而言，本發明描述與導出用於視訊寫碼中之一參考 圖像集有關的技術。舉例而言，該參考圖像集可構成複數個參考圖像子集之一組合。該等參考圖像子集中之每一者可識別複數個潛在參考圖像，但少於全部的潛在參考圖像。在本發明中所描述之實例技術中，一種視訊寫碼器(編碼器或解碼器)可建構多個清單，每一清單包括該等潛在參考圖像之一子集的識別符。自此等多個清單，該視訊寫碼器可建構該複數個參考圖像子集，此情形導致該視訊寫碼器導出該參考圖像集。
除與導出該參考圖像集有關之技術之外，本發明亦描述簡化參考圖像清單初始化技術。此參考圖像清單初始化可移除對將該等參考圖像重新定序之需要。舉例而言，若不需要參考圖像清單修改，則該等初始參考圖像清單可形成該等最終參考圖像清單，且可能不需要任何進一步重新定序。該等技術亦可有關以如下之一方式建構該參考圖像清單：其中，該視訊寫碼器重複地將參考圖像添加至該參考圖像清單，直至該參考圖像清單之條目數等於條目之最大可允許數目為止。
在一些實例中，該等技術係有關參考圖像清單修改。舉例而言，該視訊寫碼器可藉由以下操作來修改該初始參考圖像清單：參考該等參考圖像子集中之一或多者，且在該建構該初始參考圖像清單之後將該等參考圖像子集中之一或多個圖像包括於該參考圖像清單中。
在一些實例中，該視訊寫碼器可執行已解碼圖像緩衝器(DPB)管理。在此等實例中，若已解碼圖像並不屬於該參 考圖像集，則該視訊寫碼器可將該已解碼圖像自該DPB中移除。在一些例子中，該視訊寫碼器可在寫碼當前圖像之前移除該已解碼圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之方法，該方法包括寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該方法亦包括：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；及基於該複數個參考圖像子集而寫碼該當前圖像。
在一實例中，本發明描述一種用於用於寫碼視訊資料之器件。該器件包括一視訊寫碼器，該視訊寫碼器經組態以寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該視訊寫碼器亦經組態以：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；及基於該複數個參考圖像子集而寫碼該當前圖像。
在一實例中，本發明描述一種儲存有指令之電腦可讀儲存媒體，該等指令在執行時造成用於寫碼視訊資料之一器件之一處理器寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當 前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該等指令亦造成該處理器：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；及基於該複數個參考圖像子集而寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括用於寫碼指示屬於一參考圖像集之參考圖像之資訊的構件。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該器件亦包括：用於建構複數個參考圖像子集之構件，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；及用於基於該複數個參考圖像子集而寫碼該當前圖像之構件。
在一實例中，本發明描述一種用於寫碼視訊資料之方法，該方法包括寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該方法亦包括：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；只要參考圖像清單條目之一數目不大於可允許參考清單條目之一最大數目，便將以下各參考圖像添加至一參考 圖像清單中：來自該複數個參考圖像子集中之一第一子集的參考圖像、繼之來自該複數個參考圖像子集中之一第二子集的參考圖像，及繼之來自該複數個參考圖像子集中之一第三子集的參考圖像；及基於該參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括一視訊寫碼器，該視訊寫碼器經組態以寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該視訊寫碼器亦經組態以：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；只要參考圖像清單條目之一數目不大於可允許參考清單條目之一最大數目，便將以下各參考圖像添加至一參考圖像清單中：來自該複數個參考圖像子集中之一第一子集的參考圖像、繼之來自該複數個參考圖像子集中之一第二子集的參考圖像，及繼之來自該複數個參考圖像子集中之一第三子集的參考圖像；及基於該參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種儲存有指令之電腦可讀儲存媒體，該等指令在執行時造成用於寫碼視訊資料之一器件之一處理器寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當 前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該等指令亦造成該處理器：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；只要參考圖像清單條目之一數目不大於可允許參考清單條目之一最大數目，便將以下各參考圖像添加至一參考圖像清單中：來自該複數個參考圖像子集中之一第一子集的參考圖像、繼之來自該複數個參考圖像子集中之一第二子集的參考圖像，及繼之來自該複數個參考圖像子集中之一第三子集的參考圖像；及基於該參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括用於寫碼指示屬於一參考圖像集之參考圖像之資訊的構件。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該器件亦包括：用於建構複數個參考圖像子集之構件，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；用於只要參考圖像清單條目之一數目不大於可允許參考清單條目之一最大數目，便將以下各參考圖像添加至一參考圖像清單中的構件：來自該複數個參考圖像子集中之一第一子集的參考圖像、繼之來自該複數個參考圖像子集中之一第二子集的參考圖像，及繼之來自該複數個參考圖像子集中之一第三子集的參考圖像； 及用於基於該參考圖像清單而寫碼該當前圖像之構件。
在一實例中，本發明描述一種用於寫碼視訊資料之方法，該方法包括寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該方法亦包括：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；將來自該複數個參考圖像子集之參考圖像添加至一參考圖像清單中之一第一條目集合中；判定該參考圖像清單中之條目之一數目是否等於該參考圖像清單中的可允許條目之一最大數目；當該參考圖像清單中之條目之該數目不等於該參考圖像清單中的可允許條目之該最大數目時，重複地將來自該等參考圖像子集中之至少一者的一或多個參考圖像重新添加至該參考圖像清單中在該第一條目集合之後的條目中，直至該參考圖像清單中之條目之該數目等於該參考圖像清單中的可允許條目之該最大數目為止；及基於該參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括一視訊寫碼器，該視訊寫碼器經組態以寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該視訊寫碼 器亦經組態以：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；將來自該複數個參考圖像子集之參考圖像添加至一參考圖像清單中之一第一條目集合中；判定該參考圖像清單中之條目之一數目是否等於該參考圖像清單中的可允許條目之一最大數目；當該參考圖像清單中之條目之該數目不等於該參考圖像清單中的可允許條目之該最大數目時，重複地將來自該等參考圖像子集中之至少一者的一或多個參考圖像重新添加至該參考圖像清單中在該第一條目集合之後的條目中，直至該參考圖像清單中之條目之該數目等於該參考圖像清單中的可允許條目之該最大數目為止；及基於該參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種儲存有指令之電腦可讀儲存媒體，該等指令在執行時造成用於寫碼視訊資料之一器件之一處理器寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該等指令亦造成該處理器：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；將來自該複數個參考圖像子集之參考圖像添加至一參考圖像清單中之一第一條目集合中；判定該參考圖像清單中之條目之一數目是否等於該參考圖像清單中的可允許條目之一最大數目；當該參考圖像清單中之條目 之該數目不等於該參考圖像清單中的可允許條目之該最大數目時，重複地將來自該等參考圖像子集中之至少一者的一或多個參考圖像重新添加至該參考圖像清單中在該第一條目集合之後的條目中，直至該參考圖像清單中之條目之該數目等於該參考圖像清單中的可允許條目之該最大數目為止；及基於該參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括用於寫碼指示屬於一參考圖像集之參考圖像之資訊的構件。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該器件亦包括：用於建構複數個參考圖像子集之構件，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；用於將來自該複數個參考圖像子集之參考圖像添加至一參考圖像清單中之一第一條目集合中的構件；用於判定該參考圖像清單中之條目之一數目是否等於該參考圖像清單中的可允許條目之一最大數目的構件；當該參考圖像清單中之條目之該數目不等於該參考圖像清單中的可允許條目之該最大數目時，用於重複地將來自該等參考圖像子集中之至少一者的一或多個參考圖像重新添加至該參考圖像清單中在該第一條目集合之後的條目中，直至該參考圖像清單中之條目之該數目等於該參考圖像清單中的可允許條目之該最大數目為止的構件；及用於基於該參考圖像清單而寫碼該當前圖像之構件。
在一實例中，本發明描述一種用於寫碼視訊資料之方法，該方法包括寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該方法亦包括：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；基於該等所建構之參考圖像子集而建構一初始參考圖像清單；及在需要參考圖像修改時，識別該等所建構之參考圖像子集中之至少一者中的一參考圖像；及在該初始參考圖像清單之一當前條目中添加該所識別之參考圖像以建構一修改之參考圖像清單。該方法進一步包括基於該修改之參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括一視訊寫碼器，該視訊寫碼器經組態以寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該視訊寫碼器亦經組態以：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；基於該等所建構之參考圖像子集而建構一初始參考圖像清單；及在需要參考圖像修改時，識別該等所建構之參考圖像子集中之至少一者中的一參考圖像；及在該初始參考圖 像清單之一當前條目中添加該所識別之參考圖像以建構一修改之參考圖像清單。該視訊寫碼器亦經組態以基於該修改之參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種儲存有指令之電腦可讀儲存媒體，該等指令在執行時造成用於寫碼視訊資料之一器件之一處理器寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該等指令亦造成該處理器：建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者；基於該等所建構之參考圖像子集而建構一初始參考圖像清單；及在需要參考圖像修改時，識別該等所建構之參考圖像子集中之至少一者中的一參考圖像；及在該初始參考圖像清單之一當前條目中添加該所識別之參考圖像以建構一修改之參考圖像清單。該等指令亦造成該處理器基於該修改之參考圖像清單而寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括用於寫碼指示屬於一參考圖像集之參考圖像之資訊的構件。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該器件亦包括：用於建構複數個參考圖像子集之構件，每一參考圖像子集識別該參考圖像集之該等 參考圖像中的零或多者；用於基於該等所建構之參考圖像子集而建構一初始參考圖像清單的構件；及在需要參考圖像修改時，用於識別該等所建構之參考圖像子集中之至少一者中的一參考圖像的構件；及用於在該初始參考圖像清單之一當前條目中添加該所識別之參考圖像以建構一修改之參考圖像清單的構件。該器件亦包括用於基於該修改之參考圖像清單而寫碼該當前圖像的構件。
在一實例中，本發明描述一種用於寫碼視訊資料之方法，該方法包括寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該方法包括：基於該經寫碼資訊而導出該參考圖像集；判定儲存於一已解碼圖像緩衝器(DPB)中之一已解碼圖像是否不需要輸出且是否在該參考圖像集中未加以識別；當該已解碼圖像不需要輸出且在該參考圖像集中未加以識別時，將該已解碼圖像自該DPB中移除；及在該移除該已解碼圖像之後，寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括一視訊寫碼器，該視訊寫碼器經組態以寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該視訊寫碼 器亦經組態以：基於該經寫碼資訊而導出該參考圖像集；判定儲存於一已解碼圖像緩衝器(DPB)中之一已解碼圖像是否不需要輸出且是否在該參考圖像集中未加以識別；當該已解碼圖像不需要輸出且在該參考圖像集中未加以識別時，將該已解碼圖像自該DPB中移除；及在該移除該已解碼圖像之後，寫碼該當前圖像。
在一實例中，本發明描述一種儲存有指令之電腦可讀儲存媒體，該等指令在執行時造成用於寫碼視訊資料之一器件之一處理器寫碼指示屬於一參考圖像集之參考圖像之資訊。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該等指令亦造成該處理器：基於該經寫碼資訊而導出該參考圖像集；判定儲存於一已解碼圖像緩衝器(DPB)中之一已解碼圖像是否不需要輸出且是否在該參考圖像集中未加以識別；當該已解碼圖像不需要輸出且在該參考圖像集中未加以識別時，將該已解碼圖像自該DPB中移除；及在該移除該已解碼圖像之後，寫碼該當前圖像。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括用於寫碼指示屬於一參考圖像集之參考圖像之資訊的構件。在此實例中，該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像。該器件亦包括：用於基於該經寫碼資訊而 導出該參考圖像集之構件；用於判定儲存於一已解碼圖像緩衝器(DPB)中之一已解碼圖像是否不需要輸出且是否在該參考圖像集中未加以識別的構件；當該已解碼圖像不需要輸出且在該參考圖像集中未加以識別時，用於將該已解碼圖像自該DPB中移除之構件；及在該移除該已解碼圖像之後，用於寫碼該當前圖像之構件。
在一實例中，本發明描述一種寫碼視訊資料之方法，該方法包括寫碼指示在一參數集中識別之候選長期參考圖像之語法元素。在此實例中，該等候選長期參考圖像中之一或多者屬於一當前圖像之一參考圖像集。又，在此實例中，該參考圖像集識別可潛在地用於對該當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的參考圖像。該方法亦包括：寫碼指示在該參數集中識別的哪些候選長期參考圖像屬於該當前圖像之該參考圖像集的語法元素；及基於哪些候選長期參考圖像屬於該當前圖像之該參考圖像集的該指示而建構複數個參考圖像子集中之至少一者。在此實例中，該複數個參考圖像子集形成該參考圖像集。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括一視訊寫碼器，該視訊寫碼器經組態以寫碼指示在一參數集中識別之候選長期參考圖像之語法元素。在此實例中，該等候選長期參考圖像中之一或多者屬於一當前圖像之一參考圖像集。又，在此實例中，該參考圖像集識別可潛在地用於對該當前圖像進行框間預測且可 潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的參考圖像。該視訊寫碼器亦經組態以：寫碼指示在該參數集中識別的哪些候選長期參考圖像屬於該當前圖像之該參考圖像集的語法元素；及基於哪些候選長期參考圖像屬於該當前圖像之該參考圖像集的該指示而建構複數個參考圖像子集中之至少一者。在此實例中，該複數個參考圖像子集形成該參考圖像集。
在一實例中，本發明描述一種儲存有指令之電腦可讀儲存媒體，該等指令在執行時造成用於寫碼視訊資料之一器件之一處理器寫碼指示在一參數集中識別之候選長期參考圖像之語法元素。在此實例中，該等候選長期參考圖像中之一或多者屬於一當前圖像之一參考圖像集。又，在此實例中，該參考圖像集識別可潛在地用於對該當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的參考圖像。該等指令亦造成該處理器：寫碼指示在該參數集中識別的哪些候選長期參考圖像屬於該當前圖像之該參考圖像集的語法元素；及基於哪些候選長期參考圖像屬於該當前圖像之該參考圖像集的該指示而建構複數個參考圖像子集中之至少一者。在此實例中，該複數個參考圖像子集形成該參考圖像集。
在一實例中，本發明描述一種用於寫碼視訊資料之器件。該器件包括用於寫碼指示在一參數集中識別之候選長期參考圖像之語法元素的構件。在此實例中，該等候選長期參考圖像中之一或多者屬於一當前圖像之一參考圖像 集。又，在此實例中，該參考圖像集識別可潛在地用於對該當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的參考圖像。該器件亦包括：用於寫碼指示在該參數集中識別的哪些候選長期參考圖像屬於該當前圖像之該參考圖像集的語法元素的構件；及用於基於哪些候選長期參考圖像屬於該當前圖像之該參考圖像集的該指示而建構複數個參考圖像子集中之至少一者的構件。在此實例中，該複數個參考圖像子集形成該參考圖像集。
一或多個實例之細節闡述於隨附圖式及下文之描述中。其他特徵、目標及優點將自該描述及該等圖式以及自申請專利範圍而顯而易見。
本發明之技術大體上係關於用於進行框間預測之參考圖像之管理。舉例而言，視訊寫碼器(例如，視訊編碼器或視訊解碼器)包括已解碼圖像緩衝器(DPB)。該DPB儲存已解碼圖像，包括參考圖像。參考圖像為可潛在地用於對圖像進行框間預測之圖像。換言之，視訊寫碼器可在寫碼(編碼或解碼)一圖像期間，基於儲存於DPB中之一或多個參考圖像而預測該圖像。
為了有效率地利用DPB，可指定DPB管理處理程序，諸如DPB中之已解碼圖像之儲存處理程序、參考圖像之標記處理程序、來自DPB的已解碼圖像之輸出及移除處理程序，等等。大體而言，在一些當前及開發中之視訊寫碼標 準中，DPB管理可包括以下態樣中之一或多者：圖像識別及參考圖像識別、參考圖像清單建構、參考圖像標記、來自DPB之圖像輸出、至DPB中之圖像插入，及來自DPB之圖像移除。
為了輔助理解，下文提供關於如何可根據一些視訊寫碼標準發生參考圖像標記及參考圖像清單建構的簡要描述。本發明中所描述之技術中之一些技術解決可能存在於參考圖像標記、參考圖像清單建構及DPB圖像移除及輸出中之問題，以便改良DPB之利用效率。
對於參考圖像標記，在作用中序列參數集中指示用於進行框間預測之參考圖像之最大數目(被稱作M(num_ref_frames))。當參考圖像經解碼時，將該參考圖像標記為「用於參考」。若參考圖像之解碼造成將M個以上圖像標記為「用於參考」，則必須將至少一圖像標記為「不用於參考」。若標記為「不用於參考」之圖像亦不需要輸出，則DPB移除處理程序將標記為「不用於參考」之圖像自DPB中移除。
當一圖像經解碼時，該圖像可能為非參考圖像或參考圖像。參考圖像可能為長期參考圖像或短期參考圖像，且當參考圖像經標記為「不用於參考」時，該參考圖像可能變得不再需要供參考。在一些視訊寫碼標準中，可能存在改變參考圖像之狀態的參考圖像標記操作。
可能存在用於參考圖像標記之兩種類型之操作：滑動窗及適應性記憶體控制。用於參考圖像標記之操作模式可基 於圖像而選擇；而，滑動窗操作可藉由固定數目個短期參考圖像以先進先出佇列之形式運作。換言之，可以隱含式方式首先移除具有最早解碼時間之短期參考圖像(標記為不用於參考之圖像)。
然而，適應性記憶體控制顯式地移除短期或長期圖像。適應性記憶體控制亦使得能夠切換短期及長期圖像之狀態等。舉例而言，在適應性記憶體控制中，視訊編碼器可用信號發出指定應將哪些圖像標記為用於參考之語法元素。視訊解碼器可接收語法元素且如所指定標記圖像。在滑動窗中，視訊編碼器可能不需要用信號發出應將哪些圖像標記為用於參考。實情為，視訊解碼器可基於哪些圖像在滑動窗內而隱含式地(亦即，不接收語法元素)判定應將哪些圖像標記為用於參考。
視訊寫碼器亦可將建構指示哪些參考圖像可用於框間預測目的之參考圖像清單作為任務。此等參考圖像清單中之兩者分別被稱作清單0及清單1。視訊寫碼器首先使用預設建構技術來建構清單0及清單1(例如，用於建構清單0及清單1之預先組態之建構方案)。視情況，在建構初始清單0及清單1之後，視訊解碼器可解碼語法元素，當存在語法元素時，語法元素可指導視訊解碼器修改初始清單0及清單1。
視訊編碼器可用信號發出指示DPB中之參考圖像之識別符的語法元素，且視訊編碼器亦可在清單0、清單1或清單0與清單1兩者內用信號發出包括索引之語法元素，該等索 引指示哪一參考圖像或哪些參考圖像將用以解碼當前圖像之經寫碼區塊。反過來，視訊解碼器使用所接收識別符識別清單0、清單1或清單0與清單1兩者中所列出的一或多個參考圖像之一或多個索引值。自該一或多個參考圖像之(多個)索引值以及(多個)識別符，視訊解碼器自DPB中擷取該一或多個參考圖像或該一或多個參考圖像之部分，且基於該一或多個所擷取之參考圖像及一或多個運動向量而解碼當前圖像之經寫碼區塊，該一或多個運動向量識別該一或多個參考圖像內用於解碼經寫碼區塊之區塊。
舉例而言，用於雙向預測圖像之第一參考圖像清單或第二參考圖像清單之參考圖像清單建構包括兩個步驟：參考圖像清單初始化及參考圖像清單修改(亦被稱作參考圖像清單重新定序)。參考圖像清單初始化可為隱含式機制，其基於圖像序列號次序(POC，與圖像之顯示次序對準)值將參考圖像記憶體(亦被稱為已解碼圖像緩衝器)中之參考圖像置於清單中。參考圖像清單重新定序機制可將在參考圖像清單初始化期間置於清單中的圖像之位置修改成任何新位置，或甚至在圖像並不屬於初始化之清單的情況下，將參考圖像記憶體中之任何參考圖像置於任何位置中。在參考圖像清單重新定序(修改)之後，一些圖像可能置於清單中非常遠之位置中。然而，若圖像之位置超過清單之作用中參考圖像之數目，則該圖像將不被視為最終參考圖像清單之條目。可在每一清單之切片標頭中用信號發出清單之作用中參考圖像之數目。
本發明中所描述之技術可適用於各種視訊寫碼標準。視訊寫碼標準之實例包括ITU-T H.261、ISO/IEC MPEG-1視訊、ITU-T H.262或ISO/IEC MPEG-2視訊、ITU-T H.263、ISO/IEC MPEG-4視訊及ITU-T H.264(亦被稱為ISO/IEC MPEG-4 AVC)，包括其可調式視訊寫碼(SVC)及多視角視訊寫碼(MVC)擴展。另外，存在新的視訊寫碼標準，亦即，高效率視訊寫碼(HEVC)，其係由ITU-T視訊寫碼專家群(VCEG)及ISO/IEC動畫專家群(MPEG)之視訊寫碼聯合協作小組(JCT-VC)開發。
僅為了說明之目的，在HEVC標準之上下文中描述技術。自2012年7月20日時起，可自http：//phenix.int-evry.fr/jct/doc_end_user/documents/10_Stockholm/wg11/JCTVC-J1003-v8.zip得到HEVC之最新工作草案(WD)(且在下文中被稱作HEVC WD8)。
如上文所描述，本發明中所描述之技術可解決可能存在於用於已解碼圖像緩衝器(DPB)管理之現有解決方案中的問題。作為一實例，在本發明中所描述之一些實例技術中，可能不需要作為「不用於參考」之參考圖像之標記。舉例而言，本發明中所描述之技術可解決以下各問題：與無法良好地適合時間可調性之DPB管理技術有關的問題、與長期參考圖像之發信號耗用有關的問題、與參考圖像清單初始化及修改之效率及複雜性有關的問題。本發明中所描述之技術亦可解決以下各問題：與參考圖像清單初始化期間的參考圖像清單中之非完成條目的「無參考圖像」之 標記有關的問題；與已解碼圖像輸出、至DPB中之插入及來自DPB之移除有關的問題；以及與圖像序列號(POC)值之可能值有關的問題。
根據本發明中所描述之技術，自一參考圖像集建構參考圖像清單。參考圖像集經定義為與一圖像相關聯之一參考圖像集合，其由在解碼次序上在相關聯之圖像之前的所有參考圖像組成，其可用於對相關聯之圖像中的區塊或對在解碼次序上跟隨相關聯之圖像的任何圖像進行框間預測，例如，直至下一瞬時解碼再新(IDR)圖像或斷裂連結存取(BLA)圖像為止。換言之，參考圖像集中之參考圖像可能需要以下特性：(1)其在解碼次序上全部在當前圖像之前，及(2)其可用於對當前圖像進行框間預測及/或對在解碼次序上跟隨當前圖像的任何圖像進行框間預測，且在一些實例中，直至下一IDR圖像或BLA圖像為止。可能存在關於參考圖像集之其他替代定義，下文提供該等其他替代定義。
在本發明中所描述之實例技術中，視訊寫碼器可導出參考圖像集，且在此導出之後，視訊寫碼器可建構參考圖像清單。舉例而言，僅參考圖像集中之參考圖像可為用以建構參考圖像清單之候選參考圖像。
為了建構參考圖像集，視訊寫碼器可建構複數個參考圖像子集。參考圖像子集之組合可一起形成參考圖像集。舉例而言，視訊編碼器可在經寫碼位元串流中顯式地用信號發出允許視訊解碼器判定用於包括於參考圖像集中之參考 圖像之識別符的值。舉例而言，參考圖像之識別符可為圖像序列號。每一圖像與一圖像序列號(被稱作PicOrderCnt)相關聯。PicOrderCnt指示相對於解碼次序上之先前IDR圖像的相應圖像之輸出次序或顯示次序，且，在一些其他替代例中，指示相對於相同經寫碼視訊序列中的其他圖像之輸出次序位置的相關聯之圖像的輸出次序位置。
PicOrderCnt可被稱作圖像序列號(POC)值。POC值可指示圖像之輸出或顯示次序，且可用以識別一圖像。舉例而言，在經寫碼視訊序列內，具有較小POC值之圖像比具有較大POC值之圖像早輸出或顯示。
視訊解碼器可判定用於參考圖像之識別符，且自此等識別符建構該複數個參考圖像子集。自此等參考圖像子集，視訊解碼器可導出參考圖像集，如下文更詳細描述。在一些實例中，參考圖像子集中之每一者包括不同參考圖像，此係因為該等參考圖像子集中之參考圖像不存在重疊之故。以此方式，參考圖像中之每一者可能僅在參考圖像子集中之一者中，且不在任何其他參考圖像子集中。然而，本發明之態樣不應被視為受此限制。
在判定參考圖像集或參考圖像集之子集中的參考圖像之識別符(例如，POC值)之後，視訊解碼器可建構參考圖像子集。如下文更詳細描述，視訊解碼器可建構六個參考圖像子集，但視訊解碼器可能有可能建構更多或更少個參考圖像子集。
此等六個參考圖像子集命名為：RefPicSetStCurr0、 RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr，及RefPicSetLtFoll。RefPicSetStCurr0參考圖像子集可被稱作RefPicSetStCurrBefore參考圖像子集，且RefPicSetStCurr1參考圖像子集可被稱作RefPicSetStCurrAfter參考圖像子集。
RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0及RefPicSetStFoll1參考圖像子集可識別短期參考圖像。在一些實例中，此等參考圖像子集可基於以下各者而識別短期參考圖像：短期參考圖像是在顯示次序上比正被寫碼之當前圖像早抑或在顯示次序上比正被寫碼之當前圖像遲，以及短期參考圖像是否可潛在地用於對當前圖像及在解碼次序上跟隨當前圖像的圖像進行框間預測，或是否可潛在地用於僅對在解碼次序上跟隨當前圖像的圖像進行框間預測。
舉例而言，RefPicSetStCurr0參考圖像子集可包括(且可僅包括)滿足以下情形之所有短期參考圖像之識別資訊(諸如，POC值)：具有比當前圖像之輸出或顯示次序早的輸出或顯示次序，且可潛在地用於在當前圖像之框間預測中供參考，且可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考。RefPicSetStCurr1參考圖像子集可包括(且可僅包括)滿足以下情形之所有短期參考圖像之識別資訊：具有比當前圖像之輸出或顯示次序遲的輸出或顯示次序，且可潛在地用於在當前圖像之框間預測中供參考，且可潛在地用於於在解碼次序上跟隨當前圖 像之一或多個圖像之框間預測中供參考。
RefPicSetStFoll0參考圖像子集可包括(且可僅包括)滿足以下情形之所有短期參考圖像之識別資訊：具有比當前圖像之輸出或顯示次序早的輸出或顯示次序，可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考，且無法用於在當前圖像之框間預測中供參考。RefPicSetStFoll1參考圖像子集可包括(且可僅包括)滿足以下情形之所有短期參考圖像之識別資訊：具有比當前圖像之輸出或顯示次序遲的輸出或顯示次序，可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考，且無法用於在當前圖像之框間預測中供參考。
RefPicSetLtCurr及RefPicSetLtFoll參考圖像子集可識別長期參考圖像。在一些實例中，此等參考圖像子集可基於長期參考圖像是在顯示次序上比正被寫碼之當前圖像早抑或在顯示次序上比正被寫碼之當前圖像遲，識別長期參考圖像。
舉例而言，RefPicSetLtCurr參考圖像子集可包括(且可僅包括)滿足以下情形之所有長期參考圖像之識別資訊：可潛在地用於在當前圖像之框間預測中供參考，且可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考。RefPicSetLtFoll參考圖像子集可包括(且可僅包括)滿足以下情形之所有長期參考圖像之識別資訊：可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考，且無法用於在當前圖像之框 間預測中供參考。
在建構參考圖像子集之後，視訊解碼器可將該等參考圖像子集以不同次序定序以導出參考圖像集。作為一實例，參考圖像集之次序可為RefPicSetStCurr0、RefPicSetSetCurr1、RefPicSetFoll0、RefPicSetFoll1、RefPicSetLtCurr，及RefPicSetLtFoll。然而，該等子集之其他定序可能有可能導出參考圖像集。舉例而言，作為另一實例，參考圖像集之次序可為RefPicSetStCurr0參考圖像子集、繼之RefPicSetStCurr1參考圖像子集、繼之RefPicSetLtCurr參考圖像子集、繼之RefPicSetStFoll0參考圖像子集、繼之RefPicSetFoll1參考圖像子集，且繼之RefPicSetLtFoll參考圖像子集。
根據本發明中所描述之技術，RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr子集包括可用於當前圖像中之區塊之框間預測中且可用於在解碼次序上跟隨當前圖像的圖像中之一或多者之框間預測中的所有參考圖像。RefPicSetStFoll0、RefPicSetStFoll1及RefPicSetLtFoll子集包括不用於當前圖像中之區塊之框間預測中而可用於在解碼次序上跟隨當前圖像的圖像中之一或多者之框間預測中的所有參考圖像。
應理解，僅用於說明目的而描述六個參考圖像子集，且該情形不應被視為限制性的。在替代實例中，可能存在更多或更少個參考圖像子集。下文更詳細描述在此等替代實例中的此等參考圖像子集。
在此等揭示內容中所描述之一些技術中，視訊解碼器可能不需要將已解碼圖像標記為「用於參考」、「不用於參考」、「用於短期參考」或「用於長期參考」。實情為，儲存於DPB中之已解碼圖像是否需要進行框間預測係藉由其是否包括於當前圖像之參考圖像集中來指示。在替代實例中，視訊解碼器可能有可能將已解碼圖像標記為「用於參考」、「不用於參考」、「用於短期參考」或「用於長期參考」。在此等實例中，在視訊解碼器解碼圖像之後，該已解碼圖像為參考圖像且經標記為「用於參考」。接著，在調用用於參考圖像集導出之處理程序之後，在來自DPB之已解碼圖像之可能的移除之前，將儲存於DPB中但不包括於當前圖像之參考圖像集中的所有參考圖像標記為「不用於參考」。因此，儲存於DPB中之已解碼圖像是否需要進行框間預測可藉由其是否標記為「用於參考」來指示。
一旦視訊解碼器自該複數個參考圖像子集導出參考圖像集，視訊解碼器便可自參考圖像集建構參考圖像清單(例如，清單0及清單1)。舉例而言，參考圖像清單之建構可包括初始化步驟及可能的修改步驟。藉由以上文所描述之方式導出參考圖像集，視訊解碼器可能能夠改良參考圖像清單初始化及參考圖像清單修改之效率且降低參考圖像清單初始化及參考圖像清單修改之複雜性。
可能存在視訊解碼器可藉以建構參考圖像清單之各種方式。本發明中所描述之技術提供一種機制，視訊解碼器可藉由該機制建構參考圖像清單，而不需要將待包括於(初 始)參考圖像清單中之參考圖像重新定序。舉例而言，視訊解碼器可經組態以實施預設參考清單建構技術，其中視訊解碼器利用參考圖像子集建構初始參考圖像清單。接著，若不需要參考圖像清單修改，則最終參考圖像清單可與初始參考圖像清單相同，而不需要參考圖像清單之任何額外重新定序。
在一些實例中，本發明中所描述之技術可關於以不存在非完成條目之方式建構參考圖像清單。舉例而言，該等技術可重複地將參考圖像自參考圖像子集中之一或多者添加至參考圖像清單。舉例而言，在視訊解碼器添加來自用於建構初始參考圖像清單之參考圖像子集中之一或多者的參考圖像之後，視訊解碼器可判定參考圖像清單中的條目之數目是否小於條目之最大可允許數目。若參考圖像清單中的條目之數目小於條目之可允許數目之最大數目，則視訊解碼器可在參考圖像清單中重新添加來自用以建構參考圖像清單之參考圖像子集中之一者的參考圖像中之至少一者。參考圖像之此重新添加(亦被稱作重新列出)可發生於參考圖像清單內不同於由視訊解碼器首先添加參考圖像之位置的位置處。
如本發明中所使用，重新列出或重新添加指代在初始參考圖像清單中再次添加(例如，再次識別)先前已添加(例如，已識別)之參考圖像。然而，當重新添加參考圖像時，參考圖像可位於初始參考圖像清單中之兩個不同條目處。換言之，當重新添加參考圖像時，可能存在識別相同 參考圖像的至初始參考圖像清單中之兩個索引值。
在一些實例中，本發明中所描述之技術可關於修改初始參考圖像清單。舉例而言，視訊解碼器可建構初始參考圖像清單。視訊解碼器可基於由視訊編碼器在經寫碼位元串流中用信號發出之語法元素而判定需要參考圖像清單修改。當需要參考圖像清單修改時，視訊解碼器可識別所建構之參考圖像子集中之至少一者中的參考圖像。視訊解碼器可在初始參考圖像清單之當前條目中列出(例如，添加)所識別之參考圖像以建構修改之參考圖像清單。視訊解碼器可接著基於修改之參考圖像清單而解碼當前圖像。
在一些實例中，本發明中所描述之技術可關於來自已解碼圖像緩衝器(DPB)之已解碼圖像之輸出及移除。該等實例技術可在寫碼當前圖像之前將已解碼圖像自DPB中移除。舉例而言，若彼已解碼圖像在當前圖像之參考圖像集中未加以識別且若彼已解碼圖像不需要輸出(亦即，已解碼圖像不意欲輸出或已解碼圖像意欲輸出但已經輸出)，則實例技術可移除該已解碼圖像。
圖1為說明可利用本發明中所描述之技術之實例視訊編碼及解碼系統10的方塊圖。大體而言，參考圖像集經定義為與一圖像相關聯之一參考圖像集合，其由在解碼次序上在相關聯之圖像之前的所有參考圖像組成，其可用於對相關聯之圖像或對在解碼次序上跟隨相關聯之圖像的任何圖像進行框間預測。在一些實例中，在相關聯之圖像之前的參考圖像可為直至下一瞬時解碼再新(IDR)圖像或斷裂連 結存取(BLA)圖像為止的參考圖像。換言之，參考圖像集中之參考圖像可能在解碼次序上全部在當前圖像之前。又，參考圖像集中之參考圖像可用於對當前圖像進行框間預測及/或對在解碼次序上跟隨當前圖像的任何圖像進行框間預測，直至下一IDR圖像或BLA圖像為止。
可能存在參考圖像集之其他替代定義。舉例而言，參考圖像集可為與一圖像相關聯之參考圖像集合，其由滿足以下情形之所有參考圖像(排除相關聯之圖像自身)組成：可用於對相關聯之圖像或對在解碼次序上跟隨相關聯之圖像的任何圖像進行框間預測，且具有小於或等於相關聯之圖像之temporal_id的temporal_id。temporal_id可為時間識別值。時間識別值可為指示哪些圖像可用於寫碼當前圖像之階層值。大體而言，具有特定temporal_id值之圖像可能有可能為用於具有相等或較大temporal_id值之圖像的參考圖像，但反過來不成立。舉例而言，具有temporal_id值1之圖像可能有可能為用於具有temporal_id值1、2、3，......之圖像的參考圖像，但不可能為用於具有temporal_id值0之圖像的參考圖像。
最低temporal_id值亦可指示最低顯示率。舉例而言，若視訊解碼器僅解碼具有temporal_id值0之圖像，則顯示率可為7.5個圖像/秒。若視訊解碼器僅解碼具有temporal_id值0及1之圖像，則顯示率可為15個圖像/秒，等等。
作為另一實例，參考圖像集可為與一圖像相關聯之參考圖像集合，其由滿足以下情形之所有參考圖像(排除相關 聯之圖像自身)組成：可用於對相關聯之圖像或對在解碼次序上跟隨相關聯之圖像的任何圖像進行框間預測。作為又一實例，參考圖像集可經定義為與一圖像相關聯之參考圖像集合，其由滿足以下情形之所有參考圖像(有可能包括相關聯之圖像自身)組成：可用於對相關聯之圖像或對在解碼次序上跟隨相關聯之圖像的任何圖像進行框間預測。作為另一實例，參考圖像集可經定義為與一圖像相關聯之參考圖像集合，其由滿足以下情形之所有參考圖像(有可能包括相關聯之圖像自身)組成：可用於對相關聯之圖像或對在解碼次序上跟隨相關聯之圖像的任何圖像進行框間預測，且具有小於或等於相關聯之圖像之temporal_id的temporal_id。
作為又一實例，在參考圖像集之上述定義中，用「用於進行框間預測」替換片語「可用於進行框間預測」。儘管可能存在參考圖像集之替代定義，但在本發明中，描述具有參考圖像集之以下定義的實例：參考圖像集為與一圖像相關聯之參考圖像集合，其由在解碼次序上在相關聯之圖像之前的所有參考圖像組成，其可用於對相關聯之圖像或對在解碼次序上跟隨相關聯之圖像的任何圖像進行框間預測。
舉例而言，參考圖像集中之參考圖像中之一些參考圖像為可潛在地用以對當前圖像之區塊進行框間預測且無法對在解碼次序上跟隨當前圖像的圖像進行框間預測的參考圖像。參考圖像集中之參考圖像中之一些參考圖像為可潛在 地用以對當前圖像之區塊及對在解碼次序上跟隨當前圖像之一或多個圖像中之區塊進行框間預測的參考圖像。參考圖像集中之參考圖像中之一些參考圖像為可潛在地用以對在解碼次序上跟隨當前圖像之一或多個圖像中之區塊進行框間預測且無法用以對當前圖像中之區塊進行框間預測的參考圖像。
如本發明中所使用，可潛在地用於進行框間預測之參考圖像指代可用於進行框間預測之參考圖像，但未必必須用於進行框間預測。舉例而言，參考圖像集可識別可潛在地用於進行框間預測之參考圖像。然而，此情形並不意謂所有所識別之參考圖像必須用於進行框間預測。實情為，此等所識別之參考圖像中之一或多者可用於進行框間預測，但全部未必必須用於進行框間預測。
如圖1中所展示，系統10包括源器件12，其產生經編碼視訊以用於由目的地器件14解碼。源器件12及目的地器件14可各自為視訊寫碼器件之實例。源器件12可經由通信頻道16將經編碼視訊傳輸至目的地器件14或可將經編碼視訊儲存於儲存媒體17或檔案伺服器19上，以使得經編碼視訊可由目的地器件14視需要存取。
源器件12及目的地器件14可包含廣泛範圍之器件中之任一者，包括諸如所謂的「智慧型」手機、所謂的「智慧型」墊之無線手機，或經裝備以用於無線通信之其他此等無線器件。源器件12及目的地器件14之額外實例包括(但不限於)數位電視、數位直播系統中之器件、無線廣播系 統中之器件、個人數位助理(PDA)、膝上型電腦、桌上型電腦、平板電腦、電子書閱讀器、數位攝影機、數位記錄器件、數位媒體播放器、視訊遊戲器件、視訊遊戲控制台、蜂巢式無線電電話、衛星無線電電話、視訊電傳會議器件，及視訊串流器件、無線通信器件，或其類似者。
如上文所指示，在許多狀況下，源器件12及/或目的地器件14可經裝備以用於無線通信。因此，通信頻道16可包含無線頻道、有線頻道或適合於傳輸經編碼視訊資料之無線及有線頻道的組合。類似地，檔案伺服器19可由目的地器件14經由任何標準資料連接(包括網際網路連接)存取。此資料連接可包括適合於存取儲存於檔案伺服器上之經編碼視訊資料的無線頻道(例如，Wi-Fi連接)、有線連接(例如，DSL、纜線數據機，等等)，或無線頻道與有線連接兩者之組合。
然而，本發明之技術可適用於支援多種多媒體應用中之任一者的視訊寫碼，多種多媒體應用諸如空中電視廣播、纜線電視傳輸、衛星電視傳輸、串流視訊傳輸，例如，經由網際網路，編碼數位視訊以用於儲存於資料儲存媒體上，解碼儲存於資料儲存媒體上之數位視訊，或其他應用。在一些實例中，系統10可經組態以支援單向或雙向視訊傳輸以支援諸如視訊串流傳輸、視訊播放、視訊廣播及/或視訊電話之應用。
在圖1之實例中，源器件12包括視訊源18、視訊編碼器20、調變器/解調變器(數據機)22及輸出介面24。在源器件 12中，視訊源18可包括諸如以下各者之源：視訊俘獲器件(諸如，視訊攝影機)、含有先前所俘獲之視訊的視訊封存、接收來自視訊內容提供者之視訊的視訊饋入介面，及/或用於產生電腦圖形資料作為源視訊之電腦圖形系統，或此等源之組合。作為一實例，若視訊源18為視訊攝影機，則源器件12與目的地器件14可形成所謂的攝影機電話或視訊電話。然而，大體而言，本發明中所描述之技術可適用於視訊寫碼，且可應用於無線及/或有線應用。
可由視訊編碼器20來編碼所俘獲之、預先俘獲之或電腦產生之視訊。可由數據機22根據一通信標準(諸如，無線通信協定)來調變經編碼視訊資訊，且經由輸出介面24將經編碼視訊資訊傳輸至目的地器件14。數據機22可包括各種混頻器、濾波器、放大器或經設計以用於信號調變之其他組件。輸出介面24可包括經設計以用於傳輸資料之電路，包括放大器、濾波器，及一或多個天線。
由視訊編碼器20編碼的所俘獲之、預先俘獲之或電腦產生之視訊亦可儲存至儲存媒體17或檔案伺服器19上以供稍後消耗。儲存媒體17可包括藍光(Blu-ray)光碟、DVD、CD-ROM、快閃記憶體或用於儲存經編碼視訊之任何其他合適的數位儲存媒體。儲存於儲存媒體17上之經編碼視訊可接著由目的地器件14存取以用於解碼及播放。
檔案伺服器19可為能夠儲存經編碼視訊且將彼經編碼視訊傳輸至目的地器件14的任何類型之伺服器。實例檔案伺服器包括網路伺服器(例如，用於網站)、FTP伺服器、網 路附接儲存器(NAS)器件、本地磁碟機，或能夠儲存經編碼視訊資料且將經編碼視訊資料傳輸至目的地器件的任何其他類型之器件。來自檔案伺服器19之經編碼視訊資料之傳輸可為串流傳輸、下載傳輸或串流傳輸與下載傳輸兩者之組合。檔案伺服器19可由目的地器件14經由任何標準資料連接(包括網際網路連接)存取。此標準資料連接可包括適合於存取儲存於檔案伺服器上之經編碼視訊資料的無線頻道(例如，Wi-Fi連接)、有線連接(例如，DSL、纜線數據機、乙太網路、USB等)，或無線頻道與有線連接的組合。
在圖1之實例中，目的地器件14包括輸入介面26、數據機28、視訊解碼器30，及顯示器件32。目的地器件14之輸入介面26經由頻道16接收資訊(作為一實例)，或自儲存媒體17或檔案伺服器19接收資訊(作為替代實例)，且數據機28解調變該資訊以產生用於視訊解碼器30的經解調變之位元串流。經解調變之位元串流可包括由視訊編碼器20產生以供視訊解碼器30在解碼視訊資料中使用的多種語法資訊。此語法亦可包括於儲存於儲存媒體17或檔案伺服器19上之經編碼視訊資料內。作為一實例，語法可嵌入於經編碼視訊資料內，但本發明之態樣不應被視為限於此要求。由視訊編碼器20定義且亦供視訊解碼器30使用之語法資訊可包括描述視訊區塊之特性及/或處理的語法元素，視訊區塊諸如寫碼樹單元(CTU)、寫碼樹區塊(CTB)、預測單元(PU)、寫碼單元(CU)，或經寫碼視訊之其他單元，例如， 視訊切片、視訊圖像及視訊序列或圖像群組(GOP)。視訊編碼器20及視訊解碼器30中之每一者可形成能夠編碼或解碼視訊資料之各別編碼器-解碼器(CODEC)之部分。
顯示器件32可與目的地器件14整合或在目的地器件14外部。在一些實例中，目的地器件14可包括整合式顯示器件，且亦經組態以與外部顯示器件介接。在其他實例中，目的地器件14可為顯示器件。大體而言，顯示器件32向使用者顯示已解碼視訊資料，且可包含多種顯示器件中之任一者，諸如，液晶顯示器(LCD)、電漿顯示器、有機發光二極體(OLED)顯示器或另一類型之顯示器件。
在圖1之實例中，通信頻道16可包含任何無線或有線通信媒體，諸如，射頻(RF)頻譜或一或多個實體傳輸線，或無線及有線媒體之任何組合。通信頻道16可形成一基於封包之網路(諸如，區域網路、廣域網路，或諸如網際網路之全球網路)的部分。通信頻道16大體表示用於將視訊資料自源器件12傳輸至目的地器件14的任何合適之通信媒體或不同通信媒體之集合，包括有線或無線媒體之任何合適組合。通信頻道16可包括路由器、開關、基地台，或可用於促進自源器件12至目的地器件14之通信之任何其他設備。
視訊編碼器20及視訊解碼器30可根據視訊壓縮標準操作，視訊壓縮標準諸如包括ITU-T H.261、ISO/IEC MPEG-1視訊、ITU-T H.262或ISO/IEC MPEG-2視訊、ITU-T H.263、ISO/IEC MPEG-4視訊及ITU-T H.264(亦被稱為ISO/IEC MPEG-4 AVC)，包括其可調式視訊寫碼(SVC)及 多視角視訊寫碼(MVC)擴展。另外，存在新的視訊寫碼標準，亦即，高效率視訊寫碼(HEVC)標準，其目前正由ITU-T視訊寫碼專家群(VCEG)及ISO/IEC動畫專家群(MPEG)之視訊寫碼聯合協作小組(JCT-VC)開發。自2012年7月20日時起，可自http：//phenix.int-evry.fr/jct/doc_end_user/documents/10_Stockholm/wg11/JCTVC-J1003-v8.zip得到HEVC之最新工作草案(WD)(且在下文中被稱作HEVC WD8)。
然而，本發明之技術不限於任何特定寫碼標準。僅為了說明之目的，根據HEVC標準描述技術。
雖然圖1中未展示，但在一些態樣中，視訊編碼器20及視訊解碼器30可各自與一音訊編碼器及解碼器整合，且可包括適當MUX-DEMUX單元或其他硬體及軟體，以處置共同資料串流或單獨資料串流中之音訊與視訊兩者的編碼。若可適用，則MUX-DEMUX單元可遵守ITU H.223多工器協定，或諸如使用者資料報協定(UDP)之其他協定。
視訊編碼器20及視訊解碼器30各自可實施為多種合適編碼器電路中之任一者，合適編碼器電路諸如一或多個處理器(包括微處理器)、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、軟體、硬體、韌體或其任何組合。當該等技術部分地在軟體中實施時，一器件可將用於軟體之指令儲存於合適的非暫時性電腦可讀媒體中，且在硬體中使用一或多個處理器來執行該等指令以執行本發明之技術。
視訊編碼器20及視訊解碼器30中之每一者可包括於一或 多個編碼器或解碼器中，視訊編碼器20及視訊解碼器30中之任一者可整合為各別器件中之組合式編碼器/解碼器(CODEC)的部分。在一些例子中，視訊編碼器20及視訊解碼器30可共同地被稱作寫碼資訊(例如，圖像及語法元素)之視訊寫碼器。當視訊寫碼器對應於視訊編碼器20時，資訊之寫碼可指代編碼。當視訊寫碼器對應於視訊解碼器30時，資訊之寫碼可指代解碼。
此外，本發明中所描述之技術可指代視訊編碼器20用信號發出資訊。當視訊編碼器20用信號發出資訊時，本發明之技術大體上指代視訊編碼器20藉以提供資訊之任何方式。舉例而言，當視訊編碼器20將語法元素用信號發出至視訊解碼器30時，可能意謂：視訊編碼器20經由輸出介面24及通信頻道16將語法元素傳輸至視訊解碼器30，或視訊編碼器20經由輸出介面24將語法元素儲存於儲存媒體17及/或檔案伺服器19上以供視訊解碼器30最終接收。以此方式，自視訊編碼器20至視訊解碼器30之發信號不應被解譯為需要來自視訊編碼器20的立即由視訊解碼器30接收之傳輸，但此情形可能為可能的。實情為，自視訊編碼器20至視訊解碼器30之發信號應被解譯為視訊編碼器20藉以提供用於供視訊解碼器30直接地或經由中間儲存器(例如，在儲存媒體17及/或檔案伺服器19中)最終接收之資訊的任何技術。
視訊編碼器20及視訊解碼器30可經組態以實施本發明中所描述的用於導出參考圖像集之實例技術。舉例而言，視 訊解碼器30可每一圖像調用一次用以導出參考圖像集之處理程序。視訊解碼器30可在解碼切片標頭之後但在解碼任何寫碼單元之前且在用於切片之參考圖像清單建構的解碼處理程序之前，調用用以導出參考圖像集之處理程序。
如上文所描述，參考圖像集為關於參考圖像之絕對描述，該等參考圖像用於當前圖像及解碼次序上之未來經寫碼圖像之解碼處理程序中，直至下一瞬時解碼再新(IDR)圖像或斷裂連結存取(BLA)圖像為止。在本發明中所描述之實例中，視訊編碼器20可顯式地用信號發出值，視訊解碼器30可自該等值判定用於屬於參考圖像集之參考圖像的識別符。在包括於參考圖像集中之所有參考圖像係顯式地列出(除了特定圖像，例如，IDR圖像)之意義上，參考圖像集發信號為顯式的，無參考圖像集語法元素包括於切片標頭中且參考圖像集經導出為空。
可能存在視訊編碼器20可藉以在經寫碼位元串流中用信號發出語法元素之各種方式，視訊解碼器30可利用該等語法元素導出參考圖像集。舉例而言，視訊編碼器20可在圖像參數集(PPS)、序列參數集(SPS)、圖像標頭(若存在的話)、切片標頭或其任何組合中用信號發出語法元素。僅為了說明之目的，視訊編碼器20可使用SPS、PPS及切片標頭用信號發出語法元素，如更詳細描述。
為了導出參考圖像集，視訊解碼器30可實施解碼處理程序以判定用於屬於參考圖像集之圖像之識別符。視訊解碼器30可接著建構複數個參考圖像子集，其中該等子集中之 每一者識別屬於參考圖像集之參考圖像中的零或多者。視訊解碼器30可自所建構之參考圖像子集導出參考圖像集。舉例而言，視訊解碼器30可以特定次序列出該複數個參考圖像子集以導出參考圖像集。
可能存在視訊解碼器30可藉以判定用於屬於參考圖像集之圖像之識別符的各種方式。大體而言，視訊編碼器20可用信號發出值，視訊解碼器30可自該等值判定用於圖像(包括屬於參考圖像集之圖像)之識別符。圖像之識別符可為PicOrderCnt(亦即，圖像序列號(POC)值)。如上文所描述，POC值可指示圖像之顯示或輸出次序，其中具有較小POC值之圖像比具有較大POC值之圖像早顯示。給定圖像之POC值可相對於先前瞬時解碼再新(IDR)圖像而言。舉例而言，IDR圖像之PicOrderCnt(亦即，POC值)可為0，在顯示或輸出次序上在IDR圖像之後的圖像之POC值可為1，在顯示或輸出次序上在具有POC值1之圖像之後的圖像之POC值可為2，等等。
根據本發明中所描述之技術，在當前圖像並非IDR圖像時，下文可適用於導出當前圖像之POC值。下文意欲輔助理解，且不應被視為限制性的。
舉例而言，考慮清單變數listD，清單變數listD包括與包括所有以下各者之圖像清單相關聯的PicOrderCnt值(POC值)作為元素：(1)清單中之第一圖像為解碼次序上之先前IDR圖像，及(2)所有其他圖像在解碼次序上跟隨清單中之第一圖像且在解碼次序上先於當前圖像或者為當前圖像。 在此實例中，在調用用於參考圖像集之導出處理程序之前，當前圖像包括於listD中。又，考慮清單變數listO，清單變數listO包括以POC值之遞升次序排序的listD之元素。在此實例中，listO可能不含有具有等於另一圖像之POC值之值的POC值。
在一些實例中，POC值可限於-2pocLen-1至2pocLen-1-1(包括-2pocLen-1及2pocLen-1-1)之範圍。在此實例中，pocLen可等於long_term_ref_pic_id_len_delta+long_term_ref_pic_id_delta_len_minus4+4。long_term_ref_pic_id_len_delta及long_term_ref_pic_id_delta_len_minus4可為視訊解碼器30在經寫碼位元串流中接收的作為圖像參數集語法之部分的語法元素，如下文更詳細描述。作為另一實例，POC值可限於-231至231-1(包括-231及231-1)之範圍。
作為一實例，視訊解碼器30可在經寫碼位元串流(亦即，由視訊編碼器20用信號發出之位元串流)中接收pic_order_cnt_lsb語法元素。pic_order_cnt_lsb語法元素可指定經寫碼圖像之圖像序列號模數MaxPicOrderCntLsb。pic_order_cnt_lsb語法元素之長度可為log2_max_pic_order_cnt_lsb_minus4+4位元。pic_order_cnt_lsb之值可在0至MaxPicOrderCntLsb-1(包括0及MaxPicOrderCntLsb-1)之範圍內。視訊解碼器30可在待解碼之當前圖像之切片標頭語法中接收pic_order_cnt_lsb語法元素。
視訊解碼器30亦可在由視訊編碼器20用信號發出之經寫碼位元串流中接收log2_max_pic_order_cnt_lsb_minus4語 法元素。視訊解碼器30可在序列參數集中接收log2_max_pic_order_cnt_lsb_minus4語法元素。log2_max_pic_order_cnt_lsb_minu4之值可在0至12(包括0及12)之範圍內。log2_max_pic_order_cnt_lsb_minus4語法元素可指定變數MaxPicOrderCntLsb之值，視訊解碼器30在用於判定POC值之解碼處理程序中使用變數MaxPicOrderCntLsb之值。舉例而言：MaxPicOrderCntLsb=2(log2_max_pic_order_cnt_lsb_minus4+4)。
自此等所接收語法元素，視訊解碼器30可判定當前圖像之POC值如下。舉例而言，視訊解碼器30可判定用於當前圖像之PicOrderCntMsb。用於當前圖像之POC值可為用於當前圖像的所判定之PicOrderCntMsb加上用於當前圖像的所接收之pic_order_cnt_lsb。
在下文中，函式PicOrderCnt(picX)等於用於圖像X之POC值。函式DiffPicOrderCnt(picA,picB)等於PicOrderCnt(picA)減去PicOrderCnt(picB)。在一些實例中，經寫碼位元串流可能不包括產生用於解碼處理程序中的DiffPicOrderCnt(picA,picB)之超過-215至215-1(包括-215及215-1)之範圍的值的資料。此外，假定：X為當前圖像且Y及Z為相同序列中之兩個其他圖像，其中當DiffPicOrderCnt(X,Y)與DiffPicOrderCnt(X,Z)兩者為正或DiffPicOrderCnt(X,Y)與DiffPicOrderCnt(X,Z)兩者為負時，Y及Z被視為自X起之相同輸出次序方向。又，在一些實例中，視訊編碼器20可指派與相對於先前IDR圖像之取 樣時間的相應圖像之取樣時間成比例的PicOrderCnt。
作為判定用於當前圖像之POC值之處理程序的部分，視訊解碼器30可判定變數prevPicOrderCntMsb及prevPicOrderCntLsb。舉例而言，若當前圖像為IDR圖像，則視訊解碼器30可將prevPicOrderCntMsb設定為等於0，且將prevPicOrderCntLsb設定為等於0。否則(亦即，在當前圖像並非IDR圖像之情況下)，視訊解碼器30可將prevPicOrderCntMsb設定為等於具有小於或等於當前圖像之temporal_id之temporal_id的解碼次序上之先前參考圖像的PicOrderCntMsb，且將prevPicOrderCntLsb設定為等於具有小於或等於當前圖像之temporal_id之temporal_id的解碼次序上之先前參考圖像的pic_order_cnt_lsb之值。
藉由此等變數值及語法元素之值(例如，prevPicOrderCntMsb、prevPicOrderCntLsb、pic_order_cnt_lsb及MaxPicOrderCntLsb之值)，視訊解碼器30可基於以下偽碼中所闡述之步驟判定PicOrderCntMsb之值。應理解，視訊解碼器30可實施以下偽碼中所闡述之步驟，以判定用以導出當前圖像之POC值的用於每一當前圖像之PicOrderCntMsb。
if((pic_order_cnt_lsb<prevPicOrderCntLsb)&&((prevPicOrderCntLsb-pic_order_cnt_lsb)>=(MaxPicOrderCntLsb/2)))
PicOrderCntMsb=prevPicOrderCntMsb+MaxPicOrderCntLsb
else if((pic_order_cnt_lsb>prevPicOrderCntLsb)&&((pic_order_cnt_lsb-prevPicOrderCntLsb)>(MaxPicOrderCntLsb/2)))
PicOrderCntMsb=prevPicOrderCntMsb-MaxPicOrderCntLsb
else
PicOrderCntMsb=prevPicOrderCntMsb
在判定用於當前圖像之PicOrderCntMsb之後，視訊解碼器30可基於用於當前圖像之PicOrderCntMsb及用於當前圖像之pic_order_cnt_lsb而判定用於當前圖像之POC值。視訊解碼器30可判定用於當前圖像之POC值如下：PicOrderCnt=PicOrderCntMsb+pic_order_cnt_lsb。
在解碼圖像之後，視訊解碼器30可將用於彼圖像(包括屬於參考圖像集之參考圖像中之每一者)之PicOrderCntMsb值、pic_order_cnt_lsb值及POC值儲存於視訊解碼器30之已解碼圖像緩衝器(DPB)中。以此方式，DPB中之每一圖像與一POC值、一PicOrderCntMsb值及一pic_order_cnt_lsb值相關聯。
下文更詳細描述用於判定包括於當前圖像之參考圖像集中的參考圖像之POC值的方法。自所判定之POC值，視訊解碼器30可實施用於參考圖像集之導出處理程序。然而，在描述視訊解碼器30藉以實施用於參考圖像集之導出處理程序的方式之前，下文提供視訊解碼器30可在由視訊編碼器20用信號發出之經寫碼位元串流中接收的語法元素之表格。舉例而言，視訊編碼器20可在視訊解碼器30接收之經寫碼位元串流中用信號發出以下表格中之語法元素。上文已描述了此等語法元素中之一些語法元素。自該等語法元 素，視訊解碼器30可判定包括於參考圖像集中之參考圖像之POC值且進一步導出參考圖像集。
舉例而言，在本發明中所描述之技術中，相對於先前視訊寫碼標準修改以下語法結構：序列參數集(SPS)原始位元組序列有效負載(RBSP)語法seq_paramater_set_rbsq()、圖像參數集(PPS)RBSP語法pic_parameter_set_rbsp()、切片標頭語法slice_header()，及參考圖像清單修改語法ref_pic_list_modification()。跟隨導出參考圖像集及初始化一或多個參考圖像清單之描述，更詳細地描述參考圖像清單修改。
又，根據本發明中所描述之技術，將以下語法結構添加至經寫碼位元串流：短期參考圖像集語法short_term_ref_pic_set()，及長期參考圖像集語法long_term_ref_pic_set()。視訊解碼器30可利用短期參考圖像集語法及長期參考圖像集語法，以用於建構參考圖像子集之目的，視訊解碼器30自該等參考圖像子集導出參考圖像集。
舉例而言，為了供視訊解碼器30判定用於屬於參考圖像集之參考圖像之POC值，視訊編碼器20可在圖像參數集中用信號發出視訊解碼器30用以判定POC值之參考圖像識別資訊，且可在切片標頭中參考至清單之索引。然而，此方式為視訊編碼器20可藉以用信號發出此參考圖像識別資訊之一實例方式。
在一替代實例中，視訊編碼器20可在序列參數集中用信 號發出參考圖像資訊且可在切片標頭中參考至清單之索引，此情形可減少發信號耗用。在另一替代實例中，視訊寫碼器可在新類型之參數集(例如，參考圖像集參數集(RPSPS))中用信號發出參考圖像資訊，且可在切片標頭中參考RPSPS id以及至參考圖像識別資訊清單之索引兩者。此情形可減少發信號耗用以及不增加對圖像參數集或序列參數集之數目的需要。在其他實例中，視訊編碼器20可利用此等實例技術之任何組合來用信號發出參考圖像識別資訊。
pic_width_in_luma_samples可指定明度樣本中之每一已解碼圖像之寬度。pic_width_in_luma_samples之值可在0至216-1(包括0及216-1)之範圍內。
pic_height_in_luma_samples可指定明度樣本中之每一已解碼圖像之高度。pic_height_in_luma_samples之值可在0至216-1(包括0及216-1)之範圍內。
如表1中所指示，視訊解碼器30可在序列參數集(SPS)中接收log2_max_pic_order_cnt_lsb_minus4語法元素。如上文所描述，log2_max_pic_order_cnt_lsb_minu4之值可指定視訊解碼器30在用於判定POC值之解碼處理程序中使用的變數MaxPicOrderCntLsb之值，其中MaxPicOrderCntLsb=2(log2_max_pic_order_cnt_lsb_minus4+4)。
num_short_term_ref_pic_sets_pps指定包括於圖像參數集中之short_term_ref_pic_set( )語法結構之數目。num_short_term_ref_pic_sets_pps之值應在0至32(包括0及32)之範圍內。
等於0之long_term_ref_pics_present_flag指定：無長期參考圖像用於參考圖像參數集對任何經寫碼圖像進行框間預測，且不存在語法元素long_term_ref_pic_id_delta_len_minus4、long_term_ref_pic_id_len_delta及num_long_term_ref_pics_pps。等於1之long_term_ref_pics_present_flag指定：長期參考圖像可用於參考圖像參數集對一或多個經寫碼圖像進行框間預測，且存在語法元素long_term_ref_pic_id_delta_len_minus4、long_term_ref_pic_id_len_delta及num_long_term_ref_pics_pps。
long_term_ref_pic_id_delta_len_minus4+4指定long_term_ref_pic_id_delta_add_foll[i]語法元素之位元長度。long_term_ref_pic_id_delta_len_minus4之值應在0至12(包括0及12)之範圍內。
long_term_ref_pic_id_len_delta+long_term_ref_pic_id_delta_len_minus4+4指定long_term_ref_pic_id_pps[i]語法元素之位元長度。long_term_ref_pic_id_len_delta之值可在0至28-long_term_ref_pic_id_delta_len_minus4(包括0及28-long_term_ref_pic_id_delta_len_minus4)之範圍內。參考一特定序列參數集之所有圖像參數集中的long_term_ref_pic_id_len_delta+long_term_ref_pic_id_delta_len_minu s4+4之值可相同。
num_long_term_ref_pics_pps指定包括於圖像參數集中的長期參考圖像之識別之數目。num_long_term_ref_pics_pps之值可在0至32(包括0及32)之範圍內。
long_term_ref_pic_id_pps[i]指定包括於圖像參數集中之第i長期參考圖像識別資訊。用以表示long_term_ref_pic_id_pps[i]之位元之數目可等於long_term_ref_pic_id_len_delta+long_term_pic_id_len_minus4+4。
短期參考圖像集語法可用於短期圖像。短期圖像可經定義為滿足以下情形之參考圖像：識別資訊包括於用於經寫碼圖像之short_term_ref_pic_set()語法結構中，short_term_ref_pic_set()語法結構包括於(多個)切片標頭中或包括於所參考圖像參數集中且藉由(多個)切片標頭中之short_term_ref_pic_set_idx語法元素來參考。在下文表4中 提供切片標頭語法元素。
當short_term_ref_pic_set( )語法結構用於導出經寫碼圖像之參考圖像集時，num_short_term_curr0指定RefPicSetStCurr0中之短期參考圖像之數目，如下文所描述。num_short_term_curr0之值可在0至max_num_ref_frames(包括0及max_num_ref_frames)之範圍內。
當short_term_ref_pic_set( )語法結構用於導出經寫碼圖像之參考圖像集時，num_short_term_curr1指定RefPicSetStCurr1中之短期參考圖像之數目，如下文所描述。num_short_term_curr1之值可在0至max_num_ref_frames-num_short_term_curr0(包括0及max_num_ref_frames-num_short_term_curr0)之範圍內。
當short_term_ref_pic_set( )語法結構用於導出經寫碼圖像之參考圖像集時，num_short_term_foll0指定RefPicSetStFoll0中之短期參考圖像之數目，如下文所描述。num_short_term_foll0之值可在0至max_num_ref_frames-num_short_term_curr0-num_short_term_curr1(包括0及max_num_ref_frames-num_short_term_curr0-num_short_term_curr1)之範圍內。
當short_term_ref_pic_set( )語法結構用於導出經寫碼圖像之參考圖像集時，num_short_term_foll1指定RefPicSetStFoll1中之短期參考圖像之數目，如下文所描述。num_short_term_foll1之值應在0至max_num_ref_frames-num_short_term_curr0-num_short_term_curr1-num_ short_term_foll0(包括0及max_num_ref_frames-num_short_term_curr0-num_short_term_curr1-num_short_term_foll0)之範圍內。
short_term_ref_pic_id_delta_minus1[i]指定包括於short_term_ref_pic_set( )語法結構中的第i短期參考圖像之識別資訊。
no_output_of_prior_pics_flag指定在解碼IDR圖像之後如何處理已解碼圖像緩衝器中之先前已解碼圖像。當IDR圖像為位元串流中之第一IDR圖像時，no_output_of_prior_pics_flag之值可能對解碼處理程序無影響。當IDR圖像並非位元串流中之第一IDR圖像且自作用中序列參數集導出的pic_width_in_luma_samples或pic_height_in_luma_samples或max_dec_frame_buffering之值可能不同於自用於前一圖像之主動序列參數集導出的pic_width_in_luma_samples或pic_height_in_luma_samples或max_dec_frame_buffering之值時，等於1之no_output_of_prior_pics_flag可(但未必)由解碼器來推斷，而不管no_output_of_prior_pics_flag之實際值。
等於1之short_term_ref_pic_set_pps_flag指定：包括於用於當前圖像之參考圖像集中的短期參考圖像集合之識別資訊存在於所參考之圖像參數集中。等於0之short_term_ref_pic_set_pps_flag指定：包括於用於當前圖像之參考圖像集中的短期參考圖像集合之識別資訊不存在於所參考之圖像參數集中。
short_term_ref_pic_set_idx指定包括於所參考之圖像參數集中的short_term_ref_pic_set( )語法結構之索引，其包括用於當前圖像之參考圖像集中的短期參考圖像集合之識別資訊。
將變數NumShortTermCurr0及NumShortTermCurr1指定為： NumShortTermCurr0=num_short_term_curr0
NumShortTermCurr1=num_short_term_curr1
在num_short_term_curr0及num_short_term_curr0分別為short_term_ref_pic_set( )語法結構中的相同名稱之語法元素的情況下，存在於所參考之圖像參數集中且藉由short_term_ref_pic_set_idx來參考，或者直接存在於切片標頭中。
num_ref_idx_l0_active_minus1指定用於將用以解碼切片之參考圖像清單0之最大參考索引。
在當前切片為P或B切片且num_ref_idx_l0_active_minus1不存在時，可推斷num_ref_idx_l0_active_minus1等於num_ref_idx_l0_default_active_minus1。
num_ref_idx_l0_active_minus1之值可在0至15(包括0及15)之範圍內。
num_ref_idx_l1_active_minus1指定用於將用以解碼切片之參考圖像清單1之最大參考索引。
在當前切片為P或B切片且num_ref_idx_l0_active_minus1不存在時，可推斷num_ref_idx_l1_active_minus1等於num_ref_idx_l1_default_active_minus1。
num_ref_idx_l1_active_minus1之值可在0至15(包括0及15)之範圍內。
長期參考圖像集語法可用於長期圖像。長期圖像可經定義為識別資訊包括於用於經寫碼圖像之long_term_ref_pic_set()語法結構中的參考圖像。
num_long_term_pps_curr指定識別資訊包括於所參考之圖像參數集中且可用於對當前圖像進行框間預測的所有長期參考圖像之數目。若num_long_term_pps_curr不存在，則可導出值為等於0。num_long_term_pps_curr之值可在0至max_num_ref_frames(包括0及max_num_ref_frames)之範圍內。
num_long_term_add_curr指定識別資訊未包括於所參考之圖像參數集中且可用於對當前圖像進行框間預測的所有長期參考圖像之數目。若num_long_term_add_curr不存在，則可導出值為等於0。num_long_term_add_curr之值可 在0至max_num_ref_frames-num_long_term_pps_curr(包括0及max_num_ref_frames-num_long_term_pps_curr)之範圍內。
將變數NumLongTermCurr指定為：NumLongTermCurr=num_long_term_pps_curr+num_long_term_add_curr
num_long_term_pps_foll指定滿足以下情形之所有長期參考圖像之數目：識別資訊包括於所參考之圖像參數集中，不用於對當前圖像進行框間預測，且可用於對在解碼次序上跟隨當前圖像的圖像中之任一者進行框間預測。若num_long_term_pps_foll不存在，則可導出值為等於0。num_long_term_pps_foll之值可在0至max_num_ref_frames(包括0及max_num_ref_frames)之範圍內。
num_long_term_add_foll指定滿足以下情形之所有長期參考圖像之數目：識別資訊未包括於所參考之圖像參數集中，不用於對當前圖像進行框間預測，且可用於對解碼次序上之跟隨圖像中之任一者進行框間預測。若num_long_term_add_foll不存在，則可導出值為等於0。num_long_term_add_foll之值可在0至max_num_ref_frames-num_long_term_pps_foll(包括0及max_num_ref_frames-num_long_term_pps_foll)之範圍內。
long_term_ref_pic_set_idx_pps[i]指定自所參考之圖像參數集至當前圖像之參考圖像集而繼承的第i長期參考圖像的至包括於所參考之圖像參數集中的長期參考圖像識別資訊之清單的索引。long_term_ref_pic_set_idx_pps[i]之值 可在0至31(包括0及31)之範圍內。
long_term_ref_pic_id_delta_add[i]指定並非自所參考之圖像參數集而繼承但包括於當前圖像之參考圖像集中的第i長期參考圖像之長期參考圖像識別資訊。用以表示long_term_ref_pic_id_add_curr[i]之位元之數目可等於long_term_pic_id_len_minus4+4。
藉由上述用信號發出之或導出之值(亦即，表1至表5中之值)，視訊解碼器30可導出參考圖像集。如上文所描述，所導出之參考圖像集可識別可潛在地用以寫碼/預測當前圖像(亦即，當前正被解碼之圖像)及在解碼次序上跟隨當前圖像的圖像的參考圖像。根據本發明中所描述之技術，所導出之參考圖像集中的所有參考圖像之解碼次序比當前圖像之解碼次序早。
導出處理程序可包括自複數個參考圖像子集建構參考圖像集。可在解碼切片標頭之後但在解碼任何寫碼單元之前且在用於切片之參考圖像清單建構的解碼處理程序之前，每一圖像調用一次此處理程序。舉例而言，自所導出之值及用信號發出之語法元素，視訊解碼器30可判定用於屬於參考圖像集之參考圖像之POC值。自所判定之POC值，視訊解碼器30可建構一起形成參考圖像集之參考圖像子集。以此方式，藉由建構參考圖像子集，視訊解碼器30可建構參考圖像集。舉例而言，視訊解碼器30可以特定方式將該等參考圖像子集定序以導出參考圖像集。定序可指代視訊解碼器30藉以列出參考圖像子集以導出參考圖像集之方 式。
如上文所描述，為了導出參考圖像集，視訊解碼器30可建構複數個參考圖像子集。在一些實例中，視訊解碼器30可建構六個參考圖像子集。該六個參考圖像子集可命名為：RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr，及RefPicSetLtFoll。RefPicSetStCurr0可被稱作RefPicSetStCurrBefore，且RefPicSetStCurr1可被稱作RefPicSetStCurrAfter。
應理解，用於說明之目的而描述六個參考圖像子集，且該情形不應被解釋為限制性的。作為一實例，視訊解碼器30可(例如)藉由組合該等子集中之一些子集而建構比六個參考圖像子集少之參考圖像子集。下文描述視訊解碼器30建構少於六個之參考圖像子集的此等實例中之一些實例。然而，為了說明之目的，藉由視訊解碼器30建構六個參考圖像子集之實例描述該等技術。
RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0及RefPicSetStFoll1參考圖像子集可識別短期參考圖像。在一些實例中，此等參考圖像子集可基於以下各者而識別短期參考圖像：短期參考圖像是在顯示次序上比正被寫碼之當前圖像早抑或在顯示次序上比正被寫碼之當前圖像遲，以及短期參考圖像是否可潛在地用於對當前圖像及在解碼次序上跟隨當前圖像的圖像進行框間預測，或是否可潛在地用於僅對在解碼次序上跟隨當前圖像的圖像進行框間預測。
舉例而言，RefPicSetStCurr0參考圖像子集可包括(且可僅包括)滿足以下情形之所有短期參考圖像之識別資訊(諸如，POC值)：具有比當前圖像之輸出或顯示次序早的輸出或顯示次序，且可潛在地用於在當前圖像之框間預測中供參考，且可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考。RefPicSetStCurr1參考圖像子集可包括(且可僅包括)滿足以下情形之所有短期參考圖像之識別資訊：具有比當前圖像之輸出或顯示次序遲的輸出或顯示次序，且可潛在地用於在當前圖像之框間預測中供參考，且可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考。
RefPicSetStFoll0參考圖像子集可包括(且可僅包括)滿足以下情形之所有短期參考圖像之識別資訊：具有比當前圖像之輸出或顯示次序早的輸出或顯示次序，可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考，且無法用於在當前圖像之框間預測中供參考。RefPicSetStFoll1參考圖像子集可包括(且可僅包括)滿足以下情形之所有短期參考圖像之識別資訊：具有比當前圖像之輸出或顯示次序遲的輸出或顯示次序，可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考，且無法用於在當前圖像之框間預測中供參考。
RefPicSetLtCurr及RefPicSetLtFoll參考圖像子集可識別長期參考圖像。在一些實例中，此等參考圖像子集可基於長期參考圖像是在顯示次序上比正被寫碼之當前圖像早抑 或在顯示次序上比正被寫碼之當前圖像遲，識別長期參考圖像。
舉例而言，RefPicSetLtCurr參考圖像子集可包括(且可僅包括)滿足以下情形之所有長期參考圖像之識別資訊：可潛在地用於在當前圖像之框間預測中供參考，且可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考。RefPicSetLtFoll參考圖像子集可包括(且可僅包括)滿足以下情形之所有長期參考圖像之識別資訊：可潛在地用於於在解碼次序上跟隨當前圖像之一或多個圖像之框間預測中供參考，且無法用於在當前圖像之框間預測中供參考。
若待解碼之當前圖像為IDR圖像，則視訊解碼器30可將RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr及RefPicSetLtFoll參考圖像子集設定為空。此情形可能因為：IDR圖像無法進行框間預測且在解碼次序上在IDR圖像之後之圖像均無法使用在解碼中在IDR圖像之前的任何圖像供參考。否則(例如，在當前圖像為非IDR圖像時)，視訊解碼器30可藉由實施以下偽碼而建構短期參考圖像子集及長期參考圖像子集。
舉例而言，當視訊解碼器30解碼在切片標頭中或者參考所參考之圖像參數集的short_term_ref_pic_set()語法結構之例項時，視訊解碼器30可實施以下偽碼以建構RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0及 RefPicSetStFoll1參考圖像子集。
cIdx=0
for(i=0,pocPred=PicOrderCnt(CurrPic)；i<num_short_term_curr0；pocPred=RefPicSetStCurr0[i],i++,cIdx++)
RefPicSetStCurr0[i]=pocPred-short_term_ref_pic_id_delta_minus1[cIdx]-1
for(i=0,pocPred=PicOrderCnt(CurrPic)；i<num_short_term_curr1；pocPred=RefPicSetStCurr1[i],i++,cIdx++)
RefPicSetStCurr1[i]=short_term_ref_pic_id_delta_minus1[cIdx]+1-pocPred
for(i=0,pocPred=PicOrderCnt(CurrPic)；i<num_short_term_foll0；pocPred=RefPicSetStFoll[i],i++,cIdx++)
RefPicSetStFoll0[i]=pocPred-short_term_ref_pic_id_delta_minus1[cIdx]-1
for(i=0,pocPred=PicOrderCnt(CurrPic)；i<num_short_term_foll1；pocPred=RefPicSetStFoll[i],i++,cIdx++)
RefPicSetStFoll1[i]=short_term_ref_pic_id_delta_minus1[cIdx]+1-pocPred
若視訊解碼器30判定long_term_ref_pics_present_flag等於0，則視訊解碼器30可將RefPicSetLtCurr及RefPicSetLtFoll設定為空，此係因為對於此狀況不存在長期參考圖像之故。否則，若視訊解碼器30解碼切片標頭中之long_term_ref_pic_set()語法結構之例項，則視訊解碼器30可實施以下偽碼以建構RefPicSetLtCurr及 RefPicSetLtFoll參考圖像子集。
cIdx=0
for(i=0；i<num_long_term_pps_curr；i++,cIdx++)
{
pIdx=long_term_ref_pic_idx_pps[i]
RefPicSetLtCurr[cIdx]=long_term_ref_pic_id_pps[pIdx]
}
for(i=0；i<num_long_term_add_curr；i++,cIdx++)
{
picIdDelta=long_term_ref_pic_id_delta_add[i]
RefPicSetLtCurr[cIdx]=PicOrderCnt(CurrPic)-picIdDelta
}
cIdx=0
for(i=0；i<num_long_term_pps_foll；i++,cIdx++)
{
pIdx=long_term_ref_pic_idx_pps[i+num_long_term_pps_curr]
RefPicSetLtFoll[cIdx]=long_term_ref_pic_id_pps[pIdx]
}
for(i=0；i<num_long_term_add_foll；i++,cIdx++)
{
picIdDelta=long_term_ref_pic_id_delta_add[i+num_long_term_add_curr]
RefPicSetLtFoll[cIdx]=PicOrderCnt(CurrPic)-picIdDelta
}
根據本發明中所描述之技術，若具有PicOrderCnt之特定值(POC值)之參考圖像包括於經寫碼圖像之參考圖像集的六個子集中之任一者中，則該參考圖像可被稱作包括於彼經寫碼圖像之參考圖像集中。若PicOrderCnt之特定值(POC值)等於包括於參考圖像集之一特定子集中的PicOrderCnt值中之一者，則具有PicOrderCnt之特定值的參考圖像被稱作包括於彼子集中。
在建構參考圖像子集之後，視訊解碼器30可導出參考圖像集。舉例而言，視訊解碼器30可將該等參考圖像子集定序以導出參考圖像集。作為一實例，視訊解碼器30可列出RefPicSetStCurr0參考圖像子集、繼之RefPicSetStCurr1參考圖像子集、繼之RefPicSetStFoll0參考圖像子集、繼之RefPicSetStFoll1參考圖像子集、繼之RefPicSetLtCurr參考圖像子集，及接著RefPicSetLtFoll參考圖像子集。作為另一實例，視訊解碼器30可列出RefPicSetStCurr0參考圖像子集、繼之RefPicSetStCurr1參考圖像子集、繼之RefPicSetLtCurr參考圖像子集、繼之RefPicSetStFoll0參考圖像子集、繼之RefPicSetStFoll1，及接著RefPicSetLtFoll參考圖像子集。
視訊解碼器30藉以將參考圖像子集定序之方式之其他排列可能有可能用於導出參考圖像集。在一些實例中，可將參考圖像子集之建構與參考圖像集之導出組合在一起。舉例而言，參考圖像子集之建構可自動地導致視訊解碼器30導出參考圖像集。換言之，視訊解碼器30可能不需要執行 不同步驟以用於建構參考圖像子集及導出參考圖像集，但視訊解碼器30可能有可能首先建構參考圖像子集且接著導出參考圖像集。
又，根據本發明中所描述之技術，以上文所描述之方式建構參考圖像集可導致視訊解碼器30滿足以下限制。舉例而言，具有PicOrderCnt之特定值之特定參考圖像可能不包括於當前圖像之參考圖像集之參考圖像子集中的一者以上中。換言之，在參考圖像子集中之一者中識別的參考圖像可能在其他參考圖像子集中之任一者中未加以識別。作為另一實例，在所導出之參考圖像集中，可能不存在具有大於包括於形成參考圖像集之參考圖像子集中之任一者中的當前圖像之temporal_id之temporal_id的參考圖像。
如上文所描述，時間識別值(temporal_id)可為指示哪些圖像可用於寫碼/預測當前圖像之階層值。大體而言，具有特定temporal_id值之圖像可能有可能為用於具有相等或較大temporal_id值之圖像的參考圖像，但反過來不成立。舉例而言，具有temporal_id值1之圖像可能有可能為用於具有temporal_id值1、2、3，......之圖像的參考圖像，但不可能為用於具有temporal_ID值0之圖像的參考圖像。
最低temporal_id值亦可指示最低顯示率。舉例而言，若視訊解碼器30僅解碼具有temporal_id值0之圖像，則顯示率可為7.5個圖像/秒。若視訊解碼器30僅解碼具有temporal_id值0及1之圖像，則顯示率可為15個圖像/秒，等等。
在一些實例中，僅具有小於或等於當前圖像之temporal_id之temporal_id值的圖像可包括於當前圖像之參考圖像集中。如上文所描述，僅具有小於或等於當前圖像之temporal_id之temporal_id值的圖像可用作參考圖像。因此，具有較低或相等temporal_id值之所有參考圖像可供當前圖像使用以用於進行框間預測且可包括於參考圖像集中。又，將滿足以下情形之一些參考圖像自參考圖像集中排除：具有大於當前圖像之temporal_id值之temporal_id值，及將供在解碼次序上跟隨當前圖像之圖像使用且具有大於當前圖像之temporal_id值之temporal_id值。
藉由此等技術，不需要temporal_id之發信號以及用於導出參考圖像集之圖像識別；因此，參考圖像集發信號變得更有效率。舉例而言，視訊編碼器20可能不用信號發出屬於參考圖像集之參考圖像之temporal_id值，且視訊解碼器30可能不需要接收屬於參考圖像集之參考圖像之temporal_id值以用於導出參考圖像集之目的。
此外，以此方式，所建構之參考圖像子集可能不識別具有大於當前圖像之temporal_id值之temporal_id值的參考圖像。舉例而言，視訊解碼器30可能能夠建構參考圖像子集，且確保在參考圖像子集中之任一者中識別的參考圖像均不具有大於當前圖像之temporal_id值之temporal_id值，此係因為位元串流一致性可能需要temporal_id值不包括於由視訊編碼器20用信號發出且由視訊解碼器30接收之位元串流中之故。以此方式，視訊解碼器30可在不接收用於屬 於參考圖像集之參考圖像之時間識別值的情況下導出參考圖像集。
在上述實例中，視訊解碼器30可建構六個參考圖像子集，其中四個參考圖像子集用於短期參考圖像(亦即，RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0及RefPicSetStFoll1)，且兩個參考圖像子集用於長期參考圖像(亦即，RefPicSetLtCurr及RefPicSetLtFoll)。然而，本發明之態樣不應如此受限制。在其他實例中，可將此等參考圖像子集中之兩者或兩者以上組合成一參考圖像子集，從而導致視訊解碼器30建構較少參考圖像子集。下文描述視訊解碼器30可建構較少參考圖像子集之一些非限制性實例。可能存在視訊解碼器30可藉以建構較少參考圖像子集之其他方式。
舉例而言，在一些實例中，可能不存在用於當前圖像之子集與用於解碼次序上之跟隨圖像之子集的分離。因此，可能存在用於短期參考圖像之兩個子集(被稱作RefPicSetSt0及RefPicSetSt1)，且可能僅存在用於長期參考圖像之一子集(被稱作RefPicSetLt)。在此實例中，RefPicSetSt0參考圖像子集可為RefPicSetStCurr0與RefPicSetStFoll0之串接，其中RefPicSetStCurr0在串接結果之開始處。在此實例中，RefPicSetSt1參考圖像子集可為RefPicSetStCurr1與RefPicSetStFoll1之串接，其中RefPicSetStCurr1在串接結果之開始處。RefPicSetLt參考圖像子集可為RefPicSetLtCurr與RefPicSetLtFoll之串接， 其中RefPicSetLtCurr在串接結果之開始處。
作為另一實例，可能不存在具有比當前圖像早或遲之輸出次序之子集的分離。此情形可僅適用於短期參考圖像。因此，可能存在用於短期參考圖像之兩個子集，被稱作RefPicSetStCurr及RefPicSetStFoll。RefPicSetStCurr參考圖像子集可為RefPicSetStCurr0與RefPicSetStCurr1之串接，其中RefPicSetStCurr0在串接結果之開始處。RefPicSetStFoll參考圖像子集可為RefPicSetStFoll0與RefPicSetStFoll1之串接，其中RefPicSetStFoll0在串接結果之開始處。
作為另一實例，可能不應用上文所敍述之兩種類型之分離。因此，可能僅存在用於短期參考圖像之一子集(被稱作RefPicSetSt)，且僅存在用於長期參考圖像之一子集(被稱作RefPicSetLt)。RefPicSetSt參考圖像子集可為呈所列次序(或任何其他次序)之RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0及RefPicSetStFoll1之串接，且RefPicSetLt可與上述情形相同。
上述技術描述視訊解碼器30可藉以導出參考圖像集之實例方式。在編碼處理程序期間，視訊編碼器20亦可能需要解碼經編碼圖像以用於編碼後續圖像之目的，此處理程序被稱作重建構處理程序。因此，在一些實例中，視訊編碼器20亦可經組態以導出參考圖像集。在一些實例中，視訊編碼器20可實施與視訊解碼器30實施的用以導出參考圖像集之技術相同的技術。然而，可能不需要在每個實例中由 視訊編碼器20導出參考圖像集，且視訊解碼器30可能為導出參考圖像集之僅有的寫碼器。
因此，在一些實例中，視訊寫碼器(例如，視訊編碼器20或視訊解碼器30)可寫碼(例如，分別為編碼或解碼)指示屬於參考圖像集之參考圖像的資訊。舉例而言，視訊編碼器20可用信號發出經編碼位元串流，該經編碼位元串流包括用以判定哪些參考圖像屬於參考圖像集之值。類似地，視訊解碼器30可解碼位元串流以判定哪些參考圖像屬於參考圖像集。
視訊寫碼器可建構複數個參考圖像子集，每一參考圖像子集識別該等參考圖像中之零或多者。舉例而言，視訊寫碼器可建構六個參考圖像子集(亦即，RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr及RefPicSetLtFoll參考圖像子集)，其中該等子集中之每一者識別零或多個參考圖像。在一些實例中，視訊寫碼器可基於該複數個參考圖像子集而寫碼當前圖像。
舉例而言，視訊寫碼器可自該所建構之複數個參考圖像子集導出參考圖像集。舉例而言，視訊寫碼器可以任何次序將該等參考圖像子集定序以導出參考圖像集，或可作為建構參考圖像子集之部分導出參考圖像集。在一些實例中，自所導出之參考圖像集，視訊寫碼器可寫碼當前圖像。因為參考圖像集係自該複數個參考圖像子集導出，所以視訊寫碼器可被視為基於該複數個參考圖像子集而寫碼 當前圖像。
在一些實例中，為了將參考圖像子集定序，視訊寫碼器可以參考圖像子集待列於參考圖像集中之次序建構參考圖像子集。舉例而言，視訊寫碼器可首先建構RefPicSetLtCurr參考圖像子集，接著建構RefPicSetLtFoll參考圖像子集，接著建構RefPicSetStCurr0參考圖像子集，接著建構RefPicSetStCurr1參考圖像子集，接著建構RefPicSetStFoll0參考圖像子集，且接著建構RefPicSetStFoll1參考圖像子集。在此說明性實例中，參考圖像集中之參考圖像子集之次序可為RefPicSetLtCurr、RefPicSetLtFoll、RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0及RefPicSetStFoll1(呈彼次序)，但其他次序係可能的。
根據本發明中所描述之實例技術，在導出參考圖像集之後，視訊解碼器30可解碼當前圖像內之切片。解碼處理程序之部分涉及建構一或兩個參考圖像清單。參考圖像清單為用於P或B切片之預測的參考圖像之清單。對於P切片之解碼處理程序，存在一參考圖像清單(清單0)。對於B切片之解碼處理程序，存在兩個參考圖像清單(清單0及清單1)。清單0(有時被稱作參考圖像清單0或RefPicList0)為用於對P或B切片進行框間預測之參考圖像清單。用於P切片之所有框間預測使用清單0。參考圖像清單0為用於B切片之雙向預測之兩個參考圖像清單中的一者，其中另一參考圖像清單為參考圖像清單1。清單1(有時被稱作參考圖像 清單1或RefPicList1)為用於B切片之預測之參考圖像清單。參考圖像清單1為用於B切片之預測之兩個參考圖像清單中的一者，其中另一參考圖像清單為參考圖像清單0。可使用清單0與清單1兩者對B切片中之一些區塊進行雙向預測，且可使用清單0或清單1對B切片中之一些區塊進行單向預測。
為了建構參考圖像清單，視訊解碼器30可實施預設建構技術以建構初始清單0及(對於B切片)初始清單1。初始清單0及初始清單1之建構可被稱作初始化處理程序。在一些實例中，經寫碼位元串流可指示：視訊解碼器30應修改初始清單0及/或初始清單1以產生最終清單0及最終清單1。初始清單0及/或初始清單1之修改可被稱作修改處理程序。可能不需要在每個實例中進行修改處理程序，且下文更詳細描述視訊解碼器30可藉以實施修改處理程序之方式。根據本發明中所描述之技術，當不需要初始清單0或初始清單1之修改時，最終清單0或最終清單1(亦即，用以解碼當前圖像之切片之參考圖像清單0或1)可等於初始清單0或初始清單1。以此方式，可能不需要參考圖像清單重新定序。
在本發明中所描述之技術中，視訊解碼器30可以視訊解碼器30可能不需要執行待包括於初始清單0或初始清單1中之參考圖像之重新定序的方式建構初始清單0或初始清單1，而不管是否需要修改處理程序，此係因為參考圖像子集中之每一者中的參考圖像已經呈適當次序之故。舉例而 言，在一些其他技術中，不管是否需要修改處理程序，在將參考圖像添加或列入至初始清單0或初始清單1中時，需要根據參考圖像之POC值將待包括於初始清單0或初始清單1中之參考圖像重新定序。
在初始化處理程序中，視訊解碼器30可實施預設建構技術以建構初始清單0及初始清單1。預設建構技術可意謂：在不自視訊編碼器20接收關於視訊解碼器30應藉以建構初始參考圖像清單之方式或應在初始參考圖像清單中識別哪些參考圖像的語法元素的情況下，視訊解碼器30建構初始參考圖像清單。
當解碼P或B切片標頭時，視訊解碼器30可調用參考圖像清單建構處理程序。舉例而言，當解碼P切片時，視訊解碼器30可調用用於建構初始清單0之處理程序，而可能不調用用於建構初始清單1之處理程序，此係因為P切片中之區塊僅係關於在清單0中識別之參考圖像進行單向預測之故。當解碼B切片時，視訊解碼器30可調用用於建構初始清單0及建構初始清單1之處理程序，此係因為B切片中之區塊可關於清單0及清單1中之每一者中識別的參考圖像進行雙向預測之故。
根據本發明中所描述之實例技術，視訊解碼器30可利用參考圖像子集建構初始清單0及初始清單1。舉例而言，初始清單0及初始清單1可列出在RefPicSetStCurr0、RefPicSetStCurr1或RefPicSetLtCurr中識別之零或多個參考圖像。在此實例中，當調用參考圖像清單建構處理程序時，RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr中可能存在至少一參考圖像。儘管初始清單0及初始清單1 可識別來自相同參考圖像子集之一或多個參考圖像，但視訊解碼器30在初始清單0中添加參考圖像之次序可能不同於視訊解碼器30在初始清單1中添加參考圖像之次序。
在本發明中，當視訊解碼器30在初始清單0或初始清單1中添加(例如，列出)來自參考圖像子集中之一或多者之參考圖像時，本發明提及視訊解碼器30識別初始清單0或初始清單1中之參考圖像。舉例而言，該複數個參考圖像子集可各自識別零或多個參考圖像。為了建構初始清單0及初始清單1，視訊解碼器30可識別在參考圖像子集中識別的至初始清單0或初始清單1中之參考圖像中之一或多者。
為了避免混淆且為了輔助清晰性，本發明可提及視訊解碼器30將在參考圖像子集中識別的參考圖像中之零或多者列入或添加至初始清單0及初始清單1中，以建構初始清單0及初始清單1。以此方式，視訊解碼器30添加或列出參考圖像意謂：視訊解碼器30添加或列出在參考圖像子集中識別的參考圖像之識別符。因此，所得初始清單0及初始清單1包括用於可潛在地用於寫碼當前圖像之區塊或切片之參考圖像的複數個識別符。此等參考圖像儲存於視訊解碼器30及視訊編碼器20之各別已解碼圖像緩衝器中。
舉例而言，為了建構初始清單0，視訊解碼器30可首先在初始清單0中列出(例如，添加)在RefPicSetStCurr0中識別之參考圖像，繼之在初始清單0中列出(例如，添加)在RefPicSetStCurr1中識別之參考圖像，且接著在初始清單0中列出(例如，添加)在RefPicSetLtCurr中識別之參考圖 像。為了建構初始清單1，視訊解碼器30可首先在初始清單1中列出(例如，添加)在RefPicSetStCurr1中識別之參考圖像，繼之在初始清單1中列出(例如，添加)在RefPicSetStCurr0中識別之參考圖像，且接著在初始清單1中列出(例如，添加)在RefPicSetLtCurr中識別之參考圖像。
此外，除以不同次序添加參考圖像子集中之參考圖像之外，在建構清單0及清單1時，視訊解碼器30亦可利用來自參考圖像子集中之每一者的不同數目個參考圖像。舉例而言，清單0及清單1不需要包括來自RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr之所有參考圖像。實情為，自此等實例參考圖像子集列出以建構初始清單0及初始清單1之參考圖像之數目可基於指示初始清單0及初始清單1中之每一者內的參考圖像之最大數目的語法元素。
舉例而言，對於初始清單0，視訊編碼器20可在切片標頭中用信號發出用於P及B切片之num_ref_idx_l0_active_minus1語法元素，及用於經雙向預測之B切片的num_ref_idx_l1_active_minus1語法元素。如上文所描述，num_ref_idx_l0_active_minus1可定義可處於初始清單0中之參考圖像之最大數目，且num_ref_idx_l1_active_minus1可定義可處於初始清單1中之參考圖像之最大數目。在一些實例中，以下情形可能為有可能的：num_ref_idx_l0_active_minus1之值不同於num_ref_idx_l1_active_minus1之值，但此情形可能並非每 個實例中所必要的。在一些實例中，num_ref_idx_l0_active_minus1之值可與num_ref_idx_l1_active_minus1之值相同。
如上文所描述，視訊解碼器30可在經寫碼位元串流中接收用於num_short_term_curr0及num_short_term_curr1之值。視訊解碼器30可將變數NumShortTermCurr0定義為等於num_short_term_curr0，且將變數NumShortTermCurr1定義為等於num_short_term_curr1。NumShortTermCurr0可指示RefPicSetStCurr0參考圖像子集中之參考圖像之數目，且NumShortTermCurr1可指示RefPicSetStCurr1參考圖像子集中之參考圖像之數目。
視訊解碼器30亦可在經寫碼位元串流中接收用於num_long_term_pps_curr及num_long_term_add_curr之值。視訊解碼器30可將變數NumLongTermCurr定義為等於num_long_term_pps_curr加上num_long_term_add_curr。NumLongTermCurr可指示RefPicSetLtCurr中之參考圖像之數目。
為了建構初始清單0，視訊解碼器30可首先將RefPicSetStCurr0中之參考圖像添加至初始清單0中，直至視訊解碼器30將RefPicSetStCurr0中之所有參考圖像添加至初始清單0中為止，且只要初始清單0中之條目之數目(例如，在清單0中識別之參考圖像之數目)小於或等於num_ref_idx_l0_active_minus1即可。舉例而言，NumShortTermCurr0可指示RefPicSetStCurr0參考圖像子集 中之參考圖像之數目。在此實例中，視訊解碼器30可列出(例如，添加)來自RefPicSetStCurr0參考圖像子集之參考圖像，直至自RefPicSetStCurr0所列出之參考圖像之數目等於NumShortTermCurr0為止。然而，在將RefPicSetStCurr0之參考圖像列入至初始清單0中時，若初始清單0中之條目之總數目等於num_ref_idx_l0_active_minus1，則視訊解碼器30可停止添加RefPicSetStCurr0參考圖像子集中之參考圖像，即使RefPicSetStCurr0中存在未列於初始清單0中之額外圖像亦如此。在此狀況下，視訊解碼器30可能已完成初始清單0之建構。
在視訊解碼器30列出RefPicSetStCurr0參考圖像子集中之所有參考圖像且初始清單0中之條目之總數目小於num_ref_idx_l0_active_minus1之後，視訊解碼器30可接著添加RefPicSetStCurr1中之參考圖像，直至視訊解碼器30識別RefPicSetStCurr1中之所有參考圖像為止，且只要初始清單0中之條目之數目(例如，在清單0中識別之參考圖像之數目)小於或等於num_ref_idx_l0_active_minus1即可。舉例而言，類似於上述情形，NumShortTermCurr1可指示RefPicSetStCurr1參考圖像子集中之參考圖像之數目。在此實例中，視訊解碼器30可列出來自RefPicSetStCurr1參考圖像子集之參考圖像，直至自RefPicSetStCurr1所列出之參考圖像之數目等於NumShortTermCurr1為止。然而，在列出來自RefPicSetStCurr1之參考圖像時，若初始清單0中之條目之 總數目等於num_ref_idx_l0_active_minus1，則視訊解碼器30可停止添加來自RefPicSetStCurr1參考圖像子集之參考圖像，即使RefPicSetStCurr1中存在未列於初始清單0中之額外圖像亦如此。在此狀況下，視訊解碼器30可能已完成初始清單0之建構。
在視訊解碼器30列出RefPicSetStCurr1參考圖像子集中之所有參考圖像且初始清單0中之條目之總數目小於num_ref_idx_l0_active_minus1之後，視訊解碼器30可接著列出RefPicSetLtCurr中之參考圖像，直至視訊解碼器30列出RefPicSetLtCurr中之所有參考圖像為止，且只要初始清單0中之條目之數目(例如，在清單0中識別之參考圖像之數目)小於或等於num_ref_idx_l0_active_minus1即可。舉例而言，類似於上述情形，NumLongTermCurr可指示RefPicSetLtCurr參考圖像子集中之參考圖像之數目。在此實例中，視訊解碼器30可列出來自RefPicSetLtCurr參考圖像子集之參考圖像，直至自RefPicSetLtCurr所列出之參考圖像之數目等於NumLongTermCurr為止。然而，在將來自RefPicSetLtCurr之參考圖像列入至初始清單0中時，若初始清單0中之條目之總數目等於num_ref_idx_l0_active_minus1，則視訊解碼器30可停止添加RefPicSetLtCurr參考圖像子集中之參考圖像，即使RefPicSetLtCurr中存在未列於初始清單0中之額外圖像亦如此。在此狀況下，視訊解碼器30可能已完成初始清單0之建構。
以下偽碼說明視訊解碼器30可藉以建構初始清單0之方 式。
cIdx=0
while(cIdx<=num_ref_idx_l0_active_minus1)
{
for(i=0；i<NumShortTermCurr0 && cIdx<=num_ref_idx_l0_active_minus1；cIdx++,i++)
RefPicList0[cIdx]=RefPicSetStCurr0[i]
for(i=0；i<NumShortTermCurr1 && cIdx<=num_ref_idx_l0_active_minus1；cIdx++,i++)
RefPicList0[cIdx]=RefPicSetStCurr1[i]
for(i=0；i<NumLongTermCurr && cIdx<=num_ref_idx_l0_active_minus1；cIdx++,i++)
RefPicList0[cIdx]=RefPicSetLtCurr[i]
}
在上述偽碼中，RefPicList0可為初始清單0。在不需要清單0之修改之實例中，最終清單0可等於初始清單0。因此，在不需要清單0之修改之實例中，在上述偽碼中，RefPicList0可為最終清單0。
視訊解碼器30可類似地建構初始清單1。然而，為了建構初始清單1，視訊解碼器30可首先將來自RefPicSetStCurr1參考圖像子集之參考圖像添加至初始清單1中，繼之將來自RefPicSetStCurr0參考圖像子集之參考圖像添加至初始清單1中，且繼之將來自RefPicSetLtCurr 參考圖像子集之參考圖像添加至初始清單1中。又，類似於上述情形，在列出來自RefPicSetStCurr1、RefPicSetStCurr0及RefPicSetLtCurr參考圖像子集中之任一者之參考圖像時，若初始清單1中之條目之總數目等於num_ref_idx_l1_active_minus1，則視訊解碼器30可停止添加參考圖像，即使此等參考圖像子集中存在額外參考圖像亦如此。
舉例而言，為了建構初始清單1，視訊解碼器30可首先列出來自RefPicSetStCurr1之參考圖像，直至視訊解碼器30識別RefPicSetStCurr1中之所有參考圖像為止，且只要初始清單1中之條目之數目(例如，在清單1中識別之參考圖像之數目)小於或等於num_ref_idx_l1_active_minus1即可。舉例而言，NumShortTermCurr1之值可指示視訊解碼器30何時完成列出RefPicSetStCurr1參考圖像子集中之所有參考圖像。然而，在列出來自RefPicSetStCurr1之參考圖像時，若初始清單1中之條目之總數目等於num_ref_idx_l1_active_minus1，則視訊解碼器30可停止添加RefPicSetStCurr1參考圖像子集中之參考圖像，即使RefPicSetStCurr1中存在未列於初始清單1中之額外圖像亦如此。在此狀況下，視訊解碼器30可能已完成初始清單1之建構。
在視訊解碼器30列出RefPicSetStCurr1參考圖像子集中之所有參考圖像且初始清單1中之條目之總數目小於num_ref_idx_l1_active_minus1之後，視訊解碼器30可接著 列出來自RefPicSetStCurr0之參考圖像，直至視訊解碼器30列出RefPicSetStCurr0中之所有參考圖像為止，且只要初始清單1中之條目之數目(例如，在清單1中識別之參考圖像之數目)小於或等於num_ref_idx_l1_active_minus1即可。舉例而言，類似於上述情形，NumShortTermCurr0之值可指示視訊解碼器30何時完成列出RefPicSetStCurr0參考圖像子集中之所有參考圖像。然而，在將來自RefPicSetStCurr0之參考圖像列入至初始清單1中時，若初始清單1中之條目之總數目等於num_ref_idx_l1_active_minus1，則視訊解碼器30可停止添加RefPicSetStCurr0參考圖像子集中之參考圖像，即使RefPicSetStCurr0中存在未列於初始清單1中之額外圖像亦如此。在此狀況下，視訊解碼器30可能已完成初始清單1之建構。
在視訊解碼器30列出RefPicSetStCurr0參考圖像子集中之所有參考圖像且初始清單1中之條目之總數目小於num_ref_idx_l1_active_minus1之後，視訊解碼器30可接著列出RefPicSetLtCurr中之參考圖像，直至視訊解碼器30列出RefPicSetLtCurr中之所有參考圖像為止，且只要初始清單1中之條目之數目(例如，在清單1中識別之參考圖像之數目)小於或等於num_ref_idx_l1_active_minus1即可。舉例而言，類似於上述情形，NumLongTermCurr之值可指示視訊解碼器30何時完成列出RefPicSetLtCurr參考圖像子集中之所有參考圖像。然而，在列出來自RefPicSetLtCurr之 參考圖像時，若初始清單1中之條目之總數目等於num_ref_idx_l1_active_minus1，則視訊解碼器30可停止添加RefPicSetLtCurr參考圖像子集中之參考圖像，即使RefPicSetLtCurr中存在未列於初始清單1中之額外圖像亦如此。在此狀況下，視訊解碼器30可能已完成初始清單1之建構。
以下偽碼說明視訊解碼器30可藉以建構初始清單1之方式。
cIdx=0
while(cIdx<=num_ref_idx_l1_active_minus1)
{
for(i=0；i<NumShortTermCurr1 && cIdx<=num_ref_idx_l1_active_minus1；cIdx++,i++)
RefPicList1[cIdx]=RefPicSetStCurr1[i]
for(i=0；i<NumShortTermCurr0 && cIdx<=num_ref_idx_l1_active_minus1；cIdx++,i++)
RefPicList1[cIdx]=RefPicSetStCurr0[i]
for(i=0；i<NumLongTermCurr && cIdx<=num_ref_idx_l1_active_minus1；cIdx++,i++)
RefPicList1[cIdx]=RefPicSetLtCurr[i]
}
在上述偽碼中，RefPicList1可為初始清單1。在不需要清單1之修改之實例中，最終清單1可等於初始清單1。因 此，在不需要清單1之修改之實例中，在上述偽碼中，RefPicList1可為最終清單1。
前述實例方式為視訊解碼器30在不需要參考圖像清單修改時可藉以建構最終清單0及最終清單1之一實例方式。在其他實例中，視訊解碼器30可以不同於上文所描述之次序之次序添加參考圖像子集。在又一些其他實例中，視訊解碼器30可添加不同於上文所描述之參考圖像子集之參考圖像子集。
儘管前述實例描述用於由視訊解碼器30執行之參考圖像清單建構之技術，但本發明之態樣不受如此限制，且視訊編碼器20可實施類似技術以用於建構參考圖像清單。然而，視訊編碼器20可能不必要以與視訊解碼器30藉以建構參考圖像清單之方式相同的方式建構參考圖像清單。
因此，視訊寫碼器(例如，視訊編碼器20或視訊解碼器30)可經組態以寫碼(例如，編碼或解碼)指示屬於參考圖像集之參考圖像的資訊。如上文所描述，參考圖像集識別可潛在地用於對當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測的參考圖像。
視訊寫碼器亦可經組態以建構複數個參考圖像子集，每一參考圖像子集識別零或多個參考圖像。舉例而言，視訊寫碼器可至少建構RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集。視訊寫碼器可建構額外參考圖像子集，諸如上文所描述之參考圖像子集。
只要初始參考圖像清單條目之數目不大於可允許參考圖像清單條目之最大數目，視訊寫碼器便可接著將以下各參考圖像添加至初始參考圖像清單中：來自第一參考圖像子集之參考圖像、繼之來自第二參考圖像子集之參考圖像，及繼之來自第三參考圖像子集之參考圖像。舉例而言，只要初始清單0中之條目之數目不大於num_ref_idx_l0_active_minus1，視訊寫碼器便可將以下各參考圖像列入至初始清單0中：來自RefPicSetStCurr0參考圖像子集之參考圖像、繼之來自RefPicSetStCurr1參考圖像子集之參考圖像，及繼之來自RefPicSetLtCurr子集之參考圖像。此外，num_ref_idx_l0_active_minus1之值可指示清單0之可允許參考圖像清單條目之最大數目。
在一些實例中，視訊寫碼器可在初始參考圖像清單中添加來自第一參考圖像子集之參考圖像，直至在初始參考圖像清單中列出第一參考圖像子集中之所有參考圖像或初始參考圖像清單條目之數目等於可允許參考圖像清單條目之最大數目為止。當初始參考圖像清單條目之數目小於可允許參考圖像清單條目之最大數目時，且在添加來自第一參考圖像子集之參考圖像之後，視訊寫碼器可在初始參考圖像清單中添加來自第二參考圖像子集之參考圖像，直至在初始參考圖像清單中列出第二參考圖像子集中之所有參考圖像或初始參考圖像清單條目之數目等於可允許參考圖像清單條目之最大數目為止。當初始參考圖像清單條目之數目小於可允許參考圖像清單條目之最大數目時，且在添加 來自第二參考圖像子集之參考圖像之後，視訊寫碼器可在初始參考圖像清單中添加來自第三參考圖像子集之參考圖像，直至在初始參考圖像清單中列出第三參考圖像子集中之所有參考圖像或初始參考圖像清單條目之數目等於可允許參考圖像清單條目之最大數目為止。
視訊寫碼器可類似地建構初始清單1。舉例而言，只要初始清單1中之初始參考圖像清單條目之數目不大於num_ref_idx_l1_active_minus1，視訊寫碼器便可將以下各參考圖像添加至初始清單1中：來自第二參考圖像子集之參考圖像、繼之來自第一參考圖像子集之參考圖像，及繼之來自第三參考圖像子集之參考圖像。num_ref_idx_l1_active_minus1語法元素可定義清單1中可允許條目之最大數目。
在一些實例中，諸如，當不需要修改時，初始清單0及初始清單1可等於最終清單0及最終清單1。換言之，在不需要修改時，視訊寫碼器可建構最終清單0及最終清單1，而不修改初始清單0及初始清單1。在此等狀況下，在建構初始清單0及初始清單1之後，視訊寫碼器可能不需要執行額外步驟以建構最終清單0及最終清單1(亦即，視訊寫碼器用以寫碼當前圖像之區塊之參考圖像清單)。
如上述偽碼中所指示，當cIdx小於或等於num_ref_idx_l0_active_minus1時，視訊解碼器30可建構初始清單0，且當cIdx小於或等於num_ref_idx_l1_active_minus1時，視訊解碼器30可建構初始清單1。此情 形可導致視訊解碼器30建構初始清單0及初始清單1，在參考圖像清單中無任何非完成條目。舉例而言，在一些其他視訊寫碼技術中，用於此等其他視訊技術之視訊解碼器將利用不同於本發明中所描述之技術的技術建構初始清單0及清單1。對於此等其他視訊寫碼技術，若初始清單0及初始清單1中之條目之數目小於條目之最大可允許數目，則用於此等其他視訊寫碼技術之視訊解碼器將用非完成條目之「無參考圖像」填充清單0及清單1中之剩餘條目。非完成條目指代清單0及清單1中在識別參考圖像之最後條目之後的且直至最後可能的條目之條目。
作為輔助理解之說明性實例，用於此等其他視訊寫碼技術之視訊解碼器可建構具有五個條目之清單0，其中可允許條目之最大數目為十個條目。在此實例中，用於此等其他視訊寫碼技術之視訊解碼器將第六條目至第十條目填充為「無參考圖像」。在此實例中，非完成條目將為第六條目(例如，在識別參考圖像之最後條目之後的條目)直至第十條目(例如，如藉由可允許條目之最大數目定義的最後可能的條目)。
根據本發明之技術，視訊解碼器30可建構初始清單0及初始清單1，以使得不存在非完成條目。又，在不需要參考圖像清單修改之實例中，最終清單0及最終清單1可等於初始清單0及初始清單1。因此，在不需要參考圖像清單修改之實例中，視訊解碼器30可建構最終清單0及最終清單1，以使得不存在非完成條目。甚至在需要參考圖像清單 修改之情況下，修改亦可能不會導致任何非完成條目。因此，甚至在需要參考圖像清單修改之實例中，視訊解碼器30亦可建構最終清單0及最終清單1，以使得不存在非完成條目。
舉例而言，可將清單0及清單1視為具有條目之清單，且每一條目可識別一參考圖像(例如，藉由參考圖像之POC值)。換言之，視訊解碼器30可藉由清單0及清單1之每一條目中的參考圖像之POC值識別參考圖像。清單0及清單1中之條目之數目可分別藉由num_ref_idx_l0_active_minus1及num_ref_idx_l1_active_minus1語法元素來定義。
為了確保不存在非完成條目，視訊解碼器30可重複地在初始清單0及初始清單1中列出(例如，添加或識別)來自參考圖像子集之參考圖像，直至視訊解碼器30判定應在初始清單0及初始清單1之每一可能的條目中識別哪一參考圖像為止。舉例而言，如上文所描述，對於建構初始清單0，在於初始清單0中添加來自RefPicSetStCurr0及RefPicSetStCurr1參考圖像子集之參考圖像之後，視訊解碼器30可在初始清單0中添加來自RefPicSetLtCurr參考圖像子集之參考圖像。
在一些實例中，以下情形可能為有可能的：在視訊解碼器30於初始清單0中添加來自RefPicSetLtCurr參考圖像子集之參考圖像之後，初始清單0中之條目之總數目小於清單0中之可允許條目之最大數目。舉例而言，在用於建構初始清單0之偽碼中，cIdx可指示清單0中之條目之數目。 在一些實例中，在視訊解碼器30在初始清單0中識別RefPicSetLtCurr中之參考圖像之後，cIdx之值可小於num_ref_idx_l0_active_minus1，其中num_ref_idx_l0_active_minus1指定清單0中之可允許條目之最大數目。
根據本發明中所描述之技術，在列出來自該複數個參考圖像子集中之三者的參考圖像之後，若初始清單0中之條目之數目小於可允許條目之最大數目，則視訊解碼器30可重複地添加來自該三個參考圖像子集之參考圖像，直至清單0中之所有條目填滿為止。舉例而言，在視訊解碼器30添加來自RefPicSetLtCurr參考圖像子集之參考圖像且初始清單0中之條目之數目小於可允許條目的最大數目之後，視訊解碼器30可接著重新列出(例如，重新添加或重新識別)來自RefPicSetStCurr0參考圖像子集之參考圖像。
在本發明中所描述之態樣中，當視訊解碼器30列出來自RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集之參考圖像時，可將視訊解碼器30視為將來自此等複數個參考圖像子集之參考圖像添加至參考圖像清單(例如，清單0)中之第一條目集合中。舉例而言，第一條目集合可為視訊解碼器30識別來自RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集之參考圖像所在的參考圖像清單中之條目。接著，若參考圖像清單中之條目之數目小於條目之最大可允許數目，則視訊解碼器30可將來自RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集中之至少一者的一或多個參 考圖像重新列入(例如，重新添加或重新識別)至參考圖像清單中在第一條目集合之後的條目中。在第一條目集合之後的條目可為跟隨第一條目集合之條目，在該等條目中，視訊解碼器30添加來自RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集中之一或多者的已經列出之參考圖像，如下文所描述。
在重新添加來自RefPicSetStCurr0參考圖像子集之參考圖像時，若初始清單0中之條目之總數目等於num_ref_idx_l0_active_minus1，則視訊解碼器30可停止在初始清單0中重新添加參考圖像。在此狀況下，視訊解碼器30可能已完成初始清單0之建構，且可能不存在非完成條目。否則，視訊解碼器30可重新添加來自RefPicSetStCurr0參考圖像子集之參考圖像，直至重新列出來自RefPicSetStCurr0參考圖像子集之所有參考圖像為止。
若在重新添加RefPicSetStCurr0參考圖像子集中之所有參考圖像之後，初始清單0中之條目之數目小於num_ref_idx_l0_active_minus1，則視訊解碼器30可接著以類似於視訊解碼器30藉以重新列出來自RefPicSetStCurr0參考圖像子集之參考圖像之方式的方式，重新添加來自RefPicSetStCurr1參考圖像子集之參考圖像。若在重新添加RefPicSetStCurr1參考圖像子集中之所有參考圖像之後，初始清單0中之條目之數目小於num_ref_idx_l0_active_minus1，則視訊解碼器30可接著以類似於視訊解碼 器30藉以重新列出來自RefPicSetStCurr0及RefPicSetStCurr1參考圖像子集之參考圖像之方式的方式，重新添加來自RefPicSetLtCurr參考圖像子集之參考圖像。視訊解碼器30重複地添加來自參考圖像子集之參考圖像，直至初始清單0中之條目之數目等於清單0之可允許條目的最大數目(亦即，等於num_ref_idx_l0_active_minus1)為止。
舉例而言，假定存在RefPicSetStCurr0中之一參考圖像、RefPicSetCurr1中之一參考圖像及RefPicSetLtCurr中之一參考圖像。又，假定num_ref_idx_l0_active_minus1等於五。在此實例中，視訊解碼器30可在初始清單0中之兩個條目中識別RefPicSetStCurr0中之參考圖像。舉例而言，視訊解碼器30可在初始清單0之第一條目中識別RefPicSetStCurr0中之參考圖像，且在初始清單0之第四條目中重新識別RefPicSetStCurr0中之參考圖像。在此實例中，用於RefPicSetStCurr0中之參考圖像之索引值可為用於初始清單0中之第一條目之index[0]，及用於初始清單0中之第四條目之index[3]。因此，在一些實例中，可在初始參考圖像清單中將來自參考圖像子集中之一者的一參考圖像列出(例如，識別)一次以上。
視訊解碼器30可類似地建構初始清單1，以使得在初始清單1中不存在非完成條目。舉例而言，視訊解碼器30可重複地添加來自RefPicSetStCurr1、RefPicSetStCurr0及RefPicSetLtCurr參考圖像子集(以彼次序)之參考圖像，直 至初始清單1中之條目之數目等於清單1中的可允許條目之最大數目(亦即，等於num_ref_idx_l1_active_minus1)為止。
以此方式，因為「for」迴圈巢套於「while」迴圈中，所以在用於建構初始清單0及初始清單1之上述偽碼中，視訊解碼器30可建構初始清單0及初始清單1，以使得初始清單0及初始清單1中不存在非完成條目(亦即，在初始化處理程序之後無非完成條目)。在一些實例中，初始清單0及初始清單1中之條目中的每一者可識別來自參考圖像子集中之一者的一參考圖像。在一些實例中，以下情形可能為有可能的：在最終參考圖像清單中識別來自參考圖像子集中之一者的一或多個參考圖像一次以上，但在具有不同索引值之不同條目處識別。
儘管前述實例描述用於如由視訊解碼器30執行的無非完成條目之參考圖像清單建構之技術，但本發明之態樣不受如此限制，且視訊編碼器20可實施類似技術以用於建構無非完成條目之參考圖像清單。然而，視訊編碼器20可能不必要以與視訊解碼器30藉以建構參考圖像清單之方式相同的方式建構參考圖像清單。
因此，視訊寫碼器(例如，視訊編碼器20或視訊解碼器30)可經組態以寫碼(例如，編碼或解碼)指示屬於參考圖像集之參考圖像的資訊。如上文所描述，參考圖像集識別可潛在地用於對當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測的 參考圖像。
視訊寫碼器可建構複數個參考圖像子集，每一參考圖像子集識別參考圖像(例如，RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集)中之零或多者。視訊寫碼器可將來自該複數個參考圖像子集之參考圖像列入(例如，識別或添加)至參考圖像清單中之第一條目集合中。視訊寫碼器可判定參考圖像清單中之條目之數目是否等於參考圖像清單中的可允許條目之最大數目。
當參考圖像清單中之條目之數目不等於參考圖像清單中的可允許條目之最大數目時，視訊寫碼器可重複地將來自參考圖像子集中之至少一者的一或多個參考圖像重新添加(例如，重新識別)至參考圖像清單中在第一條目集合之後的條目中，直至參考圖像清單中之條目之數目等於參考圖像清單中的可允許條目之最大數目為止。視訊寫碼器可接著基於所建構之參考圖像清單而寫碼當前圖像。
如上文所描述，在一些實例中，視訊編碼器20可用信號發出指導視訊解碼器30修改一或多個初始參考圖像清單之語法元素。舉例而言，視訊解碼器30可以上文所描述之方式建構一或多個初始參考圖像清單。接著，在一些例子中，視訊解碼器30可解碼來自經寫碼位元串流的指導視訊解碼器30修改一或多個初始參考圖像清單之語法元素，以建構一或多個最終參考圖像清單。大體而言，在修改中，在初始化參考圖像清單之後，視訊解碼器30可將在該複數個參考圖像子集中之一或多者中識別的該等圖像中之一或 多者映射於參考圖像清單中之一者的一條目中。
舉例而言，在視訊解碼器30以上文所描述之方式建構一或多個初始參考圖像清單之後，視訊解碼器30可以藉由經寫碼位元串流指導之方式修改初始參考圖像清單中之一者中的條目中之至少一者。舉例而言，視訊編碼器20可指示應在參考圖像清單之一條目中識別來自該複數個參考圖像子集中之一者之哪一圖像(作為修改語法元素之部分)，即使參考圖像清單之彼條目可能已經識別一參考圖像(作為初始化處理程序之部分)亦如此。在一些實例中，本發明中所描述之參考圖像清單修改技術可允許以靈活方式進行修改。舉例而言，視訊解碼器30可能有可能在參考圖像清單中之一者或兩者中識別不在初始參考圖像清單中之參考圖像。
如本發明中所使用，片語「已修改參考圖像清單」指代在修改初始參考圖像清單之後的參考圖像清單。已修改參考圖像清單可為最終參考圖像清單。對於清單0，已修改參考圖像清單中之條目之數目為num_ref_idx_l0_active_minus1+1，且對於清單1，已修改參考圖像清單中之條目之數目為num_ref_idx_l1_active_minus1+1。一參考圖像可在用於清單0及清單1之已修改參考清單中呈現於一個以上索引(例如，條目)處。
對於參考圖像清單修改，視訊編碼器20可用信號發出表6之語法元素。
modification_of_ref_pic_idc、short_term_ref_pic_set_idx及long_term_ref_pic_set_idx之語法元素修改可指定自初始參考圖像清單至待用於解碼切片之參考圖像清單的改變。
等於1之ref_pic_list_modification_flag_l0可指定：存在用於指定參考圖像清單0之語法元素modification_of_ref_pic_idc。等於0之ref_pic_list_modification_flag_l0指 定此語法元素不存在。
當ref_pic_list_modification_flag_l0等於1時，跟隨ref_pic_list_modification_flag_l0之modification_of_ref_pic_idc不等於3之次數可能不超過num_ref_idx_l0_active_minus1+1。
等於1之ref_pic_list_modification_flag_l1可指定：存在用於指定參考圖像清單1之語法modification_of_ref_pic_idc。等於0之ref_pic_list_modification_flag_l1可指定此語法元素不存在。
當ref_pic_list_modification_flag_l1等於1時，跟隨ref_pic_list_modification_flag_l1之modification_of_ref_pic_idc不等於3之次數可能不超過num_ref_idx_l1_active_minus1+1。
modification_of_ref_pic_idc與short_term_ref_pic_set_idx或long_term_ref_pic_set_idx一起可指定重新映射參考圖像中之哪些者。在表7中指定modification_of_ref_pic_idc之值。緊跟隨ref_pic_list_modification_flag_l0或ref_pic_list_modification_flag_l1之第一modification_of_ref_pic_idc之值可能不等於3。
ref_pic_set_idx指定移動至參考圖像清單中之當前索引的參考圖像的至RefPicSetStCurr0、RefPicSetStCurr1或RefPicSetLtCurr之索引。ref_pic_set_idx之值可在0至max_num_ref_frames(包括0及max_num_ref_frames)之範圍內。
對於參考圖像清單修改，當ref_pic_list_modification_flag_l0等於1時，視訊解碼器30可修改初始參考圖像清單0(亦即，初始清單0)，且當ref_pic_list_modification_flag_l1等於1時，視訊解碼器30可修改初始參考圖像清單1(亦即，初始清單1)。為了輔助理解參考圖像清單修改，假定：變數refIdxL0為至初始清單0中之索引，且變數refIdxL1為至初始清單1中之索引。換言之，refIdxL0可識別初始清單0之條目(亦即，至初始清單0中之索引識別初始清單0之條目)，且refIdxL1可識別初始清單1之條目。最初可將變數refIdxL0及refIdxL1設定為等於0。
視訊解碼器30可以語法元素出現於位元串流中之次序來處理modification_of_ref_pic_idc之語法元素。舉例而言， 若視訊編碼器20用信號發出初始清單0需要參考圖像清單修改，則視訊解碼器30可處理視訊編碼器20藉以用信號發出modification_of_ref_pic_idc語法元素以用於修改初始清單0之次序。類似地，若視訊編碼器20用信號發出初始清單1需要參考圖像清單修改，則視訊解碼器30可處理視訊編碼器20藉以用信號發出modification_of_ref_pic_idc語法元素以用於修改初始清單1之次序。
modification_of_ref_pic_idc語法元素之值可為0、1、2或3，如表7中所指示。若modification_of_ref_pic_idc語法元素之值為3，則視訊解碼器30可停止初始參考圖像清單之修改。否則，視訊解碼器30可保持修改初始參考圖像清單，直至modification_of_ref_pic_idc語法元素之值為3為止。舉例而言，視訊編碼器20可用信號發出用於modification_of_ref_pic_idc語法元素之複數個值，且視訊解碼器30可以該等值存在於經寫碼位元串流中之次序處理該等值中之每一者。當視訊解碼器30處理為3之modification_of_ref_pic_idc語法元素之值時，視訊解碼器30可判定不需要進一步修改。
稍微不同於3的modification_of_ref_pic_idc語法元素之值(亦即，0、1或2)可指示視訊解碼器30將自哪一參考圖像子集中識別待列入於(例如，添加至)參考圖像清單之當前條目中的一參考圖像。如上文所描述，參考圖像清單之當前條目可藉由refIdxLX之值來識別，其中LX為清單0或清單1。舉例而言，若視訊解碼器30正修改初始清單0，且 modification_of_ref_pic_idc為0，則根據表7，視訊解碼器30可基於ref_pic_set_idx之值而判定將在參考圖像清單之當前條目中識別來自RefPicSetStCurr0之哪一參考圖像。若視訊解碼器30正修改初始清單1，且modification_of_ref_pic_idc為0，則根據表7，視訊解碼器30可基於ref_pic_set_idx之值而判定將在參考圖像清單之當前條目中識別來自RefPicSetStCurr1之哪一參考圖像。舉例而言，變數curRefPicSet可定義視訊解碼器30應使用哪一參考圖像子集來修改初始清單0或初始清單1。
舉例而言，若modification_of_ref_pic_idc等於0，且視訊解碼器30正修改初始清單0，則curRefPicSet等於RefPicSetStCurr0參考圖像子集。若modification_of_ref_pic_idx等於0，且視訊解碼器30正修改初始清單1，則curRefPicSet等於RefPicSetStCurr1參考圖像子集。
若視訊解碼器30正修改初始清單0，且modification_of_ref_pic_idc為1，則根據表7，視訊解碼器30可基於ref_pic_set_idx之值而判定將在參考圖像清單之當前條目中識別來自RefPicSetStCurr1之哪一參考圖像。若視訊解碼器30正修改初始清單1，且modification_of_ref_pic_idc為1，則根據表7，視訊解碼器30可基於ref_pic_set_idx之值而判定將在參考圖像清單之當前條目中識別來自RefPicSetStCurr0之哪一參考圖像。
在此狀況下，若modification_of_ref_pic_idc等於1，且視訊解碼器30正修改初始清單0，則curRefPicSet等於 RefPicSetStCurr1參考圖像子集。若modification_of_ref_pic_idx等於1，且視訊解碼器30正修改初始清單1，則curRefPicSet等於RefPicSetStCurr0參考圖像子集。
若視訊解碼器30正修改初始清單0或初始清單1，且modification_of_ref_pic_idc為2，則根據表7，視訊解碼器30可基於ref_pic_set_idx之值而判定將在參考圖像清單之當前條目中識別來自RefPicSetLtCurr之哪一參考圖像。在此實例中，若modification_of_ref_pic_idc等於2，且視訊解碼器30正修改初始清單0或初始清單1，則curRefPicSet等於RefPicSetLtCurr參考圖像子集。
如上文所描述，ref_pic_set_idx語法元素可指示至該複數個參考圖像子集中之一者中的索引。換言之，ref_pic_set_idx語法元素可向視訊解碼器30指示來自該複數個參考圖像子集中之一者之條目。視訊解碼器30可判定：在該複數個參考圖像子集中之一者之條目中識別的參考圖像為待於初始清單0或初始清單1之當前索引中識別的參考圖像。
變數curRefPicPoc可等於PicOrderCnt(curRefPicSet[ref_pic_set_idx])。以此方式，curRefPicPoc之值可為在curRefPicSet之ref_pic_set_idx條目中識別的參考圖像之POC值。如上文所描述，基於modification_of_ref_pic_idc語法元素之值及基於視訊解碼器30是正修改初始清單0抑或正修改初始清單1，curRefPicSet可等於RefPicSetStCurr0、RefPicSetStCurr1或RefPicSetLtCurr。
視訊解碼器30可實施以下偽碼以用於參考圖像清單修改。舉例而言，在以下偽碼中，視訊解碼器30可在初始參考圖像清單之條目中識別具有等於curRefPicPoc之POC值的圖像。變數refIdxLX指示用於初始參考圖像清單中之條目之索引位置。舉例而言，當視訊解碼器30正修改初始清單0時，refIdxLX可為refIdxL0，且當視訊解碼器30正修改初始清單1時，refIdxLX可為refIdxL1。
在視訊解碼器30在初始參考圖像清單(亦即，初始清單0或初始清單1)中識別具有等於curRefPicPOC之POC值的參考圖像之後，視訊解碼器30可將其他剩餘圖像之位置移位至清單中之稍後位置。舉例而言，視訊解碼器30可將在初始參考圖像清單中在跟隨當前條目之條目中識別之參考圖像移動至下一條目，以建構修改之參考圖像清單。作為說明性實例，假定：初始參考圖像清單中之當前條目為具有index[2]之第三條目。視訊解碼器30可將當前在具有index[2]之第三條目中識別之參考圖像移動至下一條目(例如，具有index[3]之第四條目)中。視訊解碼器30可將當前在具有index[3]之第四條目中識別之參考圖像移動至具有index[4]之第五條目。在一些實例中，視訊解碼器30可自初始參考圖像清單中之最後條目開始，且將在彼條目中識別之參考圖像移動至臨時的新條目。接著將在倒數第二條目中識別之參考圖像移動至最後條目，等等，直至視訊解碼器30到達當前條目為止。
視訊解碼器30可接著遞增變數refIdxLX之值。在此偽碼 中，使RefPicListX(亦即，RefPicList0或RefPicList1)之長度在時間上比最終參考圖像清單所需之長度長一個元素。舉例而言，如上文所描述，視訊解碼器30可自初始參考圖像清單中之最後條目開始，將彼最後條目移動至臨時條目，將導數第二條目移動至最後條目，等等，以修改初始參考圖像清單。在執行偽碼之後，視訊解碼器30可僅保留索引0至num_ref_idx_lX_active_minus1中之條目，其中對於清單0，num_ref_idx_lX_active_minus1為num_ref_idx_l0_active_minus1，且對於清單1，num_ref_idx_lX_active_minus1為num_ref_idx_l1_active_minus1。
for(cIdx=num_ref_idx_lX_active_minus1+1；cIdx>refIdxLX；cIdx--)
RefPicListX[cIdx]=RefPicListX[cIdx-1]
RefPicListX[refIdxLX++]=具有等於currRefPicPoc之PicOrderCnt之參考圖像
nIdx=refIdxLX
for(cIdx=refIdxLX；cIdx<=num_ref_idx_lX_active_minus1+1；cIdx++)
if(PicOrderCnt(RefPicListX[cIdx])！=currRefPicPoc)
RefPicListX[nIdx++]=RefPicListX[cIdx]
在上述偽碼中，基於視訊解碼器30是正修改初始清單0抑或正修改初始清單1，RefPicListX指代RefPicList0(亦即，最終清單0)或RefPicList1(亦即，最終清單1)。基於視訊解碼器30是正修改初始清單0抑或正修改初始清單1，num_ref_idx_lX_active_minus1指代num_ref_idx_l0_active_minus1或ref_idx_l1_active_minus1。
上述技術描述視訊解碼器30可藉以修改初始參考圖像清單之實例方式。在編碼處理程序期間，視訊編碼器20亦可能需要解碼經編碼圖像以用於編碼後續圖像之目的。因此，在一些實例中，視訊編碼器20亦可經組態以建構初始參考圖像清單，且以上文所描述之方式修改初始參考圖像清單。然而，視訊編碼器20可能不需要在每個實例中修改一或多個初始參考圖像清單。在一些實例中，視訊解碼器30可為利用上文所描述之技術修改初始參考圖像清單之僅有的寫碼器。
因此，在一些實例中，視訊寫碼器(例如，視訊編碼器20或視訊解碼器30)可利用上文所描述之技術建構初始參考圖像清單(例如，初始清單0或初始清單1)。視訊寫碼器可基於經寫碼位元串流中之經寫碼語法元素而判定是否需要參考圖像清單修改。當需要參考圖像清單修改時，視訊寫碼器可修改初始參考圖像清單。
舉例而言，當需要參考圖像清單修改時，視訊寫碼器可識別所建構之參考圖像子集中之至少一者中的參考圖像。視訊寫碼器可在初始參考圖像清單之當前條目中列出(例如，添加)所識別之參考圖像子集以建構修改之參考圖像清單。視訊寫碼器可接著基於所修改之參考圖像清單而寫碼(例如，編碼或解碼)當前圖像。
作為一實例，視訊寫碼器可建構RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集。為了識別此等參考圖像子集中之至少一者中之參考圖像，視訊寫 碼器可判定至此等參考圖像子集中之至少一者中的索引。視訊寫碼器可接著基於所判定之索引而判定在此等參考圖像子集中之至少一者之條目處識別的參考圖像。
舉例而言，視訊寫碼器可寫碼(例如，編碼或解碼)第一語法元素(諸如，modification_of_ref_pic_idc語法元素)，視訊寫碼器可藉由該第一語法元素識別參考圖像子集中之一者(例如，RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集中之一者)。視訊寫碼器可寫碼第二語法元素(諸如，ref_pic_set_idx語法元素)，該第二語法元素指示至所識別之參考圖像子集(例如，RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集中之一者)中之索引。
在一些實例中，視訊寫碼器可經進一步組態以移動初始參考圖像清單中之參考圖像。舉例而言，視訊寫碼器可在修改之參考圖像清單中將在初始參考圖像清單中在跟隨當前條目之條目中識別之參考圖像移動至下一條目。
先前實例描述視訊編碼器20及視訊解碼器30可藉以導出參考圖像集之方式，以及在不需要修改時及在需要修改時用於建構參考圖像清單之實例技術。然而，本發明中所描述之技術不應如此受限制。在一些實例中，本發明中所描述之技術可關於已解碼圖像緩衝器(DPB)管理。DPB可為儲存已解碼圖像之緩衝器。
視訊編碼器20及視訊解碼器30中之每一者可包括各別DPB。舉例而言，作為編碼處理程序之部分，視訊編碼器 20可解碼當前圖像，將已解碼圖像儲存於視訊編碼器20之DPB中，且利用儲存於DPB中之已解碼圖像用於對後續圖像進行框間預測。類似地，作為解碼處理程序之部分，視訊解碼器30可解碼當前圖像且將已解碼圖像儲存於視訊解碼器30之DPB中。視訊解碼器30可接著利用已解碼圖像用於對後續圖像進行框間預測。
在一些實例中，用於視訊編碼器20或視訊解碼器30之DPB可儲存已解碼圖像以用於輸出重新定序或輸出延遲。舉例而言，視訊解碼器30可判定：應將已解碼圖像重新定序以用於輸出，或應使已解碼圖像之輸出延遲。在此等實例中，視訊解碼器30之DPB可儲存已解碼圖像以用於輸出重新定序或輸出延遲。
本發明中所描述之DPB管理技術可關於DPB藉以輸出及移除已解碼圖像之方式。output_flag語法元素可影響已解碼圖像輸出及移除處理程序，且可經定義為網路抽象層(NAL)單元語義之部分。NAL單元可經定義為一種語法結構，其包括關於待遵循之資料類型的指示及位元組，位元組包括呈必要時穿插有競爭阻止位元組之原始位元組序列有效負載(RBSP)形式的彼資料。RBSP可為一種語法結構，其包括囊封於一NAL單元中的整數數目個位元組。RBSP可為空或具有資料位元串之形式，該等資料位元包括繼之以RBSP停止位元且繼之以等於零的零或多個後續位元之語法元素。表8定義NAL單元語法。
在表8中，output_flag可影響已解碼圖像輸出及移除處理程序，如下文更詳細描述。對於任何圖像，若output_flag等於1，則圖像意欲用於輸出。否則，決不輸出圖像。在本發明中所描述之技術中，變數OutputFlag等 於output_flag語法元素。
在一些實例中，當前存取單元之經寫碼圖像的任何經寫碼切片NAL單元可能按以下方式中之一或多者不同於先前存取單元之經寫碼圖像的任何經寫碼切片NAL單元。舉例而言，pic_parameter_set_id值可能不同，nal_ref_idc值可能不同，其中nal_ref_idc值中之一者等於0。pic_order_cnt_lsb值可能不同。IdrPicFlag值可能不同。IdrPicFlag可等於1(對於兩種情形)，且idr_pic_id值可能不同。
在本發明中所描述之技術中，存取單元可經定義為在解碼次序上連續且含有一經寫碼圖像之NAL單元之集合。除經寫碼圖像之外，一輔助經寫碼圖像或其他NAL單元亦可能不含有經寫碼圖像之切片。在一些實例中，存取單元之解碼可產生已解碼圖像。經寫碼圖像可為待供解碼處理程序使用之圖像之經寫碼表示。
如表4中所指示，切片標頭語法可包括pic_parameter_set_id語法元素、pic_order_cnt_lsb語法元素、IdrPicFlag語法元素，及idr_pic_id語法元素。如表8中所指示，NAL單元語法可包括nal_ref_idc語法元素。
為了說明之目的，自假想參考解碼器(HRD)之觀點描述DPB管理技術。HRD可經定義為一種假想解碼器模型，其指定對符合NAL單元串流或符合編碼處理程序可產生之位元組串流的可變性的約束。然而，根據本發明中所描述之技術，視訊解碼器30可實施DPB管理技術，且在一些實例 中，視訊編碼器20可能有可能亦實施DPB管理技術。
HDR模型可定義經寫碼圖像緩衝器(CPB)、瞬時解碼處理程序，及已解碼圖像緩衝器(DPB)。CPB可類似於在其他先前標準中定義之HDR模型之CPB(亦即，CPB可儲存經寫碼圖像)。本發明中所描述之技術係關於不同於其他標準中之操作之DPB操作。此外，應理解，視訊解碼器30及可能的視訊編碼器20可實施DPB操作，如下文所描述。
大體而言，本發明中所描述之技術係關於DPB中之已解碼圖像之輸出及移除。在此上下文中，已解碼圖像之輸出意謂輸出解碼圖像以用於顯示、儲存或其他目的。然而，未必需要將輸出之已解碼圖像自DPB中移除。舉例而言，視訊解碼器30可能不移除自DPB輸出之已解碼圖像，此係因為視訊解碼器30可能需要利用彼已解碼圖像作為用於對後續圖像進行框間預測之參考圖像之故。在此上下文中，已解碼圖像之移除意謂將已解碼圖像自DPB中移除。
舉例而言，視訊解碼器30可以圖像經解碼之次序將已解碼圖像儲存於視訊解碼器30之DPB中。然而，圖像之解碼次序可能與圖像之輸出次序不相同。舉例而言，可能存在在解碼次序上在當前圖像之後的將比當前圖像早輸出的圖像。因此，在一些實例中，視訊解碼器30可執行重新定序，視訊解碼器30藉由重新定序將DPB中的在解碼次序上定序之圖像重新定序成輸出次序。視訊解碼器30可接著以已解碼圖像之輸出次序輸出已解碼圖像。若圖像不需要輸出(亦即，圖像已輸出或圖像並不意欲用於輸出)且不需要 進行框間預測(亦即，不需要用作用於進行框間預測之參考圖像)，則視訊解碼器30亦可將圖像自已解碼圖像中移除。
在本發明中所描述之技術中，若已解碼圖像已輸出或已解碼圖像並不意欲用於輸出，且若已解碼圖像在所導出之參考圖像集中未加以識別(該情形等效於不再需要用於框間預測參考(亦即，已解碼圖像不再需要用作用於進行框間預測之參考圖像))，則視訊解碼器30可將已解碼圖像自DPB中移除。此外，如上文所描述，參考圖像集可識別可潛在地用於對當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測的參考圖像。根據本發明中所描述之技術，若已解碼圖像在所導出之參考圖像集中未加以識別，則彼已解碼圖像可能不需要作為用於對當前圖像及在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測(例如，解碼)的參考圖像。因此，若已解碼圖像不需要輸出，則可將此已解碼圖像自DPB中移除，此係因為在給定已解碼圖像將不用於進行框間預測之情況下可能不需要將此已解碼圖像保持在DPB中之故。
此外，在本發明中所描述之技術中，視訊解碼器30可在解碼當前圖像之前移除已解碼圖像。舉例而言，如上文所描述，在解碼當前圖像之前，視訊解碼器30可導出參考圖像集，且建構(多個)參考圖像清單。因為視訊解碼器30可在解碼當前圖像之前導出參考圖像集，所以視訊解碼器30 可經組態以判定是否應在解碼當前圖像之前移除不需要輸出之已解碼圖像。舉例而言，在導出參考圖像集之後且在解碼當前圖像之前，視訊解碼器30可判定輸出之已解碼圖像或並不意欲用於輸出之已解碼圖像是否在參考圖像集中未加以識別。接著，若已解碼圖像在參考圖像集中未加以識別，則在解碼當前圖像之前，視訊解碼器30可移除不需要輸出(亦即，已經輸出或並不意欲用於輸出)之已解碼圖像。
在一些實例中，視訊解碼器30可在解碼當前圖像之前移除已解碼圖像。然而，視訊解碼器30可在建構(多個)參考圖像清單之後移除已解碼圖像。舉例而言，視訊解碼器30可導出參考圖像集，且可基於參考圖像集而建構參考圖像清單。接著，在解碼當前圖像之前，視訊解碼器30可移除已解碼圖像。在一些實例中，視訊解碼器30亦可在建構(多個)參考圖像清單之後輸出已解碼圖像。
本發明自至少兩種觀點描述DPB中之已解碼圖像之移除技術。在第一種觀點中，若圖像意欲用於輸出，則視訊解碼器30可基於輸出時間而移除已解碼圖像。在第二種觀點中，若圖像意欲用於輸出，則視訊解碼器30可基於POC值而移除已解碼圖像。在任一種觀點中，當已解碼圖像不在參考圖像集中時，且在解碼當前圖像之前，視訊解碼器30可移除不需要輸出(亦即，已經輸出或並不意欲用於輸出)之已解碼圖像。
DPB可包括複數個緩衝器，且每一緩衝器可儲存待用作 參考圖像或經保持以用於未來輸出之一已解碼圖像。最初，DPB為空的(亦即，將DPB充滿度設定為零)。在所描述之實例技術中，將已解碼圖像自DPB中移除可發生於解碼當前圖像之前，但在視訊解碼器30剖析當前圖像之第一切片的切片標頭之後。
在第一種觀點中，以下技術可按以下序列瞬時在時間tr(n)發生。在此實例中，tr(n)為含有當前圖像之存取單元n之CPB移除時間(亦即，解碼時間)。如本發明中所描述，該等技術瞬時發生可意謂：在HDR模型中，假定，圖像之解碼為瞬時的(亦即，無限快速)，具有等於零的用於解碼圖像之時間週期。
若當前圖像為IDR圖像，且當IDR圖像並非第一IDR圖像且自作用中序列參數集導出的pic_width_in_luma_samples或pic_height_in_luma_samples或max_dec_frame_buffering之值分別不同於自前一圖像之作用中序列參數集導出的pic_width_in_luma_samples或pic_height_in_luma_samples或max_dec_frame_buffering之值時，視訊解碼器30可推斷：no_output_of_prior_pics_flag語法元素等於1，而不管no_output_of_prior_pics_flag之實際值。若當前圖像為IDR圖像，且當no_output_of_prior_pics_flag等於1或經推斷為等於1時，視訊解碼器30可將DPB之所有緩衝器清空而不輸出DPB中之圖像，且可將empty充滿度設定為0。
如上文表1中所指示，序列參數集可包括pic_width_in_luma_samples及pic_height_in_luma_samples語法元素。序 列參數集亦可包括max_dec_frame_buffering語法元素。如上文表4中所指示，切片標頭語法可包括no_output_of_prior_pics_flag語法元素。
在當前圖像並非IDR圖像時，視訊解碼器30可移除DPB中對於以下條件成立之所有圖像(m)。第一條件可為：圖像不包括於當前圖像之參考圖像集中。第二條件可為：圖像具有等於0之OutputFlag或圖像之DPB輸出時間小於或等於當前圖像之CPB移除時間。在此實例中，CPB移除時間為tr(n)，其為移除處理程序發生時之例項(例如，在解碼當前圖像之前之時間)。已解碼圖像m之DPB輸出時間可藉由變數to,dpb(m)來定義。因此，可將小於或等於CPB移除時間之DPB輸出時間表示為to,dpb(m)tr(n)。下文更詳細定義DPB輸出時間(to,dpb)之導出。
以此方式，基於已解碼圖像之輸出時間且在已解碼圖像在參考圖像集中未加以識別時，視訊解碼器30可在解碼圖像之前將已解碼圖像自DPB中移除。當視訊解碼器30將已解碼圖像自DPB中移除時，視訊解碼器30可將DPB充滿度遞減一。
下文描述視訊解碼器30可藉以判定輸出已解碼圖像時之時間(例如，已解碼圖像之DPB輸出時間)的方式，且亦描述視訊解碼器30何時可將已解碼圖像儲存於DPB中。如上文所描述，圖像之DPB輸出時間可為判定是否將彼圖像自DPB中移除之因子。
當視訊解碼器30解碼圖像時，視訊解碼器30將圖像儲存 於DPB中，且將DPB充滿度遞增一。當圖像具有等於1之OutputFlag時，視訊解碼器30可基於以下等式而導出用於圖像之DPB輸出時間。
to,dpb(n)=tr(n)+tc*dpb_output_delay(n)
在等式中，dpb_output_delay(n)可指定於與包括圖像之存取單元相關聯的圖像時序SEI訊息中。SEI訊息可定義於諸如H.264/AVC標準之一些標準中。
to,dpb(n)值可定義何時輸出圖像。舉例而言，若OutputFlag等於1且to,dpb(n)等於tr(n)，則視訊解碼器30可輸出圖像。否則，若OutputFlag等於0，則視訊解碼器30可能不輸出圖像。在OutputFlag等於1且to,dpb(n)大於tr(n)之例子中，視訊解碼器30可在稍後時間(例如，在時間to,dpb(n))輸出圖像。
在一些實例中，當視訊解碼器30輸出圖像時，視訊解碼器30可修剪圖像。舉例而言，視訊解碼器30可利用用於圖像之作用中序列參數集中指定之修剪矩形。用於修剪圖像之技術大體上良好地建立及描述於諸如H.264/AVC標準之標準中。
在一些實例中，視訊解碼器30可判定圖像之DPB輸出時間與在輸出次序上跟隨該圖像之圖像的DPB輸出時間之間的差值。舉例而言，當圖像(n)為視訊解碼器30輸出之圖像且並非輸出之位元串流的最後圖像時，視訊解碼器30可判定將△to,dpb(n)之值定義為： △to,dpb(n)=to,dpb(nn)-to,dpb(n)
在上述等式中，nn指示在輸出次序上跟隨圖像(n)且具有等於1之OutputFlag的圖像。又，在上述等式中，△to,dpb(n)表示圖像與輸出次序上之跟隨圖像之間的DPB輸出時間差。
在用於移除已解碼圖像之第二種觀點中，HDR可在將存取單元自CPB中移除時瞬時地實施該等技術。此外，視訊解碼器30可實施來自DPB的已解碼圖像之移除，且視訊解碼器30可能未必包括CPB。大體而言，在本發明中，已解碼圖像之移除係由視訊解碼器30來執行，且亦可由視訊編碼器20來執行。在此等實例中，視訊解碼器30及視訊編碼器20可能不需要CPB。實情為，僅用於說明之目的作為HDR模型之部分來描述CPB。
如上文，在用於移除已解碼圖像之第二種觀點中，視訊解碼器30可在解碼當前圖像之前但在剖析當前圖像之第一切片的切片標頭之後，將圖像自DPB移除。又，類似於用於移除已解碼圖像之第一種觀點，在第二種觀點中，視訊解碼器30可執行類似於上文在當前圖像為IDR圖像時關於第一種觀點所描述之功能的功能。
否則，若當前圖像並非IDR圖像，則視訊解碼器30可將DPB之緩衝器清空而不輸出，該等緩衝器儲存標記為「不需要輸出」之圖像且儲存不包括於當前圖像之參考圖像集中的圖像。視訊解碼器30亦可將DPB充滿度遞減視訊解碼 器30清空的緩衝器之數目。當不存在空緩衝器時(亦即，DPB充滿度等於DPB大小)，視訊解碼器30可實施下文所描述之「衝撞」處理程序。在一些實例中，當不存在空緩衝器時，視訊解碼器30可重複地實施衝撞處理程序，直至存在視訊解碼器30可儲存當前已解碼圖像之空緩衝器為止。
在當前圖像為no_output_of_prior_pics_flag不等於1且未經推斷為等於1之IDR圖像時，視訊解碼器30可執行以下操作。視訊解碼器30可將DPB之緩衝器清空而不輸出，該等緩衝器儲存標記為「不需要輸出」且不包括於當前圖像之參考圖像集中的圖像。視訊解碼器30可藉由重複地調用「衝撞」處理程序而將DPB中之所有非空緩衝器清空，且可將DPB充滿度設定為0。
換言之，在當前圖像為IDR圖像時，視訊解碼器30可實施技術以將DPB中之所有緩衝器清空。在當前圖像並非IDR圖像時，視訊解碼器30可實施技術以將已解碼圖像移除至自由緩衝器以用於儲存當前已解碼圖像。
舉例而言，在視訊解碼器30解碼當前圖像之後，視訊解碼器30可將當前圖像儲存於DPB中，且將DPB充滿度遞增一。在一些實例中，若當前圖像之OutputFlag等於1，則視訊解碼器30可將當前圖像標記為「需要輸出」。否則，若當前圖像之OutputFlag等於0，則視訊解碼器30可將當前圖像標記為「不需要輸出」。
如上文所描述，在一些實例中，視訊解碼器30可實施衝撞處理程序。大體而言，衝撞處理程序涉及輸出已解碼圖 像。舉例而言，在當前圖像為IDR圖像且no_output_of_prior_pics_flag不等於1且未經推斷為等於1時，視訊解碼器30可實施衝撞處理程序。若DPB中不存在空緩衝器(亦即，DPB充滿度等於DPB之大小)，且需要空緩衝器以用於儲存已解碼(非IDR)圖像，則視訊解碼器30亦可實施衝撞處理程序。
大體而言，視訊解碼器30可實施以下步驟以實施衝撞處理程序。視訊解碼器30可首先判定待輸出之圖像。舉例而言，視訊解碼器30可選擇DPB中標記為「需要輸出」之所有圖像中具有較小PicOrderCnt(POC)值之圖像。視訊解碼器30可使用用於圖像之作用中序列參數集中指定之修剪矩形修剪所選定圖像。視訊解碼器30可輸出修剪之圖像，且可將圖像標記為「不需要輸出」。視訊解碼器30可檢查儲存經修剪及輸出之圖像的DPB之緩衝器。若圖像不包括於參考圖像集中，則視訊解碼器30可將彼緩衝器清空且可將DPB充滿度遞減一。
儘管自視訊解碼器30之上下文描述用於DPB管理之上述技術，但在一些實例中，視訊編碼器20可實施類似技術。然而，不需要在每個實例中視訊編碼器20實施類似技術。在一些實例中，視訊解碼器30可實施此等技術，且視訊編碼器20可能不實施此等技術。
以此方式，視訊寫碼器(例如，視訊編碼器20或視訊解碼器30)可寫碼指示屬於參考圖像集之參考圖像的資訊。此外，參考圖像集可識別可潛在地用於對當前圖像進行框 間預測且可潛在地用於對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測的參考圖像。
視訊寫碼器可以任何方式導出參考圖像集，包括上文所描述之實例技術。視訊寫碼器可判定儲存於已解碼圖像緩衝器中之已解碼圖像是否不需要輸出且是否在參考圖像集中未加以識別。當已解碼圖像已經輸出且在參考圖像集中未加以識別時，視訊寫碼器可將已解碼圖像自已解碼圖像緩衝器中移除。在移除已解碼圖像之後，視訊寫碼器可寫碼當前圖像。舉例而言，視訊寫碼器可如上文所描述建構(多個)參考圖像清單，且基於(多個)參考圖像清單而寫碼當前圖像。
先前實例描述視訊編碼器20及視訊解碼器30可用於進行以下操作之技術：導出參考圖像集，在不需要修改時及在需要修改時，自參考圖像集建構參考圖像清單，以及用於已解碼圖像緩衝器(DPB)管理之技術。然而，本發明之態樣不應如此受限制。在一些實例中，本發明中所描述之技術可關於視訊編碼器20藉以用信號發出哪些圖像屬於參考圖像集且為長期參考圖像(或換言之，哪些圖像屬於長期參考圖像集)的方式，及視訊解碼器30藉以判定哪些圖像屬於長期參考圖像集的方式。
舉例而言，表2包括num_long_term_ref_pics_pps及long_term_ref_pic_id_pps[i]語法元素，作為圖像參數集之部分。然而，本發明之態樣不應如此受限制。在一些其他實例中，序列參數集(例如，表1)可包括num_long_term_ref_ pics_pps及long_term_ref_pic_id_pps[i]語法元素。在序列參數集包括此等語法元素之實例中，本發明可提及如num_long_term_ref_pics_sps及long_term_ref_pic_id_sps[i]之語法元素以避免混淆。為了說明之目的，藉由序列參數集包括此等語法元素之實例描述該等技術。
類似於num_long_term_ref_pics_pps之定義，num_long_term_ref_pics_sps語法元素可指定包括於序列參數集中之候選長期參考圖像之數目。num_long_term_ref_pics_sps之值可在0至32(包括0及32)之範圍內。類似於long_term_ref_pic_id_pps[i]語法元素之定義，long_term_ref_pic_id_sps[i]語法元素可指定包括於序列參數集中之第i長期參考圖像識別資訊。
在一些實例中，long_term_ref_pic_id_sps[i]語法元素可指示屬於當前圖像之參考圖像集之候選長期參考圖像。候選長期參考圖像為可能為視訊解碼器30可用以對當前圖像或在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測的長期參考圖像之候選長期參考圖像中之一或多者。換言之，候選長期參考圖像可指示滿足以下情形之圖像：為長期參考圖像，且可可能地用以對當前圖像進行框間預測且用以對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測。在一些實例中，long_term_ref_pic_id_sps[i]語法元素可包括用於候選長期參考圖像之POC值。
然而，未必所有候選長期參考圖像用於進行框間預測。舉例而言，並非所有候選長期參考圖像屬於當前圖像之參 考圖像集。實情為，該等候選長期參考圖像中之零或多者屬於參考圖像集。
在本發明中所描述之技術中，視訊編碼器20可用信號發出參數集中之long_term_ref_pic_id語法元素(例如，序列參數集中之ong_term_ref_pic_id_sps語法元素，或圖像參數集中之long_term_ref_pic_id_pps語法元素)。視訊解碼器30可接收long_term_ref_pic_id語法元素且識別候選長期參考圖像。根據本發明中所描述之技術，視訊解碼器30可進一步判定候選長期參考圖像中之哪些者屬於參考圖像集。舉例而言，視訊解碼器30可經組態以基於由視訊編碼器20在經寫碼位元串流中用信號發出之額外語法元素而執行此判定。
如表4中所指示，視訊編碼器20可在當前圖像之切片標頭中用信號發出long_term_ref_pic_set()語法結構。表5描述long_term_ref_pic_set()語法結構。舉例而言，long_term_ref_pic_set()語法結構可包括num_long_term_pps_curr及num_long_term_pps_foll語法元素。此外，應注意，儘管num_long_term_pps_curr及num_long_term_pps_foll語法元素經定義為包括於圖像參數集中之長期參考圖像之數目，但在候選長期參考圖像包括於序列參數集中之實例中，此等語法元素可定義包括於序列參數集中之候選長期參考圖像之數目。舉例而言，為了避免混淆，num_long_term_pps_curr語法元素可被稱作num_long_term_sps_curr語法元素，且num_long_term_pps_foll語法元 素可被稱作num_long_term_sps_curr語法元素。
類似於num_long_term_pps_curr語法元素，num_long_term_sps_curr語法元素可定義滿足以下情形的所有長期參考圖像之數目：識別資訊包括於所參考之序列參數集中，作為候選長期參考圖像，且可用於對當前圖像及在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測。類似於num_long_term_pps_foll語法元素，num_long_term_sps_foll語法元素可定義滿足以下情形的所有長期參考圖像之數目：識別資訊包括於序列參數集中，作為候選長期參考圖像，且不用於對當前圖像進行框間預測，且可用於對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測。
又，在切片標頭中用信號發出之long_term_ref_pic_set()語法結構可包括long_term_ref_pic_set_idx_pps[i]語法元素。此外，在於序列參數集中用信號發出候選長期參考圖像之實例中，long_term_ref_pic_set_idx_pps[i]語法元素可被視為long_term_ref_pic_set_idx_sps[i]語法元素。類似於long_term_ref_pic_set_idx_pps[i]語法元素，long_term_ref_pic_set_idx_sps[i]語法元素可定義自參考圖像參數集至當前圖像之參考圖像集而繼承的第i長期參考圖像的至包括於所參考之序列參數集中的候選長期參考圖像識別資訊之清單的索引。換言之，long_term_ref_pic_set_idx_sps[i]語法元素可識別至序列參數集中之候選長期參考圖像之清單中的索引。自索引，視訊解碼器30可識別候選長期參考圖像中之長期參考圖像，且可判定所識別之 長期參考圖像屬於當前圖像之參考圖像集。
舉例而言，視訊解碼器30可實施類似於表5中之偽碼之以下偽碼，以判定候選長期參考圖像中之哪些者屬於當前圖像之參考圖像集。
for(i=0；i<num_long_term_sps_curr+num_long_term_sps_foll；i++) long_term_ref_pic_set_idx_sps[i]
以此方式，視訊解碼器30可解碼指示在參數集中識別之候選長期參考圖像的語法元素。舉例而言，若參數集為序列參數集，則視訊解碼器30可解碼指示在序列參數集中識別之候選長期參考圖像的long_term_ref_pic_id_sps[i]語法元素。若參數集為圖像參數集，則視訊解碼器30可解碼指示在圖像參數集中識別之候選長期參考圖像的long_term_ref_pic_id_pps[i]語法元素。
視訊解碼器30亦可解碼指示在參數集中識別的哪些候選長期參考圖像屬於當前圖像之參考圖像集的語法元素。舉例而言，若參數集為序列參數集，則視訊解碼器30可解碼num_long_term_sps_curr、num_long_term_sps_foll及long_term_ref_pic_set_idx_sps[i]語法元素，且若參數集為圖像參數集，則視訊解碼器30可解碼num_long_term_pps_curr、num_long_term_pps_foll及long_term_ref_pic_set_idx_pps[i]語法元素。在任一實例中，視訊解碼器30可解碼來自當前圖像之切片標頭之此等語法元素。
根據本發明中所描述之技術，long_term_ref_pic_ id_sps[i]及long_term_ref_pic_id_pps[i]語法元素可被視為屬於參考圖像集之候選長期參考圖像的圖像序列號(POC)值清單，且可作為參數集(例如，圖像參數集及序列參數集)之部分而加以寫碼(亦即，編碼或解碼)。long_term_ref_pic_set_idx_sps[i]或long_term_ref_pic_set_idx_pps[i]語法元素可被視為提供至候選長期參考圖像之POC值清單中的索引值(例如，至long_term_ref_pic_id_sps[i]或long_term_ref_pic_id_pps[i]中之索引)。在一些實例中，可作為當前圖像之切片標頭之部分寫碼long_term_ref_pic_set_idx_sps[i]或long_term_ref_pic_set_idx_pps[i]語法元素。
上文描述視訊編碼器20及視訊解碼器30可分別藉以編碼或解碼用於指示哪些圖像屬於當前圖像之長期參考圖像集的語法元素的一種方式。自語法元素，視訊解碼器30及視訊編碼器20可判定哪些圖像屬於當前圖像之長期參考圖像集。在視訊解碼器30及視訊編碼器20判定哪些圖像屬於長期參考圖像集之後，視訊編碼器20及視訊解碼器30可建構複數個參考圖像子集中之至少一參考圖像子集，且以上文所描述之方式導出參考圖像集。舉例而言，基於關於哪些圖像屬於長期參考圖像集之判定，視訊編碼器20及視訊解碼器30可建構視訊編碼器20及視訊解碼器30用以導出參考圖像集之RefPicSetLtCurr參考圖像子集。
在一些實例中，可能存在不包括於候選長期參考圖像中屬於長期參考圖像集之圖像。因此，可能存在視訊編碼器 20及視訊解碼器30可藉以判定哪些圖像屬於當前圖像之長期參考圖像集的額外方式。
舉例而言，如表5中所指示，切片標頭之long_term_ref_pic_set()語法結構包括long_term_ref_pic_id_delta_add[i]語法元素。此語法元素可指定並非自參考圖像參數集而繼承但包括於當前圖像之參考圖像集中的第i長期參考圖像之長期參考圖像識別(諸如，POC值)。此外，在於序列參數集中識別候選長期參考圖像之實例中，long_term_ref_pic_id_delta_add[i]語法元素可指定並非自序列參數集而繼承但包括於當前圖像之參考圖像集中的第i長期參考圖像之長期參考圖像識別。
換言之，long_term_ref_pic_id_pps[i]或long_term_ref_pic_id_sps[i]語法元素可識別候選長期參考圖像，但可能未必識別當前圖像之參考圖像集中的所有長期參考圖像。舉例而言，可能存在滿足以下情形之長期參考圖像：待用於對當前圖像及在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測，不包括於候選長期參考圖像之列表中。對於此等長期參考圖像，視訊編碼器20及視訊解碼器30可分別編碼或解碼識別屬於當前圖像之參考圖像集之長期參考圖像的識別資訊。
舉例而言，如表5中所指示，視訊編碼器20及視訊解碼器30可分別編碼或解碼num_long_term_add_curr及num_long_term_add_foll語法元素。num_long_term_add_curr語法元素可定義滿足以下情形的所有長期參考圖像之 數目：識別資訊不包括於所參考之圖像參數集或序列參數集(在可適用時)中，且可用於對當前圖像及在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測。num_long_term_add_foll語法元素可定義滿足以下情形的所有長期參考圖像之數目：識別資訊不包括於所參考之圖像參數集或序列參數集(在可適用時)中，無法用於對當前圖像進行框間預測，且可用於對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測。
視訊解碼器30可實施以下偽碼以判定哪些長期參考圖像屬於參考圖像集。在此實例中，長期參考圖像可能不包括於候選長期參考圖像中。
for(i=0；i<num_long_term_add_curr+num_long_term_add_foll；i++) long_term_ref_pic_id_delta_add[i]
如上文所描述，本發明中所描述之技術可根據HEVC標準來執行。下文為輔助理解的關於HEVC標準之簡要描述。此外，儘管在HEVC標準之上下文中描述技術，但該等技術可擴展至其他標準(包括專屬標準)。
JCT-VC致力於HEVC標準之開發。HEVC標準化努力係基於視訊寫碼器件之演進模型，其被稱作HEVC測試模型(HM)。HM假定視訊寫碼器件相對於根據(例如)ITU-T H.264/AVC之現有器件的若干額外能力。舉例而言，H.264提供九個框內預測編碼模式，而HM可提供多達三十三個框內預測編碼模式。
大體而言，HM之工作模型描述視訊圖框或圖像可劃分成包括明度樣本與色度樣本兩者之樹區塊或最大寫碼單元(LCU)序列。樹區塊具有與H.264標準之巨集區塊之目的類似的目的。一切片包括解碼次序上連續之若干樹區塊。可將視訊圖框或圖像分割成一或多個切片。每一樹區塊可根據四元樹而分裂成多個寫碼單元(CU)。舉例而言，樹區塊(作為四元樹之根節點)可分裂成四個子節點，且每一子節點又可為一父節點且分裂成另外四個子節點。最終的未分裂之子節點(作為四元樹之葉節點)包含一寫碼節點(亦即，經寫碼視訊區塊)。與經寫碼位元串流相關聯之語法資料可定義樹區塊可分裂之最大次數，且亦可定義寫碼節點之最小大小。在一些實例中，樹區塊可被稱作LCU。
CU包括一寫碼節點及與該寫碼節點相關聯之多個預測單元(PU)及變換單元(TU)。CU之大小對應於寫碼節點之大小，且形狀必須為正方形。CU之大小的範圍可自8×8像素直至具有最大64×64像素或大於64×64像素之樹區塊之大小。每一CU可含有一或多個PU及一或多個TU。與CU相關聯之語法資料可描述(例如)CU至一或多個PU之分割。分割模式可取決於是跳過CU抑或直接模式編碼、框內預測模式編碼抑或框間預測模式編碼CU而不同。PU之形狀可分割成非正方形。與CU相關聯之語法資料亦可描述(例如)CU根據四元樹至一或多個TU之分割。TU之形狀可為正方形或非正方形。
HEVC標準允許根據TU之變換，該變換對於不同CU可不 同。通常基於針對經分割LCU所定義之給定CU內之PU的大小而設定TU大小，但可能並非始終如此狀況。TU通常具有與PU相同的大小，或小於PU。在一些實例中，可使用被稱為「殘餘四元樹」(RQT)之四元樹結構將對應於CU之殘餘樣本再分為更小單元。RQT之葉節點可被稱作變換單元(TU)。可變換與TU相關聯之像素差值以產生可經量化之變換係數。
大體而言，PU包括與預測處理程序有關之資料。舉例而言，當以框內模式編碼PU時，該PU可包括描述該PU的框內預測模式之資料。作為另一實例，當以框間模式編碼PU時，該PU可包括定義該PU的運動向量之資料。定義PU之運動向量之資料可描述(例如)運動向量之水平分量、運動向量之垂直分量、運動向量之解析度(例如，四分之一像素精度或八分之一像素精度)、運動向量所指向的參考圖像，及/或用於運動向量之參考圖像清單(例如，清單0、清單1或清單C)。
大體而言，TU係用於變換程序及量化處理程序。具有一或多個PU之給定CU亦可包括一或多個變換單元(TU)。跟隨預測，視訊編碼器20可計算對應於PU之殘餘值。殘餘值包含可變換成使用TU而量化及掃描以產生串行化變換係數以用於熵寫碼的變換係數之像素差值。本發明通常使用術語「視訊區塊」來指代CU之寫碼節點。在一些特定狀況下，本發明亦可使用術語「視訊區塊」來指代包括一寫碼節點及多個PU及TU的樹區塊(亦即，LCU或CU)。
視訊序列通常包括一系列視訊圖框或圖像。圖像群組(GOP)通常包含一系列視訊圖像中之一或多者。GOP可在GOP之標頭、圖像中之一或多者之標頭中或在別處包括描述包括於GOP中之圖像之數目的語法資料。圖像之每一切片可包括描述該各別切片之編碼模式的切片語法資料。視訊編碼器20通常對個別視訊切片內之視訊區塊進行操作，以便編碼視訊資料。視訊區塊可對應於CU內之寫碼節點。視訊區塊可具有固定或變化之大小，且可根據指定寫碼標準而在大小方面不同。
作為一實例，HM支援以各種PU大小進行預測。假定特定CU之大小為2N×2N，則HM支援以2N×2N或N×N之PU大小進行框內預測，及以2N×2N、2N×N、N×2N或N×N之對稱PU大小進行框間預測。HM亦支援以2N×nU、2N×nD、nL×2N及nR×2N之PU大小進行框間預測之不對稱分割。在不對稱分割中，CU之一方向未經分割，而另一方向分割成25%及75%。CU之對應於25%分割之部分藉由「n」繼之以「上」、「下」、「左」或「右」之指示來指示。因此，例如，「2N×nU」指代在水平方向上以頂部2N×0.5N PU及底部2N×1.5N PU分割之2N×2N CU。
在本發明中，「N×N」與「N乘N」可互換地使用以指代視訊區塊在垂直尺寸與水平尺寸方面之像素尺寸，例如，16×16像素或16乘16像素。大體而言，16×16區塊在垂直方向中將具有16個像素(y=16)且在水平方向中將具有16個像素(x=16)。同樣地，N×N區塊大體上在垂直方向上具有N 個像素，且在水平方向上具有N個像素，其中N表示非負整數值。可按列及行來配置區塊中之像素。此外，區塊未必需要在水平方向中具有與在垂直方向中之像素數目相同的數目個像素。舉例而言，區塊可包含N×M個像素，其中M未必等於N。
跟隨使用CU之PU進行框內預測性或框間預測性寫碼，視訊編碼器20可計算CU之TU之殘餘資料。PU可包含空間域(亦被稱作像素域)中之像素資料，且TU可包含跟隨將例如離散餘弦變換(DCT)、整數變換、小波變換或概念上類似之變換的變換應用於殘餘視訊資料的變換域中之係數。殘餘資料可對應於未經編碼圖像之像素與對應於PU之預測值之間的像素差。視訊編碼器20可形成包括CU之殘餘資料的TU，且接著變換該等TU以產生CU之變換係數。
跟隨應用任何變換以產生變換係數，視訊編碼器20可執行變換係數之量化。量化大體上指代如下處理程序：將變換係數量化以可能地減少用以表示該等係數之資料之量，從而提供進一步壓縮。該量化處理程序可減少與該等係數中之一些係數或所有係數相關聯的位元深度。舉例而言，可在量化期間將n位元值降值捨位至m位元值，其中n大於m。
在一些實例中，視訊編碼器20可利用預定義掃描次序來掃描經量化之變換係數，以產生可經熵編碼之串行化向量。在其他實例中，視訊編碼器20可執行自適應性掃描。在掃描該等經量化之轉換係數以形成一維向量之後，視訊 編碼器20可熵編碼該一維向量，例如，根據上下文自適應性可變長度寫碼(CAVLC)、上下文自適應性二進位算術寫碼(CABAC)、基於語法之上下文自適應性二進位算術寫碼(SBAC)、機率區間分割熵(PIPE)寫碼或另一熵編碼方法。視訊編碼器20亦可熵編碼與經編碼視訊資料相關聯之語法元素以供視訊解碼器30用於解碼視訊資料。
為了執行CABAC，視訊編碼器20可將上下文模型內之上下文指派給待傳輸之符號。該上下文可能關於(例如)符號之相鄰值是否為非零。為了執行CAVLC，視訊編碼器20可針對待傳輸之符號選擇一可變長度碼。可以使得相對較短碼對應於更有可能的符號而較長碼對應於較不可能的符號之方式來建構VLC中之碼字。以此方式，使用VLC可達成位元節省(與(例如)針對待傳輸之每一符號使用等長度碼字相比較)。機率判定可基於指派給符號之上下文而進行。
圖2為說明包括經編碼及傳輸之複數個圖像之實例視訊序列33的概念圖。在一些狀況下，視訊序列33可被稱作圖像群組(GOP)。如所說明，視訊序列33包括圖像35A、36A、38A、35B、36B、38B及35C，及顯示次序上之最終圖像39。圖像34為發生於序列33之前的序列的顯示次序上之最終圖像。圖2大體上表示用於視訊序列之例示性預測結構，且僅意欲說明用於預測不同切片或圖像類型之視訊區塊(例如，P圖像或切片，或B圖像或切片)之圖像參考。實際視訊序列可含有不同圖像類型及呈不同顯示次序之更 多或更少個視訊圖像。視訊序列33可包括比圖2中所說明之圖像數目多或少之數目個圖像，且僅為了理解及作為實例之目的而說明視訊序列33中所說明之圖像。
對於基於區塊之視訊寫碼，可將包括於序列33中之視訊圖像中之每一者分割成視訊區塊，諸如寫碼單元(CU)或預測單元(PU)。舉例而言，視訊圖像之每一CU可包括一或多個PU。經框內寫碼(I)之圖像中之視訊區塊係使用關於相同圖像中之相鄰區塊之空間預測來預測。經框間寫碼(P或B)之圖像中之視訊區塊可使用關於相同圖像中之相鄰區塊之空間預測或關於其他參考圖像之時間預測。
B圖像中之視訊區塊可使用雙向預測來預測以自兩個不同參考圖像清單(例如，參考圖像清單0及1，被稱作清單0及清單1)計算兩個運動向量。在一些狀況下，B圖像中之視訊區塊可使用單向預測自兩個不同參考圖像清單中之一者來預測(例如，經單向B寫碼)。P圖像中之視訊區塊可使用單向預測來預測以自單一參考圖像清單計算單一運動向量。根據新興HEVC標準，可使用單向預測來編碼視訊區塊以自兩個參考圖像清單中之一者計算單一運動向量，或使用雙向預測來編碼視訊區塊以自兩個參考圖像清單計算兩個運動向量。舉例而言，兩個參考圖像清單可含有顯示或輸出次序上之過去參考圖像或未來參考圖像或過去參考圖像與未來參考圖像兩者，及解碼次序上之始終過去參考圖像。
在圖2之實例中，最終圖像39經指明用於作為I圖像進行 框內模式寫碼。在其他實例中，可參考前一序列之最終圖像34(其可為I圖像)以框間模式寫碼(例如，作為P圖像)寫碼最終圖像39。視訊圖像35A至35C(共同地為「視訊圖像35」)經指明用於作為B圖像使用雙向預測參考過去圖像及未來圖像進行寫碼。在所說明實例中，作為B圖像參考最終圖像34及圖像36A編碼圖像35A，如藉由自圖像34及36A至視訊圖像35A之箭頭指示。類似地編碼圖像35B及35C。
視訊圖像36A至36B(共同地為「視訊圖像36」)可經指明用於作為圖像使用單向預測參考過去圖像進行寫碼。在所說明實例中，作為B圖像參考最終圖像34編碼圖像36A，如藉由自圖像34至視訊圖像36A之箭頭指示。類似地編碼圖像36B。
視訊圖像38A至38B(共同地為「視訊圖像38」)可經指明用於使用雙向預測參考相同的過去圖像進行寫碼。在其他實例中，可使用雙向預測參考包括於參考圖像清單中的實質上類似之過去圖像編碼視訊圖像38。在所說明實例中，藉由對圖像36A之兩個參考編碼圖像38A，如藉由自圖像36A至視訊圖像38A之兩個箭頭指示。類似地編碼圖像38B。
根據本發明中所描述之技術，視訊編碼器20可用信號發出用於序列33中之圖像中之每一者的參考圖像集。舉例而言，對於圖像35A，此參考圖像集可識別可用以對圖像35A進行框間預測之所有參考圖像，以及可潛在地用於對在解碼次序上跟隨圖像35A之圖像進行框間預測的所有參 考圖像。舉例而言，圖像35A之參考圖像集可包括用於圖像34及圖像36A之POC值，以及用於額外參考圖像(諸如，可潛在地用於對在解碼次序上跟隨圖像35A之圖像進行框間預測的彼等參考圖像)之POC值。在此實例中，跟隨圖像35A之圖像可為在解碼次序上跟隨圖像35A且在視訊序列33內的彼等圖像。
視訊解碼器30可接著以上文所描述之方式導出圖像35A之參考圖像集。舉例而言，視訊解碼器30可判定用於屬於參考圖像集之參考圖像之POC值，如上文所描述。視訊解碼器30可進一步建構至少四個或至少五個參考圖像子集，且在一些實例中，直至上文所描述之六個參考圖像子集。視訊解碼器30可以特定次序配置該六個參考圖像子集以導出圖像35A之參考圖像集。
視訊解碼器30可以上文所描述之方式進一步建構初始參考圖像清單，其中不需要將待包括於初始參考圖像清單中之圖像重新定序。當停用參考圖像清單修改時，視訊解碼器30可將最終參考圖像清單設定為等於初始參考圖像清單。又，視訊解碼器30可以參考圖像清單中不存在非完成條目之方式建構參考圖像清單。舉例而言，視訊解碼器30可重複地列出來自參考圖像子集之參考圖像，直至參考圖像清單中之條目之數目等於參考圖像清單的可允許條目之最大數目為止。在一些實例中，視訊解碼器30可以上文所描述之方式修改初始參考圖像清單(例如，基於所建構之參考圖像子集中之至少一者中的參考圖像)。此外，在一 些實例中，視訊解碼器30可利用本發明中所描述之實例技術將已解碼圖像自視訊解碼器30之DPB中移除，諸如，移除在待解碼之當前圖像之參考圖像集中未加以識別且不需要輸出的已解碼圖像。又，在一些實例中，視訊解碼器30可以上文所描述之方式判定哪些長期參考圖像屬於參考圖像集，其中候選長期參考圖像清單之識別資訊可包括於參數集中。
圖3為說明可實施本發明中所描述之技術的實例視訊編碼器20之方塊圖。視訊編碼器20可執行視訊切片內之視訊區塊之框內寫碼及框間寫碼。框內寫碼依賴於空間預測以減少或移除給定視訊圖框或圖像內之視訊的空間冗餘。框間寫碼依賴於時間預測以減少或移除視訊序列之鄰近圖框或圖像內之視訊的時間冗餘。框內模式(I模式)可指代若干基於空間之壓縮模式中之任一者。諸如單向預測(P模式)或雙向預測(B模式)之框間模式可指代若干基於時間之壓縮模式中之任一者。
在圖3之實例中，視訊編碼器20包括分割單元35、預測模組41、已解碼圖像緩衝器(DPB)64、求和器50、變換模組52、量化單元54，及熵編碼單元56。預測模組41包括運動估計單元42、運動補償單元44，及框內預測模組46。對於視訊區塊重建構，視訊編碼器20亦包括反量化單元58、反變換模組60，及求和器62。亦可包括解區塊濾波器(圖3中未展示)以對區塊邊界濾波以將方塊效應假影自經重建構之視訊中移除。在需要時，解區塊濾波器通常對求和器 62之輸出濾波。除解區塊濾波器之外，亦可使用額外的迴路濾波器(迴路內或迴路後)。
如圖3中所展示，視訊編碼器20接收視訊資料，且分割單元35將資料分割成視訊區塊。此分割亦可包括分割成切片、頻塊或其他較大單元，以及(例如)根據LCU及CU之四元樹結構的視訊區塊分割。視訊編碼器20大體上說明編碼待編碼之視訊切片內之視訊區塊的組件。切片可劃分成多個視訊區塊(且有可能劃分成被稱作頻塊之視訊區塊之集合)。預測模組41可基於誤差結果(例如，寫碼速率及失真位準)而選擇用於當前視訊區塊之複數個可能寫碼模式中之一者，諸如，複數個框內寫碼模式中之一者或複數個框間寫碼模式中之一者。預測模組41可將所得的經框內寫碼或經框間寫碼區塊提供至求和器50以產生殘餘區塊資料，且將所得的經框內寫碼或經框間寫碼區塊提供至求和器62以重建構經編碼區塊以用作參考圖像。
預測模組41內之框內預測模組46可執行相對於與待寫碼之當前區塊相同的圖像或切片中之一或多個相鄰區塊的當前視訊區塊之框內預測性寫碼以提供空間壓縮。預測模組41內之運動估計單元42及運動補償單元44執行相對於一或多個參考圖像中之一或多個預測性區塊的當前視訊區塊之框間預測性寫碼以提供時間壓縮。
運動估計單元42可經組態以根據視訊序列之預定型樣判定視訊切片之框間預測模式。預定型樣可指明序列中之視訊切片為P切片或B切片。運動估計單元42及預定補償單元 44可高度整合，但為了概念目的而分別加以說明。由運動估計單元42執行之運動估計為產生運動向量之處理程序，運動向量估計視訊區塊之運動。運動向量(例如)可指示當前視訊圖像內之視訊區塊之PU相對於參考圖像內之預測性區塊的移位。
預測性區塊為被發現與待寫碼之視訊區塊之PU在像素差方面緊密匹配的區塊，可藉由絕對差總和(SAD)、平方差總和(SSD)或其他不同量度來判定像素差。在一些實例中，視訊編碼器20可計算儲存於已解碼圖像緩衝器64中的參考圖像之子整數像素位置的值。舉例而言，視訊編碼器20可內插參考圖像之四分之一像素位置、八分之一像素位置或其他分率像素位置的值。因此，運動估計單元42可執行相對於全像素位置及分率像素位置之運動搜尋，且以分率像素精度輸出運動向量。
運動估計單元42藉由比較經框間寫碼切片中之視訊區塊的PU之位置與參考圖像之預測性區塊之位置而計算該PU之運動向量。參考圖像可選自第一參考圖像清單(清單0)或第二參考圖像清單(清單1)，第一參考圖像清單(清單0)或第二參考圖像清單(清單1)中之每一者識別儲存於已解碼圖像緩衝器64中之一或多個參考圖像。運動估計單元42將所計算之運動向量發送至熵編碼單元56及運動補償單元44。
由運動補償單元44執行之運動補償可涉及基於藉由運動估計判定之運動向量而獲取或產生預測性區塊，有可能執行子像素精度之內插。在接收到當前視訊區塊之PU之運動 向量後，運動補償單元44便可將運動向量所指向的預測性區塊定位於參考圖像清單中之一者中。視訊編碼器20藉由自正被寫碼之當前視訊區塊的像素值減去預測性區塊之像素值來形成殘餘視訊區塊，從而形成像素差值。像素差值形成區塊之殘餘資料，且可包括明度差分量與色度差分量兩者。求和器50表示執行此減法運算之一或多個組件。運動補償單元44亦可產生與視訊區塊及視訊切片相關聯的供視訊解碼器30用於解碼視訊切片之視訊區塊的語法元素。
框內預測模組46可框內預測當前區塊，而作為由運動估計單元42及運動補償單元44執行之框間預測(如上文所描述)之替代。詳言之，框內預測模組46可判定使用框內預測模式以編碼當前區塊。在一些實例中，框內預測模組46可使用各種框內預測模式(例如)在單獨編碼遍次期間編碼當前區塊，且框內預測模組46(或，在一些實例中，模式選擇單元40)可自所測試模式中選擇使用適當框內預測模式。舉例而言，框內預測模組46可使用對各種所測試框內預測模式之速率-失真分析而計算速率-失真值，且在所測試模式當中選擇具有最佳速率-失真特性之框內預測模式。速率-失真分析大體上判定經編碼區塊與經編碼以產生經編碼區塊之原始的未經編碼區塊之間的失真(或誤差)之量，以及用以產生經編碼區塊之位元率(亦即，位元數目)。框內預測模組46可自各種經編碼區塊之失真及速率計算比率以判定哪一框內預測模式展現區塊之最佳速率-失真值。
在選擇用於區塊之框內預測模式之後，框內預測模組46可將指示用於區塊之選定框內預測模式之資訊提供至熵編碼單元56。熵編碼單元56可根據本發明之技術編碼指示選定框內預測模式之資訊。視訊編碼器20可在經傳輸之位元串流組態資料中包括各種區塊之編碼上下文之定義及將用於該等上下文中之每一者之最可能的框內預測模式、框內預測模式索引表及修改之框內預測模式索引表的指示，該經傳輸之位元串流組態資料可包括複數個框內預測模式索引表及複數個修改之框內預測模式索引表(亦被稱作碼字映射表)。
在預測模組41經由框間預測或框內預測產生用於當前視訊區塊之預測性區塊之後，視訊編碼器20藉由自當前視訊區塊中減去預測性區塊而形成殘餘視訊區塊。殘餘區塊中之殘餘視訊資料可包括於一或多個TU中且應用於變換模組52。變換模組52使用諸如離散餘弦變換(DCT)或概念上類似的變換之變換將殘餘視訊資料變換成殘餘變換係數。變換模組52可將殘餘視訊資料自像素域轉換至變換域，諸如頻域。
變換模組52可將所得變換係數發送至量化單元54。量化單元54將變換係數量化以進一步減小位元率。量化處理程序可減少與該等係數中之一些係數或所有係數相關聯的位元深度。可藉由調整量化參數而修改量化程度。在一些實例中，量化單元54可接著執行包括量化之變換係數之矩陣的掃描。或者，熵編碼單元56可執行該掃描。
跟隨量化，熵編碼單元56熵編碼經量化之變換係數。舉例而言，熵編碼單元56可執行上下文自適應性可變長度寫碼(CAVLC)、上下文自適應性二進位算術寫碼(CABAC)、基於語法之上下文自適應性二進位算術寫碼(SBAC)、機率區間分割熵(PIPE)寫碼或另一熵寫碼方法或技術。跟隨由熵編碼單元56進行之熵編碼，可將經編碼位元串流傳輸至視訊解碼器30或加以封存以供視訊解碼器30稍後傳輸或擷取。熵編碼單元56亦可熵編碼正被寫碼之當前視訊切片的運動向量及其他語法元素。
反量化單元58及反變換模組60分別應用反量化及反變換，以在像素域中重建構殘餘區塊以供稍後用作參考圖像之參考區塊。運動補償單元44可藉由將殘餘區塊與參考圖像清單中之一者內的參考圖像中之一者之預測性區塊相加來計算參考區塊。運動補償單元44亦可將一或多個內插濾波器應用於經重建構之殘餘區塊以計算子整數像素值以供用於運動估計中。求和器62將經重建構之殘餘區塊與由運動補償單元44產生的經運動補償之預測區塊相加以產生用於儲存於已解碼圖像儲存器64中的參考區塊。參考區塊可由運動估計單元42及運動補償單元44作為用於對後續視訊圖框或圖像中之區塊進行框間預測的參考區塊使用。
根據本發明，預測模組41表示用於執行上文所描述之實例功能之一實例單元。舉例而言，預測模組41可判定哪些參考圖像屬於參考圖像集，且造成視訊編碼器20寫碼指示屬於參考圖像集之參考圖像的資訊。又，在重建構處理程 序(例如，用以重建構用於用作參考圖像且儲存於已解碼圖像緩衝器64中之圖像的處理程序)期間，預測模組41可建構複數個參考圖像子集，每一參考圖像子集識別參考圖像中之一或多者。預測模組41亦可自該所建構之複數個參考圖像子集導出參考圖像集。又，預測模組41可實施上文所描述之實例偽碼集合中之任何一或多者，以實施本發明中所描述之一或多個實例技術。
在一些實例中，預測模組41可以上文所描述之方式建構初始參考圖像清單。在一些實例中，不需要將待包括於初始參考圖像清單中之圖像重新定序。又，預測模組41可以參考圖像清單中不存在非完成條目之方式建構參考圖像清單。在一些實例中，預測模組41亦可以上文所描述之方式修改初始參考圖像清單以建構修改之參考圖像清單。此外，在一些實例中，預測模組41可以上文所描述之方式實施來自DPB 64之已解碼圖像之移除。此外，在一些實例中，預測模組41可經組態以按上文所描述之方式判定哪些長期參考圖像屬於當前圖像之參考圖像集。
在其他實例中，不同於預測模組41之單元可實施上文所描述之實例。在一些其他實例中，預測模組41結合視訊編碼器20之一或多個其他單元可實施上文所描述之實例。在又一些其他實例中，視訊編碼器20之處理器或單元(圖3中未展示)可單獨地或結合視訊編碼器20之其他單元實施上文所描述之實例。
圖4為說明可實施本發明中所描述之技術的實例視訊解 碼器30之方塊圖。在圖4之實例中，視訊解碼器30包括熵解碼單元80、預測模組81、反量化單元86、反變換單元88、求和器90，及已解碼圖像緩衝器(DPB)92。預測模組81包括運動補償單元82及框內預測模組84。視訊解碼器30在一些實例中可執行大體與關於視訊編碼器20(圖3)所描述之編碼遍次互逆之解碼遍次。
在解碼處理程序期間，視訊解碼器30自視訊編碼器20接收表示經編碼視訊切片之視訊區塊及相關聯之語法元素的經編碼視訊位元串流。視訊解碼器30之熵解碼單元80熵解碼該位元串流以產生經量化之係數、運動向量及其他語法元素。熵解碼單元80將運動向量及其他語法元素轉遞至預測模組81。視訊解碼器30可在視訊切片層級及/或視訊區塊層級接收語法元素。
當視訊切片經寫碼為經框內寫碼(I)切片時，預測模組81之框內預測模組84可基於用信號發出之框內預測模式及來自當前圖像之先前已解碼區塊之資料而產生用於當前視訊切片之視訊區塊之預測資料。當視訊圖像經寫碼為經框間寫碼(亦即，B或P)切片時，預測模組81之運動補償單元82基於自熵解碼單元80所接收之運動向量及其他語法元素而產生用於當前視訊切片之視訊區塊之預測性區塊。預測性區塊可自參考圖像清單中之一者內的參考圖像中之一者產生。視訊解碼器30可使用預設建構技術基於儲存於已解碼圖像緩衝器92中之參考圖像而建構參考圖框清單(清單0及清單1)。在一些實例中，視訊解碼器30可自在所導出之參 考圖像集中識別之參考圖像建構清單0及清單1。
運動補償單元82藉由剖析運動向量及其他語法元素而判定當前視訊切片之視訊區塊之預測資訊，且使用該預測資訊產生正被解碼之當前視訊區塊之預測性區塊。舉例而言，運動補償單元82使用所接收語法元素中之一些所接收語法元素判定：用以寫碼視訊切片之視訊區塊之預測模式(例如，框內預測或框間預測)、框間預測切片類型(例如，B切片或P切片)、用於切片之參考圖像清單中之一或多者的建構資訊、用於切片之每一經框間編碼視訊區塊之運動向量、用於切片之每一經框間寫碼視訊區塊之框間預測狀態，及用以解碼當前視訊切片中之視訊區塊之其他資訊。
運動補償單元82亦可基於內插濾波器而執行內插。運動補償單元82可使用如由視訊編碼器20在編碼視訊區塊期間使用的內插濾波器，以計算參考區塊之子整數像素的內插值。在此狀況下，運動補償單元82可自所接收語法元素判定由視訊編碼器20使用之內插濾波器且使用該等內插濾波器來產生預測性區塊。
反量化單元86將提供於位元串流中且由熵解碼單元80解碼的經量化之變換係數反量化(亦即，解量化)。反量化處理程序可包括使用由視訊編碼器20計算的用於視訊切片中之每一視訊區塊的量化參數，以判定量化程度及(同樣的)應應用之反量化的程度。反變換模組88將反變換(例如，反DCT、反整數變換或概念上類似之反變換處理程序)應用於變換係數，以便在像素域中產生殘餘區塊。
在預測模組81基於框間預測或框內預測而產生用於當前視訊區塊之預測性區塊之後，視訊解碼器30藉由將來自反變換模組88之殘餘區塊與由預測模組81產生之相應預測性區塊加總而形成已解碼視訊區塊。求和器90表示執行此加法運算之一或多個組件。在需要時，亦可應用解區塊濾波器來對已解碼區塊濾波以便移除方塊效應假影。其他迴路濾波器(寫碼迴路中或寫碼迴路後)亦可用以使像素轉變平滑，或以其他方式改良視訊品質。接著將給定圖像中之已解碼視訊區塊儲存於已解碼圖像緩衝器92中，已解碼圖像緩衝器92儲存用於後續運動補償之參考圖像。已解碼圖像緩衝器92亦儲存已解碼視訊以用於稍後呈現於顯示器件(諸如，圖1之顯示器件32)上。
根據本發明，預測模組81表示用於執行上文所描述之實例功能之一實例單元。舉例而言，預測模組81可判定哪些參考圖像屬於參考圖像集。又，預測模組81可建構複數個參考圖像子集，每一參考圖像子集識別該等參考圖像中之一或多者。預測模組81亦可自該所建構之複數個參考圖像子集導出參考圖像集。又，預測模組81可實施上文所描述之實例偽碼集合中之任何一或多者，以實施本發明中所描述之一或多個實例技術。
在一些實例中，預測模組81可以上文所描述之方式建構初始參考圖像清單。在一些實例中，不需要將待包括於初始參考圖像清單中之圖像重新定序。又，預測模組81可以參考圖像清單中不存在非完成條目之方式建構參考圖像清 單。在一些實例中，預測模組81亦可以上文所描述之方式修改初始參考圖像清單以建構修改之參考圖像清單。此外，在一些實例中，預測模組81可以上文所描述之方式實施來自DPB92之已解碼圖像之移除。此外，在一些實例中，預測模組81可經組態以按上文所描述之方式判定哪些長期參考圖像屬於當前圖像之參考圖像集。
在其他實例中，不同於預測模組81之單元可實施上文所描述之實例。在一些其他實例中，預測模組81結合視訊解碼器30之一或多個其他單元可實施上文所描述之實例。在又一些其他實例中，視訊解碼器30之處理器或單元(圖4中未展示)可單獨地或結合視訊解碼器30之其他單元實施上文所描述之實例。
圖5為說明導出參考圖像集之實例操作的流程圖。僅為了說明之目的，圖5之方法可由對應於視訊編碼器20或視訊解碼器30之視訊寫碼器來執行。舉例而言，視訊寫碼器(例如，視訊編碼器20或視訊解碼器30)可寫碼(例如，編碼或解碼)指示屬於參考圖像集之參考圖像的資訊(94)。參考圖像集可識別可潛在地用於對一當前圖像進行框間預測且用於對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測的參考圖像。
舉例而言，當視訊編碼器20執行步驟94時，視訊編碼器20可編碼指示屬於參考圖像集之參考圖像之識別符的值。舉例而言，視訊編碼器20可在位元串流中用信號發出pic_order_cnt_lsb語法元素及log2_max_pic_order_ cnt_lsb_minus4語法元素。當視訊解碼器30執行步驟94時，視訊解碼器30可自log2_max_pic_order_cnt_lsb_minus4語法元素判定MaxPicOrderCntLsb之值。視訊解碼器30可接著判定屬於參考圖像集之參考圖像之識別符(例如，POC值)。
視訊寫碼器可建構複數個參考圖像子集，每一參考圖像子集識別該等參考圖像中之零或多者(96)。舉例而言，視訊寫碼器可建構RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr及RefPicSetLtFoll參考圖像子集。然而，本發明之態樣不應如此受限制。在一些實例中，視訊寫碼器可建構五個參考圖像子集，該五個參考圖像子集中之四者為RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr及RefPicSetLtFoll參考圖像子集中之四者，且第五者可為剩餘六個參考圖像子集中之兩者之組合(例如，RefPicSetFoll0及RefPicSetFoll1參考圖像子集之組合)。
在一些實例中，視訊寫碼器可建構以下四個參考圖像子集中之至少兩者。在其他實例中，視訊寫碼器可至少建構以下四個參考圖像子集。第一參考圖像子集可識別滿足以下情形之短期參考圖像：在解碼次序上在當前圖像之前及在輸出次序上在當前圖像之前，且可潛在地用於對當前圖像及在解碼次序上跟隨當前圖像之一或多個圖像中的一或多者進行框間預測。第二參考圖像子集可識別滿足以下情 形之短期參考圖像：在解碼次序上在當前圖像之前及在輸出次序上在當前圖像之後，且可潛在地用於對當前圖像及在解碼次序上跟隨當前圖像之一或多個圖像中的一或多者進行框間預測。
第三參考圖像子集可識別滿足以下情形之長期參考圖像：在解碼次序上在當前圖像之前，且可潛在地用於對當前圖像及在解碼次序上跟隨當前圖像之一或多個圖像中的一或多者進行框間預測。第四參考圖像子集可識別滿足以下情形之長期參考圖像：在解碼次序上在當前圖像之前，且無法用於對當前圖像進行框間預測，且可潛在地用於對在解碼次序上跟隨當前圖像之一或多個圖像中的一或多者進行框間預測。
視訊寫碼器可自該複數個參考圖像子集導出參考圖像集(98)。舉例而言，視訊寫碼器可以特定次序將以下各者中之至少兩者定序：RefPicSetStCurr0、RefPicSetStCurr1、RefPicSetStFoll0、RefPicSetStFoll1、RefPicSetLtCurr及RefPicSetLtFoll參考圖像子集，以導出參考圖像集。
在一些實例中，由視訊寫碼器執行之定序可意謂：參考圖像子集中之每一者中之圖像可在參考圖像集內順序地加以識別。在此等實例中，視訊寫碼器可藉由至參考圖像集中之索引值來參考參考圖像集中之參考圖像。
視訊寫碼器可基於所導出之參考圖像集而寫碼當前圖像(100)。應理解，因為視訊寫碼器自參考圖像子集導出參考圖像集，所以視訊寫碼器可被視為基於該複數個參考圖像 子集而寫碼當前圖像。舉例而言，視訊寫碼器可基於該複數個參考圖像子集(例如，自自該複數個參考圖像子集而導出的所導出之參考圖像集)而建構第一參考圖像清單及第二參考圖像清單中之至少一者。視訊寫碼器可接著基於第一參考圖像清單及第二參考圖像清單中之至少一者而寫碼當前圖像。
圖6為說明建構參考圖像清單之實例操作的流程圖。僅為了說明之目的，圖6之方法可由對應於視訊編碼器20或視訊解碼器30之視訊寫碼器來執行。類似於圖5，視訊寫碼器可寫碼指示參考圖像之資訊(102)，且建構複數個參考圖像子集(104)。
視訊寫碼器可接著將來自參考圖像子集之參考圖像添加至初始參考圖像清單中，以建構初始參考圖像清單(106)。在一些實例中，視訊編碼器20與視訊解碼器30兩者可建構初始參考圖像清單。舉例而言，視訊編碼器20可建構初始參考圖像清單以建立用於儲存於DPB 64中的經重建構之視訊區塊。視訊解碼器30可作為其解碼處理程序之部分建構初始參考圖像清單，且可實施預設建構技術，在預設建構技術中，視訊解碼器30不需要自視訊編碼器20接收關於藉以建構初始參考圖像清單之方式之資訊。
在一些實例中，為了建構初始參考圖像清單，視訊寫碼器可將來自該複數個參考圖像子集中之第一子集之參考圖像添加至初始參考圖像清單中，繼之將來自第二子集之參考圖像添加至初始參考圖像清單中，且接著繼之將來自第 三子集之參考圖像添加至初始參考圖像清單中。只要初始參考圖像清單中所列出之參考圖像之總數目不大於初始參考圖像清單中的可允許條目之最大數目，視訊寫碼器便可添加來自此等參考圖像子集之參考圖像。舉例而言，若於在參考圖像清單中添加參考圖像期間的任何時間，初始參考圖像清單中之條目之數目變成等於可允許初始參考清單條目之最大數目，則視訊寫碼器可停止在初始參考圖像清單中添加任何額外圖像。
視訊寫碼器可類似地建構另一初始參考圖像清單，諸如在當前圖像之視訊區塊經雙向預測之實例中。在此實例中，為了建構此另一初始參考圖像清單，只要此另一初始參考圖像清單中之條目之總數目不大於條目之可允許數目，視訊寫碼器便可將來自第二子集之參考圖像添加至該另一初始參考圖像清單中，繼之將來自第一子集之參考圖像添加至該另一初始參考圖像清單中，且接著繼之將來自第三子集之參考圖像添加至該另一初始參考圖像清單中。在此等實例中，第一子集可為RefPicSetStCurr0參考圖像子集，第二子集可為RefPicSetStCurr1參考圖像子集，且第三子集可為RefPicSetLtCurr參考圖像子集。
在一些實例中，為了添加在RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集中識別之參考圖像，視訊寫碼器可寫碼(例如，編碼或解碼)語法元素，視訊寫碼器可自該等語法元素判定此等參考圖像子集中之每一者中的參考圖像之數目。舉例而言，視訊寫碼器 可寫碼num_short_term_curr0語法元素及num_short_term_curr1語法元素。num_short_term_curr0語法元素及num_short_term_curr1語法元素可分別指示在RefPicSetStCurr0參考圖像子集及RefPicSetStCurr1參考圖像子集中所識別之參考圖像之數目。
視訊寫碼器亦可寫碼num_long_term_pps_curr語法元素及num_long_term_add_curr語法元素。num_long_term_pps_curr語法元素可指示識別包括於圖像參數集(PPS)中之長期參考圖像之數目，且num_long_term_add_curr語法元素可指示識別資訊不包括於PPS中之長期參考圖像之數目。在此實例中，此等長期參考圖像可潛在地用於對當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨當前圖像之一或多個圖像進行框間預測。
視訊寫碼器可基於num_long_term_pps_curr語法元素及num_long_term_add_curr語法元素而判定RefPicSetLtCurr參考圖像子集中之參考圖像之數目。舉例而言，視訊寫碼器可將num_long_term_pps_curr語法元素及num_long_term_add_curr語法元素之值加總，以判定RefPicSetLtCurr參考圖像子集中之參考圖像之數目。
視訊寫碼器可基於一或多個參考圖像清單而寫碼當前圖像(108)。舉例而言，視訊寫碼器可基於所導出之參考圖像集而建構第一參考圖像清單及第二參考圖像清單中之至少一者。視訊寫碼器可接著基於第一參考圖像清單及第二參考圖像清單中之至少一者而寫碼當前圖像。
圖7為說明建構參考圖像清單之另一實例操作的流程圖。僅為了說明之目的，圖7之方法可由對應於視訊編碼器20或視訊解碼器30之視訊寫碼器來執行。類似於圖5，視訊寫碼器可寫碼指示參考圖像之資訊(110)，且建構複數個參考圖像子集(112)。視訊寫碼器可將參考圖像添加至參考圖像清單之第一條目集合中(114)。舉例而言，參考圖像清單中之條目之數目可等於可允許條目之最大數目，如藉由num_ref_idx_l0_active_minus1或num_ref_idx_l1_active_minus1語法元素所定義。
在此實例中，視訊寫碼器可將在RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集中識別之參考圖像列入(例如，添加)至第一條目集合中。舉例而言，對於清單0，視訊寫碼器可按次序將在RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集中識別之參考圖像添加至清單0之第一條目集合中。對於清單1，視訊寫碼器可按次序將在RefPicSetStCurr1、RefPicSetStCurr0及RefPicSetLtCurr參考圖像子集中識別之參考圖像添加至清單1之第一條目集合中。
視訊寫碼器可接著判定參考圖像清單中之條目之數目是否等於參考圖像清單中的可允許條目之最大數目(116)。若參考圖像清單中之條目之數目不小於可允許條目之最大數目(116之「否」)，則視訊寫碼器可基於參考圖像清單而寫碼當前圖像(118)。
否則，若參考圖像清單中之條目之數目小於可允許條目之最大數目(116之「是」)，則視訊寫碼器可將來自參考圖像子集中之至少一者的一或多個參考圖像重新列入(例如，重新識別或重新添加)至參考圖像清單中在第一條目集合之後的條目中(120)。舉例而言，視訊寫碼器可將在RefPicSetStCurr0參考圖像子集中識別之一或多個參考圖像添加至清單0中在清單0中之第一條目集合之後的條目中，或將在RefPicSetStCurr1參考圖像子集中識別之一或多個參考圖像添加至清單1中在清單1中之第一條目集合之後的條目中。以此方式，視訊寫碼器可識別在參考圖像清單中之一個以上條目中的第一參考圖像子集中之至少一參考圖像。
視訊寫碼器可接著判定參考圖像清單中之條目之數目是否等於參考圖像清單中的可允許條目之最大數目(122)。若參考圖像清單中之條目之數目不小於可允許條目之最大數目(122之「否」)，則視訊寫碼器可基於參考圖像清單而寫碼當前圖像(124)。
否則，若參考圖像清單中之條目之數目小於可允許條目之最大數目(122之「是」)，則視訊寫碼器可將來自參考圖像子集中之至少一者的一或多個參考圖像重新列入(例如，重新識別或重新添加)至參考圖像清單中在第一條目集合之後的條目中(120)。舉例而言，在此情形下，視訊寫碼器可重新添加在第一參考圖像子集中識別之額外參考圖像。若視訊寫碼器已經重新添加第一參考圖像子集中之所 有參考圖像，則視訊寫碼器可重新添加來自第二參考圖像子集(例如，用於清單0之RefPicSetStCurr0參考圖像子集，或用於清單1之RefPicSetStCurr1參考圖像子集)之一或多個參考圖像。可重複此處理程序，直至參考圖像清單中之條目之數目不小於可允許條目之最大數目(122之「否」)為止。
以此方式，當參考圖像清單中之條目之數目不等於參考圖像清單中的可允許條目之最大數目時，視訊寫碼器可重複地將來自參考圖像子集中之至少一者的一或多個參考圖像重新列入(例如，重新識別或重新添加)至參考圖像清單中在第一條目集合之後的條目中，直至參考圖像清單中之條目之數目等於參考圖像清單中的可允許條目之最大數目為止。此情形可導致視訊寫碼器在參考圖像清單之條目中列出參考圖像，以使得參考圖像清單之每一條目識別該等參考圖像中之一者，且使得參考圖像清單中之至少兩個條目識別該等參考圖像中之一相同參考圖像。
圖8為說明修改初始參考圖像清單之實例操作的流程圖。僅為了說明之目的，圖8之方法可由對應於視訊編碼器20或視訊解碼器30之視訊寫碼器來執行。類似於圖6，視訊寫碼器可寫碼指示參考圖像之資訊(126)，且建構複數個參考圖像子集(128)。該複數個參考圖像子集可包括RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參考圖像子集。視訊寫碼器可以上文所描述之方式基於RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr參 考圖像子集而建構初始參考圖像清單(130)。
視訊寫碼器可判定是否需要參考圖像清單修改(132)。舉例而言，視訊寫碼器可寫碼語法元素，諸如，指示是否需要修改初始清單0或初始清單1之ref_pic_list_modification_flag_l0及ref_pic_list_modification_flag_l1。若不需要初始參考圖像清單之修改(132之「否」)，則視訊寫碼器可基於初始參考圖像清單而寫碼當前圖像(134)。
若需要修改(132之「是」)，則視訊寫碼器可識別所建構之參考圖像子集中之至少一者中的一參考圖像(136)。舉例而言，視訊寫碼器可寫碼modification_of_ref_pic_idc語法元素。modification_of_ref_pic_idc語法元素之值可指示視訊寫碼器將利用哪個參考圖像子集來識別參考圖像。視訊寫碼器亦可寫碼ref_pic_set_idx語法元素，該ref_pic_set_idx語法元素指示至視訊寫碼器將用以識別參考圖像之參考圖像子集中的索引。
視訊寫碼器可在初始參考圖像清單中在當前條目處列出(例如，添加或識別)所識別之參考圖像以建構修改之參考圖像清單(138)。當前條目最初可為初始參考圖像清單中藉由索引0定義之條目。對於經寫碼位元串流中的modification_of_ref_pic_idc語法元素之每一例項(其中modification_of_ref_pic_idc語法元素之值並非3)，視訊寫碼器可將初始條目之值遞增一(例如，藉由索引1來定義條目之下一值)。視訊寫碼器可基於修改之參考圖像清單而 寫碼當前圖像(140)。
圖9為說明已解碼圖像移除之實例操作的流程圖。僅為了說明之目的，圖8之方法可由對應於視訊編碼器20或視訊解碼器30之視訊寫碼器來執行。類似於圖5，視訊寫碼器(例如，視訊編碼器20或視訊解碼器30)可寫碼(例如，編碼或解碼)指示參考圖像集之參考圖像之資訊(142)，且可自經寫碼(例如，經編碼或經解碼)資訊導出參考圖像集(144)。
視訊寫碼器可判定儲存於已解碼圖像緩衝器(DPB)中之已解碼圖像是否不需要輸出(亦即，已經輸出或並不意欲輸出)且是否在參考圖像集中未加以識別(146)。若已解碼圖像需要輸出或在參考圖像集中加以識別(146之「否」)，則視訊寫碼器可能不將已解碼圖像自DPB中移除，且可保持已解碼圖像儲存於DPB中(148)。
當已解碼圖像已經輸出且在參考圖像集中未加以識別時(146之「是」)，視訊寫碼器可將已解碼圖像自DPB中移除(150)。在移除已解碼圖像之後，視訊寫碼器可接著寫碼當前圖像(152)。
如上文所描述，視訊寫碼器可基於用於寫碼當前圖像之參考圖像集而建構參考圖像清單。在一些實例中，視訊寫碼器可在建構參考圖像清單之後將已解碼圖像自DPB中移除。此外，對於所輸出之已解碼圖像，視訊寫碼器可判定輸出已解碼圖像時之時間，且可基於所判定之時間且在寫碼當前圖像之前輸出已解碼圖像。
在一些實例中，視訊寫碼器可將經寫碼(例如，已解碼)圖像儲存於DPB中。在一些實例中，視訊寫碼器可判定在儲存之前DPB為充滿的。在此等實例中，視訊寫碼器可選擇滿足以下情形之已解碼圖像：當前儲存於DPB中，標記為「需要輸出」且具有儲存於DPB中之所有已解碼圖像之最小圖像序列號(POC)值。視訊寫碼器可接著輸出所選定圖像。此外，視訊寫碼器可判定所輸出圖像不包括於當前圖像之參考圖像集中。在此狀況下，視訊寫碼器可將DPB內儲存所輸出圖像之緩衝器清空，且可將經寫碼圖像儲存於DPB內之彼緩衝器中。
圖10為說明判定哪些長期參考圖像屬於當前圖像之參考圖像集之實例操作的流程圖。僅為了說明之目的，圖10之方法可由對應於視訊編碼器20或視訊解碼器30之視訊寫碼器來執行。
視訊寫碼器(例如，視訊編碼器20或視訊解碼器30)可寫碼指示在參數集中識別之候選長期參考圖像之語法元素(154)。在一些實例中，該等候選長期參考圖像中之一或多者屬於當前圖像之一參考圖像集。根據本發明中所描述之技術，參數集可為序列參數集或圖像參數集。在一些實例中，為了寫碼指示候選長期參考圖像之語法元素，視訊寫碼器可在參數集中寫碼用於候選長期參考圖像之POC值清單，且在當前圖像之切片標頭中寫碼至清單之索引值。
視訊寫碼器可寫碼指示在參數集中識別的哪些候選長期參考圖像屬於當前圖像之參考圖像集的語法元素(156)。舉 例而言，視訊寫碼器可在當前圖像之切片標頭中寫碼指示哪些候選長期參考圖像屬於參考圖像集之語法元素。
在一些實例中，並非屬於參考圖像集之所有長期參考圖像包括於候選長期參考圖像中。在此等實例中，視訊寫碼器可進一步寫碼指示屬於參考圖像集之長期參考圖像之語法元素(158)。視訊寫碼器可接著基於關於哪些候選長期參考圖像屬於當前圖像之參考圖像集之指示而建構複數個參考圖像子集中之至少一者(160)。
在上述實例中，描述各種實例以及該等實例之可能的替代例。下文描述該等實例之一些額外替代例，該等額外替代例可被視為上文所描述之實例中之一或多者的替代實例。此外，此等替代實例可結合上文所描述之實例使用，或與上文所描述之實例分開使用。
舉例而言，上文已經描述之實例為參考圖像集概念之替代實例、在參數集中用信號發出參考圖像集之替代實例、參考圖像集之子集之替代實例，及參考圖像標記之替代實例。下文提供額外替代實例。
舉例而言，對於NAL單元標頭，在上述實例中，NAL單元標頭語法可包括nal_ref_idc、temporal_id及output_flag語法元素。在一替代實例中，用nal_ref_flag(1位元)替換nal_ref_idc(2位元)。在此實例中，等於1之nal_ref_flag具有語義為nal_ref_idc大於0，且等於0之nal_ref_flag具有與等於0之nal_ref_idc相同的語義。在一替代實例中，移除nal_ref_idc(2位元)。可將參考圖像之定義改變為：含有 可用於在解碼次序上之後續圖像之解碼處理程序中用於框間預測的樣本的圖像。在一替代實例中，temporal_id不存在於NAL單元標頭語法中，且導出該值對於所有圖像相同。在一替代實例中，output_flag不存在於NAL單元標頭語法中，且導出該值對於所有圖像等於1。
對於圖像序列號發信號及計算，上述技術可能使用可類似於AVC中之圖像序列號類型0的圖像序列號之發信號及計算之一種方式。可應用分別與AVC中之圖像序列號類型1及2相同的用於圖像序列號之發信號及計算之兩種替代方式。亦可應用此等方式中之兩者之任何組合，或所有三種方式之組合。
對於圖像識別，上述技術可利用圖像序列號(POC)值用於圖像識別。在一替代實例中，將時間參考(TR)用作圖像識別。定義TR之一種方式為：當POC受限制以使得任何兩個圖像之間的POC差與呈現時間或取樣時間差成比例時，TR與POC相同。在一替代實例中，可將指示解碼次序之frame_num(而POC指示輸出或顯示次序)或自frame_num導出的可為32-位元無符號整數值中之任一值的變數(例如，命名為UnWrappedFrameNum)用作圖像識別。基本上，UnWrappedFrameNum可為frame_num之展開版本。舉例而言，若藉由8位元來表示frame_num，frame_num之最大值為255。用於frame_num的在255之後的下一值為0。UnWrappedFrameNum之值在frame_num繞回至0之位置處繼續增加。
對於在參數集中用信號發出長期參考圖像，在上述實例中，視訊編碼器20可在圖像參數集中用信號發出絕對長期參考圖像識別資訊之清單，可用信號發出關於以位元為單位的絕對長期參考圖像識別資訊之長度的資訊，及可在切片標頭中參考的至清單之索引，從而減少發信號耗用。在一替代實例中，可在序列參數集中用信號發出差分長期參考圖像識別資訊之清單，且可在切片標頭中參考至清單之索引，從而減少發信號耗用。在一替代實例中，可用信號發出關於以位元為單位的絕對長期參考圖像識別資訊之長度的資訊，但可將長度視為常量(例如，32)。在各種實例中，應用上述實例中之任一者之組合。
對於短期參考圖像之發信號，在上述實例中，對於經寫碼圖像之參考圖像集中的短期參考圖像，或者在所參考之圖像參數集中用信號發出所有短期參考圖像，或者在切片標頭中用信號發出所有短期參考圖像。在一替代實例中，對於經寫碼圖像之參考圖像集中的短期參考圖像，在所參考之圖像參數集中用信號發出一些短期參考圖像，且在切片標頭中用信號發出其他短期參考圖像。
對於參考圖像清單初始化，在一替代實例中，在參考圖像清單初始化處理程序中，首先可將短期參考圖像添加至清單中，且其次，視情況，可將長期參考圖像添加至清單中。彼操作之後，若參考圖像清單(RefPicList0或RefPicList1)中之條目之數目仍小於num_ref_idx_lx_active_minus1+1之值(lx為l0或l1)，則可將剩餘條目標記為 「無參考圖像」。在一替代實例中，以下情形亦可能為有可能的：若在添加RefPicSetStCurr0及RefPicSetStCurr1中之條目及可能的長期參考圖像之後，參考圖像清單仍未完成，則可添加RefPicSetStFoll0及/或RefPicSetStFoll1中之圖像。在一替代實例中，參考圖像清單初始化處理程序可僅在參考圖像清單中添加短期參考圖像。在此狀況下，可藉由使用如在參考圖像清單修改(RPLM)語法表中用信號發出之參考圖像清單修改命令，僅將長期參考圖像添加至參考圖像清單。
對於參考圖像清單修改，在一替代實例中，參考圖像清單修改亦可以差分方式用信號發出ref_pic_set_idx，其中先前索引用作當前索引之預測因子。在此實例中，不同modification_of_ref_pic_idc值可對應於不同索引類別(用於RefPicListx之RefPicSetStCurrx、用於RefPicList(1-x)之RefPicSetStCurrx，或RefPicSetLtCurr)，該等索引類別中之每一者維護一不同預測因子。一旦剛好剖析屬於相同類別之語法元素，便可更新預測因子。在一替代實例中，參考圖像清單修改可基於圖像編號差。在一替代實例中，參考圖像清單修改可基於POC值差。
對於已解碼圖像緩衝器(DPB)操作，在上述實例中，在解碼當前圖像之後及在剖析解碼次序上之下一經寫碼圖像的切片標頭之前，將當前已解碼圖像儲存於DPB中。在一替代實例中，在解碼當前圖像之後及在剖析解碼次序上之下一經寫碼圖像的切片標頭之前，將當前已解碼圖像儲存 於臨時記憶體中(並非儲存於DPB中)。在剖析解碼次序上之下一經寫碼圖像的切片標頭且建構彼圖像之參考圖像集之後，若當前已解碼圖像仍需要供參考或用於輸出，則將當前已解碼圖像儲存至DPB中。此刻，若已解碼圖像既不需要供參考亦不需要輸出，則可簡單地捨棄已解碼圖像(自臨時緩衝器)。
又，在上述實例中，來自DPB之已解碼圖像之移除發生於緊於剖析當前圖像之切片標頭之後且在解碼當前圖像之任何切片之前。在一替代實例中，來自DPB之已解碼圖像之標記(若存在的話)及移除發生於完全解碼當前圖像之後。
在上述實例中，針對所有已解碼圖像導出用於當前圖像之參考圖像集之子集RefPicSetStCurr0及RefPicSetStCurr1。然而，對於框內圖像，此情形可能並非必要的。對於框內圖像參考圖像集導出，在一替代實例中，對於經框內寫碼之非IDR圖像(亦即，經寫碼圖像之所有切片為I切片)，不導出RefPicSetStCurr0及RefPicSetStCurr1，此係因為以下之故：甚至於在RefPicSetStCurr0及RefPicSetStCurr1在導出之後亦不為空之情況下，在經寫碼圖像之解碼中亦不需要RefPicSetStCurr0及RefPicSetStCurr1。允許用於非IDR框內圖像之非空RefPicSetStCurr0或RefPicSetStCurr1可允許共用RefPicSetStCurr0及RefPicSetStCurr1可能均不為空的一或多個經框間寫碼圖像之例項short_term_ref_ pic_set( )語法結構。
對於損失偵測，用於偵測參考圖像之損失或較早偵測當前圖像是否可得到正確解碼之以下不同方法可能為有可能的。在各種實例中，在導出參考圖像集之後，視訊解碼器30(例如，解碼器側)可檢查包括於RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr中之參考圖像之存在。若包括於RefPicSetStCurr0、RefPicSetStCurr1及RefPicSetLtCurr中之參考圖像中之任一者不存在於DPB中，則解碼器側可推斷：參考圖像已損失，且當前圖像很可能將不會得到正確解碼，且可採取一些行動以改良該情形，例如，藉由向編碼器側(例如，視訊編碼器20)通知該(等)圖像損失，且編碼器可重新傳輸該(等)損失之參考圖像或僅使用已知在解碼器側正確用於框間預測參考之彼等參考圖像編碼下一(多個)圖像。
在各種實例中，在導出參考圖像集之後，解碼器側可檢查包括於RefPicSetStFoll0、RefPicSetStFoll1及RefPicSetLtFoll中之參考圖像之存在。若包括於RefPicSetStFoll0、RefPicSetStFoll1及RefPicSetLtFoll中之參考圖像中之任一者不存在於DPB中，則解碼器側可推斷：參考圖像已損失，且除非採取一些行動，否則解碼次序上之跟隨圖像中之一些圖像很可能將不會得到正確解碼，且可採取一些行動以補救該情形，例如，藉由向編碼器側通知該(等)圖像損失，且編碼器可重新傳輸該(等)損失之參考圖像或僅使用已知在解碼器側正確用於框間預測 參考之彼等參考圖像編碼下一(多個)圖像。
對於編碼器側(例如，視訊編碼器20)參考圖像集組成，藉由上述實例，用於編碼器側之參考圖像集組成之以下不同方法可能為有可能的。舉例而言，在各種實例中，編碼器組成參考圖像集有關語法結構，以使得在於解碼器側對於當前圖像導出參考圖像集之後：(1)RefPicSetStCurr0包括且僅包括具有比當前圖像早之輸出次序且用於在當前圖像之框間預測中供參考的所有短期參考圖像之識別資訊，(2)RefPicSetStCurr1包括且僅包括具有比當前圖像遲之輸出次序且用於在當前圖像之框間預測中供參考的所有短期參考圖像之識別資訊，且(3)RefPicSetLtCurr包括且僅包括用於在當前圖像之框間預測中供參考的所有長期參考圖像之識別資訊。
在各種實例中，編碼器(例如，視訊編碼器20)可組成參考圖像集有關語法結構，以使得在於解碼器側對於當前圖像導出參考圖像集之後：(1)RefPicSetStCurr0包括且僅包括以下各者之識別資訊：1)具有比當前圖像早之輸出次序且用於在當前圖像之框間預測中供參考的所有短期參考圖像，以及2)具有比當前圖像早之輸出次序且不用於在當前圖像之框間預測中供參考的一或多個短期參考圖像，(2)RefPicSetStCurr1包括且僅包括以下各者之識別資訊：1)具有比當前圖像遲之輸出次序且用於在當前圖像之框間預測中供參考的所有短期參考圖像，以及2)具有比當前圖像遲之輸出次序且不用於在當前圖像之框間預測中供參考的一 或多個短期參考圖像，且RefPicSetLtCurr包括且僅包括以下各者之識別資訊：1)用於在當前圖像之框間預測中供參考的所有長期參考圖像，以及2)不用於在當前圖像之框間預測中供參考的一或多個長期參考圖像。
以此方式，上述個別技術或個別技術之任何組合(包括替代實例之任何組合)可提供與下文有關之技術。然而，下文清單係提供用於便於理解且不應被視為限制性的。上述技術中之一或多者可一起予以實施或單獨予以實施。此外，上述技術為實例，且不應被視為限於彼等特定實例技術。
限制參考圖像集之temporal_id，使得DPB管理方法良好地適合於時間可調性，可減少發信號耗用，且可使得能夠進行用於乾淨地提取位元串流子集之簡單位元串流提取處理程序。
在圖像參數集中用信號發出的長期參考圖像子集及索引可包括於切片標頭中。此情形可提供長期圖像之有效率發信號。
將參考圖像集分成各種子集，包括用於當前圖像之分離或用於解碼次序上之跟隨圖像之分離、用於具有比當前圖像早或遲之輸出次序之彼等圖像的分離。此等情形可提供參考清單初始化及參考圖像清單修改的改良之效率及降低之複雜性。
短期圖像識別發信號中之雙差分寫碼可提供改良之效率。擴展且受限制之長期圖像識別可提供改良之效率及靈 活性。簡化參考圖像清單初始化可移除對參考圖像清單中之非完成條目之「無參考圖像」標記的需要；然而，可能並非在所有實例中需要此情形。
用於已解碼圖像輸出、至DPB中之插入及來自DPB之移除的簡化處理程序。圖像序列號(POC)可為負的。此情形可實現在POC無法為負之情況下可能不允許的一些重要的使用狀況。關於圖像是否為解碼處理程序中不需要之參考圖像的發信號可能並非需要的，但該情形仍可能有可能經發信號。可能不再需要將參考圖像標記為「不用於參考」。
在一或多個實例中，所描述之功能可在硬體、軟體、韌體或其任何結合中實施。若在軟體中實施，則功能可作為一或多個指令或程式碼而儲存於電腦可讀媒體上或經由電腦可讀媒體而予以傳輸，且藉由基於硬體之處理單元來執行。電腦可讀媒體可包括電腦可讀儲存媒體(其對應於諸如資料儲存媒體之有形媒體)或通信媒體，通信媒體包括(例如)根據通信協定促進電腦程式自一處傳送至另一處的任何媒體。以此方式，電腦可讀媒體大體上可對應於(1)非暫時性的有形電腦可讀儲存媒體，或(2)諸如信號或載波之通信媒體。資料儲存媒體可為可由一或多個電腦或一或多個處理器存取以擷取指令、程式碼及/或資料結構以用於實施本發明中所描述之技術的任何可用媒體。電腦程式產品可包括電腦可讀媒體。
作為實例而非限制，此等電腦可讀儲存媒體可包含 RAM、ROM、EEPROM、CD-ROM或其他光碟儲存器、磁碟儲存器或其他磁性儲存器件、快閃記憶體，或可用以儲存呈指令或資料結構之形式的所要程式碼且可由電腦存取之任何其他媒體。又，任何連接可適當地稱為電腦可讀媒體。舉例而言，若使用同軸電纜、光纜、雙絞線、數位用戶線(DSL)或無線技術(諸如，紅外線、無線電及微波)而自網站、伺服器或其他遠端源傳輸指令，則同軸電纜、光纜、雙絞線、DSL或無線技術(諸如，紅外線、無線電及微波)包括於媒體之定義中。然而，應理解，電腦可讀儲存媒體及資料儲存媒體不包括連接、載波、信號或其他暫時性媒體，而是有關非暫時性有形儲存媒體。如本文中所使用，磁碟及光碟包括緊密光碟(CD)、雷射光碟、光學光碟、數位影音光碟(DVD)、軟性磁碟及藍光光碟，其中磁碟通常以磁性方式再生資料，而光碟藉由雷射以光學方式再生資料。以上各者之組合亦應包括於電腦可讀媒體之範疇內。
可由諸如一或多個數位信號處理器(DSP)、通用微處理器、特殊應用積體電路(ASIC)、場可程式化邏輯陣列(FPGA)或其他等效整合或離散邏輯電路之一或多個處理器來執行指令。因此，如本文中所使用之術語「處理器」可指代前述結構或適合於實施本文中所描述之技術的任何其他結構中之任一者。另外，在一些態樣中，可將本文中所描述之功能性提供於經組態以用於編碼及解碼之專用硬體及/或軟體模組內，或併入於組合式編碼解碼器中。又， 該等技術可完全實施於一或多個電路或邏輯元件中。
本發明之技術可在廣泛多種器件或裝置中予以實施，該等器件或裝置包括無線手機、積體電路(IC)或IC集合(例如，晶片組)。在本發明中描述各種組件、模組或單元以強調經組態以執行所揭示技術的器件之功能態樣，但未必需要藉由不同硬體單元來實現。實情為，如上文所描述，可將各種單元組合於編碼解碼器硬體單元中，或藉由互操作性硬體單元(包括如上文所描述之一或多個處理器)之集合且結合合適軟體及/或韌體來提供該等單元。
已描述各種實例。此等及其他實例在以下申請專利範圍之範疇內。
10‧‧‧視訊編碼及解碼系統
12‧‧‧源器件
14‧‧‧目的地器件
16‧‧‧通信頻道
17‧‧‧儲存媒體
18‧‧‧視訊源
19‧‧‧檔案伺服器
20‧‧‧視訊編碼器
22‧‧‧調變器/解調變器(數據機)
24‧‧‧輸出介面
26‧‧‧輸入介面
28‧‧‧數據機
30‧‧‧視訊解碼器
32‧‧‧顯示器件
33‧‧‧視訊序列
34‧‧‧圖像
35‧‧‧分割單元
35A‧‧‧圖像
35B‧‧‧圖像
35C‧‧‧圖像
36A‧‧‧圖像
36B‧‧‧圖像
38A‧‧‧圖像
38B‧‧‧圖像
39‧‧‧最終圖像
41‧‧‧預測模組
42‧‧‧運動估計單元
44‧‧‧運動補償單元
46‧‧‧框內預測模組
50‧‧‧求和器
52‧‧‧變換模組
54‧‧‧量化單元
56‧‧‧熵編碼單元
58‧‧‧反量化單元
60‧‧‧反變換模組
62‧‧‧求和器
64‧‧‧已解碼圖像緩衝器(DPB)
80‧‧‧熵解碼單元
81‧‧‧預測模組
82‧‧‧運動補償單元
84‧‧‧框內預測模組
86‧‧‧反量化單元
88‧‧‧反變換單元
90‧‧‧求和器
92‧‧‧已解碼圖像緩衝器(DPB)
圖1為說明可利用本發明中所描述之技術之實例視訊編碼及解碼系統的方塊圖。
圖2為說明包括經編碼及傳輸之複數個圖像之實例視訊序列的概念圖。
圖3為說明可實施本發明中所描述之技術之實例視訊編碼器的方塊圖。
圖4為說明可實施本發明中所描述之技術之實例視訊解碼器的方塊圖。
圖5為說明導出參考圖像集之實例操作的流程圖。
圖6為說明建構參考圖像清單之實例操作的流程圖。
圖7為說明建構參考圖像清單之另一實例操作的流程圖。
圖8為說明修改初始參考圖像清單之實例操作的流程圖。
圖9為說明已解碼圖像移除之實例操作的流程圖。
圖10為說明判定哪些長期參考圖像屬於當前圖像之參考圖像集之實例操作的流程圖。

Claims (27)

  1. 一種用於寫碼視訊資料之方法，該方法包含：寫碼指示屬於一參考圖像集之參考圖像之資訊，其中該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像；建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者，其中建構該複數個參考圖像子集包含：建構一第一參考圖像子集，該第一參考圖像子集識別滿足以下情形之短期參考圖像：在解碼次序上在該當前圖像之前及在輸出次序上在該當前圖像之前，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在輸出次序上在該當前圖像之前且不能用於對該當前圖像進行框間預測之短期參考圖像；建構一第二參考圖像子集，該第二參考圖像子集識別滿足以下情形之短期參考圖像：在解碼次序上在該當前圖像之前及在輸出次序上在該當前圖像之後，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在輸出次序上在該當前圖像之後且不能用於對該當前圖像進行框間預測之短期參考圖像；及建構一第三參考圖像子集，該第三參考圖像子集識 別滿足以下情形之長期參考圖像：在解碼次序上在該當前圖像之前，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在解碼次序上在該當前圖像之前且不能用於對該當前圖像進行框間預測之長期參考圖像；在該第一、該第二及該第三參考圖像子集建構之後，基於該第一、該第二及該第三參考圖像子集中哪些圖像被識別來判定哪些參考圖像可用於該當前圖像之框間預測；在判定哪些參考圖像可用於該當前圖像之框間預測之後，基於該第一、該第二及該第三參考圖像子集中經判定為可用於該當前圖像之框間預測之參考圖像而建構一初始參考圖像清單；及在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改：識別一參考圖像，其中該參考圖像係於該第一、該第二或該第三參考圖像子集之至少一者中；在該初始參考圖像清單之一當前條目中添加該所識別之參考圖像以建構一修改之參考圖像清單；及基於該修改之參考圖像清單而寫碼該當前圖像。
  2. 如請求項1之方法，其中識別該參考圖像包含：判定至該等所建構之參考圖像子集中之至少一者中的一索引；及 基於該所判定之索引而判定在該等所建構之參考圖像子集中之該至少一者中的一條目處識別之該參考圖像。
  3. 如請求項2之方法，其中判定該索引包含：寫碼一第一語法元素以識別從其識別該參考圖像的該等所建構之參考圖像子集中之該至少一者；及寫碼一第二語法元素，該第二語法元素指示至該等所建構之參考圖像子集中之該至少一者中的該索引。
  4. 如請求項1之方法，其進一步包含：在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改：將在該初始參考圖像清單中在跟隨該當前條目之條目中識別之參考圖像移動至一下一條目以建構該修改之參考圖像清單。
  5. 如請求項1之方法，其進一步包含：寫碼指示需要該參考圖像清單修改之一語法元素。
  6. 如請求項1之方法，其中寫碼包含：解碼指示屬於該參考圖像集之參考圖像之資訊，其中該參考圖像集識別可潛在地用於對該當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像；且其中寫碼包含：基於該修改之參考圖像清單而解碼該當前圖像。
  7. 如請求項1之方法， 其中寫碼包含：編碼指示屬於該參考圖像集之參考圖像之資訊，其中該參考圖像集識別可潛在地用於對該當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像；且其中寫碼包含：基於該修改之參考圖像清單而編碼該當前圖像。
  8. 一種用於寫碼視訊資料之器件，該器件包含：記憶體，其經組態以儲存參考圖像；及一視訊寫碼器，該視訊寫碼器經組態以：寫碼指示屬於一參考圖像集儲存於該記憶體中之參考圖像之資訊，其中該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像；建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者，其中為了建構該複數個參考圖像子集，該視訊寫碼器經組態以：建構一第一參考圖像子集，該第一參考圖像子集識別滿足以下情形之短期參考圖像：在解碼次序上在該當前圖像之前及在輸出次序上在該當前圖像之前，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在輸出次序上在該當前圖像之後且不能用 於對該當前圖像進行框間預測之短期參考圖像；建構一第二參考圖像子集，該第二參考圖像子集識別滿足以下情形之短期參考圖像：在解碼次序上在該當前圖像之前及在輸出次序上在該當前圖像之後，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在輸出次序上在該當前圖像之後且不能用於對該當前圖像進行框間預測之短期參考圖像；及建構一第三參考圖像子集，該第三參考圖像子集識別滿足以下情形之長期參考圖像：在解碼次序上在該當前圖像之前，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在解碼次序上在該當前圖像之前且不能用於對該當前圖像進行框間預測之長期參考圖像；在該第一、該第二及該第三參考圖像子集建構之後，基於該第一、該第二及該第三參考圖像子集中哪些圖像被識別來判定哪些參考圖像可用於該當前圖像之框間預測；在判定哪些參考圖像可用於該當前圖像之框間預測之後，基於該第一、該第二及該第三參考圖像子集中經判定為可用於該當前圖像之框間預測之參考圖像而建構一初始參考圖像清單；及在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改： 識別一參考圖像，其中該參考圖像係於該第一、該第二或該第三參考圖像子集之至少一者中；在該初始參考圖像清單之一當前條目中添加該所識別之參考圖像以建構一修改之參考圖像清單；及基於該修改之參考圖像清單而寫碼該當前圖像。
  9. 如請求項8之器件，其中為了識別該參考圖像，該視訊寫碼器經組態以：判定至該等所建構之參考圖像子集中之至少一者中的一索引；及基於該所判定之索引而判定在該等所建構之參考圖像子集中之該至少一者中的一條目處識別之該參考圖像。
  10. 如請求項9之器件，其中為了判定該索引，該視訊寫碼器經組態以：寫碼一第一語法元素以識別從其識別該參考圖像的該等所建構之參考圖像子集中之該至少一者；及寫碼一第二語法元素，該第二語法元素指示至該等所建構之參考圖像子集中之該至少一者中的該索引。
  11. 如請求項8之器件，其中該視訊寫碼器經組態以：在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改：將在該初始參考圖像清單中在跟隨該當前條目之條目中識別之參考圖像移動至一下一條目以建構該修改之參考圖像清單。
  12. 如請求項8之器件，其中該視訊寫碼器經組態以： 寫碼指示需要該參考圖像清單修改之一語法元素。
  13. 如請求項8之器件，其中該視訊寫碼器包含一視訊解碼器，且其中該視訊解碼器經組態以：解碼指示屬於該參考圖像集之參考圖像之資訊，其中該參考圖像集識別可潛在地用於對該當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像；建構該第一、該第二及該第三參考圖像子集；在該第一、該第二及該第三參考圖像子集建構之後，基於該第一、該第二及該第三參考圖像子集中哪些圖像被識別來判定哪些參考圖像可用於該當前圖像之框間預測；在判定哪些參考圖像可用於該當前圖像之框間預測之後，基於該第一、該第二及該第三參考圖像子集中經判定為可用於該當前圖像之框間預測之參考圖像而建構該初始參考圖像清單；及在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改：識別該參考圖像；及在該初始參考圖像清單之該當前條目中添加該所識別之參考圖像以建構該修改之參考圖像清單；及基於該修改之參考圖像清單而解碼該當前圖像。
  14. 如請求項8之器件，其中該視訊寫碼器包含一視訊編碼器，且其中該視訊編碼器經組態以： 編碼指示屬於該參考圖像集之參考圖像之資訊，其中該參考圖像集識別可潛在地用於對該當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像；建構該第一、該第二及該第三參考圖像子集；在該第一、該第二及該第三參考圖像子集建構之後，基於該第一、該第二及該第三參考圖像子集中哪些圖像被識別來判定哪些參考圖像可用於該當前圖像之框間預測；在判定哪些參考圖像可用於該當前圖像之框間預測之後，基於該第一、該第二及該第三參考圖像子集中經判定為可用於該當前圖像之框間預測之參考圖像而建構該初始參考圖像清單；及在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改：識別該參考圖像；及在該初始參考圖像清單之該當前條目中添加該所識別之參考圖像以建構該修改之參考圖像清單；及基於該修改之參考圖像清單而編碼該當前圖像。
  15. 如請求項8之器件，其中該器件包含以下各者中之一或多者：一無線通信器件，其包含一經組態以顯示該當前圖像之顯示器或一經組態以擷取該當前圖像之攝影機之至少一者； 一微處理器；或一積體電路。
  16. 如請求項13之器件，其進一步包含一顯示器，該顯示器經組態以顯示該經解碼當前圖像及該等參考圖像之一或多者。
  17. 如請求項14之器件，其進一步包含一攝影機，該攝影機經組態以擷取被編碼之該當前圖像及該等參考圖像。
  18. 一種儲存有指令之非暫時性電腦可讀儲存媒體，該等指令在執行時造成用於寫碼視訊資料之一器件之一處理器：寫碼指示屬於一參考圖像集之參考圖像之資訊，其中該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像；建構複數個參考圖像子集，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者，其中造成該處理器建構該複數個參考圖像子集之該等指令包含造成該處理器進行以下操作之指令：建構一第一參考圖像子集，該第一參考圖像子集識別滿足以下情形之短期參考圖像：在解碼次序上在該當前圖像之前及在輸出次序上在該當前圖像之前，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在輸出次序上在該當前圖像之後且不能用 於對該當前圖像進行框間預測之短期參考圖像；建構一第二參考圖像子集，該第二參考圖像子集識別滿足以下情形之短期參考圖像：在解碼次序上在該當前圖像之前及在輸出次序上在該當前圖像之後，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在輸出次序上在該當前圖像之後且不能用於對該當前圖像進行框間預測之短期參考圖像；及建構一第三參考圖像子集，該第三參考圖像子集識別滿足以下情形之長期參考圖像：在解碼次序上在該當前圖像之前，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在解碼次序上在該當前圖像之前且不能用於對該當前圖像進行框間預測之長期參考圖像；在該第一、該第二及該第三參考圖像子集建構之後，基於該第一、該第二及該第三參考圖像子集中哪些圖像被識別來判定哪些參考圖像可用於該當前圖像之框間預測；在判定哪些參考圖像可用於該當前圖像之框間預測之後，基於該第一、該第二及該第三參考圖像子集中經判定為可用於該當前圖像之框間預測之參考圖像而建構一初始參考圖像清單；及在該初始參考圖像清單之建構之後基於該初始參考圖 像清單之參考圖像清單需要修改：識別一參考圖像，其中該參考圖像係於該第一、該第二或該第三參考圖像子集之至少一者中；在該初始參考圖像清單之一當前條目中添加該所識別之參考圖像以建構一修改之參考圖像清單；及基於該修改之參考圖像清單而寫碼該當前圖像。
  19. 如請求項18之非暫時性電腦可讀儲存媒體，其中造成該處理器識別該參考圖像之該等指令包含造成該處理器進行以下操作之指令：判定至該等所建構之參考圖像子集中之至少一者中的一索引；及基於該所判定之索引而判定在該等所建構之參考圖像子集中之該至少一者中的一條目處識別之該參考圖像。
  20. 如請求項19之非暫時性電腦可讀儲存媒體，其中造成該處理器判定該索引之該指令包含造成該處理器進行以下操作之指令：寫碼一第一語法元素以識別從其識別該參考圖像的該等所建構之參考圖像子集中之該至少一者；及寫碼一第二語法元素，該第二語法元素指示至該等所建構之參考圖像子集中之該至少一者中的該索引。
  21. 如請求項18之非暫時性電腦可讀儲存媒體，其進一步包含造成該處理器進行以下操作之指令：在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改： 將在該初始參考圖像清單中在跟隨該當前條目之條目中識別之參考圖像移動至一下一條目以建構該修改之參考圖像清單。
  22. 如請求項18之非暫時性電腦可讀儲存媒體，其進一步包含造成該處理器進行以下操作之指令：寫碼指示需要該參考圖像清單修改之一語法元素。
  23. 一種用於寫碼視訊資料之器件，該器件包含：用於寫碼指示屬於一參考圖像集之參考圖像之資訊的構件，其中該參考圖像集識別可潛在地用於對一當前圖像進行框間預測且可潛在地用於對在解碼次序上跟隨該當前圖像之一或多個圖像進行框間預測的該等參考圖像；用於建構複數個參考圖像子集之構件，每一參考圖像子集識別該參考圖像集之該等參考圖像中的零或多者，其中建構該複數個參考圖像子集的該構件包含：建構一第一參考圖像子集的構件，該第一參考圖像子集識別滿足以下情形之短期參考圖像：在解碼次序上在該當前圖像之前及在輸出次序上在該當前圖像之前，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在輸出次序上在該當前圖像之後且不能用於對該當前圖像進行框間預測之短期參考圖像；建構一第二參考圖像子集的構件，該第二參考圖像子集識別滿足以下情形之短期參考圖像：在解碼次序 上在該當前圖像之前及在輸出次序上在該當前圖像之後，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在輸出次序上在該當前圖像之後且不能用於對該當前圖像進行框間預測之短期參考圖像；及建構一第三參考圖像子集的構件，該第三參考圖像子集識別滿足以下情形之長期參考圖像：在解碼次序上在該當前圖像之前，且可潛在地用於對該當前圖像及在解碼次序上跟隨該當前圖像之該一或多個圖像中的一或多者進行框間預測，且排除在解碼次序上在該當前圖像之前且不能用於對該當前圖像進行框間預測之長期參考圖像；在該第一、該第二及該第三參考圖像子集建構之後，基於該第一、該第二及該第三參考圖像子集中哪些圖像被識別來判定哪些參考圖像可用於該當前圖像之框間預測的構件；用於在判定哪些參考圖像可用於該當前圖像之框間預測之後基於該第一、該第二及該第三參考圖像子集中經判定為可用於該當前圖像之框間預測之參考圖像而建構一初始參考圖像清單的構件；用於在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改識別一參考圖像的構件，其中該參考圖像係於該第一、該第二或該 第三參考圖像子集之至少一者中；及用於在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改在該初始參考圖像清單之一當前條目中添加該所識別之參考圖像以建構一修改之參考圖像清單的構件；及用於在該初始參考圖像清單之建構之後基於該初始參考圖像清單之參考圖像清單需要修改基於該修改之參考圖像清單而寫碼該當前圖像之構件。
  24. 如請求項23之器件，其中用於識別該參考圖像之構件包含：用於判定至該等所建構之參考圖像子集中之至少一者中的一索引的構件；及用於基於該所判定之索引而判定在該等所建構之參考圖像子集中之該至少一者中的一條目處識別之該參考圖像的構件。
  25. 如請求項24之器件，其中用於判定該索引之該構件包含：用於寫碼一第一語法元素以識別從其識別該參考圖像的該等所建構之參考圖像子集中之該至少一者的構件；及用於寫碼一第二語法元素之構件，該第二語法元素指示至該等所建構之參考圖像子集中之該至少一者中的該索引。
  26. 如請求項23之器件，其進一步包含：用於在該初始參考圖像清單之建構之後基於該初始參 考圖像清單之參考圖像清單需要修改將在該初始參考圖像清單中在跟隨該當前條目之條目中識別之參考圖像移動至一下一條目以建構該修改之參考圖像清單的構件。
  27. 如請求項23之器件，其進一步包含：用於寫碼指示需要該參考圖像清單修改之一語法元素的構件。
TW101134813A 2011-09-23 2012-09-21 用於視訊寫碼之參考圖像清單建構 TWI530162B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201161538787P 2011-09-23 2011-09-23
US201161539433P 2011-09-26 2011-09-26
US201161542034P 2011-09-30 2011-09-30
US13/622,931 US9338474B2 (en) 2011-09-23 2012-09-19 Reference picture list construction for video coding

Publications (2)

Publication Number Publication Date
TW201334542A TW201334542A (zh) 2013-08-16
TWI530162B true TWI530162B (zh) 2016-04-11

Family

ID=47911283

Family Applications (6)

Application Number Title Priority Date Filing Date
TW101134807A TWI600311B (zh) 2011-09-23 2012-09-21 用於寫碼視訊資料之方法、器件及電腦可讀儲存媒體
TW101134808A TWI498004B (zh) 2011-09-23 2012-09-21 用於視訊寫碼之參考圖像清單建構
TW101134805A TWI521952B (zh) 2011-09-23 2012-09-21 寫碼參考圖像集之參考圖像
TW101134789A TWI531218B (zh) 2011-09-23 2012-09-21 藉由參考圖像集之子集進行之視訊寫碼
TW101134780A TWI521944B (zh) 2011-09-23 2012-09-21 用於寫碼視訊資料之方法及器件及電腦可讀儲存媒體
TW101134813A TWI530162B (zh) 2011-09-23 2012-09-21 用於視訊寫碼之參考圖像清單建構

Family Applications Before (5)

Application Number Title Priority Date Filing Date
TW101134807A TWI600311B (zh) 2011-09-23 2012-09-21 用於寫碼視訊資料之方法、器件及電腦可讀儲存媒體
TW101134808A TWI498004B (zh) 2011-09-23 2012-09-21 用於視訊寫碼之參考圖像清單建構
TW101134805A TWI521952B (zh) 2011-09-23 2012-09-21 寫碼參考圖像集之參考圖像
TW101134789A TWI531218B (zh) 2011-09-23 2012-09-21 藉由參考圖像集之子集進行之視訊寫碼
TW101134780A TWI521944B (zh) 2011-09-23 2012-09-21 用於寫碼視訊資料之方法及器件及電腦可讀儲存媒體

Country Status (19)

Country Link
US (10) US9420307B2 (zh)
EP (7) EP2759136B1 (zh)
JP (10) JP5940668B2 (zh)
KR (7) KR101614633B1 (zh)
CN (15) CN108513128B (zh)
AR (6) AR089562A1 (zh)
AU (6) AU2012312338B2 (zh)
BR (6) BR112014006854A2 (zh)
CA (7) CA2849499C (zh)
ES (1) ES2776147T3 (zh)
HK (5) HK1247013A1 (zh)
IL (8) IL231210B (zh)
IN (4) IN2014CN01825A (zh)
MY (6) MY166674A (zh)
RU (6) RU2587420C2 (zh)
SG (6) SG11201400220VA (zh)
TW (6) TWI600311B (zh)
WO (7) WO2013043887A1 (zh)
ZA (6) ZA201402898B (zh)

Families Citing this family (159)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6008334B2 (ja) 2011-08-25 2016-10-19 サン パテント トラスト 復号装置及び復号方法
US8804816B2 (en) * 2011-08-30 2014-08-12 Microsoft Corporation Video encoding enhancements
ES2625097T3 (es) 2011-09-07 2017-07-18 Sun Patent Trust Método de codificación de imágenes y aparato de codificación de imágenes
EP2760205B1 (en) 2011-09-19 2020-11-04 Sun Patent Trust Image decoding method, image decoding device
US9420307B2 (en) * 2011-09-23 2016-08-16 Qualcomm Incorporated Coding reference pictures for a reference picture set
CN103843341B (zh) * 2011-09-27 2017-06-13 瑞典爱立信有限公司 用于管理视频解码过程中的画面的解码器及其方法
US20140233653A1 (en) * 2011-09-30 2014-08-21 Telefonaktiebolaget L M Ericsson (Publ) Decoder and encoder for picture outputting and methods thereof
US8768079B2 (en) 2011-10-13 2014-07-01 Sharp Laboratories Of America, Inc. Tracking a reference picture on an electronic device
US20130094774A1 (en) * 2011-10-13 2013-04-18 Sharp Laboratories Of America, Inc. Tracking a reference picture based on a designated picture on an electronic device
US8855433B2 (en) * 2011-10-13 2014-10-07 Sharp Kabushiki Kaisha Tracking a reference picture based on a designated picture on an electronic device
US8787688B2 (en) * 2011-10-13 2014-07-22 Sharp Laboratories Of America, Inc. Tracking a reference picture based on a designated picture on an electronic device
JP5995111B2 (ja) 2011-10-19 2016-09-21 サン パテント トラスト 画像符号化方法及び画像符号化装置
WO2013062470A1 (en) * 2011-10-24 2013-05-02 Telefonaktiebolaget L M Ericsson (Publ) Reference picture marking
WO2013061551A1 (ja) 2011-10-27 2013-05-02 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置
PL2773111T3 (pl) 2011-10-28 2020-06-29 Sun Patent Trust Sposób kodowania obrazów, sposób dekodowania obrazów, urządzenie do kodowania obrazów i urządzenie do dekodowania obrazów
WO2013061549A1 (ja) 2011-10-28 2013-05-02 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置
CN107277533B (zh) 2011-10-28 2020-04-24 三星电子株式会社 帧间预测的方法及其装置和运动补偿的方法及其装置
CN103096049A (zh) * 2011-11-02 2013-05-08 华为技术有限公司 一种视频处理方法及系统、相关设备
US10003817B2 (en) * 2011-11-07 2018-06-19 Microsoft Technology Licensing, Llc Signaling of state information for a decoded picture buffer and reference picture lists
EP2777276B1 (en) 2011-11-08 2019-05-01 Nokia Technologies Oy Reference picture handling
US10440389B2 (en) * 2011-11-11 2019-10-08 Lg Electronics Inc. Method and device for transmitting image information, and decoding method and device using same
JP6078927B2 (ja) * 2012-01-10 2017-02-15 サン パテント トラスト 動画像符号化方法、動画像符号化装置、動画像復号方法、及び、動画像復号装置
US9654772B2 (en) * 2012-01-19 2017-05-16 Qualcomm Incorporated Context adaptive entropy coding with a reduced initialization value set
US8867852B2 (en) 2012-01-19 2014-10-21 Sharp Kabushiki Kaisha Decoding a picture based on a reference picture set on an electronic device
US8693793B2 (en) * 2012-01-19 2014-04-08 Sharp Laboratories Of America, Inc. Reducing reference picture set signal overhead on an electronic device
US9973749B2 (en) * 2012-01-20 2018-05-15 Nokia Technologies Oy Method for video coding and an apparatus, a computer-program product, a system, and a module for the same
US20130188709A1 (en) 2012-01-25 2013-07-25 Sachin G. Deshpande Video decoder for tiles with absolute signaling
CN107835428B (zh) * 2012-03-02 2021-09-24 太阳专利托管公司 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
US11039138B1 (en) 2012-03-08 2021-06-15 Google Llc Adaptive coding of prediction modes using probability distributions
US20150063463A1 (en) * 2012-04-15 2015-03-05 Samsung Electronics Co., Ltd. Method and device for coding multi-layer video, and method and device for decoding multi-layer video
US9532055B2 (en) * 2012-04-16 2016-12-27 Microsoft Technology Licensing, Llc Constraints and unit types to simplify video random access
KR20130116782A (ko) 2012-04-16 2013-10-24 한국전자통신연구원 계층적 비디오 부호화에서의 계층정보 표현방식
US9420286B2 (en) 2012-06-15 2016-08-16 Qualcomm Incorporated Temporal motion vector prediction in HEVC and its extensions
HRP20230430T1 (hr) * 2012-06-25 2023-07-07 Huawei Technologies Co., Ltd. Postupni pristup vremenskom sloju slika u videokompresiji
US9225978B2 (en) * 2012-06-28 2015-12-29 Qualcomm Incorporated Streaming adaption based on clean random access (CRA) pictures
JP5891975B2 (ja) * 2012-07-02 2016-03-23 富士通株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法および動画像復号方法
RU2647674C1 (ru) * 2012-07-02 2018-03-16 Самсунг Электроникс Ко., Лтд. Способ и устройство для кодирования видео и способ и устройство для декодирования видео, определяющие список опорных изображений внешнего прогнозирования в зависимости от размера блока
US9584804B2 (en) 2012-07-10 2017-02-28 Qualcomm Incorporated Coding SEI NAL units for video coding
US9167248B2 (en) 2012-07-13 2015-10-20 Qualcomm Incorporated Reference picture list modification for video coding
US9357195B2 (en) 2012-08-16 2016-05-31 Qualcomm Incorporated Inter-view predicted motion vector for 3D video
WO2014042460A1 (ko) * 2012-09-13 2014-03-20 엘지전자 주식회사 영상 부호화/복호화 방법 및 장치
US9392268B2 (en) 2012-09-28 2016-07-12 Qualcomm Incorporated Using base layer motion information
US20140092988A1 (en) * 2012-09-28 2014-04-03 Sharp Laboratories Of America, Inc. Systems and methods for reference picture set extension
US9313500B2 (en) 2012-09-30 2016-04-12 Microsoft Technology Licensing, Llc Conditional signalling of reference picture list modification information
KR101692651B1 (ko) * 2012-10-10 2017-01-03 지티이 코포레이션 미디어 전송 및 저장을 위해 무작위 접속 정보의 캡슐화를 위한 방법 및 장치
US20140140406A1 (en) * 2012-11-16 2014-05-22 General Instrument Corporation Devices and methods for processing of non-idr related syntax for high efficiency video coding (hevc)
JP6209772B2 (ja) * 2013-01-15 2017-10-11 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． シグナリングを用いたビデオデコーダ
PL2946556T3 (pl) * 2013-01-16 2017-04-28 Telefonaktiebolaget Lm Ericsson (Publ) Koder i dekoder oraz metoda kodowania sekwencji filmowej
KR102219909B1 (ko) * 2013-04-05 2021-02-24 삼성전자주식회사 멀티 레이어 비디오의 복호화 방법 및 장치, 멀티 레이어 비디오의 부호화 방법 및 장치
KR20140122200A (ko) * 2013-04-05 2014-10-17 삼성전자주식회사 멀티 레이어 비디오의 복호화 방법 및 장치, 멀티 레이어 비디오의 부호화 방법 및 장치
US9591321B2 (en) 2013-04-07 2017-03-07 Dolby International Ab Signaling change in output layer sets
SG10201913551WA (en) * 2013-04-07 2020-03-30 Dolby Int Ab Signaling change in output layer sets
CN103268553A (zh) * 2013-04-11 2013-08-28 蒋月琴 利用点编码的图书交易、租赁电子商务系统
WO2014168561A1 (en) * 2013-04-12 2014-10-16 Telefonaktiebolaget L M Ericsson (Publ) Constructing inter-layer reference picture lists
CN105325003B (zh) * 2013-04-17 2019-05-28 诺基亚技术有限公司 用于视频编码和解码的装置、方法
JP6361866B2 (ja) * 2013-05-09 2018-07-25 サン パテント トラスト 画像処理方法および画像処理装置
US10003815B2 (en) * 2013-06-03 2018-06-19 Qualcomm Incorporated Hypothetical reference decoder model and conformance for cross-layer random access skipped pictures
US9565454B2 (en) * 2013-06-24 2017-02-07 Microsoft Technology Licensing, Llc Picture referencing control for video decoding using a graphics processor
WO2015009021A1 (ko) 2013-07-15 2015-01-22 주식회사 케이티 스케일러블 비디오 신호 인코딩/디코딩 방법 및 장치
WO2015009009A1 (ko) 2013-07-15 2015-01-22 주식회사 케이티 스케일러블 비디오 신호 인코딩/디코딩 방법 및 장치
CN105453562B (zh) 2013-07-30 2018-12-25 株式会社Kt 支持多个层的图像编码和解码方法以及使用该方法的装置
US9762909B2 (en) 2013-07-30 2017-09-12 Kt Corporation Image encoding and decoding method supporting plurality of layers and apparatus using same
WO2015016534A1 (ko) * 2013-07-30 2015-02-05 주식회사 케이티 복수의 레이어를 지원하는 영상의 부호화 및 복호화 방법 및 이를 이용하는 장치
US9344218B1 (en) * 2013-08-19 2016-05-17 Zoom Video Communications, Inc. Error resilience for interactive real-time multimedia applications
JPWO2015034061A1 (ja) * 2013-09-06 2017-03-02 三菱電機株式会社 動画像符号化装置、動画像トランスコード装置、動画像符号化方法、動画像トランスコード方法及び動画像ストリーム伝送システム
WO2015053525A1 (ko) * 2013-10-11 2015-04-16 한국전자통신연구원 영상의 부호화/복호화 방법 및 이를 이용하는 장치
CN105765978B (zh) * 2013-10-11 2019-01-29 韩国电子通信研究院 用于编码/解码图像的方法和使用其的装置
JP6401707B2 (ja) * 2013-10-16 2018-10-10 シャープ株式会社 画像復号装置、画像復号方法、および記録媒体
US9628820B2 (en) * 2013-11-19 2017-04-18 Qualcomm Incorporated POC value design for multi-layer video coding
US9807407B2 (en) * 2013-12-02 2017-10-31 Qualcomm Incorporated Reference picture selection
CN105850126B (zh) * 2013-12-24 2019-03-26 株式会社Kt 用于对多层视频信号进行编码/解码的方法和装置
CN104754347B (zh) * 2013-12-26 2019-05-17 中兴通讯股份有限公司 视频图像序号的编码、解码方法及装置、电子设备
WO2015103462A1 (en) * 2014-01-02 2015-07-09 Vidyo, Inc. Overlays using auxiliary pictures
US10432928B2 (en) 2014-03-21 2019-10-01 Qualcomm Incorporated Using a current picture as a reference for video coding
KR20150110295A (ko) 2014-03-24 2015-10-02 주식회사 케이티 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
CN106464905B (zh) * 2014-05-06 2019-06-07 寰发股份有限公司 用于块内复制模式编码的块向量预测方法
WO2015192991A1 (en) 2014-06-18 2015-12-23 Telefonaktiebolaget L M Ericsson (Publ) Random access in a video bitstream
KR101895176B1 (ko) * 2014-06-18 2018-09-04 텔레폰악티에볼라겟엘엠에릭슨(펍) 독립 랜덤 액세스 포인트 화상
EP2958328A1 (en) * 2014-06-20 2015-12-23 Thomson Licensing Method and device for signaling in a bitstream a picture/video format of an LDR picture and a picture/video format of a decoded HDR picture obtained from said LDR picture and an illumination picture
US10158867B2 (en) * 2014-06-20 2018-12-18 Qualcomm Incorporated Picture order count reset for multi-layer codecs
US9807419B2 (en) * 2014-06-25 2017-10-31 Qualcomm Incorporated Recovery point SEI message in multi-layer video codecs
KR101610725B1 (ko) * 2014-09-23 2016-04-08 삼성전자주식회사 참조 빈도에 따라 참조 영상 데이터를 제어하는 비디오 부복호화 방법 및 장치
US9848198B2 (en) * 2014-10-06 2017-12-19 Qualcomm Incorporated Diagonal copy for palette mode coding
GB2531271A (en) 2014-10-14 2016-04-20 Nokia Technologies Oy An apparatus, a method and a computer program for image sequence coding and decoding
JP2016092837A (ja) * 2014-10-30 2016-05-23 株式会社東芝 映像圧縮装置、映像再生装置および映像配信システム
KR20160071569A (ko) 2014-12-11 2016-06-22 삼성전자주식회사 비디오 장치에서의 영상 처리 방법 및 그에 따른 비디오 장치
KR102206504B1 (ko) * 2015-04-29 2021-01-22 에이치에프아이 이노베이션 인크. 인트라 블록 복사 참조 리스트 구축을 위한 방법 및 장치
CA2986613C (en) 2015-05-21 2020-04-28 Huawei Technologies Co., Ltd. Apparatus and method for video motion compensation
CN115134610A (zh) 2015-06-11 2022-09-30 杜比实验室特许公司 使用自适应去块滤波编码和解码图像的方法及其装置
CN106528552B (zh) * 2015-09-09 2019-10-22 杭州海康威视数字技术股份有限公司 图像搜索方法及系统
EP3145143B1 (en) * 2015-09-15 2019-03-20 Nxp B.V. Differential detector
US20170085871A1 (en) * 2015-09-22 2017-03-23 Ati Technologies Ulc Real time video coding system with error recovery using earlier reference picture
KR102477964B1 (ko) 2015-10-12 2022-12-16 삼성전자주식회사 미디어 전송 시스템에서 비디오 비트스트림의 임의 접근 및 재생을 가능하게 하는 기법
EP3371974B1 (en) * 2015-11-06 2024-05-01 Microsoft Technology Licensing, LLC Flexible reference picture management for video encoding
CN106817585B (zh) * 2015-12-02 2020-05-01 掌赢信息科技（上海）有限公司 一种利用长期参考帧的视频编码方法、电子设备和系统
JP6119891B2 (ja) * 2016-02-25 2017-04-26 富士通株式会社 動画像符号化方法
US10404979B2 (en) * 2016-03-17 2019-09-03 Mediatek Inc. Video coding with interpolated reference pictures
JP6237829B2 (ja) * 2016-06-23 2017-11-29 富士通株式会社 動画像符号化用コンピュータプログラム
JP6237831B2 (ja) * 2016-06-23 2017-11-29 富士通株式会社 動画像復号用コンピュータプログラム
JP6237830B2 (ja) * 2016-06-23 2017-11-29 富士通株式会社 動画像復号方法
CN113873240A (zh) * 2016-06-24 2021-12-31 株式会社Kt 用于处理视频信号的方法和设备
KR102513507B1 (ko) * 2016-07-01 2023-03-22 고쿠리츠다이가쿠호진 도호쿠다이가쿠 장기 섬유증의 예방 또는 치료제
CN107592543B (zh) * 2016-07-06 2019-12-24 北京大学 视频解码处理方法及装置
EP3563571A4 (en) 2016-12-30 2020-02-12 Telefonaktiebolaget LM Ericsson (publ) DECODED IMAGE BUFFER MEMORY MANAGEMENT FOR PROCESSING PREDICTION OF CROSS IMAGE DATA
CN107426567B (zh) * 2017-05-19 2019-11-15 西安电子科技大学 基于编码顺序已知图像集的多参考图像确定方法
EP3721633A1 (en) * 2017-12-06 2020-10-14 V-Nova International Limited Hierarchical data structure
CN108650554A (zh) * 2018-04-26 2018-10-12 维沃移动通信有限公司 一种多媒体文件播放控制方法及移动终端
KR102609949B1 (ko) 2018-08-17 2023-12-04 후아웨이 테크놀러지 컴퍼니 리미티드 비디오 코딩에서의 참조 영상 관리
CN110832868A (zh) * 2018-08-31 2020-02-21 深圳市大疆创新科技有限公司 编码方法、解码方法、编码设备和解码设备
EP3847804B1 (en) * 2018-09-12 2022-12-07 Huawei Technologies Co., Ltd. Index signaling for reference picture list structures
CN116055732A (zh) 2018-09-14 2023-05-02 华为技术有限公司 视频译码方法，设备以及非瞬时性计算机可读介质
WO2020059687A1 (en) * 2018-09-21 2020-03-26 Sharp Kabushiki Kaisha Systems and methods for signaling reference pictures in video coding
US11394989B2 (en) * 2018-12-10 2022-07-19 Tencent America LLC Method and apparatus for video coding
US11196988B2 (en) * 2018-12-17 2021-12-07 Apple Inc. Reference picture management and list construction
US11095900B2 (en) 2018-12-19 2021-08-17 Sony Group Corporation Point cloud coding structure
AU2018454766A1 (en) 2018-12-25 2021-04-08 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Decoding prediction method and apparatus, and computer storage medium
US10904545B2 (en) * 2018-12-26 2021-01-26 Tencent America LLC Method for syntax controlled decoded picture buffer management
JP7184911B2 (ja) 2019-01-02 2022-12-06 エルジー エレクトロニクス インコーポレイティド 画面間予測を使用してビデオ信号を処理するための方法及び装置
CN111416981B (zh) * 2019-01-07 2023-06-02 浙江大学 视频图像解码、编码方法及装置
WO2020159994A1 (en) * 2019-01-28 2020-08-06 Op Solutions, Llc Online and offline selection of extended long term reference picture retention
US11595652B2 (en) 2019-01-28 2023-02-28 Op Solutions, Llc Explicit signaling of extended long term reference picture retention
JP2022524917A (ja) * 2019-01-28 2022-05-11 オーピー ソリューションズ， エルエルシー 延長された長期参照ピクチャ保持の明示的信号伝達
WO2020164634A1 (en) 2019-02-15 2020-08-20 Beijing Bytedance Network Technology Co., Ltd. Restrictions of usage of non-power-two-partition tree in video compression
EP3915265A4 (en) 2019-03-01 2022-06-22 Beijing Bytedance Network Technology Co., Ltd. DIRECTION-BASED PREDICTION FOR INTRA BLOCK COPY IN VIDEO CODING
CN113615175A (zh) 2019-03-11 2021-11-05 华为技术有限公司 视频译码中的逐步解码刷新
WO2020184999A1 (ko) * 2019-03-12 2020-09-17 현대자동차주식회사 영상 부호화 및 복호화 방법 및 장치
CN111726632B (zh) * 2019-03-18 2022-08-26 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
EP4340360A2 (en) 2019-03-18 2024-03-20 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image component prediction method, encoder, decoder and storage medium
CN113796085A (zh) * 2019-05-06 2021-12-14 华为技术有限公司 用于逐步解码刷新的假想参考解码器
US11303913B2 (en) * 2019-06-19 2022-04-12 Qualcomm Incorporated Decoded picture buffer indexing
EP3977727A4 (en) * 2019-07-03 2022-08-10 Huawei Technologies Co., Ltd. REFERENCE IMAGE TYPES IN REFERENCE IMAGE LISTS
NZ784015A (en) * 2019-07-08 2024-03-22 Huawei Tech Co Ltd Handling of multiple picture size and conformance windows for reference picture resampling in video coding
CN117336468A (zh) 2019-08-10 2024-01-02 北京字节跳动网络技术有限公司 视频比特流中的子图片相关信令通知
AU2020354926A1 (en) 2019-09-24 2022-04-07 Huawei Technologies Co., Ltd. Decoded picture buffer operation for resolution changes
CA3152445A1 (en) * 2019-09-24 2021-04-01 Huawei Technologies Co., Ltd. Signaling of picture header in video coding
CN117528094A (zh) * 2019-09-24 2024-02-06 华为技术有限公司 图像级非图像级语法元素的指示
AU2020322053A1 (en) * 2019-10-07 2022-05-05 Huawei Technologies Co., Ltd. Avoidance of redundant signaling in multi-layer video bitstreams
WO2021118261A1 (ko) * 2019-12-12 2021-06-17 엘지전자 주식회사 영상 정보를 시그널링하는 방법 및 장치
MX2022006965A (es) * 2019-12-12 2022-09-19 Lg Electronics Inc Método y dispositivo para señalización de información de imagen.
JP7375200B2 (ja) * 2019-12-12 2023-11-07 エルジー エレクトロニクス インコーポレイティド ピクチャレベルまたはスライスレベルで適用される画像情報をシグナリングする方法及び装置
KR20220114570A (ko) 2019-12-20 2022-08-17 주식회사 윌러스표준기술연구소 비디오 신호 처리 방법 및 이를 위한 장치
KR20220114557A (ko) 2019-12-26 2022-08-17 바이트댄스 아이엔씨 코딩된 픽처 내에서 디코딩 순서를 구현하기 위한 기술들
WO2021133519A1 (en) * 2019-12-27 2021-07-01 Alibaba Group Holding Limited Methods and systems for performing gradual decoding refresh processing on pictures
WO2021137597A1 (ko) * 2019-12-30 2021-07-08 엘지전자 주식회사 Ols에 대한 dpb 파라미터를 사용하는 영상 디코딩 방법 및 그 장치
BR112022014484A2 (pt) * 2020-01-23 2022-09-13 Huawei Tech Co Ltd Método de decodificação de uma sequência de vídeo codificada e decodificador, método de codificação de uma sequência de vídeo e codificador, e mídia legível por computador não transitória
EP4088453A4 (en) 2020-02-14 2023-05-10 Beijing Bytedance Network Technology Co., Ltd. COLOCATED IMAGE INDICATION IN VIDEO BITSTREAMS
AR121125A1 (es) * 2020-02-29 2022-04-20 Beijing Bytedance Network Tech Co Ltd Interacción entre cabecera de imagen y cabecera de segmento de un flujo de bits de video
EP4104428A4 (en) * 2020-03-16 2023-05-03 ByteDance Inc. DIRECT ACCESS POINT ACCESS UNIT IN SCALABLE VIDEO ENCODING
KR20220155293A (ko) 2020-03-17 2022-11-22 바이트댄스 아이엔씨 비디오 코딩에서 픽처 출력 플래그 표시
KR20220156029A (ko) 2020-03-31 2022-11-24 텔레폰악티에볼라겟엘엠에릭슨(펍) 구문 요소를 사용한 비디오 프로세싱
WO2021236903A1 (en) 2020-05-21 2021-11-25 Bytedance Inc. Signaling of gradual decoding refresh and reference picture lists
CN111770332B (zh) * 2020-06-04 2022-08-09 Oppo广东移动通信有限公司 插帧处理方法、插帧处理装置、存储介质与电子设备
KR20230019847A (ko) * 2020-06-08 2023-02-09 바이트댄스 아이엔씨 비디오 픽처에서 서브픽처 수에 대한 제약들
CN115917978A (zh) 2020-06-08 2023-04-04 字节跳动有限公司 对解码图片缓冲器的约束
US11621979B1 (en) 2020-12-31 2023-04-04 Benjamin Slotznick Method and apparatus for repositioning meeting participants within a virtual space view in an online meeting user interface based on gestures made by the meeting participants
US11546385B1 (en) 2020-12-31 2023-01-03 Benjamin Slotznick Method and apparatus for self-selection by participant to display a mirrored or unmirrored video feed of the participant in a videoconferencing platform
KR102264460B1 (ko) * 2020-12-31 2021-06-11 한전케이피에스 주식회사 공기압축기 전동기 정비 장치
US11330021B1 (en) * 2020-12-31 2022-05-10 Benjamin Slotznick System and method of mirroring a display of multiple video feeds in videoconferencing systems
CN114466227B (zh) * 2021-12-22 2023-08-04 天翼云科技有限公司 一种视频分析方法、装置、电子设备及存储介质

Family Cites Families (174)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5777900A (en) * 1994-03-10 1998-07-07 Matsushita Electric Industrial Co., Ltd. Filtering processor and filter method
EP0898427A4 (en) 1997-02-13 2004-04-28 Mitsubishi Electric Corp ANIMATED IMAGE ESTIMATION SYSTEM
CN1190081C (zh) 1997-03-17 2005-02-16 松下电器产业株式会社 发送和接收动态图像数据的方法及其设备
GB2381403B (en) 2000-05-10 2004-12-01 Picturetel Corp Video coding using multiple buffers
US7643559B2 (en) 2001-09-14 2010-01-05 Ntt Docomo, Inc. Coding method, decoding method, coding apparatus, decoding apparatus, image processing system, coding program, and decoding program
CN1618235A (zh) 2002-01-22 2005-05-18 微软公司 用于防止起始码模仿和数据填充的方法和系统
US7149247B2 (en) 2002-01-22 2006-12-12 Microsoft Corporation Methods and systems for encoding and decoding video data to enable random access and splicing
KR100959573B1 (ko) 2002-01-23 2010-05-27 노키아 코포레이션 비디오 코딩시 이미지 프레임들의 그루핑
EP3324624B1 (en) * 2002-04-19 2019-06-12 Panasonic Intellectual Property Corporation of America Motion vector calculating method
US20040001546A1 (en) 2002-06-03 2004-01-01 Alexandros Tourapis Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation
DK1742479T3 (da) 2002-07-11 2009-12-14 Panasonic Corp Multihypotese B-billede virtuel displaybuffer med lån af plads i H.264 post-dekoder bufferen
CN1312927C (zh) 2002-07-15 2007-04-25 株式会社日立制作所 动态图像编码方法及解码方法
US7492387B2 (en) 2002-08-05 2009-02-17 Chih-Lung Yang Implementation of MPCP MCU technology for the H.264 video standard
JP3513148B1 (ja) 2002-10-11 2004-03-31 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、動画像符号化プログラム、及び動画像復号プログラム
FR2849332A1 (fr) 2002-12-20 2004-06-25 St Microelectronics Sa Procede et dispositif et decodage et d'affichage en marche arriere d'images mpeg, circuit pilote video et boitier decodeur incorporant un tel dispositif
MXPA05007453A (es) 2003-01-10 2005-09-12 Thomson Licensing Sa Toma de decision en modo rapido para codificacion inter-estructura.
JP4405272B2 (ja) 2003-02-19 2010-01-27 パナソニック株式会社 動画像復号化方法、動画像復号化装置及びプログラム
US8194751B2 (en) 2003-02-19 2012-06-05 Panasonic Corporation Moving picture coding method and moving picture decoding method
US7266147B2 (en) 2003-03-31 2007-09-04 Sharp Laboratories Of America, Inc. Hypothetical reference decoder
US7724818B2 (en) 2003-04-30 2010-05-25 Nokia Corporation Method for coding sequences of pictures
KR100510138B1 (ko) 2003-05-01 2005-08-26 삼성전자주식회사 참조 픽처 결정 방법, 그 움직임 보상 방법 및 그 장치
US7489342B2 (en) * 2004-12-17 2009-02-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for managing reference pictures in multiview videos
US8175154B2 (en) 2003-06-03 2012-05-08 General Instrument Corporation Method for restructuring a group of pictures to provide for random access into the group of pictures
EP1642465A1 (en) * 2003-07-09 2006-04-05 THOMSON Licensing Video encoder with low complexity noise reduction
US8064520B2 (en) 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
FI115589B (fi) 2003-10-14 2005-05-31 Nokia Corp Redundanttien kuvien koodaaminen ja dekoodaaminen
EP1703506A4 (en) 2004-01-06 2011-11-09 Pioneer Corp DEVICE AND METHOD FOR RECORDING INFORMATION
US20050201471A1 (en) 2004-02-13 2005-09-15 Nokia Corporation Picture decoding method
US8036271B2 (en) * 2004-02-24 2011-10-11 Lsi Corporation Method and apparatus for determining a second picture for temporal direct-mode block prediction
US20060013318A1 (en) 2004-06-22 2006-01-19 Jennifer Webb Video error detection, recovery, and concealment
TWI268715B (en) 2004-08-16 2006-12-11 Nippon Telegraph & Telephone Picture encoding method, picture decoding method, picture encoding apparatus, and picture decoding apparatus
JP2008516556A (ja) 2004-10-13 2008-05-15 トムソン ライセンシング コンプレクシティスケーラブル映像符号化復号化方法及び装置
CN101065780A (zh) * 2004-10-14 2007-10-31 诺基亚公司 视频编码中的参考图像管理
US20060083298A1 (en) 2004-10-14 2006-04-20 Nokia Corporation Reference picture management in video coding
KR100786132B1 (ko) 2004-11-01 2007-12-21 한국전자통신연구원 적응적으로 세분화된 ｇｏｐ 구조를 이용한 계층적ｂ픽쳐-기반 동영상 부호화 및 복호화 방법
US7166860B2 (en) 2004-12-30 2007-01-23 E. I. Du Pont De Nemours And Company Electronic device and process for forming same
KR100775143B1 (ko) 2005-01-11 2007-11-12 엘지전자 주식회사 영상정보 디코딩 방법
JP4769717B2 (ja) 2005-01-17 2011-09-07 パナソニック株式会社 画像復号化方法
US8208564B2 (en) 2005-06-24 2012-06-26 Ntt Docomo, Inc. Method and apparatus for video encoding and decoding using adaptive interpolation
JP4311570B2 (ja) 2005-07-01 2009-08-12 株式会社ソニー・コンピュータエンタテインメント 再生装置、ビデオ復号装置および同期再生方法
EP1915871B1 (en) 2005-07-21 2017-07-05 Thomson Licensing Method and apparatus for weighted prediction for scalable video coding
US8028154B2 (en) 2005-07-29 2011-09-27 Broadcom Corporation Method and system for reducing instruction storage space for a processor integrated in a network adapter chip
US8599925B2 (en) 2005-08-12 2013-12-03 Microsoft Corporation Efficient coding and decoding of transform blocks
JP2007067842A (ja) 2005-08-31 2007-03-15 Victor Co Of Japan Ltd 動画像符号化データ編集装置および動画像符号化データ編集方法
US8879857B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
KR20070038396A (ko) 2005-10-05 2007-04-10 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
EP1949701A1 (en) 2005-10-11 2008-07-30 Nokia Corporation Efficient decoded picture buffer management for scalable video coding
CA2633819C (en) 2005-12-08 2016-12-06 Vidyo, Inc. Systems and methods for error resilience and random access in video communication systems
JP2007184791A (ja) 2006-01-06 2007-07-19 Victor Co Of Japan Ltd 動画像符号化データ再生装置
US7956930B2 (en) 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
WO2007080223A1 (en) 2006-01-10 2007-07-19 Nokia Corporation Buffering of decoded reference pictures
EP1806930A1 (en) 2006-01-10 2007-07-11 Thomson Licensing Method and apparatus for constructing reference picture lists for scalable video
WO2007081177A1 (en) 2006-01-12 2007-07-19 Lg Electronics Inc. Processing multiview video
US7673116B2 (en) 2006-01-17 2010-03-02 Advanced Micro Devices, Inc. Input/output memory management unit that implements memory attributes based on translation data
AU2006338425B2 (en) 2006-02-13 2010-12-09 Kabushiki Kaisha Toshiba Moving image encoding/decoding method and device and program
EP1827009A1 (en) 2006-02-28 2007-08-29 Matsushita Electric Industrial Co., Ltd. Video encoder and decoder for an improved zapping service for mobile video reception
US8170116B2 (en) 2006-03-27 2012-05-01 Nokia Corporation Reference picture marking in scalable video encoding and decoding
KR100959538B1 (ko) 2006-03-30 2010-05-27 엘지전자 주식회사 비디오 신호를 디코딩/인코딩하기 위한 방법 및 장치
US20100091845A1 (en) 2006-03-30 2010-04-15 Byeong Moon Jeon Method and apparatus for decoding/encoding a video signal
CN101491095B (zh) 2006-03-30 2013-07-10 Lg电子株式会社 用于解码/编码视频信号的方法和装置
KR100877680B1 (ko) 2006-04-04 2009-01-09 삼성전자주식회사 반도체 장치 사이의 단일형 병렬데이터 인터페이스 방법,기록매체 및 반도체 장치
US8270492B2 (en) 2006-05-12 2012-09-18 Panasonic Corporation Moving picture decoding device
KR20070111969A (ko) 2006-05-19 2007-11-22 엘지전자 주식회사 비디오 신호의 디코딩 방법 및 장치
US20080002770A1 (en) 2006-06-30 2008-01-03 Nokia Corporation Methods, apparatus, and a computer program product for providing a fast inter mode decision for video encoding in resource constrained devices
BRPI0714022A2 (pt) 2006-07-06 2012-12-04 Thomson Licensing método e aparelho para separar o número do quadro e /ou a contagem de ordem de imagem (poc) para codificação e decodificação de vìdeo multi-visão
WO2008010039A2 (en) 2006-07-12 2008-01-24 Les Hôpitaux Universitaires De Geneve Medical device for tissue ablation
EP2052546A4 (en) 2006-07-12 2010-03-03 Lg Electronics Inc METHOD AND DEVICE FOR SIGNAL PROCESSING
JP4787100B2 (ja) 2006-07-27 2011-10-05 パナソニック株式会社 画像符号化装置
US7801223B2 (en) 2006-07-27 2010-09-21 Lsi Corporation Method for video decoder memory reduction
US8532178B2 (en) * 2006-08-25 2013-09-10 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal with inter-view reference picture list construction
US20080165860A1 (en) 2006-08-31 2008-07-10 Zohair Sahraoui H.264 Data processing
WO2008030068A1 (en) 2006-09-07 2008-03-13 Lg Electronics Inc. Method and apparatus for decoding/encoding of a video signal
CN107295350A (zh) * 2006-10-13 2017-10-24 汤姆逊许可公司 用于多视点视频编码的参考图像列表管理语法
BRPI0716957A2 (pt) 2006-10-13 2013-10-29 Thomson Licensing Sintaxe de gerenciamento de lista de imagens de referência para codificação de vídeo de múltiplas vistas
ES2702704T3 (es) 2006-10-16 2019-03-05 Nokia Technologies Oy Sistema y procedimiento para implementar una administración eficiente de memoria intermedia decodificada en codificación de video de vistas múltiples
US7991236B2 (en) 2006-10-16 2011-08-02 Nokia Corporation Discardable lower layer adaptations in scalable video coding
MY149409A (en) 2006-10-20 2013-08-30 Nokia Corp Virtual decoded reference picture marking and reference picture list
JP2010507975A (ja) 2006-10-24 2010-03-11 トムソン ライセンシング 多視点映像符号化のための画像の管理
JP2008118221A (ja) 2006-10-31 2008-05-22 Toshiba Corp 復号装置及び復号方法
KR100856392B1 (ko) 2006-11-08 2008-09-04 한국전자통신연구원 현재 영상의 복원영역을 참조하는 동영상 부호화/복호화장치 및 그 방법
US8873932B2 (en) 2007-12-11 2014-10-28 Cisco Technology, Inc. Inferential processing to ascertain plural levels of picture interdependencies
US8416859B2 (en) 2006-11-13 2013-04-09 Cisco Technology, Inc. Signalling and extraction in compressed video of pictures belonging to interdependency tiers
CA2783599C (en) 2006-11-14 2013-06-25 Qualcomm Incorporated Systems and methods for channel switching
JP5157140B2 (ja) 2006-11-29 2013-03-06 ソニー株式会社 記録装置、記録方法、情報処理装置、情報処理方法、撮像装置およびビデオシステム
JP5114495B2 (ja) 2007-01-08 2013-01-09 トムソン ライセンシング ビデオストリームのスプライシングのための方法及び装置
CN101222638B (zh) * 2007-01-08 2011-12-07 华为技术有限公司 多视视频编解码方法及装置
KR100846802B1 (ko) 2007-02-14 2008-07-16 삼성전자주식회사 동영상 프레임의 디코딩 방법 및 인코딩 방법
JP5023739B2 (ja) 2007-02-28 2012-09-12 ソニー株式会社 画像情報符号化装置及び符号化方法
US20100266042A1 (en) 2007-03-02 2010-10-21 Han Suh Koo Method and an apparatus for decoding/encoding a video signal
US8194151B2 (en) 2007-03-28 2012-06-05 Hitachi Kokusai Electric Inc. Image pickup apparatus
US8116537B2 (en) 2007-04-04 2012-02-14 Sony Corporation Image recording device, player device, imaging device, player system, method of recording image, and computer program
WO2008123917A2 (en) 2007-04-04 2008-10-16 Thomson Licensing Reference picture list management
US8494049B2 (en) 2007-04-09 2013-07-23 Cisco Technology, Inc. Long term reference frame management with error video feedback for compressed video communication
US20080268877A1 (en) 2007-04-24 2008-10-30 Motorola, Inc. Method and apparatus for exchanging signaling a wireless communication system
US20080301742A1 (en) 2007-06-04 2008-12-04 Nokia Corporation Time-interleaved simulcast for tune-in reduction
US8477852B2 (en) 2007-06-20 2013-07-02 Nvidia Corporation Uniform video decoding and display
US8265144B2 (en) 2007-06-30 2012-09-11 Microsoft Corporation Innovations in video decoder implementations
CN100531400C (zh) 2007-07-26 2009-08-19 上海交通大学 基于宏块级和像素级运动估计的视频差错掩盖方法
TWI338869B (en) * 2007-08-03 2011-03-11 Via Tech Inc Method and apparatus for block-based digital encoded picture
US10298952B2 (en) * 2007-08-06 2019-05-21 Interdigital Madison Patent Holdings Methods and apparatus for motion skip move with multiple inter-view reference pictures
JP5125329B2 (ja) 2007-08-31 2013-01-23 富士通セミコンダクター株式会社 符号化装置と符号化方法、および復号化装置と復号化方法
US8121189B2 (en) 2007-09-20 2012-02-21 Microsoft Corporation Video decoding using created reference pictures
US8194741B2 (en) 2007-10-12 2012-06-05 Broadcom Corporation Method and system for processing B pictures with missing or invalid forward reference pictures
CA2704490A1 (en) 2007-11-05 2009-05-14 Thomson Licensing A scalable video coding method for fast channel change and increased error resilience
US8425545B2 (en) 2007-12-03 2013-04-23 Covidien Ag Cordless hand-held ultrasonic cautery cutting device and method
TWI459215B (zh) 2007-12-05 2014-11-01 Ol2 Inc 用於將程式碼及資料儲存於應用程式主機代管中心內之系統及方法
US7865675B2 (en) 2007-12-06 2011-01-04 Arm Limited Controlling cleaning of data values within a hardware accelerator
US8280375B2 (en) 2008-01-25 2012-10-02 Texas Instruments Incorporated System and method for managing radio link failures
JP2009260736A (ja) 2008-03-24 2009-11-05 Fujitsu Ltd エンコーディング装置、デコーディング装置、動画像処理方法、動画像処理システム、エンコーディングプログラムおよびデコーディングプログラム
JP2009260421A (ja) 2008-04-11 2009-11-05 Fujitsu Ltd 動画像処理システム、符号化装置、符号化方法、符号化プログラム、復号化装置、復号化方法および復号化プログラム
US20090262683A1 (en) 2008-04-18 2009-10-22 Amit Khetawat Method and Apparatus for Setup and Release of User Equipment Context Identifiers in a Home Node B System
WO2009130561A1 (en) 2008-04-21 2009-10-29 Nokia Corporation Method and device for video coding and decoding
US7782903B2 (en) 2008-05-14 2010-08-24 Newport Media, Inc. Hardware accelerated protocol stack
JP2009290389A (ja) 2008-05-28 2009-12-10 Hitachi Ltd 画像処理装置
JP2009296078A (ja) 2008-06-03 2009-12-17 Victor Co Of Japan Ltd 符号化データ再生装置、符号化データ再生方法、および符号化データ再生プログラム
WO2009152450A1 (en) 2008-06-12 2009-12-17 Cisco Technology, Inc. Picture interdependencies signals in context of mmco to assist stream manipulation
BRPI0915795A2 (pt) 2008-07-16 2015-11-10 Thomson Licensing método de codificação de vídeo escalonável para mudança rápida de canal para aumentar eficácia de codificação
US8781003B2 (en) 2008-07-17 2014-07-15 Cisco Technology, Inc. Splicing of encrypted video/audio content
WO2010014123A1 (en) 2008-07-26 2010-02-04 Thomson Licensing A real-time transport protocol (rtp) packetization method for fast channel change applications using scalable video coding (svc)
EP2313847A4 (en) 2008-08-19 2015-12-09 Digimarc Corp METHODS AND SYSTEMS FOR PROCESSING CONTENT
US8081018B2 (en) 2008-08-21 2011-12-20 Qualcomm Incorporated Low power radio frequency divider
KR101377527B1 (ko) 2008-10-14 2014-03-25 에스케이 텔레콤주식회사 복수 개의 참조 픽처의 움직임 벡터 부호화/복호화 방법 및장치와 그를 이용한 영상 부호화/복호화 장치 및 방법
US8462849B2 (en) 2008-12-23 2013-06-11 General Instrument Corporation Reference picture selection for sub-pixel motion estimation
WO2010086500A1 (en) 2009-01-28 2010-08-05 Nokia Corporation Method and apparatus for video coding and decoding
EP2392138A4 (en) 2009-01-28 2012-08-29 Nokia Corp METHOD AND APPARATUS FOR VIDEO ENCODING AND DECODING
KR101622950B1 (ko) 2009-01-28 2016-05-23 삼성전자주식회사 오디오 신호의 부호화 및 복호화 방법 및 그 장치
US20110026593A1 (en) * 2009-02-10 2011-02-03 New Wei Lee Image processing apparatus, image processing method, program and integrated circuit
WO2010096767A1 (en) 2009-02-20 2010-08-26 Cisco Technology, Inc. Signalling of decodable sub-sequences
JP5332773B2 (ja) 2009-03-18 2013-11-06 ソニー株式会社 画像処理装置および方法
JP5072893B2 (ja) 2009-03-25 2012-11-14 株式会社東芝 画像符号化方法および画像復号化方法
US8693539B2 (en) 2009-03-26 2014-04-08 Panasonic Corporation Coding method, error detecting method, decoding method, coding apparatus, error detecting apparatus, and decoding apparatus
US20100262711A1 (en) 2009-04-09 2010-10-14 Nokia Corporation Systems, methods, and apparatuses for media file streaming
KR20110139304A (ko) 2009-04-22 2011-12-28 엘지전자 주식회사 다시점 영상의 참조 픽쳐 리스트 변경 방법
CN101547368B (zh) * 2009-04-24 2011-03-09 炬力集成电路设计有限公司 一种图像中参考帧的处理装置、方法以及解码器
CN101572817B (zh) 2009-05-26 2011-01-05 北京邮电大学 一种用于空间可分级视频编码的编码模式选择方法
TWI384887B (zh) * 2009-06-11 2013-02-01 Univ Nat Central 多視點影像編解碼方法
MX2011003076A (es) 2009-06-17 2011-04-19 Panasonic Corp Medio de grabacion de informacion y dispositivo de reproduccion para reproducir imagenes en tercera dimension.
US8340510B2 (en) 2009-07-17 2012-12-25 Microsoft Corporation Implementing channel start and file seek for decoder
US8948241B2 (en) 2009-08-07 2015-02-03 Qualcomm Incorporated Signaling characteristics of an MVC operation point
KR101678968B1 (ko) 2009-08-21 2016-11-25 에스케이텔레콤 주식회사 참조 픽처 보간 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
US8457155B2 (en) * 2009-09-11 2013-06-04 Nokia Corporation Encoding and decoding a multi-view video signal
TW201123795A (en) 2009-09-29 2011-07-01 Nokia Corp System, method and apparatus for dynamic media file streaming
US8990821B2 (en) 2009-09-29 2015-03-24 International Business Machines Corporation Task dispatching based on composite queue size and upper and lower compare values
JP2011082683A (ja) 2009-10-05 2011-04-21 Sony Corp 画像処理装置、画像処理方法、及び、プログラム
CN102045557B (zh) 2009-10-20 2012-09-19 鸿富锦精密工业（深圳）有限公司 视频编解码方法及使用其的视频编码、解码装置
EP2497271B1 (en) 2009-11-06 2020-08-19 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Hybrid video coding
TW201121331A (en) 2009-12-10 2011-06-16 Novatek Microelectronics Corp Picture decoder
CN102104781B (zh) 2009-12-18 2013-03-20 联咏科技股份有限公司 图像解码器
US9992456B2 (en) 2010-02-24 2018-06-05 Thomson Licensing Dtv Method and apparatus for hypothetical reference decoder conformance error detection
EP2367394B1 (en) 2010-03-12 2015-11-25 BlackBerry Limited Base station and method for receiving transmissions on an enhanced random access channel
EP2996423B1 (en) 2010-03-12 2017-08-23 BlackBerry Limited Method and device for registration and data transmission using fast/zero contention resolution
JP2011199396A (ja) 2010-03-17 2011-10-06 Ntt Docomo Inc 動画像予測符号化装置、動画像予測符号化方法、動画像予測符号化プログラム、動画像予測復号装置、動画像予測復号方法、及び動画像予測復号プログラム
CN101917615A (zh) * 2010-06-03 2010-12-15 北京邮电大学 一种混合视频编码框架中的增强型双向运动矢量预测方法
CN101888553B (zh) 2010-06-30 2012-01-11 香港应用科技研究院有限公司 用于可伸缩视频编码的方法和装置
TW201210325A (en) 2010-07-21 2012-03-01 Nokia Corp Method and apparatus for indicating switching points in a streaming session
JP5728649B2 (ja) 2010-08-06 2015-06-03 パナソニックＩｐマネジメント株式会社 再生装置、集積回路、再生方法、プログラム
US20120230409A1 (en) 2011-03-07 2012-09-13 Qualcomm Incorporated Decoded picture buffer management
US9516379B2 (en) 2011-03-08 2016-12-06 Qualcomm Incorporated Buffer management in video codecs
US9706227B2 (en) 2011-03-10 2017-07-11 Qualcomm Incorporated Video coding techniques for coding dependent pictures after random access
US9866859B2 (en) 2011-06-14 2018-01-09 Texas Instruments Incorporated Inter-prediction candidate index coding independent of inter-prediction candidate list construction in video coding
KR101578308B1 (ko) * 2011-06-30 2015-12-16 텔레폰악티에볼라겟엘엠에릭슨(펍) 레퍼러스 픽처 시그널링
JP5624693B2 (ja) * 2011-06-30 2014-11-12 テレフオンアクチーボラゲット エル エムエリクソン（パブル） 絶対的又は明示的な参照ピクチャ信号伝送
MX2014000048A (es) 2011-07-02 2014-04-30 Samsung Electronics Co Ltd Metodo y aparato para multiplexar y desmultiplexar datos de video para identificar el estado de reproduccion de los datos de video.
US20130064284A1 (en) * 2011-07-15 2013-03-14 Telefonaktiebolaget L M Ericsson (Publ) Encoder And Method Thereof For Encoding a Representation of a Picture of a Video Stream
WO2013030458A1 (en) 2011-08-31 2013-03-07 Nokia Corporation Multiview video coding and decoding
EP2750387B1 (en) 2011-09-22 2019-06-19 LG Electronics Inc. Video decoding method and video decoding apparatus
US9420307B2 (en) 2011-09-23 2016-08-16 Qualcomm Incorporated Coding reference pictures for a reference picture set
KR101835625B1 (ko) 2011-10-26 2018-04-19 인텔렉추얼디스커버리 주식회사 움직임 후보 리스트 생성 방법 및 그를 이용한 부호화 장치
US9264717B2 (en) 2011-10-31 2016-02-16 Qualcomm Incorporated Random access with advanced decoded picture buffer (DPB) management in video coding
KR102559468B1 (ko) * 2012-01-19 2023-07-24 브이아이디 스케일, 인크. 비디오 코딩 기준 화상 목록들을 시그널링하고 구성하는 방법 및 장치
US9369710B2 (en) * 2012-02-06 2016-06-14 Qualcomm Incorporated Reference picture list modification for video coding
US9602817B2 (en) 2012-07-12 2017-03-21 Cisco Technology, Inc. Management of decoded picture buffer at picture format transitions
WO2014081226A1 (ko) * 2012-11-21 2014-05-30 엘지전자 주식회사 영상 디코딩 방법 및 이를 이용하는 장치
US10404979B2 (en) * 2016-03-17 2019-09-03 Mediatek Inc. Video coding with interpolated reference pictures

Also Published As

Publication number Publication date
BR112014006839A2 (pt) 2017-04-04
WO2013043913A1 (en) 2013-03-28
JP2014530570A (ja) 2014-11-17
IL256349B (en) 2019-02-28
AU2012312344A1 (en) 2014-04-03
AU2012312324B2 (en) 2015-09-24
JP2014530569A (ja) 2014-11-17
BR112014006867A2 (pt) 2017-04-04
WO2013043892A3 (en) 2013-10-31
CA2849283A1 (en) 2013-03-28
RU2014116245A (ru) 2015-10-27
CN108513128A (zh) 2018-09-07
CN103828375B (zh) 2017-06-09
US10542285B2 (en) 2020-01-21
ZA201402900B (en) 2022-11-30
EP2759130B1 (en) 2020-08-12
CN103814574B (zh) 2018-01-26
CA2849501A1 (en) 2013-03-28
HK1243571A1 (zh) 2018-07-13
RU2584510C2 (ru) 2016-05-20
CN103828368A (zh) 2014-05-28
SG11201400264XA (en) 2014-07-30
US20130077677A1 (en) 2013-03-28
CN107517381B (zh) 2020-03-24
RU2571410C2 (ru) 2015-12-20
IL231266A0 (en) 2014-04-30
IN2014CN01822A (zh) 2015-05-29
BR112014006843A2 (pt) 2017-04-04
EP2759134B1 (en) 2020-02-19
ZA201402898B (en) 2016-05-25
CN103828374A (zh) 2014-05-28
IL231267A (en) 2016-08-31
CN107770523B (zh) 2020-07-17
CA2849501C (en) 2017-02-28
RU2014116246A (ru) 2015-10-27
WO2013043893A2 (en) 2013-03-28
MY166681A (en) 2018-07-18
US11490119B2 (en) 2022-11-01
MY172880A (en) 2019-12-13
TW201334542A (zh) 2013-08-16
JP2014526858A (ja) 2014-10-06
CN103828365B (zh) 2017-10-31
US20130077680A1 (en) 2013-03-28
JP6275780B2 (ja) 2018-02-07
RU2587420C2 (ru) 2016-06-20
US20130077685A1 (en) 2013-03-28
JP2016213865A (ja) 2016-12-15
WO2013043907A1 (en) 2013-03-28
KR101613804B1 (ko) 2016-04-19
CN107770523A (zh) 2018-03-06
EP2759131A1 (en) 2014-07-30
JP5882475B2 (ja) 2016-03-09
KR20140066252A (ko) 2014-05-30
CA2848406C (en) 2017-05-16
US9420307B2 (en) 2016-08-16
CA2849281C (en) 2017-02-28
CN103999462A (zh) 2014-08-20
CN107682695A (zh) 2018-02-09
KR101615051B1 (ko) 2016-04-22
RU2580098C2 (ru) 2016-04-10
IL231211A0 (en) 2014-04-30
CA2849283C (en) 2020-03-24
CN108174202A (zh) 2018-06-15
EP2759136A2 (en) 2014-07-30
US9338474B2 (en) 2016-05-10
TWI521944B (zh) 2016-02-11
BR112014006842A2 (pt) 2017-04-04
MY171041A (en) 2019-09-23
JP2019126079A (ja) 2019-07-25
IL231210A0 (en) 2014-04-30
JP5940668B2 (ja) 2016-06-29
TWI521952B (zh) 2016-02-11
JP5940669B2 (ja) 2016-06-29
BR112014006842B1 (pt) 2022-03-03
KR101614635B1 (ko) 2016-04-21
CN108513128B (zh) 2022-06-24
US10856007B2 (en) 2020-12-01
AR089561A1 (es) 2014-09-03
WO2013043892A2 (en) 2013-03-28
AU2012312318B2 (en) 2015-07-30
TW201330626A (zh) 2013-07-16
HK1253675A1 (zh) 2019-06-28
TWI531218B (zh) 2016-04-21
KR101553788B1 (ko) 2015-10-01
US20130077678A1 (en) 2013-03-28
IL256349A (en) 2018-02-28
AU2012312323B2 (en) 2015-05-07
HK1247761A1 (zh) 2018-09-28
KR20140085460A (ko) 2014-07-07
TW201338558A (zh) 2013-09-16
CN103828375A (zh) 2014-05-28
SG11201400220VA (en) 2014-05-29
CN107517381A (zh) 2017-12-26
US9131245B2 (en) 2015-09-08
KR101614633B1 (ko) 2016-04-29
US20180324458A1 (en) 2018-11-08
HK1197329A1 (zh) 2015-01-09
CN103814574A (zh) 2014-05-21
CA2848406A1 (en) 2013-03-28
ZA201402913B (en) 2017-11-29
KR20140065003A (ko) 2014-05-28
JP2014530567A (ja) 2014-11-17
IN2014CN01821A (zh) 2015-05-29
JP2014530573A (ja) 2014-11-17
US20130077687A1 (en) 2013-03-28
CN103814575B (zh) 2017-05-24
EP2759135B1 (en) 2017-02-08
WO2013043887A1 (en) 2013-03-28
US20130077679A1 (en) 2013-03-28
CN103999462B (zh) 2017-09-22
AU2012312338B2 (en) 2015-08-27
AR089558A1 (es) 2014-09-03
KR20140066251A (ko) 2014-05-30
IL264182A (en) 2019-02-28
AU2012312317A1 (en) 2014-04-03
HK1247013A1 (zh) 2018-09-14
JP6009569B2 (ja) 2016-10-19
MY169092A (en) 2019-02-18
AR089557A1 (es) 2014-09-03
KR101612651B1 (ko) 2016-04-14
MY166674A (en) 2018-07-18
CN107580229B (zh) 2020-06-09
CN108184123A (zh) 2018-06-19
US10034018B2 (en) 2018-07-24
JP2014530568A (ja) 2014-11-17
SG11201400387PA (en) 2014-05-29
AU2012312344B2 (en) 2015-09-17
AU2012312338A1 (en) 2014-03-27
CA3062214A1 (en) 2013-03-28
KR101614634B1 (ko) 2016-04-29
US20130077681A1 (en) 2013-03-28
CA2849281A1 (en) 2013-03-28
KR20140065001A (ko) 2014-05-28
TWI600311B (zh) 2017-09-21
EP2759130A1 (en) 2014-07-30
BR112014006854A2 (pt) 2017-04-04
AR089560A1 (es) 2014-09-03
TWI498004B (zh) 2015-08-21
MY171154A (en) 2019-09-27
IL231210B (en) 2018-02-28
AR089562A1 (es) 2014-09-03
CA2849284C (en) 2017-01-31
AU2012312317B2 (en) 2015-05-07
IN2014CN01827A (zh) 2015-05-29
WO2013043893A3 (en) 2013-08-22
CN108337517A (zh) 2018-07-27
IL264182B (en) 2021-03-25
US9237356B2 (en) 2016-01-12
WO2013043886A3 (en) 2013-10-31
ZA201402902B (en) 2016-11-30
IL231316A (en) 2016-09-29
TW201325251A (zh) 2013-06-16
RU2014116243A (ru) 2015-10-27
US20200107045A1 (en) 2020-04-02
EP2759133B1 (en) 2020-08-12
SG11201400317XA (en) 2014-06-27
BR112014006845B1 (pt) 2022-07-19
IN2014CN01825A (zh) 2015-05-29
JP5976816B2 (ja) 2016-08-24
US20210044827A1 (en) 2021-02-11
ES2776147T3 (es) 2020-07-29
EP2759136B1 (en) 2023-01-04
AU2012312323A1 (en) 2014-04-03
WO2013044075A3 (en) 2013-10-03
EP2759133A1 (en) 2014-07-30
JP5937216B2 (ja) 2016-06-22
WO2013043886A2 (en) 2013-03-28
KR20140065004A (ko) 2014-05-28
EP2759132B1 (en) 2019-12-18
JP2014530571A (ja) 2014-11-17
CN103828374B (zh) 2017-09-08
CN108184123B (zh) 2021-06-01
RU2014116250A (ru) 2015-10-27
AU2012312324A1 (en) 2014-04-17
JP2018093506A (ja) 2018-06-14
US9998757B2 (en) 2018-06-12
CN107682695B (zh) 2020-06-30
BR112014006845A2 (pt) 2017-04-04
IL231266A (en) 2016-03-31
CA2849284A1 (en) 2013-03-28
IL231320A (en) 2016-09-29
JP6498794B2 (ja) 2019-04-10
TW201320762A (zh) 2013-05-16
RU2551815C1 (ru) 2015-05-27
CN103828365A (zh) 2014-05-28
CA2849499C (en) 2018-03-06
CN107580229A (zh) 2018-01-12
CN108174202B (zh) 2021-06-01
US9106927B2 (en) 2015-08-11
AU2012312318A1 (en) 2014-04-03
TW201338557A (zh) 2013-09-16
CA2849499A1 (en) 2013-03-28
CN103828368B (zh) 2018-03-20
ZA201402901B (en) 2017-10-29
SG11201400265WA (en) 2014-08-28
EP2759135A2 (en) 2014-07-30
AR089559A1 (es) 2014-09-03
IL231320A0 (en) 2014-04-30
EP2759134A2 (en) 2014-07-30
WO2013044075A2 (en) 2013-03-28
IL231267A0 (en) 2014-04-30
EP2759132A2 (en) 2014-07-30
KR20140065002A (ko) 2014-05-28
SG11201400449UA (en) 2014-05-29
CN103814575A (zh) 2014-05-21
IL231211A (en) 2017-08-31
ZA201402899B (en) 2017-06-28
RU2549162C1 (ru) 2015-04-20
JP6038929B2 (ja) 2016-12-07
CN108337517B (zh) 2022-03-29
IL231316A0 (en) 2014-04-30

Similar Documents

Publication Publication Date Title
TWI530162B (zh) 用於視訊寫碼之參考圖像清單建構