TWI581620B - 相依隨機存取點圖片 - Google Patents

相依隨機存取點圖片 Download PDF

Info

Publication number
TWI581620B
TWI581620B TW104116300A TW104116300A TWI581620B TW I581620 B TWI581620 B TW I581620B TW 104116300 A TW104116300 A TW 104116300A TW 104116300 A TW104116300 A TW 104116300A TW I581620 B TWI581620 B TW I581620B
Authority
TW
Taiwan
Prior art keywords
picture
drap
irap
video
random access
Prior art date
Application number
TW104116300A
Other languages
English (en)
Other versions
TW201608877A (zh
Inventor
喬納頓 山繆森
瑞卡德 史卓柏格
賈可伯 史東
馬丁 派特森
余若洋
Original Assignee
Ｌｍ艾瑞克生（Ｐｕｂｌ）電話公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ｌｍ艾瑞克生（Ｐｕｂｌ）電話公司 filed Critical Ｌｍ艾瑞克生（Ｐｕｂｌ）電話公司
Publication of TW201608877A publication Critical patent/TW201608877A/zh
Application granted granted Critical
Publication of TWI581620B publication Critical patent/TWI581620B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

相依隨機存取點圖片
本發明實施例一般而言係關於視訊寫碼及解碼，且特定而言係關於在此視訊寫碼及解碼期間引入及使用相依隨機存取點。
經由網際網路、廣播網路及行動網路發送之視訊資料量每年都在增加。藉由如Netflix、Hulu及YouTube之頂級(OTT)服務之經增加使用以及對高品質視訊及觀看TV及其他視訊服務之一更靈活方式之一經增加需求推動此趨勢。
為跟上視訊之漸增之位元率需求，具有良好視訊壓縮係重要的。最近，JCT-VC與MPEG合作開發了高效率視訊寫碼(HEVC)版本1視訊編碼解碼器，其高效地將位元率切分成兩半以達成與其前身AVC/H.264相比較相同之品質。
亦稱為H.265之HEVC係利用時間及空間預測兩者之一基於區塊之視訊編碼解碼器。使用當前圖片內之圖框內(I)預測達成空間預測。僅由圖框內寫碼區塊組成之一圖片稱為一I圖片。使用亦稱為單預測性預測之圖框間預測(P)或亦稱為雙預測性預測之雙向圖框間預測(B)在區塊位準上達成時間預測。在圖框間預測中，依據一單個先前經解碼圖片進行一預測。在雙向圖框間預測中，依據可參考相同先前經解碼圖片或兩個不同先前經解碼圖片之兩個預測之一組合進行預測。先前經解碼圖片在當前圖片之前經解碼且依顯示時間(輸出次序)可在當 前圖片之前或之後。含有至少一個圖框間寫碼區塊但不含有雙向寫碼圖框間區塊之一圖片稱為一P圖片。含有至少一個雙向圖框間區塊之一圖片稱為一B圖片。P圖片及B圖片兩者亦可含有圖框內寫碼區塊。針對一典型區塊，圖框內寫碼之位元成本與圖框間寫碼相比較通常貴得多，圖框間寫碼通常比雙預測性寫碼貴。
一瞬時解碼再新(IDR)圖片係一I圖片，針對其一接下來圖片可不參考在IDR圖片之前之一圖片。一清潔隨機存取(CRA)圖片係一I圖片，該I圖片允許一隨機存取跳略前導(RASL)圖片參考依解碼次序在CRA圖片後面且依顯示或輸出次序在CRA圖片前面之一圖片。假如解碼在CRA圖片處開始，必須放棄RASL圖片，此乃因允許RASL圖片在CRA圖片用於隨機存取時依據在不可用於預測之CRA圖片前面之圖片進行預測。中斷連結存取(BLA)圖片係用於指示位元串流中之拼接點之I圖片。可藉由將一第一位元串流中之一CRA圖片之圖片類型改變為一BLA圖片且將該串流串連於其他位元串流中之一適當位置處而執行位元串流拼接操作。
一圖框內隨機存取點(IRAP)圖片可係IDR、CRA或BLA圖片中之任何一者。所有IRAP圖片保證依解碼及輸出次序兩者在IRAP後面之圖片不參考依解碼次序在IRAP圖片之前之任何圖片。一位元串流之第一圖片必須係一IRAP圖片，但貫穿位元串流可存在許多其他IRAP圖片。IRAP圖片提供(舉例而言)在開始觀看TV或自一個TV頻道切換至另一TV頻道時調諧成一視訊位元串流之可能性。IRAP圖片亦可用於在一視訊剪輯中搜尋(舉例而言，藉由使用一視訊播放器之控制條移動播放位置)。此外，假如視訊位元串流中存在錯誤或遺失，則一IRAP圖片提供視訊之一再新。
通常使用IRAP圖片之間的一固定最大圖片距離壓縮視訊序列。更頻繁IRAP圖片使頻道切換更快且增加在一視訊剪輯中之搜尋粒 度。平衡此與IRAP圖片之位元成本。常見IRAP圖片間隔在0.5秒至1.0秒之間變化。
查看IRAP與時間預測性圖片(諸如P圖片及B圖片)之間的差異之一種方式係：IRAP圖片如同一獨立靜止圖片，而一時間預測性圖片係相對於先前圖片之一相依差量圖片。
圖1展示一實例性視訊序列，其中第一圖片係一IRAP圖片且接下來圖片係P圖片。頂列展示位元串流中發送之內容且底列展示經解碼圖片的樣子。如可見，IRAP圖片表達一全圖片，而P圖片係差量圖片。由於IRAP圖片不使用時間圖片預測，因此其經壓縮大小通常係一對應時間預測性圖片之許多倍。
藉由查看實際經寫碼序列，可取得在IRAP圖片上花費之位元與P圖片相比多多少之一指示。查看JCT-VC標準化群組所提供之用於HEVC編碼解碼器之普通條件位元串流。表1及表2中報告可藉由針對兩個序列集合將除第一圖片之外之每一IRAP圖片轉換為P圖片達成之位元率節省之一估計。作為一實例，表1展示在僅第一圖片作為一IRAP圖片之情況下編碼Kimono測試序列導致與在每秒一次地使用IRAP圖片之情況下編碼相同序列相比較低10.5%之位元率。
HM-HEVC測試模型 YUV-明度分量(Y)及色度分量(U,V)
FPS-圖框/秒 QP-量化參數
SCC-螢幕內容寫碼
因此，需要一高效視訊寫碼及解碼且特定而言需要達成隨機存取點之數目與此等隨機存取點之位元成本之間的一平衡之此視訊寫碼及解碼。
提供一高效視訊寫碼及解碼係一總目標。
在一視訊位元串流中提供一新類型之隨機存取點係一特定目標。
藉由本文中所揭示之實施例滿足此等及其他目標。
該等實施例之一態樣係關於用於解碼一視訊位元串流之一方法，該方法包括解碼該視訊位元串流之一圖框內隨機存取點(IRAP)圖片。該方法亦包括使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊位元串流中之一隨機存取點。
該等實施例之一相關態樣定義用於解碼一視訊位元串流之一解碼器。該解碼器經組態以解碼該視訊位元串流之一IRAP圖片。該解碼器亦經組態以使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前DRAP圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊位元串流中之一隨機存取點。
該等實施例之另一相關態樣定義一解碼器，該解碼器用於解碼一視訊位元串流且包括用於解碼該視訊位元串流之一IRAP圖片之一IRAP解碼器。該解碼器亦包括用於使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前DRAP圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片之一DRAP解碼器。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊位元串流中之一隨機存取點。
該等實施例之另一態樣係關於用於編碼一視訊串流之一方法。該方法包括編碼該視訊串流之一IRAP圖片且使用該IRAP圖片及/或該視訊串流中之根據一解碼次序之一先前DRAP圖片作為該視訊串流之 一DRAP圖片之唯一參考圖片來編碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點。
該等實施例之一相關態樣定義用於編碼一視訊串流之一編碼器。該編碼器經組態以編碼該視訊串流之一IRAP圖片。該編碼器亦經組態以使用該IRAP圖片及/或該視訊串流中之根據一解碼次序之一先前DRAP圖片作為該視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點。
該等實施例之另一相關態樣定義用於編碼一視訊串流之一編碼器。該編碼器包括用於編碼該視訊串流之一IRAP圖片之一IRAP編碼器。該編碼器亦包括用於使用該IRAP圖片及/或該視訊串流中之根據一解碼次序之一先前DRAP圖片作為該視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片之一DRAP編碼器。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點。
該等實施例之又一態樣係關於包括指令之一電腦程式，該等指令在由一處理器執行時致使該處理器解碼一視訊位元串流之一IRAP圖片。亦致使該處理器使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前DRAP圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊位元串流中之一隨機存取點。
該等實施例之又一態樣係關於包括指令之一電腦程式，該等指令在由一處理器執行時致使該處理器編碼一視訊串流之一IRAP圖片。亦致使該處理器使用該IRAP圖片及/或該視訊串流中之根據一解碼次序之一先前DRAP圖片作為該視訊串流之一DRAP圖片之唯一參 考圖片來編碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點。
該等實施例之一相關態樣定義包括根據上文實施例之一電腦程式之一載體。該載體係一電子信號、一光學信號、一電磁信號、一磁信號、一電信號、一無線電信號、一微波信號或一電腦可讀儲存媒體中之一者。
本發明實施例在一視訊位元串流中提供可用於執行一隨機存取操作之一新類型之隨機存取點(RAP)圖片。此RAP圖片係一相依RAP(DRAP)圖片，此隱含其使用一先前IRAP圖片及/或先前DRAP圖片作為唯一參考圖片來編碼及解碼。因此，該DRAP圖片與IRAP圖片相比可以一顯著較低位元成本表示，但仍構成一視訊位元串流中之一RAP。
100‧‧‧解碼器
110‧‧‧解碼器
111‧‧‧圖框內隨機存取點解碼器
112‧‧‧相依隨機存取點解碼器
113‧‧‧輸入單元
114‧‧‧輸出單元
115‧‧‧經解碼圖片緩衝器
120‧‧‧解碼器
121‧‧‧處理器
122‧‧‧記憶體
123‧‧‧輸入/輸出單元
130‧‧‧解碼器
131‧‧‧圖框內隨機存取點解碼器
132‧‧‧相依隨機存取點解碼器
200‧‧‧編碼器
210‧‧‧編碼器
211‧‧‧圖框內隨機存取點編碼器
212‧‧‧相依隨機存取點編碼器
213‧‧‧輸入單元
214‧‧‧輸出單元
215‧‧‧經解碼圖片緩衝器
220‧‧‧編碼器
221‧‧‧處理器
222‧‧‧記憶體
223‧‧‧輸入/輸出單元
230‧‧‧編碼器
231‧‧‧圖框內隨機存取點編碼器
232‧‧‧相依隨機存取點編碼器
300‧‧‧使用者設備
310‧‧‧處理器
320‧‧‧記憶體
330‧‧‧通信電路
340‧‧‧電腦可讀程式/軟體
350‧‧‧載體/電腦可讀儲存媒體/非揮發性電腦可讀儲存媒體/電腦可讀媒體
藉由參考與附圖一起進行之以下闡述可最佳地理解實施例以及其進一步目標及優點，在附圖中：圖1圖解說明具有一初始IRAP圖片及接下來P圖片之一實例性視訊序列；圖2係圖解說明根據一實施例之用於解碼一視訊位元串流之一方法之一流程圖；圖3係圖解說明圖2中所展示之方法之一額外選用步驟之一流程圖；圖4係圖解說明圖2中所展示之方法之額外選用步驟之一流程圖；圖5係圖解說明圖2中所展示之方法之一額外選用步驟之一流程圖； 圖6係圖解說明圖5中所展示之方法之一額外選用步驟之一流程圖；圖7係圖解說明圖2中所展示之方法之一額外選用步驟之一流程圖；圖8係圖解說明圖2中所展示之方法之一額外選用步驟之一流程圖；圖9示意性地圖解說明使用當前HEVC版本1規格之隨機存取組態；圖10圖解說明使用傳統IRAP方法之螢幕內容寫碼之一實例；圖11示意性地圖解說明根據一實施例之使用DRAP圖片之一隨機存取方法；圖12示意性地圖解說明根據另一實施例之使用DRAP圖片之一隨機存取方法；圖13圖解說明根據一實施例之使用DRAP圖片之螢幕內容寫碼之一實例；圖14圖解說明根據另一實施例之使用DRAP圖片之螢幕內容寫碼之一實例；圖15示意性地圖解說明根據又一實施例之使用DRAP圖片之一隨機存取方法；圖16A至圖16C圖解說明使用DRAP圖片及IRAP圖片之週期性隨機存取之實例；圖17係根據一實施例之一伺服器實施方案之一示意性方塊圖；圖18係圖解說明圖7中所展示之方法之額外選用步驟之一流程圖；圖19係圖解說明圖7中所展示之方法之額外選用步驟之一流程圖； 圖20係圖解說明圖7中所展示之方法之額外選用步驟之一流程圖；圖21係圖解說明將一DRAP圖片用於隨機存取操作之一實施例之一流程圖；圖22係更詳細地圖解說明解碼一視訊位元串流之實施例之一流程圖；圖23係圖解說明根據一實施例之用於編碼一視訊串流之一方法之一流程圖；圖24係圖解說明圖23中所展示之方法之一額外選用步驟之一流程圖；圖25係圖解說明圖23中所展示之方法之一額外選用步驟之一流程圖；圖26係圖解說明圖23中所展示之方法之一額外選用步驟之一流程圖；圖27係圖解說明圖26中所展示之方法之額外選用步驟之一流程圖；圖28係圖解說明圖23中所展示之方法之一額外選用步驟之一流程圖；圖29係根據一實施例之一編碼器及一解碼器之一示意性概觀；圖30係根據一實施例之一解碼器之一示意性方塊圖；圖31係根據另一實施例之一解碼器之一示意性方塊圖；圖32係根據又一實施例之一解碼器之一示意性方塊圖；圖33係根據一實施例之一編碼器之一示意性方塊圖；圖34係根據另一實施例之一編碼器之一示意性方塊圖；圖35係根據又一實施例之一編碼器之一示意性方塊圖；及圖36示意性地圖解說明根據一實施例之一電腦程式實施方案。
貫穿圖式，相同參考編號用於類似或對應元件。
本發明實施例一般而言係關於視訊寫碼及解碼，且特定而言係關於在此視訊寫碼及解碼期間引入及使用相依隨機存取點。
實施例介紹關於視訊寫碼及解碼內之隨機存取點(RAP)之一新概念。實施例之RAP圖片不同於傳統上用作一視訊位元串流中之RAP點之IRAP圖片。一IRAP圖片可獨立地解碼，亦即不使用任何參考圖片。實施例之RAP係呈相依隨機存取點(DRAP)圖片之形式之相依RAP。因此，實施例之一DRAP圖片不可獨立地解碼，亦即一DRAP圖片使用至少一個參考圖片，但仍構成一視訊位元串流內之一RAP。一DRAP圖片可使用與一IRAP圖片相比較顯著較少位元來編碼及表示。因此，實施例之DRAP圖片可用於減少一視訊位元串流之總體位元成本或可用於在不增加總體位元成本之情況下增加一視訊位元串流中之RAP之總數。
一DRAP圖片與其他非IRAP圖片之不同之處在於：一DRAP圖片在其可使用之參考圖片方面受限制得多。此等限制使得DRAP圖片能夠用於隨機存取操作。一隨機存取操作係當並非自視訊位元串流之起點開始解碼時。替代地，在視訊位元串流內之某一位置處(在經識別為一隨機存取點之一點處)開始解碼。隨機存取操作之實例包含調諧成廣播TV串流，亦即在開始觀看TV或自一個TV頻道切換至另一TV頻道時。
圖2係圖解說明根據一實施例之用於解碼一視訊位元串流之一方法之一流程圖。該方法包括：在步驟S1中，解碼視訊位元串流之一IRAP圖片。該方法然後繼續至步驟S2，步驟S2包括使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前DRAP圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片。 在步驟S2中解碼之DRAP圖片經編碼為可用於參考之一尾隨圖片。該DRAP圖片構成視訊位元串流中之一隨機存取點。
在步驟S1中解碼之IRAP圖片可在於步驟S2中解碼DRAP圖片時用作參考圖片且因此根據解碼次序係視訊位元串流中之一前面IRAP圖片。獨立地(亦即在不具有任何參考圖片之情況下)解碼IRAP圖片。
在步驟S2中解碼之DRAP圖片(與IRAP圖片形成鮮明對比)具有至少一個參考圖片。此至少一個參考圖片係如在步驟S1中解碼之IRAP圖片及/或視訊位元串流中之根據解碼次序之一先前DRAP圖片。該先前DRAP圖片然後根據解碼次序定位於IRAP圖片與當前DRAP圖片之間。DRAP圖片可僅使用此或此等圖片作為參考圖片且因此不可參考視訊位元串流中之任何其他圖片。
在一實施例中，步驟S2包括僅使用視訊位元串流中之根據解碼次序之一最近的前面IRAP圖片作為DRAP圖片之唯一參考圖片來解碼該DRAP圖片。在此實施例中，DRAP圖片可僅參考視訊位元串流中之根據解碼次序之最近的前面IRAP圖片且在於步驟S2中解碼DRAP圖片之區塊時僅使用此特定IRAP圖片作為參考圖片。
DRAP圖片可經編碼為具有對最近的前面IRAP圖片之一單個參考指示之一時間預測性圖片。此意味DRAP圖片可被視為一P圖片，但具有DRAP圖片構成視訊位元串流中之一RAP而一P圖片無法構成此一RAP之重要差異。在另一實例中，DRAP圖片可被視為一B圖片。在此一情形中，DRAP圖片可含有使用對相同最近的前面IRAP圖片之兩個參考而非對最近的前面IRAP圖片之僅一個參考之區塊。
在解碼DRAP圖片時用作參考圖片之IRAP圖片較佳地係視訊位元串流中之根據解碼次序之最近的前面IRAP圖片。然而，如本文中進一步闡述，在替代實施例中，由DRAP圖片用作參考圖片之IRAP圖片未必必須係視訊位元串流中之最近的前面IRAP圖片，而是可係視訊 位元串流中之根據解碼次序之一前面IRAP圖片。
在另一實施例中，步驟S2包括使用根據解碼次序之一最近的前面DRAP圖片作為DRAP圖片之唯一參考圖片來解碼該DRAP圖片。在此實施例中，DRAP圖片可僅參考另一DRAP圖片且此另一DRAP圖片根據解碼次序係視訊位元串流中之最近的前面DRAP圖片。
在此特定實施例中，另一DRAP圖片又可參考一先前DRAP圖片或IRAP圖片。因此，視訊位元串流中之根據解碼次序在IRAP圖片後面之一第一DRAP圖片參考IRAP圖片，根據解碼次序之第二DRAP圖片參考第一DRAP圖片等等。
DRAP圖片可取決於DRAP圖片類似於一P圖片(單個參考)還是B圖片(兩個參考)經解碼而含有對前面DRAP圖片之一單個參考或兩個參考。
在又一實施例中，步驟S2包括使用根據解碼次序之一最近的前面IRAP圖片及根據解碼次序之一最近的前面DRAP圖片作為DRAP圖片之唯一參考圖片來解碼該DRAP圖片。在此實施例中，DRAP圖片可參考兩個不同圖片。然而，此兩個不同圖片係最近的前面IRAP及DRAP圖片。
圖3係圖解說明圖2中所展示之方法之一額外選用步驟之一流程圖。該方法在步驟S10中開始，步驟S10包括自DRAP圖片之一參考圖片集(RPS)擷取IRAP圖片之一識別符(ID)。DRAP圖片之RPS用信號發送IRAP圖片作為一短期參考圖片或一長期參考圖片。
該方法然後繼續至步驟S1，其中解碼由在步驟S10中自RPS擷取之識別符識別之IRAP圖片以因此將該IRAP圖片用作DRAP圖片之參考圖片。然後在步驟S2中在於步驟S1中解碼之IRAP圖片作為唯一參考圖片之情況下解碼DRAP圖片。
在一替代實施例中，在圖3之步驟S10之前執行圖2之步驟S1。在 此一情形中，IRAP圖片經解碼且儲存於一經解碼圖片緩衝器(DPB)中。然後，剖析DRAP圖片之RPS以便擷取IRAP圖片之識別符。此識別符因此用信號發送如下內容：已經解碼之IRAP圖片應作為一短期參考圖片或長期參考圖片保持儲存於DPB中且在解碼DRAP圖片之區塊時用作參考圖片。
因此，在此實施例中，IRAP圖片係唯一參考圖片且因此在DRAP圖片之RPS中用信號發送IRAP圖片。可取決於經解碼IRAP圖片應保持儲存於一經解碼圖片緩衝器(DPB)中之時間而用信號發送IRAP圖片作為一所謂的短期參考圖片或一長期參考圖片。
如上文所提及，在步驟S2中解碼之DRAP圖片構成視訊位元串流中之一RAP。因此，DRAP圖片可用作視訊位元串流中之一RAP且可用於執行視訊位元串流中之一隨機存取操作，亦即可能在DRAP圖片處執行一隨機存取操作。請注意：在步驟S1中解碼之IRAP圖片亦係視訊位元串流中之一RAP。然而，由IRAP圖片提供之RAP係一獨立RAP，此隱含可在不參考視訊位元串流中之任何其他圖片之情況下解碼IRAP圖片。此與由DRAP圖片提供之RAP形成鮮明對比，由DRAP圖片提供之RAP係一相依RAP，此隱含DRAP圖片參考視訊位元串流中之一先前IRAP圖片及/或DRAP圖片且因此使用此先前IRAP圖片及/或DRAP圖片作為唯一參考圖片來解碼。
該DRAP圖片構成視訊位元串流中之一隨機存取點。此意味可在視訊位元串流中之對應於DRAP圖片之位置處發生一隨機存取操作。然而，DRAP圖片係一相依RAP圖片。此意味在IRAP圖片及/或先前DRAP圖片作為DRAP圖片之唯一參考圖片之情況下解碼DRAP圖片。此意味：為了執行隨機存取操作，亦需要解碼IRAP圖片及/或先前DRAP圖片。然而，不需要解碼IRAP圖片及/或先前DRAP圖片與當前DRAP圖片之間的任何其他圖片以便執行隨機存取操作。因此，在一 特定實施例中，與IRAP圖片及/或先前DRAP圖片一起之DRAP圖片構成視訊位元串流中之一隨機存取點。
DRAP圖片經編碼為可用於參考之一尾隨圖片。因此，在HEVC中，DRAP圖片係一所謂的TRAIL_R圖片。一尾隨圖片係依輸出次序在一相關聯之RAP圖片後面之一圖片。相關聯之RAP圖片依解碼次序係最近的前面RAP圖片。TRAIL_R經定義為可用於參考之一尾隨圖片。因此，視訊位元串流中之依解碼次序在DRAP圖片後面之圖片可參考DRAP圖片且在解碼期間使用DRAP圖片作為參考圖片。
因此，一尾隨圖片係未經標記為一IRAP圖片之一圖片。尾隨圖片依解碼次序在IRAP圖片後面且因此係一IRAP圖片之一尾隨圖片。在HEVC標準中，一尾隨圖片依輸出次序亦在IRAP圖片後面。
一TRAIL_R圖片在HEVC中由一網路抽象層(NAL)類型值1指示。因此，在一實施例中，DRAP圖片包括NAL單元(包括DRAP圖片之經編碼視訊資料)之一NAL單元標頭中之一NAL類型值1。
在一特定實施例中，DRAP圖片經編碼為可用於參考之一尾隨圖片且屬於視訊位元串流之一最低層。因此，在此實施例中，DRAP圖片具有等於0之時間識別符參數(時間id或TemporalId)之一值。0之時間id意味DRAP圖片屬於最低層且可由視訊位元串流中之其他圖片用作參考而不管其他圖片之時間id。
圖4係圖解說明根據各種實施例之圖2中展示之方法之額外選用步驟之一流程圖。該方法自圖2中之步驟S2繼續。下一步驟S20包括解碼依輸出次序及解碼次序在DRAP圖片後面的視訊位元串流之至少一個非RAP圖片。該至少一個非RAP圖片不使用該視訊位元串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
因此，在DRAP圖片後面之非RAP圖片不參考依解碼次序在DRAP圖片前面之任何圖片，惟可能參考用作DRAP圖片之參考之 IRAP圖片及/或先前DRAP圖片例外。此意味：依解碼次序在DRAP圖片前面之非RAP圖片不用作依輸出次序及解碼次序在DRAP圖片後面之任何非RAP圖片之參考圖片。
因此，禁止跨越一DRAP圖片之預測。在DRAP圖片後面之非RAP圖片必須不使用在DRAP圖片前面之任何非RAP圖片或在與DRAP圖片相關聯之IRAP圖片前面之任何圖片進行預測。與DRAP圖片相關聯之IRAP圖片依解碼次序係最近的前面IRAP圖片。
在一特定實施例中，依輸出次序及解碼次序在DRAP圖片後面之圖片可不使用依解碼次序在DRAP圖片前面之任何圖片作為參考圖片，惟依輸出及解碼次序在DRAP圖片後面之圖片可使用與DRAP圖片相關聯之IRAP圖片作為參考圖片例外。
在另一特定實施例中，依輸出次序及解碼次序在DRAP圖片後面之圖片可不使用依解碼次序在DRAP圖片前面之任何圖片作為參考圖片，惟一接下來DRAP圖片可使用IRAP圖片作為參考圖片例外。
在又一特定實施例中，依輸出及解碼次序在DRAP圖片後面之圖片另外可不使用依解碼次序在與DRAP圖片相關聯(亦即在解碼DRAP圖片時用作參考圖片)之IRAP圖片前面之任何RAP圖片。
另一選擇係，三個特定實施例可允許對先前DRAP圖片或先前IRAP圖片(依解碼次序之最近的任何一者)之參考。另一選擇係，三個實施例可允許對先前IRAP圖片及先前DRAP(若存在)兩者之參考。
跨越DRAP圖片之預測之此限制實現高效地使用DRAP圖片作為視訊位元串流中之RAP。若將允許跨越DRAP圖片之預測，則依解碼及輸出次序在DRAP圖片後面之非RAP圖片可能未經正確地解碼(假如DRAP圖片在一隨機存取操作中用作RAP)，此乃因依解碼次序在DRAP圖片前面之任何參考圖片在DPB中可能不可用。
以下兩個步驟S21及S22係關於輸出實施例。步驟S21包括輸出經 解碼DRAP圖片。以下步驟S22包括輸出非RAP圖片。
在步驟S21及S22中輸出之圖片根據可不同於解碼次序之輸出次序經輸出。在隨機存取操作中，解碼以IRAP圖片開始(S1)且然後以構成用於隨機存取操作之RAP之DRAP圖片繼續(S2)。解碼然後以接下來非RAP圖片繼續(S20)。在隨機存取操作之後輸出之第一圖片較佳地係DRAP圖片(S21)且然後依輸出次序輸出非RAP圖片(S22)。
因此，在一較佳實施例中，較佳地不輸出用作DRAP圖片之參考圖片之IRAP圖片。在HEVC中，可藉由將IRAP圖片之一輸出旗標設定為0以指示不應輸出IRAP圖片而用信號發送此。另一選擇係，解碼器可推斷在DRAP圖片前面之圖片之輸出旗標之值為0以因此在於DRAP圖片處進行一隨機存取操作時防止此等前面圖片經輸出。抑制圖片輸出之其他構件可用於非HEVC視訊。
步驟S21及S22中之圖片輸出通常涉及用於顯示之輸出。然而，另一選擇係，輸出可意味用於除顯示以外之目的之輸出。非限制性實例包含用於轉碼之輸出、用於儲存之輸出、例如監督應用中之用於視訊分析之輸出等。
圖5係圖解說明圖2中所展示之方法之一額外選用步驟之一流程圖。該方法在步驟S30中開始，步驟S30包括使用DRAP圖片執行至視訊位元串流中之一隨機存取操作。該方法然後繼續至步驟S1，其中解碼相關聯之IRAP圖片且該IRAP圖片因此在於步驟S2中解碼DRAP圖片時可用作參考。
使用DRAP圖片作為視訊位元串流中之RAP來執行之隨機存取操作可係根據各種實施例。隨機存取係指解碼器在一RAP處開始解碼一視訊位元串流之能力。RAP實現經本地儲存之視訊位元串流中之搜尋、快轉及快退操作，共同稱為技巧模式操作。在視訊按需串流中，伺服器可藉由傳輸自最靠近於搜尋操作之所請求目的地之RAP開始之 資料而對搜尋請求做出回應。不同位元率之視訊位元串流之間的切換係通常用於網際網路之單點傳播串流中以將所傳輸位元率匹配至預期網路通量且避免網路中之擁塞之一方法。切換至另一視訊位元串流在一RAP處係可能的。此外，RAP使得能夠調諧成一廣播或多點傳播且實現頻道切換。另外，一RAP可經寫碼為對源序列中之一場景切入之一回應或寫碼為對一RAP更新請求之一回應。
在一實施例中，關於一DRAP圖片之隨機存取操作構成：解碼IRAP圖片及/或先前DRAP圖片(亦即，DRAP圖片取決於其之圖片)，後續接著在不解碼IRAP圖片與DRAP圖片之間的任何其他圖片之情況下解碼DRAP圖片。
圖6係圖解說明圖5中所展示之方法之一額外選用步驟之一流程圖。該方法自圖2中之步驟S2繼續。下一步驟S40包括推斷依輸出次序在DRAP圖片前面且存在於一經解碼圖片緩衝器中之每一圖片之一各別圖片輸出旗標之一值等於零。
因此，在DRAP圖片處執行視訊位元串流中之一隨機存取操作較佳地與防止依輸出次序在DRAP圖片前面且在解碼DRAP圖片期間仍存在於經解碼圖片緩衝器中之任何圖片之輸出相關聯。在一HEVC實施例中，藉由推斷此等前面圖片(包含在步驟S1中解碼之IRAP圖片)之各別圖片輸出旗標等於0而達成此。
較佳地根據視訊解碼領域內眾所周知之圖框內模式執行圖2之步驟S2中之解碼IRAP圖片。此意味IRAP圖片之區塊(此項技術中通常稱為寫碼單元(CU)或預測單元(PU)或更一般而言稱為像素或樣本區塊)根據一圖框內模式各自經解碼以形成經解碼區塊，其中每一像素或樣本具有至少一個像素或樣本值，諸如一明度值及兩個色度值，或紅色、綠色及藍色值。
在圖2之步驟S2中在IRAP圖片及/或一前面DRAP圖片作為唯一參 考圖片之情況下解碼DRAP圖片。此意味根據一圖框間模式解碼DRAP圖片。此意味DRAP圖片之區塊可呈P區塊、B區塊或I區塊之形式。
在一特定實施例中，藉由以下操作解碼DRAP圖片：使用IRAP圖片及/或前面DRAP圖片作為DRAP圖片之唯一參考圖片來將DRAP圖片之區塊解碼為跳略區塊或解碼為圖框內區塊，較佳地使用IRAP圖片作為DRAP圖片之唯一參考圖片來將DRAP圖片之區塊解碼為跳略區塊或解碼為圖框內區塊。
一跳略區塊隱含該區塊係根據跳略模式使用IRAP圖片及/或前面DRAP圖片作為唯一參考圖片來編碼。此意味自參考圖片中之並列區塊複製跳略區塊之樣本或像素值而不具有任何運動補償。DRAP圖片之區塊之跳略模式與圖框內模式之一組合因此係編碼及解碼DRAP圖片之一高效方式。
因此，較佳地將DRAP圖片之相對於諸如最近的前面IRAP圖片之參考圖片尚未改變或未改變多於某一經定義最小差之彼等區塊編碼及解碼為跳略區塊，然而將DRAP圖片之相對於該參考圖片已改變或改變多於經定義最小差之區塊編碼及解碼為圖框內區塊。
在另一實施例中，若IRAP中之一並列區塊與一另一IRAP圖片中之一各別並列區塊完全相同或相差不超過一經定義臨限值，則使用根據解碼次序的視訊串流之最近的前面IRAP圖片作為該DRAP圖片之唯一參考圖片來將DRAP圖片之一區塊編碼為一跳略區塊，且否則，將DRAP圖片之該區塊編碼為一圖框內區塊。另一IRAP圖片根據解碼次序在視訊串流中之IRAP圖片前面，且較佳地係在編碼IRAP圖片之前編碼之最近的前面IRAP圖片。
在一特定實施例中，若IRAP中之一並列區塊與另一IRAP圖片中及根據解碼次序存在於另一IRAP圖片與該IRAP圖片之間的中間圖片 中之一各別並列區塊完全相同或相差不超過一經定義臨限值，則使用視訊串流之根據解碼次序之最近的前面IRAP圖片作為該DRAP圖片之唯一參考圖片來將DRAP圖片之一區塊編碼為一跳略區塊，且否則，將DRAP圖片之該區塊編碼為一圖框內區塊。
在此特定實施例中，在連續解碼期間，若所參考IRAP圖片遺失但正確地解碼另一IRAP圖片，則將藉由在重建遺失的所參考IRAP圖片時自最新經解碼圖片複製跳略區塊而正確地隱藏已在另一IRAP圖片與所參考IRAP圖片之間靜止的視訊串流之部分。將由DRAP圖片中之圖框內區塊再新已在另一IRAP圖片與所參考IRAP圖片之間改變之視訊串流之部分。
較佳地執行根據一圖框內模式解碼一區塊(亦即解碼一圖框內區塊)，如ITU-T H.265系列H之章節8.4-以圖框內預測模式寫碼之寫碼單元解碼程序(視聽及多媒體系統、視聽服務基礎結構-移動視訊寫碼、高效率視訊寫碼)中規定。較佳地執行根據一圖框間模式解碼一區塊(亦即解碼一圖框間區塊，諸如一跳略區塊)，如ITU-T H.265系列H之章節8.5-以圖框間預測模式寫碼之寫碼單元之解碼程序(視聽及多媒體服務、視聽服務基礎結構-移動視訊寫碼、高效率視訊寫碼)中規定。ITU-T H.265系列H之章節8.5.4.1-綜述(視聽及多媒體系統、視聽服務基礎結構-移動視訊寫碼、高效率視訊寫碼)中尤其闡述解碼跳略區塊(亦即，具有等於1之跳略旗標之一值之區塊)。
在HEVC中，跳略模式類似於新合併模式，惟跳過殘留資料例外。合併模式自四個空間候選者中之一者、一個時間候選者及一零運動候選者選擇運動參數。因此，較佳地在選擇零運動候選者之情況下根據HEVC中之跳略模式解碼一跳略區塊。
使用視訊位元串流中之IRAP圖片及/或先前DRAP圖片作為DRAP圖片之唯一參考圖片來解碼該DRAP圖片。此意味DRAP圖片之區塊 之實際解碼僅使用IRAP圖片及/或先前DRAP圖片作為參考圖片。
在一實施例中，DRAP圖片之參考圖片集(RPS)僅包括IRAP圖片及/或先前DRAP圖片。此意味DRAP圖片之RPS在此第一實施例中將僅含有在解碼DRAP圖片之區塊時可用作參考圖片之圖片或彼等圖片(亦即IRAP圖片及/或先前DRAP圖片)之識別符。
在另一實施例中，DRAP圖片之RPS可包括IRAP圖片及/或先前DRAP圖片且另外可含有視訊位元串流中之根據解碼次序之其他先前圖片。然而，亦在此實施例中，僅使用IRAP圖片及/或先前DRAP圖片作為DRAP圖片之參考圖片來執行DRAP圖片之實際解碼，即使RPS可含有其他圖片。
在使用參考圖片集之HEVC及其他視訊寫碼標準中，使用一圖片作為一參考圖片對應於在RPS之所謂的Curr清單中(亦即RefPicSetStCurrBefore、RefPicSetStCurrAfter或RefPicSetLtCurr中)具有一識別符。此意味：DRAP圖片在其RPS之Curr清單中較佳地僅具有IRAP圖片及/或先前DRAP圖片之識別符。在解碼DRAP圖片時無法用作參考圖片之其他先前圖片之識別符仍可存在於RPS中、DRAP圖片之RPS之Foll清單中，亦即PocStFoll或PocLtFoll中。
根據各種實施例，可用信號發送DRAP圖片作為視訊位元串流中之一DRAP圖片。圖7係圖解說明用信號發送視訊位元串流中之一圖片作為一DRAP圖片之一項實例之一流程圖。
方法包括：在步驟S50中，基於與DRAP圖片相關聯之一補充增強資訊(SEI)訊息而將DRAP圖片識別為一DRAP圖片。該方法然後繼續至圖2中之步驟S1。
在一實例中，SEI訊息與相關聯之圖片一起經發送，從而指示該圖片係一DRAP圖片且因此可用作視訊位元串流中之RAP。因此，SEI訊息在視訊位元串流中之放置指示SEI訊息屬於哪一圖片。
在一實施例中，SEI訊息可係空的且用於向一解碼器、一網路元件或對視訊位元串流進行操作之任何實體指示與SEI訊息相關聯之圖片係一DRAP圖片。
SEI訊息然後可呈以下形式：
在其他實施例中，SEI訊息並非空的，而是可包括下文進一步闡述之額外資訊。
圖8係圖解說明用信號發送視訊位元串流中之一圖片作為一DRAP圖片之另一實例之一流程圖。
該方法包括：在步驟S60中，基於與DRAP圖片相關聯且包含於視訊位元串流之一NAL單元標頭中之一圖片類型識別符而將DRAP圖片識別為一DRAP圖片。
因此，在此實施例中，NAL單元類型之至少一個值專用於用信號發送DRAP圖片。此意味攜載一DRAP圖片之經編碼視訊資料之NAL單元將其NAL單元標頭中之NAL單元類型參數之值設定為專用於DRAP圖片之值。作為一非限制性實例，一NAL單元類型=24可用於用信號發送DRAP圖片。
藉由使IRAP圖片以一週期性間隔編碼而使用當前HEVC版本1規格達成隨機存取。圖9展示在每第8個圖片具有週期性IRAP圖片之情況下HEVC之一隨機存取組態。通常，大約每0.5秒至2秒插入IRAP圖片以用於所廣播之內容。針對一30Hz序列，此意味大約每第15至60個圖片係一IRAP圖片。圖9中之暗灰圖片係IRAP圖片且白色圖片係P圖片或B圖片。
針對螢幕內容或其他一般內容使用傳統隨機存取方法(其中視訊未隨時間更新許多)，可如圖10看到某物。在圖10中所展示之經簡化 實例中，已每第3個圖片插入一IDR圖片。出於說明性目的，區塊亦比其針對藉助HEVC在一更正常解析度下編碼之視訊將成為之樣子大得多。在此實例中，P圖片參考其各別先前圖片。針對每一IDR圖片，藉由圖框內寫碼圖片中之每一區塊而瞬間再新視訊。在圖10中，以暗灰標記圖框內區塊，以灰色標記圖框間區塊(此等區塊中之某些區塊亦可係圖框內區塊)且白色區塊係跳略區塊。
諸如螢幕共享及螢幕監視之特定螢幕內容服務變得愈來愈受歡迎。螢幕內容對視訊寫碼提出不同於普通視訊寫碼之編碼之要求。典型螢幕內容包含具有銳邊、圖形與文字、不同顏色及趨勢之視窗以具有視訊圖片之長時間週期未經更新之區域。在HEVC版本1之發展期間，未明確論述螢幕內容寫碼(SCC)之特殊特性。JCT-VC因此現在致力於明確地以SCC為目標之HEVC之一擴展。
將在下文更詳細地進一步闡述各種實施例。
實施例1- 僅參考IRAP之DRAP
在本發明之一第一實施例中，引入一新的相依RAP(DRAP)圖片。此類型之DRAP圖片稱為DRAP1。DRAP1圖片中之區塊可僅參考一先前IRAP圖片。不允許對其他圖片之參考。圖11中圖解說明預測圖案，其中暗灰圖片係一IRAP圖片，中灰圖片係DRAP1圖片且白色圖片係P圖片或B圖片。DRAP1圖片可僅參考IRAP圖片。
依輸出次序在DRAP1圖片後面之圖片不會將依輸出次序或解碼次序在DRAP1圖片前面之任何圖片用於參考，惟其他後續DRAP1圖片亦可將相關聯之IRAP圖片用於參考例外。
為解碼一DRAP1圖片，需要解碼先前所參考IRAP圖片。藉由不必須使用圖框內寫碼來編碼DRAP1圖片中之所有區塊，可節省許多位元率。但是，可藉由僅必須參考先前IRAP圖片而實現某一位準之隨機存取。
可取決於距IRAP圖片之距離用信號發送所參考IRAP圖片作為RPS中之一短期圖片或一長期圖片，在DRAP1圖片之RPS中用信號發送IRAP圖片。
實施例2-參考其他DRAP或IRAP之DRAP
在本發明之一第二實施例中，引入另一版本之DRAP圖片，在本文中表示為DRAP2。DRAP2圖片中之區塊可僅參考一先前IRAP圖片或一先前DRAP2圖片。不允許對其他圖片之參考。圖12中圖解說明預測圖案(自每一DRAP2圖片省略對IRAP圖片之可能參考)。暗灰圖片係一IRAP圖片，中灰圖片係DRAP2圖片且白色圖片係P圖片或B圖片。DRAP2圖片可僅參考一先前DRAP2圖片或一先前IRAP圖片。
依輸出次序在DRAP2圖片後面之圖片不會將依輸出次序或解碼次序在DRAP圖片前面之任何圖片用於參考，惟其他後續DRAP圖片亦可將相關聯之IRAP圖片或相關聯之DRAP2圖片用於參考例外。
為解碼一DRAP2圖片，需要解碼先前參考之DRAP2圖片往回至先前IRAP圖片。藉由允許將先前DRAP2圖片用於參考，DRAP參考之間的距離較短且可比DRAP1圖片節省甚至更多位元率。但是，可藉由僅必須參考先前DRAP2圖片往回至先前IRAP圖片而實現某一位準之隨機存取。
為理解可自使用實施例1及2中之相依隨機存取方法獲益多少，使用JCT-VC HEVC螢幕內容寫碼(SCC)標準化活動之隨機存取測試組態(其中在JCT-VC HEVC v1及JCT-VC HEVC SCC之發展期間使用測試序列)進行三個模擬。隨機存取測試組態使用階層式B圖片。在第一錨點模擬中，每第32個圖片插入CRA圖片。在第二模擬中，在如實施例1中僅參考第一IDR圖片之情況下每第32個圖片插入P圖片。在模擬實施例2之第三模擬中，在僅參考先前P圖片之情況下或在第一GOP之情形中在僅參考第一IDR圖片之情況下每第32個圖片插入P圖片。
針對所有三個模擬，改變組態測試檔案以使用32個圖片之一GOP結構，其中重複8個圖片之原始GOP結構4次。為實施實施例1之模擬，用信號發送第一IDR圖片作為RPS中之一長期圖片且使該第一IDR圖片保持於經解碼圖片緩衝器中。為實施實施例2，將GOP之第一圖片(第一GOP之第一IDR或其他GOP之先前P圖片)添加至RPS之後部以用作下一GOP之第一圖片之一參考。
為在三個情形之間進行一公平比較，使用完全相同之GOP結構，其中僅有差異係：每第32個圖片係一CRA、DRAP1(參考第一IDR之P圖片)或一DRAP2(參考先前DRAP2/IDR之P圖片)。
下文之表3及4展示JCT-VC HEVC v1及JCT-VC SCC測試序列之CRA錨點與實施例1(DRAP1)及2(DRAP2)之間的明度Bjontegaard差量(BD Y)比率。
可注意，增益對於螢幕內容特定序列(SlideEditing、sc_desktop、sc_web_browsing、sc_map、Basketball_Screen、MissionControlClip2及MissionControlClip3)然後對於一般內容序列通常係較高的。JCT-VC SCC測試集合中之螢幕內容序列由於為螢幕內容而通常具有相對現用內容，其中視窗彈出且在周圍移動許多。在其中在一長時間週期內未發生什麼事情之一情景中，增益將顯著較高。
實施例3- 僅使用圖框內區塊或跳略區塊之DRAP
在本發明之一第三實施例中，對DRAP圖片設定一限制以僅允許係圖框內寫碼或使用如上文實施例中之任一者中所闡述之所參考圖片寫碼為一跳略之區塊。
在此實施例之一個版本中，形成如下之一額外限制：為將一區塊編碼為一DRAP圖片中之一跳略，所有前面圖片往後至所參考IRAP或DRAP圖片中之所有對應區塊必須係完全相同的。若所參考IRAP圖片遺失，則此將藉由複製參考遺失IRAP圖片之區塊之先前經解碼圖片而幫助一解碼器進行一良好隱藏。
關於此實施例，與實施例1或2中之解決方案相比較位元率將可能較高，但位元串流之抗錯穩健性經改良。若由僅含有圖框內或跳略區塊之一DRAP圖片參考之圖片(IRAP或DRAP)遺失，則可能藉由自先前經解碼圖片複製遺失區塊而正確地解碼DRAP圖片，但僅在正確地解碼在所參考圖片前面之一圖片之情況下。在具有靜態場景之一螢幕內容情景中尤其如此。
圖13中展示使用DRAP1隨機存取方法(其中僅允許圖框內或跳略)進行螢幕內容寫碼之一實例。在此實例中，P圖片參考先前圖片。針對DRAP1圖片中之區塊(其中圖片已自最後一IDR圖片以來改變)，執行圖框內寫碼。跳過DRAP1圖片中之區塊(其中視訊尚未改變)。在圖13中以暗灰標記圖框內區塊，以灰色標記圖框間區塊(此等區塊中之 某些區塊亦可係圖框內區塊)且白色區塊係跳略區塊。
圖14中展示使用DRAP2隨機存取方法(其中僅允許圖框內或跳略)進行螢幕內容寫碼之一實例。在此實例中，P圖片參考先前圖片。針對DRAP2圖片中之區塊(其中圖片已自最後一DRAP2圖片以來(自第一DRAP2圖片之IDR圖片以來)改變)，執行圖框內寫碼。跳過DRAP2圖片中之區塊(其中視訊尚未改變)。在圖14中以暗灰標記圖框內區塊，以灰色標記圖框間區塊(此等區塊中之某些區塊亦可係圖框內區塊)且白色區塊係跳略區塊。
在僅使用圖框內及跳略編碼DRAP時降低在一DRAP圖片處執行隨機存取之計算複雜性，此乃因在解碼DRAP圖片期間不需要執行運動補償及子像素內插。
此外，當在僅使用圖框內或跳略區塊之一DRAP圖片處執行一隨機存取時，可不需要完全解碼所參考先前IRAP圖片或其他DRAP圖片。在解碼當前DRAP圖片時不需要且在解碼所參考圖片時可忽略對應於當前DRAP圖片中之圖框內區塊的所參考圖片中之區塊。
實施例4-參考先前圖片(惟在參考先前DRAP/IRAP時之隨機存取(RA)操作中)之DRAP例外
在本發明之一第四實施例中，引入另一DRAP圖片類型，在本文中將其稱為DRAP3。DRAP3圖片如同DRAP1或DRAP2圖片類似地表現，但DRAP3圖片中之區塊可使用先前圖片作為參考來圖框內寫碼或跳略且具有此圖片之對應區塊必須與先前DRAP3或IRAP圖片中之並列區塊完全相同之額外限制。因此，在全解碼中，使用對先前圖片之一參考，可針對自最後一IRAP圖片以來未改變之區塊以一直接方式進行一正常跳略。在諸如快轉播放中之一隨機存取操作之情形中，DRAP3圖片之所參考圖片與先前經解碼DRAP3或IRAP圖片交換。
圖15圖解說明使用DRAP3圖片之一隨機存取方法之一實例。暗 灰圖片係一IRAP圖片，中灰圖片係DRAP3圖片且白色圖片係P圖片或B圖片。在全解碼模式中，先前圖片用作參考以用於跳略之寫碼。在隨機存取解碼模式中，先前DRAP3或IRAP圖片替代地用作參考以用於跳略之寫碼。
關於此實施例之一優點係：僅若解碼器知曉其可使用一DRAP3圖片來執行一隨機存取操作，則解碼器需要儲存先前DRAP3及IRAP圖片。
在此實施例中闡述：跳略應參考先前圖片。然而，在某些寫碼組態中，例如當使用階層式B圖片時，DRAP3圖片參考另一先前圖片以用於跳略可係更自然的。只要所參考區塊與先前DRAP3或IRAP圖片中之對應區塊完全相同，此即亦將係不錯的。
實施例5-可使用不同週期性之IRAP及DRAP
上文實施例中之DRAP1、DRAP2或DRAP3圖片不需要替換在第一IDR圖片後面之所有IRAP圖片。可期望使用IRAP圖片之全隨機存取按照比DRAP圖片更粗糙之一間隔。換言之，可以不如DRAP圖片頻繁之一週期性插入IRAP圖片。圖16A至圖16C展示其中使用DRAP1、DRAP2或DRAP3圖片來每第8個圖片提供相依隨機存取且使用IDR圖片來每第24個圖片提供全隨機存取之實例。在一更現實情形中，可大約每1秒至2秒插入DRAP1、DRAP2或DRAP3圖片且每10秒至60秒插入IRAP圖片。在圖16A至圖16C中，藉由提供DRAP1(圖16A)、DRAP2(圖16B)或DRAP3(圖16C)圖片而每第8個圖片提供相依隨機存取。每第24個圖片插入IRAP圖片以提供全隨機存取，但具有額外位元率懲罰。暗灰圖片係IRAP圖片，中灰圖片係DRAP圖片且白色圖片係P圖片或B圖片。
在螢幕共享及監督情景或記錄及儲存視訊材料通常受關注之類似情景中，DRAP圖片可係有用的。藉由使用具有一短週期性之 DRAP圖片及具有一較長週期性之IRAP圖片(舉例而言，每秒之DRAP圖片及每60秒之IRAP圖片)，可減小位元率同時可容易地搜尋所儲存視訊。此外，此等服務之視訊連結不可能總是沒有錯誤。使用僅具有圖框內或跳略區塊之DRAP圖片與不具有任何隨機存取點相比較增加串流之抗錯穩健性。
實施例6- 用信號發送DRAP作為NAL單元標頭中之DRAP自身之圖片類型
在本發明之一第六實施例中，如先前實施例中之任一者中定義之DRAP圖片在HEVC或另一視訊寫碼標準中以DRAP圖片自身之圖片類型經定義。在視訊位元串流之NAL單元標頭中使用其自身之值nal_unit_type用信號發送DRAP圖片類型。下文之表5展示可如何修改當前HEVC推薦之NAL單元類型代碼及NAL單元類型類別表以包含DRAP nal_unit_type。
實施例7
在本發明之一實施例中，伴隨如實施例1至6中之任一實施例中定義之DRAP圖片之資料向一解碼器、一網路元件或對視訊位元串流操作之任何實體指示為了解碼DRAP圖片需要哪一IRAP圖片。
一解碼器可使用此實施例以藉由以下有序步驟執行隨機存取：
1.該解碼器解碼伴隨DRAP圖片之資料且導出對IRAP圖片之一指示。
2.該解碼器使用對IRAP圖片之指示來擷取構成IRAP圖片之經壓縮資料。
3.該解碼器解碼IRAP圖片。
4.該解碼器解碼DRAP圖片且輸出其。
5.該解碼器解碼依解碼次序及輸出次序在DRAP後面之圖片且輸出彼等圖片。
一編碼器可在以下有序步驟中使用此實施例：
1.該編碼器編碼一IRAP圖片且將該IRAP圖片儲存於一經解碼圖片緩衝器中以供未來參考。
2.該編碼器編碼僅參考IRAP圖片之一圖片且將此圖片標記為一DRAP圖片。該編碼器亦產生對IRAP圖片之一指示且編碼此指示。
3.該編碼器藉由僅允許對IRAP圖片、DRAP圖片及依解碼及輸出次序兩者在DRAP圖片後面之圖片之參考而編碼依解碼及輸出次序在DRAP圖片後面之圖片。
在此實施例之一個版本(針對其如在實施例2、4及5中之任一者中定義DRAP圖片)中，伴隨DRAP圖片之資料向一解碼器指示為了解碼DRAP圖片需要哪些IRAP圖片及先前DRAP圖片。
實施例8
在本發明之一實施例中，伴隨IRAP圖片之資料向一解碼器、一網路元件或對位元串流操作之任何實體指示如實施例1至6中任一者中定義之哪一(些)DRAP圖片取決於IRAP圖片。
一解碼器可使用此實施例以藉由以下有序步驟執行隨機存取：
1.該解碼器解碼伴隨一當前DRAP圖片之資料且導出對解碼當前DRAP圖片所需要之IRAP圖片及DRAP圖片之指示。
2.該解碼器使用對IRAP及DRAP圖片之指示來擷取構成IRAP及DRAP圖片之經壓縮資料。
3.該解碼器解碼在步驟1中指示之IRAP圖片及DRAP圖片。
4.該解碼器解碼當前DRAP圖片且輸出其。
5.該解碼器解碼依解碼次序及輸出次序在當前DRAP後面之圖片且輸出彼等圖片。
一編碼器可在以下有序步驟中使用此實施例：
1.該編碼器編碼一IRAP圖片及至少一個DRAP圖片且將其等儲存於一經解碼圖片緩衝器中以供未來參考。
2.該編碼器編碼僅參考IRAP圖片及至少一個DRAP圖片之一當前DRAP圖片且將此當前DRAP圖片標記為一DRAP圖片。該編碼器亦產生對IRAP圖片及至少一個DRAP圖片之指示且編碼此等指示。
3.該編碼器藉由僅允許對IRAP圖片、至少一個DRAP圖片、當前 DRAP圖片及依解碼及輸出次序兩者在當前DRAP圖片後面之圖片之參考而編碼以解碼及輸出次序在當前DRAP圖片後面之圖片。
實施例9
在本發明之一實施例中，一解碼器藉由解碼一IRAP圖片及取決於該IRAP圖片之一DRAP圖片而執行快轉。
在此實施例之其他版本中，一解碼器藉由解碼一IRAP圖片及取決於該IRAP圖片之一DRAP圖片而執行其他技巧播放操作。此等技巧播放操作包含倒轉、向前跳越(jump forward)、向後跳越(jump backward)及轉至適當位置。
實施例10
在本發明之一實施例中，在視訊位元串流中提供亦稱作HEVC規格中之替代假想參考解碼器(HRD)參數之替代緩衝器參數。
由編碼器用信號發送此等替代緩衝器參數以為一解碼器指示在開始解碼之前其應緩衝多少視訊位元串流以避免緩衝器溢位及/或欠載運行。
一編碼器可在以下有序步驟中使用此實施例：
1.該編碼器編碼一DRAP圖片。
2.已知相關聯之IRAP及DRAP圖片存在於一經修剪位元串流中(其中自位元串流移除在IRAP圖片之前之圖片及介於IRAP圖片與DRAP圖片之間的圖片)，該編碼器計算緩衝器狀態。
3.已知視訊位元串流根據步驟2經修剪，該編碼器用信號發送視訊位元串流中之緩衝器參數，此向一解碼器指示在隨機存取時緩衝多少資料。
一解碼器可在以下有序步驟中使用此實施例：
1.由一解碼器完成一串流中之隨機存取。隨機存取點係含有一IRAP圖片及一DRAP圖片之一相依隨機存取點(DRAP)。
2.解碼器自視訊位元串流接收替代緩衝器參數，此指示在開始解碼之前緩衝多少資料以便在使用一IRAP圖片及一DRAP圖片進行隨機存取時避免緩衝器溢位及/或欠載運行。
3.該解碼器緩衝如由所接收替代緩衝器參數規定之資料。
4.該解碼器在已接收到由替代緩衝器參數規定之資料量之後開始解碼視訊資料。
實施例11
在本發明之一實施例中，一伺服器(參見圖17)提取一IRAP圖片，標記該IRAP圖片使得該IRAP圖片不由解碼器輸出，且將該IRAP圖片、一接下來DRAP圖片及接下來圖片轉發至一用戶端。
實施例12- SEI訊息實例
在本發明之一實施例中，使用一SEI訊息用信號發送實施例1至6中之任一者中所闡述之DRAP圖片之存在及限制。在此實施例中，一特定DRAP nal_unit_type係不必要的。在實施例1至6中之任一者中存在限制之情況下編碼DRAP圖片，諸如P圖片。
在具有以上實施例中之任一者中所闡述之限制之情況下，SEI訊息與一相關聯之圖片一起經發送，從而指示或識別該圖片係一DRAP圖片。
SEI實例1
舉例而言，SEI訊息可如此經結構化：
此SEI訊息係空的且用於向一解碼器、一網路元件或對視訊位元串流操作之任何實體指示：與SEI訊息相關聯之圖片係一DRAP圖片，且將不進行跨越此DRAP圖片之預測。
DRAP圖片可用於預測之IRAP圖片係依解碼次序相對於DRAP圖 片最近的先前IRAP圖片。
可限制DRAP圖片，使得其必須係具有時間id 0之TRAIL_R圖片。尾隨圖片係依輸出次序在一相關聯之RAP圖片後面之圖片。TRAIL_R經定義為可用於參考之一尾隨圖片。一時間id 0意味該圖片屬於最低層且可由其他圖片用作參考而不論其他圖片之時間id。
在其他實例性實施例中，SEI訊息未必係空的。現在將在本文中且參考圖18至圖20進一步闡述各種此等實例性實施例。
SEI實例2
SEI訊息之另一版本可如此經結構化：
圖18係圖解說明圖7中之方法之額外選用步驟之一流程圖。該方法自圖7中之步驟S50繼續。下一步驟S70包括自SEI訊息擷取一中斷連結旗標。該方法進一步包括：基於中斷連結旗標之一值而判定藉由在IRAP圖片處開始解碼而產生之圖片就不應顯示在DRAP圖片前面之經解碼圖片而言是否可含有不合意之視覺假影。
在一特定實施例中，此判定包括：在步驟S71中，調查中斷連結旗標之值是否等於1。若該值等於1，則方法繼續至步驟S72，步驟S72包括判定藉由在IRAP圖片處開始解碼而產生之圖片就不應顯示在DRAP圖片前面之經解碼圖片而言可含有不合意之視覺假影。
相依RAP指示SEI訊息輔助一解碼器判定需要解碼一視訊位元串流之什麼部分以便實現與相依RAP指示SEI訊息相關聯之圖片及依輸出次序在其後面之圖片之正確解碼。
與相依RAP指示SEI訊息相關聯之圖片稱為DRAP圖片。DRAP圖片可將其相關聯之IRAP圖片用於參考但不會將任何其他圖片用於參 考。
當在DRAP圖片處執行隨機存取時，應推斷pic_output_flag之值針對依輸出次序在DRAP圖片前面之所有圖片等於0。依輸出次序在DRAP圖片前面之經解碼圖片可含有對經解碼圖片緩衝器中不可用之圖片之參考。
依輸出次序在DRAP圖片後面之圖片不會將依輸出次序或解碼次序在DRAP圖片前面之任何圖片用於參考，惟其他後續DRAP圖片亦可將相關聯之IRAP圖片用於參考例外。
broken_link_flag指示NAL單元串流中之一中斷連結在相依rap指示SEI訊息之位置處之存在或不存在且被指派如下之進一步語意：
- 若broken_link_flag等於1，則藉由在一先前IRAP存取單元之位置處開始解碼程序而產生之圖片就不應顯示在與相依RAP指示相關聯之存取單元前面之經解碼圖片而言可含有不合意之視覺假影。
- 否則(broken_link_flag等於0)，未給出關於視覺假影之任何可能存在之指示。
在此實例中，未在SEI訊息中明確地用信號發送與DRAP圖片相關聯之IRAP圖片之一參考指示符，但可自RPS或藉由其他手段獲得該參考指示符。
SEI實例3
SEI訊息之其他版本可如此經結構化：
圖19係圖解說明圖7中之方法之額外選用步驟之一流程圖。該方法自圖7中之步驟S50繼續。下一步驟S80包括自SEI訊息擷取一僅跳略或圖框內區塊旗標。該方法進一步包括：基於該僅跳略或圖框內區塊旗標之一值而判定DRAP圖片是否僅包括圖框內寫碼區塊或具有設定為1之一跳略旗標之跳略區塊。
在一特定實施例中，此判定包括：在步驟S81中，調查該僅跳略或圖框內區塊旗標之值是否等於1。若該值等於1，則方法繼續至步驟S82，步驟S82包括判定DRAP圖片僅包括圖框內寫碼區塊或具有設定為1之一跳略旗標之跳略區塊。
SEI訊息可包括僅跳略或圖框內區塊旗標(如上文所展示)或僅跳略或圖框內區塊旗標及先前所闡述之中斷連結旗標兩者。
broken_link_flag在存在之情況下如在SEI實例2中經定義。
only_skip_or_intra_block_flag根據如下內容指示DRAP圖片是否僅含有圖框內寫碼區塊或具有設定為1之cu_skip_flag之區塊：
- 若only_skip_or_intra_block_flag等於1，則DRAP圖片應僅含有圖框內寫碼區塊或具有設定為1之cu_skip_flag之區塊。
- 否則，若only_skip_or_intra_block_flag等於0，則DRAP圖片可含有除圖框內寫碼區塊或具有設定為1之cu_skip_flag之區塊以外之區塊。
SEI實例4
SEI訊息之其他版本可如此經結構化：
圖20係圖解說明圖7中之方法之額外選用步驟之一流程圖。該方法自圖7中之步驟S50繼續。下一步驟S90包括自SEI訊息擷取一參考圖片差量識別符。該方法進一步包括：在步驟S92中，若參考圖片差量識別符大於零，則基於DRAP圖片之一圖片次序計數(POC)值及參考圖片差量識別符而計算IRAP圖片之一POC值。該方法亦包括：在步驟S93中，若參考圖片差量識別符大於零，則基於所計算之POC值而識別IRAP圖片；及若參考圖片差量識別符等於零，則將IRAP圖片識別為視訊位元串流中之一最近的前面IRAP圖片。
在一特定實施例中，該方法亦包括：在步驟S91中，調查參考圖片差量識別符之一值。若該值不同於零，則方法繼續至步驟S92，其中計算用作DRAP圖片之參考圖片之IRAP圖片之POC值，較佳地等於POC(IRAP)=POC(DRAP)-(reference_irap_picture_poc_delta_idc_minus1 +1)。方法然後繼續至步驟S43，其中基於所計算之POC值而識別IRAP圖片。
然而，若步驟S91中之調查得出結論：參考圖片差量識別符之值等於零，則方法直接繼續至步驟S93，步驟S93包括將IRAP圖片識別為視訊位元串流中之最近的前面IRAP圖片。因此，在此情形中不需要POC值之計算。
在此等實例中，IRAP圖片之POC值將總是低於DRAP圖片之POC值，此乃因IRAP依解碼及輸出次序在DRAP圖片前面。此意味參考圖片差量識別符將係零或一正整數。
SEI訊息可包含僅參數參考圖片差量識別符或與如上文所指示之中斷連結旗標及/或僅跳略或圖框內區塊旗標一起之參考圖片差量識別符。
相依RAP指示SEI訊息輔助一解碼器判定需要解碼一視訊位元串流之什麼部分以便實現與相依RAP指示SEI訊息相關聯之圖片及依輸出次序在其後面之圖片之正確解碼。
與相依RAP指示SEI訊息相關聯之圖片稱為DRAP圖片。DRAP圖片可將其相關聯之IRAP圖片用於參考但不會將任何其他圖片用於參考。
當在DRAP圖片處執行隨機存取時，應推斷pic_output_flag之值針對依輸出次序在DRAP圖片前面之所有圖片等於0。依輸出次序在DRAP圖片前面之經解碼圖片可含有對經解碼圖片緩衝器中不可用之圖片之參考。
依輸出次序在DRAP圖片後面之圖片不會將依輸出次序或解碼次序在DRAP圖片前面之任何圖片用於參考，惟其他後續DRAP圖片亦可將相關聯之IRAP圖片用於參考例外。
broken_link_flag在存在之情況下如在SEI實例2中經定義。
only_skip_or_intra_block_flag在存在之情況下如在SEI實例3中經定義。
referenced_irap_picture_poc_delta_idc_minus1規定DRAP圖片之POC與由DRAP圖片參考之IRAP圖片之POC之間的差減1。
SEI實例5
在實施例之進一步版本中，SEI訊息可如此經結構化：
此等版本類似於上文，但在此情形中，若referenced_irap_picture_poc_delta_idc之值大於零，則在步驟S42中將IRAP圖片之POC值計算為POC(IRAP)=POC(DRAP)- reference_irap_picture_poc_delta_idc。
相依RAP指示SEI訊息輔助一解碼器判定需要解碼一視訊位元串流之什麼部分以便實現與相依RAP指示SEI訊息相關聯之圖片及依輸出次序在其後面之圖片之正確解碼。
與相依RAP指示SEI訊息相關聯之圖片稱為DRAP圖片。DRAP圖片可將其相關聯之IRAP圖片用於參考但不會將任何其他圖片用於參考。
當在DRAP圖片處執行隨機存取時，應推斷pic_output_flag之值針對依輸出次序在DRAP圖片前面之所有圖片等於0。依輸出次序在DRAP圖片前面之經解碼圖片可含有對經解碼圖片緩衝器中不可用之圖片之參考。
依輸出次序在DRAP圖片後面之圖片不會將依輸出次序或解碼次序在DRAP圖片前面之任何圖片用於參考，惟其他後續DRAP圖片亦可將相關聯之IRAP圖片用於參考例外。
broken_link_flag在存在之情況下如在SEI實例2中經定義。
only_skip_or_intra_block_flag在存在之情況下如在SEI實例3中經定義。
referenced_irap_picture_poc_delta_idc在大於零時規定DRAP圖片之POC與由DRAP圖片參考之IRAP圖片之POC之間的差。當referenced_irap_picture_poc_delta_idc等於0時，DRAP將先前IRAP圖片用於參考。
如所見，可以兩種不同方式規定對IRAP圖片之參考，藉由使用差量idc之明確參考或例如先前IRAP圖片用於參考。不總是使用明確參考之原因係：針對其中在系統層處以任何方式用信號發送IRAP及可能DRAP之某些系統應用，獲得POC值可有點兒麻煩。此外，藉由不明確地用信號發送參考而節省一些位元。
SEI實例6
SEI訊息之再一版本可如此經結構化：
相依RAP指示SEI訊息輔助一解碼器判定需要解碼一視訊位元串流之什麼部分以便實現與相依RAP指示SEI訊息相關聯之圖片及依輸出次序在其後面之圖片之正確解碼。
與相依RAP指示SEI訊息相關聯之圖片稱為DRAP圖片。DRAP圖片可將其相關聯之IRAP圖片用於參考但不會將任何其他圖片用於參考。
當在DRAP圖片處執行隨機存取時，應推斷pic_output_flag之值 針對依輸出次序在DRAP圖片前面之所有圖片等於0。依輸出次序在DRAP圖片前面之經解碼圖片可含有對經解碼圖片緩衝器中不可用之圖片之參考。
依輸出次序在DRAP圖片後面之圖片不會將依輸出次序或解碼次序在DRAP圖片前面之任何圖片用於參考，惟其他後續DRAP圖片亦可將相關聯之IRAP圖片用於參考例外。
broken_link_flag在存在之情況下如在SEI實例2中經定義。
only_skip_or_intra_block_flag在存在之情況下如在SEI實例3中經定義。
referenced_irap_picture_poc_lsb規定由DRAP圖片參考之IRAP圖片之POC最低有效位(lsb)。
然後基於參數referenced_rap_picture_poc_lsb而計算IRAP圖片之POC值，因此允許用作DRAP圖片之參考圖片之IRAP圖片之識別。
可在ITU-T H.265系列H之章節8.3.2-參考圖片集之解碼程序(視聽及多媒體系統、視聽服務基礎結構-移動視訊寫碼、高效率視訊寫碼)中找到如何基於參數referenced_rap_picture_poc_lsb而計算IRAP圖片之POC值之更多資訊。
SEI實例7
SEI訊息之再一版本可如此經結構化：
相依RAP指示SEI訊息輔助一解碼器判定需要解碼一視訊位元串流之什麼部分以便實現與相依RAP指示SEI訊息相關聯之圖片及依輸出次序在其後面之圖片之正確解碼。
與相依RAP指示SEI訊息相關聯之圖片稱為DRAP圖片。DRAP圖片可將其相關聯之IRAP圖片用於參考但不會將任何其他圖片用於參考。
當在DRAP圖片處執行隨機存取時，應推斷pic_output_flag之值針對依輸出次序在DRAP圖片前面之所有圖片等於0。依輸出次序在DRAP圖片前面之經解碼圖片可含有對經解碼圖片緩衝器中不可用之 圖片之參考。
依輸出次序在DRAP圖片後面之圖片不會將依輸出次序或解碼次序在DRAP圖片前面之任何圖片用於參考，惟其他後續DRAP圖片亦可將相關聯之IRAP圖片用於參考例外。
broken_link_flag在存在之情況下如在SEI實例2中經定義。
only_skip_or_intra_block_flag在存在之情況下如在SEI實例3中經定義。
implicitly_reference_previous_irap_picture_flag根據如下內容指示先前IRAP圖片是否由與相依RAP指示SEI訊息相關聯之DRAP圖片參考：
- 若implicitly_reference_previous_irap_picture_flag等於1，則DRAP圖片參考先前IRAP圖片而不在相依RAP指示SEI訊息中明確地參考此IRAP圖片。
- 否則，若implicitly_reference_previous_irap_picture_flag等於0，則在相依RAP指示SEI訊息中明確地用信號發送針對由DRAP圖片參考之IRAP圖片之一參考指示符。
referenced_irap_picture_poc_lsb規定由DRAP圖片參考之IRAP圖片之POC最低有效位元組。
另一選擇係，使用明確地參考之先前IRAP圖片旗標之此實例性實施例可與參數referenced_irap_picture_poc_delta_idc_minus1或referenced_irap_picture_poc_delta_idc而非referenced_irap_picture_poc_lsb一起使用。
SEI實例8
SEI訊息之再一版本可如此經結構化：
相依RAP指示SEI訊息輔助一解碼器判定需要解碼一視訊位元串流之什麼部分以便實現與相依RAP指示SEI訊息相關聯之圖片及依輸出次序在其後面之圖片之正確解碼。
與相依RAP指示SEI訊息相關聯之圖片稱為DRAP圖片。該DRAP圖片可將一相關聯之IRAP圖片或一相關聯之DRAP圖片用於參考，但不會將任何其他圖片用於參考。
當在DRAP圖片處執行隨機存取時，應推斷pic_output_flag之值針對依輸出次序在DRAP圖片前面之所有圖片等於0。依輸出次序在DRAP圖片前面之經解碼圖片可含有對經解碼圖片緩衝器中不可用之圖片之參考。
依輸出次序在DRAP圖片後面之圖片不會將依輸出次序或解碼次序在DRAP圖片前面之任何圖片用於參考，惟其他後續DRAP圖片亦可將相關聯之IRAP圖片或相關聯之DRAP圖片用於參考例外。
broken_link_flag在存在之情況下如在SEI實例2中經定義。
only_skip_or_intra_block_flag在存在之情況下如在SEI實例3中經定義。
reference_dependent_rap_flag根據如下內容指示與相依RAP指示SEI訊息相關聯之圖片是否參考一IRAP圖片或另一DRAP圖片：
- 若reference_dependent_rap_flag等於1，則與相依RAP指示SEI訊息相關聯之圖片參考另一DRAP圖片。
- 否則，若reference_dependent_rap_flag等於0，則與相依RAP指示SEI訊息相關聯之圖片參考一IRAP圖片。
nbr_pictures_in_reference_chain_minus1規定透過自與相依RAP指示SEI訊息相關聯之DRAP圖片至一IRAP圖片之一參考鏈連結之圖片數目減去1。僅若reference_dependent_rap_flag等於1，則設定此變數。
reference_picture_poc_delta_idc在大於零時規定與相依RAP指示SEI訊息相關聯之DRAP圖片之POC與自與相依RAP指示SEI訊息相關聯之圖片至一IRAP圖片之參考圖片鏈中之一參考圖片之POC之間的差。當reference_picture_poc_delta等於0時，DRAP圖片將先前IRAP圖片及先前其他DRAP圖片中之最新者用於參考。
另一選擇係，使用參考相依RAP旗標及參考鏈中之圖片數目之此實例性實施例可與參數referenced_irap_picture_poc_delta_idc_minus1或referenced_irap_picture_poc_lsb而非referenced_irap_picture_poc_delta_idc一起使用。
實施例之一態樣係關於用於解碼一視訊位元串流之一方法，該方法包括以下步驟(參見圖21)：-解碼一圖框內隨機存取點(IRAP)圖片；-解碼僅取決於該IRAP圖片之一圖框間圖片，該圖框間圖片稱為相依隨機存取點(DRAP)圖片；及-使用該DRAP圖片來執行一隨機存取操作。
在一實施例中，該方法進一步包括：-解碼取決於一先前DRAP圖片之一額外DRAP圖片；及-使用該額外DRAP圖片來執行一隨機存取操作。
在一實施例中，連續解碼中之DRAP圖片參考另一先前圖片，且在隨機存取操作中參考先前IRAP或DRAP圖片；兩個參考皆導致相同 經解碼DRAP圖片。
在一實施例中，DRAP圖片可僅含有圖框內或跳略寫碼區塊。
在一實施例中，DRAP圖片可比位元串流中之IRAP圖片更頻繁地出現。
在一實施例中，可已給DRAP圖片指派在具有DRAP圖片之位元串流中經用信號發送之一圖片類型識別符。
在一實施例中，伴隨DRAP圖片之資料可向解碼器指示解碼DRAP圖片需要哪一IRAP圖片。
在一實施例中，伴隨DRAP圖片之資料可向解碼器指示解碼額外DRAP圖片需要哪些IRAP圖片及DRAP圖片。
在一實施例中，伴隨IRAP圖片之資料可向解碼器指示哪些DRAP圖片取決於IRAP圖片。
在一實施例中，隨機存取操作可係一技巧播放；該技巧播放係快轉、倒轉、向前跳越、向後跳越或轉至適當位置中之任一者。
在一實施例中，伴隨DRAP圖片之資料可指示一中斷連結在DRAP圖片之位置處之存在或不存在。
在一實施例中，伴隨DRAP圖片之資料可指示DRAP圖片是否僅含有圖框內及跳略寫碼區塊。
在一實施例中，可在一補充增強層(SEI)訊息、序列參數集(SPS)、圖片參數集(PPS)或視訊圖塊標頭中用信號發送資料。
圖22係更詳細地圖解說明前文中所闡述之實施例1(實線)、2、7及8(虛線)之一流程圖。方法包括接收一第一DRAP圖片。該方法視情況包括接收伴隨資料，諸如圖片次序類型資料或SEI訊息。該方法視情況包括判定當前DRAP圖片是否參考一先前IRAP圖片或一先前DRAP圖片。在後一情形中，方法藉由獲得所參考DRAP圖片而繼續。執行此廻圈直至到達參考一IRAP圖片之一當前DRAP圖片。該方 法然後包括獲得IRAP圖片且解碼IRAP圖片。下一選用步驟包括判定先前經解碼IRAP或DRAP圖片是否由在第一步驟中接收之第一DRAP圖片參考。如果否，則方法藉由解碼參考先前經解碼IRAP或DRAP圖片之DRAP圖片而繼續。執行此廻圈直至先前經解碼IRAP或DRAP圖片由第一DRAP圖片參考。在此一情形中，第一DRAP圖片經解碼且用於隨機存取操作。
IRAP圖片通常用於以一週期性方式提供經編碼視訊之隨機存取及抗錯穩健性。針對普通視訊內容，就位元率而言，IRAP圖片通常比編碼為P圖片貴大約3至5倍且比編碼為B圖片貴大約5至10倍。
每0.5秒至1.0秒插入一IRAP圖片花費相當多位元。如表1及表2中所展示，位元成本變化且對於靜止內容(諸如SlideEditing)通常較高。針對其中很少更新影像之大部分之序列(例如某些螢幕內容)，IRAP圖片與P圖片及B圖片之間的比率通常多得多，此乃因P圖片及B圖片通常含有許多跳略區塊。
通常具有非常靜態內容之視訊服務包含螢幕共享及監督視訊。舉例而言，螢幕共享可用作個體之間的一即時通信工具或可經設置以監視其他電腦，諸如伺服器。針對所有此等服務，記錄且儲存視訊材料通常係受關注的。然後使用隨機存取操作搜尋所儲存視訊材料較佳地應係容易的。同時，以一最小值保持視訊位元率以限制頻寬使用及節省儲存空間兩者係受關注的。
實施例之所提議解決方案旨在減少在螢幕內容寫碼以及一般內容寫碼中之IRAP圖片上花費之大量位元同時維持IRAP圖片之幾乎相同隨機存取及抗錯穩健性性質。藉由引入一新圖片類型(此處稱為一相依隨機存取點(DRAP)圖片)而完成此。舉例而言，DRAP圖片係可僅參考一先前IRAP圖片(且在某些實施例中亦參考其他DRAP圖片)之一P圖片。
DRAP圖片可替換IRAP圖片中之某些IRAP圖片以減少一視訊位元串流之總體位元成本。另一選擇係，給定相同位元率，可更頻繁地放置隨機存取點。藉由以下操作完成對一DRAP圖片之隨機存取：首先解碼前面IRAP圖片且然後解碼DRAP圖片。
在具有在解碼DRAP圖片之前必須解碼所參考IRAP圖片(及假如相關之所參考DRAP圖片)之限制之情況下提供對DRAP圖片之隨機存取。舉例而言，DRAP圖片對於透過視訊快速轉發係非常有用的，同時將用以提供隨機存取之位元率額外開銷保持至一最小值。
另一較佳限制係：應禁止跨越DRAP圖片之預測。在DRAP圖片後面之非RAP圖片必須不使用在DRAP圖片前面之任何非RAP圖片進行預測。此限制之一個替代構想係：依解碼及輸出次序兩者在一DRAP圖片後面之非RAP圖片不可將依解碼次序在DRAP圖片前面之任何非RAP圖片用於參考。
在本發明之一實施例中，僅允許圖框內或跳略區塊用於DRAP圖片以提供經改良抗錯穩健性。
在HEVC以及AVC/H.264中，存在稱作恢複點SEI之一SEI訊息。恢複點SEI訊息輔助一解碼器在解碼器起始隨機存取之後或在編碼器指示位元串流中之一中斷連結之後判定解碼程序何時將產生可接受圖片以用於顯示。當以依解碼次序與恢複點SEI訊息相關聯之圖片開始解碼程序時，指示依此SEI訊息中規定之輸出次序在恢複點處或繼恢複點之後之所有經解碼圖片之內容為正確的或大致正確的。
恢複點SEI訊息無法用於實現DRAP圖片之功能性。若一恢複點SEI訊息與IRAP圖片一起經發送，則必須向上直至DRAP圖片地解碼依解碼次序在其後面之所有圖片，此並非合意的。且恢複點SEI訊息無法與DRAP圖片一起經發送，此乃因指示對依解碼次序在恢複點SEI訊息前面之任何事物之相依性係不可能的。
根據一態樣，提供用於編碼一位元串流之一方法。在該方法中，編碼一IRAP圖片，且編碼僅取決於IRAP圖片之一圖框間圖片，其中該圖框間圖片稱為一相依隨機存取點(DRAP)圖片。
根據另一態樣，提供用於解碼一視訊位元串流之一方法。在該方法中，解碼一圖框內隨機存取點(IRAP)圖片，解碼僅取決於IRAP圖片之一圖框間圖片，其中該圖框間圖片稱為相依隨機存取點(DRAP)圖片，且該DRAP圖片用於執行一隨機存取操作。
圖23係圖解說明用於編碼一視訊串流之一方法之一流程圖。該方法包括：在步驟S100中，編碼視訊串流之一IRAP圖片。該方法進一步包括：在步驟S101中，使用IRAP圖片及/或視訊串流中之根據一解碼次序之一先前DRAP圖片作為視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片。在步驟S101中，將DRAP圖片編碼為可用於參考之一尾隨圖片。該DRAP圖片構成視訊串流之經編碼圖片之一視訊位元串流中之一RAP。
在一實施例中，在步驟S101中將DRAP圖片編碼為可用於參考之一尾隨圖片，亦即編碼為一TRAIL_R圖片，且DRAP圖片屬於視訊串流之一最低層，亦即具有時間id=0。
在一實施例中，步驟S101包括使用視訊串流中之根據解碼次序之一最近的前面IRAP圖片作為DRAP圖片之唯一參考圖片來編碼該DRAP圖片。
在另一實施例中，步驟S101包括使用視訊串流中之根據解碼次序之一最近的前面IRAP圖片作為DRAP圖片之唯一參考圖片來編碼該DRAP圖片。
在又一實施例中，步驟S101包括使用視訊串流中之根據解碼次序之一最近的前面IRAP圖片作為DRAP圖片之唯一參考圖片來編碼該DRAP圖片。
該解碼次序規定由一解碼器解碼視訊位元串流之圖片之次序。此次序與由一編碼器編碼視訊串流之圖片之次序相同。因此，解碼次序亦可稱為寫碼或編碼次序。
圖24係圖解說明圖23中所展示之方法之一額外選用步驟之一流程圖。該方法自步驟S101繼續。下一步驟S110包括編碼依輸出次序及解碼次序在DRAP圖片後面之視訊串流之至少一個非RAP圖片。在步驟S110中藉由不使用依解碼次序在DRAP圖片前面的圖片視訊串流之任何非RAP作為至少一個非RAP圖片之參考圖片來編碼該至少一個非RAP圖片。因此，較佳地可能防止跨越在步驟S101中編碼之DRAP圖片之參考，惟一非RAP圖片可將在步驟S100中編碼之IRAP圖片用作參考圖片及/或將一先前DRAP圖片(亦即存在於在步驟S100中編碼之IRAP圖片與在步驟S101中編碼之DRAP圖片之間的一DRAP圖片)用作參考圖片例外。
在一特定實施例中，步驟S101包括使用IRAP圖片及/或先前DRAP圖片作為DRAP圖片之唯一參考圖片來將DRAP圖片之區塊編碼為跳略區塊或編碼為圖框內區塊。
圖25係圖解說明圖23中所展示之方法之一額外選用步驟之一流程圖。該方法自步驟S101繼續。下一步驟S120包括在DRAP圖片之一RPS中包含IRAP圖片之一識別符。RPS用信號發送IRAP圖片作為一短期參考圖片或一長期參考圖片。
圖26係圖解說明圖23中所展示之方法之一額外選用步驟之一流程圖。該方法自步驟S100繼續。下一步驟S130包括使DRAP圖片與將DRAP圖片識別為一DRAP圖片之一SEI訊息相關聯。
SEI訊息可係一空SEI訊息或包括連同各種SEI訊息實例先前所闡述之參數中之任何者。
圖27係圖解說明在其中SEI訊息並非空的之情形中可包含於方法 中之額外選用步驟之一流程圖。
在一實施例中，該方法包括：在步驟S140中，基於藉由在IRAP圖片處開始解碼而產生之圖片就不應顯示在DRAP圖片前面之經解碼圖片而言是否可含有不合意之視覺假影而設定一中斷連結旗標之一值。該方法亦包括：在步驟S143中，在SEI訊息中包含中斷連結旗標。
另一選擇係或另外，該方法包括：在步驟S141中，基於編碼DRAP圖片是否包括將DRAP圖片之區塊編碼為僅圖框內寫碼區塊或具有設定為1之一跳略旗標之跳略區塊而設定一僅跳略或圖框內區塊旗標之一值。該方法亦包括：在步驟S143中，在SEI訊息中包含僅跳略或圖框內區塊旗標。
另一選擇係或另外，該方法包括：在步驟S142中，若IRAP圖片不同於視訊串流中之一最近的前面IRAP圖片，則基於IRAP圖片之一POC值與DRAP圖片之一POC值之間的一差而設定一參考圖片差量識別符之一值。此步驟S142替代地包括：若IRAP圖片係視訊串流中之最近的前面IRAP圖片，則將參考差量識別符之一值設定為等於零。該方法亦包括：在步驟SI43中，在SEI訊息中包含參考差量識別符。
在一替代實施例中，步驟S142包括將一參數之一值設定為等於在編碼DRAP圖片時用作參考圖片之IRAP圖片之POC之LSB。該方法亦包括：在步驟S143中，在SEI訊息中包含參數。
該方法亦可包含設定值且包含本文中先前提及之參數implicitly_reference_previous_irap_picture_flag或reference_dependent_rap_flag及nbr_pictures_in_reference_chain_minus1。
圖28係圖解說明用信號發送DRAP圖片之另一實施例之一流程圖。方法自圖23中之步驟S101繼續。下一步驟S150包括在視訊位元串 流之一NAL單元標頭中包含與DRAP圖片相關聯之一圖片類型識別符。該圖片類型識別符將該DRAP圖片識別為一DRAP圖片。
因此，包括經編碼DRAP圖片或其至少一部分的NAL單元之NAL單元標頭較佳地包括具有指示包含於NAL單元中之圖片係一DRAP圖片之一值之一圖片類型識別符。
實施例之一態樣係關於用於編碼一視訊位元串流之一方法，該方法包括以下步驟：-編碼一IRAP圖片；及-編碼僅取決於該IRAP圖片之一圖框間圖片，該圖框間圖片稱為相依隨機存取點(DRAP)圖片。
在一實施例中，該方法進一步包括：-編碼取決於一先前DRAP圖片之一額外DRAP圖片。
在一實施例中，以一方式編碼DRAP圖片使得DRAP圖片可參考先前IRAP或DRAP圖片或另一先前圖片；兩個參考皆導致相同經解碼DRAP圖片。
在一實施例中，DRAP圖片可僅含有圖框內或跳略寫碼區塊。
在一實施例中，DRAP圖片可比位元串流中之IRAP圖片更頻繁地出現。
在一實施例中，可已給DRAP圖片指派在具有DRAP圖片之位元串流中經用信號發送之一圖片類型識別符。
在一實施例中，伴隨DRAP圖片之資料可向解碼器指示解碼DRAP圖片需要哪一IRAP圖片。
在一實施例中，伴隨DRAP圖片之資料可向解碼器指示解碼額外DRAP圖片需要哪些IRAP圖片及DRAP圖片。
在一實施例中，伴隨IRAP圖片之資料可向解碼器指示哪些DRAP圖片取決於IRAP圖片。
在一實施例中，伴隨DRAP圖片之資料可指示一中斷連結在DRAP圖片之位置處之存在或不存在。
在一實施例中，伴隨DRAP圖片之資料可指示DRAP圖片是否僅含有圖框內及跳略寫碼區塊。
在一實施例中，可在一補充增強層(SEI)訊息、序列參數集(SPS)、圖片參數集(PPS)或視訊圖塊標頭中用信號發送資料。
實施例之一態樣係關於用於編碼一位元串流之一方法。在該方法中，編碼一IRAP圖片，且編碼僅取決於IRAP圖片之一圖框間圖片。該圖框間圖片稱為一相依隨機存取點(DRAP)圖片。
根據實施例之一態樣，提供用於編碼一位元串流之一編碼器200，參見圖29。編碼器200包括經調適以編碼一IRAP圖片且編碼僅取決於IRAP圖片之一圖框間圖片之處理構件，其中該圖框間圖片稱為一相依隨機存取點(DRAP)圖片。
根據實施例之一態樣，提供用於解碼一位元串流之一解碼器100。解碼器100包括經調適以解碼一圖框內隨機存取點(IRAP)圖片且解碼僅取決於IRAP圖片之一圖框間圖片之處理構件，其中該圖框間圖片稱為相依隨機存取點(DRAP)圖片，且該DRAP圖片用於執行一隨機存取操作。
分別在編碼器200及解碼器100中，該處理構件包括一處理器及一記憶體，其中該記憶體進一步包括在由該處理器執行時經組態以實施本文中所闡述之方法之指令。
編碼器200可包括用於發送具有由(例如)SEI訊息例示之控制資訊之經編碼位元串流之一輸出單元，且解碼器100包括用於接收位元串流及控制資訊之一輸入單元。
編碼器200及解碼器100分別可位於諸如一使用者終端之一裝置或一網路節點中。該使用者終端可係(例如)一視訊攝影機、一行動電 話或一平板電腦。
應瞭解，實例性實施例可提供將以若干種方式給出之指令。
本發明實施例尤其適合用於連同HEVC解碼及編碼使用，亦即，根據HEVC規格或標準解碼視訊資料及符合HEVC規格或標準將視訊資料編碼成視訊位元串流。HEVC規格或標準包含HEVC規格之任何版本(包含HEVC版本1及後續版本)及HEVC規格之任何擴展(諸如與螢幕內容擴展、多視擴展及可擴縮擴展相關)。
熟習此項技術者將理解，即使HEVC已用作闡述本文中之實施例之基礎，實施例針對使用時間預測性寫碼之其他視訊寫碼標準(包含AVC/H.264、H.263、MPEG-4、VP8及VP9)亦將同樣良好地工作。
如本文中所闡述之一IRAP圖片構成一圖框內隨機存取點圖片(亦即構成且因此可用作一隨機存取點之一圖片)且使用空間(亦即圖框內)預測來編碼及解碼且因此僅包括圖框內寫碼區塊。如前文中所提及，根據HEVC規格，一IRAP圖片可呈一IDR圖片、一CRA圖片或一BLA圖片之形式。在其他視訊寫碼標準(諸如上文所提及)中，可使用其他特定圖片類型名稱以便定義一圖框內隨機存取點圖片，諸如關鍵圖片或關鍵圖框。然而，針對此等其他視訊寫碼標準，此等其他特定圖片類型亦被視為由如本文中所使用之表達IRAP圖片囊括，只要其構成且因此可用作隨機存取點且僅使用空間或圖框內預測來編碼及解碼。在視訊寫碼中，一視訊串流之圖片有時稱為圖框。
實施例之另一態樣係關於用於解碼一視訊位元串流之一解碼器。該解碼器經組態以解碼視訊位元串流之一IRAP圖片。該解碼器亦經組態以使用IRAP圖片及/或視訊位元串流中之根據一解碼次序之一先前DRAP圖片作為視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且該DRAP圖片構成該視訊位元串流中之一隨機存取點。
在一實施例中，DRAP圖片屬於視訊位元串流之一最低層。
在一實施例中，該解碼器經組態以使用視訊位元串流中之根據解碼次序之一最近的前面IRAP圖片作為DRAP圖片之唯一參考圖片來解碼該DRAP圖片。
在一實施例中，該解碼器經組態以解碼依輸出次序及解碼次序在DRAP圖片後面的視訊位元串流之至少一個非RAP圖片。該至少一個非RAP圖片不使用該視訊位元串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
在一實施例中，該解碼器經組態以輸出該經解碼DRAP圖片且輸出在DRAP圖片後面之至少一個經解碼之非RAP圖片。在一特定實施例中，該解碼器另外經組態以不輸出在解碼DRAP圖片期間用作參考圖片之IRAP圖片。
在一實施例中，該解碼器經組態以使用DRAP圖片執行至視訊位元串流中之一隨機存取操作。
在一特定實施例中，該解碼器經組態以推斷依輸出次序在DRAP圖片前面且存在於一經解碼圖片緩衝器中之每一圖片之一各別圖片輸出旗標之一值等於零。
在一實施例中，該解碼器經組態以使用IRAP圖片及/或先前DRAP圖片作為DRAP圖片之唯一參考圖片來將DRAP圖片之區塊解碼為跳略區塊或解碼為圖框內區塊。
在一實施例中，該解碼器經組態以自DRAP圖片之一參考圖片集擷取IRAP圖片之一識別符。該參考圖片集用信號發送IRAP圖片作為一短期參考圖片或一長期參考圖片。
在一實施例中，該解碼器經組態以基於與DRAP圖片相關聯之一SEI訊息而將DRAP圖片識別為一DRAP圖片。
在一特定實施例中，該解碼器經組態以自SEI訊息擷取一中斷連 結旗標。該解碼器亦經組態以基於中斷連結旗標之值而判定藉由在IRAP圖片處開始解碼而產生之圖片就不應顯示在DRAP圖片前面之經解碼圖片而言是否可含有不合意之視覺假影。
在另一特定實施例中，另一選擇係或另外，該解碼器經組態以自SEI訊息擷取一僅跳略或圖框內區塊旗標。該解碼器亦經組態以基於僅跳略或圖框內區塊旗標之一值而判定DRAP圖片是否包括僅圖框內寫碼區塊或具有設定為1之一跳略旗標之跳略區塊。
在又一特定實施例中，另一選擇係或另外，該解碼器經組態以自該SEI訊息擷取一參考圖片差量識別符。該解碼器亦經組態以：若參考圖片差量識別符大於零，則基於DRAP圖片之一POC值及參考圖片差量識別符而計算IRAP圖片之一POC值。該解碼器進一步經組態以：若參考圖片差量識別符大於零，則基於所計算之POC值而識別IRAP圖片。另一選擇係，該解碼器經組態以：若參考圖片差量識別符等於零，則將IRAP圖片識別為視訊位元串流中之一最近的前面IRAP圖片。
在一實施例中，該解碼器經組態以基於與DRAP圖片相關聯且包含於視訊位元串流之一NAL單元標頭中之一圖片類型識別符而將DRAP圖片識別為一DRAP圖片。
將瞭解，本文中所闡述之方法及裝置可以各種方式經組合及重新配置。
舉例而言，可以硬體或供由適合處理電路執行之軟體或其一組合實施實施例。
可使用諸如離散電路或積體電路技術(包含一般用途電子電路及特殊應用電路兩者)之任何習用技術以硬體實施本文中所闡述之步驟、功能、程序、模組及/或區塊。
特定實例包含一或多個以適合方式組態之數位信號處理器及其 他已知電子電路，例如經互連以執行一專門功能之離散邏輯閘或特殊應用積體電路(ASIC)。
圖30圖解說明根據實施例之一解碼器110之一特定硬體實施方案。在一實施例中，解碼器110包括經組態以解碼IRAP圖片之一IRAP解碼器111。解碼器110亦包括經組態以解碼DRAP圖片之一DRAP解碼器112。
在圖30中，已將解碼器110圖解說明為包括一單獨IRAP解碼器111及DRAP解碼器112。在一替代實施方案中，解碼器110可包括對一視訊位元串流操作且解碼該視訊位元串流之圖片而不論圖片係一IRAP圖片、一DRAP圖片還是一非RAP圖片之一單個解碼單元。
解碼器110較佳地亦包括一輸入單元113，輸入單元113經組態以通常以攜載視訊串流中之圖片之經編碼視訊資料之NAL單元及攜載與視訊位元串流相關之其他控制資料(諸如一圖片參數集(PPS)、序列參數集(SPS)及視訊參數集(VPS))之NAL單元之一序列之形式接收視訊位元串流。
解碼器110較佳地進一步包括經組態以輸出由解碼器110且特定而言由IRAP解碼器111及DRAP解碼器112解碼之圖片之一輸出單元114。輸出單元114較佳地經組態以將經解碼圖片輸出至一顯示器或螢幕以用於視訊串流之顯示。另一選擇係，輸出單元114可將經解碼圖片輸出至經組態以轉碼視訊串流之一轉碼器或輸出至用於儲存經解碼圖片之一記憶體。
輸入單元113可實施為特定而言用於視訊位元串流之無線接收之一接收器或收發器。另一選擇係，輸入單元113可呈特定而言用於視訊位元串流之有線接收之一通用輸入或輸入埠之形式。相應地，輸出單元114可實施為一傳輸器或收發器或者一通用輸出或輸出埠。
解碼器110較佳地亦包括經組態以暫時儲存由IRAP解碼器111或 DRAP解碼器112產生之經解碼圖片之一經解碼圖片緩衝器(DPB)115。經解碼圖片較佳地儲存於DPB 115中以在解碼視訊位元串流中之後續圖片時用作參考圖片及/或經儲存直至圖片應根據輸出次序經輸出。
輸入單元113較佳地連接至IRAP解碼器111及DRAP解碼器112以將所接收圖片轉發至其以用於解碼。IRAP解碼器111及DRAP解碼器112連接至DPB 115以便將經解碼圖片儲存於DPB 115中，且DRAP解碼器112可在解碼一當前DRAP圖片期間存取一先前經解碼IRAP圖片及/或DRAP圖片。輸出單元114較佳地連接至DPB 115以根據輸出次序將經解碼圖片自DPB 115輸出。
另一選擇係，可以軟體(諸如，供由諸如一或多個處理器或處理單元之適合處理電路執行之一電腦程式)實施本文中所闡述之步驟、功能、程序、模組及/或區塊中之至少某些。
處理電路之實例包含但不限於一或多個微處理器、一或多個數位信號處理器(DSP)、一或多個中央處理單元(CPU)、視訊加速硬體及/或任何適合可程式化邏輯電路，諸如一或多個場可程式化閘極陣列(FPGA)或一或多個可程式化邏輯控制器(PLC)。
亦應理解，重新使用其中實施所提議之技術之任何習用裝置或單元之一般處理能力可係可能的。例如藉由重新程式化現有軟體或藉由添加新軟體組件而重新使用現有軟體亦可係可能的。
在一特定實例中，解碼器120(參見圖31)包括一處理器121及包括可由處理器121執行之指令之一記憶體122。處理器121操作以解碼IRAP圖片且解碼DRAP圖片。
在一實施例中，解碼器120亦包括經組態以接收視訊位元串流且輸出經解碼圖片之一輸入/輸出(I/O)單元123。
解碼器120之記憶體122較佳地包括由處理器121使用以便儲存且存取經解碼圖片之DPB。
在一特定實施例中，處理器121在執行儲存於記憶體122中之指令以執行上文所闡述之操作時操作。處理器121因此互連至記憶體122以實現正常軟體執行。
圖36係圖解說明包括一處理器310、一相關聯之記憶體320及一通信電路330之一使用者設備(UE)300之一實例之一示意性方塊圖。
在此特定實例中，以一電腦程式340實施本文中所闡述之步驟、功能、程序、模組及/或區塊中之至少某些，電腦程式340經加載至記憶體320中以供由包含一或多個處理器310之處理電路執行。處理器310及記憶體320彼此互連以實現正常軟體執行。一通信電路330亦互連至處理器310及/或記憶體320以實現一視訊位元串流及經解碼圖片之輸入及/或輸出。
使用者設備300可係可接收及處理一視訊位元串流之任何裝置或裝備。舉例而言，使用者設備300可係一電腦(固定的或便攜的)，諸如膝上型電腦、一智慧型電話、一平板電腦、一機上盒等。
術語「處理器」應以一普通意義經解釋為能夠執行程式碼或電腦程式指令以執行一特定處理、判定或計算任務之任何系統或裝置。
包含一或多個處理器之處理電路因此經組態以在執行電腦程式時執行定義良好之處理任務(諸如本文中所闡述之彼等處理任務)。
處理電路不必須專用於僅執行上文所闡述之步驟、功能、程序及/或區塊，而是亦可執行其他任務。
在一實施例中，電腦程式340包括指令，該等指令在由處理器310執行時致使處理器310解碼一視訊位元串流之一IRAP圖片。亦致使處理器310使用IRAP圖片及/或視訊位元串流中之根據一解碼次序之一先前DRAP圖片作為視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊位元串流中之一隨機存取點。
所提議技術亦提供包括電腦程式340之一載體350。載體350係一電子信號、一光學信號、一電磁信號、一磁信號、一電信號、一無線電信號、一微波信號或一電腦可讀儲存媒體350中之一者。
藉由實例方式，軟體或電腦程式340可實現為通常攜載或儲存於一電腦可讀媒體350(較佳地非揮發性電腦可讀儲存媒體350)上之一電腦程式產品。電腦可讀媒體350可包含一或多個可抽換式或非可抽換式記憶體裝置，包含但不限於一唯讀記憶體(ROM)、一隨機存取記憶體(RAM)、一光碟(CD)、一數位多功能光碟(DVD)、一藍光碟片、一通用串列匯流排(USB)記憶體、一硬碟機(HDD)儲存裝置、一快閃記憶體、一磁帶或任何其他習用記憶體裝置。電腦程式340因此可經加載至由圖36中之使用者設備300表示之一電腦或等效處理裝置之操作記憶體中以供由其處理器310執行。
在由一或多個處理器執行時，本文中呈現之(若干)流程圖因此可被視為一(若干)電腦流程圖。一對應解碼器可經定義為功能模組之一群組，其中由處理器執行之每一步驟對應於一功能模組。在此情形中，功能模組經實施為在處理器上運行之一電腦程式。因此，另一選擇係，解碼器可經定義為功能模組之一群組，其中該等功能模組經實施為在至少一個處理器上運行之一電腦程式。
駐留於記憶體中之電腦程式因此可經組織為經組態以在由處理器執行時執行本文中所闡述之步驟及/或任務之至少一部分之適當功能模組。圖32中圖解說明此等功能模組之一實例。
圖32係具有功能模組之一解碼器130之一示意性方塊圖。解碼器130包括用於解碼一視訊位元串流之一IRAP圖片之一IRAP解碼器131。解碼器130亦包括一DRAP解碼器132，DRAP解碼器132用於使用IRAP圖片及/或視訊位元串流中之根據一解碼次序之一先前DRAP圖片作為視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該 DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊位元串流中之一隨機存取點。
實施例之又一態樣係關於用於編碼一視訊串流之一編碼器。該編碼器經組態以編碼視訊串流之一IRAP圖片。該編碼器亦經組態以使用IRAP圖片及/或視訊串流中之根據一解碼次序之一前面DRAP圖片作為視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點。
在一實施例中，DRAP圖片經編碼為可用於參考之一尾隨圖片且屬於視訊串流之一最低層。
在一實施例中，該編碼器經組態以使用視訊串流中之根據解碼次序之一最近的前面IRAP圖片作為DRAP圖片之唯一參考圖片來編碼該DRAP圖片。
在一實施例中，該編碼器經組態以編碼依輸出次序及解碼次序在DRAP圖片後面的視訊串流之至少一個非RAP圖片。該至少一個非RAP圖片不使用該視訊串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
在一實施例中，該編碼器經組態以使用IRAP圖片及/或先前DRAP圖片作為DRAP圖片之唯一參考圖片來將DRAP圖片之區塊編碼為跳略區塊或編碼為圖框內區塊。
在一實施例中，該編碼器經組態以在DRAP圖片之一參考圖片集中包含IRAP圖片之一識別符。該參考圖片集用信號發送該IRAP圖片作為一短期參考圖片或一長期參考圖片。
在一實施例中，該編碼器經組態以使該DRAP圖片與將該DRAP圖片識別為一DRAP圖片之一SEI訊息相關聯。
在一特定實施例中，該編碼器經組態以基於藉由在IRAP圖片處 開始解碼而產生之圖片就不應顯示在DRAP圖片前面之經解碼圖片而言是否可含有不合意之視覺假影而設定一中斷連結旗標之一值。該編碼器亦經組態以包含SEI訊息中之中斷連結旗標。
在另一特定實施例中，另一選擇係或另外，該編碼器經組態以基於編碼DRAP圖片是否包括將DRAP圖片之區塊編碼為僅圖框內寫碼區塊或具有設定為1之一跳略旗標之跳略區塊而設定一僅跳略或圖框內區塊旗標之一值。該編碼器亦經組態以包含SEI訊息中之僅跳略或圖框內區塊旗標。
在又一特定實施例中，另一選擇係或另外，該編碼器經組態以：若IRAP圖片不同於視訊串流中之一最近的前面IRAP圖片，則基於IRAP圖片之一POC值與DRAP圖片之一POC值之間的一差而設定一參考圖片差量識別符之一值。該編碼器亦經組態以：若IRAP圖片係視訊串流中之最近的前面IRAP圖片，則設定參考圖片差量識別符之一值等於零。該編碼器進一步經組態以包含SEI訊息中之參考圖片差量識別符。
在一實施例中，該編碼器經組態以在視訊位元串流之一NAL單元標頭中包含與DRAP圖片相關聯之一圖片類型識別符。該圖片類型識別符將該DRAP圖片識別為一DRAP圖片。
圖33圖解說明根據實施例之一編碼器210之一特定硬體實施方案。在一實施例中，編碼器210包括經組態以編碼IRAP圖片之一IRAP編碼器211。編碼器210亦包括經組態以編碼DRAP圖片之一DRAP編碼器212。
在圖33中，編碼器210已經圖解說明為包括一單獨IRAP編碼器211及DRAP編碼器212。在一替代實施方案中，編碼器210可包括對一視訊串流操作且編碼該視訊串流之圖片而不論圖片係一IRAP圖片、一DRAP圖片還是一非RAP圖片之一單個編碼單元。
編碼器210較佳地亦包括經組態以接收視訊串流之一輸入單元213。編碼器210較佳地進一步包括經組態以通常以攜載視訊串流中之圖片之經編碼視訊資料之NAL單元及攜載與視訊位元串流相關之其他控制資料之NAL單元之一序列之形式輸出視訊位元串流之一輸出單元214。
輸入單元213可實施為一接收器或收發器或者一通用輸入或輸入埠。相應地，輸出單元214可實施為一傳輸器或收發器或者一通用輸出或輸出埠。
編碼器210較佳地亦包括經組態以暫時儲存在編碼視訊位元串流期間產生之經解碼或經重建圖片之一DPB 215。
輸入單元213較佳地連接至IRAP編碼器211及DRAP解碼器212以將所接收圖片轉發至其以用於編碼。IRAP編碼器211及DRAP解碼器212連接至DPB 215以便將經解碼或經重建圖片儲存於DPB 115中。輸出單元214較佳地連接至IRAP編碼器211及DRAP編碼器212以輸出經編碼圖片之視訊位元串流。
在一特定實例中，編碼器220(參見圖34)包括一處理器221及包括可由處理器221執行之指令之一記憶體222。處理器221操作以編碼IRAP圖片且編碼DRAP圖片。
在一實施例中，編碼器220亦包括經組態以接收視訊串流且輸出視訊位元串流之一輸入/輸出(I/O)單元223。
編碼器220之記憶體222較佳地包括由處理器221使用以便儲存經解碼或經重建圖片之DPB。
在一特定實施例中，處理器121在執行儲存於記憶體222中之指令以執行上文所闡述之操作時操作。處理器221因此互連至記憶體222以實現正常軟體執行。
在一實施例中，圖36中所展示之使用者設備300可係可接收及處 理一視訊串流之任何裝置或裝備。舉例而言，使用者設備300可係一電腦(固定的或便攜的)，諸如膝上型電腦、一智慧型電話、一平板電腦、一視訊攝影機等。
在一實施例中，圖36中所展示之電腦程式340包括指令，該等指令在由處理器310執行時致使處理器310編碼一視訊串流之一IRAP圖片。亦致使處理器310使用IRAP圖片及/或視訊串流中之根據一解碼次序之一先前DRAP圖片作為視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊位元串流中之一隨機存取點。
圖35係具有功能模組之一編碼器230之一示意性方塊圖。編碼器230包括用於編碼一視訊串流之一IRAP圖片之一IRAP編碼器231。編碼器230亦包括用於使用IRAP圖片及/或視訊串流中之根據一解碼次序之一先前DRAP圖片作為視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片之一DRAP編碼器232。該DRAP圖片經編碼為可用於參考之一尾隨圖片且構成該視訊位元串流中之一隨機存取點。
所提議解決方案之一優點係：可藉由在支援隨機存取之情況下編碼一位元串流時使用DRAP圖片而非某些IRAP(IDR、CRA或BLA)圖片而節省許多帶寬，或換得較高總體品質。
針對螢幕共享及監督情景，藉由使用具有一短週期性之DRAP圖片及具有一較長週期性之IRAP圖片(舉例而言，每秒之DRAP圖片及每60秒之IRAP圖片)，可減小位元率同時可容易地搜尋所儲存視訊。此外，此等服務之視訊連結不可能總是沒有錯誤。使用僅具有圖框內或跳略區塊之DRAP圖片與不具有任何隨機存取點相比較增加串流之抗錯穩健性。
上文所闡述之實施例應被理解為本發明之一些說明性實例。熟習此項技術者將理解：可在不背離本發明之範疇之情況下對實施例進 行各種修改、組合及改變。特定而言，不同實施例中之不同部分解決方案可在技術可行之情況下以其他組態經組合。然而，本發明之範疇由隨附申請專利範圍定義。

Claims (40)

  1. 一種用於解碼一視訊位元串流之方法，其包括：解碼(S1)該視訊位元串流之一圖框內隨機存取點(IRAP)圖片；使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼(S2)該DRAP圖片，該DRAP圖片經編碼為可用於參考之一尾隨圖片(trailing picture)且該DRAP圖片構成該視訊位元串流中之一隨機存取點；及解碼(S20)依輸出次序及解碼次序在該DRAP圖片後面的該視訊位元串流之至少一個非隨機存取點-非RAP圖片，該至少一個非RAP圖片不使用該視訊位元串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
  2. 如請求項1之方法，其中解碼(S2)該DRAP圖片包括：使用該視訊位元串流中之根據該解碼次序之一最近的前面IRAP圖片作為該DRAP圖片之該唯一參考圖片來解碼(S2)該DRAP圖片。
  3. 如請求項1或2之方法，其進一步包括基於與該DRAP圖片相關聯之一補充增強資訊SEI訊息而將該DRAP圖片識別(S50)為一DRAP圖片。
  4. 如請求項1或2之方法，其進一步包括基於與該DRAP圖片相關聯且包含於該視訊位元串流之一網路抽象層NAL單元標頭中之一圖片類型識別符而將該DRAP圖片識別(S60)為一DRAP圖片。
  5. 如請求項1之方法，其進一步包括：輸出(S21)該經解碼DRAP圖片；及輸出(S22)該至少一個經解碼之非RAP圖片。
  6. 如請求項1或2之方法，其進一步包括使用該DRAP圖片執行(S30) 至該視訊位元串流中之一隨機存取操作。
  7. 如請求項6之方法，其進一步包括推斷(S40)依輸出次序在該DRAP圖片前面且存在於一經解碼圖片緩衝器(115)中之每一圖片之一各別圖片輸出旗標之一值等於零。
  8. 如請求項1或2之方法，其中解碼(S2)該DRAP圖片包括：使用該IRAP圖片及/或該先前DRAP圖片作為該DRAP圖片之該(等)唯一參考圖片來將該DRAP圖片之區塊解碼(S2)為跳略區塊或解碼為圖框內區塊。
  9. 如請求項1或2之方法，其進一步包括自該DRAP圖片之一參考圖片集擷取(S10)該IRAP圖片之一識別符，該參考圖片集用信號發送該IRAP圖片作為一短期參考圖片或一長期參考圖片。
  10. 一種用於編碼一視訊串流之方法，其包括：編碼(S100)該視訊串流之一圖框內隨機存取點(IRAP)圖片；使用該IRAP圖片及/或該視訊串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊串流之一DRAP圖片之唯一參考圖片來編碼(S101)該DRAP圖片，該DRAP圖片經編碼為可用於參考之一尾隨圖片且該DRAP圖片構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點；及編碼(S110)依輸出次序及解碼次序在該DRAP圖片後面的該視訊串流之至少一個非隨機存取點-非RAP圖片，該至少一個非RAP圖片不使用該視訊串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
  11. 如請求項10之方法，其中編碼(S101)該DRAP圖片包括：使用該視訊串流中之根據該解碼次序之一最近的前面IRAP圖片作為該DRAP圖片之該唯一參考圖片來編碼(S101)該DRAP圖片。
  12. 如請求項10或11之方法，其進一步包括使該DRAP圖片與將該 DRAP圖片識別為一DRAP圖片之一補充增強資訊SEI訊息相關聯(S130)。
  13. 如請求項10或11之方法，其進一步包括在該視訊位元串流之一網路抽象層NAL單元標頭中包含(S140)與該DRAP圖片相關聯之一圖片類型識別符，該圖片類型識別符將該DRAP圖片識別為一DRAP圖片。
  14. 如請求項10或11之方法，其中編碼(S101)該DRAP圖片包括：使用該IRAP圖片及/或該先前DRAP圖片作為該DRAP圖片之該(等)唯一參考圖片來將該DRAP圖片之區塊編碼(S101)為跳略區塊或編碼為圖框內區塊。
  15. 如請求項10或11之方法，其進一步包括在該DRAP圖片之一參考圖片集中包含(S120)該IRAP圖片之一識別符，該參考圖片集用信號發送該IRAP圖片作為一短期參考圖片或一長期參考圖片。
  16. 如請求項10或11之方法，其中該DRAP圖片屬於該視訊位元串流之一最低層。
  17. 一種用於解碼一視訊位元串流之解碼器(100、110、120)，其中該解碼器(100、110、120)經組態以解碼該視訊位元串流之一圖框內隨機存取點(IRAP)圖片；且該解碼器(100、110、120)經組態以使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片，該DRAP圖片經編碼為可用於參考之一尾隨圖片且該DRAP圖片構成該視訊位元串流中之一隨機存取點，其中該解碼器(100、110、120)經組態以解碼依輸出次序及解碼次序在該DRAP圖片後面的該視訊位元串流之至少一個非隨機存取點-非RAP圖片，該至少一個非RAP圖片不使用該視訊位元 串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
  18. 如請求項17之解碼器，其中該解碼器(100、110、120)經組態以使用該視訊位元串流中之根據該解碼次序之一最近的前面IRAP圖片作為該DRAP圖片之該唯一參考圖片來解碼該DRAP圖片。
  19. 如請求項17或18之解碼器，其中該解碼器(100、110、120)經組態以基於與該DRAP圖片相關聯之一補充增強資訊SEI訊息而將該DRAP圖片識別為一DRAP圖片。
  20. 如請求項17或18之解碼器，其中該解碼器(100、110、120)經組態以基於與該DRAP圖片相關聯且包含於該視訊位元串流之一網路抽象層NAL單元標頭中之一圖片類型識別符而將該DRAP圖片識別為一DRAP圖片。
  21. 如請求項17之解碼器，其中該解碼器(100、110、120)經組態以輸出該經解碼DRAP圖片；且該解碼器(100、110、120)經組態以輸出該至少一個經解碼之非RAP圖片。
  22. 如請求項17或18之解碼器，其中該解碼器(100、110、120)經組態以使用該DRAP圖片執行至該視訊位元串流中之一隨機存取操作。
  23. 如請求項22之解碼器，其中該解碼器(100、110、120)經組態以推斷依輸出次序在該DRAP圖片前面且存在於一經解碼圖片緩衝器(115)中之每一圖片之一各別圖片輸出旗標之一值等於零。
  24. 如請求項17或18之解碼器，其中該解碼器(100、110、120)經組態以使用該IRAP圖片及/或該先前DRAP圖片作為該DRAP圖片之該(等)唯一參考圖片來將該DRAP圖片之區塊解碼為跳略區塊或解碼為圖框內區塊。
  25. 如請求項17或18之解碼器，其中該解碼器(100、110、120)經組態以自該DRAP圖片之一參考圖片集擷取該IRAP圖片之一識別符，該參考圖片集用信號發送該IRAP圖片作為一短期參考圖片或一長期參考圖片。
  26. 如請求項17或18之解碼器，其包括：一IRAP解碼器(111)，其經組態以解碼該IRAP圖片；及一DRAP解碼器(112)，其經組態以解碼該DRAP圖片。
  27. 如請求項17或18之解碼器，其包括：一處理器(121)；及一記憶體(122)，其包括可由該處理器(121)執行之指令，其中該處理器(121)操作以解碼該IRAP圖片；且該處理器(121)操作以解碼該DRAP圖片。
  28. 一種用於解碼一視訊位元串流之解碼器(130)，其包括一IRAP解碼器(131)，其用於解碼該視訊位元串流之一圖框內隨機存取點(IRAP)圖片；及一DRAP解碼器(132)，其用於使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片，該DRAP圖片經編碼為可用於參考之一尾隨圖片且該DRAP圖片構成該視訊位元串流中之一隨機存取點，其中該DRAP解碼器(132)經組態以解碼依輸出次序及解碼次序在該DRAP圖片後面的該視訊位元串流之至少一個非隨機存取點-非RAP圖片，該至少一個非RAP圖片不使用該視訊位元串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
  29. 一種用於編碼一視訊串流之編碼器(200、210、220)，其中 該編碼器(200、210、220)經組態以編碼該視訊串流之一圖框內隨機存取點(IRAP)圖片；且該編碼器(200、210、220)經組態以使用該IRAP圖片及/或該視訊串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片，該DRAP圖片經編碼為可用於參考之一尾隨圖片且該DRAP圖片構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點，其中該編碼器(200、210、220)經組態以編碼依輸出次序及解碼次序在該DRAP圖片後面的該視訊串流之至少一個非隨機存取點-非RAP圖片，該至少一個非RAP圖片不使用該視訊串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
  30. 如請求項29之編碼器，其中該編碼器(200、210、220)經組態以使用該視訊串流中之根據該解碼次序之一最近的前面IRAP圖片作為該DRAP圖片之該唯一參考圖片來編碼該DRAP圖片。
  31. 如請求項29或30之編碼器，其中該編碼器(200、210、220)經組態以使該DRAP圖片與將該DRAP圖片識別為一DRAP圖片之一補充增強資訊SEI訊息相關聯。
  32. 如請求項29或30之編碼器，其中該編碼器(200、210、220)經組態以在該視訊位元串流之一網路抽象層NAL單元標頭中包含與該DRAP圖片相關聯之一圖片類型識別符，該圖片類型識別符將該DRAP圖片識別為一DRAP圖片。
  33. 如請求項29或30之編碼器，其中該編碼器(200、210、220)經組態以使用該IRAP圖片及/或該先前DRAP圖片作為該DRAP圖片之該(等)唯一參考圖片來將該DRAP圖片之區塊編碼為跳略區塊或 編碼為圖框內區塊。
  34. 如請求項29或30之編碼器，其中該編碼器(200、210、220)經組態以在該DRAP圖片之一參考圖片集中包含該IRAP圖片之一識別符，該參考圖片集用信號發送該IRAP圖片作為一短期參考圖片或一長期參考圖片。
  35. 如請求項29或30之編碼器，其包括：一IRAP編碼器(211)，其經組態以編碼該IRAP圖片；及一DRAP編碼器(212)，其經組態以編碼該DRAP圖片。
  36. 如請求項29或30之編碼器，其包括：一處理器(221)；及一記憶體(222)，其包括可由該處理器(221)執行之指令，其中該處理器(221)操作以編碼該IRAP圖片；且該處理器(221)操作以編碼該DRAP圖片。
  37. 一種用於編碼一視訊串流之編碼器(230)，其包括：一IRAP編碼器(231)，其用於編碼該視訊串流之一圖框內隨機存取點(IRAP)圖片；及一DRAP編碼器(232)，其用於使用該IRAP圖片及/或該視訊串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片，該DRAP圖片經編碼為可用於參考之一尾隨圖片且該DRAP圖片構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點，其中該DRAP編碼器(232)經組態以編碼依輸出次序及解碼次序在該DRAP圖片後面的該視訊串流之至少一個非隨機存取點-非RAP圖片，該至少一個非RAP圖片不使用該視訊串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
  38. 一種包括指令之電腦程式(340)，該等指令在由一處理器(310)執行時致使該處理器(310)解碼一視訊位元串流之一圖框內隨機存取點(IRAP)圖片；使用該IRAP圖片及/或該視訊位元串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊位元串流之一DRAP圖片之唯一參考圖片來解碼該DRAP圖片，該DRAP圖片經編碼為可用於參考之一尾隨圖片且該DRAP圖片構成該視訊位元串流中之一隨機存取點；且解碼依輸出次序及解碼次序在該DRAP圖片後面的該視訊位元串流之至少一個非隨機存取點-非RAP圖片，該至少一個非RAP圖片不使用該視訊位元串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
  39. 一種包括指令之電腦程式(340)，該等指令在由一處理器(310)執行時致使該處理器(310)編碼一視訊串流之一圖框內隨機存取點(IRAP)圖片；使用該IRAP圖片及/或該視訊串流中之根據一解碼次序之一先前相依隨機存取點(DRAP)圖片作為該視訊串流之一DRAP圖片之唯一參考圖片來編碼該DRAP圖片，該DRAP圖片經編碼為可用於參考之一尾隨圖片且該DRAP圖片構成該視訊串流之經編碼圖片之一視訊位元串流中之一隨機存取點；且編碼依輸出次序及解碼次序在該DRAP圖片後面的該視訊串流之至少一個非隨機存取點-非RAP圖片，該至少一個非RAP圖片不使用該視訊串流中之依解碼次序在該DRAP圖片前面之任何非RAP圖片作為參考圖片。
  40. 一種包括如請求項38或39之電腦程式(340)之載體(350)，其中該載體(350)係一電子信號、一光學信號、一電磁信號、一磁信 號、一電信號、一無線電信號、一微波信號或一電腦可讀儲存媒體中之一者。
TW104116300A 2014-06-18 2015-05-21 相依隨機存取點圖片 TWI581620B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201462013624P 2014-06-18 2014-06-18
PCT/EP2015/057974 WO2015192990A1 (en) 2014-06-18 2015-04-13 Dependent random access point pictures

Publications (2)

Publication Number Publication Date
TW201608877A TW201608877A (zh) 2016-03-01
TWI581620B true TWI581620B (zh) 2017-05-01

Family

ID=52991708

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104116300A TWI581620B (zh) 2014-06-18 2015-05-21 相依隨機存取點圖片

Country Status (7)

Country Link
US (4) US10484711B2 (zh)
EP (2) EP3158752B1 (zh)
JP (2) JP6546197B2 (zh)
KR (1) KR101895176B1 (zh)
AR (1) AR100736A1 (zh)
TW (1) TWI581620B (zh)
WO (1) WO2015192990A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106470341B (zh) * 2015-08-17 2020-10-02 恩智浦美国有限公司 媒体显示系统
US11252429B2 (en) * 2018-04-27 2022-02-15 Ati Technologies Ulc Low-latency consumption of an encoded video bitstream
CN111372085B (zh) * 2018-12-25 2021-07-09 厦门星宸科技有限公司 影像解码装置与方法
MX2021009140A (es) * 2019-02-01 2021-10-13 Fraunhofer Ges Forschung Codec de video que permite el acceso aleatorio a subimágenes o regiones y concepto para la composición de video usando el mismo.
PL3939290T3 (pl) * 2019-04-03 2024-03-11 Huawei Technologies Co., Ltd. Kodowanie wideo z przeplotem z obrazami wiodącymi
US12069308B2 (en) 2019-05-16 2024-08-20 Nokia Technologies Oy Apparatus, a method and a computer program for handling random access pictures in video coding
US11539957B2 (en) * 2019-06-20 2022-12-27 Tencent America LLC Layered random access with reference picture resampling
US11843772B2 (en) 2019-12-06 2023-12-12 Ati Technologies Ulc Video encode pre-analysis bit budgeting based on context and features
US11070829B2 (en) 2019-12-16 2021-07-20 Ati Technologies Ulc Reducing latency in wireless virtual and augmented reality systems
CA3183280A1 (en) * 2020-05-22 2021-11-25 Ge Video Compression, Llc Video encoder, video decoder, methods for encoding and decoding and video data stream for realizing advanced video coding concepts
US11962936B2 (en) * 2020-09-29 2024-04-16 Lemon Inc. Syntax for dependent random access point indication in video bitstreams
EP4252420A4 (en) * 2020-12-28 2024-06-05 Beijing Bytedance Network Technology Co., Ltd. SIGNALING OF DEPENDENT SCAN INPUT WITH RANDOM ACCESS POINT
US11888913B2 (en) * 2021-04-28 2024-01-30 Lemon Inc. External stream representation properties
CN114615549B (zh) * 2022-05-11 2022-09-20 北京搜狐新动力信息技术有限公司 流媒体seek方法、客户端、存储介质和移动设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100177776A1 (en) * 2009-01-09 2010-07-15 Microsoft Corporation Recovering from dropped frames in real-time transmission of video over ip networks
WO2014003379A1 (ko) * 2012-06-24 2014-01-03 엘지전자 주식회사 영상 디코딩 방법 및 이를 이용하는 장치

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6115420A (en) * 1997-03-14 2000-09-05 Microsoft Corporation Digital video signal encoder and encoding method
AU2002228884A1 (en) 2000-11-03 2002-05-15 Compression Science Video data compression system
US6993078B2 (en) 2002-03-28 2006-01-31 International Business Machines Corporation Macroblock coding technique with biasing towards skip macroblock coding
WO2006003814A1 (ja) 2004-07-01 2006-01-12 Mitsubishi Denki Kabushiki Kaisha ランダムアクセス可能な映像情報記録媒体、及び記録方法、及び再生装置及び再生方法
US8291448B2 (en) * 2004-09-15 2012-10-16 Nokia Corporation Providing zapping streams to broadcast receivers
KR100718351B1 (ko) * 2005-09-28 2007-05-14 주식회사 팬택 동영상 파일의 요약 재생 시스템 및 이를 탑재한 이동통신단말기
US8582663B2 (en) * 2006-08-08 2013-11-12 Core Wireless Licensing S.A.R.L. Method, device, and system for multiplexing of video streams
JP5378227B2 (ja) 2006-11-14 2013-12-25 クゥアルコム・インコーポレイテッド チャネルスイッチングのためのシステムと方法
MX2010004935A (es) * 2007-11-05 2010-05-24 Thomson Licensing Un metodo para la codificacion de video escalable para cambio rapido de canal y resiliencia incrementada de error.
CN101938456B (zh) * 2009-06-30 2014-03-12 华为技术有限公司 一种减小媒体延迟的方法、设备及系统
US9706227B2 (en) * 2011-03-10 2017-07-11 Qualcomm Incorporated Video coding techniques for coding dependent pictures after random access
US9237356B2 (en) * 2011-09-23 2016-01-12 Qualcomm Incorporated Reference picture list construction for video coding
US20130308926A1 (en) * 2012-05-17 2013-11-21 Gangneung-Wonju National University Industry Academy Cooperation Group Recording medium, reproducing device for performing trick play for data of the recording medium, and method thereof
US9591303B2 (en) * 2012-06-28 2017-03-07 Qualcomm Incorporated Random access and signaling of long-term reference pictures in video coding
JP6050488B2 (ja) * 2012-07-06 2016-12-21 サムスン エレクトロニクス カンパニー リミテッド ランダムアクセスのためのマルチレイヤビデオ符号化方法及びその装置、並びにランダムアクセスのためのマルチレイヤビデオ復号化方法及びその装置
CN104904202A (zh) 2012-09-28 2015-09-09 三星电子株式会社 用于使用参考画面信息进行并行视频编码的方法和设备以及用于使用参考画面信息进行并行视频解码的方法和设备
KR20140048802A (ko) 2012-10-08 2014-04-24 삼성전자주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치
KR102270788B1 (ko) * 2013-01-10 2021-06-29 삼성전자주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치
WO2014168463A1 (ko) * 2013-04-12 2014-10-16 삼성전자 주식회사 랜덤 엑세스를 위한 멀티 레이어 비디오 부호화 방법 및 그 장치, 랜덤 엑세스를 위한 멀티 레이어 비디오 복호화 방법 및 그 장치
US10003815B2 (en) * 2013-06-03 2018-06-19 Qualcomm Incorporated Hypothetical reference decoder model and conformance for cross-layer random access skipped pictures
JP6022060B2 (ja) * 2013-06-12 2016-11-09 三菱電機株式会社 画像符号化装置及び画像符号化方法
EP3022921A4 (en) 2013-07-14 2017-03-15 Sharp Kabushiki Kaisha Signaling indications and constraints
WO2015025747A1 (ja) * 2013-08-22 2015-02-26 ソニー株式会社 符号化装置、符号化方法、送信装置、復号化装置、復号化方法および受信装置
WO2015053598A1 (ko) * 2013-10-12 2015-04-16 삼성전자 주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치
WO2015052943A1 (en) * 2013-10-13 2015-04-16 Sharp Kabushiki Kaisha Signaling parameters in vps extension and dpb operation
US10284858B2 (en) * 2013-10-15 2019-05-07 Qualcomm Incorporated Support of multi-mode extraction for multi-layer video codecs
CN104754341B (zh) * 2013-12-31 2019-02-26 华为技术有限公司 一种视频数据编码、解码的方法和装置
US10560710B2 (en) * 2014-01-03 2020-02-11 Qualcomm Incorporated Method for coding recovery point supplemental enhancement information (SEI) messages and region refresh information SEI messages in multi-layer coding
WO2015115644A1 (ja) 2014-02-03 2015-08-06 三菱電機株式会社 画像符号化装置、画像復号装置、符号化ストリーム変換装置、画像符号化方法、及び画像復号方法
US9807406B2 (en) * 2014-03-17 2017-10-31 Qualcomm Incorporated Picture flushing and decoded picture buffer parameter inference for multi-layer bitstreams

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100177776A1 (en) * 2009-01-09 2010-07-15 Microsoft Corporation Recovering from dropped frames in real-time transmission of video over ip networks
WO2014003379A1 (ko) * 2012-06-24 2014-01-03 엘지전자 주식회사 영상 디코딩 방법 및 이를 이용하는 장치

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Jianle Chen et al., "High efficiency video coding(HEVC) scalable extension draft 3," Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11, 14th Meeting:Vienna, AT, 25 July – 2 Aug. 2013. *
Miska M. Hannuksela et al., "MV-HEVC/SHVC HLS: On TSA and STSA pictures," Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11, 17th Meeting: Valencia, ES, 27 March –4 April 2014. *
Ye-Kui Wang et al., "On bitstreams starting with CRA pictures," Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11, 8th Meeting: San José, CA, USA, 1–10 February, 2012. *

Also Published As

Publication number Publication date
AR100736A1 (es) 2016-10-26
KR101895176B1 (ko) 2018-09-04
JP2019195203A (ja) 2019-11-07
US20220303574A1 (en) 2022-09-22
US10484711B2 (en) 2019-11-19
JP2017522766A (ja) 2017-08-10
US20200059666A1 (en) 2020-02-20
WO2015192990A1 (en) 2015-12-23
EP3158752B1 (en) 2021-08-04
TW201608877A (zh) 2016-03-01
KR20170030521A (ko) 2017-03-17
US11395000B2 (en) 2022-07-19
EP3158752A1 (en) 2017-04-26
US20160219301A1 (en) 2016-07-28
JP6546197B2 (ja) 2019-07-17
US20210112271A1 (en) 2021-04-15
US11997313B2 (en) 2024-05-28
EP3962089A1 (en) 2022-03-02

Similar Documents

Publication Publication Date Title
TWI581620B (zh) 相依隨機存取點圖片
TWI581614B (zh) 穩健的編碼及解碼視訊中的圖片
TWI571113B (zh) 視訊位元流中之隨機存取
US11943480B2 (en) Constraints and unit types to simplify video random access
KR102474461B1 (ko) 코딩된 영역들의 완료를 나타내는 신택스 구조들
TWI652940B (zh) 於視訊寫碼中用於基於子解碼圖像緩衝器（ｓｕｂ－ｄｐｂ）之解碼圖像緩衝器操作之傳信
KR102058759B1 (ko) 디코딩된 픽쳐 버퍼 및 참조 픽쳐 목록들에 관한 상태 정보의 시그널링 기법
US9247262B2 (en) Absolute or explicit reference picture signaling
US20160029019A1 (en) Reference picture set signaling and restriction on an electronic device
US10404987B2 (en) Layer switching in video coding
CN111182308A (zh) 视频解码方法、装置、计算机设备及存储介质
JP2022042505A (ja) メディアファイルにおける画像トランジションのためのトランジション期間
JP2022042508A (ja) Ｖｖｃ画像アイテムへの動作点情報特性の関連付け
TW202234891A (zh) 允許漂移限制之視訊寫碼概念技術