TW201611580A - ３ｄ影像編碼中的視圖間先進殘餘値預測方法 - Google Patents

３ｄ影像編碼中的視圖間先進殘餘値預測方法 Download PDF

Info

Publication number
TW201611580A
TW201611580A TW104119511A TW104119511A TW201611580A TW 201611580 A TW201611580 A TW 201611580A TW 104119511 A TW104119511 A TW 104119511A TW 104119511 A TW104119511 A TW 104119511A TW 201611580 A TW201611580 A TW 201611580A
Authority
TW
Taiwan
Prior art keywords
view
inter
picture
motion vector
current
Prior art date
Application number
TW104119511A
Other languages
English (en)
Other versions
TWI548264B (zh
Inventor
安基程
張凱
張賢國
黃晗
林建良
Original Assignee
聯發科技（新加坡）私人有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技（新加坡）私人有限公司 filed Critical 聯發科技（新加坡）私人有限公司
Publication of TW201611580A publication Critical patent/TW201611580A/zh
Application granted granted Critical
Publication of TWI548264B publication Critical patent/TWI548264B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/537—Motion estimation other than block-based
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一種視圖間先進殘餘值預測的方法及裝置被揭露。根據一實施例，使用在一視圖間方向上的當前區塊的一當前運動向量，來定位在一第一參考視圖中一第一視圖間參考圖片的一第一視圖間參考區塊。與第一視圖間參考區塊相關之第一運動向量被推導。當第一運動向量指向第二參考視圖之第二視圖間參考圖片時，推導的運動向量設為一預設推導的運動向量。使用推導的運動向量来識別當前區塊之第二時間參考圖片中的第二時間參考區塊。對應在第一參考視圖的第二視圖間參考區塊及第二時間參考區塊之間的差值的視圖間殘餘預測被產生並被作為當前視圖間殘餘的一預測。

Description

3D影像編碼中的視圖間先進殘餘值預測方法
本發明要求於2014年6月24日提交序列號為PCT/CN2014/0806156的PCT專利申請的優先權。PCT專利申請藉由引用其全部內容以併入本文。
本發明係關於三維影像編碼。特別是，本發明係關於一種在一三維(three-dimensional，3D)或多視圖編碼系統中的視圖間(Inter-View)先進殘餘值預測(Advanced Residual Prediction，ARP)。
近年來3D電視(television，TV)已經成為技術趨勢，旨在帶給觀看者絕妙的視覺體驗。很多技術已被開發以使能3D觀看。其中，多視圖(multi-view)影像是用於3D電視應用的一關鍵技術。由於所有相機從不同視點捕捉同一場景，因此多視圖影像數據包含大量的視圖間殘餘。為了開發視圖間殘餘，先進的工具如先進殘餘值預測(advanced residual prediction，ARP)已整合至傳統3D高效影像編碼(3D High Efficiency Video Coding，3D-HEVC)或3D先進影像編碼(3D Advanced Video Coding，3D-AVC)。當先進殘餘值預測(ARP)被使用時，當前區塊(current block)的殘餘係由一對應的殘餘 所預測。
有兩種類型的先進殘餘值預測，表示為視圖間先 進殘餘值預測及時間先進殘餘值預測。若當前運動向量(motion vector，MV)是在視圖間方向(即，一視差(disparity)運動向量)時，則該先進殘餘值預測被稱為視圖間先進殘餘值預測。對視圖間先進殘餘值預測而言，當前視圖間殘餘係藉由在時間方向上一對應的視圖間殘餘所預測。如果當前運動向量係在時間方向上時，則該先進殘餘值預測被稱為時間先進殘餘值預測。對時間先進殘餘值預測而言，當前時間殘餘係藉由來自視圖間方向上的一對應時間殘餘所預測。在現有之3D-高效影像編碼中視圖間先進殘餘值預測的基本概念如第1圖所示。當前圖片(110)和時間參考圖片(120)對應在當前視圖中的兩張圖片。一當前圖片的視圖間預測殘餘是在不同的存取單元(例如，不同的圖片順序計數(picture order count，POC)中藉由視圖間預測殘餘來預測。舉例來說，在當前圖片(110)中之當前區塊(112)的一視圖間預測(inter-view predictor)可根據視圖間方向上的運動向量(130)(例如，一視差向量(disparity vector，DV)來決定。用於先進殘餘值預測過程的區塊架構可對應一預測單元(prediction unit,PU)。換句話說，當前區塊對應於當前預測單元。當前區塊(112)的一對應時間參考區塊(122)可由使用一推導的運動向量(derived MV，DMV)140而自時間參考圖片(120)中的當前區塊(112)來定位。在視圖間方向的運動向量(130)也用於尋找一時間參考區塊(122)的視圖間預測。與圖片順序計數不同於當前圖片的圖片順序計數的時間參考區塊(122)相關的 視圖間殘餘用以預測與當前區塊(112)相關的視圖間殘餘。
第2圖係描述用於第1圖情況下推導的運動向量的 推導程序之例子。首先，在一對應視圖間參考圖片(210)中的視圖間參考區塊(212)係使用在視圖間方向上當前運動向量(130)而根據當前區塊(112)所定位。由於視圖間參考圖片(210)已在當前圖片之前已編碼，因此一運動向量(230)可被確定以用於視圖間參考區塊(212)。該運動向量(230)指向在參考視圖中時間參考圖片(220)的一時間參考區塊(222)。該運動向量(230)被縮放以獲得推導的運動向量(derived MV，DMV)140。第2圖所示的例子係描述運動向量(230)指向時間參考圖片(220)的情況，根據顯示順序，時間參考圖片(220)較當前時間參考圖片(120)在時間上遠於當前圖片(110)。時間參考圖片(120)被決定為在切面級(slice level)中的先進殘餘值預測參考圖片。因此，在此情況中，運動向量(230)必須縮短以導出此推導的運動向量(140)。然而，時間參考圖片(220)也可以比時間參考圖片(120)更接近當前圖片(110)。在此情況下，運動向量(230)將被放大以導出此推導的運動向量(140)。若時間參考圖片(220)的圖片順序計數(例如，圖片順序計數1(POC1))等於時間參考圖片(120)的圖片順序計數(例如，圖片順序計數2(POC2))，則無需進行縮放。
在推導的運動向量(140)被導出後，在當前視圖(例 如，從屬視圖(dependent view))中的時間參考區塊(122)可被定位出來。時間參考區塊(122)的視圖間預測殘餘可根據從屬視圖中時間參考區塊(122)和與其對應的在參考視圖中視圖間參 考區塊之間的差值來決定，其中該視圖間參考區塊係根據時間參考區塊(122)的位置及在視圖間方向上的運動向量(130)來定位。根據視圖間先進殘餘值預測，該視圖間預測殘餘接著被用作當前視圖間預測殘餘的一預測。
縮放程序在影像編碼領域中眾所皆知。運動向量縮放係根據圖片順序計數距離來執行。在現有3D-高效影像編碼中採用的具體實施作法如下所述，其中輸入為運動向量(230)而輸出是推導的運動向量(DMV)(140)：tx=(16384+(Abs(td)>>1))/td (1)
distScaleFactor=Clip3(-4096,4095,(tb*tx+32)>>6) (2)
DMV=Clip3(-32768,32767,Sign(distScaleFactor*MV)*((Abs(distScaleFactor*MV)+127)>>8)), (3)
其中td及tb推導如下：td=Clip3(-128,127,POC0-POC1) (4)
tb=Clip3(-128,127,POC0-POC2) (5)
如方程式(1)所示，除以td的操作被執行以及td對應於圖片順序計數0及圖片順序計數1之間的圖片順序計數距離(例如，POC0-POC1)。此差值進一步介於-128至+127的範圍內，如方程式(4)所示。當圖片順序計數1與圖片順序計數0相同時，td將等於0。由於分母td在方程式(1)中等於0，因此縮放過 程將變得無意義，並會導致編碼器的當機。當視圖間參考區塊的運動向量在如第3圖所示的視圖間方向中時，此種情況則可能會發生。在視圖間方向上的當前運動向量(330)指向一參考視圖j中視圖間參考圖片(310)內的視圖間參考區塊(312)。然而，與視圖間參考區塊(312)相關的運動向量(340)指向在視圖間方向上的另一視圖間參考圖片(320)。所述另一視圖間參考圖片(320)的圖片順序計數與當前圖片的圖片順序計數相同(即POC1=POC0)。因此，td=POC0-POC1且這將在運動向量縮放程序中造成問題。應該注意的是，第2圖及第3圖係顯示用於兩種不同情況下推導的運動向量的推導過程。在第2圖中，視圖間參考區塊(212)指向一時間參考圖片。在第3圖中，視圖間參考區塊(312)指向另一視圖間參考圖片。在得到推導的運動向量後，推導的運動向量用以定位在當前區塊的時間參考區塊(122)，如第1圖所示。此外，視圖間殘餘預測將被形成，並用以預測使用如第1圖所示之架構的當前視圖間殘餘。
因此，值得開發一方法來克服此運動向量縮放問題。
一種在三維或多視圖影像編碼系統中的視圖間(Inter-View)先進殘餘值預測(Advanced Residual Prediction，ARP)的方法及裝置被揭露。根據一實施例，自使用在一視圖間方向上的當前區塊的一當前運動向量，而自當前區塊來定位在一第一參考視圖中一第一視圖間參考圖片的一第一視圖間參考區塊。與上述第一視圖間參考區塊相關之一第一運動向量接 著被推導。當上述第一運動向量指向上述第一參考視圖中之一第一時間參考圖片時，一推導的運動向量根據上述第一運動向量被推導。當上述第一運動向量指向一第二參考視圖中之一第二視圖間參考圖片時，上述推導的運動向量設置為一預設推導的運動向量。使用上述推導的運動向量，識別對應於上述當前區塊之一第二時間參考圖片中的一第二時間參考區塊。對應在上述第一參考視圖的一第二視圖間參考區塊及上述第二時間參考區塊之間一第一差值的一視圖間殘餘預測被產生，其中上述第二視圖間參考區塊係由使用在上述視圖間方向之上述當前區塊的上述當前運動向量而自上述第二時間參考區塊的位置來定位。上述視圖間殘餘預測接著被使用作為對應在第一視圖間參考區塊及當前區塊之間差值之上述當前視圖間殘餘的一預測。
上述預設推導的運動向量可能對應一預設值(0,0)。當上述當前圖片具有與圖片順序計數0相等之一圖片順序計數時，上述第一參考視圖中之上述第一時間參考圖片具有與圖片順序計數1相等的圖片順序計數，在上述從屬視圖中之上述第二時間參考圖片具有與圖片順序計數2相等的圖片順序計數，上述推導的運動向量係根據圖片順序計數1至圖片順序計數0(POC1-POC0)及圖片順序計數2至圖片順序計數0(POC2-POC0)之間的一比例基於上述第一運動向量而推導出來。第二視圖間參考圖片和當前圖片有相同的圖片順序計數。再者，上述第二時間參考圖片對應由一切片級中推導的一先進殘餘值預測時間參考圖片。
第1圖係顯示視圖間先進殘餘值預測(Advanced Residual Prediction，ARP)架構之一例子，其中一當前區塊的視圖間預測殘餘係藉由一時間參考區塊的視圖間預測殘餘所預測。
第2圖係顯示根據現有3D-高效影像編碼(3D-HEVC)(基於高效影像編碼的3D編碼)(three-dimensional coding based on high efficiency video coding)之與視圖間先進殘餘值預測(advanced residual prediction，ARP)相關的推導的運動向量(derived motion vector，DMV)推導程序之例子。
第3圖係顯示根據現有3D-高效影像編碼(3D-HEVC)(基於高效影像編碼的3D編碼)之與視圖間先進殘餘值預測(advanced residual prediction，ARP)相關的推導的運動向量(derived motion vector，DMV)推導程序之例子，其中，與當前區塊之一視圖間參考區塊相關的運動向量指向另一視圖間參考圖片。
第4圖係顯示根據本發明一實施例之推導的運動向量(derived motion vector，DMV)推導程序之例子，其中，與當前區塊之一視圖間參考區塊相關的運動向量指向另一視圖間參考圖片及具有一與(0,0)相等預設值之預設推導的運動向量被使用。
第5圖係顯示根據本發明一實施例之視圖間先進殘餘值預測(Advanced Residual Prediction，ARP)的一示範流程圖，其中當與當前區塊之一視圖間參考區塊相關之運動向量指向另一 視圖間參考圖片時，一預設推導的運動向量(derived motion vector，DMV)被使用。
下方描述特舉出本發明最佳的實施模式。此描述之目的係為了說明本發明的一般原理而不應具有限制意義。本發明最佳的範圍係藉由所附的申請專利範圍所決定。
如上所述，根據現有3D-高效影像編碼計畫的視圖間(Inter-View)先進殘餘值預測(Advanced Residual Prediction，ARP)的編碼實施可能導致與視圖間參考區塊相關的一運動向量指向在另一參考視圖的視圖間參考圖片的視圖方向。因此，此運動向量指向具有與當前圖片相同的圖片順序計數(Picture Order Count，POC)的一視圖間參考圖片。這將在執行縮放運動向量時產生一問題。為了在現有3D-高效影像編碼實施中避免無意義及有問題的運動向量縮放，本發明揭露了一種方法及裝置來克服這個問題。
第4圖係顯示結合目前基於第3圖情況下的一實施例。當用於當前區塊(112)的、與參考視圖j中第一視圖間參考圖片(310)之視圖間參考區塊(312)相關的運動向量(340)係在視圖間方向時，一預設推導的運動向量將被使用。在此種情況下，運動向量(340)指向另一視圖間參考圖片(320)的一視圖間參考區塊(412)，該視圖間參考區塊(412)對應於具有與當前圖片之圖片順序計數(例如，圖片順序計數0(POC0))相同之圖片順序計數(例如，圖片順序計數1(POC1))的另一參考視圖(參考視圖i)。參考區塊(312)將由當前區塊(112)的在視圖間 方向上的當前運動向量(330)而定位。在此情況下，沒有運動向量縮放被使用，如「X」所示。相反地，推導的運動向量被直接設置為預設值。舉例來說，預設的推導的運動向量可設為(0,0)。當預設的推導的運動向量值(0,0)被使用時，在當前視圖(例如，從屬視圖k)中時間參考圖片(120)的一時間參考區塊(410)將被確定位置。時間參考圖片(120)可對應由切片級推導的一先進殘餘值預測(ARP)時間參考圖片。由於預設推導的運動向量具有一(0,0)值，因此時間參考區塊(410)與當前區塊(112)位於相同位置。時間參考區塊(410)的視圖間預測殘餘的可根據如第1圖所示之視圖間殘餘預測架構來決定。換言之，該視圖間預測殘餘係根據在從屬視圖的時間參考區塊(410)與在參考視圖中一對應的視圖間參考區塊之間的差值而形成，參考視圖中一對應的視圖間參考區塊可在視間方向上利用當前運動向量(130)而自時間參考塊(410)來定位。根據視圖間先進殘餘值預測，該視圖間預測殘餘將用作當前視圖間預測殘餘的一預測值。
本發明可藉由修改現有的語法/語義而應用至現有3D高效影像編碼中。舉例來說，現有3D高效影像解碼(JCT3V-H1001_v2)相關草稿文件相關部分中第I.8.5.3.3.7.4節，可修改如表1所示：表1 I 8.5.3.3.7.4用於殘餘預測的來自參考區塊的一運動向量的推導過程
…
當編碼單元refCU的變數CuPredMode等於跳過模式MODE_SKIP或幀間模式MODE_INTER時，以下適用於範圍0至1的X中，包括：- 變數refPredFlagLX被設為等同於預測單元refPU的預測使用旗標predFlagLX。
- 當旗標avai1F1ag等於0且變數refPredFlagLX等於1時，則適用以下：
i.令變數refPicListRefX為參考圖片refPic的參考圖片清單X。
ii.令mvLX和refIdxLX分別為運動向量及對應變數refPicListRefX之預測單元refPU的參考索引。
iii.當PicOrderCnt(refPicListRefX[refIdxLX])不等於PicOrderCnt(refPie) (refPicListRefX[refIdxLX]為refPic的一時間參考圖片)且殘差預測參考圖片索引RpRefIdxLX不等於-1時，旗標availFlag被設置為1，Y被設為等於X，而如次小節I.8.5.3.3.7.3所示的殘餘預測運動向量縮放程序係由等於X的預測清單使用變數、運動向量mvLX所調用，而參考圖片refPicListRefX[refIdxLX]為輸入，mvT為輸出。
在上述基於現有3D-高效影像編碼標準示範性的實施例中，新增新文字「PicOrderCnt(refPicListRefX[refIdxLX])不等於 PicOrderCnt(refPic)」，以粗體文字格式來表示。同時，在引號中原文「refPicListRefX[refIdxLX]為一refPic的時間參考圖片」被刪除，如斜體文字格式所示。在表格1的(iii)中，第I.8.5.3.3.7.3子節描述殘餘預測運動向量縮放程序。換言之，當PicOrderCnt(refPicListRefX[refIdxLX])不等於PicOrderCnt(refPic)且RpRefIdxLX不等於-1時，將調用縮放程序。其中，PicOrderCnt(refPicListRefX[refIdxLX]對應當前區塊的參考區塊(例如，該預測單元refPU)之一參考圖片的圖片順序計數。在第2圖所示的例子中，PicOrderCnt(refPicListRefX[refIdxLX]對應由運動向量(230)所指向的圖片順序計數(例如，時間參考圖片(220)的圖片順序計數)。在第3圖和第4圖所示的例子中，PicOrderCnt(refPicListRefX[refIdxLX]對應由運動向量(340)所指出的圖片順序計數(例如，視圖間參考圖片(320)的圖片順序計數)。PicOrderCnt(refPic)對應一參考圖片的圖片順序計數，其中當前區塊的參考區塊位於該參考圖片中。如第2圖的例子所示，PicOrderCnt(refPic)對應視圖間參考圖片(210)的圖片順序計數。在如第3圖和第4圖的例子中，PicOrderCnt(refPic)對應由當前運動向量(330)在視圖間方向所指向視圖間參考圖片(310)的圖片順序計數。
第5圖係顯示本發明一實施例之視圖間先進殘餘值預測(ARP)的示範流程圖，其中當與當前區塊之一視圖間參考區塊相關的運動向量指向另一視圖間參考圖片時，一預設推導的運動向量(derived motion vector，DMV)被使用。在步驟510 中，該系統接收與從屬視圖內一當前圖片之一當前區塊中相關的輸入數據。對編碼而言，輸入數據對應於要編碼的紋理數據或深度數據。對解碼而言，輸入數據對應於要解碼的已編碼的紋理數據或深度數據。輸入數據可從記憶體(如，計算機記憶體、緩衝區(隨機存取記憶體(Random Access Memory，RAM)或動態隨機存取記憶體(Dynamic Random Access Memory，DRAM))或其它媒體)或從一處理器中擷取。在步驟520中，自使用在一視圖間方向上的當前區塊的一當前運動向量(motion vector，MV)，而自當前區塊的位置來定位在一第一參考視圖中一第一視圖間參考圖片的一第一視圖間參考區塊。在步驟530中，與第一視圖間參考區塊相關的第一運動向量被推導。在步驟540中，決定該第一運動向量指向一時間方向還是一視圖間方向。當結果為「時間方向」時，在步驟542中，一推導的運動向量可根據第一運動向量來決定。當結果是「視圖間方向」時，在步驟544中，推導的運動向量被設置為的一預設推導的運動向量。在步驟542或步驟544中當推導的運動向量被決定後，在步驟550中，使用推導的運動向量，在從屬視圖中一第二時間參考圖片的一第二時間參考區塊被識別出。在步驟560中，對應在第一參考視圖中一第二視圖間參考區塊及第二時間參考區塊之間一第一差值的視圖間殘餘預測將被產生，其中第二視圖間參考區塊係由使用在視圖間方向之當前區塊的當前運動向量而自第二時間參考區塊的位置來定位。在步驟570中，使用視圖間殘餘預測，應用編碼或解碼於對應於第一視圖間參考區塊和當前區塊之間的一第二差值的當前視圖 間殘餘。
如上所示的流程圖係用以說明根據本發明視圖間先進殘餘值預測的例子。所屬領域之技術人員可以修改每一步驟、調整步驟順序、分割步驟，或者組合上述步驟以實現本發明，而沒有脫離本發明精神範圍。
上述描述特定應用以及需求的內容背景下，用於使能所屬領域技術人員實現本發明。對於所屬領域技術人員，所述實施例的各種變形是顯而易見的，以及所定義的一般原則可以用於其他實施例。因此，本發明不限於所示以及所描述的特定實施例，但是在最寬範圍內符合所揭示的原則和新穎性特徵。在上述細節描述中，各種特定細節用於提供對於本發明的透徹理解。但是，所屬領域技術人員可以理解本發明可以被實現。
本發明上述實施例可以以各種硬體、軟體或者上述兩者的組合而實現。舉例說明，本發明的實施例可以為集成到視訊壓縮晶片中的積體電路，或者整合到視訊壓縮軟體中的程式碼以實現所述處理。本發明的一個實施例也可以為程式碼，以被數位訊號處理器(Digital Signal Processor，DSP)所實施以執行上述處理。本發明也包含電腦處理、資料信號處理器、微處理器或者現場可編程閘列(field programmable gate array,FPGA)所執行的多個功能。上述處理器，透過執行定義了本發明特定方法所體現的機器可讀軟體代碼，或者韌體代碼，可以配置為根據本發明的特定任務。軟體代碼或者韌體代碼可以不同程式設計語言以及不同格式或者風格而被開發。 軟體代碼也可以編譯用於不同目標平臺。但是，不同代碼格式、風格以及軟體代碼語言，或者其他配置代碼的方式，以根據本發明，不脫離本發明精神範圍內執行任務。
在不脫離本發明精神以及核心特徵範圍內，本發明可以體現為其他特地形式。所述例子被認為是全面描述，僅用於說明，但是不是限制。本發明的保護範圍，因此，由所附申請專利範圍而不是前述描述而指示。在申請專利範圍的意思以及範圍內的所有變化可以被認為是包含在申請專利範圍保護範圍內。

Claims (10)

  1. 一種用於三維或多視圖影像編碼的視圖間先進殘餘值預測的方法，上述方法包括：接收與在一從屬視圖中一當前圖片之一當前區塊相關的輸入數據；自使用在一視圖間方向上的當前區塊的一當前運動向量，而自當前區塊的位置來定位在一第一參考視圖中一第一視圖間參考圖片的一第一視圖間參考區塊；推導與上述第一視圖間參考區塊相關的一第一運動向量；當上述第一運動向量指向在上述第一參考視圖中之一第一時間參考圖片時，根據上述第一運動向量決定一推導的運動向量；當上述第一運動向量指向在一第二參考視圖中之一第二視圖間參考圖片時，設置上述推導的運動向量為一預設推導的運動向量；使用上述推導的運動向量，識別對應於上述當前區塊之一第二時間參考圖片中的一第二時間參考區塊；產生對應於上述第一參考視圖中的一第二視圖間參考區塊和上述第二時間參考區塊之間一第一差值的一視圖間殘餘預測，其中上述第二視圖間參考區塊係由使用在上述視圖間方向之上述當前區塊的上述當前運動向量而自上述第二時間參考區塊的位置來定位；以及使用上述視圖間殘餘預測，應用編碼或解碼於對應於上述第一視圖間參考區塊和上述當前區塊之間的一第二差值的 當前視圖間殘餘。
  2. 如申請專利範圍第1項所述之方法，其中上述預設推導的運動向量對應一預設值(0,0)。
  3. 如申請專利範圍第1項所述之方法，其中上述第二視圖間參考視圖具有與上述當前圖片相同的圖片順序計數。
  4. 如申請專利範圍第1項所述之方法，其中當上述當前圖片具有與圖片順序計數0相等之一圖片順序計數，在上述第一參考視圖中之上述第一時間參考圖片具有與圖片順序計數1相等的圖片順序計數，在上述從屬視圖中之上述第二時間參考圖片具有與圖片順序計數2相等的圖片順序計數，上述推導的運動向量係根據圖片順序計數1至圖片順序計數0的差值與圖片順序計數2至圖片順序計數0的差值之間的一比例，基於上述第一運動向量而推導出來。
  5. 如申請專利範圍第1項所述之方法，其中上述第二時間參考圖片對應由一切片級中推導的一先進殘餘值預測時間參考圖片。
  6. 一種用於三維或多視圖影像編碼的視圖間先進殘餘值預測的裝置，上述裝置包括一個或多個電子電路，上述一個或多個電子電路被配置為：接收與在一從屬視圖中一當前圖片之一當前區塊相關的輸入數據；自使用在一視圖間方向上的當前區塊的一當前運動向量，而自當前區塊的位置來定位在一第一參考視圖中一第一視圖間參考圖片的一第一視圖間參考區塊； 推導與上述第一視圖間參考區塊相關的一第一運動向量；當上述第一運動向量指向在上述第一參考視圖中之一第一時間參考圖片時，根據上述第一運動向量決定一推導的運動向量；當上述第一運動向量指向在一第二參考視圖中之一第二視圖間參考圖片時，設置上述推導的運動向量為一預設推導的運動向量；使用上述推導的運動向量，識別對應於上述當前區塊之一第二時間參考圖片中的一第二時間參考區塊；產生對應於上述第一參考視圖中的一第二視圖間參考區塊和上述第二時間參考區塊之間一第一差值的一視圖間殘餘預測，其中上述第二視圖間參考區塊係由使用在上述視圖間方向之上述當前區塊的上述當前運動向量而自上述第二時間參考區塊的位置來定位；以及使用上述視圖間殘餘預測，應用編碼或解碼於對應於上述第一視圖間參考區塊和上述當前區塊之間的一第二差值的當前視圖間殘餘。
  7. 如申請專利範圍第1項所述之裝置，其中上述預設推導的運動向量對應一預設值(0,0)。
  8. 如申請專利範圍第1項所述之裝置，其中上述第二視圖間參考視圖具有與上述當前圖片相同的圖片順序計數。
  9. 如申請專利範圍第1項所述之裝置，其中當上述當前圖片具有與圖片順序計數0相等之一圖片順序計數，在上述第一參考視圖中之上述第一時間參考圖片具有與圖片順序計數1 相等的圖片順序計數，在上述從屬視圖中之上述第二時間參考圖片具有與圖片順序計數2相等的圖片順序計數，上述推導的運動向量係根據圖片順序計數1至圖片順序計數0的差值與圖片順序計數2至圖片順序計數0的差值之間的一比例基於上述第一運動向量而推導出來。
  10. 如申請專利範圍第1項所述之裝置，其中上述第二時間參考圖片對應由一切片級中推導的一先進殘餘值預測時間參考圖片。
TW104119511A 2014-06-24 2015-06-17 ３ｄ影像編碼中的視圖間先進殘餘値預測方法 TWI548264B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2014/080615 WO2015196364A1 (en) 2014-06-24 2014-06-24 Methods for inter-view advanced residual prediction

Publications (2)

Publication Number Publication Date
TW201611580A true TW201611580A (zh) 2016-03-16
TWI548264B TWI548264B (zh) 2016-09-01

Family

ID=54936438

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104119511A TWI548264B (zh) 2014-06-24 2015-06-17 ３ｄ影像編碼中的視圖間先進殘餘値預測方法

Country Status (3)

Country Link
US (1) US9843821B2 (zh)
TW (1) TWI548264B (zh)
WO (2) WO2015196364A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112243131B (zh) * 2020-10-31 2022-11-11 西安邮电大学 基于可重构阵列处理器的先进残差预测方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140011481A (ko) * 2011-06-15 2014-01-28 미디어텍 인크. 3d 비디오 코딩을 위한 움직임 벡터 및 변이 벡터의 예측과 보상 방법 및 장치
CN103139555B (zh) 2011-11-22 2017-07-11 浙江大学 一种视频序列参数编码方法、解码方法、对应的装置及码流
US9357195B2 (en) * 2012-08-16 2016-05-31 Qualcomm Incorporated Inter-view predicted motion vector for 3D video
US9998727B2 (en) * 2012-09-19 2018-06-12 Qualcomm Incorporated Advanced inter-view residual prediction in multiview or 3-dimensional video coding
EP2966868B1 (en) * 2012-10-09 2018-07-18 HFI Innovation Inc. Method for motion information prediction and inheritance in video coding
WO2014075236A1 (en) * 2012-11-14 2014-05-22 Mediatek Singapore Pte. Ltd. Methods for residual prediction with pseudo residues in 3d video coding
US10136143B2 (en) * 2012-12-07 2018-11-20 Qualcomm Incorporated Advanced residual prediction in scalable and multi-view video coding

Also Published As

Publication number Publication date
WO2015196988A1 (en) 2015-12-30
WO2015196364A1 (en) 2015-12-30
US9843821B2 (en) 2017-12-12
US20160219304A1 (en) 2016-07-28
TWI548264B (zh) 2016-09-01

Similar Documents

Publication Publication Date Title
AU2014286821B2 (en) Method of texture merging candidate derivation in 3D video coding
JP6472877B2 (ja) 視点合成予測を含む３ｄまたは多視点映像符号化の方法
JP5268645B2 (ja) カメラパラメータを利用して視差ベクトルを予測する方法、その方法を利用して多視点映像を符号化及び復号化する装置、及びそれを行うためのプログラムが記録された記録媒体
KR101779313B1 (ko) 깊이 룩업 테이블 시그널링을 위한 방법
US9924168B2 (en) Method and apparatus of motion vector derivation 3D video coding
WO2015007159A1 (en) Method of disparity derived depth coding in 3d video coding
JP6042556B2 (ja) ３ｄビデオ符号化における制約される視差ベクトル導出の方法と装置
US20160316224A1 (en) Video Encoding Method, Video Decoding Method, Video Encoding Apparatus, Video Decoding Apparatus, Video Encoding Program, And Video Decoding Program
KR20150034222A (ko) 3d 비디오 코딩에서의 인터 뷰 모션 벡터 예측과 변이 벡터 예측의 방법 및 장치
US20160029045A1 (en) Method and Apparatus of Disparity Vector Derivation for Three- Dimensional Video Coding
US20160119643A1 (en) Method and Apparatus for Advanced Temporal Residual Prediction in Three-Dimensional Video Coding
TWI548264B (zh) ３ｄ影像編碼中的視圖間先進殘餘値預測方法
WO2012177063A2 (ko) 스킵 모드 부호화 복호화 방법 및 장치
EP2773115A1 (en) Coding and decoding method, device, encoder, and decoder for multi-view video
CA2921759C (en) Method of motion information prediction and inheritance in multi-view and three-dimensional video coding
US20160360200A1 (en) Video encoding method, video decoding method, video encoding apparatus, video decoding apparatus, video encoding program, and video decoding program
JP2011250334A (ja) 多視点画像補正装置
US20170019683A1 (en) Video encoding apparatus and method and video decoding apparatus and method
CN105393535B (zh) 3d视频编码中的视图间先进残差预测方法
KR20160022349A (ko) 3차원 비디오 코딩에서 진보된 시간적 잔차 예측을 위한 방법 및 장치