TWI488145B - 於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置 - Google Patents

於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置 Download PDF

Info

Publication number
TWI488145B
TWI488145B TW097130809A TW97130809A TWI488145B TW I488145 B TWI488145 B TW I488145B TW 097130809 A TW097130809 A TW 097130809A TW 97130809 A TW97130809 A TW 97130809A TW I488145 B TWI488145 B TW I488145B
Authority
TW
Taiwan
Prior art keywords
image
region
difference
view
difference vector
Prior art date
Application number
TW097130809A
Other languages
English (en)
Other versions
TW200915228A (en
Inventor
Purvin Bibhas Pandit
Peng Yin
Polin Lai
Original Assignee
Thomson Licensing
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing filed Critical Thomson Licensing
Publication of TW200915228A publication Critical patent/TW200915228A/zh
Application granted granted Critical
Publication of TWI488145B publication Critical patent/TWI488145B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Description

於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置
本原理一般係關於視訊編碼及解碼，而且更特定言之係關於於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置。
相關申請案交叉參考
本申請案主張於2007年8月15日申請之美國臨時專利申請案號第60/955,911號的權利，而且全部以引用的方式併入本文中。
最近已採用運動跳過模式作為一種編碼工具，其用於國際標準化組織/國際電子技術委員會(ISO/IEC)動畫專家組4(MPEG－4)第10部分進階視訊編碼(AVC)標準/國際電信聯盟、電信部門(ITU－T)H.264建議(下文稱作"MPEG－4 AVC"標準)之多重視圖視訊編碼(MVC)擴充。運動跳過模式為每一圖像利用一單一整體運動向量以找到鄰近視圖中的對應巨集區塊並且推斷運動資訊。此方法之問題係一場景不同的區域具有不同的差異。舉例而言，一前景物體與該遠背景相比會具有一更大的差異。以一單一整體差異近似該成框架差異並不準確。
先前技術利用運動跳過模式大致分解為兩個階段。該第一階段涉及搜索該對應巨集區塊，該第二階段涉及導出該運動資訊。在該第一階段，利用一"整體差異向量"以指示一鄰近視圖之圖像中的該對應部分。在該第二階段，從鄰 近視圖之圖像中的對應巨集區塊導出運動資訊，並將該運動資訊複製且應用於當前巨集區塊。
運動跳過模式之先前技術方法藉由一整體差異向量(GDV)將該對應巨集區塊定位於該鄰近視圖中。該整體差異向量藉由當前圖像與鄰近視圖圖像之間的巨集區塊大小的單元來測量。該整體差異向量可週期性地估計與解碼，例如在每一個固定圖像中。在此情況下，一非固定圖像之整體差異向量係使用來自該等固定圖像之近期整體差異向量而內插。該整體差異向量係獲得為整個圖像之一單一向量。
參考圖1，依據先前技術之整體差異之導出一般由參考數字100指示。導出100係相對於一空間軸110與一時間軸120來顯示。
在某一圖像順序計數(POC)上之當前視圖與該等鄰近視圖之一之間的GDVcur 使用以下公式導出：
GDVahead 與GDVbenind 係兩個最近解碼之整體差異向量。POCcur 、POCahead 與POCbehind 係沿著該時間軸120編號之圖像順序計數。當前框架可能具有與在接合多重視圖視訊模型(JMVM)之多重視圖視訊編碼(MVC)擴充語法之序列參數組(SPS)中定義之視圖間預報參考的數目一樣多的GDVcur 。
為了解碼該整體差異，建議在片段(slice)層級利用一語法元素，即global_disparity_mb_IX。該語法元素包括已測量整體差異向量分量，其中非固定圖像之整體差異利用以上等式導出。
表1揭示片段標頭語法，其用於運動跳過模式，結合該MPEG－4 AVC標準之多重視圖視訊編碼擴充。
表1中某些語法元素定義如下：global_disparity_mb_I0[compldx]揭示當前片段與list0之視圖間預報參考之片段之間的巨集區塊大小單元之整體差異。水平偏移首先以解碼順序解碼並係指定為Compldx＝0。垂直偏移係其次以解碼順序解碼並係指定為Compldx＝1。
global_disparity_mb_I1[compldx]與global_disparity_mb_I0具有相同的語義學，I0與list0分別由I1與list1取代。表2揭示運動跳過模式之巨集區塊層語法。
表2中某些語法元素定義如下：motion_skip_flag等於1指示該已編碼巨集區塊係運動跳過模式，motion_skip_flag等於0揭示該已編碼巨集區塊非運動跳過模式。
先前技術方法之主要缺點係一場景內之差異在該場景之不同區域內有很大差別。舉例而言，一前景物體與該遠背景相比會具有一更大的差異。因此，用一單一"整體差異向量"覆蓋整個圖像不準確。這會導致從該鄰近視圖發現並不真正對應於考量中的當前巨集區塊之巨集區塊。
本原理提出該先前技術之此等及其他缺點與不利之處，本原理係引導至用於多重視圖編碼視訊利用區域差異向量之運動跳過模式的方法與裝置。
根據本原理之一態樣，提供一種裝置。該裝置包括一編 碼器，其藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲得一影像區塊的運動資訊而編碼對應於多重視圖視訊內容之至少一視圖的一圖像之該影像區塊。該另一圖像之區域的差異資訊對應於少於該另一圖像之全部。
根據本原理之另一態樣，提供一種方法。該方法包括藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域之差異資訊獲得一影像區塊的運動資訊而編碼對應於多重視圖視訊內容之至少一視圖的一圖像之該影像區塊。該另一圖像之區域的差異資訊對應於少於該另一圖像之全部。
根據本原理之另一態樣，提供一種裝置。該裝置包括一解碼器，其藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲得一影像區塊的運動資訊而解碼對應於多重視圖視訊內容之至少一視圖的一圖像之該影像區塊。該另一圖像之區域的差異資訊對應於少於該另一圖像之全部。
根據本原理之另一態樣，提供一種方法。該方法包括藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲得一影像區塊的運動資訊而解碼對應於多重視圖視訊內容之至少一視圖的一圖像之該影像區塊。該另一圖像之區域的差異資訊對應於少於該另一圖像之全部。
從結合附圖理解的以下示範性具體實施例之詳細說明， 本原理之此等及其他態樣、特徵及優點將變得顯而易見。
本發明原理係關於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置。
本說明書說明本發明原理。因而應該瞭解，雖然本文並未清楚說明或顯示，但熟悉技術人士將能夠設計各種配置，使該等原理具體化，且此等配置包含於本發明之精神與範疇內。
本文引用的所有範例及條件語言主要意圖用於教學目的，以幫助讀者理解本原理及由發明人貢獻用於增進該技術的概念，且這些範例及條件語言應理解為並不受限於此等明確引用的範例及條件。
而且，本文中說明本發明原理的原理、態樣及具體實施例的所有陳述以及本發明原理的特定範例希望包含本發明的結構及功能等效物。此外，希望此等等效物會包括目前已知的等效物及會在將來開發的等效物，即開發用於執行相同功能的任何元件，而無論結構為何。
因而例如，熟悉技術人士應該瞭解，本文中的方塊圖代表說明性電路的概念圖，其使本原理具體化。同樣地，應該瞭解，任何流程圖式、流程圖表、狀態轉變圖、假碼及類似物代表各種程式，其實質上可代表於電腦可讀取媒體中，且不管此電腦或處理器是否清楚顯示，其均可由一電腦或處理器來執行。
在該等圖式中顯示的各種元件的功能可透過利用專用的 硬體以及能夠結合適當軟體來執行軟體的硬體而提供。當藉由一處理器來提供時，該等功能可藉由一單一專用處理器、藉由一單一共用處理器、或藉由複數個個別處理器(某些處理器可共用)來提供。而且，術語"處理器"或"控制器"的清楚利用不應解釋為專門指能夠執行軟體的硬體，且可隱含包括(但不限於)數位信號處理器("DSP")硬體、用於儲存軟體的唯讀記憶體("ROM")、隨機存取記憶體("RAM")及非揮發性儲存器。
也可包括傳統及/或訂製的其他硬體。同樣，在該等圖式中顯示的任何切換器僅為概念性。其功能可透過操作程式邏輯、透過專用邏輯、透過程式控制及專用邏輯的互動甚至手動操作來執行，特定的技術可由執行者從上下文中經過更明確理解後作出選擇。
在本文之申請專利範圍中，表達為實行一特定功能之構件的任何元件旨在涵蓋實行該功能之任何方法，其包括(例如)：a)實行該功能的電路元件之一組合，或b)任何形式的軟體，因此其包括韌體、微碼等等，其與適當的電路組合，用於執行該軟體以實行該功能。如此類申請專利範圍之定義，本發明原理寓於以下事實，即藉由各種引用構件提供的功能性必須按該等申請專利範圍要求之方式組合及整和。因此應把能提供此等功能性的任何構件當作等同於本文中顯示的構件。
說明書中參考本原理之"一個具體實施例"或"一具體實施例"意指結合該具體實施例而說明的一特定特徵、結 構、特點及其類似物係包含於本發明原理之至少一具體實施例中。因此，出現在該說明書全篇之各種地方之片語"在一個具體實施例中"或"在一具體實施例中"之呈現未必全部指相同具體實施例。
如本文所使用，"高階語法"係指存在於階層式常駐在巨集區塊層以上之位元流中之語法。例如，如本文所使用，高階語法可能係指(但不限於)在片段標頭層級、補充增強資訊(SEI)層級、圖像參數集(PPS)層級、序列參數集(SPS)層級、視圖參數集(VPS)層級及網路提取層(NAL)單元標頭層級的語法。
此外，如本文互換性所使用，"跨視圖"與"視圖間"兩者都是指屬於一個非一當前視圖之視圖的圖像。
此外，如本文所使用，"複數個"指一項目之兩個或兩個以上。因此，例如，"複數個區域差異向量"指兩個或兩個以上區域差異向量。
而且，如本文所使用，片語"運動資訊"指對應於相同視圖之時間變化。
此外，如本文所使用，片語"差異資訊"指跨越不同視圖之空間變化。
此外，如本文所使用，"現存語法"指存在於與多重視圖內容有關的任何現有視訊編碼標準、建議及其擴充之中的語法，包括但不限於MPEG－4 AVC標準，與為本原理之目的而生成之新語法形成比較。因此，此種現存語法可為至少一雙重目的服務，第一係與其相關之現有視訊編碼標準 及建議的預期目的，以及至少一個與本原理相一致之目的。
應瞭解，使用術語"及/或"與"至少一個"，例如在"A及/或B"與"A與B中之至少一者"之情況中，希望包含該第一列表選項(A)之選擇、該第二列表選項(B)之選擇，或者全部兩個選項(A與B)之選擇。作為另一範例，在"A、B及/或C"與"A、B與C中之至少一者"之情況中，此類片語希望包含該第一列表選項(A)之選擇、該第二列表選項(B)之選擇、該第三列表選項(C)之選擇、該第一與該第二列表選項(A與B)之選擇、該等第一與第三列表選項(A與C)之選擇、該等第二與第三列表選項(B與C)之選擇，或者全部三個選項(A與B與C)之選擇。如熟諳此技術與相關技術者可輕易地瞭解，此可對於如列表之許多項目加以擴充。
此外，應瞭解，雖然本文中本原理的一個或多個具體實施例係相對於該MPEG－4 AVC標準之多重視圖視訊編碼(MVC)擴充加以說明，但本原理並非僅限於此標準，因而可相對於與多重視訊編碼相關之其他視訊編碼標準、建議及其擴充(包含該MPEG－4 AVC標準之擴充)加以使用，同時維護本原理之精神。
參考圖2，一示範性多重視圖視訊編碼(MVC)編碼器一般係藉由參考數字200來指示。該編碼器200包含一組合器205，其具有以信號通信方式與一變換器210之一輸入連接之一輸出。該變換器210的一輸出係以信號通信方式與量化器215之一輸入連接。該量化器215的一輸出係以信號通 信方式與一熵編碼器220之一輸入及一反量化器225之一輸入連接。該反量化器225之一輸出係以信號通信方式與一反變換器230之一輸入連接。該反變換器230之一輸出係以信號通信方式與一組合器235之一第一非反相輸入連接。該組合器235的一輸出係以信號通信方式與一內預報器245之一輸入及一解區塊濾波器250之一輸入連接。該解區塊濾波器250之一輸出係以信號通信方式與一參考圖像儲存器255(用於視圖i)之一輸入連接。該參考圖像儲存器255之一輸出係以信號通信方式與一運動補償器275之一第一輸入及一運動估計器280之一第一輸入連接。該運動估計器280之一輸出係以信號通信方式與該運動補償器275之一第二輸入連接。
一參考圖像儲存器260(用於其他視圖)之一輸出係以信號通信方式與一差異/照明估計器270之一第一輸入及一差異/照明補償器265之一第一輸入連接。該差異/照明估計器270之一輸出係以信號通信方式與該差異/照明補償器265之一第二輸入連接。
該熵編碼器220的一輸出係可供作為該編碼器200的一輸出。該組合器205的一非反相輸入係可供作為該編碼器200之一輸入，而且以信號通信方式與該差異/照明估計器270之一第二輸入及該運動估計器280之一第二輸入連接。一切換器285之一輸出係以信號通信方式與該組合器235之一第二非反相輸入及與該組合器205之一反相輸入連接。該切換器285包括以信號通信方式與該運動補償器275之一輸 出連接之一第一輸入、以信號通信方式與該差異/照明補償器265之一輸出連接之一第二輸入，以及以信號通信方式與該內預報器245之一輸出連接之一第三輸入。
一模式決策模組240具有連接至該切換器285以控制由該切換器285選擇哪一輸入之一輸出。
參考圖3，一示範性多重視圖視訊編碼(MVC)解碼器一般係藉由參考數字300來指示。該解碼器300包含一熵解碼器305，其具有以信號通信方式與一反量化器310之一輸入連接之一輸出。該反量化器的一輸出係以信號通信方式與一反變換器315之一輸入連接。該反變換器315之一輸出係以信號通信方式與一組合器320之一第一非反相輸入連接。該組合器320之一輸出係以信號通信方式與一解區塊濾波器325之一輸入及一內預報器330之一輸入連接。該解區塊濾波器325之一輸出係以信號通信方式與一參考圖像儲存器340(用於視界i)之一輸入連接。參考圖像儲存器340之一輸出係以信號通信方式與一運動補償器335之一第一輸入連接。
一參考圖像儲存器345(用於其他視圖)之一輸出係以信號通信方式與一差異/照明補償器350之一第一輸入連接。
該熵編碼器305之一輸入係可供作為至該解碼器300之一輸入，以接收一殘餘位元流。再者，一模式模組360的一輸入亦係可供作為至該解碼器300之一輸入，用於接收控制語法，以控制由該切換器355選擇哪一輸入。另外，該運動補償器335之一第二輸入係用作該解碼器300之一輸 入，以接收運動向量。同時，該差異/照明補償器350之一第二輸入係用作至該解碼器300之一輸入，以接收差異向量與照明補償語法。
一切換器355之一輸出係以信號通信方式與該組合器320之一第二非反相輸入連接。該切換器355之一第一輸入係以信號通信方式與該差異/照明補償器350之一輸出連接。該切換器355之一第二輸入係以信號通信方式與該運動補償器335之一輸出連接。該切換器355之一第三輸入係以信號通信方式與該內預報器330之一輸出連接。該模式模組360之一輸出係以信號通信方式與該切換器355連接，以控制由該切換器355選擇哪一輸入。該解區塊濾波器325之一輸出係可供作為該解碼器之一輸出。
如上所述，本原理係關於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置。多重視圖視訊編碼(MVC)係編碼多重視圖序列之壓縮框架。一多重視圖視訊編碼(MVC)序列係從不同的觀察點捕獲同一場景之一組兩個或更多視圖序列。
如上文結合先前技術所說明，目前在依據接合多重視圖視訊模型(JMVM)之運動跳過模式中，一特定視圖之運動資訊係從鄰近視圖之框架中一對應巨集區塊推斷。此外，如上文結合先前技術所說明，計算一"整體差異向量"，其應用於整個圖像，以求出該鄰近視圖中該對應巨集區塊。然後該整體差異向量在每一固定圖像中傳送且由該等非固定圖像使用以獲得一對應巨集區塊。
相反，對於一單一圖像建議利用"區域差異向量"。一圖像首先分割為具有不同差異的區域。針對每一區域，計算一區域差異向量。在獲得N個區域向量(可能係像素、4×4區塊、8×8區塊或對準的巨集區塊)之後，為每一固定圖像發此信號。然後該等非固定圖像在一巨集區塊基礎上選擇利用哪個差異向量以推斷運動資訊。
在一具體實施例中，為了獲得每一巨集區塊之差異的相對準確資訊，將該圖像分割為具有不同差異的區域。每一區域對應於一特定類別且包括具有類似差異值的區塊。然後每一類別可由一單一差異向量來近似。因此，獲得幾個區域差異向量。
在一個或多個具體實施例中，該等區域差異向量可僅為固定圖像而傳送，而該等非固定圖像可直接使用來自該等固定圖像之向量或者可以根據其與該固定圖像之個別相對距離而縮放此等向量。儘管此係選擇性，該方法之優點係可以藉由只在該等固定圖像處傳送來節省為差異向量所傳送之位元。
在另一具體實施例中，為每一非固定圖像傳送該等差異向量。該方法之缺點係需要很多位元來傳送該等區域差異向量。然而，優點係該等向量可更準確，且可幫助以更大準確性選擇一對應巨集區塊。
將該當前圖像分割為在每一區域內具有大致相似的差異之區域，然後採用一單一差異向量來代表每一區域。只要有差異資訊，存在多種方式達到此目的。大多關於電腦視 覺的文獻開發了精細的方法以在像素層級發現一準確且平滑的差異圖，與此不同，相反地，依據本原理之一具體實施例，根據從由該視訊編碼器實行之該最初差異補償獲得之成區塊狀差異向量的水平分量演示一聚類方法。此方法適用於具有相機配置在同一水平線上的多重視圖系統。對於二維(2D)相機配置如一相機陣列，該聚類可擴充至該等差異向量之x與y方向兩者。
為了使用差異向量達到區塊分段，推薦利用高斯混合模型(GMM)之一叢集方法。期望最大值演算法(EM演算法)用於達到GMM叢集。此方法將模擬帶有多個高斯分佈的差異向量之水平分量的長條圖。區塊係根據為每一高斯分量所計算的差異向量之可能性而分類為不同區域。
在此分類之後，為每一差異類別(區域)獲得一平均差異向量。參考圖4，高斯混合模型(GMM)分類區域差異向量之後，一示範性長條圖一般由參考數字400來指示。該長條圖400代表依據本原理之一具體實施例之分類工具的輸出。
為該等N個區域獲得該等N個平均差異向量後，該等向量四捨五入到最接近的整數，該整數可對應於一像素、4×4區塊、8×8區塊或巨集區塊邊界。在一具體實施例中，然後用信號發出該等N個平均差異向量為高階語法。例如，如上所述，高階語法可能係指(但不限於)在片段標頭層級、補充增強資訊(SEI)層級、圖像參數集(PPS)層級、序列參數集(SPS)層級及網路提取層(NAL)單元標頭層級的語法。依據該具體實施例，該等區域差異向量可僅為固定圖 像而用信號發出或者可為固定及非固定圖像而用信號發出。在一具體實施例中，為該片段標頭中所有圖像而用信號發出此資訊。表3依據本原理之一具體實施例，解說運動跳過模式之一建議片段標頭。
在下文的說明中，該等區域差異向量假定為在巨集區塊邊界對準，但其有可能在像素、2×2區塊、4×4區塊或者甚至8×8區塊邊界對準。
一旦已獲得該等區域差異向量，則每一巨集區塊可使用該等區域差異向量之一以從該運動跳過模式之另一視圖獲得一對應巨集區塊。一旦確定哪個區域差異向量就速率失真而言給出最低成本，用信號發出該已確定區域差異向量以使該解碼器可使用相同的差異向量。因此，在一巨集區塊層級，用信號發出當該巨集區塊模式係運動跳過時使用哪個差異向量。表4依據本原理之一具體實施例，解說運動跳過模式之一建議巨集區塊層。
下文說明依據本原理之一具體實施例的建議語法元素之語義學。
該片段標頭語義學包括下列各項：num_regional_disparity_vectors_I0指示對應於該LIST_0視圖間參考圖像之當前片段的區域差異向量之數目。
num_regional_disparity_vectors_I1指示對應於該LIST_1視圖間參考圖像之當前片段的區域差異向量之數目。
regional_dispartiy_I0[numVect][compldx]揭示待使用之一差異向量分量。該索引numVect揭示regional_dispartiy_I0屬於哪個區域。該水平差異向量分量首先係以解碼順序解碼並係指定為compldx＝0。該垂直差異向量分量其次係以解碼順序解碼並係指定為compldx＝1。
regional_dispartiy_I1[numVect][compldx]具有與regional_dispartiy_I0相同的語義學，I0由I1取代。
該巨集區塊層語義學包括下列各項：list_idx存在時指示使用哪個列表以推斷該運動與模式資訊。list_idx等於0指示該巨集區塊將從該LIST_0視圖間參考圖像中推斷該運動與模式資訊。list_idx等於1指示該巨集區塊將從該LIST_1視圖間參考圖像中推斷該運動與模式資訊。
regional_disparity_idx存在時規定該regional_disparity_idx陣列中之索引，其用於選擇該區域差異向量以獲得該對應運動向量。regional_disparity_I0與regional_disparity_I1 之間的選擇取決於該語法list_idx。
在另一具體實施例中，該等區域差異向量並非由該編碼器傳送，而是可使用現存語法與可用資料在該編碼器及/或解碼器側加以計算。
亦可為固定及/或非固定圖像使用多個視圖間參考。因此，在另一具體實施例中，可為該等視圖間參考圖像之每一者規定該等區域差異向量。在該巨集區塊層級，需要指示應使用哪個視圖間參考圖像來導出該資訊。表5依據本原理之一具體實施例，解說具有多個參考的運動跳過模式之一建議片段標頭。
表6依據本原理之一具體實施例，解說具有多個視圖間參考的運動跳過模式之一建議巨集區塊層。
表5中僅添加了該等多個參考之迴圈。在表6中，添加一額外ref_dx以指示待使用該等多個視圖間參考圖像中的哪個以便獲得該當前巨集區塊之區域差異向量。ref_idx之語義學如下： 當存在ref_idx時，規定藉由將用於獲得該區域差異向量之視圖間參考圖像之list_idx來用信號發出參考圖像列表中的該索引。
參考圖5，獲得並用信號發出運動跳過模式的區域差異向量之一示範性方法一般由參考數字500來指示。
該方法500包括一開始區塊505，其將控制傳遞至一功能區塊510。該功能區塊510為每一視圖間參考圖像獲得該圖像每一區塊之差異向量，且將控制傳遞至一功能區塊515。該功能區塊515使用一分類工具，例如，包括但不限於高斯混合模型(GMM)以叢集該等差異向量，並將控制傳遞至一功能區塊520。該功能區塊520獲得具有不同深度(差異向量)的不同區域，並將控制傳遞至一功能區塊525。該功能區塊525為每一此種區域獲得平均差異向量，並將控制傳遞至一功能區塊530。該功能區塊530使用該等個別區域差異向量以從另一視圖獲得個別對應運動向量，並將控制傳遞至一功能區塊535。該功能區塊535為高層級處的每一列表用信號發出所有差異向量(例如，使用一高階語法)，並將控制傳遞至一功能區塊540。該功能區塊540在該巨集區塊層級處用信號發出一列表索引、一區域差異向量索引及一視圖間參考索引，並將控制傳遞至一結束區塊599。
參考圖6，一種用於解碼並使用區域差異向量之示範性方法一般係藉由參考數字600來指示。
該方法600包括一開始區塊605，其將控制傳遞至一功能 區塊610。該功能區塊610為來自每一列表之每一視圖間參考圖像剖析該等區域差異向量，並將控制傳遞至一功能區塊615。該功能區塊615為一跳過模式巨集區塊剖析該列表索引、區域差異向量索引及該視圖間參考索引，並將控制傳送至一功能區塊620。該功能區塊620使用該列表索引、區域差異向量索引及該視圖間參考索引以獲得該區域差異向量，並將控制傳送至一功能區塊625。該功能區塊625使用該區域差異向量以從一視圖間參考圖像獲得該對應巨集區塊，並將控制傳送至一功能區塊630。該功能區塊630解碼該運動跳過巨集區塊，並將控制傳送至一結束區塊699。
參考圖7，另一種用於獲得並使用區域差異向量之示範性方法一般係藉由參考數字700來指示。
該方法700包括一開始區塊705，其將控制傳送至一功能區塊710。該功能區塊710為與之對應的每一視圖間參考圖像隱含獲得一當前圖像之區域差異向量，並將控制傳遞至一功能區塊715。該功能區塊715使用一給定區域差異向量以從另一視圖獲得一對應運動向量，並將控制傳送至一功能區塊720。該功能區塊720用信號發出一個或多個在一解碼器側致能該等差異向量之隨後隱含導出之對應高階語法，並將控制傳遞至一結束區塊799。
參考圖8，另一種用於解碼並使用區域差異向量之示範性方法一般係藉由參考數字800來指示。
該方法800包括一開始區塊805，其將控制傳送至一功能 區塊810。該功能區塊810為一跳過巨集區塊模式剖析該高階語法，並將控制傳送至一功能區塊815。該功能區塊815使用現存語法隱含獲得區域差異向量，並將控制傳送至一功能區塊820。該功能區塊820使用一區域差異向量以從一視圖間參考圖像獲得一對應巨集區塊(關於一已解碼的當前巨集區塊)，並將控制傳送至一功能區塊825。該功能區塊825解碼該當前巨集區塊作為一運動跳過巨集區塊，並將控制傳送至一結束區塊899。
現在將給定本發明之許多伴隨優點/特點之某些優點/特點的一說明，其某些已於前文說明。舉例而言，一個優點/特點係包括一編碼器的一裝置，該編碼器藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲得一影像區塊之運動資訊而編碼對應於多重視圖視訊內容之至少一視圖的一圖像之該影像區塊。該另一圖像之區域的差異資訊對應於少於該另一圖像之全部。
另一個優點/特點係具有如以上說明的編碼器之該裝置，其中另一圖像的區域之差異資訊包括至少一區域差異向量，且當編碼該多重視圖視訊內容時該編碼器為考慮的每一視圖間參考圖像獲得一個以上的區域差異向量。
另一個優點/特點係具有如以上說明的編碼器之該裝置，其中該編碼器為另一圖像獲得複數個區域差異向量，且另一圖像之區域的差異資訊包括一區域差異向量。
另一個優點/特點係具有該編碼器之該裝置，其為另一 圖像獲得複數個區域差異向量，且另一圖像之區域的差異資訊包括如以上說明的一區域差異向量，其中該編碼器為另一圖像的複數個區塊之每一者獲得複數個差異向量，且根據該複數個差異向量將該複數個區塊分類為不同區域。
此外，另一個優點/特點係具有該編碼器之該裝置，其如以上說明而分類，其中該編碼器為該等不同區域之每一者分別計算一平均差異向量。
此外，另一個優點/特點係具有該編碼器之該裝置，該編碼器如以上說明為該等不同區域之每一者分別計算一平均差異向量，其中為該等不同區域之每一者分別計算的該平均差異向量係因此分別用作該區域差異向量。
此外，另一個優點/特點係具有該編碼器之該裝置，該編碼器如以上說明為該等不同區域之每一者分別計算一平均差異向量，其中為該等不同區域之每一者分別計算的該區域差異向量係利用一高階語法元素傳送。
此外，另一個優點/特點係具有該編碼器之該裝置，其利用如如以上說明的之一高階語法元素傳送，其中該高階語法元素包含於一片段標頭、一序列參數集、一圖像參數集、一視圖參數集、一網路提取層單元標頭及一補充增強資訊訊息中之至少一者。
此外，另一個優點/特點係具有如以上說明的編碼器之該裝置，其中為對應於選擇作為一運動跳過巨集區塊之該多重視圖內容的每一影像區塊傳送一列表索引、一區域差異索引及一參考索引。
此外，另一個優點/特點係具有如以上說明的該編碼器之該裝置，其中該編碼器從至少一現存語法元素隱含導出為另一圖像的不同區域之每一者分別計算的一區域差異向量。
依據本文教示，熟悉技術人士可輕易發現本原理的此等及其他特點與優點。應該理解，本原理之教導可在各種形式的硬體、軟體、韌體、特殊用途處理器或其組合中實施。
本原理之教導最好應作為硬體與軟體之組合來實施。此外，該軟體可作為可在一程式儲存器單元上清楚具體化的一應用程式來實施。可將該應用程式上傳至包括任何合適架構的一機器上並由其執行。較佳地，該機器在具有諸如一個或多個中央處理單元("CPU")、一隨機存取記憶體("RAM")及輸入/輸出("I/O")介面的硬體之電腦平臺上實施。該電腦平臺亦可包括一作業系統及微指令碼。此處說明的各種程序及功能可係藉由CPU執行微指令碼之部分或應用程式之部分或其組合。此外，諸如額外資料儲存器單元及列印單元等的其他各種周邊單元也可連接至該電腦平臺。
應進一步理解的是，由於附圖中說明的某些系統構成組件及方法最好應在軟體中實施，故該等系統組件或該等程式功能區塊之間的實際連接可依據程式化本原理之方式而有所區別。根據本文之教導內容，熟悉本發明相關技術的人士將能夠預期本教導的此等及類似實施方案或組態。 雖然本文已結合附圖對該等說明性具體實施例進行描述，但應該理解，本原理並不限於此等精確具體實施例，且熟悉本發明相關技術的人士可在不脫離本原理之範疇或精神的前提下進行各種變化及修改。所有此等變化及修改將包含於隨附申請專利範圍中所列舉的本原理的範疇之內。
200‧‧‧多重視圖視訊編碼(MVC)編碼器
205‧‧‧組合器
210‧‧‧變換器
215‧‧‧量化器
220‧‧‧熵編碼器
225‧‧‧反量化器
230‧‧‧反變換器
235‧‧‧組合器
240‧‧‧模式決策模組
245‧‧‧內預報器
250‧‧‧解區塊濾波器
255‧‧‧參考圖像儲存器
260‧‧‧參考圖像儲存器
265‧‧‧差異/照明補償器
270‧‧‧差異/照明估計器
275‧‧‧運動補償器
280‧‧‧運動估計器
285‧‧‧切換器
300‧‧‧多重視圖視訊編碼(MVC)解碼器
305‧‧‧熵解碼器
310‧‧‧反量化器
315‧‧‧反變換器
320‧‧‧組合器
325‧‧‧解區塊濾波器
330‧‧‧內預報器
335‧‧‧運動補償器
340‧‧‧參考圖像儲存器
345‧‧‧參考圖像儲存器
350‧‧‧差異/照明補償器
355‧‧‧切換器
360‧‧‧模式模組
可根據下列示範性圖式而更加明白本原理，其中：圖1係依據先前技術之整體差異之導出的一圖式；圖2係根據本原理之一具體實施例之可應用本原理之一示範性多重視圖視訊編碼(MVC)編碼器的一方塊圖；圖3係根據本原理之一具體實施例之可應用本原理之一示範性多重視圖視訊編碼(MVC)解碼器的一方塊圖；圖4係依據本原理之一具體實施例，在高斯混合模型(GMM)分類區域差異向量之後的一示範性長條圖；圖5係依據本原理之一具體實施例，用於獲得與用信號發出運動跳過模式之區域差異向量的一示範性方法之流程圖；圖6係根據本原理之一具體實施例，用於解碼與使用區域差異向量之一示範性方法的一流程圖；圖7係根據本原理之一具體實施例，用於獲得與使用區域差異向量之另一示範性方法的一流程圖；以及圖8係根據本原理之一具體實施例，用於解碼與使用區域差異向量之另一示範性方法的一流程圖。
200‧‧‧多重視圖視訊編碼(MVC)編碼器
205‧‧‧組合器
210‧‧‧變換器
215‧‧‧量化器
220‧‧‧熵編碼器
225‧‧‧反量化器
230‧‧‧反變換器
235‧‧‧組合器
240‧‧‧模式決策模組
245‧‧‧內預報器
250‧‧‧解區塊濾波器
255‧‧‧參考圖像儲存器
260‧‧‧參考圖像儲存器
265‧‧‧差異/照明補償器
270‧‧‧差異/照明估計器
275‧‧‧運動補償器
280‧‧‧運動估計器
285‧‧‧切換器

Claims (25)

  1. 一種於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之裝置，其包含：一編碼器(200)，其用於編碼對應於多重視圖視訊內容之至少一視圖的一圖像之一影像區塊，其係藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲得該影像區塊的運動資訊而進行編碼，該另一圖像的該區域之該差異資訊對應於少於該另一圖像之全部，其中該另一圖像的該區域包含多重影像區塊，且該另一圖像的該區域之該差異資訊包括至少一區域差異向量，其自經計算以用於包含於該另一圖像的該區域中之該等多重影像區塊的以區塊為基礎之差異向量所判定。
  2. 如請求項1之裝置，其中該編碼器獲得該另一圖像之複數個區域差異向量，且該另一圖像之該區域之該差異資訊包括來自該複數個區域差異向量中之該至少一區域差異向量(520、525)。
  3. 如請求項2之裝置，其中該編碼器獲得該複數個差異向量以用於該另一圖像之複數個區塊之每一者，及進一步根據該複數個差異向量將該複數個區塊分類為不同區域(510、515)。
  4. 如請求項3之裝置，其中該編碼器為該等不同區域之每一者分別計算一平均差異向量(525)。
  5. 如請求項4之裝置，其中為該等不同區域之每一者分別 計算的該平均差異向量係分別用作該區域差異向量(525、530)。
  6. 如請求項4之裝置，其進一步包含利用一高階語法元素來傳送為該等不同區域之每一者分別計算的該區域差異向量(535)。
  7. 如請求項1之裝置，其進一步包含為對應於選擇作為一運動跳過巨集區塊之該多重視圖內容的每一影像區塊傳送一列表索引、一區域差異索引及一參考索引(540)。
  8. 如請求項1之裝置，其中該編碼器從至少一現存語法元素隱含導出分別為另一圖像之不同區域之每一者計算的一區域差異向量。
  9. 一種於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法，其包含：編碼對應於多重視圖視訊內容之至少一視圖的一圖像之一影像區塊，其係藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲得該影像區塊的運動資訊進行編碼，該另一圖像的該區域之該差異資訊對應於少於該另一圖像之全部，其中該另一圖像的該區域包含多重影像區塊，且該另一圖像的該區域之該差異資訊包括至少一區域差異向量，其自經計算以用於包含於該另一圖像的該區域中之該等多重影像區塊的以區塊為基礎之差異向量所判定(530)。
  10. 如請求項9之方法，其中該編碼步驟包括為該另一圖像獲得複數個區域差異向量，及該另一圖像的該區域之該 差異資訊包括來自該複數個區域差異向量中之該至少一區域差異向量(520、525)。
  11. 如請求項10之方法，其中該編碼步驟為該另一圖像之複數個區塊之每一者獲得複數個差異向量，且進一步包括根據該複數個差異向量將該複數個區塊分類為不同區域(510、515)。
  12. 如請求項11之方法，其中該編碼步驟包括為該等不同區域之每一者分別計算一平均差異向量(525)。
  13. 如請求項12之方法，其中為該等不同區域之每一者分別計算的該平均差異向量係分別用作該等不同區域之每一者之該區域差異向量(525、530)。
  14. 如請求項12之方法，其進一步包括利用一高階語法元素來傳送為該等不同區域之每一者分別計算的該區域差異向量(535)。
  15. 如請求項9之方法，其進一步包括為對應於選擇作為一運動跳過巨集區塊之多重視圖內容的每一影像區塊而傳送一列表索引、一區域差異索引及一參考索引(540)。
  16. 如請求項9之方法，其中該編碼步驟包括從至少一現存語法元素隱含導出為另一圖像之不同區域之每一者分別計算的一區域差異向量。
  17. 一種於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之裝置，其包含：一解碼器(300)，其解碼對應於多重視圖視訊內容之至少一視圖的一圖像之一影像區塊，其藉由根據對應於該 多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲得該影像區塊的運動資訊進行解碼，該另一圖像的該區域之該差異資訊對應於少於該另一圖像之全部，其中該另一圖像的該區域包含多重影像區塊，且該另一圖像的該區域之該差異資訊包括至少一區域差異向量，其自經計算以用於包含於該另一圖像的該區域中之該等多重影像區塊的以區塊為基礎之差異向量所判定。
  18. 如請求項17之裝置，其中對於該另一圖像之不同區域的每一者而言，在一高階語法元素中明確指示一個別區域差異向量，且該解碼器從該高階語法元素決定該另一圖像的該等不同區域之每一者的該個別區域差異向量(610)。
  19. 如請求項17之裝置，其中該解碼器從至少一現存語法元素隱含導出為該另一圖像之不同區域之每一者分別計算的一區域差異向量。
  20. 如請求項17之裝置，其中該解碼器為對應於選擇作為一運動跳過巨集區塊之該多重視圖內容的每一影像區塊接收一列表索引、一區域差異索引及一參考索引(615)。
  21. 一種於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法，其包含：解碼對應於多重視圖視訊內容之至少一視圖的一圖像之一影像區塊，其係藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲 得該影像區塊的運動資訊進行解碼，該另一圖像的區域之差異資訊對應於少於該另一圖像之全部，其中該另一圖像的該區域包含多重影像區塊，且該另一圖像的該區域之該差異資訊包括至少一區域差異向量，其自經計算以用於包含於該另一圖像的該區域中之該等多重影像區塊的以區塊為基礎之差異向量所判定(610)。
  22. 如請求項21之方法，其中對於該另一圖像之不同區域之每一者而言，在一高階語法元素中明確指示一個別區域差異向量，且該解碼步驟包括從該高階語法元素決定該另一圖像的該等不同區域之每一者的該個別區域差異向量(610)。
  23. 如請求項21之方法，其中該解碼步驟包括從至少一現存語法元素隱含導出(715)為該另一圖像之不同區域之每一者分別計算的一區域差異向量。
  24. 如請求項21之方法，其中該解碼步驟包括為對應於選擇作為一運動跳過巨集區塊之多重視圖內容的每一影像區塊接收一列表索引、一區域差異索引及一參考索引(615)。
  25. 一種具有編碼於其上之視訊信號資料之儲存媒體，其包括：對應於多重視圖視訊內容之至少一視圖的一圖像之一影像區塊，其藉由根據對應於該多重視圖視訊內容之至少一另一視圖的另一圖像之一區域的差異資訊獲得該影像區塊的運動資訊予以編碼，該另一圖像的該區域之該 差異資訊對應於少於該另一圖像之全部，其中該另一圖像的該區域包含多重影像區塊，且該另一圖像的該區域之該差異資訊包括至少一區域差異向量，其自經計算以用於包含於該另一圖像的該區域中之該等多重影像區塊的以區塊為基礎之差異向量所判定。
TW097130809A 2007-08-15 2008-08-13 於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置 TWI488145B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US95591107P 2007-08-15 2007-08-15

Publications (2)

Publication Number Publication Date
TW200915228A TW200915228A (en) 2009-04-01
TWI488145B true TWI488145B (zh) 2015-06-11

Family

ID=40119334

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097130809A TWI488145B (zh) 2007-08-15 2008-08-13 於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置

Country Status (7)

Country Link
US (1) US8964844B2 (zh)
EP (1) EP2177036A2 (zh)
JP (1) JP5646994B2 (zh)
CN (1) CN101785317B (zh)
BR (1) BRPI0815108A2 (zh)
TW (1) TWI488145B (zh)
WO (1) WO2009023091A2 (zh)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101999228A (zh) * 2007-10-15 2011-03-30 诺基亚公司 针对多视角视频内容的运动跳跃和单环路编码
US9843793B2 (en) 2009-08-05 2017-12-12 Thomson Licensing Optical compensation for ghosting in stereoscopic displays
WO2011125211A1 (ja) 2010-04-08 2011-10-13 株式会社 東芝 画像符号化方法及び画像復号化方法
RU2480941C2 (ru) * 2011-01-20 2013-04-27 Корпорация "Самсунг Электроникс Ко., Лтд" Способ адаптивного предсказания кадра для кодирования многоракурсной видеопоследовательности
CN107274475A (zh) * 2011-03-18 2017-10-20 索尼公司 图像处理设备、图像处理方法和计算机可读存储介质
US9247249B2 (en) 2011-04-20 2016-01-26 Qualcomm Incorporated Motion vector prediction in video coding
EP2717572B1 (en) * 2011-06-24 2018-08-08 LG Electronics Inc. Encoding/decoding method and apparatus using a skip mode
WO2013001749A1 (ja) 2011-06-29 2013-01-03 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置および画像符号化復号装置
JP6112418B2 (ja) 2011-06-29 2017-04-12 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置および画像符号化復号装置
WO2013002342A1 (ja) * 2011-06-30 2013-01-03 ソニー株式会社 画像処理装置および方法
JP2013034171A (ja) * 2011-06-30 2013-02-14 Sony Corp 画像処理装置および方法
US20130188013A1 (en) * 2011-07-22 2013-07-25 Qualcomm Incorporated Mvc based 3dvc codec supporting inside view motion prediction (ivmp) mode
US11496760B2 (en) 2011-07-22 2022-11-08 Qualcomm Incorporated Slice header prediction for depth maps in three-dimensional video codecs
US9521418B2 (en) * 2011-07-22 2016-12-13 Qualcomm Incorporated Slice header three-dimensional video extension for slice header prediction
US9288505B2 (en) 2011-08-11 2016-03-15 Qualcomm Incorporated Three-dimensional video with asymmetric spatial resolution
CA2842150A1 (en) * 2011-08-31 2013-03-07 Sony Corporation Encoding device, encoding method, decoding device, and decoding method
CN103907346B (zh) * 2011-10-11 2017-05-24 联发科技股份有限公司 运动矢量预测子及视差矢量导出方法及其装置
WO2013055148A2 (ko) * 2011-10-12 2013-04-18 엘지전자 주식회사 영상 인코딩 방법 및 디코딩 방법
US10003817B2 (en) 2011-11-07 2018-06-19 Microsoft Technology Licensing, Llc Signaling of state information for a decoded picture buffer and reference picture lists
KR102492490B1 (ko) 2011-11-11 2023-01-30 지이 비디오 컴프레션, 엘엘씨 깊이-맵 추정 및 업데이트를 사용한 효율적인 멀티-뷰 코딩
EP3657796A1 (en) 2011-11-11 2020-05-27 GE Video Compression, LLC Efficient multi-view coding using depth-map estimate for a dependent view
EP2781091B1 (en) 2011-11-18 2020-04-08 GE Video Compression, LLC Multi-view coding with efficient residual handling
US9485503B2 (en) 2011-11-18 2016-11-01 Qualcomm Incorporated Inside view motion prediction among texture and depth view components
TWI606718B (zh) 2012-01-03 2017-11-21 杜比實驗室特許公司 規定視覺動態範圍編碼操作及參數
CN104205819B (zh) * 2012-02-01 2017-06-30 诺基亚技术有限公司 用于视频编码的方法和装置
US9961369B2 (en) 2012-06-28 2018-05-01 Hfi Innovation Inc. Method and apparatus of disparity vector derivation in 3D video coding
US20150172714A1 (en) * 2012-07-09 2015-06-18 Mediatek Inc. METHOD AND APPARATUS of INTER-VIEW SUB-PARTITION PREDICTION in 3D VIDEO CODING
CN104521236B (zh) * 2012-07-27 2017-10-20 寰发股份有限公司 三维视频编码或解码方法
EP2733933A1 (en) * 2012-09-19 2014-05-21 Thomson Licensing Method and apparatus of compensating illumination variations in a sequence of images
KR101664758B1 (ko) * 2012-09-21 2016-10-10 노키아 테크놀로지스 오와이 비디오 코딩 방법 및 장치
JP6172155B2 (ja) * 2012-09-28 2017-08-02 ソニー株式会社 画像処理装置および方法
US9313500B2 (en) * 2012-09-30 2016-04-12 Microsoft Technology Licensing, Llc Conditional signalling of reference picture list modification information
WO2014053518A1 (en) 2012-10-01 2014-04-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Scalable video coding using subblock-based coding of transform coefficient blocks in the enhancement layer
CA2887106A1 (en) * 2012-10-03 2014-04-10 Mediatek Inc. Method and apparatus for inter-component motion prediction in three-dimensional video coding
US9350970B2 (en) * 2012-12-14 2016-05-24 Qualcomm Incorporated Disparity vector derivation
KR20150095808A (ko) * 2012-12-14 2015-08-21 퀄컴 인코포레이티드 비대칭적 공간 해상도를 갖는 텍스처 및 심도 뷰 컴포넌트들 사이의 인사이드 뷰 모션 예측
US9521389B2 (en) 2013-03-06 2016-12-13 Qualcomm Incorporated Derived disparity vector in 3D video coding
CN105122808B (zh) * 2013-04-10 2018-08-03 联发科技股份有限公司 三维或多视图视频编码或解码的方法及装置
US9667990B2 (en) 2013-05-31 2017-05-30 Qualcomm Incorporated Parallel derived disparity vector for 3D video coding with neighbor-based disparity vector derivation
CN105230014B (zh) * 2013-07-01 2018-02-02 寰发股份有限公司 用于三维视频编码系统的深度图编码的方法及其装置
WO2015006883A1 (en) * 2013-07-18 2015-01-22 Qualcomm Incorporated Motion vector inheritance techniques for depth coding
WO2015051533A1 (en) * 2013-10-11 2015-04-16 Mediatek Singapore Pte. Ltd. Improved advanced residual prediction in 3dvc
US20150103925A1 (en) * 2013-10-15 2015-04-16 Qualcomm Incorporated Parallel extensions of parameter sets
EP3026917A1 (en) * 2014-11-27 2016-06-01 Thomson Licensing Methods and apparatus for model-based visual descriptors compression
US10210624B2 (en) 2014-12-09 2019-02-19 Inuitive Ltd. Method for determining depth for stereoscopic reconstruction of three dimensional images
US10638130B1 (en) * 2019-04-09 2020-04-28 Google Llc Entropy-inspired directional filtering for image coding

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6072831A (en) * 1996-07-03 2000-06-06 General Instrument Corporation Rate control for stereoscopic digital video encoding
US20050105210A1 (en) * 2002-01-28 2005-05-19 Wataru Okawa Magnetic tape cartridge and recorder/reproducer a magnetic tape cartridge
US20050231588A1 (en) * 2002-08-05 2005-10-20 Exedra Technology, Llc Implementation of MPCP MCU technology for the H.264 video standard
WO2006064710A1 (en) * 2004-12-17 2006-06-22 Mitsubishi Denki Kabushiki Kaisha Method and system for decomposing multiview videos
CN1846444A (zh) * 2003-09-17 2006-10-11 汤姆森许可贸易公司 自适应参考画面产生
US20060268987A1 (en) * 2005-05-31 2006-11-30 Samsung Electronics Co., Ltd. Multi-view stereo imaging system and compression/decompression method applied thereto
US20070109409A1 (en) * 2004-12-17 2007-05-17 Sehoon Yea Method and System for Processing Multiview Videos for View Synthesis using Skip and Direct Modes

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100524077B1 (ko) * 2003-11-13 2005-10-26 삼성전자주식회사 중간 영상 합성을 위한 시간적 평활화 장치 및 방법
US8228994B2 (en) * 2005-05-20 2012-07-24 Microsoft Corporation Multi-view video coding based on temporal and view decomposition
US8559515B2 (en) * 2005-09-21 2013-10-15 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-view video
US8644386B2 (en) * 2005-09-22 2014-02-04 Samsung Electronics Co., Ltd. Method of estimating disparity vector, and method and apparatus for encoding and decoding multi-view moving picture using the disparity vector estimation method
JP4605715B2 (ja) * 2006-06-14 2011-01-05 Ｋｄｄｉ株式会社 多視点画像圧縮符号化方法、装置及びプログラム
WO2007148906A1 (en) * 2006-06-19 2007-12-27 Lg Electronics, Inc. Method and apparatus for processing a vedeo signal
KR100823287B1 (ko) * 2007-01-03 2008-04-21 삼성전자주식회사 전역 차이 벡터를 이용한 다시점 영상의 부호화, 복호화방법 및 장치
US8804839B2 (en) * 2007-06-27 2014-08-12 Korea Electronics Technology Institute Method for image prediction of multi-view video codec and computer-readable recording medium thereof

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6072831A (en) * 1996-07-03 2000-06-06 General Instrument Corporation Rate control for stereoscopic digital video encoding
US20050105210A1 (en) * 2002-01-28 2005-05-19 Wataru Okawa Magnetic tape cartridge and recorder/reproducer a magnetic tape cartridge
US20050231588A1 (en) * 2002-08-05 2005-10-20 Exedra Technology, Llc Implementation of MPCP MCU technology for the H.264 video standard
CN1846444A (zh) * 2003-09-17 2006-10-11 汤姆森许可贸易公司 自适应参考画面产生
WO2006064710A1 (en) * 2004-12-17 2006-06-22 Mitsubishi Denki Kabushiki Kaisha Method and system for decomposing multiview videos
US20070109409A1 (en) * 2004-12-17 2007-05-17 Sehoon Yea Method and System for Processing Multiview Videos for View Synthesis using Skip and Direct Modes
US20060268987A1 (en) * 2005-05-31 2006-11-30 Samsung Electronics Co., Ltd. Multi-view stereo imaging system and compression/decompression method applied thereto

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Shim W. S. et. al., "High-level syntax for flexible I frame position JVT-U046," Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCEG, , Hangzhou, China, , 2006-10-20 *
Yang,H., et al., "Regional Disparity Based Motion and Disparity Prediction for MVC",Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCEG(ISO /IEC JTC1/SC29/WG11 and ITU-T SG16 Q.6) JVT-V071, 2007-1-13 *

Also Published As

Publication number Publication date
EP2177036A2 (en) 2010-04-21
TW200915228A (en) 2009-04-01
CN101785317A (zh) 2010-07-21
CN101785317B (zh) 2013-10-16
JP2010537484A (ja) 2010-12-02
BRPI0815108A2 (pt) 2015-01-27
US8964844B2 (en) 2015-02-24
WO2009023091A3 (en) 2009-04-02
US20100158129A1 (en) 2010-06-24
WO2009023091A2 (en) 2009-02-19
JP5646994B2 (ja) 2014-12-24

Similar Documents

Publication Publication Date Title
TWI488145B (zh) 於多重視圖編碼視訊中利用區域差異向量的運動跳過模式之方法及裝置
US11234002B2 (en) Method and apparatus for encoding and decoding a texture block using depth based block partitioning
JP5368482B2 (ja) ビデオ符号化および復号におけるインプリシットなブロック分割のための方法および装置
JP5224458B2 (ja) マルチビュービデオ符号化のための低解像度アップデートモードを提供する方法及び装置
KR101999091B1 (ko) 오류 내성을 향상시킨 비디오 인코딩 및 디코딩
JP2011517227A (ja) ビデオ符号化及び復号化におけるテンプレート・マッチング予測（ｔｍｐ）のための方法及び装置
US10021391B2 (en) Method and apparatus for encoding of video using depth information
TW202339504A (zh) 幾何分割模式及合併候選重排