TWI449431B - 用以對多視界視訊編碼利用可平行解碼切片之方法、裝置及電腦程式產品 - Google Patents

用以對多視界視訊編碼利用可平行解碼切片之方法、裝置及電腦程式產品 Download PDF

Info

Publication number
TWI449431B
TWI449431B TW096138656A TW96138656A TWI449431B TW I449431 B TWI449431 B TW I449431B TW 096138656 A TW096138656 A TW 096138656A TW 96138656 A TW96138656 A TW 96138656A TW I449431 B TWI449431 B TW I449431B
Authority
TW
Taiwan
Prior art keywords
macroblocks
frame
macroblock
view
decoding
Prior art date
Application number
TW096138656A
Other languages
English (en)
Other versions
TW200833118A (en
Inventor
Kemal Ugur
Jani Lainema
Miska Hannuksela
Original Assignee
Nokia Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Corp filed Critical Nokia Corp
Publication of TW200833118A publication Critical patent/TW200833118A/zh
Application granted granted Critical
Publication of TWI449431B publication Critical patent/TWI449431B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

用以對多視界視訊編碼利用可平行解碼切片之方法、裝置及電腦程式產品 發明領域
本發明一般係有關於多視界視訊編碼和解碼技術。更明確地說，本發明係有關於即使是在視界間存在有相依性時實現多視界系統中之不同視界有關的平行解碼實現體。
 發明背景
此節係旨在提供明列在申請專利範圍中之發明的背景或脈絡關係。本說明書之說明內容，可能包括一些觀念，彼等可以但非必然要貫徹先前已被想見或貫徹者。所以，除非本說明書另有指明，此節中所說明者，並非本專利說明書中之說明內容和申請專利範圍的習知技術，以及不應被接納為因本節內之內涵而屬習知技術。
在影像拍攝和顯示技術之下，三維(3D立體)視訊通訊和娛樂服務，正快速地成為事實，以及在不久的將來將會進入消費者之領域。3D立體視訊通訊和娛樂服務，將很有可能徹底顛覆使用者欣賞內容並與之互動的方式，以及將開啟許多新的且令人激賞的服務之門戶。此類服務可能包括立體視訊廣播、3D－TV、和其他廣範圍之種類。
3D－TV應用例係需要一些特性可被改變之特定3D立體顯示器。舉例而言，若一個3D立體顯示器，係屬自動立體式，則使用者便不需要戴上任何特殊透鏡或眼鏡來觀見每個眼睛有關之不同視界。此外，一個3D立體顯示器，可支援幾個要同時顯示之視界，以致該使用者可依據使用者相對於螢幕之部位，而見到不同之視界。此特徵係被稱為頭部運動視差，以及係被特性化為使用者可用的最真實且令人陶醉的一個經驗。
為促成此等類型之應用，係需要新典範來展現、傳輸、和表現3D立體視訊內容，彼等可能極不同於一些典型之2D視訊使用情況。近年來，ITU－T/VCEG和ISO/MPEG標準團體之聯合視訊小組(JVT)，承擔了多視界視訊編碼(MVC)有關之標準。MVC係一種或由一個包括有自不同部位拍攝同一事件之多重相機的相機系統或由一個可拍攝3D立體場景之單一相機所產生之多視界串列的編碼架構。在一些充份利用到MVC之應用例中，使用者可享受到真實且令人陶醉之經驗，因為多視界視訊係表示真實空間中的一個三維場景。一個MVC編碼器與一個傳統式2D視訊編碼器之間的基本差異是，除時間上和空間上冗餘性之外，MVC並充份利用到視界間之冗餘性。所以，在多視界視訊編碼結構中，視界間相依性係存在於畫面之間。
不幸的是，畫面間之視界間相依性，會對一個視訊系統，造成嚴重之複雜性問題和平行性議題。此等議題之發生，是因為不同視界下的兩個畫面，需要依序被解碼。此就3D立體電視(3D－TV)使用情況而言尤其棘手，其中有許多視界需要同時被顯示。要瞭解此等議題，有幫助的是考慮一個正同時顯示兩個視界之3D－TV系統，以及其中，視界係使用第1圖中所例示之編碼結構來編碼。為解碼任一時間瞬間下之“View－1”內的畫面，同一瞬間下之“View－0”內的畫面，便應首先被解碼。在此一結構下，顯示同一時刻下的兩個視界之唯一方法，因而該解碼器在運行上便要比一般視訊解碼器快兩倍。即使有兩個在不同平臺上運行之獨立解碼器或許可用，兩者解碼器均需要以兩倍於正規之2D視訊解碼器的速率運行。此情況會隨著該3D立體顯示器所支援之視界數目的增加而變得更糟。目前，有可同時顯示100個視界之商業化顯示器，以及若所有的視界彼此相互依賴，則該解碼器在運行上便勢必要快100倍。
有鑒於前文，個別視界之平行解碼，很顯然就3D－TV系統而言，是一個決定性要件。一個增加該平行處理有關之解決方案，係獨立地編碼每個視界。然而，已有的理解是，此種同播之解決方案，造成了編碼效率不利之顯著代價。
所以，要能開發出一種系統與方法，使改善3D－TV系統和其他系統有關個別視界之平行解碼處理，而免於上文所說明之編碼效率的議題，將會是有利的。
 發明概要
本發明之各種實施例，提供了一種用以在即使是視界間存在有相依性時可實現不同視界有關之平行解碼器實現體的系統與方法。此之達成係借助於以特定之限制條件來解碼視界，而容許一個特定之視界內的任何一個巨區塊(MB)，僅依賴其他視界內的一個巨區塊子集之重建值。該等包括有關何者MB可在另一視界內被參照之資訊的編碼限制條件，係為編碼器和解碼器兩者所知悉，此或係由於該等限制條件係被預先界定，或係由於已被傳訊在該位元流中。兩個視界間之巨區塊延遲，亦可傳訊給該解碼器。該項延遲可與另一限制條件資訊同時被傳訊。藉由此資訊，不同視界內之巨區塊的解碼，便可使同時發生，因為彼等已不再彼此參照。若一個編碼器可傳訊該等編碼限制條件，彼等之編碼效率、平行處理性、和複雜性之間的某種折衷選擇便可被實現。藉由本發明之實施例，不同視界有關之編碼器和解碼器便可平行運行，以致畫面輸出方面所牽涉到之延遲便會被降低。
各種實施例，亦對眾視界間之運動向量的編碼，提供了一些使用本說明書所討論之可平行解碼式切片(PDS)的觀念之更有效率的熵編碼器。此在完成上係利用以下之事實：(1)一個PDS配置中之運動向量，會因上述參照區域之限制條件，而無法採用所有可能之值，以及(2)彼等運動向量之水平和垂直分量的統計性質，在PDS中係相互關聯。
本發明之此等和其他優點和特徵，連同彼等之組戌結構和運作方法，將可由下文參照所附諸圖之詳細說明而臻明確，其中，類似元件縱橫下文所說明之各圖，係具有類似之數字。
圖式簡單說明
第1圖係一個3D立體電視(3D－TV)之使用情況中的一個畫面的兩個視界有關之傳統式樣本預測鏈的代表圖：第2圖係一個可在其中實現本發明之各種實施例的系統之總覽圖；第3圖係一個可顯示在兩個視界之間有一個巨區塊延遲之下如何實現本發明之實施例的代表圖：第4圖係第3圖中所描繪之實現體有關的樣本解碼程序之代表圖：第5圖係一個依據本發明的一個特定實施例之滑動去塊(deblocking)運作的代表圖：第6圖係一個可顯示一個與第5圖中所描繪之滑動去塊解決方案相關的樣本解碼程序之代表圖；第7圖係一個可顯示在實現本發明之各種實施例期間的子像素內插處理之效果的例示圖；第8圖係一個可顯示如何使用填補處理來應付第7圖中所描繪之子像素內插處理的議題之例示圖；第9圖係本發明之各種實施例的實現如何影響到編碼效率的一個例示圖；第10圖係一個可被使用於本發明之實現體中的電子裝置之透視圖；第11圖係一個第10圖之電子裝置的電路之示意圖：而第12圖則係一個可顯示在視界之平行解碼被允許時的運動向量之水平和垂直分量有關的範圍之參照區域的代表圖。
 較佳實施例之詳細說明
本發明之各種實施例，提供了一種可在即使是視界間存在有相依性時實現不同視界有關之平行解碼器實現體的系統與方法。此之達成係借助於以特定之限制條件來解碼視界，而容許一個特定之視界內的任何一個巨區塊(MB)，僅依賴其他視界內的一個巨區塊子集之重建值。該等包括有關何者MB可在另一視界內被參照之資訊的編碼限制條件，係為編碼器和解碼器兩者所知悉，此或係由於該等限制條件係被預先界定，或係由於已被傳訊在位元流中。藉由此資訊，不同視界內之巨區塊的解碼，便可使同時發生，因為彼等已不再彼此參照。若一個編碼器可傳訊該等編碼限制條件，彼等之編碼效率、平行處理性、和複雜性之間的某種折衷選擇便可被實現。
第2圖係顯示本發明所用之一般性多媒體通訊系統。理應注意的是，誠如本說明書所討論，一個要被解碼之位元流，可接收自一個實際上位於任何類型之網路內的遠程裝置。此外，該位元流可接收自本地硬體或軟體。亦應瞭解的是，雖然本說明書所包含之本文和範例，可能係明確地說明了一個編碼程序，本技藝之專業人員將可輕易理解出，相同之觀念和原理，亦可適用於對應之解碼處理程序，以及反之亦然。
誠如第2圖中所示，一個資料源100可提供一個成類比格式、未經壓縮之數位格式、或經壓縮之數位格式、或任何此等格式之組合的來源信號。一個編碼器110，可將該來源信號編碼成一個被編碼之媒體位元流。該編碼器110可能有能力解碼超過一個的媒體類型，諸如聲頻和視頻，或者可能需要有超過一個的編碼器110，來編碼不同媒體類型之來源信號。該編碼器110亦可能得到綜合產生之輸入，諸如圖形和本文，或者其可能有能力產生一個綜合性媒體之編碼式位元流。在下文中，為簡化說明計，僅考慮一個媒體類型之編碼式媒體位元流的處理。然而，理應注意的是，即時廣播服務通常包括有數種串流(通常至少有一個聲頻、視訊、和本文字幕串流)。亦應注意的是，此種系統可能包括有許多編碼器，但為簡化說明而不失一般性計，在下文中僅考慮一個編碼器110。
上述被編碼之媒體位元流，係被轉移至一個儲存器120。此儲存器120可能包含有任何類型可儲存上述被編碼的媒體位元流之大容量記憶體。上述編碼之媒體位元流在儲存器120內的格式，可能是一個基本自含式位元流格式，或者一個或多個被編碼之媒體位元流，而可使封裝進一個容器檔案內。某些系統係以“直播”方式運作，亦即，省略儲存而使上述被編碼之媒體位元流，直接自該編碼器110轉移至該發送器130。上述被編碼之媒體位元流，接著係依據需要使轉移至上述亦被稱作伺服器之發送器130。上述傳輸中所用之格式，可能是一個基本自含式位元流格式、一個封包串流格式，或者一個或多個被編碼之媒體位元流，而可使封裝進一個容器檔案內。該等編碼器110、儲存器120、和發送器130，可能存在於同一實體裝置內，或者彼等可能包含在一些個別之裝置中。該等編碼器110和發送器130，可能係以直播即時內容來運作，在該情況中，上述被編碼之媒體位元流，通常係不被永久儲存，而是使緩衝儲存進該內容編碼器110和/或發送器130內達一段短時間，藉以平滑化處理延遲、轉移延遲、和編碼之媒體位元率中的變動。
該發送器130可使用一個通訊協定堆疊器，來傳送上述被編碼之媒體位元流。該堆疊器可能包括但不受限：即時傳輸協定(RTP)、使用者資料流協定(UDP)、和網際網路協定(IP)。當該通訊協定堆疊器為封包取向時，該發送器130可將上述被編碼之媒體位元流，封裝成一些封包。舉例而言，當使用RTP時，該發送器130可依據一個RTP酬載(payload)格式，將上述被編碼之媒體位元流，封裝成一些RTP封包。通常，每種媒體類型係具有一種專屬性RTP酬載格式。再次應注意到的是，一個系統可能包括有超過一個的發送器130，但為簡單計，下文之說明內容，僅考慮一個發送器130。
該發送器130可能或可能不透過一個通訊網路，使連接至一個閘道器140。此閘道器140可能執行不同類型之功能，諸如一個封包串流依據一個通訊協定堆疊器至另一個通訊協定堆疊器的轉碼、資料串流之合併及分岔、和資料串流依據下行鏈路和/或接收器能力的操控，諸如依據一些盛行之下行鏈路網路條件對轉發之串流的位元率之控制。上述閘道器140之範例，係包括多點視訊會議控制伺服器(MCU)、電路交換式與封包交換式視訊電信間之閘道器、一按通(PoC)(即按即說)伺服器、手持式數位視訊廣播(DVB－H)系統中之IP封裝器、或一些可本地轉發廣播傳輸給家用無線網路之機上盒。當使用RTP時，該閘道器140係被稱作一個RTP混合器，以及係作用為一個RTP連結之端點。
此種系統係包括有一個或多個接收器150，彼等通常可接收上述傳輸之信號，以及可使其解調並解封成一個被編碼之媒體位元流。該被編碼之媒體位元流，通常會被一個解碼器160進一步處理，後者之輸出係一個或多個未被壓縮之媒體串流。最後，一個播放器(renderer)170舉例而言，可能以一個擴音器或一個顯示器，來重現上述未被壓縮之媒體串流。該等接收器150、解碼器160、和播放器170，可能存在於同一實體裝置內，或者彼等可能係包含在一些個別之裝置中。
以位元率、解碼複雜性、和畫面尺寸而論之可量測性，就混雜且容易出錯之環境而言，係屬一項有利之性質。此性質係有利於對抗局限性，諸如位元率、顯示器解析度、網路流量接收裝置中之計算能力方面的限制條件。
本發明之通訊裝置，在通訊上可能使用各種傳輸技術，彼等包括但不受限之碼分多址(CDMA)、全球行動通訊系統(GSM)、全球行動電話系統(UMTS)、分時多重存取(TDMA)、頻分多址(FDMA)、傳輸控制協定/網際網路協定(TCP/IP)、簡訊服務(SMS)、多媒體訊息服務(MMS)、電子郵件、即時訊息服務(IMS)、籃芽、IEEE 802.11、等等。一個通訊裝置，可能使用各種媒體來通訊，彼等包括但不受限之無線電、紅外線、雷射、電纜連結、等等。該等通訊裝置可能位於某種運輸模式中，彼等包括但不受限之汽車、卡車、計程車、公共汽車、船舶、飛機、腳踏車、摩托車、等等。
就本發明之各種實施例的實現而言，考慮第3圖中所描繪之代表圖係有幫助的。在第3圖中，視界－0和視界－1內的兩個圖框正準備被解碼，以及視界－1係使用視界－0之圖框作為參照。傳統上，視界－1之解碼，僅可在視界－0之解碼已完成且其重建屬可用之後方會開始。若視界－0和視界－1有關之解碼時間分別為τ0 和τ1 ，則總解碼時間將會因依序之程序而為τ0 ＋τ1 ，即使該等資源係存在具兩個解碼器。
視界之平行解碼，係藉由限制視界－1內的每個巨區塊可使用之參照區域來達成。在此範例中，視界－1內之巨區塊，可僅參照視界－0內的一個協同定位之巨區塊和發生在此協同定位之巨區塊前的巨區塊所覆蓋之區域。舉例而言，視界－1內之部位(2,2)處的巨區塊，係無法參照視界－0內之陰影區域。在此特定之範例中，每個視界內有關的兩個解碼器，係可平行運行，而在該等解碼器之間，有一個巨區塊之延遲。
第4圖係詳細呈現第3圖中所描繪的兩個視界有關之解碼程序。第一和第二視界有關之解碼程序，係同時開始，正如400(就視界－0而言)和405(就視界－1而言)所描述。在視界－0解碼器，將上述參照記憶體中已有視界－1之MB(0,0)有關的可用參照區域屬可用，通知給視界－1解碼器之前，視界－1解碼器處之MB(0,0)的解碼，並不會開始。在視界－0之MB(0,0)的解碼正被執行之際，視界－1解碼器，或會進入等待(WAIT)狀態(誠如415處所描繪)，或會執行一個不需要存取該參照區域之解碼運作，諸如剖析該位元流。一旦該視界－0解碼器，在410處解碼出MB(0,0)，以及在412處使上述重建之巨區塊在該記憶體內完成準備，視界－1解碼器便會在425處被通知。一旦被通知，該視界－1解碼器，便可解碼MB(0,0)，因為其並不參照視界－0內之任何尚不可用之區域。(理應注意的是，若視界－1之MB(0,0)係屬內部編碼，則該解碼運作便可在視界－1解碼器接收到視界－0之MB(0,0)已被重建且屬可用之前開始)。在此系統之下，視界－0內之MB(0,1)和視界－1內之MB(0,0)，如第4圖中之430處所指，係可被平行解碼。該視界－0解碼器，唯有在該視界－1解碼器完成MB(0,0)的解碼之後，方會以上述來自MB(0,1)之重建值，來更新該記憶體。該視界－0解碼器，可如435處所描繪，等待被該視界－1解碼器通知，或者其可繼續解碼後繼之巨區塊，以及將該參照值儲存進一個暫時性緩衝器內，而不更新該參照區域。上述視界－1解碼器有關MB(0,0)之解碼程序業已完成的通知，係呈現在440處。此程序接著便會依需要，而就次一巨區塊和後繼之巨區塊一再重複。
使用第4圖中所描繪之程序，兩個解碼器之平行處理實現體便屬可能。在此種平行處理實現體中，其總解碼時間係等於：τ0 ＋delay_overhead＋synchronization_overhead
在此方程式中，delay_overhead係最初巨區塊等待被解碼要耗費之時間。synchronization_overhead係該兩解碼器在等待(WAIT)狀態中所耗費之時間。若在不同視界處的每個巨區塊之解碼，耗費不同的時間量，則兩者解碼器便需要常常彼此等待，而造成相當數量之同步前置時間(overhead)。此外，雖然解碼器間之同步化，就某些架構而言可能很簡單，對某些架構而言可能便很棘手。所以，每個圖框具有較少之同步點或許是有利的，但此又會降低其平行處理。另一方面值得注意的是，若視界間之最初延遲很大(delay_overhead很大)，該系統之編碼效率，便會因可用參照區域之增加而增加。
在第4圖中所描繪之程序中，所討論的是兩個視界之間僅有一個單MB之延遲。理應注意的是，其係有可能具有較大之延遲，雖然此或將阻礙到平行處理，但同時增加了其編碼效率，因為視界－1內的每個巨區塊，或將會有較大之參照區域可用。因此，兩個視界間之巨區塊延遲，係可傳訊在該位元流中，而非勢必要預先加以界定。
有鑒於上文所討論之設計限制條件，語法元素便可被界定來定義每個巨區塊可用之參照區域。特言之，pds_block_size和pds_initial_delay，可分別被用來指明一個區塊大小和起始延遲。該可用參照區域，係包含有一些來自一個使用以下方程式給定之巨區塊列表的重建樣本：(－1,j),其中j＝(pds_initial_delay＋(mbAddr/pds_block_size))*pds_b1ock_size－1
一個平行解碼器實現體，可使用pds_block_size資訊，來決定其需要多頻繁來使視界之間同步化。舉例而言，第4圖上面所例示之樣本解碼程序，係在每個巨區塊下同步化兩個視界，此係意謂pds_block_size為1。該pds_initial_delay，係被一個解碼器用來決定：在解碼處理可開始之前，究需要使該參照區域有多少pds_blocks(pds_block為其由pds_block_size給定之尺寸的巨區塊數目)可用。就第4圖中所例示之範例而言，該pds_initial_delay便為1。
下列之語法可被用來實現本發明的一個實施例：
在此語法中，一個等於1之pds_parameters_present_flag係指明：一些具有等於i之切片view_id，係利用pds_parameters。若一個pds_parameters_present_flag等於0，則一個隸屬等於i之view_id的切片，便不是parallelly_decodable_slice。一個等於1之fixed_pds_for_all_sequence_flag[i]係指明：所有隸屬等於i之view_id的切片，便共用相同之pds_parameters。該parallelly_decodable_slice_flag係指明：其預測性係受到限制，以致一個未被去塊之參照值，會被用來檢閱當前切片有關之預測，以及巨區塊係僅包含來自上述屬於彼等對應之available_reference_area的多視界參照值之樣本，其中，available_reference_area係僅包含來自使用方程式(－1,j],其中j＝(pds_initial_delay＋(mbAddr/pds_block_size))*pds_block_size－1就每個巨區塊所界定之巨區塊的巨區塊群組之樣本。
pds_block_size_minusl_for_list_0[i]，係以巨區塊之數目，來界定list－0中之多視界參照值i有關的pds_block_size。pds_initial_delay_for_list_0[i]，係界定list－0中之多視界參照值i有關的pds_initial_delay。pds_block_size_minusl_for_list_1[i]加1，可界定出list－1中之多視界參照值i有關的pds_block_size。pds_initial_delay_for_list_1[i]，可界定出list－1中之多視界參照值i有關的pds_initial_delay。
雖然平行解碼如何運作之基本觀念，可以特定之編碼限制條件來達成，理應注意的是，本發明之各種實施例的系統，會影響到適性去塊和子像素內插之運作。就適性去塊而言，理應注意的是，在H.264/AVC(新進視訊編碼)標準中，有一個適性去塊過濾器，被利用來移除因變換和量化所致之區塊效應(blocking artifact)。該去塊過濾器，係針對橫跨邊界之邊緣而運作。若該邊界碰巧在兩個巨區塊之間，則為過濾該等邊緣，便需要有解碼自鄰近巨區塊之資訊。此種過濾程序，在配合本發明之各種實施例而使用時，便勢必要被修改。此肇因之事實是，在使一個巨區塊可供其他視界參照之時刻下，其所有之鄰近巨區塊，或許可能尚未被解碼。在此種情況中，該等與未被解碼之巨區塊相鄰的邊界，便無法被過濾。在此有許多替代方案來應付此項議題。
第一種應付上述尚未被解碼之巨區塊的議題之替代方案，係涉及使用未被過濾之重建，來做視界間之預測。在此種解決方案中，一個解碼器在執行視界間之預測時，係使用未被過濾之參照值，但時間上之預測，則使用正規之參照。此將可消除存取鄰近巨區塊之需要。此種解決方案係例示在第3圖中。
第二種應付上述尚未被解碼之巨區塊的議題之替代方案，係涉及使用滑動去塊。在此種解決方案中，在使該巨區塊可供其他視界參照之前，係使除了右方和下方之巨區塊的邊界以外之所有邊界被過濾。此程序係一般描繪在第5圖中。第6圖係顯示此類型之解碼運作的明細實現體。與第4圖中所描繪之實施例相類似，第一和第二視界有關之解碼程序，如600(就視界－0而言)和605(就視界－1而言)處所描繪，係同時開始。在開始之後，該視界－1解碼器便會立刻進入一種在615處之等待狀態。當該視界－1解碼器處於615處的等待狀態之際，該視界－0解碼器便會解碼610處之MB(0,0)，以及使612處重建之巨區塊，在該記憶體內完成準備，在614處，該視界－0解碼器，會過濾掉除其下方和右方邊界以外的整個MB(0,0)。一旦此步驟被完成，該視界－1解碼器，便會在620處被通知。在630處，該視界－1解碼器，可解碼MB(0,0)，同時在此實例中，該視界－0解碼器，可解碼其次一巨區塊－MB(0,1)。在該視界－0解碼器，可以來自MB(0,1)之重建值，來更新該記憶體，其將會等待該視界－1解碼器完成MB(0,0)之解碼。此項等待係表示在635處，以及該視界－1解碼器，有關此程序已完成之通知，係表示在640處。此程序接著便會依需要，而就次一巨區塊和後繼之巨區塊一再重複。除了以上所述者外，一個編碼器可利用一種修改過之去塊運作，其中，巨區塊邊界會被過濾，而不使用除了重建之樣本外的任何來自鄰近巨區塊的被解碼之資訊。此可在該位元流內傳訊給該解碼器。
第三種應付上述尚未被解碼之巨區塊的議題之替代方案，係涉及進一步限制該參照區域。藉由此種解決方案，一個巨區塊可在另一視界內參照之區域內進一步被限制，而使沒有一個被過濾後可能改變之像素被容許參照。此種解決方案亦可配合上文所討論之滑動去塊一起使用。
子像素內插係就一些彼等運動向量具有分數像素準確度之區塊加以執行。在該H.264/AVC標準中，運動向量可能具有整數、半像素或四分之一像素的準確度。該等半像素之樣本，係使用一個6分接頭FIR過濾器來獲得，以及該等四分之一像素之樣本，係使用兩個在半像素或整數像素之位置處的最接近之樣本，以雙線性過濾法來取得。依據本發明之不同實施例的子像素內插之效果，可檢閱第3圖中之繪圖來瞭解。在第3圖中，在部位(2,2)處之巨區塊，或許會參照視界－1內的一個區域，在此，其係位於該可用區域(指明為白色)內，但仍需要來自上述參照圖框之不可利用的區域之像素(指明為該參照記憶體內之加斜線者)。第7圖係例示該運動向量就視界－1有關之部位(2,2)處的巨區塊而言為(－0.25,－0.25)之情況。誠如第7圖中可見，某些要獲得該參照值所需要之像素尚不可用(亦即，上述加斜線區域內之像素)。為解決此項問題，有許多不同之解決方案可被使用。第一個此種解決方案係涉及填補處理。在此種解決方案中，在該巨區塊被置於該參照記憶體內之後，該等下方和右方邊界係藉由填補處理而使延伸。需要被填補之像素的數目，係取決於上述內插過濾器之細節，例如，該過濾器之長度。舉例而言，在H.264/AVC中，或將需要三個像素之填補處理。第8圖係顯示一般性實況中被填補之區域。
第二種應付上述尚不可用之像素的議題之替代方案，係進一步涉及限制該參照區域。藉由此種解決方案，一個巨區塊在另一視界內參照之區域，係進一步就分數像素加以限制。結果，沒有來自不可用之區域的像素，供子像素內插使用。
由於視界間預測有關之參照區域係受到限制，本發明之各種實施例的利用性，亦可能造成某一定量即定編碼效率的降格。此負面因素在某些相機配置中，可能變得較明顯。舉例而言，考慮一種內含三個如第9圖中所例示垂直對齊但水平相間之相機的相機系統係有幫助的。假定視界－0被編碼為基本視界，視界－1圖框係參照視界－0圖框，以及視界－2圖框係參照視界－1圖框，若使用本發明之各種實施例，而在視界間有一個MB的延遲，則視界－2和視界－1有關之最佳匹配區塊，通常是落在不可用之參照區域內，因而會降低該編碼效率。此種現象可以多種方法來面對。第一種解決方案，係涉及配置視界之關聯性。在此種解決方案中，該編碼器可依據用來捕捉該等視界之相機配置，來配置視界間之參照結構。藉由此種配置，每個視界內最佳匹配之區塊，係具有較大之機會在該可用之參照區域內。在第9圖內所描繪之範例中，顛倒參照之順序(亦即，使視界－2為基本視界，視界－1為參照視界－2，以及視界－0為參照視界－1)，或將增加該編碼效率。
第二種改善該編碼效率之替代方案，係涉及在編碼之前修改原有之畫面。在此種解決方案中，該編碼器係就某一定之視界使用修改過之原有畫面，以及將修改之細節傳訊給該解碼器。舉例而言，若上述範例中的視界－2係呈水平鏡射，視界－2內之區塊，或將具有較高機會在其他視界內找到彼等對應之最佳匹配，因而增加該編碼效率。理應注意的是，使用此種解決方案，不同之相機配置或將需要不同之修改。
第三種改善該編碼效率之替代方案，係涉及利用切片群組。在此種解決方案中，每個視界內之圖框，係依據該相機配置，而被分割成不同之切片。結果，在其他視界內找出一個最佳匹配之區塊的機會便被最大化。就第9圖中所例示之範例而言，為改善該編碼效率，可建立一些彼此相對一個或多個巨區塊被水平移位之切片群組。
第四種改善該編碼效率之替代方案，係涉及利用一個修改過的屏面掃描。藉由此種解決方案，巨區塊之編碼/解碼順序會被改變。就先前之範例而言，若視界－2巨區塊，係自右上角而非自左上角開始被編碼/解碼，找出最佳匹配之機會將會增加，因而增加該編碼效率。理應注意的是，藉由此種解決方案，不同之相機配置，或將需要不同之掃描順序。
除了以上所述者外，透過使用補充增強信息(SEI)訊息語法亦可促成傳訊。一個H.264/AVC－MVC編碼器之輸出和一個H.264/AVC－MVC解碼器之輸入有關的基本單元，係一個網路存取層(NAL)單元。就封包取向式網路上面之傳輸或結構化檔案的儲存而言，NAL單元通常是被封裝成封包或類似之結構。在不提供訊框結構之傳輸或儲存環境中，一個位元組串流格式，業已被指明在H.264/AVC標準中。該位元組串流格式，係藉由在每個NAL單元之前附加一個起始碼，而使NAL單元彼此相區隔。為避免NAL單元邊界之錯誤偵測，該編碼器便勢必要執行一個位元組取向式起始碼模擬預防演算法，其係在若有一個起始碼已經發生，便將一個模擬預防位元組加至NAL單元酬載。為促成封包取向式與串流取向式系統間之直截閘道器運作，起始碼模擬預防總會被執行，而無論該位元組串流格式是否在使用。
一個SEINAL單元係包含有一個或多個SEI訊息，彼等就畫面輸出之解碼而言非屬必要，但有助於相關之處理程序，諸如畫面輸出時序、播放、錯誤偵測、錯誤隱匿、和資源保留。大約有20個SEI訊息，如今被指明在H.264/AVC－MVC標準中。使用者資料SEI訊息，可促使組織和公司就彼等自己之用途而訂定SEI訊息。該H.264/AVC標準，包含了該等訂定之SEI訊息有關的語法和語義，但不包含傳統上已被界定用以處置該接收端內之訊息的程序。結果，彼等解碼器在建立SEI訊息時，係被要求遵循該H.264/AV－MVC標準，以及一些符合H.264/AVC標準之編碼器，並不需要處理輸出順序順應性有關之SEI訊息。
在H.264/AVC中包括SEI訊息之語法和語義的一個理由，是要容許系統規範，諸如3GPP多媒體規範和DVB規範，能解譯該補充資訊之身份，以及因而相互運作。可預期的是，系統規範可要求在編碼和解碼兩者中使用特定之SEI訊息，以及該接收端中有關處置SEI訊息之程序，係可能就該應用例而指明在一個系統規範內。有鑒於以上所述，利用SEI訊息，將可完成平行可解碼式切片參數之傳訊。在此種情況中，該編碼器可能想要就執行視界間預測下的畫面，使去塊過濾器停用。
除以上所述者外，尚有其他工具可能被用來增加該編碼效率。此之完成利用到的事實是，(1)PDS配置中的運動向量因該參照區域之限制條件而無法採用所有可能之值，以及(2)移動向量之水平和垂直分量的統計性質，在PDS中係相互關聯。該H.264/AVC編碼標準，可支援兩個不同之熵編碼配置－－本文式適性可變長度編碼(CAVLC)和本文式適性二進制算術編碼(CABAC)。CAVLC有關之範例性實現體，依據各種實施例係提供如下，但本技藝之專業人員將可理解，各種實施例係同樣可應用於CABAC。
在H.264/AVC中，運動向量係具有兩個分量－－水平(MVX )和垂直(MVY )分量。一個運動向量的每一分量，係使用一個預測運動向量分開編碼。換言之，首先會有一個預測形成，該項預測與最初運動向量間之差異，接著會就該運動向量之每一水平和垂直分量被編碼。該差異係依據彼等由上述標準所界定之發生概率，使映射成二進位Exp－Golomb碼字。舉例而言，下表係呈現該運動向量差異(mvd)和該等相關聯之Exp－Golomb碼字。
以上呈現之配置，在與該PDS系統一起使用時，係具有兩項缺點。首先，此配置係假定運動向量可指向該參照區域內的任一點(在H.264/AVC標準中所界定之限制條件內)。然而，在PDS中，該參照區域係有限制。第二，該H.264/AVC標準，係假定運動向量之水平和垂直分量的統計性質是獨立的，因為彼等係分開被編碼。然而，在PDS系統內之運動向量的情況中，該兩分量係屬相互關聯。此點係示範在第12圖中，其係顯示有鑒於第12圖中之表示圖的運動向量之水平和垂直分量有關的範圍。在第12圖中，其係顯示一個運動向量之垂直分量，如何取決於該運動向量之水平分量，而具有不同之範圍。特言之，第12圖係顯示一個第一運動向量範圍1200、一個第二垂直運動向量範圍1210、一個第一水平運動向量範圍1220、和一個第二水平運動向量範圍1230。當該垂直運動向量，在該水平運動向量之後應用時，該第一垂直運動向量範圍1200，係於該水平運動向量範圍小於或等於零時應用，以及該第二垂直運動向量範圍1210，係於該水平運動向量範圍大於零時應用。同理，當該垂直運動向量為編碼過之水平運動向量時，則該第一水平運動向量範圍1220，係於該垂直運動向量範圍小於零但大於－16時應用，以及該第二水平運動向量範圍，係於該垂直運動向量範圍小於或等於－16時應用。
有各種配置可能被用來應付上述H.264/AVC標準之以上缺點。在第一配置中，可使用單一碼字來編碼對應運動向量的兩者分量。此外，自運動向量至碼字之映射，係可依據該參照區域，在每個巨區塊處加以調適。視界(或差異向量)間之運動向量的編碼，係在運動向量之統計性質改變為參照區域受到限制時被修改。此提供了最佳之編碼效率，但亦會因就每個巨區塊所執行之更新程序，而不免有高的複雜性。
在另一個範例中，該運動向量之水平和垂直分量，可被分開編碼，而在將該運動向量映射至該二進位碼字時，亦將每個分量有關之可用參照區域納入考慮。舉例而言，考慮指明在第12圖中之巨區塊1250的運動向量要被編碼的情況，是有幫助的。在此情況中，該運動向量之水平分量可假定首先被編碼，其後，該垂直分量方被編碼(不過，在某些情況中，顛倒此順序可能是有利的)。由於在該位元流內MVY 係後接MVX ,MVY 資訊係無法被利用來編碼MVX 。基於此一理由，MVX 有關之最大可能範圍，便應被利用而使MVX 映射成該二進位碼字。在MVX 被編碼後，該垂直分量向量可採用之範圍便屬已知。舉例而言，若MVX 為一正值，則MVY 便不能採用[－16,0]之間的值。使用此一範圍，該垂直分量係使映射成該二進位碼字。運動向量分量至二進位碼字之映射，基本上係涉及移除該等因該參照區域限制條件而不可用之值，以及使該碼字列表內之其餘可能值向上移位。
下列為一個用以示範在一個CABAC環境中如何依據以上諸實施例可能採用之可變長度碼的範例。在此範例中，其係假定接下來的可變長度碼，為一組運動向量差異，而使此接下來的為唯一之候選可變長度碼：
在此範例中，其亦假定由於平行解碼限制條件所致，該運動向量(亦即，運動向量預測加上運動向量差異)僅能採用某一定之值。該項預測為對該等編碼器和解碼器而言係屬已知，故該等編碼器和解碼器兩者，可知何者值無法構成該運動向量差異。若此項限制條件意謂，運動向量A、B、和C無法被使用，則該等可變長度碼，便可被改變如下：
就上述改變之結果而言，D、E、F、和G之編碼值，係包含較少之位元。
第10和11圖係顯示一個可在其中實現本發明之代表性電子裝置12。然而，理應瞭解的是，本發明並非被預期受限於某一特定類型之電子裝置。第2和3圖之電子裝置12係包含有：一個外殼30、一個成液晶顯示器形式之顯示器32、一個按鍵區34、一個麥克風36、一個耳機38、一個電池40、一個紅外線接口42、一個天線44、一片依據本發明的一個實施例成UICC形式之智慧卡46、一個讀卡器48、一個無線電介面電路52、一個編碼解碼器(codec)電路54、一個控制器56、和一個記憶體58。彼等個別之電路和元件，全係本技藝中所習見之類型。此等各種組件，事實上可使合併進本說明書所討論之任何一個裝置上面的裝置內。
本發明係在一般性方法步驟之背景環境中加以說明，其可在一個實施例中藉由一種程式產品來實現，後者係包含有一些電腦可執行式指令，諸如程式碼，彼等係體現在一個電腦可讀取式媒體上面，以及係由聯網環境中之電腦來執行。電腦可讀取式媒體之範例，可包括各種類型之儲存媒體，彼等包括但不受限之電子裝置記憶體單元、隨機存取記憶體(RAM)、唯讀記憶體(ROM)、光碟(CD)、數位多用途光碟(DVD)、和其他之內在或外在儲存裝置。通常，彼等程式模組係包括有一些可執行特定之任務或實現特定之提取資料類型的常式、程式、物件、組件、資料結構、等等。彼等電腦可執行式指令、相關聯之資訊結構、和程式模組，代表了一些可執行本說明書所揭示之方法步驟的程式碼之範例。此等可執行式指令或相關聯之資料結構的特定順序，代表了一些用以實現此等步驟中所說明之功能的對應動作之範例。
本發明之軟體和網路實現體，可以一些具有規則式邏輯和其他可完成各種資料庫搜尋步驟、關聯步驟、比較步驟、和判定步驟之邏輯的標準程式規劃技術來完成。亦應注意的是，本說明書和申請專利範圍內所使用之字詞“組件”和“模組”，係預期涵蓋一些使用一行或多行軟體碼之實現體、和/或硬體實現體、和/或一些用以接收人工輸入之設備。
本發明之實施例的前述說明，已就例示和說明之目的加以提示。其並非預期屬詳盡無遺或為限制本發明至所揭示一成不變之形式，以及一些修飾體和變更形式，係依據上文之授義內容而成為可能，或者可由本發明之實務獲致。該等實施例在選擇及說明上，係為解釋本發明之原理和其實際應用，藉以促使本技藝之專業人員，能在各種實施例中及連同各種適合所預期之特定用途的修飾體，利用到本發明。本說明書所說明之實施例的特徵，係可使結合在所有方法、裝置、模組、系統、和電腦程式產品之可能組合中。
100．．．資料源
36．．．麥克風
110．．．編碼器
38．．．耳機
120．．．儲存器
40．．．電池
130．．．發送器
42．．．紅外線接口
140．．．閘道器
44．．．天線
150．．．接收器
46．．．智慧卡
160．．．解碼器
48．．．讀卡器
170．．．播放器
52．．．無線電介面電路
12．．．電子裝置
54．．．編碼解碼器(codec)電路
30．．．外殼
56．．．控制器
32．．．顯示器
58．．．記憶體
34．．．按鍵區
第1圖係一個3D立體電視(3D－TV)之使用情況中的一個畫面的兩個視界有關之傳統式樣本預測鏈的代表圖：第2圖係一個可在其中實現本發明之各種實施例的系統之總覽圖；第3圖係一個可顯示在兩個視界之間有一個巨區塊延遲之下如何實現本發明之實施例的代表圖：第4圖係第3圖中所描繪之實現體有關的樣本解碼程序之代表圖：第5圖係一個依據本發明的一個特定實施例之滑動去塊(deblocking)運作的代表圖：第6圖係一個可顯示一個與第5圖中所描繪之滑動去塊解決方案相關的樣本解碼程序之代表圖；第7圖係一個可顯示在實現本發明之各種實施例期間的子像素內插處理之效果的例示圖；第8圖係一個可顯示如何使用填補處理來應付第7圖中所描繪之子像素內插處理的議題之例示圖；第9圖係本發明之各種實施例的實現如何影響到編碼效率的一個例示圖；第10圖係一個可被使用於本發明之實現體中的電子裝置之透視圖；第11圖係一個第10圖之電子裝置的電路之示意圖：而第12圖則係一個可顯示在視界之平行解碼被允許時的運動向量之水平和垂直分量有關的範圍之參照區域的代表圖。
100,110,120,130,140,150,160,170．．．步驟

Claims (82)

  1. 一種用以解碼來自具有視界間預測關係之多視界的圖框之方法，其包含之步驟有：接收一個取自一個第一視界之一個畫面的一個第一圖框之特定之巨區塊；將資訊解碼，該資訊係與取自一個第二視界之該畫面的一個對應第二圖框內之何者巨區塊允許被該特定之巨區塊參照有關，該資訊包括所需數目的巨區塊，其在該特定之巨區塊被允許開始解碼之前，被重建至一參照記憶體；以及在允許被該特定之巨區塊參照的該等所需數目的巨區塊已被重建至該參照記憶體之一情況下，解碼該特定之巨區塊。
  2. 如請求項1之方法，進一步包含自一個解碼器接收一個允許被該特定之巨區塊參照的該等所需數目的巨區塊已被重建至該參照記憶體的通知。
  3. 如請求項2之方法，進一步包含之步驟有：在該特定之巨區塊的解碼業已完成後，致使該解碼器受通知。
  4. 如請求項1之方法，進一步包含之步驟有：在解碼該特定的巨區塊之前，使用一個適性去塊過濾器，來移除對應於該特定之巨區塊被解碼之前的該特定之巨區塊之該第二圖框的一個巨區塊內之區塊效應(blocking artifact)。
  5. 如請求項4之方法，其中，該第二圖框內之經過濾之巨 區塊的右方和下方邊界係不被過濾。
  6. 如請求項4之方法，其中，該第二圖框之該對應巨區塊，在被用來做視界間預測時係未被過濾，以及其中，該第二圖框之該對應巨區塊，係在被過濾後方被用來做時間預測。
  7. 如請求項4之方法，其中，可被該特定之巨區塊參照的該第二圖框之該對應巨區塊之區域係受到限制。
  8. 如請求項1之方法，其中，對應於該特定之巨區塊的該第二圖框的一巨區塊之下方和右方邊緣，在該對應的巨區塊已被重建之後，由預定數目之像素來填補。
  9. 如請求項1之方法，其中，該對應第二圖框內之可被該特定之巨區塊參照的該等巨區塊，就分數像素而言係有限制。
  10. 如請求項1之方法，其中，該等第一和第二圖框內的巨區塊之解碼順序，係自每個圖框之一左上角朝向一右下角移動。
  11. 如請求項1之方法，其中，該等第一和第二圖框內的巨區塊之解碼順序，係自每個圖框之一右上角朝向一左下角移動。
  12. 如請求項1之方法，其中，該等第一和第二圖框內的巨區塊之解碼順序，係循著一個任意之方向。
  13. 如請求項1之方法，其中，該等第一和第二圖框內的巨區塊之解碼順序，係在一位元流中傳訊。
  14. 如請求項1之方法，其中，該等第一和第二圖框，係基 於負責該等第一和第二視界之第一和第二相機的配置，而被分割成切片群組。
  15. 如請求項1之方法，其中，該對應第二圖框內之允許被該特定之巨區塊參照的該等巨區塊，係至少部份基於負責該等第一和第二視界之第一和第二相機的配置而來。
  16. 如請求項1之方法，其中，該等第一和第二圖框中的至少一個，係取自一個先前被一個編碼器修改過之畫面。
  17. 如請求項2之方法，其中，在該特定之巨區塊被允許開始解碼之前被重建至該參照記憶體之該等所需數目的巨區塊，包含在接收來自該解碼器的該通知之前被重建至該參照記憶體的該等巨區塊。
  18. 如請求項1之方法，其中，該資訊包括多個在解碼開始之前等待的通知。
  19. 如請求項1之方法，其中，該接收到之資訊，係在該串列參數集位階傳訊。
  20. 如請求項1之方法，其中，該接收到之資訊，係在該畫面參數集位階傳訊。
  21. 如請求項1之方法，其中，該接收到之資訊，係在該切片標頭位階傳訊。
  22. 如請求項1之方法，其中，該接收到之資訊，係在該巨區塊標頭位階傳訊。
  23. 如請求項1之方法，其中，被編碼之運動向量資訊，亦會被接收及解碼，以及其中，該等第一視界與第二視界間之運動向量的編碼，係在運動向量之統計性質改變為 一個參照區域受到限制時被修改。
  24. 如請求項23之方法，其中使用一個單一碼字來編碼該等第一視界與第二視界間之運動向量的二分量，以及其中一個自運動向量至碼字之映射，係依據一個參照區域，在每個巨區塊加以調適。
  25. 如請求項1之方法，進一步包含將一運動向量之水平和垂直分量分開編碼，該運動向量係與藉由將該等水平和垂直分量映射至一或更多個二進位碼字之一巨區塊相關聯，其中該等水平和垂直分量之一可用參照區域，係在將該等運動向量分量映射至該一或更多個二進位碼字時，方被納入考慮。
  26. 一種電腦程式產品，其包含儲存有程式碼之一非過渡性電腦可讀取式媒體，該程式碼係組配來在執行時致使一裝置作至少下列動作：接收一個取自一個第一視界之一個畫面的一個第一圖框之特定之巨區塊；將資訊解碼，該資訊係與取自一個第二視界之該畫面的一個對應第二圖框內之何者巨區塊允許被該特定之巨區塊參照有關，該資訊包括所需數目的巨區塊，其在該特定之巨區塊被允許開始解碼之前，被重建至一參照記憶體；和在允許被該特定之巨區塊參照的該等所需數目的巨區塊已被重建至該參照記憶體之一情況下，解碼該特定之巨區塊。
  27. 一種包含處理器和儲存有程式碼的記憶體之裝置，該等記憶體和程式碼配合該處理器組配來致使該裝置作至少下列動作：接收一個取自一個第一視界之一個畫面的一個第一圖框之特定之巨區塊；將資訊解碼，該資訊係與取自一個第二視界之該畫面的一個對應第二圖框內之何者巨區塊允許被該特定之巨區塊參照有關，該資訊包括所需數目的巨區塊，其在該特定之巨區塊被允許開始解碼之前，被重建至一參照記憶體；以及在允許被該特定之巨區塊參照的該等所需數目的巨區塊已被重建至該參照記憶體之一情況下，解碼該特定之巨區塊。
  28. 如請求項27之裝置，其中進一步致使該裝置接收來自一個解碼器之一個允許被該特定之巨區塊參照的該等所需數目的巨區塊已被重建至該參照記憶體的通知。
  29. 如請求項28之裝置，其中進一步致使該裝置來在該特定之巨區塊的解碼業已完成後，致使該解碼器受通知。
  30. 如請求項27之裝置，進一步包含有：在解碼該特定之巨區塊之前，使用一個適性去塊過濾器，來移除在該特定之巨區塊被解碼之前對應於該特定之巨區塊之該第二圖框的一個巨區塊內之區塊效應(blocking artifacts)。
  31. 如請求項30之裝置，其中，該第二圖框內之經過濾之巨區塊的右方和下方邊界係不被過濾。
  32. 如請求項30之裝置，其中，該第二圖框之該對應巨區塊，在被用來做視界間預測時係未被過濾，以及其中，該第二圖框之該對應巨區塊，係在被過濾後方被用來做時間預測。
  33. 如請求項30之裝置，其中，可被該特定之巨區塊參照的該第二圖框之該對應巨區塊之區域係受到限制。
  34. 如請求項27之裝置，其中，對應於該特定之巨區塊的該第二圖框之一巨區塊的下方和右方邊緣，在該對應的巨區塊已被重建之後，由預定數目之像素來填補。
  35. 如請求項27之裝置，其中，該對應第二圖框內可被該特定之巨區塊參照的該等巨區塊，就分數像素而言係有限制。
  36. 如請求項27之裝置，其中，該等第一和第二圖框內的巨區塊之解碼順序，係自每個圖框之一左上角朝向一右下角移動。
  37. 如請求項27之裝置，其中，該等第一和第二圖框內的巨區塊之解碼順序，係自每個圖框之一右上角朝向一左下角移動。
  38. 如請求項27之裝置，其中，該等第一和第二圖框內的巨區塊之解碼順序，係循著一個任意之方向。
  39. 如請求項27之裝置，其中，該等第一和第二圖框內的巨區塊之解碼順序，係在一位元流中傳訊。
  40. 如請求項27之裝置，其中，該等第一和第二圖框，係基於負責該等第一和第二視界之第一和第二相機的配 置，而被分割成切片群組。
  41. 如請求項27之裝置，其中，該對應第二圖框內之允許被該特定之巨區塊參照的該等巨區塊，係至少部份基於負責該等第一和第二視界之第一和第二相機的配置而來。
  42. 如請求項27之裝置，其中，該等第一和第二圖框中的至少一個，係取自一個先前被一個編碼器修改過之畫面。
  43. 如請求項28之裝置，其中，在該特定之巨區塊被允許開始解碼之前，被重建至該參照記憶體之該等所需數目的巨區塊，包含在接收來自該解碼器的該通知之前被重建至該參照記憶體的該等巨區塊。
  44. 如請求項27之裝置，其中，該資訊包括在上述解碼開始之前等待的通知。
  45. 如請求項27之裝置，其中，該接收到之資訊，係在該串列參數集位階傳訊。
  46. 如請求項27之裝置，其中，該接收到之資訊，係在該畫面參數集位階傳訊。
  47. 如請求項27之裝置，其中，該接收到之資訊，係在該切片標頭位階傳訊。
  48. 如請求項27之裝置，其中，該接收到之資訊，係在該巨區塊標頭位階傳訊。
  49. 如請求項27之裝置，其中，被編碼之運動向量資訊，亦會被接收及解碼，以及其中，該等第一視界與第二視界間之運動向量的編碼，係在運動向量之統計性質改變為一個參照區域受到限制時被修改。
  50. 如請求項49之裝置，其中使用一個單一碼字來編碼該等第一視界與第二視界間之運動向量的二分量，以及其中一個自運動向量至碼字之映射，係依據一個參照區域，在每個巨區塊加以調適。
  51. 如請求項27之裝置，其中該裝置係進一步致使一運動向量之水平和垂直分量分開編碼，該運動向量係與藉由將該等水平和垂直分量映射至一或更多個二進位碼字之一巨區塊相關聯，其中該等水平和垂直分量之一可用參照區域，係在將該等運動向量分量映射至該一或更多個二進位碼字時，方被納入考慮。
  52. 一種用以編碼來自具有視界間預測關係之多視界的圖框之方法，其包含之步驟有：將取自一個第一視界之一個畫面的一個第一圖框之第一多數巨區塊，編碼進一個位元流；將取自一個第二視界之該畫面的一個第二圖框之第二多數巨區塊，編碼進一個位元流，至少有一部份之第二圖框參照至少一部份之第一圖框；以及致使在該位元流中傳訊針對該第二圖框中之每個巨區塊之該第一圖框中的多數巨區塊的何者係被允許參照之一指示符，該指示符包括在一個特定之巨區塊被允許開始解碼之前，有多少個巨區塊要被重建至一參照記憶體。
  53. 如請求項52之方法，其中，該項傳訊係發生在該串列參數集位階。
  54. 如請求項52之方法，其中，該項傳訊係發生在該畫面參數集位階。
  55. 如請求項52之方法，其中，該項傳訊係發生在該切片標頭位階。
  56. 如請求項52之方法，其中，該項傳訊係發生在該巨區塊標頭位階。
  57. 如請求項52之方法，其中，允許被該第二圖框內之一特定巨區塊參照的該第一圖框內之該等巨區塊，係至少部份基於負責該等第一和第二視界之第一和第二相機的配置而來。
  58. 如請求項52之方法，其中，可被該第二圖框內之一特定巨區塊參照的該第一圖框內之巨區塊的區域，就分數像素而言係有限制。
  59. 如請求項52之方法，其中，該等第一和第二圖框內的巨區塊之編碼順序，係自每個圖框之一左上角朝向一右下角移動。
  60. 如請求項52之方法，其中，該等第一和第二圖框內的巨區塊之編碼順序，係自每個圖框之一右上角朝向一左下角移動。
  61. 如請求項52之方法，其中在該特定之巨區塊被允許開始解碼之前被重建至該參照記憶體之該等所需數目的巨區塊，包含有多個巨區塊，該等巨區塊在致使一個通知被傳送之前被重建至該參照記憶體，該通知指示該等第二多數巨區塊中的至少一者係被允許開始解碼。
  62. 如請求項52之方法，其中，該指示符包括有多個在該等第二多數巨區塊中之至少一個開始解碼之前等待的通知。
  63. 如請求項52之方法，進一步包含致使該等第一和第二圖框內的巨區塊之一解碼順序，要在該位元流中傳訊。
  64. 如請求項52之方法，其中，被編碼之運動向量資訊，亦被編碼進該位元流內，以及其中，該等第一視界與第二視界間之運動向量的編碼，係在運動向量之統計性質改變為一個參照區域受到限制時被修改。
  65. 如請求項64之方法，其中使用一個單一碼字來編碼該等第一視界與第二視界間之運動向量的二分量，以及其中一個自運動向量至碼字之映射，係依據一個參照區域，在每個巨區塊加以調適。
  66. 如請求項52之方法，進一步包含將一運動向量之水平和垂直分量分開編碼，該運動向量係與藉由將該等水平和垂直分量映射至一或更多個二進位碼字之一巨區塊相關聯，其中該等水平和垂直分量之一可用參照區域，係在將每一運動向量分量映射至一或更多個二進位碼字時，方被納入考慮。
  67. 一種電腦程式產品，其包含儲存有程式碼之一非過渡性電腦可讀取式媒體，該程式碼係組配來在執行時致使一裝置作至少下列動作：將取自一個第一視界之一個畫面的一個第一圖框之第一多數巨區塊，編碼進一個位元流； 將取自一個第二視界之該畫面的一個第二圖框之第二多數巨區塊，編碼進一個位元流，至少有一部份之第二圖框參照至少一部份之第一圖框；和致使在該位元流中傳訊一個針對該第二圖框內的每個巨區塊之該第一圖框之多數巨區塊中的何者係被允許參照之一指示符，該指示符包括在一特定的巨區塊被允許開始解碼之前，有多少個巨區塊要被重建至一參照記憶體。
  68. 一種包含處理器和儲存有程式碼指令的記憶體之裝置，該等記憶體和程式碼指令配合該處理器組配來致使該裝置作至少下列動作：將取自一個第一視界之一個畫面的一個第一圖框之第一多數巨區塊，編碼進一個位元流；將取自一個第二視界之該畫面的一個第二圖框之第二多數巨區塊，編碼進一個位元流，至少有一部份之第二圖框參照至少一部份之第一圖框；和致使在該位元流中傳訊一個針對該第二圖框內的每個巨區塊之該第一圖框之多數巨區塊中的何者係被允許參照之指示符，該指示符包括在一特定的巨區塊被允許開始解碼之前，有多少巨區塊要被重建至一參照記憶體。
  69. 如請求項68之裝置，其中，該項傳訊係發生在該串列參數集位階。
  70. 如請求項68之裝置，其中，該項傳訊係發生在該畫面參 數集位階。
  71. 如請求項68之裝置，其中，該項傳訊係發生在該切片標頭位階。
  72. 如請求項68之裝置，其中，該項傳訊係發生在該巨區塊標頭位階。
  73. 如請求項68之裝置，其中，允許被該第二圖框內之一特定巨區塊參照的該第一圖框內之該等巨區塊，係至少部份基於負責該等第一和第二視界之第一和第二相機的配置而來。
  74. 如請求項68之裝置，其中，可被該第二圖框內之一特定巨區塊參照的該第一圖框內之巨區塊的區域，就分數像素而言係有限制。
  75. 如請求項68之裝置，其中，該等第一和第二圖框內的巨區塊之編碼順序，係自每個圖框之一左上角朝向一右下角移動。
  76. 如請求項68之裝置，其中，該等第一和第二圖框內的巨區塊之編碼順序，係自每個圖框之一右上角朝向一左下角移動。
  77. 如請求項68之裝置，其中在該特定的巨區塊被允許開始解碼之前被重建至該參照記憶體之該等所需數目的巨區塊，包含有多個巨區塊，該等巨區塊在該特定的巨區塊被允許開始解碼之前，被重建至該參照記憶體，該等多個巨區塊包含在致使一個通知被傳送前被重建至該參照記憶體的多個巨區塊，該通知指示該等第二多數巨 區塊中的至少一者係被允許開始解碼。
  78. 如請求項68之裝置，其中，該指示符包括有多個在該等第二多數巨區塊中之至少一個開始解碼之前等待的通知。
  79. 如請求項68之裝置，其中該裝置進一步致使該等第一和第二圖框內的巨區塊之一解碼順序在該位元流中傳訊。
  80. 如請求項68之裝置，其中，被編碼之運動向量資訊，亦被編碼進該位元流內，以及其中，該等第一視界與第二視界間之運動向量的編碼，係在運動向量之統計性質改變為一個參照區域受到限制時被修改。
  81. 如請求項80之裝置，其中使用一個單一碼字來編碼該等第一視界與第二視界間之運動向量的二分量，以及其中一個自運動向量至碼字之映射，係依據一個參照區域，在每個巨區塊加以調適。
  82. 如請求項68之裝置，其中該裝置進一步致使一運動向量之水平和垂直分量分開編碼，該運動向量係與藉由將該等水平和垂直分量映射至一或更多個二進位碼字之一巨區塊相關聯，其中該等水平和垂直分量之一可用參照區域，係在將該等運動向量分量映射至一或更多個二進位碼字時，方被納入考慮。
TW096138656A 2006-10-16 2007-10-16 用以對多視界視訊編碼利用可平行解碼切片之方法、裝置及電腦程式產品 TWI449431B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US85202906P 2006-10-16 2006-10-16

Publications (2)

Publication Number Publication Date
TW200833118A TW200833118A (en) 2008-08-01
TWI449431B true TWI449431B (zh) 2014-08-11

Family

ID=39314433

Family Applications (1)

Application Number Title Priority Date Filing Date
TW096138656A TWI449431B (zh) 2006-10-16 2007-10-16 用以對多視界視訊編碼利用可平行解碼切片之方法、裝置及電腦程式產品

Country Status (8)

Country Link
US (1) US8594203B2 (zh)
EP (1) EP2080379B1 (zh)
KR (1) KR101101965B1 (zh)
CN (1) CN101627634B (zh)
CA (1) CA2673494C (zh)
MX (1) MX2009003968A (zh)
TW (1) TWI449431B (zh)
WO (1) WO2008047300A2 (zh)

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7983835B2 (en) 2004-11-03 2011-07-19 Lagassey Paul J Modular intelligent transportation system
US20100091845A1 (en) * 2006-03-30 2010-04-15 Byeong Moon Jeon Method and apparatus for decoding/encoding a video signal
ES2636917T3 (es) * 2006-03-30 2017-10-10 Lg Electronics, Inc. Un método y un aparato para descodificar/codificar una señal de video
WO2007148909A1 (en) * 2006-06-19 2007-12-27 Lg Electronics, Inc. Method and apparatus for processing a vedeo signal
WO2008023967A1 (en) 2006-08-25 2008-02-28 Lg Electronics Inc A method and apparatus for decoding/encoding a video signal
KR20090099547A (ko) * 2007-01-04 2009-09-22 톰슨 라이센싱 멀티뷰 코딩 비디오에서 비디오 에러 정정을 위한 방법 및 장치
US20100266042A1 (en) * 2007-03-02 2010-10-21 Han Suh Koo Method and an apparatus for decoding/encoding a video signal
US8155461B2 (en) * 2007-03-27 2012-04-10 Samsung Electronics Co., Ltd. Methods and apparatuses for encoding and decoding multi-view image
EP2149262A4 (en) 2007-04-25 2010-09-01 Lg Electronics Inc METHOD AND DEVICE FOR DECODING / CODING A VIDEO SIGNAL
KR101482642B1 (ko) * 2007-05-16 2015-01-15 톰슨 라이센싱 다중-뷰 비디오 코딩(ｍｖｃ) 정보의 디코딩에 슬라이스 그룹들을 이용하기 위한 방법 및 장치
CN103428504B (zh) * 2007-08-15 2017-04-12 汤姆森许可贸易公司 在多视图编码的视频中进行错误隐藏的方法和装置
US8885709B2 (en) 2008-09-18 2014-11-11 Panasonic Corporation Image decoding device, image coding device, image decoding method, image coding method, and program
CN102257818B (zh) 2008-10-17 2014-10-29 诺基亚公司 3d视频编码中运动向量的共享
CN101836454B (zh) * 2008-12-03 2012-08-22 联发科技股份有限公司 对有序熵切片执行平行cabac码处理的方法及装置
US9467699B2 (en) 2008-12-03 2016-10-11 Hfi Innovation Inc. Method for performing parallel coding with ordered entropy slices, and associated apparatus
CN105357509B (zh) * 2009-01-29 2017-09-15 杜比实验室特许公司 视频编码方法、视频信号解码方法及视频装置
WO2010117315A1 (en) * 2009-04-09 2010-10-14 Telefonaktiebolaget Lm Ericsson (Publ) Media container file management
US8948247B2 (en) * 2009-04-14 2015-02-03 Futurewei Technologies, Inc. System and method for processing video files
CN102450010A (zh) * 2009-04-20 2012-05-09 杜比实验室特许公司 定向内插和数据后处理
US8773505B2 (en) 2009-04-27 2014-07-08 Lg Electronics Inc. Broadcast receiver and 3D video data processing method thereof
KR101118091B1 (ko) * 2009-06-04 2012-03-09 주식회사 코아로직 비디오 데이터 처리 장치 및 방법
KR101645058B1 (ko) * 2009-06-09 2016-08-02 톰슨 라이센싱 디코딩 장치, 디코딩 방법, 및 편집 장치
ES2715283T3 (es) * 2009-06-11 2019-06-03 Thomson Licensing Método de ahorro de energía en un punto de acceso
CN102473240B (zh) * 2009-08-03 2015-11-25 摩托罗拉移动有限责任公司 编码视频内容的方法
CA2777016C (en) 2009-10-13 2015-10-20 Lg Electronics Inc. Broadcast receiver and 3d video data processing method thereof
CN102123280B (zh) * 2010-01-11 2016-03-02 联发科技股份有限公司 解码方法及解码装置
US8570361B2 (en) * 2010-01-11 2013-10-29 Mediatek Inc. Decoding method and decoding apparatus for using parallel processing scheme to decode pictures in different bitstreams after required decoded data derived from decoding preceding picture(s) is ready
KR101457396B1 (ko) 2010-01-14 2014-11-03 삼성전자주식회사 디블로킹 필터링을 이용한 비디오 부호화 방법과 그 장치, 및 디블로킹 필터링을 이용한 비디오 복호화 방법 및 그 장치
GB2477527B (en) 2010-02-04 2015-12-23 Advanced Risc Mach Ltd Parallel parsing in a video decoder
WO2011098664A1 (en) * 2010-02-11 2011-08-18 Nokia Corporation Method and apparatus for providing multi-threaded video decoding
US8971413B2 (en) * 2010-05-24 2015-03-03 Intel Corporation Techniques for storing and retrieving pixel data
KR101698797B1 (ko) 2010-07-27 2017-01-23 삼성전자주식회사 영상 데이터를 분할하여 부호화 및 복호화를 병렬 처리하는 장치 및 상기 장치의 동작 방법
US9635342B2 (en) 2010-10-05 2017-04-25 Telefonaktiebolaget Lm Ericsson (Publ) Multi-view encoding and decoding technique based on single-view video codecs
US8520080B2 (en) 2011-01-31 2013-08-27 Hand Held Products, Inc. Apparatus, system, and method of use of imaging assembly on mobile terminal
CN102098516B (zh) * 2011-03-07 2012-10-31 上海大学 多视点视频解码端去块滤波方法
JP5729817B2 (ja) * 2011-06-29 2015-06-03 日本電信電話株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム及び動画像復号プログラム
US10237565B2 (en) * 2011-08-01 2019-03-19 Qualcomm Incorporated Coding parameter sets for various dimensions in video coding
EP2751998A4 (en) * 2011-08-30 2015-08-12 Intel Corp CODING SCHEMES FOR MORE VIEWED VIDEOS
WO2013039348A1 (ko) * 2011-09-16 2013-03-21 엘지전자 주식회사 영상 정보 시그널링 방법 및 이를 이용한 비디오 디코딩 방법
CN108040255A (zh) * 2011-11-21 2018-05-15 松下知识产权经营株式会社 图像处理装置以及图像处理方法
JP5889436B2 (ja) * 2011-12-30 2016-03-22 インテル・コーポレーション 電子コードブック暗号化におけるパターン認識の防止
JP6046923B2 (ja) * 2012-06-07 2016-12-21 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム
KR20140030473A (ko) * 2012-08-30 2014-03-12 삼성전자주식회사 멀티 뷰 영상 처리 방법 및 이를 수행하는 장치
ES2716579T3 (es) * 2012-09-26 2019-06-13 Velos Media Int Ltd Procedimiento de decodificación de imágenes y aparato de decodificación de imágenes
RU2645284C2 (ru) * 2012-09-28 2018-02-19 Сони Корпорейшн Устройство для обработки изображений и способ
WO2014084109A1 (ja) * 2012-11-30 2014-06-05 ソニー株式会社 画像処理装置および方法
US10021414B2 (en) 2013-01-04 2018-07-10 Qualcomm Incorporated Bitstream constraints and motion vector restriction for inter-view or inter-layer reference pictures
WO2014106651A1 (en) 2013-01-04 2014-07-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Efficient scalable coding concept
WO2014163464A1 (ko) * 2013-04-05 2014-10-09 삼성전자 주식회사 현재 영상이 참조 영상이 되는지 여부를 결정하는 방법과 그 장치
CN105308968B (zh) * 2013-04-08 2019-06-14 Ge视频压缩有限责任公司 允许有效多视图/层编码的编码概念
CN108650514A (zh) * 2013-07-14 2018-10-12 夏普株式会社 瓦片对齐信令和一致性约束
AU2014202682A1 (en) * 2014-05-16 2015-12-03 Canon Kabushiki Kaisha Method, apparatus and system for copying a block of video samples
KR102273670B1 (ko) * 2014-11-28 2021-07-05 삼성전자주식회사 움직임 보상 정보를 수정하는 데이터 처리 시스템과 데이터 처리 방법
US20160173897A1 (en) * 2014-12-10 2016-06-16 Haihua Wu High Parallelism Dependency Pattern for GPU Based Deblock
CN107439015B (zh) * 2015-02-05 2020-08-14 弗劳恩霍夫应用研究促进协会 支持残差预测的多视图视频编解码器
WO2018225593A1 (ja) * 2017-06-05 2018-12-13 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法および復号方法
US10848735B2 (en) * 2017-06-30 2020-11-24 Sharp Kabushiki Kaisha Systems and methods for signaling information associated with constituent pictures in virtual reality applications
US11736713B2 (en) * 2018-11-14 2023-08-22 Tencent America LLC Constraint on affine model motion vector
KR102625314B1 (ko) * 2018-11-26 2024-01-15 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 타일 독립성 제약을 이용하는 인터 예측 개념
EP3745706B1 (en) 2019-05-29 2021-06-30 Axis AB System and method for video processing with picture stabilization and predictive compression
AU2020356300A1 (en) 2019-09-24 2022-04-14 Huawei Technologies Co., Ltd. Layer based parameter set NAL unit constraints
WO2021065630A1 (ja) * 2019-09-30 2021-04-08 株式会社ソニー・インタラクティブエンタテインメント 画像データ転送装置および画像データ転送方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6055012A (en) * 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
WO2005014780A2 (en) * 2003-05-30 2005-02-17 Agensys, Inc. Prostate stem cell antigen (psca) variants and subsequences thereof
EP1578134A1 (en) * 2004-03-18 2005-09-21 STMicroelectronics S.r.l. Methods and systems for encoding/decoding signals, and computer program product therefor
US20050207497A1 (en) * 2004-03-18 2005-09-22 Stmicroelectronics S.R.I. Encoding/decoding methods and systems, computer program products therefor
TW200629914A (en) * 2005-01-07 2006-08-16 Nippon Telegraph & Telephone Video encoding method and apparatus, video decoding method and apparatus, programs therefor, and storage media for storing the programs

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5612735A (en) * 1995-05-26 1997-03-18 Luncent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing two disparity estimates
CN100481963C (zh) * 2005-06-24 2009-04-22 清华大学 多视点系统中视频图像的视差计算方法
CN100463527C (zh) * 2005-10-18 2009-02-18 宁波大学 一种多视点视频图像视差估计的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6055012A (en) * 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
WO2005014780A2 (en) * 2003-05-30 2005-02-17 Agensys, Inc. Prostate stem cell antigen (psca) variants and subsequences thereof
EP1578134A1 (en) * 2004-03-18 2005-09-21 STMicroelectronics S.r.l. Methods and systems for encoding/decoding signals, and computer program product therefor
US20050207497A1 (en) * 2004-03-18 2005-09-22 Stmicroelectronics S.R.I. Encoding/decoding methods and systems, computer program products therefor
TW200629914A (en) * 2005-01-07 2006-08-16 Nippon Telegraph & Telephone Video encoding method and apparatus, video decoding method and apparatus, programs therefor, and storage media for storing the programs

Also Published As

Publication number Publication date
WO2008047300A2 (en) 2008-04-24
CN101627634B (zh) 2014-01-01
MX2009003968A (es) 2009-06-01
EP2080379A2 (en) 2009-07-22
CA2673494C (en) 2014-07-08
KR20090079952A (ko) 2009-07-22
KR101101965B1 (ko) 2012-01-02
CN101627634A (zh) 2010-01-13
US8594203B2 (en) 2013-11-26
TW200833118A (en) 2008-08-01
WO2008047300A3 (en) 2008-07-03
CA2673494A1 (en) 2008-04-24
EP2080379B1 (en) 2018-08-22
US20080089412A1 (en) 2008-04-17
EP2080379A4 (en) 2012-10-31

Similar Documents

Publication Publication Date Title
TWI449431B (zh) 用以對多視界視訊編碼利用可平行解碼切片之方法、裝置及電腦程式產品
JP6825155B2 (ja) ビデオ符号化及び復号化におけるタイリング
CN110870302B (zh) 用于全向视频的装置、方法和计算机程序
TWI781972B (zh) 具有用於視頻寫碼之樣本存取之線性模型預測模式
KR102567284B1 (ko) 비디오 코딩 및 디코딩을 위한 장치, 방법 및 컴퓨터 프로그램
CN107409209B (zh) 用于线性模型预测模式的降取样处理
TWI520575B (zh) 用於視訊寫碼之訊框封裝立體三維（３ｄ）視訊資料之指示
EP3422724A1 (en) An apparatus, a method and a computer program for omnidirectional video
KR101713005B1 (ko) 비디오 코딩 및 디코딩을 위한 장치, 방법 및 컴퓨터 프로그램
JP4903877B2 (ja) ビデオの符号化においてピクチャ出力インジケータを提供するためのシステムおよび方法
US9225961B2 (en) Frame packing for asymmetric stereo video
EP3162057B1 (en) Multi-layer video coding
KR101724222B1 (ko) 멀티-레이어 비디오 코딩을 위한 다중-해상도 디코딩된 픽처 버퍼 관리
TW201515440A (zh) 多層內容脈絡中之影像塊及波前處理
KR20140043483A (ko) 내부 뷰 모션 예측 (ivmp) 모드를 지원하는 mvc 기반 3dvc 코덱
TW201424389A (zh) 用於視訊寫碼之參數集合的指示及啓用
EP2619986A1 (en) Coding stereo video data
KR102420153B1 (ko) 비디오 인코딩 방법, 비디오 디코딩 방법 및 이를 이용하는 장치
US20130127987A1 (en) Signaling depth ranges for three-dimensional video coding
CN118118693A (zh) 用于对视频数据进行解码或编码的方法和设备
TW202312739A (zh) 綠色中繼資料訊號傳遞
KR20240135810A (ko) 교차-성분 파라미터 결정을 위한 장치, 방법 및 컴퓨터 프로그램
Lee et al. Interlaced MVD format for free viewpoint video