TWI693821B - 用於線性模型預測模式之降低取樣處理 - Google Patents

用於線性模型預測模式之降低取樣處理 Download PDF

Info

Publication number
TWI693821B
TWI693821B TW105108629A TW105108629A TWI693821B TW I693821 B TWI693821 B TW I693821B TW 105108629 A TW105108629 A TW 105108629A TW 105108629 A TW105108629 A TW 105108629A TW I693821 B TWI693821 B TW I693821B
Authority
TW
Taiwan
Prior art keywords
block
lightness
chroma
filter
samples
Prior art date
Application number
TW105108629A
Other languages
English (en)
Other versions
TW201639365A (zh
Inventor
章立
陳建樂
馬塔 卡茲維克茲
Original Assignee
美商高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商高通公司 filed Critical 美商高通公司
Publication of TW201639365A publication Critical patent/TW201639365A/zh
Application granted granted Critical
Publication of TWI693821B publication Critical patent/TWI693821B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167Position within a video image, e.g. region of interest [ROI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Abstract

本發明描述關於線性模型(LM)預測解碼或編碼之實例技術。一視訊解碼器或視訊編碼器自一組濾波器判定應用哪一濾波器以降低取樣一明度區塊之樣本,且基於一色度區塊之特性產生該對應色度區塊之一預測性區塊。

Description

用於線性模型預測模式之降低取樣處理
本申請案主張2015年3月20日申請之美國臨時專利申請案62/136,344之權益,該申請案之全部內容以引用之方式併入本文中。
本發明係關於視訊編碼及解碼。
數位視訊能力可併入至廣泛範圍之器件中,包括數位電視、數位直播系統、無線廣播系統、個人數位助理(PDA)、膝上型或桌上型電腦、平板電腦、電子書閱讀器、數位攝影機、數位記錄器件、數位媒體播放器、視訊遊戲器件、視訊遊戲控制台、蜂巢式或衛星無線電電話(所謂的「智慧型電話」)、視訊電話會議器件、視訊串流器件及其類似者。數位視訊器件實施視訊壓縮技術,諸如由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4進階視訊寫碼(AVC)第10部分、ITU-T H.265、高效率視訊寫碼(HEVC)所定義的標準及此等標準之擴展中所描述的彼等視訊壓縮技術。視訊器件可藉由實施此等視訊壓縮技術而更有效地傳輸、接收、編碼、解碼及/或儲存數位視訊資訊。
視訊壓縮技術執行空間(圖像內)預測及/或時間(圖像間)預測以減少或移除視訊序列中固有之冗餘。對於基於區塊之視訊寫碼,可將視 訊圖塊(亦即,視訊圖框或視訊圖框之一部分)分割成視訊區塊。圖像之經框內寫碼(I)圖塊中之視訊區塊係使用關於同一圖像中之相鄰區塊中之參考樣本的空間預測來進行編碼。圖像之經框間寫碼(P或B)圖塊中之視訊區塊可使用關於同一圖像中之相鄰區塊中之參考樣本的空間預測或關於其他參考圖像中之參考樣本的時間預測。空間或時間預測產生用於待寫碼區塊的預測性區塊。殘餘資料表示待寫碼之原始區塊與預測性區塊之間的像素差。經框間寫碼區塊係根據指向形成預測性區塊之參考樣本之區塊的運動向量來編碼,且殘餘資料指示經寫碼區塊與預測性區塊之間的差。根據框內寫碼模式及殘餘資料來編碼經框內寫碼區塊。為進一步壓縮,可將殘餘資料自像素域變換至變換域,從而產生可接著進行量化之殘餘係數。
本發明描述關於線性模型(LM)預測解碼及編碼之技術。在LM預測中,當色彩格式並非4:4:4(亦即,明度及色度分量具有不同剖析度)時,藉由基於濾波器降低取樣對應明度區塊並將下文描述之α及β參數應用於經降低經取樣之明度區塊來判定色度區塊之預測性區塊。該等技術判定待應用於降低取樣明度區塊之濾波器。舉例而言,視訊解碼器或視訊編碼器可動態地自一組濾波器判定將應用哪一濾波器,而非存在在所有情況下應用於降低取樣明度區塊之一個濾波器。可基於(例如)色度區塊之特性(諸如色度區塊相對於界限之位置)判定將應用哪一濾波器。在一些實例中,本文所述之技術在自明度區塊預測色度且需要降低取樣明度區塊的情況下亦可應用於其他寫碼方法。
在一項實例中,本發明描述線性模型(LM)預測解碼視訊資料之實例方法,該方法包含:判定對應於正經解碼之視訊資料之色度區塊的視訊資料之明度區塊;基於色度區塊之特性自一組濾波器判定應用於明度區塊之濾波器;基於所判定之濾波器降低取樣該明度區塊;基 於經降低取樣之明度區塊判定預測性區塊;及基於預測性區塊及殘餘區塊重建構色度區塊。
在一項實例中,本發明描述線性模型(LM)預測編碼視訊資料之實例方法,該方法包含:判定對應於正經編碼之視訊資料之色度區塊的視訊資料之明度區塊;基於該色度區塊之特性自一組濾波器判定應用於該明度區塊之濾波器;基於所判定之濾波器降低取樣明度區塊;基於經降低取樣之明度區塊判定預測性區塊;及基於色度區塊及預測性區塊產生殘餘區塊。
在一項實例中,本發明描述用於線性模型(LM)預測解碼視訊資料之實例器件,該器件包含經組態以儲存視訊資料之視訊資料記憶體及包含積體電路之視訊解碼器。視訊解碼器經組態以進行以下操作:判定儲存於視訊資料記憶體中對應於正經解碼之視訊資料之色度區塊的視訊資料之明度區塊;基於該色度區塊之特性自一組濾波器判定應用於明度區塊之濾波器;基於所判定之濾波器降低取樣明度區塊;基於經降低取樣之明度區塊判定預測性區塊;及基於預測性區塊及殘餘區塊重建構色度區塊。
在一項實例中,本發明描述用於線性模型(LM)預測編碼視訊資料之實例器件,該器件包含經組態以儲存視訊資料之視訊資料記憶體及包含積體電路之視訊編碼器。視訊編碼器經組態以進行以下操作:判定儲存於視訊資料記憶體中對應於正經編碼之視訊資料之色度區塊的視訊資料之明度區塊;基於該色度區塊之特性自一組濾波器判定應用於明度區塊之濾波器;基於所判定之濾波器降低取樣明度區塊;基於經降低取樣之明度區塊判定預測性區塊;及基於色度區塊及預測性區塊產生殘餘區塊。
在一項實例中,本發明描述用於線性模型(LM)預測解碼視訊資料之實例器件,該器件包含:用於判定對應於正經解碼之視訊資料之 色度區塊的視訊資料之明度區塊的構件;用於基於色度區塊之特性自一組濾波器判定應用於該明度區塊之濾波器的構件;用於基於所判定之濾波器降低取樣該明度區塊的構件;用於基於經降低取樣之明度區塊判定預測性區塊的構件;及用於基於預測性區塊及殘餘區塊重建構色度區塊的構件。
在一項實例中,本發明描述用於線性模型(LM)預測編碼視訊資料之實例器件,該器件包含:用於判定對應於正經編碼之視訊資料之色度區塊的視訊資料之明度區塊的構件;用於基於該色度區塊之特性自一組濾波器判定應用於該明度區塊之濾波器的構件;用於基於所判定之濾波器降低取樣該明度區塊的構件;用於基於經降低取樣之明度區塊判定預測性區塊的構件;及用於基於色度區塊及預測性區塊產生殘餘區塊的構件。
在一項實例中,本發明描述儲存指令之實例電腦可讀儲存媒體,該等指令在經執行時引起用於線性模型(LM)預測解碼視訊資料之器件的一或多個處理器進行以下操作:判定對應於正經解碼之視訊資料之色度區塊的視訊資料之明度區塊;基於色度區塊之特性自一組濾波器判定應用於該明度區塊之濾波器;基於所判定之濾波器降低取樣該明度區塊;基於經降低取樣之明度區塊判定預測性區塊;及基於預測性區塊及殘餘區塊重建構色度區塊。
在一項實例中,本發明描述儲存指令之實例電腦可讀儲存媒體,該等指令在經執行時引起用於線性模型(LM)預測編碼視訊資料之器件的一或多個處理器進行以下操作:判定對應於正經編碼之視訊資料之色度區塊的視訊資料之明度區塊;基於該色度區塊之特性自一組濾波器判定應用於該明度區塊之濾波器;基於所判定之濾波器降低取樣該明度區塊;基於經降低取樣之明度區塊判定預測性區塊;及基於色度區塊及預測性區塊產生殘餘區塊。
在隨附圖式及以下描述中闡述本發明之一或多個實例的細節。其他特徵、目標及優勢將自描述、圖式及申請專利範圍顯而易見。
10‧‧‧視訊寫碼系統
12‧‧‧源器件
14‧‧‧目的地器件
16‧‧‧頻道/電腦可讀媒體
18‧‧‧視訊源
20‧‧‧視訊編碼器
22‧‧‧輸出介面
28‧‧‧輸入介面
30‧‧‧視訊解碼器
32‧‧‧顯示器件
100‧‧‧預測處理單元
101‧‧‧視訊資料記憶體
102‧‧‧殘餘產生單元
104‧‧‧變換處理單元
106‧‧‧量化單元
108‧‧‧逆量化單元
110‧‧‧逆變換處理單元
112‧‧‧重建構單元
114‧‧‧濾波器單元
116‧‧‧經解碼圖像緩衝器
118‧‧‧熵編碼單元
120‧‧‧框間預測處理單元
121‧‧‧框間預測單元
122‧‧‧基於線性模型之編碼單元
126‧‧‧框內預測處理單元
150‧‧‧熵解碼單元
151‧‧‧視訊資料記憶體
152‧‧‧預測處理單元
154‧‧‧逆量化單元
156‧‧‧逆變換處理單元
158‧‧‧重建構單元
160‧‧‧濾波器單元
162‧‧‧經解碼圖像緩衝器
164‧‧‧運動補償單元
165‧‧‧基於線性模型之解碼單元
166‧‧‧框內預測處理單元
200‧‧‧區塊
202‧‧‧區塊
204‧‧‧區塊
206‧‧‧區塊
208‧‧‧區塊
210‧‧‧區塊
212‧‧‧區塊
214‧‧‧區塊
216‧‧‧區塊
218‧‧‧區塊
圖1為繪示可利用本發明中所描述之技術的實例視訊寫碼系統之方塊圖。
圖2為繪示可實施本發明中所描述之技術的實例視訊編碼器之方塊圖。
圖3為繪示可實施本發明中所描述之技術的實例視訊解碼器之方塊圖。
圖4為繪示明度樣本及色度樣本之標稱垂直及水平相對位置的概念圖。
圖5為繪示自其導出用於縮放經降低取樣之重建構明度區塊之縮放參數的實例位置之概念圖。
圖6為繪示降低取樣明度區塊之樣本以產生預測性區塊之明度位置及色度位置之實例的概念圖。
圖7為繪示降低取樣明度區塊之樣本以產生預測性區塊之明度位置及色度位置之另一實例的概念圖。
圖8為繪示線性模型(LM)預測編碼視訊資料之一項實例技術的流程圖。
圖9為繪示線性模型(LM)預測解碼視訊資料之一項實例技術的流程圖。
本發明描述用於視訊寫碼及視訊資料壓縮之技術。特定言之,本發明描述用於線性模型(LM)預測視訊寫碼模式之技術。LM預測模式中之視訊寫碼傾向於減少視訊資料之明度樣本與色度樣本之間的框間分量冗餘。在LM預測視訊寫碼模式中且當取樣並非4:4:4時,自經 縮放、降低取樣、重建構之對應明度區塊預測色度區塊(亦即,此經縮放、降低取樣、重建構之對應明度區塊形成用於預測色度區塊之預測性區塊)。
在一些實例中,經重建構之對應明度區塊的降低取樣包括濾波。本發明描述執行此濾波之實例方式。本發明中描述之技術亦可適用於LM預測模式中使用之明度樣本位於不同圖像塊中之情況。本發明中描述之技術可用於進階視訊編解碼器之上下文,諸如,ITU-T H.265高效率視訊寫碼(HEVC)視訊寫碼標準或下一代或後代視訊寫碼標準之擴展。
圖1為繪示可利用本發明之技術的實例視訊寫碼系統10之方塊圖。如本文所使用,術語「視訊寫碼器」一般係指視訊編碼器及視訊解碼器兩者。在本發明中,術語「視訊寫碼」或「寫碼」一般可指視訊編碼或視訊解碼。根據本發明中描述之各種實例,視訊寫碼系統10之視訊編碼器20及視訊解碼器30表示可經組態以執行用於基於線性模型(LM)預測之視訊寫碼的技術之器件之實例。舉例而言,視訊編碼器20及視訊解碼器30可經組態以利用對應明度區塊之經縮放、降低取樣、重建構之明度樣本寫碼色度區塊,諸如在如本發明中所描述之取樣並非4:4:4(例如,色度相對於明度經次取樣)之實例中。
如圖1中所示,視訊寫碼系統10包括源器件12及目的地器件14。源器件12產生經編碼視訊資料。因此,源器件12可被稱作視訊編碼器件或視訊編碼裝置。目的地器件14可解碼由源器件12產生之經編碼視訊資料。因此,目的地器件14可被稱作視訊解碼器件或視訊解碼裝置。源器件12及目的地器件14可為視訊寫碼器件或視訊寫碼裝置之實例。
源器件12及目的地器件14可包含廣泛範圍之器件,包括桌上型電腦、行動計算器件、筆記型(例如,膝上型)電腦、平板電腦、機上 盒、電話手持機(諸如所謂的「智慧型」電話)、電視、攝影機、顯示器件、數位媒體播放器、視訊遊戲控制台、車載電腦或類似者。
目的地器件14可經由頻道16自源器件12接收經編碼視訊資料。頻道16可包含能夠將經編碼視訊資料自源器件12移動至目的地器件14之一或多個媒體或器件。在一項實例中,頻道16可包含使得源器件12能夠即時將經編碼視訊資料直接傳輸至目的地器件14的一或多個通信媒體。在此實例中,源器件12可根據諸如無線通信協定之通信標準來調變經編碼視訊資料,且可將經調變視訊資料傳輸至目的地器件14。一或多個通信媒體可包括無線及/或有線通信媒體,諸如射頻(RF)頻譜或一或多個實體傳輸線。一或多個通信媒體可形成基於封包之網路(諸如區域網路、廣域網路或全球網路(例如,網際網路))的部分。一或多個通信媒體可包括路由器、交換器、基地台,或促進自源器件12至目的地器件14之通信的其他設備。
在另一實例中,頻道16可包括儲存由源器件12產生之經編碼視訊資料的儲存媒體。在此實例中,目的地器件14可(例如)經由磁碟存取或卡存取而存取儲存媒體。儲存媒體可包括多種本端存取之資料儲存媒體,諸如藍光光碟、DVD、CD-ROM、快閃記憶體,或用於儲存經編碼視訊資料的其他合適數位儲存媒體。
在另一實例中,頻道16可包括儲存由源器件12產生之經編碼視訊資料的檔案伺服器或另一中間儲存器件。在此實例中,目的地器件14可經由串流或下載而存取儲存於檔案伺服器或其他中間儲存器件處之經編碼視訊資料。檔案伺服器可為能夠儲存經編碼視訊資料且將經編碼視訊資料傳輸至目的地器件14之類型的伺服器。實例檔案伺服器包括網頁伺服器(例如,用於網站)、檔案傳送協定(FTP)伺服器、網路附接儲存(NAS)器件及本端磁碟機。
目的地器件14可經由諸如網際網路連接之標準資料連接存取經 編碼視訊資料。資料連接之實例類型可包括適用於存取儲存於檔案伺服器上之經編碼視訊資料的無線頻道(例如,Wi-Fi連接)、有線連接(例如,DSL、電纜數據機等等)或兩者的組合。經編碼視訊資料自檔案伺服器之傳輸可為串流傳輸、下載傳輸或兩者之組合。
本發明之技術不限於無線應用或設定。該等技術可應用於支援多種多媒體應用之視訊寫碼,諸如空中電視廣播、有線電視傳輸、衛星電視傳輸、(例如)經由網際網路之串流視訊傳輸、供儲存於資料儲存媒體上之視訊資料的編碼、儲存於資料儲存媒體上之視訊資料的解碼或其他應用。在一些實例中,視訊寫碼系統10可經組態以支援單向或雙向視訊傳輸以支援諸如視訊串流、視訊播放、視訊廣播及/或視訊電話之應用。
圖1中所繪示之視訊寫碼系統10僅為實例,且本發明之技術可適用於未必包括編碼器件與解碼器件之間的任何資料通信的視訊寫碼設定(例如,視訊編碼或視訊解碼)。在一些實例中,自經由網路或類似者而串流傳輸之本端記憶體擷取資料。視訊編碼器件可編碼資料且將資料儲存至記憶體,及/或視訊解碼器件可自記憶體擷取資料並解碼資料。在許多實例中,由彼此並不通信而是僅將資料編碼至記憶體及/或自記憶體擷取資料並解碼資料之器件來執行編碼及解碼。
在圖1之實例中,源器件12包括視訊源18、視訊編碼器20及輸出介面22。在一些實例中,輸出介面22可包括調變器/解調器(數據機)及/或傳輸器。視訊源18可包括視訊捕獲器件(例如,視訊攝影機)、含有先前所捕獲之視訊資料的視訊存檔、用以自視訊內容提供者接收視訊資料之視訊饋入介面,及/或用於產生視訊資料之電腦圖形系統,或視訊資料之此等源的組合。
視訊編碼器20可編碼來自視訊源18之視訊資料。在一些實例中,源器件12經由輸出介面22將經編碼視訊資料直接傳輸至目的地器 件14。在其他實例中,經編碼視訊資料亦可儲存於儲存媒體或檔案伺服器上,以供目的地器件14稍後存取以用於解碼及/或播放。
在圖1之實例中,目的地器件14包括輸入介面28、視訊解碼器30及顯示器件32。在一些實例中,輸入介面28包括接收器及/或數據機。輸入介面28可經由頻道16接收經編碼視訊資料。顯示器件32可與目的地器件14整合或可在該目的地器件外部。一般而言,顯示器件32顯示經解碼視訊資料。顯示器件32可包含各種顯示器件,諸如液晶顯示器(LCD)、電漿顯示器、有機發光二極體(OLED)顯示器或另一類型之顯示器件。
視訊編碼器20及視訊解碼器30各自可實施為各種合適電路系統中之任一者,諸如一或多個微處理器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)、離散邏輯、硬體或其任何組合。若部分地以軟體來實施該等技術,則器件可將用於軟體之指令儲存於合適的非暫時性電腦可讀儲存媒體中,且可在硬體中使用一或多個處理器來執行該等指令以執行本發明之技術。可將前述各者(包括硬體、軟體、硬體與軟體之組合等)中之任一者視為一或多個處理器。視訊編碼器20及視訊解碼器30中之每一者可包括於一或多個編碼器或解碼器中,編碼器或解碼器中之任一者可整合為各別器件中的組合式編碼器/解碼器(編解碼器)之部分。
本發明通常可指代視訊編碼器20將某些資訊「傳信」或「傳輸」至諸如視訊解碼器30之另一器件。術語「傳信」或「傳輸」通常可指代用於解碼經壓縮視訊資料之語法元素及/或其他資料的通信。此通信可即時地或近即時地發生。替代地,此通信可歷時時間跨度而發生,諸如此通信可在編碼時以經編碼之位元串流將語法元素儲存至電腦可讀儲存媒體,接著可在該等語法元素儲存至此媒體之後藉由解碼器件在任何時間擷取時發生。
在一些實例中,視訊編碼器20及視訊解碼器30根據視訊壓縮標準操作。實例視訊寫碼標準包括ITU-T H.261、ISO/IEC MPEG-1 Visual、ITU-T H.262或ISO/IEC MPEG-2 Visual、ITU-T H.263、ISO/IEC MPEG-4 Visual及ITU-T H.264(亦被稱作ISO/IEC MPEG-4 AVC),包括其可調式視訊寫碼(SVC)及多視圖視訊寫碼(MVC)擴展。
另外,ITU-T視訊寫碼專家組(VCEG)及ISO/IEC運動圖像專家組(MPEG)的視訊寫碼聯合合作小組(JCT-VC)近來已開發出新的視訊寫碼標準,亦即高效率視訊寫碼(HEVC)。最新HEVC草案規格(且在下文中被稱作HEVC WD)為「High Efficiency Video Coding(HEVC)Defect Report」(Wang等人,ITU-T SG 16 WP 3及ISO/IEC JTC 1/SC 29/WG 11之視訊寫碼聯合合作小組(JCT-VC)第14次會議:奧地利,維也納,2013年7月25日至8月2日),且可自http://phenix.int-evry.fr/jct/doc_end_user/documents/14_Vienna/wg11/JCTVC-N1003-v1.zip獲得。HEVC及其擴展(包括格式範圍(RExt)、可調性(SHVC)及多視圖(MV-HEVC)擴展)之規格為「Draft high efficiency video coding(HEVC)version 2,combined format range extensions(RExt),scalability(SHVC),and multi-view(MV-HEVC)extentions」(Boyce等人,ITU-T SG 16 WP 3及ISO/IEC JTC 1/SC 29/WG 11之視訊寫碼聯合合作小組(JCT-VC)第14次會議:奧地利,維也納,2014年6月30日至7月9日),且可自http://phenix.int-evry.fr/jct/doc_end_user/documents/18_Sapporo/wg11/JCTVC-R1013-v6.zip獲得。
可基於色彩空間及色彩格式執行視訊寫碼。舉例而言,色彩視訊在多個色彩空間用於有效表示色彩的多媒體系統中起主要作用。色彩空間使用多個分量藉由數字值指定色彩。常用色彩空間為RGB色彩空間,其中將色彩表示為三原色分量值(亦即,紅色、綠色及藍色)的組合。對於色彩視訊壓縮,已廣泛地使用YCbCr色彩空間,如 「Colour space conversions」(A.Ford及A.Roberts,倫敦,威斯敏斯特大學,Tech.Rep.,1998年8月)中所描述。
可容易地經由線性變換自RGB色彩空間轉換YCbCr,且不同分量之間的冗餘(亦即跨分量冗餘)在YCbCr色彩空間中顯著減少。YCbCr之一個優勢為與黑色及白色TV具有回溯相容性,此係由於Y信號傳達明度資訊。另外,色度頻寬可藉由在4:2:0色度取樣格式中次取樣Cb及Cr分量而減少,其中主觀影響比RGB中之次取樣顯著更小。由於此等優勢,YCbCr已成為視訊壓縮中之主要色彩空間。亦存在用於視訊壓縮之其他色彩空間,諸如YCoCg。在本發明中,不管所使用的實際色彩空間為何,Y、Cb、Cr在視訊壓縮機制中用於表示三個色彩分量。
在4:2:0取樣中,兩個色度陣列中之每一者具有明度陣列之一半高度及一半寬度。圖4中展示圖像中之明度樣本及色度樣本的標稱垂直及水平相對位置。
在HEVC及其他視訊寫碼標準中,視訊序列通常包括一系列圖像。圖像亦可被稱作「圖框」。圖像可包括三個樣本陣列,標示為SL、SCb及SCr。SL為明度樣本之二維陣列(亦即,區塊)。SCb為Cb色度樣本之二維陣列。SCr為Cr色度樣本之二維陣列。色度樣本在本文中亦可被稱作「色度(chroma)」樣本。在其他情況下,圖像可為單色的且可僅包括明度樣本陣列。
為產生圖像之經編碼表示,視訊編碼器20可產生寫碼樹型單元(CTU)之集合。CTU中之每一者可為明度樣本之寫碼樹型區塊、色度樣本之兩個對應寫碼樹型區塊,及用以對寫碼樹型區塊之樣本進行寫碼的語法結構。寫碼樹型區塊可為樣本之N×N區塊。CTU亦可被稱作「樹型區塊」或「最大寫碼單元」(LCU)。HEVC之CTU可廣泛地類似於諸如H.264/AVC之其他標準的巨集區塊。然而,CTU未必限於特 定大小,且可包括一或多個寫碼單元(CU)。圖塊可包括在光柵掃描中連續定序之整數數目個CTU。
為了產生經寫碼CTU,視訊編碼器20可對CTU之寫碼樹型區塊遞歸地執行四分樹分割以將該寫碼樹型區塊劃分成寫碼區塊。寫碼區塊為樣本之N×N區塊。CU可為圖像的明度樣本之寫碼區塊及色度樣本之兩個對應寫碼區塊,該圖像具有明度樣本陣列、Cb樣本陣列及Cr樣本陣列,及用以對寫碼區塊之樣本進行寫碼的語法結構。視訊編碼器20可將CU之寫碼區塊分割成一或多個預測區塊。預測區塊可為其上應用相同預測之樣本的矩形(亦即,正方形或非正方形)區塊。CU之預測單元(PU)可為圖像的明度樣本之預測區塊、色度樣本之兩個對應預測區塊及用於對預測區塊樣本進行預測之語法結構。視訊編碼器20可產生CU之每一PU的明度、Cb及Cr預測區塊之預測性明度區塊、Cb區塊及Cr區塊。
視訊編碼器20可使用框內預測、框間預測或線性模型(LM)預測(如少數實例)以產生(例如,判定)PU之預測性區塊。若視訊編碼器20使用框內預測產生PU之預測性區塊,則視訊編碼器20可基於與PU相關聯之圖像的經解碼樣本產生PU之預測性區塊。
若視訊編碼器20使用框間預測來產生(例如,判定)PU之預測性區塊,則視訊編碼器20可基於不同於與PU相關聯之圖像的一或多個圖像之經解碼樣本產生PU之預測性區塊。視訊編碼器20可使用單向預測或雙向預測來產生PU之預測性區塊。當視訊編碼器20使用單向預測來產生PU之預測性區塊時,PU可具有單一運動向量(MV)。當視訊編碼器20使用雙向預測來產生PU之預測性區塊時,PU可具有兩個MV。
在視訊編碼器20產生CU之一或多個PU的預測性明度區塊、Cb區塊及Cr區塊之後,視訊編碼器20可產生CU之明度殘餘區塊。CU的明 度殘餘區塊中之每一樣本指示CU的預測性明度區塊中之一者中的明度樣本與CU之原始明度寫碼區塊中的對應樣本之間的差。另外,視訊編碼器20可產生CU之Cb殘餘區塊。CU的Cb殘餘區塊中之每一樣本可指示CU的預測性Cb區塊中之中一者中的Cb樣本與CU之原始Cb寫碼區塊中的對應樣本之間的差。視訊編碼器20亦可產生CU之Cr殘餘區塊。CU之Cr殘餘區塊中之每一樣本可指示CU之預測性Cr區塊中之一者中的Cr樣本與CU之原始Cr寫碼區塊中之對應樣本之間的差。
在一些實例中,對於色度區塊,視訊編碼器20可基於重建構之對應明度區塊判定用於LM預測模式之預測性區塊,而非判定用於框內預測或框間預測之預測性區塊。視訊解碼器30可以類似方式基於重建構之對應明度區塊判定預測性區塊。對應明度區塊指代為自其判定當前色度區塊之單元(例如,寫碼單元或預測單元)之部分的明度區塊。視訊編碼器20可判定色度區塊與自經重建構之對應明度區塊產生之此預測性區塊之間的殘餘。
此外,視訊編碼器20可使用四分樹分割將CU之明度、Cb及Cr殘餘區塊分解成一或多個明度、Cb及Cr變換區塊。變換區塊可為其上應用相同變換的樣本之矩形區塊。CU之變換單元(TU)可為明度樣本之變換區塊、色度樣本之兩個對應變換區塊及用於對變換區塊樣本進行變換的語法結構。因此,CU之每一TU可與明度變換區塊、Cb變換區塊及Cr變換區塊相關聯。與TU相關聯之明度變換區塊可為CU之明度殘餘區塊的子區塊。Cb變換區塊可為CU之Cb殘餘區塊的子區塊。Cr變換區塊可為CU之Cr殘餘區塊的子區塊。
視訊編碼器20可將一或多個變換應用於TU之明度變換區塊,以產生TU之明度係數區塊。係數區塊可為變換係數之二維陣列。變換係數可為純量。視訊編碼器20可將一或多個變換應用於TU之Cb變換區塊以產生TU之Cb係數區塊。視訊編碼器20可將一或多個變換應用 於TU之Cr變換區塊以產生TU之Cr係數區塊。
在產生係數區塊(例如,明度係數區塊、Cb係數區塊或Cr係數區塊)之後,視訊編碼器20可量化係數區塊。量化通常係指對變換係數進行量化以可能地減少用以表示變換係數的資料之量,從而提供進一步壓縮的處理程序。在視訊編碼器20量化係數區塊之後,視訊編碼器20可熵編碼指示經量化之變換係數的語法元素。舉例而言,視訊編碼器20可對指示經量化變換係數之語法元素執行上下文自適應性二進位算術寫碼(CABAC)。視訊編碼器20可在位元流中輸出經熵編碼之語法元素。
視訊編碼器20可輸出包括經熵編碼之語法元素的位元串流。位元串流可包括視訊資料之經編碼表示。舉例而言,位元串流可包括形成經寫碼圖像及相關聯資料之表示的位元之序列。位元串流可包含網路抽象層(NAL)單元之序列。NAL單元中之每一者包括NAL單元標頭且囊封原始位元組序列酬載(RBSP)。NAL單元標頭可包括指示NAL單元類型程式碼之語法元素。由NAL單元之NAL單元標頭指定的NAL單元類型程式碼指示NAL單元之類型。RBSP可為含有囊封於NAL單元內的整數數目個位元組的語法結構。在一些情況下,RBSP包括零個位元。
不同類型之NAL單元可囊封不同類型之RBSP。舉例而言,第一類型之NAL單元可囊封序列參數集(SPS)之RBSP,第二類型之NAL單元可囊封圖像參數集(PPS)之RBSP,第三類型之NAL單元可囊封經寫碼圖塊之RBSP,第四類型之NAL單元可囊封SEI之RBSP,等等。囊封視訊寫碼資料之RBSP(與參數集及SEI訊息之RBSP相對)的NAL單元可被稱作視訊寫碼層(VCL)NAL單元。
視訊解碼器30可接收由視訊編碼器20產生之位元串流。另外,視訊解碼器30可剖析位元串流以解碼來自位元串流之語法元素。視訊 解碼器30可至少部分基於自位元串流解碼之語法元素重建構視訊資料之圖像。重建構視訊資料之程序通常可與由視訊編碼器20執行之程序互逆。舉例而言,視訊解碼器30可使用PU之MV判定當前CU之PU的預測性區塊。作為另一實例,針對LM預測模式,視訊解碼器30可基於對應明度區塊之經重建構樣本判定色度區塊之預測性區塊。另外,視訊解碼器30可逆量化與當前CU之TU相關聯的變換係數區塊。視訊解碼器30可對變換係數區塊執行逆變換,以重建構與當前CU之TU相關聯的變換區塊。
視訊解碼器30可藉由將當前CU之PU的預測性區塊之樣本添加至當前CU之TU的變換區塊之對應樣本來重建構當前CU之寫碼區塊。藉由重建構圖像之每一CU的寫碼區塊,視訊解碼器30可重建構圖像。
在一些實例中,視訊編碼器20及視訊解碼器30可經組態以執行基於線性模型(LM)之寫碼。下文為對基於LM之預測寫碼的描述。舉例而言,儘管跨分量冗餘在YCbCr色彩空間中顯著減少,但三個色彩分量之間仍存在相關性。已研究多種方法以藉由進一步減小相關性來改良視訊寫碼效能。
在4:2:0色度視訊寫碼中,在HEVC標準開發期間,已充分研究出一種命名為線性模型(LM)預測模式之方法。參見J.Chen、V.Seregin、W.-J.Han、J.-S.Kim、B.-M.Joen之「CE6.a.4:Chroma intra prediction by reconstructed luma samples」(ITU-T SG16 WP3及ISO/IEC JTC1/SC29/WG11之視訊寫碼聯合合作小組(JCT-VC),JCTVC-E266,第5次會議:日內瓦,2011年3月16日至23日),其可自http://phenix.int-evry.fr/jct/doc_end_user/current_document.php?id=2196獲得,且在下文中被稱作JCTVC-E266。
使用LM預測模式,藉由使用如下線性模型基於相同區塊之重建構明度樣本預測色度樣本: pred c (i,j)=α*rec L (i,j)+β (1)
其中pred c (i,j)表示對區塊中之色度樣本之預測且rec L (i,j)表示同一區塊之經降低取樣的重建構明度樣本。自關於當前區塊之非正式重建構樣本導出參數αβ。若藉由N×N標示色度區塊大小,則i及j兩者皆在範圍[0,N)內。
藉由最小化關於當前區塊之相鄰重建構明度樣本與色度樣本之間的回歸錯誤導出方程式(1)中之參數αβ
Figure 105108629-A0202-12-0016-1
並且如下剖析參數α及β:
Figure 105108629-A0202-12-0016-2
β=(Σy i -α.Σx i )/I (4)
其中x i 為經降低取樣之重建構明度參考樣本,y i 為經重建構之色度參考樣本,且I為參考樣本之量。對於目標N×N色度區塊,當剩餘樣本及上述非正式樣本兩者皆可用時,總涉及樣本數目I等於2N;當僅剩餘樣本或上述非正式樣本可用時,總涉及樣本數目I等於N
圖5為繪示自其導出用於縮放經降低取樣之重建構明度區塊的樣本之縮放參數的實例位置之概念圖。舉例而言,圖5繪示4:2:0取樣之實例,且縮放參數為αβ
一般而言,在應用LM預測模式時,視訊編碼器20及視訊解碼器30可調用以下步驟。視訊編碼器20及視訊解碼器30可降低取樣相鄰明度樣本。視訊編碼器20及視訊解碼器30可導出線性參數(亦即,αβ)(亦稱為縮放參數)。視訊編碼器20及視訊解碼器30可降低取樣當前明度區塊並自經降低取樣之明度區塊及線性參數(亦即,縮放參數)導出預測(例如,預測性區塊)。
可存在降低取樣的多種方式。下文描述可執行降低取樣之實例 方式。
如上文所描述,在JCTVC-E266中,在執行LM預測模式時,需要經降低取樣之當前明度區塊及經降低取樣之相鄰明度區塊。經降低取樣之當前明度區塊用於導出用於色度寫碼之預測區塊,而經降低取樣之相鄰明度區塊用於導出參數(亦即,αβ)。
在4:2:0取樣中,由於色度分量之典型取樣比率為明度分量之取樣比率的一半且在垂直方向上具有0.5樣本相位差,故如下在垂直方向上降低取樣且在水平方向上次取樣當前區塊之重建構明度以匹配色度信號之大小及相位:rec L (i,j)=(Rec LOrig [2i,2j]+Rec LOrig [2i,2j+1])>>1 (5)
其中Rec LOrig[]指示原始重建構明度樣本。
圖6為繪示降低取樣明度區塊之樣本以產生預測性區塊的明度位置及色度位置之實例的概念圖。如圖6中所描繪,色度樣本(由經填充三角形表示)係藉由應用[1,1]濾波器自兩個明度樣本(由兩個經填充圓表示)預測。[1,1]濾波器為二分接頭濾波器之一項實例。換言之,為降低取樣經重建構明度區塊,方程式(5)包括內建的[1,1]2分接頭濾波器,如Re c LOrig [2i,2j]所表示為一個分接頭且Re c LOrig [2i,2j+1]所表示為另一分接頭。在方程式(5)之情況下,濾波器之分接頭表示用於降低取樣之輸入樣本的值,將來自經重建構明度區塊之兩個值加在一起且右移位以產生經降低取樣之明度區塊。因此,作為一項實例,視訊編碼器20或視訊解碼器30可執行方程式(5)之操作以判定經降低取樣之明度區塊。
對於降低取樣相鄰明度區塊,當相鄰樣本在當前明度區塊之上方時,將降低取樣程序定義為:rec L (i,-1)=Rec LOrig [2i,-1] (6)
當相鄰樣本在當前明度區塊之左方時,將降低取樣程序定義 為:rec L (-1,j)=(Rec LOrig [-2,2j]+Rec LOrig [-2,2j+1])>>1 (7)
2分接頭濾波器(亦即,[1,1])可與已用於圖6中所繪示之實例的濾波器相同。因此,作為一項實例,視訊編碼器20或視訊解碼器30可執行方程式(6)及(7)之操作以判定鄰接明度區塊之經降低取樣的相鄰明度區塊。
亦已提出其他降低取樣技術。在Yi-Jen Chiu、Yu Han、Lidong Xu、Wenhao Zhang、Hong Jiang之「Cross-channel techniques to improve intra chroma prediction」(ITU-T SG16 WP3及ISO/IEC JTC1/SC29/WG11之視訊寫碼聯合合作小組(JCT-VC),JCTVC-F502,第6次會議:意大利,托里諾,2011年7月14日至22日,其可自http://phenix.int-evry.fr/jct/doc_end_user/current_document.php?id=2979獲得,且被稱作JCTVC-F502)中,將2維6分接頭濾波應用於當前明度區塊及相鄰明度區塊兩者,而非使用2分接頭濾波器。2維濾波器係數設定為:
Figure 105108629-A0202-12-0018-3
藉由方程式(9)導出經降低取樣之明度樣本:rec L (i,j)=(Rec LOrig [2i,2j]*2+Rec LOrig [2i,2j+1]+Rec LOrig [2i,2j-1]+Rec LOrig [2i+1,2j]*2+Rec LOrig [2i+1,2j+1]+Rec LOrig [2i+1,2j-1])>>3。
舉例而言,視訊編碼器20或視訊解碼器30可執行方程式(9)之操作以判定經降低取樣之明度區塊。方程式(9)包括內建的6分接頭濾波器,如由[1,2,1;1,2,1]表示,其中Re c LOrig [2i,2j]、Re c LOrig [2i,2j+1]、Re c LOrig [2i,2j-1]、Re c LOrig [2i+1,2j]、Re c LOrig [2i+1,2j+1]及Re c LOrig [2i+1,2j-1]作為6個輸入樣本。濾波器之分接頭表示用於降低取樣之輸入樣本的數目,在方程式(9)中,來自經重建構之明度區塊的六個值用於產生經降低取樣之明度區塊。
圖7為繪示降低取樣明度區塊之樣本以產生預測性區塊之明度位置及色度位置之另一實例的概念圖。如圖7中所描繪,色度樣本(由經填充三角形表示)係藉由應用6分接頭濾波器自六個明度樣本(由六個經填充圓表示)預測。
如方程式(1)中所定義,由於使用線性函數導出一個色度樣本之預測子,故可見當應用6分接頭濾波器時,一個色度樣本之預測子依賴於六個相鄰明度樣本。當組合方程式(1)及(9)時,結果為如下方程式(10):pred C (i,j)=α.(Rec LOrig [2i,2j]*2+Rec LOrig [2i,2j+1]+Rec LOrig [2i,2j-1]+Rec LOrig [2i+1,2j]*2+Rec LOrig [2i+1,2j+1]+Rec LOrig [2i+1,2j-1])>>3)+β
在以下文字中,將經降低取樣樣本rec L (i,j)稱為位於(i,j)處之色度樣本之對應經降低取樣明度樣本。舉例而言,歸因於4:2:0取樣,2N×2N明度區塊對應於N×N色度區塊。藉由降低取樣,2N×2N明度區塊成為N×N經降低取樣明度區塊。此N×N經降低取樣明度區塊被稱作rec L (i,j)且對應於N×N色度區塊。
此外,儘管關於4:2:0取樣描述以上實例,但本發明中描述之技術並未如此受限。舉例而言,本發明中描述之技術亦可適用於4:2:2取樣。因此,關於4:2:0之實例僅作為輔助理解之方式而提供。
此外,在一些實例中,本發明中描述之技術亦可適用於4:4:4取樣。舉例而言,在4:4:4取樣中,色度區塊並非相對於明度區塊經次取樣。然而,在此類實例中,判定色度區塊之預測性區塊亦可為可能的。舉例而言,可濾波明度區塊,且經濾波區塊可用作色度區塊之預測性區塊。在此等實例中,可能不需要降低取樣明度區塊。如更詳細解釋,實例技術描述基於色度區塊之位置選擇應用於明度區塊之樣本的濾波器。用於選擇應用於明度區塊之樣本之濾波器的技術可擴展至LM預測(諸如,4:4:4取樣)不需要降低取樣之實例。在此類實例中, 濾波器可不包括任何降低取樣以使得4:4:4取樣得以保留。因此,對4:2:0取樣之描述為實例,且該等技術亦適用於4:4:4取樣。
此外,在HEVC中,已指定將圖像分割為被稱作圖像塊之矩形區域的選項。圖像塊之主要目的在於增加並行處理之能力而非提供錯誤恢復。圖像塊為圖像之使用一些共用標頭資訊編碼的可獨立解碼區域。圖像塊另外可用於對視訊圖像之本端區域之空間隨機存取的目的。圖像之典型圖像塊組態由將圖像分段為在每一圖像塊中具有大致上相等數目之CTU的矩形區域構成。圖像塊提供粒度(圖像/子圖像)之更粗糙位準的平行度,且使用該等圖像塊不需要執行緒之複雜同步。
用於LM預測模式之技術可存在某些爭議/問題。舉例而言,LM預測模式中調用之降低取樣程序對寫碼效能改良至關重要。然而,固定濾波器(諸如,2分接頭濾波器及6分接頭濾波器)限制寫碼效能。一個圖像內之不同序列或區域可具有不同特性,且應用於所有圖像之同一濾波器可為次佳的。當用於LM預測模式之經重建構明度樣本位於不同圖像塊處時,如何處置此情況為未知的。
為剖析上文提及之問題,本發明描述以下技術。可單獨地應用該等技術或可應用該等技術之任何組合。大體而言,視訊編碼器20及視訊解碼器30可將此等實例技術執行為以線性模型(LM)預測模式編碼或解碼色度區塊之部分。出於便利,關於視訊寫碼器描述該等技術,該視訊寫碼器之實例包括視訊編碼器20及視訊解碼器30。
舉例而言,視訊寫碼器(例如,視訊編碼器20或視訊解碼器30)可自一組濾波器判定用於降低取樣明度區塊之濾波器,而非限於僅使用二分接頭濾波器或六分接頭濾波器來降低取樣明度區塊。作為實例,可存在視訊寫碼器可用以降低取樣之X數目個不同濾波器。舉例而言,可存在一分接頭濾波器、二分接頭濾波器、三分接頭濾波器等。此外,對於每一濾波器,特定分接頭可不同(例如,用於第一二分接 頭濾波器之明度樣本不同於用於第二二分接頭濾波器之明度樣本)。在本發明中描述之實例中之一些中,該組濾波器包括兩個濾波器;然而,視訊寫碼器自其判定哪一濾波器應用於降低取樣明度區塊之兩個以上濾波器為可能的。
視訊寫碼器可使用各種準則,該視訊寫碼器藉由該等準則判定應用之濾波器。作為一項實例,視訊寫碼器基於色度區塊之位置自該組濾波器判定應用哪一濾波器。若色度區塊鄰接圖像、CU、PU或TU之左方界限(例如,圖像、CU、PU或TU之左方界限與色度區塊邊緣相同),則視訊寫碼器可使用第一濾波器來降低取樣對應於左方界限上之色度區塊之色度樣本的明度區塊之明度樣本。左方界限上之色度區塊之樣本指代最接近左方界限的包括剛好在該界限上之樣本的色度區塊之樣本。可將第一濾波器應用於最接近界限之N個樣本(例如,最接近該界限之樣本,緊鄰彼樣本之一個樣本及N個此類樣本)。
在一些情況下,視訊寫碼器可將第一濾波器應用於明度區塊之所有明度樣本,而非僅對應於鄰接左方界限之色度樣本的彼等樣本;然而,本發明中描述之技術並未如此受限。對於所有其他情況,視訊寫碼器可使用第二、不同濾波器以降低取樣明度區塊。
舉例而言,在4:2:0取樣中,四個明度樣本對應於一個色度樣本。因此,視訊寫碼器可判定哪一色度樣本對應於哪些明度樣本。當使用具有更大分接頭之濾波器時,一個色度樣本可對應於四個以上明度樣本。對於對應於左方界限上之色度樣本的明度樣本(緊鄰或在樣本數目內),視訊寫碼器可將第一濾波器應用於對應明度樣本以降低取樣明度區塊,且對於對應於並非在左方界限上之色度樣本的明度樣本(並非緊鄰或並未在樣本數目內),視訊寫碼器可將第二濾波器應用於對應明度樣本以降低取樣明度區塊。
在一些實例中,第一濾波器可包括比第二濾波器更少的分接頭 (例如,濾波器在其上延伸之樣本數目)。作為一項實例,第一濾波器為二分接頭濾波器且第二濾波器為六分接頭濾波器。在此實例中,視訊寫碼器可執行方程式(5)之操作以在色度區塊之對應色度樣本在左方界限上的情況下判定明度區塊之經降低取樣明度樣本,且可執行方程式(9)之操作以在色度區塊之對應色度樣本並未在左方界限上的情況下判定明度區塊之經降低取樣明度樣本。因此,在色度樣本之對應經降低取樣明度樣本的導出程序期間,與應用於對應於並未在左方圖像界限或寫碼單元(CU)、預測單元(PU)或變換單元(TU)之左方界限處之色度樣本的明度區塊之其他樣本的濾波器相比,視訊寫碼器可將不同濾波器應用於對應於定位在左方圖像界限或CU、PU或TU之左方界限處的色度區塊之色度樣本的明度區塊之明度樣本。左方界限處之色度樣本指代緊鄰左方界限或在自左方界限起之一定數目的樣本內之色度樣本。
使用不同濾波器允許視訊寫碼器恰當地使用可用樣本值。舉例而言,針對對應於在圖像、CU、PU或TU之左方界限處之色度樣本的明度樣本使用六分接頭濾波器可導致要求視訊寫碼器使用並非明度區塊之部分的明度樣本值以用於降低取樣,且導致視訊寫碼器必須執行一些額外處理以解決明度樣本之短缺(例如,填充明度樣本值以產生並非明度區塊之部分的樣本之值)。然而,在左方界限處使用二分接頭濾波器可不要求視訊寫碼器使用並非明度區塊之部分的明度樣本值以用於降低取樣。因此,儘管描述二分接頭及六分接頭濾波器,但考慮到避免需要要求並非明度區塊之部分的明度樣本(例如,為避免需要填充左方界限上之明度樣本),用於降低取樣之其他大小之濾波器可為可能的。
作為一項實例,在色度樣本之對應經降低取樣明度樣本的導出程序期間,與應用於對應於並非位於左方圖像界限處之色度樣本的其 他明度樣本之濾波器相比,視訊寫碼器將不同濾波器應用於對應於定位在左方圖像界限處之色度樣本的明度樣本。在一項實例中,用於導出在左方圖像界限處之色度樣本的對應經降低取樣明度樣本之濾波器的長度(例如,分接頭)(亦即,濾波器在其上延伸之樣本數目)小於用於導出並未在左方圖像界限處之色度樣本的對應經降低取樣明度樣本之濾波器的長度(例如,二分接頭用於左方界限且六分接頭用於所有其他)。
作為一項實例,在色度樣本之對應經降低取樣明度樣本的導出程序期間,與應用於當前CU內之其他明度樣本的濾波器相比,視訊寫碼器將不同濾波器應用於位於左方CU界限處之色度樣本的明度樣本。在一項實例中,用於導出在左方CU界限處之色度樣本的對應經降低取樣明度樣本之濾波器的長度(例如,分接頭)(亦即,濾波器在其上延伸之樣本數目)小於用於導出並未在左方CU界限處之色度樣本的對應經降低取樣明度樣本之濾波器的長度(例如,二分接頭用於左方界限且六分接頭用於所有其他)。
作為一項實例,在色度樣本之對應經降低取樣明度樣本的導出程序期間,與應用於當前PU內之其他樣本的濾波器相比,視訊寫碼器將不同濾波器應用於位於左方PU界限處之色度樣本。在一項實例中,用於導出在左方PU界限處之色度樣本的對應經降低取樣明度樣本之濾波器的長度(例如,分接頭)(亦即,濾波器在其上延伸之樣本數目)小於用於導出並未在左方PU界限處之色度樣本的對應經降低取樣明度樣本之濾波器的長度(例如,二分接頭用於左方界限且六分接頭用於所有其他)。
作為一項實例,在色度樣本之對應經降低取樣明度樣本的導出程序期間,與應用於當前TU內之其他樣本的濾波器相比,視訊寫碼器可將不同濾波器應用於位於左方TU界限處之色度樣本。在一項實 例中,用於導出在左方TU界限處之色度樣本的對應經降低取樣明度樣本之濾波器的長度(例如,分接頭)(亦即,濾波器在其上延伸之樣本數目)小於用於導出並未在左方TU界限處之色度樣本的對應經降低取樣明度樣本之濾波器的長度(例如,二分接頭用於左方界限且六分接頭用於所有其他)。
在一些情況下,同一圖像中可能不存在對應明度樣本。下文描述解決此類情況之一些實例技術。舉例而言,儘管在一些情況下避免填充可為有益的,但在一些情況下,避免填充可為不可能的。舉例而言,由於一些明度樣本不可用(例如,由於偏離圖像),視訊寫碼器可用填充樣本值替代此等不可用樣本,並藉由此等填充樣本值執行降低取樣(例如,使用可用明度樣本之實際明度樣本值及不可用明度樣本之填充樣本值降低取樣)。填充樣本值可為預設值(例如,2bitdepth,其中bitdepth指示明度分量之位元深度)、由視訊編碼器20判定且傳信至視訊解碼器30之值,或基於並不要求傳信資訊之一些隱含技術判定之值。添加填充樣本值可減少複雜度,因為可不需要單獨濾波器。
在色度樣本之對應經降低取樣明度樣本的導出程序期間,當明度樣本在圖像外或CU/PU/TU需要涉及在降低取樣程序中時,視訊寫碼器可首先應用填充操作,接著應用降低取樣程序。在樣本之填充中,視訊寫碼器可用填充樣本值替代偏離螢幕之彼等樣本。
作為一項實例,在色度樣本之對應經降低取樣明度樣本的導出程序期間,視訊寫碼器可填充位於當前圖像外之明度樣本(例如,僅明度樣本)。對於所有其他位置,使用經重建構樣本。作為一項實例,在色度樣本之對應經降低取樣明度樣本的導出程序期間,視訊寫碼器可填充位於當前CU外之明度樣本。對於所有其他位置,使用經重建構樣本。作為一項實例,在色度樣本之對應經降低取樣明度樣本的導出程序期間,視訊寫碼器可填充位於當前PU外之明度樣本。對 於所有其他位置,使用經重建構樣本。作為一項實例,在色度樣本之對應經降低取樣明度樣本的導出程序期間,視訊寫碼器可填充位於當前TU外之明度樣本。對於所有其他位置,使用經重建構樣本。在針對填充之以上實例中,將同一降低取樣程序應用於所有位置。
當用於LM預測模式之明度經重建構樣本的位置位於當前圖塊或當前圖像塊外時,視訊寫碼器可將此類樣本標記為不可用(例如,視訊寫碼器可將此類樣本判定為不可用)。當樣本經標記為不可用時,視訊寫碼器可執行下文中之一或多者。
在用於相鄰明度區塊之降低取樣程序時,其(例如,不可用樣本)並不用於相鄰明度區塊之降低取樣程序。替代地或另外地,濾波器可不同於用於其他樣本之濾波器。在用於當前明度區塊之降低取樣程序時,其(例如,不可用樣本)並不用於當前明度區塊之降低取樣程序。替代地或另外,濾波器可不同於用於其他樣本之濾波器。將其(例如,不可用樣本)重新標記為可用;然而,將樣本值修改為填充樣本值或預設值。替代地或另外,濾波器與用於其他樣本之濾波器保持相同。在一項實例中,預設值取決於位元深度。在另一實例中,填充可始於標記為可用之左方/右方/上方/下方樣本。
大體而言,針對另一圖像塊中之明度樣本,視訊寫碼器可將圖像塊界限外之像素標記為不可用且不將其包括於降低取樣程序中。在一些實例中,視訊寫碼器可將另一圖像塊中之明度樣本標記為可用,但針對另一圖像塊中之此類明度樣本使用填充像素。作為另一實例,視訊寫碼器可針對另一圖像塊中之明度樣本使用填充「擴展」值(例如,基於位元深度之一半可能值,因此8位元使用128),而非將該等樣本標記為不可用。
在一些實例中,視訊寫碼器可在特定條件下啟用上述實例技術中之一或多者。作為一項實例,條件可取決於圖塊類型(例如,當當 前圖塊並非經框內寫碼圖塊時,視訊寫碼器啟用根據本發明中描述之實例的技術)。替代地或另外,條件可取決於其相鄰CU之寫碼類型。舉例而言,當相鄰CU經框間寫碼時,視訊寫碼器可啟用上述技術中之一或多者。替代地或另外,條件可取決於含有當前CU/PU之圖塊的參考圖像。舉例而言,當所有參考圖像具有比當前圖像之POC(圖像次序計數)值更小的POC值時,視訊寫碼器可啟用上述技術中之一或多者。
在一些實例中,視訊寫碼器可將不同濾波器應用於不同色度色彩分量(Cb或Cr)。在一些實例中,當啟用LM預測模式時,一或多組降低取樣濾波器可進一步在序列參數集(SPS)、圖像參數集(PPS)或圖塊標頭中之任一者中加以傳信。替代地或另外,引入補充增強資訊(SEI)訊息語法以描述降低取樣濾波器。此外,替代地或另外,在無傳信的情況下定義預設降低取樣濾波器,例如,六分接頭濾波器[1,2,1;1,2,1]。替代地或另外,一個PU/CU/最大CU可傳信用於LM預測模式之濾波器的索引。替代地或另外,在無需傳信的情況下可藉由視訊解碼器30即時導出濾波器分接頭之使用。可存在亦提供濾波器支援之其他方式。
在一些實例中,視訊寫碼器可使用原始相鄰經重建構明度樣本導出線性模型之參數,而非使用經降低取樣之相鄰經重建構明度樣本導出該等參數。在此情況下,作為一項實例,可使用以下方程式11導出色度預測:pred C (i,j)=α 0 *Rec LOrig [2i,2j]+α 1 *Rec LOrig [2i,2j+1]+α 2 *Rec LOrig [2i,2j-1]+α 3 *Rec LOrig [2i+1,2j]+α 4 *Rec LOrig [2i+1,2j+1]+α 5 *Rec LOrig [2i+1,2j-1]+β
其中自相鄰經重建構明度及色度區塊獲得參數(α i (其中i為0至5,包含0及5)及β)。
此外,在一項實例中,應用α i 等於α (i+3)之約束條件。此外,在一 項實例中,應用α i 等於α (i+2)之約束條件,其中i等於0或3。在一項實例中,可僅針對更大經寫碼CU(例如,CU大小大於16×16)啟用此實例技術。在一項實例中,將參數中之一或多者限制為0。
此外,視訊寫碼器亦可針對跨分量殘餘預測應用上述技術中之一或多者,其中經降低取樣之明度殘餘用於預測色度殘餘。在此情況下,作為一項實例,將降低取樣程序應用於經重建構明度殘餘。
下文為本發明中所描述之技術可藉由視訊寫碼器實施之實例方式。實例實施技術不應被視為限制的。
以下為針對左方圖像界限處之樣本應用不同降低取樣處理之實例。將用於當前明度區塊之降低取樣程序定義如下:
- 若色度樣本不位於圖像之左方界限處,則應用6分接頭濾波器(例如,[1 2 1;1 2 1])導出對應經降低取樣明度樣本:rec L (i,j)=(Rec LOrig [2i,2j]*2+Rec LOrig [2i,2j+1]+Rec LOrig [2i,2j-1] +Rec LOrig [2i+1,2j]*2+Rec LOrig [2i+1,2j+1]+Rec LOrig [2i+1,2j-1]+offset0)>>3 (12)
- 否則,若色度樣本位於圖像之左方界限處,則應用2分接頭濾波器(例如,[1;1])導出對應經降低取樣明度樣本:rec L (i,j)=(Rec LOrig [2i,2j]+Rec LOrig [2i,2j+1]+offset1)>>1 (13)
在一項實例中,將offset0及offset1均設定為等於0。在另一實例中,將offset0設定為等於4且offset1設定為等於1。
圖2為繪示可實施本發明之技術的實例視訊編碼器20之方塊圖。出於解釋之目的提供圖2,且不應將該圖視為對如本發明中廣泛例示及描述之技術的限制。出於解釋之目的,本發明在HEVC寫碼之上下文中描述視訊編碼器20。然而,本發明之技術可適用於其他寫碼標準或方法。
視訊編碼器20包括處理電路,且視訊編碼器20經組態以執行本發明中所描述之實例技術中之一或多者。舉例而言,視訊編碼器20包 括積體電路,且圖2中繪示之各種單元可形成為與電路匯流排互連之硬體電路區塊。此等硬體電路區塊可為單獨電路區塊或該等單元中之兩者或兩者以上可組合為共用硬體電路區塊。硬體電路區塊可形成為電力組件之組合,該等電力組件形成諸如算術邏輯單元(ALU)、基礎功能單元(EFU)之操作區塊,以及諸如AND、OR、NAND、NOR、XOR、XNOR及其他類似邏輯區塊的邏輯區塊。
在一些實例中,圖2中繪示之單元中之一或多者可由在處理電路上執行之軟體單元提供。在此類實例中,用於此等軟體單元之目的碼儲存於記憶體中。作業系統可使得視訊編碼器20擷取目的碼並執行目的碼,其使得視訊編碼器20執行操作以實施實例技術。在一些實例中,軟體單元可為視訊編碼器20在啟動時執行之韌體。因此,視訊編碼器20為具有執行實例技術之硬體的結構性組件或具有在硬體上執行以特化硬體以執行實例技術的軟體/韌體。
視訊編碼器20表示可經組態以執行根據本發明中描述之各種實例的用於基於LM之視訊寫碼之技術的器件之實例。舉例而言,視訊編碼器20可經組態以使用LM視訊編碼對一或多個區塊進行編碼。
在圖2之實例中,視訊編碼器20包括預測處理單元100、視訊資料記憶體101、殘餘產生單元102、變換處理單元104、量化單元106、逆量化單元108、逆變換處理單元110、重建構單元112、濾波器單元114、經解碼圖像緩衝器116及熵編碼單元118。預測處理單元100包括框間預測處理單元120及框內預測處理單元126。框間預測處理單元120包括運動估計單元及運動補償單元(未展示)。視訊編碼器20亦包括經組態以執行本發明中所描述之基於LM之寫碼技術的各種態樣的基於線性模型(LM)之編碼單元122。在其他實例中,視訊編碼器20可包括更多、更少或不同組件。
視訊資料記憶體101可儲存待由視訊編碼器20之組件編碼的視訊 資料。可(例如)自視訊源18獲得儲存於視訊資料記憶體101中之視訊資料。經解碼圖像緩衝器116可為儲存用於視訊編碼器20(例如,以框內或框間寫碼模式)編碼視訊資料之參考視訊資料的參考圖像記憶體。視訊資料記憶體101及經解碼圖像緩衝器116可由多種記憶體器件中之任一者形成,諸如,動態隨機存取記憶體(DRAM),包括同步DRAM(SDRAM)、磁阻式RAM(MRAM)、電阻式RAM(RRAM)或其他類型之記憶體器件。可由同一記憶體器件或單獨記憶體器件提供視訊資料記憶體101及經解碼圖像緩衝器116。在各種實例中,視訊資料記憶體101可與視訊編碼器20之其他組件一起在晶片上,或相對於彼等組件在晶片外。
視訊編碼器20可接收視訊資料。視訊編碼器20可經由預測處理單元100編碼視訊資料之圖像的圖塊中之每一CTU。CTU中之每一者可與相等大小之明度寫碼樹型區塊(CTB)及圖像之對應CTB相關聯。作為編碼CTU之部分,預測處理單位100可執行四分樹分割以將CTU之CTB劃分成逐漸較小的區塊。較小區塊可為CU之寫碼區塊。舉例而言,預測處理單元100可將與CTU相關聯之CTB分割成四個相等大小的子區塊,將該等子區塊中之一或多者分割成四個相等大小的子區塊,等等。
視訊編碼器20可編碼CTU之CU以產生CU之經編碼表示(亦即,經寫碼CU)。作為編碼CU之部分,預測處理單元100可分割與CU之一或多個PU中的CU相關聯之寫碼區塊。因此,每一PU可與明度預測區塊及對應的色度預測區塊相關聯。視訊編碼器20及視訊解碼器30可支援具有各種大小之PU。如上文所指示,CU之大小可指CU之明度寫碼區塊的大小,且PU之大小可指PU之明度預測區塊的大小。假定特定CU之大小為2N×2N,則視訊編碼器20及視訊解碼器30可支援用於框內預測之2N×2N或N×N之PU大小,及用於框間預測的2N×2N、2N×N、 N×2N、N×N或類似之對稱PU大小。視訊編碼器20及視訊解碼器30亦可支援用於框間預測的2N×nU、2N×nD、nL×2N及nR×2N之PU大小的不對稱分割。
框間預測處理單元120可藉由對CU之每一PU執行框間預測而產生PU之預測性資料。PU之預測性資料可包括PU之預測性區塊及PU之運動資訊。取決於PU係在I圖塊中、P圖塊中抑或B圖塊中,框間預測單元121可針對CU之PU執行不同操作。在I圖塊中,所有PU經框內預測。因此,若PU在I圖塊中,則框間預測單元121不對PU執行框間預測。由此,對於以I模式編碼的區塊,經預測區塊係使用空間預測由同一圖框內的先前經編碼相鄰區塊形成。
若PU在P圖塊中,則框間預測處理單元120之運動估計單元可在用於PU之參考區域的參考圖像清單(例如,「RefPicList0」)中搜尋參考圖像。PU之參考區域可為參考圖像內含有最緊密地對應於PU之樣本區塊的樣本區塊之區域。運動估計單元可產生指示含有用於PU之參考區域之參考圖像的RefPicList0中之位置的參考索引。另外,運動估計單元可產生指示PU之寫碼區塊與關聯於參考區域之參考位置之間的空間移位之MV。舉例而言,MV可為提供自當前經解碼圖像中之座標至參考圖像中之座標的偏移之二維向量。運動估計單元可輸出參考索引及MV作為PU之運動資訊。框間預測處理單元120之運動補償單元可基於由PU之運動向量指示之參考位置處的實際或內插樣本而產生PU之預測性區塊。
若PU在B圖塊中,則框間預測處理單元120之運動估計單元可針對PU執行單向預測或雙向預測。為針對PU執行單向預測,運動估計單元可搜尋RefPicList0或用於PU之參考區域的第二參考圖像清單(「RefPicList1」)之參考圖像。運動估計單元可輸出以下各者作為PU之運動資訊:指示含有參考區域之參考圖像之RefPicList0或 RefPicList1中之位置的參考索引、指示PU之預測區塊與相關聯於參考區域之參考位置之間的空間位移的MV,及指示參考圖像在RefPicList0中抑或在RefPicList1中之一或多個預測方向指示符。框間預測處理單元120之運動補償單元可至少部分地基於由PU之運動向量指示之參考區域處的實際或內插樣本而產生PU之預測性區塊。
為了針對PU執行雙向框間預測,運動估計單元可在用於PU之參考區域的RefPicList0中搜尋參考圖像,且亦可在用於PU之另一參考區域的RefPicList1中搜尋參考圖像。運動估計單元可產生指示含有參考區域之參考圖像的RefPicList0及RefPicList1中之位置的參考圖像索引。另外,運動估計單元可產生指示相關聯於參考區域之參考位置與PU之樣本區塊之間的空間移位之MV。PU之運動資訊可包括PU之參考索引及MV。框間預測處理單元120之運動補償單元可至少部分地基於由PU之運動向量指示之參考區域處的實際或內插樣本而產生PU之預測性區塊。
基於LM之編碼單元122可執行線性模型(LM)預測編碼。舉例而言,基於LM之編碼單元122可降低取樣對應於正經編碼之當前色度區塊之明度區塊的重建構明度樣本。舉例而言,在4:2:0取樣中,四個明度樣本對應於一個色度區塊。形成明度圖像之左上角中之2×2區塊的四個明度樣本對應於位於色度圖像之左上角的一個色度樣本。基於LM之編碼單元122可縮放明度區塊之經降低取樣的重建構明度樣本以產生預測性區塊。殘餘產生單元102可判定色度區塊與預測性區塊之間的殘餘區塊。在一些實例中,基於LM之編碼單元122可將此類技術應用為跨分量殘餘預測之部分。在此情況下,色度區塊為色度殘餘區塊且明度區塊為明度殘餘區塊。
在本發明中描述之技術中,基於LM之編碼單元122可將上述實例技術中之一或多者實施為降低取樣明度區塊之明度樣本的部分。舉例 而言,基於LM之編碼單元122可基於經編碼之色度區塊的特性應用不同濾波器以降低取樣對應明度區塊。經解碼之色度區塊之特性的實例包括經解碼之色度區塊的位置。作為另一實例,基於LM之編碼單元122可基於明度樣本在特定界限(例如,圖像、CU、PU或TU)外而將填充應用於明度區塊。
框內預測處理單元126可藉由對PU執行框內預測而產生PU之預測性資料。用於PU之預測性資料可包括PU之預測性區塊及各種語法元素。框內預測處理單元126可對I圖塊、P圖塊及B圖塊中之PU執行框內預測。
為了對PU執行框內預測,框內預測處理單元126可使用多個框內預測模式以產生用於PU之預測性資料的多個集合。框內預測處理單元126可使用來自相鄰PU之樣本區塊的樣本來產生PU之預測性區塊。對於PU、CU及CTU,假定自左至右自上而下之編碼次序,則相鄰PU可在PU上方、右上方、左上方或左方。框內預測處理單元126可使用各種數目之框內預測模式,例如,33個方向性框內預測模式。在一些實例中,框內預測模式之數目可取決於與PU相關聯之區域的大小。
預測處理單元100可自由框間預測處理單元120針對PU產生之預測性資料、由框內預測處理單元126針對PU產生之預測性資料或由基於LM之編碼單元122產生之預測性資料當中選擇用於CU之PU的預測性資料。在一些實例中,預測處理單元100基於預測性資料之集合的比率/失真量度而選擇用於CU之PU的預測性資料。所選預測性資料之預測性區塊在本文中可被稱作所選預測性區塊。
殘餘產生單元102可基於CU之明度、Cb及Cr寫碼區塊及CU之PU的所選預測性明度區塊、Cb區塊及Cr區塊而產生CU的明度、Cb及Cr殘餘區塊。舉例而言,殘餘產生單元102可產生CU之殘餘區塊,以使得殘餘區塊中之每一樣本具有等於CU之寫碼區塊中的樣本與CU之PU 之對應所選預測性區塊中的對應樣本之間的差的值。
變換處理單元104可執行四分樹分割以將與CU相關聯之殘餘區塊分割成與CU之TU相關聯的變換區塊。因此,TU可與明度變換區塊及兩個色度變換區塊相關聯。CU之TU的明度變換區塊及色度變換區塊的大小及位置可或可不基於CU之PU的預測區塊之大小及位置。被稱為「殘餘四分樹」(RQT)之四分樹結構可包括與區域中之每一者相關聯的節點。CU之TU可對應於RQT之分葉節點。
變換處理單元104可藉由將一或多個變換應用於TU之變換區塊而產生CU之每一TU的變換係數區塊。變換處理單元104可將各種變換應用於與TU相關聯之變換區塊。舉例而言,變換處理單元104可將離散餘弦變換(DCT)、定向變換或概念上類似之變換應用於變換區塊。在一些實例中,變換處理單元104不將變換應用於變換區塊。在此等實例中,變換區塊可被視為變換係數區塊。
量化單元106可量化係數區塊中之變換係數。量化程序可減少與變換係數中之一些或全部相關聯的位元深度。舉例而言,在量化期間,可將n位元變換係數捨入至m位元變換係數,其中n大於m。量化單元106可基於與CU相關聯之量化參數(QP)值來量化與CU之TU相關聯的係數區塊。視訊編碼器20可藉由調整與CU相關聯之QP值來調整應用於與CU相關聯之係數區塊的量化程度。量化可引入資訊損失,因此,經量化變換係數可具有比原始變換係數低的精確度。
逆量化單元108及逆變換處理單元110可分別將逆量化及逆變換應用於係數區塊,以自係數區塊重構殘餘區塊。重建構單元112可將經重建構之殘餘區塊添加至來自藉由預測處理單元100產生之一或多個預測性區塊的對應樣本,以產生與TU相關聯之經重建構變換區塊。藉由以此方式重建構CU之每一TU的變換區塊,視訊編碼器20可重建構CU之寫碼區塊。
濾波器單元114可執行一或多個解區塊操作以減少與CU相關聯之寫碼區塊中的區塊假影。在濾波器單元114對經重建構之寫碼區塊執行一或多個解區塊操作之後,經解碼圖像緩衝器116可儲存經重建構之寫碼區塊。框間預測處理單元120可使用含有經重建構之寫碼區塊之參考圖像來對其他圖像之PU執行框間預測。另外,框內預測處理單元126可使用經解碼圖像緩衝器116中之經重建構寫碼區塊來對與CU在同一圖像中之其他PU執行框內預測。此外,基於LM之編碼單元122可利用經解碼圖像緩衝器116中之重建構明度區塊以用於線性模型(LM)預測編碼色度區塊(其中,明度區塊在一些實例中可包括視訊資料或可為殘餘明度區塊,且色度區塊在一些實例中可包括視訊資料或可為殘餘色度區塊)。
熵編碼單元118可自視訊編碼器20之其他功能組件接收資料。舉例而言,熵編碼單元118可自量化單元106接收係數區塊,且可自預測處理單元100接收語法元素。熵編碼單元118可對資料執行一或多個熵編碼操作,以產生經熵編碼資料。舉例而言,熵編碼單元118可對資料執行上下文自適應性二進位算術寫碼(CABAC)操作、上下文自適應性可變長度寫碼(CAVLC)操作、可變至可變(V2V)長度寫碼操作、基於語法之上下文自適應性二進位算術寫碼(SBAC)操作、概率區間分割熵(PIPE)寫碼操作、指數哥倫布編碼操作或另一類型之熵編碼操作。視訊編碼器20可輸出包括由熵編碼單元118產生之經熵編碼資料的位元串流。舉例而言,位元串流可包括表示用於CU之RQT的資料。
本發明之圖2之實例描述視訊編碼器20,該視訊編碼器經組態以判定正經編碼之色度區塊的對應明度區塊;基於色度區塊之特性判定應用於明度區塊之濾波器;基於該經判定濾波器降低取樣明度區塊;基於經降低取樣之明度區塊判定預測性區塊;及基於預測性區塊線性 模型(LM)預測編碼色度區塊。舉例而言,基於LM之編碼單元122可執行LM預測編碼色度區塊之實例操作。
基於LM之編碼單元122可判定對應於正經編碼之視訊資料之色度區塊的視訊資料之明度區塊。諸如在將圖像劃分為CTU、CU及PU期間,預測處理單元100可經組態以追蹤哪一明度區塊與色度區塊彼此對應。
基於LM之編碼單元122基於色度區塊之特性自一組濾波器判定應用於明度區塊之濾波器。舉例而言,基於LM之編碼單元122可判定色度區塊相對於圖像、CU、PU或TU之界限的位置。由於預測處理單元100將圖像劃分為CTU、CU及PU,因此基於LM之編碼單元122可判定色度區塊相對於圖像、CU、PU或TU之位置。
基於LM之編碼單元122判定將第一濾波器應用於對應於位於界限處之色度區塊之色度樣本的明度區塊之明度樣本。因此,基於色度樣本位於界限處,基於LM之編碼單元122可判定將第一濾波器應用於對應明度樣本(例如,方程式(12))。基於LM之編碼單元122判定將第二、不同濾波器應用於對應於不位於界限處之色度區塊之色度樣本的明度區塊之明度樣本。因此,基於色度樣本不位於界限處,基於LM之編碼單元122可判定將不同於第一濾波器之第二濾波器應用於明度區塊之對應明度樣本(例如,方程式(13))。
基於LM之編碼單元122自DPB 116擷取經重建構明度區塊且基於所判定濾波器降低取樣明度區塊。經降低取樣之明度區塊被稱作:recL(i,j)。舉例而言,若色度樣本在左方界限處,則基於LM之編碼單元122使用二分接頭濾波器執行明度樣本之降低取樣(例如,方程式(12)之操作)。若色度樣本不在左方界限處,則基於LM之編碼單元122使用六分接頭濾波器執行明度樣本之降低取樣(例如,方程式(13)之操作)。大體而言,第一濾波器中包括比第二濾波器更少的分接頭。
基於LM之編碼單元122自經降低取樣之明度區塊判定預測性區塊。舉例而言,基於LM之編碼單元122可執行方程式1之操作。為了判定預測性區塊,基於LM之編碼單元122判定α及β之值。基於LM之編碼單元122可執行方程式2至4之操作以判定α及β值。使用α及β值,基於LM之編碼單元122按照方程式1縮放recL(i,j)且判定預測性區塊。
在判定α及β值中,基於LM之編碼單元122可降低取樣一或多個相鄰明度區塊(例如,執行方程式(6)及(7)之操作),且基於一或多個相鄰色度區塊之經降低取樣的相鄰明度區塊來判定第一參數(例如,α)及第二參數(例如,β)。然而,不需要在每一實例中降低取樣相鄰區塊。舉例而言,基於LM之編碼單元122可執行方程式(11)之操作。
在一些實例中,基於LM之編碼單元122可基於色度區塊之類型判定應用哪一降低取樣濾波器。舉例而言,在色度區塊屬於第一類型(例如,Cr或Cb)的一個例項中,基於LM之編碼單元122可基於色度區塊屬於第一類型而判定將第一濾波器應用於明度區塊。在色度區塊屬於第二類型(例如,Cr或Cb中之另一者)的另一例項中,基於LM之編碼單元122可基於色度區塊屬於第二類型而判定將第二、不同濾波器(亦即,不同於第一濾波器)應用於明度區塊。基於LM之編碼單元122選擇用於第一及第二類型之色度區塊的濾波器亦可基於色度樣本相對於界限之位置,但非在每一實例中必要。
如上文所描述,在一些實例中,基於LM之編碼單元122可判定明度區塊之明度樣本在圖像、圖塊、CU、PU或TU中之一或多者外部。在此類實例中,基於LM之編碼單元122可用填充值替換在外部之一或多個明度樣本的明度樣本值。舉例而言,基於LM之編碼單元122可經預組態或填充值可儲存於視訊資料記憶體101中。基於LM之編碼單元122可用此等填充值替換在外部之明度樣本,且將所得明度區塊儲存於視訊資料記憶體101中。基於LM之編碼單元122可接著降低取樣具 有填充值之明度區塊(例如,執行方程式(5)或(9))。
本發明亦描述視訊編碼器20,其經組態以判定正經編碼之色度區塊的對應明度區塊;基於明度區塊延伸超出界限,將填充應用於延伸超出界限之明度區塊的一部分且維持明度區塊之剩餘部分的重建構樣本,以產生經填充明度區塊;降低取樣經填充明度區塊;基於經降低取樣之填充明度區塊判定預測性區塊;且基於預測性區塊線性模型(LM)預測編碼色度區塊。
儘管已關於明度區塊為明度樣本之區塊描述上述實例技術,但本發明中描述之技術並未如此受限。在一些實例中,明度區塊為明度殘餘區塊,意謂明度區塊表示明度樣本之區塊與明度樣本之預測性區塊之間的差。此明度殘餘區塊可用於產生對應色度殘餘區塊之預測性色度殘餘區塊。基於LM之編碼單元122可對明度殘餘區塊執行類似功能以產生色度殘餘區塊之預測性色度殘餘區塊。舉例而言,對於明度區塊為明度殘餘區塊的情況,基於LM之編碼單元122可使用類似於上文關於明度區塊為明度樣本之區塊的實例所描述之彼等技術的技術降低取樣明度殘餘區塊以產生預測性色度殘餘區塊。此等技術可適用於使用上文所描述之實例降低取樣濾波器的4:2:0取樣及4:2:2取樣兩者(且可能適用於使用濾波但不必要降低取樣之4:4:4)。
上文關於基於LM之編碼單元122描述的實例技術可在特定條件下適用,儘管此並非針對每一情況之要求。舉例而言,若當前圖塊並非經框內寫碼圖塊,則基於LM之編碼單元122可執行色度預測。作為另一實例,若相鄰CU經框間寫碼,則基於LM之編碼單元122可執行色度預測。作為另一實例,若RefPicList0及/或RefPicList1中之參考圖像具有小於當前圖像之POC值的POC值,則基於LM之編碼單元122可執行色度預測。然而,僅描述此等條件作為實例。基於LM之編碼單元122在所有情況下執行色度預測可為可能的,且是否根據基於LM之編 碼單元122執行色度預測係基於哪一寫碼提供最佳視訊寫碼來最終決定。
基於LM之編碼單元122可將預測性區塊輸出至殘餘產生單元102。殘餘產生單元102可自預測性區塊及色度區塊產生殘餘區塊。所得殘餘區塊由變換處理單元103變換、由量化單元106量化且由熵編碼單元118熵編碼。接著經由位元串流傳信該結果且視訊解碼器30使用位元串流中之資訊來重建構色度區塊。
圖3為繪示經組態以實施本發明之技術之實例視訊解碼器30的方塊圖。出於解釋之目的而提供圖3,且其並不限制如本發明中所廣泛例示及描述之技術。出於解釋之目的,本發明在HEVC寫碼之上下文中描述視訊解碼器30。然而,本發明之技術可適用於其他寫碼標準或方法。
視訊解碼器30包括處理電路,且視訊解碼器30經組態以執行本發明中所描述之實例技術中之一或多者。舉例而言,視訊解碼器30包括積體電路,且圖3中繪示之各種單元可形成為與電路匯流排互連之硬體電路區塊。此等硬體電路區塊可為單獨電路區塊或該等單元中之兩者或兩者以上可組合為共用硬體電路區塊。硬體電路區塊可形成為電力組件之組合,該等電力組件形成諸如算術邏輯單元(ALU)、基礎功能單元(EFU)之操作區塊,以及諸如AND、OR、NAND、NOR、XOR、XNOR及其他類似邏輯區塊的邏輯區塊。
在一些實例中,圖3中繪示之單元中之一或多者可由在處理電路上執行之軟體單元提供。在此類實例中,用於此等軟體單元之目的碼儲存於記憶體中。作業系統可使得視訊解碼器30擷取目的碼並執行目的碼,其使得視訊解碼器30執行實施實例技術之操作。在一些實例中,軟體單元可為視訊解碼器30在啟動時執行之韌體。因此,視訊解碼器30為具有執行實例技術之硬體的結構性組件或具有在硬體上執行 以特化該硬體以執行該等實例技術的軟體/韌體。
視訊解碼器30表示可經組態以執行根據本發明中描述之各種實例的用於基於LM之視訊寫碼之技術的器件之實例。舉例而言,視訊解碼器30可經組態以利用LM視訊寫碼模式解碼一或多個區塊(亦即,線性模型(LM)預測解碼一或多個區塊)。
在圖3之實例中,視訊解碼器30包括熵解碼單元150、視訊資料記憶體151、預測處理單元152、逆量化單元154、逆變換處理單元156、重建構單元158、濾波器單元160及經解碼圖像緩衝器162。預測處理單元152包括運動補償單元164及框內預測處理單元166。視訊解碼器30亦包括經組態以執行本發明中所描述之基於LM之寫碼技術的各種態樣的基於線性模型(LM)之解碼單元165。在其他實例中,視訊解碼器30可包括更多、更少或不同功能性組件。
視訊資料記憶體151可儲存待由視訊解碼器30之組件解碼的視訊資料,諸如經編碼視訊位元串流。可(例如)自電腦可讀媒體16(例如,自諸如攝影機之本端視訊源經由視訊資料之有線或無線網路通信或藉由存取實體資料儲存媒體)獲得儲存於視訊資料記憶體151中之視訊資料。視訊資料記憶體151可形成儲存來自經編碼視訊位元串流之經編碼視訊資料的經寫碼圖像緩衝器(CPB)。經解碼圖像緩衝器162可為儲存用於視訊解碼器30(例如)以框內寫碼或框間寫碼模式解碼視訊資料之參考視訊資料的參考圖像記憶體。視訊資料記憶體151及經解碼圖像緩衝器162可由多種記憶體器件中之任一者形成,諸如,動態隨機存取記憶體(DRAM),包括同步DRAM(SDRAM)、磁阻式RAM(MRAM)、電阻式RAM(RRAM)或其他類型之記憶體器件。可藉由同一記憶體器件或單獨記憶體器件提供視訊資料記憶體151及經解碼圖像緩衝器162。在各種實例中,視訊資料記憶體151可與視訊解碼器30之其他組件一起在晶片上,或相對於彼等組件在晶片外。
經寫碼圖像緩衝器(CPB)可接收並儲存位元串流之經編碼視訊資料(例如,NAL單元)。熵解碼單元150可自CPB接收經編碼視訊資料(例如,NAL單元)並剖析該NAL單元以解碼語法元素。熵解碼單元150可熵解碼NAL單元中之經熵編碼之語法元素。預測處理單元152、逆量化單元154、逆變換處理單元156、重建構單元158及濾波器單元160可基於自位元串流提取之語法元素產生經解碼視訊資料。
位元串流之NAL單元可包括經寫碼圖塊NAL單元。作為解碼位元串流之部分,熵解碼單元150可自經寫碼圖塊NAL單元提取語法元素並對該等語法元素進行熵解碼。該等經寫碼圖塊中之每一者可包括圖塊標頭及圖塊資料。圖塊標頭可含有關於圖塊之語法元素。圖塊標頭中之語法元素可包括識別與含有圖塊之圖像相關聯之PPS的語法元素。
除了解碼來自位元串流之語法元素之外,視訊解碼器30亦可對未分割之CU執行重建構操作。為了對未分割之CU執行重建構操作,視訊解碼器30可對CU之每一TU執行重建構操作。藉由對CU之每一TU執行重建構操作,視訊解碼器30可重建構CU之殘餘區塊。
作為對CU之TU執行重建構操作的部分,逆量化單元154可逆量化(亦即,解量化)與TU相關聯的係數區塊。逆量化單元154可使用與TU之CU相關聯之QP值來判定量化程度且同樣地判定逆量化單元154應用的逆量化程度。亦即,可藉由調整在量化變換係數時使用之QP值來控制壓縮比,亦即,用以表示原始序列及經壓縮序列的位元數目之比。壓縮比亦可取決於所採用的熵寫碼之方法。
在逆量化單元154對係數區塊進行逆量化之後,逆變換處理單元156可將一或多個逆變換應用於係數區塊以便產生與TU相關聯之殘餘區塊。舉例而言,逆變換處理單元156可將逆DCT、逆整數變換、逆Karhunen-Loeve變換(KLT)、逆旋轉變換、逆定向變換或另一逆變換 應用於係數區塊。
若PU係使用框內預測來編碼,則框內預測處理單元166可執行框內預測以產生PU之預測性區塊。框內預測處理單元166可使用框內預測模式以基於在空間上相鄰的PU之預測區塊而產生PU的預測性明度區塊、Cb區塊及Cr區塊。框內預測處理單元166可基於自位元串流解碼之一或多個語法元素判定用於PU之框內預測模式。
預測處理單元152可基於自位元串流提取之語法元素而建構第一參考圖像清單(RefPicList0)及第二參考圖像清單(RefPicList1)。此外,若使用框間預測對PU進行編碼,則熵解碼單元150可提取用於PU之運動資訊。運動補償單元164可基於PU之運動資訊而判定PU之一或多個參考區域。運動補償單元164可基於在PU之一或多個參考區塊處的樣本區塊而產生PU的預測性明度區塊、Cb區塊及Cr區塊。
重建構單元158可在適當時使用與CU之TU相關聯的明度、Cb及Cr變換區塊以及CU的PU之預測性明度區塊、Cb區塊及Cr區塊(亦即,框內預測資料或框間預測資料)來重建構CU之明度、Cb及Cr寫碼區塊。舉例而言,重建構單元158可將明度、Cb及Cr變換區塊之樣本添加至預測性明度區塊、Cb區塊及Cr區塊之對應樣本,以重建構CU之明度、Cb及Cr寫碼區塊。
濾波器單元160可執行解區塊操作以減少與CU之明度、Cb及Cr寫碼區塊相關聯的區塊假影。視訊解碼器30可將CU之明度、Cb及Cr寫碼區塊儲存於經解碼圖像緩衝器162中。經解碼圖像緩衝器162可提供參考圖像以用於後續運動補償、框內預測及在顯示器件(諸如,圖1之顯示器件32)上之呈現。舉例而言,視訊解碼器30可基於經解碼圖像緩衝器162中之明度、Cb及Cr區塊對其他CU之PU執行框內預測操作或框間預測操作。
根據本發明之各種實例,視訊解碼器30可經組態以執行基於LM 之寫碼。基於LM之解碼單元165可執行線性模型(LM)預測解碼。舉例而言,基於LM之解碼單元165可降低取樣對應於正經解碼之當前色度區塊的明度區塊之重建構明度樣本。基於LM之解碼單元165可縮放明度區塊之經降低取樣之重建構明度樣本以產生色度區塊之預測性區塊。重建構單元158可接著將所產生之預測性區塊添加至經解碼殘餘資料。在一些實例中,基於LM之解碼單元165可將此類技術應用為跨分量殘餘預測之部分。在此情況下,色度區塊為色度殘餘區塊且明度區塊為明度殘餘區塊。
在本發明中描述之技術中,基於LM之解碼單元165可將上述實例技術中之一或多者實施為降低取樣明度區塊之明度樣本的部分。舉例而言,基於LM之解碼單元165可基於經編碼之色度區塊的特性應用不同濾波器以降低取樣對應明度區塊。經解碼之色度區塊之特性的實例包括經解碼之色度區塊的位置。作為另一實例,基於LM之解碼單元165可基於明度樣本在特定界限(例如,圖像、圖塊、CU、PU或TU)外而將填充應用於明度區塊。
以此方式,本發明描述視訊解碼器30,其經組態以判定正經解碼之色度區塊的對應明度區塊;基於色度區塊之特性判定應用於明度區塊之濾波器;基於所判定濾波器降低取樣明度區塊;基於經降低取樣之明度區塊判定預測性區塊;及基於預測性區塊線性模型(LM)預測解碼色度區塊。
本發明亦描述視訊解碼器30,其經組態以判定正經解碼之色度區塊的對應明度區塊;基於明度區塊延伸超出界限,將填充應用於延伸超出界限之明度區塊的一部分且維持明度區塊之剩餘部分的重建構樣本,以產生經填充明度區塊;降低取樣經填充明度區塊;基於經降低取樣之填充明度區塊判定預測性區塊;及基於預測性區塊線性模型(LM)預測解碼色度區塊。
基於LM之解碼單元165可判定對應於正經解碼之視訊資料之色度區塊的視訊資料之明度區塊。預測處理單元152基於視訊編碼器20在位元串流中傳信之語法元素追蹤哪一明度區塊與色度區塊彼此對應。
基於LM之解碼單元165基於色度區塊之特性自一組濾波器判定應用於明度區塊之濾波器。舉例而言,基於LM之解碼單元165可判定色度區塊相對於圖像、圖塊、CU、PU或TU之界限的位置。由於位元串流指示將圖像劃分為CTU、CU及PU之方式,因此基於LM之解碼單元165可判定色度區塊相對於圖像、CU、PU或TU之位置。
基於LM之解碼單元165判定將第一濾波器應用於對應於位於界限處之色度區塊之色度樣本的明度區塊之明度樣本。因此,基於色度樣本位於界限處,基於LM之解碼單元165可判定將第一濾波器應用於對應明度樣本(例如,方程式(12))。基於LM之解碼單元165判定將第二、不同濾波器應用於對應於不位於界限處之色度區塊之色度樣本的明度區塊之明度樣本。因此,基於色度樣本不位於界限處,基於LM之解碼單元165可判定將不同於第一濾波器之第二濾波器應用於對應明度樣本(例如,方程式(13))。
基於LM之解碼單元165自DPB 162擷取經重建構明度區塊且基於所判定濾波器降低取樣明度區塊。經降低取樣之明度區塊被稱作:recL(i,j)。舉例而言,若色度樣本在左方界限處,則基於LM之解碼單元165使用二分接頭濾波器執行降低取樣(例如,方程式(12)之操作)。若色度樣本並未在左方界限處,則基於LM之解碼單元165使用六分接頭濾波器執行降低取樣(例如,方程式(13)之操作)。大體而言,第一濾波器中包括比第二濾波器更少的分接頭。
基於LM之解碼單元165自經降低取樣之明度區塊判定預測性區塊。舉例而言,基於LM之解碼單元165可執行方程式(1)之操作。為了判定預測性區塊,基於LM之解碼單元165判定α及β之值。基於LM 之解碼單元165可執行方程式2至4之操作以判定α及β值。使用α及β值,基於LM之解碼單元165按照方程式(1)縮放recL(i,j)且判定預測性區塊。
在判定α及β值中,基於LM之解碼單元165可降低取樣一或多個相鄰明度區塊(例如,執行方程式(6)及(7)之操作),且基於一或多個相鄰色度區塊之經降低取樣的相鄰明度區塊來判定第一參數(例如,α)及第二參數(例如,β)。然而,不需要在每一實例中降低取樣相鄰區塊。舉例而言,基於LM之解碼單元165可執行方程式(11)之操作。
在一些實例中,基於LM之解碼單元165可基於色度區塊之類型判定應用哪一降低取樣濾波器。舉例而言,在色度區塊屬於第一類型(例如,Cr或Cb)的一個例項中,基於LM之解碼單元165可基於色度區塊屬於第一類型而判定將第一濾波器應用於明度區塊。在色度區塊屬於第二類型(例如,Cr或Cb中之另一者)的另一例項中,基於LM之解碼單元165可基於色度區塊屬於第二類型而判定將第二、不同濾波器應用於明度區塊。基於LM之解碼單元165選擇用於第一及第二類型之色度區塊的濾波器亦可基於色度樣本相對於界限之位置,但並非在每一實例中必要。
如上文所描述,在一些實例中,基於LM之解碼單元165可判定明度區塊之明度樣本在圖像、圖塊、CU、PU或TU中之一或多者外部。在此類實例中,基於LM之解碼單元165可用填充值替換在外部之一或多個明度樣本的明度樣本值。舉例而言,基於LM之解碼單元165可經預組態或填充值可儲存於視訊資料記憶體151中。基於LM之解碼單元165可用此等填充值替換在外部之明度樣本,且將所得明度區塊儲存於視訊資料記憶體151中。基於LM之解碼單元165可接著降低取樣具有填充值之明度區塊(例如,執行方程式(5)或(9))。
儘管已關於明度區塊為明度樣本之區塊描述上述實例技術,但 本發明中描述之技術並未如此受限。在一些實例中,明度區塊為明度殘餘區塊,意謂明度區塊表示明度樣本之區塊與明度樣本之預測性區塊之間的差。此明度殘餘區塊可用於產生對應色度殘餘區塊之預測性色度殘餘區塊。基於LM之解碼單元165可對明度殘餘區塊執行類似功能以產生色度殘餘區塊之預測性色度殘餘區塊。舉例而言,針對明度區塊為明度殘餘區塊之情況,基於LM之解碼單元165可使用類似於上文關於明度區塊為明度樣本之區塊的實例所描述之彼等技術的技術降低取樣明度殘餘區塊以產生預測性色度殘餘區塊。此等技術可適用於使用上文所描述之實例降低取樣濾波器的4:2:0取樣及4:2:2取樣兩者(且可能適用於使用濾波但不必要降低取樣之4:4:4)。
上文關於基於LM之解碼單元165描述的實例技術可在特定條件下適用,儘管此並非針對每一情況之要求。舉例而言,若當前圖塊並非經框內寫碼圖塊,則基於LM之解碼單元165可執行色度預測。作為另一實例,若相鄰CU經框間寫碼,則基於LM之解碼單元165可執行色度預測。作為另一實例,若RefPicList0及/或RefPicList1中之參考圖像具有小於當前圖像之POC值的POC值,則基於LM之解碼單元165可執行色度預測。然而,僅描述此等條件作為實例。基於LM之解碼單元165在所有情況下執行色度預測可為可能的,且是否根據基於LM之解碼單元165執行色度預測係基於哪一寫碼提供最佳視訊寫碼來最終決定。
基於LM之解碼單元152可將預測性區塊輸出至重建構單元158。重建構單元158亦接收殘餘區塊(例如,在位元串流中之用於殘餘區塊之資訊藉由熵解碼單元150熵解碼、藉由逆量化單元154逆量化、藉由逆變換處理單元156逆變換之後)。重建構單元158添加具有預測性區塊之殘餘區塊以重建構色度區塊。
圖8為繪示線性模型(LM)預測編碼視訊資料之一項實例技術的流 程圖。如所繪示,基於LM之編碼單元122判定對應於正經編碼之視訊資料之色度區塊的視訊資料之明度區塊(200)。舉例而言,預測處理單元100將圖像劃分為CTU、CU及PU,且建構明度區塊及色度區塊以供儲存於視訊資料記憶體101中,基於LM之編碼單元122可自該等明度區塊及色度區塊判定哪一明度區塊對應於哪一色度區塊。另外,基於對哪一明度區塊對應於哪一色度區塊之判定,基於LM之編碼單元122亦可判定明度區塊之哪些明度樣本對應於色度區塊之哪些色度樣本。舉例而言,在4:2:0取樣中,四個明度樣本對應於一個色度樣本。
基於LM之編碼單元122基於色度區塊之特性自一組濾波器判定應用於明度區塊之濾波器(202)。舉例而言,基於LM之編碼單元122判定將第一濾波器(例如,二分接頭濾波器)應用於對應於位於圖像、圖塊、CU、PU或TU之界限(例如,左方界限)處之色度區塊之色度樣本的明度區塊之明度樣本。基於LM之編碼單元122判定將第二濾波器(例如,六分接頭濾波器)應用於對應於不位於界限處之色度區塊之色度樣本的明度區塊之明度樣本。
基於LM之編碼單元122基於經判定濾波器降低取樣明度區塊(204)。舉例而言,為基於經判定濾波器降低取樣明度區塊,基於LM之編碼單元122可針對對應於在圖像、圖塊、CU、PU或TU之界限(例如,左方界限)處之色度區塊之色度樣本的明度區塊之明度樣本執行方程式12之操作,且針對對應於不在圖像、圖塊、CU、PU或TU之界限處之色度區塊之色度樣本的明度區塊之明度樣本執行方程式13之操作。
基於LM之編碼單元122可基於經降低取樣之明度區塊判定預測性區塊(206)。舉例而言,基於LM之編碼單元122可降低取樣鄰接該明度區塊之一或多個相鄰明度區塊。然而,可能不需要在所有實例中降低取樣相鄰區塊。基於LM之編碼單元122可基於經降低取樣之一或多 個相鄰明度區塊及鄰接正經編碼之色度區塊的一或多個相鄰色度區塊判定第一參數(α)及第二參數(β)。基於LM之編碼單元122可基於經降低取樣之明度區塊及第一參數以及第二參數(例如,藉由執行方程式(1)之操作)判定預測性區塊。
視訊編碼器20基於色度區塊及預測性區塊產生殘餘區塊(208)。舉例而言,殘餘產生單元102判定色度區塊與預測性區塊之間的殘餘,且此殘餘區塊經變換、量化及熵編碼。視訊編碼器20傳信指示視訊解碼器30用以重建構色度區塊之殘餘區塊的資訊。
圖9為繪示線性模型(LM)預測解碼視訊資料之一項實例技術的流程圖。如所繪示,基於LM之解碼單元165判定對應於正經解碼之視訊資料之色度區塊的視訊資料之明度區塊(210)。舉例而言,預測處理單元152接收指示將圖像劃分為CTU、CU及PU之方式的資訊,且相應地建構明度區塊及色度區塊,基於LM之解碼單元165可自該等明度區塊及色度區塊判定哪一明度區塊對應於哪一色度區塊。另外,基於對哪一明度區塊對應於哪一色度區塊之判定,基於LM之解碼單元165亦可判定明度區塊之哪些明度樣本對應於色度區塊之哪些色度樣本。舉例而言,在4:2:0取樣中,四個明度樣本對應於一個色度樣本。
基於LM之解碼單元165基於色度區塊之特性自一組濾波器判定應用於明度區塊之濾波器(212)。舉例而言,基於LM之解碼單元165判定將第一濾波器(例如,二分接頭濾波器)應用於對應於位於圖像、圖塊、CU、PU或TU之界限(例如,左方界限)處之色度區塊之色度樣本的明度區塊之明度樣本,其中位於界限處之色度樣本為剛好位於界限上、鄰接界限且可能在一定數目之樣本內的樣本。基於LM之解碼單元165判定將第二濾波器(例如,六分接頭濾波器)應用於對應於不位於界限處之色度區塊之色度樣本的明度區塊之明度樣本。
基於LM之解碼單元165基於經判定濾波器降低取樣明度區塊 (214)。舉例而言,為基於經判定濾波器降低取樣明度區塊,基於LM之解碼單元165可針對對應於在圖像、圖塊、CU、PU或TU之界限(例如,左方界限)處之色度區塊之色度樣本的明度區塊之明度樣本執行方程式12之操作,且針對對應於不在圖像、CU、PU或TU之界限處之色度區塊之色度樣本的明度區塊之明度樣本執行方程式(13)之操作。
基於LM之解碼單元165可基於經降低取樣之明度區塊判定預測性區塊(216)。舉例而言,基於LM之解碼單元165可降低取樣鄰接該明度區塊之一或多個相鄰明度區塊。然而,可能不需要在所有實例中降低取樣相鄰區塊。基於LM之解碼單元165可基於經降低取樣之一或多個相鄰明度區塊及鄰接正經解碼之色度區塊的一或多個相鄰色度區塊判定第一參數(α)及第二參數(β)。基於LM之解碼單元165可基於經降低取樣之明度區塊及第一參數以及第二參數(例如,藉由執行方程式(1)之操作)來判定預測性區塊。
視訊解碼器30基於預測性區塊及殘餘區塊重建構色度區塊(218)。視訊解碼器30在熵解碼、逆量化及逆變換來自用於殘餘區塊之位元串流的資訊之後產生殘餘區塊。舉例而言,重建構單元158求和藉由LM預測產生之預測性區塊與自視訊編碼器20接收之殘餘區塊以重建構儲存於DPB 162中之經解碼色度區塊。
上文所描述之技術可藉由視訊編碼器20(圖1及圖2)及/或視訊解碼器30(圖1及圖3)執行,兩者通常可稱作視訊寫碼器。同樣地,視訊寫碼在適用時可指代視訊編碼或視訊解碼。另外,視訊編碼及視訊解碼一般可被稱作「處理」視訊資料。
應理解,本文所描述之所有技術可個別地或以組合方式使用。本發明包括可取決於特定因素(諸如,區塊大小、圖塊類型等)而改變的若干傳信方法。傳信或推斷語法元素中之此等變化可對編碼器及解碼器為先驗已知的或可在視訊參數集(VPS)、序列參數集(SPS)、圖像 參數集(PPS)、圖塊標頭中在圖像塊層級或其他處經明確地傳信。
應認識到,取決於實例,本文中所描述之技術中之任一者的某些動作或事件可以不同序列執行、可添加、合併或完全省略該等動作或事件(例如,並非所有所描述動作或事件必要於實踐該等技術)。此外,在某些實例中,可(例如)經由多線程處理、中斷處理或多個處理器同時而非依序執行動作或事件。另外,儘管出於清晰之目的,本發明之某些態樣經描述為藉由單一模組或單元執行,但應理解本發明之技術可藉由與視訊寫碼器相關聯之單元或模組之組合來執行。
雖然在上文描述技術的各種態樣之特定組合,但提供此等組合僅為了說明本發明中描述的技術之實例。因此,本發明之技術不應限於此等實例組合且可涵蓋本發明中描述之技術的各種態樣之任何可設想組合。
在一或多個實例中,所描述功能可以硬體、軟體、韌體或其任何組合來實施。若以軟體實施,則該等功能可作為一或多個指令或程式碼而在電腦可讀媒體上儲存或傳輸,且由基於硬體之處理單元執行。電腦可讀媒體可包括電腦可讀儲存媒體,其對應於有形媒體(諸如,資料儲存媒體)或通信媒體,包括(例如)根據通信協定促進電腦程式自一個位置至另一位置之傳送的任何媒體。以此方式,電腦可讀媒體大體可對應於(1)非暫時性的有形電腦可讀儲存媒體,或(2)諸如信號或載波之通信媒體。資料儲存媒體可為可藉由一或多個電腦或一或多個處理器存取以擷取指令、程式碼及/或資料結構以用於實施本發明中所描述之技術的任何可用媒體。電腦程式產品可包括電腦可讀媒體。
藉助於實例而非限制,此等電腦可讀儲存媒體可包含RAM、ROM、EEPROM、CD-ROM或其他光碟儲存器件、磁碟儲存器件或其他磁性儲存器件、快閃記憶體或可用以儲存呈指令或資料結構形式之 所要程式碼且可由電腦存取的任何其他媒體。又,將任何連接適當地稱為電腦可讀媒體。舉例而言,若使用同軸纜線、光纜、雙絞線、數位用戶線(DSL)或無線技術(諸如紅外線、無線電及微波)自網站、伺服器或其他遠端源傳輸指令,則同軸纜線、光纜、雙絞線、DSL或無線技術(諸如紅外線、無線電及微波)包括於媒體之定義中。然而,應理解,電腦可讀儲存媒體及資料儲存媒體不包括連接、載波、信號或其他暫時性媒體,而實情為係關於非暫時性有形儲存媒體。如本文所使用,磁碟及光碟包括緊密光碟(CD)、雷射光碟、光學光碟、數位多功能光碟(DVD)、軟碟及藍光光碟,其中磁碟通常以磁性方式再生資料,而光碟用雷射以光學方式再生資料。以上各者之組合亦應包括於電腦可讀媒體之範疇內。
可藉由諸如一或多個數位信號處理器(DSP)、通用微處理器、特殊應用積體電路(ASIC)、場可程式化邏輯陣列(FPGA)或其他等效積體或離散邏輯電路之一或多個處理器來執行指令。因此,如本文中所使用之術語「處理器」可指代前述結構或適用於實施本文中所描述之技術之任何其他結構中的任一者。另外,在一些態樣中,本文中所描述之功能性可提供於經組態用於編碼及解碼的專用硬體及/或軟體模組內,或併入於組合式編解碼器中。又,該等技術可完全實施於一或多個電路或邏輯元件中。
本發明之技術可以廣泛多種器件或裝置加以實施,包括無線手機、積體電路(IC)或IC之集合(例如,晶片集合)。在本發明中描述各種組件、模組或單元以強調經組態以執行所揭示技術之器件的功能態樣,但未必需要藉由不同硬體單元來實現。相反地,如上文所描述,各種單元可與合適的軟體及/或韌體一起組合在編解碼器硬體單元中或由互操作硬體單元之集合提供,硬件單元包括如上文所描述之一或多個處理器。
已描述各種實例。此等及其他實例屬於以下申請專利範圍之範疇內。
210‧‧‧區塊
212‧‧‧區塊
214‧‧‧區塊
216‧‧‧區塊
218‧‧‧區塊

Claims (47)

  1. 一種線性模型(LM)預測解碼視訊資料之方法,該方法包含:藉由一視訊解碼器以判定對應於正經解碼之該視訊資料之一色度(chroma)區塊的該視訊資料之一明度(luma)區塊;藉由該視訊解碼器以基於該色度區塊之一特性自一組濾波器判定應用於該明度區塊內部(internal)之明度樣本之一濾波器,其中判定該濾波器以應用包含:判定將一第一濾波器應用於對應於位於或接近(near)一界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本,其中該界限包含一圖像、一圖塊、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一者的一界限;及判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本;藉由該視訊解碼器以基於經判定之該濾波器降低取樣(downsampling)該明度區塊內部之該等明度樣本以產生一降低取樣之明度區塊;藉由該視訊解碼器以基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數;藉由該視訊解碼器以基於經降低取樣之該明度區塊及經判定之該等參數以判定一預測性區塊;及藉由該視訊解碼器以基於該預測性區塊及一殘餘區塊重建構該色度區塊。
  2. 如請求項1之方法,其中該界限包含一左方圖像界限、一左方圖 塊界限、一左方CU界限、一左方PU界限或一左方TU界限中之一者。
  3. 如請求項1之方法,其中該第一濾波器包含一二分接頭濾波器且該第二濾波器包含一六分接頭濾波器。
  4. 如請求項1之方法,其中基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數包含:降低取樣鄰接該明度區塊之該一或多個相鄰明度區塊;及基於經降低取樣之該一或多個相鄰明度區塊及鄰接該色度區塊之該一或多個相鄰色度區塊判定一第一參數及一第二參數;及其中判定該預測性區塊包含基於經降低取樣之該明度區塊及該第一參數及該第二參數判定該預測性區塊。
  5. 如請求項1之方法,其中該明度區塊係一第一明度區塊,且該色度區塊係一第一色度區塊,該方法進一步包含:在不同於該第一色度區塊之一第二色度區塊為一第一類型的一個例項(instance)中,基於該第二色度區塊屬於該第一類型而判定將一第三濾波器應用於不同於該第一明度區塊之一第二明度區塊;及在該第二色度區塊為一第二類型的另一例項中,基於該第二色度區塊屬於該第二類型而判定將一第四濾波器應用於該第二明度區塊。
  6. 如請求項1之方法,其中該明度區塊之一或多個明度樣本在一圖像、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一或多者外部,該方法進一步包含:用填充值填充在外部的該一或多個明度樣本之明度樣本值。
  7. 如請求項1之方法,其中該明度區塊包含一明度殘餘區塊,且其中該色度區塊包含一色度殘餘區塊。
  8. 如請求項1之方法,其中判定應用一第一濾波器於該明度區塊內部之明度樣本包含判定應用一第一濾波器於屬於(are of)該明度區塊之明度樣本。
  9. 如請求項1之方法,其中判定將一第一濾波器應用於對應於位於或接近一界限處之該區塊之色度樣本的該明度區塊內部之明度樣本包含判定將一第一濾波器應用於對應於最接近包括直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本。
  10. 如請求項1之方法,其中判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本包含判定將不同於該第一濾波器之一第二濾波器應用於對應於不是最接近包括不直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本。
  11. 一種線性模型(LM)預測編碼視訊資料之方法,該方法包含:藉由一視訊編碼器以判定對應於正經編碼之視訊資料之一色度區塊的該視訊資料之一明度區塊;藉由該視訊編碼器以基於該色度區塊之一特性自一組濾波器判定應用於該明度區塊內部之明度樣本之一濾波器,其中判定該濾波器以應用包含:判定將一第一濾波器應用於對應於位於或接近一界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本,其中該界限包含一圖像、一圖塊、一寫碼單元(CU)、一預測單元(PU) 或一變換單元(TU)中之一者的一界限;及判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本;藉由該視訊編碼器以基於經判定之該濾波器降低取樣該明度區塊內部之該等明度樣本以產生一降低取樣之明度區塊;藉由該視訊編碼器以基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數;藉由該視訊編碼器以基於經降低取樣之該明度區塊及經判定之該等參數以判定一預測性區塊;及藉由該視訊編碼器以基於該色度區塊及該預測性區塊產生一殘餘區塊。
  12. 如請求項11之方法,其中該界限包含一左方圖像界限、一左方圖塊界限、一左方CU界限、一左方PU界限或一左方TU界限中之一者。
  13. 如請求項11之方法,其中該第一濾波器包含一二分接頭濾波器且該第二濾波器包含一六分接頭濾波器。
  14. 如請求項11之方法,其中基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數包含:降低取樣鄰接該明度區塊之該一或多個相鄰明度區塊;及基於經降低取樣之該一或多個相鄰明度區塊及鄰接該色度區塊之該一或多個相鄰色度區塊判定一第一參數及一第二參數;及其中判定該預測性區塊包含基於經降低取樣之該明度區塊及 該第一參數及該第二參數判定該預測性區塊。
  15. 如請求項11之方法,其中該明度區塊係一第一明度區塊,且該色度區塊係一第一色度區塊,該方法進一步包含:在不同於該第一色度區塊之一第二色度區塊為一第一類型的一個例項中,基於該第二色度區塊屬於該第一類型而判定將一第三濾波器應用於不同於該第一明度區塊之一第二明度區塊;及在該第二色度區塊為一第二類型的另一例項中,基於該第二色度區塊屬於該第二類型而判定將一第四濾波器應用於該第二明度區塊。
  16. 如請求項11之方法,其中該明度區塊之一或多個明度樣本在一圖像、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一或多者外部,該方法進一步包含:用填充值填充在外部之該一或多個明度樣本的明度樣本值。
  17. 如請求項11之方法,其中該明度區塊包含一明度殘餘區塊,且其中該色度區塊包含一色度殘餘區塊。
  18. 如請求項11之方法,其中判定應用一第一濾波器於該明度區塊內部之明度樣本包含判定應用一第一濾波器於屬於該明度區塊之明度樣本。
  19. 如請求項11之方法,其中判定將一第一濾波器應用於對應於位於或接近一界限處之該區塊之色度樣本的該明度區塊內部之明度樣本包含判定將一第一濾波器應用於對應於最接近包括直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本;及 其中判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本包含判定將不同於該第一濾波器之一第二濾波器應用於對應於不是最接近包括不直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本。
  20. 一種用於線性模型(LM)預測解碼視訊資料之器件,該器件包含:一視訊資料記憶體,其經組態以儲存該視訊資料;及一視訊解碼器,其包含積體電路,該視訊解碼器經組態以:判定儲存於該視訊資料記憶體中對應於正經解碼之視訊資料之一色度區塊的該視訊資料之一明度區塊;基於該色度區塊之一特性自一組濾波器判定應用於該明度區塊內部之明度樣本之一濾波器,其中為判定該濾波器,該視訊解碼器經組態以:判定將一第一濾波器應用於對應於位於或接近一界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本,其中該界限包含一圖像、一圖塊、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一者的一界限;及判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本;基於經判定之該濾波器降低取樣該明度區塊內部之該等明度樣本以產生一降低取樣之明度區塊;基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數;基於經降低取樣之該明度區塊及經判定之該等參數以判定 一預測性區塊;及基於該預測性區塊及一殘餘區塊重建構該色度區塊。
  21. 如請求項20之器件,其中該界限包含一左方圖像界限、一左方圖塊界限、一左方CU界限、一左方PU界限或一左方TU界限中之一者。
  22. 如請求項20之器件,其中該第一濾波器包含一二分接頭濾波器且該第二濾波器包含一六分接頭濾波器。
  23. 如請求項20之器件,其中為基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數,該視訊解碼器經組態以:降低取樣鄰接該明度區塊之該一或多個相鄰明度區塊;及基於經降低取樣之該一或多個相鄰明度區塊及鄰接該色度區塊之該一或多個相鄰色度區塊判定一第一參數及一第二參數;及其中為判定該預測性區塊,該視訊解碼器經組態以基於經降低取樣之該明度區塊及該第一參數及該第二參數判定該預測性區塊。
  24. 如請求項20之器件,其中該明度區塊係一第一明度區塊,且該色度區塊係一第一色度區塊,且其中該視訊解碼器經組態以:在不同於該第一色度區塊之一第二色度區塊為一第一類型的一個例項中,基於該第二色度區塊屬於該第一類型而判定將一第三濾波器應用於不同於該第一明度區塊之一第二明度區塊;及在該第二色度區塊為一第二類型的另一例項中,基於該第二色度區塊屬於該第二類型而判定將一第四濾波器應用於該第二明度區塊。
  25. 如請求項20之器件,其中該明度區塊之一或多個明度樣本在一圖像、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一或多者外部,該視訊解碼器經組態以:用填充值填充在外部之該一或多個明度樣本的明度樣本值。
  26. 如請求項20之器件,其中該明度區塊包含一明度殘餘區塊,且其中該色度區塊包含一色度殘餘區塊。
  27. 如請求項20之器件,其中為判定應用一第一濾波器於該明度區塊內部之明度樣本,該該視訊解碼器經組態以判定應用一第一濾波器於屬於該明度區塊之明度樣本。
  28. 如請求項20之器件,其中為判定將一第一濾波器應用於對應於位於或接近一界限處之該區塊之色度樣本的該明度區塊內部之明度樣本,該該視訊解碼器經組態以判定將一第一濾波器應用於對應於最接近包括直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本。
  29. 如請求項20之器件,其中判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本,該該視訊解碼器經組態以判定將不同於該第一濾波器之一第二濾波器應用於對應於不是最接近包括不直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本。
  30. 一種用於線性模型(LM)預測編碼視訊資料之器件,該器件包含:一視訊資料記憶體,其經組態以儲存該視訊資料;及一視訊編碼器,其包含積體電路,該視訊編碼器經組態以:判定儲存於該視訊資料記憶體中對應於正經編碼之視訊資 料之一色度區塊的該視訊資料之一明度區塊;基於該色度區塊之一特性自一組濾波器判定應用於該明度區塊內部之明度樣本之一濾波器,其中為判定該濾波器,該視訊編碼器經組態以:判定將一第一濾波器應用於對應於位於或接近一界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本,其中該界限包含一圖像、一圖塊、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一者的一界限;及判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本;基於經判定之該濾波器降低取樣該明度區塊內部之該等明度樣本以產生一降低取樣之明度區塊;基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數;基於經降低取樣之該明度區塊及經判定之該等參數以判定一預測性區塊;及基於該色度區塊及該預測性區塊產生一殘餘區塊。
  31. 如請求項30之器件,其中該界限包含一左方圖像界限、一左方圖塊界限、一左方CU界限、一左方PU界限或一左方TU界限中之一者。
  32. 如請求項30之器件,其中該第一濾波器包含一二分接頭濾波器且該第二濾波器包含一六分接頭濾波器。
  33. 如請求項30之器件,其中為判定應用一第一濾波器於該明度區塊內部之明度樣本,該視訊編碼器經組態以判定應用一第一濾波器於屬於該明度區塊之明度樣本。
  34. 如請求項30之器件,其中為判定將一第一濾波器應用於對應於位於或接近一界限處之該區塊之色度樣本的該明度區塊內部之明度樣本,該視訊編碼器經組態以判定將一第一濾波器應用於對應於最接近包括直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本;及其中為判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本,該視訊編碼器經組態以判定將不同於該第一濾波器之一第二濾波器應用於對應於不是最接近包括不直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本。
  35. 一種用於線性模型(LM)預測解碼視訊資料之器件,該器件包含:用於判定對應於正經解碼之視訊資料之一色度區塊的該視訊資料之一明度區塊的構件;用於基於該色度區塊之一特性自一組濾波器判定應用於該明度區塊內部之明度樣本之一濾波器的構件,其中用於判定該濾波器以應用的構件包含:用於判定將一第一濾波器應用於對應於位於或接近一界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本,其中該界限包含一圖像、一圖塊、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一者的一界限的構件;及用於判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本的構件; 用於基於經判定之該濾波器降低取樣該明度區塊內部之該等明度樣本以產生一降低取樣之明度區塊的構件;用於基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數的構件;用於基於經降低取樣之該明度區塊及經判定之該等參數以判定一預測性區塊的構件;及用於基於該預測性區塊及一殘餘區塊重建構該色度區塊的構件。
  36. 如請求項35之器件,其中該界限包含一左方圖像界限、一左方圖塊界限、一左方CU界限、一左方PU界限或一左方TU界限中之一者。
  37. 如請求項35之器件,其中該第一濾波器包含一二分接頭濾波器且該第二濾波器包含一六分接頭濾波器。
  38. 如請求項35之器件,其中用於判定應用一第一濾波器於該明度區塊內部之明度樣本的構件包含用於判定應用一第一濾波器於屬於該明度區塊之明度樣本的構件。
  39. 如請求項35之器件,其中用於判定將一第一濾波器應用於對應於位於或接近一界限處之該區塊之色度樣本的該明度區塊內部之明度樣本的構件包含用於判定將一第一濾波器應用於對應於最接近包括直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本的構件。
  40. 如請求項35之器件,其中用於判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本的構件包含用於判定將不同於該第一濾波器之一第二濾波器應用於對應於不是最接近包括不直接在該界限上之色度樣本的該界限處之該區塊之色度樣 本的該明度區塊內部之明度樣本的構件。
  41. 一種用於線性模型(LM)預測編碼視訊資料之器件,該器件包含:用於判定對應於正經編碼之視訊資料之一色度區塊的該視訊資料之一明度區塊的構件;用於基於該色度區塊之一特性自一組濾波器判定應用於該明度區塊內部之明度樣本之一濾波器的構件,其中用於判定該濾波器以應用的構件包含:用於判定將一第一濾波器應用於對應於位於或接近(near)一界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本,其中該界限包含一圖像、一圖塊、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一者的一界限的構件;及用於判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本的構件;用於基於經判定之該濾波器降低取樣該明度區塊內部之該等明度樣本以產生一降低取樣之明度區塊的構件;用於基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數的構件;用於基於經降低取樣之該明度區塊及經判定之該等參數以判定一預測性區塊的構件;及用於基於該色度區塊及該預測性區塊產生一殘餘區塊的構件。
  42. 如請求項41之器件,其中該界限包含一左方圖像界限、一左方圖塊界限、一左方CU界限、一左方PU界限或一左方TU界限中之一者。
  43. 如請求項41之器件,其中該第一濾波器包含一二分接頭濾波器且該第二濾波器包含一六分接頭濾波器。
  44. 一種儲存指令之非暫時性之電腦可讀儲存媒體,該等指令在經執行時引起用於線性模型(LM)預測解碼視訊資料之一器件的一或多個處理器進行以下操作:判定對應於正經解碼之視訊資料之一色度區塊的該視訊資料之一明度區塊;基於該色度區塊之一特性自一組濾波器判定應用於該明度區塊內部之明度樣本之一濾波器,其中該等指令引起該一或多個處理器判定該濾波器以應用包含指令引起該一或多個處理器以:判定將一第一濾波器應用於對應於位於或接近(near)一界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本,其中該界限包含一圖像、一圖塊、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一者的一界限;及判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本;基於經判定之該濾波器降低取樣該明度區塊內部之該等明度樣本以產生一降低取樣之明度區塊;基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數;基於經降低取樣之該明度區塊及經判定之該等參數以判定一預測性區塊;及基於該預測性區塊及一殘餘區塊重建構該色度區塊。
  45. 如請求項44之非暫時性之電腦可讀儲存媒體,其中該等指令引 起該一或多個處理器判定應用一第一濾波器於該明度區塊內部之明度樣本包含指令引起該一或多個處理器判定應用一第一濾波器於屬於該明度區塊之明度樣本。
  46. 如請求項44之非暫時性之電腦可讀儲存媒體,其中該等指令引起該一或多個處理器判定將一第一濾波器應用於對應於位於或接近一界限處之該區塊之色度樣本的該明度區塊內部之明度樣本包含指令引起該一或多個處理器判定將一第一濾波器應用於對應於最接近包括直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本;及其中該等指令引起該一或多個處理器判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本包含指令引起該一或多個處理器判定將不同於該第一濾波器之一第二濾波器應用於對應於不是最接近包括不直接在該界限上之色度樣本的該界限處之該區塊之色度樣本的該明度區塊內部之明度樣本。
  47. 一種儲存指令之非暫時性之電腦可讀儲存媒體,該等指令在經執行時引起用於線性模型(LM)預測編碼視訊資料之一器件的一或多個處理器進行以下操作:判定對應於正經編碼之視訊資料之一色度區塊的該視訊資料之一明度區塊;基於該色度區塊之一特性自一組濾波器判定應用於該明度區塊內部之明度樣本之一濾波器,其中該等指令引起該一或多個處理器判定該濾波器以應用包含指令引起該一或多個處理器以:判定將一第一濾波器應用於對應於位於或接近(near)一界 限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本,其中該界限包含一圖像、一圖塊、一寫碼單元(CU)、一預測單元(PU)或一變換單元(TU)中之一者的一界限;及判定將不同於該第一濾波器之一第二濾波器應用於對應於不位於或接近該界限處之該色度區塊之色度樣本的該明度區塊內部之明度樣本;基於經判定之該濾波器降低取樣該明度區塊內部之該等明度樣本以產生一降低取樣之明度區塊;基於鄰接該明度區塊之一或多個相鄰明度區塊及鄰接該色度區塊之一或多個相鄰色度區塊以判定多個參數;基於經降低取樣之該明度區塊及經判定之該等參數以判定一預測性區塊;及基於該色度區塊及該預測性區塊產生一殘餘區塊。
TW105108629A 2015-03-20 2016-03-18 用於線性模型預測模式之降低取樣處理 TWI693821B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201562136344P 2015-03-20 2015-03-20
US62/136,344 2015-03-20
US15/073,171 2016-03-17
US15/073,171 US10455249B2 (en) 2015-03-20 2016-03-17 Downsampling process for linear model prediction mode

Publications (2)

Publication Number Publication Date
TW201639365A TW201639365A (zh) 2016-11-01
TWI693821B true TWI693821B (zh) 2020-05-11

Family

ID=56924068

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105108629A TWI693821B (zh) 2015-03-20 2016-03-18 用於線性模型預測模式之降低取樣處理

Country Status (10)

Country Link
US (1) US10455249B2 (zh)
EP (1) EP3272121B1 (zh)
JP (1) JP6827944B2 (zh)
KR (1) KR102520295B1 (zh)
CN (1) CN107409209B (zh)
AR (1) AR104854A1 (zh)
BR (1) BR112017020102B1 (zh)
CA (1) CA2976820C (zh)
TW (1) TWI693821B (zh)
WO (1) WO2016154008A1 (zh)

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9979960B2 (en) 2012-10-01 2018-05-22 Microsoft Technology Licensing, Llc Frame packing and unpacking between frames of chroma sampling formats with different chroma resolutions
US9854201B2 (en) 2015-01-16 2017-12-26 Microsoft Technology Licensing, Llc Dynamically updating quality to higher chroma sampling rate
ES2677193B1 (es) 2015-08-28 2019-06-19 Kt Corp Procedimiento y dispositivo para procesar señales de vídeo
US10200719B2 (en) 2015-11-25 2019-02-05 Qualcomm Incorporated Modification of transform coefficients for non-square transform units in video coding
WO2018066849A1 (ko) 2016-10-04 2018-04-12 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US10368080B2 (en) 2016-10-21 2019-07-30 Microsoft Technology Licensing, Llc Selective upsampling or refresh of chroma sample values
US10477240B2 (en) * 2016-12-19 2019-11-12 Qualcomm Incorporated Linear model prediction mode with sample accessing for video coding
EP3550842A4 (en) * 2016-12-30 2020-06-10 Huawei Technologies Co., Ltd. IMAGE FILTERING METHOD, APPARATUS AND DEVICE
WO2018230884A1 (ko) * 2017-06-12 2018-12-20 주식회사 케이티 비디오 신호 처리 방법 및 장치
WO2019004664A1 (ko) * 2017-06-26 2019-01-03 주식회사 케이티 비디오 신호 처리 방법 및 장치
CN109257605B (zh) * 2017-07-13 2021-11-19 华为技术有限公司 图像处理方法、设备及系统
CN109274969B (zh) * 2017-07-17 2020-12-22 华为技术有限公司 色度预测的方法和设备
JP2021005741A (ja) * 2017-09-14 2021-01-14 シャープ株式会社 画像符号化装置及び画像復号装置
GB2567249A (en) * 2017-10-09 2019-04-10 Canon Kk New sample sets and new down-sampling schemes for linear component sample prediction
CN116055748A (zh) * 2017-11-29 2023-05-02 韩国电子通信研究院 采用环内滤波的图像编码/解码方法和装置
CN108172168B (zh) * 2017-12-22 2019-11-15 深圳市华星光电半导体显示技术有限公司 一种补偿表压缩方法
US11722694B2 (en) * 2018-01-26 2023-08-08 Interdigital Vc Holdings, Inc. Method and apparatus for video encoding and decoding based on a linear model responsive to neighboring samples
CN113068027B (zh) 2018-04-01 2023-07-07 Oppo广东移动通信有限公司 使用帧内预测的图像编码/解码方法和装置
WO2019194496A1 (ko) * 2018-04-01 2019-10-10 엘지전자 주식회사 비디오 신호의 컬러 컴포넌트에 대한 병렬 처리 방법 및 이를 위한 장치
KR102481051B1 (ko) * 2018-04-24 2022-12-23 에이치에프아이 이노베이션 인크. 비디오 코딩에서의 제한된 선형 모델 파라미터 도출을 위한 방법 및 장치
CN117459730A (zh) 2018-05-14 2024-01-26 英迪股份有限公司 对图像进行解码和编码的方法、非暂态计算机可读介质
US20190364295A1 (en) * 2018-05-25 2019-11-28 Tencent America LLC Method and apparatus for video coding
KR101956756B1 (ko) 2018-06-12 2019-03-11 광운대학교 산학협력단 성분 간 참조 기반의 비디오 신호 처리 방법 및 장치
CN108769681B (zh) * 2018-06-20 2022-06-10 腾讯科技(深圳)有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN110650337B (zh) 2018-06-26 2022-04-01 中兴通讯股份有限公司 一种图像编码方法、解码方法、编码器、解码器及存储介质
TW202015409A (zh) * 2018-06-29 2020-04-16 財團法人工業技術研究院 影像資料解碼方法、影像資料解碼器、影像資料編碼方法與影像資料編碼器
CN116708835A (zh) * 2018-07-02 2023-09-05 Lg电子株式会社 编解码设备和数据发送设备
CN116405688A (zh) 2018-07-12 2023-07-07 华为技术有限公司 视频译码中使用交叉分量线性模型进行帧内预测
WO2020015433A1 (en) * 2018-07-15 2020-01-23 Huawei Technologies Co., Ltd. Method and apparatus for intra prediction using cross-component linear model
SI3815377T1 (sl) * 2018-07-16 2023-05-31 Huawei Technologies Co., Ltd. Kodirnik videa, dekodirnik videa in pripadajoča kodirni in dekodirni postopek
TWI814890B (zh) * 2018-08-17 2023-09-11 大陸商北京字節跳動網絡技術有限公司 簡化的跨分量預測
WO2020041306A1 (en) * 2018-08-21 2020-02-27 Futurewei Technologies, Inc. Intra prediction method and device
CN110858903B (zh) * 2018-08-22 2022-07-12 华为技术有限公司 色度块预测方法及装置
CN117896531A (zh) * 2018-09-05 2024-04-16 华为技术有限公司 色度块预测方法以及设备
CN110896478B (zh) * 2018-09-12 2023-02-17 北京字节跳动网络技术有限公司 交叉分量线性建模中的下采样
CN117834862A (zh) 2018-09-20 2024-04-05 Lg电子株式会社 图像解码、编码方法和数据的发送方法及存储介质
WO2020071617A1 (ko) * 2018-10-04 2020-04-09 엘지전자 주식회사 Cclm에 기반한 인트라 예측 방법 및 그 장치
CN116708839A (zh) * 2018-10-04 2023-09-05 Lg电子株式会社 图像编码/解码设备和用于发送图像的数据的设备
CN115334302A (zh) * 2018-10-05 2022-11-11 华为技术有限公司 帧内预测方法及设备
CN116847097A (zh) * 2018-10-08 2023-10-03 北京达佳互联信息技术有限公司 用于对视频信号进行解码的方法、计算装置以及存储介质
US10939118B2 (en) * 2018-10-26 2021-03-02 Mediatek Inc. Luma-based chroma intra-prediction method that utilizes down-sampled luma samples derived from weighting and associated luma-based chroma intra-prediction apparatus
KR20210089133A (ko) * 2018-11-06 2021-07-15 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인트라 예측에 대한 단순화된 파라미터 유도
US11197005B2 (en) 2018-11-08 2021-12-07 Qualcomm Incorporated Cross-component prediction for video coding
EP3886432B1 (en) * 2018-11-23 2024-01-03 Intellectual Discovery Co., Ltd. Inter-component prediction
HUE060910T2 (hu) * 2018-11-23 2023-04-28 Lg Electronics Inc Video kódolás és dekódolás CCLM predikció alapján
WO2020108591A1 (en) 2018-12-01 2020-06-04 Beijing Bytedance Network Technology Co., Ltd. Parameter derivation for intra prediction
CN117319670A (zh) * 2018-12-13 2023-12-29 华为技术有限公司 色度块的预测方法和装置
CN111083486A (zh) * 2019-01-03 2020-04-28 北京达佳互联信息技术有限公司 一种确定编码单元的色度信息的方法和装置
KR20210092308A (ko) * 2019-01-12 2021-07-23 엘지전자 주식회사 영상 코딩 시스템에서 cclm 예측을 사용하는 영상 디코딩 방법 및 그 장치
KR20230003269A (ko) * 2019-02-22 2023-01-05 엘지전자 주식회사 영상 코딩 시스템에서 cclm 예측에 기반한 영상 디코딩 방법 및 그 장치
CN117041552A (zh) * 2019-02-22 2023-11-10 华为技术有限公司 使用线性模型进行帧内预测的方法及装置
BR112021014853A2 (pt) * 2019-02-22 2021-10-05 Beijing Bytedance Network Technology Co., Ltd. Método e aparelho para processar e codificar dados de vídeo, e, mídias de armazenamento e registro legíveis por computador não transitórias
US20200288159A1 (en) 2019-03-08 2020-09-10 Qualcomm Incorporated Combined residual coding in video coding
US11889085B2 (en) * 2019-03-08 2024-01-30 Telefonaktiebolaget Lm Ericsson (Publ) Methods providing encoding/decoding of dependent/independent partitions and related devices
US11070812B2 (en) * 2019-03-12 2021-07-20 Qualcomm Incorporated Coefficient domain block differential pulse-code modulation in video coding
WO2020185888A1 (en) * 2019-03-12 2020-09-17 Beijing Dajia Internet Information Technology Co., Ltd. Video coding using multi-model linear model
CN113840144B (zh) * 2019-03-25 2023-06-02 Oppo广东移动通信有限公司 图像分量的预测方法、编码器、解码器及计算机存储介质
MX2021011662A (es) * 2019-03-25 2021-10-22 Guangdong Oppo Mobile Telecommunications Corp Ltd Procedimiento de prediccion de imagenes, codificador, descodificador y medio de almacenamiento.
WO2020226359A1 (ko) * 2019-05-03 2020-11-12 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN113632464B (zh) * 2019-05-21 2023-04-28 华为技术有限公司 分量间预测的方法和设备
US11330298B2 (en) * 2019-06-25 2022-05-10 Qualcomm Incorporated Simplified intra chroma mode coding in video coding
WO2021004445A1 (en) 2019-07-07 2021-01-14 Beijing Bytedance Network Technology Co., Ltd. Signaling of chroma residual scaling
BR112022000214A2 (pt) * 2019-07-11 2022-02-22 Samsung Electronics Co Ltd Método de decodificação de vídeo em
US20220295056A1 (en) * 2019-08-28 2022-09-15 Kt Corporation Video signal processing method and device
BR112022005293A2 (pt) 2019-09-19 2022-09-20 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeo, aparelho para processar dados de vídeo e meios de armazenamento e de gravação não transitórios legíveis por computador
EP4018659A4 (en) 2019-09-19 2022-11-30 Beijing Bytedance Network Technology Co., Ltd. SCALE WINDOW IN VIDEO CODING
KR20220070437A (ko) 2019-10-05 2022-05-31 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩 툴의 레벨 기반 시그널링
JP2022552512A (ja) 2019-10-12 2022-12-16 北京字節跳動網絡技術有限公司 ビデオコーディングにおける予測タイプシグナリング
JP7414980B2 (ja) 2019-10-13 2024-01-16 北京字節跳動網絡技術有限公司 参照ピクチャリサンプリングと映像コーディングツールとの間の相互作用
WO2021138354A1 (en) * 2019-12-30 2021-07-08 Beijing Dajia Internet Information Technology Co., Ltd. Cross component determination of chroma and luma components of video data
EP4122204A4 (en) * 2020-04-18 2024-02-14 Beijing Bytedance Network Tech Co Ltd SYNTAX FOR SIGNALING CROSS-COMPONENT VIDEO CODING

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120328013A1 (en) * 2011-06-24 2012-12-27 Madhukar Budagavi Luma-Based Chroma Intra-Prediction for Video Coding
US20130188705A1 (en) * 2012-01-24 2013-07-25 Futurewei Technologies, Inc. Simplification of LM Mode

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112013033707A2 (pt) * 2011-06-28 2017-06-27 Samsung Electronics Co Ltd método e aparelho de predição para componente de croma de imagem usando componente de luma de imagem
KR101588144B1 (ko) * 2011-07-12 2016-01-22 인텔 코포레이션 루마 기반 크로마 인트라 예측
JP2013110502A (ja) * 2011-11-18 2013-06-06 Sony Corp 画像処理装置及び画像処理方法
CN103918269B (zh) 2012-01-04 2017-08-01 联发科技(新加坡)私人有限公司 色度帧内预测方法及装置
EP2805496B1 (en) 2012-01-19 2016-12-21 Huawei Technologies Co., Ltd. Reference pixel reduction for intra lm prediction
US9313495B2 (en) * 2012-05-14 2016-04-12 Luca Rossato Encoding and decoding based on blending of sequences of samples along time

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120328013A1 (en) * 2011-06-24 2012-12-27 Madhukar Budagavi Luma-Based Chroma Intra-Prediction for Video Coding
US20130188705A1 (en) * 2012-01-24 2013-07-25 Futurewei Technologies, Inc. Simplification of LM Mode

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Edouard FRANCOIS et.al, " Use of chroma phase in LM mode", JCTVC-I0188, Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 9th Meeting: Geneva, CH, 27 April – 7 May 2012,
Yi-Jen Chiu et.al," CE6a: Modified down-sampling filter for LM mode of intra chroma prediction", JCTVC-G172, Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 7th Meeting: Geneva, CH, 21-30 November, 2011,
Yi-Jen Chiu et.al," CE6a: Modified down-sampling filter for LM mode of intra chroma prediction", JCTVC-G172, Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 7th Meeting: Geneva, CH, 21-30 November, 2011, Edouard FRANCOIS et.al, " Use of chroma phase in LM mode", JCTVC-I0188, Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 9th Meeting: Geneva, CH, 27 April – 7 May 2012 *

Also Published As

Publication number Publication date
JP2018514119A (ja) 2018-05-31
BR112017020102A2 (pt) 2018-05-29
BR112017020102B1 (pt) 2023-10-31
KR20170129750A (ko) 2017-11-27
EP3272121A1 (en) 2018-01-24
US10455249B2 (en) 2019-10-22
CA2976820A1 (en) 2016-09-29
CN107409209B (zh) 2020-11-10
AR104854A1 (es) 2017-08-23
EP3272121B1 (en) 2021-07-07
TW201639365A (zh) 2016-11-01
KR102520295B1 (ko) 2023-04-10
CN107409209A (zh) 2017-11-28
JP6827944B2 (ja) 2021-02-10
US20160277762A1 (en) 2016-09-22
CA2976820C (en) 2023-08-29
WO2016154008A1 (en) 2016-09-29

Similar Documents

Publication Publication Date Title
TWI693821B (zh) 用於線性模型預測模式之降低取樣處理
US10477240B2 (en) Linear model prediction mode with sample accessing for video coding
KR102431537B1 (ko) 루마 및 크로마 성분에 대한 ibc 전용 버퍼 및 디폴트 값 리프레싱을 사용하는 인코더, 디코더 및 대응하는 방법들
TWI705701B (zh) 於視訊寫碼中用於非正方形轉換單元之轉換係數之修改
CN107113436B (zh) 用于解码视频数据的方法和装置以及计算机可读存储媒体
EP3205092B1 (en) Intra block copy prediction restrictions for parallel processing
KR101977450B1 (ko) 팔레트 코딩 모드에서의 비디오 블록의 이스케이프 픽셀들의 양자화
US20140198846A1 (en) Device and method for scalable coding of video information
TW201633781A (zh) 用於視訊寫碼之跨組件預測削剪及適應性色彩轉換
JP7275270B2 (ja) エンコーダ、デコーダ、及びデブロッキングフィルタの境界強度導出の対応する方法
TW201515440A (zh) 多層內容脈絡中之影像塊及波前處理
TWI535273B (zh) 經組態以寫碼視訊資訊之設備及視訊寫碼裝置、編碼及解碼視訊資訊之方法與非暫態電腦可讀媒體
TWI669949B (zh) 用於色域可擴展性的3d色彩預測之信令位元深度值
JP7436646B2 (ja) ピクチャヘッダのシグナリングを簡略化するためのエンコーダ、デコーダ及び対応する方法
KR20210103572A (ko) 타일 구성 시그널링을 위한 인코더, 디코더 및 대응 방법
JP2023515189A (ja) スライス用のピクチャパーティション情報をシグナリングするためのデコーダ及び対応する方法
JP2023518453A (ja) エンコーダ、デコーダ、および対応する方法
JP2023508053A (ja) 符号化器、復号器、及びコーディング・ブロック・パーティショニング制限導出の方法