TWI784561B - 用於硬體實施的高效cclm參數導出方法 - Google Patents

用於硬體實施的高效cclm參數導出方法 Download PDF

Info

Publication number
TWI784561B
TWI784561B TW110120915A TW110120915A TWI784561B TW I784561 B TWI784561 B TW I784561B TW 110120915 A TW110120915 A TW 110120915A TW 110120915 A TW110120915 A TW 110120915A TW I784561 B TWI784561 B TW I784561B
Authority
TW
Taiwan
Prior art keywords
samples
cclm
chroma block
block
current
Prior art date
Application number
TW110120915A
Other languages
English (en)
Other versions
TW202143720A (zh
Inventor
崔璋元
許鎭
金昇煥
柳先美
李翎
崔情娥
Original Assignee
韓商Lg電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 韓商Lg電子股份有限公司 filed Critical 韓商Lg電子股份有限公司
Publication of TW202143720A publication Critical patent/TW202143720A/zh
Application granted granted Critical
Publication of TWI784561B publication Critical patent/TWI784561B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Communication Control (AREA)

Abstract

一種依據本揭示內容由解碼裝置所執行的視訊解碼方法包括以下步驟:導出複數個交叉分量線性模型(CCLM)預測模式中的一者作為該目前色度區塊的CCLM預測模式;基於該目前色度區塊的該CCLM預測模式、該目前色度區塊的大小、及特定值,來導出該目前色度區塊的相鄰色度樣本的樣本數;導出該樣本數的該等相鄰色度樣本;基於該等相鄰色度樣本及該等降取樣的相鄰亮度樣本來計算CCLM參數;基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本;及基於該等預測樣本針對該目前色度區塊產生重構的樣本,其中將該特定值導出為2。

Description

用於硬體實施的高效CCLM參數導出方法
本揭示內容係關於一種視訊編碼技術,且更特定言之係關於基於視訊編碼系統中的CCLM預測的視訊解碼方法及設備。
近來,在各種領域中對例如HD(高解析度)影像及UHD(超高解析度)影像的高解析度、高品質影像的需求不斷增長。因為影像資料具有高的解析度及高的品質,要傳送的資訊或位元的量相對於傳統的影像資料增加了。因此,在使用例如為常規的有線/無線寬頻線路的媒體來傳送影像資料或使用現有的儲存媒體來儲存影像資料時,其傳輸成本及儲存成本增加。
因此,需要高度高效的影像壓縮技術以供有效地傳送、儲存、及再生高解析度及高品質影像的資訊。
技術問題
本揭示內容提供了一種用於改善影像編碼效率的方法及設備。
本揭示內容也提供了一種用於改善圖框內預測(intra-prediction)效率的方法及設備。
本揭示內容也提供了一種用於基於交叉分量線性模型(CCLM)來改善圖框內預測效率的方法及設備。
本揭示內容也提供了包括複數個CCLM預測模式的CCLM預測的高效編碼及解碼方法、及用於執行該編碼及解碼方法的設備。
本揭示內容也提供了一種用於選定相鄰樣本以供導出複數個CCLM預測模式的線性模型參數的方法及設備。 技術解決方案
依據本揭示內容的一個實施例,提供了一種由解碼裝置所執行的視訊解碼方法。該方法包括以下步驟:獲得包括用於目前色度區塊的預測模式資訊的視訊資訊;導出複數個交叉分量線性模型(CCLM)預測模式中的一者作為該目前色度區塊的CCLM預測模式;基於該目前色度區塊的該CCLM預測模式、該目前色度區塊的大小、及特定值,來導出該目前色度區塊的相鄰色度樣本的樣本數;導出該樣本數的該等相鄰色度樣本;導出目前亮度區塊的降取樣的相鄰亮度樣本及降取樣的亮度樣本,其中該等相鄰亮度樣本與該等相鄰色度樣本對應;基於該等相鄰色度樣本及該等降取樣的相鄰亮度樣本來計算CCLM參數;基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本;及基於該等預測樣本針對該目前色度區塊產生重構的樣本,其中將該特定值導出為2。
依據本揭示案的另一實施例,提供了一種用於執行視訊解碼的解碼裝置。該解碼裝置包括:熵解碼器,用於獲得包括用於目前色度區塊的預測模式資訊的視訊資訊;預測器,用於進行以下步驟:導出複數個交叉分量線性模型(CCLM)預測模式中的一者作為該目前色度區塊的CCLM預測模式;基於該目前色度區塊的該CCLM預測模式、該目前色度區塊的大小、及特定值,來導出該目前色度區塊的相鄰色度樣本的樣本數;導出該樣本數的該等相鄰色度樣本;導出目前亮度區塊的降取樣的相鄰亮度樣本及降取樣的亮度樣本,其中該等相鄰亮度樣本與該等相鄰色度樣本對應;基於該等相鄰色度樣本及該等降取樣的相鄰亮度樣本來計算CCLM參數;基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本;及減法器,用於基於該等預測樣本針對該目前色度區塊產生重構的樣本,其中將該特定值導出為2。
依據本揭示內容的又另一個實施例,提供了一種由編碼裝置所執行的視訊編碼方法。該方法包括以下步驟:在複數個交叉分量線性模型(CCLM)預測模式之中決定CCLM預測模式;基於該目前色度區塊的該CCLM預測模式、該目前色度區塊的大小、及特定值,來導出該目前色度區塊的相鄰色度樣本的樣本數;導出該樣本數的該等相鄰色度樣本;導出目前亮度區塊的降取樣的相鄰亮度樣本及降取樣的亮度樣本,其中該等相鄰亮度樣本與該等相鄰色度樣本對應;基於該等相鄰色度樣本及該等降取樣的相鄰亮度樣本來計算CCLM參數;基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本;及對包括用於該目前色度區塊的預測模式資訊的視訊資訊進行編碼,其中將該特定值導出為2。
依據本揭示內容的又另一個實施例,提供了一種視訊編碼裝置。該編碼裝置包括:預測器,用於進行以下步驟:在複數個交叉分量線性模型(CCLM)預測模式之中決定CCLM預測模式;基於該目前色度區塊的該CCLM預測模式、該目前色度區塊的大小、及特定值,來導出該目前色度區塊的相鄰色度樣本的樣本數;導出該樣本數的該等相鄰色度樣本;導出目前亮度區塊的降取樣的相鄰亮度樣本及降取樣的亮度樣本,其中該等相鄰亮度樣本與該等相鄰色度樣本對應;基於該等相鄰色度樣本及該等降取樣的相鄰亮度樣本來導出CCLM參數;基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本;及熵編碼器,用於對包括用於該目前色度區塊的預測模式資訊的視訊資訊進行編碼,其中將該特定值導出為2。 有利的效果
依據本揭示內容,可以改善整體的影像/視訊壓縮效率。
依據本揭示內容,可以改善圖框內預測的效率。
依據本揭示內容,可以藉由基於CCLM執行圖框內預測來改善影像編碼效率。
依據本揭示內容,可以改善圖框內預測的效率,其基於包括複數個LM模式的CCLM,即多向線性模型(MDLM)。
依據本揭示內容,將為了導出執行在具有大的大小的色度區塊中的多向線性模型(MDLM)的線性模型參數所選定的相鄰樣本數限制於特定的數量,且因此可以減少圖框內預測複雜度。
可以用各種形式修改本揭示內容,且本揭示內容的具體實施例將描述及繪示在附圖中。然而,實施例不旨在限制本揭示內容。以下說明中所使用的用語僅用來描述具體實施例,但不旨在限制本揭示內容。單數的詞語包括了複數的詞語,只要清楚地以不同的方式理解該詞語。例如為「包括」及「具有」的用語旨在指示,以下說明中所使用的特徵、數量、步驟、操作、構件、元素、或上述項目的組合存在,且應因此了解,不排除一或更多個不同特徵、數量、步驟、操作、構件、元素、或上述項目的組合的存在或添加的可能性。
同時,為了便於解釋不同的具體功能,本揭示內容中所描述的附圖中的構件是獨立繪製的,且並不意味著,該等構件是由獨立的硬體或獨立的軟體實施的。例如,可以結合該等構件中的二或更多個構件以形成單個構件,或可以將一個構件分成複數個構件。在不脫離本揭示內容的概念的情況下,結合及/或分割構件的實施例屬於本揭示內容。
在下文中,將參照附圖來詳細描述本揭示內容的實施例。此外,在所有附圖內使用類似的參考標號來指示類似的構件,且將省略對於類似構件的相同說明。
圖1簡要地繪示了視訊/影像編碼設備的示例,本揭示內容的實施例可應用於該設備。
參照圖1,視訊/影像編碼系統可以包括第一設備(來源設備)及第二設備(接收設備)。來源設備可以經由數位儲存媒體或網路向接收設備遞送呈檔案或串流的形式的編碼過的視訊/影像資訊或資料。
來源設備可以包括視訊源、編碼裝置、及傳送器。接收設備可以包括接收器、解碼裝置、及呈現器。編碼裝置可以稱為視訊/影像編碼裝置,且解碼裝置可以稱為視訊/影像解碼裝置。可以將傳送器包括在編碼裝置中。可以將接收器包括在解碼裝置中。呈現器可以包括顯示器,且可以將顯示器配置為單獨的設備或外部元件。
視訊源可以經由捕捉、合成、或產生視訊/影像的過程來獲取視訊/影像。視訊源可以包括視訊/影像捕捉設備及/或視訊/影像產生設備。視訊/影像捕捉設備可以包括例如一或更多個攝影機、包括先前捕捉的視訊/影像的視訊/影像存檔等等。視訊/影像產生設備可以包括例如電腦、平板電腦、及智慧型手機,且可以(電子地)產生視訊/影像。例如,可以經由電腦等等產生虛擬視訊/影像。在此情況下,可以由產生相關資料的過程替換視訊/影像捕捉過程。
編碼裝置可以對輸入視訊/影像進行編碼。編碼裝置可以為了壓縮及編碼效率執行一系列程序,例如預測、變換、及量化。可以用位元串流的形式輸出編碼過的資料(編碼過的視訊/影像資訊)。
傳送器可以用檔案或串流的形式經由數位儲存媒體或網路向接收設備的接收器傳送用位元串流的形式輸出的編碼過的影像/影像資訊資料。數位儲存媒體可以包括各種儲存媒體,例如USB、SD、CD、DVD、藍光、HDD、SSD等等。傳送器可以包括用於經由預定的檔案格式來產生媒體檔案的構件,且可以包括用於經由廣播/通訊網路進行傳輸的構件。接收器可以接收/抽取位元串流,且向解碼裝置傳送接收到的位元串流。
解碼裝置可以藉由與編碼裝置的操作對應的一系列程序(例如去量化、逆變換、及預測)對視訊/影像進行解碼。
呈現器可以呈現解碼過的視訊/影像。可以經由顯示器顯示呈現的視訊/影像。
此文件與視訊/影像編碼相關。例如,可以將此文件中所揭露的方法/實施例應用於通用視訊編碼(VVC)、EVC(基本視訊編碼)標準、AOMedia Video 1(AV1)標準、第2代音訊視訊編碼標準(AVS2)、或下一代視訊/影像編碼標準(例如H.267或H.268等等)中所揭露的方法。
此文件呈現了視訊/影像編碼的各種實施例,且除非另有提及,否則該等實施例可以彼此結合執行。
在此文件中,視訊可以指隨著時間推移的一系列影像。圖片(picture)一般指表示特定時間區中的一個影像的單元,且切片/圖塊是在編碼中構成圖片的一部分的單元。切片/圖塊可以包括一或更多個編碼樹單元(CTU)。一個圖片可以由一或更多個切片/圖塊(tile)組成。一個圖片可以由一或更多個圖塊組所組成。一個圖塊組可以包括一或更多個圖塊。磚塊(brick)可以表示圖片中的圖塊內的矩形CTU列區域。可以將圖塊劃分成多個磚塊,該等磚塊中的每個磚塊均由圖塊內的一或更多個CTU列組成。未劃分成多個磚塊的圖塊也可以稱為磚塊。磚塊掃描是劃分圖片的CTU的特定順序排序,其中該等CTU在一個磚塊中的CTU柵格掃描中連續排序,一個圖塊內的磚塊在該圖塊的該等磚塊的柵格掃描中連續排序,且一個圖片中的圖塊在該圖片的該等圖塊的柵格掃描中連續排序。圖塊是圖片中的特定圖塊行及特定圖塊列內的CTU的矩形區域。圖塊行是矩形CTU區域,該矩形CTU區域具有與圖片的高度相等的高度及由圖片參數集中的語法元素所指定的寬度。圖塊列是矩形CTU區域,該矩形CTU具有由圖片參數集中的語法元素所指定的高度及與圖片的寬度相等的寬度。圖塊掃描是劃分圖片的CTU的特定順序排序,其中該等CTU在一個圖塊中的CTU柵格掃描中連續排序,而一個圖片中的圖塊在該圖片的該等圖塊中的柵格掃描中連續排序。切片包括可以唯一地包含在單個NAL單元中的圖片的整數個磚塊。切片可以由以下項目中的任一者組成:多個完整的圖塊,或只有一個圖塊的連續的一系列完整磚塊。圖塊組及切片在此文件中可以可互換地使用。例如,在此文件中,可以將圖塊組/圖塊組標頭稱為切片/切片標頭。
像素或圖素可以意指構成一個圖片(或影像)的最小單元。並且,「樣本」可以用作與像素對應的用語。樣本可以一般表示像素或像素的值,且可以僅表示亮度分量的像素/像素值或僅表示色度分量的像素/像素值。
單元可以表示影像處理的基本單元。該單元可以包括圖片的特定區域及與該區域相關的資訊中的至少一者。一個單元可以包括一個亮度區塊及兩個色度(例如cb、cr)區塊。在一些情況下,單元可以與例如為區塊或區域的用語可互換地使用。在一般的情況下,M×N區塊可以包括樣本(或樣本陣列)或M行及N列的變換係數的集合(或陣列)。
在此文件中,應將用語「/」及「、」解譯為指示「及/或」。例如,詞語「A/B」可以意指「A及/或B」。進一步地,「A、B」可以意指「A及/或B」。進一步地,「A/B/C」可以意指「A、B、及/或C中的至少一者」。並且,「A/B/C」可以意指「A、B、及/或C中的至少一者」。
進一步地,在本文件中,應將用語「或」解譯為指示「及/或」。例如,詞語「A或B」可以1)僅包括A、2)僅包括B、及/或3)包括A及B。換言之,應將此文件中的用語「或」解譯為指示「附加性或替代性地」。
圖2是一張示意圖,繪示視訊/影像編碼裝置的配置,本文件的實施例可以應用於該裝置。在下文中,視訊編碼裝置可以包括影像編碼裝置。
參照圖2,編碼裝置200包括影像劃分器210、預測器220、殘差處理器230、及熵編碼器240、加法器250、過濾器260、及記憶體270。預測器220可以包括圖框間預測器(inter predictor)221及圖框內預測器(intra predictor)222。殘差處理器230可以包括變換器232、量化器233、去量化器234、及逆變換器235。殘差處理器230可以更包括減法器231。加法器250可以稱為重構器或重構區塊產生器。可以依據一個實施例藉由至少一個硬體元件(例如編碼器晶片組或處理器)來配置影像劃分器210、預測器220、殘差處理器230、熵編碼器240、加法器250、及過濾器260。此外,記憶體270可以包括解碼圖片緩衝器(DPB),或可以由數位儲存媒體配置。硬體元件可以更將記憶體270包括為內部/外部元件。
影像劃分器210可以將輸入到編碼裝置200的輸入影像(或圖片或訊框)劃分到一或更多個處理器中。例如,處理器可以稱為編碼單元(CU)。在此情況下,可以從編碼樹單元(CTU)或最大編碼單元(LCU)依據四叉樹二叉樹三叉樹(QTBTTT)結構遞歸地劃分編碼單元。例如,可以基於四叉樹結構、二叉樹結構、及/或三叉結構,來將一個編碼單元劃分成較深深度的複數個編碼單元。在此情況下,例如,可以首先應用四叉樹結構,然後可以應用二叉樹結構及/或三叉結構。或者,可以首先應用二叉樹結構。可以基於不再劃分的最終編碼單元來執行依據此文件的編碼程序。在此情況下,可以依據影像特性基於編碼效率來將最大編碼單元用作最終編碼單元,或若需要,可以將編碼單元遞歸地劃分成較深深度的多個編碼單元,且可以將具有最佳大小的編碼單元用作最終編碼單元。此處,編碼程序可以包括預測、變換、及重構的程序,這將在後面描述。舉另一個例子,處理器可以更包括預測單元(PU)或變換單元(TU)。在此情況下,可以從上述的最終編碼單元分離或劃分預測單元及變換單元。預測單元可以是樣本預測單元,且變換單元可以是用於導出變換係數的單元及/或用於根據該變換係數導出殘差訊號的單元。
在一些情況下,單元可以與例如為區塊或區域的用語可互換地使用。在一般的情況下,M×N區塊可以表示由M行及N列組成的一組樣本或變換係數。樣本可以一般表示像素或像素的值,可以僅表示亮度分量的像素/像素值或僅表示色度分量的像素/像素值。可以將樣本用作用於像素或圖素的與一個圖片(或影像)對應的用語。
在編碼裝置200中,將從圖框間預測器221或圖框內預測器222輸出的預測訊號(預測的區塊、預測的樣本陣列)從輸入影像訊號(原始區塊、原始樣本陣列)減去,以產生殘差訊號(殘差區塊、殘差樣本陣列),且將產生的殘差訊號傳送到變換器232。在此情況下,如圖所示,在編碼器200中用於將預測訊號(預測的區塊、預測的樣本陣列)從輸入影像訊號(原始區塊、原始樣本陣列)減去的單元可以稱為減法器231。預測器可以對待處理的區塊(在下文中稱為目前區塊)執行預測,及針對目前區塊產生包括預測樣本的預測的區塊。預測器可以決定圖框內預測或圖框間預測是否是在目前區塊或CU的基礎上應用。如之後在每個預測模式的說明中所描述的,預測器可以產生與預測相關的各種資訊(例如預測模式資訊),及向熵編碼器240傳送產生的資訊。可以在熵編碼器240中對關於預測的資訊進行編碼,且用位元串流的形式輸出。
圖框內預測器222可以藉由參考目前圖片中的樣本來預測目前區塊。依據預測模式,參考的樣本可以位於目前區塊的附近,或可以分開定位。在圖框內預測中,預測模式可以包括複數個非定向模式及複數個定向模式。非定向模式可以包括例如DC模式及平面模式。依據預測方向的詳細程度,定向模式可以包括例如33個定向預測模式或65個定向預測模式。然而,這只是一個示例,取決於設定,可以使用更多或更少的定向預測模式。圖框內預測器222可以藉由使用應用於相鄰區塊的預測模式,來決定應用於目前區塊的預測模式。
圖框間預測器221可以基於由參考圖片上的運動向量所指定的參考區塊(參考樣本陣列)針對目前區塊導出預測的區塊。此處,為了減少在圖框間預測模式中傳送的運動資訊量,基於相鄰區塊與目前區塊之間的運動資訊關聯,可以用區塊、子區塊、或樣本為單位預測運動資訊。運動資訊可以包括運動向量及參考圖片索引。運動資訊可以更包括圖框間預測方向(L0預測、L1預測、Bi預測等等)資訊。在圖框間預測的情況下,相鄰區塊可以包括存在於目前圖片中的空間性相鄰區塊及存在於參考圖片中的時間性相鄰區塊。包括參考區塊的參考圖片及包括時間性相鄰區塊的參考圖片可以是相同或不同的。時間性相鄰區塊可以稱為並置參考區塊、共同定位CU(colCU)等等,且包括時間性相鄰區塊的參考圖片可以稱為並置圖片(colPic)。例如,圖框間預測器221可以基於相鄰區塊配置運動資訊候選列表,及產生資訊,該資訊指示使用哪個候選者來導出目前區塊的運動向量及/或參考圖片索引。可以基於各種預測模式來執行圖框間預測。例如,在跳過模式及合併模式的情況下,圖框間預測器221可以將相鄰區塊的運動資訊用作目前區塊的運動資訊。在跳過模式中,與合併模式不同,可以不傳送殘差訊號。在運動向量預測(MVP)模式的情況下,可以將相鄰區塊的運動向量用作運動向量預測器,且可以藉由用訊號傳遞運動向量差來指示目前區塊的運動向量。
預測器220可以基於下文所述的各種預測方法來產生預測訊號。例如,預測器可以不僅應用圖框內預測或圖框間預測來預測一個區域,且還可以同時應用圖框內預測及圖框間預測。這可以稱為組合式圖框間和圖框內預測(CIIP)。此外,預測器可以基於圖框內區域複製(IBC)預測模式或調色板模式以用於區塊的預測。IBC預測模式或調色板模式可以用於遊戲等等的內容影像/視訊編碼,例如螢幕內容編碼(SCC)。IBC基本上在目前的圖片中執行預測,但可以與圖框間預測類似地執行,因為參考區塊在目前的圖片中導出。也就是說,IBC可以使用此文件中所描述的圖框間預測技術中的至少一者。可以將調色板模式認為是圖框內編碼或圖框內預測的示例。在應用調色板模式時,可以基於關於調色板表格及調色板索引的資訊用訊號傳遞圖片內的樣本值。
可以使用由預測器(包括圖框間預測器221及/或圖框內預測器222)所產生的預測訊號來產生重構的訊號或產生殘差訊號。變換器232可以藉由將變換技術應用於殘差訊號來產生變換係數。例如,變換技術可以包括以下項目中的至少一者:離散餘弦變換(DCT)、離散正弦變換(DST)、K-L(karhunen-loève)變換(KLT)、基於圖形的變換(GBT)、或有條件非線性變換(CNT)。此處,GBT意指在像素之間的關係資訊由圖形所表示時根據該圖形獲得的變換。CNT指的是基於使用所有先前重構的像素來產生的預測訊號產生的變換。此外,變換過程可以應用於具有相同大小的方形像素區塊,或可以應用於具有可變大小而非方形的區塊。
量化器233可以量化變換係數,及將該等變換係數傳送到熵編碼器240,且熵編碼器240可以對量化的訊號(關於量化的變換係數的資訊)進行編碼及輸出位元串流。關於量化的變換係數的資訊可以稱為殘差資訊。量化器233可以基於一定的係數掃描順序來將區塊類型量化的變換係數重新佈置成一維向量形式,及基於呈一維向量形式的量化的變換係數來產生關於量化的變換係數的資訊。可以產生關於變換係數的資訊。熵編碼器240可以執行各種編碼方法,舉例而言,例如指數哥倫布(exponential Golomb)、上下文自適應可變長度編碼(CAVLC)、上下文自適應二進制算術編碼(CABAC)等等。熵編碼器240可以一起或單獨地對量化的變換係數以外的視訊/影像重構所必需的資訊(例如語法元素的值等等)進行編碼。可以用位元串流的形式將編碼過的資訊(例如編碼過的視訊/影像資訊)傳送或儲存在NAL(網路抽象層)的單元中。視訊/影像資訊可以更包括關於各種參數集(例如調適參數集(APS)、圖片參數集(PPS)、序列參數集(SPS)、或視訊參數集(VPS))的資訊。此外,視訊/影像資訊可以更包括一般限制條件資訊。在此文件中,可以將從編碼裝置向解碼裝置傳送/用訊號傳遞的資訊及/或語法元素包括在視訊/圖片資訊中。可以經由上述的編碼程序對視訊/影像資訊進行編碼且將該視訊/影像資訊包括在位元串流中。可以在網路上傳送位元串流,或可以將位元串流儲存在數位儲存媒體中。網路可以包括廣播網路及/或通訊網路,且數位儲存媒體可以包括各種儲存媒體,例如USB、SD、CD、DVD、藍光、HDD、SSD等等。可以將傳送從熵編碼器240輸出的訊號的傳送器(未示出)及/或儲存該訊號的儲存單元(未示出)包括為編碼裝置200的內部/外部構件,且替代性地,可以將傳送器包括在熵編碼器240中。
從量化器233輸出的量化的變換係數可以用來產生預測訊號。例如,可以藉由經由去量化器234及逆變換器235向量化的變換係數應用去量化及逆變換來重構殘差訊號(殘差區塊或殘差樣本)。加法器250將重構的殘差訊號與從圖框間預測器221或圖框內預測器222輸出的預測訊號相加,以產生重構的訊號(重構的圖片、重構的區塊、重構的樣本陣列)。若不存在用於待處理區塊的殘差(例如應用跳過模式的情況),則可以將預測的區塊用作重構的區塊。加法器250可以稱為重構器或重構區塊產生器。產生的重構的訊號可以用於目前圖片中的待處理的下個區塊的圖框內預測,且可以用於如下文所述地經由過濾進行的下個圖片的圖框間預測。
同時,可以在圖片編碼及/或重構的期間應用利用色度縮放(LMCS)的亮度映射。
過濾器260可以藉由向重構的訊號應用過濾改善主觀/客觀的影像品質。例如,過濾器260可以藉由向重構的圖片應用各種過濾方法來產生修改過的重構的圖片,及將修改過的重構的圖片儲存在記憶體270(具體而言是記憶體270的DPB)中。各種過濾方法可以包括例如去區塊過濾、樣本自適應偏移、自適應迴路過濾器、雙邊過濾器等等。如之後在每個過濾方法的說明中所描述,過濾器260可以產生與過濾相關的各種資訊及向熵編碼器240傳送產生的資訊。可以藉由熵編碼器240對與過濾相關的資訊進行編碼,及用位元串流的形式輸出該資訊。
可以將傳送到記憶體270的修改過的重構的圖片在圖框間預測器221中用作參考圖片。在經由編碼裝置應用圖框間預測時,可以避免編碼裝置200與解碼裝置之間的預測失配,且可以改善編碼效率。
記憶體270 DPB的DPB可以儲存修改過的重構的圖片以供在圖框間預測器221中用作參考圖片。記憶體270可以儲存區塊的運動資訊,目前圖片中的運動資訊是根據該區塊導出(或編碼)的,及/或可以儲存已經重構的圖片中的區塊的運動資訊。可以將儲存的運動資訊傳送到圖框間預測器221,且用作空間性相鄰區塊的運動資訊或時間性相鄰區塊的運動資訊。記憶體270可以儲存目前圖片中的重構的區塊的重構的樣本,且可以向圖框內預測器222傳輸重構的樣本。
圖3是一張示意圖,繪示視訊/影像解碼裝置的配置,本文件的實施例可以應用於該裝置。
參照圖3,解碼裝置300可以包括熵解碼器310、殘差處理器320、預測器330、加法器340、過濾器350、記憶體360。預測器330可以包括圖框間預測器(inter predictor)331及圖框內預測器(intra predictor)332。殘差處理器320可以包括去量化器321及逆變換器321。可以依據一個實施例藉由硬體元件(例如解碼器晶片組或處理器)來配置熵解碼器310、殘差處理器320、預測器330、加法器340、及過濾器350。此外,記憶體360可以包括解碼圖片緩衝器(DPB),或可以由數位儲存媒體配置。硬體元件可以更將記憶體360包括為內部/外部元件。
在輸入包括視訊/影像資訊的位元串流時,解碼裝置300可以重構與一個過程對應的影像,在該過程中,在圖2的編碼裝置中處理視訊/影像資訊。例如,解碼裝置300可以基於從位元串流獲得的區塊劃分相關的資訊來導出單元/區塊。解碼裝置300可以使用編碼裝置中所應用的處理器來執行解碼。因此,解碼處理器可以例如是編碼單元,且可以從編碼樹單元或最大編碼單元依據四叉樹結構、二叉樹結構、及/或三叉樹結構來劃分編碼單元。可以根據編碼單元導出一或更多個變換單元。可以經由再生裝置再生經由解碼裝置300解碼及輸出的重構的影像訊號。
解碼裝置300可以接收用位元串流的形式從圖2的編碼裝置輸出的訊號,且可以經由熵解碼器310對接收到的訊號進行解碼。例如,熵解碼器310可以解析位元串流以導出影像重構(或圖片重構)所必需的資訊(例如視訊/影像資訊)。視訊/影像資訊可以更包括關於各種參數集(例如調適參數集(APS)、圖片參數集(PPS)、序列參數集(SPS)、或視訊參數集(VPS))的資訊。此外,視訊/影像資訊可以更包括一般限制條件資訊。解碼裝置可以進一步基於關於參數集的資訊及/或一般限制條件資訊對圖片進行解碼。之後在此文件中所描述的用訊號傳遞的/接收到的資訊及/或語法元素可以被解碼可以對解碼程序進行解碼及從位元串流獲得。例如,熵解碼器310基於編碼方法(例如指數哥倫布編碼、CAVLC、或CABAC)來對位元串流中的資訊進行解碼,且輸出影像重構所需的語法元素及用於殘差的變換係數的量化值。更具體而言,CABAC熵解碼方法可以:接收與位元串流中的每個語法元素對應的二進制符號(bin);使用解碼目標語法元素資訊、解碼目標區塊的解碼資訊、或在先前階段中解碼的符號/二進制符號的資訊來決定上下文模型;及藉由依據所決定的上下文模型預測二進制符號的發生機率,來對二進制符號執行算術解碼;及產生與每個語法元素的值對應的符號。在此情況下,CABAC熵解碼方法可以藉由在決定上下文模型之後將解碼過的符號/二進制符號的資訊用於下個符號/二進制符號的上下文模型來更新上下文模型。可以將由熵解碼器310所解碼的資訊之中與預測相關的資訊提供到預測器(圖框間預測器332及圖框內預測器331),且可以將熵解碼操作在熵解碼器310中所對以執行的殘差值(即量化的變換係數及相關的參數資訊)輸入到殘差處理器320。殘差處理器320可以導出殘差訊號(殘差區塊、殘差樣本、殘差樣本陣列)。此外,可以將由熵解碼器310所解碼的資訊之中關於過濾的資訊提供到過濾器350。同時,可以進一步將用於接收從編碼裝置輸出的訊號的接收器(未示出)配置為解碼裝置300的內部/外部構件,或接收器可以是熵解碼器310的元件。同時,可以將依據此文件的解碼裝置稱為視訊/影像/圖片解碼裝置,且可以將該解碼裝置分類成資訊解碼器(視訊/影像/圖片資訊解碼器)及樣本解碼器(視訊/影像/圖片樣本解碼器)。資訊解碼器可以包括熵解碼器310,且樣本解碼器可以包括以下項目中的至少一者:去量化器321、逆變換器322、加法器340、過濾器350、記憶體360、圖框間預測器332、及圖框內預測器331。
去量化器321可以對量化的變換係數進行去量化且輸出變換係數。去量化器321可以用二維區塊的形式重新佈置量化的變換係數。在此情況下,可以基於編碼裝置中所執行的係數掃描順序來執行重新佈置。去量化器321可以藉由使用量化參數(例如量化步驟大小資訊)來對量化的變換係數執行去量化,及獲得變換係數。
逆變換器322對變換係數進行逆變換以獲得殘差訊號(殘差區塊、殘差樣本陣列)。
預測器可以對目前區塊執行預測,且產生預測的區塊,該預測的區塊包括目前區塊的預測樣本。預測器可以基於關於從熵解碼器310輸出的預測的資訊,來決定是否向目前區塊應用圖框內預測或圖框間預測,且可以決定特定的圖框內/圖框間預測模式。
預測器320可以基於下文所述的各種預測方法來產生預測訊號。例如,預測器可以不僅應用圖框內預測或圖框間預測來預測一個區域,且還可以同時應用圖框內預測及圖框間預測。這可以稱為組合式圖框間和圖框內預測(CIIP)。此外,預測器可以基於圖框內區域複製(IBC)預測模式或調色板模式以用於區塊的預測。IBC預測模式或調色板模式可以用於遊戲等等的內容影像/視訊編碼,例如螢幕內容編碼(SCC)。IBC基本上在目前的圖片中執行預測,但可以與圖框間預測類似地執行,因為參考區塊在目前的圖片中導出。也就是說,IBC可以使用此文件中所描述的圖框間預測技術中的至少一者。可以將調色板模式認為是圖框內編碼或圖框內預測的示例。在應用調色板模式時,可以基於關於調色板表格及調色板索引的資訊用訊號傳遞圖片內的樣本值。
圖框內預測器331可以藉由參考目前圖片中的樣本來預測目前區塊。依據預測模式,參考的樣本可以位於目前區塊的附近,或可以分開定位。在圖框內預測中,預測模式可以包括複數個非定向模式及複數個定向模式。圖框內預測器331可以藉由使用應用於相鄰區塊的預測模式,來決定應用於目前區塊的預測模式。
圖框間預測器332可以基於由參考圖片上的運動向量所指定的參考區塊(參考樣本陣列)針對目前區塊導出預測的區塊。在此情況下,為了減少在圖框間預測模式中傳送的運動資訊量,基於相鄰區塊與目前區塊之間的運動資訊關聯,可以用區塊、子區塊、或樣本為單位預測運動資訊。運動資訊可以包括運動向量及參考圖片索引。運動資訊可以更包括圖框間預測方向(L0預測、L1預測、Bi預測等等)資訊。在圖框間預測的情況下,相鄰區塊可以包括存在於目前圖片中的空間性相鄰區塊及存在於參考圖片中的時間性相鄰區塊。例如,圖框間預測器332可以基於相鄰區塊來配置運動資訊候選列表,且基於接收到的候選選定資訊來導出目前區塊的運動向量及/或參考圖片索引。可以基於各種預測模式來執行圖框間預測,且關於預測的資訊可以包括指示用於目前區塊的圖框間預測模式的資訊。
加法器340可以藉由將獲得的殘差訊號與從預測器(包括圖框間預測器332及/或圖框內預測器331)輸出的預測訊號(預測的區塊、預測的樣本陣列)相加,來產生重構的訊號(重構的圖片、重構的區塊、重構的樣本陣列)。若不存在用於待處理區塊的殘差(例如在應用跳過模式時),則可以將預測的區塊用作重構的區塊。
加法器340可以稱為重構器或重構區塊產生器。產生的重構的訊號可以用於目前圖片中待處理的下個區塊的圖框內預測、可以經由如下文所述的過濾操作輸出、或可以用於下個圖片的圖框間預測。
同時,可以將利用色度縮放(LMCS)的亮度映射應用在圖片解碼過程中。
過濾器350可以藉由向重構的訊號應用過濾改善主觀/客觀的影像品質。例如,過濾器350可以藉由向重構的圖片應用各種過濾方法來產生修改過的重構的圖片,及將修改過的重構的圖片儲存在記憶體360(具體而言是記憶體360的DPB)中。各種過濾方法可以包括例如去區塊過濾、樣本自適應偏移、自適應迴路過濾器、雙邊過濾器等等。
可以將儲存在記憶體360的DPB中的(修改過的)重構的圖片在圖框間預測器332中用作參考圖片。記憶體360可以儲存區塊的運動資訊,目前圖片中的運動資訊是根據該區塊導出(或解碼)的,及/或可以儲存已經重構的圖片中的區塊的運動資訊。可以將儲存的運動資訊傳送到圖框間預測器260,以便用作空間性相鄰區塊的運動資訊或時間性相鄰區塊的運動資訊。記憶體360可以儲存目前圖片中的重構的區塊的重構的樣本,且向圖框內預測器331傳輸重構的樣本。
在本揭示內容中,編碼裝置200的過濾器260、圖框間預測器221、及圖框內預測器222中所描述的實施例可以與解碼裝置300的過濾器350、圖框間預測器332、及圖框內預測器331相同或分別應用為與過濾器350、圖框間預測器332、及圖框內預測器331對應。這也可以應用於單元332及圖框內預測器331。
同時,如上所述,在執行視訊編碼時,執行預測以增強壓縮效率。因此,可以產生包括目前區塊(即編碼目標區塊)的預測樣本的預測區塊。在此情況下,預測的區塊包括空間域(或像素域)中的預測樣本。在編碼裝置及解碼裝置中相同地導出預測區塊。編碼裝置可以藉由向解碼裝置用訊號傳遞關於原始區塊與預測的區塊(不是原始區塊本身的原始樣本值)之間的殘差的殘差資訊來改善影像編碼效率。解碼裝置可以基於殘差資訊來導出包括殘差樣本的殘差區塊、可以藉由將殘差區塊與預測區塊相加來產生包括重構的樣本的重構的區塊、且可以產生包括重構的區塊的重構的圖片。
可以經由變換和量化程序來產生殘差資訊。例如,編碼裝置可以導出原始區塊與預測的區塊之間的殘差區塊、可以藉由對包括在殘差區塊中的殘差樣本(殘差樣本陣列)執行變換程序來導出變換係數、可以藉由對變換係數執行量化程序來導出量化的變換係數、且可以向解碼裝置(經由位元串流)用訊號傳遞相關的殘差資訊。在此情況下,殘差資訊可以包括例如為以下項目的資訊:值資訊、位置資訊、變換方案、變換核函數(kernel)、及量化的變換係數的量化參數。解碼裝置可以基於殘差資訊來執行去量化/逆變換程序,且可以導出殘差樣本(或殘差區塊)。解碼裝置可以基於預測區塊及殘差區塊來產生重構的圖片。編碼裝置也可以藉由對量化的變換係數執行去量化/逆變換來導出殘差區塊以用於後續圖片的圖框間預測的參考,且可以基於殘差區塊來產生重構的圖片。
圖4繪示65個預測方向的圖框內定向模式。
參照圖4,可以基於具有左上對角預測方向的圖框內預測模式#34來分類具有水平定向的圖框內預測模式及具有垂直定向的圖框內預測模式。圖3中的H及V分別表示水平定向及垂直定向,且從-32到32的數字表示樣本網格位置上1/32單位的位移。圖框內預測模式#2到#33具有水平定向,且圖框內預測模式#34到#66具有垂直定向。圖框內預測模式#18及圖框內預測模式#50分別表示水平圖框內預測模式及垂直圖框內預測模式。圖框內預測模式#2可以稱為左下對角圖框內預測模式,圖框內預測模式#34可以稱為左上對角圖框內預測模式,且圖框內預測模式#66可以稱為右上對角圖框內預測模式。
圖5是用於描述依據一個實施例的導出目前的色度區塊的圖框內預測模式的過程的圖表。
在本揭示內容中,「色度(chroma)區塊」、「色度影像」等等可以表示色品(chrominance)區塊、色品影像等等的相同意義,且因此,可以共同使用色度及色品。同樣地,「亮度(luma)區塊」、「亮度影像」等等可以表示耀度(luminance)區塊、耀度影像等等的相同意義,且因此可以共同使用亮度及耀度。
在本揭示內容中,「目前色度區塊」可以意指是目前的編碼單元的目前區塊的色度分量區塊,且「目前亮度區塊」可以意指是目前的編碼單元的目前區塊的亮度分量區塊。因此,目前亮度區塊及目前色度區塊彼此對應。然而,目前亮度區塊及目前色度區塊的區塊格式及區塊數量不總是相同,而是可以視情況不同。在一些情況下,目前色度區塊可以與目前亮度區域對應,且在此情況下,目前亮度區域可以包括至少一個亮度區塊。
在本揭示內容中,「參考樣本模板」可以意指與目前色度區塊相鄰且用於預測目前色度區塊的一組參考樣本。可以預先界定參考樣本模板,或可以從編碼裝置200向解碼裝置300用訊號傳遞參考樣本模板的資訊。
參照圖5,與4x4區塊(其是目前色度區塊)相鄰的一條陰影線的一組樣本表示參考樣本模板。圖5中示出,參考樣本模板包括一條線的參考樣本,但與參考樣本模板對應的亮度區域中的參考樣本區域包括兩條線。
在一個實施例中,在聯合視訊探索小組(JVET)中所使用的聯合探索TEST模型(JEM)中執行色度影像的圖框內編碼時,可以使用交叉分量線性模型(CCLM)。CCLM是基於重構的亮度影像的像素值來預測色度影像的像素值的方法,其基於色度影像與亮度影像之間的高度關聯的性質。
Cb及Cr色度影像的CCLM預測可以基於以下等式。
[等式1]
Figure 02_image001
在本文中,predc (i, j)意指待預測的Cb或Cr色度影像,RecL ’(i, j)意指待重構且調整為色度區塊大小的亮度影像,且(i, j)意指像素的座標。在4:2:0的色彩格式中,因為亮度影像的大小是色度影像的大小的兩倍,所以應經由降取樣產生色度區塊大小的RecL ’,且因此要用在色度影像predc (i, j)中的亮度影像的像素也可以除了RecL (2i, 2j)以外還使用相鄰的像素。可以將predc (i, j)表示為降取樣的亮度樣本。此外,可以將α及β稱為線性模型或CCLM參數。詳細而言,α可以稱為縮放因子,且β可以稱為偏移。指示是否向目前區塊應用CCLM預測的預測模式資訊可以在編碼裝置中產生且傳送到解碼裝置,且可以在編碼裝置及解碼裝置中用相同的方式基於相鄰的重構的樣本(或模板)來計算CCLM參數。
同時,例如,可以如以下等式中所表示地藉由使用6個相鄰的像素導出predc (i, j)。
[等式2]
Figure 02_image003
此外,如圖3的陰影區域中所示,α及β表示Cb或Cr色度區塊相鄰模板與亮度區塊相鄰模板之間的交叉關聯及平均值差異,且如以下等式3表示α及β。
[等式3]
Figure 02_image005
此處,tL 意指與目前色度影像對應的亮度區塊的相鄰參考樣本,tC 意指目前應用編碼操作的目前色度區塊的相鄰參考樣本,且(i, j)意指像素的位置。此外,M(A)意指A像素的平均值。
同時,可以如下選定用於上述的CCLM預測的參數計算的樣本(即例如α及β)。
–在目前色度區塊是NxN大小的色度區塊的情況下,可以選定目前色度區塊的總共2N個(N個水平及N個垂直)的相鄰參考樣本對(亮度及色度)。
–在目前色度區塊是NxM大小或MxN大小(在本文中,N <= M)的色度區塊的情況下,可以選定目前色度區塊的總共2N個(N個水平及N個垂直)的相鄰參考樣本對。同時,因為M大於N(例如M = 2N或3N等等),所以在M個樣本之中,可以經由次取樣來選定N個樣本對。
或者,在基於複數個CCLM模式來執行CCLM預測的情況下(即在應用多向線性模型(MDLM)的情況下),可以如下選定用於參數計算的樣本。
–在目前色度區塊是應用現有CCLM預測(即線性模型_左上側(LM_LT)模式)的NxN大小的色度區塊的情況下,可以選定目前色度區塊的總共2N個(N個水平及N個垂直)的相鄰參考樣本對(亮度及色度)。此處,LM_LT模式也可以稱為線性模型_左上方(LM_LA)模式。
–在目前色度區塊是應用LM_LT模式的NxM大小或MxN大小(在本文中,N <= M)的色度區塊的情況下,可以選定目前色度區塊的總共2N個(N個水平及N個垂直)的相鄰參考樣本對。同時,因為M大於N(例如M = 2N或3N等等),所以在M個樣本之中,可以經由次取樣來選定N個樣本對。
–在目前色度區塊是應用MDLM(即除了LM_LT模式以外的CCLM預測模式)的NxM的色度區塊的情況下,可以向目前色度區塊應用線性模型_上側(LM_T)模式,且可以選定總共2N個上部的相鄰參考樣本對。此處,LM_T模式也可以稱為線性模型_上方(LM_A)模式。
–在目前色度區塊是應用MDLM(即除了LM_LT模式以外的CCLM預測模式)的MxN的色度區塊的情況下,可以向目前色度區塊應用線性模型_左側(LM_L)模式,且可以選定總共2N個左側的相鄰參考樣本對。
同時,MDLM可以表示基於在複數個CCLM預測模式之中選定的CCLM預測模式來執行的CCLM預測。該複數個CCLM預測模式可以包括LM_L模式、LM_T模式、及LM_LT模式。LM_T模式可以表示僅使用目前區塊的上側參考樣本來執行CCLM的CCLM預測模式,且LM_L模式可以表示僅使用目前區塊的左側參考樣本來執行CCLM的CCLM預測模式。此外,LM_LT模式可以表示與現有CCLM預測類似地使用目前區塊的上側參考樣本及左側參考樣本來執行CCLM的CCLM預測模式。下文將描述MDLM的詳細說明。
圖6繪示用於上述CCLM預測的參數計算的2N個參考樣本。參照圖6,示出了2N個參考樣本對,其導出以用於CCLM預測的參數計算。2N個參考樣本對可以包括與目前色度區塊相鄰的2N個參考樣本及與目前亮度區塊相鄰的2N個參考樣本。
如上所述,可以導出2N個樣本對,且在使用上述樣本對使用等式3來計算CCLM參數α及β的情況下,可能需要如以下表格1中所表示的次數運算。
[表格1]
運算 運算次數
乘法 2N+5
加法 8N-1
除法 2
參照以上的表格1,例如,在4x4大小的色度區塊的情況下,可能需要21次乘法運算及31次加法運算以供計算CCLM參數,且在32x32大小的色度區塊的情況下,可能需要133次乘法運算及255次加法運算以供計算CCLM參數。也就是說,隨著色度區塊的大小增加,計算CCLM參數的運算量快速地增加,這可以直接聯結到硬體實施的延遲問題。詳細而言,因為應經由解碼裝置中的計算前程導出CCLM參數,所以運算量可能聯結到解碼裝置的硬體實施的延遲問題及實施成本的增加。
同時,在VTM 3.0中,可以藉由使用兩個亮度及色度樣本對的變化傾斜(variation inclination)來計算CCLM參數以減少計算α及β時的乘法及加法運算。例如,可以藉由以下等式來計算CCLM參數。
[等式4]
Figure 02_image007
在本文中,(xA , yA )可以表示以下樣本值:亮度樣本yA ,其亮度值在用於計算CCLM參數的目前區塊的相鄰參考樣本之中最小;及色度樣本xA ,其是一對亮度樣本;且(xB , yB )可以表示以下樣本值:亮度樣本yB ,其亮度值在用於計算CCLM參數的目前區塊的相鄰的參考樣本之中最大;及色度樣本xB ,其是一對亮度樣本。也就是說,換言之,yA 可以表示亮度值在目前區塊的相鄰參考樣本之中最小的亮度樣本,xA 可以表示是一對亮度樣本yA 的色度樣本,yB 可以表示亮度值在目前區塊的相鄰參考樣本之中最大的亮度樣本,且xB 可以表示是一對亮度樣本yB 的色度樣本。
[表格2]
Figure 02_image009
以上的表格2繪示由簡化的計算方法所導出的CCLM參數。
在藉由使用上述等式來計算CCLM參數時,存在以下優點:與現有方法相比,可以顯著減少乘法及加法的運算量,但因為應在目前區塊的相鄰的亮度樣本之中決定最小值及最大值,所以添加了比較運算。也就是說,為了決定2N個相鄰樣本中的樣本最小值及最大值,需要4N次比較運算,且添加比較運算可能造成硬體實施的延遲。
此外,在執行CCLM預測時,可以執行VTM 3.0中所採用的多向LM(MDLM)。
圖7繪示LM_A(線性模型_上方)模式及LM_L(線性模型_左側)模式。編碼裝置及解碼裝置可以執行應用LM_A模式及LM_L模式的CCLM預測。LM_A模式可以表示用於藉由僅使用目前區塊的上側參考樣本來執行CCLM的CCLM預測模式。在此情況下,如圖7中所示,可以基於上側參考樣本來執行CCLM預測,該等上側參考樣本向右側延伸達現有CCLM預測中的上側參考樣本的兩倍。LM_A模式也可以稱為線性模型_上側(LM_T)模式。進一步地,LM_L模式可以表示用於藉由僅使用目前區塊的左側參考樣本來執行CCLM的CCLM預測模式。在此情況下,如圖7中所示,可以基於左側參考樣本來執行CCLM預測,該等左側參考樣本向下側延伸達現有CCLM預測中的左側參考樣本的兩倍。同時,可以將基於現有CCLM預測(即目前區塊的上側參考樣本及左側參考樣本)來執行CCLM預測的模式表示為LM_LA模式或LM_LT模式。可以藉由使用上述的兩個亮度及色度樣本對的變化傾斜來計算包括複數個CCLM預測模式的MDLM中的參數α及β。因此,在計算MDLM的參數時需要許多比較運算,且添加比較運算可能造成硬體實施的延遲。詳細而言,在經由使用上述2N個樣本對的等式4來計算CCLM參數α及β的情況下,需要4N次比較運算。也就是說,在4x4的色度區塊的情況下,需要16次比較運算以供計算CCLM參數,且在32x32的色度區塊的情況下,需要128次比較運算以供計算CCLM參數。也就是說,隨著色度區塊的大小增加,計算CCLM參數的運算量快速地增加,這可以直接聯結到硬體實施的延遲問題。詳細而言,因為應經由解碼裝置中的計算前程導出CCLM參數,所以比較運算的添加可能聯結到解碼裝置的硬體實施的延遲問題及實施成本的增加。
因此,需要減少延遲的方法,且因此,本揭示內容提出了用於減少導出CCLM參數的運算複雜度的實施例,且經由此實施例減少了硬體成本和複雜度及解碼程序的時間。
本實施例可以減少導出CCLM參數的運算複雜度,且經由本實施例可以減少硬體成本和複雜度及解碼程序的時間。
舉例而言,為了解決上述CCLM參數運算量隨著色度區塊大小增加而增加的問題,可以提出用於藉由在如下文所述地配置相鄰樣本選定上限Nth 之後,選定色度區塊相鄰像素來計算CCLM參數的實施例。也可以將Nth 表示為最大相鄰樣本數。例如,可以將Nth 設定為2、4、8、或16。
依據本實施例的CCLM參數計算程序可以如下述。
–在目前色度區塊是NxN大小且Nth >= N的色度區塊的情況下,可以選定目前色度區塊的總共2N個(N個水平及N個垂直)的相鄰參考樣本對。
–在目前色度區塊是NxN大小且Nth < N的色度區塊的情況下,可以選定目前色度區塊的總共2*Nth 個(2*Nth 個水平及2*Nth 個垂直)的相鄰參考樣本對。
–在目前色度區塊是NxM大小或MxN大小(在本文中,N <= M)且Nth >= N的色度區塊的情況下,可以選定目前色度區塊的總共2N個(N個水平及N個垂直)的相鄰參考樣本對。因為M大於N(例如M = 2N或3N等等),所以在M個樣本之中,可以經由次取樣來選定N個樣本對。
–在目前色度區塊是NxM大小或MxN大小(在本文中,N <= M)且Nth < N的色度區塊的情況下,可以選定目前色度區塊的總共2*Nth 個(2*Nth 個水平及2*Nth 個垂直)的相鄰參考樣本對。因為M大於N(例如M = 2N或3N等等),所以在M個樣本之中,可以經由次取樣來選定N個樣本對。
如上所述,依據本實施例,可以藉由設定Nth (其是選定的相鄰樣本數的最大數量)來限制用於CCLM參數計算的相鄰參考樣本數,且經由此操作,即使色度區塊的大小巨大,也可以經由相對較少的計算來計算CCLM參數。
此外,在將Nth 設定為相對較小的數量(例如4或8)的情況下,在CCLM參數計算的硬體實施中,可以避免最壞情況的運算(例如32x32大小的色度區塊),且因此,與最壞的情況相比,可以減少所需的硬體閘數量,且經由這樣,也存在著減少硬體實施成本的效果。
例如,在Nth 是2、4、及8的情況下,可以將一定色度區塊大小的CCLM參數計算量表示為以下表格。
[表格3]
區塊大小 運算次數(乘法及加法)
初始 CCLM 提議方法 (Nth =2) 提議方法 (Nth =4) 提議方法 (Nth =8)
N=2 24 24 24 24
N=4 44 24 44 44
N=8 84 24 44 84
N=16 164 24 44 84
N=32 324 24 44 84
同時,可以在編碼裝置及解碼裝置中將Nth 導出作為預定值而不需要傳送表示Nth 的額外資訊。或者,可以用編碼單元(CU)、切片、圖片、或序列為單位傳送表示Nth 的額外資訊,且可以基於表示Nth 的額外資訊來導出Nth 。可以在編碼裝置中產生表示Nth 的額外資訊及對該額外資訊進行編碼,且可以將該額外資訊傳送或用訊號傳遞到解碼裝置。在下文中,值Nth 的傳輸或訊號傳遞可以表示從編碼裝置向解碼裝置進行的表示Nth 的資訊的傳輸或訊號傳遞。
例如,在用CU單位傳送表示Nth 的額外資訊的情況下,在目前色度區塊的圖框內預測模式是CCLM模式時,如下文所述,可以提出一種用來解析語法元素cclm_reduced_sample_flag且執行CCLM參數計算程序的方法。cclm_reduced_sample_flag可以表示CCLM減少的樣本旗標的語法元素。
–在cclm_reduced_sample_flag為0(假)的情況下,經由現有的 CCLM相鄰樣本選定方法來執行CCLM參數計算。
–在cclm_reduced_sample_flag為1(真)的情況下,將Nth 設定為2,且經由上述的本實施例中所提出的相鄰樣本選定方法來執行CCLM參數計算。
或者,在用切片、圖片、或序列為單位傳送表示Nth 的額外資訊的情況下,如下文所述,可以基於經由高階語法(HLS)傳送的額外資訊來對Nth 值進行解碼。可以在編碼裝置中對表示Nth 的額外資訊進行編碼且將該額外資訊包括在位元串流中然後傳送。
例如,可以將經由切片標頭用訊號傳遞的額外資訊表示為以下表格。
[表格4]
Figure 02_image011
cclm_reduced_sample_num可以表示表示Nth 的額外資訊的語法元素。
或者,例如,可以將經由圖片參數集(PPS)用訊號傳遞的額外資訊表示為以下表格。
[表格5]
Figure 02_image013
或者,例如,可以將經由序列參數集(SPS)用訊號傳遞的額外資訊表示為以下表格。
[表格6]
Figure 02_image015
可以如以下表格中所表示地導出Nth 值(其基於經由切片標頭、PPS、或SPS來傳送的cclm_reduced_sample_num值(即藉由對cclm_reduced_sample_num進行解碼來導出的值)來導出)。
[表格7]
Figure 02_image017
例如,參照以上的表格7,可以基於cclm_reduced_sample_num來導出Nth 。在cclm_reduced_sample_num值為0的情況下,可以將Nth 導出為2,在cclm_reduced_sample_num值為1的情況下,可以將Nth 導出為4,在cclm_reduced_sample_num值為2的情況下,可以將Nth 導出為8,且在cclm_reduced_sample_num值為3的情況下,可以將Nth 導出為16。
同時,在用CU、切片、圖片、或序列為單位傳送表示Nth 的額外資訊的情況下,編碼裝置可以如下決定Nth 值且傳送表示Nth 值的表示Nth 的額外資訊。
-在用CU為單位傳送表示Nth 的額外資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式時,編碼裝置可以經由RDO決定兩個以下情況之間編碼效率良好的一方,且向解碼裝置傳送所決定的方法的資訊。
1)在編碼效率在經由現有CCLM參考樣本選定方法執行CCLM參數計算時良好的情況下,傳送值為0(假)的cclm_reduced_sample_flag。 2)在編碼效率在Nth 設定為2且經由本實施例中所提出的CCLM參考樣本選定方法執行CCLM參數計算時良好的情況下,傳送值為1(真)的cclm_reduced_sample_flag。
-或者,在用切片、圖片、或序列為單位傳送表示Nth 的額外資訊的情況下,編碼裝置可以添加上述如表格4、表格5、或表格6中所表示的高階語法(HLS),且傳送表示Nth 的額外資訊。編碼裝置可以藉由考慮輸入影像的大小或依據編碼目標位元率來配置Nth 值。
1)例如,在輸入影像是HD品質或更高的情況下,編碼裝置可以設定為Nth = 8,且在輸入影像是HD品質或更低的情況下,編碼裝置可以設定為Nth = 4。
2)在需要高品質的影像編碼的情況下,編碼裝置可以設定為Nth = 8,且在需要普通品質的影像編碼的情況下,編碼裝置可以設定為Nth = 2。
同時,如上述表格3中所表示,在使用本實施例中所提出的方法時,識別到,即使區塊大小增加,CCLM參數計算所需的運算量也不增加。舉例而言,在目前色度區塊大小為32x32的情況下,經由本實施例中所提出的方法(例如設定:Nth = 4),CCLM參數計算所需的運算量可以減少為86%。
以下表格可以表示Nth 為2的情況下的實驗結果資料。
[表格8]
Figure 02_image019
此外,以下表格可以表示Nth 為4的情況下的實驗結果資料。
[表格9]
Figure 02_image021
此外,以下表格可以表示Nth 為8的情況下的實驗結果資料。
[表格10]
Figure 02_image023
此外,以下表格可以表示Nth 為16的情況下的實驗結果資料。
[表格11]
Figure 02_image025
以上的表格8到表格11可以分別表示Nth 為2、4、8、及16的情況下的編碼效率及運算複雜度。
參照以上的表格8到表格11,識別到,即使在減少CCLM參數計算所需的運算量的情況下,編碼效率也不顯著改變。例如,參照表格9,在Nth 設定為4(Nth = 4)的情況下,每個分量的編碼效率為Y 0.04%、Cb 0.12%、及Cr 0.07%,這識別到,與不設定Nth 的情況相比,編碼效率不顯著改變,且編碼及解碼複雜度分別減少到97%及95%。
此外,參照表格10及表格11,在減少CCLM參數計算所需的運算量(即Nth = 8或16)的情況下,識別到,編碼效率變得較佳,且編碼及解碼複雜度減少。
本實施例中所提出的方法可以用於CCLM模式,該CCLM模式是用於色度分量的圖框內預測模式,且經由CCLM模式預測的色度區塊可以用於在編碼裝置中經由來自原始影像的差分來導出殘差影像或在解碼裝置中經由與殘差訊號相加來用於重構的影像。
圖8a及8b是用於描述依據一個實施例針對目前的色度區塊執行CCLM預測的程序的圖表。
參照圖8a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S800)。例如,可以如圖8b中所示的本實施例計算CCLM參數。
圖8b可以繪示計算CCLM參數的具體實施例。例如,參照圖8b,編碼裝置/解碼裝置可以針對目前色度區塊設定Nth (步驟S805)。Nth 可以是預定的值,或基於用於Nth 的額外資訊來導出。可以將Nth 設定為2、4、8、或16。
之後,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S810)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以決定N(目前區塊的寬度)是否大於Nth (步驟S815)。
在N大於Nth 的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S820)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S825)。
此外,在N不大於Nth 的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2N個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S830)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S825)。
同時,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S835)。此處,M可以表示大於N的值(N < M)。
之後,編碼裝置/解碼裝置決定N是否大於Nth (步驟S840)。
在N大於Nth 的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S845)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S825)。
此外,在N不大於Nth 的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2N個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S850)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S825)。
再次參照圖8a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S860)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
同時,在本揭示內容中,在導出CCLM參數時,可以提出與減少導出CCLM參數的運算複雜度的本實施例不同的實施例。
舉例而言,為了解決上述CCLM參數運算量隨著色度區塊大小增加而增加的問題,可以提出一個實施例,該實施例用於藉由自適應地將相鄰樣本選定上限Nth 配置為目前色度區塊的區塊大小及基於所配置的Nth 來選定目前色度區塊的相鄰像素,來計算CCLM參數。也可以將Nth 表示為最大相鄰樣本數。
例如,可以如下自適應地將Nth 配置為目前色度區塊的區塊大小。
–在NxM大小或MxN大小(此處N <= M)的目前色度區塊中N <= TH的情況下,配置:Nth = 2。
–在NxM大小或MxN大小(此處N <= M)的目前色度區塊中N > TH的情況下,配置:Nth = 4。
在此情況下,例如,取決於閾值TH,可以如下選定用於計算CCLM參數的參考樣本。
例如,在TH為4(TH = 4)的情況下,及在目前色度區塊的N為2或4的情況下,一個區塊側使用兩個樣本對,且可以計算CCLM參數,且在N為8、16、或32的情況下,一個區塊側使用四個樣本對,且可以計算CCLM參數。
此外,在TH為8(TH = 8)的情況下,一個區塊側使用兩個樣本對,且可以計算CCLM參數,且在N為16或32的情況下,一個區塊側使用四個樣本對,且可以計算CCLM參數。
如上所述,依據本實施例,Nth 被自適應地配置為目前色度區塊的區塊大小,可以選定針對區塊大小最佳化的樣本數。
例如,可以將依據現有CCLM參考樣本選定方法及本實施例的CCLM參數計算的運算量表示為以下表格。
[表格12]
Figure 02_image027
此處,N可以表示目前區塊的寬度及高度的最小值。參照以上的表格12,在使用本實施例中所提出的CCLM參考樣本選定方法的情況下,即使在區塊大小增加的情況下,CCLM參數計算所需的運算量也不增加。
同時,可以在編碼裝置及解碼裝置中將TH導出為預定值而不需要傳送表示TH的額外資訊。或者,可以用編碼單元(CU)、切片、圖片、或序列為單位傳送表示TH的額外資訊,且可以基於表示TH的額外資訊來導出TH。表示TH的額外資訊可以表示TH的值。
例如,在用CU單位傳送表示TH的額外資訊的情況下,在目前色度區塊的圖框內預測模式是CCLM模式時,如下文所述,可以提出一種用來解析語法元素cclm_reduced_sample_flag且執行CCLM參數計算程序的方法。cclm_reduced_sample_flag可以表示CCLM減少的樣本旗標的語法元素。
–在cclm_reduced_sample_flag為0(假)的情況下,針對所有區塊配置Nth = 4,且經由上述圖8中所提出的本實施例的相鄰樣本選定方法來執行CCLM參數計算。
–在cclm_reduced_sample_flag為1(真)的情況下,配置TH = 4,且經由上述的本實施例中所提出的相鄰樣本選定方法來執行CCLM參數計算。
或者,在用切片、圖片、或序列為單位傳送表示TH的額外資訊的情況下,如下文所述,可以基於經由高階語法(HLS)傳送的額外資訊來對TH值進行解碼。
例如,可以將經由切片標頭用訊號傳遞的額外資訊表示為以下表格。
[表格13]
Figure 02_image029
cclm_reduced_sample_threshold可以表示表示TH的額外資訊的語法元素。
或者,例如,可以將經由圖片參數集(PPS)用訊號傳遞的額外資訊表示為以下表格。
[表格14]
Figure 02_image031
或者,例如,可以將經由序列參數集(SPS)用訊號傳遞的額外資訊表示為以下表格。
[表格15]
Figure 02_image033
可以如以下表格中所表示地導出TH值(其基於經由切片標頭、PPS、或SPS來傳送的cclm_reduced_sample_threshold值(即藉由對cclm_reduced_sample_threshold進行解碼來導出的值)來導出)。
[表格16]
Figure 02_image035
例如,參照以上的表格16,可以基於cclm_reduced_sample_threshold來導出TH。在cclm_reduced_sample_threshold值為0的情況下,可以將TH導出為4,且在cclm_reduced_sample_threshold值為1的情況下,可以將TH導出為8。
同時,在編碼裝置及解碼裝置中將TH導出為預定值而不傳送單獨的額外資訊的情況下,編碼裝置可以基於預定的TH值如上述的本實施例針對CCLM預測執行CCLM參數計算。
或者,編碼裝置可以決定是否使用閾值TH,且可以如下向解碼裝置傳送表示是否使用TH及表示TH值的額外資訊的資訊。
-在用CU為單位傳送表示是否使用TH的資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式(即將CCLM預測應用於目前色度區塊)時,編碼裝置可以經由RDO決定兩個以下情況之間編碼效率良好的一方,且向解碼裝置傳送所決定的方法的資訊。
1)在編碼效率在針對所有區塊將Nth 設定為4且經由上述圖8中所提出的本實施例的參考樣本選定方法來執行CCLM參數計算時良好的情況下,傳送值為0(假)的cclm_reduced_sample_flag。
2)在編碼效率在TH設定為4且經由所提出的本實施例的參考樣本選定方法來執行CCLM參數計算時良好的情況下,傳送值為1(真)的cclm_reduced_sample_flag。
–或者,在用切片、圖片、或序列為單位傳送表示是否使用TH的資訊的情況下,編碼裝置可以添加上述如表格13、表格14、或表格15中所表示的高階語法(HLS),且傳送表示是否使用TH的資訊。編碼裝置可以藉由考慮輸入影像的大小或依據編碼目標位元率來配置TH的使用。
1)例如,在輸入影像是HD品質或更高的情況下,編碼裝置可以設定為TH = 8,且在輸入影像是HD品質或更低的情況下,編碼裝置可以設定為TH = 4。
2)在需要高品質的影像編碼的情況下,編碼裝置可以設定為TH = 8,且在需要普通品質的影像編碼的情況下,編碼裝置可以設定為TH = 4。
本實施例中所提出的方法可以用於CCLM模式,該CCLM模式是用於色度分量的圖框內預測模式,且經由CCLM模式預測的色度區塊可以用於在編碼裝置中經由來自原始影像的差分來導出殘差影像或在解碼裝置中經由與殘差訊號相加來用於重構的影像。
圖9a及9b是用於描述依據一個實施例針對目前的色度區塊執行CCLM預測的程序的圖表。
參照圖9a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S900)。例如,可以如圖9b中所示的本實施例計算CCLM參數。
圖9b可以繪示計算CCLM參數的具體實施例。例如,參照圖9b,編碼裝置/解碼裝置可以針對目前色度區塊設定TH(步驟S905)。TH可以是預定的值,或基於用於TH的額外資訊來導出。可以將TH設定為4或8。
之後,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S910)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以決定N(目前區塊的寬度)是否大於TH(步驟S915)。
在N大於TH的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S920)。此處,Nth 可以是4。也就是說,在N大於TH的情況下,Nth 可以是4。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S925)。
此外,在N不大於TH的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S930)。也就是說,在N不大於TH的情況下,Nth 可以是2。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S925)。
同時,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S935)。此處,M可以表示大於N的值(N < M)。
之後,編碼裝置/解碼裝置決定N是否大於TH(步驟S940)。
在N大於TH的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S945)。此處,Nth 可以是4。也就是說,在N大於TH的情況下,Nth 可以是4。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S925)。
此外,在N不大於TH的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S950)。此處,Nth 可以是2。也就是說,在N大於TH的情況下,Nth 可以是2。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S925)。
再次參照圖9a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S960)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
同時,在本揭示內容中,在導出CCLM參數時,可以提出與減少導出CCLM參數的運算複雜度的本實施例不同的實施例。
詳細而言,為了解決上述CCLM參數運算量隨著色度區塊大小增加而增加的問題,本實施例提出了自適應地配置像素選定上限Nth 的方法。此外,在N = 2的情況下(此處,N是色度區塊的寬度與高度之間的較小值),為了防止發生在針對2x2大小的色度區塊的CCLM預測中的最壞情況運算(在將CTU中的所有色度區塊分成2x2大小之後,針對所有色度區塊執行CCLM預測的情況),本實施例提出了自適應地配置Nth 的方法,且經由此方法,可以減少最壞情況下的CCLM參數計算的運算量達約40%。
例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法1(所提出的方法1)
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N <= 2的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N = 4的情況下,可以將Nth 設定為2(Nth = 2)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N > 4的情況下,可以將Nth 設定為4(Nth = 4)。
或者,例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法2(所提出的方法2)
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N <= 2的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N = 4的情況下,可以將Nth 設定為2(Nth = 2)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N = 8的情況下,可以將Nth 設定為4(Nth = 4)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N > 8的情況下,可以將Nth 設定為8(Nth = 8)。
或者,例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法3(所提出的方法3)
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N <= 2的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N > 2的情況下,可以將Nth 設定為2(Nth = 2)。
或者,例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法4(所提出的方法4)
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N <= 2的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N > 2的情況下,可以將Nth 設定為4(Nth = 4)。
本實施例中上述的方法1到方法4可以減少最壞情況的複雜度達約40%,且因為Nth 可以自適應地應用於每個色度區塊大小,所以編碼損失可以最小化。此外,例如,因為方法2可以用可變的方式應用高達8的Nth ,所以這可以適用於高品質的影像編碼。因為方法3及方法4可以將Nth 減少到4或2,所以可以顯著減少CCLM複雜度,且可以適用於低影像品質或中等影像品質。
如方法1到方法4中所述,依據本實施例,可以自適應地將Nth 配置為區塊大小,且經由這樣,可以選定用於導出最佳化的CCLM參數的參考樣本數。
編碼裝置/解碼裝置可以設定用於相鄰樣本選定的上限Nth ,然後藉由如上所述地選定色度區塊相鄰樣本來計算CCLM參數。
可以將在應用上述的本實施例的情況下依據色度區塊大小的CCLM參數計算量表示為以下表格。
[表格17]
Figure 02_image037
如表格17中所表示,在使用本實施例中所提出的方法的情況下,識別到,即使區塊大小增加,CCLM參數計算所需的運算量也不增加。
同時,依據本實施例,在不需要傳送額外資訊的情況下,可以在編碼裝置及解碼裝置中使用約定值,或可以用CU、切片、圖片、及序列為單位傳送是否使用所提出的方法及表示Nth 值的資訊。
例如,在用CU為單位使用表示是否使用所提出的方法的資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式時(即在將CCLM預測應用於目前色度區塊的情況下),可以解析cclm_reduced_sample_flag,且可以如下執行上述的本實施例。
–在cclm_reduced_sample_flag為0(假)的情況下,針對所有區塊配置Nth = 4,且經由上述圖8中所提出的本實施例的相鄰樣本選定方法來執行CCLM參數計算。
–在cclm_reduced_sample_flag為1(真)的情況下,經由上述本實施例的方法3來執行CCLM參數計算。
或者,在用切片、圖片、或序列為單位傳送表示所應用的方法的資訊的情況下,如下文所述,可以基於經由高階語法(HLS)來傳送的資訊來在方法1到方法4之中選定方法,且基於所選定的方法,可以計算CCLM參數。
例如,可以將經由切片標頭用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格18]
Figure 02_image039
cclm_reduced_sample_threshold可以表示表示所應用的方法的資訊的語法元素。
或者,例如,可以將經由圖片參數集(PPS)用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格19]
Figure 02_image041
或者,例如,可以將經由序列參數集(SPS)用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格20]
Figure 02_image043
可以如以下表格中所表示地導出基於經由切片標頭、PPS、或SPS傳送的cclm_reduced_sample_threshold值(即藉由對cclm_reduced_sample_threshold進行解碼來導出的值)來選定的方法。
[表格21]
Figure 02_image045
參照表格21,在cclm_reduced_sample_threshold值為0的情況下,可以將方法1選定為應用於目前色度區塊的方法,在cclm_reduced_sample_threshold值為1的情況下,可以將方法2選定為應用於目前色度區塊的方法,在cclm_reduced_sample_threshold值為2的情況下,可以將方法3選定為應用於目前色度區塊的方法,且在cclm_reduced_sample_threshold為3的情況下,可以將方法4選定為應用於目前色度區塊的方法。
本實施例中所提出的方法可以用於CCLM模式,該CCLM模式是用於色度分量的圖框內預測模式,且經由CCLM模式預測的色度區塊可以用於在編碼裝置中經由來自原始影像的差分來導出殘差影像或用於在解碼裝置中經由與殘差訊號相加來導出重構的影像。
同時,在用CU、切片、圖片、及序列為單位傳送表示方法中的一者的資訊的情況下,編碼裝置可以如下決定方法1到方法4中的一者且向解碼裝置傳送資訊。
-在用CU為單位傳送表示是否應用上述本實施例的方法的資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式(即將CCLM預測應用於目前色度區塊)時,編碼裝置可以經由RDO決定兩個以下情況之間編碼效率良好的一方,且向解碼裝置傳送所決定的方法的資訊。
1)在編碼效率在針對所有區塊將Nth 設定為4且經由上述圖8中所提出的本實施例的參考樣本選定方法來執行CCLM參數計算時良好的情況下,傳送值為0(假)的cclm_reduced_sample_flag。
2)在編碼效率在配置應用方法3且經由所提出的本實施例的參考樣本選定方法來執行CCLM參數計算時良好的情況下,傳送值為1(真)的cclm_reduced_sample_flag。
–或者,在用切片、圖片、或序列為單位傳送表示是否應用上述本實施例的方法的資訊的情況下,編碼裝置可以如上述的表格18、表格19、或表格20中所表示地添加高階語法(HLS),且傳送表示方法之中的一個方法的資訊。編碼裝置可以藉由考慮輸入影像的大小或依據編碼目標位元率來配置方法之中所應用的方法。
1)例如,在輸入影像為HD品質或更高的情況下,編碼裝置可以應用方法2(Nth = 1、2、4、或8),且在輸入影像為HD品質或更低的情況下,編碼裝置可以應用方法1(Nth = 1、2、或4)。
2)在需要高品質的影像編碼的情況下,編碼裝置可以應用方法2(Nth = 1、2、4、或8),且在需要普通品質的影像編碼的情況下,編碼裝置可以應用方法4(Nth = 1或4)。
本實施例中所提出的方法可以用於CCLM模式,該CCLM模式是用於色度分量的圖框內預測模式,且經由CCLM模式預測的色度區塊可以用於在編碼裝置中經由來自原始影像的差分來導出殘差影像或在解碼裝置中經由與殘差訊號相加來用於重構的影像。
圖10a及10b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法1導出的。
參照圖10a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S1000)。例如,可以如圖10b中所示的本實施例計算CCLM參數。
圖10b可以繪示計算CCLM參數的具體實施例。例如,參照圖10b,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S1005)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以將目前區塊的寬度或高度設定為N(步驟S1010),且決定N是否小於2(N < 2)(步驟S1015)。
或者,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S1020)。編碼裝置/解碼裝置決定N是否小於2(步驟S1015)。此處,M表示大於N的值(N < M)。
在N小於2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1025)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1030)。
同時,在N不小於2的情況下,編碼裝置/解碼裝置可以決定N是否為4或更小(N <= 4)(步驟S1035)。
在N為4或更小的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1040)。此處,Nth 可以是2。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1030)。
或者,在N大於4的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1045)。此處,Nth 可以是4(Nth = 4)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1030)。
再次參照圖10a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S1050)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖11a及11b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法2導出的。
參照圖11a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S1100)。例如,可以如圖11b中所示的本實施例計算CCLM參數。
圖11b可以繪示計算CCLM參數的具體實施例。例如,參照圖11b,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S1105)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以將目前區塊的寬度或高度設定為N(步驟S1110),且決定N是否小於2(N < 2)(步驟S1115)。
或者,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S1120)。編碼裝置/解碼裝置決定N是否小於2(步驟S1115)。此處,M表示大於N的值(N < M)。
在N小於2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1125)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1130)。
同時,在N不小於2的情況下,編碼裝置/解碼裝置可以決定N是否為4或更小(N <= 4)(步驟S1135)。
在N為4或更小的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1140)。此處,Nth 可以是2。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1130)。
同時,在N大於4的情況下,編碼裝置/解碼裝置可以決定N是否為8或更小(N <= 8)(步驟S1145)。
在N為8或更小的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1150)。此處,Nth 可以是4(Nth = 4)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1130)。
或者,在N大於8的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1155)。此處,Nth 可以是8(Nth = 8)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1130)。
再次參照圖11a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S1160)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖12a及12b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法3導出的。
參照圖12a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S1200)。例如,可以如圖12b中所示的本實施例計算CCLM參數。
圖12b可以繪示計算CCLM參數的具體實施例。例如,參照圖12b,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S1205)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以將目前區塊的寬度或高度設定為N(步驟S1210),且決定N是否小於2(N < 2)(步驟S1215)。
或者,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S1220)。編碼裝置/解碼裝置決定N是否小於2(步驟S1215)。此處,M表示大於N的值(N < M)。
在N小於2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1225)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1230)。
同時,在N不小於2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1235)。此處,Nth 可以是2。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1230)。
再次參照圖12a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S1240)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖13a及13b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法4導出的。
參照圖13a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S1300)。例如,可以如圖13b中所示的本實施例計算CCLM參數。
圖13b可以繪示計算CCLM參數的具體實施例。例如,參照圖13b,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S1305)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以將目前區塊的寬度或高度設定為N(步驟S1310),且決定N是否小於2(N < 2)(步驟S1315)。
或者,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S1320)。編碼裝置/解碼裝置決定N是否小於2(步驟S1315)。此處,M表示大於N的值(N < M)。
在N小於2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1325)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1330)。
同時,在N不小於2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1335)。此處,Nth 可以是4。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1330)。
再次參照圖13a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S1340)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
同時,在本揭示內容中,在導出CCLM參數時,可以提出與減少導出CCLM參數的運算複雜度的本實施例不同的實施例。
詳細而言,為了解決上述CCLM參數運算量隨著色度區塊大小增加而增加的問題,本實施例提出了自適應地配置像素選定上限Nth 的方法。
例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法1(所提出的方法1)
–在目前色度區塊是2x2大小的色度區塊的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小(此處例如N < M)的目前色度區塊中N = 2的情況下,可以將Nth 設定為2(Nth = 2)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N > 2的情況下,可以將Nth 設定為4(Nth = 4)。
或者,例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法2(所提出的方法2)
–在目前色度區塊是2x2大小的色度區塊的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小(此處例如N < M)的目前色度區塊中N = 2的情況下,可以將Nth 設定為2(Nth = 2)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N = 4的情況下,可以將Nth 設定為2(Nth = 2)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N > 4的情況下,可以將Nth 設定為4(Nth = 4)。
或者,例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法3(所提出的方法3)
–在目前色度區塊是2x2大小的色度區塊的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小(此處例如N < M)的目前色度區塊中N = 2的情況下,可以將Nth 設定為2(Nth = 2)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N = 4的情況下,可以將Nth 設定為4(Nth = 4)。
–在NxM大小或MxN大小(此處例如N <= M)的目前色度區塊中N > 4的情況下,可以將Nth 設定為8(Nth = 8)。
在目前色度區塊為2x2的情況下,本實施例中上述的方法1到方法3可以減少最壞情況的複雜度達約40%,且因為Nth 可以自適應地應用於每個色度區塊大小,所以編碼損失可以最小化。此外,例如,因為方法1及方法3可以在N > 2的情況下將Nth 應用到4,所以這可以適用於高品質影像編碼。因為即使在N = 4的情況下,方法2也可以將Nth 減少到2,所以可以顯著減少CCLM複雜度,且方法2可以適用於低影像品質或中等影像品質。
如方法1到方法3中所述,依據本實施例,可以自適應地將Nth 配置為區塊大小,且經由這樣,可以選定用於導出最佳化的CCLM參數的參考樣本數。
編碼裝置/解碼裝置可以設定用於相鄰樣本選定的上限Nth ,然後藉由如上所述地選定色度區塊相鄰樣本來計算CCLM參數。
可以將在應用上述的本實施例的情況下依據色度區塊大小的CCLM參數計算量表示為以下表格。
[表格22]
Figure 02_image047
如表格22中所表示,在使用本實施例中所提出的方法的情況下,識別到,即使區塊大小增加,CCLM參數計算所需的運算量也不增加。
同時,依據本實施例,在不需要傳送額外資訊的情況下,可以在編碼裝置及解碼裝置中使用約定值,或可以用CU、切片、圖片、及序列為單位傳送是否使用所提出的方法及表示Nth 值的資訊。
例如,在用CU為單位使用表示是否使用所提出的方法的資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式時(即在將CCLM預測應用於目前色度區塊的情況下),可以解析cclm_reduced_sample_flag,且可以如下執行上述的本實施例。
–在cclm_reduced_sample_flag為0(假)的情況下,針對所有區塊配置Nth = 2,且經由上述圖8中所提出的本實施例的相鄰樣本選定方法來執行CCLM參數計算。
–在cclm_reduced_sample_flag為1(真)的情況下,經由上述本實施例的方法1來執行CCLM參數計算。
或者,在用切片、圖片、或序列為單位傳送表示所應用的方法的資訊的情況下,如下文所述,可以基於經由高階語法(HLS)來傳送的資訊來在方法1到方法3之中選定方法,且基於所選定的方法,可以計算CCLM參數。
例如,可以將經由切片標頭用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格23]
Figure 02_image049
cclm_reduced_sample_threshold可以表示表示所應用的方法的資訊的語法元素。
或者,例如,可以將經由圖片參數集(PPS)用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格24]
Figure 02_image051
或者,例如,可以將經由序列參數集(SPS)用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格25]
Figure 02_image053
可以如以下表格中所表示地導出基於經由切片標頭、PPS、或SPS傳送的cclm_reduced_sample_threshold值(即藉由對cclm_reduced_sample_threshold進行解碼來導出的值)來選定的方法。
[表格26]
Figure 02_image055
參照表格26,在cclm_reduced_sample_threshold值為0的情況下,可以不將上述本實施例的方法應用於目前色度區塊,在cclm_reduced_sample_threshold值為1的情況下,可以將方法1選定為應用於目前色度區塊的方法,在cclm_reduced_sample_threshold值為2的情況下,可以將方法2選定為應用於目前色度區塊的方法,且在cclm_reduced_sample_threshold值為3的情況下,可以將方法3選定為應用於目前色度區塊的方法。
本實施例中所提出的方法可以用於CCLM模式,該CCLM模式是用於色度分量的圖框內預測模式,且經由CCLM模式預測的色度區塊可以用於在編碼裝置中經由來自原始影像的差分來導出殘差影像或用於在解碼裝置中經由與殘差訊號相加來導出重構的影像。
同時,在用CU、切片、圖片、及序列為單位傳送表示方法中的一者的資訊的情況下,編碼裝置可以如下決定方法1到方法3中的一者且向解碼裝置傳送資訊。
-在用CU為單位傳送表示是否應用上述本實施例的方法的資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式(即將CCLM預測應用於目前色度區塊)時,編碼裝置可以經由RDO決定兩個以下情況之間編碼效率良好的一方,且向解碼裝置傳送所決定的方法的資訊。
1)在編碼效率在針對所有區塊將Nth 設定為2且經由上述圖8中所提出的本實施例的參考樣本選定方法來執行CCLM參數計算時良好的情況下,傳送值為0(假)的cclm_reduced_sample_flag。
2)在編碼效率在配置應用方法1且經由所提出的本實施例的參考樣本選定方法來執行CCLM參數計算時良好的情況下,傳送值為1(真)的cclm_reduced_sample_flag。
–或者,在用切片、圖片、或序列為單位傳送表示是否應用上述本實施例的方法的資訊的情況下,編碼裝置可以如上述的表格23、表格24、或表格25中所表示地添加高階語法(HLS),且傳送表示方法之中的一個方法的資訊。編碼裝置可以藉由考慮輸入影像的大小或依據編碼目標位元率來配置方法之中所應用的方法。
1)例如,在輸入影像為HD品質或更高的情況下,編碼裝置可以應用方法3(Nth = 1、2、4、或8),且在輸入影像為HD品質或更低的情況下,編碼裝置可以應用方法1(Nth = 1、2、或4)。
2)在需要高品質的影像編碼的情況下,編碼裝置可以應用方法3(Nth = 1、2、4、或8),且在需要普通品質的影像編碼的情況下,編碼裝置可以應用方法2(Nth = 1、2、2、或4)或方法1(Nth = 1、2、或4)。
本實施例中所提出的方法可以用於CCLM模式,該CCLM模式是用於色度分量的圖框內預測模式,且經由CCLM模式預測的色度區塊可以用於在編碼裝置中經由來自原始影像的差分來導出殘差影像或在解碼裝置中經由與殘差訊號相加來用於重構的影像。
圖14a及14b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法1導出的。
參照圖14a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S1400)。例如,可以如圖14b中所示的本實施例計算CCLM參數。
圖14b可以繪示計算CCLM參數的具體實施例。例如,參照圖14b,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S1405)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以將目前區塊的寬度或高度設定為N(步驟S1410),且決定目前色度區塊的大小是否為2x2(步驟S1415)。
或者,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S1420)。編碼裝置/解碼裝置決定目前色度區塊的大小是否為2x2(步驟S1415)。此處,M表示大於N的值(N < M)。
在目前色度區塊的大小為2x2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1425)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1430)。
同時,在目前色度區塊的大小不為2x2的情況下,編碼裝置/解碼裝置決定N是否為2(N == 2)(步驟S1435)。
在N為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1440)。此處,Nth 可以是2(Nth = 2)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1430)。
或者,在N不為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1445)。此處,Nth 可以是4(Nth = 4)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1430)。
再次參照圖14a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S1450)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖15a及15b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法2導出的。
參照圖15a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S1500)。例如,可以如圖15b中所示的本實施例計算CCLM參數。
圖15b可以繪示計算CCLM參數的具體實施例。例如,參照圖15b,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S1505)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以將目前區塊的寬度或高度設定為N(步驟S1510),且決定目前色度區塊的大小是否為2x2(步驟S1515)。
或者,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S1520)。編碼裝置/解碼裝置決定目前色度區塊的大小是否為2x2(步驟S1515)。此處,M表示大於N的值(N < M)。
在目前色度區塊的大小為2x2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1525)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1530)。
同時,在目前色度區塊的大小不為2x2的情況下,編碼裝置/解碼裝置決定N是否為2(N == 2)(步驟S1535)。
在N為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1540)。此處,Nth 可以是2(Nth = 2)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1530)。
同時,在N不為2的情況下,編碼裝置/解碼裝置可以決定N是否為4(N == 4)(步驟S1545)。
在N為4的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1550)。此處,Nth 可以是2(Nth = 2)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1530)。
或者,在N不為4的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1555)。此處,Nth 可以是4(Nth = 4)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1530)。
再次參照圖15a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S1560)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖16a及16b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法3導出的。
參照圖16a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S1600)。例如,可以如圖16b中所示的本實施例計算CCLM參數。
圖16b可以繪示計算CCLM參數的具體實施例。例如,參照圖16b,編碼裝置/解碼裝置可以決定目前色度區塊是否是方形色度區塊(步驟S1605)。
在目前色度區塊是方形色度區塊的情況下,編碼裝置/解碼裝置可以將目前區塊的寬度或高度設定為N(步驟S1610),且決定目前色度區塊的大小是否為2x2(步驟S1615)。
或者,在目前色度區塊不是方形色度區塊的情況下,可以在MxN大小或NxM大小中導出目前色度區塊的大小(步驟S1620)。編碼裝置/解碼裝置決定目前色度區塊的大小是否為2x2(步驟S1615)。此處,M表示大於N的值(N < M)。
在目前色度區塊的大小為2x2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1625)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1630)。
同時,在目前色度區塊的大小不為2x2的情況下,編碼裝置/解碼裝置決定N是否為2(N == 2)(步驟S1635)。
在N為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1640)。此處,Nth 可以是2(Nth = 2)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1630)。
同時,在N不為2的情況下,編碼裝置/解碼裝置可以決定N是否為4(N == 4)(步驟S1645)。
在N為4的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1650)。此處,Nth 可以是4(Nth = 4)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1630)。
或者,在N不為4的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2Nth 個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S1655)。此處,Nth 可以是8(Nth = 8)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S1630)。
再次參照圖16a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S1660)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
同時,在導出用於CCLM參數計算的相鄰參考樣本時需要次取樣的情況下,本揭示內容提出了更高效地選定次取樣樣本的實施例。
圖17繪示選定色度區塊的相鄰參考樣本的示例。
參照圖17的(a),在2x2大小的色度區塊(N = 2)中,可以基於4個相鄰參考樣本來計算用於該色度區塊的CCLM參數α及β。相鄰參考樣本可以包括亮度區塊的4個相鄰參考樣本及色度區塊的4個相鄰參考樣本。此外,與上述的本實施例類似,在將2x2大小的色度區塊的Nth 設定為1(Nth = 1)的情況下,參照圖17的(b),可以基於2個相鄰參考樣本來計算用於色度區塊的CCLM參數α及β。然而,如圖17中所示,在使用一半地次取樣的相鄰參考樣本的情況下,因為相鄰參考樣本擠在目前色度區塊的右上側,所以發生以下問題:未在CCLM參數計算中考慮相鄰參考樣本的多樣性,這可能是CCLM參數準確度劣化的原因。
圖18a到18c繪示經由現有的次取樣導出的相鄰參考樣本及經由依據本實施例的次取樣導出的相鄰參考樣本。
如圖18a及圖18b中所示,經由依據本實施例的次取樣來優先選定遠離目前色度區塊的左上側的相鄰樣本,可以在CCLM參數計算中選定更多樣的樣本值。
此外,如圖18c中所示,本實施例提出了次取樣,即使對於像是nx2大小或2xn大小的非方形色度區塊而言,該次取樣也優先選定遠離左上側的一側。經由這樣,可以在CCLM參數計算中選定更多樣的樣本值,且經由這樣,可以改善CCLM參數計算準確度。
同時,可以基於以下等式來執行現有的次取樣。
[等式5]
Figure 02_image057
此處,Idx_w可以表示經由次取樣導出的與上側目前色度區塊相鄰的相鄰參考樣本(或相鄰參考樣本的位置),且Idx_h可以表示經由次取樣導出的與左側目前色度區塊相鄰的相鄰參考樣本(或相鄰參考樣本的位置)。進一步地,寬度可以表示目前色度區塊的寬度,且高度可以表示目前色度區塊的高度。此外,subsample_num可以表示經由次取樣導出的相鄰參考樣本的數量(與一側相鄰的相鄰參考樣本的數量)。
例如,可以如下執行基於以上的等式5來執行的次取樣。
以上等式5的x是變數,且可以從0到次取樣之後的目前色度區塊的上側相鄰參考樣本的參考樣本數而增加。舉例而言,在寬度為16的目前色度區塊中選定2個上側相鄰參考樣本的情況下,等式5的寬度為16,且x可以從0到1變化。此外,因為Subsample_num為2,所以可以選定0及8作為Idx_w值。因此,在目前色度區塊的左上側樣本位置的x分量及y分量為0的情況下,可以經由次取樣在上側相鄰參考樣本之中選定x座標為0的上側相鄰參考樣本及x座標為8的上側相鄰參考樣本。
以上等式5的y是變數,且可以從0到次取樣之後的目前色度區塊的左側相鄰參考樣本的參考樣本數而增加。舉例而言,在高度為32的目前色度區塊中選定4個左側相鄰參考樣本的情況下,等式5的高度為32,且y可以從0到3變化。此外,因為Subsample_num為4,所以可以選定0、8、16、及24作為Idx_h值。因此,在目前色度區塊的左上側樣本位置的x分量及y分量為0的情況下,可以經由次取樣在左側相鄰參考樣本之中選定y座標為0的左側相鄰參考樣本、y座標為8的左側相鄰參考樣本、y座標為16的左側相鄰參考樣本、及y座標為24的左側相鄰參考樣本。
參照以上的等式5,經由次取樣僅可以選定目前色度區塊的左上側附近的樣本。
因此,依據本實施例,可以基於與以上的等式5不同的等式來執行次取樣。例如,可以基於以下等式來執行本實施例中所提出的次取樣。
[等式6]
Figure 02_image059
在本文中,subsample_num_width可以表示經由次取樣導出的上側相鄰參考樣本數,且subsample_num_height可以表示經由次取樣導出的左側相鄰參考樣本數。
此外,x是變數,且可以從0到次取樣之後的目前色度區塊的上側相鄰參考樣本的參考樣本數而增加。進一步地,y是變數,且可以從0到次取樣之後的目前色度區塊的左側相鄰參考樣本的參考樣本數而增加。
例如,參照以上的等式6,在寬度為16的目前色度區塊中選定2個上側相鄰參考樣本的情況下,等式6的寬度為16,且x可以從0到1變化。此外,因為subsample_num_width為2,所以可以選定15及7作為Idx_w值。因此,在目前色度區塊的左上側樣本位置的x分量及y分量為0的情況下,可以經由次取樣在上側相鄰參考樣本之中選定x座標為15的上側相鄰參考樣本及x座標為7的上側相鄰參考樣本。也就是說,在目前色度區塊的上側相鄰參考樣本之中,可以選定遠離目前色度區塊的左上側的上側相鄰參考樣本。
此外,例如,參照以上的等式6,在高度為32的目前色度區塊中選定4個左側相鄰參考樣本的情況下,等式6的高度為32,且y可以從0到3變化。此外,因為subsample_num_height為4,所以可以選定31、23、15、及7作為Idx_h值。因此,在目前色度區塊的左上側樣本位置的x分量及y分量為0的情況下,可以經由次取樣在左側相鄰參考樣本之中選定y座標為31的左側相鄰參考樣本、y座標為23的左側相鄰參考樣本、y座標為15的左側相鄰參考樣本、及y座標為7的左側相鄰參考樣本。
同時,可以基於目前色度區塊的大小來導出以上等式6的subsample_num_width及subsample_num_height。例如,可以如以下表格中所表示地導出subsample_num_width及subsample_num_height。
[表格27]
Figure 02_image061
參照表格27,可以依據目前色度區塊的寬度與高度之間的短側針對與長側相鄰的相鄰參考樣本執行次取樣。也就是說,可以將在與長側相鄰的相鄰參考樣本之中所選定的相鄰參考樣本的數量導出為目前色度區塊的寬度與高度之間的較小值。例如,可以導出為subsample_num_width = subsample_num_height = min (寬度,高度)。
或者,例如,在導出Nth 的情況下,可以基於Nth 來導出subsample_num_width及subsample_num_height。例如,可以基於Nth 如以下表格中所表示地導出subsample_num_width及subsample_num_height。
[表格28]
Figure 02_image063
在本文中,min (A, B)可以表示A與B之間的較小值。
或者,例如,基於預定的查找表(LUT),可以依據目前色度區塊的形狀執行次取樣以供導出最佳的相鄰參考樣本數。例如,可以如以下表格中所表示地導出LUT。
[表格29]
Figure 02_image065
參照以上的表格29,與上述的次取樣相比,可以增加所選定的相鄰參考樣本數,且經由這樣,可以用較高的準確度計算CCLM參數。在上述示例中的用於導出6個相鄰參考樣本的次取樣中,可以在用於導出8個相鄰參考樣本的次取樣中選定前6個位置(idx_w或idx_h),且在用於導出12或14個相鄰參考樣本的次取樣中,可以在用於導出16個相鄰參考樣本的次取樣之中選定前12或14個位置。此外,在用於導出24或28個相鄰參考樣本的次取樣中,可以在用於導出32個相鄰參考樣本的次取樣中選定前24或28個位置。
或者,為了防止增加硬體複雜度,可以執行用於導出簡化的相鄰參考樣本數的次取樣。例如,可以如以下表格中所表示地導出LUT。
[表格30]
Figure 02_image067
參照以上的表格30,可以將subsample_num_width與subsample_num_height的總和的最大值設定為8。經由這樣,可以減少硬體複雜度,且同時,可以高效地計算CCLM參數。
在上述示例中的用於導出6個相鄰參考樣本的次取樣中,可以在用於導出8個相鄰參考樣本的次取樣中選定前6個位置(idx_w或idx_h)。
依據所提出的方法,在不需要傳送額外資訊的情況下,可以使用編碼器或解碼器中的約定值,或可以用CU、切片、圖片、及序列為單位傳送是否使用所提出的方法或值。
在執行使用如表格29及表格30中所表示的LUT的次取樣的情況下,編碼裝置及解碼裝置可以使用表格(即LUT)中所決定的subsample_num_width數及subsample_num_height數,且在使用Nth 的情況下,可以基於Nth 值來決定subsample_num_width及subsample_num_height。此外,在其他的情況下,可以將如表格28所導出的值用作預設的subsample_num_width數及subsample_num_height數。
同時,在用CU為單位傳送所提出的方法(即傳送表示是否應用上述使用等式6的次取樣的資訊)的情況下,在目前色度區塊的圖框內預測樣式是CCLM模式時,供解碼裝置藉由解析cclm_subsample_flag來執行CCLM預測的方法如下。
–在cclm_subsample_flag為0(假)的情況下,經由現有的次取樣方法(基於上述的等式5來次取樣)來執行相鄰參考樣本選定及CCLM參數計算。
–在cclm_subsample_flag為1(真)的情況下,經由所提出的次取樣方法(基於上述的等式6來次取樣)來執行相鄰參考樣本選定及CCLM參數計算。
在用切片、圖片、及序列為單位傳送表示是否使用所提出的方法的資訊的情況下,可以如下經由高階語法(HLS)來傳送資訊。解碼裝置可以選定基於該資訊來執行的次取樣方法。
例如,可以將經由切片標頭用訊號傳遞的表示是否使用所提出的方法的資訊表示為以下表格。
[表格31]
Figure 02_image069
cclm_reduced_sample_flag可以表示表示是否使用所提出的方法的資訊的語法元素。
或者,例如,可以將經由圖片參數集(PPS)用訊號傳遞的表示是否使用所提出的方法的資訊表示為以下表格。
[表格32]
Figure 02_image071
或者,例如,可以將經由序列參數集(SPS)用訊號傳遞的表示是否使用所提出的方法的資訊表示為以下表格。
[表格33]
Figure 02_image073
可以如以下表格中所表示地導出基於經由切片標頭、PPS、或SPS傳送的cclm_reduced_sample_flag值(即藉由對cclm_reduced_sample_flag進行解碼來導出的值)來選定的方法。
[表格34]
Figure 02_image075
參照表格34,在cclm_reduced_sample_flag值為0的情況下,可以執行使用等式5的次取樣,且在cclm_reduced_sample_flag值為1的情況下,可以執行使用等式6的次取樣。
同時,在編碼裝置及解碼裝置中使用預定值而不傳送額外資訊的情況下,編碼裝置可以用解碼裝置的相同方式執行上述實施例,且基於所選定的相鄰參考樣本來執行CCLM參數計算。
或者,在用CU、切片、圖片、及序列為單位傳送表示是否應用所提出的次取樣方法的資訊的情況下,編碼裝置可以決定是否應用所提出的次取樣方法,然後向解碼裝置傳送所決定的方法的資訊。
-在用CU為單位傳送表示是否應用所提出的次取樣方法的資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式時,編碼裝置可以經由RDO決定兩個以下情況之間編碼效率良好的一方,且向解碼裝置傳送表示對應情況的值的資訊。
1)在編碼效率在經由現有次取樣(基於上述等式5的次取樣)來執行CCLM參數計算時良好的情況下,傳送值為0(假)的clm_reduced_sample_flag。
2)在編碼效率在經由所提出的次取樣(基於上述等式5的次取樣)來執行CCLM參數計算時良好的情況下,傳送值為1(真)的clm_reduced_sample_flag。
–在用切片、圖片、或序列為單位傳送表示是否應用所提出的次取樣方法的資訊的情況下,編碼裝置可以添加上述如表格31、表格32、或表格33中所表示的高階語法(HLS)且傳送資訊。
圖19繪示使用次取樣來執行CCLM預測的示例,該次取樣使用上述的等式6。
參照圖19,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S1900)。
詳細而言,編碼裝置/解碼裝置可以決定是否需要用於目前色度區塊的相鄰樣本的次取樣(步驟S1905)。
例如,為了針對目前色度區塊導出CCLM參數,在選定數量比目前色度區塊的寬度的數目小的上側相鄰樣本的情況下,需要針對目前色度區塊的上側相鄰樣本執行次取樣。此外,例如,為了針對目前色度區塊導出CCLM參數,在選定數量比目前色度區塊的高度的數目小的上側相鄰樣本的情況下,需要針對目前色度區塊的左側相鄰樣本執行次取樣。
在需要次取樣的情況下,編碼裝置/解碼裝置可以藉由針對相鄰樣本執行使用等式6的次取樣來選定特定數量的相鄰樣本(步驟S1910)。之後,編碼裝置/解碼裝置可以基於所選定的相鄰樣本針對目前色度區塊計算CCLM參數(步驟S1915)。
在不需要次取樣的情況下,編碼裝置/解碼裝置可以不執行次取樣,但選定目前色度區塊的相鄰樣本(步驟S1920)。之後,編碼裝置/解碼裝置可以基於所選定的相鄰樣本針對目前色度區塊計算CCLM參數(步驟S1915)。
在導出了CCLM參數的情況下,編碼裝置/解碼裝置可以藉由基於CCLM參數針對目前色度區塊執行CCLM預測來產生目前色度區塊的預測樣本(步驟S1925)。
同時,在本揭示內容中,在導出CCLM參數時,可以提出與減少導出CCLM參數的運算複雜度的本實施例不同的實施例。
為了解決上述CCLM參數運算量隨著色度區塊大小增加而增加的問題,本實施例提出了自適應地配置像素選定上限Nth 的方法。也可以將Nth 稱為最大相鄰樣本數。
此外,在N = 2的情況下(此處,N是色度區塊的寬度與高度之間的較小值),為了防止發生在針對2x2大小的色度區塊的CCLM預測中的最壞情況運算(在將CTU中的所有色度區塊分成2x2大小之後,針對所有色度區塊執行CCLM預測的情況),本實施例提出了自適應地配置Nth 的方法,且經由此方法,可以減少最壞情況下的CCLM參數計算的運算量達約50%。
例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法1(所提出的方法1)
–在NxM大小或MxN大小的目前色度區塊中N = 2的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小的目前色度區塊中N = 4的情況下,可以將Nth 設定為2(Nth = 2)。
–在NxM大小或MxN大小的目前色度區塊中N > 4的情況下,可以將Nth 設定為4(Nth = 4)。
或者,例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法2(所提出的方法2)
–在NxM大小或MxN大小的目前色度區塊中N = 2的情況下,可以將Nth 設定為1(Nth = 1)。
–在NxM大小或MxN大小的目前色度區塊中N = 4的情況下,可以將Nth 設定為2(Nth = 2)。
或者,例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法3(所提出的方法3)
–在NxM大小或MxN大小的目前色度區塊中N > 4的情況下,可以將Nth 設定為4(Nth = 4)。
或者,例如,依據本實施例,可以如下自適應地將Nth 配置為區塊大小。
–本實施例中的方法4(所提出的方法4)
–在NxM大小或MxN大小的目前色度區塊中N > 2的情況下,可以將Nth 設定為2(Nth = 2)。
在本實施例中,N = 2的情況可以表示用於CCLM參數計算的相鄰樣本數為4(即2N)的情況,且Nth = 1的情況可以表示只有2個(即2Nth 個)相鄰樣本用於CCLM參數計算的情況。進一步地,N = 4的情況可以表示用於CCLM參數計算的相鄰樣本數為8(即2N)的情況,且Nth = 2的情況可以表示只有4個(即2Nth 個)相鄰樣本用於CCLM參數計算的情況。
因此,依據以上的方法1,在可以將4個相鄰樣本用於CCLM預測的情況(例如將現有CCLM預測模式(即LM_LA模式)應用於2xN大小或Nx2大小的色度區塊的情況、將LM_A模式應用於2xN大小的色度區塊的情況、及將LM_L模式應用於Nx2大小的色度區塊的情況)下,藉由僅使用一半的相鄰樣本來計算CCLM參數,且因此,比較運算量在最壞情況下可以減少到一半。此外,即使在可以將8個相鄰樣本用於CCLM預測的情況(例如將現有CCLM預測模式(即LM_LA模式)應用於4xN大小或Nx4大小的色度區塊的情況、將LM_A模式應用於4xN大小的色度區塊的情況、及將LM_L模式應用於Nx4大小的色度區塊的情況)下,也藉由僅使用一半的相鄰樣本來計算CCLM參數,比較運算量可以顯著減少。進一步地,即使對於使用更多相鄰樣本的情況而言,也使用最多僅8個的相鄰樣本,且可以執行CCLM參數計算。
此外,依據以上的方法2,在可以將4個相鄰樣本用於CCLM預測的情況(例如將現有CCLM預測模式(即LM_LA模式)應用於2xN大小或Nx2大小的色度區塊的情況、將LM_A模式應用於2xN大小的色度區塊的情況、及將LM_L模式應用於Nx2大小的色度區塊的情況)下,藉由僅使用一半的相鄰樣本來計算CCLM參數,且因此,比較運算量在最壞情況下可以減少到一半。進一步地,即使對於使用更多相鄰樣本的情況而言,也使用最多僅4個的相鄰樣本,且可以執行CCLM參數計算。
並且,依據以上的方法3,使用最多僅8個的相鄰樣本,且可以執行CCLM參數計算,且依據以上的方法4,使用最多僅4個的相鄰樣本,且可以執行CCLM參數計算。也就是說,依據方法4,可以在所有色度區塊中都使用4個相鄰區塊來計算CCLM參數。
本實施例中上述的方法1到方法4可以減少N = 2的情況的最壞情況的比較運算達約50%,且因為可以自適應地將Nth 應用於每個色度區塊大小,編碼損失可以最小化。
如方法1到方法4中所述,依據本實施例,可以自適應地將Nth 配置為區塊大小,且經由這樣,可以選定用於導出最佳化的CCLM參數的參考樣本數。
編碼裝置/解碼裝置可以設定用於相鄰樣本選定的上限Nth ,然後藉由如上所述地選定色度區塊相鄰樣本來計算CCLM參數。
可以將在應用上述的本實施例的情況下依據色度區塊大小的CCLM參數計算量表示為以下表格。
[表格35]
Figure 02_image077
如表格35中所表示,在使用本實施例中所提出的方法的情況下,識別到,即使區塊大小增加,CCLM參數計算所需的運算量也不增加。
同時,依據本實施例,在不需要傳送額外資訊的情況下,可以在編碼裝置及解碼裝置中使用約定值,或可以用CU、切片、圖片、及序列為單位傳送是否使用所提出的方法及表示Nth 值的資訊。
例如,在用CU為單位使用表示是否使用所提出的方法的資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式時(即在將CCLM預測應用於目前色度區塊的情況下),可以解析cclm_reduced_sample_flag,且可以如下執行上述的本實施例。
–在cclm_reduced_sample_flag為0(假)的情況下,針對所有區塊配置Nth = 4,且經由上述圖8中所提出的本實施例的相鄰樣本選定方法來執行CCLM參數計算。
–在cclm_reduced_sample_flag為1(真)的情況下,經由上述本實施例的方法2來執行CCLM參數計算。
或者,在用切片、圖片、或序列為單位傳送表示所應用的方法的資訊的情況下,如下文所述,可以基於經由高階語法(HLS)來傳送的資訊來在方法1到方法4之中選定方法,且基於所選定的方法,可以計算CCLM參數。
例如,可以將經由切片標頭用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格36]
Figure 02_image079
cclm_reduced_sample_threshold可以表示表示所應用的方法的資訊的語法元素。
或者,例如,可以將經由圖片參數集(PPS)用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格37]
Figure 02_image081
或者,例如,可以將經由序列參數集(SPS)用訊號傳遞的表示所應用的方法的資訊表示為以下表格。
[表格38]
Figure 02_image083
可以如以下表格中所表示地導出基於經由切片標頭、PPS、或SPS傳送的cclm_reduced_sample_threshold值(即藉由對cclm_reduced_sample_threshold進行解碼來導出的值)來選定的方法。
[表格39]
Figure 02_image085
參照表格39,在cclm_reduced_sample_threshold值為0的情況下,可以將方法1選定為應用於目前色度區塊的方法,在cclm_reduced_sample_threshold值為1的情況下,可以將方法2選定為應用於目前色度區塊的方法,在cclm_reduced_sample_threshold值為2的情況下,可以將方法3選定為應用於目前色度區塊的方法,且在cclm_reduced_sample_threshold為3的情況下,可以將方法4選定為應用於目前色度區塊的方法。
本實施例中所提出的方法可以用於CCLM模式(LM_T模式、LM_T模式、或LM_LT模式),該CCLM模式是用於色度分量的圖框內預測模式,且經由CCLM模式預測的色度區塊可以用於在編碼裝置中經由來自原始影像的差分來導出殘差影像或在解碼裝置中經由與殘差訊號相加來用於重構的影像。
同時,上述實施例中所提出的方法1及方法2的實驗結果資料可以如下。
以下表格可以表示方法1的實驗結果資料。
[表格40]
Figure 02_image087
此外,以下表格可以表示方法2的實驗結果資料。
[表格41]
Figure 02_image089
表格40及表格41可以表示應用方法1及方法2的編碼效率及運算複雜度。在此實驗中,錨點是VTM3.0rc1,且這是全圖框內實驗結果。
參照表格40,在應用方法1時,雖然CCLM參數計算的運算量減少(Nth = 1、2、及4),但沒有編碼損失,反而可以獲得微小的效能增益(例如Y 0.02%、Cb 0.12%、Cr 0.17%的效能增益)。並且,參照表格40,識別到,編碼複雜度及解碼複雜度分別減少到99%及96%。
此外,參照表格41,在應用方法2時,雖然CCLM參數計算的運算量減少(Nth = 1及2),但編碼效率沒有與現有CCLM預測的編碼效率不同,且識別到,編碼複雜度及解碼複雜度分別減少到99%及96%。
同時,在用CU、切片、圖片、及序列為單位傳送表示方法中的一者的資訊的情況下,編碼裝置可以如下決定方法1到方法4中的一者且向解碼裝置傳送資訊。
-在用CU為單位傳送表示是否應用上述本實施例的方法的資訊的情況下,在目前色度區塊的圖框內預測模式為CCLM模式(即在將CCLM預測(LM_T模式、LM_T模式、或LM_LT模式)應用於目前色度區塊的情況下)時,編碼裝置可以經由RDO決定兩個以下情況之間編碼效率良好的一方,且向解碼裝置傳送所決定的方法的資訊。
1)在編碼效率在針對所有區塊將Nth 設定為4且經由上述圖8中所提出的本實施例的參考樣本選定方法來執行CCLM參數計算時良好的情況下,傳送值為0(假)的cclm_reduced_sample_flag。
2)在編碼效率在配置應用方法2且經由所提出的本實施例的參考樣本選定方法來執行CCLM參數計算時良好的情況下,傳送值為1(真)的cclm_reduced_sample_flag。
–或者,在用切片、圖片、或序列為單位傳送表示是否應用上述本實施例的方法的資訊的情況下,編碼裝置可以如上述的表格36、表格37、或表格38中所表示地添加高階語法(HLS),且傳送表示方法之中的一個方法的資訊。編碼裝置可以藉由考慮輸入影像的大小或依據編碼目標位元率來配置方法之中所應用的方法。
1)例如,在輸入影像為HD品質或更高的情況下,編碼裝置可以應用方法1(Nth = 1、2、或4),且在輸入影像為HD品質或更低的情況下,編碼裝置可以應用方法2(Nth = 1或2)。
2)在需要高品質的影像編碼的情況下,編碼裝置可以應用方法3(Nth = 4),且在需要普通品質的影像編碼的情況下,編碼裝置可以應用方法4(Nth = 2)。
本實施例中所提出的方法可以用於CCLM模式(LM_T模式、LM_T模式、或LM_LT模式),該CCLM模式是用於色度分量的圖框內預測模式,且經由CCLM模式預測的色度區塊可以用於在編碼裝置中經由來自原始影像的差分來導出殘差影像或在解碼裝置中經由與殘差訊號相加來用於重構的影像。
圖20a及20b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法1導出的。CCLM預測可以表示現有的CCLM預測,即基於LM_LT模式來執行的CCLM預測或基於LM_T模式來執行的CCLM預測。
參照圖20a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S2000)。例如,可以如圖20b中所示的本實施例計算CCLM參數。
圖20b可以繪示計算CCLM參數的具體實施例。例如,參照圖20b,編碼裝置/解碼裝置可以基於目前色度區塊的形狀及目前色度區塊的CCLM預測模式來設定N(步驟S2005)。在將LM_LT模式應用於目前色度區塊的情況下,可以將目前色度區塊的寬度與高度之間的較小值設定為N。進一步地,例如,在目前色度區塊是寬度大於高度的非方形區塊且將LM_T模式應用於目前色度區塊的情況下,可以將目前色度區塊的寬度設定為N。此外,例如,在目前色度區塊是高度大於寬度的非方形區塊且將LM_L模式應用於目前色度區塊的情況下,可以將目前色度區塊的高度設定為N。
之後,編碼裝置/解碼裝置可以決定N是否為2(N = 2)(步驟S2010)。
在N為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2個(即2Nth 個)相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S2015)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S2020)。
同時,在N不為2的情況下,編碼裝置/解碼裝置可以決定N是否為4(N = 4)(步驟S2025)。
在N為4的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的4個(即2Nth 個)相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S2030)。此處,Nth 可以是2(Nth = 2)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S2020)。
或者,在N不為4的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的8個(即2Nth 個)相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S2035)。此處,Nth 可以是4(Nth = 4)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S2020)。
再次參照圖20a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S2040)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖21a及21b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法2導出的。CCLM預測可以表示現有的CCLM預測,即基於LM_LT模式來執行的CCLM預測或基於LM_T模式來執行的CCLM預測。
參照圖21a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S2100)。例如,可以如圖21b中所示的本實施例計算CCLM參數。
圖21b可以繪示計算CCLM參數的具體實施例。例如,參照圖21b,編碼裝置/解碼裝置可以基於目前色度區塊的形狀及目前色度區塊的CCLM預測模式來設定N(步驟S2105)。在將LM_LT模式應用於目前色度區塊的情況下,可以將目前色度區塊的寬度與高度之間的較小值設定為N。進一步地,例如,在目前色度區塊是寬度大於高度的非方形區塊且將LM_T模式應用於目前色度區塊的情況下,可以將目前色度區塊的寬度設定為N。此外,例如,在目前色度區塊是高度大於寬度的非方形區塊且將LM_L模式應用於目前色度區塊的情況下,可以將目前色度區塊的高度設定為N。
之後,編碼裝置/解碼裝置可以決定N是否為2(N = 2)(步驟S2110)。
在N為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的2個(即2Nth 個)相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S2115)。此處,Nth 可以是1(Nth = 1)。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S2120)。
同時,在N不為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的4個(即2Nth 個)相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S2125)。此處,Nth 可以是2(Nth = 2)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S2120)。
再次參照圖21a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S2130)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖22a及22b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法3導出的。CCLM預測可以表示現有的CCLM預測,即基於LM_LT模式來執行的CCLM預測或基於LM_T模式來執行的CCLM預測。
參照圖22a,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S2200)。例如,可以如圖22b中所示的本實施例計算CCLM參數。
圖22b可以繪示計算CCLM參數的具體實施例。例如,參照圖22b,編碼裝置/解碼裝置可以基於目前色度區塊的形狀及目前色度區塊的CCLM預測模式來設定N(步驟S2205)。在將LM_LT模式應用於目前色度區塊的情況下,可以將目前色度區塊的寬度與高度之間的較小值設定為N。進一步地,例如,在目前色度區塊是寬度大於高度的非方形區塊且將LM_T模式應用於目前色度區塊的情況下,可以將目前色度區塊的寬度設定為N。此外,例如,在目前色度區塊是高度大於寬度的非方形區塊且將LM_L模式應用於目前色度區塊的情況下,可以將目前色度區塊的高度設定為N。
之後,編碼裝置/解碼裝置可以決定N是否為2(N = 2)(步驟S2210)。
在N為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的4個相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S2215)。也就是說,可以使用參考線中的參考樣本來計算CCLM參數。
編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S2220)。
同時,在N不為2的情況下,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的8個(即2Nth 個)相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S2225)。此處,Nth 可以是4(Nth = 4)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S2220)。
再次參照圖22a,在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S2230)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖23是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法4導出的。CCLM預測可以表示現有的CCLM預測,即基於LM_LT模式來執行的CCLM預測或基於LM_T模式來執行的CCLM預測。
參照圖23,編碼裝置/解碼裝置可以針對目前區塊計算CCLM參數(步驟S2300)。
例如,編碼裝置/解碼裝置可以選定與目前區塊相鄰的參考線中的4個(即2Nth 個)相鄰樣本作為參考樣本以用於CCLM參數計算(步驟S2305)。此處,Nth 可以是2(Nth = 2)。或者,Nth 可以是4(Nth = 4)。之後,編碼裝置/解碼裝置可以基於所選定的參考樣本來導出參數α及β以用於CCLM預測(步驟S2310)。
在計算了用於目前色度區塊的CCLM預測的參數的情況下,編碼裝置/解碼裝置可以基於該等參數來執行CCLM預測及針對目前色度區塊產生預測樣本(步驟S2320)。例如,編碼裝置/解碼裝置可以基於所計算的參數及上述的等式1(其中是用於目前色度區塊的目前亮度區塊的重構的樣本)來針對目前色度區塊產生預測樣本。
圖24示意性地繪示依據本揭示內容藉由編碼裝置進行的視訊編碼方法。可以藉由圖2中所示的編碼裝置來執行圖24中所示的方法。在一個具體的示例中,可以藉由編碼裝置的預測器來執行圖24的步驟S2400到S2460,且可以藉由編碼裝置的熵編碼器來執行步驟S2470。此外,雖然未示於附圖中,但可以藉由編碼裝置的減法器來執行基於目前色度區塊的原始樣本及預測樣本導出目前色度區塊的殘差樣本的過程,可以藉由編碼裝置的加法器來執行基於目前色度區塊的殘差樣本及預測樣本導出目前色度區塊的重構的樣本過程,可以藉由編碼裝置的變換器來執行基於殘差樣本產生目前色度區塊的殘差的資訊的過程,且可以藉由編碼裝置的熵編碼器來執行對殘差的資訊進行編碼的過程。
編碼裝置在複數個交叉分量線性模型(CCLM)預測模式之中決定目前色度區塊的CCLM預測模式(步驟S2400)。例如,編碼裝置可以基於位元率-失真成本(Rate-distortion cost;RD成本;或RDO)來決定目前色度區塊的圖框內預測模式。此處,可以基於絕對差的總和(SAD)來導出RD成本。編碼裝置可以基於RD成本來決定CCLM預測模式中的一者作為目前色度區塊的圖框內預測模式。也就是說,編碼裝置可以基於RD成本來在CCLM預測模式之中決定目前色度區塊的CCLM預測模式。
此外,編碼裝置可以對表示目前色度區塊的圖框內預測模式的預測模式資訊進行編碼,且可以經由位元串流用訊號傳遞預測模式資訊。表示目前色度區塊的預測模式資訊的語法元素可以是intra_chroma_pred_mode。視訊資訊可以包括預測模式資訊。
進一步地,編碼裝置可以對指示目前色度區塊的CCLM預測模式的索引資訊進行編碼且經由位元串流用訊號傳遞索引資訊。預測模式資訊可以包括在交叉分量線性模型(CCLM)預測模式之中指示目前色度區塊的CCLM預測模式的索引資訊。此處,CCLM預測模式可以包括左上側LM模式、上側LM模式、及左側LM模式。左上側LM模式可以表示上述的LM_LT模式,左側LM模式可以表示上述的LM_L模式,且上側LM模式可以表示上述的LM_T模式。此外,編碼裝置可以對表示是否將CCLM預測應用於目前色度區塊的旗標進行編碼且經由位元串流用訊號傳遞該旗標。預測模式資訊可以包括表示是否將CCLM預測應用於目前色度區塊的旗標。例如,在將CCLM預測應用於目前色度區塊的情況下,可以將由索引資訊所指示的CCLM預測模式導出為用於目前色度區塊的CCLM預測模式。
編碼裝置基於目前色度區塊的CCLM預測模式、目前色度區塊的大小、及特定值來導出目前色度區塊的相鄰色度樣本的樣本數(步驟S2410)。
此處,在目前色度區塊的CCLM預測模式是左側LM模式的情況下,相鄰色度樣本可以僅包括目前色度區塊的左側相鄰色度樣本。此外,在目前色度區塊的CCLM預測模式是上側LM模式的情況下,相鄰色度樣本可以僅包括目前色度區塊的上側相鄰色度樣本。並且,在目前色度區塊的CCLM預測模式是左上側LM模式的情況下,相鄰色度樣本可以包括目前色度區塊的左側相鄰色度樣本及上側相鄰色度樣本。
例如,在目前色度區塊的CCLM預測模式是左側LM模式的情況下,編碼裝置可以基於目前色度區塊的高度及特定值來導出樣本數。
舉例而言,編碼裝置可以藉由比較高度的兩倍及特定值的兩倍來導出相鄰色度樣本的樣本數。例如,在目前色度區塊的高度的兩倍大於特定值的兩倍的情況下,可以將樣本數導出為特定值的兩倍。進一步地,例如,在目前色度區塊的高度的兩倍是特定值的兩倍或更小的情況下,可以將樣本數導出為高度的兩倍。
此外,例如,在目前色度區塊的CCLM預測模式是上側LM模式的情況下,編碼裝置可以基於目前色度區塊的寬度及特定值來導出樣本數。
舉例而言,編碼裝置可以藉由比較寬度的兩倍及特定值的兩倍來導出相鄰色度樣本的樣本數。例如,在目前色度區塊的寬度的兩倍大於特定值的兩倍的情況下,可以將樣本數導出為特定值的兩倍。進一步地,例如,在目前色度區塊的寬度的兩倍是特定值的兩倍或更小的情況下,可以將樣本數導出為寬度的兩倍。
此外,例如,在目前色度區塊的CCLM預測模式是左側LM模式的情況下,編碼裝置可以藉由將寬度及高度與特定值進行比較來導出上側相鄰色度樣本及左側相鄰色度樣本的樣本數。
例如,在目前色度區塊的寬度及高度大於特定值的情況下,可以將樣本數導出為特定值。
進一步地,例如,在目前色度區塊的寬度及高度是特定值或更小的情況下,可以將樣本數導出為寬度及高度中的一個值。舉例而言,可以將樣本數導出為寬度及高度中的較小值。
同時,可以導出特定值以供導出目前色度區塊的CCLM參數。此處,可以將特定值稱為相鄰樣本數上限或最大相鄰樣本數。舉例而言,可以將特定值導出為2。或者,可以將特定值導出為4、8、或16。
此外,例如,可以將特定值導出為預定值。也就是說,可以將特定值導出為在編碼裝置與解碼裝置之間約定的值。換言之,可以針對應用CCLM模式的目前色度區塊將特定值導出為預定值。
或者,例如,編碼裝置可以對表示特定值的資訊進行編碼,且經由位元圖用訊號傳遞表示特定值的資訊。視訊資訊可以包括表示特定值的資訊。可以用編碼單元(CU)為單位用訊號傳遞表示特定值的資訊。或者,可以用切片標頭、圖片參數集(PPS)、或序列參數集(SPS)為單位用訊號傳遞表示特定值的資訊。也就是說,可以利用切片標頭、圖片參數集(PPS)、或序列參數集(SPS)用訊號傳遞表示特定值的資訊。
或者,例如,編碼裝置可以對表示是否基於特定值來導出相鄰參考樣本數的旗標資訊進行編碼,且經由位元圖用訊號傳遞旗標資訊。視訊資訊可以包括表示是否基於特定值來導出相鄰參考樣本數的旗標資訊。在旗標資訊值為1的情況下,旗標資訊可以表示,相鄰參考樣本數是基於特定值來導出的,且在旗標資訊值為0的情況下,旗標資訊可以表示,相鄰參考樣本數不是基於特定值來導出的。在旗標資訊值為1的情況下,預測相關的資訊可以包括表示特定值的資訊,且可以基於表示特定值的資訊來導出特定值。可以用編碼單元(CU)為單位用訊號傳遞旗標資訊及/或表示特定值的資訊。或者,可以用切片標頭、圖片參數集(PPS)、或序列參數集(SPS)為單位用訊號傳遞旗標資訊及/或表示特定值的資訊。也就是說,可以利用切片標頭、PPS、或SPS用訊號傳遞旗標資訊及/或表示特定值的資訊。
或者,例如,可以基於目前色度區塊的大小來導出特定值。
舉例而言,在目前色度區塊的寬度與高度之間的較小值為2或更小的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2,且在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2或更小的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2,在目前色度區塊的寬度與高度之間的較小值為8的情況下,可以將特定值導出為4,且在目前色度區塊的寬度與高度之間的較小值大於8的情況下,可以將特定值導出為8。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2或更小的情況下,可以將特定值導出為1,且在目前色度區塊的寬度與高度之間的較小值大於2的情況下,可以將特定值導出為2。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2或更小的情況下,可以將特定值導出為1,且在目前色度區塊的寬度與高度之間的較小值大於2的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的大小為2x2的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為2,且在目前色度區塊的寬度與高度之間的較小值大於2的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的大小為2x2的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為2,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2,且在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的大小為2x2的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為2,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為4,且在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2,且在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為1,且在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值大於2的情況下,可以將特定值導出為2。
此外,舉例而言,可以基於目前區塊的寬度與高度之間的較小值是否大於特定閾值來導出特定值。例如,在目前區塊的寬度與高度之間的較小值大於特定閾值的情況下,可以將特定閾值導出為4,在目前區塊的寬度與高度之間的較小值為特定閾值或更小的情況下,可以將特定閾值導出為2。可以將特定閾值導出為預定值。也就是說,可以將特定閾值導出為在編碼裝置與解碼裝置之間約定的值。或者,例如,編碼裝置可以對包括預測相關的資訊的視訊資訊進行編碼,且預測相關的資訊可以包括表示特定閾值的資訊。在此情況下,可以基於表示特定閾值的資訊來導出特定閾值。例如,導出的特定閾值可以是4或8。
編碼裝置可以導出該樣本數的相鄰色度樣本(步驟S2420)。編碼裝置可以導出該樣本數的相鄰色度樣本。
例如,在目前色度區塊的CCLM預測模式為左上側LM模式的情況下,編碼裝置可以導出該樣本數的左側相鄰色度樣本及該樣本數的上側相鄰色度樣本。詳細而言,在目前色度區塊的大小為NxM的情況下,編碼裝置可以在N個上側相鄰色度樣本之中導出該樣本數的上側相鄰色度樣本及在N個左側相鄰色度樣本之中導出該樣本數的左側相鄰色度樣本。此處,N可以等於或小於M。
此外,例如,在目前色度區塊的CCLM預測模式是上側LM模式的情況下,編碼裝置可以導出該樣本數的上側相鄰色度樣本。詳細而言,在目前色度區塊的大小為NxM的情況下,編碼裝置可以在2N個上側相鄰色度樣本之中導出該樣本數的上側相鄰色度樣本。此處,N可以等於或小於M。
此外,例如,在目前色度區塊的CCLM預測模式是左側LM模式的情況下,編碼裝置可以導出該樣本數的左側相鄰色度樣本。詳細而言,在目前色度區塊的大小為MxN的情況下,編碼裝置可以在2N個左側相鄰色度樣本之中導出該樣本數的左側相鄰色度樣本。此處,N可以等於或小於M。
編碼裝置可以導出目前亮度區塊的降取樣的相鄰亮度樣本及降取樣的亮度樣本(步驟S2430)。此處,相鄰亮度樣本可以與相鄰色度樣本對應。例如,降取樣的相鄰亮度樣本可以包括目前亮度區塊的與上側相鄰色度樣本對應的降取樣的上側相鄰亮度樣本及目前亮度區塊的與左側相鄰色度樣本對應的降取樣的左側相鄰亮度樣本。
也就是說,例如,相鄰亮度樣本可以包括與上側相鄰色度樣本對應的該樣本數的降取樣的上側相鄰亮度樣本及與左側相鄰色度樣本對應的該樣本數的降取樣的左側相鄰亮度樣本。
或者,例如,降取樣的相鄰亮度樣本可以包括目前亮度區塊的與上側相鄰色度樣本對應的降取樣的上側相鄰亮度樣本。也就是說,例如,相鄰亮度樣本可以包括與上側相鄰色度樣本對應的該樣本數的降取樣的上側相鄰亮度樣本。
或者,例如,降取樣的相鄰亮度樣本可以包括目前亮度區塊的與左側相鄰色度樣本對應的降取樣的左側相鄰亮度樣本。也就是說,例如,相鄰亮度樣本可以包括與左側相鄰色度樣本對應的該樣本數的降取樣的左側相鄰亮度樣本。
編碼裝置基於相鄰色度樣本及降取樣的相鄰亮度樣本來導出CCLM參數(步驟S2440)。編碼裝置可以基於相鄰色度樣本及降取樣的相鄰亮度樣本來導出CCLM參數。例如,可以基於上述的等式3來導出CCLM參數。或者,例如,可以基於上述的等式4來導出CCLM參數。
編碼裝置基於CCLM參數及降取樣的亮度樣本針對目前色度區塊導出預測樣本(步驟S2450)。編碼裝置可以基於CCLM參數及降取樣的亮度樣本針對目前色度區塊導出預測樣本。編碼裝置可以將由CCLM參數所導出的CCLM應用於降取樣的亮度樣本及針對目前色度區塊產生預測樣本。也就是說,編碼裝置可以基於CCLM參數來執行CCLM預測及針對目前色度區塊產生預測樣本。例如,可以基於上述的等式1來導出預測樣本。
編碼裝置對包括用於目前色度區塊的預測模式資訊的視訊資訊進行編碼(步驟S2460)。編碼裝置可以對包括用於目前色度區塊的預測模式資訊的視訊資訊進行編碼及經由位元串流用訊號傳遞。預測模式資訊可以包括表示是否將CCLM預測應用於目前色度區塊的旗標。進一步地,預測模式資訊可以包括表示目前色度區塊的CCLM預測模式的索引資訊。
此外,例如,視訊資訊可以包括表示特定值的資訊。此外,例如,視訊資訊可以包括表示特定值的資訊。此外,例如,視訊資訊可以包括表示是否基於特定值來導出相鄰參考樣本數的旗標資訊。
同時,雖然未示於附圖中,但編碼裝置也可以基於目前色度區塊的原始樣本及預測樣本來導出目前色度區塊的殘差樣本,基於殘差樣本來產生目前色度區塊的殘差的資訊,及對殘差的資訊進行編碼。視訊資訊可以包括殘差的資訊。此外,編碼裝置可以基於目前色度區塊的預測樣本及殘差樣本來產生目前色度區塊的重構的樣本。
同時,可以經由網路或(數位)儲存媒體向解碼裝置傳輸位元串流。此處,網路可以包括廣播網路及/或通訊網路,且數位儲存媒體可以包括各種儲存媒體,例如USB、SD、CD、DVD、藍光、HDD、SSD等等。
圖25示意性地繪示依據本揭示內容的執行影像編碼方法的編碼裝置。可以藉由圖25中所示的編碼裝置來執行圖24中所示的方法。在一個具體的示例中,編碼裝置的預測器可以執行圖24的步驟S2400到S2450,且編碼裝置的熵編碼器可以執行圖24的步驟S2460。此外,雖然未示於附圖中,但可以藉由圖25中所示的編碼裝置的減法器來執行基於目前色度區塊的原始樣本及預測樣本導出目前色度區塊的殘差樣本的過程,可以藉由圖25中所示的編碼裝置的加法器來執行基於目前色度區塊的殘差樣本及預測樣本導出目前色度區塊的重構的樣本過程,可以藉由圖25中所示的編碼裝置的變換器來執行基於殘差樣本產生目前色度區塊的殘差的資訊的過程,且可以藉由圖17中所示的編碼裝置的熵編碼器來執行對殘差的資訊進行編碼的過程。
圖26示意性地繪示依據本揭示內容藉由解碼裝置進行的視訊解碼方法。可以藉由圖3中所示的解碼裝置來執行圖26中所示的方法。在一個具體的示例中,可以藉由解碼裝置的熵解碼器來執行圖26的步驟S2600,且可以藉由解碼裝置的預測器來執行步驟S2610到S2650,且可以藉由解碼裝置的加法器來執行步驟S1860。此外,雖然未示於附圖中,但可以藉由解碼裝置的熵解碼器來執行經由位元串流來獲取目前區塊的殘差的資訊的過程,且可以藉由解碼裝置的逆變換器來執行基於殘差資訊來導出目前區塊的殘差樣本的過程。
解碼裝置獲得包括用於目前色度區塊的預測模式資訊的資訊(步驟S2600)。解碼裝置可以接收包括用於目前色度區塊的預測模式資訊的視訊資訊。預測模式資訊可以表示目前色度區塊的圖框內預測模式。此外,表示目前色度區塊的預測模式資訊的語法元素可以是intra_chroma_pred_mode。視訊資訊可以包括預測模式資訊。
進一步地,預測模式資訊可以包括在交叉分量線性模型(CCLM)預測模式之中指示目前色度區塊的CCLM預測模式的索引資訊。CCLM預測模式可以包括左上側LM模式、上側LM模式、及左側LM模式。左上側LM模式可以表示上述的LM_LT模式,左側LM模式可以表示上述的LM_L模式,且上側LM模式可以表示上述的LM_T模式。此外,預測模式資訊可以包括表示是否將CCLM預測應用於目前色度區塊的旗標。例如,在將CCLM預測應用於目前色度區塊的情況下,可以將由索引資訊所指示的CCLM預測模式導出為用於目前色度區塊的CCLM預測模式。
解碼裝置可以基於預測模式資訊來導出複數個CCLM預測模式中的一者作為用於目前色度區塊的CCLM預測模式(步驟S2610)。解碼裝置基於預測模式資訊來目前色度圖框內預測模式的圖框內預測模式。例如,預測模式資訊可以表示用於目前色度區塊的CCLM預測模式。例如,可以基於索引資訊來導出用於目前色度區塊的CCLM預測模式。在該複數個CCLM預測模式之中,可以導出由索引資訊所指示的CCLM預測模式作為用於目前色度區塊的CCLM預測模式。
解碼裝置基於目前色度區塊的CCLM預測模式、目前色度區塊的大小、及特定值來導出目前色度區塊的相鄰色度樣本的樣本數(步驟S2620)。
此處,在目前色度區塊的CCLM預測模式是左側LM模式的情況下,相鄰色度樣本可以僅包括目前色度區塊的左側相鄰色度樣本。此外,在目前色度區塊的CCLM預測模式是上側LM模式的情況下,相鄰色度樣本可以僅包括目前色度區塊的上側相鄰色度樣本。並且,在目前色度區塊的CCLM預測模式是左上側LM模式的情況下,相鄰色度樣本可以包括目前色度區塊的左側相鄰色度樣本及上側相鄰色度樣本。
例如,在目前色度區塊的CCLM預測模式是左側LM模式的情況下,解碼裝置可以基於目前色度區塊的高度及特定值來導出樣本數。
舉例而言,解碼裝置可以藉由比較高度的兩倍及特定值的兩倍來導出相鄰色度樣本的樣本數。例如,在目前色度區塊的高度的兩倍大於特定值的兩倍的情況下,可以將樣本數導出為特定值的兩倍。進一步地,例如,在目前色度區塊的高度的兩倍是特定值的兩倍或更小的情況下,可以將樣本數導出為高度的兩倍。
此外,例如,在目前色度區塊的CCLM預測模式是上側LM模式的情況下,解碼裝置可以基於目前色度區塊的寬度及特定值來導出樣本數。
舉例而言,解碼裝置可以藉由比較寬度的兩倍及特定值的兩倍來導出相鄰色度樣本的樣本數。例如,在目前色度區塊的寬度的兩倍大於特定值的兩倍的情況下,可以將樣本數導出為特定值的兩倍。進一步地,例如,在目前色度區塊的寬度的兩倍是特定值的兩倍或更小的情況下,可以將樣本數導出為寬度的兩倍。
此外,例如,在目前色度區塊的CCLM預測模式是左側LM模式的情況下,解碼裝置可以藉由將寬度及高度與特定值進行比較來導出上側相鄰色度樣本及左側相鄰色度樣本的樣本數。
例如,在目前色度區塊的寬度及高度大於特定值的情況下,可以將樣本數導出為特定值。
進一步地,例如,在目前色度區塊的寬度及高度是特定值或更小的情況下,可以將樣本數導出為寬度及高度中的一個值。舉例而言,可以將樣本數導出為寬度及高度中的較小值。
同時,可以導出特定值以供導出目前色度區塊的CCLM參數。此處,可以將特定值稱為相鄰樣本數上限或最大相鄰樣本數。舉例而言,可以將特定值導出為2。或者,可以將特定值導出為4、8、或16。
此外,例如,可以將特定值導出為預定值。也就是說,可以將特定值導出為在編碼裝置與解碼裝置之間約定的值。換言之,可以針對應用CCLM模式的目前色度區塊將特定值導出為預定值。
或者,例如,解碼裝置可以經由位元串流獲得預測相關的資訊。換言之,視訊資訊可以包括表示特定值的資訊,且可以基於表示特定值的資訊來導出特定值。可以用編碼單元(CU)為單位用訊號傳遞表示特定值的資訊。或者,可以用切片標頭、圖片參數集(PPS)、或序列參數集(SPS)為單位用訊號傳遞表示特定值的資訊。也就是說,可以利用切片標頭、圖片參數集(PPS)、或序列參數集(SPS)用訊號傳遞表示特定值的資訊。
或者,例如,解碼裝置可以經由位元串流獲得表示是否基於特定值來導出相鄰參考樣本數的旗標資訊。換言之,視訊資訊可以包括表示是否基於特定值來導出相鄰參考樣本數的旗標資訊,且在旗標資訊值為1的情況下,視訊資訊可以包括表示特定值的資訊,且可以基於表示特定值的資訊來導出特定值。同時,在旗標資訊值為0的情況下,旗標資訊可以表示,相鄰參考樣本數不是基於特定值來導出的。可以用編碼單元(CU)為單位用訊號傳遞旗標資訊及/或表示特定值的資訊。或者,可以用切片標頭、圖片參數集(PPS)、或序列參數集(SPS)為單位用訊號傳遞旗標資訊及/或表示特定值的資訊。也就是說,可以利用切片標頭、PPS、或SPS用訊號傳遞旗標資訊及/或表示特定值的資訊。
或者,例如,可以基於目前色度區塊的大小來導出特定值。
舉例而言,在目前色度區塊的寬度與高度之間的較小值為2或更小的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2,且在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2或更小的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2,在目前色度區塊的寬度與高度之間的較小值為8的情況下,可以將特定值導出為4,且在目前色度區塊的寬度與高度之間的較小值大於8的情況下,可以將特定值導出為8。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2或更小的情況下,可以將特定值導出為1,且在目前色度區塊的寬度與高度之間的較小值大於2的情況下,可以將特定值導出為2。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2或更小的情況下,可以將特定值導出為1,且在目前色度區塊的寬度與高度之間的較小值大於2的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的大小為2x2的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為2,且在目前色度區塊的寬度與高度之間的較小值大於2的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的大小為2x2的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為2,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2,且在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的大小為2x2的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為2,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為4,且在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為1,在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2,且在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值為2的情況下,可以將特定值導出為1,且在目前色度區塊的寬度與高度之間的較小值為4的情況下,可以將特定值導出為2。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值大於4的情況下,可以將特定值導出為4。
此外,舉例而言,在目前色度區塊的寬度與高度之間的較小值大於2的情況下,可以將特定值導出為2。
此外,舉例而言,可以基於目前區塊的寬度與高度之間的較小值是否大於特定閾值來導出特定值。例如,在目前區塊的寬度與高度之間的較小值大於特定閾值的情況下,可以將特定閾值導出為4,在目前區塊的寬度與高度之間的較小值為特定閾值或更小的情況下,可以將特定閾值導出為2。可以將特定閾值導出為預定值。也就是說,可以將特定閾值導出為在編碼裝置與解碼裝置之間約定的值。或者,例如,視訊資訊可以包括表示特定閾值的資訊。在此情況下,可以基於表示特定閾值的資訊來導出特定閾值。例如,導出的特定閾值可以是4或8。
解碼裝置可以導出該樣本數的相鄰色度樣本(步驟S2630)。解碼裝置可以導出該樣本數的相鄰色度樣本。
例如,在目前色度區塊的CCLM預測模式為左上側LM模式的情況下,解碼裝置可以導出該樣本數的左側相鄰色度樣本及該樣本數的上側相鄰色度樣本。詳細而言,在目前色度區塊的大小為NxM的情況下,編碼裝置可以在N個上側相鄰色度樣本之中導出該樣本數的上側相鄰色度樣本及在N個左側相鄰色度樣本之中導出該樣本數的左側相鄰色度樣本。此處,N可以等於或小於M。
此外,例如,在目前色度區塊的CCLM預測模式是上側LM模式的情況下,解碼裝置可以導出該樣本數的上側相鄰色度樣本。詳細而言,在目前色度區塊的大小為NxM的情況下,解碼裝置可以在2N個上側相鄰色度樣本之中導出該樣本數的上側相鄰色度樣本。此處,N可以等於或小於M。
此外,例如,在目前色度區塊的CCLM預測模式是左側LM模式的情況下,解碼裝置可以導出該樣本數的左側相鄰色度樣本。詳細而言,在目前色度區塊的大小為MxN的情況下,解碼裝置可以在2N個左側相鄰色度樣本之中導出該樣本數的左側相鄰色度樣本。此處,N可以等於或小於M。
解碼裝置可以導出目前亮度區塊的降取樣的相鄰亮度樣本及降取樣的亮度樣本(步驟S2640)。此處,相鄰亮度樣本可以與相鄰色度樣本對應。例如,降取樣的相鄰亮度樣本可以包括目前亮度區塊的與上側相鄰色度樣本對應的降取樣的上側相鄰亮度樣本及目前亮度區塊的與左側相鄰色度樣本對應的降取樣的左側相鄰亮度樣本。
也就是說,例如,相鄰亮度樣本可以包括與上側相鄰色度樣本對應的該樣本數的降取樣的上側相鄰亮度樣本及與左側相鄰色度樣本對應的該樣本數的降取樣的左側相鄰亮度樣本。
或者,例如,降取樣的相鄰亮度樣本可以包括目前亮度區塊的與上側相鄰色度樣本對應的降取樣的上側相鄰亮度樣本。也就是說,例如,相鄰亮度樣本可以包括與上側相鄰色度樣本對應的該樣本數的降取樣的上側相鄰亮度樣本。
或者,例如,降取樣的相鄰亮度樣本可以包括目前亮度區塊的與左側相鄰色度樣本對應的降取樣的左側相鄰亮度樣本。也就是說,例如,相鄰亮度樣本可以包括與左側相鄰色度樣本對應的該樣本數的降取樣的左側相鄰亮度樣本。
解碼裝置基於相鄰色度樣本及降取樣的相鄰亮度樣本來導出CCLM參數(步驟S2650)。解碼裝置可以基於相鄰色度樣本及降取樣的相鄰亮度樣本來導出CCLM參數。例如,可以基於上述的等式3來導出CCLM參數。或者,例如,可以基於上述的等式4來導出CCLM參數。
解碼裝置基於CCLM參數及降取樣的亮度樣本針對目前色度區塊導出預測樣本(步驟S2660)。解碼裝置可以基於CCLM參數及降取樣的亮度樣本針對目前色度區塊導出預測樣本。解碼裝置可以將由CCLM參數所導出的CCLM應用於降取樣的亮度樣本及針對目前色度區塊產生預測樣本。也就是說,解碼裝置可以基於CCLM參數來執行CCLM預測及針對目前色度區塊產生預測樣本。例如,可以基於上述的等式1來導出預測樣本。
解碼裝置基於預測樣本來產生目前色度區塊的重構的樣本(步驟S2670)。解碼裝置可以基於預測樣本來產生重構的樣本。例如,解碼裝置可以從位元串流接收目前色度區塊的殘差的資訊。殘差的資訊可以包括(色度)殘差樣本的變換係數。解碼裝置可以基於殘差資訊來導出目前色度區塊的殘差樣本(或殘差樣本陣列)。在此情況下,解碼裝置可以基於預測樣本及殘差樣本來產生重構的樣本。解碼裝置可以基於重構的樣本來導出重構的區塊或重構的圖片。之後,如上所述,解碼裝置可以將環內(in-loop)過濾程序(例如去區塊過濾及/或SAO過程)應用於重構的圖片以改善主觀/客觀的影像品質。
圖27示意性地繪示依據本揭示內容用於執行視訊解碼方法的解碼裝置。可以藉由圖27中所示的解碼裝置來執行圖26中所示的方法。在一個具體的示例中,圖27的解碼裝置的熵解碼器可以執行圖26的步驟S2600,圖27的解碼裝置的預測器可以執行圖26的步驟S2610到S2660,且圖27的解碼裝置的加法器可以執行圖26的步驟S2670。此外,雖然未示於附圖中,但可以藉由解碼裝置的熵解碼器來執行經由位元串流來獲取目前區塊的殘差的資訊的過程,且可以藉由圖27的解碼裝置的逆變換器來執行基於殘差資訊來導出目前區塊的殘差樣本的過程。
依據上述的本揭示內容,基於CCLM來執行圖框內預測,且可以改善視訊編碼效率。
此外,依據本揭示內容,可以改善圖框內預測的效率,其基於包括複數個LM模式的CCLM,即多向線性模型(MDLM)。
此外,依據本揭示內容,將為了導出執行在具有大的大小的色度區塊中的多向線性模型(MDLM)的線性模型參數所選定的相鄰樣本數限制於特定的數量,且因此可以減少圖框內預測複雜度。
在上述的實施例中,描述了基於具有一系列步驟或方塊的流程圖的方法。本揭示內容不限於以上步驟或方塊的順序。一些步驟或方塊可以同時發生或用與上述的其他步驟或方塊不同的順序發生。進一步地,本領域中的技術人員將了解,以上流程圖中所示的步驟不是排他的,可以包括另外的步驟,或可以在不影響本揭示內容的範圍的情況下刪除流程圖中的一或更多個步驟。
可以藉由實施在處理器、微處理器、控制器、或晶片上來執行此說明書中所述的實施例。例如,可以藉由實施在電腦、處理器、微處理器、控制器、或晶片上來執行每個附圖中所示的功能單元。在此情況下,可以將實施方式的資訊(例如關於指令的資訊)或演算法的資訊儲存在數位儲存媒體中。
此外,可以將應用本揭示內容的解碼設備及編碼設備包括在以下項目中:多媒體廣播傳輸/接收裝置、行動通訊終端、家庭電影院視訊裝置、數位電影院視訊裝置、監視攝影機、視訊聊天裝置、實時通訊裝置(例如視訊通訊、行動串流裝置)、儲存媒體、攝錄影機、VoD服務提供裝置、頂置(OTT)視訊裝置、網際網路串流服務提供裝置、三維(3D)視訊裝置、電話會議視訊設備、運輸使用者設備(例如車輛使用者設備、飛機使用者設備、船隻使用者設備等)、及醫療視訊裝置,且可以用來處理視訊訊號及資料訊號。例如,頂置(OTT)視訊裝置可以包括遊戲主機、藍光播放器、網際網路存取TV、家庭電影院系統、智慧型手機、平板PC、數位視訊記錄器(DVR)等等。
並且,可以用程式的形式產生本揭示內容的處理方法,該程式要由電腦所執行且可以儲存在電腦可讀取記錄媒體中。也可以將具有依據本揭示內容的資料結構的多媒體資料儲存在電腦可讀取記錄媒體中。電腦可讀取記錄媒體包括所有類型的儲存設備,可以由電腦系統讀取的資料儲存在該等儲存設備中。例如,電腦可讀取記錄媒體可以包括BD、通用串列匯流排(USB)、ROM、RAM、CD-ROM、磁帶、軟碟、及光學資料儲存設備。並且,電腦可讀取記錄媒體包括用載波的形式實施的媒體(例如經由網際網路進行的傳輸)。此外,由編碼方法所產生的位元串流可以儲存在電腦可讀取記錄媒體中或可以在有線/無線通訊網路上傳送。
此外,可以用依據程式碼的電腦程式產品實施本揭示內容的實施例,且可以藉由本揭示內容的實施例在電腦中執行該等程式碼。可以將程式碼儲存在可以由電腦讀取的載體上。
圖28繪示內容串流系統的結構圖,本揭示內容可以應用於該內容串流系統。
應用本文件的實施例的內容串流系統可以主要包括編碼伺服器、串流伺服器、網頁伺服器、媒體儲存器、使用者設備、及多媒體輸入設備。
編碼伺服器將從多媒體輸入設備(例如智慧型手機、攝影機、攝錄影機等等)輸入的內容壓縮成數位資料以產生位元串流,及向串流伺服器傳送位元串流。舉另一個例子,在多媒體輸入設備(例如智慧型手機、攝影機、攝錄影機等等)直接產生位元串流時,可以省略編碼伺服器。
可以藉由應用本文件的實施例的編碼方法或位元串流產生方法來產生位元串流,且串流伺服器可以在傳送或接收位元串流的過程中暫時儲存位元串流。
串流伺服器基於使用者經由網頁伺服器進行的請求向使用者設備傳送多媒體資料,且網頁伺服器充當用於向使用者通知服務的媒體。在使用者從網頁伺服器請求所需的服務時,網頁伺服器將其遞送到串流伺服器,且串流伺服器向使用者傳送多媒體資料。在此情況下,內容串流系統可以包括單獨的控制伺服器。在此情況下,控制伺服器用來控制內容串流系統中的設備之間的命令/回應。
串流伺服器可以從媒體儲存器及/或編碼伺服器接收內容。例如,在從編碼伺服器接收內容時,可以實時接收內容。在此情況下,為了提供平滑的串流服務,串流伺服器可以儲存位元串流達預定的時間。
使用者設備的示例可以包括行動電話、智慧型手機、膝上型電腦、數位廣播終端、個人數位助理(PDA)、可攜式多媒體播放器(PMP)、導航、Slate平板PC、平板PC、超筆電、可穿戴式設備(例如智慧型手錶、智慧型玻璃、頭戴式顯示器)、數位TV、桌上型電腦、數位標牌等等。內容串流系統中的每個伺服器均可以操作為分佈式伺服器,在此情況下,從每個伺服器所接收的資料可以是分佈式的。
200:編碼裝置 210:影像劃分器 220:預測器 221:圖框間預測器 222:圖框內預測器 230:殘差處理器 231:減法器 232:變換器 233:量化器 234:去量化器 235:逆變換器 240:熵編碼器 250:加法器 260:過濾器 270:記憶體 300:解碼裝置 310:熵解碼器 320:殘差處理器 321:去量化器 322:逆變換器 330:預測器 331:圖框間預測器 332:圖框內預測器 340:加法器 350:過濾器 360:記憶體 S1000:步驟 S1005:步驟 S1010:步驟 S1015:步驟 S1020:步驟 S1025:步驟 S1030:步驟 S1035:步驟 S1040:步驟 S1045:步驟 S1050:步驟 S1100:步驟 S1105:步驟 S1110:步驟 S1115:步驟 S1120:步驟 S1125:步驟 S1130:步驟 S1135:步驟 S1140:步驟 S1145:步驟 S1150:步驟 S1155:步驟 S1160:步驟 S1200:步驟 S1205:步驟 S1210:步驟 S1215:步驟 S1220:步驟 S1225:步驟 S1230:步驟 S1235:步驟 S1240:步驟 S1300:步驟 S1305:步驟 S1310:步驟 S1315:步驟 S1320:步驟 S1325:步驟 S1330:步驟 S1335:步驟 S1340:步驟 S1400:步驟 S1405:步驟 S1410:步驟 S1415:步驟 S1420:步驟 S1425:步驟 S1430:步驟 S1435:步驟 S1440:步驟 S1445:步驟 S1450:步驟 S1500:步驟 S1505:步驟 S1510:步驟 S1515:步驟 S1520:步驟 S1525:步驟 S1530:步驟 S1535:步驟 S1540:步驟 S1545:步驟 S1550:步驟 S1555:步驟 S1560:步驟 S1600:步驟 S1605:步驟 S1610:步驟 S1615:步驟 S1620:步驟 S1625:步驟 S1630:步驟 S1635:步驟 S1640:步驟 S1645:步驟 S1650:步驟 S1655:步驟 S1660:步驟 S1900:步驟 S1905:步驟 S1910:步驟 S1915:步驟 S1920:步驟 S1925:步驟 S2000:步驟 S2005:步驟 S2010:步驟 S2015:步驟 S2020:步驟 S2025:步驟 S2030:步驟 S2035:步驟 S2040:步驟 S2100:步驟 S2105:步驟 S2110:步驟 S2115:步驟 S2120:步驟 S2125:步驟 S2130:步驟 S2200:步驟 S2205:步驟 S2210:步驟 S2215:步驟 S2220:步驟 S2225:步驟 S2230:步驟 S2300:步驟 S2305:步驟 S2310:步驟 S2315:步驟 S2400:步驟 S2410:步驟 S2420:步驟 S2430:步驟 S2440:步驟 S2450:步驟 S2460:步驟 S2600:步驟 S2610:步驟 S2620:步驟 S2630:步驟 S2640:步驟 S2650:步驟 S2660:步驟 S2670:步驟 S800:步驟 S805:步驟 S810:步驟 S815:步驟 S820:步驟 S825:步驟 S830:步驟 S835:步驟 S840:步驟 S845:步驟 S850:步驟 S860:步驟 S900:步驟 S905:步驟 S910:步驟 S915:步驟 S920:步驟 S925:步驟 S930:步驟 S935:步驟 S940:步驟 S945:步驟 S950:步驟 S960:步驟
圖1簡要地繪示了視訊/影像編碼設備的示例,本揭示內容的實施例可應用於該設備。
圖2是一張示意圖,繪示視訊/影像編碼裝置的配置,本文件的實施例可以應用於該裝置。
圖3是一張示意圖,繪示視訊/影像解碼裝置的配置,本文件的實施例可以應用於該裝置。
圖4繪示65個預測方向的圖框內定向模式。
圖5是用於描述依據一個實施例的導出目前的色度區塊的圖框內預測模式的過程的圖表。
圖6繪示用於上述CCLM預測的參數計算的2N個參考樣本。
圖7繪示LM_A(線性模型_上方)模式及LM_L(線性模型_左側)模式。
圖8a及8b是用於描述依據一個實施例針對目前的色度區塊執行CCLM預測的程序的圖表。
圖9a及9b是用於描述依據一個實施例針對目前的色度區塊執行CCLM預測的程序的圖表。
圖10a及10b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法1導出的。
圖11a及11b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法2導出的。
圖12a及12b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法3導出的。
圖13a及13b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法4導出的。
圖14a及14b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法1導出的。
圖15a及15b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法2導出的。
圖16a及16b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法3導出的。
圖17繪示選定色度區塊的相鄰參考樣本的示例。
圖18a到18c繪示經由現有的次取樣導出的相鄰參考樣本及經由依據本實施例的次取樣導出的相鄰參考樣本。
圖19繪示使用次取樣來執行CCLM預測的示例,該次取樣使用上述的等式6。
圖20a及20b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法1導出的。
圖21a及21b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法2導出的。
圖22a及22b是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法3導出的。
圖23是用於描述基於目前的色度區塊的CCLM參數來執行CCLM預測的程序的圖表,該等CCLM參數是依據上述的本實施例的方法4導出的。
圖24示意性地繪示依據本揭示內容藉由編碼裝置進行的視訊編碼方法。
圖25示意性地繪示依據本揭示內容的執行影像編碼方法的編碼裝置。
圖26示意性地繪示依據本揭示內容藉由解碼裝置進行的視訊解碼方法。
圖27示意性地繪示依據本揭示內容用於執行視訊解碼方法的解碼裝置。
圖28繪示內容串流系統的結構圖,本揭示內容可以應用於該內容串流系統。
國內寄存資訊(請依寄存機構、日期、號碼順序註記) 無 國外寄存資訊(請依寄存國家、機構、日期、號碼順序註記) 無
S2600:步驟
S2610:步驟
S2620:步驟
S2630:步驟
S2640:步驟
S2650:步驟
S2660:步驟
S2670:步驟

Claims (16)

  1. 一種由一解碼裝置所執行的視訊解碼方法,該方法包括以下步驟:獲得包括用於一目前色度區塊的預測模式資訊的視訊資訊;基於該預測模式資訊來導出一左側交叉分量線性模型(CCLM)預測模式作為該目前色度區塊的一內預測模式;基於該目前色度區塊的一高度及一特定值來導出該目前色度區塊的左側相鄰色度樣本的一樣本數;導出該樣本數的該等左側相鄰色度樣本;導出與該等左側相鄰色度樣本相關的降取樣的左側相鄰亮度樣本及一目前亮度區塊的降取樣的亮度樣本;基於該等左側相鄰色度樣本及該等降取樣的左側相鄰亮度樣本來導出CCLM參數;基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本;及基於該等預測樣本針對該目前色度區塊產生重構的樣本,其中將該特定值導出為2,其中該目前色度區塊的該高度為N,其中基於2N小於或等於該特定值的兩倍,將該等左側相鄰色度樣本的該樣本數導出為2N,及基於該2N大於該特定值的兩倍,將該等左側相鄰色 度樣本的該樣本數導出為4。
  2. 如請求項1所述的方法,其中該預測模式資訊包括指示CCLM預測模式中的一者的索引資訊;及其中該等CCLM預測模式包括一左上側CCLM模式、一上側CCLM模式、及該左側CCLM模式。
  3. 如請求項1所述的方法,其中針對應用該左側CCLM模式的該目前色度區塊將該特定值導出為一預定值。
  4. 如請求項1所述的方法,其中用編碼單元(CU)為一單位用訊號傳遞該特定值上的資訊。
  5. 如請求項1所述的方法,其中利用一切片標頭、一圖片參數集(PPS)、及一序列參數集(SPS)用訊號傳遞該特定值上的資訊。
  6. 一種由一編碼裝置所執行的視訊編碼方法,該方法包括以下步驟:導出一左側交叉分量線性模型(CCLM)預測模式作為目前色度區塊的一內預測模式;基於該目前色度區塊的一高度及一特定值來導出該目前色度區塊的左側相鄰色度樣本的一樣本數;導出該樣本數的該等左側相鄰色度樣本;導出與該等左側相鄰色度樣本相關的降取樣的左側相鄰亮度樣本及一目前亮度區塊的降取樣的亮度樣本;基於該等左側相鄰色度樣本及該等降取樣的左側相鄰亮度樣本來導出CCLM參數; 基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本;及對包括用於該目前色度區塊的預測模式資訊的視訊資訊進行編碼,其中將該特定值導出為2,其中該目前色度區塊的該高度為N,其中基於2N小於或等於該特定值的兩倍,將該等左側相鄰色度樣本的該樣本數導出為2N,及基於該2N大於該特定值的兩倍,將該等左側相鄰色度樣本的該樣本數導出為4。
  7. 如請求項6所述的方法,其中該預測模式資訊包括指示CCLM預測模式中的一者的索引資訊;及其中該等CCLM預測模式包括一左上側CCLM模式、一上側CCLM模式、及該左側CCLM模式。
  8. 如請求項6所述的方法,其中針對應用該左側CCLM模式的該目前色度區塊將該特定值導出為一預定值。
  9. 如請求項6所述的方法,其中用編碼單元(CU)為一單位用訊號傳遞該特定值上的資訊。
  10. 如請求項6所述的方法,其中利用一切片標頭、一圖片參數集(PPS)、及一序列參數集(SPS)用訊號傳遞該特定值上的資訊。
  11. 一種儲存一位元串流的非暫態電腦可讀取儲存媒體,由一方法來產生該位元串流,該方法包括以下 步驟:導出一左側交叉分量線性模型(CCLM)預測模式作為該目前色度區塊的一內預測模式;基於該目前色度區塊的一高度及一特定值來導出該目前色度區塊的左側相鄰色度樣本的一樣本數;導出該樣本數的該等左側相鄰色度樣本;導出與該等左側相鄰色度樣本相關的降取樣的左側相鄰亮度樣本及一目前亮度區塊的降取樣的亮度樣本;基於該等左側相鄰色度樣本及該等降取樣的左側相鄰亮度樣本來導出CCLM參數;基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本;對包括用於該目前色度區塊的預測模式資訊的視訊資訊進行編碼;及產生包括該視訊資訊的該位元串流,其中將該特定值導出為2,其中該目前色度區塊的該高度為N,其中基於2N小於或等於該特定值的兩倍,將該等左側相鄰色度樣本的該樣本數導出為2N,及基於該2N大於該特定值的兩倍,將該等左側相鄰色度樣本的該樣本數導出為4。
  12. 如請求項11所述的非暫態電腦可讀取儲存媒體,其中該預測模式資訊包括指示CCLM預測模式中的一者的索引資訊;及 其中該等CCLM預測模式包括一左上側CCLM模式、一上側CCLM模式、及該左側CCLM模式。
  13. 如請求項11所述的非暫態電腦可讀取儲存媒體,其中針對應用該左側CCLM模式的該目前色度區塊將該特定值導出為一預定值。
  14. 如請求項11所述的非暫態電腦可讀取儲存媒體,其中用編碼單元(CU)為一單位用訊號傳遞該特定值上的資訊。
  15. 如請求項11所述的非暫態電腦可讀取儲存媒體,其中利用一切片標頭、一圖片參數集(PPS)、及一序列參數集(SPS)用訊號傳遞該特定值上的資訊。
  16. 一種針對影像的資料的傳輸方法,該方法包括以下步驟:獲得包括用於一目前色度區塊的預測模式資訊的視訊資訊的一位元串流;及傳送包括該視訊資訊的該位元串流的該資料,該位元串流包括該預測模式資訊;其中藉由以下步驟來產生該預測模式資訊:導出一左側交叉分量線性模型(CCLM)預測模式作為該目前色度區塊的一內預測模式,基於該目前色度區塊的一高度及一特定值來導出該目前色度區塊的左側相鄰色度樣本的一樣本數,導出該樣本數的該等左側相鄰色度樣本,導出與該等左側相鄰色度樣本相關的降取樣的左 側相鄰亮度樣本及一目前亮度區塊的降取樣的亮度樣本,基於該等左側相鄰色度樣本及該等降取樣的左側相鄰亮度樣本來導出CCLM參數,基於該等CCLM參數及該等降取樣的亮度樣本針對該目前色度區塊導出預測樣本,對包括用於該目前色度區塊的該預測模式資訊的視訊資訊進行編碼,其中將該特定值導出為2,該目前色度區塊的該高度為N,基於2N小於或等於該特定值的兩倍,將該等左側相鄰色度樣本的該樣本數導出為2N,基於該2N大於該特定值的兩倍,將該等左側相鄰色度樣本的該樣本數導出為4。
TW110120915A 2018-11-23 2019-11-25 用於硬體實施的高效cclm參數導出方法 TWI784561B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201862770835P 2018-11-23 2018-11-23
US62/770,835 2018-11-23

Publications (2)

Publication Number Publication Date
TW202143720A TW202143720A (zh) 2021-11-16
TWI784561B true TWI784561B (zh) 2022-11-21

Family

ID=70773851

Family Applications (2)

Application Number Title Priority Date Filing Date
TW108142692A TWI732355B (zh) 2018-11-23 2019-11-25 用於硬體實施的高效cclm參數導出方法
TW110120915A TWI784561B (zh) 2018-11-23 2019-11-25 用於硬體實施的高效cclm參數導出方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW108142692A TWI732355B (zh) 2018-11-23 2019-11-25 用於硬體實施的高效cclm參數導出方法

Country Status (14)

Country Link
US (4) US11012699B2 (zh)
EP (2) EP3709645B1 (zh)
JP (3) JP7018139B2 (zh)
KR (3) KR102637084B1 (zh)
CN (3) CN116916016A (zh)
AU (2) AU2019383886B2 (zh)
BR (3) BR112020012022B1 (zh)
CA (2) CA3085391C (zh)
ES (1) ES2934966T3 (zh)
HU (1) HUE060910T2 (zh)
MX (1) MX2020005865A (zh)
PL (1) PL3709645T3 (zh)
TW (2) TWI732355B (zh)
WO (1) WO2020105925A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11178396B2 (en) * 2018-11-14 2021-11-16 Tencent America LLC Constrained intra prediction and unified most probable mode list generation
CN113068025B (zh) * 2018-12-25 2023-05-12 Oppo广东移动通信有限公司 解码预测方法、装置及计算机存储介质
AU2019417996A1 (en) * 2019-01-02 2021-07-22 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Prediction decoding method, device and computer storage medium
KR20220027851A (ko) * 2019-06-28 2022-03-08 바이트댄스 아이엔씨 화면 콘텐츠 코딩에서의 크로마 인트라 모드 도출
US20220092827A1 (en) * 2020-09-23 2022-03-24 Electronics And Telecommunications Research Institute Method, apparatus, system and computer-readable recording medium for feature information
WO2022191553A1 (ko) * 2021-03-08 2022-09-15 현대자동차주식회사 행렬 기반 크로스 컴포넌트 예측을 이용하는 비디오 코딩방법 및 장치
WO2024080828A1 (ko) * 2022-10-13 2024-04-18 한국전자통신연구원 영상 부호화/복호화를 위한 방법, 장치 및 기록 매체
CN115988206B (zh) * 2023-03-21 2024-03-26 深圳传音控股股份有限公司 图像处理方法、处理设备及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160277762A1 (en) * 2015-03-20 2016-09-22 Qualcomm Incorporated Downsampling process for linear model prediction mode

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101138392B1 (ko) 2004-12-30 2012-04-26 삼성전자주식회사 색차 성분의 상관관계를 이용한 컬러 영상의 부호화,복호화 방법 및 그 장치
CN105472387B (zh) 2010-04-09 2018-11-02 Lg电子株式会社 处理视频数据的方法和装置
JP2013034163A (ja) * 2011-06-03 2013-02-14 Sony Corp 画像処理装置及び画像処理方法
US9693070B2 (en) * 2011-06-24 2017-06-27 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
CA2840488A1 (en) * 2011-06-28 2013-01-03 Samsung Electronics Co., Ltd. Prediction method and apparatus for chroma component of image using luma component of image
US9307237B2 (en) 2012-01-19 2016-04-05 Futurewei Technologies, Inc. Reference pixel reduction for intra LM prediction
HUE063933T2 (hu) * 2012-06-29 2024-02-28 Electronics & Telecommunications Res Inst Eljárás és eszköz képek kódolására/dekódolására
CN105474639B (zh) * 2013-07-10 2018-08-07 凯迪迪爱通信技术有限公司 视频编码装置、视频解码装置、视频系统、视频编码方法、视频解码方法以及程序
US9998742B2 (en) * 2015-01-27 2018-06-12 Qualcomm Incorporated Adaptive cross component residual prediction
US10652575B2 (en) * 2016-09-15 2020-05-12 Qualcomm Incorporated Linear model chroma intra prediction for video coding
WO2018116925A1 (ja) 2016-12-21 2018-06-28 シャープ株式会社 イントラ予測画像生成装置、画像復号装置、および画像符号化装置
US11025903B2 (en) * 2017-01-13 2021-06-01 Qualcomm Incorporated Coding video data using derived chroma mode
PL3840377T3 (pl) * 2018-09-20 2023-07-31 Lg Electronics Inc. Sposób i urządzenie do dekodowania obrazu na podstawie predykcji cclm w systemie kodowania obrazu
CN112997492B (zh) * 2018-11-06 2024-02-20 北京字节跳动网络技术有限公司 帧内预测的简化参数推导

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160277762A1 (en) * 2015-03-20 2016-09-22 Qualcomm Incorporated Downsampling process for linear model prediction mode

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
網路文獻 Kai Zhang et.al Enhanced Cross-Component Linear Model for Chroma Intra-Prediction in Video Coding IEEE Transactions on Image Processing 2018/04/26 https://ieeexplore.ieee.org/document/8350031 *

Also Published As

Publication number Publication date
KR102415322B1 (ko) 2022-06-30
EP3709645A1 (en) 2020-09-16
KR20220098266A (ko) 2022-07-11
CA3213928A1 (en) 2020-05-28
CA3085391A1 (en) 2020-05-28
PL3709645T3 (pl) 2023-02-20
US11012699B2 (en) 2021-05-18
AU2021206901B2 (en) 2022-08-04
CN111587574A (zh) 2020-08-25
TW202027506A (zh) 2020-07-16
JP7421673B2 (ja) 2024-01-24
AU2021206901A1 (en) 2021-08-12
KR102637084B1 (ko) 2024-02-15
AU2019383886B2 (en) 2021-04-29
EP4120680A1 (en) 2023-01-18
EP3709645A4 (en) 2021-07-14
KR102524061B1 (ko) 2023-04-21
AU2019383886A1 (en) 2020-06-18
US11412236B2 (en) 2022-08-09
CA3085391C (en) 2023-10-24
TWI732355B (zh) 2021-07-01
ES2934966T3 (es) 2023-02-28
BR112020012022A2 (pt) 2021-06-22
BR112020012022B1 (pt) 2022-12-06
KR20230058177A (ko) 2023-05-02
MX2020005865A (es) 2020-09-09
BR122021014718B1 (pt) 2022-12-06
US11706426B2 (en) 2023-07-18
JP7234425B2 (ja) 2023-03-07
EP3709645B1 (en) 2022-10-19
CN116916016A (zh) 2023-10-20
US11956451B2 (en) 2024-04-09
JP2023054264A (ja) 2023-04-13
JP7018139B2 (ja) 2022-02-09
TW202308385A (zh) 2023-02-16
CN111587574B (zh) 2023-06-16
TW202143720A (zh) 2021-11-16
US20200296391A1 (en) 2020-09-17
EP4120680B1 (en) 2024-01-31
JP2022070864A (ja) 2022-05-13
US20220248036A1 (en) 2022-08-04
CN116939201A (zh) 2023-10-24
US20210176480A1 (en) 2021-06-10
HUE060910T2 (hu) 2023-04-28
JP2021510245A (ja) 2021-04-15
BR122021014717B1 (pt) 2022-12-06
WO2020105925A1 (ko) 2020-05-28
KR20200074218A (ko) 2020-06-24
US20230308665A1 (en) 2023-09-28

Similar Documents

Publication Publication Date Title
TWI784561B (zh) 用於硬體實施的高效cclm參數導出方法
CN112806004B (zh) 图像编码系统中基于cclm预测的图像解码的方法及装置
KR20210092308A (ko) 영상 코딩 시스템에서 cclm 예측을 사용하는 영상 디코딩 방법 및 그 장치
TWI842133B (zh) 用於硬體實施的高效cclm參數導出方法
RU2773521C1 (ru) Способ для декодирования изображения на основе предсказания взаимно-компонентной линейной модели в системе кодирования изображения и устройство для этого
RU2794202C2 (ru) Способ для декодирования изображения на основе предсказания взаимно-компонентной линейной модели в системе кодирования изображения и устройство для этого