TWI741584B - 視訊編碼系統之語法傳訊和參照限制的方法和裝置 - Google Patents

視訊編碼系統之語法傳訊和參照限制的方法和裝置 Download PDF

Info

Publication number
TWI741584B
TWI741584B TW109114616A TW109114616A TWI741584B TW I741584 B TWI741584 B TW I741584B TW 109114616 A TW109114616 A TW 109114616A TW 109114616 A TW109114616 A TW 109114616A TW I741584 B TWI741584 B TW I741584B
Authority
TW
Taiwan
Prior art keywords
adaptive
aps
adaptive parameter
current slice
filter
Prior art date
Application number
TW109114616A
Other languages
English (en)
Other versions
TW202046738A (zh
Inventor
陳慶曄
黃毓文
徐志瑋
莊子德
向時達
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW202046738A publication Critical patent/TW202046738A/zh
Application granted granted Critical
Publication of TWI741584B publication Critical patent/TWI741584B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

編碼方法與裝置包括：決定用於當前切片的一特定程序的參數；於一或多個適應性參數組（Adaptive Parameter Set，APS）中進行發信；使用參數來進行該特定程序；於一切片標頭中發信每一發信過的APS的一APS識別碼（ID）；以及編碼該當前切片。依據藉由APS所攜帶的資料的一類型（type），每一APS被分類至一種類別（category）中。每一發信過的APS的APS ID被計算於相關於該特定程序的一種類別並且是獨立於其他類別。解碼方法與裝置包括：對來自一當前切片的一切片標頭的每一被參考的APS的一APS ID加以剖析，以用於一特定程序；依據該被剖析的APS ID以及與該特定程序相關聯的一類別，決定來自每一被參考的APS的參數；對該當前切片進行該特定程序；以及解碼該當前切片。

Description

視訊編碼系統之語法傳訊和參照限制的方法和裝置
本發明是關於用於視訊編碼或視訊解碼的視訊資料處理的方法與裝置。尤其本發明是關於在一視訊編碼或解碼的系統中的語法發信以及應用於資料或參數參考的一約束。
高效率視訊編碼(High Efficiency Video Coding，HEVC)的標準，是由來自國際電信聯盟電信標準化部門研究組(ITU-T Study Group)的視訊編碼專家的視訊編碼聯合協作小組(Joint Collaborative Team on Video Coding，JCT-VC)所開發的最新視訊編解碼標準。HEVC標準依賴一基於塊的編解碼結構，其將每一切片(slice)分割為複數個編解碼樹單元(Coding Tree Unit，CTU)。一編碼過的畫面是由一個或一整體集合的切片來加以代表，每一切片包括一整數個CTU。在一切片中個別的CTU則依據一光柵掃描(raster scanning)順序來進行處理。在一雙向預測(Bi-predictive，B)切片中的每一塊的樣本數值是使用幀內預測或幀間預測用最多二個運動向量與參考索引來加以解碼。在一預測(Predictive，P)切片中的每一塊的樣本數值是使用幀內預測或幀間預測僅用一個運動向量與一個參考索引來加以解碼。一幀內(Intra，I)切片是僅使用幀內預測來加以解碼。依據一四叉樹(quadtree)分割方法，每一CTU進一步被遞迴 式地分割成一或複數個編解碼單元(Coding Unit，CU)以適應各種局部運動與紋理特性。用來將一CTU分割為數個CU的四叉樹塊分割結構的例子繪示於第1圖中，其中實線表示CTU100中CU的邊界。
預測的決定是在CU層作出的，其中每一CU是由幀間預測或是幀內預測來加以編解碼。一旦CU層級化樹的分割完成時，可以依據用於預測的一PU分割類型來將每一CU作進一步分割成一或多個預測單元(Prediction Unit，PU)。第2圖顯示定義於HEVC標準中的八個PU分割類型。依據顯示於第2圖的八個PU分割類型中的一個，每一CU可進一步分割成一、二、或四個PU。PU與相關的CU語法一起作為共享預測信息的一基本代表塊，而相同的預測過程會被應用於PU中的所有像素並且預測相關信息是在以一PU的基礎上來傳達給解碼器。一指定的預測過程會被運用來預測PU之中相關像素樣本的數值。在獲得藉由預測過程所產生的一殘差信號之後，會根據一殘差四叉樹(Residual QuadTree，RQT)塊分割結構來將屬於一CU的殘差信號的殘差資料分割為一或多個轉換單元(Transform Unit，TU)，以將殘差資料轉換成轉換係數作為簡潔的資料表示。第1圖中的虛線表示TU邊界。TU是一基本代表塊用來應用轉換與量化於編碼流程中的殘差信號上。對於每一TU，具有與TU相同尺寸大小的一轉換矩陣會被應用於殘差信號上以產生轉換係數，而且這些轉換係數是基於一TU為基礎來加以量化並且傳輸至解碼器。
這些術語編解碼樹塊(Coding Tree Block，CTB)，編解碼塊(Coding Block，CB)，預測塊(Prediction Block，PB)和轉換塊(Transform Block，TB)被定義出以分別指定與CTU，CU，PU，和TU相關的一個特定色度分量(color component)的二維樣本陣列。例如，一CTU由一個亮度(luma，Y)CTB，兩個色度(chroma，Cb與Cr)CTB和其相關的語法元素所組成。在HEVC系統中，通常會將相同的四叉樹塊分割結構應用於亮度和色度二個分量，除非已達 到色度塊的最小尺寸。
國際電信聯盟(ITU-T)與國際標準組/國際電子電機委員會(ISO/IEC)下轄的聯合視訊專家小組(Joint Video Expert Team，JVET)目前在建立下一代視訊編解碼標準多功能視訊編解碼(Versatile Video Coding，VVC)的程序中。一種適應性參數組(Adaptive Parameter Set，APS)被採納至VVC測試模型4(VTM 4)中，並且攜帶於每一APS的資料可以由多個畫面或切片所跨越共享與參考。每一APS具有一獨特的識別碼(ID)，而且當一APS ID被納入於該當前畫面的一畫面標頭或該當前切片的一切片標頭時被用來識別哪一個APS是被一當前畫面或切片所參考。在VTM4中，每一APS包含一組適應性環路濾波(Adaptive Loop Filter，ALF)參數，並且至多有32個APS可以在視訊編碼或解碼中加以使用。一方塊群組(tile group)或一切片可以從一APS中再利用ALF信息來降低負擔。這32個APS被儲存在一緩衝器中並以先進先出(first-in-first-out，FIFO)的方式被更新。在一基於CTB的ALF架構，當一ALF操作被應用於一亮度CTB，由視訊編碼器在5個時間或1個被發信的ALF濾波組的選擇中加以選擇，並藉由將一濾波組索引發信於經過編碼的位元流來將此選擇指示出。此濾波組索引被發信來指示出所選擇的ALF濾波組。對每一切片，只有一組新的25個ALF濾波可以被發信。如果，一組新的ALF濾波被發信用於一當前切片時，在該當前切片中的所有亮度CTB會共享此一組新的ALF濾波。當一ALF操作被應用於一色度CTB時，如果一新的ALF濾波組被發信用於一當前切片時，該色度CTB會使用該新的ALF濾波組；否則，會應用符合時間可縮放性約束(temporal scalability constraint)的一最新近的(most recent)時間色度濾波。對切片-層級的時間濾波，APS被儲存在一緩衝器中並以FIFO的方式被更新而且此FIFO索引被用來識別一時間濾波的參考。表格1顯示出與ALF信息相關聯並發信於一APS的語法設計，而且表格2顯示出與在CTU-層級 的ALF語法相關聯的語法設計。
表格1所顯示，二個旗標alf_signal_new_filter_luma與alf_signal_new_filter_chroma被發信於每一APS中。這二個旗標在描述中也稱為newLumaFilterFlag與newChromaFilterFlag，而且這二個旗標被發信於一APS中來指示出亮度ALF參數與色度ALF參數是否分別存在於此一APS中。
Figure 109114616-A0305-02-0006-1
Figure 109114616-A0305-02-0007-2
Figure 109114616-A0305-02-0008-4
在VTM3的ALF濾波程序於以下加以描述。ALF濾波程序的一個濾波結果是濾波後的輸出樣本，而且在一位置(x,y)的一濾波後的輸出樣本O(x,y)是依據等式(1)經由輸入樣本I(i+1,j+1)以及相對應的濾波係數w(i,j)所產生的。在實務中，ALF濾波程序是利用如等式(2)所顯示用於定點精確計算的整數算術運算(integer arithmetic for fixed point precision computations)加以實施。
O(x,y)=Σ(i,j) w(i,j).I(x+i,y+j) 等式(1)
Figure 109114616-A0305-02-0008-13
其中L代表ALF濾波程序的一濾波長度，而且其中w(i,j)是定點精確中的濾波係數。等式(1)可以重新寫成如等式(3)所顯示的無編解碼效率損失(coding efficiency loss)。
O(x,y)=I(x,y)+Σ(i,j)≠(0,0) w(i,j).(I(x+i,y+j)-I(x,y)) 等式(3)
其中w(i,j)是如等式(1)中相同的濾波係數，除了w(0,0)，其在等式(3)中等於1而在等式(1)中等於1-Σ(i,j)≠(0,0)w(i,j)。
當一相鄰樣本數值與被濾波的一當前樣本數值I(i,j)非常不同時，在等式(3)中可以引進一非線性來使得ALF濾波程序更有效率，這可藉由利用一簡單的箝制函數(clipping function)來降低相鄰樣本數值I(i+1,j+1)的影響。該ALF濾波程序因此被修正如等式(4)所顯示。
O'(x,y)=I(x,y)+Σ(i,j)≠(0,0) w(i,j).K(I(x+i,y+j)-I(x,y),k(i,j)) 等式(4)
其中K(d,b)=min(b,max(-b,d))為箝制函數，而且k(i,j)為箝制係數，其取決於(i,j)濾波係數。編碼器進行一最佳化計算來找出最佳的箝制係數k(i,j)。
在ALF濾波程序的一實作中，每一ALF濾波器的箝制係數k(i,j)都會被指明，對於每一濾波係數會發信一箝制數值。對於每一亮度濾波器總共有12個箝制數值會被發信於視訊位元流中，而且對於每一色度濾波器則有6個箝制數值會被發信。使用對應於在濾波器組中箝制數值的索引的一kth階指數哥倫布碼(exponential-Golomb code)，來將箝制數值編碼於一切片標頭中。只有當一非-中央係數是非-零時，相對應的箝制數值才會被發信。在對箝制數值解碼之前，濾波係數必須被重構。語法表格被繪示於表格3中。
Figure 109114616-A0305-02-0010-5
Figure 109114616-A0305-02-0011-7
Figure 109114616-A0305-02-0012-9
在一視訊編解碼系統中處理視訊資料的方法：接收與一當前切片相關聯的輸入資料；決定用於該當前切片的一特定程序的參數；在與該特定程序相關聯的一類別中的一或多個適應性參數組(APS)，發信該特定程序的參數；使用該特定程序的參數來對該當前切片中的一或多個塊進行該特定程序；於該當前切片的一切片標頭，發信被該當前切片所參考的每一適應性參數組的一適應性參數組識別碼(ID)；以及編碼該當前切片。該一或多個APS被該當前切片加以參考以進行該特定程序。依據該APS所攜帶的資料的一類型，每一可用的APS被分類至多種類別中的一種。在一類別中的所有APS具有一相同APS參數類型，而且一當前APS的APS參數類型被發信於該當前APS中。被該當前切片所參考的每一APS的該APS ID僅被計算於相關於該特定程序的該種類別，並且為獨立於其他類別。
該特定程序的實施例包括用於一亮度分量的一適應性環路濾波(Adaptive Loop Filter，ALF)程序、用於色度分量的一適應性環路濾波程序、一亮度映射色度縮放(Luma Mapping Chroma Scaling，LMCS)程序、以及需要 在一或多個APS中對資料或參數加以發信的程序。例如，用於該亮度分量的該ALF程序的該參數被發信於與用於該亮度分量的該ALF程序相關聯的一類別的一或多個APS；相似地，用於該色度分量的該ALF程序的該參數被發信於與用於該色度分量的該ALF程序相關聯的一類別的一或多個APS。在另一例子，該LMCS程序的該參數被發信於與該LMCS程序相關聯的一類別的一或多個APS。在一實施例中，被該當前切片所參考的每一APS的該APS ID被發信於該當前切片的一切片標頭或一當前畫面的一畫面標頭，其中該當前切片位於該當前畫面中。視訊編碼系統的一實施例進一步檢查被該當前切片所參考的每一APS是否包括用於該特定程序的相對應資料或參數，以及將不具有相對應資料或參數的任何APS的APS ID從該當前切片的該切片標頭加以修正或移除。
在一視訊解碼系統中處理視訊資料的方法：接收與一當前切片相關聯的輸入資料；對來自該當前切片的一切片標頭的每一被參考的APS的一APS ID加以剖析，以進行一特定程序；依據該被剖析的APS ID以及與該特定程序相關聯的一類別，來決定每一被參考的APS；藉由參考一或多個被參考的APS，來決定用於該當前切片的該特定程序的參數；使用該參數來對該當前切片中的一或多個塊進行該特定程序；以及解碼該當前切片。依據該APS所攜帶的資料的一資料類型，每一可用的APS被分類至多種類別中的一種，以及一個APS的該APS ID僅被計算於該種類別，並且為獨立於其他類別。
該特定程序可以是用於一亮度分量的一ALF程序、用於色度分量的一ALF程序、以及一亮度映射色度縮放程序。例如，用於該亮度分量的該ALF程序的該參數是藉由參考與用於該亮度分量的該ALF程序相關聯的一類別的一或多個APS來加以決定，以及用於該色度分量的該ALF程序的該參數是藉由參考與用於該色度分量的該ALF程序相關聯的一類別的一或多個APS來加以決定。該LMCS程序的該參數是藉由參考與該LMCS程序相關聯的一類別的一或多個 APS來加以決定。在一類別中的所有APS具有一相同APS參數類型，以及從被參考的APS中對於每一被參考的APS的該APS參數類型加以剖析。每一被參考的APS是藉由從該切片標頭所剖析的該APS ID以及與該特定程序相關聯的該APS參數類型加以檢索。例如，用於一LMCS程序的每一參考APS是藉由被剖析的APS ID從一LMCS類別來加以檢索。在一實施例中，每一被參考的APS的該APS ID是從該當前切片的一切片標頭或一當前畫面的一畫面標頭加以剖析，其中該當前切片位於該當前畫面中。在一些實施例中，視訊解碼系統進一步檢查每一被參考的APS是否包括用於該特定程序的相對應資料或參數，以及當有不具有相對應資料或參數的一被參考的APS時，對用於一處理單元的該特定程序加以失能。該處理單元的一些例子包括一塊、一CU、一CTB、在該當前切片中的一區域、或是該當前切片的整片。在一實施例中，該處理單元是用於切換濾波參數的一單元。
實施在一視訊編解碼系統中的視訊編碼或解碼方法的一些實施例：接收與一當前切片相關聯的輸入資料；藉由參考一或多個ALF的APS，來決定用於該當前切片的一特定色度分量的ALF的濾波參數；使用該ALF的濾波參數來對該當前切片中的該特定色度分量進行一ALF程序；以及編碼或解碼該當前切片。從每一APS所發信或剖析的至少一個濾波參數旗標等於一，其中每一濾波參數旗標指示出該ALF的濾波參數的一種類型是否被發信於該APS。每一ALF的APS攜帶至少一種類型的ALF的濾波參數。例如，旗標alf_luma_filter_signal_flag與alf_chroma_filter_signal_flag之一或二者是從每一ALF的APS所發信或剖析。發信於一ALF APS的旗標alf_luma_filter_signal_flag指示出亮度濾波參數是否被發信於該ALF APS中，而且發信於一ALF APS的旗標alf_chroma_filter_signal_flag指示出色度濾波參數是否被發信於ALF APS中。該視訊解碼方法藉由對來自該當前切片的一切片標頭的每一被參考的ALF APS 的一APS ID加以剖析，來決定該濾波參數。該視訊編碼方法編碼該當前切片，包括於該當前切片的一切片標頭中對每一被參考的ALF APS的一APS ID加以發信。在一些實施例中，當該旗標：alf_luma_filter_signal_flag與alf_chroma_filter_signal_flag二者皆等於一的時候，一ALF APS包括該亮度濾波參數與該色度濾波參數二者。在另一實施例中，依據在該ALF APS中的該旗標alf_luma_filter_signal_flag，一ALF APS中的該旗標alf_chroma_filter_signal_flag被有條件地發信。當該旗標alf_luma_filter_signal_flag等於一的時候，該旗標alf_chroma_filter_signal_flag被發信於該ALF APS中，來指示出該色度濾波參數的存在；以及當該旗標alf_luma_filter_signal_flag等於零的時候，該旗標alf_chroma_filter_signal_flag不被發信並且被推論等於一。在又另一實施例中，在一個ALF APS中僅有亮度與色度濾波參數中的一個可以被發信。該特定色度分量是一個亮度分量Y、一個色度分量Cb、一個色度分量Cr、或以上的一個組合。
本揭示的面向進一步藉由以下來提供用於視訊編碼系統編碼視訊資料的一裝置：接收一當前切片的輸入資料；藉由僅參考與一特定程序相關聯的一類別中的一或多個APS，來決定用於該當前切片的特定程序的參數；使用該特定程序的參數來對該當前切片中的一或多個塊進行該特定程序；於該當前切片的一切片標頭發信每一被參考APS的一APS ID；以及編碼該當前切片。依據該APS所攜帶的資料的一資料類型，每一可用的APS被分類至多種類別中的一種；而且每一被參考APS的APS ID僅被計算於相關於該特定程序的該種類別，並且為獨立於其他類別。用於視訊解碼系統的一裝置藉由以下來解碼視訊資料：接收一當前切片的輸入資料；對來自該當前切片的一切片標頭的每一被參考的APS的一APS ID加以剖析，以進行一特定程序；依據該被剖析的APS ID以及與該特定程序相關聯的一類別，來決定每一被參考的APS；藉由參考一或多個 被參考的APS，來決定用於該當前切片的該特定程序的參數；使用該參數來對該當前切片中的一或多個塊進行該特定程序；以及解碼該當前切片。依據該APS所攜帶的資料的一資料類型，每一APS被分類至多種類別中的一種，以及一個APS的APS ID僅被計算於該種類別，並且為獨立於其他類別。透過對以下具體實施例描述的檢閱，本發明的其他方面和特徵對於本領域一般技藝人士將變得明顯易懂。
100:編解碼樹單元(CTU)
S302~S314:步驟
S402~S414:步驟
500:視訊編碼器
510:幀內預測模組
512:幀間預測模組
516:加法器
518:轉換模組(T)
520:量化模組(Q)
522:逆量化模組(IQ)
524:逆轉換模組(IT)
526:重構模組(REC)
528:適應性環路濾波器(ALF)
530:熵編碼器
532:參考畫面緩衝器(Ref.Pict.Buffer)
600:視訊解碼器
610:熵解碼器
612:幀內預測模組
614:幀間預測模組
616:開關
618:重構模組(REC)
620:逆量化模組(IQ)
622:逆轉換模組(IT)
624:適應性環路濾波器(ALF)
626:參考畫面緩衝器(Ref.Pict.Buffer)
在本揭示被提出當例子的各種實施例將會參照下列圖式被更詳細地解說，其中相似的數字用來參照相似的元件，而且其中：第1圖根據HEVC標準中所定義的四叉樹分割繪示一示例性的編解碼樹，以用來將一編解碼樹單元(CTU)分割為數個編解碼單元(CU)以及將每一CU分割為一或多個轉換單元(TU)。
第2圖根據HEVC標準繪示八個不同的預測單元(PU)分割類型，以用來將一CU分割為一或多個PU。
第3圖為繪示本發明一實施例的一流程圖，其藉由參考用於一特定程序的一或多個適應性參數組(APS)來編碼一當前切片的視訊資料。
第4圖為繪示本發明一實施例的一流程圖，其藉由參考用於一特定程序的一或多個APS來解碼一當前切片的視訊資料。
第5圖為根據本發明實施例繪示一示例性的系統方塊圖，以用於體現視訊資料處理方法的一視訊編碼系統。
第6圖為根據本發明實施例繪示一示例性的系統方塊圖，以用於體現視訊資料處理方法的一視訊解碼系統。
容易理解的是，如本文附圖中一般描述和說明的本發明的各種模組可以以各種不同的配置來佈置和設計。因此，如附圖所示，本發明的系統和方法的實施例的以下更詳細的描述並非旨在限制所要求保護的本發明的範圍，而僅僅代表本發明的所選實施例。
本說明書中對“實施例”，“一些實施例”或類似語言的引用意味著結合實施例描述的具體特徵、結構或特性可以包括在本發明的至少一實施例中。因此，貫穿本說明書在各個地方出現的短語“在實施例中”或“在一些實施例中”不一定都指代相同的實施例，這些實施例可單獨地實現或者與一個或多個其他實施例結合實現。此外，所描述的特徵，結構或特性可在一個或多個實施例中以任何合適的方式組合。然而，相關領域的習知技藝者將認識到，可在沒有一個或多個具體細節的情況下或者利用其他方法，組件等來實踐本發明。在其他情況下，未示出或詳細描述公知的結構或操作，以避免模糊本發明的各方面。。
在VVC標準中的VTM-5.0，會依據該APS的一APS參數類型來將每一APS分類為三種類別中的一種。這三種APS參數類型為ALF_APS類型、LMCS_APS類型、以及保留類型(reserved type)。一當前APS的APS參數類型指明在當前APS所攜帶參數的類型，也就是說，當APS參數類型為ALF_APS類型時，ALF參數會在當前APS中加以發信；以及當APS參數類型為LMCS_APS類型時，亮度映射色度縮放(LMCS)參數會在當前APS中加以發信。表格4繪示一APS依據APS參數類型aps_params_type而攜帶一種類型的參數，如果aps_params_type為ALF_APS類型，此APS包括ALF資料，否則，如果aps_params_type為LMCS_APS類型，此APS包括LMCS資料。
Figure 109114616-A0305-02-0018-10
如表格5所顯示，在一當前切片的一切片標頭中所發信的一旗標slice_alf_enabled_flag指明該ALF濾波程序是否被致能以用於該當前切片，而且一語法元素slice_num_alf_aps_ids_luma指明為當前切片參考的APS數目，該被參考的APS攜帶的ALF參數用於該當前切片的亮度ALF程序。如果一或多個APS是被該當前切片參考以用於該亮度ALF程序，則被該當前切片所參考用於進行該亮度ALF程序的每一APS的識別碼(ID)slice_alf_aps_id_luma[i]會被發信於該切片標頭，並且被用來指示出在該亮度ALF程序中是哪些APS被參考。被該當前切片所參考用於進行該色度ALF程序的一APS的ID slice_alf_aps_id_chroma也會被發信於該切片標頭中。相似地，如果LMCS程序被致能時，被該當前切片所參考用於進行該LMCS程序的一APS的ID slice_lmcs_aps_id會被發信於該切片標頭中。此ID的範圍會被所有APS所共享而不論APS參數的類型。例如，有32個APS具有APS ID等於0到31，由於一些APS攜帶ALF參數，這些APS屬於在一ALF類別；由於一些APS攜帶LMCS參數，這些APS屬於在一LMCS類別；而一些APS屬於在一保留類別(reserved category)。
Figure 109114616-A0305-02-0019-12
APS ID在每一類別中獨立被計算 在VTM5.0中，適應性環路濾波(ALF)參數不再被發信於切片標頭中，而是被發信於適應性參數組(APS)中。如先前所描述的，至多32個APS被用於編碼與解碼程序，而且這32個APS攜帶不同類型的信息但卻共享相同的識別碼(ID)範圍。例如，這32個APS中有些攜帶適應性環路濾波(ALF)參數，而且有些其他APS則攜帶亮度映射色度縮放(LMCS)參數。每一切片可以藉由納入一或多個APS ID於切片標頭中來參考用於一特定程序的一或多個APS。相似地，一當前視訊畫面可以藉由納入一或多個APS ID於一畫面標頭中而參考一或多個APS以用於一特定程序。例如， 當一視訊解碼器對一當前切片進行一ALF程序時，會依據在切片標頭中所發信的APS ID來決定用於ALF程序的一或多個被參考的APS。然後視訊解碼器從每一個被參考的APS中提取相對應的ALF參數。有可能發生一當前切片或一當前視訊畫面想參考一APS以獲取用於一特定程序所需的參數，但該APS沒有相對應的參數。例如，被一切片或視訊畫面所參考用於ALF程序的APS可能是一空的濾波組或是該APS可能沒有包括相對應的ALF參數。由於參考了沒有相對應參數的一APS所造成的一種未經定義的解碼程序會引進一種模糊度，因此是不想要發生的。在以下段落所描述本發明的多個實施例即著眼於避免這種未經定義的解碼程序。
在本發明的一些示例性實施例中，具有不同APS參數類型的APS被分類為複數種類別。為了對一當前切片或視訊畫面進行一特定程序，只有在相對應類別的APS可以被參考來取得用於此特定程序的資料或參數。例如，有三種APS類別：在第一種類別的APS攜帶用於LMCS程序的參數，在第二種類別的APS攜帶對亮度分量進行ALF程序的參數，在第三種類別的APS攜帶對色度分量進行ALF程序的參數。只有在LMCS類別的那些APS可以被一切片加以參考來取得用於該LMCS程序的參數。相似地，只有在ALF亮度類別的那些APS可以被一切片加以參考來取得對該亮度分量進行ALF程序的參數。只有在ALF色度類別的那些APS可以被一切片加以參考來取得對該色度分量進行ALF程序的參數。一個APS的APS ID僅被計算於一種類別，並且為獨立於其他類別。一APS參數類型被發信於每一APS中，來指示出此APS是屬於哪一種類別。例如，如果此APS攜帶ALF參數，於一APS中所發信的APS參數類型為ALF；如果此APS攜帶LMCS參數，於一APS中所發信的APS參數類型為LMCS；而且如果此APS攜帶縮放清單參數，於一APS中所發信的APS參數類型為縮放(SCALING)。
ID範圍不被所有可用的APS所共享，這是因為一APS的ID被計算於一種類別，並且為獨立於其他類別。在一示例性的實施例中，如果該APS參數類型為ALF或SCALING，APS ID的數值會落在0到7(包含)的範圍之間，並且如果該APS參數類型為LMCS，APS ID的數值會落在0到3(包含)的範圍之間。在此實施例中，至多有8個攜帶ALF參數的APS可以被一當前切片或一當前畫面所參考；至多有8個攜帶縮放清單參數的APS可以被該當前切片或該當前畫面所參考；至多有4個攜帶LMCS參數的APS可以被該當前切片或該當前畫面所參考。依據此一示例性的實施例，當在一當前切片中的至少一塊參考一APS以進行一特定程序時，不僅該APS ID會被用來檢索該APS，該APS ID與該APS參數類型二者都需要用來檢索該APS。例如，一視訊解碼器藉由LMCS程序使用發信於一APS並具有APS ID等於2的LMCS參數來處理一當前切片中的一塊。至多有3個APS具有一APS ID等於2：一個APS攜帶ALF參數、一個APS攜帶縮放清單參數、以及另一個APS攜帶LMCS參數。解碼器選擇與該特定程序相關聯的類別中的APS，在此例子中，解碼器選擇具有一APS ID等於2的APS以及與該LMCS程序相關聯的一APS參數類別。依據此一實施例，未經定義的解碼程序可藉由下列作法來加以避免：在每一類別中獨立地計算APS ID，因此視訊解碼器在進行一特定程序時僅從屬於該特定程序相關聯的類別中的APS來取得參數。
被參考的APS必須包括相對應參數 在本發明的一些實施例中，不論APS ID是被計算在所有類別中(由於所有APS共享相同的ID範圍)或APS ID是在每一類別中獨立地被計算，一編碼器的規範性約束被加入以避免由於參考了沒有相對應參數的一APS所造成的未經定義的解碼程序。此一編碼器的規範性約束限制被一切片或視訊畫面所參考來進行用於一或多個特定色度分量的一特定程序的一APS，其必須要包括用於一或多個特定色度分量的相對應資料 或參數。該特定程序可以是用於亮度分量的一ALF程序、用於色度分量的一ALF程序、或是一LMCS程序。例如，如果一APS被一切片所參考而且被用來於該切片的一或多個塊進行該亮度ALF程序，此一APS必須包含亮度濾波參數。如果一APS沒有任何亮度濾波參數，此一APS不能被任何切片加以參考用於亮度ALF程序。相似地，如果一APS被一切片所參考而且被用來於該切片的一或多個塊進行該色度ALF程序，此一APS必須包含色度濾波參數。如果一APS沒有任何色度濾波參數，此一APS不能被任何切片加以參考用於色度ALF程序。在此實施例中，視訊編碼器可以檢查被參考用於一特定程序的每一APS，來確保用於該特定程序的相對應資料或參數是被包括在該被參考的APS中。例如，視訊編碼器檢查包含在每一APS的參數或是被參考用於一特定程序的每一APS的APS參數類型，以及如果此APS沒有相對應的參數或此APS參數類型與該特定程序並無相關時，此APS的APS ID會被修正或從該當前切片的切片標頭加以移除。
在此實施例中，如果任何切片或視訊畫面的一切片標頭或畫面標頭包括：用於與一APS相關聯的一特定程序的一APS ID，而且此APS不具有用於該特定程序的相對應參數，這種情況下一視訊位元流會被視為一不合法的位元流。所有視訊編碼器必須遵循編碼器的規範性約束來產生一合法的位元流，由於其語法設計與編碼器的規範性約束相符，因而使得視訊解碼器可以正確地解碼該合法的位元流。當在位元流中漏掉任何語法時，編碼器與解碼器二者會設定語法數值為一推論的數值來確保編碼與解碼的結果相匹配。
依據本發明的一個實施例，當進行一LMCS程序時，編碼器的規範性約束可以被應用來確保LMCS參數存在於一被參考的APS中。在一實施例中，當LMCS程序被允許而且被致能時，從一當前切片的一切片標頭中會發信或剖析至少一個APS ID，而且每一APS ID指示出哪一個APS被該當前切片所 參考以進行該LMCS程序。編碼器的規範性約束對用於該LMCS程序所參考的APS的APS參數類型會限制為LMCS。在此實施例中的編碼器的規範性約束避免一種未經定義的解碼程序，這種解碼程序是由在該LMCS程序中參考了沒有LMCS參數的一APS所造成的。被一切片所參考用於一特定程序(例如LMCS程序)的APS必須包括用於該特定程序的相對應資料與參數。一視訊編碼器的一實施例檢查被一當前切片所參考用於進行LMCS程序的每一APS是否包括LMCS參數，以及從該當前切片的該切片標頭將不具有LMCS參數的任何APS的該APS ID加以修正或是將不具有LMCS參數的任何APS的該APS ID加以移除。視訊編碼器必須遵循編碼器的規範性約束以便產生一合法的位元流，並且由於其語法設計與編碼器的規範性約束相符，視訊解碼器可以正確地解碼該合法的位元流。當在位元流中漏掉任何語法時，編碼器與解碼器二者會設定語法數值為一推論的數值來確保編碼與解碼的結果相匹配。
解碼器中的備用模式(Fallback Mode) 本發明的一些實施例在解碼器側增加一個備用模式。如果一APS不包括相對應的參數而且被一當前切片或視訊畫面所參考來進行用於一或多個特定色度分量的一特定程序時，當此APS於一處理單元進行該特定程序時被參考，則對於該當前切片或視訊畫面的所述處理單元該特定程序會被失能。該處理單元可以是一塊、一編解碼單元(CU)、一編解碼樹塊(CTB)、在該當前切片中的一區域、或是該當前切片的整片。依據一實施例，該處理單元是可以切換濾波參數的一單元。該特定程序的一些例子包括用於一亮度分量的一ALF程序、用於色度分量的一ALF程序、以及一LMCS程序。例如，如果一APS僅包括亮度濾波參數但於一切片中卻被一處理單元加以參考來進行色度ALF程序，則用於該處理單元的該色度ALF程序會被失能。相似地，如果一APS僅包括色度濾波參數但於一切片中卻被一處理單元加以參考來進行亮度ALF程序，則用於該處理單元的該亮度ALF程序會被失能。 如果在此APS中的亮度濾波參數應該被用於一亮度CTB，則用於此亮度CTB的該ALF程序也會被失能。如果僅有在此APS中的亮度濾波參數可以被用於一切片中的亮度分量，則此切片的該亮度ALF程序會被失能。
依據本發明的一個實施例，一備用模式(fallback mode)也可以被應用於LMCS程序來解決解碼程序的含糊度(ambiguity)。當LMCS程序被允許而且被致能於當前切片時，從當前切片的一切片標頭中會發信或剖析至少一個APS ID以用於該LMCS程序，其中該APS ID指示出哪一個APS在該LMCS程序被參考。如果該被參考APS的APS參數類型不是LMCS或是LMCS相對應的語法不存在於此被參考的APS中，該LMCS程序於該切片會被失能。也就是說，當被一切片為了一特定程序而加以參考的一APS不包括用於該特定程序的相對應資料或類型，則該特定程序於此切片會被失能。
不允許發信一空的APS 本發明的一些實施例增加一編碼器的規範性約束以確保每一APS包含一些有用的參數以供參考。在VTM5.0中，ALF參數從切片標頭被移至APS。例如，有二個旗標alf_luma_filter_signal_flag與alf_chroma_filter_signal_flag(或也熟知為newLumaFilterFlag與newChromaFilterFlag)被發信於每一APS(例如每一ALF APS)來指示出亮度濾波參數(例如亮度ALF濾波參數)與色度濾波參數(例如色度ALF濾波參數)是否分別被發信於此一APS中。如果在一APS(例如一ALF APS)中二者旗標都等於零，則代表沒有濾波參數被發信於此一APS中。本發明的一些實施例避免發信一空的APS。一實施例強迫發信亮度濾波參數(例如亮度ALF濾波參數)於每一APS(例如每一ALF APS)中。例如，用來指示出亮度濾波參數(例如亮度ALF濾波參數)是否存在於該APS(例如ALF APS)的旗標alf_luma_filter_signal_flag或newLumaFilterFlag，可以從每一APS(例如每一ALF APS)中被移除。依據此一實施例，亮度濾波參數(例如亮度ALF濾波參數) 總是被發信於每一APS(例如ALF APS)中。依據一控制旗標alf_chroma_filter_signal_flag或newChromaFilterFlag將色度濾波參數(例如色度ALF濾波參數)有條件地加以發信於此一APS(例如ALF APS)中。當此控制旗標alf_chroma_filter_signal_flag或newChromaFilterFlag等於一時，一APS(例如一ALF APS)攜帶亮度與色度濾波參數二者(例如亮度與色度ALF濾波參數)。
在另一實施例中，用來指示出色度濾波參數(例如色度ALF濾波參數)是否存在於該APS(例如ALF APS)的旗標alf_chroma_filter_signal_flag或newChromaFilterFlag，會依據alf_luma_filter_signal_flag或newLumaFilterFlag的數值而被有條件式地加以發信。如果當一APS(例如ALF APS)的newLumaFilterFlag等於一，newChromaFilterFlag會在APS(例如ALF APS)中加以發信，來指示出色度濾波參數(例如色度ALF濾波參數)的存在。如果當一APS(例如ALF APS)的旗標newLumaFilterFlag等於零，旗標newChromaFilterFlag不會被發信而且會被推論等於一。當亮度濾波參數(例如亮度ALF濾波參數)不存在時，這可以確保色度濾波參數(例如色度ALF濾波參數)會在此APS(例如ALF APS)中加以發信。
在一些實施例中，一編碼器的規範性約束被加入以確保在每一APS(例如ALF APS)中至少一濾波參數旗標(例如alf_luma_filter_signal_flag與alf_chroma_filter_signal_flag，或是newLumaFilterFlag與newChromaFilterFlag)等於一。被發信於一APS(例如一ALF APS)中的每一濾波參數旗標指示出濾波參數(例如ALF濾波參數)的一類型是否被發信於此APS(例如一ALF APS)中。依據一實施例，該編碼器的規範性約束僅應用於屬於該ALF類別的ALF APS。也就是說，編碼器無法產生如下述的一APS(例如一ALF APS)，其具有的一APS參數類型(例如與ALF程序相關聯的一APS參數類型)的所有濾波參數旗 標(例如newLumaFliterFlag、newChromaFilterFlag、alf_luma_filter_signal_flag、alf_chroma_filter_signal_flag、alf_cc_cb_filter_signal_flag、與alf_cc_cr_filter_signal_flag、任何其他濾波參數旗標或其中的組合)都等於零。在一些用於ALF的實施例中，這個位元流的符合性規定(bitstream conformance requirement)確保每一ALF APS攜帶至少一種類型的ALF濾波參數；例如，每一ALF APS攜帶用於一或多個特定色度分量的ALF參數。在一例子中，該編碼器的規範性約束限制在屬於一ALF類別的一ALF APS中的四個濾波參數旗標(alf_luma_filter_signal_flag、alf_chroma_filter_signal_flag、alf_cc_cb_filter_signal_flag、與alf_cc_cr_filter_signal_flag)的數值中至少有一個等於一。旗標alf_luma_filter_signal_flag的數值等於一指明一亮度濾波組被發信於該ALF APS中，而且等於零指明一亮度濾波組未被發信於該ALF APS中。旗標alf_chroma_filter_signal_flag的數值等於一指明一色度濾波組被發信於該ALF APS中，而且等於零指明一色度濾波組未被發信於該ALF APS中。旗標alf_cc_cb_filter_signal_flag與alf_cc_cr_filter_signal_flag指明交錯分量(cross-component)cb濾波參數與交錯分量cr濾波參數是否分別被發信於該ALF APS中。
在又一實施例中，亮度和色度ALF濾波參數(例如亮度和色度ALF濾波參數)分別在不同APS(例如在不同ALF APS)中加以發信。在一APS(例如ALF APS)中，只存在一種類型的亮度和色度濾波參數，而且在該APS中所發信的一語法(例如APS_type)被用來指示出該APS中包括有哪些種類型的濾波參數。例如，當該APS中所發信的語法APS_type等於ALF_luma時，只有亮度濾波參數存在於一APS(例如一ALF APS)中；而且當該APS中所發信的語法APS_type等於ALF_chroma時，只有色度濾波參數存在於一APS(例如一ALF APS)中。在此實施例中，指示出亮度或色度濾波參數是否包括在該APS (例如ALF APS)中的旗標(例如newLumaFilterFlag和newChromaFilterFlag，或是alf_luma_filter_signal_flag和alf_chroma_filter_signal_flag)可以被移除(例如從該ALF APS中被移除)。
用於示例性的視訊編碼與解碼系統的代表性流程圖 第3圖為繪示本發明一些示例性實施例的一流程圖，其藉由一視訊編碼系統來編碼一當前切片。於步驟S302：藉由該視訊編碼系統對與一當前切片相關聯的輸入資料加以接收。第3圖為展示以一ALF程序來濾波當前切片的重構後資料的一實施例，而且於一或多個APS中對ALF參數加以發信。該ALF程序是用來於重構後對當前切片的一亮度分量、數個色度分量、或亮度與色度分量二者進行濾波。在此一實施例中的ALF程序是一特定程序的一例子，其需要參考來自一或多個APS的資料或參數。該特定程序的另一例子是LMCS程序。於步驟S304：該視訊編碼系統決定用於當前切片的ALF參數；而且於步驟S306：於一ALF類別的一或多個APS中對ALF參數加以發信。在此一實施例中，ALF參數是相關聯於一亮度分量、數個色度分量、或亮度與色度分量二者。這些包含ALF參數的APS會被當前切片加以參考，以於視訊解碼系統中進行ALF程序。依據該APS所攜帶的資料的一類型來將每一可用的APS分類至多種類別中的一種。例如，一些APS是在ALF類別，這是由於這些APS攜帶ALF參數；而一些其他APS是在一LMCS類別，這是由於那些APS攜帶LMCS參數。於步驟S308：於步驟S304所決定的ALF參數被用於對當前切片中的一或多個塊進行ALF程序。該ALF程序是一環路濾波程序來產生濾波後的畫面，而且濾波後的畫面被儲存於一參考畫面緩衝器，以用於一編碼順序中後續畫面的幀間預測。於步驟S310：該視訊編碼系統於該當前切片的一切片標頭發信被該當前切片所參考的每一 APS的一APS ID。在此一實施例中，將被該當前切片所參考的每一APS的該APS ID僅被計算於該ALF類別，並且為獨立於其他類別。也就是說，APS ID的計算並非由所有APS所共享。於步驟S312：對該當前切片加以編碼。在一些實施例中，一APS的一APS參數類型被發信於APS中，而且在一類別中的所有APS具有相同的APS參數類型。一APS參數類型被發信於每一APS中來指示出由APS所攜帶的資料的類型。在此實施例中，在該ALF類別的每一APS具有與該ALF程序相關聯的一APS參數類型。在一實施例中，被該當前切片所參考的每一APS的APS ID被發信於該當前切片的一切片標頭或一當前畫面的一畫面標頭，這取決於在一畫面參數組(Picture Parameter Set，PPS)中所發信的一語法元素。當該視訊編碼系統是在該切片標頭對APS ID發信時，該視訊編碼系統會檢查將被該當前切片所參考的每一APS，以確保每一APS包括相對應資料或參數。如果將被該當前切片所參考的一APS未攜帶相對應資料或參數，該視訊編碼系統將此APS ID加以修正或是從該切片標頭將此APS ID加以移除。
第4圖為繪示本發明實施例的一流程圖，其藉由一視訊解碼系統來解碼一當前切片。於步驟S402：藉由該視訊解碼系統對與一當前切片相關聯的輸入資料加以接收。第4圖為展示以一ALF程序來濾波當前切片的重構後資料的實施例，其中該ALF程序是用來於重構後對一亮度分量、數個色度分量、或亮度與色度分量二者進行濾波。在此一實施例中的ALF程序是一特定程序的一例子，其需要參考來自一或多個APS的資料或參數，而該特定程序的另一例子是LMCS程序。於步驟S404：該視訊解碼系統對來自該當前切片的一切片標頭的每一被參考的APS的一APS ID加以剖析，以進行該ALF程序。一個APS 的APS ID被計算於一種類別，並且為獨立於其他類別。被發信於每一APS的一APS參數類型指示此APS是屬於哪一種類別。例如，只有具有一APS參數類型等於ALF的APS才會在ALF類別中，並且可以被參考用於ALF程序。於步驟S406：依據該被剖析的APS ID以及一APS參數類型二者，來決定每一被參考的APS。在此一實施例中，此APS參數類型是ALF，這是由於該特定程序是ALF程序。於步驟S408：該視訊解碼系統從每一被參考的APS來決定用於當前切片的ALF參數。於步驟S410：使用ALF參數而對當前切片中的一或多個塊進行ALF程序；於步驟S412：對該當前切片加以解碼。在此一實施例中，用於該當前切片的每一被參考的APS的APS ID是從該當前切片的一切片標頭或一當前畫面的一畫面標頭加以剖析。在視訊解碼系統的一些實施例中，用於一特定程序的每一被參考的APS會被檢查以確保包括相對應的資料或參數。當有不具有相對應資料或參數的一被參考的APS時，視訊解碼系統會對用於一處理單元的該特定程序加以失能。該處理單元可以是一塊、一CU、一CTB、在該當前切片中的一區域、或是該當前切片的整片。在一實施例中，該處理單元是用於切換濾波參數的一單元。。
代表性的系統方塊圖 第5圖繪示一示例性的系統方塊圖，以用於施行與ALF程序相關聯的實施例的視訊編碼器500。幀內預測模組510基於一當前畫面的重構後視訊資料來提供幀內預測子(intra predictor)。幀間預測模組512基於參考來自其他一或多個畫面的視訊資料，來進行運動估計(Motion Estimation，ME)和運動補償(Motion Compensation，MC)以提供預測子。幀內預測模組510或幀間預測模組512之一將所選擇的預測子提供給加法器516以形成殘差(residue)。當前塊的殘差藉由轉換模組(Transformation module，T)518進一步處理，接著是藉由量化模組(Quantization module，Q)520處理。量化模組520從轉換模組518接收每一轉換塊的縮放後的轉換係數(scaled transform coefficient)，而且應用一量化處理程序來產生一已轉換且已量化的殘差信號。然後，此已轉換且已量化的殘差訊號藉由熵編碼器530編碼以形成一視訊位元流。此視訊位元流然後與邊信息(side information)一起打包。當前塊的已轉換且已量化的殘差訊號藉由逆量化模組(IQ)522和逆轉換模組(IT)524處理以還原出預測殘差。如第5圖所顯示，藉由在重構模組(Reconstruction module，REC)526處加回所選擇的預測子來還原殘差，來產生已重構的視訊資料。已重構的視訊資料可以儲存在參考畫面緩衝器(Ref.Pict.Buffer)532中，並用於預測其它畫面。來自REC模組526的已重構的視訊資料可能由於編碼處理而受到各種損害，因此，在儲存於參考畫面緩衝器532之前，應用適應性環路濾波器(Adaptive Loop Filter，ALF)528於已重構的視訊資料，以進一步提高畫面品質。用於一當前切片或一當前畫面的ALF參數被發信於屬於ALF類別的一或多個APS中。被參考用於進行ALF程序的每一APS的一APS ID被發信於該當前切片的一切片標頭或當前畫面的一畫面標頭。被該當前切片所參考的每一APS的該APS ID僅被計算於該ALF類別中，並且為獨立於其他類別。語法元素被提供給熵編碼器530以合併至該視訊位元流中。
用於解碼第5圖的視訊編碼器500所產生視訊位元流的一相對應視訊解碼器600顯示於第6圖。視訊位元流是視訊解碼器600的輸入，並藉由熵解碼器610解碼以剖析和還原已轉換且已量化的殘差信號和其他系統信息。熵解碼器610對一當前轉換塊的已編碼的轉換係數水平(coded transform coefficient level)加以剖析。除了解碼器600僅需要幀間預測模組614中的運動補償預測之外，解碼器600的解碼程序類似於編碼器500處的重構環路。每一塊藉由幀內預測模組612或幀間預測模組614加以解碼。依據已解碼的模式信息，開關616自幀內預測模組612選擇一幀內預測子或自幀間預測模組614選擇一幀間預測子。已轉換且已量化的殘差訊號是藉由逆量化(Inverse Quantization，IQ)模組 620和逆轉換(Inverse Transformation，IT)模組622來加以還原。已還原的殘差信號是藉由在REC模組618中加回預測子來加以重構，來產生已重構的視訊。已重構的視訊藉由適應性環路濾波器(Adaptive Loop Filter，ALF)624進一步處理以產生最終已解碼的視訊。依據本發明的一些實施例，為了以ALF程序來處理一當前已解碼的切片或一當前已解碼的畫面，每一被參考的APS的一APS ID會從該當前已解碼切片的一切片標頭或當前已解碼畫面的一畫面標頭來加以剖析。該已剖析的APS ID與一APS參數類型會一起被用來決定每一被參考的APS。該APS參數類型會被發信於每一APS中來指示出被該APS所攜帶資料的類型，而且在此一實施例中該APS參數類型為ALF。該當前已解碼切片或畫面會藉由ALF程序使用從被參考APS所決定的ALF參數來加以處理。如果當前已解碼的畫面是一參考畫面，則當前已解碼畫面的已重構視訊也會儲存在參考畫面緩衝器626中，以用於解碼順序中的後續畫面。。
第5圖和第6圖中的視訊編碼器500和視訊解碼器600的各種組件可以由硬體組件，一個或複數個處理器被配置為執行存儲在存儲器中的程式指令，或硬體和處理器的組合來實現。例如，處理器執行程式指令以控制與一當前轉換塊相關聯的輸入資料的接收。處理器配備有單個或複數個處理核心。在一些示例中，處理器執行程式指令以在編碼器500和解碼器600中的一些組件中執行功能，並且與處理器電耦合的存儲器用於存儲程式指令，對應於塊的已重構影像的信息和/或編碼或解碼過程中的中間資料。在一些實施例中的存儲器包括非暫時性計算機可讀介質，諸如半導體或固態存儲器，隨機存取存儲器(RAM)，只讀存儲器(ROM)，硬碟，光碟或其他合適的存儲介質。存儲器還可以是上面列出的兩個或更多複數個非暫時性計算機可讀介質的組合。如第5圖和第6圖所示，編碼器500和解碼器600可以在相同的電子設備中實現，因此如果在相同的電子設備中實現，則編碼器500和解碼器600的各種功能組件可以 被共享或再使用。例如，第5圖中的重構模組526，逆轉換模組524，逆量化模組522，適應性環路濾波器(ALF)528和參考畫面緩衝器532中的一個或複數個，也分別可以用作第6圖中的重構模組618，逆轉換模組622，逆量化模組620，適應性環路濾波器624和參考畫面緩衝器626。
於一視訊編解碼系統中對一當前切片進行一特定程序的視訊資料處理方法的實施例，可以在集成於視訊壓縮晶片的電路來實作，或集成於視訊壓縮軟體中執行以上描述的處理的程式代碼來實作。例如，縮放一當前轉換塊中的轉換係數水平這部分，可以實現於一計算機處理器上執行的程式代碼，數位訊號處理器(DSP)，微處理器或現場可程式閘陣列(field programmable gate array,FPGA)上。可以透過執行定義本發明所體現的特定方法的機器可讀軟體代碼或韌體代碼，來將這些處理器配置成執行依據本發明的特定任務。
在不脫離本發明的精神或基本特徵的情況下，本發明可以以其他具體形式實施。所描述的例子僅在所有方面被認為是說明性的而不是限制性的。因此，本發明的範圍由所附申請專利範圍而不是前面的描述來指示。屬於申請專利範圍的等同物的含義和範圍內的所有變化將被包括在其範圍內。
S402~S412:步驟

Claims (23)

  1. 一種在一視訊編解碼系統中編碼視訊資料的方法，包括：接收與一當前切片相關聯的輸入資料；決定用於該當前切片的一特定程序的參數；在與該特定程序相關聯的一類別中的一或多個適應性參數組，發信該特定程序的參數，其中該一或多個適應性參數組被該當前切片加以參考以進行該特定程序，並且依據該適應性參數組所攜帶的資料的一類型，每一可用的適應性參數組被分類至多種類別中的一種；使用該特定程序的參數來對該當前切片中的一或多個塊進行該特定程序；於該當前切片的一切片標頭發信被該當前切片所參考的每一適應性參數組的一適應性參數組識別碼，其中被該當前切片所參考的每一適應性參數組的該適應性參數組識別碼，僅被計算於相關於該特定程序的該種類別，並且為獨立於其他類別；以及編碼該當前切片。
  2. 如請求項1所述在一視訊編解碼系統中編碼視訊資料的方法，其中該特定程序包括用於一亮度分量的一適應性環路濾波程序、用於一色度分量的一適應性環路濾波程序、以及一亮度映射色度縮放程序。
  3. 如請求項2所述在一視訊編解碼系統中編碼視訊資料的方法，其中用於該亮度分量的該適應性環路濾波程序的該參數被發信於與用於該亮度分量的該適應性環路濾波程序相關聯的一類別的一或多個適應性參數組，用於該色度分量的該適應性環路濾波程序的該參數被發信於與用於該色度分量的該適應性環路濾波程序相關聯的一類別的一或多個適應性參數組，以及該亮度映射色度縮放程序的該參數被發信於與該亮度映射色度縮放程序相關聯的一類別的一或多個適應性參數組。
  4. 如請求項1所述在一視訊編解碼系統中編碼視訊資料的方法，其中在一類別中的所有適應性參數組具有一相同適應性參數組參數類型以及一適應性參數組參數類型被發信於每一適應性參數組來指示出藉由該適應性參數組所攜帶資料的類型。
  5. 如請求項1所述在一視訊編解碼系統中編碼視訊資料的方法，其中每一適應性參數組的該適應性參數組識別碼被發信於該當前切片的一切片標頭或一當前畫面的一畫面標頭，其中該當前切片位於該當前畫面中。
  6. 如請求項1所述在一視訊編解碼系統中編碼視訊資料的方法，進一步包括：檢查被該當前切片所參考的每一適應性參數組是否包括用於該特定程序的相對應資料或參數，以及將不具有相對應資料或參數的任何適應性參數組的該適應性參數組識別碼從該當前切片的該切片標頭加以修正或移除。
  7. 一種在一視訊編解碼系統中解碼視訊資料的方法，包括：接收與一當前切片相關聯的輸入資料；對來自該當前切片的一切片標頭的每一被參考的適應性參數組的一適應性參數組識別碼加以剖析，以進行一特定程序；依據該被剖析的適應性參數組識別碼以及與該特定程序相關聯的一類別，來決定每一被參考的適應性參數組，其中依據該適應性參數組所攜帶的資料的一資料類型，每一可用的適應性參數組被分類至多種類別中的一種，以及一個適應性參數組的該適應性參數組識別碼僅被計算於該種類別，並且為獨立於其他類別；藉由參考一或多個被參考的適應性參數組，來決定用於該當前切片的該特定程序的參數；使用該參數來對該當前切片中的一或多個塊進行該特定程序；以及解碼該當前切片。
  8. 如請求項7所述在一視訊編解碼系統中解碼視訊資料的方法，其中該特定程序包括用於一亮度分量的一適應性環路濾波程序、用於一色度分量的一適應性環路濾波程序、以及一亮度映射色度縮放程序。
  9. 如請求項8所述在一視訊編解碼系統中解碼視訊資料的方法，其中用於該亮度分量的該適應性環路濾波程序的該參數是藉由參考與用於該亮度分量的該適應性環路濾波程序相關聯的一類別的一或多個適應性參數組來加以決定，用於該色度分量的該適應性環路濾波程序的該參數是藉由參考與用於該色度分量的該適應性環路濾波程序相關聯的一類別的一或多個適應性參數組來加以決定，以及該亮度映射色度縮放程序的該參數是藉由參考與該亮度映射色度縮放程序相關聯的一類別的一或多個適應性參數組來加以決定。
  10. 如請求項7所述在一視訊編解碼系統中解碼視訊資料的方法，其中在一類別中的所有適應性參數組具有一相同適應性參數組參數類型，以及從被參考的適應性參數組中對於每一被參考的適應性參數組的該適應性參數組參數類型加以剖析。
  11. 如請求項10所述在一視訊編解碼系統中解碼視訊資料的方法，其中每一被參考的適應性參數組是藉由從該切片標頭所剖析的該適應性參數組識別碼以及與該特定程序相關聯的該適應性參數組參數類型加以檢索。
  12. 如請求項7所述在一視訊編解碼系統中解碼視訊資料的方法，其中每一被參考的適應性參數組的該適應性參數組識別碼是從該當前切片的一切片標頭或一當前畫面的一畫面標頭加以剖析，其中該當前切片位於該當前畫面中。
  13. 如請求項7所述在一視訊編解碼系統中解碼視訊資料的方法，進一步包括檢查每一被參考的適應性參數組是否包括用於該特定程序的相對應資料或參數，以及當有不具有相對應資料或參數的一被參考的適應性參數組時， 對用於一處理單元的該特定程序加以失能。
  14. 如請求項13所述在一視訊編解碼系統中解碼視訊資料的方法，其中該處理單元是一塊、一編解碼單元、一編解碼樹塊、在該當前切片中的一區域、或是該當前切片。
  15. 如請求項13所述在一視訊編解碼系統中解碼視訊資料的方法，其中該處理單元是用於切換濾波參數的一單元。
  16. 一種在一視訊編解碼系統中編碼或解碼視訊資料的方法，包括：接收與一當前切片相關聯的輸入資料；藉由參考一或多個適應性環路濾波的適應性參數組，來決定用於該當前切片的一特定色度分量的適應性環路濾波的濾波參數，其中從每一適應性參數組所發信或剖析的至少一個濾波參數旗標等於一，每一濾波參數旗標指示出該適應性環路濾波的濾波參數的一種類型是否被發信於該適應性參數組，使得每一適應性環路濾波的適應性參數組攜帶至少一種類型的適應性環路濾波的濾波參數；使用該適應性環路濾波的濾波參數來對該當前切片中的該特定色度分量進行一適應性環路濾波程序；以及編碼或解碼該當前切片。
  17. 如請求項16所述在一視訊編解碼系統中編碼或解碼視訊資料的方法，其中決定該適應性環路濾波的濾波參數的步驟進一步包括：對來自該當前切片的一切片標頭的每一被參考的適應性環路濾波的適應性參數組的一適應性參數組識別碼加以剖析。
  18. 如請求項16所述在一視訊編解碼系統中編碼或解碼視訊資料的方法，其中編碼該當前切片的步驟進一步包括：於該當前切片的一切片標 頭中對每一被參考的適應性環路濾波的適應性參數組的一適應性參數組識別碼加以發信。
  19. 如請求項16所述在一視訊編解碼系統中編碼或解碼視訊資料的方法，其中該濾波參數旗標為下列旗標之一或二者：alf_luma_filter_signal_flag與alf_chroma_filter_signal_flag，其中該旗標alf_luma_filter_signal_flag指示出亮度濾波參數是否被發信於該適應性環路濾波的適應性參數組中，而且該旗標alf_chroma_filter_signal_flag指示出色度濾波參數是否被發信於該適應性環路濾波的適應性參數組中。
  20. 如請求項19所述在一視訊編解碼系統中編碼或解碼視訊資料的方法，其中當該旗標：alf_luma_filter_signal_flag與alf_chroma_filter_signal_flag二者皆等於一的時候，一適應性環路濾波的適應性參數組包括該亮度濾波參數與該色度濾波參數二者。
  21. 如請求項19所述在一視訊編解碼系統中編碼或解碼視訊資料的方法，其中依據在該適應性環路濾波的適應性參數組中的該旗標alf_luma_filter_signal_flag，一適應性環路濾波的適應性參數組中的該旗標alf_chroma_filter_signal_flag被有條件地發信；當該旗標alf_luma_filter_signal_flag等於一的時候，該旗標alf_chroma_filter_signal_flag被發信於該適應性環路濾波的適應性參數組中，來指示出該色度濾波參數的存在；以及當該旗標alf_luma_filter_signal_flag等於零的時候，該旗標alf_chroma_filter_signal_flag不被發信並且被推論等於一。
  22. 一種進行視訊編解碼的裝置，包括：一計算處理器被配置用來接收視訊資料；以及可執行於該計算處理器上用於視訊編解碼的程式，該程式藉由進行下列步驟，包括：接收與一當前切片相關聯的輸入資料； 決定用於該當前切片的一特定程序的參數；在與該特定程序相關聯的一類別中的一或多個適應性參數組，發信該特定程序的參數，其中該一或多個適應性參數組被該當前切片加以參考以進行該特定程序，並且依據該適應性參數組所攜帶的資料的一類型，每一可用的適應性參數組被分類至多種類別中的一種；使用該特定程序的參數來對該當前切片中的一或多個塊進行該特定程序；於該當前切片的一切片標頭發信被該當前切片所參考的每一適應性參數組的一適應性參數組識別碼，其中被該當前切片所參考的每一適應性參數組的該適應性參數組識別碼，僅被計算於相關於該特定程序的該種類別，並且為獨立於其他類別；以及編碼該當前切片。
  23. 一種進行視訊編解碼的裝置，包括：一計算處理器被配置用來接收視訊資料；以及可執行於該計算處理器上用於視訊編解碼的程式，該程式藉由進行下列步驟，包括：接收與一當前切片相關聯的輸入資料；對來自該當前切片的一切片標頭的每一被參考的適應性參數組的一適應性參數組識別碼加以剖析，以進行一特定程序；依據該被剖析的適應性參數組識別碼以及與該特定程序相關聯的一類別，來決定每一被參考的適應性參數組，其中依據該適應性參數組所攜帶的資料的一資料類型，每一可用的適應性參數組被分類至多種類別中的一種，以及一個適應性參數組的該適應性參數組識別碼僅被計算於該種類別，並且為獨立於其他類別；藉由參考一或多個被參考的適應性參數組，來決定用於該當前切片的該特定程序的參數； 使用該參數來對該當前切片中的一或多個塊進行該特定程序；以及解碼該當前切片。
TW109114616A 2019-05-03 2020-04-30 視訊編碼系統之語法傳訊和參照限制的方法和裝置 TWI741584B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201962842677P 2019-05-03 2019-05-03
US62/842,677 2019-05-03
US201962845963P 2019-05-10 2019-05-10
US62/845,963 2019-05-10
PCT/CN2020/088222 WO2020224525A1 (en) 2019-05-03 2020-04-30 Methods and apparatuses of syntax signaling and referencing constraint in video coding system
WOPCT/CN2020/088222 2020-04-30

Publications (2)

Publication Number Publication Date
TW202046738A TW202046738A (zh) 2020-12-16
TWI741584B true TWI741584B (zh) 2021-10-01

Family

ID=73051232

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109114616A TWI741584B (zh) 2019-05-03 2020-04-30 視訊編碼系統之語法傳訊和參照限制的方法和裝置

Country Status (4)

Country Link
US (1) US20220256201A1 (zh)
KR (1) KR20210149182A (zh)
TW (1) TWI741584B (zh)
WO (1) WO2020224525A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220003627A (ko) 2019-06-24 2022-01-10 엘지전자 주식회사 루마 맵핑 기반 비디오 또는 영상 코딩
CN116600144A (zh) 2019-06-24 2023-08-15 Lg电子株式会社 图像编解码方法、计算机可读存储介质和数据发送方法
MX2022000003A (es) 2019-06-24 2022-03-11 Lg Electronics Inc Codificación de video o imágenes a base de mapeo de luma y escalamiento de croma.
WO2020215102A2 (en) * 2019-08-16 2020-10-22 Futurewei Technologies, Inc. Alf aps constraints in video coding
US20230071477A1 (en) * 2020-01-15 2023-03-09 Lg Electronics Inc. Adaptive loop filtering-based image coding apparatus and method
CN112788024B (zh) * 2020-12-31 2023-04-07 上海网达软件股份有限公司 一种用于8k超高清视频的实时编码的方法及系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9001883B2 (en) * 2011-02-16 2015-04-07 Mediatek Inc Method and apparatus for slice common information sharing
CN103096047B (zh) * 2011-11-01 2018-06-19 中兴通讯股份有限公司 一种分片层参数集解码及编码方法和装置
CN103096054B (zh) * 2011-11-04 2015-07-08 华为技术有限公司 一种视频图像滤波处理方法和装置
US9386305B2 (en) * 2011-11-28 2016-07-05 Qualcomm Incorporated Largest coding unit (LCU) or partition-based syntax for adaptive loop filter and sample adaptive offset in video coding
CN104754361B (zh) * 2013-12-28 2018-01-23 同济大学 图像编码、解码方法及装置
US20220150481A1 (en) * 2019-03-07 2022-05-12 Lg Electronics Inc. Video or image coding based on luma mapping with chroma scaling
KR20230016712A (ko) * 2019-03-11 2023-02-02 엘지전자 주식회사 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩
WO2020197207A1 (ko) * 2019-03-23 2020-10-01 엘지전자 주식회사 맵핑을 포함하는 필터링 기반 비디오 또는 영상 코딩
US11368684B2 (en) * 2019-04-23 2022-06-21 Qualcomm Incorporated Adaptation parameter sets (APS) for adaptive loop filter (ALF) parameters

Also Published As

Publication number Publication date
KR20210149182A (ko) 2021-12-08
WO2020224525A1 (en) 2020-11-12
TW202046738A (zh) 2020-12-16
CN113796075A (zh) 2021-12-14
US20220256201A1 (en) 2022-08-11

Similar Documents

Publication Publication Date Title
TWI741584B (zh) 視訊編碼系統之語法傳訊和參照限制的方法和裝置
TWI786481B (zh) 用於視訊編碼系統之跨元件適應性迴圈濾波器的語法傳訊限制方法和裝置
EP3205092B1 (en) Intra block copy prediction restrictions for parallel processing
US10397568B2 (en) Method and apparatus for palette coding of monochrome contents in video and image compression
CN114586369B (zh) 用于编解码视频序列的方法和装置
US10356427B2 (en) Method and apparatus of palette index map coding for screen content coding
WO2021115387A1 (en) Methods and apparatus for restricted secondary transform and signaling thereof in image coding
CN114467306A (zh) 图像预测方法、编码器、解码器以及存储介质
WO2018219664A1 (en) A method and a device for picture encoding and decoding
WO2022191934A1 (en) Sample offset with predefined filters
CN115152235A (zh) 图像或视频处理系统中传送回路滤波器参数的方法及装置
US11477445B2 (en) Methods and apparatuses of video data coding with tile grouping
TWI796676B (zh) 視訊編解碼中施加位元流約束的方法和裝置
CN113796075B (zh) 视频编码系统中编码或解码视频数据的方法和装置
WO2023024712A1 (en) Method and apparatus of joint coding for multi-colour components in video coding system
WO2023091290A1 (en) Adaptive application of generalized sample offset
WO2023086214A1 (en) Generalized sample offset