TW202114416A - 視訊編解碼之方法和裝置 - Google Patents

視訊編解碼之方法和裝置 Download PDF

Info

Publication number
TW202114416A
TW202114416A TW109131858A TW109131858A TW202114416A TW 202114416 A TW202114416 A TW 202114416A TW 109131858 A TW109131858 A TW 109131858A TW 109131858 A TW109131858 A TW 109131858A TW 202114416 A TW202114416 A TW 202114416A
Authority
TW
Taiwan
Prior art keywords
filter
alf
cross
adaptive loop
loop filter
Prior art date
Application number
TW109131858A
Other languages
English (en)
Other versions
TWI751703B (zh
Inventor
陳慶曄
歐萊娜 邱巴赫
莊子德
徐志瑋
黃毓文
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW202114416A publication Critical patent/TW202114416A/zh
Application granted granted Critical
Publication of TWI751703B publication Critical patent/TWI751703B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

用於重構視訊的跨顔色環路濾波器處理的方法和裝置被公開。根據一種方法，用於一個或多個候選跨顔色環路濾波器的中的每個濾波器的濾波器係數的總和被約束為固定值。用於指示與濾波器集合中的候選濾波器的總數有關的值的一個或多個語法元素在適應性參數集合（Adaptation Parameter Set，簡稱APS）中被發送或被解析。

Description

視訊編碼之限制式跨元件適應性迴圈濾波方法和裝置
本發明涉及視訊編碼系統中的適應性環路濾波器（Adaptive loop filter，簡稱ALF）處理。具體的是，本發明涉及在視訊編碼器或解碼器中約束跨分量ALF處理。
運動估計是一種有效的幀間編解碼技術，以利用視訊序列中的時間冗餘。運動補償的幀間編解碼已在各種國際視訊編解碼標準中被廣泛使用。各種編解碼標準中採用的運動估計通常是基於塊的技術，其中諸如編解碼模式和運動向量的運動資訊被確定用於每個巨集塊或類似塊配置。另外，幀內編解碼適應性地被應用，其中在不參考任一其他圖像的情況下，圖像被處理。通常藉由變換、量化和熵編碼，幀間預測殘差或幀內預測殘差進一步被處理，以生成壓縮視訊位元流。在編碼過程中，特別是在量化過程中，編碼偽像被引入。為了減輕編碼偽像，額外的處理被應用於重構的視訊，以增強新型編解碼系統中的圖像品質。額外的處理通常以環內操作來配置，以便編碼器和解碼器可以導出相同的參考圖像以實現改進的系統性能。
第1A圖示出引入了包括適應性ALF的環内處理的示例適應性幀間/幀內視訊編解碼系統。對於幀間預測，運動估計（Motion Estimation，簡稱ME）/運動補償（Motion Compensation，簡稱MC）112被用於基於來自其他一個或多個圖像的視訊資料提供預測資料。開關114選擇幀內預測110或幀間預測資料，並且所選擇的預測資料被提供給加法器116以形成預測誤差，也被稱為殘差。然後，藉由變換（Transformation，簡稱T）118，然後是量化（Quantization，簡稱Q）120，預測誤差被處理。然後，經過變換和量化的殘差由熵編碼器122進行編碼，以形成與壓縮視訊資料相對應的視訊位元流。然後，與變換係數相關聯的位元流與諸如運動、模式以及與圖像區域相關聯的其他資訊之類的輔助資訊打包在一起。輔助資訊也可以經過熵編碼以減少所需的頻寬。因此，如第1A圖所示，與輔助資訊相關的資料被提供給熵編碼器122。當幀間預測模式被使用時，參考圖像也必須在編碼器端被重構。因此，經變換和量化的殘差藉由逆量化（Inverse Quantization，簡稱IQ）124和逆變換（Inverse Transformation，簡稱IT）126來處理以恢復殘差。然後在重構（Reconstruction，簡稱REC）128處，殘差被加回到預測資料136以重構視訊資料。重構的視訊資料可被存儲在參考圖像緩衝器（Reference Picture Buffer）134中，並被用於其他幀的預測。
如第1A圖所示，輸入視訊資料在編碼系統中經歷了一系列處理。由於一系列處理，來自REC 128的重構視訊資料可能遭受各種損害。因此，在重構視訊資料被存儲在參考圖像緩衝器134中之前，各種環内處理被應用於重構視訊資料，以提高視訊品質。在視訊編碼系統中，諸如解塊濾波器（Deblocking Filter，簡稱DF）130，樣本適應性偏移（Sample Adaptive Offset，簡稱SAO）131和適應性環路濾波器（Adaptive Loop Filter，簡稱ALF）132之類的各種環内濾波器被用來增強圖像品質。
用於第1A圖的編碼器的相應解碼器在第1B圖中被示出。視訊位元流由熵解碼器142解碼以恢復經變換和量化的殘差。在解碼器側，僅運動補償（Motion Compensation，簡稱MC）113被執行，而ME/MC不被執行。解碼過程類似於編碼器側的重構環路。恢復的經過變換和量化的殘差，SAO/ALF資訊以及其他系統資訊被用於重構視訊資料。重構的視訊由DF 130，SAO 131和ALF 132進一步處理以生成最終的增強解碼視訊。
跨分量 ALF 處理
在JVET-O0636 (Kiran Misra, et al., “Cross-Component Adaptive Loop Filter for chroma”, Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11, 15th Meeting: Gothenburg, SE, 3–12 July 2019, Document: JVET-O0636)，跨分量適應性環路濾波器（Cross-Component Adaptive Loop Filter，簡稱CC-ALF）被提出。CC-ALF利用亮度樣本值來細化每個色度分量。第2A圖示出根據JVET-O0636的關於其他環路濾波器的CC-ALF的結構。在第2A圖中，在各個SAO（210、212和214）之後，ALF處理被執行。在常規的視訊編碼系統中，僅ALF 亮度220和ALF色度230被使用。在JVET-0636中，兩個額外的ALF濾波器，即CC ALF Cb 222和CC ALF Cr 224被用於導出調整信號，以分別使用加法器240和242將調整信號加到經ALF處理的Cb和Cr。
根據JVET-O0636，CC-ALF藉由將線性菱形濾波器應用於每個色度分量的亮度通道來進行操作，如第2B圖所示。濾波器係數在APS發送，由因數210 進行縮放，並被四捨五入用於定點表示。濾波器的應用在可變的塊大小上控制，並藉由每個樣本塊接收的上下文編碼標誌發出。對於每個色度分量，塊大小以及CC-ALF啟用標誌在片段級別被接收。CC-ALF的語法和語義也在JVET-O0636也公開。
如上所述，CC-ALF藉由將線性菱形濾波器應用於每個色度分量的亮度通道來進行操作。第2C圖示出關於亮度樣本的CC-ALF 250的放置的示例。符號的圖例260被示出，其中空圓圈表示亮度樣本，並且用陰影線填充的圓圈表示色度樣本。例如，分別用於色度樣本252和254的菱形濾波器253和255被示出。濾波器係數動態範圍被限制為6位元有符號值。濾波器選擇在CTU級別上執行，最多支持4個濾波器。對稱行(Symmetric line)選擇在虛擬邊界處被使用（以更好地與ALF協調）。時間層係數緩衝器不被使用（以更好地與APS概念保持一致）。殘差輸出被裁剪為－2BitDepthC－1至2BitDepthC－1－1（含兩個值）。
濾波器的應用在可變塊大小上被控制，並藉由每個樣本塊接收的上下文編碼標誌來發送。對於每個色度分量，塊大小以及CC-ALF啟用標誌在片段級別被接收。CC-ALF的語法和語義在附錄中提供。在文獻中，可支援以下塊大小（在色度樣本中）16x16、32x32、64x64、128x128。
虛擬邊界以減少行緩衝器（ line buffer ）的使用
為了消除SAO和ALF的行緩衝器要求，我們引入了虛擬邊界（virtual boundary，簡稱VB）的概念。如第3圖所示，VB是將水平最大編解碼單元（largest coding unit，簡稱LCU）邊界向上移動N行（line）。對於每個LCU，SAO和ALF可以在下部LCU到達之前處理VB上方的行，但不能處理VB下方的行直到下部LCU到達，這是由DF引起的。考慮到HM-4.0中的DF，提議的VB和水平LCU邊界之間的間隔被設置為三行（即第3圖中的N=3）用於亮度和一行（即第3圖中的N=1）用於色度。SAO和ALF被修改，以確保VB一側上的每個待處理位置都不需要從VB另一側進行任一資料訪問，除非可以及時使用這些資料而無需使用任一額外的行緩衝器。
在第11次JVET會議上，下一代視訊編解碼標準（通用視訊編解碼（Versatile Video Coding，簡稱VVC））的草案中採用了基於4x4塊適應性的ALF。 對於一個4x4的塊，需要一個8x8的視窗來計算塊的屬性，並且濾波器的足跡是1個7x7菱形濾波器（用於亮度）和一個5x5菱形濾波器（用於色度）。因此，所需的沒有虛擬邊界的行緩衝器是在4個亮度DF行緩衝器和2個色度DF行緩衝器之上額外的7個亮度行緩衝器和3個色度行緩衝器。虛擬邊界的概念仍然可以在VVC中應用，以減少行緩衝器的使用。在以上描述中，最大編碼單元（Largest Coding Unit，簡稱LCU）被重命名為VVC中的編解碼樹單元（coding tree unit，簡稱CTU）。 但是，一些修改被提出以適合當前ALF設計的功能。
非 - 線性 ALF 操作
在VTM3.0（通用視訊編解碼（Versatile Video Coding，簡稱VVC）測試模型3.0版）中，適應性環路濾波器的濾波過程如下執行：
Figure 02_image001
,                                       (1)
在上式中，樣本I （x +i ，y +j ）是輸入樣本，O （x ，y ）是濾波後的輸出樣本（即濾波結果），而w （i ，j ）表示濾波係數。由於ALF被應用於重構樣本，所以樣本I （x +i ，y +j ）對應於重構樣本。在ALF處理的中心位置處的中心重構位置對應於（i，j）=（0，0），即I（i，j）。實際上，在VTM3.0中，它使用整數演算法實現定點精度計算：
Figure 02_image003
,         (2)
在上式中，L 表示濾波器長度，其中w （i ，j ）是定點精度的濾波器係數。
在以下運算式中，可以在不影響編碼效率的情況下，公式（1）被重新公式化：
Figure 02_image005
.               (3)
在上式中，除了w （0,0），w （i ，j ）與公式（1）中的濾波器係數相同，在公式（3）中w （0，0）等於1且在公式（1）中等於（1-∑）的
Figure 02_image007
) in。
使用上面的公式（3）的濾波器公式，當相鄰樣本值（I （x +i ，y +j ））與正在濾波的當前樣本值（I （x ，y ））完全不同時，我們可藉由使用簡單的裁剪函數來減少相鄰樣本值（I （x +i ，y +j ））的影響，從而輕鬆地引入非線性以提高ALF的效率。
在JVET-M0385((J. Taquet, et al., “Non-Linear Adaptive Loop Filter ”, in Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11, 13th Meeting: Marrakech, MA, 9–18 Jan. 2019, Document: JVET- M0385）），一種非線性ALF被公開。它在測試軟體VTM3.0中對適應性環路濾波器的輸入樣本值引入了適應性裁剪操作。這種適應性裁剪操作的目的是引入一些非線性，以限制要濾波的輸入樣本值與濾波器的其他相鄰輸入樣本值之間的差異。
根據JVET-M0385，ALF濾波器操作被修改如下：
Figure 02_image009
,                    (4)
在上式中，O' （x ，y ）對應於修改後的ALF濾波器輸出，I （x ，y ）對應於ALF之前的樣本，K （d ，b ）=min（b ，max（-b ，d ））是裁剪函數，而k （i ，j ）是裁剪參數，取決於（i ，j ）處的濾波器係數。編碼器執行優化以找到最佳的k （i ，j ）。
在根據JVET-M0385的實施方式中，裁剪參數k （i ，j ）被指定用於每個ALF濾波器，其中對每個濾波器係數發送一個裁剪值。這意味著在位元流中發送12個裁剪值用於每個亮度濾波器，發送6個裁剪值用於每個色度濾波器。
為了限制發送成本和編碼器複雜度，裁剪值被限制為JVET-M0385中的一小部分可能值。此外，僅4個可能值被用於幀間片段，3個可能值被用於幀內片段。
因為亮度的局部差異的方差通常比色度的高，所以兩個不同的集合被用於亮度和色度濾波器。此外，每個集合中都包含最大樣本值，因此可以在不需要時禁用裁剪。
表1提供了根據JVET-M0385提出的裁剪值的集合。表 1 ：允許的裁剪值
  幀内 幀間
亮度 { 10, 102, 1024 } { 6, 32, 181, 1024 }
色度 { 4, 24, 1024 } { 4, 25, 161, 1024 }
使用與集合中的裁剪值的索引相對應的Golomb編碼，裁剪值被編碼於片段頭中。
使用虛擬邊界降低 ALF 的緩衝器要求
在JVET-M301（（A. Kotra, et al., “Non-CE: Loop filter line buffer reduction ”, in Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11, 13th Meeting: Marrakech, MA, 9–18 Jan. 2019, Document: JVET- M0301））中，一種減少適應性環路濾波器（Adaptive Loop Filter，簡稱ALF）的行緩衝器需求的機制被公開。該文獻使用虛擬邊界（virtual boundaries，簡稱VB）的概念，虛擬邊界是將水平CTU邊界向上移動“N”個樣本。修改後的ALF塊分類和修改後的ALF濾波適用於虛擬邊界附近的樣本，以減少所需的行緩衝器數量。修改後的ALF塊分類僅使用VB之上的樣本對VB之上的給定4×4塊進行分類。類似地，對於VB以下的4×4塊的分類，屬於VB以下的行的樣本被使用。修改後的ALF濾波可以是使用有條件地禁用原始ALF濾波器和原始ALF濾波器的截斷版本的組合。
虛擬邊界上截斷的 ALF 濾波
濾波器的截斷版本被用於對屬於接近虛擬邊界的行的亮度樣本進行濾波。濾波器的這些截斷版本可被用於N=4和N=6情況。同樣，濾波器的截斷版本也被用於色度ALF濾波。
對於截斷的ALF，係數必須進行歸一化，即，其餘係數的總和必須與原始係數的總和相同。第4A-F圖示出在虛擬邊界處用於截斷亮度ALF濾波器處理的係數歸一化的示例。第4A圖示出對於頂部位置（即，位置c0）在虛擬邊界之外的情況下的修改後的ALF係數。係數c2被修改為c2'，其中c2'= c2 + c0。第4B圖示出底部位置（即，c0）在虛擬邊界之外的情況。第4C圖示出對於前兩行（即，位置c0，c1，c2和c3）在虛擬邊界之外的情況下的修改後的ALF係數。因此，係數c5，c6和c7被修改為c5’，c6’和c7’，其中c5’= c5+c1，c6’=c6+c2+c0，而c7’=c7+c3。第4D圖示出對於底部兩行（即位置c0，c1，c2和c3）在虛擬邊界之外的情況下的修改後的ALF係數。第4E圖示出對於前三行（即，位置c0至c8）在虛擬邊界之外的情況下的修改後的ALF係數。因此，係數c10，c11和c12被修改為c10'，c11'和c12'，其中c10'=c10+c4+c8，c11'=c11+c5+c7+c1+c3和c12'=c12+2 *c6+2 * c2+2*c0。第4F圖示出對於底部三行（即，位置c0至c8）在虛擬邊界之外的情況的修改後的ALF係數。
第5A-D圖示出在虛擬邊界處的截斷色度ALF濾波器處理的示例。第5A圖示出對於頂部位置（即，位置c0）在虛擬邊界之外的情況下的修改後的ALF係數。係數c2被修改為c2'，其中c2'= c2 + c0。第5B圖示出底部位置（即，c0）在虛擬邊界之外的情況。第5C圖示出對於前兩行（即，位置c0，c1，c2和c3）在虛擬邊界之外的情況下的修改後的ALF係數。因此，係數c5和c6被修改為c5'和c6'，其中c5'=c5+c1+c3，c6'=c6+2*c2+2*c0。第5D圖示出對於底部兩行（即，位置c0，c1，c2和c3）在虛擬邊界之外的情況下的修改後的ALF係數。
在本申請中，各種其他ALF邊界問題被解決，並且用於提高性能，統一多個系統或簡單地進行ALF邊界處理的解決方案被公開。
用於重構視訊的環路濾波器處理的方法和裝置被公開。根據一種方法，重構的樣本被接收。目標跨顔色適應性環路濾波器（Cross-Colour Adaptive Loop Filter，簡稱CCALF）被確定，其中目標CCALF屬於包括一個或多個候選濾波器的濾波器集合，並且在所述一個或多個候選濾波器中，每個候選濾波器的濾波器係數之總和被約束為固定值。目標CCALF被應用於相關的重構亮度樣本，以生成用於目標重構色度樣本的CCALF濾波色度樣本。藉由將CCALF濾波色度樣本和常規ALF濾波色度樣本進行組合，最終的濾波色度樣本被生成，其中最終的濾波的色度樣本被用作視訊解碼輸出或被用於進一步的視訊編碼或解碼處理。
在一實施例中，固定值等於0。在另一實施例中，當每個候選濾波器的唯一濾波器係數的數量等於M時，在解碼器側每個候選濾波器的僅（M-1）個濾波器係數被解碼，其中M是大於1的整數。在一實施例中，除（M-1）濾波器係數外，一個濾波器係數不在解碼器側解碼或在編碼器側編碼，並且未編碼濾波器係數對應於每個候選濾波器的唯一濾波器係數中的任一選定係數。
根據另一方法，在編碼器側的視訊位元流的適應性參數集合（Adaptation Parameter Set，簡稱APS）中，一個或多個語法元素被發送，或者在解碼器側的視訊位元流的APS中，所述一個或多個語法元素被解析，其中所述一個或多個語法元素指示與濾波器集合中的候選濾波器總數量有關的值。目標CCALF被確定，其中目標CCALF屬於包括一個或多個候選濾波器的濾波器集合，並且在所述一個或多個候選濾波器中的每個候選濾波器的濾波器係數的總和被約束為固定值。目標CCALF被應用於相關的重構亮度樣本，以生成用於目標重構色度樣本的CCALF濾波色度樣本。藉由將CCALF濾波的色度樣本和常規ALF濾波的色度樣本進行組合，最終的濾波色度樣本被生成，其中最終的濾波的色度樣本被用作視訊解碼輸出或被用於進一步的視訊編碼或解碼處理。
在一實施例中，一個語法元素被發送或解析用於每個顏色分量。在一實施例中，所述一個或多個語法元素包括對應於濾波器集合中的候選濾波器總數減去1的值。
以下描述是實施本發明的最佳構想模式。作出該描述是出於說明本發明的一般原理的目的，而不應被認為是限制性的。本發明的範圍最好藉由參考所附的申請專利範圍來確定
方法 1 ： CC-ALF 中相應的亮度樣本值
在CC-ALF中，一個額外濾波器被添加用於色度分量，並且濾波後的輸出為原始色度濾波器和額外濾波器的加權和。如果視訊格式為YUV444或RGB444，則藉由在不同顏色分量中使用相同的空間位置，待處理色度樣本的相應亮度樣本可以被很好地定義。但是，如果視訊格式為YUV420或YUV444，則CC-ALF中相應亮度樣本的定義就是一個問題。在一實施例中，根據YUV格式或色度的採樣位置，相應亮度樣本被下採樣。例如，如果視訊格式為YUV420，根據亮度位置，色度採樣位置為（0，0.5），則相應亮度採樣可以是四個亮度採樣中的一個。在另一示例中，相應亮度樣本可以是剩餘的兩個亮度樣本的平均值。在另一示例中，相應亮度樣本可以是左（右）頂部和底部亮度樣本的平均值。在另一種情況下，相應亮度樣本可以是四個亮度樣本的平均值。濾波器的足跡可根據色度位置或亮度位置來定義。如果濾波器足跡根據色度樣本位置來定義，那麼CC-ALF濾波過程的輸入就是上面提到的相應亮度樣本。如果濾波器足跡根據亮度樣本位置來定義，則CC-ALF中濾波器-形狀的中心位置由待處理色度樣本的相應亮度樣本來定義。在一實施例中，相應亮度樣本的定義取決於視訊格式或色度分量的採樣位置。
在另一實施例中，非線性裁剪操作可被應用於CC-ALF。在又一實施例中，相鄰樣本和待處理樣本之間的差異在濾波處理中被使用，而不是直接使用相鄰樣本。待處理樣本可以是色度分量中的樣本值，也可以是CC-ALF中相應亮度樣本的樣本值。
在當前設計中，色度ALF的輸出將被裁剪到一個有效範圍內（例如[0，1023]用於10位視訊壓縮，[0，255]用於8位視訊壓縮）。CCALF的輸出將添加到此裁剪值上，並且裁剪操作被再次執行以確保最終輸出在有效範圍內。因此，存在兩個裁剪操作：一個被應用於色度ALF的輸出，另一個被應用於CCALF的輸出。在一實施例中，當CC-ALF被應用時，用於在色度ALF處理中將輸出值限制在有效範圍內的裁剪操作可被丟棄，因此，僅在CC-ALF輸出被添加到色度ALF的輸出之後，裁剪操作才被應用。
在另一實施例中，CC-ALF中的額外濾波器中的濾波器係數的精度與原始ALF設計一致。
在一實施例中，CC-ALF的濾波器形狀與亮度ALF濾波器的濾波器形狀對準。在一實施例中，CC-ALF濾波器可包括具有23個係數的25個抽頭，其中最頂部和最底部係數相等，而最左側和最右側係數相等。在一實施例中，CC-ALF濾波器可包括具有22個係數的25個抽頭，其中最頂部，最底部，最左側和最右側的係數都相等。在一實施例中，CC-ALF濾波器的對稱性與ALF濾波器的對稱性對齊。在一實施例中，當CCALF和亮度ALF的濾波器形狀相同時，則CCALF的邊界處理，包括ALF虛擬邊界處理，片段（slice）邊界/磚塊（brick）邊界/方格（tile）邊界/360面虛擬邊界/子-圖像邊界/圖像邊界的ALF邊界處理，與亮度ALF的ALF邊界處理相同。
在一實施例中，CC-ALF的濾波器形狀可以與色度ALF濾波器的濾波器形狀對準。在一實施例中，CC-ALF濾波器可包括具有11個係數的13個抽頭，其中頂部和底部係數相等，而左側和右側係數相等。在一實施例中，CC-ALF濾波器可包括具有10個係數的13個抽頭，其中頂部，底部，左側和右側係數全部相等。 在一實施例中，CC-ALF濾波器是對稱的，類似於ALF濾波器，因此，它包含13個抽頭和僅7個係數。在一實施例中，當CCALF和色度ALF的濾波器形狀相同時，則CCALF的邊界處理，包括ALF虛擬邊界處理，在片段邊界/磚邊界/方格邊界/360面虛擬邊界/子-圖像邊界/圖像邊界處的ALF邊界處理，與色度ALF的ALF邊界過程相同。
在一實施例中，CC-ALF濾波器在色度U和色度V顏色分量之間共用。在一實施例中，在APS中僅存在一個alf_crosscomponent_cbcr_filter_signal_flag。在一示例中，如果存在該標誌，則CC-ALF係數存在於APS中並且可以被解碼。
在一實施例中，色度U的CC-ALF係數從亮度分量定義，並且可被重新用於色度V。在一實施例中，色度V的CC-ALF係數從亮度分量定義，並且可被重新用於色度U。在一實施例中，藉由對符號和/或位元-位移資訊的額外編碼，色度V的CC-ALF係數可從色度U的CC-ALF係數中獲得。在一實施例中，藉由對符號和/或位元-位移進行額外編碼，色度U的CC-ALF係數可從色度V的CC-ALF係數中獲得。
在一實施例中，CC-ALF僅被應用於色度分量之一。在一示例中，標誌可以在CTB級別，CU級別或塊級別被顯式地發送，以指示色度分量中的一個還是兩個在使用CC-ALF。在一實施例中，如果未被發送，則CC-ALF係數被推斷為等於零。
在一實施例中，slice_cross_component_alf_cb_reuse_temporal_layer_filter從未在片段頭中發送，這意味著當CCALF被啓用時，必須始終對每個片段發送CC-ALF的濾波器選擇。在一實施例中，僅存儲在APS中的CCALF濾波器係數可被不同的片段或圖像引用。即，在不同片段或不同圖像之間不存在CCALF濾波器係數的資料依賴性。
在另一實施例中，多個CC-ALF濾波器可以在一個片段/磚塊/方格/圖像/中被使用。當多個CC-ALF濾波器被使用時，多個CC-ALF濾波器的選擇可以在CTB級別，CU級別或塊級別被顯式地發送。在另一實施例中，根據多個色度濾波器的選擇，多個CC-ALF濾波器的選擇被隱式地得出。當多個CC-ALF濾波器被使用時，它們可以在一個APS中獨立發出，或與多個色度濾波器耦合。例如，兩個多濾波器的集合，一個被用於CC-ALF，另一個被用於色度濾波器，在一個APS中分別被發送。或在另一種情況下，僅一個多濾波器在一個APS中發送，並且該集合中的每個候選至少包括色度濾波器和CC-ALF濾波器中的一個。
在另一實施例中，色度ALF濾波器和CC-ALF濾波器不能被同時使用。即，對於每個要處理的色度樣本，最多只能應用色度ALF濾波器和CC-ALF濾波器之一。在一實施例中，這兩個濾波器的濾波器形狀可以被進一步統一。在另一實施例中，在一個開/關標誌被發送並且該開/關標誌指示色度ALF濾波器和CC-AL濾波器中的一個被應用之後，一個標誌被發送用於每個濾波器以指示哪個濾波器類型是色度ALF濾波器或CC-ALF濾波器。在一實施例中，用於指示色度ALF濾波器被啓用的一個標誌被首先發送，並且如果該標誌等於1，則色度ALF濾波器被應用。如果該標誌為假，則用於指示CCALF濾波器是否被啟用的另一標誌被發送。如果該標誌為真，則CCALF濾波器被使用。否則，沒有濾波器被應用。在另一實施例中，用於指示CC-ALF濾波器被啓用的一個標誌被首先發送，並且如果該標誌等於1，則CC-ALF濾波器被應用。如果該標誌為假，則用於指示色度ALF濾波器是否被啟用的另一個標誌被發送。如果該標誌為真，則色度ALF濾波器被使用。否則，沒有濾波器被應用。在以上實施例中，色度ALF濾波器或CC-ALF濾波器的選擇可以是片段級別，圖像級別，序列級別，CTB級別或塊級別。
在另一實施例中，所提出的方法被應用於亮度ALF。即，亮度分量的ALF輸出也受到相應色度採樣的影響。在一示例中，兩個濾波器被添加，並且一個濾波器的輸入是Cb分量，而另一濾波器的輸入是Cr分量。ALF輸出是這兩個額外濾波器和原始濾波器的輸出的加權和。在另一種情況下，僅一個濾波器被添加，但是此濾波器的輸入是包括Cb，Cr以及Cb和Cr平均值的組合之一。
方法 2 ：受約束的 CCALF-CCALF 係數的總和等於 0
根據該方法，CCALF係數之和被約束。由於此約束，CCALF係數之間的資料冗餘被引入，並且特定資訊不需要被傳輸。因此，該方法可以提高編碼效率。
在CC-ALF中，線性濾波器對亮度採樣值進行濾波，並從同位的濾波輸出生成色度通道的殘差校正。
在本發明的實施例中，所有濾波器的濾波器係數之和受到一定數量N的限制。在一實施例中，為了保持Cb和Cr分量的色度平均值而不在色度引入任何嚴重的色彩變化，則建議每個CCALF濾波器的濾波器抽頭之和等於0。因此，CCALF濾波器在DC處的回應為0，並將消除所有色度平均值。
在一實施例中，當所有濾波器係數都是唯一的時，在知道解碼器側的所有唯一係數的總和（N）以及的唯一濾波器係數的數量（M）時，濾波器的最後唯一係數可被確定。因此，僅M-1個唯一濾波器係數必須被解碼。要注意的是，當濾波器係數唯一時，濾波器係數的值不同。
在一實施例中，CCALF濾波器中的唯一濾波器係數（M）的數量小於濾波器中係數的總數。第6圖示出具有7個（M＝7）唯一係數c0至c6的3×4菱形CCALF的示例。濾波器係數的總數為8。在一實施例中，在知道所有濾波器係數N的總和，僅6個（M-1=6）係數c0至c5必須被解碼，並且係數c6可以在解碼器處定義如下：
Figure 02_image011
.
在一實施例中，唯一係數中的任一可被跳過，而不僅僅是最後一個唯一係數。在一實施例中，在解碼器側係數c2被跳過和被定義。在另一實施例中，在解碼器側係數c5被跳過和被定義。
在一實施例中，位元流一致性的要求是第k個交叉分量Cb濾波器係數CcAlfApsCoeffCb [adaptive_parameter_set_id] [k] [7]的最後一個係數應在[-32，31]。
在一實施例中，這一要求應用於第k個交叉分量Cb濾波器係數CcAlfApsCoeffCb [adaptive_parameter_set_id] [k] [i]中的任一係數，其中i為0到在第k個交叉分量Cb濾波器中的係數的數量減去1。
在一實施例中，要求位元流一致性：第k個交叉分量Cr濾波器係數CcAlfApsCoeffCr [adaptive_parameter_set_id] [k] [7]的最後一個係數應在[-32，31]。
在一實施例中，該要求被應用於第k個交叉分量的任一係數Cr濾波器係數CcAlfApsCoeffCr [adaptation_parameter_set_id] [k] [i]，其中i為0到第k個交叉分量Cr濾波器中的係數的數量減去1。
在一實施例中，這一要求適用於第k個交叉分量的所有係數Cb/Cr濾波器係數CcAlfApsCoeffCb/Cr [adaptation_parameter_set_id] [k] [i]，其中i為0到在第k個交叉分量Cb/Cr濾波器中的係數的數量。
方法 3 ：受約束的 CCALF- 在無損和接近無損編解碼的情況下禁用 CCALF
在HEVC中，如果CU使用無損或接近無損模式（包括用於4：4：4內容的調色板模式）進行編碼，則所有環路濾波器（即SAO，ALF，DF（去塊濾波器）））被禁用。
在當前版本的VVC中，當CU以無損模式編碼時，所有環路濾波器均會被編碼器設置禁用。同時，如果CU使用調色板模式進行編碼，則在編碼器和解碼器側，SAO，ALF和DF都會被禁用。
在本發明的實施例中，當CU使用無損或接近無損模式（包括用於4：4：4內容的調色板模式）進行編碼時，在編碼器和解碼器側所有環路濾波器必須被禁用。
在一實施例中，對於用無損或接近無損模式（包括用於4：4：4內容的調色板模式）編碼的CU，在編碼器和解碼器上CCALF均應被禁用。
在一實施例中，當雙樹被使用來劃分編碼樹節點（treeType等於DUAL_TREE_LUMA或DUAL_TREE_CHROMA）時，可以分別對亮度和色度禁用所有環路濾波器（即，可以對亮度和色度採用不同的解決方案）。
在一實施例中，當雙樹被用來劃分編碼樹節點時，treeType等於DUAL_TREE_CHROMA，並且至少一個CU（色度CU或與該色度CU相對應的亮度CU）使用無損模式進行編碼，則對色度CU，CCALF自動被禁用。
在一實施例中，當雙樹不被用來劃分編碼樹節點時（即，treeType等於SINGLE_TREE），以及CU中的至少一個（色度CU或與該色度CU相對應的亮度CU） 使用無損模式進行編碼，則對色度CU，CCALF會自動被禁用。
在一實施例中，當雙樹不被用來劃分編碼樹節點時，treeType等於DUAL_TREE_CHROMA，並且色度CU使用無損模式進行編碼，則對該色度CU， CCALF自動被禁用。
在一實施例中，當雙樹不被用來對編碼樹節點進行劃分時（treeType等於SINGLE_TREE），並且色度CU使用無損模式進行編碼，則對該色度CU，CCALF自動被禁用。
在一實施例中，當雙樹被用來劃分編碼樹節點時（treeType等於DUAL_TREE_CHROMA），並且色度CU和對應的亮度CU都使用無損模式進行編碼，則對色度CU，CCALF自動被禁用。
在一實施例中，當雙樹不被用來對編碼樹節點進行劃分時（treeType等於SINGLE_TREE），並且色度CU和對應的亮度CU都使用無損模式進行編碼，則對色度CU，CCALF為自動被禁用。
在一實施例中，如果色度分量Cb和Cr的殘差樣本都被編碼為單個變換塊（例如tu_joint_cbcr_residual_flag [xC] [yC]==1）和至少一個CU（Cb或Cr）使用無損模式進行編碼，則對兩個色度CU，CCALF均自動被禁用。
在一實施例中，如果色度分量Cb和Cr的殘差樣本都被編碼為單個變換塊（例如tu_joint_cbcr_residual_flag [xC] [yC] == 1）和至少一個CU（Cb） 或Cr）是使用無損模式編碼的，那麼相應的色度CU，CCALF自動被禁用。
方法 4 ：發送 CCALF 中濾波器的數量
為了知道CCALF濾波器的數量，一個額外的語法元素需要被發送。在常規方法中，該額外的語法元素在片段頭（slice header，簡稱SH）中發送。根據JVET-P1008中公開的另一種常規方法（K. Misra, et al., “CE5-related: On the design of CC-ALF”, Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11, 16th Meeting: Geneva, CH, 1–11 October 2019, JVET-P1008-v2），它公開了用於發送CCALF中濾波器數量的語法設計，該設計基於VVC草案6（J. Chen, et al., “Cross-Component Adaptive Loop Filter for chroma”, Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11, 15th Meeting: Gothenburg, SE, 3–12 July 2019, Document: JVET-O2001-vE）。根據JVET-P1008，語法元素alf_ctb_cross_component_cb_idc []和alf_ctb_cross_component_cr_idc[][]在CTU級別中發送。語法元素alf_ctb_cross_component_cb_idc[][]指示交叉分量Cb濾波器是否被應用於Cb顏色分量樣本。語法元素alf_ctb_cross_component_cr_idc[][]指示交叉分量Cr濾波器是否被應用於Cr顏色分量樣本。如下表所示，兩個語法元素都使用截斷的萊斯（truncated Rice，簡稱TR）代碼進行了二值化處理：表 2
語法結構 語法元素 二值化
處理 輸入參數
coding_tree_unit() alf_ctb_cross_component_ cb_idc[ ][ ] TR cMax = ( slice_cross_component_ cb_filters_signalled_minus1 + 1 ),  cRiceParam = 0
alf_ctb_cross_component_ cr_idc[ ][ ] TR cMax = ( slice_cross_component_ cr_filters_signalled_minus1 + 1 ), cRiceParam = 0
在表2中，cMax和cRiceParam是提供給使用截斷萊斯的alf_ctb_cross_component_cb_idc [] []和alf_ctb_cross_component_cr_idc [] []的二值化處理的兩個輸入。二值化處理的詳細資訊在JVET-O2001-vE中進行了描述。語法元素slice_cross_component_cb_filters_signalled_minus1和slice_cross_component_cr_filters_signalled_minus1在片段頭（slice header，簡稱SH）中發送。
在JVET-P1008中，一些語法元素被引入，簡要概述如下。slice_cross_component_alf_cb_enabled_flag指定交叉分量Cb濾波器是否被應用於Cb顏色分量。如果不存在slice_cross_component_alf_cb_enabled_flag，則其被推斷為等於0。
當slice_cross_component_alf_cb_enabled_flag等於1時，位元流一致性的要求是，對於當前圖像的所有片段，slice_cross_component_alf_cb_aps_id所指的ALF APS必須相同。slice_cross_component_cb_filters_signalled_minus1加1指定交叉分量Cb濾波器的數量。slice_cross_component_cb_filters_signalled_minus1的值應在0到3的範圍內。
當slice_cross_component_alf_cb_enabled_flag等於1，位元流一致性的要求是：slice_cross_component_cb_filters_signalled_minus1應小於或等於當前片段的slice_cross_component_alf_cb_aps_id所指的ALF APS中的alf_cross_component_cb_filters_signalled_minus1的值。
slice_cross_component_alf_cr_enabled_flag 指定交叉分量Cr濾波器是否被應用於Cr顏色分量。如果不存在slice_cross_component_alf_cr_enabled_flag，則其被推斷為等於0。
slice_cross_component_alf_cr_aps_id 指定與slice_cross_component_alf_cb_aps_id相同，但是用於所指的片段的Cr的顏色分量。當slice_cross_component_alf_cr_enabled_flag等於1時，位元流一致性的要求是，對於當前圖像的所有片段，slice_cross_component_alf_cr_aps_id所指的ALF APS必須相同。
slice_cross_component_cr_filters_signalled_minus1 加1指定交叉分量Cr濾波器的數量。slice_cross_component_cr_filters_signalled_minus1的值應在0到3的範圍內。
當slice_cross_component_alf_cr_enabled_flag等於1時，位元流一致性的要求是slice_cross_component_cr_filters_signalled_minus1小於或等於當前片段的slice_cross_component_alf_cr_aps_id所指的參考的ALF APS中的alf_cross_component_cr_filters_signalled_minus1的值。
在本發明的實施例中，pic_cross_component_cb_filters_signalled_minus1，pic_cross_component_cr_filters_signalled_minus1，slice_cross_component_cb_filters_signalled_minus1和slice_cross_component_cr_filters_signalled_minus1不存在於CC-ALF語法，以及alf_ctb_cross_component_cb_idc[][]和alf_ctb_cross_component_cr_idc[][]被編碼如下表3：表 3
alf_ctb_cross_component_cb_idc[ ][ ] TR cMax = ( alf_cross_component_cb_filters_ signalled_minus1 + 1 ), cRiceParam = 0
alf_ctb_cross_component_cr_idc[ ][ ] TR cMax = ( alf_cross_component_cr_filters_ signalled_minus1 + 1 ), cRiceParam = 0
根據所提出的語法設計，表2的語法slice_cross_component_cb_filters_signalled_minus1和slice_cross_component_cr_filters_signalled_minus1分別由表3的alf_cross_component_cb_filters_signalled_minus1和alf_cross_component_cr_filters_signalled_minus1替換，換句話說，代替使用在片段頭中發送的語法元素，濾波器的數量在ALF APS中發送並直接被參考以定義用於CC-ALF編碼的濾波器的數量。因此，與常規語法和信令不同，CC-ALF設計與ALF設計保持一致。此外，由於圖像中的不同片段可引用不同的ALF APS，因此，如果ALF APS中存在CC-ALF濾波器的數量，則每個片段可節省4位元（每個顏色分量可節省2位元）。
任一上述提出的方法可以在編碼器和/或解碼器中實現。例如，任一所提出的方法可在編碼器和/或解碼器的環内濾波模組中實現。可替代地，任一提出的方法可被實現為耦合到編碼器和/或解碼器的環内濾波模組的電路。
第7圖示出了根據本發明實施例的重構視訊的示例性ALF處理的流程圖，其中，一個或多個候選濾波器中的每個候選濾波器的濾波器係數的總和被約束為固定值。流程圖中所示的步驟可被實現為在編碼器側的一個或多個處理器（例如，一個或多個CPU）上可執行的程式碼。流程圖中所示的步驟也可以基於硬體來實現，例如被佈置為執行流程圖中的步驟的一個或多個電子設備或處理器。根據該方法，在步驟710中，重構的樣本被接收。在步驟720中，確定目標（跨顔色適應性環路濾波器（Cross-Colour Adaptive Loop Filter，簡稱CCALF），其中目標CCALF屬於包括一個或多個候選濾波器的集合，以及在所述一個或多個候選濾波器中的每個候選濾波器的濾波係數的總和被約束為固定值。在步驟730中，目標CCALF被應用於相關的重構亮度樣本，以生成目標重構色度樣本的CCALF濾波色度樣本。在步驟740中，藉由將CCALF濾波色度樣本與常規ALF濾波色度樣本相組合，最終濾波色度樣本被生成，其中最終濾波色度樣本被用作視訊解碼輸出或被用於進一步的視訊編碼或解碼處理。
第8圖示出了根據本發明實施例的重構視訊的示例性ALF處理的流程圖，其中，用於指示與濾波器集合中的候選濾波器總數有關的值的一個或多個語法元素在APS中被發送或被解析。根據該方法，在步驟810中，重構的樣本被接收。在步驟820中，在編碼器側一個或多個語法元素在視訊位元流的APS中被發送，或者在解碼器側所述一個或多個語法元素在視訊位元流的APS中被解析，其中所述一個或多個語法元素指示與濾波器集合中的候選濾波器的總數有關的值。在步驟830中，目標CCALF被確定，其中目標CCALF屬於包括一個或多個候選濾波器的濾波器集合，並且所述一個或多個候選濾波器中的每個候選濾波器的濾波器係數之總和被約束為固定值。在步驟840中，目標CCALF被應用於相關的重構亮度樣本，以生成用於目標重構色度樣本的CCALF濾波色度樣本。在步驟850中，藉由將CCALF濾波色度樣本和常規ALF濾波色度樣本組合在一起，最終濾波色度樣本被生成，其中最終濾波色度樣本被用作視訊解碼輸出或被用於進一步的視訊編碼或解碼處理。
所示的流程圖旨在說明根據本發明的視訊編解碼的示例。本領域之通常技術者可修改每個步驟，重新佈置步驟，拆分步驟或組合步驟以實踐本發明，而不背離本發明的精神。在本公開中，特定的語法和語義已被用來說明用於實現本發明的實施例的示例。本領域之通常技術者可藉由用等同的語法和語義替換語法和語義來實踐本發明，而不脫離本發明的精神。
上述描述被給出以使本领域之通常技术者能夠實踐在特定應用及其要求的上下文中提供的本發明。對所描述的實施例的各種修改對於本领域之通常技术者將是顯而易見的，並且本文中定義的一般原理可以應用於其他實施例。因此，本發明不旨在限於所示出和描述的特定實施例，而是與符合本文公開的原理和新穎性特徵的最寬範圍相一致。在以上詳細描述中，示出了各種具體細節以便提供對本發明的透徹理解。然而，本领域之通常技术者將理解，本發明可被實施。
如上所述的本發明的實施例可以以各種硬體，軟體代碼或兩者的組合來實現。例如，本發明的實施例可以是集成到視訊壓縮晶片中的一個或多個電路或集成到視訊壓縮軟體中以執行本文描述的處理的程式碼。本發明的實施例還可以是在數位訊號處理器（Digital Signal Processor，DSP）上執行以執行本文描述的處理的程式碼。本發明還可涉及由電腦處理器，數位訊號處理器，微處理器或現場可程式設計閘陣列（field programmable gate arragy，簡稱FPGA）執行的許多功能。該些處理器可被配置為藉由執行定義本發明所體現的特定方法的機器可讀軟體代碼或韌體代碼來執行根據本發明的特定任務。軟體代碼或韌體代碼可以不同的程式設計語言和不同的格式或樣式來開發。軟體代碼也可被編譯用於不同的目標平臺。然而，不同的代碼格式，軟體代碼的樣式和語言以及配置代碼以執行根據本發明的任務的其他手段將不脫離本發明的精神和範圍。
在不脫離本發明的精神或基本特徵的情況下，本發明可以以其他特定形式實施。所描述的示例在所有方面僅應被認為是說明性的而非限制性的。因此，本發明的範圍由所附申請專利範圍而不是前述描述來指示。落在申請專利範圍的等同含義和範圍內的所有改變均應包含在其範圍之內。
110:幀内預測 112:ME/MC 114:開關 116:加法器 118:變換 120:量化 122:熵編碼器 124:逆量化 126:逆變換 128:REC 130:DF 131:SAO 132:ALF 134:參考圖像緩衝器 136:預測資料 113:MC 142:熵編碼器 210:SAO亮度 214:SAO Cr 220:ALF亮度 222:CC ALF Cb 224:CC ALF Cr 230:ALF色度 240:加法器 242:加法器 250:CC-ALF 252、254:色度樣本 253、255:菱形濾波器 260:圖例 710、720、730、740、 810、820、830、840、850:步驟
第1A圖示出結合DF、SAO和ALF環内處理的示例性適應性幀間/幀内視訊編碼系統。 第1B圖示出結合了DF、SAO和ALF環內處理的示例性適應性幀間/幀內視訊解碼系統。 第2A圖示出關於根據JVET-O0636的其他環路濾波器的CC-ALF的結構，其中在相應SAO之後ALF處理被執行。 第2B圖示出根據JVET-O0636應用於每個色度分量的亮度通道的菱形濾波器。 第2C圖示出相對於亮度樣本CC-ALF 250的放置示例。 第3圖示出藉由將水平LCU邊界向上移動N行而形成的VB的示例。 第4A-F圖示出在虛擬邊界處的截斷亮度ALF濾波器處理的係數歸一化的示例，其中第4A圖示出頂部位置在虛擬邊界之外的情況下的修改後的ALF係數；第4B圖示出底部位置在虛擬邊界之外的情況。第4C圖示出前兩行在虛擬邊界之外的情況下的修改後的ALF係數。第4D圖示出底部兩行在虛擬邊界之外的情況下的修改後的ALF係數。第4E圖示出前三行在虛擬邊界之外的情況下的修改後的ALF係數。第4F圖示出底部三行在虛擬邊界之外的情況下的修改後的ALF係數。 第5A-D圖示出在虛擬邊界處的截斷色度ALF濾波器處理的示例，其中第5A圖示出頂部位置在虛擬邊界之外的情況下的修改後的ALF係數。第5B圖示出底部位置在虛擬邊界之外的情況。第5C圖示出前兩行在虛擬邊界之外的情況下的修改後的ALF係數。第5D圖示出底部兩行在虛擬邊界之外的情況下的修改後的ALF係數。 第6圖示出具有係數c0至c6的3x4菱形CCALF的示例。 第7圖示出根據本發明實施例的重構視訊的示例性ALF處理的流程圖，其中，一個或多個候選濾波器中的每個候選濾波器的濾波器係數之和被約束為固定值。 第8圖示出根據本發明的實施例的重構視訊的示例性ALF處理的流程圖，其中，用於指示與濾波器集合中的候選濾波器的總數量有關的值的一個或多個語法元素在APS中發送或解析。
710、720、730、740:步驟

Claims (9)

  1. 一種視訊編解碼方法，該方法包括： 接收一顔色圖像中的多個重構色度樣本和多個相關的重構亮度樣本； 確定一目標跨顔色適應性環路濾波器，其中該目標跨顔色適應性環路濾波器屬於包括一個或多個候選濾波器的一濾波器集合，以及該一個或多個候選濾波器中的每個候選濾波器的多個濾波器係數的總和被約束為一固定值； 將該目標跨顔色適應性環路濾波器應用於該多個相關重構亮度樣本以生成一目標重構色度樣本的一跨顔色適應性環路濾波器濾波色度樣本；以及 藉由將該跨顔色適應性環路濾波器濾波色度樣本與一常規適應性環路濾波器相組合，生成一最終濾波色度樣本，其中該最終濾波色度樣本被用作一視訊解碼輸出或被用於進一步的視訊編碼或解碼處理。
  2. 如請求項1所述之視訊編解碼方法，其中，該固定值等於0。
  3. 如請求項1所述之視訊編解碼方法，其中，當每個候選濾波器的多個濾波器係數的數量等於M時，在一解碼器側每個候選濾波器中僅（M-1）個濾波係數被解碼，以及其中M是大於1的一整數。
  4. 如請求項3所述之視訊編解碼方法，其中，一個濾波器係數，而不是（M-1）個濾波器係數，不在解碼器側被解碼或不在編碼器側被編碼，以及其中該一個濾波器係數對應於每個候選濾波器中的該多個濾波器係數中的任一選擇的係數。
  5. 一種視訊編解碼裝置，該裝置包括一個或多個電子電路或處理器被設置為： 接收一顔色圖像中的多個重構色度樣本和多個相關的重構亮度樣本； 確定一目標跨顔色適應性環路濾波器，其中該目標跨顔色適應性環路濾波器屬於包括一個或多個候選濾波器的一濾波器集合，以及該一個或多個候選濾波器中的每個候選濾波器的多個濾波器係數的總和被約束為一固定值； 將該目標跨顔色適應性環路濾波器應用於該多個相關重構亮度樣本以生成一目標重構色度樣本的一跨顔色適應性環路濾波器濾波色度樣本；以及 藉由將該跨顔色適應性環路濾波器濾波色度樣本與一常規適應性環路濾波器組合，生成一最終濾波色度樣本，其中該最終濾波色度樣本被用作一視訊解碼輸出或被用於進一步的視訊編碼或解碼過程。
  6. 一種視訊編解碼方法，該方法包括： 接收一顔色圖像中的多個重構色度樣本和多個相關的重構亮度樣本； 在一編碼器側在一視訊位元流中的一適應性參數集合中發送一個或多個語法元素，或在一解碼器側在該視訊位元流中的該適應性參數集合中解析該一個或多個語法元素，其中該一個或多個語法元素指示一濾波器集合中多個候選濾波器的一總數量相關的一值； 確定一目標跨顔色適應性環路濾波器，其中該目標跨顔色適應性環路濾波器屬於該濾波器集合； 將該目標跨顔色適應性環路濾波器應用於該多個相關的重構亮度樣本以生成一目標重構色度樣本的一跨顔色適應性環路濾波器濾波色度樣本；以及 藉由將該跨顔色適應性環路濾波器濾波色度樣本與一常規適應性環路濾波器濾波色度樣本組合，生成一最終濾波色度樣本，其中該最終濾波色度樣本被用作一視訊解碼輸出或被用於進一步的視訊編碼或解碼處理。
  7. 如請求項6所述之視訊編解碼方法，其中，該一個或多個語法元素被發送或被解析用於每個顔色分量。
  8. 如請求項6所述之視訊編解碼方法，其中，該一個或多個語法元素包括對應於該濾波器集合中的該多個候選濾波器的總數量減1的一值。
  9. 一種視訊編解碼裝置，其中，該裝置包括一個或多個電子電路或處理器被設置為： 接收一顔色圖像中的多個重構色度樣本和多個相關的重構亮度樣本； 在一編碼器側在一視訊位元流中的一適應性參數集合中發送一個或多個語法元素，或在一解碼器側在該視訊位元流中的該適應性參數集合中解析該一個或多個語法元素，其中該一個或多個語法元素指示一濾波器集合中多個候選濾波器的一總數量相關的一值； 確定一目標跨顔色適應性環路濾波器，其中該目標跨顔色適應性環路濾波器屬於該濾波器集合； 將該目標跨顔色適應性環路濾波器應用於該多個相關的重構亮度樣本以生成一目標重構色度樣本的一跨顔色適應性環路濾波器濾波色度樣本；以及 藉由將該跨顔色適應性環路濾波器濾波色度樣本與一常規適應性環路濾波器濾波色度樣本組合，生成一最終濾波色度樣本，其中該最終濾波色度樣本被用作一視訊解碼輸出或被用於進一步的視訊編碼或解碼過程。
TW109131858A 2019-09-16 2020-09-16 視訊編解碼之方法和裝置 TWI751703B (zh)

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
US201962900702P 2019-09-16 2019-09-16
US62/900,702 2019-09-16
US201962940321P 2019-11-26 2019-11-26
US62/940,321 2019-11-26
US201962954024P 2019-12-27 2019-12-27
US62/954,024 2019-12-27
US202062956356P 2020-01-02 2020-01-02
US62/956,356 2020-01-02
US17/021,050 US11202068B2 (en) 2019-09-16 2020-09-15 Method and apparatus of constrained cross-component adaptive loop filtering for video coding
US17/021,050 2020-09-15

Publications (2)

Publication Number Publication Date
TW202114416A true TW202114416A (zh) 2021-04-01
TWI751703B TWI751703B (zh) 2022-01-01

Family

ID=74869977

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109131858A TWI751703B (zh) 2019-09-16 2020-09-16 視訊編解碼之方法和裝置

Country Status (6)

Country Link
US (1) US11202068B2 (zh)
EP (1) EP4026325A4 (zh)
KR (1) KR20220046686A (zh)
CN (2) CN114430903B (zh)
TW (1) TWI751703B (zh)
WO (1) WO2021052361A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3928524A4 (en) 2019-04-15 2022-06-22 Beijing Bytedance Network Technology Co., Ltd. TIME PREDICTION OF PARAMETERS IN A NONLINEAR ADAPTIVE LOOP FILTER
KR20220042125A (ko) 2019-08-10 2022-04-04 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 서브픽처 디코딩에서의 버퍼 관리
JP7322290B2 (ja) 2019-10-02 2023-08-07 北京字節跳動網絡技術有限公司 ビデオビットストリームにおけるサブピクチャシグナリングのための構文
JP7482220B2 (ja) 2019-10-18 2024-05-13 北京字節跳動網絡技術有限公司 サブピクチャのパラメータセットシグナリングにおける構文制約
KR102707834B1 (ko) 2019-10-29 2024-09-19 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 루마 차이를 이용한 크로스 컴포넌트 적응적 루프 필터
CN115176480A (zh) * 2019-12-18 2022-10-11 北京达佳互联信息技术有限公司 用于视频编解码的跨分量自适应环路滤波器
WO2021134706A1 (zh) * 2019-12-31 2021-07-08 北京大学 环路滤波的方法与装置
WO2021195500A1 (en) * 2020-03-26 2021-09-30 Alibaba Group Holding Limited Method and apparatus for cross component filtering
US12075034B2 (en) * 2020-07-24 2024-08-27 Qualcomm Incorporated Multiple adaptive loop filter sets
WO2024146624A1 (en) * 2023-01-06 2024-07-11 Mediatek Inc. Method and apparatus for adaptive loop filter with cross-component taps for video coding

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9094658B2 (en) 2010-05-10 2015-07-28 Mediatek Inc. Method and apparatus of adaptive loop filtering
CN103392338A (zh) * 2011-01-03 2013-11-13 联发科技股份有限公司 基于滤波单元的回路滤波方法
US10129540B2 (en) 2012-04-10 2018-11-13 Texas Instruments Incorporated Reduced complexity coefficient transmission for adaptive loop filtering (ALF) in video coding
US20140301463A1 (en) * 2013-04-05 2014-10-09 Nokia Corporation Method and apparatus for video coding and decoding
US10200700B2 (en) * 2014-06-20 2019-02-05 Qualcomm Incorporated Cross-component prediction in video coding
US20180041778A1 (en) * 2016-08-02 2018-02-08 Qualcomm Incorporated Geometry transformation-based adaptive loop filtering
US10419757B2 (en) * 2016-08-31 2019-09-17 Qualcomm Incorporated Cross-component filter
US10506230B2 (en) * 2017-01-04 2019-12-10 Qualcomm Incorporated Modified adaptive loop filter temporal prediction for temporal scalability support
WO2020235511A1 (en) * 2019-05-17 2020-11-26 Panasonic Intellectual Property Corporation Of America System and method for video coding
CN118214865A (zh) * 2019-09-11 2024-06-18 夏普株式会社 用于基于交叉分量相关性来减小视频编码中的重构误差的系统和方法

Also Published As

Publication number Publication date
WO2021052361A1 (en) 2021-03-25
EP4026325A4 (en) 2023-05-31
KR20220046686A (ko) 2022-04-14
CN116389736A (zh) 2023-07-04
US20210084295A1 (en) 2021-03-18
CN114430903A (zh) 2022-05-03
TWI751703B (zh) 2022-01-01
US11202068B2 (en) 2021-12-14
EP4026325A1 (en) 2022-07-13
CN114430903B (zh) 2023-10-13

Similar Documents

Publication Publication Date Title
TWI751703B (zh) 視訊編解碼之方法和裝置
TWI751623B (zh) 具有虛擬邊界的跨分量自適應環路濾波的視頻編解碼方法及裝置
US20220303587A1 (en) Method and Apparatus for Adaptive Loop Filtering at Picture and Sub-Picture Boundary in Video Coding
TWI737137B (zh) 視訊編碼之非線性適應性迴圈濾波方法和裝置
US11997266B2 (en) Method and apparatus of cross-component adaptive loop filtering for video coding
TW202106015A (zh) 視訊編解碼之方法和裝置
TWI720586B (zh) 轉換係數編碼或解碼的方法與裝置
TW202135528A (zh) 用於編解碼視訊序列的方法和裝置
TWI730561B (zh) 利用圖塊分組進行視訊資料編碼的方法及裝置
TWI761166B (zh) 圖像和視訊編解碼中發信切片分割資訊之方法和裝置
RU2783342C1 (ru) Способ и устройство для нелинейной адаптивной контурной фильтрации при кодировании видео
US11343539B2 (en) Method and apparatus of last significant coefficient coding in image and video coding
TW202406342A (zh) 使用交叉分量預測對彩色圖片進行視訊編解碼的方法和裝置
TW202406341A (zh) 使用交叉分量預測對彩色圖片進行視訊編解碼的方法和裝置