TW202106008A - 使用位置相關框內預測組合以編碼及解碼圖像之方法及裝置 - Google Patents

使用位置相關框內預測組合以編碼及解碼圖像之方法及裝置 Download PDF

Info

Publication number
TW202106008A
TW202106008A TW109120687A TW109120687A TW202106008A TW 202106008 A TW202106008 A TW 202106008A TW 109120687 A TW109120687 A TW 109120687A TW 109120687 A TW109120687 A TW 109120687A TW 202106008 A TW202106008 A TW 202106008A
Authority
TW
Taiwan
Prior art keywords
sample
value
angle
mode
block
Prior art date
Application number
TW109120687A
Other languages
English (en)
Inventor
法比恩 雷卡普
卡根 拉斯
法布列斯 俄本
Original Assignee
法商法國內數位Vc控股簡易股份公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 法商法國內數位Vc控股簡易股份公司 filed Critical 法商法國內數位Vc控股簡易股份公司
Publication of TW202106008A publication Critical patent/TW202106008A/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明係為一種視訊編碼系統,包括使用位置相關框內預測組合之後處理階段,其中基於左參考樣本或頂參考樣本之值與所得樣本預測值間之加權以修改一預測樣本,其中基於框內預測角以確定左參考樣本或頂參考樣本。本視訊編碼系統在保持相同壓縮效能之同時亦提供較佳計算效率。揭示基於本後處理階段之編碼方法、解碼方法、編碼裝置,及解碼裝置。

Description

使用位置相關框內預測組合以編碼及解碼圖像之方法及裝置
本發明的至少一實施例一般相關視訊編碼系統,尤其相關用於位置相關框內預測組合的後處理階段。
為要達到高壓縮效率,影像及視訊編碼方案通常採用預測及轉換以利用視訊內容中的時空冗餘。通常,使用框內或框間預測以利用框內或框間相關性,然後將原始影像塊與預測影像塊之間的差異(常表示為預測誤差或預測殘餘)進行轉換、量化及熵編碼。在編碼期間,通常可能使用例如四元樹劃分將原始影像塊劃分/分割成子區塊。為要重建視訊,藉由對應到預測、轉換、量化及熵編碼的逆過程以解碼壓縮資料。
本發明涉及一種視訊編碼系統,包括用於位置相關框內預測組合的後處理階段,其中基於左參考樣本或頂參考樣本的值與所得樣本預測值之間的加權以修改預測樣本,其中基於框內預測角以確定左參考樣本或頂參考樣本。本視訊編碼系統在保持相同壓縮效能的同時亦提供較佳計算效率。提出基於本後處理階段的編碼方法、解碼方法、編碼裝置,及解碼裝置。
根據至少一實施例的第一方面,揭示一種用以確定影像塊樣本值的方法,該值係根據代表框內預測角的值進行框內預測,該方法包括得到預測值以用於該樣本,及當框內預測角匹配一標準時,基於左參考樣本或頂參考樣本的值與所得樣本預測值之間的加權以確定該樣本的值,其中基於框內預測角以確定左參考樣本或頂參考樣本。
根據至少一實施例的第二方面,揭示一種視訊編碼方法,包括:用於視訊區塊的每個樣本,執行框內預測以用於該樣本,根據第一 方面以修改該樣本的值,及編碼該區塊。
根據至少一實施例的第三方面,揭示一種視訊解碼方法,包括:用於視訊區塊的每個樣本,執行框內預測以用於該樣本,及根據第一方面以修改該樣本的值。
根據至少一實施例的第四方面,揭示一種視訊編碼裝置,包括編碼器,係配置用以:用於視訊區塊的每個樣本,執行框內預測以用於該樣本,根據第一方面以修改該樣本的值,及編碼該區塊。
根據至少一實施例的第五方面,揭示一種視訊解碼裝置,包括解碼器,係配置用以:用於視訊區塊的每個樣本,執行框內預測以用於該樣本,及根據第一方面以修改該樣本的值。
而且本發明的一或多個實施例提供一種非暫態電腦可讀取儲存媒體,其上已儲存指令用以根據上述任何方法的至少一部分以編碼或解碼視訊資料。而且本發明的一或多個實施例提供一種電腦程式產品,包括指令用以執行上述任何方法的至少一部分。
100:視訊編碼器
101:編碼預處理
102,235:影像劃分
105:決定
110:減法
125:轉換
130:量化
140,240:逆量化
145:熵編碼
150,250:逆轉換
155,255:合併
160,260:框內預測
165,265:環內濾波器
170:移動補償
175,275:移動估算
180,280:參考圖像緩衝器
200:視訊解碼器
230:熵解碼
270:得到預測區塊
285:解碼後處理
710,730,910,1001:測試步驟
720,744,754,920,954,1002,1006:終止框內預測的步驟
741:計算加權值wTwL的步驟
742:得到P top P left 的步驟
743,753:應用PDPC後處理的步驟
751,951,1003:計算wL的步驟
752,952,1004:得到P left 的步驟
953,1005:計算後處理值的步驟
1000:系統
1010:處理器
1020:記憶體
1030:編碼器/解碼器
1040:儲存設備
1050:通訊介面
1060:通訊通道
1070:顯示介面
1080:聲頻介面
1090:周邊介面
1100:顯示器
1110:揚聲器
1120:周邊設備
1130:輸入設備
1140:連接安排
1301:檢查預測角資訊的步驟
1302:步驟分支(不執行PDPC後處理及不修改預測樣本)
1303:計算加權的步驟
1305:得到參考樣本的步驟
1307:確定樣本值的步驟
以下將參考附圖並藉由實施例以描述本發明,俾能更進一步了解本發明的技術特徵,圖中:
圖1A係根據一實施例以方塊圖描繪視訊編碼器;
圖1B係根據一實施例以方塊圖描繪視訊解碼器;
圖2係以方塊圖描繪一系統範例,在該系統中實現本發明的各種方面及實施例;
圖3A及3B描繪與角度框內預測相關的表示法;
圖4描繪用於左下模式(模式66)的位置相關框內預測組合;
圖5A及5B描繪分別與模式66及模式2相鄰的角度模式;
圖6係以範例描繪用於PDPC的角度模式,用於該角度模式,在方向的投射與參考像素之間存在不匹配;
圖7係根據VTM 5.0的示範實施方式以示範流程圖描繪用於對角線(模式2及66)及相鄰對角線模式的PDPC過程;
圖8係以範例描繪用於垂直對角線模式66的PDPC,用於該模式,用於左參考樣本的目標像素不可用;
圖9係根據修改的PDPC過程的第一實施例以描繪一示範流程圖;
圖10係根據修改的PDPC過程的第二實施例以描繪一示範流程圖;
圖11描繪第一實施例的實施結果;
圖12描繪第二實施例的實施結果;及
圖13係根據本發明中所描述的各種實施例以描繪一示範流程圖。
各種實施例涉及用於影像塊樣本預測值的後處理方法,該值係根據框內預測角進行預測,其中在預測後修改該樣本的值,以便基於左參考樣本的值與所得樣本預測值之間的差的加權以確定該樣本的值,其中基於框內預測角以確定左參考樣本。提出基於該後處理方法的編碼方法、解碼方法、編碼裝置及解碼裝置。
此外,雖然說明相關VVC(多功能視訊編碼)的特定草案或相關HEVC(高效視訊編碼)規範的原理,但本發明的方面不限於VVC或HEVC,並且例如可應用到其他標準及建議(無論是先前存在的或未來開發的),以及任何這類標準及建議(包括VVC及HEVC)的延伸。除非另有說明,或在技術上排除,否則可個別或組合地使用本發明申請中說明的方面。
圖1A描繪一視訊編碼器100。雖然涵蓋此編碼器100的變化,但為求清晰,以下描述的編碼器100並未描述所有期望的變化。在編碼之前,可使視訊序列經過編碼預處理(101),例如將色彩轉換應用到輸入彩色圖像(例如從RGB 4:4:4到YCbCr 4:2:0的轉換)或執行輸入圖像分量的重映射,為要得到對壓縮更有彈性的信號分佈(例如使用色彩分量中的一者的直方圖均衡化)。可將元資料與預處理相關聯並附加到位元流。
在編碼器100中,如以下所述,由編碼器元件對圖像進行編碼。例如將待編碼圖像以CU為單位進行劃分(102)及處理。例如使用框內或框間模式以編碼各單位。當在框內模式中編碼一單位時,執行框內預測(160)。在框間模式中,執行移動估算(175)及補償(170)。編碼器決定(105)要使用框內模式或框間模式中的何者以編碼該單位,並例如藉由預測模式旗標以指示框內/框間決策。例如藉由從原始影像塊中減去(110)預測區塊以計算預測殘餘。
然後將預測殘餘進行轉換(125)及量化(130)。將量化的轉換係數以及移動向量及其他語法元素進行熵編碼(145)以輸出位元流。編碼器可跳過轉換並直接應用量化到非轉換的殘餘信號。編碼器可繞過轉換及量化兩者,意即直接將殘餘編碼而無需應用轉換或量化過程。
編碼器將編碼後的區塊解碼以提供參考用於進一步的預測。將量化的轉換係數去量化(140)及逆轉換(150)以解碼預測殘餘。組合(155)解碼的預測殘餘與預測區塊,重建一影像塊。將環內濾波器(165)應用到重建的圖像,例如用以執行去區塊/SAO(樣本適應性偏位)、適應性環路濾波器(ALF)濾波以減少編碼假影。濾波後的影像係儲存在參考圖像緩衝器(180)。
圖1B係以方塊圖描繪視訊解碼器200。在解碼器200中,如以下所述,由解碼器元件對位元流進行解碼。視訊解碼器200通常執行與圖1A所示編碼遍歷互逆的解碼遍歷。而且編碼器100通常執行視訊解碼作為編碼視訊資料的一部分。尤其解碼器的輸入包括可由視訊編碼器100產生的視訊位元流。首先將位元流進行熵解碼(230)以得到轉換係數、移動向量,及其他編碼的資訊。圖像劃分資訊指示如何劃分圖像,因此解碼器可根據解碼的圖像劃分資訊以分割(235)圖像。將轉換係數去量化(240)及逆轉換(250)以解碼預測殘餘。組合(255)解碼的預測殘餘及預測區塊,重建一影像塊。可從框內預測(260)或移動補償預測(即框間預測)(275)中得到(270)預測區塊。將環內濾波器(265)應用到重建的影像。將濾波後的影像儲存在參考圖像緩衝器(280)。
解碼後的圖像可進一步經過解碼後處理(285),例如逆色彩轉換(例如從YCbCr 4:2:0到RGB 4:4:4的轉換),或反向重映射,執行在編碼預處理(101)中執行的重映射過程的逆。解碼後處理可使用編碼預處理中所導出及在位元流中用信號所發送的元資料。
圖2係以方塊圖描繪一系統的範例,在該系統中實現本發明的各種方面及實施例。系統1000可具體化為包括有以下所述各種組件並且係配置用以執行在本發明所述一或多個方面的設備。這類設備的範例包括(但不限於)各種電子設備如個人電腦、膝上型電腦、智慧型手機、平板電腦、數位多媒體機上盒、數位電視接收器、個人視訊記錄系統、連接 的家用電器,及伺服器。系統1000的元件,單獨地或以組合方式,可具體化在單個積體電路(IC)、多個IC,及/或分離組件中。例如,在至少一實施例中,系統1000的處理元件及編碼器/解碼器元件係分佈於多個IC及/或分離組件上。在各種實施例中,系統1000例如係經由通訊匯流排或透過專用輸入及/或輸出埠以通訊方式耦合到一或多個其他系統或其他電子設備。在各種實施例中,系統1000係配置用以實現在本發明中說明的一或多個方面。
系統1000包括至少一處理器1010,係配置用以執行其中載入的指令,例如用以實現在本發明中說明的各種方面。處理器1010可包括嵌入式記憶體、輸入輸出介面,及本領域已知的其他各種電路設計。系統1000包括至少一記憶體1020(例如依電性記憶體設備,及/或不變性記憶體設備)。系統1000包括一儲存設備1040,其可包括不變性記憶體及/或依電性記憶體,包括(但不限於)電子可抹除可程式化唯讀記憶體(EEPROM)、唯讀記憶體(ROM)、可程式化唯讀記憶體(PROM)、隨機存取記憶體(RAM)、動態隨機存取記憶體(DRAM)、靜態隨機存取記憶體(SRAM)、快閃記憶體、磁碟驅動器,及/或光碟驅動器。作為非限定範例,儲存設備1040可包括內部儲存設備、附接的儲存設備(包括可卸式及不可卸式儲存設備),及/或網路可存取儲存設備。
系統1000包括一編碼器/解碼器模組1030,例如係配置用以處理資料以提供編碼視訊或解碼視訊,並且編碼器/解碼器模組1030可包括其本身的處理器及記憶體。編碼器/解碼器模組1030表示可包括在設備中用以執行編碼及/或解碼功能的(數個)模組。眾所周知,一設備可包括編碼及解碼模組中的一者或兩者。另外,如熟諳此藝者已知,編碼器/解碼器模組1030係可實現為系統1000的分開元件,或可併入處理器1010內作為硬體及軟體的組合。
可將待載入到處理器1010或編碼器/解碼器1030上用以執行在本發明所述各種方面的程式碼儲存在儲存設備1040中,並且後續載入到記憶體1020上由處理器1010執行。根據各種實施例,處理器1010、記憶體1020、儲存設備1040及編碼器/解碼器模組1030中的一或多者可在本發明所述過程的效能期間儲存各種項目中的一或多者。這類儲存的項 目可包括(但不限於)輸入視訊、解碼的視訊或部分解碼視訊、位元流、矩陣、變數,以及從方程式、公式、運算及運算邏輯的處理來的中間或最後結果。
在一些實施例中,使用處理器1010及/或編碼器/解碼器模組1030內部的記憶體以儲存指令及提供工作記憶體以用於編碼或解碼期間所需的處理。然而,在其他實施例中,使用處理設備(例如,處理設備可為處理器1010或編碼器/解碼器模組1030)外部的記憶體以用於這些功能中的一或多者。外部記憶體可為記憶體1020及/或儲存設備1040,例如,動態依電性記憶體及/或不變性快閃記憶體。在數個實施例中,使用外部不變性快閃記憶體以儲存例如電視的作業系統。在至少一實施例中,快速外部動態依電性記憶體如RAM係作為工作記憶體使用以用於視訊編碼及解碼操作,如用於MPEG-2(MPEG係指動態影像專家群,MPEG-2亦稱為ISO/IEC 13818,及13818-1亦稱為H.222,及13818-2亦稱為H.262)、HEVC(HEVC係指高效視訊編碼,亦稱為H.265及MPEG-H第2部分),或VVC(多功能視訊編碼,正由聯合視訊專家小組JVET開發的新標準)。
可透過如方塊1130所示各種輸入設備以提供輸入到系統1000的元件。這類輸入設備包括(但不限於)(i)一射頻(RF)部分,其接收例如廣播公司透過空中傳送的RF信號,(ii)色差(COMP)輸入端子(或一組COMP輸入端子),(iii)通用串列匯流排(USB)輸入端子,及/或(iv)高畫質多媒體介面(HDMI)輸入端子。其他範例(未顯示在圖2中)包括合成視訊。
在各種實施例中,方塊1130的輸入設備具有此技藝已知的相關聯各別輸入處理元件。例如,RF部分可與適用於以下功能的元件相關聯:(i)選擇一期望頻率(亦稱為選擇一信號,或將一信號限制頻寬到一頻帶),(ii)將選取的信號降頻轉換,(iii)再次限制頻寬到較窄頻帶以選擇(例如)一信號頻帶,其在某些實施例可稱為通道,(iv)將降頻轉換及限制頻寬後的信號解調,(v)執行糾錯,及(vi)解多工以選擇期望的資料封包流。各種實施例的RF部分包括用以執行這些功能的一或多個元件,例如,選頻器、信號選擇器、頻寬限制器、頻道選擇器、濾波器、降頻轉換器、解調器、糾錯器,及多工解訊器。RF部分可包括調諧器,以便執行各種這些功能,例如包括將接收到的信號降頻轉換到較低頻率(例如,中頻或近 基頻)或降到基頻。在一機上盒實施例中,RF部分及其相關的輸入處理元件接收透過有線(例如纜線)媒體傳輸的RF信號,並藉由濾波、降頻轉換,及再次濾波到一期望頻帶以執行頻率選擇。各種實施例重新安排上述(及其他)元件的順序、移除一些這類元件,及/或添加其他執行類似或不同功能的元件。添加元件可包括在現有元件之間插入元件,例如,插入放大器及類比至數位轉換器。在各種實施例中,RF部分包括天線。
另外,USB及/或HDMI端子可包括各別介面處理器,用以在USB及/或HDMI連接上將系統1000連接到其他電子設備。應瞭解,輸入處理的各種方面,例如里德-所羅門糾錯,可視需要例如實現在分開的輸入處理IC內或在處理器1010內。同樣地,USB或HDMI介面處理的方面可視需要例如實現在分開的介面IC內或在處理器1010內。將解調、糾錯及解多工後的資料流提供到各種處理元件,例如包括處理器1010,及編碼器/解碼器1030,與記憶體及儲存元件結合操作,以視需要處理資料流用於輸出設備上的呈現。
可將系統1000的各種元件設置在一整合殼體內,在整合殼體內,可使用合適的連接安排1140,例如此項技藝已知的內部匯流排,包括IC間(I2C)匯流排、佈線及印刷電路板,將各種元件互連並在其間傳輸資料。
系統1000包括通訊介面1050,其允許經由通訊通道1060與其他設備進行通訊。通訊介面1050可包括(但不限於)收發器,係配置用以在通訊通道1060上傳輸及接收資料。通訊介面1050可包括(但不限於)數據機或網路卡,並且通訊通道1060例如可實現在有線及/或無線媒體內。
在各種實施例中,使用無線網路如Wi-Fi網路,例如IEEE 802.11(IEEE係指電氣及電子工程師協會),將資料串流或以其他方式提供到系統1000。這些實施例的Wi-Fi信號係在適用於Wi-Fi通訊的通訊通道1060及通訊介面1050上接收。這些實施例的通訊通道1060通常係連接到存取點或路由器,以便提供存取到外部網路(包括網際網路),用以允許串流應用及其他在空中的通訊。其他實施例使用機上盒以提供串流資料到系統1000,以便在輸入方塊1130的HDMI連接上傳遞資料。更多其他實施例使用輸入方塊1130的RF連接以提供串流資料到系統1000。如上所 述,各種實施例以非串流方式提供資料。另外,各種實施例使用Wi-Fi以外的無線網路,例如蜂巢式網路或藍牙網路。
系統1000可提供輸出信號到各種輸出設備,包括顯示器1100、揚聲器1110,及其他周邊設備1120。各種實施例的顯示器1100例如包括下列中的一或多者:觸控螢幕顯示器、有機發光二極體(OLED)顯示器、曲面顯示器,及/或折疊式顯示器。顯示器1100係可用於電視、平板電腦、膝上型電腦、手機(行動電話),或其他設備。而且顯示器1100可與其他組件整合在一起(例如在智慧型手機中),或分離(例如用於膝上型電腦的外部監視器)。在實施例的各種範例中,其他周邊設備1120包括下列中的一或多者:獨立式數位視訊光碟(或多樣化數位光碟)(DVR,用於兩用詞)、光碟播放器、立體聲系統,及/或照明系統。各種實施例使用一或多個周邊設備1120,以便基於系統1000的輸出以提供功能。例如,光碟播放器執行播放系統1000的輸出的功能。
在各種實施例中,使用傳訊如AV.Link、消費性電子產品控制(CEC)或其他通訊協定,在系統1000與顯示器1100、揚聲器1110或其他周邊設備1120之間通訊控制信號,以便利用或不用用戶干預以允許設備對設備的控制。輸出設備可透過各別介面1070、1080及1090經由專用連接以通訊方式耦合至系統1000。或者,輸出設備可使用通訊通道1060經由通訊介面1050以連接到系統1000。在一電子設備例如電視中,顯示器1100及揚聲器1110可與系統1000的其他組件整合成單個單元。在各種實施例中,顯示介面1070包括顯示驅動器,例如時序控制器(T Con)晶片。
例如,若輸入1130的RF部分係分開的機上盒的一部分,則顯示器1100及揚聲器1110或者可與其他組件中的一或多者分開。在顯示器1100及揚聲器1110係外部組件的各種實施例中,可經由專用輸出連接,例如包括HDMI埠、USB埠,或COMP輸出,以提供輸出信號。
可藉由處理器1010實現的電腦軟體,或藉由硬體,或藉由硬體及軟體的組合,以實現該等實施例。作為非限定範例,可由一或多個積體電路以實現該等實施例。記憶體1020可屬於適合技術環境的任何類型,並且可使用任何適當的資料儲存技術來實現,作為非限定範例,如 光學記憶體設備、磁性記憶體設備、基於半導體的記憶體設備、固定式記憶體,及可卸除式記憶體。處理器1010可屬於適合技術環境的任何類型,並且作為非限定範例,可涵蓋下列中的一或多者:微處理器、通用電腦、特殊用途電腦,及基於多核心架構的處理器。
在多功能視訊編碼(VVC)中,框內預測係應用在全框內訊框中以及在框間訊框的框內區塊中,其中從同一訊框中的因果相鄰區塊(即在頂部及右上方的區塊、在左方及左下方的區塊,及左上方的區塊)中空間預測出一目標區塊(稱為編碼單元(CU))。基於這些區塊中的解碼像素值,編碼器建構不同預測以用於該目標區塊,並選擇導致率失真(RD)效能最佳的一個預測。測試該等預測用於67個預測模式,其包括一個PLANAR模式(索引為模式0)、一個DC模式(索引為模式1),及65個角度模式。用於矩形區塊,角度模式可僅包括從模式2到模式66的常規角預測模式,或亦包括廣角模式,係定義超出常規角從45度到-135度的範圍。
取決於預測模式,預測的樣本可進一步經歷後處理階段如位置相關框內預測組合(PDPC)。PDPC的目標為使區塊邊界的不連續性平滑以用於某些預測模式,以改善目標區塊的預測。DC及PLANAR預測模式,以及數個角度預測模式如嚴格垂直(模式50)、嚴格水平(模式18)、對角線模式2及VDIA_IDX(模式66),及其他所有正角模式(包括廣角模式)會導致在目標區塊的一側的預測值,其與相鄰參考陣列上的參考樣本有很大不同。不用任何類型的後置濾波,後續的殘餘信號將導致成塊假影,尤其在較高的QP值(準峰值)。PDPC的目標為藉由以從容方式使目標區塊邊界處的預測成為平滑以防止這些成塊假影,使目標區塊邊界處的強度變化相當平緩。然而,PDPC達成此目標非常複雜。預測樣本係與頂參考陣列及左參考陣列來的參考樣本組合為加權平均值,其涉及乘法及截割。
用於要進行框內預測的一給定目標區塊,編碼器(或解碼器)首先建構兩個參考陣列(一個在頂部及另一個在左側)。參考樣本係取自頂部、右上方、左方、左下方及左上方的解碼區塊中的解碼樣本。若因對應的CU不在同一圖像切片中,或目前CU係在區塊邊界等,使頂部或左側的一些樣本不可用,則執行稱為參考樣本替代的方法,其中按順時針方 向從可用樣本中複製出丟失的樣本。然後,取決於目前CU大小及預測模式,使用指定的濾波器對參考樣本進行濾波。
為了普遍性的緣故,將假設一矩形目標區塊,寬度為W個像素及高度為H個像素。在頂部及左側的參考陣列將分別表示為refMainrefSide。陣列refMain具有2*W+1個像素,其編上索引為refMain[0]至refMain[2W],其中refMain[0]對應到左上參考像素。同樣地,陣列refSide具有2*H+1個像素,其編上索引為refSide[0]refSide[2H],其中refSide[0]再次對應到左上參考像素。用於每邊具有N個像素的方形區塊的特殊情況,兩個參考陣列將具有2N+1個像素。可藉由交換頂參考陣列及左參考陣列(亦即目標區塊的高度及寬度)以實現水平預測模式(即索引小於對角線模式DIA_IDX的模式,或模式34)。這可能係由於嚴格垂直(水平)方向附近的垂直(水平)模式的對稱性。在本發明的整個文件中,將假設用於水平預測模式,refMainrefSide表示已交換後的頂參考陣列及左參考陣列。此外,由於只將PDPC應用到一些正垂直及正水平方向(除PLANAR及DC模式的非角度情況以及嚴格垂直及嚴格水平模式之外),在本發明中的討論將只限於正預測方向。
用於任何目標像素,在refMain上的參考樣本將稱為其預測子。用於給定的角度預測模式,refMain上的預測子樣本係沿著目標PU內部的對應方向進行複製。有些預測子樣本可具有整數位置,在該情況下,這些預測子與對應的參考樣本匹配。其他預測子的位置將具有分數部分,指示這些預測子的位置將落在兩個參考樣本之間。在後者情況下,使用4支線立方濾波器或4支線高斯濾波器對預測子樣本進行插插以用於LUMA(亮度)分量,及進行線性插值以用於CHROMA(色度)分量。
模式2對應到從左下朝向右上成45度角的預測方向,而模式66(亦稱為模式VDIA_IDX)對應到相反的方向。用於這兩種模式,目前區塊中的所有目標像素具有其預測子皆位於refMain上的整數位置,意即由於45度角,每個預測樣本總與唯一參考樣本一致。用於每個目標像素,PDPC沿著預測方向找到兩個參考像素(每個參考陣列上各一個),然後將其值與預測值合併。
圖3A及3B描繪與角度框內預測相關的表示法。圖3A顯示模式編號,而圖3B顯示對應的intraPredAngle值。
圖4描繪用於左下模式(模式66)的位置相關框內預測組合。頂參考樣本與左參考樣本位在對角線相反的方向。不用PDPC處理左參考樣本不可用的目標像素。圖中顯示用於模式66的兩個參考像素。假設頂參考陣列與左參考陣列連同目標區塊的高度與寬度係已交換,則可得到相同圖形用於模式2。
首先用於模式66,令假設目標像素P具有坐標(x,y),其中0
Figure 109120687-A0202-12-0011-22
x<W0
Figure 109120687-A0202-12-0011-23
y<H。藉由延伸預測方向,PDPC在refMainrefSide上找到參考像素。令P top P left 表示對應到目標像素P的頂參考像素及左參考像素的值。然後:
P top =refMain[c+1];
P left =refSide[c+1];
其中c=1+x+y。若P pred (x,y)表示預測值,則得到在像素P的最終預測值如下:
P(x,y)=Clip(((64-wT-wL)*P pred (x,y)+wTP top +wLP left +32)≫6),(1)
其中計算權重wTwL如下:
wT=16≫min(31,((y≪1)≫scale));
wL=16≫min(31,((x≪1)≫scale));
預先計算標度為
scale=((log2(W)-2+log2(H)-2+2)≫2)
用於目標像素,若在refSide上的第二參考樣本位於其長度之外,則認為該像素不可用。在這種情況下,目標像素不經歷上述修改,並且像素的第一預測值維持不變。圖4顯示在目標區塊右下方的灰色像素,其未經歷PDPC。
用於模式2,一旦頂參考陣列與左參考陣列連同目標區塊的高度與寬度係已交換,PDPC的過程就完全與用於模式66相同。
圖5A描繪與模式66相鄰的角度模式,及圖5B描繪與模式2相鄰的角度模式。實際上,與模式2及66相鄰的角度模式亦可從PDPC中受益。尤其考慮與模式2及66中的每一者相鄰的8個常規模式用於PDPC。此外,亦考慮所有廣角模式用於PDPC。因此,如圖4所繪示,用於具有W=2*H的示範性扁平矩形區塊,模式58至65以及廣角模式67至72經歷PDPC。同樣地,用於圖5所示具有H=2*W的示範性高矩形區塊,模式3至10以及廣角模式-1至-6經歷PDPC。用於目標區塊,適用的廣角模式的數量係其縱橫比(即寬高比)的函數。在一些實施方式中,不管目標區塊的形狀如何,皆可考慮其所有有效的廣角模式用於PDPC。這就是圖4及5所繪示的情況,其中由於所需參考像素係可用的,因此極端角度模式72及-6分別為有效。用於W=2HH=2W的矩形區塊,廣角模式的數量為6。
圖6描繪角度模式用於PDPC的範例,用於PDPC,在方向投射與參考像素之間存在不匹配。實際上,在模式68的這個範例中,左參考像素與整數樣本位置並不一致,因此必須選擇最接近的參考像素,更確切地,選擇最鄰近交點者作為左參考像素。
在VVC中,參考像素的索引係計算如下:
令△x表示第一參考樣本從目標像素位置的水平位移:
Figure 109120687-A0202-12-0012-21
,其中A是角參數intraPredAngle,取決於預測模式索引,其係由VVC規定如以下表一中所顯示。正預測方向具有正A值,負預測方向具有負A值。△x可具有分數部分。
表一顯示用於垂直方向,在VVC中示範性模式索引到角參數A的映射。可藉由交換垂直與水平索引以推演用於水平方向的映射。
Figure 109120687-A0202-12-0012-1
為推導左參考像素,應用類似的過程。令invAngle表示與考慮用於PDPC的預測模式對應的反角參數。invAngle值係取決於模式參數,並可從intraPredAngle中推演出。表二顯示用於垂直方向,在VVC中示範模式索引到反角參數的示範映射。可藉由交換垂直與水平索引以推演用於水平方向的映射。
Figure 109120687-A0202-12-0013-2
P left 表示左參考像素對應到在坐標(x,y)的目標像素P的值。得到P left 如下:
deltaPos=((1+x)invAngle+2)>>2;
deltaInt=deltaPos>>6;
deltaFrac=deltaPos & 63;
deltay=1+y+deltaInt
P left =refSide[deltay+(deltaFrac>>5)]
在以上說明中,deltaPosP表示在解析度為(1/64)時P left 與參考像素refSide[1+y]的距離。deltaInt係解析度為1時deltaPos的整數部分,及deltaFrac表示解析度為(1/64)時的其餘分數部分(等效地,deltaPos=(deltaInt<<6)+deltaFrac)。當deltaFrac小於32時,P left 為較小整數相鄰者refSide[deltay];並且當deltaFrac大於或等於32時,P left 為較大整數相鄰者refSide[deltay+1]。
P pre (x,y)表示初始預測值,則得到在像素P的最終預測值如下:
P(x,y)=Clip(((64-wL)*P pred (x,y)+wLP left +32)≫6) (2)
其中權重wL係計算為:wL=32>>min(31,((x<<1)>>scale))並且scale(標度)係預先計算為:scale=((log2(W)-2+log2(H)-2+2)>>2).
用於目標像素,若在refSide上的左參考樣本位置超出左參考陣列的長度,則認為該像素不可用。在這種情況下,目標像素不經歷上述修改,並且像素的第一預測值維持不變。換言之,在這種情況不應用任何PDPC後處理。
用於模式2周圍的水平預測模式經歷PDPC的情形,一旦已將頂參考陣列與左參考陣列連同目標區塊的高度與寬度一起交換,該過程就類似。
在此,應注意,wLx的非負遞減函數。若wL=0用於x=x n ,則wL=0用於x>x n 。從方程式(2)觀察到,若wL=0,則左參考像素對加權和沒有影響。在這種情況下,不需要PDPC操作用於考慮的目標像素。由於wL的上述特性,因此亦無需應用PDPC用於該區塊的同一列上的其餘目標像素。因此,只要wL成為0,目前的PDPC工具即終止PDPC操作。
圖7係根據VTM 5.0的示範實施方式以示範流程圖描繪用於對角線(模式2及66)及相鄰對角線模式的PDPC處理。該流程圖不包括用於PLANAR、DC、嚴格垂直及嚴格水平框內預測模式的PDPC。由於VTM 5.0在模式為水平時(即,當模式索引<34,但不等於0或1時)交換參考陣列refMainrefSide,因此當模式索引等於2或其任何相鄰模式時,refMain表示目前CU的左參考陣列,及refSide表示頂參考陣列。因此,在這些情況下,參數wLwTP left P top 等實際上分別對應到參數wTwLP top P left 等。該過程包括多個測試(步驟710、730),以及在每個計算中所需的多個乘法(步驟743及753)。在此過程中,首先,當intraPredAngle不大於或等於12時,在步驟710的分支“否”中,終止框內預測並且不應用PDPC後處理。當intraPredAngle等於32時,在步驟730的分支“是”中,接著在步驟741中計算wTwL,在步驟742中得到P top P left ,然後在步驟743中應用PDPC後處理。在步驟744中,該過程迭代用於下一個像素直到處理完所有列。當intraPredAngle不等於32時,在步驟730的分支“否”中,則在步驟751中計算wL,在步驟752中得到P left ,然後在 步驟753應用PDPC後處理。在步驟754中,該過程迭代用於下一個像素直到處理完所有列。
在以下描述的實施例已考慮前述內容。
圖1A的編碼器100、圖1B的解碼器200,及圖2的系統1000適於實現以下所描述實施例中的至少一者。
在至少一實施例中,視訊編碼或解碼包括後處理階段用於位置相關框內預測組合,其中簡化計算用以在保持相同壓縮效能的同時亦提供較佳計算效率。
第一化簡
請參閱圖3,用於任何目標像素的預測值等於用於該像素的頂參考像素。意即,P pred 等於P top 。替代方程式(1)中P top 的值,得到:
P(x,y)=Clip(((64-wT-wL)*P pred (x,y)+wTP pred (x,y)+wLP left +32)≫6)
一旦取消wT*P pred (x,y)上述表達式即簡化為
P(x,y)=Clip(((64-wL)*P pred (x,y)+wLP left +32)≫6) (3)
其中wL=16>>min(31,((x<<1)>>scale));
除權重wL的值以外,此表達式與方程式(2)相同。如所見,不需計算wT,亦不需計算P top 項,結果為wT*P top 項。由於這種化簡,可能將用於模式2及模式66的PDPC的情況與用於其他角度模式的PDPC的情況合併。在這種情況下:
wL=wLmax>>min(31,((x<<1)>>scale));
predMode=2或predMode=66,則wLmax=16;
否則,=32。
由於若且唯若角參數intraPredAngle等於32,PredMode等於2或66,因此用於wL的上述表達式係可改寫為:
wL=wLmax>>min(31,((x<<1)>>scale));
intraPredAngle=32,則wLmax=16;
否則=32。
而且應注意,即使合併兩種情況,左參考樣本用於模式2 或66的位置亦不會改變。由於
Figure 109120687-A0202-12-0016-3
),因此 invAngle用於模式2及66的值可等於256。使用此值,得到
deltaPos=((1+x)*256+2)>>2=(1+x)*64;
deltaInt=deltaPos>>6=(1+x);
deltaFrac=deltaPos & 63=0;
deltay=1+y+deltaInt=1+y+1+x
P left =refSide[1+y+1+x]=refSide[c+1]其中c=1+x+y
如所見,此與先前在模式2及66的情況下計算的係相同值。因此,上述合併將導致與傳統實施方式相同的結果,但基於方程式需要較少要執行的運算,因此關於計算需求較有效率。
事實上,deltaFrac項實在沒有任何作用。在初始PDPC建議中,由於左參考樣本的位置係基於deltaFrac的值進行線性插值,因此將deltaFrac包括在內。在另一建議中,由最近相鄰者取代線性插值。然而,如在下一個實施例中所顯示,用於此建議,deltaFrac項的計算非常多餘。
第二化簡
如上計算的deltay項導致較小值的相鄰整數對(左參考樣本可佔據在其間)。分別取決於是否deltaFrac<32或是否deltaFrac>=32,deltaFrac的值決定左參考像素到refSide[deltay]或refSide[deltay+1]的映射。此過程在左參考像素的可用性檢查上具有影響。如稍早所提及,PDPC不應用到左參考像素位置超出左參考陣列長度的那些目標像素。在這種情況下,認為左參考像素不可用,並且不修改初始預測值。
圖8描繪用於垂直對角線模式66的PDPC的範例,用於該模式,用於左參考樣本的目標像素不可用。
回想左參考陣列refSide的長度為2H+1,具有在索引0的第一樣本(refSide[0]),及在索引2H的最後一個樣本(refSide[2H]),利用 PDPC,檢查deltay是否deltay>(2*H-1),用以決定左樣本是否不可用。此公式允許對左像素進行插值(若deltaFrac為非空值)。為進行插值,需要該配對refSide[deltay]與refSide[deltay+1]。在此,由於使用最近相鄰者取代插值,因此取決於deltaFrac的值,該工具接著在該配對的一個像素上作決定。然而,在PDPC用於模式2及模式66的情況,由於左參考樣本位於整數位置(refSide[c+1]=refSide[2+x+y]),因此該工具檢查c>=2*H以決定左參考樣本是否不可用。這引入一些歧義。
如稍早內容所見,左參考樣本的推導涉及計算距離deltaPosdeltaPos=((1+x)invAngle+2)>>2;
右側的項只是遞歸和。因此,deltaPos係可計算如下,用以消除乘以x
invAngleSum[-1]=2;
用於0<=x<W
invAngleSum[x]=invAngleSum[x-1]+invAngle
deltaPos=invAngleSum[x]>>2;
deltaInt=deltaPos>>6;
deltaFrac=deltaPos & 63;
deltay=1+y+deltaInt
P left =refSide[deltay+(deltaFrac>>5)]
在至少一實施例中,建議修改過程如下
invAngleSum[-1]=128;
用於0<=x<W
invAngleSum[x]=invAngleSum[x-1]+invAngle
deltay=1+y+(invAngleSum[x]>>8),
P left =refSide[deltay]
請注意,在上述化簡中,已將以下三個步驟合併為一個:
deltaPos=invAngleSum[x]>>2;
deltaInt=deltaPos>>6;
deltay=1+y+deltaInt
已初始化invAngleSum,以128取代2,使位元移位運算(invAngleSum>>8)因四捨五入而導致最接近的整數。這避免計算參數deltaFrac。結果,為要知道左參考像素是否不可用,只需檢查是否deltay>2*H。這與應用PDPC用於模式2或模式66時的檢查係相同的。
此化簡的次要影響係較佳使用refSide中的最後一個參考像素,即refSide[2H]。若參考樣本的實際位置係在2H與2H+1之間,並且較接近refSide[2H],則上述過程會將該位置映射到2H,並將使用像素refSide[2H]作為P left 。在傳統的PDPC實施方式中,由於deltay>2H,因此可簡單地跳過此情況,及因此目前像素的初始預測值將維持不變。除此特殊情況之外,建議的化簡將導致與VTM 5.0相同的預測值用於目標像素。
因觀察到該加權和不需截割,因此可化簡方程式(3):
P(x,y)=((64-wL)*P pred (x,y)+wLP left +32)≫6用於0
Figure 109120687-A0202-12-0018-24
x<W,0
Figure 109120687-A0202-12-0018-25
y<H
可進一步將此方程式化簡為
P(x,y)=(64*P pred (x,y)-wLP pred (x,y)+wLP left +32)≫6 =P pred (x,y)+((wL*(P left -P pred (x,y))+32)≫6).
此化簡避免乘以(64-wL),其不需為2的冪。如已看出,wL只具有非負值。若wL>0,其亦為2的冪。因此,利用如方程式(4)所描述的位元移位,可執行上述方程式中的唯一乘法。
在至少一實施例中,視訊編碼或解碼包括使用PDPC的後處理階段,其中預測計算使用以下方程式(4):
P(x,y)=P pred (x,y)+((((P left -P pred (x,y))≪log2(wL))+32)≫6) (4)
熟諳此藝者將注意到,上述化簡建議對應到VTM 5.0碼,具有迭代迴路以及迴路外invAngleSum的初始化,用以避免乘法。上述化簡係可等效地如下寫成:
用於0<=x<W
deltay=1+y+(((1+x)*invAngle+128)>>8)
P left =refSide[deltay]
請注意,refSide參考陣列具有其在左上像素的第0個坐標,即在重建樣本的坐標(-1,-1)。否則若其係在坐標(-1,0)初始化,則上述方程式將修改為:
用於0<=x<W
deltay=y+(((1+x)*invAngle+128)>>8)
P left =refSide[deltay]
因此,利用上述坐標調整,建議用於垂直模式66及模式66的相鄰模式的PDPC化簡如下:
用於0<=x<W
deltay=y+(((1+x)*invAngle+128)>>8)
P left =refSide[deltay]
P(x,y)=P pred (x,y)+((wL*(P left -P pred (x,y))+32)≫6)
wL=wLmax≫min(31,((x≪1)≫scale))
若mode=66,則wLmax=16,否則wLmax=32
同樣地,用於水平預測模式2及模式2的相鄰模式,建議的PDPC修改如下:
用於0<=y<H
deltax=x+(((1+y)*invAngle+128)>>8)
P top =refMain[deltax]
P(x,y)=P pred (x,y)+((wT*(P top -P pred (x,y))+32)≫6)
wT=wTmax≫min(31,((y≪1)≫scale))
若mode=2,則wTmax=16,否則wTmax=32
其中,refMain表示在目標區塊頂部的參考陣列,及P top 表示其上的參考像素,係藉由與預測方向的延伸相交所得到。
圖9係根據修改的PDPC過程的第一實施例以描繪一示範流程圖,隨後係基於VTM 5.0的一示範實施方式。在此修改過程中,視訊編碼或解碼包括在角度模式中使用PDPC的後處理階段,其中將兩種不同的預測計算合併,並根據其預測值及一相鄰區塊中的參考值(係根據上述第一化簡所示及說明的角度方向進行加權)以重建一圖像區塊的至少一像素。如在圖7的右分支,當預測模式為水平時,refSide表示在目前CU頂部的參考陣列。因此,當模式索引等於2或其任何相鄰模式時,參數wLwLMaxP left 等實際上分別對應到參數wTwTMaxP top 等。
在此實施例中,後處理包括以下步驟:當角參數intraPredAngle大於12時(因此對應到模式索引大於或等於58,或者小於或等於10,如表一以及圖3A及3B所顯示),在步驟910的分支“是”中,用於一像素,在步驟951中計算一加權值wL,在步驟952中藉由延伸預測方向到左參考陣列以得到左參考像素,並在步驟953中根據方程式(3)計算一後處理值以用於預測像素:
P(x,y)=Clip(((64-wL)*P pred (x,y)+wLP left +32)≫6) (3)
換言之,一預測像素係基於其預測值與一參考像素之間的加權進行修改,該參考像素係基於一角度預測模式的角度從區塊的左側行中選出的。
請注意,在步驟910作的測試可依模式索引值而非intraPredAngle值進行,但在此情況下,必須進行兩次或更多次比較以檢查預測角是否在值範圍內,其中範圍可對應到一組垂直模式或一組水平模式。雖然在此實施例中,將intraPredAngle相關固定值12(對應到模式索引10及58)進行測試,但亦可使用其他比較值,並且與此第一實施例的原理相容。例如,在另一個實施例中intraPredAngle相關固定值0(對應到模式索引18及50)進行測試。在另一個實施例中,將intraPredAngle相關在0至12的範圍內的固定值(對應到模式索引介於10及18之間以及介於50及58之間)進行測試。
圖10係根據修改的PDPC過程的第二實施例描繪一示範流程圖,隨後係基於VTM 5.0的示範實施方式。在此第二實施例中,視 訊編碼或解碼包括在角度模式下使用PDPC的後處理階段,其中將兩種不同的預測計算合併,並將一圖像區塊的至少一像素根據其預測值與相鄰區塊中的參考值進行重建,該參考值係根據如圖9所示及上述第二化簡的角度方向進行加權。如圖9所示,當預測模式為水平時,refSide表示在目前CU頂部的參考陣列。因此,當模式索引等於2或其任何相鄰模式時,參數wLwLMaxP left 等實際上分別對應到參數wTwTMaxP top 等。
在此實施例中,後處理包括以下步驟:當角參數intraPredAngle大於預定值(例如12)時,用於一像素,在步驟1003計算加權值wL,在步驟1004藉由延伸預測方向到左參考陣列以得到左參考像素,並在步驟1005根據方程式(4)計算一後處理值以用於預測像素:
P(x,y)=P pred (x,y)+((((P left -P pred (x,y))≪log2(wL))+32)≫6) (4)
換言之,修改一預測像素係基於其預測值與一參考像素之間的加權進行的,該參考像素係基於角度預測模式的角度從包括該像素的區塊左側行中選出的。
有鑑於傳統的PDPC使用多次檢查及數次乘法,而第二實施例只使用單次檢查及移位、加法及減法運算,其就計算需求而言比乘法運算更有效率。
雖然在此實施例中,將intraPredAngle相關固定值12進行測試,但亦可使用其他比較值,並且與此第一實施例的原理相容。
第三實施例
第三實施例係基於第一實施例或第二實施例,其中用於在(x,y)的目標像素,左參考樣本總為refSide[c+1],其中c=1+x+y,與intraPredAngle的值無關。
第四實施例
第四實施例係基於上述實施例中的一者,其中左參考樣本的位置超出refSide的長度,使用最後參考樣本refSide[2H],而不是在一列的目前目標像素終止PDPC。
第五實施例
第五實施例係基於上述實施例中的一者,其中除PLANAR(模式0)、DC(模式1)、嚴格垂直(模式50)及嚴格水平(模式18)四個固定模式之外,所有正垂直及正水平方向皆作為用於PDPC的合格模式。
第六實施例
第六實施例係基於上述實施例中的一者,其中使用其他任何非負及遞減函數用以導出權重wL。作為一範例,可基於預測方向以導出權重為:
wL=wLmax>>((x<<1)>>scale);
wLmax=16*((intraPredAngle+32)≫5.
第七實施例
第七實施例係基於上述實施例中的一者,其中檢查RD效能具有及不具有用於合格模式的PDPC。將PDPC的使用作為在CU層的單個位元PDPC旗標用信號發送到解碼器。可將該旗標進行上下文編碼,其中上下文可係一固定值,或可從鄰域、預測方向等中推演出上下文。
第八實施例
第八實施例係基於上述實施例中的一者,其中執行PDPC用於一圖像切片的所有CU,並使用圖像切片標頭中的單個位元旗標將這類PDPC的應用用信號發送到解碼器。
第九實施例
第九實施例係基於上述實施例中的一者,其中執行PDPC用於一圖像切片中的所有CU,並且使用圖像參數集(PPS)標頭中的單個位元旗標將這類PDPC的應用用信號發送到解碼器。
第十實施例
第十實施例係基於上述實施例中的一者,其中在序列的任何訊框上執行PDPC,並且使用序列參數集(SPS)標頭中的單個位元旗標將這類PDPC的應用用信號發送到解碼器。
結果
在所有要求的測試條件下,已使用VTM 5.0編解碼器在全框內(AI)配置中執行實驗。
圖11描繪第一實施例的實作結果,及圖12描繪第二實施例的實作結果。這些圖顯示所建議化簡的BD率效能與VTM 5.0錨點者的比較。在這些表中,橫列表示對應到原始視訊內容樣本的不同級別的待編碼或解碼的內容。第一欄列出這些級別。分別命名為Y、U、V的第2、3及4欄顯示VTM 5.0編解碼器與分別建議用於原始視訊的Y、U、V分量的實施例之間按大小的差異。因此,這些欄顯示相較於VTM 5.0的壓縮效率差異。分別命名為EncT及DecT的第5欄及第6欄顯示編碼及解碼時間分別關於VTM 5.0編碼及解碼時間的差異。比較編碼及解碼所需時間代表建議的實施例相較於VTM 5.0實施方式的壓縮效率。圖11顯示有關編碼及解碼時間的整體改進。圖12顯示關於編碼及解碼時間以及編碼大小的整體改進。
圖13係根據本發明中描述的各種實施例以描繪一示範流程圖。當PDPC後處理可發生並在一樣本區塊的樣本上進行迭代時啟動此流程圖。首先,在步驟1301中,測試代表預測角的資訊,並確定其是否匹配一標準。此角度對應到曾使用以執行框內預測並藉此產生目前樣本的角度。可基於一角度值以作出此測試用於框內預測模式、用於intraPredAngle參數,或用於代表預測角的任何值。當角度不正確時,在步驟分支1302中,將不執行PDPC後處理並且將不修改預測樣本。
在至少一實施例中,當intraPredAngle參數大於或等於12時認為該角度係正確的。在一變化實施例中,當框內預測模式在-6至10或58至72的範圍內時認為該角度係正確的。熟諳此藝者將注意到這兩個不同的匹配標準對應到角度框內預測的相同角度範圍。
當認為該角度正確時,在步驟1303中計算加權。此加權將允許用以平衡校正量,並藉此平衡在樣本的預測值與參考樣本之間作為結果的樣本的值。
在步驟1305中,得到一參考樣本。在至少一實施例中,從一左參考陣列中得到該參考樣本,該左參考陣列包含區塊左側行的樣本值,得到該參考樣本係藉由角度框內預測方向延伸到區塊左側行,並且從左參考陣列中選擇最靠近角度框內預測方向與區塊左側行之間相交處的樣本。可如稍早提及的簡單方式以deltay的名稱計算到此陣列的索引。
在步驟1307中,根據得到及計算的參數以確定樣本值。上述方程式3及4提供不同公式以計算樣本值。這些方程式(更具體地,方程式4)至少具有比傳統技術要求較少計算的優點。其中一個理由在於已將確定樣本的預測值列入考慮,因此不將頂參考陣列來的參考樣本列入考慮。至少另一個理由係不再將分數部分列入考慮,藉此允許用於進一步的計算化簡。另一個理由係取消另一個角度測試。亦可將根據步驟1307的確定樣本值理解為先前預測樣本的校正、修改或後處理。
用於每個區塊可執行一次步驟1301的操作。然而,由於所涉及的參數取決於樣本的位置及/或值,因此需要在區塊的每個樣本上執行圖13的步驟1303至1307的操作。一旦已處理過該區塊的所有樣本,就可對該區塊進行處理,例如編碼。
本發明的申請說明各式各樣的方面,包括工具、特徵、實施例、模型、方法等。說明許多這些方面具有特異性,及至少用以顯示各別的特徵,常以聽起來可能受限制的方式加以說明。然而,這是為清楚說明的目的,並不限制該等方面的應用或範圍。實際上,可將所有不同方面組合及互換以提供另外的方面。此外,亦可將這些方面與先前申請文件中說明的方面進行組合及互換。
可在許多不同形式中實現本發明申請中所說明及涵蓋的方面。雖然圖1A、1B及2提供一些實施例,但亦涵蓋其他實施例,並且這些附圖的討論不限制實施方式的廣度。該等方面中的至少一者通常相關視訊編碼及/或解碼,並且至少一其他方面通常相關傳輸所產生或編碼的位元流。可將這些及其他方面實現為方法、裝置、儲存有指令用以根據所 述任何方法以編碼或解碼視訊資料的電腦可讀取儲存媒體,及/或儲存有根據所述任何方法所產生位元流的電腦可讀取儲存媒體。
在本文中說明各種方法,並且每個方法包括一或多個步驟或動作用以達成所述方法。除非該方法的適當操作需要特定順序的步驟或動作,否則可修改或組合特定步驟及/或動作的順序及/或使用。
在本發明的申請中描述的各種方法及其他方面可用以修改模組,例如,在圖1A及圖1B所顯示的視訊編碼器100及解碼器200的移動補償及移動估算模組(170、175、275)。此外,本發明的方面不限於VVC或HEVC,並且例如可應用到其他標準及建議(無論先前存在的或將來開發的),以及任何這類標準及建議的延伸(包括VVC及HEVC在內)。除非另外指出或在技術上排除,否則可單獨或組合地使用本發明申請中描述的方面。
在本發明的申請中使用各種數值。該等特定值係用於示範目的,並且所描述的方面不限於這些特定值。
各種實施方式涉及解碼。如使用在本發明的申請中,“解碼”可涵蓋例如在接收的編碼序列上執行的全部或部分處理,用以產生適於顯示的最終輸出。在各種實施例中,這類過程包括通常由解碼器執行的一或多個過程。在各種實施例中,這類過程亦(或者)包括由本發明申請中所述各種實施方式的解碼器執行的過程。
作為另外的範例,在一實施例中,“解碼”只涉及熵解碼,在另一實施例中,“解碼”只涉及差分解碼,以及在另一實施例中,“解碼”涉及熵解碼與差分解碼的組合。基於特定描述的上下文,是否希望“解碼過程”的說法特定地涉及一操作子集或一般性地涉及較廣泛的解碼過程將顯而易見,咸信為熟諳此藝者所完全理解。
各種實施方式涉及編碼。與上述關於“解碼”的討論類似的方式,在本發明的申請中使用的“編碼”可涵蓋例如在輸入視訊序列上執行的全部或部分處理,用以產生編碼的位元流。在各種實施例中,這類過程包括通常由編碼器執行的一或多個過程。在各種實施例中,這類過程亦(或者)包括由本發明申請中所述各種實施方式的編碼器執行的過程。
作為進一步的範例,在一實施例中,“編碼”只涉及熵編 碼,在另一實施例中,“編碼”只涉及差分編碼,以及在另一實施例中,“編碼”涉及差分編碼與熵編碼的組合。基於特定描述的上下文,是否希望“編碼過程”的說法特定地涉及一操作子集或一般性地涉及較廣泛的編碼過程將顯而易見,咸信為熟諳此藝者所完全理解。
請注意,在本文中使用的語法元素係描述性用詞,因此,不排除使用其他語法元素名稱。
當附圖呈現為流程圖時,應理解該圖亦提供對應裝置的方塊圖。同樣地,當附圖呈現為方塊圖時,應理解該圖亦提供對應方法/過程的流程圖。
各種實施例涉及資料率失真優化。尤其,在編碼過程中,通常考慮到資料率與失真之間的平衡或折衷,常給定計算複雜性的約束。 通常將資料率失真優化公式化為資料率失真函數最小化,該函數係資料率與失真的加權和。解決資料率失真優化問題有不同的方法,例如,該等方法可基於所有編碼選項的廣泛測試,包括考慮的所有模式或編碼參數值,完整評估其編碼成本及編碼及解碼後重建信號的相關失真。亦可使用更快的方法以節省編碼複雜性,尤其基於預測或預測殘餘信號而非重建信號以計算近似失真。亦可使用這兩種方法的混合,例如只使用近似失真用於某些可能的編碼選項,及使用完全失真用於其他編碼選項。其他方法只評估可能編碼選項的子集。更一般地,許多方法採用各式各樣技術中的任一者以執行優化,但優化不一定係編碼成本與相關失真兩者的完整評估。
本發明的申請說明各式各樣的方面,包括工具、特徵、實施例、模型、方法等。說明許多這些方面具有特異性,及至少用以顯示各別的特徵,常以聽起來可能受限制的方式加以說明。然而,這是為清楚說明的目的,並不限制該等方面的應用或範圍。實際上,可將所有不同方面組合及互換以提供另外的方面。此外,亦可將這些方面與先前申請文件中說明的方面進行組合及互換。
在本文描述的實施方式例如可實現在方法或過程、裝置、軟體程式、資料流,或信號中。即使只在單一形式的實施方式的上下文中討論(例如,只討論作為方法),所討論特徵的實施方式亦可實現在其他形式(例如,裝置或程式)中。例如可將裝置實現在適當的硬體、軟體及韌體 中。例如可將該等方法實現在處理器中,處理器通常指處理設備,例如包括電腦、微處理器,積體電路,或可程式化邏輯設備。處理器亦包括通訊設備,例如電腦、平板電腦、智慧型手機、手機、可攜式/個人數位助理器,及其他有助於終端用戶之間資訊通訊的設備。
提及“一個實施例”或“一實施例”或“一個實施方式”或“一實施方式”以及其別的變化,意指結合該實施例所描述的特定特徵、結構、特性等係包括在至少一實施例中。因此,本發明的申請從頭至尾在不同地方出現“在一個實施例中”或“在一實施例中”或“在一個實施方式中”或“在一實施方式中”等說法,以及其他任何變化,不一定全指同一實施例。
另外,本發明的申請可涉及“確定”各種資訊片段。確定資訊例如可包括下列中的一或多者;估算資訊、計算資訊、預測資訊,或從記憶體中擷取資訊。
此外,本發明的申請可涉及“存取”各種資訊片段。存取資訊例如可包括下列中的一或多者:接收資訊、(例如從記憶體中)擷取資訊、儲存資訊、移動資訊、複製資訊、計算資訊、確定資訊、預測資訊,或估算資訊。
另外,本發明的申請可涉及“接收”各種資訊片段。希望接收如同“存取”係一廣義用詞,接收資訊例如可包括下列中的一或多者:存取資訊,或(例如從記憶體中)擷取資訊。此外,例如在儲存資訊、處理資訊、傳輸資訊、移動資訊、複製資訊、拭除資訊、計算資訊、確定資訊、預測資訊或估算資訊的操作期間,通常在一方式或另一方式涉及“接收”。
在本發明的申請中,可將“重建”與“解碼”等詞互換使用,可將“像素”與“樣本”等詞互換使用,可將“影像”、“圖像”、“訊框”、“圖像切片”與“圖塊”等詞互換使用。通常(但不一定),“重建”一詞係使用在編碼器端,而“解碼”係使用在解碼器端。
應了解,以下“/”、“及/或”以及“的至少一者”中任一者的使用,例如在“A/B”、“A及/或B”及“A及B中的至少一者”的情況中,希望涵蓋只選擇第一個列出的選項(A),或只選擇第二個列出 的選項(B),或選擇兩選項(A及B)。作為進一步範例,在“A、B及/或C”及“A、B及C中的至少一者”的情況中,這類說法希望涵蓋只選擇第一個列出的選項(A),或只選擇第二個列出的選項(B),或只選擇第三個列出的選項(C),或只選擇第一個及第二個列出的選項(A及B),或只選擇列出的第一個及第三個選項(A及C),或者只選擇列出的第二個及第三個選項(B及C),或者選擇全部三個選項(A及B及C)。如一般熟諳本領域及相關領域者所顯而易見的,這可延伸用於盡可能多的列出項目。
而且,如在本文使用的“用信號發送(signal)”一詞尤其涉及向對應的解碼器指示某件東西。例如,在某些實施例中,編碼器用信號發送照明補償參數中的一特定者。依此方式,在一實施例中,在編碼器及解碼器兩端皆使用相同參數。因此,例如,編碼器可傳輸(顯性傳訊)一特定參數到解碼器,以便解碼器可使用相同特定參數。相反地,若解碼器已經具有該特定參數以及其他參數,則可使用傳訊而無需傳輸(隱含型傳訊)以簡單地允許解碼器知道並選擇該特定參數。藉由避免任何實際函數的傳輸,在各種實施例中實現節省位元。應了解,可依各式各樣的方式以完成傳訊。例如,在各種實施例中,使用一或多個語法元素、旗標等,將資訊用信號發送到對應的解碼器。雖然上述內容相關“signal”一詞的動詞形式(用信號發送),但“signal”一詞在本文中亦可作為名詞(信號)使用。
如熟諳此藝者所顯而易見,實施方式可產生各式各樣的信號,係格式化用以攜帶例如可儲存或傳輸的資訊。資訊例如可包括用以執行方法的指令,或由所述實施方式中的一者所產生的資料。例如,可將信號格式化用以攜帶一所述實施例的位元流。可將此一信號例如格式化為電磁波(例如,使用頻譜的一射頻部分)或作為一基頻信號。格式化例如可包括編碼資料流及利用編碼資料流以調變載波。信號所攜帶的資訊例如可為類比或數位資訊。如眾所周知,信號可在各式各樣不同的有線或無線鏈結上傳輸。信號可儲存在處理器可讀取媒體上。
在第一方面的第一變化中,當框內預測角小於或等於第一值或大於或等於第二值時(第一值小於第二值),認為匹配該角度標準。在第一變化的變化中,第一值為10,及第二值為58。
在第一方面的第二變化中,當代表框內預測角的 intraPredAngle值大於或等於一值時,認為匹配該角度標準。在該變化的變化中,當代表框內預測角的intraPredAngle值大於或等於12時,認為匹配該角度標準。
在第一方面的另一變化中,用於垂直角方向,從一個左參考陣列中確定左參考樣本,該左參考陣列包括區塊左側行的樣本的值,確定左參考樣本係藉由垂直角框內預測方向延伸到區塊左側的行,並從左參考陣列中選擇最靠近垂直角框內預測方向與區塊左側行之間相交處的樣本,以及用於水平角方向,從一個頂參考陣列中確定頂參考樣本,該頂參考陣列包括在區塊頂列的樣本的值,確定頂參考樣本係藉由水平角框內預測方向延伸到區塊頂列,並從頂參考陣列中選擇最靠近水平角框內預測方向與區塊頂列之間相交處的樣本。
在第一方面的又一變化中,用於垂直方向,確定樣本P(x,y)的值係根據P(x,y)=P pred (x,y)+((((P left -P pred (x,y))<<log2(wL))+32)>>6),以及用於水平方向係根據P(x,y)=P pred (x,y)+((((P top -P pred (x,y))<<log2(wT))+32)>>6),其中P pred (x,y)係所得樣本預測值,P left P top 係左參考樣本或頂參考樣本的值,及wLwT係加權。
在第一方面的另一變化中,用於垂直角方向,確定左參考樣本的值P left 係藉由:P left =refSide[deltay],其中refSide係區塊左側行的樣本值的陣列,deltay=y+(((1+x)* invAngle+128)>>8),以及用於水平角方向,確定頂參考樣本的值P top 係藉由:P top =refMain[deltax],其中refMain係區塊頂列的樣本值的陣列,deltax=x+(((1+y)* invAngle+128)>>8),其中invAngle係對應到預測角的角參數的逆。
在第一方面的又一變化中,確定加權係根據:wL=wLmax>>min(31,((x<<1)>>scale)),其中當intraPredAngle等於32時wLmax=16,或否則wLmax=32,wT=wTmax>>min(31,((y<<1)>>scale)),其中當intraPredAngle等於32時wTmax=16,或否則wTmax=32,以及scale(標度)等於((log2(W)-2+log2(H)-2+2)>>2)
1301:檢查預測角資訊的步驟
1302:步驟分支(不執行PDPC後處理及不修改預測樣本)
1303:計算加權的步驟
1305:得到參考樣本的步驟
1307:確定樣本值的步驟

Claims (17)

  1. 一種用以確定影像區塊樣本值之方法,包括:
    得到用於該樣本之預測值,該值係根據代表框內預測角之值進行框內預測;及
    當框內預測角匹配一標準(1301)時,基於用於垂直角模式之左參考樣本(或用於水平角模式之頂參考樣本)之值與所得樣本預測值間之加權(1303)以確定(1307)該樣本之值,其中基於框內預測角以確定(1305)左參考樣本或頂參考樣本。
  2. 如申請專利範圍第1項之方法,其中當代表框內預測角之intraPredAngle值大於或等於匹配之值時,認為匹配該角度標準。
  3. 如申請專利範圍第2項之方法,其中匹配之值為12。
  4. 如申請專利範圍第2項之方法,其中匹配之值為0。
  5. 如申請專利範圍第1項之方法,其中當代表框內預測角之模式值小於或等於第一模式值以用於水平角模式時,或大於或等於第二模式值以用於垂直角模式時,認為匹配該角度標準,第一值小於第二值,及模式值不同於0或1,
    其中模式值大於或等於34指示垂直模式,及模式值小於34指示水平模式。
  6. 如申請專利範圍第5項之方法,其中第一值為10,及第二值為58。
  7. 如申請專利範圍第6項之方法,其中第一值為18,及第二值為50。
  8. 如申請專利範圍第1至7項中任一項之方法,其中:
    用於垂直角方向,從一左參考陣列中確定左參考樣本,該左參考陣列包括區塊左側行之樣本值,確定左參考樣本係藉由垂直角框內預測方向延伸至區塊左側行,及從該左參考陣列中選擇最靠近垂直角框內預測方向與區塊左側行間相交處之樣本,及
    用於水平角方向,從一頂參考陣列中確定頂參考樣本,該頂參考陣列包括區塊頂列之樣本值,確定頂參考樣本係藉由水平角框內預測方向延伸至區塊頂列,及從該頂參考陣列中選擇最靠近水平角框內預測方向與區塊頂列 間相交處之樣本。
  9. 如申請專利範圍第1至8項中任一項之方法,其中確定樣本P(x,y)之值係根據:
    用於垂直方向:
    P(x,y)=P pred (x,y)+((((P left -P pred (x,y))<<log2(wL))+32)>>6),及
    用於水平方向:
    P(x,y)=P pred (x,y)+((((P top -P pred (x,y))<<log2(wT))+32)>>6)
    其中P pred (x,y)係所得樣本預測值,P left P top 係左參考樣本或頂參考樣本之值,及wLwT係加權。
  10. 如申請專利範圍第1至9項中任一項之方法,其中,
    用於垂直方向,確定左參考樣本之值P left 係藉由:
    P left =refSide[deltay],其中refSide係區塊左側行之樣本值之陣列,deltay=y+(((1+x)*invAngle+128)>>8),及
    用於水平方向,確定頂參考樣本之值P top 係藉由:
    P top =refMain[deltax],其中refMain係區塊頂列之樣本值之陣列,deltax=x+(((1+y)*invAngle+128)>>8)
    其中invAngle係對應至預測角之角參數之逆。
  11. 如申請專利範圍第1至10項中任一項之方法,其中確定加權係根據:
    用於垂直方向:wL=wLmax>>min(31,((x<<1)>>scale)),其中當intraPredAngle等於32時wLmax=16,或否則wLmax=32,
    用於水平方向:wT=wTmax>>min(31,((y<<1)>>scale)),其中當intraPredAngle等於32時wTmax=16,或否則wTmax=32,及
    Scale(標度)等於((log2(W)-2+log2(H)-2+2)>>2)
  12. 一種用以編碼視訊區塊之方法,包括,用於一視訊區塊:
    用於該視訊區塊之每個樣本:
    執行框內預測以用於該樣本,及
    根據申請專利範圍第1到11項中任一項之方法以修改該樣 本之值,及
    編碼該區塊。
  13. 一種用以解碼視訊區塊之方法,包括,用於一視訊區塊:
    用於該視訊區塊之每個樣本:
    執行框內預測以用於該樣本,及
    根據申請專利範圍第1至11項中任一項之方法以修改該樣本之值。
  14. 一種裝置(1000),包括一編碼器(1030)用以編碼圖像資料,該編碼器係配置用以,用於一視訊區塊:
    用於該視訊區塊之每個樣本:
    執行框內預測以用於該樣本,及
    根據申請專利範圍第1至11項中任一項之方法以修改該樣本之值,及
    編碼該區塊。
  15. 一種裝置(1000),包括一解碼器(1030)用以解碼圖像資料,該解碼器係配置用以,用於一視訊區塊:
    用於該視訊區塊之每個樣本:
    執行框內預測以用於該樣本,及
    根據申請專利範圍第1至11項中任一項之方法以修改該樣本之值。
  16. 一種非暫態電腦可讀取媒體,包括程式碼指令,當由處理器執行時用以實現如申請專利範圍第1至13項中至少一項之方法之步驟。
  17. 一種電腦程式,包括程式碼指令,當由處理器執行時用以實現如申請專利範圍第1至13項中至少一項之方法之步驟。
TW109120687A 2019-06-20 2020-06-19 使用位置相關框內預測組合以編碼及解碼圖像之方法及裝置 TW202106008A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP19305798.1 2019-06-20
EP19305798 2019-06-20

Publications (1)

Publication Number Publication Date
TW202106008A true TW202106008A (zh) 2021-02-01

Family

ID=67437685

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109120687A TW202106008A (zh) 2019-06-20 2020-06-19 使用位置相關框內預測組合以編碼及解碼圖像之方法及裝置

Country Status (8)

Country Link
US (1) US11991361B2 (zh)
EP (1) EP3987780A1 (zh)
JP (1) JP2022537173A (zh)
KR (1) KR20220024643A (zh)
CN (1) CN114600450A (zh)
IL (1) IL289036A (zh)
TW (1) TW202106008A (zh)
WO (1) WO2020254264A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4074048A4 (en) * 2019-12-31 2023-03-08 Huawei Technologies Co., Ltd. METHOD AND DEVICE FOR INTRAPREDICTION

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10506228B2 (en) * 2016-10-04 2019-12-10 Qualcomm Incorporated Variable number of intra modes for video coding
EP3410722A1 (en) * 2017-05-31 2018-12-05 Thomson Licensing Method and apparatus for low-complexity bi-directional intra prediction in video encoding and decoding
US11611757B2 (en) * 2018-04-02 2023-03-21 Qualcomm Incorproated Position dependent intra prediction combination extended with angular modes
US11159806B2 (en) * 2018-06-28 2021-10-26 Qualcomm Incorporated Position dependent intra prediction combination with multiple reference lines for intra prediction
US11128872B2 (en) * 2018-07-16 2021-09-21 Qualcomm Incorporated Position dependent intra prediction combination with wide angle intra prediction
US10652537B1 (en) * 2018-11-21 2020-05-12 Alibaba Group Holding Limited Coding unit size adaptive palette mode for video compression system
JP7401542B2 (ja) * 2018-11-26 2023-12-19 華為技術有限公司 ピクチャのブロックのイントラ予測の方法
US10778972B1 (en) * 2019-02-27 2020-09-15 Google Llc Adaptive filter intra prediction modes in image/video compression

Also Published As

Publication number Publication date
CN114600450A (zh) 2022-06-07
EP3987780A1 (en) 2022-04-27
KR20220024643A (ko) 2022-03-03
WO2020254264A1 (en) 2020-12-24
JP2022537173A (ja) 2022-08-24
IL289036A (en) 2022-02-01
US11991361B2 (en) 2024-05-21
US20220303541A1 (en) 2022-09-22

Similar Documents

Publication Publication Date Title
US20220038684A1 (en) Multi-reference line intra prediction and most probable mode
US20220191474A1 (en) Wide angle intra prediction with sub-partitions
US11985306B2 (en) Method and apparatus for video encoding and decoding with matrix based intra-prediction
EP4218240A1 (en) Template matching prediction for versatile video coding
JP2022502959A (ja) 広角イントラ予測のための方向
CN113302924A (zh) 用于视频编码和解码的量化
WO2020086248A1 (en) Method and device for picture encoding and decoding
US12022079B2 (en) Wide angle intra prediction and position dependent intra prediction combination
EP3641311A1 (en) Encoding and decoding methods and apparatus
CN112740676A (zh) 帧内变换译码和广角帧内预测的协调
EP3654645A1 (en) Method and device for picture encoding and decoding
TW202106008A (zh) 使用位置相關框內預測組合以編碼及解碼圖像之方法及裝置
US20220256161A1 (en) Method and apparatus for video encoding and decoding with matrix based intra-prediction
US20220021871A1 (en) Intra prediction mode extension
CN114930819A (zh) 三角形合并模式中的子块合并候选
US20240244215A1 (en) Method and device for picture encoding and decoding using position dependent intra prediction combination
RU2815092C2 (ru) Широкоугольное внутрикадровое предсказание с подразделами
US20220360781A1 (en) Video encoding and decoding using block area based quantization matrices
US20230262268A1 (en) Chroma format dependent quantization matrices for video encoding and decoding
US20220030238A1 (en) Method and device for picture encoding and decoding
CN117597923A (zh) 用于视频编码和解码的利用模板匹配的帧内块复制
CN118120231A (zh) 改善解码器侧帧内模式导出中的角度离散化
CN118140481A (zh) 利用isp模式对基于模版的帧内模式推导(timd)进行扩展
CN113016181A (zh) 依据块形状适配最可能模式候选的选择