TW202139703A - 解碼、編碼、編解碼方法、裝置及其設備 - Google Patents

解碼、編碼、編解碼方法、裝置及其設備 Download PDF

Info

Publication number
TW202139703A
TW202139703A TW110110698A TW110110698A TW202139703A TW 202139703 A TW202139703 A TW 202139703A TW 110110698 A TW110110698 A TW 110110698A TW 110110698 A TW110110698 A TW 110110698A TW 202139703 A TW202139703 A TW 202139703A
Authority
TW
Taiwan
Prior art keywords
current block
inter
frame prediction
filtering
prediction filtering
Prior art date
Application number
TW110110698A
Other languages
English (en)
Other versions
TWI784452B (zh
Inventor
曹小強
Original Assignee
大陸商杭州海康威視數字技術股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商杭州海康威視數字技術股份有限公司 filed Critical 大陸商杭州海康威視數字技術股份有限公司
Publication of TW202139703A publication Critical patent/TW202139703A/zh
Application granted granted Critical
Publication of TWI784452B publication Critical patent/TWI784452B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Steroid Compounds (AREA)
  • Error Detection And Correction (AREA)

Abstract

本申請提供一種解碼、編碼、編解碼方法、裝置及其設備,該解碼方法包括:若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且當前塊滿足幀間預測濾波條件,則從當前塊的編碼位元流中解析當前塊的幀間預測濾波標識;若所述幀間預測濾波標識指示當前塊的濾波類型為幀間預測濾波,則對當前塊進行幀間預測濾波處理,得到當前塊的目標預測值;若所述幀間預測濾波標識指示當前塊的濾波類型為增強幀間預測濾波,則對當前塊進行增強幀間預測濾波處理,得到當前塊的目標預測值。

Description

解碼、編碼、編解碼方法、裝置及其設備
本申請涉及編解碼技術領域,尤其是涉及一種解碼、編碼、編解碼方法、裝置及其設備。
為了達到節約空間的目的,視頻圖像都是經過編碼後才傳輸的,完整的視頻編碼方法可以包括預測、變換、量化、熵編碼、濾波等過程,而預測過程可以包括幀內預測和幀間預測。幀間預測是利用視頻時間域的相關性,使用鄰近已編碼圖像的圖元預測當前圖像的圖元,達到去除視頻時域冗餘的目的。幀內預測是考慮到相鄰塊之間存在很強的空域相關性,利用周圍已經重建的圖元作為參考圖元,對當前未編碼塊進行預測,只需要對殘差值進行後續編碼處理,而不是對原始值進行編碼,有效去除空域上的冗餘,大大提高了壓縮效率。
幀間預測濾波和增強幀間預測濾波是實現幀間預測的兩種技術,主要用於消除幀間預測導致的預測塊與周圍圖元之間的空域不連續性問題。但是,如何採用幀間預測濾波或者增強幀間預測濾波實現幀間預測,目前並沒有合適的解決方案,存在編碼性能較差等問題。
本申請提供一種解碼方法,應用於解碼端,所述方法包括:若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則從所述當前塊的編碼位元流中解析所述當前塊的幀間預測濾波標識;若所述幀間預測濾波標識指示所述當前塊的濾波類 型為幀間預測濾波,則對所述當前塊進行幀間預測濾波處理,得到所述當前塊的目標預測值;若所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,則對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值。
本申請提供一種編碼方法,應用於編碼端,所述方法包括:若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識;其中,若所述當前塊的濾波類型為幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波;或者,若所述當前塊的濾波類型為增強幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波。
本申請提供一種編解碼方法,應用於編碼端或者解碼端,所述方法包括:若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
本申請提供一種解碼裝置,應用於解碼端,所述裝置包括:獲取模組,用於若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則從所述當前塊的編碼位元流中解析所述當前塊的幀間預測濾波標識;處理模組,用於若所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波,則對所述當前塊進行幀間預測濾波處理,得到所述當前塊的目標預測值;若所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,則對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值。
本申請提供一種編碼裝置,應用於編碼端,所述裝置包括:編碼模組,用於若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識;其中,若所述當前塊的濾 波類型為幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波;或者,若所述當前塊的濾波類型為增強幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,發送模組,用於發送所述當前塊的編碼位元流。
本申請提供一種編解碼裝置,應用於編碼端或者解碼端,所述裝置包括:處理模組,用於若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;確定模組,用於根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
本申請提供一種解碼端設備,包括處理器和機器可讀存儲介質,所述機器可讀存儲介質存儲有能夠被所述處理器執行以實現如下步驟的機器可執行指令:若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則從所述當前塊的編碼位元流中解析所述當前塊的幀間預測濾波標識;若所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波,則對所述當前塊進行幀間預測濾波處理,得到所述當前塊的目標預測值;若所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,則對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值;或者,若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
本申請提供一種編碼端設備,包括處理器和機器可讀存儲介質,所述機器可讀存儲介質存儲有能夠被所述處理器執行以實現如下步驟的機器可執行指令:若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識;其中,若所述當前塊的濾波類型為幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊 的濾波類型為幀間預測濾波;或者,若所述當前塊的濾波類型為增強幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波;或者,若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
由以上技術方案可見,本申請實施例中,可以將幀間預測濾波和增強幀間預測濾波的標誌位元解耦,即通過幀間預測濾波允許標誌位元表示是否允許採用幀間預測濾波,通過增強幀間預測濾波允許標誌位元表示是否允許採用增強幀間預測濾波,從而有效地採用幀間預測濾波或者增強幀間預測濾波實現幀間編碼,在編解碼複雜度不發生變化的情況下提升編碼性能。
211、212、213、214、221、222、231、232、301、302、303、304、305、306、307、308、309、310、311、312、313:步驟
611:獲取模組
612、621、631:處理模組
622:發送模組
632:確定模組
711、721:處理器
712、722:機器可讀存儲介質
BT(binary-tree):二叉樹
BT_HOR:水準二叉樹劃分
BT_VER:垂直二叉樹劃分
EQT(Extended Quad-tree):擴展四叉樹
EQT_HOR:水準擴展四叉樹劃分
EQT_VER:垂直擴展四叉樹劃分
QT(Quad-tree):四叉樹
圖1A是本申請一種實施方式中的視頻編碼框架的示意圖;
圖1B是本申請一種實施方式中的劃分樹的示意圖;
圖2A是本申請一種實施方式中的解碼方法的流程圖;
圖2B是本申請一種實施方式中的編碼方法的流程圖;
圖2C是本申請一種實施方式中的編解碼方法的流程圖;
圖3是本申請另一種實施方式中的編解碼方法的流程圖;
圖4是本申請一種實施方式中的包含幀間預測濾波的解碼過程示意圖;
圖5是本申請一種實施方式中的當前塊與參考圖元的位置關係示意圖;
圖6A是本申請一種實施方式中的解碼裝置的結構圖;
圖6B是本申請一種實施方式中的編碼裝置的結構圖;
圖6C是本申請一種實施方式中的編解碼裝置的結構圖;
圖7A是本申請一種實施方式中的解碼端設備的硬體結構圖;
圖7B是本申請一種實施方式中的編碼端設備的硬體結構圖。
在本申請實施例中所使用的術語僅僅是出於描述特定實施例的目的,而非用於限制本申請。本申請實施例和請求項中所使用的單數形式的“一種”、“所述”和“該”也旨在包括多數形式,除非上下文清楚地表示其它含義。還應當理解,本文中使用的術語“和/或”是指包含一個或多個相關聯的列出專案的任何或所有可能組合。應當理解,儘管在本申請實施例可能採用術語第一、第二、第三等來描述各種資訊,但這些資訊不應限於這些術語。這些術語僅用來將同一類型的資訊彼此區分開。例如,在不脫離本申請範圍的情況下,第一資訊也可以被稱為第二資訊,類似地,第二資訊也可以被稱為第一資訊。取決於語境,此外,所使用的詞語“如果”可以被解釋成為“在......時”,或“當......時”,或“回應於確定”。
為了使本領域技術人員更好地理解本申請技術方案,下面對技術術語進行簡單說明。
視頻編碼框架:參見圖1A所示,可以使用視頻編碼框架實現本申請實施例的編碼端處理流程,視頻解碼框架的示意圖可以與圖1A類似,在此不再重複贅述,可以使用視頻解碼框架實現本申請實施例的解碼端處理流程。在視頻編碼框架和視頻解碼框架中,可以包括但不限於:預測、運動估計/運動補償、參考圖像緩衝器、環內濾波、重建、變換、量化、反變換、反量化、熵編碼器等模組。在編碼端,通過這些模組之間的配合,可以實現編碼端的處理流程,在解碼端,通過這些模組之間的配合,可以實現解碼端的處理流程。
示例性的,在視頻編碼過程中,預測過程可包括幀內預測和幀間預測。幀內預測是考慮到相鄰塊之間存在很強的空域相關性,利用周圍已經重建的圖元作為參考圖元,對當前未編碼塊進行預測,只需要對殘差值進行後續編碼處理,而不是對原始值進行編碼,有效去除空域上的冗餘,大大提高了壓縮效率。此外,幀間預測是利用視頻時域的相關性,使用鄰近已編 碼圖像的圖元預測當前圖像的圖元,達到去除視頻時域冗餘的目的。
示例性的,在視頻編碼過程中,變換是指將以空域中圖元形式描述的圖像轉換至變換域的圖像,並以變換係數的形式來表示。由於絕大多數圖像都含有較多平坦區域和緩慢變化的區域,因此,適當的變換過程,可以使圖像能量在空域的分散分佈,轉換為在變換域的相對集中分佈,從而能夠去除信號之間的頻域相關性,配合量化過程,可以有效壓縮碼流。
示例性的,熵編碼是指按照資訊熵的原理進行無損編碼的方式,處於視訊壓縮的最後一個處理模組,將一系列用來表示視頻序列的元素符號,轉變為一個用來傳輸或存儲的二進位碼流。輸入的元素符號可能包括量化後的變換係數、運動向量資訊、預測模式資訊、變換量化相關語法等。熵編碼模組的輸出資料即原始視訊壓縮後的最終碼流。熵編碼可以有效地去除這些視頻元素符號的統計冗餘,是保證視頻編碼壓縮效率的重要工具之一。
示例性的,環路濾波用於減少圖像的塊效應或者圖像效果不佳等問題,用來改善圖像品質。例如,環路濾波可以包括但不限於去塊濾波(Deblocking filter),SAO(Sample Adaptive Offset,樣點自我調整補償)濾波,ALF(Adaptive Loop Filter,自我調整環路濾波器)濾波,CCALF(Cross-Component Adaptive Loop Filter,跨分量自我調整環路濾波器)濾波等。
運動向量(Motion Vector,MV):在幀間預測過程中,可以使用運動向量表示當前幀視頻圖像的當前塊與參考幀視頻圖像的參考塊之間的相對位移。每個劃分的塊都有相應的運動向量傳送到解碼端,如果對每個塊的運動向量進行獨立編碼和傳輸,特別是劃分成小尺寸的大量塊,則消耗相當多的比特。為降低用於編碼運動向量的比特數,可以利用相鄰塊之間的空間相關性,根據相鄰已編碼塊的運動向量對當前待編碼塊的運動向量進行預測,然後對預測差進行編碼,這樣可以有效降低表示運動向量的比特數。示例性的,在對當前塊的運動向量進行編碼的過程中,可以先使用相鄰已編碼塊的運動向量預測當前塊的運動向量,然後對該運動向量的預測值 (MVP,Motion Vector Prediction)與運動向量的真正估值之間的差值(MVD,MotionVector Difference)進行編碼,從而有效降低運動向量的編碼比特數。
運動資訊(Motion Information):由於運動向量表示當前塊與某個參考塊之間的位置偏移,為了準確地獲取參考塊的資訊,除了運動向量,還需要參考幀圖像的索引資訊來表示當前塊使用哪個參考幀圖像。在視頻編碼技術中,對於當前幀圖像,通常可以建立一個參考幀圖像清單,參考幀圖像索引資訊則表示當前塊採用了參考幀圖像清單中的第幾個參考幀圖像。此外,很多編碼技術還支援多個參考幀圖像清單,因此,還可以使用一個索引值來表示使用了哪一個參考幀圖像清單,這個索引值可以稱為參考方向。綜上所述,在視頻編碼技術中,可以將運動向量、參考幀圖像索引、參考方向等與運動相關的資訊統稱為運動資訊。
普通幀間模式、跳過模式(Skip)和直接模式(Direct):在幀間預測過程中,可以採用幀間預測模式對當前塊進行預測,而幀間預測模式可以包括普通幀間模式、跳過模式和直接模式等。
跳過模式是一種幀間預測模式,編碼端不需要傳輸殘差資訊,也不需要傳輸MVD,只需要傳輸運動資訊的索引即可。解碼端通過解析運動資訊的索引,即可推導當前塊的運動資訊,獲取運動資訊後,利用運動資訊確定預測值,並將預測值直接作為重建值。
直接模式是一種幀間預測模式,編碼端需要傳輸殘差資訊,但不需要傳輸MVD,只需要傳輸運動資訊的索引即可。解碼端通過解析運動資訊的索引,即可推導當前塊的運動資訊,獲取運動資訊後,利用運動資訊確定預測值,將預測值加上殘差值得到重建值。
普通幀間模式是一種幀間預測模式,與跳過模式和直接模式不同的是,在普通幀間模式下,編寫需要傳輸運動資訊的索引、MVD以及殘差資訊等內容。但在跳過模式或者直接模式下,當前塊的運動資訊完全複用時域或空域某個相鄰塊的運動資訊,比如說,可從周圍多個塊的運動資訊集合中,選擇一個運動資訊作為當前塊的運動資訊。因此,在跳過模式或直 接模式下,只需要編碼一個索引值表示當前塊使用運動資訊集合中的哪個運動資訊,而跳過模式和直接模式之間的區別在於:跳過模式不需要編碼殘差,而直接模式需要編碼殘差。顯然,跳過模式或者直接模式可大大節省運動資訊的編碼開銷。
在直接模式下,可以採用多種幀間預測模式確定如何生成幀間預測值,例如,普通直接模式、子塊模式、MMVD模式(merge with motion vector difference,編碼運動差的模式)、CIIP模式(combine inter intra prediciton mode,幀間幀內預測聯合生成新預測值的模式)、TPM模式(triangular prediction mode,用於三角預測的模式)、GEO模式(Geometrical Partitioning,基於任意幾何劃分形狀的模式)。子塊模式可以為Affine(仿射)模式或者SbTMVP(subblock-based temporal motion vector prediction,基於子塊的時間運動向量預測)模式。
針對普通直接模式,可從候選運動資訊清單中選擇一個運動資訊,基於該運動資訊生成當前塊的預測值。該候選運動資訊清單包括:空域相鄰塊候選運動資訊、時域相鄰塊候選運動資訊、空域非相鄰塊候選運動資訊、基於已有運動資訊進行組合獲取的運動資訊、預設運動資訊等。當然,候選運動資訊清單還可包括HMVP(History based Motion Vector Prediction,基於歷史的運動向量預測)和/或MVAP等運動資訊,對此不做限制。
針對MMVD模式,MMVD模式又可以稱為UMVE(Ultimate Motion Vector Expression,高級運動向量表達)模式,基於普通直接模式的候選運動資訊清單,從普通直接模式的候選運動資訊清單中選擇運動資訊作為基準運動資訊,通過查表方法獲取運動資訊差。基於基準運動資訊和運動資訊差獲取最終的運動資訊,基於該最終的運動資訊生成當前塊的預測值。MMVD模式/UMVE模式是在已生成的候選運動基礎上進行偏移,從而得到更優的候選運動。
針對Affine模式,類似于普通直接模式,也是從候選運動資訊清單中選擇一個運動資訊,基於該運動資訊生成當前塊的預測值。與普通 直接模式不同的是,普通直接模式的候選運動資訊清單的運動資訊是2參數的平移運動向量,而Affine模式的候選運動資訊清單的運動資訊是4參數的Affine運動資訊,或6參數的Affine運動資訊,或8參數的Affine運動資訊。
針對SbTMVP模式,在時域參考幀中,可以直接複用某塊的運動資訊,基於這個運動資訊生成當前塊的預測值,該塊內的各個子塊的運動資訊可以不相同。
針對CIIP模式,通過結合幀內預測值和幀間預測值獲取當前塊新的預測值,而CIIP模式也可以稱為幀間預測濾波模式,即本文中的幀間預測濾波,後續稱為幀間預測濾波。
在幀間預測濾波中,關於如何獲取幀間預測值,可以是基於普通直接模式的運動資訊獲取幀間預測值,也可以是基於TPM模式/GEO模式的運動資訊獲取幀間預測值,還可以是基於SbTMVP模式的運動資訊獲取幀間預測值,對此不做限制。在幀間預測濾波中,關於如何獲取幀內預測值,可以採用Plane模式、DC模式、任意角度模式等,獲取幀內預測值。
針對TPM模式,將一個塊分成兩個三角子塊(存在45度和135度兩種三角子塊),這兩個三角子塊擁有不同的單向運動資訊,TPM模式僅用於預測過程,不影響後續的變換、量化過程,這裡的單向運動資訊也是直接從候選運動資訊清單中獲取的。
針對GEO模式,GEO模式與TPM模式類似,只是劃分形狀不同。GEO模式將一個方形塊分成任意形狀的兩個子塊(除了TPM的兩個三角子塊的形狀外的任意其它形狀),如一個三角子塊,一個五邊形子塊;或者,一個三角子塊,一個四邊形子塊;或者,兩個梯形子塊等,對此劃分形狀不做限制。GEO模式劃分的這兩個子塊擁有不同的單向運動資訊。
標誌位元編碼(flag coding):在視頻編碼中,存在很多模式。對於某個塊來說,可能採用其中一種模式。為了表示採用何種模式,每個塊需要通過編碼對應的標誌位元來進行標記。比如說,針對編碼端來說,通過 編碼端決策,確定該標誌位元的值,然後對標誌位元的值進行編碼傳遞到解碼端。針對解碼端來說,通過解析標誌位元的值,確定對應模式是否啟用。
在標誌位元的編碼過程中,可通過高層語法實現標誌位元的編碼,高層語法可以用於表示是否允許啟用某種模式,即通過高層語法允許啟用某種模式,或者禁止啟用某種模式。
示例性的,高層語法可以是序列參數集級的高層語法,或者圖像參數集級的高層語法,或者片頭級的高層語法,或者圖像頭級的高層語法,對此高層語法不做限制。
針對序列參數集(SPS,sequence parameter set)的高層語法,存在確定整個視頻序列(即多幀視頻圖像)中是否允許某些模式(工具/方法)開關的標誌位元。例如,若標誌位元為取值A(如數值1等),則視頻序列允許啟用該標誌位元對應的模式;或者,若標誌位元為取值B(如數值0等),則視頻序列不允許啟用該標誌位元對應的模式。
針對圖像參數集(PPS,picture parameter set)的高層語法,存在確定某圖片(如視頻圖像)中是否允許某些模式(工具/方法)開關的標誌位元。若標誌位元為取值A,則視頻圖像允許啟用該標誌位元對應的模式;若標誌位元為取值B,則視頻圖像不允許啟用該標誌位元對應的模式。
針對圖像頭(picture header)的高層語法,存在某圖像頭中是否允許某些模式(工具/方法)開關的標誌位元。若標誌位元為取值A,則圖像頭允許啟用該標誌位元對應的模式;若標誌位元為取值B,則圖像頭不允許啟用該標誌位元對應的模式。示例性的,圖像頭保存的是僅針對當前圖像的共同資訊,例如,在圖像包含多個片(slice)時,多個slice可以通用圖像頭中的資訊。
針對片頭(Slice header)的高層語法,存在某個slice中是否允許某些模式(工具/方法)開關的標誌位元。若標誌位元為取值A,則slice允許啟用該標誌位元對應的模式;若標誌位元為取值B,則slice不允許啟用該標誌位元對應的模式。示例性的,一幀圖像可以包含1個slice或多個 slice,針對片頭(Slice header)的高層語法,是針對每個slice配置的高層語法。
劃分樹:參見圖1B所示,可以採用QT(Quad-tree,四叉樹)、BT(binary-tree,二叉樹)、EQT(Extended Quad-tree,擴展四叉樹)和不劃分等四種劃分類型,對當前塊進行劃分,因此,劃分樹類型就可以是QT、BT、EQT或者不劃分。示例性的,QT劃分是指將當前塊進行四叉樹劃分,得到四個尺寸相同的子塊,每個子塊的寬度和高度均為當前塊的一半。
BT劃分是指將當前塊進行二叉樹劃分,得到兩個尺寸相同的子塊,BT劃分又分為水準二叉樹劃分(BT_HOR)和垂直二叉樹劃分(BT_VER)。若為水準二叉樹劃分,則當前塊被水準劃分為兩個子塊,每個子塊的寬度與當前塊的寬度一致,每個子塊的高度為當前塊的高度的一半。若為垂直二叉樹劃分,則當前塊被垂直劃分為兩個子塊,每個子塊的寬度為當前塊的寬度的一半,每個子塊的高度與當前塊的高度一致。
EQT劃分是指將當前塊進行四叉樹劃分,得到四個子塊,但是四個子塊的尺寸並不完全相同,EQT劃分又分為水準擴展四叉樹劃分(EQT_HOR)和垂直擴展四叉樹劃分(EQT_VER)。若為EQT_HOR,尺寸為M*N的當前塊被劃分為兩個M*(N/4)和兩個(M/2)*(N/2)的子塊;若為EQT_VER,尺寸為M*N的當前塊被劃分為兩個(M/4)*N和兩個(M/2)*(N/2)的子塊。
出於硬體實現考慮,對於2*N和N*2的色度分量,硬體實現代價較大,因此,劃分時,避免色度分量出現2*N和N*2的塊。當一個塊使用一種劃分類型(QT、BT或EQT)會產生2*N或N*2的色度分量,這個塊的亮度分量繼續劃分,產生若干個亮度子分量,但色度分量不劃分,以產生一個色度分量。這種情況下,亮度分量的劃分樹類型與色度分量的劃分樹類型不一致,即亮度分量的劃分樹類型為(QT、BT或EQT),而色度分量的劃分樹類型為不劃分。
位元率-失真最佳化(Rate-Distortion Optimized,ROD):評價 編碼效率的有兩大指標:碼率和PSNR(Peak Signal to Noise Ratio,峰值信噪比),位元流越小,則壓縮率越大,PSNR越大,則重建圖像品質越好,在模式選擇時,判別公式實質上也就是對二者的綜合評價。例如,模式對應的代價:J(mode)=D+λ*R,其中,D表示Distortion(失真),通常可以使用SSE指標來進行衡量,SSE是指重建圖像塊與源圖像的差值的均方和;λ是拉格朗日乘子,R就是該模式下圖像塊編碼所需的實際比特數,包括編碼模式資訊、運動資訊、殘差等所需的比特總和。在模式選擇時,若使用RDO原則去對編碼模式做比較決策,通常可以保證編碼性能最佳。
在相關技術中,提出了幀間預測濾波和增強幀間預測濾波等實現幀間預測的技術,用於消除幀間預測導致的預測塊與周圍圖元之間的空域不連續性問題。但是,增強幀間預測濾波只用於亮度分量,不用於色度分量,導致色度分量仍然存在預測塊與周圍圖元之間的空域不連續性問題,編碼性能較差。此外,通過一個高層語法表示幀間預測濾波和增強幀間預測濾波是否開啟,即,通過一個高層語法同時控制開啟幀間預測濾波和增強幀間預測濾波,或者,通過一個高層語法同時控制關閉幀間預測濾波和增強幀間預測濾波,而無法實現幀間預測濾波和增強幀間預測濾波的分開控制,無法支持更加靈活的選擇,導致編碼性能較差。
針對上述發現,在一種可能的實施方式中,可分開控制幀間預測濾波和增強幀間預測濾波,即通過一個高層語法表示幀間預測濾波是否開啟(如開啟幀間預測濾波或者關閉幀間預測濾波),通過另一個高層語法表示增強幀間預測濾波是否開啟(如開啟增強幀間預測濾波或者關閉增強幀間預測濾波),從而支持更加靈活的選擇,提高編碼性能。
在另一種可能的實施方式中,可以採用增強幀間預測濾波對色度分量進行處理,即,採用增強幀間預測濾波對亮度分量和色度分量進行處理,從而消除幀間預測導致的預測塊與周圍圖元之間的空域不連續性問題,如消除色度分量的空域不連續性問題,提高編碼性能。
在另一種可能的實施方式中,可分開控制幀間預測濾波和增 強幀間預測濾波,即通過一個高層語法表示幀間預測濾波是否開啟(如開啟幀間預測濾波或者關閉幀間預測濾波),通過另一個高層語法表示增強幀間預測濾波是否開啟(如開啟增強幀間預測濾波或者關閉增強幀間預測濾波),從而支持更加靈活的選擇,提高編碼性能。進一步,在開啟增強幀間預測濾波時,可採用增強幀間預測濾波對色度分量進行處理,即,採用增強幀間預測濾波對亮度分量和色度分量進行處理,從而消除幀間預測導致的預測塊與周圍圖元之間的空域不連續性問題,如消除色度分量的空域不連續性問題,提高編碼性能。
示例性的,本申請實施例中的幀間預測濾波和增強幀間預測濾波,可以是針對幀間預測過程的濾波技術,而不是圖1A中的環路濾波(如去塊濾波、SAO濾波、ALF濾波、CCALF濾波等)。幀間預測濾波是指在幀間預測過程中,採用幀間預測濾波技術對幀間預測值進行濾波處理,幀間預測濾波也可以稱為聯合直接模式與幀內預測模式(UDIP,Unite Direct and Intra Mode Prediction)。增強幀間預測濾波是指在幀間預測過程中,採用增強幀間預測濾波技術對幀間預測值進行濾波處理,增強幀間預測濾波也可以稱為增強聯合直接模式與幀內預測模式(EUDIP,Enhance Unite Direct and Intra Mode Prediction)。
以下結合幾個具體實施例,對本申請實施例的解碼方法、編碼方法進行說明。
實施例1:圖2A所示為解碼方法的流程示意圖,該方法可應用於解碼端,包括:
步驟211,若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且當前塊滿足幀間預測濾波條件,則從當前塊的編碼位元流中解析所述當前塊的幀間預測濾波標識。
示例性的,若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且當前塊滿足幀間預測濾波條件,則從當前塊的編碼位元流中解析所述當前塊的幀間預測濾波標識。
示例性的,若幀間預測濾波標識指示當前塊的濾波類型為幀間預測濾波,則執行步驟212;若幀間預測濾波標識指示當前塊的濾波類型為增強幀間預測濾波,則執行步驟213;若幀間預測濾波標識指示當前塊的濾波類型為不濾波,則執行步驟214。
基於此,在步驟211之前,可以先從編碼位元流(即高層語法的碼流)中解析幀間預測濾波允許標誌位元,幀間預測濾波允許標誌位元表示允許當前塊採用幀間預測濾波,或者,不允許當前塊採用幀間預測濾波。
若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,則判斷當前塊是否滿足幀間預測濾波條件。
若當前塊不滿足幀間預測濾波條件,則禁止從當前塊的編碼位元流中解析當前塊的幀間預測濾波標識,即對當前塊不進行幀間預測濾波,也不進行增強幀間預測濾波。
若當前塊滿足幀間預測濾波條件,則從當前塊的編碼位元流中解析當前塊的幀間預測濾波標識,根據幀間預測濾波標識確定當前塊的濾波類型並進行相應處理。
示例性的,當前塊滿足幀間預測濾波條件,包括但不限於:若當前塊的幀間預測模式為直接模式,和/或,當前塊滿足尺寸限制條件,則確定當前塊滿足幀間預測濾波條件。
示例性的,在從當前塊的編碼位元流中解析當前塊的幀間預測濾波標識之後,還可以根據該幀間預測濾波標識確定當前塊的濾波類型。例如,若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,當幀間預測濾波標識為第一取值時,該幀間預測濾波標識指示當前塊的濾波類型為不濾波,即確定當前塊的濾波類型為不濾波。當幀間預測濾波標識為第二取值時,該幀間預測濾波標識指示當前塊的濾波類型為幀間預測濾波,即確定當前塊的濾波類型為幀間預測濾波。當幀間預測濾波標識為第三取值時,該幀間預測濾波標識指示當前塊的濾波類型為增強幀間預測濾波,即確定當前塊的濾波類型為增強幀間預測濾波。
第一取值、第二取值和第三取值可以根據經驗配置,對此不做限制,例如,第一取值可以為0,第二取值可以為10,第三取值可以為11,當然,上述取值只是示例。
步驟212,對當前塊進行幀間預測濾波處理,得到當前塊的目標預測值。
示例性的,在對當前塊進行幀間預測濾波處理時,可以獲取當前塊的幀間預測值和當前塊的幀內預測值,並根據該幀間預測值和該幀內預測值確定當前塊的目標預測值。
在一種可能的實施方式中,當前塊包括亮度分量和色度分量,可以對亮度分量進行幀間預測濾波處理,得到亮度分量的目標預測值;或者,對色度分量進行幀間預測濾波處理,得到色度分量的目標預測值;或者,對亮度分量進行幀間預測濾波處理,得到亮度分量的目標預測值,並對色度分量進行幀間預測濾波處理,得到色度分量的目標預測值。
步驟213,對當前塊進行增強幀間預測濾波處理,得到當前塊的目標預測值。
示例性的,在對當前塊進行增強幀間預測濾波處理時,可以獲取當前塊的幀間預測值和當前塊外部周圍的已重建圖元的重建值(如當前塊外部左側一列的重建值,和/或,上側一行的重建值),並根據該幀間預測值和該重建值確定當前塊的目標預測值。
在一種可能的實施方式中,當前塊包括亮度分量和色度分量,可以對亮度分量進行增強幀間預測濾波處理,得到亮度分量的目標預測值;或,對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值;或,對亮度分量進行增強幀間預測濾波處理,得到亮度分量的目標預測值,並對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值。
示例性的,對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值,可以包括但不限於:獲取色度分量的幀間預測值和色度 分量外部周圍的已重建圖元的色度重建值,根據色度分量的幀間預測值和該色度重建值確定色度分量的目標預測值。
示例性的,對亮度分量進行增強幀間預測濾波處理,得到亮度分量的目標預測值,可以包括但不限於:獲取亮度分量的幀間預測值和亮度分量外部周圍的已重建圖元的亮度重建值,根據亮度分量的幀間預測值和該亮度重建值確定亮度分量的目標預測值。
在一種可能的實施方式中,對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值,可以包括:若色度分量滿足增強幀間預測濾波條件,則可以對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值。進一步的,色度分量滿足增強幀間預測濾波條件,可以包括但不限於:色度分量與亮度分量屬於同一劃分樹類型。
步驟214,對當前塊不進行濾波處理,將當前塊的幀間預測值確定為目標預測值。
示例性的,在對當前塊不進行濾波處理時,可以獲取當前塊的幀間預測值,並將當前塊的幀間預測值確定為當前塊的目標預測值,而不需要對幀間預測值進行濾波處理。
實施例2:參見圖2B所示,為編碼方法的流程示意圖,可應用於編碼端,該方法包括:
步驟221,若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且當前塊滿足幀間預測濾波條件,則根據當前塊的濾波類型在當前塊的編碼位元流中編碼幀間預測濾波標識。
示例性的,若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且當前塊滿足幀間預測濾波條件,則根據當前塊的濾波類型在當前塊的編碼位元流中編碼幀間預測濾波標識。
示例性的,若當前塊的濾波類型為幀間預測濾波,則該幀間預測濾波標識指示當前塊的濾波類型為幀間預測濾波:或者,若當前塊的濾波 類型為增強幀間預測濾波,則該幀間預測濾波標識指示當前塊的濾波類型為增強幀間預測濾波;或者,若當前塊的濾波類型為不濾波,則該幀間預測濾波標識指示當前塊的濾波類型為不濾波。
基於此,在步驟221之前,編碼端可以先在編碼位元流(即高層語法的碼流)中編碼幀間預測濾波允許標誌位元,幀間預測濾波允許標誌位元表示允許當前塊採用幀間預測濾波,或者,不允許當前塊採用幀間預測濾波。
若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,則判斷當前塊是否滿足幀間預測濾波條件。
若當前塊不滿足幀間預測濾波條件,則禁止在當前塊的編碼位元流中編碼當前塊的幀間預測濾波標識,即對當前塊不進行幀間預測濾波,對當前塊也不進行增強幀間預測濾波。
若當前塊滿足幀間預測濾波條件,則在當前塊的編碼位元流中編碼當前塊的幀間預測濾波標識,比如說,根據當前塊的濾波類型在當前塊的編碼位元流中編碼幀間預測濾波標識。
示例性的,當前塊滿足幀間預測濾波條件,可以包括但不限於:若當前塊的幀間預測模式為直接模式,和/或,當前塊滿足尺寸限制條件,則確定當前塊滿足幀間預測濾波條件。
示例性的,根據當前塊的濾波類型在當前塊的編碼位元流中編碼幀間預測濾波標識,可以包括但不限於:若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,則編碼端在當前塊的濾波類型為不濾波時,在當前塊的編碼位元流中將幀間預測濾波標識編碼為第一取值,幀間預測濾波標識指示當前塊的濾波類型為不濾波。在當前塊的濾波類型為幀間預測濾波時,編碼端在當前塊的編碼位元流中將幀間預測濾波標識編碼為第二取值,幀間預測濾波標識指示當前塊的濾波類型為幀間預測濾波。在當前塊的濾波類型為增強幀間預測濾波時,編碼端在當前塊的編碼位元流中將幀間預測濾波標識編碼為第三取值,幀間預測濾波標識指示當前塊的濾波 類型為增強幀間預測濾波。第一取值、第二取值和第三取值可根據經驗配置,對此不做限制,例如,第一取值可以為0,第二取值可以為10,第三取值可以為11。
在一種可能的實施方式中,在根據當前塊的濾波類型在當前塊的編碼位元流中編碼幀間預測濾波標識之前,可以採用如下方式確定當前塊的濾波類型:對當前塊進行幀間預測濾波處理,得到當前塊的第一目標預測值;對當前塊進行增強幀間預測濾波處理,得到當前塊的第二目標預測值;對當前塊不進行濾波處理,將當前塊的幀間預測值確定為第三目標預測值。進一步的,可以根據第一目標預測值對應的率失真代價值,第二目標預測值對應的率失真代價值,第三目標預測值對應的率失真代價值,確定當前塊的濾波類型。
例如,若第一目標預測值對應的率失真代價值為最小的率失真代價值,則可以確定當前塊的濾波類型為幀間預測濾波。若第二目標預測值對應的率失真代價值為最小的率失真代價值,則可以確定當前塊的濾波類型為增強幀間預測濾波。若第三目標預測值對應的率失真代價值為最小的率失真代價值,則可以確定當前塊的濾波類型為不濾波。
示例性的,在對當前塊進行幀間預測濾波處理時,可以獲取當前塊的幀間預測值和當前塊的幀內預測值,並根據該幀間預測值和該幀內預測值確定當前塊的第一目標預測值。
例如,當前塊包括亮度分量和色度分量,可對亮度分量進行幀間預測濾波處理,得到亮度分量的第一目標預測值;或者,對色度分量進行幀間預測濾波處理,得到色度分量的第一目標預測值;或者,對亮度分量進行幀間預測濾波處理,得到亮度分量的第一目標預測值,並對色度分量進行幀間預測濾波處理,得到色度分量的第一目標預測值。
示例性的,在對當前塊進行增強幀間預測濾波處理時,可獲取當前塊的幀間預測值和當前塊外部周圍的已重建圖元的重建值(如當前塊外部左側一列的重建值,和/或,上側一行的重建值),並根據該幀間預測 值和該重建值確定當前塊的第二目標預測值。
例如,當前塊包括亮度分量和色度分量,可以對亮度分量進行增強幀間預測濾波處理,得到亮度分量的第二目標預測值;或,對色度分量進行增強幀間預測濾波處理,得到色度分量的第二目標預測值;或,對亮度分量進行增強幀間預測濾波處理,得到亮度分量的第二目標預測值,並對色度分量進行增強幀間預測濾波處理,得到色度分量的第二目標預測值。
對色度分量進行增強幀間預測濾波處理,得到色度分量的第二目標預測值,可以包括但不限於:獲取色度分量的幀間預測值和色度分量外部周圍的已重建圖元的色度重建值,根據色度分量的幀間預測值和該色度重建值確定色度分量的第二目標預測值。
對亮度分量進行增強幀間預測濾波處理,得到亮度分量的第二目標預測值,可以包括但不限於:獲取亮度分量的幀間預測值和亮度分量外部周圍的已重建圖元的亮度重建值,根據亮度分量的幀間預測值和該亮度重建值確定亮度分量的第二目標預測值。
對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值,可以包括但不限於如下方式:若色度分量滿足增強幀間預測濾波條件,則可以對色度分量進行增強幀間預測濾波處理,得到色度分量的第二目標預測值。進一步的,色度分量滿足增強幀間預測濾波條件,可以包括但不限於:色度分量與亮度分量屬於同一劃分樹類型。
示例性的,在對當前塊不進行濾波處理時,可獲取當前塊的幀間預測值,並將當前塊的幀間預測值確定為當前塊的第三目標預測值,而不需要對幀間預測值進行濾波處理。
步驟222,向解碼端發送針對當前塊的編碼位元流,該編碼位元流包括幀間預測濾波標識,該幀間預測濾波標識指示當前塊的濾波類型為幀間預測濾波,或者,指示當前塊的濾波類型為增強幀間預測濾波,或者,指示當前塊的濾波類型為不濾波。
實施例3:參見圖2C所示,為編解碼方法的流程示意圖,可應用於編碼端或者解碼端,編碼端通過該方法實現編碼流程,解碼端通過該方法實現解碼流程,該方法可包括:
步驟231,若確定對當前塊啟用增強幀間預測濾波,則對當前塊的色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值。
步驟232,根據色度分量的目標預測值,確定當前塊的目標預測值。
示例性的,當前塊包括亮度分量和色度分量,若確定對當前塊啟用增強幀間預測濾波,則對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值,並根據色度分量的目標預測值確定當前塊的目標預測值。或者,對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值,並對亮度分量進行增強幀間預測濾波處理,得到亮度分量的目標預測值,並根據色度分量的目標預測值和亮度分量的目標預測值確定當前塊的目標預測值。
示例性的,對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值,可以包括但不限於:獲取色度分量的幀間預測值和色度分量外部周圍的已重建圖元的色度重建值,根據色度分量的幀間預測值和該色度重建值確定色度分量的目標預測值。
示例性的,對亮度分量進行增強幀間預測濾波處理,得到亮度分量的目標預測值,可以包括但不限於:獲取亮度分量的幀間預測值和亮度分量外部周圍的已重建圖元的亮度重建值,根據亮度分量的幀間預測值和該亮度重建值確定亮度分量的目標預測值。
示例性的,對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值,可包括但不限於:若色度分量滿足增強幀間預測濾波條件,則可對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值。進一步的,色度分量滿足增強幀間預測濾波條件,可以包括但不限於:色度分量與亮度分量屬於同一劃分樹類型。
基於上述技術方案,本申請實施例中,可以採用增強幀間預測濾波對色度分量進行處理,即採用增強幀間預測濾波對亮度分量和色度分量進行處理,從而消除幀間預測導致的預測塊與周圍圖元之間的空域不連續性問題,消除色度分量的空域不連續性問題,提高編碼性能。
實施例4:編碼端可以先獲取高層語法,該高層語法可以包括幀間預測濾波允許標誌位元,對此獲取方式不做限制,只要能夠得到幀間預測濾波允許標誌位元即可。幀間預測濾波允許標誌位元,可以是序列參數集級的標誌位元,或者,圖像參數集級的標誌位元,或者,片頭級的標誌位元,或者,圖像頭級的標誌位元,對此標誌位元的高層語法類型不做限制。
幀間預測濾波允許標誌位元允許採用幀間預測濾波,或者,不允許採用幀間預測濾波。例如,幀間預測濾波允許標誌位元為取值A(如數值1)時,允許採用幀間預測濾波,幀間預測濾波允許標誌位元為取值B(如數值0)時,不允許採用幀間預測濾波。
示例性的,若幀間預測濾波允許標誌位元允許採用幀間預測濾波,則編碼端/解碼端對當前塊進行處理時,確定幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波。若幀間預測濾波允許標誌位元不允許採用幀間預測濾波,則對當前塊進行處理時,確定幀間預測濾波允許標誌位元不允許當前塊採用幀間預測濾波。
綜上所述,編碼端/解碼端能夠獲知幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,或不允許當前塊採用幀間預測濾波。
基於上述過程,參見圖3所示,本申請實施例中提出的編解碼方法,可以包括:
步驟301,編碼端判斷幀間預測濾波允許標誌位元是否允許當前塊採用幀間預測濾波。
若幀間預測濾波允許標誌位元不允許當前塊採用幀間預測濾波,則禁止在當前塊的編碼位元流中編碼當前塊的幀間預測濾波標識,即對 當前塊不進行幀間預測濾波,對當前塊也不進行增強幀間預測濾波。
若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,則執行步驟302。
步驟302,編碼端判斷當前塊是否滿足幀間預測濾波條件。
若當前塊不滿足幀間預測濾波條件,則禁止在當前塊的編碼位元流中編碼當前塊的幀間預測濾波標識,即對當前塊不進行幀間預測濾波,對當前塊也不進行增強幀間預測濾波。
若當前塊滿足幀間預測濾波條件,則執行步驟303。
確定當前塊滿足幀間預測濾波條件的過程,可以包括但不限於:若當前塊的幀間預測模式為直接模式,和/或,當前塊滿足尺寸限制條件,則確定當前塊滿足幀間預測濾波條件。
在一種可能的實施方式中,幀間預測模式可以包括但不限於普通幀間模式、跳過模式和直接模式等,在此基礎上,若當前塊的幀間預測模式為直接模式,則可以確定當前塊滿足幀間預測濾波條件,否則,確定當前塊不滿足幀間預測濾波條件。或者,若當前塊的幀間預測模式不為普通幀間模式,也不為跳過模式時,則可以確定當前塊滿足幀間預測濾波條件,若當前塊的幀間預測模式為普通幀間模式或跳過模式,則確定當前塊不滿足幀間預測濾波條件。
示例性的,直接模式可以包括但不限於:普通直接模式、Affine模式、SbTMVP模式、UMVE模式、幀間預測濾波模式、TPM模式、GEO模式等。在此基礎上,若當前塊的幀間預測模式是直接模式下的幀間預測濾波模式,則可以確定當前塊滿足幀間預測濾波條件,若當前塊的幀間預測模式不是直接模式下的幀間預測濾波模式,則可以確定當前塊不滿足幀間預測濾波條件。或者,若當前塊的幀間預測模式不是直接模式下的UMVE模式,也不是直接模式下的Affine模式,則可以確定當前塊滿足幀間預測濾波條件,若當前塊的幀間預測模式是直接模式下的UMVE模式或Affine模 式,則可以確定當前塊不滿足幀間預測濾波條件。
在另一種可能的實施方式中,若當前塊滿足尺寸限制條件,則確定當前塊滿足幀間預測濾波條件,若當前塊不滿足尺寸限制條件,則確定當前塊不滿足幀間預測濾波條件。
當前塊滿足尺寸限制條件,可以包括但不限於:當前塊的寬度小於或者等於第一數值(可以根據經驗配置,對此不做限制,如64、128等),當前塊的高度小於或者等於第二數值(可以根據經驗配置,對此不做限制,如64、128等),當前塊的面積大於或者等於第三數值(可以根據經驗配置,對此不做限制,如64、128等)。當然,上述只是示例,對此不做限制。
例如,若當前塊的寬度小於或者等於64,當前塊的高度小於或者等於64,且當前塊的面積(即寬度*高度)大於或者等於64,則可以確定當前塊滿足尺寸限制條件。
在另一種可能的實施方式中,若當前塊的幀間預測模式為直接模式(如直接模式下的幀間預測濾波模式),且當前塊滿足尺寸限制條件,則確定當前塊滿足幀間預測濾波條件。
步驟303,編碼端確定當前塊的濾波類型。當前塊的濾波類型可為不濾波,或,當前塊的濾波類型可為幀間預測濾波,或,當前塊的濾波類型可為增強幀間預測濾波。
確定當前塊的濾波類型的具體方式,可以參見上述實施例2,在此不再贅述。
示例性的,當前塊可以包括亮度分量和色度分量,在對當前塊進行增強幀間預測濾波處理時,可對亮度分量進行增強幀間預測濾波處理,得到亮度分量的第二目標預測值;或者,可對色度分量進行增強幀間預測濾波處理,得到色度分量的第二目標預測值;或者,可對亮度分量進行增強幀間預測濾波處理,得到亮度分量的第二目標預測值,並可以對色度分量進行增強幀間預測濾波處理,得到色度分量的第二目標預測值。
示例性的,在對色度分量進行增強幀間預測濾波處理時,若該色度分量滿足增強幀間預測濾波條件,則可以對色度分量進行增強幀間預測濾波處理,若該色度分量不滿足增強幀間預測濾波條件,則禁止對色度分量進行增強幀間預測濾波處理。進一步的,色度分量滿足增強幀間預測濾波條件,可以包括但不限於:色度分量與亮度分量屬於同一劃分樹類型。
在一種可能的實施方式中,若色度分量與亮度分量屬於同一劃分樹類型,則確定色度分量滿足增強幀間預測濾波條件,若色度分量與亮度分量屬於不同劃分樹類型,則確定色度分量不滿足增強幀間預測濾波條件。
示例性的,若至少滿足以下條件之一,則確定色度分量與亮度分量屬於不同劃分樹類型,否則,確定色度分量與亮度分量屬於同一劃分樹類型:
當前塊為QT劃分樹類型,且當前塊的寬度或高度等於預設數值A(如8);
當前塊為BT_VER劃分樹類型,且當前塊的寬度等於預設數值B(如8);
當前塊為BT_HOR劃分樹類型,且當前塊的高度等於預設數值C(如8);
當前塊為EQT_VER劃分樹類型,且當前塊的寬度等於預設數值D(如16);
當前塊為EQT_VER劃分樹類型,且當前塊的高度等於預設數值E(如8);
當前塊為EQT_HOR劃分樹類型,且當前塊的高度等於預設數值F(如16);
當前塊為EQT_HOR劃分樹類型,且當前塊的寬度等於預設數值G(如8)。
步驟304,編碼端根據幀間預測濾波允許標誌位元以及當前塊的濾波類型,確定當前塊的幀間預測濾波標識。若當前塊的濾波類型為幀間預測濾波,則幀間預測濾波標識指示當前塊的濾波類型為幀間預測濾波;若當前塊的濾波類型為增強幀間預測濾波,則幀間預測濾波標識指示當前塊的濾波類型為增強幀間預測濾波;若當前塊的濾波類型為不濾波,則幀間預測濾波標識指示當前塊的濾波類型為不濾波。
步驟305,編碼端在當前塊的編碼位元流中編碼該幀間預測濾波標識。
示例性的,幀間預測濾波標識的確定和編碼過程,參見上述實施例2,在此不再贅述。
步驟306,編碼端將當前塊的編碼位元流發送給解碼端。
示例性的,在當前塊的編碼位元流中,除了包括幀間預測濾波標識,還可包括其它與當前塊有關的內容,如運動資訊有關的內容、重建值有關的內容等,對此不做限制。
示例性的,上述過程介紹了編碼端流程,針對解碼端流程,還可以包括(在圖中未示出):
步驟307,解碼端收到編碼位元流後,判斷幀間預測濾波允許標誌位元是否允許當前塊採用幀間預測濾波。
若幀間預測濾波允許標誌位元不允許當前塊採用幀間預測濾波,則禁止從當前塊的編碼位元流中解析當前塊的幀間預測濾波標識,即對當前塊不進行幀間預測濾波,對當前塊也不進行增強幀間預測濾波。
若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,則執行步驟308。
步驟308,解碼端判斷當前塊是否滿足幀間預測濾波條件。
若當前塊不滿足幀間預測濾波條件,則禁止從當前塊的編碼位元流中解析當前塊的幀間預測濾波標識,即對當前塊不進行幀間預測濾 波,對當前塊也不進行增強幀間預測濾波。
若當前塊滿足幀間預測濾波條件,則執行步驟309。
步驟309,解碼端從當前塊的編碼位元流中解析當前塊的幀間預測濾波標識。
步驟310,解碼端根據該幀間預測濾波允許標誌位元以及該幀間預測濾波標識,確定當前塊的濾波類型。
示例性的,濾波類型的確定過程,可以參見上述實施例1,在此不再贅述。
示例性的,若當前塊的濾波類型為幀間預測濾波,則執行步驟311;若當前塊的濾波類型為增強幀間預測濾波,則執行步驟312;若當前塊的濾波類型為不濾波,則執行步驟313。
步驟311,解碼端對當前塊進行幀間預測濾波處理,得到當前塊的目標預測值。
步驟312,解碼端對當前塊進行增強幀間預測濾波處理,得到當前塊的目標預測值。
在一種可能的實施方式中,當前塊包括亮度分量和色度分量,可以對亮度分量進行增強幀間預測濾波處理,得到亮度分量的目標預測值;或,對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值;或,對亮度分量進行增強幀間預測濾波處理,得到亮度分量的目標預測值,並對色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值。
步驟313,解碼端對當前塊不進行濾波處理,將當前塊的幀間預測值確定為目標預測值。
基於步驟311,或步驟312,或步驟313,解碼端可以得到當前塊的目標預測值,基於當前塊的目標預測值可以確定當前塊的重建值,對此確定過程不做限制。
此外,上述方案可以採用增強幀間預測濾波對色度分量進行 處理,即採用增強幀間預測濾波對亮度分量和色度分量進行處理,從而消除幀間預測導致的預測塊與周圍圖元之間的空域不連續性問題,如消除色度分量的空域不連續性問題,提高編碼性能。
本申請實施例中,增強幀間預測濾波可以支援色度分量,例如,對於滿足增強幀間預測濾波條件的色度分量,可以採用增強幀間預測濾波技術對色度分量進行處理。
示例性的,針對編碼端來說,若幀間預測濾波允許標誌位元(也稱為幀間預測濾波使能標誌位元,後續記為interpf_enable_flag,也可以記為udip_enable_flag)允許當前塊採用幀間預測濾波,並且,當前塊滿足幀間預測濾波條件,則編碼端可以通過RDO的方式,從不濾波、幀間預測濾波和增強幀間預測濾波中選擇一種濾波類型,並編碼該濾波類型對應的幀間預測濾波標識,即在編碼位元流中攜帶該幀間預測濾波標識。
示例性的,針對解碼端來說,若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,並且,當前塊滿足幀間預測濾波條件,則解碼端可以從當前塊的編碼位元流中解析出當前塊的幀間預測濾波標識,並根據該幀間預測濾波標識確定當前塊的濾波類型。若濾波類型為幀間預測濾波,則解碼端對當前塊進行幀間預測濾波處理,得到目標預測值。若濾波類型為增強幀間預測濾波,則解碼端對當前塊進行增強幀間預測濾波處理,得到目標預測值。若濾波類型為不濾波,則解碼端對當前塊不進行濾波處理,將當前塊的幀間預測值確定為目標預測值。
實施例5:增強幀間預測濾波支持色度分量,例如,可對所有色度分量進行增強幀間預測濾波,也可對滿足增強幀間預測濾波條件的色度分量進行增強幀間預測濾波。
在實施例5中,編碼端可以獲取幀間預測濾波允許標誌位元(interpf_enable_flag)。編碼端可以通過編碼位元流將幀間預測濾波允許標誌位元發送給解碼端,使得解碼端可以獲取幀間預測濾波允許標誌位元。在此基礎上,通過幀間預測濾波允許標誌位元,能夠控制幀間預測濾波和增強 幀間預測濾波是否開啟。例如,當幀間預測濾波允許標誌位元為取值A(如1)時,能夠控制開啟幀間預測濾波和增強幀間預測濾波,當幀間預測濾波允許標誌位元為取值B(如0)時,能夠控制關閉幀間預測濾波和增強幀間預測濾波。在後續實施例中,可以以取值A為1,取值B為0為例進行說明。
針對編碼端來說,先確定interpf_enable_flag的取值,若interpf_enable_flag的取值為1,則允許當前塊採用幀間預測濾波和增強幀間預測濾波。若interpf_enable_flag的取值為0,則不允許當前塊採用幀間預測濾波和增強幀間預測濾波。進一步的,若允許當前塊採用幀間預測濾波和增強幀間預測濾波,則編碼端可以判斷當前塊是否滿足幀間預測濾波條件。
如果當前塊滿足幀間預測濾波條件,則編碼端可以通過RDO的方式,從不濾波、幀間預測濾波和增強幀間預測濾波中選擇一種濾波類型,將該濾波類型作為當前塊的濾波類型,並編碼該濾波類型對應的幀間預測濾波標識,即在編碼位元流中攜帶該幀間預測濾波標識。
示例性的,編碼端通過RDO的方式,從不濾波、幀間預測濾波和增強幀間預測濾波中選擇一種濾波類型時,可以採用如下方式:編碼端對當前塊進行幀間預測濾波處理,得到當前塊的第一目標預測值;對當前塊進行增強幀間預測濾波處理,得到當前塊的第二目標預測值;對當前塊不進行濾波處理,將當前塊的幀間預測值確定為第三目標預測值。若第一目標預測值對應的率失真代價值為最小的率失真代價值,則確定濾波類型為幀間預測濾波。若第二目標預測值對應的率失真代價值為最小的率失真代價值,則確定濾波類型為增強幀間預測濾波。若第三目標預測值對應的率失真代價值為最小的率失真代價值,則確定濾波類型為不濾波。
編碼端對當前塊進行幀間預測濾波處理,得到當前塊的第一目標預測值時,編碼端可以對當前塊的亮度分量進行幀間預測濾波處理,得到亮度分量的第一目標預測值,並可以對當前塊的色度分量進行幀間預測濾波處理,得到色度分量的第一目標預測值。
編碼端對當前塊進行增強幀間預測濾波處理,得到當前塊的第二目標預測值時,編碼端可以對當前塊的亮度分量進行增強幀間預測濾波處理,得到亮度分量的第二目標預測值,並對當前塊的色度分量進行增強幀間預測濾波處理,得到色度分量的第二目標預測值。
編碼端在對當前塊的色度分量進行增強幀間預測濾波處理時,編碼端可先判斷該色度分量是否滿足增強幀間預測濾波條件,若該色度分量滿足增強幀間預測濾波條件,則編碼端對該色度分量進行增強幀間預測濾波處理,得到色度分量的第二目標預測值。
示例性的,編碼端編碼該濾波類型對應的幀間預測濾波標識時,可以參見表1所示,若當前塊的濾波類型為不濾波,則編碼幀間預測濾波標識的第一個比特位為0。若當前塊的濾波類型為幀間預測濾波或者增強幀間預測濾波,則編碼幀間預測濾波標識的第一個比特位為1,若當前塊的濾波類型為幀間預測濾波,則編碼幀間預測濾波標識的第二個比特位為0,若當前塊的濾波類型為增強幀間預測濾波,則編碼幀間預測濾波標識的第二個比特位為1。
Figure 110110698-A0202-12-0029-1
從表1可以看出,若當前塊的濾波類型為不濾波,則幀間預測濾波標識為0,且“不濾波”對應的濾波方式索引為0。若當前塊的濾波類型為幀間預測濾波,則幀間預測濾波標識為10,且“幀間預測濾波”對應的濾波方式索引為1。若當前塊的濾波類型為增強幀間預測濾波,則幀間預測濾波標識為11,且“增強幀間預測濾波”對應的濾波方式索引為2。
針對解碼端來說,從編碼位元流中解析出interpr_enable_flag的取值,若interpf_enable_flag的取值為1,則允許當前塊採用幀間預測濾波和增強幀間預測濾波。若interpf_enable_flag的取值為0,則不允許當前 塊採用幀間預測濾波和增強幀間預測濾波。進一步的,若允許當前塊採用幀間預測濾波和增強幀間預測濾波,則解碼端可以判斷當前塊是否滿足幀間預測濾波條件。如果當前塊滿足幀間預測濾波條件,則解碼端可以從當前塊的編碼位元流中解析出當前塊的幀間預測濾波標識,並根據幀間預測濾波標識確定當前塊的濾波類型。
例如,參見表1所示,解碼端解碼幀間預測濾波標識的第一個比特位,若第一個比特位為0,即幀間預測濾波標識為0,確定當前塊的濾波類型為不濾波,若第一個比特位不為0(第一個比特位為1),則解碼幀間預測濾波標識的第二個比特位,若第二個比特位為零,即幀間預測濾波標識為10,確定當前塊的濾波類型為幀間預測濾波,若第二個比特位不為0(第二個比特位為1),即幀間預測濾波標識為11,確定當前塊的濾波類型為增強幀間預測濾波。
從表1可看出,若幀間預測濾波標識為0,則確定濾波方式索引為0,與該濾波方式索引0對應的濾波類型為不濾波。若幀間預測濾波標識為10,則確定濾波方式索引為1,與該濾波方式索引1對應的濾波類型為幀間預測濾波。若幀間預測濾波標識為11,則確定濾波方式索引為2,與該濾波方式索引2對應的濾波類型為增強幀間預測濾波。
若當前塊的濾波類型為不濾波,則解碼端可以對當前塊不進行濾波處理,將當前塊的幀間預測值確定為目標預測值。若當前塊的濾波類型為幀間預測濾波,則解碼端可以對當前塊進行幀間預測濾波處理,得到當前塊的目標預測值,若當前塊的濾波類型為增強幀間預測濾波,則解碼端可以對當前塊進行增強幀間預測濾波處理,得到當前塊的目標預測值。
解碼端對當前塊進行幀間預測濾波處理,得到當前塊的目標預測值時,解碼端可以對當前塊的亮度分量進行幀間預測濾波處理,得到亮度分量的目標預測值,並可以對當前塊的色度分量進行幀間預測濾波處理,得到色度分量的目標預測值。
解碼端對當前塊進行增強幀間預測濾波處理,得到當前塊的 目標預測值時,解碼端可以對當前塊的亮度分量進行增強幀間預測濾波處理,得到亮度分量的目標預測值,並對當前塊的色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值。
解碼端在對當前塊的色度分量進行增強幀間預測濾波處理時,解碼端可以先判斷該色度分量是否滿足增強幀間預測濾波條件,若該色度分量滿足增強幀間預測濾波條件,則解碼端對該色度分量進行增強幀間預測濾波處理,得到色度分量的目標預測值。
在上述實施例中,針對編碼端和解碼端來說,當前塊滿足的幀間預測濾波條件,可以包括但不限於:當前塊為Direct模式(非Skip模式和非普通幀間模式),且當前塊不使用UMVE模式或者AFFINE模式,並且,當前塊滿足尺寸限制條件。
在上述實施例中,針對編碼端和解碼端來說,可以對所有色度分量進行增強幀間預測濾波,也可以對滿足增強幀間預測濾波條件的色度分量進行增強幀間預測濾波,如色度分量與亮度分量屬於同一劃分樹類型時,色度分量滿足增強幀間預測濾波條件。
實施例6:在實施例1-實施例5的任一實施例中,涉及編碼端/解碼端對當前塊進行幀間預測濾波處理,得到當前塊的目標預測值,以下對幀間預測濾波(interpf)的實現過程進行說明。幀間預測濾波可以應用於Direct模式,在Direct模式下獲取幀間預測值,並採用幀內預測模式獲取幀內預測值,最後將幀間預測值和幀內預測值進行加權獲取最終的目標預測值,幀間預測濾波能夠消除幀間預測導致的預測塊與周圍圖元之間的空域不連續性問題。
參見圖4所示,為包含幀間預測濾波的解碼過程示意圖,這裡以解碼端的解碼過程為例進行說明,而編碼端的編碼過程與此類似。幀間預測濾波在幀間預測過程與重建過程之間進行,幀間預測濾波主要針對Direct模式(非Skip模式和非普通幀間模式)的當前塊,並且該當前塊不使用UMVE模式或者當前塊不使用AFFINE模式。
如果需要對當前塊使用幀間預測濾波,則可以先採用幀間預測模式獲取當前塊的幀間預測值,並採用幀內預測模式獲取當前塊的幀內預測值。然後,根據該幀間預測值和該幀內預測值確定當前塊的目標預測值,基於當前塊的目標預測值完成重建過程。如果不需要對當前塊使用幀間預測濾波,則可以先採用幀間預測模式獲取當前塊的幀間預測值,然後,將當前塊的幀間預測值確定為當前塊的目標預測值,基於當前塊的目標預測值完成重建過程。
示例性的,針對當前塊的每個圖元位置,可採用幀間預測模式獲取該圖元位置的幀間預測值,並可採用幀內預測模式(例如,Plane模式、DC模式、任意角度的模式等,對此幀內預測模式不做限制)獲取該圖元位置的幀內預測值,並對該圖元位置的幀間預測值和該圖元位置的幀內預測值進行加權運算,得到該圖元位置的目標預測值。然後,將當前塊的所有圖元位置的目標預測值組合在一起,就可得到當前塊的目標預測值。
在一種可能的實施方式中,針對當前塊的每個圖元位置,假設採用Plane模式獲取該圖元位置的幀內預測值,則可以採用如下公式獲取該圖元位置的幀內預測值:
Pred_Q(x,y)=(Pred_V(x,y)+Pred_H(x,y)+1)>>2
Pred_V(x,y)=((h-1-y)*Recon(x,-1)+(y+1)*Recon(-1,h)+(h>>1))>>log2(h)
Pred_H(x,y)=((w-1-x)*Recon(-1,y)+(x+1)*Recon(w,-1)+(w>>1))>>log2(w)
上述公式中,Pred_Q(x,y)表示圖元位置(x,y)的幀內預測值,w和h為當前塊的寬度和高度,x和y為當前塊內的相對座標,Recon(x,y)為當前塊周圍的已重建圖元值。
在一種可能的實施方式中,針對當前塊的每個圖元位置,基於幀間預測值(Pred_inter)和幀內預測值(pred_Q)進行5:3加權,得到該圖元位置的目標預測值,當然,5:3只是一個示例,還可以採用其它加權係數。例如,可以採用如下公式獲取該圖元位置的目標預測值:
Pred(x,y)=(Pred_inter(x,y)*5+Pred_Q(x,y)*3+4)>>3
在上述公式中,Pred(x,y)可以表示圖元位置(x,y)的目標預測值,Pred_inter(x,y)可表示圖元位置(x,y)的幀間預測值,Pred_Q(x,y)可以表示圖元位置(x,y)的幀內預測值。
實施例7:在實施例1-實施例5的任一實施例中,涉及編碼端/解碼端對當前塊進行增強幀間預測濾波處理,得到當前塊的目標預測值,以下對增強幀間預測濾波(enhance interpf)的實現過程進行說明。在對當前塊進行增強幀間預測濾波處理時,可以獲取當前塊的幀間預測值和當前塊外部周圍的已重建圖元的重建值(如當前塊外部左側一列的重建值,和/或,上側一行的重建值),並根據該幀間預測值和該重建值確定當前塊的目標預測值。
增強幀間預測濾波來源於幀內預測濾波(intra prediction filter,IPF),通過將幀內預測濾波引入到幀間預測濾波中,就可以對當前塊進行增強幀間預測濾波,從而可以更有效去除運動補償後的雜訊及不連續性。由於增強幀間預測濾波來源於幀內預測濾波,因此,先介紹與幀內預測濾波有關的內容,幀內預測濾波可以使用1比特表示是否允許對當前塊使用幀內預測濾波,可以在RDO階段確定是否需要對當前塊使用幀內預測濾波。另外,幀內預測濾波技術需要根據當前塊的幀內預測模式選擇參考圖元,可以分為以下三種情況。
情況1:對於DC模式、Plane模式和雙線性的(Bilinear)模式,使用左側的一列重建圖元和上側的一行重建圖元作為參考圖元,使用3抽頭濾波器,如可以採用如下公式進行幀內預測濾波:
P'(x,y)=f(x).P(-1,y)+f(y).P(x,-1)+(1-f(x)-f(y)).P(x,y)
在上述公式中,0
Figure 110110698-A0202-12-0033-16
x,y<NP'(x,y)為濾波後的幀內預測值,P(x,y)為常規幀內預測模式得到的幀內預測值,f(x)和f(y)為濾波係數,N為當前塊的尺寸。
情況2:對於HPM中的豎直預測模式(如模式3~模式18),使用左側的一列重建圖元作為參考圖元,使用2抽頭濾波器,例如,可採用如下公式進行幀內預測濾波:
P'(x,y)=f(x).P(-1,y)+(1-f(x)).P(x,y)
在上述公式中,x<NP'(x,y)可以為濾波後的幀內預測值,P(x,y)可以為常規幀內預測模式得到的幀內預測值,f(x)和f(y)可以為濾波係數,N為當前塊的尺寸。
情況3:對於HPM中的水準預測模式(如模式19~模式32),使用上側的一行重建圖元作為參考圖元,使用2抽頭濾波器,例如,可採用如下公式進行幀內預測濾波:
P'(x,y)=f(y).P(x,-1)+(1-f(y)).P(x,y)
在上述公式中,y<NP'(x,y)可以為濾波後的幀內預測值,P(x,y)可以為常規幀內預測模式得到的幀內預測值,f(x)和f(y)可以為濾波係數,N為當前塊的尺寸。
示例性的,針對情況1、情況2和情況3,為了避免浮點運算,還可以將濾波係數定點化,如針對情況1的幀內預測濾波公式,可以替換為如下公式,在如下公式中,F(x)和F(y)是定點化之後的係數,即將f(x)和f(y)轉換為F(x)和F(y),情況2和情況3類似,在此不再贅述。
p'(x)=(F(x).p(-1,y)+F(y).p(x,-1)+(64-F(x)-F(y)).p(x)+32)≫6
示例性的,F(x)和F(y)可以為濾波係數(即經過放大之後的濾波器係數),參見表2所示,示出了濾波係數的一個示例,該濾波係數與塊尺寸和距離參考圖元的距離均有關係。在表2中,預測塊尺寸表示當前塊的寬度或者高度,距離參考圖元的距離表示預測距離,表2中將最大預測距離設為10,在實際應用中,最大預測距離還可以更大,對此不做限制。
Figure 110110698-A0202-12-0035-2
例如,參見圖5所示,針對當前塊的第一行第3列的圖元位置A,假設參考圖元為左側的一列重建圖元,則圖元位置A與參考圖元的距離為3,假設當前塊的尺寸為4*4,則濾波係數為2,假設當前塊的尺寸為8*8,則濾波係數為14,假設當前塊的尺寸為16*16,則濾波係數為19,假設當前塊的尺寸為32*32,則濾波係數為21,以此類推。針對其它圖元位置,濾波係數的確定方式與圖元位置A的濾波係數的確定方式類似,在此不再贅述。
示例性的,通過將幀內預測濾波引入到幀間預測濾波中,就可以對當前塊進行增強幀間預測濾波,即在幀間預測濾波中新增一種濾波方式,即增強幀間預測濾波,增強幀間預測濾波在編解碼複雜度不發生變化的情況下,可提升編碼性能。可以使用一個幀間預測濾波標識表示是否使用增強幀間預測濾波,接著需要通過一個索引標識表示選擇的濾波類型。
參見圖4所示,為包含增強幀間預測濾波的解碼過程示意圖,這裡以解碼端的解碼過程為例進行說明,而編碼端的編碼過程與此類似。增強幀間預測濾波在幀間預測過程與重建過程之間進行,增強幀間預測濾波主要針對Direct模式(非Skip模式和非普通幀間模式)的當前塊,且該當前塊不使用UMVF模式或不使用AFFINE模式。
如果需要對當前塊使用增強幀間預測濾波,則可以先採用幀間預測模式獲取當前塊的幀間預測值,並獲取當前塊外部周圍的已重建圖元的重建值(如當前塊外部左側一列的重建值,和/或,上側一行的重建值)。然後,根據該幀間預測值和該重建值確定當前塊的目標預測值,基於當前塊的目標預測值完成重建過程。例如,可以採用上述情況3中的公式,實現原理類似,對此不做限制。
示例性的,上述實施例1-實施例7可以單獨實現,也可以組合實現。例如,實施例1和實施例2可以組合實現,實施例1和實施例3可以組合實現,實施例2和實施例3可以組合實現,實施例3和實施例5可以組合實現,實施例1和實施例6、實施例7可以組合實現。當然,上述只是幾個示例,對此實施例之間的組合方式不做限制。
基於與上述方法同樣的申請構思,本申請實施例還提出一種解碼裝置,應用於解碼端,如圖6A所示為所述裝置的結構圖,所述裝置包括:獲取模組611,用於若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則從所述當前塊的編碼位元流中解析所述當前塊的幀間預測濾波標識;處理模組612,用於若所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波,則對所述當前塊進行幀間預測濾波處理,得到所述當前塊的目標預測值;若所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,則對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值。
所述獲取模組611還用於:從編碼位元流中解析幀間預測濾波允許標誌位元,所述幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,或者,不允許當前塊採用幀間預測濾波。
示例性的,若所述幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,當所述幀間預測濾波標識為第一取值時,幀間預測濾波標識指示所述當前塊的濾波類型為不濾波;當所述幀間預測濾波標識為第二取值時,幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波;當 所述幀間預測濾波標識為第三取值時,幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波
所述當前塊包括亮度分量和色度分量,所述處理模組612對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值時具體用於:對所述亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的目標預測值;或者,對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;或者,對所述亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的目標預測值,並對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值。
所述處理模組612對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值時具體用於:獲取所述色度分量的幀間預測值和所述色度分量外部周圍的已重建圖元的色度重建值;根據所述色度分量的幀間預測值和所述色度重建值確定所述色度分量的目標預測值。
基於與上述方法同樣的申請構思,本申請實施例還提出一種編碼裝置,應用於編碼端,如圖6B所示,為所述裝置的結構圖,所述裝置包括:處理模組621,用於若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識;其中,若所述當前塊的濾波類型為幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波;或者,若所述當前塊的濾波類型為增強幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波;發送模組622,用於發送所述當前塊的編碼位元流。
所述處理模組621還用於:在編碼位元流中編碼幀間預測濾波允許標誌位元;其中,所述幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,或者,不允許當前塊採用幀間預測濾波。
所述處理模組621根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識時具體用於:若所述幀間預測濾波 允許標誌位元允許當前塊採用幀間預測濾波,則在當前塊的濾波類型為不濾波時,在所述當前塊的編碼位元流中編碼幀間預測濾波標識為第一取值;在當前塊的濾波類型為幀間預測濾波時,在所述當前塊的編碼位元流中編碼幀間預測濾波標識為第二取值;在當前塊的濾波類型為增強幀間預測濾波時,在當前塊的編碼位元流中編碼幀間預測濾波標識為第三取值。
所述處理模組621還用於:對所述當前塊進行幀間預測濾波處理,得到所述當前塊的第一目標預測值;對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的第二目標預測值;對所述當前塊不進行濾波處理,將所述當前塊的幀間預測值確定為第三目標預測值;根據所述第一目標預測值對應的率失真代價值,所述第二目標預測值對應的率失真代價值,所述第三目標預測值對應的率失真代價值,確定所述當前塊的濾波類型。
所述當前塊包括亮度分量和色度分量,所述處理模組621對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的第二目標預測值時具體用於:對所述亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的第二目標預測值;或,對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的第二目標預測值;或,對所述亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的第二目標預測值,並對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的第二目標預測值。
所述處理模組621對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的第二目標預測值時具體用於:獲取色度分量的幀間預測值和所述色度分量外部周圍的已重建圖元的色度重建值;根據所述色度分量的幀間預測值和所述色度重建值確定色度分量的第二目標預測值。
基於與上述方法同樣的申請構思,本申請實施例還提出一種編解碼裝置,應用於解碼端或者編碼端,如圖6C所示為所述裝置的結構圖,所述裝置包括:處理模組631,用於若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;確定模組632,用於根據所述色度分量的目標預測值,確 定所述當前塊的目標預測值。
所述處理模組631具體用於:若所述當前塊的所述色度分量滿足增強幀間預測濾波條件,則對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;其中,所述色度分量滿足增強幀間預測濾波條件,包括但不限於:所述當前塊的色度分量與所述當前塊的亮度分量屬於同一劃分樹類型。
所述處理模組631具體用於:獲取色度分量的幀間預測值和色度分量外部周圍的已重建圖元的色度重建值;根據所述色度分量的幀間預測值和所述色度重建值確定所述色度分量的目標預測值。
所述處理模組631還用於:對所述當前塊的亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的目標預測值;所述確定模組632具體用於:根據所述色度分量的目標預測值和所述亮度分量的目標預測值,確定所述當前塊的目標預測值。
本申請實施例提供的解碼端設備(示例性的,解碼端設備可以是視頻解碼端),從硬體層面而言,其硬體架構示意圖具體可參見圖7A所示,包括處理器711和機器可讀存儲介質712。所述機器可讀存儲介質712存儲有能夠被所述處理器711執行的機器可執行指令。所述處理器711用於執行機器可執行指令,以實現本申請上述示例公開的方法。例如,處理器用於執行機器可執行指令,以實現如下步驟:若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則從所述當前塊的編碼位元流中解析所述當前塊的幀間預測濾波標識;若所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波,則對所述當前塊進行幀間預測濾波處理,得到所述當前塊的目標預測值;若所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,則對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值。
或者,處理器執行機器可執行指令,以實現如下步驟:若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀 間預測濾波處理,得到所述色度分量的目標預測值;根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
本申請實施例提供的編碼端設備(示例性的,編碼端設備可以是視頻編碼端),從硬體層面而言,其硬體架構示意圖具體可以參見圖7B所示,包括處理器721和機器可讀存儲介質722。所述機器可讀存儲介質722存儲有能夠被所述處理器721執行的機器可執行指令。所述處理器721用於執行機器可執行指令,以實現本申請上述示例公開的方法。例如,處理器用於執行機器可執行指令,以實現如下步驟:若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識;其中,若所述當前塊的濾波類型為幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波;或者,若所述當前塊的濾波類型為增強幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波。或者,處理器用於執行機器可執行指令,以實現如下步驟:若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
基於與上述方法同樣的申請構思,本申請實施例中還提供一種攝像機設備,該攝像機設備可以包括上述任一實施例中的編碼裝置和/或解碼裝置。
基於與上述方法同樣的申請構思,本申請實施例還提供一種機器可讀存儲介質,所述機器可讀存儲介質上存儲有若干電腦指令,所述電腦指令被處理器執行時,能夠實現本申請上述示例公開的解碼方法,或編碼方法,或編解碼方法,對此不做限制。
上述實施例闡明的系統、裝置、模組或單元,可以由電腦晶片或實體實現,或由具有某種功能的產品來實現。一種典型的實現為電腦,電腦的形式可以是個人電腦、膝上型電腦、蜂窩電話、相機電話、智慧型電話、 個人數位助理、媒體播放機、導航設備、電子郵件收發設備、平板電腦、可穿戴設備或者這些設備中的任意幾種設備的組合。
為了描述的方便,描述以上裝置時以功能分為各種單元分別描述。當然,在實施本申請時可以把各單元的功能在同一個或多個軟體和/或硬體中實現。
本領域內的技術人員應明白,本申請的實施例可提供為方法、系統、或電腦程式產品。本申請可採用完全硬體實施例、完全軟體實施例、或結合軟體和硬體方面的實施例的形式。而且,本申請實施例可採用在一個或多個其中包含有電腦可用程式碼的電腦可用存儲介質(包括但不限於磁碟記憶體、CD-ROM(Compact Disc Read-Only Memory)、光學記憶體等)上實施的電腦程式產品形式。
以上所述僅為本申請的實施例而已,並不用於限制本申請。對於本領域技術人員來說,本申請可以有各種更改和變化。凡在本申請的精神和原理之內所作的任何修改、等同替換、改進等,均應包含在本申請的權利要求範圍之內。
211、212、213、214:步驟

Claims (19)

  1. 一種解碼方法,應用於解碼端,所述方法包括:
    若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則從所述當前塊的編碼位元流中解析所述當前塊的幀間預測濾波標識;
    若所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波,則對所述當前塊進行幀間預測濾波處理,得到所述當前塊的目標預測值;
    若所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,則對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值。
  2. 如請求項1所述的方法,其特徵在於,所述當前塊包括亮度分量和色度分量,對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值,包括:
    對所述亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的目標預測值;或者,
    對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;或者,
    對所述亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的目標預測值;對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值。
  3. 如請求項2所述的方法,其特徵在於,對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值,包括:
    若所述色度分量滿足增強幀間預測濾波條件,則對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;
    其中,所述色度分量滿足增強幀間預測濾波條件,包括:所述色度分量與所述亮度分量屬於同一劃分樹類型。
  4. 如請求項3所述的方法,其特徵在於,所述色度分量與所述亮度分量屬於同一劃分樹類型,包括所述當前塊不滿足以下任一:
    當前塊為QT劃分樹類型,且當前塊的寬度或高度等於8;
    當前塊為BT_VER劃分樹類型,且當前塊的寬度等於8;
    當前塊為BT_HOR劃分樹類型,且當前塊的高度等於8;
    當前塊為EQT_VER劃分樹類型,且當前塊的寬度等於16;
    當前塊為EQT_VER劃分樹類型,且當前塊的高度等於8;
    當前塊為EQT_HOR劃分樹類型,且當前塊的高度等於16;
    當前塊為EQT_HOR劃分樹類型,且當前塊的寬度等於8。
  5. 如請求項2所述的方法,其特徵在於,對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值,包括:
    獲取所述色度分量的幀間預測值和所述色度分量外部周圍的已重建圖元的色度重建值;
    根據所述色度分量的幀間預測值和所述色度重建值確定所述色度分量的目標預測值。
  6. 一種編碼方法,應用於編碼端,所述方法包括:
    若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識;
    其中,若所述當前塊的濾波類型為幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波;或者,
    若所述當前塊的濾波類型為增強幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波。
  7. 如請求項6所述的方法,其特徵在於,根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識之前,所述方法還包括:
    對所述當前塊進行幀間預測濾波處理,得到所述當前塊的第一目標預測值;
    對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的第二目標預測值;
    對所述當前塊不進行濾波處理,將所述當前塊的幀間預測值確定為第三目標預測值;
    根據所述第一目標預測值對應的率失真代價值、所述第二目標預測值對應的率失真代價值、所述第三目標預測值對應的率失真代價值,確定所述當前塊的濾波類型。
  8. 如請求項7所述的方法,其特徵在於,所述當前塊包括亮度分量和色度分量,對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的第二目標預測值,包括:
    對所述亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的第二目標預測值;或,
    對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的第二目標預測值;或,
    對所述亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的第二目標預測值;對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的第二目標預測值。
  9. 如請求項8所述的方法,其特徵在於,對所述色度分量進行增強幀間預測濾波處理,得到所述色度分量的第二目標預測值,包括:
    獲取所述色度分量的幀間預測值和所述色度分量外部周圍的已重建圖元的色度重建值;
    根據所述色度分量的幀間預測值和所述色度重建值確定所述色度分量的第二目標預測值。
  10. 一種編解碼方法,應用於編碼端或者解碼端,所述方法包括:
    若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;
    根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
  11. 如請求項10所述的方法,其特徵在於,對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值,包括:
    若所述當前塊的所述色度分量滿足增強幀間預測濾波條件,則對所述 色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;
    其中,所述色度分量滿足增強幀間預測濾波條件,包括:所述色度分量與所述當前塊的亮度分量屬於同一劃分樹類型。
  12. 如請求項11所述的方法,其特徵在於,所述色度分量與所述亮度分量屬於同一劃分樹類型,包括所述當前塊不滿足以下任一:
    當前塊為QT劃分樹類型,且當前塊的寬度或高度等於8;
    當前塊為BT_VER劃分樹類型,且當前塊的寬度等於8;
    當前塊為BT_HOR劃分樹類型,且當前塊的高度等於8;
    當前塊為EQT_VER劃分樹類型,且當前塊的寬度等於16;
    當前塊為EQT_VER劃分樹類型,且當前塊的高度等於8;
    當前塊為EQT_HOR劃分樹類型,且當前塊的高度等於16;
    當前塊為EQT_HOR劃分樹類型,且當前塊的寬度等於8。
  13. 如請求項10或11所述的方法,其特徵在於,對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值,包括:
    獲取所述色度分量的幀間預測值和所述色度分量外部周圍的已重建圖元的色度重建值;
    根據所述幀間預測值和所述色度重建值確定所述色度分量的目標預測值。
  14. 如請求項10所述的方法,其特徵在於,
    根據所述色度分量的目標預測值,確定所述當前塊的目標預測值之前,還包括:對所述當前塊的亮度分量進行增強幀間預測濾波處理,得到所述亮度分量的目標預測值;
    根據所述色度分量的目標預測值,確定所述當前塊的目標預測值,包括:根據所述色度分量的目標預測值和所述亮度分量的目標預測值,確定所述當前塊的目標預測值。
  15. 一種解碼裝置,應用於解碼端,所述裝置包括:
    獲取模組,用於若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則從所述當前塊的編碼位元 流中解析所述當前塊的幀間預測濾波標識;
    處理模組,用於
    若所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波,則對所述當前塊進行幀間預測濾波處理,得到所述當前塊的目標預測值;
    若所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,則對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值。
  16. 一種編碼裝置,應用於編碼端,所述裝置包括:
    編碼模組,用於若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識;其中,
    若所述當前塊的濾波類型為幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波;或者,
    若所述當前塊的濾波類型為增強幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波;
    發送模組,用於發送所述當前塊的編碼位元流。
  17. 一種編解碼裝置,應用於編碼端或者解碼端,所述裝置包括:
    處理模組,用於若確定對當前塊啟用增強幀間預測濾波,則對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;
    確定模組,用於根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
  18. 一種解碼端設備,包括:
    機器可讀存儲介質,存儲有機器可執行指令;
    處理器,用於執行所述機器可執行指令,以實現如下步驟:
    若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則從所述當前塊的編碼位元流中解析 所述當前塊的幀間預測濾波標識;其中,
    若所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波,則對所述當前塊進行幀間預測濾波處理,得到所述當前塊的目標預測值;
    若所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波,則對所述當前塊進行增強幀間預測濾波處理,得到所述當前塊的目標預測值;
    或者,所述處理器用於執行所述機器可執行指令,以實現如下步驟:
    若確定對當前塊啟用增強幀間預測濾波,則
    對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;
    根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
  19. 一種編碼端設備,包括:
    機器可讀存儲介質,存儲有機器可執行指令;
    處理器,用於執行所述機器可執行指令,以實現如下步驟:
    若幀間預測濾波允許標誌位元允許當前塊採用幀間預測濾波,且所述當前塊滿足幀間預測濾波條件,則根據所述當前塊的濾波類型在所述當前塊的編碼位元流中編碼幀間預測濾波標識;其中,
    若所述當前塊的濾波類型為幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為幀間預測濾波;或者,
    若所述當前塊的濾波類型為增強幀間預測濾波,則所述幀間預測濾波標識指示所述當前塊的濾波類型為增強幀間預測濾波;
    或者,若確定對當前塊啟用增強幀間預測濾波,則
    對所述當前塊的色度分量進行增強幀間預測濾波處理,得到所述色度分量的目標預測值;
    根據所述色度分量的目標預測值,確定所述當前塊的目標預測值。
TW110110698A 2020-03-25 2021-03-24 解碼、編碼、編解碼方法、裝置及其設備 TWI784452B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010220367.X 2020-03-25
CN202010220367.XA CN113452998B (zh) 2020-03-25 2020-03-25 一种解码、编码、编解码方法、装置及其设备

Publications (2)

Publication Number Publication Date
TW202139703A true TW202139703A (zh) 2021-10-16
TWI784452B TWI784452B (zh) 2022-11-21

Family

ID=77806911

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110110698A TWI784452B (zh) 2020-03-25 2021-03-24 解碼、編碼、編解碼方法、裝置及其設備

Country Status (7)

Country Link
EP (1) EP4099693A4 (zh)
JP (1) JP7483921B2 (zh)
KR (1) KR20220138001A (zh)
CN (2) CN113452998B (zh)
AU (1) AU2021243003B2 (zh)
TW (1) TWI784452B (zh)
WO (1) WO2021190518A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024077573A1 (zh) * 2022-10-13 2024-04-18 Oppo广东移动通信有限公司 编解码方法、编码器、解码器、码流以及存储介质

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7970219B2 (en) * 2004-12-30 2011-06-28 Samsung Electronics Co., Ltd. Color image encoding and decoding method and apparatus using a correlation between chrominance components
EP2675161B1 (en) * 2011-02-10 2018-11-14 Velos Media International Limited Image processing device and image processing method
KR102010210B1 (ko) * 2012-07-02 2019-08-12 소니 주식회사 고효율 비디오 인코더를 위한 샘플 적응성 오프셋에서의 디커플링 강화
WO2015002444A1 (ko) * 2013-07-01 2015-01-08 삼성전자 주식회사 필터링을 수반한 비디오 부호화 및 복호화 방법 및 그 장치
CN106256128B (zh) * 2014-01-03 2021-06-29 艾锐势有限责任公司 一种解码多个图片的方法
WO2017035831A1 (en) * 2015-09-06 2017-03-09 Mediatek Inc. Adaptive inter prediction
CN116320497A (zh) * 2016-11-28 2023-06-23 韩国电子通信研究院 用于滤波的方法和装置
CN109587479B (zh) * 2017-09-29 2023-11-10 华为技术有限公司 视频图像的帧间预测方法、装置及编解码器
JP2021010046A (ja) 2017-10-06 2021-01-28 シャープ株式会社 画像符号化装置及び画像復号装置
CN107896330B (zh) * 2017-11-29 2019-08-13 北京大学深圳研究生院 一种用于帧内和帧间预测的滤波方法
CN108124154B (zh) * 2017-12-28 2020-04-24 北京数码视讯科技股份有限公司 帧间预测模式的快速选择方法、装置及电子设备
CN116347074A (zh) * 2018-03-09 2023-06-27 韩国电子通信研究院 使用样点滤波的图像编码/解码方法和设备
KR20210157419A (ko) 2018-04-04 2021-12-28 닛폰 호소 교카이 예측 화상 보정 장치, 화상 부호화 장치, 화상 복호 장치, 및 프로그램
US10448025B1 (en) * 2018-05-11 2019-10-15 Tencent America LLC Method and apparatus for video coding
CN110650349B (zh) * 2018-06-26 2024-02-13 中兴通讯股份有限公司 一种图像编码方法、解码方法、编码器、解码器及存储介质
BR112021012769A2 (pt) 2019-02-08 2021-09-08 Panasonic Intellectual Property Corporation Of America Codificador, decodificador, método de codificação e método de decodificação
CN110351568A (zh) * 2019-06-13 2019-10-18 天津大学 一种基于深度卷积网络的视频环路滤波器
CN111083474A (zh) * 2019-12-03 2020-04-28 咪咕文化科技有限公司 帧间预测的滤波方法、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
TWI784452B (zh) 2022-11-21
WO2021190518A1 (zh) 2021-09-30
AU2021243003A1 (en) 2022-11-03
KR20220138001A (ko) 2022-10-12
EP4099693A1 (en) 2022-12-07
CN114007082A (zh) 2022-02-01
JP7483921B2 (ja) 2024-05-15
EP4099693A4 (en) 2023-08-02
CN113452998B (zh) 2022-05-31
CN114007082B (zh) 2022-12-23
AU2021243003B2 (en) 2024-01-11
JP2023518593A (ja) 2023-05-02
CN113452998A (zh) 2021-09-28

Similar Documents

Publication Publication Date Title
JP6573689B2 (ja) 画像符号化装置および画像符号化方法
US11910013B2 (en) Image encoding method using a skip mode, and a device using the method
TW201935926A (zh) 視訊編解碼方法/裝置及相應地存儲介質
TW202106022A (zh) 具有自適應色彩轉換技術之視訊資料編碼或解碼方法和裝置
KR20090095317A (ko) 영상 부호화 및 복호화 방법 및 장치
CN114157864B (zh) 图像预测方法、装置、设备、系统及存储介质
CN114598870A (zh) 一种用于图像划分的方法及装置
CN111355951A (zh) 视频解码方法、装置及解码设备
JP6362370B2 (ja) 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
TWI784452B (zh) 解碼、編碼、編解碼方法、裝置及其設備
JP2014204311A (ja) カラー画像符号化装置、カラー画像復号装置、カラー画像符号化方法及びカラー画像復号方法
RU2810727C1 (ru) Способы, оборудование и устройства для декодирования, кодирования и кодирования/декодирования
JP2023086397A (ja) イントラ予測装置、復号装置、及びプログラム
JP2016005235A (ja) 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
JP2018166329A (ja) 画像符号化装置および画像復号装置