TW202145784A - 幀間預測方法、編碼器、解碼器以及電腦儲存媒介 - Google Patents

幀間預測方法、編碼器、解碼器以及電腦儲存媒介 Download PDF

Info

Publication number
TW202145784A
TW202145784A TW110115001A TW110115001A TW202145784A TW 202145784 A TW202145784 A TW 202145784A TW 110115001 A TW110115001 A TW 110115001A TW 110115001 A TW110115001 A TW 110115001A TW 202145784 A TW202145784 A TW 202145784A
Authority
TW
Taiwan
Prior art keywords
motion information
unidirectional
current block
unidirectional motion
new
Prior art date
Application number
TW110115001A
Other languages
English (en)
Inventor
唐海
Original Assignee
大陸商Oppo廣東移動通信有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商Oppo廣東移動通信有限公司 filed Critical 大陸商Oppo廣東移動通信有限公司
Publication of TW202145784A publication Critical patent/TW202145784A/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/55Motion estimation with spatial constraints, e.g. at image or region borders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/573Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一種幀間預測方法、編碼器、解碼器以及電腦儲存媒介,應用於解碼器,該方法包括:解析位元流,獲取當前塊的預測模式參數;當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。

Description

幀間預測方法、編碼器、解碼器以及電腦儲存媒介
本申請涉及影像編解碼技術領域,尤其涉及一種幀間預測方法、編碼器、解碼器以及電腦儲存媒介。
在影像編解碼領域,針對當前塊進行編解碼的過程,除了採用幀內預測方式外,還可以採用幀間預測方式。其中,幀間預測可以包括幀間幾何劃分預測模式(Geometric Partitioning Mode,GPM)和角度加權預測模式(Angular Weighted Prediction,AWP)等,透過將幀間的當前塊劃分為兩個非矩形的分區(或兩個塊)分別進行預測後再加權融合,能夠得到當前塊的預測值。
目前,在GPM或AWP的預測過程中,雖然使用了空域相鄰塊的運動訊息和時域同位置塊的運動訊息來建構運動訊息候選清單,但是並不能夠保證該運動訊息候選清單可以填滿。當運動訊息候選清單未填滿時,通常是利用最後一個有效的運動訊息進行複製填滿。
這樣,在兩個運動不同的區域邊緣,比如一些形變,如果空域相鄰塊的運動訊息和時域同位置塊的運動訊息沒有包含這種形變的運動訊息,將會導致GPM或AWP無法發揮作用。另外,由於編碼器所選擇的運動訊息和實際的運動訊息可能存在偏差,也即當前構建的運動訊息候選清單中的運動訊息與當前塊的實際運動訊息可能存在偏差,還會影響到編解碼的性能。
本申請提出一種幀間預測方法、編碼器、解碼器以及電腦儲存媒介,可以增加運動訊息候選清單中運動訊息的多樣性,從而提升編解碼性能。
本申請的技術方案是這樣實現的:
第一方面,本申請實施例提供了一種幀間預測方法,應用於解碼器,該方法包括:
解析位元流,獲取當前塊的預測模式參數;
當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;
對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;
基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;
根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第二方面,本申請實施例提供了一種幀間預測方法,應用於編碼器,該方法包括:
確定當前塊的預測模式參數;
當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;
對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;
基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;
根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第三方面,本申請實施例提供了一種解碼器,該解碼器包括解析單元、第一確定單元、第一計算單元、第一構建單元和第一預測單元;其中,
所述解析單元,配置為解析位元流,獲取當前塊的預測模式參數;
所述第一確定單元,配置為當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;
所述第一計算單元,配置為對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;
所述第一構建單元,配置為基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;
所述第一預測單元,配置為根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第四方面,本申請實施例提供了一種解碼器,該解碼器包括第一記憶體和第一處理器;其中,
所述第一記憶體,用於儲存能夠在所述第一處理器上運行的電腦程式;
所述第一處理器,用於在運行所述電腦程式時,執行如第一方面所述的方法。
第五方面,本申請實施例提供了一種編碼器,該編碼器包括第二確定單元、第二計算單元、第二構建單元和第二預測單元;其中,
所述第二確定單元,配置為確定當前塊的預測模式參數;
所述第二確定單元,還配置為當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;
所述第二計算單元,配置為對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;
所述第二構建單元,配置為基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;
所述第二預測單元,配置為根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第六方面,本申請實施例提供了一種編碼器,該編碼器包括第二記憶體和第二處理器;其中,
所述第二記憶體,用於儲存能夠在所述第二處理器上運行的電腦程式;
所述第二處理器,用於在運行所述電腦程式時,執行如第二方面所述的方法。
第七方面,本申請實施例提供了一種電腦儲存媒介,該電腦儲存媒介儲存有電腦程式,所述電腦程式被第一處理器執行時實現如第一方面所述的方法、或者被第二處理器執行時實現如第二方面所述的方法。
本申請實施例所提供的一種幀間預測方法、編碼器、解碼器以及電腦儲存媒介,解析位元流,獲取當前塊的預測模式參數;當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。這樣,在得到至少一個新的單向運動訊息之後,可以將新的單向運動訊息填入運動訊息候選清單中,能夠增加運動訊息候選清單中運動訊息的多樣性;另外,對當前塊來說,運動訊息候選清單中初始運動訊息與實際的運動訊息可能存在偏差,這時候建構新的單向運動訊息將會比初始運動訊息具有更好的效果,從而提升了編解碼性能。
下面將結合本申請實施例中的附圖,對本申請實施例中的技術方案進行清楚、完整地描述。可以理解的是,此處所描述的具體實施例僅僅用於解釋相關申請,而非對該申請的限定。另外還需要說明的是,為了便於描述,附圖中僅示出了與有關申請相關的部分。
在影像圖像中,一般採用第一圖像分量、第二圖像分量和第三圖像分量來表徵當前塊(Coding Block,CB);其中,這三個圖像分量分別為一個亮度分量、一個藍色色度分量和一個紅色色度分量,具體地,亮度分量通常使用符號Y表示,藍色色度分量通常使用符號Cb或者U表示,紅色色度分量通常使用符號Cr或者V表示;這樣,影像圖像可以用YCbCr格式表示,也可以用YUV格式表示。
目前,通用的影像編解碼標準基於都採用基於塊的混合編碼框架。影像圖像中的每一幀被分割成相同大小(比如128×128,64×64等)的正方形的最大編碼單元(Largest Coding Unit, LCU),每個最大編碼單元還可以根據規則劃分成矩形的編碼單元(Coding Unit,CU);而且編碼單元可能還會劃分成更小的預測單元(Prediction Unit,PU)。具體地,混合編碼框架可以包括有預測、變換(Transform)、量化(Quantization)、熵編碼(Entropy Coding)、迴路濾波(In Loop Filter)等模組;其中,預測模組可以包括幀內預測(intra prediction)和幀間預測(inter prediction),幀間預測可以包括運動估計(motion estimation)和運動補償(motion compensation)。由於影像圖像的一個幀內相鄰像素之間存在很強的相關性,在影像編解碼技術中使用幀內預測方式能夠消除相鄰像素之間的空間冗餘;但是由於影像圖像中的相鄰幀之間也存在著很強的相似性,在影像編解碼技術中使用幀間預測方式消除相鄰幀之間的時間冗餘,從而能夠提高編碼效率。下述本申請將以幀間預測進行詳細描述。
應理解,本申請實施例提供一種影像編碼系統,如圖1所示,該影像編碼系統11可以包括:變換單元111、量化單元112、模式選擇和編碼控制邏輯單元113、幀內預測單元114、幀間預測單元115(包括:運動補償和運動估計)、反量化單元116、反變換單元117、迴路濾波單元118、編碼單元119和解碼圖像暫存單元110;針對輸入的原始視訊訊號,透過編碼樹單元(Coding Tree Unit,CTU)的劃分可以得到一個影像重建塊,透過模式選擇和編碼控制邏輯單元113確定編碼模式,然後,對經過幀內或幀間預測後得到的殘差像素訊息,透過變換單元111、量化單元112對該影像重建塊進行變換,包括將殘差訊息從像素域變換到變換域,並對所得的變換係數進行量化,用以進一步減少位元速率;幀內預測單元114用於對該影像重建塊進行幀內預測;其中,幀內預測單元114用於確定該影像重建塊的最優幀內預測模式(即目標預測模式);幀間預測單元115用於執行所接收的影像重建塊相對於一或多個參考幀中的一或多個塊的幀間預測編碼,以提供時間預測訊息;其中,運動估計為產生運動向量的過程,所述運動向量可以估計該影像重建塊的運動,然後,運動補償基於由運動估計所確定的運動向量執行運動補償;在確定幀間預測模式之後,幀間預測單元115還用於將所選擇的幀間預測資料提供到編碼單元119,而且,將所計算確定的運動向量資料也發送到編碼單元119;此外,反量化單元116和反變換單元117用於該影像重建塊的重構建,在像素域中重構建殘差塊,該重構建殘差塊透過迴路濾波單元118去除方塊效應假影,然後,將該重構殘差塊添加到解碼圖像暫存單元110的幀中的一個預測性塊,用以產生經重構建的影像重建塊;編碼單元119是用於編碼各種編碼參數及量化後的變換係數。而解碼圖像暫存單元110用於存放重構建的影像重建塊,用於預測參考。隨著影像圖像編碼的進行,會不斷生成新的重構建的影像重建塊,這些重構建的影像重建塊都會被存放在解碼圖像暫存單元110中。
本申請實施例還提供一種影像解碼系統,如圖2所示,該影像解碼系統12可以包括:解碼單元121、反變換單元127,與反量化單元122、幀內預測單元123、運動補償單元124、迴路濾波單元125和解碼圖像暫存單元126單元;輸入的視訊訊號經過影像編碼系統11進行編碼處理之後,輸出該視訊訊號的位元流;該位元流輸入影像解碼系統12中,首先經過解碼單元121,用於得到解碼後的變換係數;針對該變換係數透過反變換單元127與反量化單元122進行處理,以便在像素域中產生殘差塊;幀內預測單元123可用於基於所確定的幀內預測方向和來自當前幀或圖片的先前經解碼塊的資料而產生當前影像解碼塊的預測資料;運動補償單元124是透過剖析運動向量和其他關聯語法元素來確定用於影像解碼塊的預測訊息,並使用該預測訊息以產生正被解碼的影像解碼塊的預測性塊;透過對來自反變換單元127與反量化單元122的殘差塊與由幀內預測單元123或運動補償單元124產生的對應預測性塊進行求和,而形成解碼的影像塊;該解碼的視訊訊號透過迴路濾波單元125以便去除方塊效應假影,可以改善影像品質;然後將經解碼的影像塊儲存於解碼圖像暫存單元126中,解碼圖像暫存單元126儲存用於後續幀內預測或運動補償的參考圖像,同時也用於視訊訊號的輸出,得到所恢復的原始視訊訊號。
本申請實施例提供的一種幀間預測方法主要作用於影像編碼系統11的幀間預測單元115和影像解碼系統12的幀間預測單元,即運動補償單元124;也就是說,如果在影像編碼系統11能夠透過本申請實施例提供的幀間預測方法得到一個較好的預測效果,那麼,對應地,在影像解碼系統12,也能夠改善影像解碼恢復品質。
基於此,下面結合附圖和實施例對本申請的技術方案進一步詳細闡述。在進行詳細闡述之前,需要說明的是,說明書通篇中提到的“第一”、“第二”、“第三”等,僅僅是為了區分不同的特徵,不具有限定優先順序、先後順序、大小關係等功能。
本申請實施例提供一種幀間預測方法,該方法應用於影像解碼設備,即解碼器。該方法所實現的功能可以透過解碼器中的第一處理器調用電腦程式來實現,當然電腦程式可以保存在第一記憶體中,可見,該解碼器至少包括第一處理器和第一記憶體。
參見圖3,其示出了本申請實施例一種幀間預測方法的流程示意圖。如圖3所示,該方法可以包括:
S301:解析位元流,獲取當前塊的預測模式參數。
需要說明的是,待解碼圖像可以劃分為多個圖像塊,而當前待解碼的圖像塊可以稱為當前塊(可以用CU表示),與當前塊相鄰的圖像塊可以稱為相鄰塊;即在待解碼圖像中,當前塊與相鄰塊之間具有相鄰關係。這裡,每個當前塊可以包括第一圖像分量、第二圖像分量和第三圖像分量,也即當前塊表示待解碼圖像中當前待進行第一圖像分量、第二圖像分量或者第三圖像分量預測的圖像塊。
其中,假定當前塊進行第一圖像分量預測,而且第一圖像分量為亮度分量,即待預測圖像分量為亮度分量,那麼當前塊也可以稱為亮度塊;或者,假定當前塊進行第二圖像分量預測,而且第二圖像分量為色度分量,即待預測圖像分量為色度分量,那麼當前塊也可以稱為色度塊。
還需要說明的是,預測模式參數指示了當前塊採用的預測模式以及與該預測模式相關的參數。其中,預測模式通常包括有幀間預測模式、傳統幀內預測模式和非傳統幀內預測模式等,而幀間預測模式又包括有普通幀間預測模式、GPM預測模式和AWP預測模式等。也就是說,編碼器會選取最優的預測模式對當前塊進行預編碼,在這過程中就可以確定出當前塊的預測模式,從而將相應的預測模式參數寫入位元流,由編碼器傳輸到解碼器。
這樣,在解碼器側,透過解析位元流就可以直接獲取到當前塊的預測模式參數,根據所獲取的預測模式參數用以確定當前塊是否使用預設的幀間預測模式,比如GPM預測模式或AWP預測模式。
S302:當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息。
需要說明的是,在解碼器解析位元流獲取到預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值的情況下,就可以採用本申請實施例所提供的幀間預測方法。
還需要說明的是,運動訊息可以包括運動向量(Motion Vector,MV)訊息和參考幀訊息。具體地,對於使用幀間預測的當前塊而言,該當前塊所在的當前幀具有一個或多個參考幀,而當前塊可以是編碼單元或預測單元,可以使用一個包含一組運動向量和參考幀訊息的運動訊息指示到某一參考幀內一個與當前塊大小相同的像素區域,這裡稱之為參考塊,也可以使用一個包含兩組運動向量和參考幀訊息的運動訊息指示到某兩個可以相同也可以不同的參考幀內的兩個參考塊;然後運動補償可以根據運動訊息所指示的參考塊得到當前塊的幀間預測值。
應理解,P幀(Predictive Frame)是只能使用圖像播放順序(Picture Order Count,POC)在當前幀之前的參考幀進行預測的幀。這時候當前參考幀只有一個參考幀清單,用RefPicList0表示;且RefPicList0中都是POC在當前幀之前的參考幀。B幀(Bi-directional Interpolated Prediction Frame)早期是可以使用POC在當前幀之前的參考幀及POC在當前幀之後的參考幀進行預測的幀。B幀有兩個參考幀清單,分別用RefPicList0和RefPicList1表示;其中,RefPicList0中都是POC在當前幀之前的參考幀,RefPicList1中都是POC在當前幀之後的參考幀。對於當前塊而言,可以只參考RefPicList0中某一幀的參考塊,這種情況可稱為前向預測;或者也可以只參考RefPicList1中某一幀的參考塊,這種情況可稱為後向預測;或者還可以同時參考RefPicList0中某一幀的參考塊和RefPicList1中某一幀的參考塊,這種情況可稱為雙向預測。同時參考兩個參考塊的一種簡單方式是將兩個參考塊內每一個對應位置的像素進行平均以得到當前塊內每一像素的幀間預測值(或者可以稱為預測塊)。後期B幀不再限制RefPicList0中都是POC在當前幀之前的參考幀,RefPicList1中都是POC在當前幀之後的參考幀。換句話說,RefPicList0中也可以有POC在當前幀之後的參考幀,RefPicList1中也可以有POC在當前幀之前的參考幀,也即是指當前塊可以同時參考POC在當前幀之前的參考幀或者同時參考POC在當前幀之後的參考幀。但是當前塊為雙向預測時所使用的參考幀必須一個來自於RefPicList0,一個來自於RefPicList1;這種B幀也稱為廣義B幀。
由於隨機存取(Random Access,RA)配置的編解碼順序與POC順序不同,這樣B幀可以同時參考當前幀之前的訊息和當前幀之後的訊息,能夠明顯提高編碼性能。示例性地,RA的一種經典的圖像組(Group Of Pictures,GOP)結構如圖4所示,在圖4中,箭頭表示參考關係,由於I幀不需要參考幀,那麼在POC為0的I幀解碼後,將會解碼POC為4的P幀,而在解碼POC為4的P幀時可以參考POC為0的I幀。在POC為4的P幀解碼後,然後再解碼POC為2的B幀,而在解碼POC為2的B幀時可以參考POC為0的I幀和POC為4的P幀,等等。這樣,根據圖4可以得到,POC順序為{0  1  2  3  4  5  6  7  8}的情況下,其對應的解碼順序為{0  3  2  4  1  7  6  8  5}。
另外,低延遲(Low Delay,LD)配置的編解碼順序與POC順序是相同的,這時候當前幀只能參考當前幀之前的訊息。其中,Low Delay配置又分Low Delay P和Low Delay B。Low Delay P即傳統的Low Delay配置。其典型的結構是IPPP……,即先編解碼一個I幀,之後解碼的幀都是P幀。Low Delay B的典型結構是IBBB……,與Low Delay P的區別在於每個幀間幀都是B幀,即使用兩個參考幀清單,當前塊可以同時參考RefPicList0中的某一幀的參考塊和RefPicList1中的某一幀的參考塊。這裡,當前幀的一個參考幀清單最多可以有幾個參考幀,如2個、3個或4個等。當編碼或解碼某一個當前幀時,RefPicList0和RefPicList1內各有哪幾個參考幀是由預設配置或演算法決定的,但是同一個參考幀可以同時出現在RefPicList0和RefPicList1中,即編碼器或解碼器允許當前塊同時參考同一個參考幀中的兩個參考塊。
在本申請實施例中,編碼器或解碼器通常可以使用參考幀清單裡的索引值(用index表示)來對應參考幀。如果一個參考幀清單長度為4,那麼index有0、1、2、3等四個值。例如,如果當前幀的RefPicList0有POC為5,4,3,0的4個參考幀,那麼RefPicList0的index 0為POC 5的參考幀,RefPicList0的index 1為POC 4的參考幀,RefPicList0的index 2為POC 3的參考幀,RefPicList0的index 3為POC 0的參考幀。
目前的VVC影像編解碼標準中,預設的幀間預測模式可以為GPM預測模式。目前的AVS3影像編解碼標準中,預設的幀間預測模式可以為AWP預測模式。這兩種預測模式雖然名稱不同、具體的實現形式不同、但原理上是共通的,即這兩種預測模式都可以適用本申請實施例的幀間預測方法。
具體來講,對於GPM預測模式來說,如果使用GPM,那麼位元流中將會傳輸GPM下的預測模式參數,比如GPM具體的劃分模式;通常情況下,GPM包括有64種劃分模式。對於AWP預測模式來說,如果使用AWP,那麼位元流中將會傳輸AWP下的預測模式參數,比如AWP具體的劃分模式;通常情況下,AWP包括有56種劃分模式。
在預設的預測模式下,比如GPM和AWP均需要使用兩個單向運動訊息查找兩個參考塊。目前的實現方式是在編碼器側利用當前塊之前已編碼/已解碼部分的相關訊息構建一個單向運動訊息候選清單,從單向運動訊息候選清單中選擇單向運動訊息,將這兩個單向運動訊息在單向運動訊息候選清單中的索引值(index)寫入位元流。在解碼器側採用同樣的方式,即利用當前塊之前已解碼部分的相關訊息構建一個單向運動訊息候選清單,這個單向運動訊息候選清單與編碼器側構建的候選清單一定是相同的。如此,從位元流中解析出兩個單向運動訊息的索引值,然後從單向運動訊息候選清單中查找出這兩個單向運動訊息即為當前塊需要使用的兩個單向運動訊息。
也就是說,本申請實施例所描述的單向運動訊息可以包括:運動向量訊息,即(x,y)的值,以及對應的參考幀訊息,即參考幀清單及在參考幀清單中的參考索引值。一種表示方式是記錄兩個參考幀清單的參考索引值,其中一個參考幀清單對應的參考索引值有效,如0,1,2等;另一個參考幀清單對應的參考索引值為無效,即-1。參考索引值有效的參考幀清單即為當前塊的運動訊息所使用的參考幀清單,根據參考索引值可以從該參考幀清單中查找到對應的參考幀。每個參考幀清單都有一個對應的運動向量,有效的參考幀清單對應的運動向量是有效的,無效的參考幀清單對應的運動向量是無效的。解碼器可以透過單向運動訊息中的參考幀訊息找到所需的參考幀,根據當前塊的位置以及運動向量即(x,y)的值可以在參考幀中找到參考塊,進而確定出當前塊的幀間預測值。
實際應用中,單向運動訊息候選清單的構建方式雖然使用了空域相鄰塊的運動訊息和時域同位置塊的運動訊息,但是並不能保證單向運動訊息候選清單一定能夠填滿。如果空域相鄰塊的運動單一,以及時域同位置塊的運動訊息與某些空域相鄰塊的運動訊息相同,就可能導致單向運動訊息候選清單內的單向運動訊息數量小於預設數量,也就意味著單向運動訊息候選清單處於未填滿狀態。更特殊地,如果現有方式所查找到的可用單向運動訊息都相同,那麼單向運動訊息候選清單就會出現所有單向運動訊息都相同的情況,主要是如果單向運動訊息候選清單未填滿,目前通常是利用最後一個有效的單向運動訊息進行複製填滿。但是GPM或AWP需要使用兩個不同的參考塊,如果查找到的兩個單向運動訊息均是相同的,即兩個參考塊是相同的,那麼這樣將會使得所得到的幀間預測值與原有的單向預測使用的參考塊一樣,然而GPM或AWP的開銷更大,因為需要傳輸兩個單向運動訊息的index,以及GPM或AWP的預測模式參數,但其中有效的只有一個單向運動訊息的index。這種情況下,GPM或AWP應該是不會被使用的。而且單向運動訊息候選清單中的單向運動訊息候選越少,可用的單向運動訊息候選的組合(比如兩個單向運動訊息候選)就越少。但是GPM或AWP不僅在兩個物體的邊界會使用到,在兩個運動不同區域的邊緣也會使用到,比如一些形變,GPM或AWP有時候會達到不錯的效果。但是如果空域相鄰塊的運動訊息和時域同位置塊的運動訊息沒有包含這種形變的運動訊息,那麼GPM或AWP就無法發揮作用。或者,針對某一當前塊而言,編碼器所選擇的運動訊息未必是最準確的運動訊息,而是碼率(rate)和失真(distortion)權衡最好的運動訊息;因而編碼的運動訊息和實際的運動訊息之間可能是存在偏差的,這種情況在低碼率的配置下尤其明顯;也就是僅透過當前的初始運動訊息候選清單所構建的單向運動訊息與當前塊實際的運動訊息可能是存在偏差的,將會影響到編解碼的性能。
這時候,為了提高編解碼的性能,本申請實施例就需要建構一些新的單向運動訊息添加到單向運動訊息候選清單中。這裡的建構,可以是指不是透過已編碼/已解碼部分直接獲取的已知運動訊息,比如空域相鄰塊的運動訊息及當前幀內當前塊的相鄰塊的運動訊息,或者更廣泛一點,空域上的運動訊息即當前幀已解碼部分的運動訊息、時域上的運動訊息即其他幀(參考幀)中的運動訊息,基於歷史運動向量清單中的歷史運動訊息等。需要注意的是,在建構出至少一個新的單向運動訊息之前,首先需要從當前塊的多個已知運動訊息中確定出至少一組單向運動訊息;而且每一組單向運動訊息對應建構一個新的單向運動訊息。
在一些實施例中,當前塊的多個已知運動訊息至少可以包括:初始運動訊息候選清單內的運動訊息,和/或,所述當前塊的空域運動訊息,和/或,所述當前塊的時域運動訊息,和/或,所述當前塊的歷史運動訊息。
這裡,針對初始運動訊息候選清單,在一些實施例中,該方法還包括:基於當前塊的相鄰塊的運動訊息,確定初始運動訊息候選清單。
需要說明的是,初始運動訊息候選清單中存在有至少一個單向運動訊息。在解碼器側,當初始運動訊息候選清單不包括重複的單向運動訊息且初始運動訊息候選清單內已有的單向運動訊息數量小於預設數量時,表明了單向運動訊息候選清單處於未填滿狀態,可以從初始運動訊息候選清單內選擇運動訊息,以得到至少一組單向運動訊息;或者,也可以從已解碼部分獲取運動訊息,比如從當前塊的空域運動訊息和/或當前塊的時域運動訊息和/或當前塊的歷史運動訊息中獲取運動訊息,以得到至少一組單向運動訊息。這樣,在得到至少一組單向運動訊息之後,後續可以建構出至少一個新的單向運動訊息。
S303:對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息。
需要說明的是,在得到至少一組單向運動訊息之後,可以對其採用平均值計算方法、或者採用加權計算方法、或者採用其他計算方法等,以計算得到至少一個新的單向運動訊息;而且每一組單向運動訊息對應得到一個新的單向運動訊息。
可選地,在一些實施例中,對於S303來說,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,可以包括:
針對每一組單向運動訊息,對該組單向運動訊息進行平均值計算,獲得一個新的單向運動訊息;
基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
可選地,在一些實施例中,對於S303來說,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,可以包括:
針對每一組單向運動訊息,確定該組單向運動訊息各自對應的權重值;
根據該組單向運動訊息以及各自對應的權重值進行加權平均計算,獲得一個新的單向運動訊息;
基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
也就是說,在得到至少一組單向運動訊息之後,可以透過平均值計算方法或者加權平均計算方法,能夠得到至少一個新的單向運動訊息;而且每一個新的單向運動訊息與參與計算的一組單向運動訊息的參考幀訊息相同。
可選地,在一些實施例中,對於S303來說,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,可以包括:
針對每一組單向運動訊息,確定該組單向運動訊息各自對應的比例因數;
根據該組單向運動訊息、各自對應的比例因數以及預設偏移值進行計算,獲得一個新的單向運動訊息;
基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
也就是說,假定這裡n個參考幀訊息相同的單向運動訊息的MV分別是(
Figure 02_image001
Figure 02_image003
),(
Figure 02_image005
Figure 02_image007
),……,(
Figure 02_image009
Figure 02_image011
),新的單向運動訊息的MV是(x,y),那麼新的單向運動訊息的MV中x和y的計算如下,
Figure 02_image013
(1)
Figure 02_image015
(2)
其中,
Figure 02_image017
表示每一單向運動訊息對應的比例因數;n的取值可能是2、3、4等,M的取值可能是1、2、4、8等,預設偏移值(用offset表示)的取值可能是0或M/2。
還需要說明的是,針對式(1)或式(2)中的除法還可以修改為右移的形式。具體地,如果把除法運算修改為右移運算,一種可能的實施方式是把負數的絕對值進行右移後,然後再將其變成負數;或者,另一種可能的實施方式是不考慮正、負值符號而統一進行右移運算。
還需要說明的是,一種可能的實施方式是
Figure 02_image017
都等於M/n;或者,另一種可能的實施方式是
Figure 02_image019
,其中,
Figure 02_image017
不一定都相等;或者,又一種可能的實施方式是
Figure 02_image021
可以大於M或小於M;或者,再一種可能的實施方式是
Figure 02_image017
都大於或等於0且小於或等於M;或者,再一種可能的實施方式是
Figure 02_image017
都小於0或大於M。
可以理解,建構每一個新的單向運動訊息,主要涉及到參與計算的一組單向運動訊息的確定。通常而言,可以根據當前塊的已知運動訊息來建構新的單向運動訊息並加入運動訊息候選清單。當運動訊息候選清單中存在有運動訊息時,可以根據運動訊息候選清單中的運動訊息進行建構;或者也可以根據透過已解碼部分獲取的運動訊息進行建構,比如根據空域訊息、時域訊息、歷史運動訊息(即基於歷史訊息所得到的運動訊息)等進行建構。具體地,可以選擇兩個或多個已知運動訊息進行新的單向運動訊息的建構。當運動訊息候選清單中存在有2個或2個以上的運動訊息時,可以根據運動訊息候選清單中的運動訊息進行建構;或者也可以根據透過已解碼部分獲取的2個或2個以上的運動訊息進行建構,比如根據空域訊息、時域訊息、歷史運動訊息等進行建構。
這時候,一種可能的實施方式是所選擇的2個或2個以上的運動訊息不相同,如果根據上述方式不能找到2個或2個以上的不同的運動訊息,那麼可以加入預設的運動訊息。其中,預設的運動訊息可能是與所選擇運動訊息的參考幀訊息相同的運動向量為(0,0)的運動訊息;預設的運動訊息也可能是與所選擇運動訊息的參考幀訊息相同的運動向量為(x,y)的運動訊息,而x,y為某個預設的固定值或者與已知運動訊息的運動向量相關的某個預設的固定值,本申請實施例不作具體限定。
還需要說明的是,由於當前塊的已知運動訊息可以是單向運動訊息,還可以是雙向運動訊息,還需要對其進行判斷。具體地,在一些實施例中,該方法還可以包括:
若從初始運動訊息候選清單內選擇運動訊息,則確定所選擇的運動訊息為單向運動訊息;
若從當前塊的空域運動訊息和/或所述當前塊的時域運動訊息和/或所述當前塊的歷史運動訊息內選擇運動訊息,則判斷所選擇的運動訊息是否為雙向運動訊息;
當所選擇的運動訊息為雙向運動訊息時,將所選擇的運動訊息拆分為兩個單向運動訊息,以執行從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息的步驟。
也就是說,在確定至少一組單向運動訊息時,如果是從初始運動訊息候選清單中選取運動訊息,那所選取的運動訊息為單向運動訊息。如果是根據空域訊息、時域訊息、歷史運動訊息等,那麼需要確定所選取的運動訊息是否為單向;如果這個運動訊息是雙向運動訊息,即兩個參考幀清單的參考索引值都是有效值,這時候需要把它拆成兩個單向運動訊息分別處理。
下面將結合幾種情況,對新的單向運動訊息的建構進行詳細說明。
在一種可能的實施方式中,對於S302來說,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,可以包括:
針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個初始單向運動訊息;
確定候選參考幀,將所選擇的至少兩個初始單向運動訊息縮放到所述候選參考幀,得到至少兩個縮放後的單向運動訊息;
將所述至少兩個縮放後的單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
這樣,以一組單向運動訊息為例,該組單向運動訊息內所包括的至少兩個單向運動訊息即為縮放後的單向運動訊息,而且對應的參考幀訊息為候選參考幀;在這種情況下,根據這組單向運動訊息計算得到一個新的單向運動訊息,該新的單向運動訊息對應的參考幀訊息也為候選參考幀。其中,候選參考幀是預先任意選定的參考幀。
具體來講,該實施方式可以包括如下步驟:
第一步,選取N個單向運動訊息,N為大於或等於2的整數,即N可能是2,3,4等。如果是從初始運動訊息候選清單中選取運動訊息,那所選取的運動訊息為單向運動訊息。如果是根據空域訊息、時域訊息、歷史運動訊息等選取運動訊息,那麼需要確定所選取的運動訊息是否為單向;如果這個運動訊息是雙向運動訊息,即兩個參考幀清單的參考索引值都是有效值,這時候需要把它拆成兩個單向運動訊息分別處理。
第二步,選定一個候選參考幀,將N個單向運動訊息的MV縮放到選定的候選參考幀上。一種可能的方式是依次將這N個單向運動訊息對應的參考幀作為選定的候選參考幀。這樣的話,與選定的候選參考幀相同的參考幀對應的單向運動訊息的MV無需再做縮放,而只需將另外N-1個單向運動訊息的MV縮放到該參考幀上。
第三步,對N個縮放後的單向運動訊息的MV進行計算得到一個新的單向運動訊息,新的單向運動訊息對應的參考幀為第二步所選定的候選參考幀。這裡,計算可以是平均計算、或者是加權平均計算、或者其他計算方法等,本申請實施例不作限定。
在另一種可能的實施方式中,對於S302來說,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,可以包括:
針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息相同;
將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
這樣,仍以一組單向運動訊息為例,該組單向運動訊息內所包括的至少兩個單向運動訊息即為所選擇的單向運動訊息,而且所選擇的單向運動訊息對應的參考幀訊息相同;在這種情況下,根據這組單向運動訊息計算得到一個新的單向運動訊息,該新的單向運動訊息對應的參考幀訊息與所選擇的單向運動訊息對應的參考幀訊息是相同的。
具體來講,該實施方式可以包括如下步驟:
第一步,選取N個單向運動訊息,這N個單向運動訊息對應的參考幀訊息相同。如果是從初始運動訊息候選清單中選取運動訊息,那所選取的運動訊息為單向運動訊息,只需要判斷這N個單向運動訊息對應的參考幀訊息是否相同。如果是根據空域訊息、時域訊息、歷史運動訊息等選取運動訊息,而且所選取的運動訊息是單向的,那麼仍然只需要判斷這N個運動訊息對應的參考幀訊息是否相同;但如果所選取的運動訊息是雙向的,即兩個參考幀清單的參考索引值都是有效值,這時候還需要把它拆成兩個單向運動訊息分別處理。
第二步,對這N個單向運動訊息進行計算得到一個新的單向運動訊息,新的單向運動訊息對應的參考幀為與這N個單向運動訊息對應的參考幀相同的參考幀。這裡,計算仍然可以是平均計算、或者是加權平均計算、或者其他計算方法等,本申請實施例不作限定。
在又一種可能的實施方式中,對於S302來說,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,可以包括:
針對每一組單向運動訊息,確定候選參考幀;
從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息均為所述候選參考幀;
將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
這樣,仍以一組單向運動訊息為例,該組單向運動訊息內所包括的至少兩個單向運動訊息即為所選擇的單向運動訊息,而且所選擇的單向運動訊息對應的參考幀訊息為候選參考幀;在這種情況下,根據這組單向運動訊息計算得到一個新的單向運動訊息,該新的單向運動訊息對應的參考幀訊息也為候選參考幀。
具體來講,該實施方式可以包括如下步驟:
第一步,選定一個候選參考幀。
第二步,選取N個參考幀為候選參考幀的單向運動訊息。可以是從初始運動訊息候選清單中選取運動訊息,也可以是根據空域訊息、時域訊息、歷史運動訊息等選取運動訊息。
第三步,對這N個單向運動訊息進行計算得到一個新的單向運動訊息,新的單向運動訊息對應的參考幀為與這N個單向運動訊息的參考幀相同的候選參考幀。這裡,計算可以是平均計算、或者是加權平均計算、或者其他計算方法等,本申請實施例不作限定。
這樣,可以透過以上的幾種可能的實施方式建構出一個或多個單向運動訊息。然後將建構出的單向運動訊息填入初始運動訊息候選清單,以得到新的運動訊息候選清單。
S304:基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單。
需要說明的是,在得到至少一個新的單向運動訊息之後,可以將其填入到初始運動訊息候選清單中,以得到新的運動訊息候選清單。具體地,對於S304來說,該步驟可以包括:將至少一個新的單向運動訊息填入初始運動訊息候選清單中,得到所述新的運動訊息候選清單。
還需要說明的是,只有所得到的新的單向運動訊息與初始運動訊息候選清單內所包括的原有單向運動訊息不重複的情況下,才能夠將其填充到該候選清單。也就是說,在一些實施例中,所述將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中,可以包括:
判斷至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息是否重複;
在所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息不重複的情況下,將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中。
這樣,初始運動訊息候選清單的構建方式中,如果不重複的單向運動訊息無法填滿該候選清單,通常是採用該候選清單中最後一個單向運動訊息來重複填充以填滿該候選清單。而本申請實施例中,可以在不重複的單向運動訊息且無法填滿候選清單時,這時候透過建構新的單向運動訊息的方式以構建出新的單向運動訊息來填充候選清單;即所建構出新的單向運動訊息與候選清單中原有的單向運動訊息不重複的情況下才能夠填充進該候選清單。
進一步地,當初始運動訊息候選清單使用不重複的運動訊息無法填滿該初始運動訊息候選清單時,可以使用建構的新的單向運動訊息填充該候選清單,以得到新的運動訊息候選清單。換句話說,本申請實施例的幀間預測方法是在初始運動訊息候選清單不包括重複的單向運動訊息且初始運動訊息候選清單內已有的單向運動訊息數量小於預設數量(即初始運動訊息候選清單處於未填滿狀態)下進行的。因此,在一些實施例中,該方法還可以包括:
在所述初始運動訊息候選清單不包括重複的單向運動訊息且所述初始運動訊息候選清單內的單向運動訊息數量小於預設數量時,執行所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟。
這裡,預設數量表示初始運動訊息候選清單內預先設置可填充的單向運動訊息數量,也可以稱為初始運動訊息候選清單的長度。也就是說,根據兩個或多個已知運動訊息進行新的單向運動訊息的建構,並將建構的新的單向運動訊息寫入運動訊息候選清單。具體地,使用確定的參考幀訊息,求取平均值或加權平均值的方式建構新的單向運動訊息。這樣,當初始運動訊息候選清單使用不重複的運動訊息無法填滿該初始運動訊息候選清單時,這時候可以使用建構的新的單向運動訊息來填充該候選清單,即執行從當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟;直至初始運動訊息候選清單不包括重複的單向運動訊息且初始運動訊息候選清單處於填滿狀態時,停止建構新的單向運動訊息,即不再執行從當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟。
S305:根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
需要說明的是,當預測模式參數指示使用GPM或AWP確定當前塊的幀間預測值時,這時候可以確定出當前塊的兩個分區;其中,兩個分區可以包括第一分區和第二分區。
這樣,在得到新的運動訊息候選清單後,可以確定出當前塊的第一分區對應的運動訊息和所述第二分區的運動訊息;然後根據第一分區對應的運動訊息和所述第二分區的運動訊息,能夠確定出當前塊的幀間預測值。
具體地,如圖5所示,其示出了本申請實施例提供的另一種幀間預測方法的流程示意圖。該方法可以包括:
S501:解析位元流,確定所述第一分區對應的第一運動訊息索引值和所述第二分區對應的第二運動訊息索引值;
S502:基於新的運動訊息候選清單,將所述第一運動訊息索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第一分區的運動訊息,將所述第二運動訊息索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第二分區的運動訊息;
S503:利用所述第一分區的運動訊息計算所述第一分區的第一預測值,利用所述第二分區的運動訊息計算所述第二分區的第二預測值;
S504:對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
需要說明的是,傳統的單向預測只是查找一個與當前塊大小相同的參考塊,而傳統的雙向預測使用兩個與當前塊大小相同的參考塊,且預測塊內每個點的像素值為兩個參考塊對應位置的平均值,即每一個參考塊的所有點都占50%的比例。雙向加權預測使得兩個參考塊的比例可以不同,如第一個參考塊中所有點都占75%的比例,第二個參考塊中所有點都占25%的比例。但同一個參考塊中的所有點的比例都相同。其他一些優化方式比如採用解碼端運動向量修正(Decoder side Motion Vector Refinement,DMVR)技術、雙向光流(Bi-directional Optical Flow,BIO)等會使參考像素或預測像素產生一些變化,而且GPM或AWP也使用兩個與當前塊大小相同的參考塊,但某些像素位置100%使用第一個參考塊對應位置的像素值,某些像素位置100%使用第二個參考塊對應位置的像素值,而在交界區域,按一定比例使用這兩個參考塊對應位置的像素值。具體這些權重如何分配,由GPM或AWP的預測模式決定,或者也可以認為GPM或AWP使用兩個與當前塊大小不相同的參考塊,即各取所需的一部分作為參考塊。
示例性地,如圖6A所示,其示出了本申請實施例提供的一種GPM在64×64的當前塊上的多種劃分模式的權重分配示意圖。在圖6A中,GPM存在有64種劃分模式。如圖6B所示,其示出了本申請實施例提供的一種AWP在64×64的當前塊上的多種劃分模式的權重分配示意圖。在圖6B中,AWP存在有56種劃分模式。無論是圖6A還是圖6B,每一種劃分模式下,黑色區域表示第一個參考塊對應位置的權重值為0%,白色區域表示第一個參考塊對應位置的權重值為100%,灰色區域則按顏色深淺的不同表示第一個參考塊對應位置的權重值為大於0%且小於100%的某一個權重值,第二個參考塊對應位置的權重值則為100%減去第一個參考塊對應位置的權重值。
應理解,早期的編解碼技術中只存在矩形的劃分方式,無論是CU、PU還是變換單元(Transform Unit,TU)的劃分。而GPM或AWP均實現了非矩形的劃分,即用一條直線可以將一個矩形塊分成兩個分區,根據直線的位置和角度的不同,劃分的兩個分區可能是三角形或梯形或矩形等,從而能使得劃分更貼近物體的邊緣或者兩個運動不同區域的邊緣。需要注意的是,這裡所說的劃分並不是真正意義上的劃分,而更像是一種預測效果上的劃分。因為這個劃分只是劃分了兩個參考塊在產生預測塊時的權重,或者可以簡單地理解為預測塊的一部分位置來自於第一個參考塊,而另一部分位置來自於第二個參考塊,並沒有真正按劃分線把當前塊劃分成兩個CU或PU或TU。這樣,在預測之後殘差的變換、量化、反變換、反量化等也都是將當前塊作為一個整體進行處理。
還需要說明的是,GPM或AWP屬於一種幀間預測技術,GPM或AWP需要在位元流中傳輸一個GPM或AWP是否使用的標誌(flag),該flag可以指示當前塊是否使用GPM或AWP。如果使用GPM或AWP,編碼器在位元流中需要傳輸具體使用的模式,即GPM的64種劃分模式之一,或AWP的56種劃分模式之一;以及兩個單向運動訊息的索引值。也就是說,對於當前塊而言,解碼器透過解析位元流可以得到GPM或AWP是否使用的訊息,如果確定使用GPM或AWP,解碼器可以解析出GPM或AWP的預測模式參數以及兩個運動訊息索引值,比如當前塊可以劃分為兩個分區,那麼可以解析出第一分區對應的第一運動訊息索引值和第二分區對應的第二運動訊息索引值。
在構建新的運動訊息候選清單之前,首先需要構建一個初始運動訊息候選清單,下面以AVS中的AWP為例介紹初始運動訊息候選清單的構建方法。
如圖7所示,塊E為當前塊,而塊A、塊B、塊C、塊D、塊F、塊G均為塊E的相鄰塊。其中,塊E的相鄰塊A是樣本(
Figure 02_image023
Figure 02_image003
)所在的塊,塊E的相鄰塊B是樣本(
Figure 02_image001
Figure 02_image027
)所在的塊,塊E的相鄰塊C是樣本(
Figure 02_image029
Figure 02_image027
)所在的塊,塊E的相鄰塊D是樣本(
Figure 02_image023
Figure 02_image027
)所在的塊,塊E的相鄰塊F是樣本(
Figure 02_image023
Figure 02_image007
)所在的塊,塊E的相鄰塊G是樣本(
Figure 02_image005
Figure 02_image027
)所在的塊。其中(
Figure 02_image001
Figure 02_image003
)是塊E左上角樣本在圖像中的座標,(
Figure 02_image005
Figure 02_image003
)是塊E右上角樣本在圖像中的座標,(
Figure 02_image001
Figure 02_image007
)是塊E左下角樣本在圖像中的座標。也就是說,塊E和它的相鄰塊A、B、C、D、F和G的空間位置關係詳見圖7。
對於圖7而言,相鄰塊X(X表示為A、B、C、D、F或G)“存在”是指該塊應在待解碼圖像內並且該塊應與塊E屬於同一空間區域;否則相鄰塊“不存在”。可以得到,如果塊“不存在”或者尚未解碼,那麼此塊“不可用”;否則此塊“可用”。或者,如果待解碼圖像樣本所在的塊“不存在”或者此樣本尚未解碼,那麼此樣本“不可用”;否則此樣本“可用”。
假定第一個單向運動訊息表示為mvAwp0L0、mvAwp0L1、RefIdxAwp0L0和RefIdxAwp0L1。其中,mvAwp0L0表示在第一個參考幀清單RefPicList0中對應的運動向量,RefIdxAwp0L0表示在第一個參考幀清單RefPicList0中對應的參考幀的參考索引值;mvAwp0L1表示在第二個參考幀清單RefPicList1中對應運動向量,RefIdxAwp0L1表示在第二個參考幀清單RefPicList1中對應的參考幀的參考索引值。第二個單向運動訊息以此類推。
由於這裡的運動訊息都是單向的,所以RefIdxAwp0L0和RefIdxAwp0L1必有一個為有效值,比如0,1,2等;另一個為無效值,比如-1。如果RefIdxAwp0L0為有效值,那麼RefIdxAwp0L1為-1;這時候對應的mvAwp0L0即為所需要的運動向量,即(x,y),mvAwp0L1不需要考慮。反之亦然。
具體來講,推導mvAwp0L0、mvAwp0L1、RefIdxAwp0L0、RefIdxAwp0L1、mvAwp1L0、mvAwp1L1、RefIdxAwp1L0和RefIdxAwp1L1的步驟如下:
第一步,如圖7所示,F、G、C、A、B和D是當前塊E的相鄰塊,確定F、G、C、A、B和D的“可用”性:
(a)如果F存在且採用幀間預測模式,那麼F“可用”;否則F“不可用”。
(b)如果G存在且採用幀間預測模式,則G“可用”;否則G“不可用”。
(c)如果C存在且採用幀間預測模式,則C“可用”;否則C“不可用”。
(d)如果A存在且採用幀間預測模式,則A“可用”;否則A“不可用”。
(e)如果B存在且採用幀間預測模式,則B“可用”;否則B“不可用”。
(f)如果D存在且採用幀間預測模式,則D“可用”;否則D“不可用”。
第二步,按F、G、C、A、B和D的順序將單向可用的運動訊息放入單向運動訊息候選清單(用AwpUniArray表示),直至AwpUniArray長度為3(或4)或者遍歷結束。
第三步,如果AwpUniArray的長度小於3(或4),按F、G、C、A、B和D的順序將雙向可用的運動訊息拆分為指向參考幀清單List0的單向運動訊息以及指向參考幀清單List1的單向運動訊息,先進行單向運動訊息查重操作,若不重複則放入AwpUniArray,直至長度為3(或4)或遍歷結束。
第四步,將時域雙向的運動訊息拆分為指向參考幀清單List0的單向運動訊息以及指向參考幀清單List1的單向運動訊息,先進行單向運動訊息查重操作,若不重複則放入AwpUniArray,直至長度為4(或5)或遍歷結束。
第五步,如果AwpUniArray的長度小於4(或5),建構新的單向運動訊息,具體建構方式如下,
假定當前AwpUniArray的長度用cnt表示,按照如下方式依次獲取兩個單向運動訊息,第一個單向運動訊息依次取AwpUniArray中第1到cnt個單向運動訊息,用MI0表示;對每一個MI0,依次取第1到cnt個與MI0不在同一位置的運動訊息以及與MI0參考幀訊息相同運動向量為(0,0)的運動訊息,用MI1表示。
假定單向運動訊息與第一個參考幀清單對應的值用mvL0表示,與第二個參考幀清單對應的值用mvL1表示,第一個參考幀清單對應的參考索引值用RefIdxL0表示,第二個參考幀清單對應的參考索引值用RefIdxL1表示,而新建構的單向運動訊息用
Figure 02_image035
表示。其中,
Figure 02_image035
的RefIdxL0和RefIdxL1依次取MI0中的RefIdxL0和RefIdxL1以及MI1中的RefIdxL0和RefIdxL1。如果
Figure 02_image035
的RefIdxLX有效,X為0或1,那麼可以將MI0的mvLX和MV1的mvLX縮放到RefIdxLX對應的參考幀上,用MV0’和MV1’表示,這時候
Figure 02_image035
的mvLX等於MV0’的mvLX與MV1’的mvLX的平均值。假定
Figure 02_image035
的mvLX值用(
Figure 02_image037
)表示,而MV0’的mvLX值用(
Figure 02_image039
)表示,MV1’的mvLX值用(
Figure 02_image041
),那麼
Figure 02_image043
Figure 02_image045
的計算如下,
Figure 02_image047
(3)
Figure 02_image049
(4)
如果新建構的單向運動訊息與AwpUniArray中的每一個單向運動訊息都不重複,那麼可以將其填入AwpUniArray中,直至長度為4(或5)或遍歷結束。
第六步,如果AwpUniArray的長度小於4(或5),那麼將AwpUniArray中最後一個單向運動訊息進行重複填充操作,直至AwpUniArray長度為4(或5)。
第七步,將AwpUniArray中第AwpCandIdx0+1個運動訊息賦值給mvAwp0L0、mvAwp0L1、RefIdxAwp0L0和RefIdxAwp0L1,將AwpUniArray中第AwpCandIdx1+1個運動訊息賦值給mvAwp1L0、mvAwp1L1、RefIdxAwp1L0和RefIdxAwp1L1。
也就是說,在建構AwpUniArray的過程中,與相關技術方案相比,新增加了第五步,即建構新的單向運動訊息,且新建構的單向運動訊息與AwpUniArray中的每一個單向運動訊息都不重複,那麼可以將其填入AwpUniArray中,直至長度為4(或5)或遍歷結束。
這樣,對於當前塊而言,解碼器透過解析位元流可以得到GPM或AWP是否使用的訊息,如果確定使用GPM或AWP,解碼器可以解析出GPM或AWP的預測模式參數以及兩個運動訊息索引值,並且解碼器建構當前塊GPM或AWP使用的運動訊息候選清單,然後根據解析到的兩個運動訊息索引值可以在上述構建出新的運動訊息候選清單中找到兩個單向運動訊息,然後利用這兩個單向運動訊息可以查找到兩個參考塊,根據GPM或AWP使用的具體預測模式能夠確定出兩個參考塊在每一個像素位置的權值,最後將兩個參考塊加權計算以得到當前塊的預測塊。
進一步地,如果當前模式是跳過(skip)模式,那麼預測塊既是解碼塊,意味著當前塊的解碼結束。如果當前模式不是跳過模式,熵解碼解析量化係數,接著反量化與反變換以得到殘差塊,最後將殘差塊與預測塊相加可以得到解碼塊,意味著當前塊的解碼結束。
除此之外,目前AVS的普通幀間預測模式中運動向量預測子(Motion Vector Prediction,MVP)的構建雖然也使用了兩個MV求均值的方法,但是與本申請實施例的區別在於該部分普通運動向量預測方法的目的是利用多個候選建構唯一的MVP,而本發明的目的是建構出更多的MVP以模擬形變的場景以及平衡已有MVP的偏差。
也就是說,在本申請實施例中,透過使用本申請實施例的幀間預測方法建構新的單向運動向量並填入運動訊息候選清單,使得運動向量候選清單中的運動向量更多樣。這樣,針對物體形變的情況,建構新的單向運動訊息將會起到一定的作用。而且由於根據空域運動訊息或時域運動訊息或基於歷史運動訊息對當前塊來說可能是有偏差的,從而建構新的單向運動訊息可能會比原來的運動訊息具有更好的效果。特別是在根據空域訊息或時域訊息或基於歷史訊息所得到的運動訊息無法填滿該候選清單的時候,本申請實施例的優勢將更加明顯。
還需要說明的是,本申請實施例的運動訊息候選清單一般是指單向運動訊息候選清單,但是本申請實施例單向運動訊息的建構方式可以擴展到雙向運動訊息的建構,從而單向運動訊息候選清單的構建也可以擴展到雙向運動訊息候選清單的構建。
本實施例提供了一種幀間預測方法,應用於解碼器。解析位元流,獲取當前塊的預測模式參數;當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。這樣,在得到至少一個新的單向運動訊息之後,可以將新的單向運動訊息填入運動訊息候選清單中,能夠增加運動訊息候選清單中運動訊息的多樣性;另外,對當前塊來說,運動訊息候選清單中初始運動訊息與實際的運動訊息可能存在偏差,這時候建構新的單向運動訊息將會比初始運動訊息具有更好的效果,從而提升了編解碼性能。
本申請實施例提供一種幀間預測方法,該方法應用於影像編碼設備,即編碼器。該方法所實現的功能可以透過編碼器中的第二處理器調用電腦程式來實現,當然電腦程式可以保存在第二記憶體中,可見,該編碼器至少包括第二處理器和第二記憶體。
參見圖8,其示出了本申請實施例又一種幀間預測方法的流程示意圖。如圖8所示,該方法可以包括:
S801:確定當前塊的預測模式參數;
需要說明的是,待編碼圖像可以劃分為多個圖像塊,當前待編碼的圖像塊可以稱為當前塊,與當前塊相鄰的圖像塊可以稱為相鄰塊;即在待編碼圖像中,當前塊與相鄰塊之間具有相鄰關係。這裡,每個當前塊可以包括第一圖像分量、第二圖像分量和第三圖像分量;也即當前塊為待編碼圖像中當前待進行第一圖像分量、第二圖像分量或者第三圖像分量預測的圖像塊。
其中,假定當前塊進行第一圖像分量預測,而且第一圖像分量為亮度分量,即待預測圖像分量為亮度分量,那麼當前塊也可以稱為亮度塊;或者,假定當前塊進行第二圖像分量預測,而且第二圖像分量為色度分量,即待預測圖像分量為色度分量,那麼當前塊也可以稱為色度塊。
還需要說明的是,預測模式參數指示了當前塊採用的預測模式以及與該預測模式相關的參數。這裡,針對預測模式參數的確定,可以採用簡單的決策策略,比如根據失真值的大小進行確定;也可以採用複雜的決策策略,比如根據位元率失真優化(Rate Distortion Optimization,RDO)的結果進行確定,本申請實施例不作任何限定。通常而言,可以採用RDO方式來確定當前塊的預測模式參數。
具體地,在一些實施例中,對於S801來說,所述確定當前塊的預測模式參數,可以包括:
利用多種預測模式對所述當前塊進行預編碼處理,獲得每一種預測模式對應的位元率失真代價值;
從所獲得的多個位元率失真代價值中選擇最小位元率失真代價值,將所述最小位元率失真代價值對應的預測模式確定為當前塊的預測模式參數。
也就是說,在編碼器側,針對當前塊可以採用多種預測模式分別對當前塊進行預編碼處理。這裡,多種預測模式通常包括有幀間預測模式、傳統幀內預測模式和非傳統幀內預測模式;其中,傳統幀內預測模式可以包括有直流(Direct Current,DC)模式、平面(PLANAR)模式和角度模式等,非傳統幀內預測模式可以包括有基於矩陣的幀內預測(Matrix-based Intra Prediction,MIP)模式、跨分量線性模型預測(Cross-component Linear Model Prediction,CCLM)模式、幀內塊複製(Intra Block Copy,IBC)模式和PLT(Palette)模式等,而幀間預測模式可以包括有普通幀間預測模式、GPM預測模式和AWP預測模式等。
這樣,在利用多種預測模式分別對當前塊進行預編碼之後,可以得到每一種預測模式對應的位元率失真代價值;然後從所得到的多個位元率失真代價值中選取最小位元率失真代價值,並將該最小位元率失真代價值對應的預測模式確定為當前塊的預測模式參數。除此之外,還可以在利用多種預測模式分別對當前塊進行預編碼之後,得到每一種預測模式對應的失真值;然後從所得到的多個失真值中選取最小失真值,並將該最小失真值對應的預測模式確定為當前塊的預測模式參數。如此,最終使用所確定的預測模式參數對當前塊進行編碼,而且在這種預測模式下,可以使得預測殘差較小,能夠提高編碼效率。
S802:當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息。
需要說明的是,如果預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值的情況下,就可以採用本申請實施例所提供的幀間預測方法。這裡,預設的幀間預測模式可以為GPM預測模式或AWP預測模式等。
還需要說明的是,運動訊息可以包括運動向量(Motion Vector,MV)訊息和參考幀訊息。另外,參考幀訊息可以是由參考幀清單以及參考索引值共同確定所對應的參考幀。
在一些實施例中,當前塊的多個已知運動訊息至少可以包括:初始運動訊息候選清單內的運動訊息,和/或,所述當前塊的空域運動訊息,和/或,所述當前塊的時域運動訊息,和/或,所述當前塊的歷史運動訊息。
這裡,針對初始運動訊息候選清單,在一些實施例中,該方法還可以包括:基於當前塊的相鄰塊的運動訊息,確定初始運動訊息候選清單。
需要說明的是,初始運動訊息候選清單中存在有至少一個單向運動訊息;當初始運動訊息候選清單不包括重複的單向運動訊息且初始運動訊息候選清單內的單向運動訊息數量小於預設數量時,可以從初始運動訊息候選清單內選擇運動訊息,以得到至少一組單向運動訊息;或者,也可以從已編碼部分獲取運動訊息,比如從當前塊的空域運動訊息和/或當前塊的時域運動訊息和/或當前塊的歷史運動訊息中獲取運動訊息,以得到至少一組單向運動訊息。這樣,在得到至少一組單向運動訊息之後,由於每一組單向運動訊息對應建構一個新的單向運動訊息,如此後續可以建構出至少一個新的單向運動訊息。
S803:對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息。
需要說明的是,在得到至少一組單向運動訊息之後,可以對其採用平均值計算方法、或者採用加權計算方法、或者採用其他計算方法等,以計算得到至少一個新的單向運動訊息;而且每一組單向運動訊息對應得到一個新的單向運動訊息。
可選地,在一些實施例中,對於S803來說,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,可以包括:
針對每一組單向運動訊息,對該組單向運動訊息進行平均值計算,獲得一個新的單向運動訊息;
基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
可選地,在一些實施例中,對於S803來說,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,可以包括:
針對每一組單向運動訊息,確定該組單向運動訊息各自對應的權重值;
根據該組單向運動訊息以及各自對應的權重值進行加權平均計算,獲得一個新的單向運動訊息;
基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
可選地,在一些實施例中,對於S803來說,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,可以包括:
針對每一組單向運動訊息,確定該組單向運動訊息各自對應的比例因數;
根據該組單向運動訊息、各自對應的比例因數以及預設偏移值進行計算,獲得一個新的單向運動訊息;
基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
也就是說,在得到至少一組單向運動訊息之後,可以透過平均值計算方法或者加權平均計算方法或者其他計算方法,能夠得到至少一個新的單向運動訊息;而且每一個新的單向運動訊息與參與計算的一組單向運動訊息的參考幀訊息相同。這裡,具體的實施方式可以參見解碼器側的描述。
可以理解,建構每一個新的單向運動訊息,主要涉及到參與計算的一組單向運動訊息的確定。通常而言,可以根據當前塊的已知運動訊息來建構新的單向運動訊息並加入運動訊息候選清單。當運動訊息候選清單中存在有運動訊息時,可以根據運動訊息候選清單中的運動訊息進行建構;或者也可以根據透過已解碼部分獲取的運動訊息進行建構,比如根據空域訊息、時域訊息、歷史運動訊息(即基於歷史訊息所得到的運動訊息)等進行建構。具體地,可以選擇兩個或多個已知運動訊息進行新的單向運動訊息的建構。當運動訊息候選清單中存在有2個或2個以上的運動訊息時,可以根據運動訊息候選清單中的運動訊息進行建構;或者也可以根據透過已解碼部分獲取的2個或2個以上的運動訊息進行建構,比如根據空域訊息、時域訊息、歷史運動訊息等進行建構。
這時候,一種可能的限制方式是所選擇的2個或2個以上的運動訊息不相同,如果根據上述方式不能找到2個或2個以上的不同的運動訊息,那麼可以加入預設的運動訊息。其中,預設的運動訊息可能是與所選擇運動訊息的參考幀訊息相同的運動向量為(0,0)的運動訊息;預設的運動訊息也可能是與所選擇運動訊息的參考幀訊息相同的運動向量為(x,y)的運動訊息,而x,y為某個預設的固定值或者與已知運動訊息的運動向量相關的某個預設的固定值,本申請實施例不作具體限定。
還需要說明的是,由於當前塊的已知運動訊息可以是單向運動訊息,還可以是雙向運動訊息,還需要對其進行判斷。具體地,在一些實施例中,該方法還可以包括:
若從初始運動訊息候選清單內選擇運動訊息,則確定所選擇的運動訊息為單向運動訊息;
若從當前塊的空域運動訊息和/或所述當前塊的時域運動訊息和/或所述當前塊的歷史運動訊息內選擇運動訊息,則判斷所選擇的運動訊息是否為雙向運動訊息;
當所選擇的運動訊息為雙向運動訊息時,將所選擇的運動訊息拆分為兩個單向運動訊息,以執行從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息的步驟。
也就是說,在確定至少一組單向運動訊息時,如果是從初始運動訊息候選清單中選取運動訊息,那所選取的運動訊息為單向運動訊息。如果是根據空域訊息、時域訊息、歷史運動訊息等,那麼需要確定所選取的運動訊息是否為單向;如果這個運動訊息是雙向運動訊息,即兩個參考幀清單的參考索引值都是有效值,這時候需要把它拆成兩個單向運動訊息分別處理。
下面將結合幾種情況,對新的單向運動訊息的建構進行詳細說明。
在一種可能的實施方式中,對於S802來說,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,可以包括:
針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個初始單向運動訊息;
確定候選參考幀,將所選擇的至少兩個初始單向運動訊息縮放到所述候選參考幀,得到至少兩個縮放後的單向運動訊息;
將所述至少兩個縮放後的單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
這樣,以一組單向運動訊息為例,該組單向運動訊息內所包括的至少兩個單向運動訊息即為縮放後的單向運動訊息,而且對應的參考幀訊息為候選參考幀;在這種情況下,根據這組單向運動訊息計算得到一個新的單向運動訊息,該新的單向運動訊息對應的參考幀訊息也為候選參考幀。其中,候選參考幀是預先任意選定的參考幀。這裡,具體的實施方式可以參見解碼器側的描述。
在另一種可能的實施方式中,對於S802來說,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,可以包括:
針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息相同;
將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
這樣,仍以一組單向運動訊息為例,該組單向運動訊息內所包括的至少兩個單向運動訊息即為所選擇的單向運動訊息,且所選擇的單向運動訊息對應的參考幀訊息相同;在這種情況下,根據這組單向運動訊息計算得到一個新的單向運動訊息,該新的單向運動訊息對應的參考幀訊息與所選擇的單向運動訊息對應的參考幀訊息是相同的。這裡,具體的實施方式可以參見解碼器側的描述。
在又一種可能的實施方式中,對於S802來說,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,可以包括:
針對每一組單向運動訊息,確定候選參考幀;
從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息均為所述候選參考幀;
將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
這樣,仍以一組單向運動訊息為例,該組單向運動訊息內所包括的至少兩個單向運動訊息即為所選擇的單向運動訊息,而且所選擇的單向運動訊息對應的參考幀訊息為候選參考幀;在這種情況下,根據這組單向運動訊息計算得到一個新的單向運動訊息,該新的單向運動訊息對應的參考幀訊息也為候選參考幀。這裡,具體的實施方式可以參見解碼器側的描述。
如此,可以透過以上的幾種可能的實施方式建構出一個或多個單向運動訊息。然後將建構出的單向運動訊息填入初始運動訊息候選清單,以得到新的運動訊息候選清單。
S804:基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單。
需要說明的是,在得到至少一個新的單向運動訊息之後,可以將其填入到初始運動訊息候選清單中,以得到新的運動訊息候選清單。具體地,對於S804來說,該步驟可以包括:將至少一個新的單向運動訊息填入初始運動訊息候選清單中,得到所述新的運動訊息候選清單。
還需要說明的是,只有所得到的新的單向運動訊息與初始運動訊息候選清單內所包括的原有單向運動訊息不重複的情況下,才能夠將其填充到該候選清單。在一些實施例中,所述將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中,可以包括:
判斷至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息是否重複;
在所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息不重複的情況下,將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中。
這樣,初始運動訊息候選清單的構建方式中,如果不重複的單向運動訊息無法填滿該候選清單,通常是採用該候選清單中最後一個單向運動訊息來重複填充以填滿該候選清單。而本申請實施例中,可以在不重複的單向運動訊息且無法填滿候選清單時,這時候透過建構新的單向運動訊息的方式以構建出新的單向運動訊息來填充候選清單;即所建構出新的單向運動訊息與候選清單中原有的單向運動訊息不重複的情況下才能夠填充進該候選清單。
換句話說,本申請實施例的幀間預測方法是在初始運動訊息候選清單不包括重複的單向運動訊息且初始運動訊息候選清單內已有的單向運動訊息數量小於預設數量(即初始運動訊息候選清單處於未填滿狀態)下進行的。因此,在一些實施例中,該方法還可以包括:
在所述初始運動訊息候選清單不包括重複的單向運動訊息且所述初始運動訊息候選清單內的單向運動訊息數量小於預設數量時,執行所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟。
也就是說,根據兩個或多個已知運動訊息進行新的單向運動訊息的建構,並將建構的新的單向運動訊息寫入運動訊息候選清單。具體地,使用確定的參考幀訊息,求取平均值或加權平均值的方式建構新的單向運動訊息。這樣,當初始運動訊息候選清單使用不重複的運動訊息無法填滿該初始運動訊息候選清單時,這時候可以使用建構的新的單向運動訊息來填充該候選清單,即執行從當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟;直至初始運動訊息候選清單不包括重複的單向運動訊息且初始運動訊息候選清單處於填滿狀態時,停止建構新的單向運動訊息,即不再執行從當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟。
S805:根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
需要說明的是,當預測模式參數指示使用GPM或AWP確定當前塊的幀間預測值時,這時候可以確定出當前塊的兩個分區;其中,兩個分區可以包括第一分區和第二分區。
這樣,在得到新的運動訊息候選清單後,可以確定出當前塊的第一分區對應的運動訊息和所述第二分區的運動訊息;然後根據第一分區對應的運動訊息和所述第二分區的運動訊息,能夠確定出當前塊的幀間預測值。
具體地,在一些實施例中,對於S805來說,所述根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值,可以包括:
基於所述新的運動訊息候選清單,確定所述第一分區的運動訊息和所述第二分區的運動訊息,並將第一運動訊息索引值設置為所述第一分區的運動訊息在所述新的運動訊息候選清單中的索引序號值,將第二運動訊息索引值設置為所述第二分區的運動訊息在所述新的運動訊息候選清單中的索引序號值;
利用所述第一分區的運動訊息計算所述第一分區的第一預測值,利用所述第二分區的運動訊息計算所述第二分區的第二預測值;
對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
進一步地,在一些實施例中,該方法還可以包括:
將所述第一運動訊息索引值和所述第二運動訊息索引值寫入位元流。
需要說明的是,GPM或AWP屬於一種幀間預測技術,在編碼器側,GPM或AWP需要在位元流中傳輸一個GPM或AWP是否使用的標誌(flag)以及兩個運動訊息索引值(比如第一運動訊息索引值和第二運動訊息索引值),這樣後續解碼器側,能夠透過解析位元流直接得到GPM或AWP是否使用的flag以及兩個運動訊息索引值。
也就是說,對於當前塊而言,可以嘗試使用GPM或AWP進行預編碼及其他可用預測模式進行預編碼,確定是否使用GPM或AWP。如果GPM或AWP的預編碼代價最小,那麼可以使用GPM或AWP。同時,在嘗試使用GPM或AWP時,還可以構建運動訊息候選清單,該構建方式和解碼器側實施例所述的構建方式相同。
這樣,在編碼器側,從運動訊息候選清單中選擇兩個單向運動訊息,然後從GPM或AWP的預測模式中選擇一種模式進行預編碼來確定GPM或AWP的預編碼代價。一種可能的方式是對所有可能的單向運動訊息候選的組合,基於所有可能的GPM或AWP的預測模式確定其代價,然後取代價最小的兩個單向運動訊息和GPM或AWP的預測模式的組合作為最終所確定的兩個單向運動訊息和GPM或AWP的預測模式。
最後,在位元流中寫入GPM或AWP是否使用的訊息。如果確定使用GPM或AWP,在位元流中寫入GPM或AWP的預測模式參數和兩個單向運動訊息索引值。如此,如果當前模式是跳過模式,那麼預測塊既是編碼塊,意味著當前塊的編碼結束。如果當前模式不是跳過模式,還需要在位元流中寫入量化係數;其中,量化係數由當前塊的實際值減去幀間預測值所得到的殘差而組成的殘差塊,並對殘差塊進行變換與量化得到,這時候當前塊的編碼結束。
還需要說明的是,本申請實施例的運動訊息候選清單一般是指單向運動訊息候選清單,但是本申請實施例單向運動訊息的建構方式可以擴展到雙向運動訊息的建構,從而單向運動訊息候選清單的構建也可以擴展到雙向運動訊息候選清單的構建。
本實施例提供了一種幀間預測方法,應用於編碼器。確定當前塊的預測模式參數;當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。這樣,在得到至少一個新的單向運動訊息之後,可以將新的單向運動訊息填入運動訊息候選清單中,能夠增加運動訊息候選清單中運動訊息的多樣性;另外,對當前塊來說,運動訊息候選清單中初始運動訊息與實際的運動訊息可能存在偏差,這時候建構新的單向運動訊息將會比初始運動訊息具有更好的效果,從而提升了編解碼性能。
基於前述實施例相同的發明構思,參見圖9,其示出了本申請實施例提供的一種解碼器90的組成結構示意圖。如圖9所示,解碼器90可以包括:解析單元901、第一確定單元902、第一計算單元903、第一構建單元904和第一預測單元905;其中,
解析單元901,配置為解析位元流,獲取當前塊的預測模式參數;
第一確定單元902,配置為當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;
第一計算單元903,配置為對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;
第一構建單元904,配置為基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;
第一預測單元905,配置為根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
在一些實施例中,所述運動訊息包括運動向量訊息和參考幀訊息。
在一些實施例中,參見圖9,解碼器90還可以包括第一選擇單元906和第一縮放單元907;其中,
第一選擇單元906,配置為針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個初始單向運動訊息;
第一縮放單元907,配置為確定候選參考幀,將所選擇的至少兩個初始單向運動訊息縮放到所述候選參考幀,得到至少兩個縮放後的單向運動訊息;
第一確定單元902,還配置為將所述至少兩個縮放後的單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
在一些實施例中,第一選擇單元906,還配置為針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息相同;
第一確定單元902,還配置為將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
在一些實施例中,第一選擇單元906,還配置為針對每一組單向運動訊息,確定候選參考幀;從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息均為所述候選參考幀;
第一確定單元902,還配置為將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
在一些實施例中,第一計算單元903,還配置為針對每一組單向運動訊息,對所述一組單向運動訊息進行平均值計算,獲得一個新的單向運動訊息;基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
在一些實施例中,第一計算單元903,還配置為針對每一組單向運動訊息,確定所述一組單向運動訊息各自對應的權重值;根據所述一組單向運動訊息以及各自對應的權重值進行加權平均計算,獲得一個新的單向運動訊息;基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
在一些實施例中,第一確定單元902,還配置為基於所述當前塊的相鄰塊的運動訊息,確定初始運動訊息候選清單;
第一構建單元904,配置為將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中,得到所述新的運動訊息候選清單。
在一些實施例中,參見圖9,解碼器90還可以包括第一判斷單元908,配置為判斷所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息是否重複;
第一構建單元904,還配置為在所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息不重複的情況下,將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中。
在一些實施例中,第一構建單元904,還配置為在所述初始運動訊息候選清單不包括重複的單向運動訊息且所述初始運動訊息候選清單內的單向運動訊息數量小於預設數量時,執行所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟。
在一些實施例中,所述當前塊的多個已知運動訊息至少包括:所述初始運動訊息候選清單內的運動訊息,和/或,所述當前塊的空域運動訊息,和/或,所述當前塊的時域運動訊息,和/或,所述當前塊的歷史運動訊息。
在一些實施例中,第一確定單元902,還配置為若從所述初始運動訊息候選清單內選擇運動訊息,則確定所選擇的運動訊息為單向運動訊息;
第一判斷單元908,還配置為若從所述當前塊的空域運動訊息和/或所述當前塊的時域運動訊息和/或所述當前塊的歷史運動訊息內選擇運動訊息,則判斷所選擇的運動訊息是否為雙向運動訊息;當所選擇的運動訊息為雙向運動訊息時,將所選擇的運動訊息拆分為兩個單向運動訊息,以執行從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息的步驟。
在一些實施例中,所述預設的幀間預測模式包括:幾何劃分預測模式GPM或角度加權預測模式AWP。
在一些實施例中,第一確定單元902,還配置為當所述預測模式參數指示使用GPM或AWP確定當前塊的幀間預測值時,確定所述當前塊的兩個分區;其中,所述兩個分區包括第一分區和第二分區;
解析單元901,還配置為解析位元流,確定所述第一分區對應的第一運動訊息索引值和所述第二分區對應的第二運動訊息索引值;
第一確定單元902,還配置為基於所述新的運動訊息候選清單,將所述第一運動訊息索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第一分區的運動訊息,將所述第二運動訊息索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第二分區的運動訊息;
第一預測單元905,配置為利用所述第一分區的運動訊息計算所述第一分區的第一預測值,利用所述第二分區的運動訊息計算所述第二分區的第二預測值;對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
可以理解地,在本申請實施例中,“單元”可以是部分電路、部分處理器、部分程式或軟體等等,當然也可以是模組,還可以是非模組化的。而且在本實施例中的各組成部分可以集成在一個處理單元中,也可以是各個單元單獨實體存在,也可以兩個或兩個以上單元集成在一個單元中。上述集成的單元既可以採用硬體的形式實現,也可以採用軟體功能模組的形式實現。
所述集成的單元如果以軟體功能模組的形式實現並非作為獨立的產品進行銷售或使用時,可以儲存在一個電腦可讀取儲存媒介中,基於這樣的理解,本實施例的技術方案本質上或者說對現有技術做出貢獻的部分或者該技術方案的全部或部分可以以軟體產品的形式體現出來,該電腦軟體產品儲存在一個儲存媒介中,包括若干指令用以使得一台電腦設備(可以是個人電腦,伺服器,或者網路設備等)或processor(處理器)執行本實施例所述方法的全部或部分步驟。而前述的儲存媒介包括:隨身碟、行動硬碟、唯讀記憶體(Read Only Memory,ROM)、隨機存取記憶體(Random Access Memory,RAM)、磁碟或者光碟等各種可以儲存程式碼的媒介。
因此,本申請實施例提供了一種電腦儲存媒介,應用於解碼器90,該電腦儲存媒介儲存有幀間預測程式,所述幀間預測程式被第一處理器執行時實現前述實施例中解碼器側所述的方法。
基於上述解碼器90的組成以及電腦儲存媒介,參見圖10,其示出了本申請實施例提供的解碼器90的具體硬體結構示例,可以包括:第一通訊介面1001、第一記憶體1002和第一處理器1003;各個元件透過第一匯流排系統1004耦合在一起。可理解,第一匯流排系統1004用於實現這些元件之間的連接通訊。第一匯流排系統1004除包括資料匯流排之外,還包括電源匯流排、控制匯流排和狀態信號匯流排。但是為了清楚說明起見,在圖10中將各種匯流排都標為第一匯流排系統1004。其中,
第一通訊介面1001,用於在與其他外部網路元件之間進行收發訊息過程中,信號的接收和發送;
第一記憶體1002,用於儲存能夠在第一處理器1003上運行的電腦程式;
第一處理器1003,用於在運行所述電腦程式時,執行:
解析位元流,獲取當前塊的預測模式參數;
當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;
對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;
基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;
根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
可以理解,本申請實施例中的第一記憶體1002可以是揮發性記憶體或非揮發性記憶體,或可包括揮發性和非揮發性記憶體兩者。其中,非揮發性記憶體可以是唯讀記憶體(Read-Only Memory,ROM)、可程式唯讀記憶體(Programmable ROM,PROM)、可擦除可程式唯讀記憶體(Erasable PROM,EPROM)、電可擦除可程式唯讀記憶體(Electrically EPROM,EEPROM)或快閃記憶體。揮發性記憶體可以是隨機存取記憶體(Random Access Memory,RAM),其用作外部快取記憶體。透過示例性但不是限制性說明,許多形式的RAM可用,例如靜態隨機存取記憶體(Static RAM,SRAM)、動態隨機存取記憶體(Dynamic RAM,DRAM)、同步動態隨機存取記憶體(Synchronous DRAM,SDRAM)、雙倍數據速率同步動態隨機存取記憶體(Double Data Rate SDRAM,DDRSDRAM)、增強型同步動態隨機存取記憶體(Enhanced SDRAM,ESDRAM)、同步連接動態隨機存取記憶體(Synclink DRAM,SLDRAM)和直接記憶體匯流排隨機存取記憶體(Direct Rambus RAM,DRRAM)。本申請描述的系統和方法的第一記憶體1002旨在包括但不限於這些和任意其它適合類型的記憶體。
而第一處理器1003可能是一種積體電路晶片,具有信號的處理能力。在實現過程中,上述方法的各步驟可以透過第一處理器1003中的硬體的集成邏輯電路或者軟體形式的指令完成。上述的第一處理器1003可以是通用處理器、數位訊號處理器(Digital Signal Processor,DSP)、專用積體電路(Application Specific Integrated Circuit,ASIC)、場域可程式閘陣列(Field Programmable Gate Array,FPGA)或者其他可程式邏輯器件、離散閘或者電晶體邏輯器件、離散硬體元件。可以實現或者執行本申請實施例中的公開的各方法、步驟及邏輯方塊圖。通用處理器可以是微處理器或者該處理器也可以是任何常規的處理器等。結合本申請實施例所公開的方法的步驟可以直接體現為硬體解碼處理器執行完成,或者用解碼處理器中的硬體及軟體模組組合執行完成。軟體模組可以位於隨機記憶體,快閃記憶體、唯讀記憶體,可程式唯讀記憶體或者電可讀寫可程式記憶體、暫存器等本領域成熟的儲存媒介中。該儲存媒介位於第一記憶體1002,第一處理器1003讀取第一記憶體1002中的訊息,結合其硬體完成上述方法的步驟。
可以理解的是,本申請描述的這些實施例可以用硬體、軟體、韌體、中介軟體、微碼或其組合來實現。對於硬體實現,處理單元可以實現在一個或多個專用積體電路(Application Specific Integrated Circuits,ASIC)、數位訊號處理器(Digital Signal Processing,DSP)、數位信號處理設備(DSP Device,DSPD)、可程式邏輯裝置(Programmable Logic Device,PLD)、場域可程式閘陣列(Field-Programmable Gate Array,FPGA)、通用處理器、控制器、微控制器、微處理器、用於執行本申請所述功能的其它電子單元或其組合中。對於軟體實現,可透過執行本申請所述功能的模組(例如過程、函數等)來實現本申請所述的技術。軟體代碼可儲存在記憶體中並透過處理器執行。記憶體可以在處理器中或在處理器外部實現。
可選地,作為另一個實施例,第一處理器1003還配置為在運行所述電腦程式時,執行前述實施例中任一項所述的方法。
本實施例提供了一種解碼器,該解碼器可以包括解析單元、第一確定單元、第一計算單元、第一構建單元和第一預測單元。在該解碼器中,在得到至少一個新的單向運動訊息之後,可以將新的單向運動訊息填入運動訊息候選清單中,能夠增加運動訊息候選清單中運動訊息的多樣性;另外,對當前塊來說,運動訊息候選清單中初始運動訊息與實際的運動訊息可能存在偏差,這時候建構新的單向運動訊息將會比初始運動訊息具有更好的效果,從而提升了編解碼性能。
基於前述實施例相同的發明構思,參見圖11,其示出了本申請實施例提供的一種編碼器110的組成結構示意圖。如圖11所示,該編碼器110可以包括:第二確定單元1101、第二計算單元1102、第二構建單元1103和第二預測單元1104;其中,
第二確定單元1101,配置為確定當前塊的預測模式參數;
第二確定單元1101,還配置為當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;
第二計算單元1102,配置為對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;
第二構建單元1103,配置為基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;
第二預測單元1104,配置為根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
在一些實施例中,所述運動訊息包括運動向量訊息和參考幀訊息。
在一些實施例中,參見圖11,編碼器110還可以包括預編碼單元1105和第二選擇單元1106;其中,
預編碼單元1105,配置為利用多種預測模式對所述當前塊進行預編碼處理,獲得每一種預測模式對應的位元率失真代價值;
第二選擇單元1106,配置為從所獲得的多個位元率失真代價值中選擇最小位元率失真代價值,將所述最小位元率失真代價值對應的預測模式確定為當前塊的預測模式參數。
在一些實施例中,參見圖11,編碼器110還可以包括第二縮放單元1107;其中,
第二選擇單元1106,還配置為針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個初始單向運動訊息;
第二縮放單元1107,配置為確定候選參考幀,將所選擇的至少兩個初始單向運動訊息縮放到所述候選參考幀,得到至少兩個縮放後的單向運動訊息;
第二確定單元1101,還配置為將所述至少兩個縮放後的單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
在一些實施例中,第二選擇單元1106,還配置為針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息相同;
第二確定單元1101,還配置為將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
在一些實施例中,第二選擇單元1106,還配置為針對每一組單向運動訊息,確定候選參考幀;從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息均為所述候選參考幀;
第二確定單元1101,還配置為將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
在一些實施例中,第二計算單元1102,還配置為針對每一組單向運動訊息,對所述一組單向運動訊息進行平均值計算,獲得一個新的單向運動訊息;基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
在一些實施例中,第二計算單元1102,還配置為針對每一組單向運動訊息,確定所述一組單向運動訊息各自對應的權重值;根據所述一組單向運動訊息以及各自對應的權重值進行加權平均計算,獲得一個新的單向運動訊息;基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
在一些實施例中,第二確定單元1101,還配置為基於所述當前塊的相鄰塊的運動訊息,確定初始運動訊息候選清單;
第二構建單元1103,配置為將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中,得到所述新的運動訊息候選清單。
在一些實施例中,參見圖11,編碼器110還可以包括第二判斷單元1108,配置為判斷所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息是否重複;
第二構建單元1103,還配置為在所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息不重複的情況下,將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中。
在一些實施例中,第二構建單元1103,還配置為在所述初始運動訊息候選清單不包括重複的單向運動訊息且所述初始運動訊息候選清單內的單向運動訊息數量小於預設數量時,執行所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟。
在一些實施例中,所述當前塊的多個已知運動訊息至少包括:所述初始運動訊息候選清單內的運動訊息,和/或,所述當前塊的空域運動訊息,和/或,所述當前塊的時域運動訊息,和/或,所述當前塊的歷史運動訊息。
在一些實施例中,第二確定單元1101,還配置為若從所述初始運動訊息候選清單內選擇運動訊息,則確定所選擇的運動訊息為單向運動訊息;
第二判斷單元1108,還配置為若從所述當前塊的空域運動訊息和/或所述當前塊的時域運動訊息和/或所述當前塊的歷史運動訊息內選擇運動訊息,則判斷所選擇的運動訊息是否為雙向運動訊息;當所選擇的運動訊息為雙向運動訊息時,將所選擇的運動訊息拆分為兩個單向運動訊息,以執行從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息的步驟。
在一些實施例中,所述預設的幀間預測模式包括:幾何劃分預測模式GPM或角度加權預測模式AWP。
在一些實施例中,第二確定單元1101,還配置為當所述預測模式參數指示使用GPM或AWP確定當前塊的幀間預測值時,確定所述當前塊的兩個分區;其中,所述兩個分區包括第一分區和第二分區;以及基於所述新的運動訊息候選清單,確定所述第一分區的運動訊息和所述第二分區的運動訊息,並將第一運動訊息索引值設置為所述第一分區的運動訊息在所述新的運動訊息候選清單中的索引序號值,將第二運動訊息索引值設置為所述第二分區的運動訊息在所述新的運動訊息候選清單中的索引序號值;
第二計算單元1102,還配置為利用所述第一分區的運動訊息計算所述第一分區的第一預測值,利用所述第二分區的運動訊息計算所述第二分區的第二預測值;
第二預測單元1104,配置為對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
在一些實施例中,參見圖11,編碼器110還可以包括寫入單元1109,配置為將所述第一運動訊息索引值和所述第二運動訊息索引值寫入位元流。
可以理解地,在本實施例中,“單元”可以是部分電路、部分處理器、部分程式或軟體等等,當然也可以是模組,還可以是非模組化的。而且在本實施例中的各組成部分可以集成在一個處理單元中,也可以是各個單元單獨實體存在,也可以兩個或兩個以上單元集成在一個單元中。上述集成的單元既可以採用硬體的形式實現,也可以採用軟體功能模組的形式實現。
所述集成的單元如果以軟體功能模組的形式實現並非作為獨立的產品進行銷售或使用時,可以儲存在一個電腦可讀取儲存媒介中,基於這樣的理解,本實施例提供了一種電腦儲存媒介,應用於編碼器110,該電腦儲存媒介儲存有幀間預測程式,所述幀間預測程式被第二處理器執行時實現前述實施例中編碼器側所述的方法。
基於上述編碼器110的組成以及電腦儲存媒介,參見圖12,其示出了本申請實施例提供的編碼器110的具體硬體結構示例,可以包括:第二通訊介面1201、第二記憶體1202和第二處理器1203;各個元件透過第二匯流排系統1204耦合在一起。可理解,第二匯流排系統1204用於實現這些元件之間的連接通訊。第二匯流排系統1204除包括資料匯流排之外,還包括電源匯流排、控制匯流排和狀態信號匯流排。但是為了清楚說明起見,在圖12中將各種匯流排都標為第二匯流排系統1204。其中,
第二通訊介面1201,用於在與其他外部網路元件之間進行收發訊息過程中,信號的接收和發送;
第二記憶體1202,用於儲存能夠在第二處理器1203上運行的電腦程式;
第二處理器1203,用於在運行所述電腦程式時,執行:
確定當前塊的預測模式參數;
當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息;
對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息;
基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單;
根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
可選地,作為另一個實施例,第二處理器1203還配置為在運行所述電腦程式時,執行前述實施例中任一項所述的方法。
可以理解,第二記憶體1202與第一記憶體1002的硬體功能類似,第二處理器1203與第一處理器1003的硬體功能類似;這裡不再詳述。
本實施例提供了一種編碼器,該編碼器可以包括第二確定單元、第二計算單元、第二構建單元和第二預測單元。在該編碼器中,在得到至少一個新的單向運動訊息之後,可以將新的單向運動訊息填入運動訊息候選清單中,能夠增加運動訊息候選清單中運動訊息的多樣性;另外,對當前塊來說,運動訊息候選清單中初始運動訊息與實際的運動訊息可能存在偏差,這時候建構新的單向運動訊息將會比初始運動訊息具有更好的效果,從而提升了編解碼性能。
需要說明的是,在本申請中,術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下,由語句“包括一個……”限定的要素,並不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。
上述本申請實施例序號僅僅為了描述,不代表實施例的優劣。
本申請所提供的幾個方法實施例中所揭露的方法,在不衝突的情況下可以任意組合,得到新的方法實施例。
本申請所提供的幾個產品實施例中所揭露的特徵,在不衝突的情況下可以任意組合,得到新的產品實施例。
本申請所提供的幾個方法或設備實施例中所揭露的特徵,在不衝突的情況下可以任意組合,得到新的方法實施例或設備實施例。
以上所述,僅為本申請的具體實施方式,但本申請的保護範圍並不局限於此,任何熟悉本技術領域的技術人員在本申請揭露的技術範圍內,可輕易想到變化或替換,都應涵蓋在本申請的保護範圍之內。因此,本申請的保護範圍應以所述請求項的保護範圍為準。
11:影像編碼系統 110:解碼圖像暫存單元 111:變換單元 112:量化單元 113:模式選擇和編碼控制邏輯單元 114:幀內預測單元 115:幀間預測單元 116:反量化單元 117:反變換單元 118:迴路濾波單元 119:編碼單元 12:影像解碼系統 121:解碼單元 122:反量化單元 123:幀內預測單元 124:運動補償單元 125:迴路濾波單元 126:解碼圖像暫存單元 127:反變換單元 90:解碼器 901:解析單元 902:第一確定單元 903:第一計算單元 904:第一構建單元 905:第一預測單元 906:第一選擇單元 907:第一縮放單元 908:第一判斷單元 1001:第一通訊介面 1002:第一記憶體 1003:第一處理器 1004:第一匯流排系統 110:編碼器 1101:第二確定單元 1102:第二計算單元 1103:第二構建單元 1104:第二預測單元 1105:預編碼單元 1106:第二選擇單元 1107:第二縮放單元 1108:第二判斷單元 1109:寫入單元 1201:第二通訊介面 1202:第二記憶體 1203:第二處理器 1204:第二匯流排系統 A~G:塊 S301~S305:步驟 S501~S504:步驟 S801~S805:步驟
圖1為本申請實施例提供的一種影像編碼系統的組成方塊圖示意圖;
圖2為本申請實施例提供的一種影像解碼系統的組成方塊圖示意圖;
圖3為本申請實施例提供的一種幀間預測方法的流程示意圖;
圖4為本申請實施例提供的一種典型圖像組的結構示意圖;
圖5為本申請實施例提供的另一種幀間預測方法的流程示意圖;
圖6A為本申請實施例提供的一種GPM在64×64的當前塊上多種劃分模式的權重分配示意圖;
圖6B為本申請實施例提供的一種AWP在64×64的當前塊上多種劃分模式的權重分配示意圖;
圖7為本申請實施例提供的一種當前塊與相鄰塊的空間位置關係示意圖;
圖8為本申請實施例提供的又一種幀間預測方法的流程示意圖;
圖9為本申請實施例提供的一種解碼器的組成結構示意圖;
圖10為本申請實施例提供的一種解碼器的硬體結構示意圖;
圖11為本申請實施例提供的一種編碼器的組成結構示意圖;
圖12為本申請實施例提供的一種編碼器的硬體結構示意圖。
S301~S305:步驟

Claims (35)

  1. 一種幀間預測方法,應用於解碼器,所述方法包括: 解析位元流,獲取當前塊的預測模式參數; 當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息; 對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息; 基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單; 根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
  2. 根據請求項1所述的方法,其中,所述運動訊息包括運動向量訊息和參考幀訊息。
  3. 根據請求項1所述的方法,其中,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,包括: 針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個初始單向運動訊息; 確定候選參考幀,將所選擇的至少兩個初始單向運動訊息縮放到所述候選參考幀,得到至少兩個縮放後的單向運動訊息; 將所述至少兩個縮放後的單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
  4. 根據請求項1所述的方法,其中,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,包括: 針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息相同; 將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
  5. 根據請求項1所述的方法,其中,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,包括: 針對每一組單向運動訊息,確定候選參考幀; 從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息均為所述候選參考幀; 將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
  6. 根據請求項1至5任一項所述的方法,其中,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,包括: 針對每一組單向運動訊息,對所述一組單向運動訊息進行平均值計算,獲得一個新的單向運動訊息; 基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
  7. 根據請求項1至5任一項所述的方法,其中,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,包括: 針對每一組單向運動訊息,確定所述一組單向運動訊息各自對應的權重值; 根據所述一組單向運動訊息以及各自對應的權重值進行加權平均計算,獲得一個新的單向運動訊息; 基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
  8. 根據請求項1所述的方法,所述方法還包括: 基於所述當前塊的相鄰塊的運動訊息,確定初始運動訊息候選清單; 相應地,所述基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單,包括: 將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中,得到所述新的運動訊息候選清單。
  9. 根據請求項8所述的方法,其中,所述將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中,包括: 判斷所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息是否重複; 在所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息不重複的情況下,將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中。
  10. 根據請求項8所述的方法,所述方法還包括: 在所述初始運動訊息候選清單不包括重複的單向運動訊息且所述初始運動訊息候選清單內的單向運動訊息數量小於預設數量時,執行所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟。
  11. 根據請求項8所述的方法,其中,所述當前塊的多個已知運動訊息至少包括:所述初始運動訊息候選清單內的運動訊息,和/或,所述當前塊的空域運動訊息,和/或,所述當前塊的時域運動訊息,和/或,所述當前塊的歷史運動訊息。
  12. 根據請求項11所述的方法,所述方法還包括: 若從所述初始運動訊息候選清單內選擇運動訊息,則確定所選擇的運動訊息為單向運動訊息; 若從所述當前塊的空域運動訊息和/或所述當前塊的時域運動訊息和/或所述當前塊的歷史運動訊息內選擇運動訊息,則判斷所選擇的運動訊息是否為雙向運動訊息; 當所選擇的運動訊息為雙向運動訊息時,將所選擇的運動訊息拆分為兩個單向運動訊息,以執行從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息的步驟。
  13. 根據請求項1所述的方法,其中,所述預設的幀間預測模式包括:幾何劃分預測模式GPM或角度加權預測模式AWP。
  14. 根據請求項13所述的方法,所述方法還包括: 當所述預測模式參數指示使用GPM或AWP確定當前塊的幀間預測值時,確定所述當前塊的兩個分區;其中,所述兩個分區包括第一分區和第二分區; 相應地,所述根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值,包括: 解析位元流,確定所述第一分區對應的第一運動訊息索引值和所述第二分區對應的第二運動訊息索引值; 基於所述新的運動訊息候選清單,將所述第一運動訊息索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第一分區的運動訊息,將所述第二運動訊息索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第二分區的運動訊息; 利用所述第一分區的運動訊息計算所述第一分區的第一預測值,利用所述第二分區的運動訊息計算所述第二分區的第二預測值; 對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
  15. 一種幀間預測方法,應用於編碼器,所述方法包括: 確定當前塊的預測模式參數; 當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息; 對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息; 基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單; 根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
  16. 根據請求項15所述的方法,其中,所述運動訊息包括運動向量訊息和參考幀訊息。
  17. 根據請求項15所述的方法,其中,所述確定當前塊的預測模式參數,包括: 利用多種預測模式對所述當前塊進行預編碼處理,獲得每一種預測模式對應的位元率失真代價值; 從所獲得的多個位元率失真代價值中選擇最小位元率失真代價值,將所述最小位元率失真代價值對應的預測模式確定為當前塊的預測模式參數。
  18. 根據請求項15所述的方法,其中,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,包括: 針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個初始單向運動訊息; 確定候選參考幀,將所選擇的至少兩個初始單向運動訊息縮放到所述候選參考幀,得到至少兩個縮放後的單向運動訊息; 將所述至少兩個縮放後的單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
  19. 根據請求項15所述的方法,其中,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,包括: 針對每一組單向運動訊息,從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息相同; 將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
  20. 根據請求項15所述的方法,其中,所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息,包括: 針對每一組單向運動訊息,確定候選參考幀; 從所述當前塊的多個已知運動訊息中選擇至少兩個單向運動訊息,且所述至少兩個單向運動訊息對應的參考幀訊息均為所述候選參考幀; 將所述至少兩個單向運動訊息確定為一組單向運動訊息,以得到所述至少一組單向運動訊息。
  21. 根據請求項15至20任一項所述的方法,其中,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,包括: 針對每一組單向運動訊息,對所述一組單向運動訊息進行平均值計算,獲得一個新的單向運動訊息; 基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
  22. 根據請求項15至20任一項所述的方法,其中,所述對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息,包括: 針對每一組單向運動訊息,確定所述一組單向運動訊息各自對應的權重值; 根據所述一組單向運動訊息以及各自對應的權重值進行加權平均計算,獲得一個新的單向運動訊息; 基於所述至少一組單向運動訊息,得到至少一個新的單向運動訊息。
  23. 根據請求項15所述的方法,所述方法還包括: 基於所述當前塊的相鄰塊的運動訊息,確定初始運動訊息候選清單; 相應地,所述基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單,包括: 將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中,得到所述新的運動訊息候選清單。
  24. 根據請求項23所述的方法,其中,所述將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中,包括: 判斷所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息是否重複; 在所述至少一個新的單向運動訊息與所述初始運動訊息候選清單內的運動訊息不重複的情況下,將所述至少一個新的單向運動訊息填入所述初始運動訊息候選清單中。
  25. 根據請求項23所述的方法,所述方法還包括: 在所述初始運動訊息候選清單不包括重複的單向運動訊息且所述初始運動訊息候選清單內的單向運動訊息數量小於預設數量時,執行所述從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;以及對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息的步驟。
  26. 根據請求項23所述的方法,其中,所述當前塊的多個已知運動訊息至少包括:所述初始運動訊息候選清單內的運動訊息,和/或,所述當前塊的空域運動訊息,和/或,所述當前塊的時域運動訊息,和/或,所述當前塊的歷史運動訊息。
  27. 根據請求項26所述的方法,所述方法還包括: 若從所述初始運動訊息候選清單內選擇運動訊息,則確定所選擇的運動訊息為單向運動訊息; 若從所述當前塊的空域運動訊息和/或所述當前塊的時域運動訊息和/或所述當前塊的歷史運動訊息內選擇運動訊息,則判斷所選擇的運動訊息是否為雙向運動訊息; 當所選擇的運動訊息為雙向運動訊息時,將所選擇的運動訊息拆分為兩個單向運動訊息,以執行從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息的步驟。
  28. 根據請求項15所述的方法,其中,所述預設的幀間預測模式包括:幾何劃分預測模式GPM或角度加權預測模式AWP。
  29. 根據請求項28所述的方法,所述方法還包括: 當所述預測模式參數指示使用GPM或AWP確定當前塊的幀間預測值時,確定所述當前塊的兩個分區;其中,所述兩個分區包括第一分區和第二分區; 相應地,所述根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值,包括: 基於所述新的運動訊息候選清單,確定所述第一分區的運動訊息和所述第二分區的運動訊息,並將第一運動訊息索引值設置為所述第一分區的運動訊息在所述新的運動訊息候選清單中的索引序號值,將第二運動訊息索引值設置為所述第二分區的運動訊息在所述新的運動訊息候選清單中的索引序號值; 利用所述第一分區的運動訊息計算所述第一分區的第一預測值,利用所述第二分區的運動訊息計算所述第二分區的第二預測值; 對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
  30. 根據請求項29所述的方法,所述方法還包括: 將所述第一運動訊息索引值和所述第二運動訊息索引值寫入位元流。
  31. 一種解碼器,所述解碼器包括解析單元、第一確定單元、第一計算單元、第一構建單元和第一預測單元;其中, 所述解析單元,配置為解析位元流,獲取當前塊的預測模式參數; 所述第一確定單元,配置為當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息; 所述第一計算單元,配置為對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息; 所述第一構建單元,配置為基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單; 所述第一預測單元,配置為根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
  32. 一種解碼器,所述解碼器包括第一記憶體和第一處理器;其中, 所述第一記憶體,用於儲存能夠在所述第一處理器上運行的電腦程式; 所述第一處理器,用於在運行所述電腦程式時,執行如請求項1至14任一項所述的方法。
  33. 一種編碼器,所述編碼器包括第二確定單元、第二計算單元、第二構建單元和第二預測單元;其中, 所述第二確定單元,配置為確定當前塊的預測模式參數; 所述第二確定單元,還配置為當所述預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值時,從所述當前塊的多個已知運動訊息中確定至少一組單向運動訊息;其中,每一組單向運動訊息包括至少兩個單向運動訊息; 所述第二計算單元,配置為對所述至少一組單向運動訊息進行運動向量計算,獲得至少一個新的單向運動訊息; 所述第二構建單元,配置為基於所述至少一個新的單向運動訊息,構建新的運動訊息候選清單; 所述第二預測單元,配置為根據所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
  34. 一種編碼器,所述編碼器包括第二記憶體和第二處理器;其中, 所述第二記憶體,用於儲存能夠在所述第二處理器上運行的電腦程式; 所述第二處理器,用於在運行所述電腦程式時,執行如請求項15至30任一項所述的方法。
  35. 一種電腦儲存媒介,所述電腦儲存媒介儲存有電腦程式,所述電腦程式被第一處理器執行時實現如請求項1至14任一項所述的方法、或者被第二處理器執行時實現如請求項15至30任一項所述的方法。
TW110115001A 2020-05-20 2021-04-26 幀間預測方法、編碼器、解碼器以及電腦儲存媒介 TW202145784A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010432758.8 2020-05-20
CN202010432758.8A CN113709498B (zh) 2020-05-20 2020-05-20 帧间预测方法、编码器、解码器以及计算机存储介质

Publications (1)

Publication Number Publication Date
TW202145784A true TW202145784A (zh) 2021-12-01

Family

ID=78645746

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110115001A TW202145784A (zh) 2020-05-20 2021-04-26 幀間預測方法、編碼器、解碼器以及電腦儲存媒介

Country Status (2)

Country Link
CN (1) CN113709498B (zh)
TW (1) TW202145784A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023123478A1 (zh) * 2021-12-31 2023-07-06 Oppo广东移动通信有限公司 预测方法、装置、设备、系统、及存储介质
WO2024065406A1 (zh) * 2022-09-29 2024-04-04 Oppo广东移动通信有限公司 编解码方法、码流、编码器、解码器以及存储介质

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR122020008353B1 (pt) * 2011-12-28 2022-05-10 JVC Kenwood Corporation Dispositivo de codificação de foto em movimento e método de codificação de foto em movimento
CN104079944B (zh) * 2014-06-30 2017-12-01 华为技术有限公司 视频编码的运动矢量列表构建方法和系统
US10560718B2 (en) * 2016-05-13 2020-02-11 Qualcomm Incorporated Merge candidates for motion vector prediction for video coding
WO2019072369A1 (en) * 2017-10-09 2019-04-18 Huawei Technologies Co., Ltd. PRUNING MOTION VECTOR LIST
CN109963155B (zh) * 2017-12-23 2023-06-06 华为技术有限公司 图像块的运动信息的预测方法、装置及编解码器
TWI735900B (zh) * 2018-06-29 2021-08-11 大陸商北京字節跳動網絡技術有限公司 一種視頻處理方法和裝置
US10511852B1 (en) * 2018-07-13 2019-12-17 Tencent America LLC Method and apparatus for video coding
CN110719464B (zh) * 2018-07-15 2023-05-30 北京字节跳动网络技术有限公司 用时间信息扩展基于查找表的运动矢量预测
US11184630B2 (en) * 2018-09-28 2021-11-23 Tencent America LLC Method and apparatus for video coding
US11051034B2 (en) * 2018-10-08 2021-06-29 Qualcomm Incorporated History-based motion vector predictor
CN111147850B (zh) * 2018-11-02 2022-10-11 北京字节跳动网络技术有限公司 用于基于历史的运动矢量预测的表维护

Also Published As

Publication number Publication date
CN113709498B (zh) 2023-06-02
CN113709498A (zh) 2021-11-26

Similar Documents

Publication Publication Date Title
CN113170181B (zh) 块内拷贝模式中的仿射继承方法
US11831884B2 (en) Interaction between IBC and BIO
CN110581994B (zh) 部分成本计算
US11800150B2 (en) Method for deriving a motion vector
CN113039802B (zh) 基于历史的仿射参数的使用
JP5081305B2 (ja) フレーム間予測符号化の方法および装置
CN112840645B (zh) 视频编码系统中组合多个预测子用于块预测的方法及装置
CN114175636A (zh) 自适应参数集中的自适应环路滤波的指示
WO2020089823A1 (en) Overlapped block motion compensation with adaptive sub-block size
CN113796084A (zh) 运动矢量和预测样点细化
TW202145784A (zh) 幀間預測方法、編碼器、解碼器以及電腦儲存媒介
TW202145794A (zh) 幀間預測方法、編碼器、解碼器以及電腦儲存媒介
WO2021244125A1 (zh) 帧间预测方法、解码器、编码器及计算机存储介质
TW202201958A (zh) 幀間預測方法、編碼器、解碼器以及電腦儲存媒介
TW202147851A (zh) 幀間預測方法、編碼器、解碼器以及電腦儲存媒介
TW202145783A (zh) 幀間預測方法、編碼器、解碼器以及電腦儲存媒介
CN117560503A (zh) 重叠块运动补偿和其他工具之间的协调
TW202209884A (zh) 幀間預測方法、編碼器、解碼器及電腦可讀儲存媒介