TW202147837A - 幀間預測方法、解碼器、編碼器及電腦儲存媒介 - Google Patents
幀間預測方法、解碼器、編碼器及電腦儲存媒介 Download PDFInfo
- Publication number
- TW202147837A TW202147837A TW110118914A TW110118914A TW202147837A TW 202147837 A TW202147837 A TW 202147837A TW 110118914 A TW110118914 A TW 110118914A TW 110118914 A TW110118914 A TW 110118914A TW 202147837 A TW202147837 A TW 202147837A
- Authority
- TW
- Taiwan
- Prior art keywords
- motion information
- information
- motion
- axis component
- current block
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本申請實施例公開了一種幀間預測方法,應用於解碼器,所述方法包括:解析位元流,獲取當前塊的權重匯出模式;基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單;基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。本申請實施例還公開了一種解碼器、編碼器及電腦儲存媒介。
Description
本申請實施例涉及但不限於影像編解碼技術領域,尤其涉及一種幀間預測方法、解碼器、編碼器及電腦儲存媒介。
在影像編解碼領域,針對當前塊進行解碼的過程,除了採用幀內預測方式外,還可以採用幀間預測方式。其中,幀間預測可以包括幀間幾何劃分預測模式(Geometric Partitioning Mode,GPM)和角度加權預測模式(Angular Weighted Prediction,AWP)等,透過將幀間的當前塊劃分為兩個非矩形的分區(或兩個塊)分別進行預測後再加權融合,能夠得到當前塊的預測值。
然而,相關技術中存在由於運動訊息候選清單的構建不合理而導致解碼效率低的問題。
本申請實施例提供一種幀間預測方法、解碼器、編碼器及電腦儲存媒介。
第一方面,提供一種幀間預測方法,應用於解碼器,所述方法包括:
解析位元流,獲取當前塊的權重匯出模式;
基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單;
基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
在一實施例中,所述當前塊的權重匯出模式為幾何劃分預測模式中的多種權重匯出模式中的一種,或者,所述當前塊的權重匯出模式為角度加權預測模式中的多種權重匯出模式中的一種。
在一實施例中,所述當前塊的權重匯出模式的類別不同,構建的所述新的運動訊息候選清單不同。
在一實施例中,所述基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單,包括:基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式;基於所述排序方式,構建所述新的運動訊息候選清單。
在一實施例中,所述當前塊相關的已知運動訊息包括所述當前塊相關的N個運動訊息;N為大於或等於1的整數;所述當前塊相關的N個運動訊息包括:所述當前塊在空域上的至少一個相鄰塊的運動訊息,和/或,所述當前塊在時域上的至少一個對應塊的運動訊息。
在一實施例中,所述N個運動訊息中每一運動訊息包括原始運動訊息,所述原始運動訊息包括運動向量訊息和參考幀訊息。
在一實施例中,所述原始運動訊息為單向原始運動訊息,或雙向原始運動訊息,或對雙向原始運動訊息進行拆分得到的一個或兩個單向原始運動訊息。
在一實施例中,在N大於或等於2的情況下,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:在當前塊的權重匯出模式為第一類權重匯出模式的情況下,將所述至少一個對應塊的運動訊息,排列在所述至少一個相鄰塊的運動訊息之前;在當前塊的權重匯出模式為第二類權重匯出模式的情況下,將所述至少一個對應塊的運動訊息,穿插在所述至少一個相鄰塊的運動訊息之內;在當前塊的權重匯出模式為第三類權重匯出模式的情況下,將所述至少一個對應塊的運動訊息,排列在所述至少一個相鄰塊的運動訊息之後。
在一實施例中,在N大於或等於2的情況下,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:所述當前塊相關的已知運動訊息的排序方式為,從排序方式集合中確定的一種排序方式,所述排序方式集合包括:對所述當前塊的左下相關塊的運動訊息、所述當前塊的右上相關塊的運動訊息、所述當前塊的左上相關塊的運動訊息、所述當前塊的右下相關塊的運動訊息進行全排列,得到的多個排序方式;其中,在所述當前塊的權重匯出模式不同的情況下,從所述排序方式集合中確定的排序方式不同;其中,所述當前塊的左下相關塊的運動訊息、所述當前塊的右上相關塊的運動訊息、所述當前塊的左上相關塊的運動訊息、所述當前塊的右下相關塊的運動訊息中的任一者為:所述當前塊在空域上的運動訊息或所述當前塊在時域上的運動訊息。
在一實施例中,所述當前塊的左下相鄰塊的運動訊息包括:所述當前塊的左下的所有塊或部分塊的運動訊息;所述當前塊的右上相鄰塊的運動訊息包括:所述當前塊的右上的所有塊或部分塊的運動訊息;所述當前塊的左上相鄰塊的運動訊息包括:所述當前塊的左上的所有塊或部分塊的運動訊息;所述當前塊在時域上的右下塊的運動訊息包括:在所述當前塊的外部的時域上的塊的運動訊息,或者,在所述當前塊的內部的時域上的塊的運動訊息。
在一實施例中,在N大於或等於2的情況下,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:在當前塊的權重匯出模式為第四類權重匯出模式的情況下,將所述N個運動訊息中的單向原始運動訊息的全部或部分,排列在對所述N個運動訊息中的雙向運動訊息進行拆分,得到一個或兩個單向原始運動訊息的全部或部分之前;在當前塊的權重匯出模式為第五類權重匯出模式的情況下,將所述N個運動訊息中的單向原始運動訊息的全部或部分,排列在所述N個運動訊息中的雙向運動訊息的全部或部分之前;在當前塊的權重匯出模式為第六類權重匯出模式的情況下,確定所述N個運動訊息的排序優先順序,基於所述排序優先順序對所述N個運動訊息進行排序;在當前塊的權重匯出模式為第七類權重匯出模式的情況下,確定所述N個運動訊息中每一個運動訊息的單雙向訊息,和所述N個運動訊息的排序優先順序,基於所述每一個運動訊息的單雙向訊息和所述排序優先順序對所述N個運動訊息進行排序。
在一實施例中,所述方法還包括:將除當前幀和所述對應塊所在幀之外的圖像幀,確定為的第一特定幀;在所述第一特定幀上,確定與所述當前塊對應的第一目標塊的運動訊息;對所述第一目標塊的運動訊息進行縮放,得到所述對應塊的運動訊息;其中,所述對所述第一目標塊的運動訊息進行縮放,得到所述對應塊的運動訊息,包括以下之一:對所述第一目標塊的雙向運動訊息進行縮放,得到所述對應塊的雙向運動訊息;對所述第一目標塊的單向運動訊息進行縮放,得到所述對應塊的雙向運動訊息。
在一實施例中,所述N個運動訊息中每一運動訊息還包括衍生運動訊息,所述衍生運動訊息是基於所述原始運動訊息確定的;所述衍生運動訊息包括運動向量訊息和參考幀訊息。
在一實施例中,所述衍生運動訊息為單向衍生運動訊息,或雙向衍生運動訊息,或對雙向衍生運動訊息進行拆分得到的一個或兩個單向衍生運動訊息;所述單向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的,所述雙向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的。
在一實施例中,在N大於或等於2的情況下,確定所述N個運動訊息的排序方式,包括以下之一:將N個原始運動訊息中的全部或部分,排列在N個衍生運動訊息中的全部或部分之前;確定所述N個原始運動訊息中每一個原始運動訊息的單雙向訊息、所述N個原始運動訊息的排序優先順序、所述N個衍生運動訊息中每一個衍生運動訊息的單雙向訊息、所述N個衍生運動訊息的排序優先順序中的至少一種訊息,基於所述至少一種訊息,對所述N個運動訊息進行排序。
在一實施例中,所述衍生運動訊息的預測方向與所述原始運動訊息的預測方向相同;所述衍生運動訊息的參考幀訊息與所述原始運動訊息的參考幀訊息相同。
在一實施例中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息;所述方法還包括:基於所述原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個所述衍生運動訊息中每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,將所述每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,作為所述每一所述衍生運動訊息的運動向量訊息;M為大於或等於1的整數;其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
在一實施例中,所述基於所述原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個所述衍生運動訊息中每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,包括以下之一:基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;將所述原始運動訊息的第二軸分量訊息,作為所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息;基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;基於對所述原始運動訊息的第二軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息。
在一實施例中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息,包括以下之一:將所述原始運動訊息的第一軸分量訊息乘以M個第一值,得到M個第一結果,基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息;將所述原始運動訊息的第一軸分量訊息除以M個第二值,得到M個第一除數,基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息。
在一實施例中,所述基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:將所述M個第一結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;確定與所述M個第一結果一一對應的M個第三值,將所述M個第一結果與M個第三值一一相加,得到M個第二結果,基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
在一實施例中,所述基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:將所述M個第二結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;將所述M個第二結果中的每一結果右移特定位數,得到M個第三結果,基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息;其中,所述第三值為一左移目標位得到,所述目標位為所述特定位數減一。
在一實施例中,所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第一閾值;所述M個第一值包括第一特定值和第二特定值,所述第一特定值大於0且小於1,所述第二特定值大於1且小於2,所述第一特定值與所述第二特定值之和為2。
在一實施例中,所述方法還包括:在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於第二閾值的情況下,確定所述第一特定值為第一係數;在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第二閾值且小於或等於第三閾值的情況下,確定所述第一特定值為第二係數;在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第三閾值的情況下,確定所述第一特定值為第三係數;其中,所述第一係數小於所述第二係數,所述第二係數小於所述第三係數。
在一實施例中,所述方法還包括:在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於所述第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為正數的情況下,將第一目標值作為所述衍生運動訊息的第一軸分量訊息;在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,小於或等於第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為負數的情況下,將負的所述第一目標值作為所述衍生運動訊息的第一軸分量訊息。
在一實施例中,所述M個第一除數包括第一組除數,和/或,第二組除數,和/或,第三組除數;所述第一組除數中每一除數大於最大閾值;所述第二組除數中每一除數大於或等於最小閾值,且小於或等於所述最大閾值;所述第三組除數中每一除數小於最小閾值;所述基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下至少之一:將所述最大閾值,作為所述M個衍生運動訊息中,與所述第一組除數對應的每一衍生運動訊息的第一軸分量訊息;將所述第二組除數中每一除數,作為所述M個衍生運動訊息中,與所述第二組除數對應的每一衍生運動訊息的第一軸分量訊息;將所述最小閾值,作為所述M個衍生運動訊息中,與所述第三組除數對應的每一衍生運動訊息的第一軸分量訊息。
在一實施例中,在所述原始運動訊息為雙向原始運動訊息的情況下,所述方法還包括:將所述原始運動訊息拆分為第一個單向原始運動訊息和第二個單向原始運動訊息;將第一值,與所述第一個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為所述第一個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;將第四值,與所述第二個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為第二個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;其中,所述第一值和所述第四值均大於0;其中,所述第一值與所述第四值相同,或者,所述第一值於所述第四值不同且所述第一值與所述第四值之和為2。
在一實施例中,所述N個運動訊息包括:所述當前塊在空域上的至少兩個相鄰塊的原始運動訊息;所述至少兩個相鄰塊相鄰,或者,所述至少兩個相鄰塊在所述當前塊的左下角或右上角或左上角;基於所述原始運動訊息確定所述衍生運動訊息,包括:從所述至少兩個相鄰塊中確定第二目標塊,將所述第二目標塊所在的幀作為第二特定幀;將所述至少兩個相鄰塊中除所述第二目標塊外的相鄰塊的原始運動訊息中的運動向量訊息,縮放到所述第二特定幀,得到至少兩個待平均塊的運動向量訊息;所述至少兩個待平均塊包括所述第二目標塊;對所述至少兩個待平均塊的運動向量訊息進行平均或加權平均,得到對應的衍生運動訊息的運動向量訊息;將所述對應的衍生運動訊息的運動向量訊息,作為所述至少兩個相鄰塊中每一相鄰塊的衍生運動訊息的運動向量訊息;其中,所述衍生運動訊息的預測方向與所述原始運動訊息的預測方向相同,所述衍生運動訊息的參考幀訊息為所述第二特定幀。
在一實施例中,所述N個運動訊息中每一運動訊息包括原始運動訊息;所述基於所述排序方式,構建所述新的運動訊息候選清單,包括:確定初始運動訊息候選清單;基於所述排序方式,將所述至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,至少一個對應塊的原始運動訊息的全部或部分,依序或交錯填入所述初始運動訊息候選清單中,得到所述新的運動訊息候選清單。
在一實施例中,所述N個運動訊息中每一運動訊息包括衍生運動訊息;所述基於所述排序方式,將所述至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,至少一個對應塊的原始運動訊息的全部或部分,依序或交錯填入所述初始運動訊息候選清單中,得到所述新的運動訊息候選清單,包括:基於所述排序方式,將所述至少一個相鄰塊的原始運動訊息中的全部或部分、至少一個對應塊的原始運動訊息的全部或部分、所述至少一個相鄰塊的衍生運動訊息中的全部或部分、至少一個對應塊的衍生運動訊息的全部或部分中的至少一者,依序或交錯填入所述初始運動訊息候選清單中。
在一實施例中,所述初始運動訊息候選清單可填入預設數量個運動訊息;所述預設數量個運動訊息中的每一個運動訊息為所述原始運動訊息或所述衍生運動訊息;所述預設數量在2~6。
在一實施例中,所述方法還包括:在向所述初始運動訊息候選清單填入至少一個原始運動訊息之後,確定待填入的衍生運動訊息;將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單;或者,在確定到所述待填入的衍生運動訊息,不同於與所述待填入的衍生運動訊息對應的已經填入的原始運動訊息的情況下,將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單;或者,在確定到所述待填入的衍生運動訊息,不同於已經填入的原始運動訊息的情況下,將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單。
在一實施例中,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式之前,還包括:基於所述解碼器解析的位元流,獲取至少一個相鄰塊的原始運動訊息,和至少一個對應塊的原始運動訊息;基於所述至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,基於所述至少一個對應塊的原始運動訊息的全部或部分,生成特定數量個衍生運動訊息;其中,所述特定數量小於或等於8;所述特定數量個衍生運動訊息包括:相鄰塊的衍生運動訊息和/或對應塊的衍生運動訊息。
在一實施例中,所述方法還包括:基於所述解碼器解析的位元流,獲取至少一個相鄰塊的原始運動訊息,和一個對應塊的單向運動訊息或雙向運動訊息;將所述至少一個相鄰塊的原始運動訊息中的一個單向原始運動訊息,或互不相同的至少兩個單向原始運動訊息,填入至所述初始運動訊息候選清單;在填入至所述初始運動訊息候選清單的單向原始運動訊息的第一總數,等於預設數量減一的情況下,將所述一個對應塊的單向運動訊息或雙向運動訊息繼續填入至所述初始運動訊息候選清單。
在一實施例中,在填入至所述初始運動訊息候選清單的單向原始運動訊息的第一總數,小於所述預設數量減一的情況下,所述方法還包括:依序對所述至少一個相鄰塊的雙向原始運動訊息進行拆分,得到與所述雙向原始運動訊息對應的兩個單向原始運動訊息,並依序將與已經填入的單向運動訊息不同的所述對應的兩個單向原始運動訊息,繼續填入至所述初始運動訊息候選清單;或者,依序將所述至少一個相鄰塊的雙向原始運動訊息,繼續填入至所述初始運動訊息候選清單;在填入至所述初始運動訊息候選清單的原始運動訊息的第二總數,等於所述預設數量減一的情況下,將所述一個對應塊的單向運動訊息或雙向運動訊息繼續填入至所述初始運動訊息候選清單。
在一實施例中,所述方法還包括:在填入至所述初始運動訊息候選清單的單向原始運動訊息的第二總數,小於所述預設數量減一的情況下,獲取填入至所述初始運動訊息候選清單中的前兩個單向原始運動訊息;基於所述前兩個單向原始運動訊息,確定對應的四個單向衍生運動訊息;依序將與已經填入的單向運動訊息不同的所述四個衍生運動訊息,繼續填入至所述初始運動訊息候選清單;在填入至所述初始運動訊息候選清單的單向原始運動訊息和單向衍生運動訊息的第三總數,等於所述預設數量減一的情況下,將所述一個對應塊的單向運動訊息或雙向運動訊息繼續填入至所述初始運動訊息候選清單。
在一實施例中,在待填入的衍生運動訊息為雙向衍生運動訊息的情況下,將所述雙向衍生運動訊息拆分為兩個單向衍生運動訊息;將所述兩個單向衍生運動訊息中的至少一個填入所述初始運動訊息候選清單中;和/或,在待填入的原始運動訊息為雙向原始運動訊息的情況下,將所述雙向原始運動訊息拆分為兩個單向原始運動訊息,將所述兩個單向原始運動訊息中的至少一個填入所述初始運動訊息候選清單中,或者,將所述雙向原始運動訊息填入所述初始運動訊息候選清單中。
在一實施例中,所述方法還包括:將幾何劃分預測模式中的多種權重匯出模式,或者,角度加權預測模式中的多種權重匯出模式進行分組,得到至少兩類權重匯出模式;不同類的權重匯出模式對應不同的排序方式。
在一實施例中,所述至少兩類權重匯出模式,包括:第八類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左上、右下的權重匯出模式;第九類權重匯出模式,用於表徵所述當前塊的權重匯出模式為上、下的權重匯出模式;第十類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左下、右上的權重匯出模式;第十一類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左、右的權重匯出模式。
在一實施例中,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:在所述當前塊的權重匯出模式屬於第八類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左上相鄰塊的運動訊息排序靠前的排序方式;在所述當前塊的權重匯出模式屬於第九類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的上塊的運動訊息排序靠前的排序方式;在所述當前塊的權重匯出模式屬於第十類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左下相鄰塊的運動訊息排序靠前的排序方式;在所述當前塊的權重匯出模式屬於第十一類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左塊的運動訊息排序靠前的排序方式。
在一實施例中,所述至少一個相鄰塊包括:外部左下塊、內部右外部上塊、外部右上塊、內部上外部左塊、內部左外部上塊、外部左上塊中的至少一個,或者,所述至少一個相鄰塊包括:內部左外部下塊、內部上外部右塊、外部右上塊、外部左下塊、外部左上塊中的至少一個;所述至少一個對應塊包括:與所述當前塊的內部的左上角對應的塊、與所述當前塊的內部的右下角對應的塊、與所述當前塊的外部的右下角對應的塊中的至少一個。
在一實施例中,在所述當前塊的權重匯出模式下,所述當前塊劃分為第一分區和第二分區;所述基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值,包括:從所述新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息;基於所述第一分區的運動訊息確定所述第一分區的第一預測值,基於所述第二分區的運動訊息確定所述第二分區的第二預測值;對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
在一實施例中,在所述第一分區的運動訊息為雙向運動訊息的情況下,對所述第一分區的運動訊息按照雙向預測的方法進行處理;和/或,在所述第二分區的運動訊息為雙向運動訊息的情況下,對所述第二分區的運動訊息按照雙向預測的方法進行處理。
在一實施例中,所述雙向預測的方法為不使用雙向光流的方法或解碼端運動向量優化的方法。
在一實施例中,所述從所述新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息,包括:從解析的位元流中,確定所述第一分區的索引值和所述第二分區的索引值;基於所述新的運動訊息候選清單,將所述第一分區的索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第一分區的運動訊息;基於所述新的運動訊息候選清單,將所述第二分區的索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第二分區的運動訊息。
在一實施例中,所述解析位元流,獲取當前塊的權重匯出模式,包括:解析位元流,確定當前塊的預測模式參數;所述預測模式參數用於指示使用幾何劃分預測模式或角度加權預測模式確定當前塊的幀間預測值;從所述當前塊的預測模式參數中,確定所述當前塊的權重匯出模式。
在一實施例中,所述新的運動訊息候選清單為允許存在雙向運動訊息的候選清單。
第二方面,提供一種幀間預測方法,應用於編碼器,所述方法包括:
確定當前塊的權重匯出模式;
基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單;
基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
在一實施例中,所述當前塊的權重匯出模式為幾何劃分預測模式中的多種權重匯出模式中的一種,或者,所述當前塊的權重匯出模式為角度加權預測模式中的多種權重匯出模式中的一種。
在一實施例中,所述當前塊的權重匯出模式的類別不同,構建的所述新的運動訊息候選清單不同。
在一實施例中,所述基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單,包括:基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式;基於所述排序方式,構建所述新的運動訊息候選清單。
在一實施例中,所述當前塊相關的已知運動訊息包括所述當前塊相關的N個運動訊息;N為大於或等於1的整數;所述當前塊相關的N個運動訊息包括:所述當前塊在空域上的至少一個相鄰塊的運動訊息,和/或,所述當前塊在時域上的至少一個對應塊的運動訊息。
在一實施例中,所述N個運動訊息中每一運動訊息包括原始運動訊息,所述原始運動訊息包括運動向量訊息和參考幀訊息。
在一實施例中,所述原始運動訊息為單向原始運動訊息,或雙向原始運動訊息,或對雙向原始運動訊息進行拆分得到的一個或兩個單向原始運動訊息。
在一實施例中,在N大於或等於2的情況下,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:在當前塊的權重匯出模式為第一類權重匯出模式的情況下,將所述至少一個對應塊的運動訊息,排列在所述至少一個相鄰塊的運動訊息之前;在當前塊的權重匯出模式為第二類權重匯出模式的情況下,將所述至少一個對應塊的運動訊息,穿插在所述至少一個相鄰塊的運動訊息之內;在當前塊的權重匯出模式為第三類權重匯出模式的情況下,將所述至少一個對應塊的運動訊息,排列在所述至少一個相鄰塊的運動訊息之後。
在一實施例中,在N大於或等於2的情況下,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:所述當前塊相關的已知運動訊息的排序方式為,從排序方式集合中確定的一種排序方式,所述排序方式集合包括:對所述當前塊的左下相關塊的運動訊息、所述當前塊的右上相關塊的運動訊息、所述當前塊的左上相關塊的運動訊息、所述當前塊的右下相關塊的運動訊息進行全排列,得到的多個排序方式;其中,在所述當前塊的權重匯出模式不同的情況下,從所述排序方式集合中確定的排序方式不同;其中,所述當前塊的左下相關塊的運動訊息、所述當前塊的右上相關塊的運動訊息、所述當前塊的左上相關塊的運動訊息、所述當前塊的右下相關塊的運動訊息中的任一者為:所述當前塊在空域上的運動訊息或所述當前塊在時域上的運動訊息。
在一實施例中,所述當前塊的左下相鄰塊的運動訊息包括:所述當前塊的左下的所有塊或部分塊的運動訊息;所述當前塊的右上相鄰塊的運動訊息包括:所述當前塊的右上的所有塊或部分塊的運動訊息;所述當前塊的左上相鄰塊的運動訊息包括:所述當前塊的左上的所有塊或部分塊的運動訊息;所述當前塊在時域上的右下塊的運動訊息包括:在所述當前塊的外部的時域上的塊的運動訊息,或者,在所述當前塊的內部的時域上的塊的運動訊息。
在一實施例中,在N大於或等於2的情況下,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:在當前塊的權重匯出模式為第四類權重匯出模式的情況下,將所述N個運動訊息中的單向原始運動訊息的全部或部分,排列在對所述N個運動訊息中的雙向運動訊息進行拆分,得到一個或兩個單向原始運動訊息的全部或部分之前;在當前塊的權重匯出模式為第五類權重匯出模式的情況下,將所述N個運動訊息中的單向原始運動訊息的全部或部分,排列在所述N個運動訊息中的雙向運動訊息的全部或部分之前;在當前塊的權重匯出模式為第六類權重匯出模式的情況下,確定所述N個運動訊息的排序優先順序,基於所述排序優先順序對所述N個運動訊息進行排序;在當前塊的權重匯出模式為第七類權重匯出模式的情況下,確定所述N個運動訊息中每一個運動訊息的單雙向訊息,和所述N個運動訊息的排序優先順序,基於所述每一個運動訊息的單雙向訊息和所述排序優先順序對所述N個運動訊息進行排序。
在一實施例中,所述方法還包括:將除當前幀和所述對應塊所在幀之外的圖像幀,確定為的第一特定幀;在所述第一特定幀上,確定與所述當前塊對應的第一目標塊的運動訊息;對所述第一目標塊的運動訊息進行縮放,得到所述對應塊的運動訊息;其中,所述對所述第一目標塊的運動訊息進行縮放,得到所述對應塊的運動訊息,包括以下之一:對所述第一目標塊的雙向運動訊息進行縮放,得到所述對應塊的雙向運動訊息;對所述第一目標塊的單向運動訊息進行縮放,得到所述對應塊的雙向運動訊息。
在一實施例中,所述N個運動訊息中每一運動訊息還包括衍生運動訊息,所述衍生運動訊息是基於所述原始運動訊息確定的;所述衍生運動訊息包括運動向量訊息和參考幀訊息。
在一實施例中,所述衍生運動訊息為單向衍生運動訊息,或雙向衍生運動訊息,或對雙向衍生運動訊息進行拆分得到的一個或兩個單向衍生運動訊息;所述單向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的,所述雙向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的。
在一實施例中,在N大於或等於2的情況下,確定所述N個運動訊息的排序方式,包括以下之一:將N個原始運動訊息中的全部或部分,排列在N個衍生運動訊息中的全部或部分之前;確定所述N個原始運動訊息中每一個原始運動訊息的單雙向訊息、所述N個原始運動訊息的排序優先順序、所述N個衍生運動訊息中每一個衍生運動訊息的單雙向訊息、所述N個衍生運動訊息的排序優先順序中的至少一種訊息,基於所述至少一種訊息,對所述N個運動訊息進行排序。
在一實施例中,所述衍生運動訊息的預測方向與所述原始運動訊息的預測方向相同;所述衍生運動訊息的參考幀訊息與所述原始運動訊息的參考幀訊息相同。
在一實施例中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息;所述方法還包括:基於所述原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個所述衍生運動訊息中每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,將所述每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,作為所述每一所述衍生運動訊息的運動向量訊息;M為大於或等於1的整數;其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
在一實施例中,所述基於所述原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個所述衍生運動訊息中每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,包括以下之一:基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;將所述原始運動訊息的第二軸分量訊息,作為所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息;基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;基於對所述原始運動訊息的第二軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息。
在一實施例中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息,包括以下之一:將所述原始運動訊息的第一軸分量訊息乘以M個第一值,得到M個第一結果,基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息;將所述原始運動訊息的第一軸分量訊息除以M個第二值,得到M個第一除數,基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息。
在一實施例中,所述基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:將所述M個第一結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;確定與所述M個第一結果一一對應的M個第三值,將所述M個第一結果與M個第三值一一相加,得到M個第二結果,基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
在一實施例中,所述基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:將所述M個第二結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;將所述M個第二結果中的每一結果右移特定位數,得到M個第三結果,基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息;其中,所述第三值為一左移目標位得到,所述目標位為所述特定位數減一。
在一實施例中,所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第一閾值;所述M個第一值包括第一特定值和第二特定值,所述第一特定值大於0且小於1,所述第二特定值大於1且小於2,所述第一特定值與所述第二特定值之和為2。
在一實施例中,所述方法還包括:在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於第二閾值的情況下,確定所述第一特定值為第一係數;在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第二閾值且小於或等於第三閾值的情況下,確定所述第一特定值為第二係數;在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第三閾值的情況下,確定所述第一特定值為第三係數;其中,所述第一係數小於所述第二係數,所述第二係數小於所述第三係數。
在一實施例中,所述方法還包括:在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於所述第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為正數的情況下,將第一目標值作為所述衍生運動訊息的第一軸分量訊息;在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,小於或等於第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為負數的情況下,將負的所述第一目標值作為所述衍生運動訊息的第一軸分量訊息。
在一實施例中,所述M個第一除數包括第一組除數,和/或,第二組除數,和/或,第三組除數;所述第一組除數中每一除數大於最大閾值;所述第二組除數中每一除數大於或等於最小閾值,且小於或等於所述最大閾值;所述第三組除數中每一除數小於最小閾值;所述基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下至少之一:將所述最大閾值,作為所述M個衍生運動訊息中,與所述第一組除數對應的每一衍生運動訊息的第一軸分量訊息;將所述第二組除數中每一除數,作為所述M個衍生運動訊息中,與所述第二組除數對應的每一衍生運動訊息的第一軸分量訊息;將所述最小閾值,作為所述M個衍生運動訊息中,與所述第三組除數對應的每一衍生運動訊息的第一軸分量訊息。
在一實施例中,在所述原始運動訊息為雙向原始運動訊息的情況下,所述方法還包括:將所述原始運動訊息拆分為第一個單向原始運動訊息和第二個單向原始運動訊息;將第一值,與所述第一個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為所述第一個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;將第四值,與所述第二個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為第二個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;其中,所述第一值和所述第四值均大於0;其中,所述第一值與所述第四值相同,或者,所述第一值於所述第四值不同且所述第一值與所述第四值之和為2。
在一實施例中,所述N個運動訊息包括:所述當前塊在空域上的至少兩個相鄰塊的原始運動訊息;所述至少兩個相鄰塊相鄰,或者,所述至少兩個相鄰塊在所述當前塊的左下角或右上角或左上角;基於所述原始運動訊息確定所述衍生運動訊息,包括:從所述至少兩個相鄰塊中確定第二目標塊,將所述第二目標塊所在的幀作為第二特定幀;將所述至少兩個相鄰塊中除所述第二目標塊外的相鄰塊的原始運動訊息中的運動向量訊息,縮放到所述第二特定幀,得到至少兩個待平均塊的運動向量訊息;所述至少兩個待平均塊包括所述第二目標塊;對所述至少兩個待平均塊的運動向量訊息進行平均或加權平均,得到對應的衍生運動訊息的運動向量訊息;將所述對應的衍生運動訊息的運動向量訊息,作為所述至少兩個相鄰塊中每一相鄰塊的衍生運動訊息的運動向量訊息;其中,所述衍生運動訊息的預測方向與所述原始運動訊息的預測方向相同,所述衍生運動訊息的參考幀訊息為所述第二特定幀。
在一實施例中,所述N個運動訊息中每一運動訊息包括原始運動訊息;所述基於所述排序方式,構建所述新的運動訊息候選清單,包括:確定初始運動訊息候選清單;基於所述排序方式,將所述至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,至少一個對應塊的原始運動訊息的全部或部分,依序或交錯填入所述初始運動訊息候選清單中,得到所述新的運動訊息候選清單。
在一實施例中,所述N個運動訊息中每一運動訊息包括衍生運動訊息;所述基於所述排序方式,將所述至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,至少一個對應塊的原始運動訊息的全部或部分,依序或交錯填入所述初始運動訊息候選清單中,得到所述新的運動訊息候選清單,包括:基於所述排序方式,將所述至少一個相鄰塊的原始運動訊息中的全部或部分、至少一個對應塊的原始運動訊息的全部或部分、所述至少一個相鄰塊的衍生運動訊息中的全部或部分、至少一個對應塊的衍生運動訊息的全部或部分中的至少一者,依序或交錯填入所述初始運動訊息候選清單中。
在一實施例中,所述初始運動訊息候選清單可填入預設數量個運動訊息;所述預設數量個運動訊息中的每一個運動訊息為所述原始運動訊息或所述衍生運動訊息;所述預設數量在2~6。
在一實施例中,所述方法還包括:在向所述初始運動訊息候選清單填入至少一個原始運動訊息之後,確定待填入的衍生運動訊息;將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單;或者,在確定到所述待填入的衍生運動訊息,不同於與所述待填入的衍生運動訊息對應的已經填入的原始運動訊息的情況下,將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單;或者,在確定到所述待填入的衍生運動訊息,不同於已經填入的原始運動訊息的情況下,將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單。
在一實施例中,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式之前,還包括:獲取至少一個相鄰塊的原始運動訊息,和至少一個對應塊的原始運動訊息;基於所述至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,基於所述至少一個對應塊的原始運動訊息的全部或部分,生成特定數量個衍生運動訊息;其中,所述特定數量小於或等於8;所述特定數量個衍生運動訊息包括:相鄰塊的衍生運動訊息和/或對應塊的衍生運動訊息。
在一實施例中,所述方法還包括:獲取至少一個相鄰塊的原始運動訊息,和一個對應塊的單向運動訊息或雙向運動訊息;將所述至少一個相鄰塊的原始運動訊息中的一個單向原始運動訊息,或互不相同的至少兩個單向原始運動訊息,填入至所述初始運動訊息候選清單;在填入至所述初始運動訊息候選清單的單向原始運動訊息的第一總數,等於預設數量減一的情況下,將所述一個對應塊的單向運動訊息或雙向運動訊息繼續填入至所述初始運動訊息候選清單。
在一實施例中,在填入至所述初始運動訊息候選清單的單向原始運動訊息的第一總數,小於所述預設數量減一的情況下,所述方法還包括:依序對所述至少一個相鄰塊的雙向原始運動訊息進行拆分,得到與所述雙向原始運動訊息對應的兩個單向原始運動訊息,並依序將與已經填入的單向運動訊息不同的所述對應的兩個單向原始運動訊息,繼續填入至所述初始運動訊息候選清單;或者,依序將所述至少一個相鄰塊的雙向原始運動訊息,繼續填入至所述初始運動訊息候選清單;在填入至所述初始運動訊息候選清單的原始運動訊息的第二總數,等於所述預設數量減一的情況下,將所述一個對應塊的單向運動訊息或雙向運動訊息繼續填入至所述初始運動訊息候選清單。
在一實施例中,所述方法還包括:在填入至所述初始運動訊息候選清單的單向原始運動訊息的第二總數,小於所述預設數量減一的情況下,獲取填入至所述初始運動訊息候選清單中的前兩個單向原始運動訊息;基於所述前兩個單向原始運動訊息,確定對應的四個單向衍生運動訊息;依序將與已經填入的單向運動訊息不同的所述四個衍生運動訊息,繼續填入至所述初始運動訊息候選清單;在填入至所述初始運動訊息候選清單的單向原始運動訊息和單向衍生運動訊息的第三總數,等於所述預設數量減一的情況下,將所述一個對應塊的單向運動訊息或雙向運動訊息繼續填入至所述初始運動訊息候選清單。
在一實施例中,在待填入的衍生運動訊息為雙向衍生運動訊息的情況下,將所述雙向衍生運動訊息拆分為兩個單向衍生運動訊息;將所述兩個單向衍生運動訊息中的至少一個填入所述初始運動訊息候選清單中;和/或,在待填入的原始運動訊息為雙向原始運動訊息的情況下,將所述雙向原始運動訊息拆分為兩個單向原始運動訊息,將所述兩個單向原始運動訊息中的至少一個填入所述初始運動訊息候選清單中,或者,將所述雙向原始運動訊息填入所述初始運動訊息候選清單中。
在一實施例中,所述方法還包括:將幾何劃分預測模式中的多種權重匯出模式,或者,角度加權預測模式中的多種權重匯出模式進行分組,得到至少兩類權重匯出模式;不同類的權重匯出模式對應不同的排序方式。
在一實施例中,所述至少兩組劃分模式集合,包括:第八類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左上、右下的權重匯出模式;第九類權重匯出模式,用於表徵所述當前塊的權重匯出模式為上、下的權重匯出模式;第十類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左下、右上的權重匯出模式;第十一類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左、右的權重匯出模式。
在一實施例中,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:在所述當前塊的權重匯出模式屬於第八類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左上相鄰塊的運動訊息排序靠前的排序方式;在所述當前塊的權重匯出模式屬於第九類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的上塊的運動訊息排序靠前的排序方式;在所述當前塊的權重匯出模式屬於第十類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左下相鄰塊的運動訊息排序靠前的排序方式;在所述當前塊的權重匯出模式屬於第十一類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左塊的運動訊息排序靠前的排序方式。
在一實施例中,所述至少一個相鄰塊包括:外部左下塊、內部右外部上塊、外部右上塊、內部上外部左塊、內部左外部上塊、外部左上塊中的至少一個,或者,所述至少一個相鄰塊包括:內部左外部下塊、內部上外部右塊、外部右上塊、外部左下塊、外部左上塊中的至少一個;所述至少一個對應塊包括:與所述當前塊的內部的左上角對應的塊、與所述當前塊的內部的右下角對應的塊、與所述當前塊的外部的右下角對應的塊中的至少一個。
在一實施例中,在所述當前塊的權重匯出模式下,所述當前塊劃分為第一分區和第二分區;所述基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值,包括:從所述新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息;基於所述第一分區的運動訊息確定所述第一分區的第一預測值,基於所述第二分區的運動訊息確定所述第二分區的第二預測值;對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
在一實施例中,在所述第一分區的運動訊息為雙向運動訊息的情況下,對所述第一分區的運動訊息按照雙向預測的方法進行處理;和/或,在所述第二分區的運動訊息為雙向運動訊息的情況下,對所述第二分區的運動訊息按照雙向預測的方法進行處理。
在一實施例中,所述雙向預測的方法為不使用雙向光流的方法或解碼端運動向量優化的方法。
在一實施例中,所述從所述新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息,包括:確定所述第一分區的索引值和所述第二分區的索引值;基於所述新的運動訊息候選清單,將所述第一分區的索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第一分區的運動訊息;基於所述新的運動訊息候選清單,將所述第二分區的索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第二分區的運動訊息。
在一實施例中,所述確定所述第一分區的索引值和所述第二分區的索引值,包括: 利用多種預測模式對所述當前塊進行預編碼處理,獲得每一種預測模式對應的位元率失真代價值;從所獲得的多個位元率失真代價值中選擇最小位元率失真代價值,將所述最小位元率失真代價值對應的兩個運動訊息,分別確定為所述第一分區的索引值和所述第二分區的索引值。
在一實施例中,所述確定當前塊的權重匯出模式,包括:確定當前塊的預測模式參數;所述預測模式參數用於指示使用幾何劃分預測模式或角度加權預測模式確定當前塊的幀間預測值;從所述當前塊的預測模式參數中,確定所述當前塊的權重匯出模式。
在一實施例中,所述新的運動訊息候選清單為允許存在雙向運動訊息的候選清單。
第三方面,提供一種幀間預測方法,應用於解碼器,所述方法包括:
解析位元流,獲取當前塊相關的原始運動訊息的運動向量訊息;
基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數;
基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單;
基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第四方面,提供一種幀間預測方法,應用於編碼器,所述方法包括:
確定當前塊相關的原始運動訊息的運動向量訊息;
基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數;
基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單;
基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第五方面,提供一種解碼器,包括:
獲取單元,用於解析位元流,獲取當前塊的權重匯出模式;
構建單元,用於基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單;
預測單元,用於基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第六方面,提供一種編碼器,包括:
模式確定單元,用於確定當前塊的權重匯出模式;
構建單元,用於基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單;
預測單元,用於基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第七方面,提供一種解碼器,包括:
獲取單元,用於解析位元流,獲取當前塊的權重匯出模式;
衍生運動訊息確定單元,用於基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數;
構建單元,用於基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單;
預測單元,用於基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第八方面,提供一種編碼器,包括:
原始運動訊息確定單元,用於確定當前塊相關的原始運動訊息的運動向量訊息;
衍生運動訊息確定單元,用於基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數;
構建單元,用於基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單;
預測單元,用於基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
第九方面,提供一種解碼器,包括:記憶體和處理器,
所述記憶體儲存有可在處理器上運行的電腦程式,
所述處理器執行所述程式時實現上述方法中的步驟。
第十方面,提供一種編碼器,記憶體和處理器,
所述記憶體儲存有可在處理器上運行的電腦程式,
所述處理器執行所述程式時實現上述方法中的步驟。
第十一方面,提供一種電腦儲存媒介,所述電腦儲存媒介儲存有一個或者多個程式,所述一個或者多個程式可被一個或者多個處理器執行,以實現上述方法中的步驟。
本申請實施例中,解碼器解析位元流,獲取當前塊的權重匯出模式;基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單;基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。如此,由於解碼器構建的新的運動訊息候選清單,根據的是當前塊的權重匯出模式,從而解碼器能夠根據不同的權重匯出模式,構建出不同的新的運動訊息候選清單,從而使得運動訊息候選清單的構建符合當前塊的權重匯出模式,進而能夠提高解碼器的解碼效率。
下面將透過實施例並結合附圖具體地對本申請的技術方案以及本申請的技術方案如何解決上述技術問題進行詳細說明。下面這幾個具體的實施例可以相互結合,對於相同或相似的概念或過程可能在某些實施例中不再贅述。
需要說明的是:在本申請實例中,“第一”、“第二”等是用於區別類似的物件,而不必用於描述特定的順序或先後次序。
另外,本申請實施例所記載的技術方案之間,在不衝突的情況下,可以任意組合。
在影像圖像中,一般採用第一圖像分量、第二圖像分量和第三圖像分量來表徵當前塊(Coding Block,CB);其中,這三個圖像分量分別為一個亮度分量、一個藍色色度分量和一個紅色色度分量,具體地,亮度分量通常使用符號Y表示,藍色色度分量通常使用符號Cb或者U表示,紅色色度分量通常使用符號Cr或者V表示;這樣,影像圖像可以用YCbCr格式表示,也可以用YUV格式表示。
目前,通用的影像編解碼標準基於都採用基於塊的混合編碼框架。影像圖像中的每一幀被分割成相同大小(比如128×128,64×64等)的正方形的最大編碼單元(Largest Coding Unit, LCU),每個最大編碼單元還可以根據規則劃分成矩形的編碼單元(Coding Unit,CU);而且編碼單元可能還會劃分成更小的預測單元(Prediction Unit,PU)。具體地,混合編碼框架可以包括有預測、變換(Transform)、量化(Quantization)、熵編碼(Entropy Coding)、迴路濾波(In Loop Filter)等模組;其中,預測模組可以包括幀內預測(intra prediction)和幀間預測(inter prediction),幀間預測可以包括運動估計(motion estimation)和運動補償(motion compensation)。由於影像圖像的一個幀內相鄰像素之間存在很強的相關性,在影像編解碼技術中使用幀內預測方式能夠消除相鄰像素之間的空間冗餘;但是由於影像圖像中的相鄰幀之間也存在著很強的相似性,在影像編解碼技術中使用幀間預測方式消除相鄰幀之間的時間冗餘,從而能夠提高解碼效率。下述本申請將以幀間預測進行詳細描述。
圖1為本申請實施例提供的一種影像編碼系統的組成方塊圖示意圖,如圖1所示,該影像編碼系統11可以包括:變換單元111、量化單元112、模式選擇和編碼控制邏輯單元113、幀內預測單元114、幀間預測單元115(包括:運動補償和運動估計)、反量化單元116、反變換單元117、迴路濾波單元118、編碼單元119和解碼圖像暫存單元110。
針對輸入的原始影像訊號,透過編碼樹單元(Coding Tree Unit,CTU)的劃分可以得到一個影像重建塊,透過模式選擇和編碼控制邏輯單元113確定編碼模式,然後,對經過幀內或幀間預測後得到的殘差像素訊息,透過變換單元111、量化單元112對該影像重建塊進行變換,包括將殘差訊息從像素域變換到變換域,並對所得的變換係數進行量化,用以進一步減少位元速率;幀內預測單元114用於對該影像重建塊進行幀內預測;其中,幀內預測單元114用於確定該影像重建塊的最優幀內預測模式(即目標預測模式);幀間預測單元115用於執行所接收的影像重建塊相對於一或多個參考幀中的一或多個塊的幀間預測編碼,以提供時間預測訊息;其中,運動估計為產生運動向量的過程,所述運動向量可以估計該影像重建塊的運動,然後,運動補償基於由運動估計所確定的運動向量執行運動補償;在確定幀間預測模式之後,幀間預測單元115還用於將所選擇的幀間預測資料提供到編碼單元119,而且,將所計算確定的運動向量資料也發送到編碼單元119;此外,反量化單元116和反變換單元117用於該影像重建塊的重構建,在像素域中重構建殘差塊,該重構建殘差塊透過迴路濾波單元118去除方塊效應假影,然後,將該重構殘差塊添加到解碼圖像暫存單元110的幀中的一個預測性塊,用以產生經重構建的影像重建塊;編碼單元119是用於編碼各種編碼參數及量化後的變換係數。而解碼圖像暫存單元110用於存放重構建的影像重建塊,用於預測參考。隨著影像圖像編碼的進行,會不斷生成新的重構建的影像重建塊,這些重構建的影像重建塊都會被存放在解碼圖像暫存單元110中。
圖2為本申請實施例提供的一種影像解碼系統的組成方塊圖示意圖,如圖2所示,該影像解碼系統12可以包括:解碼單元121、反變換單元127,與反量化單元122、幀內預測單元123、運動補償單元124、迴路濾波單元125和解碼圖像暫存單元126單元。
輸入的影像訊號經過影像編碼系統11進行編碼處理之後,輸出該影像訊號的位元流;該位元流輸入影像解碼系統12中,首先經過解碼單元121,用於得到解碼後的變換係數;針對該變換係數透過反變換單元127與反量化單元122進行處理,以便在像素域中產生殘差塊;幀內預測單元123可用於基於所確定的幀內預測方向和來自當前幀或圖片的先前經解碼塊的資料而產生當前影像解碼塊的預測資料;運動補償單元124是透過剖析運動向量和其他關聯語法元素來確定用於影像解碼塊的預測訊息,並使用該預測訊息以產生正被解碼的影像解碼塊的預測性塊;透過對來自反變換單元127與反量化單元122的殘差塊與由幀內預測單元123或運動補償單元124產生的對應預測性塊進行求和,而形成解碼的影像塊;該解碼的影像訊號透過迴路濾波單元125以便去除方塊效應假影,可以改善影像品質;然後將經解碼的影像塊儲存於解碼圖像暫存單元126中,解碼圖像暫存單元126儲存用於後續幀內預測或運動補償的參考圖像,同時也用於影像訊號的輸出,得到所恢復的原始影像訊號。
本申請實施例提供的一種幀間預測方法主要作用於影像編碼系統11的幀間預測單元115和影像解碼系統12的幀間預測單元,即運動補償單元124;也就是說,如果在影像編碼系統11能夠透過本申請實施例提供的幀間預測方法得到一個較好的預測效果,那麼,對應地,在影像解碼系統12,也能夠改善影像解碼恢復品質。
在介紹本申請實施例之前,首先對本申請實施例涉及的一些技術作出描述,應注意,下述的技術是對本申請實施例的補充性說明,這些技術也是本申請實施例中的一部分,本領域人員可以得知,在不衝突的情況下,這些技術是可以與本申請實施例任意結合的。
還需要說明的是,運動訊息可以包括運動向量(Motion Vector,MV)訊息和參考幀訊息。具體地,對於使用幀間預測的當前塊而言,該當前塊所在的當前幀具有一個或多個參考幀,而當前塊可以是編碼單元或預測單元,可以使用一個包含一組運動向量和參考幀訊息的運動訊息指示到某一參考幀內一個與當前塊大小相同的像素區域,這裡稱之為參考塊,也可以使用一個包含兩組運動向量和參考幀訊息的運動訊息指示到某兩個可以相同也可以不同的參考幀內的兩個參考塊;然後運動補償可以根據運動訊息所指示的參考塊得到當前塊的幀間預測值。
應理解,P幀(Predictive Frame)是只能使用圖像播放順序(Picture Order Count,POC)在當前幀之前的參考幀進行預測的幀。這時候當前參考幀只有一個參考幀清單,用RefPicList0表示;且RefPicList0中都是POC在當前幀之前的參考幀。B幀(Bi-directional Interpolated Prediction Frame)早期是可以使用POC在當前幀之前的參考幀及POC在當前幀之後的參考幀進行預測的幀。B幀有兩個參考幀清單,分別用RefPicList0和RefPicList1表示;其中,RefPicList0中都是POC在當前幀之前的參考幀,RefPicList1中都是POC在當前幀之後的參考幀。對於當前塊而言,可以只參考RefPicList0中某一幀的參考塊,這種情況可稱為前向預測;或者也可以只參考RefPicList1中某一幀的參考塊,這種情況可稱為後向預測;或者還可以同時參考RefPicList0中某一幀的參考塊和RefPicList1中某一幀的參考塊,這種情況可稱為雙向預測。同時參考兩個參考塊的一種簡單方式是將兩個參考塊內每一個對應位置的像素進行平均以得到當前塊內每一像素的幀間預測值(或者可以稱為預測塊)。後期B幀不再限制RefPicList0中都是POC在當前幀之前的參考幀,RefPicList1中都是POC在當前幀之後的參考幀。換句話說,RefPicList0中也可以有POC在當前幀之後的參考幀,RefPicList1中也可以有POC在當前幀之前的參考幀,也即是指當前塊可以同時參考POC在當前幀之前的參考幀或者同時參考POC在當前幀之後的參考幀。但是當前塊為雙向預測時所使用的參考幀必須一個來自於RefPicList0,一個來自於RefPicList1;這種B幀也稱為廣義B幀。
需要注意的是,由於不同的標準版本或者不同的技術資料對RefPicList0、RefPicList1的表示方式不同,因此RefPicList0、RefPicList1還會有其他的表示方式。至少在本申請實施例中,RefPicList0、List0以及L0表徵的意義相同,RefPicList1、List1以及L1表徵的意義相同。
由於隨機存取(Random Access,RA)配置的編解碼順序與POC順序不同,這樣B幀可以同時參考當前幀之前的訊息和當前幀之後的訊息,能夠明顯提高編碼性能。
圖3為本申請實施例提供的一種典型圖像組的結構示意圖,如圖3所示, RA的一種經典的圖像組(Group Of Pictures,GOP)結構如圖3所示,在圖3中,箭頭表示參考關係,由於I幀不需要參考幀,那麼在POC為0的I幀解碼後,將會解碼POC為4的P幀,而在解碼POC為4的P幀時可以參考POC為0的I幀。在POC為4的P幀解碼後,然後再解碼POC為2的B幀,而在解碼POC為2的B幀時可以參考POC為0的I幀和POC為4的P幀,等等。這樣,根據圖3可以得到,POC順序為{0 1 2 3 4 5 6 7 8}的情況下,其對應的解碼順序為{0 3 2 4 1 7 6 8 5}。
另外,低延遲(Low Delay,LD)配置的編解碼順序與POC順序是相同的,這時候當前幀只能參考當前幀之前的訊息。其中,Low Delay配置又分Low Delay P和Low Delay B。Low Delay P即傳統的Low Delay配置。其典型的結構是IPPP,即先編解碼一個I幀,之後解碼的幀都是P幀。Low Delay B的典型結構是IBBB,與Low Delay P的區別在於每個幀間幀都是B幀,即使用兩個參考幀清單,當前塊可以同時參考RefPicList0中的某一幀的參考塊和RefPicList1中的某一幀的參考塊。這裡,當前幀的一個參考幀清單最多可以有幾個參考幀,如2個、3個或4個等。當編碼或解碼某一個當前幀時,RefPicList0和RefPicList1內各有哪幾個參考幀是由預設配置或演算法決定的,但是同一個參考幀可以同時出現在RefPicList0和RefPicList1中,即編碼器或解碼器允許當前塊同時參考同一個參考幀中的兩個參考塊。
編碼器或解碼器通常可以使用參考幀清單裡的索引值(用index表示)來對應參考幀。如果一個參考幀清單長度為4,那麼index有0、1、2、3等四個值。例如,如果當前幀的RefPicList0有POC為5,4,3,0的4個參考幀,那麼RefPicList0的index 0為POC 5的參考幀,RefPicList0的index 1為POC 4的參考幀,RefPicList0的index 2為POC 3的參考幀,RefPicList0的index 3為POC 0的參考幀。
目前的VVC影像編解碼標準中,預設的幀間預測模式可以為GPM預測模式。目前的AVS3影像編解碼標準中,預設的幀間預測模式可以為AWP預測模式。這兩種預測模式雖然名稱不同、具體的實現形式不同、但原理上是共通的,即這兩種預測模式都可以適用本申請實施例的幀間預測方法。
對於GPM預測模式來說,如果使用GPM,那麼位元流中將會傳輸GPM下的預測模式參數,比如GPM具體的劃分模式;通常情況下,GPM包括有64種劃分模式。對於AWP預測模式來說,如果使用AWP,那麼位元流中將會傳輸AWP下的預測模式參數,比如AWP具體的劃分模式;通常情況下,AWP包括有56種劃分模式。
圖4a為本申請實施例提供的一種GPM在64×64的當前塊上多種劃分模式的權重分配示意圖,在圖4a中,GPM存在有64種劃分模式。
圖4b為本申請實施例提供的一種AWP在64×64的當前塊上多種劃分模式的權重分配示意圖,在圖4b中,AWP存在有56種劃分模式。
圖4c為本申請實施例提供的一種AWP在64×32的當前塊上多種劃分模式的權重分配示意圖,在圖4c中,AWP存在有56種劃分模式。
圖4d為本申請實施例提供的一種AWP在32×64的當前塊上多種劃分模式的權重分配示意圖,在圖4d中,AWP存在有56種劃分模式。
在一種實施方式中,一個劃分模式可以對應一個權重匯出模式,即劃分模式和權重匯出模式具有對應關係。在圖4a中,當前塊的尺寸大小為64×64,單位可以是像素大小.
在圖4a~4d中,黑色表示第一個參考塊對應位置的權重值為0%,白色表示第一個參考塊對應位置的權重值為100%,灰色區域則按顏色深淺的不同表示第一個參考塊對應位置的權重值為大於0%小於100%的某一個權重值。第二個參考塊對應位置的權重值則為100%減去第一個參考塊對應位置的權重值。
應理解的是,雖然本申請實施例提供了當前塊的尺寸大小為上述的64×64、64×32或者32×64,但是本領域應當理解,在其它場景中,當前塊的尺寸大小還會有其他選擇。透過64×64、64×32或者32×64,說明了當前塊的長寬比,例如,64×64可以表徵當前塊的長寬比為1:1,64×32可以表徵當前塊的長寬比為2:1,32×64可以表徵當前塊的長寬比為1:2。
在一種實施方式中,當前塊的長寬比可以為1:1、2:1、4:1、1:2或1:4等等。在另一種實施方式中,當前塊的長寬比還可以為其它數值,例如,1:1.5或1.5:1等等。在又一種實施方式中,當前塊的長寬比可以根據影像的尺寸來確定。
GPM或AWP需要在位元流中傳輸一個GPM或AWP是否使用的標誌(flag)。如果使用GPM或AWP,在位元流中傳輸具體使用的模式,即GPM的64種模式之一,或AWP的56種模式之一,並可以在位元流中傳輸兩個運動訊息的索引值。flag標誌當前塊是否使用GPM或AWP。這個標誌也可能是與其他模式結合。
在預設的預測模式下,比如GPM和AWP均需要使用兩個運動訊息查找兩個參考塊。目前的實現方式是在編碼器側利用當前塊之前已編碼/已解碼部分的相關訊息構建一個運動訊息候選清單,從運動訊息候選清單中選擇運動訊息,將這兩個運動訊息在運動訊息候選清單中的索引值(index)寫入位元流。在解碼器側採用同樣的方式,即利用當前塊之前已解碼部分的相關訊息構建一個運動訊息候選清單,這個運動訊息候選清單與編碼器側構建的候選清單一定是相同的。如此,從位元流中解析出兩個運動訊息的索引值,然後從運動訊息候選清單中查找出這兩個運動訊息即為當前塊需要使用的兩個運動訊息。
也就是說,本申請實施例所描述的運動訊息可以包括:運動向量訊息,即(x,y)的值,以及對應的參考幀訊息,即參考幀清單及在參考幀清單中的參考索引值。一種表示方式是記錄兩個參考幀清單的參考索引值,其中一個參考幀清單對應的參考索引值有效,如0,1,2等;另一個參考幀清單對應的參考索引值為無效,即-1。參考索引值有效的參考幀清單即為當前塊的運動訊息所使用的參考幀清單,根據參考索引值可以從該參考幀清單中查找到對應的參考幀。每個參考幀清單都有一個對應的運動向量,有效的參考幀清單對應的運動向量是有效的,無效的參考幀清單對應的運動向量是無效的。解碼器可以透過運動訊息中的參考幀訊息找到所需的參考幀,根據當前塊的位置以及運動向量即(x,y)的值可以在參考幀中找到參考塊,進而確定出當前塊的幀間預測值。
圖5為本申請實施例提供的一種當前塊與相鄰塊的空間位置關係示意圖,如圖5所示,塊E為當前塊,而塊A、塊B、塊C、塊D、塊F、塊G均為塊E的相鄰塊。其中,塊E的相鄰塊A是樣本(x0
-1,y0
)所在的塊,塊E的相鄰塊B是樣本(x0
,y0
-1)所在的塊,塊E的相鄰塊C是樣本(x0
+1,y0
-1)所在的塊,塊E的相鄰塊D是樣本(x0
-1,y0
-1)所在的塊,塊E的相鄰塊F是樣本(x0
-1,y1
)所在的塊,塊E的相鄰塊G是樣本(x1
,y0
-1)所在的塊。其中(x0
,y0
)是塊E左上角樣本在圖像中的座標,(x1
,y0
)是塊E右上角樣本在圖像中的座標,(x0
,y1
)是塊E左下角樣本在圖像中的座標。也就是說,塊E和它的相鄰塊A、B、C、D、F和G的空間位置關係詳見圖5。
對於圖5而言,相鄰塊X(X表示為A、B、C、D、F或G)“存在”是指該塊應在待解碼圖像內並且該塊應與塊E屬於同一空間區域;否則相鄰塊“不存在”。可以得到,如果塊“不存在”或者尚未解碼,那麼此塊“不可用”;否則此塊“可用”。或者,如果待解碼圖像樣本所在的塊“不存在”或者此樣本尚未解碼,那麼此樣本“不可用”;否則此樣本“可用”。
此處說明相關技術中提供匯出運動訊息的方法,包括以下四步:
第一步,1)如果參考圖像佇列1中參考索引值為0的圖像中與當前預測單元的左上角亮度樣本位置對應的亮度樣本所在的時域運動訊息儲存單元儲存的參考幀索引為-1,則當前預測單元的L0參考索引和L1參考索引均等於0。以當前預測單元所在編碼單元的尺寸和位置作為當前預測單元的尺寸和位置,然後將根據相關技術中提供匯出運動訊息的方法得到的L0運動向量預測值和L1運動向量預測值分別作為當前預測單元的L0運動向量MvE0和L1運動向量MvE1,並令當前預測單元的L0參考索引RefIdxL0和L1參考索引RefIdxL1均等於0,結束運動訊息匯出過程。
2)否則,當前預測單元的L0參考索引和L1參考索引均等於0。當前預測單元的L0參考索引和L1參考索引對應的圖像的距離索引分別記為DistanceIndexL0和DistanceIndexL1;當前預測單元的L0參考索引和L1參考索引對應的圖像的BlockDistance分別記為BlockDistanceL0和BlockDistanceL1。
在參考圖像佇列1中參考索引為0的圖像中與當前預測單元的左上角亮度樣本位置對應的亮度樣本所在的時域運動訊息儲存單元的L0運動向量記為mvRef(mvRef_x,mvRef_y),該運動訊息儲存單元所在的圖像的距離索引記為DistanceIndexCol,該運動向量指向的參考單元所在的圖像的距離索引記為DistanceIndexRef。
第二步,BlockDistanceRef = DistanceIndexCol - DistanceIndexRef
第三步,令當前預測單元的L0參考索引RefIdxL0等於0,計算當前預測單元的L0運動向量mvE0(mvE0_x, mvE0_y):
mvE0_x = Clip3(-32768, 32767, Sign(mvRef_x * BlockDistanceL0 * BlockDistanceRef) * (((Abs(mvRef_x * BlockDistanceL0 * (16384 / BlockDistanceRef))) + 8192 ) >> 14));
mvE0_y = Clip3(-32768, 32767, Sign(mvRef_y * BlockDistanceL0 * BlockDistanceRef) * (((Abs(mvRef_y * BlockDistanceL0 * (16384 / BlockDistanceRef))) + 8192 ) >> 14));
此時的mvX為mvRef,MVX為mvE0。
令當前預測單元的L1參考索引RefIdxL1等於0,計算當前預測單元的L1運動向量mvE1(mvE1_x, mvE1_y):
mvE0_x = Clip3(-32768, 32767, Sign(mvRef_x * BlockDistanceL1 * BlockDistanceRef) * (((Abs(mvRef_x * BlockDistanceL1 * (16384 / BlockDistanceRef))) + 8192 ) >> 14));
mvE0_y = Clip3(-32768, 32767, Sign(mvRef_y * BlockDistanceL1 * BlockDistanceRef) * (((Abs(mvRef_y * BlockDistanceL1 * (16384 / BlockDistanceRef))) + 8192 ) >> 14));
此時的mvX為mvRef,MVX為mvE1。
第四步,interPredRefMode的值等於‘PRED_List01’。
實際應用中,運動訊息候選清單的構建方式不僅使用了空域運動訊息,還使用了時域運動訊息。其中,在VVC中構建合併候選清單(merge list)時,也用到了時域運動訊息和空域運動訊息。
圖6為本申請實施例提供的另一種當前塊與相鄰塊的空間位置關係示意圖,如圖6所示,其示出了merge list構建時所使用到的相關位置的運動訊息,填充元素為1、2、3、4、5的候選位置表示空域相關位置,即當前幀內與當前塊相鄰的這些位置塊所使用的運動訊息;填充元素為6和7的候選位置表示時域相關位置,即某一個參考幀中對應位置所使用的運動訊息,這些運動訊息還可以是經過了縮放(scaling)。這裡,對於時域運動訊息來說,如果候選位置6可用,那麼可以使用6位置對應的運動訊息;否則,可以使用7位置對應的運動訊息。需要注意的是,三角劃分預測模式(Triangle Partition Mode,TPM)和GPM預測模式中關於運動訊息候選清單的構建中也涉及到了這幾個位置的使用;而且這裡塊的大小並非為實際大小,只是作為示例說明。
假定第一個運動訊息表示為mvAwp0L0、mvAwp0L1、RefIdxAwp0L0和RefIdxAwp0L1。其中,mvAwp0L0表示在第一個參考幀清單RefPicList0中對應的運動向量,RefIdxAwp0L0表示在第一個參考幀清單RefPicList0中對應的參考幀的參考索引值;mvAwp0L1表示在第二個參考幀清單RefPicList1中對應運動向量,RefIdxAwp0L1表示在第二個參考幀清單RefPicList1中對應的參考幀的參考索引值。第二個運動訊息以此類推。
在兩個運動訊息都是單向的情況下,所以RefIdxAwp0L0和RefIdxAwp0L1必有一個為有效值,比如0,1,2等;另一個為無效值,比如-1。如果RefIdxAwp0L0為有效值,那麼RefIdxAwp0L1為-1;這時候對應的mvAwp0L0即為所需要的運動向量,即(x,y),mvAwp0L1不需要考慮。反之亦然。
在本申請實施例中,確定兩個運動訊息找到兩個參考塊,根據GPM或AWP使用的具體的模式確定兩個參考塊在每一個像素位置的權值,並將兩個參考塊加權得到當前塊的預測塊。
得到預測塊後的處理都與原有的方法無異。在編碼端,如果當前模式是跳過模式,則當前塊的編碼結束。如果當前模式不是跳過模式,將當前塊與預測塊相減得到殘差塊,將殘差塊進行變換,量化,熵編碼。在解碼端,如果當前模式是跳過模式,則預測塊就是解碼塊,當前塊的解碼結束。如果當前模式不是跳過模式,熵解碼解析量化係數,接著反量化,反變換得到殘差塊,將殘差塊與預測塊相加得到解碼塊。
AWP和GPM的運動訊息候選清單構建方法或沿用了傳統的運動訊息候選清單構建方法或基於原有的merge運動訊息候選清單篩選,對於所有的AWP或GPM劃分模式都使用同樣的清單構建方法。對於 AWP或GPM之前的那些預測方法,也就是預設把當前塊作為一個整體來處理,這樣的方法並無不妥,而當處理AWP或GPM時,實際上當前塊是分為兩個部分處理的,或者更嚴謹地說,當前塊的兩個部分使用不同的運動訊息,於是分別對這兩個部分來說,能否找到與它相關性最強的位置的運動訊息,以及這個位置的運動訊息在清單中的位置是否靠前,將影響編碼或解碼效率。
無論是merge運動訊息候選清單,還是AWP或GPM的運動訊息候選清單,其構建基本思路都是將被選中的概率高的運動訊息放在被選中的概率低的運動訊息的前面,使用變長編碼,即清單中靠前的運動訊息使用較短的碼字,清單中靠後的運動訊息使用較長的碼字,從而提高編碼效率。
運動訊息被選中的概率與匯出它所使用的位置和當前塊的相關關係有一定關係。我們把這種關係稱為相關性。大致上與當前塊挨得越近相關性越強,與當前塊相鄰的像素數越多,相關性越強。
對於AWP或GPM,則需要考慮相關位置與AWP或GPM分的兩個部分分別的相關性,那麼為什麼不乾脆對兩個部分分別構建一個清單呢,即對AWP或GPM構建兩個清單。這大概是因為構建兩個清單所帶來的複雜度和性能的增加並不划算。增加的複雜度一部分來自於剪枝(查重)。在使用一個清單的方法中還有一個小的技巧。因為兩個運動訊息不可能相同,後編碼的那個運動訊息的索引值不可能與先編碼的那個運動訊息的索引值相同,假設後編碼的那個運動訊息的索引值比先編碼的那個運動訊息的索引值大,那麼後編碼的那個運動訊息的索引值減一,從而可以使用更短的碼字。這也是用一個清單相對於兩個清單的優勢。
AWP或GPM的不同模式分的兩個部分是不同的,如上面的圖4a和圖4b所示。依照上面所講的相關性的原理,使用相關技術的清單構建方法,某些模式與第一塊相關性強的運動訊息在清單的順序靠前,但某些模式與第一塊相關性強的運動訊息在清單的順序靠後。某些模式與第二塊相關性強的運動訊息在清單的順序靠後,但某些模式與第二塊相關性強的運動訊息在清單的順序靠前。某些模式與第一塊相關性強的運動訊息比與第二塊相關性強的運動訊息在清單的順序靠前,但某些模式與第一塊相關性強的運動訊息比與第二塊相關性強的運動訊息在清單的順序靠後。所以相關技術的構建方法可能對某些模式是最合適的,但對某些模式未必是最合適的。
在本申請實施例中的幀間預測方法,運動訊息候選清單的構建方法可以為自我調整的運動訊息候選清單的構建方法,或者,根據AWP或GPM的模式確定AWP或GPM的運動訊息候選清單的構建方法。
本申請實施例中可以設置不止一種運動訊息候選清單的構建方法,如果AWP或GPM使用某一個(些)模式,使用一種運動訊息候選清單,如果AWP或GPM使用不同於上面所述的一個(些)模式,使用不同於上面所述的一種運動訊息候選清單。
對解碼器來說,確定AWP或GPM的模式後,根據AWP或GPM的模式確定運動訊息候選清單的構建方法。對當前塊只會使用某一種運動訊息候選清單的構建方法,因此並沒有增加計算上的複雜度。
圖7為本申請實施例提供的一種幀間預測方法的流程示意圖,如圖7所示,該方法應用於解碼器,該方法可以包括:
S701、解析位元流,獲取當前塊的權重匯出模式。
在一些實施方式中,解碼器可以解析位元流,確定當前塊的預測模式參數,當前塊的預測模式參數可以包括當前塊的權重匯出模式,在預測模式參數指示使用預設的幀間預測模式確定當前塊的幀間預測值的情況下,從當前塊的預測模式參數中獲取當前塊的權重匯出模式。預設的幀間預測模式可以是AWP模式或GPM模式。
在一些實施方式中,當前塊的權重匯出模式用於表徵一個或兩個兩個參考塊,在產生當前塊的預測塊時的權重模式或權重分佈模式或權重分佈區域。
當前塊的權重匯出模式還可以是左下右上權重匯出模式、左上右下權重匯出模式、左右權重匯出模式、上下權重匯出模式中的一種。左下右上權重匯出模式用於表徵預測塊的左下部分位置來自於第一個參考塊,右上部分位置來自於第二個參考塊,左右權重匯出模式用於表徵預測塊的左部分位置來自於第一個參考塊,右部分位置來自於第二個參考塊等等,此處不再列舉。
當前塊的權重匯出模式還可以是當前塊的劃分模式,當前塊的劃分模式可以是將當前塊劃分成兩個部分,例如,透過三角劃分的方式將當前塊劃分為兩個部分;再例如,透過矩形劃分的方式將當前塊劃分為兩個部分;又例如,透過弧形或其它規則或不規則的形狀,將當前塊劃分為兩個部分;還例如,可以基於當前塊中的物件的輪廓來確定劃分界限,以使得劃分界限盡可能的貼合物件的輪廓。其中,在三角劃分時,當前塊會劃分出至少一個三角形,和/或,至少一個梯形,在矩形劃分時,當前塊會劃分出至少一個矩形。在另一些實施例中,當前塊的劃分模式可以是將當前塊劃分成三個或三個以上的部分。
在協定中給出了GPM預測模式下的64中權重匯出模式、以及AWP預測模式下的56種權重匯出模式。當前塊的權重匯出模式為幾何劃分預測模式中的多種權重匯出模式中的一種,或者,當前塊的權重匯出模式為角度加權預測模式中的多種權重匯出模式中的一種。例如,當前塊的權重匯出模式可以是GPM預測模式下的64中權重匯出模式中的任一種權重匯出模式,或者,當前塊的權重匯出模式可以是AWP預測模式下的56種權重匯出模式中的任一種權重匯出模式。
應理解,早期的編解碼技術中只存在矩形的劃分方式,無論是CU、PU還是變換單元(Transform Unit,TU)的劃分。而GPM或AWP均實現了非矩形的劃分,即用一條直線可以將一個矩形塊分成兩個分區,根據直線的位置和角度的不同,劃分的兩個分區可能是三角形或梯形或矩形等,從而能使得劃分更貼近物體的邊緣或者兩個運動不同區域的邊緣。需要注意的是,這裡所說的劃分並不是真正意義上的劃分,而更像是一種預測效果上的劃分。因為這個劃分只是劃分了兩個參考塊在產生預測塊時的權重,或者可以簡單地理解為預測塊的一部分位置來自於第一個參考塊,而另一部分位置來自於第二個參考塊,並沒有真正按劃分線把當前塊劃分成兩個CU或PU或TU。這樣,在預測之後殘差的變換、量化、反變換、反量化等也都是將當前塊作為一個整體進行處理。
需要說明的是,待解碼圖像可以劃分為多個圖像塊,而當前待解碼的圖像塊可以稱為當前塊(可以用CU表示),與當前塊相鄰的圖像塊可以稱為相鄰塊;即在待解碼圖像中,當前塊與相鄰塊之間具有相鄰關係。這裡,每個當前塊可以包括第一圖像分量、第二圖像分量和第三圖像分量,也即當前塊表示待解碼圖像中當前待進行第一圖像分量、第二圖像分量或者第三圖像分量預測的圖像塊。
其中,假定當前塊進行第一圖像分量預測,而且第一圖像分量為亮度分量,即待預測圖像分量為亮度分量,那麼當前塊也可以稱為亮度塊;或者,假定當前塊進行第二圖像分量預測,而且第二圖像分量為色度分量,即待預測圖像分量為色度分量,那麼當前塊也可以稱為色度塊。
還需要說明的是,預測模式參數指示了當前塊採用的預測模式以及與該預測模式相關的參數。其中,預測模式通常包括有幀間預測模式、傳統幀內預測模式和非傳統幀內預測模式等,而幀間預測模式又包括有普通幀間預測模式、GPM預測模式和AWP預測模式等。也就是說,編碼器會選取最優的預測模式對當前塊進行預編碼,在這過程中就可以確定出當前塊的預測模式,從而將相應的預測模式參數寫入位元流,由編碼器傳輸到解碼器。
這樣,在解碼器側,透過解析位元流就可以直接獲取到當前塊的預測模式參數,根據所獲取的預測模式參數用以確定當前塊是否使用預設的幀間預測模式,比如GPM預測模式或AWP預測模式。
S703、基於當前塊的權重匯出模式,構建新的運動訊息候選清單。
當前塊的權重匯出模式的類別不同,構建的新的運動訊息候選清單不同。當前塊的權重匯出模式的類別可以是預先設定的。
在一種實施方式中,在當前塊的權重匯出模式的類別不同的情況下,構建的新的運動訊息候選清單可以不同。在一種實施方式中,由於新的運動訊息候選清單的長度有限,在當前塊的權重匯出模式的類別不同的情況下,構建的新的運動訊息候選清單可以相同。或者也可以說,當前塊的權重匯出模式有多種不同的類別,在利用多種不同的類別中的某一些類別時,構建的新的運動訊息候選清單可以相同或不同。
然而,值得本領域注意的是,即使在採用某一些類別時構建的新的運動訊息候選清單相同的情況下,解碼器的構建新的運動訊息候選清單的方式不同或者邏輯不同。
在一種實施方式中,解碼器可以基於當前塊的權重匯出模式,確定與當前塊的權重匯出模式對應的排序方式,解碼器可以不同的當前塊的權重匯出模式,確定不同的排序方式,從而解碼器可以基於排序方式,將當前塊相關的已知運動訊息中的全部或部分構建成新的運動訊息候選清單。構建新的運動訊息候選清單的一種方式可以為將運動訊息寫入至初始運動訊息候選清單。在這種方式下,新的運動訊息候選清單中的運動訊息的排序方式,可能會與當前技術中存在的某一特定的排序方式不同。
在構建新的運動訊息候選清單的過程中,解碼器可以確定第一個應填入至初始運動訊息候選清單的運動訊息,並將第一個運動訊息填入至初始運動訊息候選清單中的索引值為0位置中;接著解碼器可以確定第二個應填入至初始運動訊息候選清單的運動訊息,確定第二個運動訊息與已經填入的運動訊息是否重複(查重步驟),在不重複的情況下,將第二個運動訊息填入至初始運動訊息候選清單中的索引值為1位置,直到將預設數量個運動訊息填入至初始運動訊息候選清單中,將某一個運動訊息填入至預設數量減去一的索引至所對應的位置中,新的運動訊息候選清單構建完成。
解碼器可以基於排序方式,從當前塊相關的已知運動訊息中確定給第一個運動訊息、第二個運動訊息等。
在一些實施方式中,排序方式可以為針對當前塊相關的已知運動訊息排序方式。
本申請實施例中的新的運動訊息候選清單為允許存在雙向運動訊息的候選清單。在其它實施例中,新的運動訊息候選清單可以稱為雙向運動訊息候選清單。
在另一種實施方式中,解碼器可以基於當前塊的權重匯出模式,確定與當前塊的權重匯出模式對應的待填入的運動訊息,每一個待填入的運動訊息可以是單向運動訊息、雙向運動訊息或者對雙向運動訊息進行拆分得到的一個或兩個單向運動訊息,接著,解碼器可以基於待填入的運動訊息,構建新的運動訊息候選清單。在這種方式下,新的運動訊息候選清單中的運動訊息的排序方式,可能會與當前技術中存在的只填入單向運動訊息的方式不同。
在又一種實施方式中,解碼器可以基於當前塊的權重匯出模式,確定與當前塊的權重匯出模式對應的排序方式,和與當前塊的權重匯出模式對應的待填入的運動訊息,從而基於排序方式和待填入的運動訊息,構建新的運動訊息候選清單。在這種方式下,新的運動訊息候選清單中的運動訊息的排序方式,不僅可能會與當前技術中存在的某一特定的排序方式不同,還可能會與當前技術中存在的只填入單向運動訊息的方式不同。
S705、基於新的運動訊息候選清單,確定當前塊的幀間預測值。
解碼器可以從新的運動訊息候選清單確定兩個運動訊息,例如可以根據解析到的兩個運動訊息的索引在構建出的運動訊息候選清單中找到兩個運動訊息,基於這兩個運動訊息採用單向或雙向的預測方法得到兩個中間預測塊,然後根據當前塊的權重匯出模式確定兩個中間預測塊在每一個像素位置的權值,並將兩個中間預測塊加權得到當前塊的預測塊。
解碼器在確定到某一個運動訊息是雙向的,則使用雙向預測的方法得到中間預測塊,其中,可以使用BIO或DMVR或其它方式得到中間預測塊。如果運動訊息是單向的,則使用單向預測的方法得到中間預測塊。
本申請實施例中,由於解碼器構建的新的運動訊息候選清單,根據的是當前塊的權重匯出模式,從而解碼器能夠根據不同的權重匯出模式,構建出不同的新的運動訊息候選清單,從而使得運動訊息候選清單的構建符合當前塊的權重匯出模式,進而能夠提高解碼器的解碼效率。
在本申請的一些實施例中,上述S703可以透過以下方式來實現:基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式;基於排序方式,構建新的運動訊息候選清單。
與當前塊相關的已知運動訊息可以是與當前塊在時間上或者空間上相關的已解碼塊的運動訊息。本申請實施例中的運動訊息可以是單向運動訊息、雙向運動訊息或者對雙向運動訊息進行拆分得到的一個或兩個單向運動訊息。
與當前塊相關的已知運動訊息中包括預設數量個運動訊息,預設數量可以是2~6中的任一個,例如,2個、3個、4個、5個或6個等。與當前塊相關的已知運動訊息中包括的運動訊息數量可以根據解碼準確度和解碼器的性能兩者作出一個權衡。
與當前塊相關的已知運動訊息是可用的運動訊息,或者,是存在的運動訊息。
不同的權重匯出模式下,排序方式可以相同或者不同。在一些實施方式中,如果當前塊劃分為兩個部分,可以從這兩個部分中選擇靠近左側、上側或左上側的一個部分,將與該一個部分相鄰的塊作為較高的排序優先順序來進行排序。
以GPM預測模式和AWP預測模式中的權重匯出模式為例,在當前塊的權重匯出模式為左上、右下的權重匯出模式的情況下,已知運動訊息的排序方式為,當前塊的左上相鄰塊的運動訊息排序靠前的排序方式;在當前塊的權重匯出模式為上、下的權重匯出模式的情況下,已知運動訊息的排序方式為,當前塊的上塊的運動訊息排序靠前的排序方式;在當前塊的權重匯出模式為左下、右上的權重匯出模式的情況下,已知運動訊息的排序方式為,當前塊的左下相鄰塊的運動訊息排序靠前的排序方式;在當前塊的權重匯出模式為左、右的權重匯出模式的情況下,已知運動訊息的排序方式為,當前塊的左塊的運動訊息排序靠前的排序方式。
在本申請的一些實施例中,當前塊相關的已知運動訊息可以包括當前塊相關的N個運動訊息;N為大於或等於1的整數;當前塊相關的N個運動訊息可以包括:當前塊在空域上的至少一個相鄰塊的運動訊息,和/或,當前塊在時域上的至少一個對應塊的運動訊息。
在一些實施方式中,當前塊相關的N個運動訊息可以僅包括相鄰塊運動訊息。在另一些實施方式中,當前塊相關的N個運動訊息可以僅包括對應塊的運動訊息,在又一些實施方式中,當前塊相關的N個運動訊息可以不僅包括相鄰塊的運動訊息,還可以包括對應塊的運動訊息。
在本申請實施例中,N個運動訊息中每一運動訊息包括原始運動訊息,原始運動訊息包括運動向量訊息和參考幀訊息。
其中,運動向量訊息可以包括x軸運動分量訊息和y軸運動分量訊息,參考幀訊息可以包括參考幀清單及在參考幀清單中的索引,解碼器可以透過索引從參考幀清單中確定參考幀訊息。
在本申請實施例中,原始運動訊息可以為單向原始運動訊息,或可以雙向原始運動訊息,或可以為對雙向原始運動訊息進行拆分得到的一個或兩個單向原始運動訊息。
在本申請的一些實施例中,至少一個相鄰塊的運動訊息的排序方式,可以是基於當前塊的權重匯出模式確定的。
在本申請的一些實施方式中,在N大於或等於2的情況下,基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式,可以包括:在當前塊的權重匯出模式為第一類權重匯出模式的情況下,將至少一個對應塊的運動訊息,排列在至少一個相鄰塊的運動訊息之前。
應需注意的是,在一些實施方式中,本申請實施例中的運動訊息在未作特殊說明的情況下可以指解碼器解析得到的單向原始運動訊息,或雙向原始運動訊息,或對雙向原始運動訊息拆分得到的一個或兩個單向原始運動訊息。本申請實施例中的運動訊息在未作特殊說明的情況下可以不僅指解碼器解析得到的單向原始運動訊息,或雙向原始運動訊息,或對雙向原始運動訊息拆分得到的一個或兩個單向運動訊息,還指單向衍生運動訊息,或雙向衍生運動訊息,或對雙向衍生運動訊息拆分得到的一個或兩個單向衍生運動訊息。
本申請實施例中的原始運動訊息(包括單向原始運動訊息或雙向原始運動訊息),可以是解碼器透過解析位元流得到的運動訊息,衍生運動訊息可以是透過對原始運動訊息進行數學計算得到的。
在本申請的另一些實施方式中,在N大於或等於2的情況下,基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式,可以包括:在當前塊的權重匯出模式為第二類權重匯出模式的情況下,將至少一個對應塊的運動訊息,穿插在至少一個相鄰塊的運動訊息之內。這樣,解碼器可以在填入了一部分空域上的運動訊息後,再填入一部分或全部的時域運動訊息,然後再填入不重複的空域上的運動訊息等等,直到填入了預設數量個運動訊息。
在本申請的又一些實施方式中,在N大於或等於2的情況下,基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式,可以包括:在當前塊的權重匯出模式為第三類權重匯出模式的情況下,將至少一個對應塊的運動訊息,排列在至少一個相鄰塊的運動訊息之後。
以預設數量為5進行舉例,其中,新的運動訊息候選清單中的運動訊息的數量為5,可以理解為新的運動訊息候選清單的長度為5。
在一些實施方式中,解碼器可以先將1個時域上的運動訊息填入初始運動訊息候選清單中,再將4個空域上的運動訊息填入初始運動訊息候選清單中。
在另一些實施方式中,解碼器可以先將1個或2個或3個空域上的運動訊息填入初始運動訊息候選清單中,再將1個時域上的運動訊息填入初始運動訊息候選清單中,然後將3個或2個或1個空域上的運動訊息填入初始運動訊息候選清單中。
在又一些實施方式中,解碼器可以先將4個空域上的運動訊息填入初始運動訊息候選清單中,再將1個時域上的運動訊息填入初始運動訊息候選清單中。
在一種實施方式中,初始運動訊息候選清單為包括預設數量個填充位置的清單,每一填充位置用於填入運動訊息(包括原始運動訊息、衍生運動訊息、單向運動訊息、雙向運動訊息中的一種)。在另一種實施方式中,初始運動訊息候選清單可以為空清單。在又一種實施方式中,可以在得到至少一個代填入的運動訊息後,根據至少一個運動訊息生成新的運動訊息候選清單,這種方式下,可以沒有初始運動訊息候選清單。
應理解地是,本申請實施例中,無論採用哪一種填入方式,填入之前,都可以先執行查重的步驟。還應理解的是,本申請實施例只是以新的運動訊息候選清單只存在一個時域上的運動訊息來進行舉例,在其它實施例中,新的運動訊息候選清單中可以存在至少兩個時域上的運動訊息。
值得注意的是,上述提到的第一類權重匯出模式、第二類權重匯出模式、第三類權重匯出模式,以及下述提到的第四類權重匯出模式、第五類權重匯出模式等等中,不同的權重匯出模式,採用的排序方式不同。
不同的權重匯出模式在不衝突的情況下是可以相互結合的,例如,當前塊的權重可以既屬於第二類或第三類權重匯出模式,又屬於第四類權重匯出模式。從而,解碼器可以不僅可以將至少一個對應塊的運動訊息,穿插在至少一個相鄰塊的運動訊息之內或之後,還可以按照當前塊的左下相鄰塊的運動訊息、當前塊的右上相鄰塊的運動訊息、當前塊的左上相鄰塊的運動訊息、當前塊在時域上的右下塊的運動訊息的先後順序進行排序。本申請對能夠結合的權重匯出模式不作一一說明。
能夠理解地是,不同的權重模式下,構建的新的運動訊息候選清單可以相同或不同。
需要理解地是,本申請實施例中提供的了很多種排序方式,這些排序方式只是提供了一種排序的思路,或定義了排序方式中不同運動訊息的排序優先順序,根據某一個排序方式進行運動訊息的排序時,並不是指要將這些排序方式中提出的至少兩種運動訊息利用完,而只是在運動訊息候選清單的長度達到預設數量(可以是預設長度)時,就可以確定新的運動訊息候選清單構建完成。
例如,在某一類權重匯出模式下,排序方式為P、Q、R、S的依次排列,那麼在基於該排序方式排到Q時,清單的長度達到預設長度,則新的運動訊息候選清單構建完成,不再執行後續排列。
此處描述N個運動訊息中的另一種排序方式:
在本申請的一些實施方式中,在N大於或等於2的情況下,基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式,可以包括:當前塊相關的已知運動訊息的排序方式為,從排序方式集合中確定的一種排序方式,排序方式集合包括:對當前塊的左下相關塊的運動訊息、當前塊的右上相關塊的運動訊息、當前塊的左上相關塊的運動訊息、當前塊的右下相關塊的運動訊息進行全排列,得到的多個排序方式。
其中,在當前塊的權重匯出模式不同的情況下,從排序方式集合中確定的排序方式不同。
其中,當前塊的左下相關塊的運動訊息、當前塊的右上相關塊的運動訊息、當前塊的左上相關塊的運動訊息、當前塊的右下相關塊的運動訊息中的任一者為:當前塊在空域上的運動訊息或當前塊在時域上的運動訊息。
排序方式集合可以包括24種排列方式,24種排列方式為對當前塊的左下相關塊的運動訊息、當前塊的右上相關塊的運動訊息、當前塊的左上相關塊的運動訊息、當前塊的右下相關塊的運動訊息進行全排列得到的排序方式,例如,一種排序方式為當前塊的左下相關塊的運動訊息、當前塊的右上相關塊的運動訊息、當前塊的左上相關塊的運動訊息、當前塊的右下相關塊的運動訊息依次排序。
當前塊在時域上的運動訊息可以為當前塊的左下相關塊的運動訊息的全部或部分、當前塊的右上相關塊的運動訊息的全部或部分、當前塊的左上相關塊的運動訊息的全部或部分、當前塊的右下相關塊的運動訊息的全部或部分中的一個或至少兩個。
在實施過程中,當前塊的左下相鄰塊的運動訊息包括:當前塊的左下的所有塊或部分塊的運動訊息。
當前塊的右上相鄰塊的運動訊息包括:當前塊的右上的所有塊或部分塊的運動訊息。
當前塊的左上相鄰塊的運動訊息包括:當前塊的左上的所有塊或部分塊的運動訊息。
當前塊在時域上的右下塊的運動訊息包括:在當前塊的外部的時域上的塊的運動訊息,或者,在當前塊的內部的時域上的塊的運動訊息。
圖8為本申請實施例提供的又一種當前塊與相鄰塊的空間位置關係示意圖,如圖8所示,當前塊801的左下相鄰塊可以位於當前塊的左下方區域802,當前塊801的左下相鄰塊可以包括至少一個相鄰塊。當前塊801的左上相鄰塊可以位於當前塊的左上方區域803,當前塊801的左上相鄰塊可以包括至少一個相鄰塊。當前塊801的右上相鄰塊可以位於當前塊的右上方區域804,當前塊801的右上相鄰塊可以包括至少一個相鄰塊。每一相鄰塊均可以與當前塊801相鄰。
值得注意的是,本申請實施例中指出的按照J、K、L的先後順序進行排序,可以透過以下方式進行排序:
(1)判斷是否存在J。
如果J存在時,將J填入至初始運動訊息候選清單,跳轉至(2)。
如果J不存在,跳轉至(3)
(2)判斷已填入的運動訊息的數量是否為預設數量減一個。
如果否,跳轉至(3)
如果是,相關塊的空域上的運動訊息填寫完成。
(3)判斷是否存在K。
如果K存在時,將K填入至初始運動訊息候選清單,跳轉至(4)。
如果K不存在,跳轉至(5)
(4)判斷已填入的運動訊息的數量是否為預設數量減一個。
如果否,跳轉至(5)
如果是,相關塊的空域上的運動訊息填寫完成。
(5)判斷是否存在L。
如果L存在時,將L填入至初始運動訊息候選清單,相關塊的空域上的運動訊息填寫完成。
如果L不存在,相關塊的空域上的運動訊息填寫完成。
在相關塊的空域上的運動訊息填寫完成的情況下,解碼器接著可以進行填寫當前塊的時域上的運動訊息的步驟。
此處描述又一種在N大於或等於2的情況下,基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式:
在一些實施方式中,解碼器可以在當前塊的權重匯出模式為第四類權重匯出模式的情況下,將N個運動訊息中的單向原始運動訊息的全部或部分,排列在對N個運動訊息中的雙向運動訊息進行拆分,得到一個或兩個單向原始運動訊息的全部或部分之前。
需要注意的是,本申請實施例中的N個運動訊息中每一個運動訊息可以均為單向運動訊息,或者,N個運動訊息中每一個運動訊息可以均為雙向運動訊息,或者,N個運動訊息中一部分運動訊息為單向運動訊息,另一部分運動訊息為雙向運動訊息。
在這種實施方式下,解碼器始終先填入單向原始運動訊息,在單向原始運動訊息填入的數量小於預設數量的情況下,再考慮填入對雙向運動訊息進行拆分得到的一個或兩個雙向的原始運動訊息。
此處需要說明一下本申請中的對“全部”和“部分”的限定,一個物件的全部為該一個物件,一個物件的部分也為該一個物件。例如,在N個運動訊息中的單向原始運動訊息中的數量為一個時,單向原始運動訊息的全部即為該一個單向原始運動訊息,單向原始運動訊息的部分也為該一個單向原始運動訊息;在N個運動訊息中的單向原始運動訊息中的數量為至少兩個時,單向原始運動訊息的全部或部分可以是本領域通常的理解。
在另一些實施方式中,解碼器可以在當前塊的權重匯出模式為第五類權重匯出模式的情況下,將N個運動訊息中的單向原始運動訊息的全部或部分,排列在N個運動訊息中的雙向運動訊息的全部或部分之前。
在這種實施方式下,解碼器也是先填入單向原始運動訊息,在單向原始運動訊息填入的數量小於預設數量的情況下,再考慮填入雙向運動訊息。
在又一些實施方式中,解碼器可以在當前塊的權重匯出模式為第六類權重匯出模式的情況下,確定N個運動訊息的排序優先順序,基於排序優先順序對N個運動訊息進行排序。
在這種實施方式中,解碼器無需考慮N個運動訊息的單雙向問題,而是依照預先設定的N個運動訊息的排序優先順序,將N個運動訊息填入。
例如,解碼器可以先將第一個單向原始運動訊息填入,再將第二個雙向原始運動訊息填入,或者再將對第二個雙向原始運動訊息進行拆分得到的一個或兩個單向運動訊息填入。
再例如,在存在衍生運動訊息的情況下,解碼器可以先將第一個單向原始運動訊息填,然後將第一個單向衍生運動訊息填入,再將第二個雙向原始運動訊息和第二個雙向衍生運動訊息填入,或者,再將對第二個雙向原始運動訊息進行拆分得到的一個或兩個單向運動訊息,以及該一個或兩個單向運動訊息對應的單向衍生運動信或雙向衍生運動訊息填入。
在再一種實施方式中,解碼器可以在當前塊的權重匯出模式為第七類權重匯出模式的情況下,確定N個運動訊息中每一個運動訊息的單雙向訊息,和N個運動訊息的排序優先順序,基於每一個運動訊息的單雙向訊息和排序優先順序對N個運動訊息進行排序。
在這種實施方式中,解碼器需對N個運動訊息的單雙向問題和N個運動訊息的排序優先順序進行綜合性的考量,從而基於這兩者對N個運動訊息進行排序。
此處描述獲得某一個對應塊的運動訊息的方式。首先,解碼器可以將除當前幀和對應塊所在幀之外的圖像幀,確定為的第一特定幀;然後,可以在第一特定幀上,確定與當前塊對應的第一目標塊的運動訊息;最後,可以對第一目標塊的運動訊息進行縮放,得到對應塊的運動訊息。
在實施過程中,對第一目標塊的運動訊息進行縮放,得到對應塊的運動訊息,可以包括以下之一:
對第一目標塊的雙向運動訊息進行縮放,得到對應塊的雙向運動訊息;
對第一目標塊的單向運動訊息進行縮放,得到對應塊的雙向運動訊息。
在一種實施方式中,對第一目標塊的運動訊息進行縮放,可以是將第一目標塊的運動訊息映射到對應塊上,從而得到對應塊的運動訊息。
在本申請實施例中,還創造性的提出了衍生運動訊息的這一概念,以下對衍生運動訊息和衍生運動訊息在新的運動訊息候選清單中的排序作出說明:
在本申請實施例中,N個運動訊息中每一運動訊息還包括衍生運動訊息,衍生運動訊息是基於原始運動訊息確定的;衍生運動訊息包括運動向量訊息和參考幀訊息。其中,不同的運動訊息所對應的衍生運動訊息可以相同或不同。
其中,衍生運動訊息為單向衍生運動訊息,或雙向衍生運動訊息,或對雙向衍生運動訊息進行拆分得到的一個或兩個單向衍生運動訊息。其中,單向衍生運動訊息是基於單向原始運動訊息或雙向運動訊息確定的,雙向衍生運動訊息是基於單向原始運動訊息或雙向運動訊息確定的。
此處描述在N大於或等於2的情況下,N個運動訊息的排序方式:
在一些實施例中,解碼器可以將N個原始運動訊息中的全部或部分,排列在N個衍生運動訊息中的全部或部分之前。
其中,關於原始運動訊息和原始運動訊息的排序,可以參考上文的描述,此處將不作贅述。
在這種實施方式下,解碼器始終先填入原始運動訊息,在原始運動訊息填入的數量小於預設數量的情況下,再考慮填入衍生運動訊息。
在另一些實施方式中,解碼器可以確定N個原始運動訊息中每一個原始運動訊息的單雙向訊息、N個原始運動訊息的排序優先順序、N個衍生運動訊息中每一個衍生運動訊息的單雙向訊息、N個衍生運動訊息的排序優先順序中的至少一種訊息,基於至少一種訊息,對N個運動訊息進行排序。
在這種實施方式下,解碼器可以根據至少一種訊息對N個運動訊息進行排序,從而得到的新的運動訊息候選清單能夠在單向訊息靠前、預設的排序方式以及衍生訊息的排序方式之間做出一個均衡,從而使得排序更符合實際情況。
此處描述解碼器基於原始運動訊息確定衍生運動訊息的方式:
在本申請是實施例中,基於原始運動訊息確定衍生運動訊息的方式大致可以分為兩種方式,第一種方式為對每一原始運動訊息分別進行數學計算,從而得到每一個原始運動訊息對應的衍生運動訊息,第二種方式為對至少兩個相鄰塊的原始運動訊息進行平均或加權平均,從而得到與至少兩個相鄰塊的原始運動訊息對應的衍生運動訊息。
在此描述第一種方式的實現方式,即透過對逐個原始運動訊息進行計算的方式,其中:
衍生運動訊息的預測方向與原始運動訊息的預測方向相同。其中,預測方向可以是單向預測或雙向預測。
衍生運動訊息的參考幀訊息與原始運動訊息的參考幀訊息相同。
在實施過程中,解碼器可以基於原始運動訊息的運動向量,確定衍生運動訊息的運動向量。
運動向量訊息包括第一軸分量訊息和第二軸分量訊息。其中,第一軸為x軸或y軸,第二軸為y軸或x軸,第一軸與第二軸不同。例如,第一軸為x軸,則第二軸為y軸,第一軸為y軸,則第二軸為x軸。
根據原始運動訊息的運動向量訊息確定衍生運動的運動向量訊息的方式可以為:基於原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息和第二軸分量訊息,將每一衍生運動訊息的第一軸分量訊息和第二軸分量訊息,作為每一衍生運動訊息的運動向量訊息;M為大於或等於1的整數。
一個原始運動訊息可以生成一個或者至少兩個衍生運動訊息。例如,一個原始運動訊息可以生成一個、兩個、四個衍生運動訊息等。
在一種實施的過程中,原始運動訊息的運動向量訊息中的x軸分量訊息的正負號,與M個衍生運動訊息中每一衍生運動訊息的x軸分量訊息的正負號相同。原始運動訊息的運動向量訊息中的y軸分量訊息的正負號,與M個衍生運動訊息中每一衍生運動訊息的y軸分量訊息的正負號相同。
在實施過程中,衍生運動訊息的運動向量訊息的的確定可以包括以下大致兩種方式,第一種方式為透過加法獲取,另一種方式為透過縮放獲取。
透過加法計算的方式以下兩種方式,第一種方式為對原始運動訊息中的一個軸進行加法計算,得到衍生運動訊息,且原始訊息的另一個軸的運動訊息,作為衍生運動訊息的另一個軸的運動訊息。第二種方式為對原始運動訊息中的兩個軸均進行加法計算。
第一種方式:基於原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息和第二軸分量訊息,可以包括:將原始運動訊息中的第一軸分量訊息加上M個第三值,得到M個第一軸相加結果,基於M個第一軸相加結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息;將原始運動訊息的第二軸分量訊息,作為M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息。
第二種方式:基於原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息和第二軸分量訊息,可以包括:將原始運動訊息中的第一軸分量訊息加上M個第三值,得到M個第一軸相加結果,基於M個第一軸相加結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息;將原始運動訊息中的第二軸分量訊息加上M個第三值,得到M個第二軸相加結果,基於M個第二軸相加結果中的每一結果,確定每一衍生運動訊息的第二軸分量訊息。
在一種實施方式中,基於M個第一軸相加結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息,可以包括:將M個第一軸相加結果中的每一結果,作為每一衍生運動訊息的第一軸分量訊息。
透過縮放計算的方式以下兩種方式,第一種方式為對原始運動訊息中的一個軸進行縮放計算,得到衍生運動訊息,且原始訊息的另一個軸的運動訊息,作為衍生運動訊息的另一個軸的運動訊息。第二種方式為對原始運動訊息中的兩個軸均進行縮放計算。
第一種方式:基於原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息和第二軸分量訊息,可以包括:基於對原始運動訊息的第一軸分量訊息進行縮放的結果,確定M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息;將原始運動訊息的第二軸分量訊息,作為M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息。
第二種方式:基於原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息和第二軸分量訊息,可以包括:基於對原始運動訊息的第一軸分量訊息進行縮放的結果,確定M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;基於對原始運動訊息的第二軸分量訊息進行縮放的結果,確定M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息。
在本申請實施例中,縮放計算為對原始運動訊息中的第一軸和/或第二軸進行縮放,進行縮放可以是進行放大或縮小,一種實施方式中,縮放計算為對第一軸和/或第二軸進行放大或縮小,而直接得到衍生運動訊息的運動向量;另一種實施方式中,縮放計算為基於對第一軸和/或第二軸進行放大或縮小的結果,確定衍生運動訊息的運動向量,例如,在對第一軸和/或第二軸進行放大或縮小,還會進行其它相關計算,從而得到衍生運動訊息的運動向量。
本領域能夠理解地是,縮放計算和加法計算是不同類別的計算,不同的計算方式所產生的衍生運動訊息不同,從而得到的衍生運動訊息的相關性也是不同的,測試證明,採用縮放計算得到的相關性較高。
以下對縮放計算的實施方式作出說明,應理解,本申請實施例雖然以第一軸為例作出了相關性的描述,但是本領域應該理解,由於第一軸為x軸或y軸,因此,透過對第一軸的描述,可以輕易知道本申請實施例中對x軸縮放和對y軸縮放的流程。
縮放計算可以包括乘法的計算或除法的計算,乘法的計算和除法的計算都是縮放計算,以下對此作出說明:
在一些實施方式中,基於對原始運動訊息的第一軸分量訊息進行縮放的結果,確定M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息,包括:將原始運動訊息的第一軸分量訊息乘以M個第一值,得到M個第一結果,基於M個第一結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息。
在另一些實施方式中,基於對原始運動訊息的第一軸分量訊息進行縮放的結果,確定M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息,包括:將原始運動訊息的第一軸分量訊息除以M個第二值,得到M個第一除數,基於M個第一除數中的每一除數,確定每一衍生運動訊息的第一軸分量訊息。
在一些實施方式中,基於M個第一結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息,包括:將M個第一結果中的每一結果,作為每一衍生運動訊息的第一軸分量訊息。
在另一些實施方式中,基於M個第一結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息,包括:確定與M個第一結果一一對應的M個第三值,將M個第一結果與M個第三值一一相加,得到M個第二結果,基於M個第二結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息。
在一些實施方式中,基於M個第二結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息,包括:將M個第二結果中的每一結果,作為每一衍生運動訊息的第一軸分量訊息。
在另一些實施方式中,將M個第二結果中的每一結果右移特定位數,得到M個第三結果,基於M個第三結果中的每一結果,確定每一衍生運動訊息的第一軸分量訊息。
其中,第三值為一左移目標位得到,目標位為特定位元數減一。
在一些實施方式中,原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第一閾值;M個第一值包括第一特定值和第二特定值,第一特定值大於0且小於1,第二特定值大於1且小於2,第一特定值與第二特定值之和為2。
在一些實施方式中,方法還包括:在原始運動訊息的第一軸分量訊息的絕對值,小於或等於第二閾值的情況下,確定第一特定值為第一係數;在原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第二閾值且小於或等於第三閾值的情況下,確定第一特定值為第二係數;在原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第三閾值的情況下,確定第一特定值為第三係數;其中,第一係數小於第二係數,第二係數小於第三係數。
在一種實施方式中,第二閾值為64,第一係數為0.75,第三閾值為128,第二係數為0.875,第三係數為0.9375。本領域能夠理解的是,這些值還可以基於實際情況具有其它的取值,本申請實施例對此不作限制。
在一些實施方式中,方法還包括:在原始運動訊息的第一軸分量訊息的絕對值,小於或等於第一閾值,且原始運動訊息的運動向量訊息中的第一軸分量訊息為正數的情況下,將第一目標值作為衍生運動訊息的第一軸分量訊息;在原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,小於或等於第一閾值,且原始運動訊息的運動向量訊息中的第一軸分量訊息為負數的情況下,將負的第一目標值作為衍生運動訊息的第一軸分量訊息。
在一種實施方式中,第一目標值為4~10,例如,第一目標值為4、6、8、10。在本申請實施方式中,第一目標值為8。
第一閾值可以為大於0的數,且第一閾值與0較為接近,例如,第一閾值可以為1、2、或3等,大於第一閾值的數,可以理解為距0較遠的數。
在一些實施方式中,M個第一除數包括第一組除數,和/或,第二組除數,和/或,第三組除數;
第一組除數中每一除數大於最大閾值;
第二組除數中每一除數大於或等於最小閾值,且小於或等於最大閾值;
第三組除數中每一除數小於最小閾值;
基於M個第一除數中的每一除數,確定每一衍生運動訊息的第一軸分量訊息,包括以下至少之一:
將最大閾值,作為M個衍生運動訊息中,與第一組除數對應的每一衍生運動訊息的第一軸分量訊息;
將第二組除數中每一除數,作為M個衍生運動訊息中,與第二組除數對應的每一衍生運動訊息的第一軸分量訊息;
將最小閾值,作為M個衍生運動訊息中,與第三組除數對應的每一衍生運動訊息的第一軸分量訊息。
在另一些實施方式中,基於M個第一除數中的每一除數,確定每一衍生運動訊息的第一軸分量訊息,包括:基於M個第一除數中的每一除數,採用特定函數進行計算,確定每一衍生運動訊息的第一軸分量訊息,其中,特定函數為CLIP函數,CLIP函數中的min可以對應最小閾值,CLIP函數中的max可以對應最大閾值。
在本申請實施例中所出現的第一值、第二值、第三值、第四值、第一特定值或第二特定值等等,可以為整數或小數(可稱為浮點數),也可以為整數或負數,本申請實施例對此不作限定。
第一特定值可以是:0.5,0.75,0.8,0.9,1.1,1.2,1.25,1.5中的一種。
在一種實施方式中,右移的位數可以是固定設置的。
在另一種實施方式中,第一值、第三值以及右移的位數中的至少兩者可以具有對應關係。
在一種是實施方式中,第三值可以是基於右移的位數確定的,例如,第三值為數位一左移目標位得到,目標位可以是右移的位數減一位。用數學公式表達為value = 1 <<(shift-1),shift為右移的位數,value為第三值。又例如,value為1 <<(shift-1)的其他值,此處不做限制。
在一些實施方式中,在原始運動訊息為雙向原始運動訊息的情況下,解碼器還可以執行以下步驟:
將原始運動訊息拆分為第一個單向原始運動訊息和第二個單向原始運動訊息;將第一值,與第一個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為第一個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;將第四值,與第二個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為第二個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;其中,第一值和第四值均大於0;其中,第一值與第四值相同,或者,第一值於第四值不同且第一值與第四值之和為2。
在此描述第二種方式的實現方式,即透過對至少兩個原始運動訊息進行計算的方式,其中:
N個運動訊息可以包括:當前塊在空域上的至少兩個相鄰塊的原始運動訊息;至少兩個相鄰塊相鄰,或者,至少兩個相鄰塊在當前塊的左下角或右上角或左上角。
解碼器基於原始運動訊息確定衍生運動訊息,可以包括:解碼器可以從至少兩個相鄰塊中確定第二目標塊,將第二目標塊所在的幀作為第二特定幀;然後可以將至少兩個相鄰塊中除第二目標塊外的相鄰塊的原始運動訊息中的運動向量訊息,縮放到第二特定幀,得到至少兩個待平均塊的運動向量訊息;其中,至少兩個待平均塊包括第二目標塊;接著可以對至少兩個待平均塊的運動向量訊息進行平均或加權平均,得到對應的衍生運動訊息的運動向量訊息;最後可以將對應的衍生運動訊息的運動向量訊息,作為至少兩個相鄰塊中每一相鄰塊的衍生運動訊息的運動向量訊息。
其中,衍生運動訊息的預測方向與原始運動訊息的預測方向相同,衍生運動訊息的參考幀訊息為第二特定幀。
圖9為本申請實施例提供的另一種幀間預測方法的流程示意圖,如圖9所示,該方法應用於解碼器,該方法可以包括:
S901、解碼器解析位元流,獲取當前塊的權重匯出模式。
S903、基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式。
其中,當前塊相關的已知運動訊息包括當前塊相關的N個運動訊息;N為大於或等於1的整數。當前塊相關的N個運動訊息包括:當前塊在空域上的至少一個相鄰塊的運動訊息,和/或,當前塊在時域上的至少一個對應塊的運動訊息。N個運動訊息中每一運動訊息包括原始運動訊息。
S905、確定初始運動訊息候選清單。
在一種實施方式中,初始運動訊息候選清單可以是空清單,初始運動訊息候選清單的長度可以為預設數量,從而可以能夠被放入預設數量個運動訊息。
S907、基於排序方式,將至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,至少一個對應塊的原始運動訊息的全部或部分,依序或交錯填入初始運動訊息候選清單中,得到新的運動訊息候選清單。
在一些實施方式中,解碼器可以只考慮將原始運動訊息填入,例如,解碼器可以將4個空域上的原始運動訊息和1個時域上的原始運動訊息依序或交錯填入。
在另一些實施方式中,N個運動訊息中每一運動訊息包括衍生運動訊息,然後會存在將衍生運動訊息填入至初始運動訊息候選清單的場景,在這種情況下,解碼器可以基於排序方式,將至少一個相鄰塊的原始運動訊息中的全部或部分、至少一個對應塊的原始運動訊息的全部或部分、至少一個相鄰塊的衍生運動訊息中的全部或部分、至少一個對應塊的衍生運動訊息的全部或部分中的至少一者,依序或交錯填入初始運動訊息候選清單中。
在本申請實施方式中,在待填入的衍生運動訊息為雙向衍生運動訊息的情況下,將雙向衍生運動訊息拆分為兩個單向衍生運動訊息;將兩個單向衍生運動訊息中的至少一個填入初始運動訊息候選清單中;和/或,在待填入的原始運動訊息為雙向原始運動訊息的情況下,將雙向原始運動訊息拆分為兩個單向原始運動訊息,將兩個單向原始運動訊息中的至少一個填入初始運動訊息候選清單中,或者,將雙向原始運動訊息填入初始運動訊息候選清單中。
需要說明的是,填入至初始運動訊息候選清單中的運動訊息,無論是以什麼樣排列順序填入,在填入至的運動訊息的數量為預設數量個,或者將初始運動訊息候選清單填滿時,就不在向初始運動訊息候選清單填入運動訊息了。
在一些實施方式中,初始運動訊息候選清單可填入預設數量個運動訊息;預設數量個運動訊息中的每一個運動訊息為原始運動訊息或衍生運動訊息;預設數量在2~6。
在一些實施方式中,方法還可以包括:在向初始運動訊息候選清單填入至少一個原始運動訊息之後,確定待填入的衍生運動訊息;將待填入的衍生運動訊息填入至初始運動訊息候選清單。
在另一些實施方式中,方法還可以包括:在向初始運動訊息候選清單填入至少一個原始運動訊息之後,確定待填入的衍生運動訊息;在確定到待填入的衍生運動訊息,不同於與待填入的衍生運動訊息對應的已經填入的原始運動訊息的情況下,將待填入的衍生運動訊息填入至初始運動訊息候選清單。
在又一些實施方式中,方法還可以包括:在向初始運動訊息候選清單填入至少一個原始運動訊息之後,確定待填入的衍生運動訊息;在確定到待填入的衍生運動訊息,不同於已經填入的原始運動訊息的情況下,將待填入的衍生運動訊息填入至初始運動訊息候選清單。
S909、基於新的運動訊息候選清單,確定當前塊的幀間預測值。
在本申請實施例中,提出了一種基於排序方式,構建新的運動訊息候選清單的方法,從而新的運動訊息候選清單的方法能夠根據不同的排序方式靈活構建,從而新的運動訊息候選清單能夠將運動訊息,按照與當前塊的相關性從強到弱的順序排列,因此能夠提高當前塊的解碼效率。
圖10為本申請實施例提供的又一種幀間預測方法的流程示意圖,如圖10所示,該方法應用於解碼器,該方法可以包括:
S1001、解碼器解析位元流,獲取當前塊的權重匯出模式。
S1003、基於解碼器解析的位元流,獲取至少一個相鄰塊的原始運動訊息,和至少一個對應塊的原始運動訊息。
S1005、基於至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,基於至少一個對應塊的原始運動訊息的全部或部分,生成特定數量個衍生運動訊息。
其中,特定數量小於或等於8;特定數量個衍生運動訊息包括:相鄰塊的衍生運動訊息和/或對應塊的衍生運動訊息。
S1007、基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式。
S1009、基於排序方式,構建新的運動訊息候選清單。
在一種實施方式中,解碼器可以基於排序方式,將得到的至少一個相鄰塊的原始運動訊息中的全部或部分、至少一個對應塊的原始運動訊息的全部或部分、以及生成的特定數量個衍生運動訊息填入至初始運動訊息候選清單,從而構建得到新的運動訊息候選清單。
S1011、基於新的運動訊息候選清單,確定當前塊的幀間預測值。
在本申請實施例中,解碼器可以將能夠填入至初始運動訊息候選清單的所有運動訊息都得到,然後基於排序方式,將得到的所有運動訊息依次填入,直到填入的運動訊息的數量為預設數量個。
此處介紹本申請實施例提供的另一種得到新的運動訊息候選清單的方式:
在一些實施方式中,解碼器可以基於解碼器解析的位元流,獲取至少一個相鄰塊的原始運動訊息,和一個對應塊的單向運動訊息或雙向運動訊息;將至少一個相鄰塊的原始運動訊息中的一個單向原始運動訊息,或互不相同的至少兩個單向原始運動訊息,填入至初始運動訊息候選清單;在填入至初始運動訊息候選清單的單向原始運動訊息的第一總數,等於預設數量減一的情況下,將一個對應塊的單向運動訊息或雙向運動訊息繼續填入至初始運動訊息候選清單。
在一些實施方式中,在填入至初始運動訊息候選清單的單向原始運動訊息的第一總數,小於預設數量減一的情況下,依序對至少一個相鄰塊的雙向原始運動訊息進行拆分,得到與雙向原始運動訊息對應的兩個單向原始運動訊息,並依序將與已經填入的單向運動訊息不同的對應的兩個單向原始運動訊息,繼續填入至初始運動訊息候選清單;在填入至初始運動訊息候選清單的原始運動訊息的第二總數,等於預設數量減一的情況下,將一個對應塊的單向運動訊息或雙向運動訊息繼續填入至初始運動訊息候選清單。
在這種實施方式中,僅將相鄰塊的單向運動訊息填入。
在另一實施方式中,在填入至初始運動訊息候選清單的單向原始運動訊息的第一總數,小於預設數量減一的情況下,依序將至少一個相鄰塊的雙向原始運動訊息,繼續填入至初始運動訊息候選清單;在填入至初始運動訊息候選清單的原始運動訊息的第二總數,等於預設數量減一的情況下,將一個對應塊的單向運動訊息或雙向運動訊息繼續填入至初始運動訊息候選清單。
在這種實施方式中,還將相鄰塊的雙向運動訊息填入。
在一些實施方式中,在填入至初始運動訊息候選清單的單向原始運動訊息的第二總數,小於預設數量減一的情況下,獲取填入至初始運動訊息候選清單中的前兩個單向原始運動訊息;基於前兩個單向原始運動訊息,確定對應的四個單向衍生運動訊息;依序將與已經填入的單向運動訊息不同的四個衍生運動訊息,繼續填入至初始運動訊息候選清單;在填入至初始運動訊息候選清單的單向原始運動訊息和單向衍生運動訊息的第三總數,等於預設數量減一的情況下,將一個對應塊的單向運動訊息或雙向運動訊息繼續填入至初始運動訊息候選清單。
在一些實施方式中,在填入至初始運動訊息候選清單的單向原始運動訊息和單向衍生運動訊息的第三總數,小於預設數量減一的情況下,將一個對應塊的單向運動訊息或雙向運動訊息繼續填入至初始運動訊息候選清單;將已經填入的對應塊的單向運動訊息或雙向運動訊息進行複製填入,直到填入的運動訊息的總數為預設數量。
在本申請實施例的得到新的運動訊息候選清單的方式中,解碼器可以寫填寫一部分相關性較高的運動訊息,在填寫完該相關性較高的運動訊息後,如果填寫的運動訊息的數量沒有達到預設數量,解碼器接著可以計算相關性較低的運動訊息,接著將計算得到的相關性較低的運動訊息繼續填入至初始運動訊息候選清單,從而能夠減少解碼器的計算量。
值得注意的是,在本申請實施例中,無論採用何種方式來填寫運動訊息,在填寫的運動訊息的總數為預設數量個時,填寫流程完成,即不再填寫,填寫流程終止,即得到了新的運動訊息候選清單。
圖11為本申請實施例提供的再一種幀間預測方法的流程示意圖,如圖11所示,該方法應用於解碼器,該方法可以包括:
S1101、解析位元流,確定當前塊的預測模式參數。
預測模式參數用於指示使用幾何劃分預測模式GPM或角度加權預測模式AWP確定當前塊的幀間預測值。
S1103、從當前塊的預測模式參數中,確定當前塊的權重匯出模式。
其中,在當前塊的權重匯出模式下,當前塊劃分為第一分區和第二分區。
S1105、基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式。
其中,當前塊相關的已知運動訊息包括當前塊相關的N個運動訊息,當前塊相關的N個運動訊息包括:當前塊在空域上的至少一個相鄰塊的運動訊息,和/或,當前塊在時域上的至少一個對應塊的運動訊息。
圖12為本申請實施例提供的一種當前塊、相鄰塊與對應塊之間的空間位置關係示意圖,如圖12所示,其中:
當前塊E的至少一個相鄰塊可以包括外部左下塊F、內部右外部上塊G、外部右上塊C、內部上外部左塊B、內部左外部上塊A、外部左上塊D中的至少一個。至少一個對應塊包括:與當前塊E的內部的左上角對應的塊H、與當前塊的內部的右下角對應的塊I2、與當前塊的外部的右下角對應的塊I1中的至少一個。
在本申請實施例的圖中未示出的是,本申請實施例還可以提供另一種當前塊、相鄰塊與對應塊之間的位置關係:至少一個相鄰塊包括:內部左外部下塊、內部上外部右塊、外部右上塊、外部左下塊、外部左上塊中的至少一個。至少一個對應塊包括:與當前塊的內部的左上角對應的塊、與當前塊的內部的右下角對應的塊、與當前塊的外部的右下角對應的塊中的至少一個。
應理解的是,當前塊、相鄰塊與對應塊之間的位置關係還可以有其它的關係,本申請對此不作限定。
在一種實施方式中,例如,至少一個相鄰塊的位置可以參照圖12所示的A至F。在另一種實施方式中,至少一個相鄰塊可以包括:內部左外部下塊、內部上外部右塊、外部右上塊、外部左下塊、外部左上塊中的至少一個。在本申請實施方式中,解碼器可以執行將幾何劃分預測模式中的多種權重匯出模式,或者,角度加權預測模式中的多種權重匯出模式進行分組,得到至少兩類權重匯出模式;不同類的權重匯出模式對應不同的排序方式。
在一些實施方式中,第八類權重匯出模式,用於表徵當前塊的權重匯出模式為左上、右下的權重匯出模式;第九類權重匯出模式,用於表徵當前塊的權重匯出模式為上、下的權重匯出模式;第十類權重匯出模式,用於表徵當前塊的權重匯出模式為左下、右上的權重匯出模式;第十一類權重匯出模式,用於表徵當前塊的權重匯出模式為左、右的權重匯出模式。
以圖12為例,對確定已知運動訊息的排序方式進行說明:
在本申請的一些實施方式中,在當前塊的權重匯出模式屬於第八類權重匯出模式的情況下,確定已知運動訊息的排序方式為,當前塊的左上相鄰塊的運動訊息排序靠前的排序方式。
在一種實施過程中,在當前塊的權重匯出模式屬於第八類權重匯出模式的情況下,確定已知運動訊息的排序方式為,當前塊的左上相鄰塊的運動訊息排序、當前塊在時域上的對應塊的運動訊息,依序靠前的排序方式。
能夠理解地,當前塊的左上相鄰塊包括外部左上、內部上外部左相鄰塊以及內部左外部上相鄰塊中的一者或至少兩者。當前塊的其它描述與此類似。
在一種實施過程中,排序方式可以為當前塊的左上塊的運動訊息、當前塊在時域上的對應塊的運動訊息、當前塊的左下塊的運動訊息、當前塊的右上相鄰塊的運動訊息依次排序。
在本申請的另一些實施方式中,在當前塊的權重匯出模式屬於第九類權重匯出模式的情況下,解碼器可以確定已知運動訊息的排序方式為,當前塊的上塊的運動訊息排序靠前的排序方式。
在一種實施過程中,在當前塊的權重匯出模式屬於第九類權重匯出模式的情況下,解碼器可以確定已知運動訊息的排序方式為,當前塊的上塊的運動訊息、當前塊的內部左外部下塊的運動訊息,依序靠前的排序方式。
在實施過程中,當前塊的上塊可以包括當前塊的外部上塊和內部上塊,或者,當前塊的上塊可以包括當前塊的內部上塊,而不包括當前塊的外部上塊。當前塊的其它描述與此類似。
在一種實施過程中,排序方式可以為當前塊的上塊的運動訊息、當前塊的內部左外部下塊的運動訊息、當前塊在時域上的對應塊的運動訊息、當前塊的外部左上塊的運動訊息、當前塊的外部右上塊的運動訊息、當前塊的內部左外部上的運動訊息依次排序。
在本申請的又一些實施方式中,在當前塊的權重匯出模式屬於第十類權重匯出模式的情況下,解碼器可以確定已知運動訊息的排序方式為,當前塊的左下塊的運動訊息排序靠前的排序方式。
在一種實施方式中,在當前塊的權重匯出模式屬於第十類權重匯出模式的情況下,解碼器可以確定已知運動訊息的排序方式為,當前塊的左下塊的運動訊息、當前塊的內部右外部上的運動訊息,依序靠前的排序方式。
在一種實施過程中,排序方式可以為當前塊的內部左外部下塊的運動訊息、當前塊的內部右外部上的運動訊息、當前塊的外部右上的運動訊息、當前塊的內部左外部上的運動訊息、當前塊的內部上外部左的運動訊息、當前塊的外部左上塊的運動訊息、當前塊在時域上的對應塊的運動訊息依次排序。
在本申請的再一些實施方式中,在當前塊的權重匯出模式屬於第十一類權重匯出模式的情況下,解碼器可以確定已知運動訊息的排序方式為,當前塊的左塊的運動訊息排序靠前的排序方式。
在一種實施方式中,在當前塊的權重匯出模式屬於第十一類權重匯出模式的情況下,解碼器可以確定已知運動訊息的排序方式為,當前塊的左塊的運動訊息、當前塊的外部右上塊的運動訊息排序靠前的排序方式。
例如,當前塊的左塊可以包括當前塊的內部左塊和/或當前塊的外部左塊。
在一種實施過程中,排序方式可以為當前塊的內部左外部下塊的運動訊息、當前塊的內部左外部上塊的運動訊息、當前塊的外部右上塊的運動訊息、當前塊在時域上的對應塊的運動訊息、當前塊的外部左上塊的運動訊息、當前塊的內部上外部左塊的運動訊息、當前塊的內部上外部右塊的運動訊息依次排序。
S1107、基於排序方式,構建新的運動訊息候選清單。
S1109、從新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息。
在一種實施方式中,解碼器可以先從解析的位元流中,確定第一分區的索引值和第二分區的索引值;然後基於新的運動訊息候選清單,將第一分區的索引值指示的新的運動訊息候選清單中的運動訊息確定為第一分區的運動訊息;最後基於新的運動訊息候選清單,將第二分區的索引值指示的新的運動訊息候選清單中的運動訊息確定為第二分區的運動訊息。
S1111、基於第一分區的運動訊息確定第一分區的第一預測值,基於第二分區的運動訊息確定第二分區的第二預測值。
在一些實施方式中,在在第一分區的運動訊息為雙向運動訊息的情況下,對第一分區的運動訊息按照雙向預測的方法進行處理,從而確定第一分區的第一預測值;和/或,在第二分區的運動訊息為雙向運動訊息的情況下,對第二分區的運動訊息按照雙向預測的方法進行處理,從而確定第二分區的第二預測值。
其中,雙向預測的方法為不使用雙向光流(Bi-directional Optical Flow,BIO)的方法或解碼端運動向量優化(Decoder-side Motion Vector Refinement,DMVR)的方法。在其它實施例中,雙向預測的方法還可以為使用雙向光流BIO的方法或解碼端運動向量優化DMVR的方法,本申請對此不作限制。
基於解碼器的計算量大小,
S1113、對第一預測值和第二預測值進行加權融合,得到當前塊的幀間預測值。
在本申請實施例中,解碼器可以根據當前塊的不同的權重匯出模式,構建不同的運動訊息的候選清單,從而使得運動訊息的候選清單中的運動訊息的排序方式,能夠與權重匯出模式相匹配,從而新的運動訊息候選清單能夠將運動訊息,按照與當前塊的相關性從強到弱的順序排列,因此能夠提高當前塊的解碼效率。
在一些實施方式中,解碼器可以基於當前塊的權重匯出模式,確定當前塊的尺寸大小、當前塊的形狀以及當前塊的長寬比中的至少一者,基於該至少一者確定當前塊相關的已知運動訊息的排序方式。
例如,在解碼器基於當前塊的權重匯出模式,確定當前塊的長寬比,基於當前塊的長寬比確定當前塊相關的已知運動訊息的排序方式。
其中,在當前塊的長寬比不同的情況下,確定的已知運動訊息的排序方式不同。例如,以圖4c中的11和圖4d中的11進行舉例,圖4c中的11中黑色部分覆蓋到當前塊的右上角,但是圖4d中的11中的黑色部分不僅覆蓋到當前塊的右上角,還覆蓋到當前塊的左上角,因此,解碼器可以將基於圖4c中的11確定的已知運動訊息的排序方式,設置為與將基於圖4c中的11確定的已知運動訊息的排序方式不同的方式。從而能夠提高解碼效率,提高壓縮性能。
在另一些實施例中,解碼器可以不僅可以基於當前塊的權重匯出模式,確定所屬於幾何劃分預測模式中的多種權重匯出模式中的某一分組,或者,確定所屬於角度加權預測模式中的多種權重匯出模式中的某一分組,還可以基於當前塊的權重匯出模式,確定當前塊的尺寸大小、當前塊的形狀以及當前塊的長寬比中的至少一者;基於某一分組和該至少一者,共同確定已知運動訊息的排序方式。
在實施過程中,解碼器可以基於當前塊的權重匯出模式,確定屬於GPM中的四種分組中的某一分組或者屬於AWP中的四種分組中的某一分組,並確定當前塊的長寬比,然後基於權重匯出模式所屬的分組和當前塊的長寬比,確定已知運動訊息的排序方式。
例如,在一些實施方式中,解碼器確定在所述當前塊的權重匯出模式屬於第八類權重匯出模式的情況下,且當前塊的長寬比為1:2時,確定的已知運動訊息的排序方式為第一種排序方式;解碼器確定在所述當前塊的權重匯出模式屬於第八類權重匯出模式的情況下,且當前塊的長寬比為2:1時,確定的已知運動訊息的排序方式為第二種排序方式;解碼器確定在所述當前塊的權重匯出模式屬於第八類權重匯出模式的情況下,且當前塊的長寬比為1:1時,確定的已知運動訊息的排序方式為第三種排序方式;第一種排序方式、第二種排序方式以及第三種排序方式中的任兩個排序方式不同。其中,第三種排序方式為當前塊的左上塊的運動訊息、當前塊在時域上的對應塊的運動訊息、當前塊的左下塊的運動訊息、當前塊的右上相鄰塊的運動訊息依次排序。在另一些實施例中,第一種排序方式、第二種排序方式以及第三種排序方式中可以存在兩個相同的排序方式。在又一些實施例中,第一種排序方式、第二種排序方式以及第三種排序方式中可以均相同。
在一種可行的實施方式中,在所述當前塊的權重匯出模式屬於相同類別的權重匯出模式,但是長寬比不同的情況下,排序方式相同與否可以根據黑色部分的形狀有關,在兩個黑色部分都為三角形時,排序方式可以相同,在一個黑色部分為三角形,另一個黑色部分為梯形時,排序方式不同。
在本申請實施例中,還可以提供一種可能是根據AWP或GPM的模式以及當前塊的形狀確定AWP或GPM的運動訊息候選清單的構建方法,也可以認為同一AWP或GPM的模式下不同的當前塊形狀使用不同的運動訊息候選清單構建方法。舉例,如圖AWP在64x64塊上的56種模式的權重圖、AWP在64x32塊上的56種模式的權重圖、AWP在32x64塊上的56種模式的權重圖所示,模式11在64x64,64x32的塊上的黑色部分只覆蓋到右上角,左上角是白色區域,而在32x64的塊上黑色部分覆蓋到左上角和右上角,因而在64x64,64x32和32x64的塊上模式11的兩個部分的緊密相鄰的位置不盡相同,使用不同的運動訊息候選清單構建方法也會提高壓縮性能。這裡一種可能的方法是當前塊的形狀可以用長寬比來表示,即長寬比為1:1的塊,長寬比為2:1的塊,長寬比為4:1的塊,長寬比為1:2的塊,長寬比為1:4的塊等。
對解碼器來說,確定AWP或GPM的模式和當前塊的形狀後,根據AWP或GPM的模式和當前塊的形狀確定運動訊息候選清單的構建方法。對當前塊只會使用某一種運動訊息候選清單的構建方法,因此並沒有增加計算上的複雜度。
繼續參閱圖12,此處以圖12為例,對本申請實施方式作出說明:
不同的運動訊息候選清單構建方法可能有多個維度的不同。以下一一闡述。
如上圖所示是當前AWP的運動訊息候選清單構建方法,其中F、G、C、A、B和D是同一幀裡當前預測單元E的相鄰預測塊,根據F、G、C、A、B和D匯出的運動訊息叫空域運動訊息,H和I是某一個參考幀裡與當前預測單元E位置有如圖所示關係的塊,根據H和I匯出的運動訊息叫時域運動訊息。當前方法按F->G->C->A->B->D的順序檢查空域運動訊息,首先將F、G、C、A、B和D中的不相同的單向運動訊息加入清單,然後將F、G、C、A、B和D中的雙向運動訊息的每一個單向運動訊息與清單中不相同的加入清單,最後加入H位置的時域運動訊息。空域運動訊息最多添加清單長度減一個,也就是至少保留一個位置給時域運動訊息。
相關的方法是按先空域運動訊息後時域運動訊息的順序添加的。這在把當前塊視為一個整體的預測方法中是有一定道理的,因為空域運動訊息來自於相同幀的相鄰塊,而時域運動訊息來自於不同幀,可以說空域運動訊息的相關性更強一些。但是在AWP和GPM中並不完全適用,AWP或GPM的某些模式中,有一個部分(比如說E的右下角)可能並不跟上述的空間相鄰位置相連,相反,它可能跟I的位置相連,那麼對這個部分來說,空域運動訊息可能比時域運動訊息有更強的相關性。
所以,第一個維度:本發明的某些方法會打破先空域運動訊息後時域運動訊息的順序。某些方法可能使用先時域運動訊息後空域運動訊息的順序,或空域時域運動訊息穿插的順序。
相關技術的AWP的方法中,空域運動訊息的使用順序可以歸納為左(左下)->上(內部右外部上->外部右上)->左上(外部左內部上->內部左外部上->外部左上)。現有merge的方法中,空域運動訊息的使用順序可以歸納為外部左內部下->內部右外部上->外部右外部上->外部左下->外部左上。如果將空域運動訊息設置在右下角的相關位置,那麼認為空域運動訊息是右下。下圖可以大致表示現有方法的順序1->2->3->4的順序,即寬泛的左下->右上->左上->右下。
第二個維度:本發明的某些方法會打破相關位置的順序。即有些方法會使用寬泛的左下->右上->左上->右下的順序,有些方法會使用不同於左下->右上->左上->右下的順序。
這個相關順序的設置跟AWP或GPM的模式有關。如左上右下劃分的模式(如上圖AWP模式中的33,41,49等)使用左上->右下->其他的順序(或右下->左上->其他的順序);如左下右上劃分的模式(如上圖AWP模式中的5,13,21等)使用左下->右上->其他的順序(或右上->左下->其他的順序);如上下劃分的模式(如上圖AWP模式中的3,11,19等)使用上->下的順序(或下->上的順序),上如左上、右上,下如左下、右下;如左右劃分的模式(如上圖AWP模式中的7,15,23等)使用左->右的順序(或右->左的順序),左如左上、左下,右如右上、右下。
更細緻一點地,一種可能的方法是上述順序中所指位置(如寬泛的左上)全部處理完後再進行下一個位置的處理,如左下->右上->其他的順序,先將A,B,D都處理完後,再處理右下。
另一種可能的方法是上述順序中所指位置(如寬泛的左上)處理完部分後就進行下一個位置的處理,之後在下一輪處理時再處理所指位置未處理的部分,如左下->右上->其他的順序,先將A處理完後,處理右下等其他位置,在第二輪再處理B,D。這裡面一種可能的處理方法是,儘量保證清單中某些位置分別給某些指定的相關位置。如左下->右上->其他的順序中,儘量保證清單中第一個位置(index 0)是左下相關的運動訊息,AWP中即為F位置相關的運動訊息,清單中第二個位置(index 1)是右上相關的運動訊息,AWP中即為G,C相關的運動訊息。假如G的運動訊息可以填入清單中第二個位置(index 1),那麼就跳過C處理上述順序中“其他”的位置。假如G的運動訊息不可以填入清單中第二個位置(index 1),那麼嘗試將C的運動訊息填入清單中第二個位置(index 1)。其目的是盡可能使2個運動訊息的索引值小而且後編碼的運動訊息的索引值比先編碼的運動訊息的索引值大。
第三個維度:本發明的某些方法會打破先單向後雙向的處理順序。現有方法中無論位置如何都優先處理單向運動訊息,或者說只有一個預測方向有效的運動訊息。本發明可能優先考慮位置,或者綜合考慮位置和單雙向。
第四個維度:本發明的某些方法會構建雙向運動訊息候選清單。AWP,GPM所構建的都是單向運動訊息候選清單,即清單中每一個運動訊息是單向運動訊息或只有一個預測方向或只有一個參考幀清單的索引有效,另一個參考幀清單的索引無效。本發明的某些方法中,清單的某些運動訊息是雙向運動訊息或有2個預測方向或2個參考幀清單的索引都有效。
如果AWP或GPM的某一個部分選中的是雙向運動訊息,那麼對這個部分的運動補償按雙向預測的方法來處理。由於雙向預測方法中有雙向光流BIO(Bi-directional Optical Flow)、解碼端運動向量優化DMVR(Decoder-side Motion Vector Refinement)等技術,AWP或GPM對某個部分的運動補償按雙向預測的方法處理時,一種可能的方法是預設打開BIO、DMVR等技術。一種可能的方法是預設關閉BIO、DMVR等技術。一種可能的方法是預設打開某個(些)技術同時預設關閉某個(些)技術。
如果運動訊息候選清單允許雙向運動訊息,對時域運動訊息的處理可能有不同的處理方法。由於時域運動訊息,記為MIT,是由一個非當前幀的塊的運動訊息,記為MIA,匯出的,MIA包括最多兩個預測方向,每個有效的預測方向L0或L1都會指向一個參考幀,並有對應的運動向量。而需要把這個運動訊息縮放給當前塊,縮放得到的MIT最多有兩個預測方向,每個有效的預測方向都會指向一個參考幀,而對應的運動向量需要由那個非當前幀與所使用的預測方向的參考幀之間的運動向量縮放到當前塊與所指定的當前預測方向的參考幀之間。縮放前後的被預測的幀不同,參考幀(可能)不同。在時域運動訊息匯出時,可以由MIA的L0的運動向量匯出MIT的L0的運動向量,MIA的L1的運動向量匯出MIT的L1的運動向量,也可以由MIA的L0的運動向量匯出MIT的L0的運動向量,MIA的L0的運動向量匯出MIT的L1的運動向量,也可以由MIA的L1的運動向量匯出MIT的L0的運動向量,MIA的L1的運動向量匯出MIT的L1的運動向量。
在處理時域運動訊息MIT時,一種可能的方法是把它作為一個雙向運動訊息來處理。一種可能的方法是把它的L0的運動訊息和L1的運動訊息分別作為兩個單向運動訊息來處理。對於單向運動訊息先於雙向運動訊息的方法中,空域運動訊息可作為兩個單向運動訊息來處理從而先於雙向運動訊息處理。
第五個維度,本發明可以使用直接可得或透過轉化可得的運動訊息加上這些運動訊息衍生的運動訊息作為候選。衍生的運動訊息的優先順序可能低於直接可得或透過轉化可得的運動訊息。一種可能的方法是所有直接可得或透過轉化可得的運動訊息都處理完後再處理衍生的運動訊息。一種可能的方法是某一個大致的位置(如左上)的所有直接可得或透過轉化可得的運動訊息都處理完後處理該大致位置的衍生的運動訊息。如現在清單中某一個位置需要儘量使用某一個大致位置如左上的運動訊息,但A,B,D的運動訊息都與清單中已有的運動訊息重合,則嘗試A,B,D的衍生的運動訊息。然後再處理其他大致位置的運動訊息。
直接可得的運動訊息包括空域運動訊息,透過轉化可得的運動訊息包括時域運動訊息。
在一些實施方式中,衍生的運動訊息包括上述直接可得或透過轉化可得的運動訊息的運動訊息的縮放的運動訊息,如果上述直接可得或透過縮放可得的運動訊息MIO為單向運動訊息,設上述直接可得或透過縮放可得的運動訊息MIO的有效的LX(X為0或1)的運動向量為(X_LX,Y_LX),則衍生的運動訊息MID的預測方向及參考幀訊息與MIO相同,MID的LX(X為0或1)的運動向量為(X_LX*SCALE,Y_LX*SCALE),SCALE為0.5,0.75,0.8,0.9,1.1,1.2,1.25,1.5等。MID的LX(X為0或1)的運動向量也可能為(X_LX*SCALE,Y_LX)或(X_LX,Y_LX*SCALE)。
在實施過程中,對單向運動訊息MIO,一種可能的方法是產生4個衍生訊息,分別在x,y方向上放大,縮小。其LX的運動訊息分別為(X_LX*SCALE_L,Y_LX), X_LX,Y_LX*SCALE_L), (X_LX*SCALE_S,Y_LX), X_LX,Y_LX*SCALE_S)。其中SCALE_L大於1,SCALE_S小於1,一種可能的方法是SCALE_L加SCALE_S等於2。
如果X_LX或Y_LX的值為0,或絕對值值太小,縮放可能起不到作用,在這種情況下可以將X_LX*SCALE或Y_LX*SCALE直接代替為一個固定的值。如果X_LX或Y_LX的值等於0,將X_LX*SCALE或Y_LX*SCALE替換為8,或-8。或如果X_LX或Y_LX的絕對值小於8,將X_LX*SCALE或Y_LX*SCALE替換為8,或-8,X_LX或Y_LX絕對值不等於0的情況,替換後是8或-8可與原正負號相同。
一種可能的方法是縮放的比例SCALE跟X_LX或Y_LX的值的範圍相關,如果X_LX或Y_LX的值小於等於64,SCALE為0.75(即3/4),如果X_LX或Y_LX的值大於64而小於等於128,SCALE為0.875(即7/8),如果X_LX或Y_LX的值大於128,SCALE為0.9375(即15/16)。
如果上述直接可得或透過縮放可得的運動訊息MIO為雙向運動訊息,對L0的運動向量和L1的運動向量分別進行縮放。設L0的運動向量使用的是SCALE0,L1的運動向量使用的是SCALE1,一種可能的方法是SCALE0等於SCALE1,一種可能的方法是SCALE0不等於SCALE1且SCALE0加SCALE1等於2。
縮放的計算可以寫成X_LX或Y_LX乘以一個小數(浮點數);還可以寫成X_LX或Y_LX乘以一個整數加上一個固定的值,然後將得到的值右移;也可以是X_LX或Y_LX的絕對值乘以一個整數加上一個固定的值,然後將得到的值右移,最後再加上正負號。設右移的位數為shift,上述固定的值為value。則一種可能的方法是value = 1 <<(shift-1),一種可能是value為1 <<(shift-1)的其他值。
在另一些實施方式中,衍生的運動訊息包括上述直接可得或透過轉化可得的運動訊息的運動訊息的偏移的運動訊息,設上述直接可得或透過縮放可得的運動訊息MIO的LX(X為0或1)的運動向量為(X_LX,Y_LX),則衍生的運動訊息MID的預測方向及參考幀訊息與MIO相同,MID的LX(X為0或1)的運動向量為(X_LX+OFFSET,Y_LX+OFFSET),MID的LX(X為0或1)的運動向量也可能為(X_LX+OFFSET,Y_LX)或(X_LX,Y_LX+OFFSET)。OFFSET為2,4,8,16等。或OFFSET為CLIP(MAX,MIN,X_LX/N)或CLIP(MAX,MIN,Y_LX/N),N可能為2,4,8,16等。如果X_LX/N 或Y_LX/N 大於MAX,CLIP的結果為MAX。如果X_LX/N 或Y_LX/N 小於MIN,CLIP的結果為MIN,否則CLIP的結果等於X_LX/N 或Y_LX/N的值。
在又一些實施方式中,衍生的運動訊息包括兩個或多個上述直接可得或透過轉化可得的運動訊息的運動訊息的縮放的運動訊息計算得到的運動訊息。一個選擇兩個或多個上述直接可得或透過轉化可得的運動訊息的運動訊息方法是選擇同一個寬泛的位置的運動訊息,如上圖X中左上的A,B,D的運動訊息。右上的C,G的運動訊息。一種可能的計算方法是把所選的兩個或多個運動訊息縮放到相同的參考幀上再做平均或加權平均。
在一些實施方式中,在構建運動訊息候選清單時可限制產生衍生的運動訊息的次數,從而保證最差情況的複雜度。
一種可能的方法是將衍生的運動訊息加入運動訊息候選清單時不進行查重操作,即不將衍生的運動訊息與運動訊息候選清單中的每一個運動訊息進行比較。一種可能的方法是只需衍生的運動訊息與產生它所使用的運動訊息不相同即可加入運動訊息候選清單。從而保證最差情況的複雜度。
透過這種方式,可以至少部分免去解碼器執行的重複性檢查的步驟,從而降低了解碼器的計算複雜性。
繼續結合參閱圖12,本申請實施例提供兩種解碼端的實施例。
解碼端實施例1:
對當前塊,解碼器解析AWP是否使用的訊息,如果確定使用AWP,解碼器解析AWP的模式和兩個運動訊息的索引。解碼器構造當前塊AWP使用的運動訊息候選清單。具體地如下:
匯出mvAwp0L0,mvAwp0L1,RefIdxAwp0L0,RefIdxAwp0L1,mvAwp1L0,mvAwp1L1,RefIdxAwp1L0和RefIdxAwp1L1的步驟如下:
第一步,F、G、C、A、B和D是當前預測單元E的相鄰預測塊(見圖12),確定F、G、C、A和D的“可用”性:
a)如果F存在且採用幀間預測模式,則F“可用”;否則,F“不可用”。
b)如果G存在且採用幀間預測模式,則G“可用”;否則,G“不可用”。
c)如果C存在且採用幀間預測模式,則C“可用”;否則,C“不可用”。
d)如果A存在且採用幀間預測模式,則A“可用”;否則,A“不可用”。
e)如果B存在且採用幀間預測模式,則B“可用”;否則,B“不可用”。
f)如果D存在且採用幀間預測模式,則D“可用”;否則,D“不可用”。
將按相關技術中提供匯出運動訊息的方法匯出的時域雙向的運動訊息記為T。
第二步,按上述實施例生成衍生的運動訊息方法之一生成不超過8個衍生運動訊息。
第三步,確定相關位置的掃描順序:
a)如果AWP的模式模(mod)8的結果為0或1或7,掃描順序為A->B->D->T->F->G->C。
b)如果AWP的模式模8的結果為2,掃描順序為B->G->F->T->D->C->A。
c)如果AWP的模式模8的結果為3或4或5,掃描順序為F->G->C->A->B->D->T。
d)如果AWP的模式模8的結果為6,掃描順序為F->A->C->T->D->B->G。
第四步,將運動訊息進行排序,首先是按相關位置的掃描順序的單向可用的原始運動訊息,然後是按相關位置的掃描順序的雙向可用的原始運動訊息,然後是按相關位置的掃描順序的單向可用的衍生運動訊息,然後是按相關位置的掃描順序的雙向可用的衍生運動訊息。這裡時域運動訊息及其衍生運動訊息都拆分為指向參考幀清單List0的單向運動訊息以及指向參考幀清單List1的單向運動訊息,作為單向運動訊息處理。
第五步,將排序後的運動訊息加入AwpArray。先進行運動訊息查重操作,若不重複則放入AwpArray,直至長度為5或遍歷結束。
第六步,如果AwpArray的長度小於5,將AwpArray中最後一個運動訊息進行重複填充操作,直至AwpArray長度為5。
第七步,將AwpArray中第AwpCandIdx0+1個運動訊息賦值給mvAwp0L0,mvAwp0L1,RefIdxAwp0L0,RefIdxAwp0L1;將AwpUniArray中第AwpCandIdx1+1個運動訊息賦值給mvAwp1L0,mvAwp1L1,RefIdxAwp1L0,RefIdxAwp1L1。
根據解析到的兩個運動訊息的索引在構建出的運動訊息候選清單中找到兩個運動訊息。如果運動訊息是雙向的,則使用雙向預測的方法得到中間預測塊,其中BIO和DMVR不使用;如果運動訊息是單向的,則使用單向預測的方法得到中間預測塊。根據AWP使用的具體的模式確定兩個中間預測塊在每一個像素位置的權值,並將兩個中間預測塊加權得到當前塊的預測塊。
如果當前模式是跳過模式,則預測塊就是解碼塊,當前塊的解碼結束。如果當前模式不是跳過模式,熵解碼解析量化係數,接著反量化,反變換得到殘差塊,將殘差塊與預測塊相加得到解碼塊。當前塊的解碼結束。
需要注意的是,在本申請實施例中AwpArray的長度(新的運動訊息候選清單的長度)可以為預設數量,例如,長度為1,表示預設數量為1,長度為2,表示預設數量為2等等。
解碼端實施例2:
對當前塊,解碼器解析AWP是否使用的訊息,如果確定使用AWP,解碼器解析AWP的模式和兩個運動訊息的索引。
解碼器構造當前塊AWP使用的運動訊息候選清單。具體地如下:
匯出mvAwp0L0,mvAwp0L1,RefIdxAwp0L0,RefIdxAwp0L1,mvAwp1L0,mvAwp1L1,RefIdxAwp1L0和RefIdxAwp1L1的步驟如下:
第一步,F、G、C、A、B和D是當前預測單元E的相鄰預測塊(見圖12),確定F、G、C、A和D的“可用”性:
a) 如果F存在且採用幀間預測模式,則F“可用”;否則,F“不可用”。
b) 如果G存在且採用幀間預測模式,則G“可用”;否則,G“不可用”。
c) 如果C存在且採用幀間預測模式,則C“可用”;否則,C“不可用”。
d) 如果A存在且採用幀間預測模式,則A“可用”;否則,A“不可用”。
e) 如果B存在且採用幀間預測模式,則B“可用”;否則,B“不可用”。
f) 如果D存在且採用幀間預測模式,則D“可用”;否則,D“不可用”。
第二步,按F、G、C、A和D的順序將單向可用的運動訊息放入單向運動訊息候選清單AwpUniArray,直至AwpUniArray長度為4或遍歷結束。
第三步,如果AwpUniArray的長度小於3,按F、G、C、A、B和D的順序將雙向可用的運動訊息拆分為指向參考幀清單List0的單向運動訊息以及指向參考幀清單List1的單向運動訊息,先進行單向運動訊息查重操作,若不重複則放入AwpUniArray,直至長度為4或遍歷結束。
第四步,將按相關技術中提供匯出運動訊息的方法匯出的時域雙向的運動訊息拆分為指向參考幀清單List0的單向運動訊息以及指向參考幀清單List1的單向運動訊息,先進行單向運動訊息查重操作,若不重複則放入AwpUniArray,直至長度為5或遍歷結束。
第五步,如果AwpUniArray的長度小於5,依次使用AwpUniArray中第0個和第1個單向運動訊息生成衍生的運動訊息。對每一個AwpUniArray中的單向運動訊息MIO,記其有效的預測方向為LX(X為0或1),LX對應的運動向量為(X_LX,Y_LX)。產生4個衍生的運動訊息分別記為MID0,MID1,MID2,MID3。它們的參考幀訊息與MIO的相同。
MID0的LX對應的運動向量為(X_LX_0,Y_LX_0),其中:
X_LX_0 = (abs(X_LX) > 128) ? ((abs(X_LX) * 17 + 8) >> 4) : ((abs(X_LX) > 64) ? ((abs(X_LX) * 9 + 4) >> 3) : ((abs(X_LX) >=8) ? (abs(X_LX) * 5 + 2) >> 2)):8))。
對該運算式的解釋如下:
(1)判斷abs(X_LX) 是否> 128,如果是,確定((abs(X_LX) * 17 + 8) >> 4),即將abs(X_LX) * 17 + 8)右移4位,如果否,執行(2);
(2)判斷(abs(X_LX) 是否> 64),如果是,確定((abs(X_LX) * 9 + 4) >> 3),如果否,執行(3);
(3)((abs(X_LX) 是否>=8),如果是,則(abs(X_LX) * 5 + 2) >> 2)),否則,將8賦予X_LX_0。
X_LX_0 = (X_LX < 0) ? - X_LX_0 : X_LX_0。
該運算式的解釋如下:
判斷X_LX是否小於0,如果小於,將-X_LX_0賦給X_LX_0,如果大於,將X_LX_0賦給X_LX_0。
Y_LX_0 = Y_LX。
MID1的 LX對應的運動向量為(X_LX_1,Y_LX_1),其中:
X_LX_1 = X_LX。
Y_LX_1 = (abs(Y_LX) > 128) ? ((abs(Y_LX) * 17 + 8) >> 4) : ((abs(Y_LX) > 64) ? ((abs(Y_LX) * 9 + 4) >> 3) : ((abs(Y_LX) >=8) ? (abs(X_LX) * 5 + 2) >> 2)):8))。
Y_LX_1 = (Y_LX < 0) ? - Y_LX_1 : Y_LX_1。
MID2的 LX對應的運動向量為(X_LX_2,Y_LX_2),其中:
X_LX_2 = (abs(X_LX) > 128) ? ((abs(X_LX) * 15 + 8) >> 4) : ((abs(X_LX) > 64) ? ((abs(X_LX) * 7 + 4) >> 3) : ((abs(X_LX) >=8) ? (abs(X_LX) * 3 + 2) >> 2)):8))。
X_LX_2 = (X_LX <= 0) ? - X_LX_2 : X_LX_2。
Y_LX_2 = Y_LX。
MID3的 LX對應的運動向量為(X_LX_3,Y_LX_3),其中:
X_LX_3 = X_LX。
Y_LX_3 = (abs(Y_LX) > 128) ? ((abs(Y_LX) * 15 + 8) >> 4) : ((abs(Y_LX) > 64) ? ((abs(Y_LX) * 7 + 4) >> 3) : ((abs(Y_LX) >=8) ? (abs(X_LX) * 3 + 2) >> 2)):8))。
Y_LX_3 = (Y_LX <= 0) ? - Y_LX_3 : Y_LX_3。
如果衍生的運動訊息(MID0或MID1或MID2或MID3)與MIO不相同,將其加入到AwpUniArray中,直至AwpUniArray長度為5或處理結束。
第六步,如果AwpUniArray的長度小於5,將AwpUniArray中最後一個單向運動訊息進行重複填充操作,直至AwpUniArray長度為5。
第七步,將AwpUniArray中第AwpCandIdx0+1個運動訊息賦值給mvAwp0L0,mvAwp0L1,RefIdxAwp0L0,RefIdxAwp0L1;將AwpUniArray中第AwpCandIdx1+1個運動訊息賦值給mvAwp1L0,mvAwp1L1,RefIdxAwp1L0,RefIdxAwp1L1。
根據解析到的兩個運動訊息的索引在構建出的運動訊息候選清單中找到兩個運動訊息。如果運動訊息是雙向的,則使用雙向預測的方法得到中間預測塊,其中BIO和DMVR不使用;如果運動訊息是單向的,則使用單向預測的方法得到中間預測塊。根據AWP使用的具體的模式確定兩個中間預測塊在每一個像素位置的權值,並將兩個中間預測塊加權得到當前塊的預測塊。
如果當前模式是跳過模式,則預測塊就是解碼塊,當前塊的解碼結束。如果當前模式不是跳過模式,熵解碼解析量化係數,接著反量化,反變換得到殘差塊,將殘差塊與預測塊相加得到解碼塊。當前塊的解碼結束。
圖13為本申請另一實施例提供的一種幀間預測方法的流程示意圖,如圖13所示,該方法應用於編碼器,該方法可以包括:
S1301、確定當前塊的權重匯出模式。
S1303、基於當前塊的權重匯出模式,構建新的運動訊息候選清單。
S1305、基於新的運動訊息候選清單,確定當前塊的幀間預測值。
本申請實施例中,由於編碼器構建的新的運動訊息候選清單,是根據當前塊的權重匯出模式,從而編碼器能夠根據不同的權重匯出模式,構建出不同的新的運動訊息候選清單,從而使得運動訊息候選清單的構建符合當前塊的權重匯出模式,從而新的運動訊息候選清單能夠將運動訊息,按照與當前塊的相關性從強到弱的順序排列,進而編碼器容易找到與當前塊相關性較強的運動訊息,因此能夠提高當前塊的編碼效率。
在一些實施方式中,當前塊的權重匯出模式為幾何劃分預測模式中的多種權重匯出模式中的一種,或者,當前塊的權重匯出模式為角度加權預測模式中的多種權重匯出模式中的一種。
在一些實施方式中,當前塊的權重匯出模式的類別不同,構建的新的運動訊息候選清單不同。
在一些實施方式中,基於當前塊的權重匯出模式,構建新的運動訊息候選清單,包括:
基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式;
基於排序方式,構建新的運動訊息候選清單。
在一些實施方式中,當前塊相關的已知運動訊息包括當前塊相關的N個運動訊息;N為大於或等於1的整數;
當前塊相關的N個運動訊息包括:當前塊在空域上的至少一個相鄰塊的運動訊息,和/或,當前塊在時域上的至少一個對應塊的運動訊息。
在一些實施方式中,N個運動訊息中每一運動訊息包括原始運動訊息,原始運動訊息包括運動向量訊息和參考幀訊息。
在一些實施方式中,原始運動訊息為單向原始運動訊息,或雙向原始運動訊息,或對雙向原始運動訊息進行拆分得到的一個或兩個單向原始運動訊息。
在一些實施方式中,基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式,包括以下之一:
在當前塊的權重匯出模式為第一類權重匯出模式的情況下,將至少一個對應塊的運動訊息,排列在至少一個相鄰塊的運動訊息之前;
在當前塊的權重匯出模式為第二類權重匯出模式的情況下,將至少一個對應塊的運動訊息,穿插在至少一個相鄰塊的運動訊息之內;
在當前塊的權重匯出模式為第三類權重匯出模式的情況下,將至少一個對應塊的運動訊息,排列在至少一個相鄰塊的運動訊息之後。
在一些實施方式中,在N大於或等於2的情況下,在N大於或等於2的情況下,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:
所述當前塊相關的已知運動訊息的排序方式為,從排序方式集合中確定的一種排序方式,所述排序方式集合包括:對所述當前塊的左下相關塊的運動訊息、所述當前塊的右上相關塊的運動訊息、所述當前塊的左上相關塊的運動訊息、所述當前塊的右下相關塊的運動訊息進行全排列,得到的多個排序方式;
其中,在所述當前塊的權重匯出模式不同的情況下,從所述排序方式集合中確定的排序方式不同;
其中,所述當前塊的左下相關塊的運動訊息、所述當前塊的右上相關塊的運動訊息、所述當前塊的左上相關塊的運動訊息、所述當前塊的右下相關塊的運動訊息中的任一者為:所述當前塊在空域上的運動訊息或所述當前塊在時域上的運動訊息。
在一些實施方式中,當前塊的左下相鄰塊的運動訊息包括:當前塊的左下的所有塊或部分塊的運動訊息;
當前塊的右上相鄰塊的運動訊息包括:當前塊的右上的所有塊或部分塊的運動訊息;
當前塊的左上相鄰塊的運動訊息包括:當前塊的左上的所有塊或部分塊的運動訊息;
當前塊在時域上的右下塊的運動訊息包括:在當前塊的外部的時域上的塊的運動訊息,或者,在當前塊的內部的時域上的塊的運動訊息。
在一些實施方式中,在N大於或等於2的情況下,基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式,包括以下之一:
在當前塊的權重匯出模式為第四類權重匯出模式的情況下,將N個運動訊息中的單向原始運動訊息的全部或部分,排列在對N個運動訊息中的雙向運動訊息進行拆分,得到一個或兩個單向原始運動訊息的全部或部分之前;
在當前塊的權重匯出模式為第五類權重匯出模式的情況下,將N個運動訊息中的單向原始運動訊息的全部或部分,排列在N個運動訊息中的雙向運動訊息的全部或部分之前;
在當前塊的權重匯出模式為第六類權重匯出模式的情況下,確定N個運動訊息的排序優先順序,基於排序優先順序對N個運動訊息進行排序;
在當前塊的權重匯出模式為第七類權重匯出模式的情況下,確定N個運動訊息中每一個運動訊息的單雙向訊息,和N個運動訊息的排序優先順序,基於每一個運動訊息的單雙向訊息和排序優先順序對N個運動訊息進行排序。
在一些實施方式中,方法還包括:
將除當前幀和對應塊所在幀之外的圖像幀,確定為的第一特定幀;
在第一特定幀上,確定與當前塊對應的第一目標塊的運動訊息;
對第一目標塊的運動訊息進行縮放,得到對應塊的運動訊息;
其中,對第一目標塊的運動訊息進行縮放,得到對應塊的運動訊息,包括以下之一:
對第一目標塊的雙向運動訊息進行縮放,得到對應塊的雙向運動訊息;
對第一目標塊的單向運動訊息進行縮放,得到對應塊的雙向運動訊息。
在一些實施方式中,N個運動訊息中每一運動訊息還包括衍生運動訊息,衍生運動訊息是基於原始運動訊息確定的;
衍生運動訊息包括運動向量訊息和參考幀訊息。
在一些實施方式中,衍生運動訊息為單向衍生運動訊息,或雙向衍生運動訊息,或對雙向衍生運動訊息進行拆分得到的一個或兩個單向衍生運動訊息;
單向衍生運動訊息是基於單向原始運動訊息或雙向運動訊息確定的,雙向衍生運動訊息是基於單向原始運動訊息或雙向運動訊息確定的。
在一些實施方式中,在N大於或等於2的情況下,確定N個運動訊息的排序方式,包括以下之一:
將N個原始運動訊息中的全部或部分,排列在N個衍生運動訊息中的全部或部分之前;
確定N個原始運動訊息中每一個原始運動訊息的單雙向訊息、N個原始運動訊息的排序優先順序、N個衍生運動訊息中每一個衍生運動訊息的單雙向訊息、N個衍生運動訊息的排序優先順序中的至少一種訊息,基於至少一種訊息,對N個運動訊息進行排序。
在一些實施方式中,衍生運動訊息的預測方向與原始運動訊息的預測方向相同;
衍生運動訊息的參考幀訊息與原始運動訊息的參考幀訊息相同。
在一些實施方式中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息;所述方法還包括:
基於所述原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個所述衍生運動訊息中每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,將所述每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,作為所述每一所述衍生運動訊息的運動向量訊息;M為大於或等於1的整數;
其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
在一些實施方式中,所述基於所述原始運動訊息中的第一軸分量訊息和第二軸分量訊息,確定M個所述衍生運動訊息中每一所述衍生運動訊息的第一軸分量訊息和第二軸分量訊息,包括以下之一:
基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;將所述原始運動訊息的第二軸分量訊息,作為所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息;
基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;基於對所述原始運動訊息的第二軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息。
在一些實施方式中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述原始運動訊息的第一軸分量訊息乘以M個第一值,得到M個第一結果,基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息;
將所述原始運動訊息的第一軸分量訊息除以M個第二值,得到M個第一除數,基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息。
在一些實施方式中,所述基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述M個第一結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;
確定與所述M個第一結果一一對應的M個第三值,將所述M個第一結果與M個第三值一一相加,得到M個第二結果,基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
在一些實施方式中,所述基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述M個第二結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;
將所述M個第二結果中的每一結果右移特定位數,得到M個第三結果,基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息;
其中,所述第三值為一左移目標位得到,所述目標位為所述特定位數減一。
在一些實施方式中,所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第一閾值;
所述M個第一值包括第一特定值和第二特定值,所述第一特定值大於0且小於1,所述第二特定值大於1且小於2,所述第一特定值與所述第二特定值之和為2。
在一些實施方式中,所述方法還包括:
在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於第二閾值的情況下,確定所述第一特定值為第一係數;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第二閾值且小於或等於第三閾值的情況下,確定所述第一特定值為第二係數;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第三閾值的情況下,確定所述第一特定值為第三係數;
其中,所述第一係數小於所述第二係數,所述第二係數小於所述第三係數。
在一些實施方式中,所述方法還包括:
在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於所述第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為正數的情況下,將第一目標值作為所述衍生運動訊息的第一軸分量訊息;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,小於或等於第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為負數的情況下,將負的所述第一目標值作為所述衍生運動訊息的第一軸分量訊息。
在一些實施方式中,所述M個第一除數包括第一組除數,和/或,第二組除數,和/或,第三組除數;
所述第一組除數中每一除數大於最大閾值;
所述第二組除數中每一除數大於或等於最小閾值,且小於或等於所述最大閾值;
所述第三組除數中每一除數小於最小閾值;
所述基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下至少之一:
將所述最大閾值,作為所述M個衍生運動訊息中,與所述第一組除數對應的每一衍生運動訊息的第一軸分量訊息;
將所述第二組除數中每一除數,作為所述M個衍生運動訊息中,與所述第二組除數對應的每一衍生運動訊息的第一軸分量訊息;
將所述最小閾值,作為所述M個衍生運動訊息中,與所述第三組除數對應的每一衍生運動訊息的第一軸分量訊息。
在一些實施方式中,在所述原始運動訊息為雙向原始運動訊息的情況下,所述方法還包括:
將所述原始運動訊息拆分為第一個單向原始運動訊息和第二個單向原始運動訊息;
將第一值,與所述第一個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為所述第一個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;
將第四值,與所述第二個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為第二個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;
其中,所述第一值和所述第四值均大於0;
其中,所述第一值與所述第四值相同,或者,所述第一值於所述第四值不同且所述第一值與所述第四值之和為2。
在一些實施方式中,N個運動訊息包括:當前塊在空域上的至少兩個相鄰塊的原始運動訊息;至少兩個相鄰塊相鄰,或者,至少兩個相鄰塊在當前塊的左下角或右上角或左上角;
基於原始運動訊息確定衍生運動訊息,包括:
從至少兩個相鄰塊中確定第二目標塊,將第二目標塊所在的幀作為第二特定幀;
將至少兩個相鄰塊中除第二目標塊外的相鄰塊的原始運動訊息中的運動向量訊息,縮放到第二特定幀,得到至少兩個待平均塊的運動向量訊息;至少兩個待平均塊包括第二目標塊;
對至少兩個待平均塊的運動向量訊息進行平均或加權平均,得到對應的衍生運動訊息的運動向量訊息;
將對應的衍生運動訊息的運動向量訊息,作為至少兩個相鄰塊中每一相鄰塊的衍生運動訊息的運動向量訊息;
其中,衍生運動訊息的預測方向與原始運動訊息的預測方向相同,衍生運動訊息的參考幀訊息為第二特定幀。
在一些實施方式中,N個運動訊息中每一運動訊息包括原始運動訊息;
基於排序方式,構建新的運動訊息候選清單,包括:
確定初始運動訊息候選清單;
基於排序方式,將至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,至少一個對應塊的原始運動訊息的全部或部分,依序或交錯填入初始運動訊息候選清單中,得到新的運動訊息候選清單。
在一些實施方式中,N個運動訊息中每一運動訊息包括衍生運動訊息;
基於排序方式,將至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,至少一個對應塊的原始運動訊息的全部或部分,依序或交錯填入初始運動訊息候選清單中,得到新的運動訊息候選清單,包括:
基於排序方式,將至少一個相鄰塊的原始運動訊息中的全部或部分、至少一個對應塊的原始運動訊息的全部或部分、至少一個相鄰塊的衍生運動訊息中的全部或部分、至少一個對應塊的衍生運動訊息的全部或部分中的至少一者,依序或交錯填入初始運動訊息候選清單中。
在一些實施方式中,初始運動訊息候選清單可填入預設數量個運動訊息;預設數量個運動訊息中的每一個運動訊息為原始運動訊息或衍生運動訊息;預設數量在2~6。
在一些實施方式中,方法還包括:
在向初始運動訊息候選清單填入至少一個原始運動訊息之後,確定待填入的衍生運動訊息;
將待填入的衍生運動訊息填入至初始運動訊息候選清單;
或者,在確定到待填入的衍生運動訊息,不同於與待填入的衍生運動訊息對應的已經填入的原始運動訊息的情況下,將待填入的衍生運動訊息填入至初始運動訊息候選清單;
或者,在確定到待填入的衍生運動訊息,不同於已經填入的原始運動訊息的情況下,將待填入的衍生運動訊息填入至初始運動訊息候選清單。
在一些實施方式中,基於當前塊的權重匯出模式,確定當前塊相關的已知運動訊息的排序方式之前,還包括:
獲取至少一個相鄰塊的原始運動訊息,和至少一個對應塊的原始運動訊息;
基於至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,基於至少一個對應塊的原始運動訊息的全部或部分,生成特定數量個衍生運動訊息;
其中,特定數量小於或等於8;特定數量個衍生運動訊息包括:相鄰塊的衍生運動訊息和/或對應塊的衍生運動訊息。
在一些實施方式中,方法還包括:
獲取至少一個相鄰塊的原始運動訊息,和一個對應塊的單向運動訊息或雙向運動訊息;
將至少一個相鄰塊的原始運動訊息中的一個單向原始運動訊息,或互不相同的至少兩個單向原始運動訊息,填入至初始運動訊息候選清單;
在填入至初始運動訊息候選清單的單向原始運動訊息的第一總數,等於預設數量減一的情況下,將一個對應塊的單向運動訊息或雙向運動訊息繼續填入至初始運動訊息候選清單。
在一些實施方式中,在填入至初始運動訊息候選清單的單向原始運動訊息的第一總數,小於預設數量減一的情況下,方法還包括:
依序對至少一個相鄰塊的雙向原始運動訊息進行拆分,得到與雙向原始運動訊息對應的兩個單向原始運動訊息,並依序將與已經填入的單向運動訊息不同的對應的兩個單向原始運動訊息,繼續填入至初始運動訊息候選清單;或者,依序將至少一個相鄰塊的雙向原始運動訊息,繼續填入至初始運動訊息候選清單;
在填入至初始運動訊息候選清單的原始運動訊息的第二總數,等於預設數量減一的情況下,將一個對應塊的單向運動訊息或雙向運動訊息繼續填入至初始運動訊息候選清單。
在一些實施方式中,方法還包括:
在填入至初始運動訊息候選清單的單向原始運動訊息的第二總數,小於預設數量減一的情況下,獲取填入至初始運動訊息候選清單中的前兩個單向原始運動訊息;
基於前兩個單向原始運動訊息,確定對應的四個單向衍生運動訊息;
依序將與已經填入的單向運動訊息不同的四個衍生運動訊息,繼續填入至初始運動訊息候選清單;
在填入至初始運動訊息候選清單的單向原始運動訊息和單向衍生運動訊息的第三總數,等於預設數量減一的情況下,將一個對應塊的單向運動訊息或雙向運動訊息繼續填入至初始運動訊息候選清單。
在一些實施方式中,在待填入的衍生運動訊息為雙向衍生運動訊息的情況下,將雙向衍生運動訊息拆分為兩個單向衍生運動訊息;將兩個單向衍生運動訊息中的至少一個填入初始運動訊息候選清單中;
和/或,在待填入的原始運動訊息為雙向原始運動訊息的情況下,將雙向原始運動訊息拆分為兩個單向原始運動訊息,將兩個單向原始運動訊息中的至少一個填入初始運動訊息候選清單中,或者,將雙向原始運動訊息填入初始運動訊息候選清單中。
在一些實施方式中,方法還包括:
將幾何劃分預測模式中的多種權重匯出模式,或者,角度加權預測模式中的多種權重匯出模式進行分組,得到至少兩類權重匯出模式;不同類的權重匯出模式對應不同的排序方式。
在一些實施方式中,至少兩組劃分模式集合,包括:
第八類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左上、右下的權重匯出模式;
第九類權重匯出模式,用於表徵所述當前塊的權重匯出模式為上、下的權重匯出模式;
第十類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左下、右上的權重匯出模式;
第十一類權重匯出模式,用於表徵所述當前塊的權重匯出模式為左、右的權重匯出模式。
在一些實施方式中,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式,包括以下之一:
在所述當前塊的權重匯出模式屬於第八類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左上相鄰塊的運動訊息排序靠前的排序方式;
在所述當前塊的權重匯出模式屬於第九類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的上塊的運動訊息排序靠前的排序方式;
在所述當前塊的權重匯出模式屬於第十類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左下相鄰塊的運動訊息排序靠前的排序方式;
在所述當前塊的權重匯出模式屬於第十一類權重匯出模式的情況下,確定所述已知運動訊息的排序方式為,所述當前塊的左塊的運動訊息排序靠前的排序方式。
在一些實施方式中,至少一個相鄰塊包括:外部左下塊、內部右外部上塊、外部右上塊、內部上外部左塊、內部左外部上塊、外部左上塊中的至少一個,或者,至少一個相鄰塊包括:內部左外部下塊、內部上外部右塊、外部右上塊、外部左下塊、外部左上塊中的至少一個;
至少一個對應塊包括:與當前塊的內部的左上角對應的塊、與當前塊的內部的右下角對應的塊、與當前塊的外部的右下角對應的塊中的至少一個。
在一些實施方式中,在當前塊的權重匯出模式下,當前塊劃分為第一分區和第二分區;
基於新的運動訊息候選清單,確定當前塊的幀間預測值,包括:
從新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息;
基於第一分區的運動訊息確定第一分區的第一預測值,基於第二分區的運動訊息確定第二分區的第二預測值;
對第一預測值和第二預測值進行加權融合,得到當前塊的幀間預測值。
在一些實施方式中,在第一分區的運動訊息為雙向運動訊息的情況下,對第一分區的運動訊息按照雙向預測的方法進行處理;
和/或,在第二分區的運動訊息為雙向運動訊息的情況下,對第二分區的運動訊息按照雙向預測的方法進行處理。
在一些實施方式中,雙向預測的方法為不使用雙向光流的方法或解碼端運動向量優化的方法。
在一些實施方式中,從新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息,包括:
確定第一分區的索引值和第二分區的索引值;
基於新的運動訊息候選清單,將第一分區的索引值指示的新的運動訊息候選清單中的運動訊息確定為第一分區的運動訊息;
基於新的運動訊息候選清單,將第二分區的索引值指示的新的運動訊息候選清單中的運動訊息確定為第二分區的運動訊息。
在一些實施方式中,確定第一分區的索引值和第二分區的索引值,包括:
利用多種預測模式對當前塊進行預編碼處理,獲得每一種預測模式對應的位元率失真代價值;
從所獲得的多個位元率失真代價值中選擇最小位元率失真代價值,將最小位元率失真代價值對應的兩個運動訊息,分別確定為第一分區的索引值和第二分區的索引值。
在一些實施方式中,獲取當前塊的權重匯出模式,包括:
確定當前塊的預測模式參數;預測模式參數用於指示使用幾何劃分預測模式或角度加權預測模式確定當前塊的幀間預測值;
從當前塊的預測模式參數中,確定當前塊的權重匯出模式。
在一些實施方式中,新的運動訊息候選清單為允許存在雙向運動訊息的候選清單。
此處介紹一個編碼端的實施例,對當前塊,嘗試用AWP進行編碼及其他可用的模式進行編碼,確定是否使用AWP。如果AWP的代價最優則使用AWP。
嘗試AWP時,從AWP的模式中選擇一種模式進行編碼確定AWP的代價。一種可能的方法是嘗試所有AWP的模式選擇其中代價最小的一個作為AWP的代價。
根據AWP的模式構建運動訊息候選清單,構建方法和解碼端實施例所述的構建方法相同。從運動訊息候選清單中選擇兩個運動訊息,一種可能的方法是對所有可能的運動訊息候選的組合,所有可能的AWP的模式確定其代價,取代價最小的兩個運動訊息和AWP的模式的組合為最終確定的單向運動訊息和AWP的模式。
在位元流中寫入AWP是否使用的訊息。如果確定使用AWP,在位元流中寫入AWP的模式和兩個運動訊息的索引。如果當前模式是跳過模式,當前塊的解碼結束。如果當前模式不是跳過模式,在位元流中寫入量化係數。量化係數由當前塊的實際值減去預測塊得到殘差塊,對殘差塊進行變換,量化得到。當前塊的解碼結束。
應需注意的是,在編碼器端未作詳細說明的部分,可以參考對解碼器端作出的說明。
在申請實施例提出自我調整的運動訊息候選清單的構建方法,即根據AWP或GPM的模式確定AWP或GPM的運動訊息候選清單的構建方法的方法,使每一類AWP或GPM的模式,即每一類劃分方法都有與之匹配的運動訊息候選清單,從而提高編碼效率,而對解碼器並沒有增加額外的計算複雜度,因為使用AWP或GPM的塊只需要構建一次AWP或GPM的運動訊息候選清單。
以下介紹另外兩種幀間預測方法,應需說明的是,下述方法中的未提及到的部分,可以參照上述實施例的說明。以及,值得注意的是,下述實施例中的一個或至少兩個實施例,在不衝突的情況下,可以與上述任一個或至少兩個實施例相結合。
圖14為本申請又一實施例提供的一種幀間預測方法的流程示意圖,如圖14所示,該方法應用於解碼器,該方法可以包括:
S1401、解析位元流,獲取當前塊相關的原始運動訊息的運動向量訊息。
在一種實施方式中,解碼器在解析位元流的過程中可以得到的原始運動訊息,由於原始運動訊息包括運動向量訊息和參考幀訊息,從而解碼器可以得到當前塊相關的原始運動訊息的運動向量訊息。
在一種是實施方式中,解碼器可以獲取到當前塊相關的已知運動訊息。當前塊相關的已知運動訊息中包括預設數量個運動訊息,對於當前塊相關的已知運動訊息的說明,可以參照上述實施例,此處不再贅述。
預設數量個運動訊息中每一個運動訊息可以包括原始運動訊息,也可以包括衍生運動訊息,其中,衍生運動訊息是基於原始運動訊息確定的。
基於原始運動訊息確定衍生運動訊息的方式可以參照上述實施例中的說明,也可以參照下述實施例中的說明。
應該理解的是,解碼器透過解析位元流能夠得到的是當前塊相關的原始運動訊息,對於當前塊相關的衍生運動訊息,需要透過原始運動訊息進行計算得到。
S1403、基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數。
對所述原始運動訊息的運動向量訊息進行縮放,可以指的是基於對原始運動訊息進行乘法或除法計算的結果,得到衍生運動訊息的運動向量訊息。
S1405、基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單。
在一種情況下,解碼器透過解析位元流,得到當前塊相關的至少兩個原始運動訊息,而基於每一個原始運動訊息,又可以得到一個或至少兩個衍生運動訊息,而在構建新的運動訊息候選清單,可以用到該至少兩個原始運動訊息中的全部或部分原始運動訊息,以及,可以用到M個衍生運動訊息的運動向量訊息中的全部或部分。用到的原始運動訊息的數量可以大於、小於或等於衍生運動訊息。也就是說,新的運動訊息候選清單可以包括至少兩個原始運動訊息中的全部或部分,以及,M個衍生運動訊息的運動向量訊息中的全部或部分。
在實施的過程中,基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單,可以包括:基於所述衍生運動訊息的運動向量訊息確定衍生運動訊息,基於所述原始運動訊息和所述衍生運動訊息,構建新的運動訊息候選清單。
其中,基於所述衍生運動訊息的運動向量訊息確定衍生運動訊息,可以包括:確定衍生運動訊息的參考幀訊息,基於所述衍生運動訊息的運動向量訊息和衍生運動訊息的參考幀訊息,確定衍生運動訊息。其中,衍生運動訊息的參考幀訊息的確定方式可以參照上述實施例的說明。
能夠理解地是,新的運動訊息候選清單中包括的是至少兩個填入的運動訊息,至少兩個填入的運動訊息中的每一個運動訊息為原始運動訊息或衍生運動訊息。
在基於原始運動訊息和衍生運動訊息,構建新的運動訊息候選清單時,可以將得到的原始運動訊息全部放置在得到的衍生運動訊息之前,或者,原始運動訊息和衍生運動訊息交錯排列。
其中,原始運動訊息和衍生運動訊息的排序方式,可以參照上述相關實施例的描述,此處不作贅述。
S1407、基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
本申請實施例中,由於基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單,從而得到的新的運動訊息候選清單,因此得到的新的運動訊息候選清單可以充分利用到已經獲取的原始運動訊息的運動向量訊息,從而使得運動訊息候選清單的構建符合當前塊的權重匯出模式,從而新的運動訊息候選清單能夠將運動訊息,按照與當前塊的相關性從強到弱的順序排列,因此能夠提高當前塊的解碼效率。
在一種實施方式中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息;
所述基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息,包括以下之一:
基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;將所述原始運動訊息的第二軸分量訊息,作為所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息;
基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;基於對所述原始運動訊息的第二軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息;
其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
在一種實施方式中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述原始運動訊息的第一軸分量訊息乘以M個第一值,得到M個第一結果,基於所述第一軸分量訊息;M個第一結果中的每一結果,確定所述每一衍生運動訊息的
將所述原始運動訊息的第一軸分量訊息除以M個第二值,得到M個第一除數,基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述M個第一結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;
確定與所述M個第一結果一一對應的M個第三值,將所述M個第一結果與M個第三值一一相加,得到M個第二結果,基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述M個第二結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;
將所述M個第二結果中的每一結果右移特定位數,得到M個第三結果,基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述第三值為一左移目標位得到,所述目標位為所述特定位數減一。
在一種實施方式中,所述基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括:
在所述原始運動訊息的第一軸分量訊息為正值的情況下,將所述M個第三結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;
在所述原始運動訊息的第一軸分量訊息為負值的情況下,將所述M個第三結果中的每一結果乘以負一的結果,作為所述每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第一閾值;
所述M個第一值包括第一特定值和第二特定值,所述第一特定值大於0且小於1,所述第二特定值大於1且小於2,所述第一特定值與所述第二特定值之和為2。
在一種實施方式中,所述方法還包括:
在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於第二閾值的情況下,確定所述第一特定值為第一係數;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第二閾值且小於或等於第三閾值的情況下,確定所述第一特定值為第二係數;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第三閾值的情況下,確定所述第一特定值為第三係數;
其中,所述第一係數小於所述第二係數,所述第二係數小於所述第三係數。
在一種實施方式中,所述方法還包括:
在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於所述第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為正數的情況下,將第一目標值作為所述衍生運動訊息的第一軸分量訊息;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,小於或等於第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為負數的情況下,將負的所述第一目標值作為所述衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述M個第一除數包括第一組除數,和/或,第二組除數,和/或,第三組除數;
所述第一組除數中每一除數大於最大閾值;
所述第二組除數中每一除數大於或等於最小閾值,且小於或等於所述最大閾值;
所述第三組除數中每一除數小於最小閾值;
所述基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下至少之一:
將所述最大閾值,作為所述M個衍生運動訊息中,與所述第一組除數對應的每一衍生運動訊息的第一軸分量訊息;
將所述第二組除數中每一除數,作為所述M個衍生運動訊息中,與所述第二組除數對應的每一衍生運動訊息的第一軸分量訊息;
將所述最小閾值,作為所述M個衍生運動訊息中,與所述第三組除數對應的每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述原始運動訊息為單向原始運動訊息,或雙向原始運動訊息,或對雙向原始運動訊息進行拆分得到的一個或兩個單向原始運動訊息;
所述衍生運動訊息為單向衍生運動訊息,或雙向衍生運動訊息,或對雙向衍生運動訊息進行拆分得到的一個或兩個單向衍生運動訊息;
所述單向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的,所述雙向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的。
在一種實施方式中,所述解析位元流,獲取當前塊相關的原始運動訊息的運動向量訊息,包括:
解析位元流,獲取當前塊相關的原始運動訊息的運動向量訊息和所述當前塊的權重匯出模式;
所述基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單,包括:
基於所述當前塊的權重匯出模式、所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述新的運動訊息候選清單。
在一種實施方式中,所述基於所述當前塊的權重匯出模式、所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述新的運動訊息候選清單,包括:
基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式;
基於所述排序方式,所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述新的運動訊息候選清單。
在一種實施方式中,所述基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式之前,還包括:
基於所述解碼器解析的位元流,獲取至少一個相鄰塊的原始運動訊息,和至少一個對應塊的原始運動訊息;
基於所述至少一個相鄰塊的原始運動訊息中的全部或部分,和/或,基於所述至少一個對應塊的原始運動訊息的全部或部分,生成特定數量個衍生運動訊息;
其中,所述特定數量小於或等於8;所述特定數量個衍生運動訊息包括:相鄰塊的衍生運動訊息和/或對應塊的衍生運動訊息。
在一種實施方式中,所述方法還包括:
在填入至所述初始運動訊息候選清單的單向原始運動訊息的第二總數,小於所述預設數量減一的情況下,獲取填入至所述初始運動訊息候選清單中的前兩個單向原始運動訊息;
基於所述前兩個單向原始運動訊息,確定對應的四個單向衍生運動訊息;
依序將與已經填入的單向運動訊息不同的所述四個衍生運動訊息,繼續填入至所述初始運動訊息候選清單;
在填入至所述初始運動訊息候選清單的單向原始運動訊息和單向衍生運動訊息的第三總數,等於所述預設數量減一的情況下,將所述一個對應塊的單向運動訊息或雙向運動訊息繼續填入至所述初始運動訊息候選清單。
在一種實施方式中,在待填入的衍生運動訊息為雙向衍生運動訊息的情況下,將所述雙向衍生運動訊息拆分為兩個單向衍生運動訊息;將所述兩個單向衍生運動訊息中的至少一個填入所述初始運動訊息候選清單中;
和/或,在待填入的原始運動訊息為雙向原始運動訊息的情況下,將所述雙向原始運動訊息拆分為兩個單向原始運動訊息,將所述兩個單向原始運動訊息中的至少一個填入所述初始運動訊息候選清單中,或者,將所述雙向原始運動訊息填入所述初始運動訊息候選清單中。
在一種實施方式中,在所述原始運動訊息為雙向原始運動訊息的情況下,所述方法還包括:
將所述原始運動訊息拆分為第一個單向原始運動訊息和第二個單向原始運動訊息;
將第一值,與所述第一個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為所述第一個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;
將第四值,與所述第二個單向原始運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息相乘的結果,作為第二個單向衍生運動訊息的運動向量訊息中的第一軸分量訊息或第二軸分量訊息;
其中,所述第一值和所述第四值均大於0;
其中,所述第一值與所述第四值相同,或者,所述第一值於所述第四值不同且所述第一值與所述第四值之和為2。
在一種實施方式中,解碼器基於所述排序方式,將所述至少一個相鄰塊的原始運動訊息中的全部或部分、至少一個對應塊的原始運動訊息的全部或部分、所述至少一個相鄰塊的衍生運動訊息中的全部或部分、至少一個對應塊的衍生運動訊息的全部或部分中的至少一者,依序或交錯填入所述初始運動訊息候選清單中。
在一種實施方式中,所述方法還包括:
在向所述初始運動訊息候選清單填入至少一個原始運動訊息之後,確定待填入的衍生運動訊息;
將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單;
或者,在確定到所述待填入的衍生運動訊息,不同於與所述待填入的衍生運動訊息對應的已經填入的原始運動訊息的情況下,將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單;
或者,在確定到所述待填入的衍生運動訊息,不同於已經填入的原始運動訊息的情況下,將所述待填入的衍生運動訊息填入至所述初始運動訊息候選清單。
應理解,在採用對所述原始運動訊息的第一軸/第二軸分量訊息進行縮放的方式,得到衍生運動訊息時,所述衍生運動訊息的預測方向與所述原始運動訊息的預測方向相同;所述衍生運動訊息的參考幀訊息與所述原始運動訊息的參考幀訊息相同。
圖15為本申請再一實施例提供的一種幀間預測方法的流程示意圖,如圖15所示,該方法應用於編碼器,該方法可以包括:
S1501、確定當前塊相關的原始運動訊息的運動向量訊息。
S1503、基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數。
S1505、基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單。
S1507、基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
本申請實施例中,由於基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單,從而得到的新的運動訊息候選清單,因此得到的新的運動訊息候選清單可以充分利用到已經獲取的原始運動訊息的運動向量訊息,從而使得運動訊息候選清單的構建符合當前塊的權重匯出模式,從而新的運動訊息候選清單能夠將運動訊息,按照與當前塊的相關性從強到弱的順序排列,因此能夠提高當前塊的編碼效率。
在一種實施方式中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息;
所述基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息,包括以下之一:
基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;將所述原始運動訊息的第二軸分量訊息,作為所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息;
基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;基於對所述原始運動訊息的第二軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息;
其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
在一種實施方式中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述原始運動訊息的第一軸分量訊息乘以M個第一值,得到M個第一結果,基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息;
將所述原始運動訊息的第一軸分量訊息除以M個第二值,得到M個第一除數,基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述M個第一結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;
確定與所述M個第一結果一一對應的M個第三值,將所述M個第一結果與M個第三值一一相加,得到M個第二結果,基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一:
將所述M個第二結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;
將所述M個第二結果中的每一結果右移特定位數,得到M個第三結果,基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述第三值為一左移目標位得到,所述目標位為所述特定位數減一。
在一種實施方式中,所述基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括:
在所述原始運動訊息的第一軸分量訊息為正值的情況下,將所述M個第三結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息;
在所述原始運動訊息的第一軸分量訊息為負值的情況下,將所述M個第三結果中的每一結果乘以負一的結果,作為所述每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第一閾值;
所述M個第一值包括第一特定值和第二特定值,所述第一特定值大於0且小於1,所述第二特定值大於1且小於2,所述第一特定值與所述第二特定值之和為2。
在一種實施方式中,所述方法還包括:
在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於第二閾值的情況下,確定所述第一特定值為第一係數;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第二閾值且小於或等於第三閾值的情況下,確定所述第一特定值為第二係數;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第三閾值的情況下,確定所述第一特定值為第三係數;
其中,所述第一係數小於所述第二係數,所述第二係數小於所述第三係數。
在一種實施方式中,所述方法還包括:
在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於所述第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為正數的情況下,將第一目標值作為所述衍生運動訊息的第一軸分量訊息;
在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,小於或等於第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為負數的情況下,將負的所述第一目標值作為所述衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述M個第一除數包括第一組除數,和/或,第二組除數,和/或,第三組除數;
所述第一組除數中每一除數大於最大閾值;
所述第二組除數中每一除數大於或等於最小閾值,且小於或等於所述最大閾值;
所述第三組除數中每一除數小於最小閾值;
所述基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下至少之一:
將所述最大閾值,作為所述M個衍生運動訊息中,與所述第一組除數對應的每一衍生運動訊息的第一軸分量訊息;
將所述第二組除數中每一除數,作為所述M個衍生運動訊息中,與所述第二組除數對應的每一衍生運動訊息的第一軸分量訊息;
將所述最小閾值,作為所述M個衍生運動訊息中,與所述第三組除數對應的每一衍生運動訊息的第一軸分量訊息。
在一種實施方式中,所述原始運動訊息為單向原始運動訊息,或雙向原始運動訊息,或對雙向原始運動訊息進行拆分得到的一個或兩個單向原始運動訊息;
所述衍生運動訊息為單向衍生運動訊息,或雙向衍生運動訊息,或對雙向衍生運動訊息進行拆分得到的一個或兩個單向衍生運動訊息;
所述單向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的,所述雙向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的。
在一種實施方式中,所述獲取當前塊相關的原始運動訊息的運動向量訊息,包括:
獲取當前塊相關的原始運動訊息的運動向量訊息和所述當前塊的權重匯出模式;
所述基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單,包括:
基於所述當前塊的權重匯出模式、所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述新的運動訊息候選清單。
在一種實施方式中,所述基於所述當前塊的權重匯出模式、所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述新的運動訊息候選清單,包括:
基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式;
基於所述排序方式,所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述新的運動訊息候選清單。
在一種實施方式中,在所述當前塊的權重匯出模式下,所述當前塊劃分為第一分區和第二分區;
所述基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值,包括:
從所述新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息;
基於所述第一分區的運動訊息確定所述第一分區的第一預測值,基於所述第二分區的運動訊息確定所述第二分區的第二預測值;
對所述第一預測值和所述第二預測值進行加權融合,得到所述當前塊的幀間預測值。
在一種實施方式中,所述從所述新的運動訊息候選清單中,確定第一分區的運動訊息和第二分區的運動訊息,包括:
確定所述第一分區的索引值和所述第二分區的索引值;
基於所述新的運動訊息候選清單,將所述第一分區的索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第一分區的運動訊息;
基於所述新的運動訊息候選清單,將所述第二分區的索引值指示的所述新的運動訊息候選清單中的運動訊息確定為所述第二分區的運動訊息。
在一種實施方式中,所述確定所述第一分區的索引值和所述第二分區的索引值,包括:
利用多種預測模式對所述當前塊進行預編碼處理,獲得每一種預測模式對應的位元率失真代價值;
從所獲得的多個位元率失真代價值中選擇最小位元率失真代價值,將所述最小位元率失真代價值對應的兩個運動訊息,分別確定為所述第一分區的索引值和所述第二分區的索引值。
基於前述的實施例,本申請實施例提供一種解碼器/編碼器,該解碼器/編碼器所包括的各單元、以及各單元所包括的各模組,可以透過解碼器/編碼器中的處理器來實現;當然也可透過具體的邏輯電路實現;在實施的過程中,處理器可以為中央處理器(CPU)、微處理器(MPU)、數位訊號處理器(DSP)或場域可程式閘陣列(FPGA)等。
圖16為本申請實施例提供的一種解碼器的組成結構示意圖,該解碼器1600可以設置在解碼器中,如圖16所示,解碼器1600可以包括:場域可程式
獲取單元1601,用於解析位元流,獲取當前塊的權重匯出模式。
構建單元1602,用於基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單。
預測單元1603,用於基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
圖17為本申請實施例提供的一種編碼器的組成結構示意圖,該編碼器1700可以設置在編碼器中,如圖17所示,編碼器1700可以包括:
模式確定單元1701,用於確定當前塊的權重匯出模式。
構建單元1702,用於基於所述當前塊的權重匯出模式,構建新的運動訊息候選清單。
預測單元1703,用於基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
圖18為本申請實施例提供的另一種解碼器的組成結構示意圖,該解碼器1800可以設置在解碼器中,如圖18所示,解碼器1800可以包括:
獲取單元1801,用於解析位元流,獲取當前塊的權重匯出模式;
衍生運動訊息確定單元1802,用於基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數;
構建單元1803,用於基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單;
預測單元1804,用於基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
圖19為本申請實施例提供的另一種編碼器的組成結構示意圖,該編碼器1900可以設置在解碼器中,如圖19所示,編碼器1900可以包括:
原始運動訊息確定單元1901,用於確定當前塊相關的原始運動訊息的運動向量訊息;
衍生運動訊息確定單元1902,用於基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數;
構建單元1903,用於基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建新的運動訊息候選清單;
預測單元1904,用於基於所述新的運動訊息候選清單,確定所述當前塊的幀間預測值。
需要注意的是,本申請實施例雖然只是給出了解碼器1600、編碼器1700、解碼器1800、編碼器1900的一種組成結構示意,但是本領域技術人員能夠理解地是,解碼器1600、編碼器1700、解碼器1800、編碼器1900中的任一個還可以包括能夠實現上述任一實施例的步驟的其它單元,以及,本申請實施例中已經描述的這些單元,也可以實現上述任一實施例的其它步驟。
以上解碼器/編碼器實施例的描述,與上述方法實施例的描述是類似的,具有同方法實施例相似的有益效果。對於本申請解碼器/編碼器實施例中未披露的技術細節,請參照本申請方法實施例的描述而理解。
需要說明的是,本申請實施例中,如果以軟體功能模組的形式實現上述的幀間預測方法,並作為獨立的產品銷售或使用時,也可以儲存在一個電腦可讀取儲存媒介中。基於這樣的理解,本申請實施例的技術方案本質上或者說對相關技術做出貢獻的部分可以以軟體產品的形式體現出來,該電腦軟體產品儲存在一個儲存媒介中,包括若干指令用以使得一台解碼器/編碼器執行本申請各個實施例所述方法的全部或部分。而前述的儲存媒介包括:隨身碟、行動硬碟、唯讀記憶體(Read Only Memory,ROM)、磁碟或者光碟等各種可以儲存程式碼的媒介。這樣,本申請實施例不限制於任何特定的硬體和軟體結合。
圖20為本申請實施例提供的一種解碼器的硬體實體示意圖,如圖20所示,該解碼器2000的硬體實體包括:處理器2001和記憶體2002,其中,記憶體2002儲存有可在處理器2001上運行的電腦程式,處理器2001執行程式時實現上述任一實施例的解碼器執行的方法中的步驟。
圖21為本申請實施例提供的一種編碼器的硬體實體示意圖,如圖21所示,該編碼器2100的硬體實體包括:處理器2101和記憶體2102,其中,記憶體2102儲存有可在處理器2101上運行的電腦程式,處理器2101執行程式時實現上述任一實施例的編碼器執行的方法中的步驟。
本申請實施例提供一種電腦儲存媒介,電腦儲存媒介儲存有一個或者多個程式,一個或者多個程式可被一個或者多個處理器執行,以實現上述方法中解碼器執行的方法的步驟。
本申請實施例提供一種電腦儲存媒介,電腦儲存媒介儲存有一個或者多個程式,一個或者多個程式可被一個或者多個處理器執行,以實現上述方法中編碼器執行的方法的步驟。
解碼器2000可以與解碼器1600為同一個解碼器,解碼器2000可以與解碼器1800為同一個解碼器,編碼器2100可以與編碼器1700為同一個編碼器,編碼器2100可以與編碼器1900為同一個編碼器。
應理解,本申請實施例的處理器可能是一種積體電路晶片,具有訊號的處理能力。在實現過程中,上述方法實施例的各步驟可以透過處理器中的硬體的集成邏輯電路或者軟體形式的指令完成。上述的處理器可以是通用處理器、數位訊號處理器(Digital Signal Processor,DSP)、專用積體電路(Application Specific Integrated Circuit,ASIC)、場域可程式閘陣列(Field Programmable Gate Array,FPGA)或者其他可程式邏輯器件、離散閘或者電晶體邏輯器件、離散硬體元件。可以實現或者執行本申請實施例中的公開的各方法、步驟及邏輯方塊圖。通用處理器可以是微處理器或者該處理器也可以是任何常規的處理器等。結合本申請實施例所公開的方法的步驟可以直接體現為硬體解碼處理器執行完成,或者用解碼處理器中的硬體及軟體模組組合執行完成。軟體模組可以位於隨機記憶體,快閃記憶體、唯讀記憶體,可程式唯讀記憶體或者電可讀寫可程式記憶體、暫存器等本領域成熟的儲存媒介中。該儲存媒介位於記憶體,處理器讀取記憶體中的訊息,結合其硬體完成上述方法的步驟。
可以理解,本申請實施例中的記憶體可以是揮發性記憶體或非揮發性記憶體,或可包括揮發性和非揮發性記憶體兩者。其中,非揮發性記憶體可以是唯讀記憶體(Read-Only Memory,ROM)、可程式唯讀記憶體(Programmable ROM,PROM)、可擦除可程式唯讀記憶體(Erasable PROM,EPROM)、電可擦除可程式唯讀記憶體(Electrically EPROM,EEPROM)或快閃記憶體。揮發性記憶體可以是隨機存取記憶體(Random Access Memory,RAM),其用作外部快取記憶體。透過示例性但不是限制性說明,許多形式的RAM可用,例如靜態隨機存取記憶體(Static RAM,SRAM)、動態隨機存取記憶體(Dynamic RAM,DRAM)、同步動態隨機存取記憶體(Synchronous DRAM,SDRAM)、雙倍資料速率同步動態隨機存取記憶體(Double Data Rate SDRAM,DDR SDRAM)、增強型同步動態隨機存取記憶體(Enhanced SDRAM,ESDRAM)、同步連接動態隨機存取記憶體(Synclink DRAM,SLDRAM)和直接記憶體匯流排隨機存取記憶體(Direct Rambus RAM,DR RAM)。應注意,本文描述的系統和方法的記憶體旨在包括但不限於這些和任意其它適合類型的記憶體。
應理解,上述記憶體為示例性但不是限制性說明,例如,本申請實施例中的記憶體還可以是靜態隨機存取記憶體(static RAM,SRAM)、動態隨機存取記憶體(dynamic RAM,DRAM)、同步動態隨機存取記憶體(synchronous DRAM,SDRAM)、雙倍資料速率同步動態隨機存取記憶體(double data rate SDRAM,DDR SDRAM)、增強型同步動態隨機存取記憶體(enhanced SDRAM,ESDRAM)、同步連接動態隨機存取記憶體(synclink DRAM,SLDRAM)以及直接記憶體匯流排隨機存取記憶體(Direct Rambus RAM,DR RAM)等等。也就是說,本申請實施例中的記憶體旨在包括但不限於這些和任意其它適合類型的記憶體。
這裡需要指出的是:以上解碼器、解碼器、電腦儲存媒介實施例的描述,與上述方法實施例的描述是類似的,具有同方法實施例相似的有益效果。對於本申請儲存媒介和設備實施例中未披露的技術細節,請參照本申請方法實施例的描述而理解。
應理解,說明書通篇中提到的“一個實施例”或“一實施例”或“本申請實施例”或“前述實施例”意味著與實施例有關的特定特徵、結構或特性包括在本申請的至少一個實施例中。因此,在整個說明書各處出現的“在一個實施例中”或“在一實施例中”未必一定指相同的實施例。此外,這些特定的特徵、結構或特性可以任意適合的方式結合在一個或多個實施例中。應理解,在本申請的各種實施例中,上述各過程的序號的大小並不意味著執行順序的先後,各過程的執行順序應以其功能和內在邏輯確定,而不應對本申請實施例的實施過程構成任何限定。上述本申請實施例序號僅僅為了描述,不代表實施例的優劣。
在未做特殊說明的情況下,解碼器/編碼器執行本申請實施例中的任一步驟,可以是解碼器/編碼器的處理器執行該步驟。除非特殊說明,本申請實施例並不限定解碼器/編碼器執行下述步驟的先後順序。另外,不同實施例中對資料進行處理所採用的方式可以是相同的方法或不同的方法。還需說明的是,本申請實施例中的任一步驟是解碼器/編碼器可以獨立執行的,即解碼器/編碼器執行下述實施例中的任一步驟時,可以不依賴於其它步驟的執行。
在本申請所提供的幾個實施例中,應該理解到,所揭露的解碼器/編碼器和方法,可以透過其它的方式實現。以上所描述的解碼器/編碼器實施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實際實現時可以有另外的劃分方式,如:多個單元或元件可以結合,或可以集成到另一個系統,或一些特徵可以忽略,或不執行。另外,所顯示或討論的各組成部分相互之間的耦合、或直接耦合、或通訊連接可以是透過一些介面,資源設備或單元的間接耦合或通訊連接,可以是電性的、機械的或其它形式的。
本申請所提供的幾個方法實施例中所揭露的方法,在不衝突的情況下可以任意組合,得到新的方法實施例。
本申請所提供的幾個產品實施例中所揭露的特徵,在不衝突的情況下可以任意組合,得到新的產品實施例。
本申請所提供的幾個方法或解碼器/編碼器實施例中所揭露的特徵,在不衝突的情況下可以任意組合,得到新的方法實施例或解碼器/編碼器實施例。
本領域普通技術人員可以理解:實現上述方法實施例的全部或部分步驟可以透過程式指令相關的硬體來完成,前述的程式可以儲存於電腦可讀取儲存媒介中,該程式在執行時,執行包括上述方法實施例的步驟;而前述的儲存媒介包括:行動儲存資源設備、唯讀記憶體(Read Only Memory,ROM)、磁碟或者光碟等各種可以儲存程式碼的媒介。
或者,本申請上述集成的單元如果以軟體功能模組的形式實現並作為獨立的產品銷售或使用時,也可以儲存在一個電腦可讀取儲存媒介中。基於這樣的理解,本申請實施例的技術方案本質上或者說對相關技術做出貢獻的部分可以以軟體產品的形式體現出來,該電腦軟體產品儲存在一個儲存媒介中,包括若干指令用以使得解碼器/編碼器執行本申請各個實施例所述方法的全部或部分。而前述的儲存媒介包括:行動儲存資源設備、ROM、磁碟或者光碟等各種可以儲存程式碼的媒介。
在本申請實施例中,不同實施例中相同步驟和相同內容的說明,可以互相參照。在本申請實施例中,術語“並”不對步驟的先後順序造成影響,例如,解碼器/編碼器執行P,並執行Q,可以是解碼器/編碼器先執行P,再執行Q,或者是解碼器/編碼器先執行Q,再執行P,或者是解碼器/編碼器執行P的同時執行Q。
以上所述,僅為本申請的實施方式,但本申請的保護範圍並不局限於此,任何熟悉本技術領域的技術人員在本申請揭露的技術範圍內,可輕易想到變化或替換,都應涵蓋在本申請的保護範圍之內。因此,本申請的保護範圍應以請求項所述的保護範圍為準。
11:影像編碼系統
110:解碼圖像暫存單元
111:變換單元
112:量化單元
113:模式選擇和編碼控制邏輯單元
114:幀內預測單元
115:幀間預測單元
116:反量化單元
117:反變換單元
118:迴路濾波單元
119:編碼單元
12:影像解碼系統
121:解碼單元
122:反量化單元
123:幀內預測單元
124:運動補償單元
125:迴路濾波單元
126:解碼圖像暫存單元
127:反變換單元
801:當前塊
802:左下方區域
803:左上方區域
804:右上方區域
1600:解碼器
1601:獲取單元
1602:構建單元
1603:預測單元
1700:編碼器
1701:模式確定單元
1702:構建單元
1703:預測單元
1800:解碼器
1801:獲取單元
1802:衍生運動訊息確定單元
1803:構建單元
1804:預測單元
1900:編碼器
1901:原始運動訊息確定單元
1902:衍生運動訊息確定單元
1903:構建單元
1904:預測單元
2000:解碼器
2001:處理器
2002:記憶體
2100:編碼器
2101:處理器
2102:記憶體
A~H、I1、I2:塊
S701~S705:步驟
S901~S909:步驟
S1001~S1011:步驟
S1101~S1113:步驟
S1301~S1305:步驟
S1401~S1407:步驟
S1501~S1507:步驟
圖1為本申請實施例提供的一種影像編碼系統的組成方塊圖示意圖;
圖2為本申請實施例提供的一種影像解碼系統的組成方塊圖示意圖;
圖3為本申請實施例提供的一種典型圖像組的結構示意圖;
圖4a為本申請實施例提供的一種GPM在64×64的當前塊上多種劃分模式的權重分配示意圖;
圖4b為本申請實施例提供的一種AWP在64×64的當前塊上多種劃分模式的權重分配示意圖;
圖4c為本申請實施例提供的一種AWP在64×32的當前塊上多種劃分模式的權重分配示意圖;
圖4d為本申請實施例提供的一種AWP在32×64的當前塊上多種劃分模式的權重分配示意圖;
圖5為本申請實施例提供的一種當前塊與相鄰塊的空間位置關係示意圖;
圖6為本申請實施例提供的另一種當前塊與相鄰塊的空間位置關係示意圖;
圖7為本申請實施例提供的一種幀間預測方法的流程示意圖;
圖8為本申請實施例提供的又一種當前塊與相鄰塊的空間位置關係示意圖;
圖9為本申請實施例提供的另一種幀間預測方法的流程示意圖;
圖10為本申請實施例提供的又一種幀間預測方法的流程示意圖;
圖11為本申請實施例提供的再一種幀間預測方法的流程示意圖;
圖12為本申請實施例提供的一種當前塊、相鄰塊與對應塊之間的空間位置關係示意圖;
圖13為本申請另一實施例提供的一種幀間預測方法的流程示意圖;
圖14為本申請又一實施例提供的一種幀間預測方法的流程示意圖;
圖15為本申請再一實施例提供的一種幀間預測方法的流程示意圖;
圖16為本申請實施例提供的一種解碼器的組成結構示意圖;
圖17為本申請實施例提供的一種編碼器的組成結構示意圖;
圖18為本申請實施例提供的另一種解碼器的組成結構示意圖;
圖19為本申請實施例提供的另一種編碼器的組成結構示意圖;
圖20為本申請實施例提供的一種解碼器的硬體實體示意圖;
圖21為本申請實施例提供的一種編碼器的硬體實體示意圖。
S701~S705:步驟
Claims (45)
- 一種幀間預測方法,應用於解碼器,所述方法包括: 獲取當前塊相關的原始運動訊息的運動向量訊息; 基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數; 基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建運動訊息候選清單;
- 基於所述運動訊息候選清單,確定所述當前塊的幀間預測值。根據請求項1所述的方法,其中,所述M為4。
- 根據請求項1所述的方法,其中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息; 所述基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息,包括: 基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述衍生運動訊息中的第一軸分量訊息;將所述原始運動訊息的第二軸分量訊息,作為所述衍生運動訊息的第二軸分量訊息; 其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
- 根據請求項1所述的方法,其中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息; 所述基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息,包括: 基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;基於對所述原始運動訊息的第二軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息; 其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
- 根據請求項3所述的方法,其中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述衍生運動訊息中的第一軸分量訊息,包括: 將所述原始運動訊息的第一軸分量訊息乘以第一值,得到第一結果,基於所述第一結果,確定所述衍生運動訊息的第一軸分量訊息。
- 根據請求項3所述的方法,其中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述衍生運動訊息中的第一軸分量訊息,包括: 將所述原始運動訊息的第一軸分量訊息除以M個第二值,得到M個第一除數,基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息。
- 根據請求項5所述的方法,其中,所述基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一: 將所述M個第一結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息; 確定與所述M個第一結果一一對應的M個第三值,將所述M個第一結果與M個第三值一一相加,得到M個第二結果,基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
- 根據請求項7所述的方法,其中,所述基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一: 將所述M個第二結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息; 將所述M個第二結果中的每一結果右移特定位數,得到M個第三結果,基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
- 根據請求項7所述的方法,其中,所述第三值為一左移目標位得到,所述目標位為所述特定位數減一。
- 根據請求項8所述的方法,其中,所述基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括: 在所述原始運動訊息的第一軸分量訊息為正值的情況下,將所述M個第三結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息; 在所述原始運動訊息的第一軸分量訊息為負值的情況下,將所述M個第三結果中的每一結果乘以負一的結果,作為所述每一衍生運動訊息的第一軸分量訊息。
- 根據請求項5至10任一項所述的方法,其中,所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第一閾值; 所述M個第一值包括第一特定值和第二特定值,所述第一特定值大於0且小於1,所述第二特定值大於1且小於2,所述第一特定值與所述第二特定值之和為2。
- 根據請求項11所述的方法,所述方法還包括: 在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於第二閾值的情況下,確定所述第一特定值為第一係數; 在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第二閾值且小於或等於第三閾值的情況下,確定所述第一特定值為第二係數; 在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第三閾值的情況下,確定所述第一特定值為第三係數; 其中,所述第一係數小於所述第二係數,所述第二係數小於所述第三係數。
- 根據請求項11所述的方法,所述方法還包括: 在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於所述第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為正數的情況下,將第一目標值作為所述衍生運動訊息的第一軸分量訊息; 在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,小於或等於第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為負數的情況下,將負的所述第一目標值作為所述衍生運動訊息的第一軸分量訊息。
- 根據請求項5所述的方法,其中,所述M個第一除數包括第一組除數,和/或,第二組除數,和/或,第三組除數; 所述第一組除數中每一除數大於最大閾值; 所述第二組除數中每一除數大於或等於最小閾值,且小於或等於所述最大閾值; 所述第三組除數中每一除數小於最小閾值; 所述基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下至少之一: 將所述最大閾值,作為所述M個衍生運動訊息中,與所述第一組除數對應的每一衍生運動訊息的第一軸分量訊息; 將所述第二組除數中每一除數,作為所述M個衍生運動訊息中,與所述第二組除數對應的每一衍生運動訊息的第一軸分量訊息; 將所述最小閾值,作為所述M個衍生運動訊息中,與所述第三組除數對應的每一衍生運動訊息的第一軸分量訊息。
- 根據請求項1至10任一項所述的方法,其中,所述原始運動訊息為單向原始運動訊息,,或對雙向原始運動訊息進行拆分得到的一個或兩個單向原始運動訊息; 所述衍生運動訊息為單向衍生運動訊息; 所述單向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的。
- 根據請求項1至10任一項所述的方法,其中,所述獲取當前塊相關的原始運動訊息的運動向量訊息,包括: 獲取當前塊相關的原始運動訊息的運動向量訊息和所述當前塊的權重匯出模式; 所述基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建運動訊息候選清單,包括: 基於所述當前塊的權重匯出模式、所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述運動訊息候選清單。
- 根據請求項16任一項所述的方法,其中,所述基於所述當前塊的權重匯出模式、所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述運動訊息候選清單,包括: 基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式; 基於所述排序方式,所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述運動訊息候選清單。
- 根據請求項1所述的方法,所述方法還包括:先將所述當前塊的1個時域上的運動訊息填入初始運動訊息候選清單中,再將所述當前塊的4個空域上的運動訊息填入初始運動訊息候選清單中。
- 根據請求項1所述的方法,其中,所述構建運動訊息候選清單還包括:使用先時域運動訊息後空域運動訊息的順序。
- 一種幀間預測方法,應用於編碼器,所述方法包括: 確定當前塊相關的原始運動訊息的運動向量訊息; 基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數; 基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建運動訊息候選清單; 基於所述運動訊息候選清單,確定所述當前塊的幀間預測值。
- 根據請求項20所述的方法,其中,所述M為4。
- 根據請求項20所述的方法,其中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息; 所述基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息,包括: 基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述衍生運動訊息中的第一軸分量訊息;將所述原始運動訊息的第二軸分量訊息,作為所述衍生運動訊息的第二軸分量訊息; 其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
- 根據請求項20所述的方法,其中,所述運動向量訊息包括第一軸分量訊息和第二軸分量訊息; 所述基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息,包括: 基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第一軸分量訊息;基於對所述原始運動訊息的第二軸分量訊息進行縮放的結果,確定所述M個衍生運動訊息中每一衍生運動訊息的第二軸分量訊息; 其中,所述第一軸為x軸或y軸,所述第二軸為y軸或x軸,所述第一軸與所述第二軸不同。
- 根據請求項22所述的方法,其中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述衍生運動訊息中的第一軸分量訊息,包括: 將所述原始運動訊息的第一軸分量訊息乘以第一值,得到第一結果,基於所述第一結果,確定所述衍生運動訊息的第一軸分量訊息。
- 根據請求項22所述的方法,其中,所述基於對所述原始運動訊息的第一軸分量訊息進行縮放的結果,確定所述衍生運動訊息中的第一軸分量訊息,包括: 將所述原始運動訊息的第一軸分量訊息除以M個第二值,得到M個第一除數,基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息。
- 根據請求項24所述的方法,其中,所述基於所述M個第一結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一: 將所述M個第一結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息; 確定與所述M個第一結果一一對應的M個第三值,將所述M個第一結果與M個第三值一一相加,得到M個第二結果,基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
- 根據請求項26所述的方法,其中,所述基於所述M個第二結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下之一: 將所述M個第二結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息; 將所述M個第二結果中的每一結果右移特定位數,得到M個第三結果,基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息。
- 根據請求項26所述的方法,其中,所述第三值為一左移目標位得到,所述目標位為所述特定位數減一。
- 根據請求項27所述的方法,其中,所述基於所述M個第三結果中的每一結果,確定所述每一衍生運動訊息的第一軸分量訊息,包括: 在所述原始運動訊息的第一軸分量訊息為正值的情況下,將所述M個第三結果中的每一結果,作為所述每一衍生運動訊息的第一軸分量訊息; 在所述原始運動訊息的第一軸分量訊息為負值的情況下,將所述M個第三結果中的每一結果乘以負一的結果,作為所述每一衍生運動訊息的第一軸分量訊息。
- 根據請求項24至29任一項所述的方法,其中,所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於第一閾值; 所述M個第一值包括第一特定值和第二特定值,所述第一特定值大於0且小於1,所述第二特定值大於1且小於2,所述第一特定值與所述第二特定值之和為2。
- 根據請求項30所述的方法,所述方法還包括: 在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於第二閾值的情況下,確定所述第一特定值為第一係數; 在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第二閾值且小於或等於第三閾值的情況下,確定所述第一特定值為第二係數; 在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,大於所述第三閾值的情況下,確定所述第一特定值為第三係數; 其中,所述第一係數小於所述第二係數,所述第二係數小於所述第三係數。
- 根據請求項30所述的方法,所述方法還包括: 在所述原始運動訊息的第一軸分量訊息的絕對值,小於或等於所述第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為正數的情況下,將第一目標值作為所述衍生運動訊息的第一軸分量訊息; 在所述原始運動訊息的運動向量訊息中的第一軸分量訊息的絕對值,小於或等於第一閾值,且所述原始運動訊息的運動向量訊息中的第一軸分量訊息為負數的情況下,將負的所述第一目標值作為所述衍生運動訊息的第一軸分量訊息。
- 根據請求項24所述的方法,其中,所述M個第一除數包括第一組除數,和/或,第二組除數,和/或,第三組除數; 所述第一組除數中每一除數大於最大閾值; 所述第二組除數中每一除數大於或等於最小閾值,且小於或等於所述最大閾值; 所述第三組除數中每一除數小於最小閾值; 所述基於所述M個第一除數中的每一除數,確定所述每一衍生運動訊息的第一軸分量訊息,包括以下至少之一: 將所述最大閾值,作為所述M個衍生運動訊息中,與所述第一組除數對應的每一衍生運動訊息的第一軸分量訊息; 將所述第二組除數中每一除數,作為所述M個衍生運動訊息中,與所述第二組除數對應的每一衍生運動訊息的第一軸分量訊息; 將所述最小閾值,作為所述M個衍生運動訊息中,與所述第三組除數對應的每一衍生運動訊息的第一軸分量訊息。
- 根據請求項20至29任一項所述的方法,其中,所述原始運動訊息為單向原始運動訊息,,或對雙向原始運動訊息進行拆分得到的一個或兩個單向原始運動訊息; 所述衍生運動訊息為單向衍生運動訊息; 所述單向衍生運動訊息是基於所述單向原始運動訊息或所述雙向運動訊息確定的。
- 根據請求項20至29任一項所述的方法,其中,所述獲取當前塊相關的原始運動訊息的運動向量訊息,包括: 獲取當前塊相關的原始運動訊息的運動向量訊息和所述當前塊的權重匯出模式; 所述基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建運動訊息候選清單,包括: 基於所述當前塊的權重匯出模式、所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述運動訊息候選清單。
- 根據請求項35所述的方法,其中,所述基於所述當前塊的權重匯出模式、所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述運動訊息候選清單,包括: 基於所述當前塊的權重匯出模式,確定所述當前塊相關的已知運動訊息的排序方式; 基於所述排序方式,所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建所述運動訊息候選清單。
- 根據請求項20所述的方法,所述方法還包括:先將所述當前塊的1個時域上的運動訊息填入初始運動訊息候選清單中,再將所述當前塊的4個空域上的運動訊息填入初始運動訊息候選清單中。
- 根據請求項20所述的方法,其中,所述構建運動訊息候選清單還包括:使用先時域運動訊息後空域運動訊息的順序。
- 一種解碼器,包括: 獲取單元,用於獲取當前塊的權重匯出模式; 構建單元,用於基於所述當前塊的權重匯出模式,構建運動訊息候選清單; 預測單元,用於基於所述運動訊息候選清單,確定所述當前塊的幀間預測值。
- 一種編碼器,包括: 模式確定單元,用於確定當前塊的權重匯出模式; 構建單元,用於基於所述當前塊的權重匯出模式,構建運動訊息候選清單; 預測單元,用於基於所述運動訊息候選清單,確定所述當前塊的幀間預測值。
- 一種解碼器,包括: 獲取單元,用於獲取當前塊的權重匯出模式; 衍生運動訊息確定單元,用於基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數; 構建單元,用於基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建運動訊息候選清單; 預測單元,用於基於所述運動訊息候選清單,確定所述當前塊的幀間預測值。
- 一種編碼器,包括: 原始運動訊息確定單元,用於確定當前塊相關的原始運動訊息的運動向量訊息; 衍生運動訊息確定單元,用於基於對所述原始運動訊息的運動向量訊息進行縮放的結果,確定M個衍生運動訊息的運動向量訊息;M為大於或等於1的整數; 構建單元,用於基於所述原始運動訊息的運動向量訊息和所述衍生運動訊息的運動向量訊息,構建運動訊息候選清單; 預測單元,用於基於所述運動訊息候選清單,確定所述當前塊的幀間預測值。
- 一種解碼器,包括:記憶體和處理器, 所述記憶體儲存有可在處理器上運行的電腦程式, 所述處理器執行所述程式時實現請求項1至19任一項所述方法中的步驟。
- 一種編碼器,包括:記憶體和處理器, 所述記憶體儲存有可在處理器上運行的電腦程式, 所述處理器執行所述程式時實現請求項20至38任一項所述方法中的步驟。
- 一種電腦儲存媒介,所述電腦儲存媒介儲存有一個或者多個程式,所述一個或者多個程式可被一個或者多個處理器執行,以實現請求項1至19任一項所述方法中的步驟; 或者,所述一個或者多個程式可被一個或者多個處理器執行,以實現請求項20至38任一項所述方法中的步驟。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010507268.X | 2020-06-05 | ||
CN202010507268.XA CN113766245A (zh) | 2020-06-05 | 2020-06-05 | 帧间预测方法、解码器、编码器及计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW202147837A true TW202147837A (zh) | 2021-12-16 |
Family
ID=78785177
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW110118914A TW202147837A (zh) | 2020-06-05 | 2021-05-25 | 幀間預測方法、解碼器、編碼器及電腦儲存媒介 |
Country Status (4)
Country | Link |
---|---|
CN (3) | CN113766245A (zh) |
MX (1) | MX2022010726A (zh) |
TW (1) | TW202147837A (zh) |
WO (1) | WO2021244125A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023123495A1 (zh) * | 2021-12-31 | 2023-07-06 | Oppo广东移动通信有限公司 | 预测方法、装置、设备、系统、及存储介质 |
WO2024077553A1 (zh) * | 2022-10-13 | 2024-04-18 | Oppo广东移动通信有限公司 | 视频编解码方法、装置、设备、系统、及存储介质 |
WO2024108391A1 (zh) * | 2022-11-22 | 2024-05-30 | Oppo广东移动通信有限公司 | 视频编解码方法、装置、设备、系统、及存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013162273A1 (ko) * | 2012-04-24 | 2013-10-31 | 엘지전자 주식회사 | 비디오 신호 처리 방법 및 장치 |
WO2018226015A1 (ko) * | 2017-06-09 | 2018-12-13 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
US10757420B2 (en) * | 2017-06-23 | 2020-08-25 | Qualcomm Incorporated | Combination of inter-prediction and intra-prediction in video coding |
CN109963155B (zh) * | 2017-12-23 | 2023-06-06 | 华为技术有限公司 | 图像块的运动信息的预测方法、装置及编解码器 |
-
2020
- 2020-06-05 CN CN202010507268.XA patent/CN113766245A/zh not_active Withdrawn
-
2021
- 2021-04-02 WO PCT/CN2021/085454 patent/WO2021244125A1/zh active Application Filing
- 2021-04-02 CN CN202310111464.9A patent/CN116193139A/zh active Pending
- 2021-04-02 MX MX2022010726A patent/MX2022010726A/es unknown
- 2021-04-02 CN CN202180008731.9A patent/CN114930839A/zh active Pending
- 2021-05-25 TW TW110118914A patent/TW202147837A/zh unknown
Also Published As
Publication number | Publication date |
---|---|
CN113766245A (zh) | 2021-12-07 |
CN114930839A (zh) | 2022-08-19 |
CN116193139A (zh) | 2023-05-30 |
WO2021244125A1 (zh) | 2021-12-09 |
MX2022010726A (es) | 2022-09-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11930210B2 (en) | Intra-frame prediction method and device | |
CN113853783B (zh) | 对帧内块复制编解码的块的块矢量的编解码 | |
CN113748676B (zh) | 帧内编解码模式下的矩阵推导 | |
KR102357575B1 (ko) | 비디오 이미지 인코딩 및 디코딩 방법, 장치 및 디바이스 | |
TW202147837A (zh) | 幀間預測方法、解碼器、編碼器及電腦儲存媒介 | |
CN116248867A (zh) | 利用包含追加区域的分割单位的影像解码方法以及装置 | |
JP2017505021A (ja) | 画像処理方法及び装置 | |
WO2022117089A1 (zh) | 预测方法、编码器、解码器以及存储介质 | |
TWI797582B (zh) | 一種編解碼方法、裝置及其設備 | |
WO2021238396A1 (zh) | 帧间预测方法、编码器、解码器以及计算机存储介质 | |
WO2021258841A1 (zh) | 帧间预测方法、编码器、解码器以及计算机存储介质 | |
TW202145784A (zh) | 幀間預測方法、編碼器、解碼器以及電腦儲存媒介 | |
KR20230003054A (ko) | 코딩 및 디코딩 방법, 장치 및 그 기기 | |
TWI749297B (zh) | 合成式預測及限制性合併技術 | |
RU2809619C1 (ru) | Способ, оборудование и устройство для кодирования и декодирования | |
WO2023123736A1 (zh) | 预测方法、装置、设备、系统、及存储介质 | |
WO2023044916A1 (zh) | 帧内预测的方法、编码器、解码器和编解码系统 | |
WO2023044917A1 (zh) | 帧内预测的方法、编码器、解码器和编解码系统 | |
WO2024108391A1 (zh) | 视频编解码方法、装置、设备、系统、及存储介质 | |
WO2023044918A1 (zh) | 帧内预测的方法、编码器、解码器和编解码系统 | |
WO2024077553A1 (zh) | 视频编解码方法、装置、设备、系统、及存储介质 | |
WO2024119521A1 (zh) | 编解码方法、码流、编码器、解码器以及存储介质 | |
WO2023197433A1 (zh) | 视频编解码方法、装置、设备、系统、及存储介质 | |
TW202209884A (zh) | 幀間預測方法、編碼器、解碼器及電腦可讀儲存媒介 | |
WO2024007128A1 (zh) | 视频编解码方法、装置、设备、系统、及存储介质 |