TW202029771A - 涉及仿射運動的一般應用 - Google Patents

涉及仿射運動的一般應用 Download PDF

Info

Publication number
TW202029771A
TW202029771A TW108134298A TW108134298A TW202029771A TW 202029771 A TW202029771 A TW 202029771A TW 108134298 A TW108134298 A TW 108134298A TW 108134298 A TW108134298 A TW 108134298A TW 202029771 A TW202029771 A TW 202029771A
Authority
TW
Taiwan
Prior art keywords
block
coordinates
sub
current block
affine
Prior art date
Application number
TW108134298A
Other languages
English (en)
Inventor
張凱
張莉
劉鴻彬
王悅
Original Assignee
大陸商北京字節跳動網絡技術有限公司
美商字節跳動有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商北京字節跳動網絡技術有限公司, 美商字節跳動有限公司 filed Critical 大陸商北京字節跳動網絡技術有限公司
Publication of TW202029771A publication Critical patent/TW202029771A/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Abstract

本發明公開了涉及仿射運動的一般應用。視頻編碼方法包括:在視頻的當前塊和當前塊的位元流表示之間的轉換期間,使用當前塊的所述仿射模型;其中仿射模型使用從當前塊內的子塊的中心偏移的代表點。

Description

涉及仿射運動的一般應用
本發明是有關於一種視頻編碼技術、設備和系統。 相關申請的交叉引用 根據適用的《專利法》和/或《巴黎公約》的規定,本申請及時要求於2018年9月23日提交的國際專利申請號PCT/CN2018/107165的優先權和利益。將國際專利申請號PCT/CN2018/107165的全部公開以引用方式併入本文,作為本申請公開的一部分
運動補償(MC)是一種視頻處理中的技術,給出先前的和/或將來的幀,通過考慮相機和/或視頻中的物件的運動來預測視頻中的幀。運動補償可以用於視頻資料的編碼以實現視訊壓縮。
本檔公開了與視頻編碼和解碼中的仿射運動補償的使用相關的方法、系統和設備。
在一個示例方面,公開了一種視頻編碼或解碼的方法。該方法包括:在視頻的當前塊和當前塊的位元流表示之間的轉換期間,使用當前塊的仿射模式;為當前塊的一部分確定運動補償之後的當前塊的更新的運動資訊;在後續視頻塊和其各自的位元流表示的轉換期間使用更新的運動資訊。
在另一示例方面,公開了一種視頻處理方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,匯出所述當前塊的非仿射模式的運動向量預測,以及使用所述當前塊的所述非仿射模式執行所述轉換。基於仿射模型從相鄰仿射編碼塊匯出所述非仿射模式。
在又一示例方面,公開了一種視頻處理方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用所述當前塊的仿射編碼模式。所述仿射模式使用從所述當前塊中心偏移的代表點。
在又一示例方面,公開了一種視頻處理方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用以不同於從非仿射編碼塊提取的第二運動候選的方式從仿射編碼塊提取的第一運動候選;以及使用所述第一運動候選或所述第二運動候選執行所述轉換。
在另一示例方面,公開了一種用於視頻處理的方法。該方法包括:在視頻的當前塊和當前塊的位元流表示之間的轉換期間,使用運動向量預測(MVP)候選列表和仿射Merge候選列表;以及使用MVP候選列表或仿射Merge候選列表執行所述轉換。
在另一示例方面,公開了一種用於視頻處理的方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用所述當前塊的仿射運動模式;在運動補償之後更新所述當前塊的運動資訊,以獲得所述當前塊的更新的運動資訊;以及在後續視頻塊和其各自的位元流表示的轉換期間使用所述更新的運動資訊。
在另一示例方面,公開了一種用於視頻處理的方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,匯出所述當前塊的非仿射模式的運動向量預測,其中基於仿射模型從相鄰仿射編碼塊匯出所述非仿射模式的運動向量預測;以及使用所述當前塊的所述非仿射模式的運動向量預測執行所述轉換。
在另一示例方面,公開了一種用於視頻處理的方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用所述當前塊的所述仿射模型;其中所述仿射模型使用從所述當前塊內的子塊的中心偏移的代表點。
在另一示例方面,公開了一種用於視頻處理的方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用以不同於從非仿射編碼塊提取的第二運動候選的方式從仿射編碼塊提取的第一運動候選;以及使用所述第一運動候選或所述第二運動候選執行所述轉換。
在另一示例方面,公開了一種用於視頻處理的方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用仿射運動向量預測候選列表和/或仿射Merge候選列表;並且其中,所述運動向量預測候選列表和/或所述仿射Merge候選列表具有自我調整的尺寸。
在另一示例方面,公開了一種用於視頻處理的方法。該方法包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,匯出儲存在位於所述當前塊的一個或多個邊界處的子塊中的運動向量;以及使用儲存在所述子塊中的所述運動向量執行所述轉換。
在另一示例方面,公開了實現上述視頻解碼方法的視頻解碼器裝置。
在另一方面,公開了一種視訊轉碼器裝置,其包括配置成實現上述公開方法的一個或多個處理器。
在又一典型方面,本文描述的各種技術可以被實現為儲存在非暫時性電腦可讀介質上的電腦程式產品。電腦程式產品包括用於執行本文所述方法的程式碼。
在又一典型方面,視頻解碼器裝置可以實現本文所述的方法。
在附件、附圖、和下面的說明書中描述了一個或多個實現的細節。其它特徵將從描述和附圖、以及從權利要求書中顯而易見。
本文提供了幾種可實施在數位視訊編碼器和解碼器中的技術。為了清晰理解,在本文中使用了章節標題,並且不將每個章節中描述的技術和實施例的範圍僅限於該章節。
由於對更高解析度視頻的需求的增加,視頻編碼方法和技術在現代技術中無處不在。視頻轉碼器通常包括壓縮或解壓縮數位視訊的電子電路或軟體,並且不斷被改進以提供更高的編碼效率。視頻轉碼器將未壓縮視訊轉換為壓縮格式,反之亦然。視頻品質、用於表示視頻的資料量(由位元速率確定)、編碼和解碼演算法的複雜度、對資料丟失和錯誤的敏感性、編輯的簡易性、隨機訪問、以及端到端延遲(時延)之間存在複雜的關係。壓縮格式通常符合標準視訊壓縮規範,例如,高效視頻編碼(HEVC)標準(也稱為H.265或MPEG-H第2部分)、待定案的多功能視頻編碼(VVC)標準、或其他當前和/或未來的視頻編碼標準。
1. 總結
本發明涉及視頻/圖像編碼技術。具體來說,涉及視頻/圖像編碼中的運動向量預測。它可以應用於如HEVC的現有的視頻編碼標準,或待定案的標準(多功能視頻編碼)。它也可適用于未來的視頻/圖像編碼標準或視頻/圖像轉碼器。
2. 介紹
基於子塊的預測由HEVC附件I(3D-HEVC)首次引入到視頻編碼標準中。利用基於子塊的預測,將諸如編碼單元(CU)或預測單元(PU)的塊劃分為幾個不重疊的子塊。不同的子塊可以被分配不同的運動資訊,例如參考索引或運動向量(MV),並且對每個子塊分別執行運動補償(MC)。圖1示出了基於子塊的預測的概念。
為探索HEVC之外的未來視頻編碼技術,VCEG和MPEG於2015年共同成立了聯合視頻探索團隊(JVET)。從那時起,JVET採用了許多新的方法,並將其應用到了名為聯合探索模型(JEM)的參考軟體中。
在JEM中,諸如仿射預測、可選時域運動向量預測(ATMVP)、空時運動向量預測(STMVP)、雙向光流(BIO)和畫面播放速率上轉換(FRUC)的多種編碼工具中都採用了基於子塊的預測。在VVC中也採用了仿射預測。
2.1仿射預測
在HEVC中,僅將平移運動模型應用於運動補償預測(MCP)。而在現實世界中,存在很多種運動,例如,放大/縮小、旋轉、透視以及其它不規則運動。在VVC中,應用了簡化的仿射變換運動補償預測。如圖2A-2B所示,塊的仿射運動場由兩個(在4參數仿射模型中)或三個(在6參數仿射模型中)控制點運動向量描述。
圖2A和2B示出了簡化的仿射運動模型。具體地,圖2A示出了4參數仿射模型的示例;並且圖2B示出了6參數仿射模型的示例。
塊的運動向量場(MVF)用以下等式描述,其中4參數仿射模型:
Figure 02_image001
(1)
和6參數仿射模型:
Figure 02_image003
(2)
其中(mvh 0 ,mvh 0 )為左上角控制點的運動向量,(mvh 1 ,mvh 1 )為右上角控制點的運動向量,並且(mvh 2 ,mvh 2 )為左下角控制點的運動向量,(x,y)表示代表點相對于當前塊內的左上角樣本點的座標。CP運動向量可以被信令通知(例如,在仿射AMVP模式中)或者是動態地匯出(例如,在仿射Merge模式中)。w和h是當前塊的寬度和高度。實際上,除法是通過右移和取整操作來實現的。在VVC測試模型 (VTM)中,代表點被定義為子塊的中心位置,例如,當子塊的左上角相對於當前塊內的左上角樣本點的座標為(xs,ys)時,代表點的座標被定義為(xs+2,ys+2)。
在免於除法的設計中,(1)和(2)實現為:
Figure 02_image005
(3)
對於(1)中示出的4參數仿射模型:
Figure 02_image007
(4)
對於(2)中示出的6參數仿射模型:
Figure 02_image009
(5)
最後,
Figure 02_image011
(6)
Figure 02_image013
(7)
其中,S表示計算精度。例如,在VVC中,S=7。在VVC中,MC中使用的左上角樣本點在(xs,ys)處的子塊的MV通過(6)計算(其中x=xs+2 且y=ys+2)。
為了匯出每個4×4子塊的運動向量,如圖3所示,根據等式(1)或等式(2)計算每個子塊的中心樣本點的運動向量,並四捨五入到1/16分數精度。然後應用運動補償插值濾波器,以利用匯出的運動向量生成每個子塊的預測。
圖3示出了每個子塊的仿射MVF的示例。
可以從如圖4A所示的諸如左、上、右上、左下和左上相鄰塊的空間相鄰仿射編碼塊繼承仿射模型。例如,如果相鄰左下塊A如圖4B中所示以仿射模式編碼,則獲取包含塊A的相鄰CU的左上角、右上角和左下角的控制點(CP)運動向量mv 0 N ,mv 1 Nmv 2 N 。基於mv 0 N ,mv 1 Nmv 2 N 計算當前CU的左上角/右上角/左下角的運動向量mv 0 C ,mv 1 Cmv 2 C (其僅用於6參數仿射模型)。
繼承的CP MVmv 0 C ,mv 1 Cmv 2 C 可以用作仿射Merge模式下的CP MV。或者它們可以用作VVC中仿射幀間模式的MVP。
在VVC的當前仿射設計中,儲存在子塊中的運動向量和用於執行運動補償的運動向量可以不同。以圖3為例。對於4參數模型,子塊角處的mv0和mv1分別儲存在LT和RT兩個子塊中,而子塊中心處的mv0'和mv1'分別用於執行LT和RT的MC。此外,子塊角處的mv2儲存在子塊LB中,而mv2'用於對LB執行MC。此外,對於6參數模型,子塊角處的mv3儲存在子塊LR中,而mv3'用於對LR執行MC。這種設計是為了更精確地預測使用仿射模式的相鄰塊的運動向量。
圖4A和4B示出AF_Merge候選的示例。
在當前的VVC中,仿射模型只能由仿射編碼塊使用,而不能由非仿射編碼塊使用。
3. 示例技術
公開了允許仿射模型被非仿射編碼塊使用的幾種方法。
下面的詳細示例和技術應視為解釋一般概念的示例。這些發明不應狹義地加以解釋。此外,這些發明可以以任何方式組合。本發明與其他發明之間的組合同樣適用。
技術 1 :與從仿射運動預測的非仿射塊相關
1. 提出了在運動補償之後更新仿射編碼塊的運動資訊,並儲存更新的運動資訊,並用於後續編碼/解碼塊的運動預測。
a. 在一個示例中,更新的運動資訊用於不同圖片中的後續編碼/解碼塊的運動預測。
b. 在一個示例中,濾波處理(例如,去塊化濾波器)取決於更新的運動資訊。
c. 可以在進一步的條件下調用更新處理,例如,僅對一個CTU的右側和/或底部仿射子塊。在這種情況下,濾波處理可取決於未更新的運動資訊,並且更新的運動資訊可用於當前條帶/片或其它圖片中的後續編碼/解碼塊。
2. 在一個示例中,儲存在位於右邊界和/或底邊界處的子塊中的MV可以不同於用於子塊的MC的MV。圖5示出了示例,其中位於右邊界和底邊界的子塊被陰影化。
a. 在一個示例中,位於右邊界和/或底邊界的子塊中儲存的MV可以用作當前幀或不同幀中的後續編碼/解碼塊的MV預測或候選。
b. 在一個示例中,可以使用在子塊外部具有代表點的仿射模型匯出位於右邊界和/或底邊界的子塊中儲存的MV。
c. 在一個示例中,為右邊界和/或底邊界儲存兩組MV,一組MV用於去塊化、時域運動預測,並且另一組用於當前圖片中後續PU/CU的運動預測。圖5示出了右邊界和底邊界處的子塊被陰影化的示例。
3. 假設當前塊左上角的座標為(x0,y0),子塊左上角的座標為(x',y'),子塊的尺寸為M×N,並且儲存在子塊中的MV表示為(MVx,MVy)。(MVx,MVy)用4參數仿射模型的公式(1)計算,或用6參數仿射模型的公式(2)計算,其中代表點(x,y)設置為(xp-x0,yp-y0),並且(xp,yp)可定義如下:
a. 如果子塊在右邊界,則xp=x’+M+M/2,yp=y’+N/2;在圖6A中描繪了這樣的示例。
b. 如果子塊在底邊界,則xp=x’+M/2,yp=y’+N+N/2,在圖6A中描繪了這樣的示例;
c. 對於右下角,代表點(x,y)可以定義為:
i. 在一個示例中,如果子塊在右下角,則xp=x’+M+M/2,yp=y’+N/2;
ii. 在一個示例中,如果子塊在右下角,則xp=x’+M/2,yp=y’+N+N/2;
iii. 在一個示例中,如果子塊在右下角,則xp=x’+M+M/2,yp=y’+N+N/2;
d. 如果子塊在右邊界,則xp=x’+M,yp=y’+N/2;這樣的示例在圖6B中描述;
e. 如果子塊在底邊界,則xp=x’+M/2,yp=y’+N;這樣的示例在圖6B中描述;
f. 如果子塊在右下角,則xp=x’+M,yp=y’+N。圖6B中描繪了這樣的示例;
g. 如果子塊在右邊界或底邊界,則xp=x’+M,yp=y’+N。圖6C中描繪了這樣的示例;
h. 如果子塊位於底邊界,則xp=x’,yp=y’+N。圖6D中描繪了這樣的示例;
i. 如果子塊在右邊界,則xp=x’+M,yp=y’;這樣的示例在圖6D中描述;
j. 如果子塊在右下角,則xp=x’+M,yp=y’+N。圖6D描繪了這樣的示例。圖6A至6D示出了用以匯出儲存在右邊界和底邊界的子塊中的MV的可能的位置。
4. 在一個示例中,當匯出其儲存的MV時,位於底邊界或右邊界的一些子塊是特殊的。
a. 對於右上角(如圖3所示的塊RT),它總是儲存右上角的MV(如圖3所示的mv1)。
b. 對於左下角(如圖3所示的塊LB),它總是儲存左下角的MV在(如圖3所示的mv2)。
i. 或者,對於左下角,它僅在mv2是信令通知的MV時儲存MV。
c. 對於右下角(如圖3所示的塊RB),它總是儲存右下角的MV(如圖3所示的mv3)。
5. 在一個示例中,可以基於仿射模型從相鄰仿射編碼塊匯出當前非仿射編碼塊的MV預測(可包括兩個幀間預測方向的一個MV或兩個MV)。
a. 例如,當當前塊用幀間模式編碼時,MV預測可以用作MVP候選列表中的MVP候選。
b. 例如,當當前塊用Merge模式編碼時,MV預測可以用作MVP候選列表中的Merge候選。
c. 假設相鄰仿射編碼塊的左上角座標為(x0,y0),相鄰仿射編碼塊的CP MV為左上角的
Figure 02_image015
、右上角的
Figure 02_image017
和右下角的
Figure 02_image019
。相鄰仿射編碼塊的寬度和高度為w和h。當前塊左上角的座標為(x’,y’),冰球當前塊中任意點的座標為(x’’,y’’)。當前塊的寬度和高度為M和N。
i. 在一個示例中,如果相鄰仿射編碼塊使用4參數仿射模型,則從等式(1)將MV預測計算為(
Figure 02_image021
,
Figure 02_image023
),其中x=x’’-x0, y=y’’-y0。
ii. 在一個示例中,如果相鄰仿射編碼塊使用6參數仿射模型,則從等式(2)將MV預測計算為(
Figure 02_image021
,
Figure 02_image023
),其中x=x’’-x0, y=y’’-y0。
iii. (x’’,y’’)的一些可能位置是:(如圖7所示)
(x’, y’)
(x’+M/2, y’)
(x’+M/2+1, y’)
(x’+M-1, y’)
(x’+M, y’)
(x’, y’+N/2)
(x’+M/2, y’+N/2)
(x’+M/2+1, y’+N/2)
(x’+M-1, y’+N/2)
(x’+M, y’+N/2)
(x’, y’+N/2+1)
(x’+M/2, y’+N/2+1)
(x’+M/2+1, y’+N/2+1)
(x’+M-1, y’+N/2+1)
(x’+M, y’+N/2+1)
(x’, y’+N-1)
(x’+M/2, y’+N-1)
(x’+M/2+1, y’+N-1)
(x’+M-1, y’+N-1)
(x’+M, y’+N-1)
(x’, y’+N)
(x’+M/2, y’+N)
(x’+M/2+1, y’+N)
(x’+M-1, y’+N)
(x’+M, y’+N)
6. 如果相鄰的基本單元塊S(例如,在VVC中是4×4的塊)屬於仿射編碼塊T(例如,圖4B中的基本單元塊A0屬於仿射編碼塊),則可以採用以下方式來獲得運動預測候選:
a. 在一個示例中,當基本單元塊S被MVP清單構造過程和/或Merge候選列表構造過程訪問時,不提取儲存在S中的MV。相反地,提取從當前塊的仿射編碼塊T匯出的MV預測。
b. 在一個示例中,基本單元塊S被MVP清單構造過程和/或Merge候選列表構造過程訪問兩次。在一次訪問中,提取儲存在S中的MV。在另一次訪問中,提取從當前塊的仿射編碼塊T匯出的MV預測作為額外的MVP候選或Merge候選。
7. 如果相鄰的基本單元塊S(例如,在VVC中是4×4的塊)屬於仿射編碼塊T,則可以將從當前塊的仿射編碼塊T匯出的額外的MVP候選或Merge候選添加到MVP候選列表或Merge候選列表中的以下位置:
a. 在一個示例中,在從塊S提取的候選之後;
b. 在一個示例中,在從塊S提取的候選之前;
c. 在一個示例中,在所有普通空間候選之後但是在時域候選之前;
d. 在一個示例中,在時域候選之後;
e. 在一個示例中,位置可以從塊到塊自我調整地改變。
8. 在一個示例中,從仿射編碼塊匯出的額外候選的總數不可超過固定數目(例如1或2)。
a. 可選地,固定可進一步數目取決於編碼資訊,例如,候選清單的尺寸、在添加這些額外候選之前可用運動候選的總數、塊尺寸、塊類型、編碼模式(AMVP或Merge)、條帶類型等。
9. 在一個示例中,從仿射編碼塊匯出的額外候選可以與其他候選一起被修剪。如果匯出的候選與列表中已存在的另一候選項相同,則不會將其添加到列表中。
a. 在一個示例中,如果相鄰基本單元塊S(在VVC中是4×4的塊)屬於仿射編碼塊T,則將從仿射編碼塊T匯出的額外候選與從S提取的MV進行比較。
b. 在一個示例中,將匯出的候選與其他匯出的候選進行比較。
10. 在一個示例中,是否以及如何應用為當前非仿射編碼塊從相鄰仿射編碼塊匯出的MV預測可取決於當前塊的維度(假設當前塊尺寸為W×H)。
a. 例如,如果W>=T且H>=T,則不應用它,其中T是諸如8的整數;
b. 例如,如果W>=T或H>=T,則不應用它,其中T是諸如8的整數;
c. 例如,如果W>=T且H>=T,則不應用它,其中T是諸如8的整數;
d. 例如,如果W>=T或H>=T,則不應用它,其中T是8諸如8的整數;
技術 2 :涉及仿射運動的一般應用
11. 代表點的選擇可以相對於尺寸等於MxM的一個子塊的左上角樣本點偏移,而不是總是等於(M/2,N/2)。
a. 在一個示例中,代表點可以被設置為((M>>1)-0.5,(N>>1)-0.5)。
b. 在一個示例中,代表點可以被設置為((M>>1)-0.5,(N>>1)。
c. 在一個示例中,代表點可以設置為((M>>1),(N>>1)-0.5)。
d. 在一個示例中,代表點可以被設置為((M>>1)+0.5,(N>>1))。
e. 在一個示例中,代表點可以被設置為((M>>1),(N>>1)+0.5)。
f. 在一個示例中,代表點可以被設置為((M>>1)+0.5,(N>>1)+0.5)。
g. 在一個示例中,當子塊的左上角相對於當前塊的左上角樣本點的座標為(xs,ys)時,代表點的座標被定義為(xs+1.5,ys+1.5)。
i. 在一個實施例中,重寫等式(6)以匯出新代表點的MV:
Figure 02_image025
ii.類似地,可以將附加偏移(0.5,0.5)或(-0.5,-0.5)或(0,0.5)、或(0.5,0)、或(-0.5,0)、或(0,-0.5)添加到這些代表點。
12. 提出將儲存的運動資訊與運動補償中使用的運動資訊對齊。
a. 在一個示例中,當前儲存在圖3中的mvi被替換為mvi’,其中i是(0,和/或1,和/或2,和/或3)。
13. 提出從仿射編碼塊提取的運動候選(例如,AMVP模式的MVP候選或Merge候選)應以不同於從非仿射編碼塊提取的候選的方式使用。
a. 例如,不可將從仿射編碼塊提取的運動候選放入運動候選列表或Merge候選列表中;
b. 例如,可以以較低的優先順序將從仿射編碼塊提取的運動候選放入運動候選列表或Merge候選列表中,例如,它應該被放在較後的位置。
c. 可基於運動候選是否是從仿射編碼塊提取的來自我調整地改變併入候選的順序。
14. 仿射編碼塊的仿射MVP候選列表尺寸或仿射Merge候選列表尺寸可以是自我調整的。
a. 在一個示例中,仿射編碼塊的仿射MVP候選列表尺寸或仿射Merge候選列表尺寸可以基於當前塊的尺寸自我調整。
i.例如,如果該塊較大,則仿射編碼塊的仿射MVP候選列表尺寸或仿射Merge候選列表尺寸可以更大。
b. 在一個示例中,仿射編碼塊的仿射MVP候選列表尺寸或仿射Merge候選列表尺寸可以基於空間或時域相鄰塊的編碼模式自我調整。
i. 例如,如果有更多的空間相鄰塊是仿射編碼的,則仿射編碼塊的仿射MVP候選列表尺寸或仿射Merge候選列表尺寸可以更大。
圖8是說明可以用於實現本公開技術的各個部分的電腦系統或其他控制設備2600的結構的示例的示意圖。在圖8中,電腦系統2600包括通過互連2625連接的一個或多個處理器2605和記憶體2610。互連2625可以表示由適當的橋、適配器或控制器連接的任何一條或多條單獨的物理匯流排、點對點連接或兩者。因此,互連2625可以包括例如系統匯流排、周邊元件連接(PCI)匯流排、超傳輸或工業標準架構(ISA)匯流排、小型電腦系統介面(SCSI)匯流排、通用序列匯流排(USB)、IIC(I2C)匯流排或電氣與電子工程師協會(IEEE)標準674匯流排(有時被稱為“火線”)。
處理器2605可以包括中央處理器(CPU),來控制例如主機的整體操作。在一些實施例中,處理器2605通過執行儲存在記憶體2610中的軟體或固件來實現這一點。處理器2605可以是或可以包括一個或多個可程式設計通用或專用微處理器、數位訊號處理器(DSP)、可程式設計控制器、專用積體電路(ASIC)、可程式設計邏輯器件(PLD)等,或這些器件的組合。
記憶體2610可以是或包括電腦系統的主記憶體。記憶體2610表示任何適當形式的隨機存取記憶體(RAM)、唯讀記憶體(ROM)、快閃記憶體等,或這些設備的組合。在使用中,記憶體2610除其他外可包含一組機器指令,當處理器2605執行該指令時,使處理器2605執行操作以實現本公開技術的實施例。
通過互連2625連接到處理器2605的還有(可選的)網路介面卡2615。網路介面卡2615為電腦系統2600提供與遠端設備(諸如儲存客戶機和/或其他儲存伺服器)通信的能力,並且可以是例如乙太網適配器或光纖通道適配器。
圖9示出了可以用於實施本公開技術的各個部分的移動設備2700的示例實施例的框圖。移動設備2700可以是筆記型電腦、智慧手機、平板電腦、攝像機或其他能夠處理視頻的設備。移動設備2700包括處理器或控制器2701來處理資料,以及與處理器2701通信的記憶體2702來儲存和/或緩衝資料。例如,處理器2701可以包括中央處理器(CPU)或微控制器單元(MCU)。在一些實現中,處理器2701可以包括現場可程式設計閘陣列(FPGA)。在一些實現中,移動設備2700包括或與圖形處理單元(GPU)、視頻處理單元(VPU)和/或無線通訊單元通信,以實現智慧手機設備的各種視覺和/或通信資料處理功能。例如,記憶體2702可以包括並儲存處理器可執行代碼,當處理器2701執行該代碼時,將移動設備2700配置為執行各種操作,例如接收資訊、命令和/或資料、處理資訊和資料,以及將處理過的資訊/資料發送或提供給另一個資料設備,諸如執行器或外部顯示器。為了支援移動設備2700的各種功能,記憶體2702可以儲存資訊和資料,諸如指令、軟體、值、圖像以及處理器2701處理或引用的其他資料。例如,可以使用各種類型的隨機存取記憶體(RAM)設備、唯讀記憶體(ROM)設備、快閃記憶體設備和其他合適的儲存介質來實現記憶體2702的儲存功能。在一些實現中,移動設備2700包括輸入/輸出(I/O)單元2703,來將處理器2701和/或記憶體2702與其他模組、單元或設備進行介面。例如,I/O單元2703可以與處理器2701和記憶體2702進行介面,以利用與典型資料通信標準相容的各種無線介面,例如,在雲中的一台或多台電腦和使用者設備之間。在一些實現中,移動設備2700可以通過I/O單元2703使用有線連接與其他設備進行介面。I/O單元2703可以包括無線感測器,例如用於檢測遠端控制信號的紅外探測器,或其他合適的無線人機界面技術。移動設備2700還可以與其他外部介面(例如資料記憶體)和/或可視或音訊顯示裝置2704連接,以檢索和傳輸可由處理器處理、由記憶體儲存或由顯示裝置2704或外部設備的輸出單元上顯示的資料和資訊。例如,顯示裝置2704可以根據所公開的技術顯示基於MVP修改的視頻幀。
圖10是視頻處理的方法1000的示例流程圖。方法1000包括:在視頻的當前塊和當前塊的位元流表示之間的轉換期間,使用(1002)當前塊的仿射模式;為當前塊的一部分確定(1004)運動補償之後的當前塊的更新的運動資訊;以及在後續視頻塊和其各自的位元流表示的轉換期間使用(1006)更新的運動資訊。
轉換操作可以包括:由視訊轉碼器從當前視頻塊生成位元流表示。轉換操作可以包括:由視頻解碼器從位元流表示生成當前視頻塊。
下面描述的條款進一步描述了所公開實施例的某些特徵。
1. 一種視頻編碼方法,包括:在視頻的當前塊和當前塊的位元流表示之間的轉換期間,使用當前塊的仿射運動模式;為當前塊的一部分確定運動補償之後的當前塊的更新的運動資訊;以及在後續視頻塊和其各自的位元流表示的轉換期間使用更新的運動資訊。
2. 根據條款1所述的方法,其中,所述後續視頻塊位於與所述當前塊的圖片不同的圖片中。
3. 根據條款1或2所述的方法,還包括:使用所述更新的運動資訊執行塊濾波操作。
4. 根據條款3所述的方法,其中,所述塊濾波操作包括去塊化濾波操作。
5. 根據條款1所述的方法,其中,所述當前塊的一部分僅包括一個編碼單元的右側或底部仿射子塊。
6. 根據條款1所述的方法,其中,位於所述當前塊的右邊界或底邊界的子塊的所述更新的運動向量資訊不同於所述子塊的運動補償中使用的運動向量。
7. 根據條款6所述的方法,其中,在後續視頻塊和其各自的位元流表示的轉換期間使用所述子塊的所述更新的運動向量資訊,其中所述後續視頻塊在與所述子塊相同的圖片中或在與所述子塊不同的圖片中。
8. 根據條款6所述的方法,其中,所述更新的運動資訊包括所述右邊界或所述底邊界子塊的兩組運動向量,並且其中第一組運動向量用於去塊化濾波或時域運動預測,並且第二組運動向量用於作為所述當前塊的當前圖片中的後續預測單元或後續編碼單元的運動預測。
9. 根據條款1所述的方法,其中,所述當前塊的左上角的座標為(x0,y0),子塊的左上角的座標為(x',y'),子塊的尺寸為M×N個像素,並且為所述子塊儲存的運動向量表示為(MVx,MVy),並且其中(MVx,MVy)用4參數仿射模型或6參數仿射模型計算。
10. 根據條款1所述的方法,其中,所述當前塊的所述一部分不包括右邊界或底邊界處的子塊。
11. 根據條款1、3至10所述的方法,其中,所述後續視頻塊與所述當前塊在相同圖片中。
12. 一種視頻處理方法,包括:在視頻的當前塊和當前塊的位元流表示之間的轉換期間,匯出所述當前塊的非仿射模式的運動向量預測;其中,基於仿射模式從相鄰仿射編碼塊匯出所述非仿射模式;以及使用所述當前塊的所述非仿射模式執行所述轉換。
13. 根據條款12所述的方法,其中,所述當前塊用幀間模式編碼,並且其中所述非仿射模式的運動向量預測被用作運動向量預測候選。
14. 根據條款12所述的方法,其中,所述當前塊用幀間模式編碼,並且其中所述非仿射模式的運動向量預測被用作Merge候選。
章節4的第5項中給出了條款12至14的其他示例。
15. 一種視頻處理方法,包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用所述當前塊的仿射編碼模式;其中所述仿射模式使用從所述當前塊中心偏移的代表點。
16. 根據條款15所述的方法,其中,所述當前塊包括M x N個像素,其中M和N是整數,並且所述代表點被設置為((M>>1)-0.5,(N>>1)-0.5)。
17. 根據條款15所述的方法,其中,所述當前塊包括M x N個像素,其中M和N是整數,並且所述代表點被設置為、或者((M>>1)-0.5,(N>>1))。
章節4的第6-10和11項中給出了條款15至17的其它示例。
18. 根據條款1至17任一項中所述的方法,其中,儲存的仿射模式的運動資訊用於所述當前塊的運動補償。
19. 一種視頻處理方法,包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用以不同於從非仿射編碼塊提取的第二運動候選的方式從仿射編碼塊提取的第一運動候選;以及使用所述第一運動候選或所述第二運動候選執行所述轉換。
20. 根據條款19所述的方法,其中,所述第一運動候選不用於運動候選列表或Merge候選列表。
21. 根據條款19所述的方法,其中,以低於其它運動候選的優先順序將所述第一運動候選用於運動候選列表或Merge候選列表。
章節4的第13項中給出了條款19至21的其他示例。
22. 一種視頻處理方法,包括:在視頻的當前塊和當前塊的位元流表示之間的轉換期間,使用運動向量預測(MVP)候選列表和仿射Merge候選列表;以及使用MVP候選列表或仿射Merge候選列表執行所述轉換。
23. 根據條款22所述的方法,其中,所述仿射Merge候選列表的尺寸是所述當前塊的尺寸的函數。
24. 根據條款22所述的方法,其中,所述仿射Merge候選列表的尺寸是空間或時域相鄰塊的編碼模式的函數。
25. 根據條款24所述的方法,其中,所述仿射Merge候選列表的尺寸隨仿射編碼的空間相鄰塊的數目增加。
章節4的第14項中給出了條款22至25的其他示例。
章節4的技術1和2中描述了各種其它細節。
圖11是視頻編碼方法1100的流程圖表示。方法1100包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用(1102)所述當前塊的仿射運動模式;在運動補償之後更新(1104)所述當前塊的運動資訊,以獲得所述當前塊的更新的運動資訊;以及在後續視頻塊和其各自的位元流表示的轉換期間使用(1106)所述更新的運動資訊。
在一些實施例中,其中,所述後續視頻塊位於與所述當前塊的圖片不同的圖片中。
在一些實施例中,所述方法還包括:使用所述更新的運動資訊執行塊濾波操作。
在一些實施例中,所述塊濾波操作包括去塊化濾波操作。
在一些實施例中,更新所述當前塊的運動資訊包括:更新所述當前塊的一部分的運動資訊,所述當前塊的一部分僅包括一個編碼單元的右側或底部仿射子塊。
在一些實施例中,所述方法還包括:使用未更新的運動資訊執行塊濾波操作;以及在當前條帶/片或其他圖片中的所述後續視頻塊和其各自的位元流表示的轉換期間使用所述更新的運動資訊。
在一些實施例中,儲存在位於所述當前塊的右邊界或底邊界的子塊中的運動向量不同於所述子塊的運動補償中使用的運動向量。
在一些實施例中,在當前幀或不同幀中的後續視頻塊和其各自的位元流表示的轉換期間,將儲存在位於所述右邊界或所述底邊界的所述子塊中的所述運動向量用作運動向量預測或候選。
在一些實施例中,儲存在位於所述右邊界或所述底邊界的所述子塊中的所述運動向量包括兩組運動向量,第一組運動向量用於去塊化濾波和/或時域運動預測,並且第二組運動向量用於作為所述當前塊的當前圖片中的後續預測單元或後續編碼單元的運動預測。
在一些實施例中,更新所述當前塊的運動資訊不包括所述當前塊的右邊界或底邊界處的子塊。
在一些實施例中,對於所述當前塊的右上角處的所述子塊,始終儲存從所述仿射模型匯出的所述右上角處的運動向量。
在一些實施例中,對於所述當前塊的左下角處的所述子塊,始終儲存從所述仿射模型匯出的所述左下角處的運動向量。
在一些實施例中,對於所述當前塊的左下角處的所述子塊,當所述運動向量是信令通知的運動向量時,儲存從所述仿射模型匯出的所述左下角處的運動向量。
在一些實施例中,對於所述當前塊的右下角處的所述子塊,始終儲存從所述仿射模型匯出的所述右下角處的運動向量。
圖12是視頻編碼方法1200的流程圖表示。方法1200包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,匯出(1202)所述當前塊的非仿射模式的運動向量預測,其中基於仿射模型從相鄰仿射編碼塊匯出所述非仿射模式的運動向量預測;以及使用所述當前塊的所述非仿射模式的運動向量預測執行所述轉換。
在一些實施例中,所述當前塊用幀間模式編碼,並且其中所述非仿射模式的運動向量預測被用作運動向量預測候選列表中的運動向量預測候選。
在一些實施例中,所述當前塊用Merge模式編碼,並且其中所述非仿射模式的運動向量預測被用作運動向量預測候選列表中的Merge候選。
在一些實施例中,所述相鄰仿射編碼塊使用具有四個參數的仿射模型,並且通過使用所述四個參數匯出所述運動向量預測;或者所述相鄰仿射編碼塊使用具有六個參數的仿射模型,並且通過使用所述六個參數匯出所述運動向量預測。
在一些實施例中,基於針對所述當前塊內的位置的仿射模型匯出所述運動向量預測。
在一些實施例中,所述還包括:通過使用運動向量預測列表構造過程和/或Merge候選列表構造過程訪問所述相鄰仿射編碼塊的子單元塊;基於所述當前塊的仿射模型從所述相鄰仿射編碼塊提取匯出的運動向量預測,作為運動預測候選和/或Merge候選。
在一些實施例中,所述還包括:通過使用運動向量預測列表構造過程和/或Merge候選列表構造過程訪問所述相鄰仿射編碼塊的子單元塊兩次;提取儲存在所述子單元塊中的運動向量,作為運動預測候選和/或Merge候選;以及從所述當前塊的所述相鄰仿射編碼塊中提取匯出的運動向量預測,作為額外運動向量預測候選或Merge候選。
在一些實施例中,將所述額外運動向量預測候選或Merge候選添加到所述運動預測候選列表或所述Merge候選列表的從所述子單元塊提取的候選之後、或者從所述子單元塊提取的候選之前、或者所有普通空間候選之後但在時域候選之前、或者所述時域候選之後、或者從塊到塊自我調整地改變。
在一些實施例中,從所述仿射編碼塊匯出的所述額外運動向量預測候選或Merge候選的總數不超過固定數目。
在一些實施例中,所述固定數目取決於編碼資訊,所述編碼資訊包括:候選列表的尺寸、在添加這些額外候選之前可用運動候選的總數、塊尺寸、塊類型、編碼模式和條帶類型。
在一些實施例中,從所述仿射編碼塊匯出的所述候選和/或所述額外候選與其它候選一起被修剪。
在一些實施例中,如果所述匯出的候選與已經在所述列表中的另一候選相同,則不將其添加到所述列表中。
在一些實施例中,將所述額外候選與從所述子單元塊提取的所述運動向量進行比較。
在一些實施例中,將所述匯出的候選與其他匯出的候選進行比較。
在一些實施例中,所述方法還包括:確定所述當前塊的維度;基於所述確定,應用為所述當前非仿射編碼塊從所述相鄰仿射編碼塊匯出的運動向量預測。
在一些實施例中,響應於所述當前塊的寬度大於預定整數且所述當前塊的高度大於所述預定整數、或者所述當前塊的所述寬度大於所述預定整數或所述當前塊的所述高度大於所述預定整數、或者所述當前塊的所述寬度小於所述預定整數並且所述當前塊的所述高度小於所述預定整數、或者所述當前塊的所述寬度小於預定整數或所述當前塊的所述高度小於所述預定整數的確定而不應用運動向量預測。
在一些實施例中,所述轉換包括:從所述位元流表示重構所述當前塊。
在一些實施例中,所述轉換包括:從所述當前塊生成所述位元流表示。
圖13是視頻編碼方法1300的流程圖表示。方法1300包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用(1302)所述當前塊的所述仿射模型;其中所述仿射模型使用從所述當前塊內的子塊的中心偏移的代表點。
在一些實施例中,所述子塊包括M x N個像素,其中M和N是整數,並且所述代表點被設置為((M>>1)-0.5,(N>>1)-0.5)、或者((M>>1)-0.5,(N>>1))、或者((M>>1),(N>>1)-0.5)、或者((M>>1)+0.5,(N>>1))、或者((M>>1),(N>>1)+0.5)、或者((M>>1)+0.5,(N>>1)+0.5)。
在一些實施例中,當所述子塊的左上角相對於所述當前塊的左上角樣本點的座標為(xs,ys)時,所述代表點的座標被定義為(xs+1.5,ys+1.5)。
在一些實施例中,通過使用所述代表點的所述座標匯出所述代表點的運動向量。
在一些實施例中,將附加偏移(0.5,0.5)或(-0.5,-0.5)或(0,0.5),或(0.5,0),或(-0.5,0)或(0,-0.5)添加到所述代表點。
在一些實施例中,所述方法還包括:將所述當前塊的一個或多個儲存的運動資訊與用於所述當前塊的運動補償的對應運動資訊對齊。
在一些實施例中,位於子塊角的所述一個或多個儲存的運動資訊被用於所述當前塊的運動補償的位於子塊中心的所述對應運動資訊替換。
圖14是視頻編碼方法1400的流程圖表示。方法1400包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用(1402)以不同於從非仿射編碼塊獲取的第二運動候選的方式從仿射編碼塊獲取的第一運動候選;以及使用所述第一運動候選或所述第二運動候選執行(1404)所述轉換。
在一些實施例中,所述第一和第二運動候選是運動向量預測模式的運動向量預測候選或Merge候選。
在一些實施例中,不將所述第一運動候選放入運動候選列表或Merge候選列表。
在一些實施例中,以低於所述第二運動候選的優先順序將所述第一運動候選放入運動候選列表或Merge候選列表。
在一些實施例中,將所述第一運動候選置於所述運動候選列表或所述Merge候選列表中較後的位置。
圖15是視頻編碼方法1500的流程圖表示。方法1500包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用(1502)仿射運動向量預測候選列表和/或仿射Merge候選列表;其中所述運動向量預測候選列表和/或所述仿射Merge候選列表具有自我調整的尺寸。
在一些實施例中,所述仿射運動向量預測候選列表和/或所述仿射Merge候選列表的所述尺寸基於所述當前塊的尺寸自我調整。
在一些實施例中,所述仿射運動向量預測候選列表和/或所述仿射Merge候選列表的所述尺寸與所述當前塊的所述尺寸成比例。
在一些實施例中,所述仿射運動向量預測候選列表和/或所述仿射Merge候選列表的所述尺寸基於一個或多個空間或視域相鄰塊的編碼模式自我調整。
在一些實施例中,所述仿射Merge候選列表的所述尺寸與仿射編碼的空間相鄰塊的數目成比例。
圖16是視頻編碼方法1600的流程圖表示。方法1600包括:在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,匯出(1602)儲存在位於所述當前塊的一個或多個邊界處的子塊中的運動向量;以及使用儲存在所述子塊中的所述運動向量執行(1604)所述轉換。
在一些實施例中,所述當前塊的所述一個或多個邊界包括所述當前塊的右邊界和/或底邊界。
在一些實施例中,通過使用代表點在所述子塊外的仿射模型匯出儲存在位於所述當前塊的一個或多個邊界處的所述子塊中的所述運動向量。
在一些實施例中,通過使用4參數仿射模型或6參數仿射模型匯出儲存在位於所述當前塊的一個或多個邊界處的所述子塊中的所述運動向量。
在一些實施例中,所述還包括:確定所述子塊的位置;以及基於所述子塊的所述位置,確定所述代表點相對于所述當前塊的左上角座標的座標,其中所述子塊包括M x N個像素,其中M和N是整數。
在一些實施例中,回應於所述子塊位於所述右邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M+M/2,N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於所述底邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M/2,N+N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於所述當前塊的右下角的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M+M/2,N/2)、(M/2,N+N/2)或(M+M/2,N+N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於所述右邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M/2,N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於所述底邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M/2,N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於所述底邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M,N),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於所述右邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M,N),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於所述底邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(0,N),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於所述右邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M,0),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,回應於所述子塊位於右下角的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M,N),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
在一些實施例中,其中所述轉換包括:從所述位元流表示重構所述當前塊。
在一些實施例中,其中所述轉換包括:從所述當前塊生成所述位元流表示。
圖17示出了典型HEVC視訊轉碼器和解碼器1700的示例性框圖。產生符合HEVC的位元流的編碼演算法通常如下進行。每個圖片被劃分為塊狀區域,精確的塊劃分被傳送到解碼器。視頻序列的第一圖片(以及進入視頻序列的每個乾淨的隨機訪問點處的第一圖片)僅使用幀內預測(其使用同一幀內區域到區域的空間資料預測,但不依賴其他圖片)進行編碼。對於序列的或隨機訪問點之間的所有剩餘圖片,幀間時間預測編碼模式通常用於大多數塊。用於幀間預測的編碼處理包括選擇包括所選參考圖片的運動資料和要應用於預測每個塊的樣本點的運動向量(MV)。編碼器和解碼器通過使用MV和模式決策資料應用運動補償(MC)來生成相同的幀間預測信號,其作為輔助資訊被傳輸。
通過線性空間變換來變換幀內或幀間預測的殘差信號,其是原始塊與其預測之間的差。然後對變換係數進行縮放,量化,熵編碼,並與預測資訊一起傳輸。
編碼器複製解碼器處理迴圈(參見圖17中的灰色陰影框),使得兩者都將為後續資料生成相同的預測。因此,通過逆縮放來構造量化的變換係數,然後對其進行逆變換以複製殘差信號的解碼近似。然後將殘差添加到預測,然後可以將該相加的結果饋送到一個或兩個環路濾波器中以平滑由逐塊處理和量化引起的偽像。最終圖片表示(即解碼器輸出的副本)儲存在解碼圖片緩衝器中以用於後續圖片的預測。通常,圖片的編碼或解碼處理的順序通常不同於它們從源到達的順序;需要區分解碼器的解碼順序(即位元流順序)和輸出順序(即顯示順序)。
通常期望由HEVC編碼的視頻材料作為逐行掃描圖像輸入(由於源視頻源自該格式或者由編碼之前的去交錯產生)。HEVC設計中不存在明確的編碼特徵以支援隔行掃描的使用,因為隔行掃描不再用於顯示器,並且對於分發而言變得非常不常見。然而,在HEVC中已提供了中繼資料語法以允許編碼器通過將隔行掃描視頻的每個區(即,每個視頻幀的偶數或奇數行)編碼為單獨的圖片來指示已發送隔行掃描視頻或通過將每個隔行掃描幀編碼為HEVC編碼圖片指示它已被發送。這提供了一種對隔行掃描視頻進行編碼的有效方法,而不需要支援用於它的特殊解碼處理。
本專利檔中描述的主題的實現和功能操作可以在各種系統、數位電子電路、或電腦軟體、固件或硬體中實現,包括本說明書中所公開的結構及其結構等效體,或其中一個或多個的組合。本說明說中描述的主題的實現可以實現為一個或多個電腦程式產品,即一個或多個編碼在有形的且非易失的電腦可讀介質上的電腦程式指令的模組,以供資料處理裝置執行或控制資料處理裝置的操作。電腦可讀介質可以是機器可讀存放裝置、機器可讀儲存基板、存放裝置、影響機器可讀傳播信號的物質組成或其中一個或其中多個的組合。術語“資料處理單元”或“資料處理裝置”包括用於處理資料的所有裝置、設備和機器,包括例如可程式設計處理器、電腦或多處理器或電腦組。除硬體外,該裝置還可以包括為電腦程式創建執行環境的代碼,例如,構成處理器固件的代碼、協定棧、資料庫管理系統、作業系統或其中一個或多個的組合。傳播的信號是人為生成的信號,例如,機器生成的電、光或電磁信號,其被生成以編碼資訊以傳輸到合適的接收器設備。
電腦程式(也稱為程式、軟體、軟體應用、腳本或代碼)可以用任何形式的程式設計語言(包括編譯語言或解釋語言)編寫,並且可以以任何形式部署,包括作為獨立程式或作為模組、元件、副程式或其他適合在計算環境中使用的單元。電腦程式不一定與檔案系統中的檔對應。程式可以儲存在保存其他程式或資料的檔的部分中(例如,儲存在標記語言文檔中的一個或多個腳本)、專用於該程式的單個檔中、或多個協調檔(例如,儲存一個或多個模組、副程式或部分代碼的檔)中。電腦程式可以部署在一台或多台電腦上來執行,這些電腦位於一個網站上或分佈在多個網站上,並通過通信網路互連。
本說明書中描述的處理和邏輯流可以通過一個或多個可程式設計處理器執行,該處理器執行一個或多個電腦程式,通過在輸入資料上操作並生成輸出來執行功能。處理和邏輯流也可以通過特殊用途的邏輯電路來執行,並且裝置也可以實現為特殊用途的邏輯電路,例如,FPGA(現場可程式設計閘陣列)或ASIC(專用積體電路)。
例如,適於執行電腦程式的處理器包括通用和專用微處理器,以及任何類型數位電腦的任何一個或多個。通常,處理器將從唯讀記憶體或隨機存取記憶體或兩者接收指令和資料。電腦的基本元件是執行指令的處理器和儲存指令和資料的一個或多個存放裝置。通常,電腦還將包括一個或多個用於儲存資料的大型存放區設備,例如,磁片、磁光碟或光碟,或通過操作耦合到一個或多個大型存放區設備來從其接收資料或將資料傳輸到一個或多個大型存放區設備,或兩者兼有。然而,電腦不一定具有這樣的設備。適用於儲存電腦程式指令和資料的電腦可讀介質包括所有形式的非易失性記憶體、介質和記憶體設備,包括例如半導體記憶體設備,例如EPROM、EEPROM和快閃記憶體設備;磁片,例如,內部硬碟或可移動硬碟;磁光碟;以及CD ROM和DVD ROM盤。處理器和記憶體可以由專用邏輯電路來補充,或合併到專用邏輯電路中。
雖然本專利檔包含許多細節,但不應將其解釋為對任何發明或權利要求範圍的限制,而應解釋為對特定發明的特定實施例的特徵的描述。本專利檔在單獨實施例的上下文描述的某些特徵也可以在單個實施例中組合實施。相反,在單個實施例的上下文中描述的各種功能也可以在多個實施例中單獨實施,或在任何合適的子組合中實施。此外,儘管上述特徵可以描述為在某些組合中起作用,甚至最初要求是這樣,但在某些情況下,可以從組合中移除權利要求組合中的一個或多個特徵,並且權利要求的組合可以指向子組合或子組合的變體。
同樣,儘管附圖中以特定順序描述了操作,但這不應理解為要獲得想要的結果必須按照所示的特定順序或循序執行此類操作,或執行所有說明的操作。此外,本專利檔所述實施例中各種系統元件的分離不應理解為在所有實施例中都需要這樣的分離。
僅描述了一些實現和示例,其他實現、增強和變體可以基於本專利檔中描述和說明的內容做出。
mv 0mv 1mv 2mv 3mv 0'、mv 1'、mv 2'、mv 3':運動向量 CP0、CP1、CP2:控制點 LT、RT、LB、RB:子塊 2600:電腦系統 2605:處理器 2610:儲存器 2615:網路適配器 2625:互連 2700:移動設備 2701:處理器/控制器 2702:儲存器 2703:I/O介面 2704:顯示器 1000:方法 1002、1004、1006:步驟 1100:方法 1102、1104、1106:步驟 1200:方法 1202、1204:步驟 1300:方法 1302:步驟 1400:方法 1402、1404:步驟 1500:方法 1502:步驟 1600:方法 1602、1604:步驟 1700:HEVC視訊轉碼器和解碼器
圖1示出了基於子塊的預測計算的示例。 圖2A-2B示出了簡化仿射運動模型的示例。(a)4參數仿射模型;(b)6參數仿射模型。 圖3示出了每個子塊的仿射運動向量場(MVF)的示例。 圖4A-4B顯示AF_Merge模式的候選。 圖5示出了位於右邊界和底邊界處的子塊被突出的塊的示例。 圖6A-6D示出了用於匯出儲存在右邊界和底邊界處的子塊中的MV的位置的示例。 圖7示出了用於匯出MV預測的像素位置。 圖8是示出可用於實現本公開技術的各個部分的電腦系統或其他控制設備的架構的示例的框圖。 圖9示出了可用於實現本公開技術的各個部分的移動設備的示例性實施例的框圖。 圖10是視覺媒體處理的示例方法的流程圖。 圖11是視頻處理的另一示例方法的流程圖。 圖12是視頻處理的另一示例方法的流程圖。 圖13是視頻處理的另一示例方法的流程圖。 圖14是視頻處理的另一示例方法的流程圖。 圖15是視頻處理的另一示例方法的流程圖。 圖16是視頻處理的另一示例方法的流程圖。 圖17示出了典型的高效視頻編碼(HEVC)視訊轉碼器和解碼器的示例框圖。
1400:方法
1402、1404:步驟

Claims (36)

  1. 一種視頻處理方法,包括: 在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用所述當前塊的仿射模型, 其中所述仿射模型使用從所述當前塊內的子塊的中心偏移的代表點。
  2. 如申請專利範圍第1項所述的方法,其中,所述子塊包括M x N個像素,其中M和N是整數,並且所述代表點被設置為((M>>1)-0.5,(N>>1)-0.5)、或者((M>>1)-0.5,(N>>1))、或者((M>>1),(N>>1)-0.5)、或者((M>>1)+0.5,(N>>1))、或者((M>>1),(N>>1)+0.5)、或者((M>>1)+0.5,(N>>1)+0.5)。
  3. 如申請專利範圍第1項所述的方法,其中,當所述子塊的左上角相對於所述當前塊的左上角樣本點的座標為(xs,ys)時,所述代表點的座標被定義為(xs+1.5,ys+1.5)。
  4. 如申請專利範圍第3項所述的方法,其中,通過使用所述代表點的所述座標匯出所述代表點的運動向量。
  5. 如申請專利範圍第3項所述的方法,其中,將附加偏移(0.5,0.5)或(-0.5,-0.5)或(0,0.5),或(0.5,0),或(-0.5,0)或(0,-0.5)添加到所述代表點。
  6. 如申請專利範圍第1項所述的方法,還包括: 將所述當前塊的一個或多個儲存的運動資訊與用於所述當前塊的運動補償的對應運動資訊對齊。
  7. 如申請專利範圍第6項所述的方法,其中,位於子塊角的所述一個或多個儲存的運動資訊被用於所述當前塊的運動補償的位於子塊中心的所述對應運動資訊替換。
  8. 一種視頻處理方法,包括: 在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用以不同於從非仿射編碼塊提取的第二運動候選的方式從仿射編碼塊提取的第一運動候選;以及 使用所述第一運動候選或所述第二運動候選執行所述轉換。
  9. 如申請專利範圍第8項所述的方法,其中,所述第一和第二運動候選是運動向量預測模式的運動向量預測候選或Merge候選。
  10. 如申請專利範圍第9項所述的方法,其中,不將所述第一運動候選放入運動候選列表或Merge候選列表。
  11. 如申請專利範圍第9項所述的方法,其中,以低於所述第二運動候選的優先順序將所述第一運動候選放入運動候選列表或Merge候選列表。
  12. 如申請專利範圍第11項所述的方法,其中,將所述第一運動候選置於所述運動候選列表或所述Merge候選列表中較後的位置。
  13. 一種視頻處理方法,包括: 在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,使用仿射運動向量預測候選列表和/或仿射Merge候選列表; 其中,所述運動向量預測候選列表和/或所述仿射Merge候選列表具有自我調整的尺寸。
  14. 如申請專利範圍第13項所述的方法,其中,所述仿射運動向量預測候選列表和/或所述仿射Merge候選列表的所述尺寸基於所述當前塊的尺寸自我調整。
  15. 如申請專利範圍第14項所述的方法,其中,所述仿射運動向量預測候選列表和/或所述仿射Merge候選列表的所述尺寸與所述當前塊的所述尺寸成比例。
  16. 如申請專利範圍第13項所述的方法,其中,所述仿射運動向量預測候選列表和/或所述仿射Merge候選列表的所述尺寸基於一個或多個空間或視域相鄰塊的編碼模式自我調整。
  17. 如申請專利範圍第16項所述的方法,其中,所述仿射Merge候選列表的所述尺寸與仿射編碼的空間相鄰塊的數目成比例。
  18. 一種視頻處理方法,包括: 在視頻的當前塊和所述當前塊的位元流表示之間的轉換期間,匯出儲存在位於所述當前塊的一個或多個邊界處的子塊中的運動向量;以及 使用儲存在所述子塊中的所述運動向量執行所述轉換。
  19. 如申請專利範圍第18項所述的方法,其中,所述當前塊的所述一個或多個邊界包括所述當前塊的右邊界和/或底邊界。
  20. 如申請專利範圍第18或19項所述的方法,其中,通過使用代表點在所述子塊外的仿射模型匯出儲存在位於所述當前塊的一個或多個邊界處的所述子塊中的所述運動向量。
  21. 如申請專利範圍第19項所述的方法,其中,通過使用4參數仿射模型或6參數仿射模型匯出儲存在位於所述當前塊的一個或多個邊界處的所述子塊中的所述運動向量。
  22. 如申請專利範圍第21項所述的方法,還包括: 確定所述子塊的位置;以及 基於所述子塊的所述位置,確定代表點相對于所述當前塊的左上角座標的座標,其中所述子塊包括M x N個像素,其中M和N是整數。
  23. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於右邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M+M/2,N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  24. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於底邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M/2,N+N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  25. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於當前塊的右下角的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M+M/2,N/2)、(M/2,N+N/2)或(M+M/2,N+N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  26. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於右邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M/2,N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  27. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於底邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M/2,N/2),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  28. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於底邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M,N),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  29. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於右邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M,N),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  30. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於底邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(0,N),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  31. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於右邊界的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M,0),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  32. 如申請專利範圍第22項所述的方法,其中,回應於所述子塊位於右下角的所述確定,將所述代表點相對于所述子塊的左上角座標的所述座標設置為(M,N),以便確定所述代表點相對于所述當前塊的左上角座標的所述座標。
  33. 如申請專利範圍第1至32項中任一項所述的方法,其中所述轉換包括:從所述位元流表示重構所述當前塊。
  34. 如申請專利範圍第1至32項中任一項所述的方法,其中所述轉換包括:從所述當前塊生成所述位元流表示。
  35. 一種視頻處理裝置,其包括處理器,所述處理器被配置為實現申請專利範圍第1至34項中任一項或多項所述的方法。
  36. 一種其上儲存了代碼的電腦可讀程式介質,所述代碼包括指令, 當所述指令被處理器執行時,使所述處理器實現申請專利範圍第1至34項中任一項或多項所述的方法。
TW108134298A 2018-09-23 2019-09-23 涉及仿射運動的一般應用 TW202029771A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
WOPCT/CN2018/107165 2018-09-23
CN2018107165 2018-09-23

Publications (1)

Publication Number Publication Date
TW202029771A true TW202029771A (zh) 2020-08-01

Family

ID=68069840

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108134298A TW202029771A (zh) 2018-09-23 2019-09-23 涉及仿射運動的一般應用

Country Status (4)

Country Link
US (1) US11805259B2 (zh)
CN (2) CN110944206B (zh)
TW (1) TW202029771A (zh)
WO (2) WO2020058956A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA3100970A1 (en) * 2018-05-24 2019-11-28 Kt Corporation Method and apparatus for processing video signal
EP3957072A4 (en) * 2019-04-19 2023-01-11 Beijing Dajia Internet Information Technology Co., Ltd. VIDEO CODING METHODS AND APPARATUS USING OPTICAL FLOW PREDICTION REFINEMENT
WO2023051641A1 (en) * 2021-09-28 2023-04-06 Beijing Bytedance Network Technology Co., Ltd. Method, apparatus, and medium for video processing
WO2023081499A1 (en) * 2021-11-08 2023-05-11 Beijing Dajia Internet Information Technology Co., Ltd. Candidate derivation for affine merge mode in video coding

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016008157A1 (en) * 2014-07-18 2016-01-21 Mediatek Singapore Pte. Ltd. Methods for motion compensation using high order motion model
CN106303543B (zh) * 2015-05-15 2018-10-30 华为技术有限公司 视频图像编码和解码的方法、编码设备和解码设备
CN108600749B (zh) * 2015-08-29 2021-12-28 华为技术有限公司 图像预测的方法及设备
CN117354536A (zh) * 2016-02-25 2024-01-05 株式会社Kt 用于处理视频信号的方法和设备
KR102609632B1 (ko) * 2016-02-25 2023-12-01 주식회사 케이티 비디오 신호 처리 방법 및 장치
WO2017147765A1 (en) * 2016-03-01 2017-09-08 Mediatek Inc. Methods for affine motion compensation
RU2696551C1 (ru) * 2016-03-15 2019-08-02 МедиаТек Инк. Способ и устройство для кодирования видео с компенсацией аффинного движения
WO2017156705A1 (en) * 2016-03-15 2017-09-21 Mediatek Inc. Affine prediction for video coding
US10560712B2 (en) 2016-05-16 2020-02-11 Qualcomm Incorporated Affine motion prediction for video coding
US10631002B2 (en) 2016-09-30 2020-04-21 Qualcomm Incorporated Frame rate up-conversion coding mode
US10448010B2 (en) 2016-10-05 2019-10-15 Qualcomm Incorporated Motion vector prediction for affine motion models in video coding
US10681370B2 (en) * 2016-12-29 2020-06-09 Qualcomm Incorporated Motion vector generation for affine motion model for video coding
US10701390B2 (en) * 2017-03-14 2020-06-30 Qualcomm Incorporated Affine motion information derivation
EP3451664A1 (en) * 2017-09-01 2019-03-06 Thomson Licensing Motion compensation at a finer precision than motion vector differential
US10757417B2 (en) 2018-01-20 2020-08-25 Qualcomm Incorporated Affine motion compensation in video coding
WO2019234598A1 (en) 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Interaction between ibc and stmvp
US11303923B2 (en) 2018-06-15 2022-04-12 Intel Corporation Affine motion compensation for current picture referencing
TWI746994B (zh) 2018-06-19 2021-11-21 大陸商北京字節跳動網絡技術有限公司 用於不同參考列表的不同精確度
KR20240005178A (ko) 2018-09-19 2024-01-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 적응적 움직임 벡터 해상도를 가지는 어파인 모드에 대한 구문 재사용
CN110944191A (zh) 2018-09-23 2020-03-31 北京字节跳动网络技术有限公司 具有自适应运动矢量分辨率的运动矢量精度指示的信令通知
WO2020084510A1 (en) 2018-10-23 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Adaptive control point selection for affine coding
KR20230158645A (ko) 2018-11-05 2023-11-20 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 리파인먼트를 이용한 인터 예측을 위한 보간

Also Published As

Publication number Publication date
CN110944206A (zh) 2020-03-31
CN110944189B (zh) 2023-11-28
WO2020058957A1 (en) 2020-03-26
TW202017385A (zh) 2020-05-01
US20210211679A1 (en) 2021-07-08
US11805259B2 (en) 2023-10-31
CN110944189A (zh) 2020-03-31
CN110944206B (zh) 2023-05-26
WO2020058956A1 (en) 2020-03-26

Similar Documents

Publication Publication Date Title
TWI739120B (zh) 合併仿射模式與非合併仿射模式的統一拘束
TWI729422B (zh) 色彩分量間的子區塊移動向量繼承
TWI736902B (zh) 幀內塊複製與仿射的交互
TW202029771A (zh) 涉及仿射運動的一般應用
JP2022507683A (ja) デコーダ側動きベクトル改良
CN110944207B (zh) 仿射模型的表示
TW202019185A (zh) 非對稱加權雙向預測Merge
US8964845B2 (en) Merge mode for motion information prediction
TW201946470A (zh) 用於照度補償的信令
KR20190014590A (ko) 픽쳐 예측 방법 및 관련 장치
JP7148612B2 (ja) ビデオデータインター予測の方法、装置、ビデオエンコーダ、ビデオデコーダ及びプログラム
CN111131822B (zh) 具有从邻域导出的运动信息的重叠块运动补偿
TWI722465B (zh) 子塊的邊界增強
CN111010571B (zh) 组合仿射Merge候选的生成和使用
TW202025754A (zh) 仿射模式中的子塊的運動矢量推導
TW202017382A (zh) 8參數仿射模型
TWI834727B (zh) 從仿射運動預測的非仿射塊
TWI704800B (zh) 子塊的邊界濾波
TWI831837B (zh) 仿射模型的多個假設
TWI833811B (zh) 仿射模型的表示
TWI829769B (zh) 仿射的運動矢量訪問範圍
TWI831838B (zh) 運動候選列表的構建
WO2020181507A1 (zh) 图像处理的方法与装置