TWI619374B - 利用仿射運動補償的視訊編碼方法與裝置 - Google Patents

利用仿射運動補償的視訊編碼方法與裝置 Download PDF

Info

Publication number
TWI619374B
TWI619374B TW106106616A TW106106616A TWI619374B TW I619374 B TWI619374 B TW I619374B TW 106106616 A TW106106616 A TW 106106616A TW 106106616 A TW106106616 A TW 106106616A TW I619374 B TWI619374 B TW I619374B
Authority
TW
Taiwan
Prior art keywords
affine
current block
block
affine motion
motion vector
Prior art date
Application number
TW106106616A
Other languages
English (en)
Other versions
TW201803351A (zh
Inventor
黄晗
張凱
安基程
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW201803351A publication Critical patent/TW201803351A/zh
Application granted granted Critical
Publication of TWI619374B publication Critical patent/TWI619374B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/537—Motion estimation other than block-based
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

本發明提供一種具有仿射運動補償的編碼或解碼方法。該方法包括接收與當前圖像中的當前塊相關聯的輸入資料，以及如果當前塊以仿射合併模式被編碼或者將被編碼，則導出當前塊的第一仿射候選，第一仿射候選包括用於預測當前塊的控制點處的運動矢量的三個仿射運動矢量。仿射運動矢量從當前塊的三個不同的相鄰已編碼塊導出。如果選擇第一仿射候選，則根據仿射運動矢量導出仿射運動模型。此外，該方法包括根據仿射運動模型透過定位在參考圖像中的參考塊來對當前塊進行編碼或解碼。如果當前塊以仿射畫面間模式被編碼或者將被編碼，則當前塊被限制為在單向預測中被編碼。

Description

利用仿射運動補償的視訊編碼方法與裝置 【相關申請的交叉引用】
本發明要求如下申請的優先權：2016年3月1日遞交的申請號為PCT/CN2016/075024，標題為「Methods for Affine Motion Compensation」的PCT專利申請的優先權。在此合併參考這些申請案的申請標的。
本發明係相關於具有仿射運動補償的圖像和視訊編碼，尤指一種對包括仿射模式的各種編碼模式的視訊編碼系統提高編碼效率或降低複雜度的技術。
在大多數編碼標準中，以塊為基礎應用自適應編碼和畫面間/畫面內預測。例如，高效率視訊編碼(HEVC)系統中用於視訊編碼的基本塊單元稱為編碼單元(CU)。編碼單元可以以最大編碼單元(LCU)開始，也稱為編碼樹單元(CTU)。一旦每個最大編碼單元被遞歸地劃分為葉編碼單元，則根據預測類型和預測單元(PU)分區模式，每個葉編碼單元進一步分為一個或複數個預測單元。預測單元中的圖元共享相同的預測參數。
對於由畫面間預測模式處理的當前塊，可以使用 塊匹配來定位參考圖片中的參考塊。將兩個塊的位置之間的位移確定為當前塊的運動矢量(MV)。HEVC支持兩種不同類型的畫面間預測模式，一種是高級運動矢量預測(advanced motion vector prediction,AMVP)模式，另一種是合併模式。 當前塊的運動矢量由對應於與當前塊的空間和時間相鄰相關聯的運動矢量的運動矢量預估器(motion vector predictor,MVP)預測。對MV和MVP之間的運動矢量差值(motion vector difference,MVD)以及MVP的索引進行編碼和發送，以用於AMVP模式中編碼的當前塊。在B片中，使用語法元素inter_pred_idc來指示畫面間預測方向。如果當前塊在單向(uni-directional)預測中被編碼，則使用一個MV來定位當前塊的預估器，而如果當前塊在雙向(bi-directional)預測中被編碼，則使用兩個MV來定位預估器，因此兩個MVD和兩個MVP索引被發送以用於雙向預測編碼的塊。在複數個參考圖像的情況下，語法元素ref_idx_l0被發送，以指示使用列表0中的哪個參考圖像，並且語法元素ref_idx_l1被發送以指示使用列表1中的哪個參考圖像。在合併模式中，包含MV，參考圖像索引和畫面間預測方向的當前塊的運動信息從合併候選列表中選擇的最終合併候選的運動信息中繼承。合併候選列表由當前塊的空間和時間相鄰塊的運動信息構成，並且合併索引被發送以指示最終合併候選。
HEVC中基於塊的運動補償假設預測單元內的所有圖元透過共享相同的運動矢量而遵循相同的平移運動模型；然而，平移運動模型不能捕捉移動物體的旋轉，縮放和變形等 複雜運動。在文獻中引入的仿射變換模型提供了更精確的運動補償預測，因為仿射變換模型能夠描述二維塊旋轉以及二維變形以將矩形變換為平行四邊形。該模型可以描述如下： x’=a * x+b * y+e，以及 y’=c * x+d * y+f。 (1)
其中A(x，y)是所考慮的位置(x，y)處的原始圖元，並且A'(x'，y')是對於原始圖元A(x，y)的參考圖像中的位置(x'，y')處的對應圖元。在仿射變換模型中使用總共六個參數a，b，c，d，e，f，以及該仿射變換模型描述了六參數仿射預測中原始位置與參考位置之間的映射。對於每個原始圖元A(x，y)，該原始圖元A(x，y)與其對應的參考圖元A'(x'y')之間的運動矢量(vx，vy)被導出為：vx=(1-a)* x-b * y-e，以及vy=(1-c)* x-d * y-f。 (2)塊中每個圖元的運動矢量(vx，vy)是位置相關的，並且可以根據其位置(x，y)由等式(2)中存在的仿射運動模型導出。
第1A圖示出了根據仿射運動模型的運動補償的示例，其中當前塊102被映射到參考圖片中的參考塊104。當前塊102的三個角圖元110,112和114與參考塊104的三個角圖元之間的對應關係可以由第1A圖所示的三個箭頭來確定。可以基於三個角圖元的三個已知運動矢量Mv0，Mv1，Mv2導出用於仿射運動模型的六個參數。三個角圖元110,112和114也被稱為當前塊102的控制點。用於仿射運動模型的參數推導在本領域是已知的，並且這裡省略細節。
在文獻中已經公開了仿射運動補償的各種實施方式。例如，基於子塊的仿射運動模型被應用於為每個子塊而不是每個圖元導出MV，以降低仿射運動補償的複雜度。在李等人揭示的技術文件中(“An Affine Motion Compensation Framework for High Efficiency Video Coding”,2015 IEEE International Symposium on Circuits and Systems(ISCAS),2015年5月，頁數：525-528)，當當前塊以合併模式或AMVP模式編碼時，針對每個2Nx2N塊分區發出仿射標誌以指示仿射運動補償的使用。如果該標誌為真，則當前塊的運動矢量的推導遵循仿射運動模型，否則當前塊的運動矢量的推導遵循傳統的平移運動模型。當使用仿射畫面間模式(也稱為仿射AMVP模式或AMVP仿射模式)時，三個角圖元的三個運動矢量被發送。在每個控制點位置，透過發送控制點的運動矢量差值，運動矢量被進行預測編碼。在另一示例性實現中，當當前塊在合併模式下被編碼時，仿射標誌根據合併候選條件地被發送。仿射標誌指示當前塊是否以仿射合併模式進行編碼。當至少有一個合併候選被進行仿射編碼時，仿射標誌才會被發送，如果仿射標誌為真，則選擇第一可用仿射編碼的合併候選。
四參數仿射預測是六參數仿射預測的替代，其具有兩個控制點而不是三個控制點。第1B圖中示出了四參數仿射預測的示例。兩個控制點130和132位於當前塊122的左上角和右上角，並且運動矢量Mv0和Mv1將當前塊122映射到參考圖片中的參考塊124。
本發明揭示了一種用於在視訊編碼系統中用仿射運動補償進行視訊編碼和解碼的方法和裝置。根據本發明的視訊編碼器或解碼器的實施例，接收與當前圖像中的當前塊相關聯的輸入資料，並且如果當前塊以仿射合併模式被編碼或者將被編碼，則導出當前塊的第一仿射候選。在視訊編碼器側，與當前塊相關聯的輸入資料包括一組圖元，或者在解碼器側，與當前塊相關聯的輸入資料是對應於包括當前塊的已壓縮資料的視訊比特。第一仿射候選包括三個仿射運動矢量Mv0，Mv1和Mv2，用於預測當前塊的控制點處的運動矢量。Mv0從當前塊的第一相鄰已編碼塊的運動矢量導出，Mv1從當前塊的第二相鄰已編碼塊的運動矢量導出，Mv2從當前塊的第三相鄰已編碼塊的運動矢量導出。如果選擇第一仿射候選來編碼或解碼當前塊，則根據第一仿射候選的仿射運動矢量Mv0，Mv1和Mv2，導出仿射運動模型。根據仿射運動模型透過定位用於當前塊的參考圖像中參考塊來對當前塊進行編碼或解碼。
在一個實施例中，三個相鄰已編碼塊是與當前塊相鄰的左上角子塊，當前塊上方的上右子塊和當前塊旁邊的左下子塊塊。在另一個實施例中，仿射運動矢量Mv0，Mv1和Mv2中的每一個是從相鄰已編碼塊的預定的運動矢量組中選擇的第一可用運動矢量。例如，Mv0是與當前塊相鄰的左上角子塊處，當前塊上方的上左子塊處和當前塊旁邊的左上子塊處的運動矢量的第一可用運動矢量。Mv1是當前塊上方的上右子塊處和與當前塊相鄰的右上角子塊處的運動矢量的第一可用運動矢量。Mv2是當前塊旁邊的左下子塊處和與當前塊相鄰的 左下角子塊處的運動矢量的第一可用運動矢量。
在一些實施例中，在仿射合併模式中使用複數個仿射候選。例如，包括三個仿射運動矢量的第二仿射候選也被導出，並將其插入到合併候選列表中，並且如果第二仿射候選被選擇來編碼或解碼當前塊，則根據仿射第二仿射候選的運動矢量導出仿射運動模型。第二仿射候選中的至少一個仿射運動矢量與第一仿射候選中的對應仿射運動矢量不同。
如果三個仿射運動矢量Mv0，Mv1和Mv2的畫面間預測方向或參考圖像不全部相同，則視訊編碼器或解碼器的實施例表示第一仿射候選不存在或不可用。視訊編碼器或解碼器可以導出新的仿射候選來替換第一仿射候選。如果所有三個仿射運動矢量Mv0，Mv1和Mv2僅在第一參考列表中可用，則當前塊的畫面間預測方向被設置為單向預測並且僅使用第一參考列表。第一參考列表從列表0和列表1中選擇。如果三個仿射運動矢量的參考圖片不完全相同，則實施例將第一仿射候選中的仿射運動矢量Mv0，Mv1和Mv2縮放到指定的參考圖片；或者如果兩個仿射運動矢量對應於相同的參考圖像，則該方法對第一仿射候選中的剩餘仿射運動矢量進行縮放，以設置三個仿射運動矢量的所有參考圖像相同。
本發明的實施例一方面進一步提供視訊編碼器或解碼器接收與當前圖像中的當前塊相關聯的輸入資料，並且如果當前塊以仿射畫面間模式被編碼或者將被編碼，則導出當前塊的仿射候選。仿射候選包括用於在當前塊的控制點處預測運動矢量的複數個仿射運動矢量，並且從一個或複數個相鄰已編 碼塊導出仿射運動矢量。如果選擇仿射候選者對當前塊進行編碼或解碼，則編碼器或解碼器根據仿射候選的仿射運動矢量導出仿射運動模型，並根據仿射運動模型透過定位當前參考圖像中的參考塊來對當前塊進行編碼或解碼。當前參考圖像由參考圖像索引指示，並且如果當前塊以仿射畫面間模式被編碼或者將被編碼，則透過禁用雙向預測，當前塊被限制為在單向預測中被編碼。仿射運動模型基於三個控制點計算運動，或者可以使用僅基於兩個控制點計算運動的簡化仿射運動模型。在一個實施例中，候選列表中只有一個仿射候選者，所以在不發送運動矢量預估器(MVP)索引的情況下選擇仿射候選。
在一些實施例中，如果一個或複數個仿射運動矢量的參考圖像不同於當前參考圖像的仿射運動矢量，則仿射候選中的一個或複數個仿射運動矢量被縮放到由參考圖像索引指向的當前參考圖像。如果當前塊的參考列表0和參考列表1不相同，則用畫面間預測方向標誌被發送以指示所選擇的參考列表，並且如果當前塊的參考列表0和參考列表1不相同，則畫面間預測方向標誌塊不被發送。
本發明的實施例一方面進一步提供了一種非暫時計算機可讀介質，其存儲用於使裝置的處理電路執行仿射運動補償的視訊編碼方法的程式指令。視訊編碼方法包括根據包含從當前塊的複數個相鄰已編碼塊導出的仿射運動矢量的仿射候選對當前塊進行編碼或解碼。視訊編碼方法包括：禁止雙向預測以用於以仿射畫面間模式編碼或將被編碼的塊。透過對具體實施例的以下描述，本發明的其他方面和特徵對於本領域通 常知識者將變得顯而易見。
102、122、20‧‧‧當前塊
104、124‧‧‧參考塊
110、112、114‧‧‧角圖元
130、132‧‧‧控制點
Mv0、Mv1、Mv2‧‧‧運動矢量
S300、S302、S304、S306、S308、S310、S312、S600、S602、S604、S606、S608、S610‧‧‧步驟
400‧‧‧視訊編碼器
410、512‧‧‧畫面內預測
412、514‧‧‧仿射預測
414、516‧‧‧開關
416‧‧‧加法器
418‧‧‧變換
420‧‧‧量化
422、520‧‧‧逆量化
424、522‧‧‧逆變換
426、518‧‧‧重建
428、524‧‧‧去塊濾波器
430、526‧‧‧採樣自適應偏移
432、528‧‧‧參考圖像緩衝器
434‧‧‧熵編碼器
4122、5142‧‧‧仿射畫面間預測
4124、5144‧‧‧仿射合併預測
500‧‧‧視訊解碼器
510‧‧‧熵解碼器
將參考以下圖式詳細描述作為示例提出的本公開的各種實施例，其中相同的圖式標記表示相同的元件，並且其中：第1A圖示出了根據三個控制點將當前塊映射到參考塊的六參數仿射預測。
第1B圖示出了根據兩個控制點將當前塊映射到參考塊的四參數仿射預測。
第2圖示出了基於相鄰已編碼塊導出一個或複數個仿射候選的示例。
第3圖是示出仿射合併預測方法的實施例的流程圖。
第4圖示出了根據本發明實施例的用於具有仿射預測的視訊編碼器的示例性系統框圖。
第5圖示出了根據本發明實施例的用於具有仿射預測的視訊解碼器的示例性系統框圖。
第6圖是示出仿射畫面間預測方法的實施例的流程圖。
將容易理解的是，本發明的組件，如本文圖中一般描述和示出的，可以以各種各樣的不同配置進行佈置和設計。因此，如附圖所示的本發明的系統和方法的實施例的以下更詳細的描述並不旨在限制如所要求保護的本發明的範圍，而是僅代表本發明的選定實施例。
整個說明書中對「實施例」，「一些實施例」或 類似語言的引用意味著結合實施例描述的特定特徵，結構或特性可以包括在本發明的至少一個實施例中。因此，貫穿本說明書的各個地方的短語「在一個實施例中」或「在一些實施例中」的出現不一定全部指代相同的實施例，這些實施例可以單獨地或結合一個或複數個其他實施例來實現。
此外，所描述的特徵，結構或特性可以以任何合適的方式組合在一個或複數個實施例中。然而，本領域通常知識者將認識到，可以在沒有一個或複數個具體細節，或其他方法，組件等的情況下實現本發明。在其他情況下，已知的結構或操作，未示出或詳細描述以避免模糊本發明。在下面的討論和申請專利的範圍中，術語「包括」和「包含」以開放式方式使用，因此應被解釋為「包括但不限於...」。
為了提高編碼效率或降低與仿射運動預測的視訊編碼系統相關的系統複雜度，公開了在仿射合併模式或仿射畫面間模式利用仿射運動補償的各種方法和改進。
仿射運動導出
本發明的實施例示出了用於基於子塊或基於圖元的仿射運動補償的改進的仿射運動導出。第一示例性仿射運動導出方法是用於具有三個控制點的基於子塊的六參數仿射運動預測，這三個控制點一個在左上角，一個在右上角，一個在左下角。給出三個仿射運動矢量Mv0，Mv1和Mv2，表示當前塊的三個控制點處的運動矢量，表示為：Mv0=(Mvx0，Mvy0)，Mv1=(Mvx1，Mvy1)和Mv2=(Mvx2，Mvy2)。
當前塊具有等於BlkWidth的寬度和等於 BlkHeight的高度，並且被劃分為子塊，其中每個子塊具有等於SubWidth的寬度和等於SubHeight的高度。當前塊的一行中的子塊的數量為M=BlkWidth/SubWidth，當前塊的一列中的子塊的數量為N=BlkHeight/SubHeight。第i個子塊列和第j個子塊行的子塊的運動矢量為(Mvx(i，j)，Mvy(i，j))，其中i=0，...，N-1，並且j=0，...，M-1，運動矢量被導出為： Mvx(i,j)=Mvx0+(i+1)* deltaMvxVer+(j+1)* deltaMvxHor，以及
Mvy(i,j)=Mvy0+(i+1)* deltaMvyVer+(j+1)* deltaMvyHor。 (3)其中，deltaMvxHor,deltaMvyHor,deltaMvxVer,deltaMvyVer透過如下公式計算：deltaMvxHor=(Mvx1-Mvx0)/M,deltaMvyHor=(Mvy1-Mvy0)/M,deltaMvxVer=(Mvx2-Mvx0)/N，以及deltaMvyVer=(Mvy2-Mvy0)/N。 (4)
在另一個實施例中，第i個子塊列和第j個子塊行的子塊Mv(i，j)的運動矢量為(Mvx(i，j)，Mvy(i，j))，其中i=0，...，N-1和j=0，...，M-1，運動矢量被導出為：Mvx(i,j)=Mvx0+i * deltaMvxVer+j * deltaMvxHor，以及Mvy(i,j)=Mvy0+i * deltaMvyVer+j * deltaMvyHor. (5)
為了將第一示例性仿射運動導出方法應用於基於圖元的仿射預測，可以修改等式(4)中的M和N的定義以表示當前塊的一行中的圖元數目和當前塊的一列中的圖元數目，在這種情況下，M=BlkWidth以及N=BlkHeight。位置 (i，j)處的每個圖元的運動矢量Mv(i，j)是(Mvx(i，j)， Mvy(i，j))，並且每個圖元處的運動矢量也可以透過等式(3)或等式(5)得到。
對於以仿射畫面間模式或仿射合併模式編碼或要編碼的當前塊，選擇最終候選來預測當前塊的運動。最終候選者包括用於當前塊的三個控制點的預測運動的三個仿射運動矢量Mv0，Mv1和Mv2。使用在本發明的實施例中描述的仿射運動推導方法來計算當前塊或每個子塊處的每個圖元的運動矢量。根據當前塊的運動矢量定位參考圖像中的參考塊，並且使用參考塊對當前塊進行編碼或解碼。
仿射合併候選推導
第2圖示出了基於相鄰已編碼塊導出仿射候選的示例。常規的仿射合併候選導出方法以預定的順序檢查相鄰的編碼塊a0(稱為左上角塊)，b0(稱為右上方塊)，b1(稱為右上角塊)，c0(稱為左下塊)和c1(稱為左下角塊)，並且當當前塊20是合併已編碼塊時，確定相鄰已編碼塊中的任何一個是否以仿射畫面間模式或仿射合併模式進行編碼。僅當相鄰已編碼塊中的任何一個以仿射畫面間模式或仿射合併模式進行編碼時，仿射標誌被發送以指示當前塊20是否是仿射模式。當以仿射合併模式對當前塊20進行編碼或解碼時，從相鄰已編碼塊中選擇第一可用仿射已編碼塊。如第2圖所示，仿射已編碼塊的選擇順序為從左下方塊，右上方塊，右上角塊，左下角塊至左上角塊(c0→b0→b1→c1→a0)。第一可用仿射已編碼塊的仿射運動矢量用於導出當前塊20的運動矢量。
在根據本發明的仿射合併候選導出方法的一些實施例中，從當前塊20的複數個相鄰編碼塊導出單個仿射合併候選的仿射運動矢量Mv0，Mv1和Mv2，例如Mv0從左上方的相鄰子塊(第2圖中的子塊a0，a1或a2)導出，Mv1從右上方的相鄰子塊(子塊b0或b1)導出，並且Mv2從左下方的相鄰子塊(子塊c0或c1)導出。仿射運動矢量是預測當前塊20的三個控制點處的運動矢量的運動矢量預估器(MVP)的集合。子塊不是必須是單獨的已編碼的塊(即，HEVC中的預測單元)，它可以是編碼塊的一部分。例如，子塊是與當前塊相鄰的仿射已編碼塊的一部分，或者子塊是AMVP已編碼塊。在一個實施例中，如第2圖所示，Mv0從左上角子塊(a0)導出，Mv1從上右子塊(b0)導出，Mv2從左下子塊(c0)導出。在另一個實施例中，仿射運動矢量Mv0是子塊a0，a1或a2處的第一可用運動矢量，仿射運動矢量Mv1是子塊b0或b1處的第一可用運動矢量，仿射運動矢量Mv2是在子塊c0或c1處的第一可用運動矢量。也就是說，Mv0是與當前塊相鄰的左上角子塊(子塊a0)處，當前塊上方的上左子塊(子塊a1)處，以及當前塊旁邊的左上子塊(子塊a2)處的複數個運動矢量的第一可用運動矢量；Mv1是與當前塊上方的上右子塊(子塊b0)處，當前塊相鄰的右上角子塊(子塊b1)處的複數個運動矢量的第一可用運動矢量；Mv2是與當前塊旁邊的左下子塊(子塊c0)處，當前塊相鄰的左下角子塊(子塊c1)處的複數個運動矢量的第一可用運動矢量。衍生的仿射合併候選被插入到合併候選列表中，並且從合併候選列表中選擇最終合併候 選，以對當前塊進行編碼或解碼。
仿射合併候選派生方法的另一實施例構建複數個仿射合併候選，並將仿射合併候選插入合併候選列表。例如，第一仿射合併候選包括仿射運動矢量Mv0，Mv1和Mv2，其中Mv0是第2圖中子塊a0處的運動矢量。Mv1是子塊b0處的運動矢量，Mv2是子塊c0處的運動矢量。第二仿射合併候選包括仿射運動矢量Mv0，Mv1和Mv2，其中Mv0是子塊a0處的運動矢量，Mv1是子塊b0處的運動矢量，Mv2是子塊c1處的運動矢量。本示例中的第一個和第二個仿射合併候選在Mv2中不同。第三仿射合併候選包括仿射運動矢量Mv0，Mv1和Mv2，其中Mv0是子塊a0處的運動矢量，Mv1是子塊b1處的運動矢量，Mv2是子塊c0處的運動矢量。本例中的第一和第三個仿射合併候選在Mv1中不同。第四仿射合併候選包括仿射運動矢量Mv0，Mv1和Mv2，其中Mv0是子塊a0處的運動矢量，Mv1是子塊b1處的運動矢量，Mv2是子塊c1處的運動矢量。本例中的第一和第四仿射合併候選在Mv1和Mv2中不同。前一示例中的第一仿射運動矢量Mv0可以由上左子塊(a1)或左上子塊(a2)的運動矢量代替。在一個實施例中，如果運動矢量在左上角子塊(a0)處無效或不可用，則從子塊a1或子塊a2導出第一運動矢量Mv0。對於構建當前塊的兩個仿射合併候選的示例，可以從前面示例中的第一，第二，第三和第四仿射合併候選中的任意兩個中選擇兩個仿射合併候選。在一個實施例中，兩個仿射合併候選的構造可以是先前示例中從第一，第二，第三和第四仿射合併候選獲得的前兩個候選。當前 塊透過增加合併候選列表中的仿射合併候選的數量，可以更大概率地透過仿射合併模式進行編碼，這有效地提高了使用仿射運動補償的視訊編碼系統的編碼效率。
存在改進仿射合併候選導出方法的各種修改。修改是檢查仿射合併候選中的三個仿射運動矢量的畫面間預測方向是否相同，如果畫面間預測方向不完全相同，則該仿射合併候選被表示為不存在或不可用。在一個實施例中，導出新的仿射合併候選來代替該仿射合併候選。另一個修改是檢查參考列表0和參考列表1的可用性，並相應地設置當前塊的畫面間預測方向。例如，如果所有三個仿射運動矢量Mv0，Mv1和Mv2僅在參考列表0中可用，則當前塊被編碼或被將編碼在單向預測中並且僅使用參考列表0。如果所有三個仿射運動矢量Mv0，Mv1和Mv2僅在參考列表1中可用，則當前塊被編碼或被將編碼在單向預測中並且僅使用參考列表1。第三修改檢查仿射運動矢量Mv0，Mv1和Mv2的參考圖像是否不同，如果參考圖像不完全相同，則一個實施例是將仿射合併候選表示為不存在或不可用，另一個實施例是將所有仿射運動矢量縮放到指定的參考圖像，例如具有參考索引為0的參考圖像。如果在仿射運動矢量的三個參考圖像中，兩個參考圖像是相同的，具有不同參考圖像的仿射運動矢量可以是縮放到相同的參考圖像、。
第3圖示出了具有包含本發明的實施例的仿射合併模式的視訊編碼系統的示例性流程圖，其中系統從三個不同的相鄰已編碼塊導出仿射合併候選。在步驟300中，在視訊編 碼器側接收與當前塊相關的輸入資料，或者在視訊解碼器側接收與包括當前塊的壓縮資料相對應的視訊位元流。步驟302檢查當前塊是否被編碼或者將被編碼為仿射合併模式，如果否，則在步驟312中根據另一模式對當前塊進行編碼或解碼。例如，在步驟304中，從三個相鄰已編碼塊導出第一仿射合併候選(Mv0，Mv1，Mv2)，從與當前塊相鄰的左上角子塊處的運動矢量導出第一仿射運動矢量Mv0，從當前塊的上方的上右子塊的運動矢量導出第二仿射運動矢量Mv1，以及從當前塊的左側的左下子塊的運動矢量導出第三仿射運動矢量Mv2。在步驟306中從合併候選列表中選擇最終仿射合併候選，並且在步驟308中根據最終仿射合併候選來導出仿射運動模型。在步驟310中，然後透過根據仿射運動模型定位參考塊，來對當前塊進行編碼或解碼。
第4圖示出了根據本發明的實施例的基於具有仿射運動補償的高效率視訊編碼(HEVC)的視訊編碼器400的示例性系統框圖。畫面內預測410基於當前圖像的重建視訊資料提供畫面內預測值，而仿射預測412基於來自其他圖像的視訊資料執行運動估計(motion estimation,ME)和運動補償(motion compensation,MC)，以提供預估器。由仿射預測412處理的當前圖像中的每個塊透過仿射畫面間預測4122選擇以仿射畫面間模式編碼，或者透過仿射合併預測4124以仿射合併模式進行編碼。對於以仿射畫面間模式或仿射合併模式編碼的塊，選擇最終仿射候選以使用由最終仿射候選導出的仿射運動模型來定位參考塊，並且使用該參考塊來預測該塊。仿射合 併預測4124根據複數個相鄰已編碼塊的運動矢量構建一個或複數個仿射合併候選，並將一個或複數個仿射合併候選插入合併候選列表。仿射合併模式允許在相鄰編碼塊的控制點處繼承仿射運動矢量；因此運動信息僅由合併索引發出訊號。用於選擇最終仿射候選的合併索引然後在已編碼的視訊位元流中被發送。對於以仿射畫面間模式編碼的塊，運動信息，諸如最終仿射候選中的仿射運動矢量和塊的控制點處的運動矢量之間的運動矢量差值，在已編碼的視訊位元流中被編碼。開關414從畫面內預測410和仿射預測412中選擇一個輸出，並將所選擇的預估器提供給加法器416，以形成也稱為預測殘差訊號的預測誤差。
預測殘差訊號進一步透過變換(Transformation,T)418和跟隨的量化(Quantization,Q)420進行處理。然後，經熵編碼器434對已變換和量化的殘差訊號進行編碼以形成已編碼的視訊位元流。然後，已編碼的視訊位元流與諸如運動信息的邊信息(side information)一起封裝。與邊信息相關聯的資料也被提供給熵編碼器434。當使用運動補償預測模式時，也必須在編碼器端重建參考圖像。透過逆量化(IQ)422和逆變換(IT)424來處理已變換和已量化的殘差訊號，以恢復參考圖像的預測殘差訊號。如第4圖所示，透過在重建(REC)426處加到所選擇的預估器來恢復預測殘差訊號，以產生重建的視訊資料。已重建的視訊資料可以存儲在參考圖像緩衝器(Ref.Pict.緩衝器)432中，並用於預測其它圖像。由於編碼處理，來自重建426的重建的視訊資料可能受到各種損害，因 此，在存儲於參考圖像緩衝器432之前，環路內處理去塊濾波器(DF)428和採樣自適應偏移(SAO)430應用於重建的視訊資料，以進一步提高圖像質量。來自去塊濾波器428的去塊濾波器信息和來自採樣自適應偏移430的採樣自適應偏移信息也被提供給熵編碼器434，以合併到已編碼的視訊位元流中。
用於第4圖的視訊編碼器400的相應視訊解碼器500如第5圖所示。已編碼的視訊位元流是視訊解碼器500的輸入，並由熵解碼器510解碼以恢復已變換和量化的殘差訊號DF和SAO信息以及其他系統信息。視訊解碼器500的解碼過程類似於視訊編碼器400處的重建循環，除了視訊解碼器500在仿射預測514中僅需要運動補償預測。仿射預測514包括仿射畫面間預測5142和仿射合併預測5144。以仿射畫面間模式編碼的塊透過仿射畫面間預測5142解碼，並以仿射合併模式編碼的塊透過仿射合併預測5144解碼。選擇最終仿射候選以用於以仿射畫面間模式或仿射合併模式編碼的塊，並且根據最終仿射候選參考塊被定位。開關516根據解碼模式信息從畫面內預測512選擇畫面內預估器或從仿射預測514中選擇內部預估器。透過逆量化(Inverse Quantization,IQ)520和逆變換(Inverse Transformation,IT)522來恢復經變換和量化的殘差訊號。已恢復的經變換和量化的殘差訊號透過在重建518中加回預估器來重建以產生已重建的視訊。已重建的視訊由去塊濾波器524和採樣自適應偏移526進一步處理以產生最終已解碼的視訊。如果當前解碼的圖像是參考圖像，則當前解碼圖像的重建視訊也存儲在參考圖像緩衝器528中。
第4圖、5中的視訊編碼器400和視訊解碼器500的各種組件可以由硬件組件實現，一個或複數個處理器被配置為執行存儲在存儲器中或硬件和處理器的組合中的程式指令。例如，處理器執行程式指令以控制與當前塊相關聯的輸入資料的接收。處理器配備有單個或複數個處理核心。在一些示例中，處理器執行程式指令以在編碼器400和解碼器500中的一些組件中執行功能，並且與處理器電耦合的存儲器用於存儲程式指令，對應於仿射模式的信息，塊的已重建圖像、和/或在編碼或解碼過程中的中間資料。在一些實施例中的存儲器包括非暫時性(non-transitory)計算機可讀介質，諸如半導體或固態存儲器，隨機存取存儲器(RAM)，只讀存儲器(ROM)，硬盤，光盤或其他合適的存儲介質。存儲器還可以是上面列出的兩個或複數個非暫時性計算機可讀介質的組合。如第4圖和5所示，編碼器400和解碼器500可以在相同的電子設備中實現，因此如果在相同的電子設備中實現，則編碼器400和解碼器500的各種功能組件可以被共享或重新使用。例如，第4圖中的重建426，變換418，量化420，去塊濾波器428，採樣自適應偏移430和參考圖像緩衝器432中的一個或複數個，還可以分別用作第5圖中的重建518，變換522，量化520，去塊濾波器524，採樣自適應偏移526和參考圖像緩衝器528。在一些示例中，第4圖中的畫面內預測410和仿射預測412的一部分，可以共享或重用第5圖中的畫面內預測512和仿射預測514的一部分。
仿射畫面間預測
如果當前塊以仿射畫面間模式編碼，則使用相鄰的有效已編碼塊構建候選列表。如第2圖所示，仿射候選者包括三個仿射運動矢量Mv0，Mv1和Mv2。當前塊20的左上角控制點處的仿射運動矢量Mv0從相鄰子塊a0(稱為左上角子塊)a1(被稱為上左子塊)和a2(稱為左上子塊)的運動矢量中的一個來得到。來自當前塊30的右上方控制點的仿射運動矢量Mv1從相鄰子塊b0(稱為上右子塊)和b1(稱為右上角子塊)的運動矢量中的一個來得到。當前塊20的左下控制點處的仿射運動矢量Mv2從相鄰子塊c0(稱為左下子塊)和c1(稱為左下角子塊)的運動矢量中的一個導出。例如，從相鄰子塊a0的運動矢量導出Mv0，從相鄰子塊b0的運動矢量導出Mv1，從相鄰子塊c0的運動矢量導出Mv2。在另一示例中，Mv0是相鄰子塊a0，a1和a2處的第一可用運動矢量，Mv1是在相鄰子塊b0和b1處的第一可用運動矢量，Mv2是相鄰子塊c0和c1處的第一可用運動矢量。
在仿射畫面間預測的一些實施例中，在候選列表中只有一個候選，因此當選擇仿射畫面間模式來編碼或解碼當前塊時，仿射候選總是被選擇，而不用發送運動矢量預估器(MVP)索引。當前塊中的運動矢量透過仿射運動模型根據仿射候選中的仿射運動矢量導出，並且參考塊由當前塊的運動矢量定位。如果用於導出仿射運動矢量的相鄰已編碼塊的參考圖像與當前塊的當前參考圖像不相同，則透過對相鄰已編碼塊的相應運動矢量進行縮放來導出仿射運動矢量。
根據仿射畫面間預測的一些實施例，仿射畫面間 模式編碼的塊僅允許單向預測以降低系統複雜度。換句話說，當當前塊以仿射畫面間模式編碼或將被編碼時，雙向預測被禁止。當當前塊以仿射合併模式，合併模式，AMVP模式或其任何組合編碼時，可以啟用雙向預測。在一個實施例中，當當前塊的參考列表0和參考列表1相同時，使用參考列表0而不發送畫面間預測索引inter_pred_idc；當當前塊的參考列表0和參考列表1不同時，畫面間預測索引inter_pred_idc被發送以指示當前塊使用哪個列表。
第6圖示出了包含本發明實施例的仿射畫面間預測的視訊編碼系統的示例性流程圖，其中根據是否選擇了仿射畫面間模式來禁用雙向預測。在步驟600中，在視訊編碼器側接收與當前塊相關的輸入資料，或者在視訊解碼器側接收與包括當前塊的已壓縮資料相對應的視訊位元流。步驟602檢查是否使用仿射畫面間模式進行編碼或解碼當前塊。如果選擇仿射畫面間模式來編碼當前塊，則在步驟604中視訊編碼系統透過禁用雙向預測來將當前塊限制為以單向預測進行編碼或解碼；否則在步驟610中視訊編碼系統使能用於對當前塊進行編碼或解碼的雙向預測。如果當前塊在仿射畫面間模式下編碼或解碼，則導出仿射候選，並且在步驟606中仿射運動模型根據仿射候選而被導出。仿射候選從當前塊的一個或複數個相鄰編碼塊導出，並且如果任何相鄰已編碼塊是雙向預測的，則一個列表中僅使用一個運動矢量來導出對應的仿射運動矢量。在一個實施例中的仿射候選包括兩個仿射運動矢量，而另一實施例中的仿射候選包括三個仿射運動矢量。在步驟608中，透過根 據在步驟606中導出的仿射運動模型定位參考塊來對當前塊進行編碼或解碼。
仿射畫面間預測方法的各種實施例可以在第4圖中的視訊編碼器400或第5圖中的視訊解碼器500中實現。編碼器400和解碼器500可以透過共享具有仿射預測412或514的組件的至少一部分或具有與畫面內預測410或512和仿射預測412或514並行的附加的組件，來進一步包括畫面間預測。 例如，當統一合併候選列表用於仿射合併模式和常規合併模式時，仿射合併預測4124使用畫面間合併預測共享組件；類似地，當統一的畫面間候選列表用於仿射畫面間模式和常規AMVP模式時，仿射畫面間預測4122共享具有畫面間合併預測的組件。在該示例中，單個合併索引或MVP索引可以被發送來指示仿射模式或常規畫面間模式的使用。
可以使用簡化的仿射運動模型來實現上述仿射運動導出方法，仿射合併預測方法或仿射畫面間預測方法，例如，使用兩個控制點而不是三個控制點。示例性的簡化仿射運動模型仍然使用相似的仿射運動模型的數學方程，但是透過仿射運動矢量Mv0和Mv1導出左下控制點的仿射運動矢量Mv2。或者，可以透過仿射運動矢量Mv0和Mv2導出用於右上角控制點的仿射運動矢量Mv1，或者可以透過仿射運動矢量Mv1和Mv2導出用於左上控制點的仿射運動矢量Mv0。
可以在集成到執行上述處理的視訊壓縮芯片的電路中或視訊壓縮軟體的程式代碼中實作仿射運動導出方法，仿射合併預測方法或仿射畫面間預測方法的實施例。例如，可以 在計算機處理器，數字訊號處理器(DSP)，微處理器或現場可編程門陣列(DSP)上執行的程式代碼中實現仿射運動導出方法，仿射合併預測方法或仿射畫面間預測方法FPGA)。可以透過執行定義本發明所體現的特定方法的機器可讀軟體代碼或韌體代碼來將這些處理器配置成執行根據本發明的特定任務。
在不脫離本發明的精神或基本特徵的情況下，本發明可以以其他具體形式實施。所描述的例子僅在所有方面被認為是說明性的而不是限制性的。因此，本發明的範圍由所附申請專利範圍而不是前面的描述來指示。屬於申請專利範圍的等同物的含義和範圍內的所有變化將被包括在其範圍內。
S300、S302、S304、S306、S308、S310、S312‧‧‧步驟

Claims (22)

  1. 一種在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，包括：接收與一當前圖像中的一當前塊相關聯的輸入資料；如果該當前塊以仿射合併模式被編碼或將被編碼，則導出包括三個仿射運動矢量Mv0，Mv1和Mv2的該當前塊的一第一仿射合併候選，用於在該當前塊的複數個控制點處預測複數個運動矢量，其中Mv0自該當前塊的一第一相鄰已編碼塊的一運動矢量而被導出，Mv1自該當前塊的一第二相鄰已編碼塊的一運動矢量而被導出，並且Mv2自該當前塊的一第三相鄰已編碼塊的一運動矢量而被導出；如果該第一仿射合併候選被選擇以編碼或解碼該當前塊，則根據該第一仿射合併候選的該仿射運動矢量Mv0，Mv1和Mv2導出一仿射運動模型；以及根據該仿射運動模型透過定位該當前塊的一參考圖像中一參考塊來對該當前塊進行編碼或解碼。
  2. 如申請專利範圍第1項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中該第一相鄰已編碼塊是與該當前塊相鄰的一左上角子塊，該第二相鄰已編碼塊是該當前塊上方的一上右子塊，並且該第三相鄰已編碼塊是該當前塊旁邊的一左下子塊。
  3. 如申請專利範圍第1項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中，Mv0是與該當前塊相鄰的一左上角子塊處，該當前塊上方的 一上左子塊處，以及該當前塊旁邊的一左上子塊處的複數個運動矢量的一第一可用運動矢量；Mv1是與該當前塊上方的一上右子塊處，該當前塊相鄰的一右上角子塊處的複數個運動矢量的一第一可用運動矢量；Mv2是與該當前塊旁邊的一左下子塊處，該當前塊相鄰的一左下角子塊處的複數個運動矢量的一第一可用運動矢量。
  4. 如申請專利範圍第1項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，還包括導出包括三個仿射運動矢量的一第二仿射合併候選，並且如果該第二仿射合併候選被選擇來對該當前塊進行編碼或解碼，則根據該第二仿射合併候選的仿射運動矢量導出該仿射運動模型，其中該第二仿射合併候選中的至少一個仿射運動矢量與該第一仿射合併候選中的相應仿射運動矢量不同。
  5. 如申請專利範圍第4項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中該第一仿射合併候选和該第二仿射合併候選具有相同的複數個第一仿射運動矢量和複數個第二仿射運動矢量，該第一仿射合併候選中的一第三仿射運動矢量是該當前塊旁邊的一左下子塊處的一運動矢量，以及該第二仿射合併候選中的一第三仿射運動矢量是該當前塊相鄰的一左下角子塊處的一運動矢量。
  6. 如申請專利範圍第4項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中該第一仿射合併候选和該第二仿射合併候選具有相同的複數個第一和複數個第 三仿射運動矢量，該第一仿射合併候選中的一第二仿射運動矢量是該當前塊上方的一上右子塊處的一運動矢量，以及該第二仿射合併候選中的一第二仿射運動矢量是該當前塊相鄰的右上角子塊處的一運動矢量。
  7. 如申請專利範圍第4項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中該第一仿射合併候選者和該第二仿射合併候選具有相同的一第一仿射運動矢量，該第一仿射合併候選中的一第二仿射運動矢量是該當前塊上方的一右上子塊處的一運動矢量，該第二仿射合併候選中的一第二仿射運動矢量是該當前塊相鄰的右上角子塊處的一運動矢量，以及該第一仿射合併候選中的一第三仿射運動矢量是該當前塊旁邊的一左下子塊處的一運動矢量，以及該第二仿射合併候選中的一第三仿射運動矢量是該當前塊相鄰的一左下角子塊處的一運動矢量。
  8. 如申請專利範圍第1項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中如果該三個仿射運動矢量Mv0，Mv1和Mv2的畫面間預測方向或參考圖像不完全相同，則該第一仿射合併候選者被表示為不存在。
  9. 如申請專利範圍第1項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中，如果所有該三個仿射運動矢量Mv0，Mv1和Mv2僅在該第一參考列表中可用，則該第一仿射合併候選的畫面間預測方向是單向預測，並且僅使用一第一參考列表，該第一個參考列表從列表0和列表1中選擇。
  10. 如申請專利範圍第1項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，還包括如果該三個仿射運動矢量的參考圖片不全都相同，則將該第一仿射合併候選中的該仿射運動矢量Mv0，Mv1和Mv2縮放到一指定的參考圖像。
  11. 如申請專利範圍第1項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，還包括縮放該第一仿射合併候選中的該三個仿射運動矢量中的一個，以將該第一仿射合併候選中的該三個仿射運動矢量的所有參考圖像設置為相同。
  12. 一種在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，包括：接收與一當前圖像中的一當前塊相關聯的輸入資料；如果該當前塊以仿射畫面間模式被編碼或將被編碼，則導出包括複數個仿射運動矢量的該當前塊的一仿射合併候選，用於在該當前塊的複數個控制點處預測複數個運動矢量，其中該複數個仿射運動矢量從一個或複數個相鄰已編碼塊而被導出；如果該仿射候選被選擇來編碼或解碼該當前塊，則根據該仿射候選的該複數個仿射運動矢量導出一仿射運動模型；以及根據該仿射運動模型透過將定位在一當前參考圖像中的一參考塊來對該當前塊進行編碼或解碼，其中該當前參考圖像由一參考圖像索引指出； 其中如果該當前塊以仿射畫面間模式而被編碼或者將被編碼，該當前塊透過禁用雙向預測而被限制為以單向預測來編碼。
  13. 如申請專利範圍第12項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中該仿射運動模型是使用兩個控制點的一簡化仿射運動模型。
  14. 如申請專利範圍第12項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中該仿射候選被選擇為對該當前塊進行編碼或解碼，而不發送一運動矢量預估器索引。
  15. 如申請專利範圍第12項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，還包括如果該一個或複數個仿射運動矢量的複數個參考圖像與該當前參考圖像不相同，則將該仿射候選中的一個或複數個仿射運動矢量縮放到由該參考圖像索引指向的該當前參考圖像。
  16. 如申請專利範圍第12項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中，如果該當前塊的參考列表0和參考列表1不相同，則一畫面間預測方向標誌被發送以指示一選擇的參考列表，並且如果該當前塊的參考列表0和參考列表1相同，則該畫面間預測方向標誌不被發送。
  17. 如申請專利範圍第12項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中，該仿射候選中的該複數個仿射運動矢量從與該當前塊相鄰的一左上角子塊 處，該當前塊上方的一上右子塊處，以及該當前塊旁邊的一左下子塊的複數個運動矢量而被導出。
  18. 如申請專利範圍第12項所述之在一視訊編碼系統中用仿射運動補償處理視訊資料的方法，其中該仿射運動矢量是Mv0，Mv1和Mv2，Mv0是與該當前塊相鄰的左上角子塊處，該當前塊上方的一上左子塊處，以及該當前塊旁邊的一左上子塊處的複數個運動矢量的一第一可用運動矢量，Mv1是與該當前塊上方的一右上子塊處，該當前塊相鄰的一右上角子塊處的複數個運動矢量的一第一可用運動矢量，Mv2是與該當前塊旁邊的一左下子塊處，該當前塊相鄰的一左下角子塊處的複數個運動矢量的一第一可用運動矢量。
  19. 一種在視訊編碼系統中用仿射運動補償處理視訊資料的裝置，所述裝置包括一個或複數個電子電路，被配置為：接收與一當前圖片中的一當前塊相關聯的輸入資料；如果該當前塊以仿射合併模式被編碼或將被編碼，則導出包括三個仿射運動矢量Mv0，Mv1和Mv2的該當前塊的一第一仿射合併候選，用於在該當前塊的複數個控制點處預測複數個運動矢量，其中Mv0自該當前塊的一第一相鄰已編碼塊的一運動矢量而被導出，Mv1自該當前塊的一第二相鄰已編碼塊的一運動矢量而被導出，並且Mv2自該當前塊的一第三相鄰已編碼塊的一運動矢量而被導出；如果該第一仿射合併候選被選擇以編碼或解碼該當前塊，則根據該第一仿射合併候選的該仿射運動矢量Mv0，Mv1和Mv2導出一仿射運動模型；以及 根據該仿射運動模型透過定位該當前塊的一參考圖像中一參考塊來對該當前塊進行編碼或解碼。
  20. 一種在視訊編碼系統中用仿射運動補償處理視訊資料的裝置，所述裝置包括一個或複數個電子電路，被配置為：接收與一當前圖片中的一當前塊相關聯的輸入資料；如果該當前塊以仿射畫面間模式被編碼或將被編碼，則導出包括複數個仿射運動矢量的該當前塊的一仿射合併候選，用於在該當前塊的複數個控制點處預測複數個運動矢量，其中該複數個仿射運動矢量從一個或複數個相鄰已編碼塊而被導出；如果該仿射候選被選擇來編碼或解碼該當前塊，則根據該仿射候選的該複數個仿射運動矢量導出一仿射運動模型；以及根據該仿射運動模型透過定位在一當前參考圖像中的一參考塊來對該當前塊進行編碼或解碼，其中該當前參考圖像由一參考圖像索引指出；其中如果該當前塊以仿射畫面間模式而被編碼或者將被編碼，該當前塊透過禁用雙向預測而被限制為以單向預測來編碼。
  21. 一種非瞬時計算機可讀介質，該非瞬時計算機可讀介質存儲使一裝置的一處理電路執行仿射運動補償的一視訊編碼方法的程式指令，以及該執行仿射運動補償的一視訊編碼方法包括：接收與一當前圖像中的一當前塊相關聯的輸入資料； 如果該當前塊以仿射合併模式被編碼或將被編碼，則導出包括三個仿射運動矢量Mv0，Mv1和Mv2的該當前塊的一第一仿射合併候選，用於在該當前塊的複數個控制點處預測複數個運動矢量，其中Mv0自該當前塊的一第一相鄰已編碼塊的一運動矢量而被導出，Mv1自該當前塊的一第二相鄰已編碼塊的一運動矢量而被導出，並且Mv2自該當前塊的一第三相鄰已編碼塊的一運動矢量而被導出；如果該第一仿射合併候選被選擇以編碼或解碼該當前塊，則根據該第一仿射合併候選的該仿射運動矢量Mv0，Mv1和Mv2導出一仿射運動模型；以及根據該仿射運動模型透過定位該當前塊的一參考圖像中一參考塊來對該當前塊進行編碼或解碼。
  22. 一種非瞬時計算機可讀介質，該非瞬時計算機可讀介質存儲使設備的處理電路執行仿射運動補償的視訊編碼方法的程式指令，並且該執行仿射運動補償的視訊編碼方法包括：接收與一當前圖片中的一當前塊相關聯的輸入資料；如果該當前塊以仿射畫面間模式被編碼或將被編碼，則導出包括複數個仿射運動矢量的該當前塊的一仿射合併候選，用於在該當前塊的複數個控制點處預測複數個運動矢量，其中該複數個仿射運動矢量從一個或複數個相鄰已編碼塊而被導出；如果該仿射候選被選擇來編碼或解碼該當前塊，則根據該仿射候選的該複數個仿射運動矢量導出一仿射運動模型；以及 根據該仿射運動模型透過定位在一當前參考圖像中的一參考塊來對該當前塊進行編碼或解碼，其中該當前參考圖像由一參考圖像索引指出；其中如果該當前塊以仿射畫面間模式而被編碼或者將被編碼，該當前塊透過禁用雙向預測而被限制為以單向預測來編碼。
TW106106616A 2016-03-01 2017-03-01 利用仿射運動補償的視訊編碼方法與裝置 TWI619374B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
??PCT/CN2016/075024 2016-03-01
PCT/CN2016/075024 WO2017147765A1 (en) 2016-03-01 2016-03-01 Methods for affine motion compensation
PCT/CN2017/074965 WO2017148345A1 (en) 2016-03-01 2017-02-27 Method and apparatus of video coding with affine motion compensation
??PCT/CN2017/074965 2017-02-27

Publications (2)

Publication Number Publication Date
TW201803351A TW201803351A (zh) 2018-01-16
TWI619374B true TWI619374B (zh) 2018-03-21

Family

ID=59742559

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106106616A TWI619374B (zh) 2016-03-01 2017-03-01 利用仿射運動補償的視訊編碼方法與裝置

Country Status (6)

Country Link
US (1) US20190058896A1 (zh)
EP (1) EP3414905A4 (zh)
CN (1) CN108605137A (zh)
BR (1) BR112018067475A2 (zh)
TW (1) TWI619374B (zh)
WO (2) WO2017147765A1 (zh)

Families Citing this family (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3432578A4 (en) 2016-03-24 2019-11-20 LG Electronics Inc. METHOD AND APPARATUS FOR INTER-PREDICTION IN A VIDEO CODING SYSTEM
WO2018056703A1 (ko) 2016-09-20 2018-03-29 주식회사 케이티 비디오 신호 처리 방법 및 장치
US11356693B2 (en) * 2016-09-29 2022-06-07 Qualcomm Incorporated Motion vector coding for video coding
US10602180B2 (en) * 2017-06-13 2020-03-24 Qualcomm Incorporated Motion vector prediction
WO2019004283A1 (ja) * 2017-06-28 2019-01-03 シャープ株式会社 動画像符号化装置及び動画像復号装置
US11082721B2 (en) * 2017-09-07 2021-08-03 Lg Electronics Inc. Method and apparatus for entropy-encoding and entropy-decoding video signal
EP3468195A1 (en) * 2017-10-05 2019-04-10 Thomson Licensing Improved predictor candidates for motion compensation
EP3468196A1 (en) * 2017-10-05 2019-04-10 Thomson Licensing Methods and apparatuses for video encoding and video decoding
US10582212B2 (en) * 2017-10-07 2020-03-03 Google Llc Warped reference motion vectors for video compression
US20190116376A1 (en) * 2017-10-12 2019-04-18 Qualcomm Incorporated Motion vector predictors using affine motion model in video coding
WO2019072187A1 (en) * 2017-10-13 2019-04-18 Huawei Technologies Co., Ltd. PRUNING A MOVEMENT MODEL CANDIDATE LIST FOR AN INTERPRETING
US11889100B2 (en) * 2017-11-14 2024-01-30 Qualcomm Incorporated Affine motion vector prediction in video coding
EP3711299A1 (en) 2017-11-14 2020-09-23 Qualcomm Incorporated Unified merge candidate list usage
CN112055205B (zh) * 2017-12-12 2021-08-03 华为技术有限公司 视频数据的帧间预测方法和装置、视频编解码器、存储介质
US20190208211A1 (en) * 2018-01-04 2019-07-04 Qualcomm Incorporated Generated affine motion vectors
US20190222834A1 (en) * 2018-01-18 2019-07-18 Mediatek Inc. Variable affine merge candidates for video coding
WO2019147079A1 (ko) * 2018-01-25 2019-08-01 주식회사 윌러스표준기술연구소 서브블록 기반의 모션 보상을 이용한 비디오 신호 처리 방법 및 장치
EP3518536A1 (en) * 2018-01-26 2019-07-31 Thomson Licensing Method and apparatus for adaptive illumination compensation in video encoding and decoding
EP3744094A4 (en) * 2018-01-26 2021-11-03 MediaTek Inc. METHOD AND DEVICE FOR AFFINE INTER-PREDICTION FOR A VIDEO ENCODING SYSTEM
WO2019194513A1 (ko) * 2018-04-01 2019-10-10 엘지전자 주식회사 어파인 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치
KR102568879B1 (ko) 2018-04-01 2023-08-21 엘지전자 주식회사 어파인 움직임 예측에 기반한 영상 코딩 방법 및 그 장치
CN116708841A (zh) * 2018-04-03 2023-09-05 英迪股份有限公司 对图像解码和编码的方法、非暂态计算机可读存储介质
WO2019199141A1 (ko) * 2018-04-13 2019-10-17 엘지전자 주식회사 비디오 코딩 시스템에서 인터 예측 방법 및 장치
HUE063886T2 (hu) * 2018-04-24 2024-02-28 Lg Electronics Inc Eljárás és berendezés képek közötti predikcióhoz videó kódoló rendszerben
US11470346B2 (en) * 2018-05-09 2022-10-11 Sharp Kabushiki Kaisha Systems and methods for performing motion vector prediction using a derived set of motion vectors
US11902560B2 (en) * 2018-05-09 2024-02-13 Interdigital Vc Holdings, Inc. Motion compensation for video encoding and decoding
GB2593020B (en) * 2018-05-24 2022-12-28 Kt Corp Method and apparatus for processing video signal
WO2019235822A1 (ko) * 2018-06-04 2019-12-12 엘지전자 주식회사 어파인 움직임 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치
TWI723430B (zh) * 2018-06-19 2021-04-01 大陸商北京字節跳動網絡技術有限公司 不同精度的多個候選
US20210297691A1 (en) * 2018-06-20 2021-09-23 Mediatek Inc. Method and Apparatus of Motion Vector Buffer Management for Video Coding System
WO2019244809A1 (ja) * 2018-06-21 2019-12-26 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
WO2020005572A1 (en) * 2018-06-29 2020-01-02 Interdigital Vc Holdings, Inc. Virtual temporal affine candidates
TWI731363B (zh) * 2018-07-01 2021-06-21 大陸商北京字節跳動網絡技術有限公司 高效的仿射Ｍｅｒｇｅ運動向量推導
CN116095312A (zh) 2018-08-04 2023-05-09 北京字节跳动网络技术有限公司 视频处理方法、装置和计算机可读介质
WO2020032526A1 (ko) 2018-08-06 2020-02-13 엘지전자 주식회사 영상 코딩 시스템에서 컨스트럭티드 어파인 mvp 후보를 사용하는 어파인 움직임 예측에 기반한 영상 디코딩 방법 및 장치
US11503329B2 (en) 2018-08-17 2022-11-15 Hfi Innovation Inc. Method and apparatus of simplified sub-mode for video coding
CN110868602B (zh) * 2018-08-27 2024-04-12 华为技术有限公司 视频编码器、视频解码器及相应方法
CN117499671A (zh) * 2018-08-27 2024-02-02 华为技术有限公司 一种视频图像预测方法及装置
US10944984B2 (en) 2018-08-28 2021-03-09 Qualcomm Incorporated Affine motion prediction
WO2020043004A1 (zh) * 2018-08-28 2020-03-05 华为技术有限公司 候选运动信息列表的构建方法、帧间预测方法及装置
CN116647696A (zh) * 2018-09-06 2023-08-25 Lg电子株式会社 图像解码方法、图像编码方法、存储介质和发送方法
WO2020050281A1 (ja) 2018-09-06 2020-03-12 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法、および復号方法
CN110891174B (zh) 2018-09-08 2023-03-10 北京字节跳动网络技术有限公司 不同视频块尺寸的仿射模式计算
KR102362840B1 (ko) * 2018-09-12 2022-02-14 엘지전자 주식회사 영상 코딩 시스템에서 서브 블록 단위의 움직임 예측에 기반한 영상 디코딩 방법 및 장치
US11750836B2 (en) 2018-09-13 2023-09-05 Interdigital Vc Holdings, Inc. Virtual temporal affine candidates
US11057636B2 (en) 2018-09-17 2021-07-06 Qualcomm Incorporated Affine motion prediction
WO2020058956A1 (en) * 2018-09-23 2020-03-26 Beijing Bytedance Network Technology Co., Ltd. Non-affine blocks predicted from affine motion
WO2020058955A1 (en) 2018-09-23 2020-03-26 Beijing Bytedance Network Technology Co., Ltd. Multiple-hypothesis affine mode
CA3141117A1 (en) * 2018-09-25 2020-04-02 Digitalinsights Inc. Method and device for encoding or decoding image on basis of inter mode
WO2020065569A1 (en) * 2018-09-26 2020-04-02 Beijing Bytedance Network Technology Co., Ltd. Mode dependent affine inheritance
US10896494B1 (en) * 2018-09-27 2021-01-19 Snap Inc. Dirty lens image correction
US11012687B2 (en) * 2018-10-01 2021-05-18 Tencent America LLC Method and apparatus for video coding
WO2020069651A1 (en) * 2018-10-05 2020-04-09 Huawei Technologies Co., Ltd. A candidate mv construction method for affine merge mode
WO2020070612A1 (en) 2018-10-06 2020-04-09 Beijing Bytedance Network Technology Co., Ltd. Improvement for temporal gradient calculating in bio
WO2020075053A1 (en) 2018-10-08 2020-04-16 Beijing Bytedance Network Technology Co., Ltd. Generation and usage of combined affine merge candidate
JP2022504753A (ja) * 2018-10-10 2022-01-13 インターデイジタル ヴィーシー ホールディングス インコーポレイテッド ビデオエンコーディングおよびデコーディングにおけるアフィンモードシグナリング
GB2578150C (en) 2018-10-18 2022-05-18 Canon Kk Video coding and decoding
GB2578151B (en) * 2018-10-18 2021-06-09 Canon Kk Video coding and decoding
WO2020084470A1 (en) * 2018-10-22 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Storage of motion parameters with clipping for affine mode
WO2020084556A1 (en) * 2018-10-24 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Sub-block motion candidate list in video coding
CN111107373B (zh) * 2018-10-29 2023-11-03 华为技术有限公司 基于仿射预测模式的帧间预测的方法及相关装置
US11212521B2 (en) * 2018-11-07 2021-12-28 Avago Technologies International Sales Pte. Limited Control of memory bandwidth consumption of affine mode in versatile video coding
SG11202104749RA (en) * 2018-11-08 2021-06-29 Guangdong Oppo Mobile Telecommunications Corp Ltd Image signal encoding/decoding method and apparatus therefor
CN112997496A (zh) * 2018-11-14 2021-06-18 北京字节跳动网络技术有限公司 仿射预测模式的改进
WO2020098803A1 (en) * 2018-11-15 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Harmonization between affine mode and other inter coding tools
WO2020098812A1 (en) * 2018-11-16 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Pruning method for history-based affine parameters
WO2020098810A1 (en) 2018-11-17 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Merge with motion vector difference in video processing
CN113170198B (zh) * 2018-11-22 2022-12-09 北京字节跳动网络技术有限公司 子块时域运动矢量预测
WO2020103935A1 (en) * 2018-11-22 2020-05-28 Beijing Bytedance Network Technology Co., Ltd. Blending method for inter prediction with geometry partition
WO2020108652A1 (en) * 2018-11-29 2020-06-04 Beijing Bytedance Network Technology Co., Ltd. Interaction between intra block copy mode and sub-block based motion vector prediction mode
CN109640097B (zh) * 2018-12-07 2021-08-03 辽宁师范大学 自适应因子的视频仿射运动估计方法
CN113170148A (zh) * 2018-12-08 2021-07-23 北京字节跳动网络技术有限公司 减少仿射继承所需的ctu内存储
MX2021007225A (es) * 2018-12-17 2021-09-21 Interdigital Vc Holdings Inc Combinacion de herramientas de codificacion de diferencia de vector de movimiento con otros modos de movimiento.
KR20210103539A (ko) * 2018-12-20 2021-08-23 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 인접 샘플 감소에 의해 선형 또는 아핀 변환을 사용하는 인트라 예측
EP3868107A4 (en) 2018-12-21 2021-12-15 Beijing Bytedance Network Technology Co. Ltd. MOTION VECTOR ACCURACY IN INTERACTING WITH MOTION VECTOR DIFFERENCE MODE
BR112021012479A2 (pt) * 2018-12-28 2021-09-08 Jvckenwood Corporation Dispositivo de codificação de imagem em movimento, método de codificação de imagem em movimento, programa de codificação de imagem em movimento, dispositivo de decodificação de imagem em movimento, método de decodificação de imagem em movimento e programa de decodificação de imagem em movimento
WO2020141911A1 (ko) * 2019-01-02 2020-07-09 엘지전자 주식회사 화면간 예측을 사용하여 비디오 신호를 처리하기 위한 방법 및 장치
US10904550B2 (en) * 2019-01-12 2021-01-26 Tencent America LLC Method and apparatus for video coding
US11025951B2 (en) * 2019-01-13 2021-06-01 Tencent America LLC Method and apparatus for video coding
WO2020147773A1 (en) * 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Inserting order of motion candidates in lut
US11202089B2 (en) * 2019-01-28 2021-12-14 Tencent America LLC Method and apparatus for determining an inherited affine parameter from an affine model
CN109919027A (zh) * 2019-01-30 2019-06-21 合肥特尔卡机器人科技股份有限公司 一种道路交通车辆的特征提取系统
CN113491125A (zh) 2019-02-22 2021-10-08 北京字节跳动网络技术有限公司 基于历史的仿射模式子表
US11134262B2 (en) * 2019-02-28 2021-09-28 Tencent America LLC Method and apparatus for video coding
CN113475066A (zh) * 2019-03-11 2021-10-01 松下电器（美国）知识产权公司 编码装置、解码装置、编码方法和解码方法
JP2022525401A (ja) * 2019-03-11 2022-05-13 ヴィド スケール インコーポレイテッド 対称的マージモード動きベクトル符号化
EP3939262A4 (en) * 2019-03-11 2022-11-09 Alibaba Group Holding Limited METHOD, DEVICE AND SYSTEM FOR DETERMINING PREDICTION WEIGHT FOR MERGE MODE
CN113785586B (zh) * 2019-04-12 2023-12-22 寰发股份有限公司 用于视频编解码系统的简化仿射子块处理的方法及装置
KR20210153128A (ko) * 2019-04-25 2021-12-16 오피 솔루션즈, 엘엘씨 인터 예측에서의 병합 모드 후보들에 대한 글로벌 모션
CN115174921B (zh) * 2019-05-03 2023-04-04 华为技术有限公司 由视频解码器实现的解码方法及其相关装置和存储介质
WO2020226359A1 (ko) * 2019-05-03 2020-11-12 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN113841408B (zh) * 2019-05-17 2024-02-06 北京字节跳动网络技术有限公司 用于视频处理的运动信息确定和存储
WO2020233661A1 (en) 2019-05-21 2020-11-26 Beijing Bytedance Network Technology Co., Ltd. Syntax signaling in sub-block merge mode
EP3979650A4 (en) 2019-06-14 2023-04-12 Lg Electronics Inc. METHOD AND DEVICE FOR IMAGE CODING USING MOTION VECTOR DIFFERENCES
MX2022000234A (es) * 2019-07-05 2022-04-07 Lg Electronics Inc Metodo y dispositivo de codificacion/decodificacion de video para derivar el indice de ponderacion para prediccion bidireccional de candidato de fusion, y metodo para transmitir flujo de bits.
JP2022544260A (ja) 2019-08-13 2022-10-17 北京字節跳動網絡技術有限公司 サブブロックに基づくインター予測における動き精度
CN110636301B (zh) * 2019-09-18 2021-08-03 浙江大华技术股份有限公司 仿射预测方法、计算机设备和计算机可读存储介质
KR20220078600A (ko) 2019-10-18 2022-06-10 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 서브픽처들의 파라미터 세트 시그널링에서의 신택스 제약들
CN111327901B (zh) * 2020-03-10 2023-05-30 北京达佳互联信息技术有限公司 视频编码方法、装置、存储介质及编码设备
US11582474B2 (en) * 2020-08-03 2023-02-14 Alibaba Group Holding Limited Systems and methods for bi-directional gradient correction
US20230073342A1 (en) * 2020-12-29 2023-03-09 Vid Scale, Inc. Adaptive control point selection for affine motion model based video coding
CN113068041B (zh) * 2021-03-12 2022-02-08 天津大学 一种智能仿射运动补偿编码方法
WO2023051600A1 (en) * 2021-09-28 2023-04-06 Beijing Bytedance Network Technology Co., Ltd. Method, apparatus and medium for video processing
WO2023134564A1 (en) * 2022-01-14 2023-07-20 Mediatek Inc. Method and apparatus deriving merge candidate from affine coded blocks for video coding
WO2024016844A1 (en) * 2022-07-19 2024-01-25 Mediatek Inc. Method and apparatus using affine motion estimation with control-point motion vector refinement

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI331728B (en) * 2005-12-29 2010-10-11 Ind Tech Res Inst Object tracking systems and methods
TW201132131A (en) * 2009-10-30 2011-09-16 Qualcomm Inc Global motion parameter estimation using block-based motion vectors
TW201338549A (zh) * 2011-11-07 2013-09-16 Qualcomm Inc 產生額外合併候選者
US20140269923A1 (en) * 2013-03-15 2014-09-18 Nyeong-kyu Kwon Method of stabilizing video, post-processing circuit and video decoder including the same
CN102685504B (zh) * 2011-03-10 2015-08-19 华为技术有限公司 视频图像的编解码方法、编码装置、解码装置及其系统
US20160050430A1 (en) * 2013-04-02 2016-02-18 Vid Scale, Inc. Enhanced temporal motion vector prediction for scalable video coding

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW550953B (en) * 2000-06-16 2003-09-01 Intel Corp Method of performing motion estimation
KR100571920B1 (ko) * 2003-12-30 2006-04-17 삼성전자주식회사 움직임 모델을 이용한 매쉬 기반의 움직임 보상방법을제공하는 영상의 부호화 방법 및 그 부호화 장치
CN102377992B (zh) * 2010-08-06 2014-06-04 华为技术有限公司 运动矢量的预测值的获取方法和装置
US9165379B2 (en) * 2010-09-02 2015-10-20 Lg Electronics Inc. Method for encoding and decoding video, and apparatus using same
CN102685477B (zh) * 2011-03-10 2014-12-10 华为技术有限公司 获取用于合并模式的图像块的方法和设备
WO2016008157A1 (en) * 2014-07-18 2016-01-21 Mediatek Singapore Pte. Ltd. Methods for motion compensation using high order motion model
CN104935938B (zh) * 2015-07-15 2018-03-30 哈尔滨工业大学 一种混合视频编码标准中帧间预测方法
CN108600749B (zh) * 2015-08-29 2021-12-28 华为技术有限公司 图像预测的方法及设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI331728B (en) * 2005-12-29 2010-10-11 Ind Tech Res Inst Object tracking systems and methods
TW201132131A (en) * 2009-10-30 2011-09-16 Qualcomm Inc Global motion parameter estimation using block-based motion vectors
CN102685504B (zh) * 2011-03-10 2015-08-19 华为技术有限公司 视频图像的编解码方法、编码装置、解码装置及其系统
TW201338549A (zh) * 2011-11-07 2013-09-16 Qualcomm Inc 產生額外合併候選者
US20140269923A1 (en) * 2013-03-15 2014-09-18 Nyeong-kyu Kwon Method of stabilizing video, post-processing circuit and video decoder including the same
US20160050430A1 (en) * 2013-04-02 2016-02-18 Vid Scale, Inc. Enhanced temporal motion vector prediction for scalable video coding

Also Published As

Publication number Publication date
EP3414905A1 (en) 2018-12-19
CN108605137A (zh) 2018-09-28
US20190058896A1 (en) 2019-02-21
BR112018067475A2 (pt) 2019-01-02
EP3414905A4 (en) 2019-08-21
TW201803351A (zh) 2018-01-16
WO2017147765A1 (en) 2017-09-08
WO2017148345A1 (en) 2017-09-08

Similar Documents

Publication Publication Date Title
TWI619374B (zh) 利用仿射運動補償的視訊編碼方法與裝置
US11375226B2 (en) Method and apparatus of video coding with affine motion compensation
CN110581997B (zh) 运动矢量精度细化
TWI617185B (zh) 具有仿射運動補償的視訊編碼的方法以及裝置
CN111937391B (zh) 用于视频编解码系统中的子块运动补偿的视频处理方法和装置
TWI720532B (zh) 在視訊編解碼系統中視訊處理的方法以及裝置
TWI702834B (zh) 視訊編解碼系統中具有重疊塊運動補償的視訊處理的方法以及裝置
JP2023052340A (ja) イントラブロックコピーモードとインター予測ツールとの間の相互作用
US20160330444A1 (en) Method And Apparatus For Processing A Video Signal
CN110620930A (zh) 具有obmc的视频处理方法及装置
JP2024028985A (ja) 映像を符号化する方法、電子装置、コンピュータ読み取り可能な記憶媒体及びコンピュータプログラム
CN113287317A (zh) 并置的局部照明补偿和修改的帧间编解码工具
TWI738081B (zh) 視訊編碼系統中結合多重預測子用於區塊預測之方法和裝置
KR20190070313A (ko) 인터 예측 방법 및 그 장치
JP2024038295A (ja) ビデオ符号化のための動きベクトル予測
JP2023063506A (ja) 構築されたアフィンマージ候補を導出する方法
KR101510585B1 (ko) 움직임 정보 부호화/복호화 장치 및 움직임 정보를 부호화/복호화하는 방법
CN111247804B (zh) 图像处理的方法与装置
CN111699689B (zh) 视频处理方法、装置和设备

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees