TW202002647A - 使用一個或多個查找表來按順序存儲先前編碼的運動信息並使用它們來編碼後面的塊的概念 - Google Patents

使用一個或多個查找表來按順序存儲先前編碼的運動信息並使用它們來編碼後面的塊的概念 Download PDF

Info

Publication number
TW202002647A
TW202002647A TW108123177A TW108123177A TW202002647A TW 202002647 A TW202002647 A TW 202002647A TW 108123177 A TW108123177 A TW 108123177A TW 108123177 A TW108123177 A TW 108123177A TW 202002647 A TW202002647 A TW 202002647A
Authority
TW
Taiwan
Prior art keywords
motion
tables
block
candidates
patent application
Prior art date
Application number
TW108123177A
Other languages
English (en)
Other versions
TWI723444B (zh
Inventor
張莉
張凱
劉鴻彬
王悅
Original Assignee
大陸商北京字節跳動網絡技術有限公司
美商字節跳動有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商北京字節跳動網絡技術有限公司, 美商字節跳動有限公司 filed Critical 大陸商北京字節跳動網絡技術有限公司
Publication of TW202002647A publication Critical patent/TW202002647A/zh
Application granted granted Critical
Publication of TWI723444B publication Critical patent/TWI723444B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding

Abstract

描述了使用一個或多個表以儲存運動資訊和處理後續塊來處理視頻的設備、系統和方法。在一個方面,提供了一種視頻處理方法,以包括:維護表的集合,其中每個表包括從在視頻資料中的第一視頻塊之前被解碼的先前解碼的視頻塊推導的運動候選;執行第一視頻塊的位元流表示與第一視頻塊之間的轉換;以及基於轉換來更新表的集合內的一個或多個表。

Description

使用一個或多個查找表來按順序存儲先前編碼的運動信息並使用它們來編碼後面的塊的概念
本專利文獻涉及視頻編碼和解碼技術、設備和系統 [相關申請案的交叉參考]
根據適用的專利法和/或依據巴黎公約的規則,本申請是為了及時要求於2018年6月29日提交的國際專利申請No. PCT/CN2018/093663,於2018年9月12日提交的國際專利申請No. PCT/CN2018/105193,以及於2018年7月2日提交的國際專利申請No. PCT/CN2018/093987的優先權和權益。為了根據美國法律的所有目的,國際專利申請No. PCT/CN2018/093663、國際專利申請No. PCT/CN2018/105193、以及國際專利申請No. PCT/CN2018/093987的全部公開通過引用併入,作為本申請的公開的一部分。
儘管視頻壓縮有所進步,但數位視頻仍占互聯網和其他數位通訊網路上的最大的頻寬使用。隨著能夠接收和顯示視頻的連接使用者設備的數量增加,預計數位視頻使用的頻寬需求將繼續增長。
本文文件公開了用於使用一個或多個查找表來編碼和解碼數位視頻的方法、系統和設備。
在一個方面,提供了一種視頻處理方法,以包括:維護表的集合,其中每個表包括從在視頻資料中的第一視頻塊之前被解碼的先前解碼的視頻塊推導的運動候選;執行第一視頻塊的位元流表示與第一視頻塊之間的轉換;以及基於轉換來更新表的集合內的一個或多個表。
在另一方面,提供了一種視頻處理方法,以包括:接收視頻資料的第一塊的位元流表示;以及基於表的集合來處理位元流表示,以生成視頻資料的第一塊,其中表的集合包括編碼候選。
在又一代表性方面,上述方法以處理器可執行代碼的形式實施並儲存在電腦可讀程式介質中。
在又一代表性方面,公開了一種被配置為或可操作來執行上述方法的設備。該設備可以包括被程式設計以實現該方法的處理器。
在又一代表性方面,視頻解碼器裝置可以實現如本文所描述的方法。
在附圖、說明書和申請專利範圍中更詳細地描述了所公開的技術的以上及其他方面和特徵。
由於對更高解析度視頻的日益增長的需求,視頻編碼方法和技術在現代技術中無處不在。視頻編解碼器通常包括壓縮或解壓縮數位視頻的電子電路或軟體,並且不斷被改進以提供更高的編碼效率。視頻編解碼器將未壓縮的視頻轉換為壓縮格式,反之亦然。視頻品質、用於表示視頻的資料量(由位元速率確定)、編碼和解碼演算法的複雜性、對資料丟失和錯誤的敏感性、編輯的簡易性、隨機訪問和端到端延遲(時延)之間存在複雜的關係。壓縮格式通常符合標準視頻壓縮規範,例如,高效視頻編碼(HEVC)標準(也已知為H.265或MPEG-H部分2)、即將完成的通用視頻編碼標準、或其他當前和/或未來視頻編碼標準。
所公開的技術的實施例可以應用於現有視頻編碼標準(例如,HEVC、H.265)和未來標準以改進壓縮性能。在本文文件中使用章節標題以提高描述的可讀性,並且不以任何方式將討論或實施例(和/或實現方式)限制於僅相應的章節。
1. 視頻編碼的示例實施例
圖1示出了典型HEVC視頻編碼器和解碼器的示例框圖(參考文件[1])。產生符合HEVC的位元流的編碼演算法通常如下進行。每個圖片被劃分為塊狀區域,其中精確的塊分割被傳遞到解碼器。視頻序列的第一圖片(以及到視頻序列中的每個完全隨機訪問點(clean random access point)處的第一圖片)僅使用(在相同圖片內從區域到區域空間地使用一些資料預測,但不取決於其他圖片的)影格內預測而編碼。對於序列的或隨機訪問點之間的所有剩餘圖片,影格間時間預測編碼模式通常用於大多數塊。用於影格間預測的編碼過程包括選擇包括所選擇的參考圖片和要應用於預測每個塊的樣點的運動向量(Motion Vector,MV)的運動資料。編碼器和解碼器通過應用使用MV和模式判定資料的運動補償(Motion Compensation,MC)來生成相同的影格間預測信令,其作為邊資訊(side information)被發送。
通過線性空間變換來變換影格內預測或影格間預測的殘差訊號,其是原始塊與其預測之間的差異。變換係數然後被縮放、量化、熵編碼,並與預測資訊一起被發送。
編碼器複製解碼器處理環路(參見圖1中的灰色陰影框),使得兩者都將生成對後續資料的相同預測。因此,量化的變換係數通過逆縮放而構造並且然後被逆變換以複製殘差訊號的解碼的近似。殘差然後被添加到預測,添加的結果然後可以被饋送到一個或兩個環路濾波器中以平滑由分塊處理和量化引起的偽影。最終圖片表示(即解碼器的輸出的副本)儲存在解碼圖片緩衝器中以用於後續圖片的預測。通常,圖片的編碼或解碼處理的順序通常不同於它們從源到達的順序;需要區分解碼器的解碼順序(即位元流順序)和輸出順序(即顯示順序)。
通常期望通過HEVC編碼的視頻材料作為逐列掃描影像而輸入(由於源視頻源自該格式或者由編碼之前的去交錯產生)。HEVC設計中不存在顯式的編碼特徵以支援交錯掃描的使用,因為交錯掃描不再用於顯示器並且對於分發而言變得基本上不常見。然而,在HEVC中已經提供了元資料語法(syntax),以允許編碼器指示已經通過將交錯視頻的每個場(即每個視頻影格的偶數或奇數列)編碼為單獨的圖片來傳送交錯掃描視頻或已經通過將每個交錯影格編碼為HEVC編碼圖片來傳送交錯掃描視頻。這提供了一種對交錯視頻進行編碼而無需使解碼器需要支援針對其的特殊解碼過程的有效方法。
1.1. H.264/AVC中的分割樹結構的示例
先前標準中的編碼層的核心是巨集塊,其包含16×16亮度樣點塊,並且在4:2:0顏色採樣的通常情況下,包含兩個對應的8×8色度樣點塊。
影格內編碼塊使用空間預測來利用像素當中的空間相關性。定義了兩個分割:16×16和4×4。
影格間編碼塊通過估計圖片當中的運動來使用時間預測而不是空間預測。可以針對16×16巨集塊或其任何子巨集塊分割(16×8、8×16、8×8、8×4、4×8、4×4)獨立地估計運動,如圖2所示(參考文件[2])。僅允許每一子巨集塊分割一個運動向量(MV)。
1.2. HEVC中分割樹結構的示例
在HEVC中,通過使用表示為編碼樹的四叉樹結構將編碼樹單元(Coding Tree Unit,CTU)劃分為編碼單元(CU)以適應各種局部特性。使用影格間(時間)還是影格內(空間)預測來編碼圖片區域的判定是在CU級別進行的。可以根據預測單元(PU)劃分類型將每個CU進一步劃分為一個、兩個或四個PU。在一個PU內部,應用相同的預測過程,並且基於PU將相關資訊發送到解碼器。在通過應用基於PU劃分類型的預測過程來獲得殘差塊之後,可以根據類似於CU的編碼樹的另一個四叉樹結構將CU分割為變換單元(TU)。HEVC結構的關鍵特徵中的一個是它具有多個分割概念,包括CU、PU和TU。
使用HEVC的混合視頻編碼中涉及的某些特徵包括:
(1)編碼樹單元(CTU)和編碼樹塊(CTB)結構:HEVC中的模擬結構是編碼樹單元(CTU),其具有由編碼器選擇的尺寸並且可以大於傳統巨集塊。CTU由亮度CTB和對應的色度CTB以及語法元素組成。亮度CTB的尺寸L×L可以選擇為L = 16、32或64個樣點,其中更大的尺寸通常能夠實現更好的壓縮。HEVC然後支援使用樹結構和類似四叉樹的信令將CTB分割為更小的塊。
(2)編碼單元(CU)和編碼塊(CB):CTU的四叉樹語法指定其亮度CB和色度CB的尺寸和位置。四叉樹的根與CTU相關聯。因此,亮度CTB的尺寸是亮度CB的最大支持尺寸。將CTU劃分為亮度CB和色度CB是聯合信令通知的。一個亮度CB和通常兩個色度CB與相關聯的語法一起形成編碼單元(CU)。CTB可以僅包含一個CU或者可以被劃分以形成多個CU,並且每個CU具有分割為預測單元(PU)的相關聯分割和變換單元(TU)的樹。
(3)預測單元和預測塊(PB):是使用影格間還是影格內預測來編碼圖片區域的判定是在CU級別進行的。PU分割結構的根在CU級別。根據基本預測類型判定,亮度CB和色度CB然後可以進一步在尺寸上被劃分,並且根據亮度和色度預測塊(PB)而預測。HEVC支援從64×64到4×4個樣點的可變PB尺寸。圖3示出了M×M CU的允許的PB的示例。
(4)變換單元(TU)和變換塊:使用塊變換對預測殘差進行編碼。TU樹結構的根在CU級別。亮度CB殘差可以與亮度變換塊(TB)相同,或者可以進一步劃分為更小的亮度TB。這同樣適用於色度TB。針對正方形TB尺寸4×4、8×8、16×16和32×32定義類似於離散餘弦變換(Discrete Cosine Transform,DCT)的函數的整數基函數。對於亮度影格內預測殘差的4×4變換,交替地指定從離散正弦變換(Discrete Sine Transform,DST)的形式推導的整數變換。
1.2.1. 樹結構分割為TB和TU的示例
對於殘差編碼,CB可以被遞迴地分割為變換塊(TB)。分割由殘差四叉樹信令通知。僅指定了正方形CB和TB分割,其中塊可以被遞迴地劃分為象限,如圖4A和圖4B所示。對於尺寸為M×M的給定亮度CB,標誌信令通知其是否被劃分為四個尺寸為M/2×M/2的塊。如果進一步劃分是有可能的,如通過序列參數集(Sequence Parameter Set,SPS)中指示的殘差四叉樹的最大深度信令通知的,則為每個象限分配指示其是否被劃分為四個象限的標誌。由殘差四叉樹產生的葉節點塊是通過變換編碼進一步處理的變換塊。編碼器指示其將使用的最大和最小亮度TB尺寸。當CB尺寸大於最大TB尺寸時,劃分是隱式的。當劃分將導致亮度TB尺寸小於指示的最小值時,不劃分是隱式的。除了當亮度TB尺寸為4×4時(在這種情況下,單個4×4色度TB用於由四個4×4亮度TB覆蓋的區域),色度TB尺寸在每個維度中是亮度TB尺寸的一半。在影格內預測的CU的情況下,(在CB內或外部的)最近的相鄰TB的解碼樣點被用作用於影格內預測的參考資料。
與先前標準相反,HEVC設計允許TB跨越影格間預測的CU的多個PB,以最大化四叉樹結構的TB分割的潛在編碼效率益處。
1.2.2. 父節點和子節點
根據四叉樹結構劃分CTB,四叉樹結構的節點是編碼單元。四叉樹結構中的多個節點包括葉節點和非葉節點。葉節點在樹結構中沒有子節點(即葉節點不被進一步劃分)。非葉節點包括樹結構的根節點。根節點對應於視頻資料的初始視頻塊(例如,CTB)。對於多個節點中的每個相應的非根節點,相應的非根節點對應於視頻塊,該視頻塊是與相應的非根節點的樹結構中的父節點相對應的視頻塊的子塊。多個非葉節點中的每個相應的非葉節點在樹結構中具有一個或多個子節點。
1.3. 在JEM中的具有更大CTU的四叉樹加二叉樹塊結構的示例
在一些實施例中,使用已知為聯合探索模型(Joint Exploration Model,JEM)(參考文件[4])的參考軟體來探索未來視頻編碼技術(參考文件[3])。除二叉樹結構外,JEM還描述了四叉樹加二叉樹(QTBT)和三叉樹(Ternary Tree,TT)結構。
1.3.1. QTBT塊分割結構的示例
與HEVC(參考文件[5])相反,QTBT結構移除了多個分割類型的概念,即它移除了CU、PU和TU概念的分離,並且支持CU分割形狀的更多靈活性。在QTBT塊結構中,CU可以具有正方形或矩形形狀。如圖5A所示,首先通過四叉樹結構分割編碼樹單元(CTU)。通過二叉樹結構進一步分割四叉樹葉節點。在二叉樹劃分中有兩種劃分類型,對稱水平劃分和對稱垂直劃分。二叉樹葉節點被稱為編碼單元(CU),並且該分段用於預測和變換處理而無需任何進一步的分割。這意味著CU、PU和TU在QTBT編碼塊結構中具有相同的塊尺寸。在JEM中,CU有時由不同顏色分量的編碼塊(CB)組成,例如,一個CU在4:2:0色度格式的P條帶和B條帶的情況下包含一個亮度CB和兩個色度CB,並且有時由單個分量的CB組成,例如,一個CU在I條帶的情況下僅包含一個亮度CB或只包含兩個色度CB。
為QTBT分割方案定義以下參數: --CTU尺寸:四叉樹的根節點尺寸,與HEVC中的概念相同 --MinQTSize:最小允許的四叉樹葉節點尺寸 --MaxBTSize:最大允許的二叉樹根節點尺寸 --MaxBTDepth:最大允許的二叉樹深度 --MinBTSize:最小允許二叉樹葉節點尺寸
在QTBT分割結構的一個示例中,CTU尺寸被設置為具有兩個對應的64×64色度樣點塊的128×128個亮度樣點,MinQTSize被設置為16×16,MaxBTSize被設置為64×64,MinBTSize(寬度和高度)被設置為4×4,並且MaxBTDepth被設置為4。四叉樹分割首先應用於CTU以生成四叉樹葉節點。四叉樹葉節點可以具有從16×16(即MinQTSize)至128×128(即CTU尺寸)的尺寸。如果四叉樹葉節點為128×128,則由於尺寸超過MaxBTSize(即64×64),所以它不會通過二叉樹被進一步劃分。否則,四叉樹葉節點可以通過二叉樹被進一步分割。因此,四叉樹葉節點也是二叉樹的根節點,並且其二叉樹深度為0。當二叉樹深度達到MaxBTDepth(即4)時,不考慮進一步的劃分。當二叉樹節點具有等於MinBTSize(即4)的寬度時,不考慮進一步的水平劃分。類似地,當二叉樹節點具有等於MinBTSize的高度時,不考慮進一步的垂直劃分。通過預測和變換處理進一步處理二叉樹的葉節點,而無需任何進一步的分割。在JEM中,最大CTU尺寸為256×256個亮度樣點。
圖5A示出了通過使用QTBT進行塊分割的示例,並且圖5B示出了對應的樹表示。實線指示四叉樹劃分,並且虛線指示二叉樹劃分。在二叉樹的每個劃分(即非葉)節點中,信令通知一個標誌以指示使用哪種劃分類型(即水平或垂直),其中0指示水平劃分,並且1指示垂直劃分。對於四叉樹劃分,不需要指示劃分類型,因為四叉樹劃分總是水平和垂直地劃分塊以產生具有相同尺寸的4個子塊。
另外,QTBT方案支援亮度和色度具有單獨的QTBT結構的能力。目前,對於P條帶和B條帶,一個CTU中的亮度CTB和色度CTB共用相同的QTBT結構。然而,對於I條帶,通過QTBT結構將亮度CTB分割為CU,並且通過另一個QTBT結構將色度CTB分割為色度CU。這意味著I條帶中的CU由亮度分量的編碼塊或兩個色度分量的編碼塊組成,並且P條帶或B條帶中的CU由所有三個顏色分量的編碼塊組成。
在HEVC中,小塊的影格間預測被限制,以減少運動補償的記憶體訪問,使得對於4×8塊和8×4塊不支持雙向預測,並且對於4×4塊不支持影格間預測。在JEM的QTBT中,這些限制被移除。
1.4. 多功能視頻編碼(VVC)的三叉樹(TT)
圖6A示出了四叉樹(QT)分割的示例,並且圖6B和圖6C分別示出了垂直和水平二叉樹(BT)分割的示例。在一些實施例中,除了四叉樹和二叉樹之外,還支持三叉樹(TT)分割,例如,水平和垂直中心側三叉樹(如圖6D和圖6E所示)。
在一些實現方式中,支援兩級樹:區域樹(四叉樹)和預測樹(二叉樹或三叉樹)。首先通過區域樹(RT)對CTU進行分割。可以用預測樹(PT)進一步劃分RT葉。還可以用PT進一步劃分PT葉,直到達到最大PT深度。PT葉是基本編碼單元。為方便起見,它仍被稱為CU。CU無法被進一步劃分。預測和變換都以與JEM相同的方式應用於CU。整個分割結構命名為「多類型樹」。
1.5. 可選視頻編碼技術中的分割結構的示例
在一些實施例中,支持作為QTBT的一般化的稱為多樹類型(MTT)的樹結構。在QTBT中,如圖7所示,首先通過四叉樹結構分割編碼樹單元(CTU)。通過二叉樹結構進一步分割四叉樹葉節點。
MTT的結構由兩種類型的樹節點構成:區域樹(RT)和預測樹(PT),支援九種類型的分割,如圖8A至圖8I所示。區域樹可以遞迴地將CTU劃分為方塊,直到4×4尺寸的區域樹葉節點。在區域樹中的每個節點處,可以從三種樹類型(二叉樹、三叉樹和非對稱二叉樹)中的一種形成預測樹。在PT劃分中,禁止在預測樹的分支中具有四叉樹分割。如在JEM中,亮度樹和色度樹在I條帶中被分離。在圖9A中示出了RT和PT的信令方法。
2 HEVC/H.265中的影格間預測的示例
多年來,視頻編碼標準已經顯著改進,並且現在部分地提供高編碼效率和對更高解析度的支援。諸如HEVC和H.265的最新標準基於其中利用時間預測加變換編碼的混合視頻編碼結構。
2.1 預測模式的示例
每個影格間預測的PU(預測單元)具有針對一個或兩個參考圖片列表的運動參數。在一些實施例中,運動參數包括運動向量和參考圖片索引。在其他實施例中,還可以使用inter_pred_idc信令通知兩個參考圖片列表中的一個的使用。在其他實施例中,運動向量可以被顯式地編碼為相對於預測器的增量。
當用跳過模式對CU進行編碼時,一個PU與CU相關聯,並且不存在顯著的殘差係數、沒有編碼的運動向量增量或參考圖片索引。指定Merge模式,由此從相鄰PU獲得當前PU的運動參數,包括空間和時間候選。Merge模式可以應用於任何影格間預測的PU,不僅應用於跳過模式。Merge模式的可選方案是運動參數的顯式傳輸,其中每一PU顯式地信令通知運動向量、每個參考圖片列表的對應參考圖片索引、以及參考圖片列表使用。
當信令指示要使用兩個參考圖片列表中的一個時,從一個樣點塊產生PU。這被稱為「單向預測」。單向預測可用於P條帶和B條帶兩者。
當信令指示要使用參考圖片列表中的兩者時,從兩個樣點塊產生PU。這被稱為「雙向預測」。雙向預測僅可用於B條帶。
2.1.1 構造Merge模式的候選的實施例
當使用Merge模式預測PU時,從位元流解析指向Merge候選列表中的條目的索引並將其用於檢索運動資訊。可以根據以下步驟的序列概述該列表的構造: 步驟1:初始候選推導 步驟1.1:空間候選推導 步驟1.2:空間候選的冗餘檢查 步驟1.3:時間候選推導 步驟2:附加候選插入 步驟2.1:創建雙向預測候選 步驟2.2:插入零運動候選
圖9B示出了基於上面概述的步驟的序列構造Merge候選列表的示例。對於空間Merge候選推導,在位於五個不同位置的候選當中選擇最多四個Merge候選。對於時間Merge候選推導,在兩個候選當中選擇最多一個Merge候選。由於在解碼器處假設每個PU的恆定數量的候選,因此當候選的數量未達到在條帶頭中信令通知的Merge候選的最大數量(MaxNumMergeCand)時,生成附加候選。由於候選的數量是恆定的,因此使用捨位元一元二值化(Unary Binarization,TU)來編碼最佳Merge候選的索引。如果CU的尺寸等於8,則當前CU的所有PU共用單個Merge候選列表,其與2N×2N預測單元的Merge候選列表相同。
2.1.2 構造空間Merge候選
在對空間Merge候選的推導中,在位於圖10中描繪的位置的候選當中選擇最多四個Merge候選。推導的順序是A1 、B1 、B0 、A0 和B2 。僅當位置A1 、B1 、B0 、A0 的任何PU不可用(例如,因為它屬於另一個條帶或片)或者是影格內編碼的時,才考慮位置B2 。在添加位置A1 處的候選之後,對剩餘候選的添加進行冗餘檢查,其確保具有相同運動信息的候選被排除在列表之外,從而改進編碼效率。
為了降低計算複雜度,在所提到的冗餘檢查中不考慮所有可能的候選對。相反,只考慮與圖11中的箭頭連結的對,並且如果用於冗餘檢查的對應候選沒有相同的運動資訊,則候選僅被添加到列表中。重複運動資訊的另一個源是與不同於2N×2N的分割相關聯的「第二PU」。作為示例,圖12A和圖12B分別描繪了N×2N和2N×N的情況下的第二PU。當當前PU被分割為N×2N時,位置A1 處的候選不被考慮用於列表構造。在一些實施例中,添加該候選可能導致兩個預測單元具有相同的運動資訊,這對於在編碼單元中只具有一個PU是冗餘的。類似地,當當前PU被分割為2N×N時,不考慮位置B1
2.1.3構造時態Merge候選
在該步驟中,僅一個候選被添加到列表。具體地,在對該時間Merge候選的推導中,基於屬於與給定參考圖片列表內的當前圖片具有最小POC差異的圖片的共定位PU來推導縮放運動向量。在條帶頭中顯式地信令通知要用於推導共定位PU的參考圖片列表。
圖13示出了對時間Merge候選(如虛線)的縮放運動向量的推導的示例,該縮放運動向量使用POC距離tb和td從共定位PU的運動向量縮放,其中tb被定義為當前圖片的參考圖片與當前圖片之間的POC差異,並且td被定義為共定位圖片的參考圖片與共定位圖片之間的POC差異。時間Merge候選的參考圖片索引被設置為等於零。對於B條帶,兩個運動向量(一個用於參考圖片列表0,並且另一個用於參考圖片列表1)被獲得並組合,以產生雙向預測Merge候選。
在屬於參考影格的共定位PU(Y)中,在候選C0 和C1 之間選擇時間候選的位置,如圖14中所描繪的。如果位置C0 處的PU不可用、是影格內編碼的、或者在當前CTU外部,則使用位置C1 。否則,位置C0 用於對時間Merge候選的推導中。
2.1.4 構造附加類型的Merge候選
除了時空Merge候選之外,存在兩種附加類型的Merge候選:組合的雙向預測Merge候選和零Merge候選。通過利用時空Merge候選來生成組合的雙向預測Merge候選。組合的雙向預測Merge候選僅用於B條帶。通過將初始候選的第一參考圖片列表運動參數與另一個初始候選的第二參考圖片列表運動參數組合來生成組合的雙向預測候選。如果這兩個元組提供不同的運動假設,它們將形成新的雙向預測候選。
圖15示出了該過程的示例,其中具有mvL0和refIdxL0或mvL1和refIdxL1的原始列表(左邊的1510)中的兩個候選用於創建被添加到最終列表(右邊的1520)的組合的雙向預測Merge候選。
插入零運動候選以填充Merge候選列表中的剩餘條目,並因此達到MaxNumMergeCand容量。這些候選具有零空間位移和參考圖片索引,其從零開始並且每當新的零運動候選被添加到列表時增加。由這些候選使用的參考影格的數量對於單向預測和雙向預測分別是1和2。在一些實施例中,不對這些候選執行冗餘檢查。
2.1.5 用於並行處理的運動估計區域的示例
為了加速編碼過程,可以並行執行運動估計,由此同時推導給定區域內部的所有預測單元的運動向量。從空間鄰域推導Merge候選可能干擾並行處理,因為一個預測單元不能從鄰近PU推導運動參數,直到其相關聯的運動估計被完成。為了緩和編碼效率和處理時延之間的折衷,可以定義運動估計區域(Motion Estimation Region,MER)。可以使用「log2_parallel_merge_level_minus2」語法元素在圖片參數集(PPS)中信令通知MER的尺寸。當定義MER時,落入相同區域的Merge候選被標記為不可用,並且因此在列表構造中不考慮。
表1中示出了圖片參數集(PPS)原始字節序列有效載荷(Raw Byte Sequence Payload RBSP)語法,其中log2_parallel_merge_level_minus2加2指定變量Log2ParMrgLevel的值,其用於Merge模式的亮度運動向量的推導過程以及現有視頻編碼標準中指定的空間Merge候選的推導過程中。log2_parallel_merge_level_minus2的值必須在0至CtbLog2SizeY - 2的範圍內,包括0和CtbLog2SizeY - 2。
變量Log2ParMrgLevel如下推導: Log2ParMrgLevel = log2_parallel_merge_level_minus2 + 2
注意,Log2ParMrgLevel的值指示Merge候選列表的並行推導的內置能力。例如,當Log2ParMrgLevel等於6時,被包含在64×64塊中的所有預測單元(PU)和編碼單元(CU)的Merge候選列表可以並行地推導。
表1:一般圖片參數設置RBSP語法 表1
Figure 108123177-A0304-0001
2.2 AMVP模式中的運動向量預測的實施例
運動向量預測利用運動向量與相鄰PU的時空相關性,其用於運動參數的顯式傳輸。它通過首先檢查左邊、上面時間上相鄰的PU位置的可用性,移除冗餘候選並添加零向量以使候選列表為恆定長度來構造運動向量候選列表。然後,編碼器可以從候選列表選擇最佳預測器,並發送指示所選擇的候選的對應索引。與Merge索引信令類似,使用捨位元一元來編碼最佳運動向量候選的索引。
2.2.1 構造運動向量預測候選的示例
圖16A和圖16B概述了運動向量預測候選的推導過程,並且可以針對以refidx作為輸入的每個參考圖片列表來實現。
在運動向量預測中,考慮兩種類型的運動向量候選:空間運動向量候選和時間運動向量候選。對於空間運動向量候選推導,最終基於位於如先前在圖10中所示的五個不同位置的每個PU的運動向量推導兩個運動向量候選。
對於時間運動向量候選推導,從基於兩個不同的共定位位置而推導的兩個候選選擇一個運動向量候選。在產生第一時空候選列表之後,移除列表中的重複的運動向量候選。如果潛在候選的數量大於二,則從列表移除其相關聯的參考圖片列表內的參考圖片索引大於1的運動向量候選。如果時空運動向量候選的數量小於二,則將附加的零運動向量候選添加到列表。
2.2.2 構造空間運動向量候選
在對空間運動向量候選的推導中,在從位於如先前在圖10中所示的位置的PU推導的五個潛在候選當中考慮最多兩個候選。那些位置與運動Merge的位置相同。當前PU的左側的推導順序被定義為A0 、A1 、以及縮放A0 、縮放A1 。當前PU的上側的推導順序被定義為B0 、B1 、B2 、縮放B0 、縮放B1 、縮放B2 。對於每一側,因此存在可用作運動向量候選的四種情況,其中兩種情況不需要使用空間縮放,並且兩種情況使用空間縮放。四種不同的情況概述如下: --沒有空間縮放 (1)相同的參考圖片列表,以及相同的參考圖片索引(相同的POC) (2)不同的參考圖片列表,但是相同的參考圖片(相同的POC) --空間縮放 (3)相同的參考圖片列表,但是不同的參考圖片(不同的POC) (4)不同的參考圖片列表,以及不同的參考圖片(不同的POC)
首先檢查非空間縮放情況,然後是允許空間縮放的情況。當POC在相鄰PU的參考圖片與當前PU的參考圖片之間不同而不管參考圖片列表時,考慮空間縮放。如果左邊候選的所有PU都不可用或者是影格內編碼的,則允許針對以上運動向量的縮放以幫助對左邊和上面MV候選的並行推導。否則,針對以上運動向量不允許空間縮放。
如圖17中的示例所示,對於空間縮放情況,以與時間縮放類似的方式縮放相鄰PU的運動向量。一個差異是參考圖片列表和當前PU的索引被給出作為輸入;實際縮放過程與時間縮放的過程相同。
2.2.3 構造時間運動向量候選
除了參考圖片索引推導外,對時間Merge候選的推導的所有過程與對空間運動向量候選的推導的所有過程相同(如圖14中的示例所示)。在一些實施例中,將參考圖片索引信令通知給解碼器。
2.2.4 Merge/AMVP信息的信令
對於AMVP模式,可以在位元流中信令通知四個部分,例如,預測方向、參考索引、MVD和mv預測器候選索引,其在表2至4中所示的語法的上下文中描述。而對於Merge模式,可能只需要信令通知Merge索引。
表2:一般條帶分段標頭語法 表2
Figure 108123177-A0304-0002
表3:預測單元語法 表3
Figure 108123177-A0304-0003
表4:運動向量差語法 表4
Figure 108123177-A0304-0004
對應語義包括:five_minus_max_num_merge_cand指定從5減去的條帶中支持的Merge MVP候選的最大數量。Merge MVP候選的最大數量MaxNumMergeCand如下推導: MaxNumMergeCand = 5 - five_minus_max_num_merge_cand MaxNumMergeCand的值必須在1至5的範圍內,包括1和5。
merge_flag[x0][y0]指定是否從相鄰的影格間預測分割推斷出當前預測單元的影格間預測參數。陣列索引x0、y0指定所考慮的預測塊的左上亮度樣點相對於圖片的左上亮度樣點的位置(x0,y0)。
當merge_flag[x0][y0]不存在時,推斷如下: --如果CuPredMode[x0][y0]等於MODE_SKIP,則merge_flag[x0][y0]被推斷為等於1。 --否則,merge_flag[x0][y0]被推斷為等於0。
merge_idx[x0][y0]指定Merge候選列表的Merge候選索引,其中x0、y0指定所考慮的預測塊的左上亮度樣點相對於圖片的左上亮度樣點的位置(x0,y0)。
3. 聯合探索模型(JEM)中的影格間預測方法的示例
在一些實施例中,使用已知為聯合探索模型(JEM)的參考軟體來探索未來視頻編碼技術。在JEM中,在若干編碼工具中採用基於子塊的預測,諸如仿射預測、可選時域運動向量預測(ATMVP)、時空運動向量預測(STMVP)、雙向光流(bi-directional optical flow,BIO)、影格速率上轉換(FRUC)、局部自適應運動向量解析度(Locally Adaptive Motion Vector Resolution,LAMVR)、重疊塊運動補償(Overlapped Block Motion Compensation,OBMC)、局部光照補償(Local Illumination Compensation,LIC)和解碼器側運動向量細化(DMVR)。
3.1 基於子CU的運動向量預測的示例
在具有四叉樹加二叉樹(QTBT)的JEM中,每個CU可以具有每個預測方向的運動參數的至多一個集合。在一些實施例中,通過將大CU劃分為子CU並且推導大CU的所有子CU的運動資訊,在編碼器中考慮兩個子CU級別運動向量預測方法。可選時域運動向量預測(ATMVP)方法允許每個CU從比並置參考圖片中的當前CU小的多個塊提取運動資訊的多個集合。在時空運動向量預測(STMVP)方法中,通過使用時間運動向量預測器和空間相鄰運動向量來遞迴地推導子CU的運動向量。在一些實施例中,並且為了保留子CU運動預測的更準確的運動場,可以禁用參考影格的運動壓縮。
3.1.1 可選時域運動向量預測(ATMVP)的示例
在ATMVP方法中,通過從比當前CU小的塊提取運動資訊(包括運動向量和參考索引)的多個集合來修改時間運動向量預測(TMVP)方法。
圖18示出了用於CU 1800的ATMVP運動預測過程的示例。ATMVP方法以兩個步驟預測CU 1800內的子CU 1801的運動向量。第一步驟是用時間向量識別參考圖片1850中的對應塊1851。參考圖片1850也稱為運動源圖片。第二步驟是將當前CU 1800劃分為子CU 1801,並從對應於每個子CU的塊獲得運動向量以及每個子CU的參考索引。
在第一步驟中,參考圖片1850和對應塊由當前CU 1800的空間相鄰塊的運動資訊確定。為了避免相鄰塊的重複掃描過程,使用當前CU 1800的Merge候選列表中的第一Merge候選。第一可用運動向量以及其相關聯的參考索引被設置為時間向量和運動源圖片的索引。這樣,與TMVP相比,可以更準確地識別對應塊,其中對應塊(有時稱為並置塊)總是相對於當前CU處於右下或中心位置。
在一個示例中,如果第一Merge候選來自左邊相鄰塊(即圖19中的A1 ),則利用相關聯的MV和參考圖片來識別源塊和源圖片。
在第二步驟中,通過向當前CU的座標添加時間向量,通過運動源圖片1850中的時間向量識別子CU 1851的對應塊。對於每個子CU,其對應塊的運動資訊(例如,覆蓋中心樣點的最小運動網格)用於推導子CU的運動資訊。在識別出對應的N×N塊的運動資訊之後,以與HEVC的TMVP相同的方式將其轉換為當前子CU的運動向量和參考索引,其中運動縮放和其他過程適用。例如,解碼器檢查是否滿足低延遲條件(例如,當前圖片的所有參考圖片的POC小於當前圖片的POC),並且可能使用運動向量MVx(例如,對應於參考圖片列表X的運動向量)來預測每個子CU的運動向量MVy(例如,其中X等於0或1,並且Y等於1-X)。
3.1.2 時空運動向量預測(STMVP)的示例
在STMVP方法中,按照光柵掃描順序遞迴地推導子CU的運動向量。圖20示出了具有四個子塊和相鄰塊的一個CU的示例。考慮包括四個4×4子CU A(2001)、子CU B(2002)、子CU C(2003)和子CU D(2004)的8×8 CU 2000。當前影格中的相鄰4×4塊標記為a(2011)、b(2012)、c(2013)和d(2014)。
子CU A的運動推導通過識別其兩個空間鄰域開始。第一鄰域是子CU A 2001上面的N×N塊(塊c 2013)。如果該塊c(2013)不可用或是影格內編碼的,則檢查子CU A(2001)上面的其他N×N塊(在塊c 2013處開始,從左到右)。第二鄰域是子CU A 2001的左邊的塊(塊b 2012)。如果塊b(2012)不可用或是影格內編碼的,則檢查子CU A 2001的左邊的其他塊(在塊b 2012處開始,從上到下)。從每個列表的相鄰塊獲得的運動資訊被縮放為給定列表的第一參考影格。接下來,通過按照與HEVC中指定的TMVP推導相同過程來推導子塊A 2001的時間運動向量預測器(TMVP)。在塊D 2004處的並置塊的運動資訊被提取並相應地縮放。最後,在檢索和縮放運動資訊之後,針對每個參考列表單獨地平均所有可用運動向量。平均運動向量被指定為當前子CU的運動向量。
3.1.3 子CU運動預測模式信令的示例
在一些實施例中,子CU模式被啟用作為附加Merge候選,並且不需要附加語法元素來信令通知模式。兩個附加Merge候選被添加到每個CU的Merge候選列表以表示ATMVP模式和STMVP模式。在其他實施例中,如果序列參數集指示啟用了ATMVP和STMVP,則可以使用多達七個Merge候選。附加Merge候選的編碼邏輯與HM中的Merge候選的編碼邏輯相同,這意味著,對於P條帶或B條帶中的每個CU,針對兩個附加Merge候選可能還需要兩次RD檢查。在一些實施例中,例如,JEM,通過CABAC(Context-based Adaptive Binary Arithmetic Coding,基於上下文的自適應二進制算術編碼)對Merge索引的所有二進制位元進行上下文編碼。在其他實施例中,例如,HEVC,僅對第一二進制位元進行上下文編碼,並且對剩餘的二進制位元進行上下文旁路編碼。
3.2 自適應運動向量差解析度的示例
在一些實施例中,當條帶頭中的use_integer_mv_flag等於0時,以四分之一(quarter)亮度樣點為單位信令通知(在PU的運動向量和預測運動向量之間的)運動向量差(MVD)。在JEM中,引入了局部自適應運動向量解析度(LAMVR)。在JEM中,可以以四分之一亮度樣點、整數亮度樣點或四亮度樣點為單位編碼MVD。以編碼單元(CU)級別控制MVD解析度,並且對於具有至少一個非零MVD分量的每個CU,有條件地信令通知MVD解析度標誌。
對於具有至少一個非零MVD分量的CU,信令通知第一標誌以指示在CU中是否使用四分之一亮度樣點MV精度。當第一標誌(等於1)指示未使用四分之一亮度樣點MV精度時,信令通知另一個標誌以指示使用整數亮度樣點MV精度還是四亮度樣點MV精度。
當CU的第一MVD解析度標誌為零或未針對CU編碼(意味著CU中的所有MVD均為零)時,四分之一亮度樣點MV解析度用於CU。當CU使用整數亮度樣點MV精度或四亮度樣點MV精度時,CU的AMVP候選列表中的MVP被取整為對應精度。
在編碼器中,CU級別RD檢查用於確定哪個MVD解析度要被用於CU。也就是說,對於每個MVD解析度,執行CU級別RD檢查三次。為了加快編碼器速度,在JEM中應用以下編碼方案: --在具有正常四分之一亮度樣點MVD解析度的CU的RD檢查期間,儲存當前CU(整數亮度樣點準度)的運動資訊。儲存的運動資訊(取整之後)被用作在針對具有整數亮度樣點和4亮度樣點MVD解析度的相同CU的RD檢查期間的進一步小範圍運動向量細化的起始點,使得耗時的運動估計過程不會重複三次。 --有條件地調用具有4亮度樣點MVD解析度的CU的RD檢查。對於CU,當整數亮度樣點MVD解析度的RD成本遠大於四分之一亮度樣點MVD解析度的RD成本時,跳過對於CU的4亮度樣點MVD解析度的RD檢查。
3.2.1 AMVP候選列表構造的示例
在JEM中,該過程類似於HEVC設計。然而,當當前塊選擇更低精度的MV(例如,整數精度)時,可以應用取整操作。在當前實現方式中,在從空間位置選擇2個候選之後,如果兩者都可用,則將這兩個候選取整,然後進行修剪。
3.3 模式匹配的運動向量推導(PMMVD)的示例
PMMVD模式是基於影格速率上轉換(FRUC)方法的特殊Merge模式。用該模式,不信令通知塊的運動資訊,而是在解碼器側推導。
當CU的Merge標誌為真時,可以對CU信令通知FRUC標誌。當FRUC標誌為假時,可以信令通知Merge索引並使用常規Merge模式。當FRUC標誌為真時,可以信令通知附加FRUC模式標誌以指示要使用哪個方法(例如,雙向匹配或模板匹配)來推導塊的運動資訊。
在編碼器側,關於是否對CU使用FRUC Merge模式的判定是基於對正常Merge候選所做的RD成本選擇。例如,通過使用RD成本選擇對CU檢查多個匹配模式(例如,雙向匹配和模板匹配)。產生最小成本的一個匹配模式進一步與其他CU模式比較。如果FRUC匹配模式是最有效的模式,則對於CU將FRUC標誌設置為真,並且使用相關匹配模式。
通常,FRUC Merge模式中的運動推導過程具有兩個步驟:首先執行CU級別運動搜索,然後執行子CU級別運動細化。在CU級別,基於雙向匹配或模板匹配針對整個CU推導初始運動向量。首先,生成MV候選列表,並且選擇產生最小匹配成本的候選作為進一步CU級別細化的起始點。然後,執行起始點周圍的基於雙向匹配或模板匹配的本地搜索。將最小匹配成本的MV結果作為整個CU的MV。隨後,以推導的CU運動向量作為起始點,以子CU級別進一步細化運動資訊。
例如,針對
Figure 02_image001
CU運動資訊推導執行以下推導過程。在第一階段,推導整個
Figure 02_image001
CU的MV。在第二階段,CU被進一步劃分為
Figure 02_image003
個子CU。
Figure 02_image005
的值按公式(3)計算。D是在JEM中預設置為3的預定義劃分深度。然後推導每個子CU的MV。
Figure 02_image007
公式(3)
圖21示出了在影格速率上轉換(FRUC)方法中使用的雙向匹配的示例。雙向匹配用於通過沿著兩個不同參考圖片(2110、2111)中的當前CU(2100)的運動軌跡找到兩個塊之間的最接近匹配來推導當前CU的運動資訊。在連續運動軌跡的假設下,指向兩個參考塊的運動向量MV0(2101)和MV1(2102)和當前圖片與兩個參考圖片之間的時間距離(例如,TD0(2103)和TD1(2104))成比例。在一些實施例中,當當前圖片2100在時間上在兩個參考圖片(2110、2111)之間並且從當前圖片到兩個參考圖片的時間距離相同時,雙向匹配變為基於鏡像的雙向MV。
圖22示出了在影格速率上轉換(FRUC)方法中使用的模板匹配的示例。模板匹配可以用於通過找到當前圖片中的模板(例如,當前CU的上和/或左邊相鄰塊)與參考圖片2210中的塊(例如,與模板尺寸相同)之間的最接近匹配來推導當前CU 2200的運動資訊。除了上述FRUC Merge模式之外,模板匹配也可以應用於AMVP模式。在JEM和HEVC中,AMVP具有兩個候選。用模板匹配方法,可以推導新的候選。如果通過模板匹配的新推導的候選與第一現有AMVP候選不同,則將其插入AMVP候選列表的最開端,然後(例如,通過移除第二現有AMVP候選)將列表尺寸設置為二。當應用於AMVP模式時,僅應用CU級別搜索。
在CU級別的MV候選集可以包括以下:(1)如果當前CU處於AMVP模式的原始AMVP候選,(2)所有Merge候選,(3)內插MV場中的若干MV(稍後描述),以及上邊和左邊相鄰運動向量。
當使用雙向匹配時,Merge候選的每個有效MV可以用作輸入以在假設雙向匹配的情況下生成MV對。例如,Merge候選的一個有效MV是(MVa、refa )在參考列表A處。然後,在其他參考列表B中找到其配對雙向MV的參考圖片refb ,使得refa 和refb 在時間上位於當前圖片的不同側。如果這樣的refb 在參考列表B中不可用,則refb 被確定為與refa 不同的參考,並且其到當前圖片的時間距離是列表B中的最小一個。在確定refb 之後,基於當前圖片和refa 、refb 之間的時間距離通過縮放MVa來推導MVb。
在一些實現方式中,還可以將來自內插MV場的四個MV添加到CU級別候選列表。更具體地,添加當前CU的位置(0,0)、(W/2,0)、(0,H/2)和(W/2,H/2)處的內插MV。當FRUC被應用於AMVP模式中時,原始AMVP候選也被添加到CU級別MV候選集。在一些實現方式中,在CU級別,可以將AMVP CU的15個MV和Merge CU的13個MV添加到候選列表。
在子CU級別的MV候選集包括(1)從CU級別搜索確定的MV,(2)上邊、左邊、左上和右上相鄰MV,(3)來自參考圖片的並置MV的縮放版本,(4)一個或多個ATMVP候選(例如,多達四個),以及(5)一個或多個STMVP候選(例如,多達四個)。來自參考圖片的縮放MV如下推導。遍歷兩個列表中的參考圖片。參考圖片中的子CU的並置位置處的MV被縮放為起始CU級別MV的參考。ATMVP和STMVP候選可以是前四個。在子CU級別,將一個或多個MV(例如,多達17個)添加到候選列表。
內插MV場的生成。在對影格進行編碼之前,基於單向ME針對整個圖片生成內插運動場。然後,運動場可以稍後用作CU級別或子CU級MV候選。
在一些實施例中,兩個參考列表中的每個參考圖片的運動場以4×4塊級別遍歷。圖23示出了FRUC方法中的單向運動估計(ME)2300的示例。對於每個4×4塊,如果與塊相關聯的運動穿過當前圖片中的4×4塊並且塊未被分配任何內插運動,則參考塊的運動根據時間距離TD0和TD1縮放為當前圖片(與HEVC中的TMVP的MV縮放的方式相同的方式),並且縮放的運動被分配給當前影格中的塊。如果沒有將縮放的MV分配給4×4塊,則在內插運動場中將塊的運動標記為不可用。
插值和匹配成本。當運動向量指向分數樣點位置時,需要運動補償內插。為了降低複雜性,雙線性內插代替常規8抽頭HEVC內插可以用於雙向匹配和模板匹配兩者。
匹配成本的計算在不同步驟處略微不同。當從CU級別的候選集選擇候選時,匹配成本可以是雙向匹配或模板匹配的絕對和差(Absolute Sum Difference,SAD)。在確定起始MV之後,子CU級別搜索的雙向匹配的匹配成本C計算如下:
Figure 02_image009
公式(4)
這裡,w是加權因數。在一些實施例中,w可以根據經驗設置為4。MV和MVs 分別指示當前MV和起始MV。SAD仍然可以用作子CU級別搜索的模板匹配的匹配成本。
在FRUC模式中,通過僅使用亮度樣點來推導MV。推導的運動將用於MC影格間預測的亮度和色度兩者。在決定MV之後,使用用於亮度的8抽頭內插濾波器和用於色度的4抽頭內插濾波器來執行最終MC。
MV細化是基於模式的MV搜索,其具有雙向匹配成本或模板匹配成本的標準。在JEM中,支援兩個搜索模式—無限制的中心偏置菱形搜索(Unrestricted Center-Biased Diamond Search,UCBDS)和分別在CU級別和子CU級別的MV細化的自適應交叉搜索。對於CU級別和子CU級別MV細化,以四分之一亮度樣點MV準度直接搜索MV,並且接著是八分之一亮度樣點MV細化。CU步驟和子CU步驟的MV細化的搜索範圍被設置為等於8個亮度樣點。
在雙向匹配Merge模式中,應用雙向預測,因為CU的運動資訊是基於沿著兩個不同參考圖片中的當前CU的運動軌跡的兩個塊之間的最接近匹配而推導的。在模板匹配Merge模式中,編碼器可以在來自列表0的單向預測、來自列表1的單向預測、或者CU的雙向預測當中選擇。選擇可以基於模板匹配成本,如下所示: 如果costBi >= factor * min(cost0,cost1) 使用雙向預測; 否則,如果cost0 >= cost1 使用來自list0的單向預測; 否則, 使用來自list1的單向預測;
這裡,cost0是list0模板匹配的SAD,cost1是list1模板匹配的SAD,並且costBi是雙向預測模板匹配的SAD。例如,當因數的值等於1.25時,這意味著選擇過程偏向於雙向預測。影格間預測方向選擇可以應用於CU級別模板匹配過程。
3.4解碼器側運動向量細化(DMVR)的示例
在雙向預測操作中,為了預測一個塊區域,分別使用list0的運動向量(MV)和list1的MV形成的兩個預測塊被組合以形成單個預測信令。在解碼器側運動向量細化(DMVR)方法中,通過雙向模板匹配過程進一步細化雙向預測的兩個運動向量。雙向模板匹配在解碼器中應用,以在雙向模板和參考圖片中的重建樣點之間執行基於失真的搜索,以便獲得細化的MV而不發送附加運動資訊。
在DMVR中,分別從list0的初始MV0和list1的MV1生成雙向模板作為兩個預測塊的加權組合(即平均),如圖24所示。模板匹配操作包括計算所生成的模板與參考圖片中的(初始預測塊周圍的)樣點區域之間的成本度量。對於兩個參考圖片中的每一個,產生最小模板成本的MV被視為該列表的更新後的MV以替換原始MV。在JEM中,針對每個列表搜索九個MV候選。九個MV候選包括原始MV和8個圍繞的MV,其中一個亮度樣點在水平或垂直方向上或兩個方向上與原始MV偏移。最終,兩個新的MV(即如圖24所示的MV0'和MV1')用於生成最終的雙向預測結果。絕對誤差和(SAD)用作成本度量。
DMVR被應用於雙向預測的Merge模式,其中一個MV來自過去的參考圖片,並且另一個MV來自未來的參考圖片,而無需發送附加語法元素。在JEM中,當針對CU啟用LIC、仿射運動、FRUC或子CU Merge候選時,不應用DMVR。
3.5 局部光照補償
局部光照補償(IC)基於用於光照改變的線性模型,使用縮放因數a和偏移b。並且針對每個影格間模式編碼的編碼單元(CU)自適應地啟用或禁用局部光照補償。
當IC應用於CU時,採用最小平方誤差方法通過使用當前CU的相鄰樣點及其對應的參考樣點來推導參數a和b。更具體地,如圖25所示,使用CU的子採樣的(2:1子採樣)相鄰樣點和參考圖片中的(由當前CU或子CU的運動資訊識別的)對應樣點。IC參數被推導並分別應用於每個預測方向。
當以Merge模式對CU進行編碼時,以與Merge模式中的運動資訊複製類似的方式從相鄰塊複製IC標誌;否則,對CU信令通知IC標誌以指示LIC是否適用。
當針對圖片啟用IC時,需要附加CU級別RD檢查以確定是否將LIC應用於CU。當針對CU啟用IC時,對於整數像素運動搜索和分數像素運動搜索分別使用均值移除絕對和差(Mean-Removed Sum of Absolute Diffefference,MR-SAD)以及均值移除絕對Hadamard變換和差(Mean-Removed Sum of Absolute Hadamard-Transformed Difference,MR-SATD),而不是SAD和SATD。
為了降低編碼複雜度,在JEM中應用以下編碼方案。當當前圖片與其參考圖片之間沒有明顯的光照改變時,針對全部圖片禁用IC。為了識別這種情況,在編碼器處計算當前圖片的直方圖和當前圖片的每個參考圖片。如果當前圖片與當前圖片的每個參考圖片之間的直方圖差異小於給定閾值,則針對當前圖片禁用IC;否則,針對當前圖片啟用IC。
3.6 具有雙向匹配細化的Merge/跳過模式的示例
首先通過利用冗餘檢查將空間相鄰和時間相鄰塊的運動向量和參考索引插入候選列表中來構造Merge候選列表,直到可用候選的數量達到最大候選尺寸19。通過根據預定義的插入順序,在插入空間候選、時間候選、仿射候選、高級時間MVP(Advanced Temporal MVP,ATMVP)候選、時空MVP(Spatial Temporal,STMVP)候選和HEVC中使用的附加候選(組合候選和零候選)來構造Merge/跳過模式的Merge候選列表,並且在圖25中所示的編號塊的上下文中: (1)塊1-4的空間候選 (2)塊1-4的外推(extrapolated)仿射候選 (3)ATMVP (4)STMVP (5)虛擬仿射候選 (6)空間候選(塊5)(僅當可用候選的數量小於6時使用) (7)外推仿射候選(塊5) (8)時間候選(如在HEVC中推導的) (9)非鄰近空間候選,其後是外推仿射候選(塊6至49) (10)組合候選 (11)零候選
可以注意到,除了STMVP和仿射之外,IC標誌也從Merge候選繼承。而且,對於前四個空間候選,在具有單向預測的候選之前插入雙向預測候選。
在一些實現方式中,可以訪問未與當前塊連接的塊。如果以非影格內模式編碼非鄰近塊,則可以添加相關聯的運動資訊作為附加Merge候選。
4. 二值化方法和Merge索引編碼的示例
在一些實施例中,可以選擇若干二值化方法。對於一個語法元素,應該首先基於分佈將相關值二值化為二進制串。對於每個二進制位元,可以用上下文或旁路編碼方法對其進行編碼。
4.1 示例性一元和捨位元一元(TU)二值化過程
對於每個不帶正負號的整數值符號x ≥ 0,CABAC中的一元碼字元由x個「1」位元加上終止「0」位元組成。僅針對0 ≤ x ≤ S的x定義捨位一元(TU)碼,其中對於x > S,該碼由一元碼給出,而對於x = S,終止「0」位元被忽略,使得x = S的TU碼僅由x個「1」位元組成的碼字給出。
表5:一元二值化的二進制串 表5
Figure 108123177-A0304-0005
表6:捨位元一元二值化的二進制串 表6
Figure 108123177-A0304-0006
4.2 示例性K階Exp-Golomb(K-th order Exp-Golomb,EGk)二值化過程
對於EGk二值化,具有相同碼長
Figure 02_image011
的符號的數量在幾何上增長。通過反轉理想碼長與符號概率之間的香農關係,我們可以例如容易推斷出EG0是概率分佈函數(pdf)
Figure 02_image013
(其中x ≥ 0)的最優碼。這意味著對於適當選擇的參數k,EGk碼表示通常觀察到的概率分佈函數的尾部的理想無前綴碼的相當好的一階近似。
表7:EG0二值化的二進制串 表7
Figure 108123177-A0304-0007
4.3 示例性捨位元Rice(Truncated Rice,TR)二值化過程
該過程的輸入是對TR二值化、cMax和cRiceParam的請求。
該過程的輸出是將每個值symbolVal與對應的二進制串相關聯的TR二值化。
TR二進制串是前綴二進制串和後綴二進制串(當存在時)的串聯。
為了推導前綴二進制串,以下適用: --symbolVal的前綴值prefixVal如下推導: prefixVal = symbolVal >> cRiceParam --TR二進制串的前綴指定如下: 如果prefixVal小於cMax >> cRiceParam,則前綴二進制串是由binIdx索引的長度為prefixVal+1的位元串。小於prefixVal的binIdx的二進制位元等於1。binIdx等於prefixVal的二進制位元等於0。
當cMax大於symbolVal且cRiceParam大於0時,存在TR二進制串的後綴,並且如下推導: --後綴值suffixVal如下推導:
Figure 02_image015
--通過以等於(
Figure 02_image017
的cMax值調用suffixVal的固定長度(Fixed-Length,FL)二值化過程來指定TR二進制串的後綴。
注意,對於輸入參數cRiceParam = 0,TR二值化恰好是捨位元一元二值化,並且其總是以等於被解碼的語法元素的最大可能值的cMax值而調用。
4.4 示例性固定長度(FL)二值化過程
該過程的輸入是對FL二值化和cMax的請求。
該過程的輸出是將每個值symbolVal與對應的二進制串相關聯的FL二值化。
通過使用符號值symbolVal的fixedLength位元不帶正負號的整數二進制串來構造FL二值化,其中fixedLength = Ceil( Log2( cMax + 1 ) )。FL二值化的二進制位元的索引使得binIdx = 0與最高有效位相關,其中binIdx的值向最低有效位增加。
表8:FL二值化的二進制串(cMax = 7) 表8
Figure 108123177-A0304-0008
4.5 merge_idx的示例性編碼
如HEVC規範中所指定的,如果允許的Merge候選的總數大於1,則首先將Merge索引二值化為二進制串。
表9:二值化和編碼merge_idx的二進制位元的方式 表9
Figure 108123177-A0304-0009
使用cRiceParam等於0的TR,即TU。merge_idx的第一二進制位元用一個上下文編碼,並且剩餘的二進制位元(如果存在)用旁路編碼。
5. JEM中的影格內預測的示例實施例
5.1 具有67個影格內預測模式的影格內模式編碼的示例
為了捕獲在自然視頻中呈現的任意邊緣方向,定向影格內模式的數量從如在HEVC中使用的33擴展到65。附加定向模式在圖27中被描繪為淺灰色虛線箭頭,並且平面和DC模式保持不變。這些更密集的定向影格內預測模式適用於所有塊尺寸以及亮度和色度影格內預測。
5.2 亮度影格內模式編碼的示例
在JEM中,影格內預測模式的總數已經從HEVC中的35增加到67。圖27描繪了67個影格內預測模式的示例。
為了適應增加數量的定向影格內模式,使用具有6個最可能模式(Most Probable Mode,MPM)的影格內模式編碼方法。涉及兩個主要技術方面:1)對6個MPM的推導,以及2)6個MPM和非MPM模式的熵編碼。
在JEM中,被包括在MPM列表中的模式被分類為三組: --鄰域影格內模式 --推導的影格內模式 --預設影格內模式
使用五個相鄰影格內預測模式來形成MPM列表。5個相鄰塊的那些位置與Merge模式中使用的那些位置相同,即如圖28所示的左邊(L)、上面(A)、左下(BL)、右上(AR)和左上(AL)。通過將5個鄰域影格內模式以及平面和DC模式插入MPM列表來形成初始MPM列表。修剪過程用於移除重複模式,以便只有唯一模式可以被包括在MPM列表中。初始模式被包括的順序是:左邊、上面、平面、DC、左下、右上、並且然後左上。
如果MPM列表未滿(即列表中少於6個MPM候選),則添加推導模式;通過將
Figure 02_image021
Figure 02_image023
添加到已被包括在MPM列表中的角度模式(angular mode)來獲得這些影格內模式。這樣的附加推導模式不是從非角度模式(DC或平面)生成的。
最後,如果MPM列表仍未完成,則按以下順序添加預設模式:垂直、水平、模式2和對角線模式。作為該過程的結果,生成6個MPM模式的唯一列表。
對於使用6個MPM對所選擇的模式進行熵編碼,使用捨位元一元二值化。前三個二進制位元用上下文編碼,該上下文取決於與當前信令通知的二進制位元相關的MPM模式。MPM模式分類為以下三類中的一類:(a)主要為水平的模式(即MPM模式數量小於或等於對角線方向的模式數量),(b)主要為垂直的模式(即MPM模式大於對角線方向的模式數量,以及(c)非角度(DC和平面)類。因此,基於該分類,三個上下文用於信令通知MPM索引。
用於選擇剩餘的61個非MPM的編碼如下進行。61個非MPM首先劃分為兩個集合:所選擇的模式集和非選擇模式集。所選擇的模式集包含16個模式,其餘模式(45個模式)分配給未選擇模式集。當前模式所屬的模式集在具有標誌的位元流中指示。如果要指示的模式在所選擇的模式集內,則用4位元固定長度碼信令通知所選擇的模式,並且如果要指示的模式來自未選擇模式集,則用捨位元二進制碼信令通知所選擇的模式。所選擇的模式集是通過如下所示對61個非MPM模式進行子採樣而生成的: --所選擇的模式集= {0, 4, 8, 12, 16, 20 … 60} --未選擇模式集= {1, 2, 3, 5, 6, 7, 9, 10 … 59}
在編碼器側,使用HM的類似的兩階段影格內模式判定過程。在第一階段(即影格內模式預選階段)中,使用更低複雜度的絕對變換差和(Sum of Absolute Transform Difference,SATD)成本來從所有可用影格內模式預選N個影格內預測模式。在第二階段中,進一步應用更高複雜度的R-D成本選擇以從N個候選選擇一個影格內預測模式。然而,當應用67個影格內預測模式時,由於可用模式的總數大致加倍,所以如果直接使用HM的相同的編碼器模式判定過程,則影格內模式預選階段的複雜度也將增加。為了最小化編碼器複雜度增加,執行兩步影格內模式預選過程。在第一步,基於絕對變換差和(SATD)度量,從(圖27中由黑色實線箭頭指示的)原始的35個影格內預測模式選擇NN 取決於影格內預測塊尺寸)個模式;在第二步,通過SATD進一步檢查所選擇的N 個模式的直接鄰域(如圖27中由淺灰色虛線箭頭指示的附加影格內預測方向),並且更新所選擇的N 個模式的列表。最後,如果尚未包括MPM,則將前M 個MPM添加到N 個模式,並且針對第二階段R-D成本檢查生成候選影格內預測模式的最終列表,其以與HM相同的方式完成。基於HM中的原始設置,M 的值增加1,並且N 稍微減小,如下表10所示。
表10:影格內模式預選步驟中的模式候選的數量 表10
Figure 108123177-A0304-0010
5.3 色度影格內模式編碼的示例
在JEM中,允許總共11個影格內模式用於色度CB編碼。這些模式包括5個傳統影格內模式和6個跨分量線性模型模式。色度模式候選的列表包括以下三個部分: ●CCLM模式 ●DM模式,從覆蓋當前色度塊的並置的五個位置的亮度CB推導的影格內預測模式 ○按順序檢查的五個位置是:I條帶的當前色度塊的對應亮度塊內的中心(CR)、左上(TL)、右上(TR)、左下(BL)和右下(BR)4×4塊。對於P條帶和B條帶,僅檢查這五個子塊中的一個,因為它們具有相同的模式索引。圖29A和圖29B中示出了五個並置的亮度位置的示例。 ●根據空間相鄰塊的色度預測模式: ○5個色度預測模式:根據左邊、上面、左下、右上和左上空間上相鄰的塊 ○平面和DC模式 ○添加推導的模式,通過將
Figure 02_image021
Figure 02_image023
添加到已被包括在列表中的角度模式來獲得這些影格內模式。 ○垂直、水平、模式2
每當將新的色度影格內模式添加到候選列表時,應用修剪過程。然後將非CCLM色度影格內模式候選列表尺寸修整為5。對於模式信令,首先信令通知標誌以指示使用CCLM模式中的一個還是傳統色度影格內預測模式中的一個。然後可以跟隨幾個更多的標誌以指定用於當前色度CB的精確色度預測模式。
6. 現有實現方式的示例
當前HEVC設計可以採用當前塊與其相鄰塊(緊鄰當前塊)的相關性來更好地編碼運動資訊。然而,相鄰塊有可能對應於具有不同運動軌跡的不同物件。在這種情況下,根據其相鄰塊的預測效率不高。
根據非鄰近塊的運動資訊的預測可以帶來附加編碼增益,其存在將所有運動資訊(通常在4×4級別上)儲存到快取記憶體中的成本,這顯著增加了硬體實現方式的複雜性。
一元二值化方法適用於較少數量的允許的Merge候選。然而,當允許的候選的總數變得更大時,一元二值化可能是次優的。
AMVP候選列表構造過程的HEVC設計僅調用兩個空間AMVP候選當中的修剪。沒有利用完全修剪(可用候選中的每一個與所有其他候選相比),因為由於有限的修剪而編碼損失可忽略不計。然而,如果有更多的AMVP候選可用,修剪變得重要。此外,當啟用LAMVR時,應該研究如何構造AVMP候選列表。
7. 基於LUT的運動向量預測的示例方法
本公開技術的實施例克服了現有實現的缺點,從而為視頻編碼提供更高的編碼效率。可以增強現有和未來視頻編碼標準的基於所公開的技術的基於LUT的運動向量預測在針對各種實現方式描述的以下示例中闡明。在基於LUT的運動向量預測方法中,在編碼/解碼過程期間維護具有來自先前編碼的塊的運動資訊的一個或多個表。在一個塊的編碼/解碼期間,可以將LUT中的相關聯的運動資訊添加到運動候選列表,並且在對一個塊進行編碼/解碼之後,可以更新LUT。以下提供的所公開的技術的示例解釋了一般概念,並且不意味著被解釋為限制。在一個示例中,除非明確地相反指示,否則可以組合這些示例中描述的各種特徵。
關於術語,LUT的條目的以下示例是運動候選。術語運動候選用於指示儲存在查找表中的運動資訊的集合。對於傳統AMVP或Merge模式,AMVP或Merge候選用於儲存運動資訊。如下面將描述的,並且在非限制性示例中,具有用於運動向量預測的運動候選的LUT的概念被擴展到具有用於影格內模式編碼的影格內預測模式的LUT,或者擴展到具有用於IC參數編碼的光照補償參數的LUT或擴展到具有濾波器參數的LUT。用於運動候選的基於LUT的方法可以擴展到其他類型的編碼資訊,如本專利文獻中所述的,現有和未來視頻編碼標準。
查找表的示例
示例A1:每個查找表可以包含一個或多個運動候選,其中每個候選與其運動資訊相關聯。 a. 這裡的運動候選的運動資訊可以包括預測方向、參考索引/圖片、運動向量、LIC標誌、仿射標誌、MVD精度、MVD值中的部分或全部。 b. 運動資訊可以進一步包括塊位置資訊和/或塊形狀,以指示運動資訊來自哪裡。
LUT的選擇
示例B1:為了對塊進行編碼,可以按順序檢查來自一個查找表的運動候選中的部分或全部。當在對塊進行編碼期間檢查一個運動候選時,可以將其添加到運動候選列表(例如,AMVP、Merge候選列表)。 a. 可替換地,可以按順序檢查來自多個查找表的運動候選。 b. 可以在CTU、CTB、CU或PU、或者覆蓋多個CTU/CTB/CU/PU的區域中信令通知查找表索引。
定義LUT的示例
示例C1:可以用不同角色構造多個LUT。 (a)在一個示例中,一個LUT(第一LUT)可以包括具有來自AMVP編碼塊的純運動資訊的運動候選;並且另一個LUT(第二LUT)可以包括來自AMVP和Merge編碼的塊兩者的運動資訊。 (b)在一個示例中,一個LUT(第一LUT)可以包括具有純單向預測的運動候選;另一個LUT(第二LUT)可以包括具有雙向預測的運動候選。 (c)當對塊進行編碼時,可以定義LUT的檢查順序。對於每個LUT,可以在瀏覽第二LUT之前首先檢查多個運動候選。在一個示例中,對於上述情況,當對塊進行編碼時,首先檢查來自第二LUT的運動候選,然後是來自第一LUT的運動候選,或反之亦然。
更新LUT的示例
示例D1:在用運動資訊(即影格內塊複製模式、影格間編碼模式)對塊進行編碼之後,可以更新一個或多個查找表。 (a)當可以選擇查找表以用於對當前塊進行編碼時,在對塊進行編碼/解碼之後,可以進一步更新所選擇的查找表。 (b)可以基於編碼資訊和/或塊/LCU的位置來選擇要更新的查找表。 (c)如果用直接信令通知的運動資訊(諸如AMVP模式)對塊進行編碼,則可以將塊的運動資訊添加到查找表。
示例D2:在一個示例中,在用影格內塊複製模式對塊進行編碼/解碼之後,全部LUT不更新。
使用LUT的示例
示例E1:當用Merge或AMVP模式對塊進行編碼時,可以使用LUT。
示例E2:在一個示例中,當用影格內塊複製模式對塊進行編碼時,可以不使用LUT。
8. 基於LUT的運動向量預測的附加實施例
圖30中描繪了基於LUT的預測方法的編碼流程的示例。在一些實現中,更新過程在對區域進行解碼之後完成。避免頻繁更新LUT的示例在圖31中描繪。
9. 附加示例實施例
提出了基於歷史的MVP(History-based MVP,HMVP)方法,其中HMVP候選被定義為先前編碼的塊的運動資訊。在編碼/解碼過程期間維護具有多個HMVP候選的表。當遇到新條帶時,表被清空。每當存在影格間編碼塊時,將相關聯的運動資訊添加到表的最後一個條目作為新的HMVP候選。整個編碼流程在圖32中描繪。
在一個示例中,將表尺寸設置為L(例如,L = 16或6或44),其指示可以將多達L個HMVP候選添加到表中。
在一個實施例中,如果存在來自先前編碼的塊的多於L個HMVP候選,則應用先進先出(First-In-First-Out,FIFO)規則,以便表始終包含最新的先前編碼的L個運動候選。圖33描繪了在所提出的方法中使用的其中應用FIFO規則以移除HMVP候選並將新的HMVP候選添加到表中的示例。
在另一實施例中,每當添加新的運動候選(諸如當前塊是影格間編碼的並且非仿射模式)時,首先應用冗餘檢查過程來識別在LUT中是否存在相同或相似的運動候選。
一些示例描繪如下:
圖34A示出了當在添加新的運動候選之前LUT已滿時的示例。
圖34B示出了當在添加新的運動候選之前LUT未滿時的示例。
圖34A和圖34B一起示出了基於冗餘移除的LUT更新方法的示例(其中一個冗餘運動候選被移除)。
圖35A和35B示出了基於冗餘移除的LUT更新方法的兩種情況的示例實現(其中多個冗餘運動候選(圖中的2個候選)被移除)
圖35A示出了當在添加新的運動候選之前LUT已滿時的示例情況。
圖35B示出了當在添加新的運動候選之前LUT未滿時的示例情況。
HMVP候選可以用於Merge候選列表構造過程中。在TMVP候選之後插入表中的從最後一個條目到第一個條目(或最後K0 個HMVP,例如,K0 等於16或6)的所有HMVP候選。修剪應用於HMVP候選。一旦可用Merge候選的總數達到信令通知的最大允許Merge候選,則終止Merge候選列表構造過程。可替換地,一旦添加的運動候選的總數達到給定值,則終止從LUT提取運動候選。
類似地,HMVP候選也可以用於AMVP候選列表構造過程中。在TMVP候選之後插入表中的最後K1 個HMVP候選的運動向量。僅使用具有與AMVP目標參考圖片相同的參考圖片的HMVP候選來構造AMVP候選列表。修剪應用於HMVP候選。在一個示例中,K1 被設置為4。
上述示例可以併入在下面描述的方法(例如,可以在視頻解碼器和/或視訊編碼器處實現的方法3610和3620)的上下文中。
圖36A和36B示出了用於視頻處理方法的示例性方法的流程圖。在圖36A中,方法3610包括:在步驟3612處,維護查找表(LUT)的集合,其中每個LUT包括從在視頻資料中的第一視頻塊之前被解碼的先前解碼的視頻塊推導的運動候選。方法3610進一步包括:在步驟3614處,執行第一視頻塊的位元流表示與第一視頻塊之間的轉換。方法3610進一步包括:在步驟3616處,基於轉換來更新LUT的集合內的一個或多個LUT。
在圖36B中,方法3620包括:在步驟3622處,接收視頻資料的第一塊的位元流表示。方法3620進一步包括:在步驟3624處,基於查找表(LUT)的集合來處理位元流表示,以生成視頻資料的第一塊,其中LUT的集合包括編碼候選。
下面使用基於條款的描述格式描述上述方法/技術的附加特徵和實施例。
1. 一種視頻處理方法(例如,如圖36A描繪的方法3610),包括:維護表的集合,其中每個表包括從在視頻資料中的第一視頻塊之前被解碼的先前解碼的視頻塊推導的運動候選;執行第一視頻塊的位元流表示與第一視頻塊之間的轉換;以及基於轉換來更新表的集合內的一個或多個表。
2. 根據條款1所述的方法,其中,更新一個或多個表包括基於轉換來確定是否更新一個或多個表。
3. 根據條款1所述的方法,其中,第一視頻塊是使用影格間編碼模式來編碼的,其中該影格間編碼模式使用來自不同圖片的參考樣點。
4. 根據條款1所述的方法,其中,第一視頻塊是使用影格內塊複製模式來編碼的,該影格內塊複製模式使用來自包括第一視頻塊的當前圖片的參考樣點。
5. 根據條款1所述的方法,其中,第一視頻塊在視頻資料的條帶、圖片或片中。
6. 根據條款1所述的方法,其中,轉換被執行以基於表的集合來獲得重建的第一視頻塊,並且一個或多個表是使用重建的第一視頻塊來更新的。
7. 根據條款1所述的方法,其中,轉換被執行以在不使用表的集合的情況下獲得重建的第一視頻塊,並且一個或多個表是使用重建的第一視頻塊來更新的。
8. 根據條款1所述的方法,其中,轉換被執行以基於表的集合來獲得重建的第一視頻塊,並且沒有表是使用重建的第一視頻塊更新的。
9. 根據條款1所述的方法,進一步包括:基於更新的表的集合來執行視頻資料中的第二視頻塊的位元流表示和第二視頻塊之間的轉換。
10. 根據條款1或9所述的方法,其中,執行轉換包括從第一視頻塊或第二視頻塊生成位元流表示。
11. 根據條款1或9所述的方法,其中,執行轉換包括從位元流表示生成第一視頻塊或第二視頻塊。
12. 根據條款11所述的方法,其中,第二視頻塊在生成第一視頻塊之後被生成。
13. 根據條款11所述的方法,其中,用於生成第二視頻塊的表中的一個包括從第一視頻塊推導的運動候選。
14. 根據條款1所述的方法,其中,更新一個或多個表包括將第一視頻塊的運動資訊添加到一個或多個表。
15. 根據條款1所述的方法,其中,表的集合中的運動候選中的一個是從與第一視頻塊相鄰的第三視頻塊推導的。
16. 根據條款1所述的方法,其中,表的集合中的運動候選中的一個是從與第一視頻塊不相鄰的第四視頻塊推導的。
17. 根據條款1所述的方法,其中,表的集合中的第一運動候選是從與第一視頻塊相鄰的第三視頻塊推導的,並且表中的第二運動候選是從與第一視頻塊不相鄰的第四視頻塊推導的。
18. 根據條款1所述的方法,其中,運動資訊包括以下中的至少一個:預測方向、參考圖片索引、運動向量值、強度補償標誌、仿射標誌、運動向量差精度或運動向量差值。
19. 根據條款1所述的方法,其中,運動資訊包括指示運動資訊的源的塊位置資訊。
20. 根據條款1所述的方法,其中,運動資訊包括指示運動資訊的源的塊形狀資訊。
21. 根據條款1所述的方法,其中,執行轉換包括按順序檢查來自一個表的運動候選中的部分或全部。
22. 根據條款1所述的方法,其中,執行轉換包括按順序檢查來自多個表的運動候選。
23. 根據條款1所述的方法,其中,執行轉換包括信令通知選擇的表索引,其中根據該所選擇的表索引的運動候選被檢查以用於解碼第一視頻塊。
24. 根據條款23所述的方法,其中,信令通知是以編碼樹單元(CTU)、編碼樹塊(CTB)、編碼單元(CU)、預測單元(PU)、或覆蓋多個CTU/CTB/CU/PU的區域的級別執行的。
25. 根據條款1所述的方法,其中,表的集合內的一個表是根據特定規則來更新的。
26. 根據條款25所述的方法,其中,表的集合中的第一表是僅用來自高級運動向量預測(AMVP)編碼塊的運動資訊來更新的,並且其中表的集合中的第二表是用來自AMVP和Merge編碼的塊的運動資訊來更新的。
27. 根據條款26所述的方法,其中,表的集合中的第一表是僅用來自影格間編碼塊的運動資訊來更新的,並且其中表的集合中的第二表是用來自用影格內塊複製模式編碼的塊的運動資訊來更新的。
28. 根據條款26所述的方法,其中,表的集合中的第一表是僅用單向預測運動資訊來更新的,並且其中表的集合中的第二表是僅用具有雙向預測運動資訊的運動候選更新的。
29. 根據條款26或28所述的方法,其中,第二表中的運動候選在檢查第一表中的運動候選之前被檢查。
30. 根據條款28或29所述的方法,其中,第二表中的運動候選在檢查第一表中的運動候選之後被檢查。
31. 一種用於視頻處理的方法(例如,如圖36B描繪的方法3620),包括:接收視頻資料的第一塊的位元流表示;以及基於表的集合來處理位元流表示,以生成視頻資料的第一塊,其中表的集合包括編碼候選。
32. 根據條款31所述的方法,其中,編碼候選包括運動候選。
33. 根據條款32所述的方法,其中,表的集合中的第一表包括僅具有來自高級運動向量預測(AMVP)編碼塊的運動資訊的運動候選,並且其中表的集合中的第二表包括具有來自AMVP和Merge編碼的塊的運動資訊的運動候選。
34. 根據條款32所述的方法,其中,表的集合中的第一表包括僅具有單向預測的運動候選,並且其中表的集合中的第二表包括僅具有雙向預測的運動候選。
35. 根據條款32所述的方法,其中,表的集合中的第一表包括具有影格間編碼的運動候選,並且其中表的集合中的第二表包括具有影格內塊複製模式編碼的運動候選。
36. 根據條款33至35中任一項所述的方法,其中,第二表中的運動候選在檢查第一表中的運動候選之前被檢查。
37. 根據條款33至35中任一項所述的方法,其中,第二表中的運動候選在檢查第一表中的運動候選之後被檢查。
38. 根據條款31所述的方法,其中,表被用來預測視頻資料的第二塊的運動資訊。
39. 根據條款31所述的方法,其中,編碼候選包括運動資訊,其中該運動資訊包括以下中的至少一個:預測方向、參考圖片索引、運動向量值、強度補償標誌、仿射標誌、運動向量差精度或運動向量差值。
40. 根據條款31所述的方法,其中,編碼候選包括運動資訊,其中該運動資訊包括指示運動資訊的源的塊位置資訊。
41. 根據條款31所述的方法,其中,編碼候選包括運動資訊,其中該運動資訊包括指示運動資訊的源的塊形狀資訊。
42. 根據條款31所述的方法,其中,該處理包括解碼視頻資料的第一塊的位元流表示。
43. 根據條款1至30、32至34、36和37中任一項所述的方法,其中,運動候選對應於用於影格內模式編碼的影格內預測模式的運動候選。
44. 根據條款1至30、32至34、36和37中任一項所述的方法,其中,運動候選對應於包括用於IC參數編碼的光照補償參數的運動候選。
45. 根據條款14、18至20、26至28、33、35和38至41中任一項所述的方法,其中,運動候選的運動資訊包括濾波器參數。
46. 一種裝置,包括處理器和其上具有指令的非暫態記憶體,其中,該指令在由處理器執行時使得處理器實現根據條款1至46中任一項所述的方法。
47. 一種儲存在非暫態電腦可讀介質上的電腦程式產品,該電腦程式產品包括用於執行根據條款1至46中任一項所述的方法的程式碼。
9. 所公開的技術的示例實現方式
圖37是視頻處理裝置3700的框圖。裝置3700可以用於實現本文描述的一個或多個方法。裝置3700可以實施在智慧手機、平板電腦、電腦、物聯網(Internet of Things,IoT)接收器等中。裝置3700可以包括一個或多個處理器3702、一個或多個記憶體3704和視頻處理硬體3706。(多個)處理器3702可以被配置為實現在本文文件中描述的一個或多個方法(包括但不限於方法3610和3620)。記憶體3704可以用於儲存用於實現本文描述的方法和技術的資料和代碼。視頻處理硬體3706可以用於在硬體電路中實現本文文件中描述的一些技術。
在一些實施例中,視頻編碼方法可以使用在如關於圖37所描述的硬體平臺上實現的裝置而實現。
根據前述內容,可以理解本文已經出於說明的目的描述了本公開技術的具體實施例,但是在不脫離本發明範圍的情況下可以進行各種修改。因此,本公開技術不受除了所附申請專利範圍之外的限制。
本專利文文件中描述的主題和功能操作的實現方式可以在各種系統、數位電子電路或電腦軟體、固件或硬體(包括本說明書中公開的結構及其結構等同物、或者它們中的一個或多個的組合)中實現。本說明書中描述的主題的實現方式可以實現為一個或多個電腦程式產品,即編碼在有形和非暫態電腦可讀介質上的電腦程式指令的一個或多個模組,該電腦程式指令用於由資料處理裝置運行或控制資料處理裝置的操作。電腦可讀介質可以是機器可讀儲存裝置、機器可讀儲存基板、記憶體設備、影響機器可讀傳播訊號的物質的組成、或它們中的一個或多個的組合。術語「資料處理單元」或「資料處理裝置」涵蓋用於處理資料的所有裝置、設備和機器,包括例如可程式設計處理器、電腦、或多個處理器或電腦。除了硬體之外,裝置還可以包括為所討論的電腦程式創建運行環境的代碼,例如,構成處理器固件、協定疊、資料庫管理系統、作業系統、或它們中的一個或多個的組合的代碼。
電腦程式(也已知為程式、軟體、軟體應用、腳本或代碼)可以以任何形式的程式設計語言(包括編譯或解釋語言)編寫,並且其可以以任何形式部署,包括作為獨立程式或作為適合在計算環境中使用的模組、組件、子常式或其他單元。電腦程式不一定對應於檔案系統中的文件。程式可以儲存在保存其他程式或資料(例如,儲存在標記語言文件中的一個或多個腳本)的文件的一部分中,儲存在專用於所討論的程式的單個文件中,或儲存在多個協調文件中(例如,儲存一個或多個模組、副程式或代碼部分的文件)。電腦程式可以被部署以在一個電腦上或在位於一個網站上或跨多個網站分佈並通過通訊網路互連的多個電腦上運行。
本說明書中描述的過程和邏輯流程可以由運行一個或多個電腦程式的一個或多個可程式設計處理器執行,以通過對輸入資料進行操作並生成輸出來執行功能。過程和邏輯流程也可以由專用邏輯電路執行,並且裝置也可以實現為專用邏輯電路,例如,FPGA(Field Programmable Gate Array,現場可程式化邏輯閘陣列)或ASIC(Application Specific Integrated Circuit,專用積體電路)。
適合於運行電腦程式的處理器包括例如通用和專用微處理器、以及任何類型的數位電腦的任何一個或多個處理器。通常,處理器將從唯讀記憶體或隨機存取記憶體或兩者接收指令和資料。電腦的基本元件是用於執行指令的處理器和用於儲存指令和資料的一個或多個記憶體設備。通常,電腦還將包括用於儲存資料的一個或多個大容量儲存設備(例如,磁碟、磁光碟或光碟),或可操作地耦合以從該一個或多個大容量儲存設備接收資料或向該一個或多個大容量儲存設備傳遞資料、或者從其接收資料並向其傳遞資料。然而,電腦不需要這樣的設備。適用於儲存電腦程式指令和資料的電腦可讀介質包括所有形式的非易失性記憶體、介質和記憶體設備,包括例如半導體記憶體設備,例如,EPROM、EEPROM和快閃記憶體設備。處理器和記憶體可以由專用邏輯電路補充或併入專用邏輯電路中。
說明書與附圖一起旨在被視為是示例性的,其中示例性意味著示例。如本文所使用的,除非上下文另有清楚說明,否則單數形式「一」、「一個」和「該」旨在也包括複數形式。另外,除非上下文另有清楚說明,否則使用「或」旨在包括「和/或」。
雖然本專利文件包含許多細節,但這些細節不應被解釋為對任何發明或可能要求保護的範圍的限制,而是作為特定於特定發明的特定實施例的特徵的描述。在單獨的實施例的上下文中在本專利文件中描述的某些特徵也可以在單個實施例中組合實現。相反,在單個實施例的上下文中描述的各種特徵也可以分別在多個實施例中或以任何合適的子組合實現。而且,儘管特徵可以在上面描述為以某些組合起作用並且甚至最初如此要求保護,但是在一些情況下可以從組合排除來自所要求保護的組合的一個或多個特徵,並且所要求保護的組合可以針對子組合或子組合的變化。
類似地,雖然在附圖中以特定順序描繪了操作,但是這不應該被理解為要求以所示的特定順序或以先後循序執行這樣的操作或者執行所有示出的操作以實現期望的結果。此外,在本專利文件中描述的實施例中的各種系統元件的分離不應被理解為在所有實施例中都需要這樣的分離。
僅描述了一些實現方式和示例,並且可以基於本專利文件中描述和示出的內容來進行其他實現、增強和變化。
100‧‧‧典型HEVC視頻編碼器和解碼器 200‧‧‧巨集塊分割 300‧‧‧預測塊 700‧‧‧編碼樹單元 1510‧‧‧原始列表 1520‧‧‧最終列表 1800、2000‧‧‧CU 1801、2001、2002、2003、2004‧‧‧子CU 1850‧‧‧參考圖片/運動源圖片 1851‧‧‧對應塊 2011、2012、2013、2014‧‧‧塊 2100、2200‧‧‧當前CU 2110、2111、2210、Ref0、Ref1‧‧‧參考圖片 2101、2102、MV0、MV1、MV0'、MV1'‧‧‧運動向量 2103、2104、TD0、TD1‧‧‧時間距離 2300‧‧‧單向運動估計 3610、3620‧‧‧方法 3612、3614、3616、3622、3624‧‧‧步驟 3700‧‧‧裝置 3702‧‧‧處理器 3704‧‧‧記憶體 3706‧‧‧視頻處理硬體 A‧‧‧上面 AL、TL‧‧‧左上 AR、TR‧‧‧右上 A0、A1、B0、B1、B2、C0、C1‧‧‧位置 BL、BL‧‧‧左下 BR‧‧‧右下 CR‧‧‧中心 CL-1、HMVP0、HMVP1、HMVP2、HMVP3、HMVP4、HMVPm、HMVPL-2、HMVPL-1‧‧‧運動候選 L‧‧‧左邊 list0、list1‧‧‧表 tb、td‧‧‧POC差
圖1示出了典型的高效視頻編碼(HEVC)視頻編碼器和解碼器的示例框圖。 圖2示出了H.264/AVC中的巨集塊(MacroBlock,MB)分割的示例。 圖3示出了將編碼塊(Coding Block,CB)劃分為預測塊(Prediction Block,PB)的示例。 圖4A和圖4B分別示出了將編碼樹塊(Coding Tree Block,CTB)細分為CB和變換塊(Transform Block,TB)、以及對應的四叉樹的示例。 圖5A和圖5B示出了用於最大編碼單元(Largest Coding Unit,LCU)的細分和對應的QTBT(QuadTree plus Binary Tree,四叉樹加二叉樹)的示例。 圖6A至圖6E示出了分割編碼塊的示例。 圖7示出了基於QTBT的CB的示例細分。 圖8A至圖8I示出了支持作為QTBT的一般化的多樹類型(Multi-Tree Type,MTT)的CB的分割的示例。 圖9A示出了樹型信令的示例。 圖9B示出了構造Merge候選列表的示例。 圖10示出了空間候選的位置的示例。 圖11示出了對其進行空間Merge候選的冗餘檢查的候選對的示例。 圖12A和圖12B示出了基於當前塊的尺寸和形狀的第二預測單元(Prediction Unit,PU)的位置的示例。 圖13示出了用於時間Merge候選的運動向量縮放的示例。 圖14示出了時間Merge候選的候選位置的示例。 圖15示出了生成組合的雙向預測Merge候選的示例。 圖16A和圖16B示出了用於運動向量預測候選的推導過程的示例。 圖17示出了用於空間運動向量候選的運動向量縮放的示例。 圖18示出了使用用於編碼單元(Coding Unit,CU)的可選時域運動向量預測(Alternative Temporal Motion Vector Prediction,ATMVP)演算法的運動預測的示例。 圖19示出了識別源塊和源圖片的示例。 圖20示出了由時空運動向量預測(Spatial-Temporal Motion Vector Prediction,STMVP)演算法使用的具有子塊和相鄰塊的編碼單元(CU)的示例。 圖21示出了作為基於影格速率上轉換(Frame-Rate Up Conversion,FRUC)演算法的特殊Merge模式的模式匹配的運動向量推導(Pattern Matched Motion Vector Derivation,PMMVD)模式中的雙向匹配的示例。 圖22示出了FRUC演算法中的模板匹配的示例。 圖23示出了FRUC演算法中的單向運動估計的示例。 圖24示出了基於雙向模板匹配的解碼器側運動向量細化(Decoder-side Motion Vector Refinement,DMVR)演算法的示例。 圖25示出了用於推導光照補償(Illumination Compensation,IC)參數的相鄰樣點的示例。 圖26示出了用於推導空間Merge候選的相鄰塊的示例。 圖27示出了所提出的67個影格內預測模式的示例。 圖28示出了用於最可能模式推導的相鄰塊的示例。 圖29A和圖29B示出了具有QTBT結構的I條帶中的對應的亮度和色度子塊。 圖30示出了在一個塊之後更新的基於LUT的MVP/影格內模式預測/IC參數的示例的編碼流程。 圖31示出了在一個區域之後更新的基於LUT的MVP/影格內模式預測/IC參數的示例的編碼流程。 圖32示出了利用所提出的HMVP方法的解碼流程圖的示例。 圖33示出了使用所提出的HMVP方法更新表的示例。 圖34A和圖34B示出了基於冗餘移除的LUT更新方法的示例(其中一個冗餘運動候選被移除)。 圖35A和圖35B示出了基於冗餘移除的LUT更新方法的示例(其中多個冗餘運動候選被移除)。 圖36A和圖36B示出了根據所公開技術的用於視頻處理的示例方法的流程圖。 圖37是用於實現本文文件中描述的視覺媒體解碼或視覺媒體編碼技術的硬體平臺的示例的框圖。

Claims (47)

  1. 一種視頻處理方法,包括: 維護表的集合,其中每個表包括從在視頻資料中的第一視頻塊之前被解碼的先前解碼的視頻塊推導的運動候選; 執行所述第一視頻塊的位元流表示與所述第一視頻塊之間的轉換;以及 基於所述轉換來更新所述表的集合內的一個或多個表。
  2. 如申請專利範圍第1項所述的方法,其中,更新所述一個或多個表包括基於所述轉換來確定是否更新所述一個或多個表。
  3. 如申請專利範圍第1項所述的方法,其中,所述第一視頻塊是使用影格間編碼模式來編碼的,所述影格間編碼模式使用來自不同圖片的參考樣點。
  4. 如申請專利範圍第1項所述的方法,其中,所述第一視頻塊是使用影格內塊複製模式來編碼的,其中所述影格內塊複製模式使用來自包括所述第一視頻塊的當前圖片的參考樣點。
  5. 如申請專利範圍第1項所述的方法,其中,所述第一視頻塊在所述視頻資料的條帶、圖片或片中。
  6. 如申請專利範圍第1項所述的方法,其中,所述轉換被執行以基於所述表的集合來獲得重建的第一視頻塊,並且所述一個或多個表是使用所述重建的第一視頻塊來更新的。
  7. 如申請專利範圍第1項所述的方法,其中,所述轉換被執行以在不使用所述表的集合的情況下獲得重建的第一視頻塊,並且所述一個或多個表是使用所述重建的第一視頻塊來更新的。
  8. 如申請專利範圍第1項所述的方法,其中,所述轉換被執行以基於所述表的集合來獲得重建的第一視頻塊,並且沒有表是使用所述重建的第一視頻塊來更新的。
  9. 如申請專利範圍第1項所述的方法,進一步包括:基於所更新的所述表的集合來執行所述視頻資料中的第二視頻塊的位元流表示與所述第二視頻塊之間的轉換。
  10. 如申請專利範圍第1或9項所述的方法,其中,執行所述轉換包括從所述第一視頻塊或所述第二視頻塊生成位元流表示。
  11. 如申請專利範圍第1或9項所述的方法,其中,執行所述轉換包括從位元流表示生成所述第一視頻塊或所述第二視頻塊。
  12. 如申請專利範圍第11項所述的方法,其中,所述第二視頻塊在生成所述第一視頻塊之後被生成。
  13. 如申請專利範圍第11項所述的方法,其中,用於生成所述第二視頻塊的表中的一個表包括從所述第一視頻塊推導的運動候選。
  14. 如申請專利範圍第1項所述的方法,其中,更新所述一個或多個表包括將所述第一視頻塊的運動資訊添加到所述一個或多個表。
  15. 如申請專利範圍第1項所述的方法,其中,所述表的集合中的運動候選中的一個運動候選是從與所述第一視頻塊相鄰的第三視頻塊推導的。
  16. 如申請專利範圍第1項所述的方法,其中,所述表的集合中的運動候選中的一個運動候選是從與所述第一視頻塊不相鄰的第四視頻塊推導的。
  17. 如申請專利範圍第1項所述的方法,其中,所述表的集合中的第一運動候選是從與所述第一視頻塊相鄰的第三視頻塊推導的,並且所述表中的第二運動候選是從與所述第一視頻塊不相鄰的第四視頻塊推導的。
  18. 如申請專利範圍第1項所述的方法,其中,所述運動資訊包括以下中的至少一個:預測方向、參考圖片索引、運動向量值、強度補償標誌、仿射標誌、運動向量差精度或運動向量差值。
  19. 如申請專利範圍第1項所述的方法,其中,所述運動資訊包括指示所述運動資訊的源的塊位置資訊。
  20. 如申請專利範圍第1項所述的方法,其中,所述運動資訊包括指示所述運動資訊的源的塊形狀資訊。
  21. 如申請專利範圍第1項所述的方法,其中,執行所述轉換包括按順序檢查來自一個表的運動候選中的部分或全部。
  22. 如申請專利範圍第1項所述的方法,其中,執行所述轉換包括按順序檢查來自多個表的運動候選。
  23. 如申請專利範圍第1項所述的方法,其中,執行所述轉換包括信令通知選擇的表索引,其中根據所述選擇的表索引的運動候選被檢查以用於解碼所述第一視頻塊。
  24. 如申請專利範圍第23項所述的方法,其中,所述信令通知是以編碼樹單元、編碼樹塊、編碼單元、預測單元、或覆蓋多個編碼樹單元、編碼樹塊、編碼單元或預測單元的區域的級別來執行的。
  25. 如申請專利範圍第1項所述的方法,其中,所述表的集合內的一個表是根據特定規則來更新的。
  26. 如申請專利範圍第25項所述的方法,其中,所述表的集合中的第一表是僅用來自高級運動向量預測編碼的塊的運動資訊來更新的,並且其中所述表的集合中的第二表是用來自高級運動向量預測和Merge編碼的塊的運動資訊來更新的。
  27. 如申請專利範圍第26項所述的方法,其中,所述表的集合中的第一表是僅用來自影格間編碼塊的運動資訊來更新的,並且其中所述表的集合中的第二表是用來自用影格內塊複製模式編碼的塊的運動資訊來更新的。
  28. 如申請專利範圍第26項所述的方法,其中,所述表的集合中的第一表是僅用單向預測運動資訊來更新的,並且其中所述表的集合中的第二表是僅用具有雙向預測運動資訊的運動候選更新的。
  29. 如申請專利範圍第26或28項所述的方法,其中,所述第二表中的運動候選在檢查所述第一表中的運動候選之前被檢查。
  30. 如申請專利範圍第28或29項所述的方法,其中,所述第二表中的運動候選在檢查所述第一表中的運動候選之後被檢查。
  31. 一種視頻處理方法,包括: 接收視頻資料的第一塊的位元流表示;以及 基於表的集合來處理所述位元流表示,以生成所述視頻資料的所述第一塊,其中所述表的集合包括編碼候選。
  32. 如申請專利範圍第31項所述的方法,其中,所述編碼候選包括運動候選。
  33. 如申請專利範圍第32項所述的方法,其中,所述表的集合中的第一表包括僅具有來自高級運動向量預測編碼的塊的運動資訊的運動候選,並且其中所述表的集合中的第二表包括具有來自高級運動向量預測和Merge編碼的塊的運動資訊的運動候選。
  34. 如申請專利範圍第32項所述的方法,其中,所述表的集合中的第一表包括僅具有單向預測的運動候選,並且其中所述表的集合中的第二表包括僅具有雙向預測的運動候選。
  35. 如申請專利範圍第32項所述的方法,其中,所述表的集合中的第一表包括具有影格間編碼的運動候選,並且其中所述表的集合中的第二表包括具有影格內塊複製模式編碼的運動候選。
  36. 如申請專利範圍第33至35項中任一項所述的方法,其中,所述第二表中的運動候選在檢查所述第一表中的運動候選之前被檢查。
  37. 如申請專利範圍第33至35項中任一項所述的方法,其中,所述第二表中的運動候選在檢查所述第一表中的運動候選之後被檢查。
  38. 如申請專利範圍第31項所述的方法,其中,所述表被用來預測視頻資料的第二塊的運動資訊。
  39. 如申請專利範圍第31項所述的方法,其中,所述編碼候選包括運動資訊,其中所述運動資訊包括以下中的至少一個:預測方向、參考圖片索引、運動向量值、強度補償標誌、仿射標誌、運動向量差精度或運動向量差值。
  40. 如申請專利範圍第31項所述的方法,其中,所述編碼候選包括運動資訊,其中所述運動資訊包括指示所述運動資訊的源的塊位置資訊。
  41. 如申請專利範圍第31項所述的方法,其中,所述編碼候選包括運動資訊,其中所述運動資訊包括指示所述運動資訊的源的塊形狀資訊。
  42. 如申請專利範圍第31項所述的方法,其中,所述處理包括解碼所述視頻資料的所述第一塊的位元流表示。
  43. 如申請專利範圍第1至30、32至34、36和37項中任一項所述的方法,其中,所述運動候選對應於用於影格內模式編碼的影格內預測模式的運動候選。
  44. 如申請專利範圍第1至30、32至34、36和37項中任一項所述的方法,其中,所述運動候選對應於包括用於IC參數編碼的光照補償參數的運動候選。
  45. 如申請專利範圍第14、18至20、26至28、33、35和38至41項中任一項所述的方法,其中,所述運動候選的運動資訊包括濾波器參數。
  46. 一種裝置,包括處理器和其上具有指令的非暫態記憶體,其中所述指令在由處理器運行時使得所述處理器實現根據申請專利範圍1至45中的一項或多項所述的方法。
  47. 一種儲存在非暫態電腦可讀介質上的電腦程式產品,所述電腦程式產品包括用於執行根據申請專利範圍1至46中的一項或多項所述的方法的程式碼。
TW108123177A 2018-06-29 2019-07-01 使用一個或多個查找表來按順序存儲先前編碼的運動信息並使用它們來編碼後面的塊的概念 TWI723444B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
CN2018093663 2018-06-29
WOPCT/CN2018/093663 2018-06-29
WOPCT/CN2018/093987 2018-07-02
CN2018093987 2018-07-02
CN2018105193 2018-09-12
WOPCT/CN2018/105193 2018-09-12

Publications (2)

Publication Number Publication Date
TW202002647A true TW202002647A (zh) 2020-01-01
TWI723444B TWI723444B (zh) 2021-04-01

Family

ID=67262802

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108123177A TWI723444B (zh) 2018-06-29 2019-07-01 使用一個或多個查找表來按順序存儲先前編碼的運動信息並使用它們來編碼後面的塊的概念

Country Status (8)

Country Link
US (2) US11895318B2 (zh)
EP (1) EP3791586A1 (zh)
JP (2) JP7137008B2 (zh)
KR (1) KR20210025537A (zh)
CN (1) CN110662059B (zh)
GB (1) GB2588531B (zh)
TW (1) TWI723444B (zh)
WO (1) WO2020003279A1 (zh)

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190090731A (ko) * 2018-01-25 2019-08-02 주식회사 윌러스표준기술연구소 비디오 신호 처리 방법 및 장치
EP3769528A4 (en) * 2018-03-19 2021-11-10 QUALCOMM Incorporated IMPROVEMENTS TO ADVANCED MOVEMENT VECTOR PREDICTION
KR20240005240A (ko) 2018-06-29 2024-01-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut에서의 모션 후보들의 검사 순서
KR102660666B1 (ko) 2018-06-29 2024-04-26 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut들을 업데이트하기 위한 조건들
WO2020003280A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Which lut to be updated or no updating
KR20210024502A (ko) 2018-06-29 2021-03-05 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Hmvp 후보를 병합/amvp에 추가할 때의 부분/풀 프루닝
KR20210025537A (ko) 2018-06-29 2021-03-09 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 하나 또는 다수의 룩업 테이블들을 사용하여 이전에 코딩된 모션 정보를 순서대로 저장하고 이를 사용하여 후속 블록들을 코딩하는 개념
CN110662053B (zh) 2018-06-29 2022-03-25 北京字节跳动网络技术有限公司 使用查找表的视频处理方法、装置和存储介质
BR112020024202A2 (pt) 2018-06-29 2021-02-17 Beijing Bytedance Network Technology Co., Ltd. método de processamento de dados de vídeo, aparelho de processamento de vídeo e meios de armazenamento e gravação legíveis por computador não transitório
WO2020003284A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and amvp
EP4307679A2 (en) 2018-07-02 2024-01-17 Beijing Bytedance Network Technology Co., Ltd. Luts with intra prediction modes and intra mode prediction from non-adjacent blocks
US11509890B2 (en) * 2018-07-24 2022-11-22 Hfi Innovation Inc. Methods and apparatus for entropy coding and decoding aspects of video data
TWI820211B (zh) 2018-09-12 2023-11-01 大陸商北京字節跳動網絡技術有限公司 取決於總數減去k的開始檢查hmvp候選的條件
KR20200032657A (ko) * 2018-09-18 2020-03-26 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2020058893A1 (en) 2018-09-19 2020-03-26 Beijing Bytedance Network Technology Co., Ltd. History based motion vector predictor for intra block copy
WO2020106653A1 (en) * 2018-11-20 2020-05-28 Interdigital Vc Holdings, Inc. Current picture referencing block vector initialization with dual tree
WO2020108649A1 (en) 2018-11-29 2020-06-04 Beijing Bytedance Network Technology Co., Ltd. Interaction between intra block copy mode and inter prediction tools
WO2020114407A1 (en) 2018-12-03 2020-06-11 Beijing Bytedance Network Technology Co., Ltd. Partial pruning method for hmvp mode
US11197017B2 (en) * 2018-12-06 2021-12-07 Tencent America LLC Methods and apparatuses for video coding
EP3900347A2 (en) * 2018-12-21 2021-10-27 Vid Scale, Inc. Methods, architectures, apparatuses and systems directed to improved linear model estimation for template based video coding
JP7407412B2 (ja) * 2018-12-28 2024-01-04 合同会社IP Bridge1号 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法、動画像復号プログラム、格納方法、及び伝送方法
KR20240000647A (ko) * 2018-12-28 2024-01-02 고도 가이샤 아이피 브릿지 1 동화상 부호화 장치, 동화상 부호화 방법, 동화상 부호화 프로그램, 동화상 복호 장치, 동화상 복호 방법, 동화상 복호 프로그램, 기록 매체, 전송 방법 및 기록 방법
EP3731522A4 (en) * 2019-01-01 2021-04-14 LG Electronics Inc. METHOD AND APPARATUS FOR PROCESSING VIDEO SIGNAL BASED ON HISTORY-BASED MOTION VECTOR PREDICTION
EP3888355A4 (en) 2019-01-10 2022-03-23 Beijing Bytedance Network Technology Co., Ltd. LOOKUP TABLE UPDATE INVOCATION
CN113383554B (zh) 2019-01-13 2022-12-16 北京字节跳动网络技术有限公司 LUT和共享Merge列表之间的交互
WO2020147772A1 (en) 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Motion candidates derivation
WO2020159994A1 (en) 2019-01-28 2020-08-06 Op Solutions, Llc Online and offline selection of extended long term reference picture retention
KR102617439B1 (ko) * 2019-02-26 2023-12-26 애플 인크. 영상 신호 부호화/복호화 방법 및 이를 위한 장치
CN113615193A (zh) 2019-03-22 2021-11-05 北京字节跳动网络技术有限公司 Merge列表构建和其他工具之间的交互
US11157278B2 (en) 2019-05-27 2021-10-26 Texas Instruments Incorporated Histogram operation
EP3963890A4 (en) 2019-06-04 2022-11-02 Beijing Bytedance Network Technology Co., Ltd. BUILDING A LIST OF MOVEMENT CANDIDATES USING NEIGHBOR BLOCK INFORMATION
WO2020244568A1 (en) 2019-06-04 2020-12-10 Beijing Bytedance Network Technology Co., Ltd. Motion candidate list with geometric partition mode coding
WO2020244660A1 (en) 2019-06-06 2020-12-10 Beijing Bytedance Network Technology Co., Ltd. Motion candidate list construction for video coding
JP2022537989A (ja) * 2019-06-21 2022-08-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ ビデオコーディングシステムおよびビデオコーディング方法
WO2021008513A1 (en) 2019-07-14 2021-01-21 Beijing Bytedance Network Technology Co., Ltd. Transform block size restriction in video coding
KR20220053580A (ko) 2019-09-09 2022-04-29 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인트라 블록 복제 코딩 및 디코딩
WO2021057996A1 (en) 2019-09-28 2021-04-01 Beijing Bytedance Network Technology Co., Ltd. Geometric partitioning mode in video coding
US11240524B2 (en) * 2019-11-27 2022-02-01 Mediatek Inc. Selective switch for parallel processing
CN111163322B (zh) * 2020-01-08 2022-08-30 绍兴文理学院 对基于历史运动矢量的索引进行映射的编码及解码方法
CN113365077B (zh) * 2020-03-04 2023-02-21 Oppo广东移动通信有限公司 帧间预测方法、编码器、解码器、计算机可读存储介质
KR20230162604A (ko) * 2021-03-29 2023-11-28 퀄컴 인코포레이티드 비-인접 후보들을 갖는 템플릿 매칭-기반 진보된 모션 벡터 예측자 (amvp) 후보 리스트 구성 및 amvp 인덱스 시그널링
US11895321B2 (en) 2021-03-29 2024-02-06 Qualcomm Incorporated Template matching based advanced motion vector predictor (AMVP) candidate list construction with non-adjacent candidates and AMVP index signaling
WO2023051645A1 (en) * 2021-09-29 2023-04-06 Beijing Bytedance Network Technology Co., Ltd. Method, apparatus, and medium for video processing
CN114449354B (zh) * 2022-02-07 2023-12-08 上海幻电信息科技有限公司 视频编辑方法和系统
WO2023183496A1 (en) * 2022-03-25 2023-09-28 Bytedance Inc. Method, apparatus, and medium for video processing

Family Cites Families (272)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7623719B2 (en) 2003-09-26 2009-11-24 The Regents Of The University Of California Video encoding methods and devices
CN100545892C (zh) 2003-12-18 2009-09-30 汤姆森特许公司 生成视频图像场中的查找表的方法和装置
US20070025444A1 (en) 2005-07-28 2007-02-01 Shigeyuki Okada Coding Method
CN100539693C (zh) 2005-08-30 2009-09-09 深圳清华大学研究院 快速运动估计方法
KR100856411B1 (ko) 2006-12-01 2008-09-04 삼성전자주식회사 조도 보상 방법 및 그 장치와 그 방법을 기록한 컴퓨터로 읽을 수 있는 기록매체
US8228990B2 (en) 2008-01-16 2012-07-24 Sony Corporation Template matching scheme using multiple predictors as candidates for intra-prediction
CN101933328B (zh) 2008-01-22 2014-11-19 杜比实验室特许公司 利用动态查询表更新的自适应运动信息成本估计
US8724697B2 (en) 2008-09-26 2014-05-13 Qualcomm Incorporated Locating motion vectors for video data units
EP2765778B1 (en) * 2009-06-18 2016-08-17 Kabushiki Kaisha Toshiba Video encoding apparatus
CN102037732B (zh) 2009-07-06 2013-03-27 联发科技(新加坡)私人有限公司 一种执行单循环自适应内插滤波的方法、编码器和译码器
KR20110008653A (ko) * 2009-07-20 2011-01-27 삼성전자주식회사 움직임 벡터 예측 방법과 이를 이용한 영상 부호화/복호화 장치 및 방법
PL3595311T3 (pl) 2009-10-01 2021-01-25 Sk Telecom Co., Ltd Sposób i urządzenie do kodowania/dekodowania obrazu z zastosowaniem makrobloków o zmiennym rozmiarze
KR101600818B1 (ko) 2009-11-06 2016-03-09 삼성디스플레이 주식회사 3차원 광학 모듈 및 이를 포함하는 디스플레이 장치
JP5338684B2 (ja) 2010-01-08 2013-11-13 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
EP2532160A1 (en) * 2010-02-05 2012-12-12 Telefonaktiebolaget L M Ericsson (PUBL) Managing predicted motion vector candidates
KR101630688B1 (ko) 2010-02-17 2016-06-16 삼성전자주식회사 움직임 예측 장치 및 방법과 영상 처리 장치
US9510009B2 (en) * 2010-05-20 2016-11-29 Thomson Licensing Methods and apparatus for adaptive motion vector candidate ordering for video encoding and decoding
KR20120016991A (ko) 2010-08-17 2012-02-27 오수미 인터 프리딕션 방법
US10104391B2 (en) * 2010-10-01 2018-10-16 Dolby International Ab System for nested entropy encoding
US8711940B2 (en) 2010-11-29 2014-04-29 Mediatek Inc. Method and apparatus of motion vector prediction with extended motion vector predictor
WO2012074344A2 (ko) 2010-12-03 2012-06-07 엘지전자 주식회사 움직임 정보 리스트 인덱싱 방법 및 이러한 방법을 사용하는 장치
CN103370940B (zh) 2010-12-14 2016-10-12 M&K控股株式会社 以帧间预测模式编码的运动画面的解码方法
US10397599B2 (en) * 2010-12-17 2019-08-27 Electronics And Telecommunications Research Institute Method and apparatus for inter prediction using motion vector candidate based on temporal motion prediction
KR20120070479A (ko) 2010-12-21 2012-06-29 한국전자통신연구원 화면 내 예측 방향 정보 부호화/복호화 방법 및 그 장치
US9049455B2 (en) 2010-12-28 2015-06-02 Panasonic Intellectual Property Corporation Of America Image coding method of coding a current picture with prediction using one or both of a first reference picture list including a first current reference picture for a current block and a second reference picture list including a second current reference picture for the current block
GB2492778A (en) 2011-07-11 2013-01-16 Canon Kk Motion compensated image coding by combining motion information predictors
US20130301734A1 (en) 2011-01-12 2013-11-14 Canon Kabushiki Kaisha Video encoding and decoding with low complexity
US9319716B2 (en) 2011-01-27 2016-04-19 Qualcomm Incorporated Performing motion vector prediction for video coding
US20120195366A1 (en) 2011-02-01 2012-08-02 Mediatek Singapore Pte. Ltd. Method and Apparatus of Adaptive Inter Mode Coding Using Variable Length Codes
KR20220070072A (ko) 2011-02-09 2022-05-27 엘지전자 주식회사 움직임 정보 저장 방법 및 이를 이용한 시간적 움직임 벡터 예측자 유도 방법
EP2490448A1 (de) 2011-02-18 2012-08-22 Siemens Aktiengesellschaft Kodierverfahren und Bildkodiervorrichtung zur Kompression einer Bildsequenz
US10171813B2 (en) 2011-02-24 2019-01-01 Qualcomm Incorporated Hierarchy of motion prediction video blocks
US9066110B2 (en) 2011-03-08 2015-06-23 Texas Instruments Incorporated Parsing friendly and error resilient merge flag coding in video coding
GB2488816A (en) 2011-03-09 2012-09-12 Canon Kk Mapping motion vectors from a plurality of reference frames to a single reference frame
GB2501836B (en) 2011-03-09 2014-08-06 Canon Kk Video encoding
EP3937497B1 (en) 2011-03-21 2023-02-22 LG Electronics, Inc. Motion vector predictor selection
US9143795B2 (en) * 2011-04-11 2015-09-22 Texas Instruments Incorporated Parallel motion estimation in video coding
US9247266B2 (en) 2011-04-18 2016-01-26 Texas Instruments Incorporated Temporal motion data candidate derivation in video coding
CA2833893C (en) * 2011-05-24 2024-02-27 Panasonic Corporation Image coding method, image coding apparatus, image decoding method, image decoding apparatus, and image coding and decoding apparatus
ES2861773T3 (es) 2011-05-31 2021-10-06 Jvc Kenwood Corp Dispositivo de decodificación de imágenes en movimiento, procedimiento de decodificación de imágenes en movimiento y programa de decodificación de imágenes en movimiento
CA2834191C (en) 2011-05-31 2019-04-09 Panasonic Corporation Video encoding method, video encoding device, video decoding method, video decoding device, and video encoding/decoding device
US9866859B2 (en) 2011-06-14 2018-01-09 Texas Instruments Incorporated Inter-prediction candidate index coding independent of inter-prediction candidate list construction in video coding
WO2012172668A1 (ja) 2011-06-15 2012-12-20 株式会社 東芝 動画像符号化方法及び装置並びに動画復号化方法及び装置
JP5786478B2 (ja) 2011-06-15 2015-09-30 富士通株式会社 動画像復号装置、動画像復号方法、及び動画像復号プログラム
US9762900B2 (en) 2011-06-17 2017-09-12 Lg Electronics Inc. Method and apparatus for encoding/decoding video in intra prediction mode
US9131239B2 (en) 2011-06-20 2015-09-08 Qualcomm Incorporated Unified merge mode and adaptive motion vector prediction mode candidates selection
TR201906149T4 (tr) 2011-06-28 2019-05-21 Samsung Electronics Co Ltd İç tahmin ile video kodlamak için usul ve cihaz.
KR20150088909A (ko) 2011-06-30 2015-08-03 가부시키가이샤 제이브이씨 켄우드 화상 부호화 장치, 화상 부호화 방법, 화상 부호화 프로그램, 화상 복호 장치, 화상 복호 방법 및 화상 복호 프로그램
KR101900986B1 (ko) 2011-06-30 2018-09-20 선 페이턴트 트러스트 화상 복호 방법, 화상 부호화 방법, 화상 복호 장치, 화상 부호화 장치, 및, 화상 부호화 복호 장치
PL3419290T3 (pl) 2011-06-30 2021-05-31 JVC Kenwood Corporation Urządzenie do kodowania obrazu, sposób kodowania obrazu, program do kodowania obrazu, urządzenie do dekodowania obrazu, sposób dekodowania obrazu i program do dekodowania obrazu
IN2014CN00729A (zh) 2011-08-03 2015-04-03 Panasonic Corp
GB2493755B (en) 2011-08-17 2016-10-19 Canon Kk Method and device for encoding a sequence of images and method and device for decoding a sequence of images
MX351933B (es) * 2011-08-29 2017-11-01 Ibex Pt Holdings Co Ltd Método para generar un bloque de predicción en modo de predicción de vector de movimiento avanzada (amvp).
US8804816B2 (en) 2011-08-30 2014-08-12 Microsoft Corporation Video encoding enhancements
EP3179723B1 (en) 2011-09-09 2023-01-25 KT Corporation Method for deriving a temporal predictive motion vector, and apparatus using the method
ES2713477T3 (es) 2011-09-09 2019-05-22 Lg Electronics Inc Método de predicción inter y aparato correspondiente
US20130070855A1 (en) 2011-09-17 2013-03-21 Qualcomm Incorporated Hybrid motion vector coding modes for video coding
JP5884697B2 (ja) 2011-09-28 2016-03-15 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム
JP5976658B2 (ja) 2011-09-29 2016-08-24 シャープ株式会社 画像復号装置、画像復号方法および画像符号化装置
AU2012323631B2 (en) * 2011-10-11 2015-09-17 Mediatek Inc. Method and apparatus of motion and disparity vector derivation for 3D video coding and HEVC
US9838692B2 (en) 2011-10-18 2017-12-05 Qualcomm Incorporated Detecting availabilities of neighboring video units for video coding
KR101539110B1 (ko) 2011-10-18 2015-07-29 주식회사 케이티 영상 부호화 방법, 영상 복호화 방법, 영상 부호화기 및 영상 복호화기
KR101999869B1 (ko) 2011-10-19 2019-07-12 선 페이턴트 트러스트 화상 부호화 방법, 화상 부호화 장치, 화상 복호 방법, 및, 화상 복호 장치
EP2716047A4 (en) 2011-10-19 2015-03-18 Mediatek Inc METHOD AND DEVICE FOR DERIVING MOTION VECTOR PREVIEW CANDIDATE SETS
US9462298B2 (en) 2011-10-21 2016-10-04 Qualcomm Incorporated Loop filtering around slice boundaries or tile boundaries in video coding
RU2646328C1 (ru) * 2011-10-28 2018-03-02 Сан Пэтент Траст Способ кодирования изображений, способ декодирования изображений, устройство кодирования изображений и устройство декодирования изображений
US9571833B2 (en) 2011-11-04 2017-02-14 Nokia Technologies Oy Method for coding and an apparatus
KR20130050407A (ko) 2011-11-07 2013-05-16 오수미 인터 모드에서의 움직임 정보 생성 방법
US20130114717A1 (en) * 2011-11-07 2013-05-09 Qualcomm Incorporated Generating additional merge candidates
KR20130050406A (ko) 2011-11-07 2013-05-16 오수미 머지 모드에서의 움직임 정보 생성 방법
US20140307783A1 (en) 2011-11-08 2014-10-16 Samsung Electronics Co., Ltd. Method and apparatus for motion vector determination in video encoding or decoding
CN107396100B (zh) 2011-11-08 2020-05-05 株式会社Kt 利用解码装置对视频信号进行解码的方法
CN110198448B (zh) 2011-11-08 2021-12-31 韩国电子通信研究院 用于共享候选者列表的方法和装置
KR20240027889A (ko) 2011-11-11 2024-03-04 지이 비디오 컴프레션, 엘엘씨 깊이-맵 추정 및 업데이트를 사용한 효율적인 멀티-뷰 코딩
WO2013081365A1 (ko) 2011-11-28 2013-06-06 에스케이텔레콤 주식회사 개선된 머지를 이용한 영상 부호화/복호화 방법 및 장치
US9762904B2 (en) 2011-12-22 2017-09-12 Qualcomm Incorporated Performing motion vector prediction for video coding
WO2013099244A1 (ja) 2011-12-28 2013-07-04 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム、並びに動画像復号装置、動画像復号方法及び動画像復号プログラム
US20130188715A1 (en) 2012-01-09 2013-07-25 Qualcomm Incorporated Device and methods for merge list reordering in video coding
CN108235032B (zh) 2012-01-18 2022-01-07 Jvc 建伍株式会社 动图像解码装置以及动图像解码方法
EP2806637B1 (en) 2012-01-19 2020-10-21 Electronics And Telecommunications Research Institute Method for image coding/decoding
CN109194961B (zh) 2012-01-20 2022-05-17 杜比实验室特许公司 解码方法、视频解码设备及编码方法
TWI559744B (zh) 2012-01-20 2016-11-21 Ge影像壓縮有限公司 允許平行處理之編碼器、解碼器、傳送解多工器、系統、儲存媒體、方法及電腦程式
JP5947405B2 (ja) 2012-02-01 2016-07-06 ノキア テクノロジーズ オーユー ビデオ符号化方法および装置
US9544592B2 (en) 2012-02-10 2017-01-10 Texas Instruments Incorporated Methods and systems for encoding pictures associated with video data
US9445076B2 (en) 2012-03-14 2016-09-13 Qualcomm Incorporated Disparity vector construction method for 3D-HEVC
US10200709B2 (en) 2012-03-16 2019-02-05 Qualcomm Incorporated High-level syntax extensions for high efficiency video coding
US9503720B2 (en) 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
WO2013140807A1 (ja) 2012-03-23 2013-09-26 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム、並びに動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
US9325991B2 (en) 2012-04-11 2016-04-26 Qualcomm Incorporated Motion vector rounding
US9264706B2 (en) 2012-04-11 2016-02-16 Qualcomm Incorporated Bypass bins for reference index coding in video coding
US20130272412A1 (en) 2012-04-12 2013-10-17 Qualcomm Incorporated Common motion information candidate list construction process
US9338451B2 (en) 2012-04-12 2016-05-10 Qualcomm Incorporated Common spatial candidate blocks for parallel motion estimation
EP2838261B1 (en) 2012-04-12 2020-06-17 JVC KENWOOD Corporation Video decoding device, video decoding method, video decoding program
WO2013157251A1 (ja) 2012-04-16 2013-10-24 株式会社Jvcケンウッド 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム、並びに動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
JP6039793B2 (ja) 2012-05-10 2016-12-07 エルジー エレクトロニクス インコーポレイティド ビデオ信号処理方法及び装置
US11317101B2 (en) 2012-06-12 2022-04-26 Google Inc. Inter frame candidate selection for a video encoder
US9258562B2 (en) 2012-06-13 2016-02-09 Qualcomm Incorporated Derivation of depth map estimate
US20130336406A1 (en) 2012-06-14 2013-12-19 Qualcomm Incorporated Redundancy removal for merge/skip mode motion information candidate list construction
US20130343459A1 (en) 2012-06-22 2013-12-26 Nokia Corporation Method and apparatus for video coding
AU2013285749B2 (en) 2012-07-02 2016-06-16 Samsung Electronics Co., Ltd. Method and apparatus for predicting motion vector for coding video or decoding video
JP6085601B2 (ja) 2012-07-03 2017-02-22 シャープ株式会社 画像復号装置、および画像符号化装置
US20140071235A1 (en) 2012-09-13 2014-03-13 Qualcomm Incorporated Inter-view motion prediction for 3d video
WO2014047351A2 (en) 2012-09-19 2014-03-27 Qualcomm Incorporated Selection of pictures for disparity vector derivation
WO2014049196A1 (en) 2012-09-27 2014-04-03 Nokia Corporation Method and techniqal equipment for scalable video coding
WO2014054267A1 (ja) 2012-10-01 2014-04-10 パナソニック株式会社 画像符号化装置及び画像符号化方法
WO2014053085A1 (en) 2012-10-03 2014-04-10 Mediatek Inc. Method and apparatus of motion information management in video coding
CN102883163B (zh) 2012-10-08 2014-05-28 华为技术有限公司 用于运动矢量预测的运动矢量列表建立的方法、装置
CN104396248B (zh) 2012-10-12 2019-11-08 韩国电子通信研究院 图像编码/解码方法和使用其的装置
US9854234B2 (en) 2012-10-25 2017-12-26 Qualcomm Incorporated Reference picture status for video coding
US9357214B2 (en) 2012-12-07 2016-05-31 Qualcomm Incorporated Advanced merge/skip mode and advanced motion vector prediction (AMVP) mode for 3D video
US9350970B2 (en) 2012-12-14 2016-05-24 Qualcomm Incorporated Disparity vector derivation
US10021414B2 (en) 2013-01-04 2018-07-10 Qualcomm Incorporated Bitstream constraints and motion vector restriction for inter-view or inter-layer reference pictures
US9762882B2 (en) 2013-01-11 2017-09-12 Hfi Innovation Inc. Method and apparatus for efficient coding of depth lookup table
JP5692262B2 (ja) 2013-03-06 2015-04-01 株式会社Jvcケンウッド 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法、及び受信プログラム
EP2982116A1 (en) 2013-04-02 2016-02-10 VID SCALE, Inc. Enhanced temporal motion vector prediction for scalable video coding
CN105324996B (zh) 2013-04-10 2018-12-21 寰发股份有限公司 三维视频编码的视图间候选推导的方法及其装置
CN104125463A (zh) 2013-04-26 2014-10-29 华为技术有限公司 一种图像预测编码方法及图像编码器
US9667990B2 (en) 2013-05-31 2017-05-30 Qualcomm Incorporated Parallel derived disparity vector for 3D video coding with neighbor-based disparity vector derivation
KR101854003B1 (ko) 2013-07-02 2018-06-14 경희대학교 산학협력단 복수의 레이어를 포함하는 영상의 부호화 및 복호화 방법
WO2015006920A1 (en) 2013-07-16 2015-01-22 Mediatek Singapore Pte. Ltd. An adaptive disparity vector derivation method
SG11201510554RA (en) 2013-07-24 2016-02-26 Qualcomm Inc Simplified advanced motion prediction for 3d-hevc
EP3047639B1 (en) 2013-09-20 2018-07-18 VID SCALE, Inc. Video encoder and methods providing 3d look-up table coding for color gamut scalability
GB2519514A (en) * 2013-10-11 2015-04-29 Canon Kk Method and apparatus for displacement vector component prediction in video coding and decoding
JP6545672B2 (ja) 2013-10-18 2019-07-17 エルジー エレクトロニクス インコーポレイティド マルチビュービデオコーディングにおいて、ビュー合成予測方法及びこれを利用したマージ候補リスト構成方法
JP6355744B2 (ja) * 2014-01-03 2018-07-11 マイクロソフト テクノロジー ライセンシング,エルエルシー ビデオ及び画像符号化/デコーディングにおけるブロックベクトル予測
CN106464894B (zh) 2014-02-12 2019-10-18 明达半导体股份有限公司 视频处理方法及装置
CN105556971B (zh) * 2014-03-04 2019-07-30 微软技术许可有限责任公司 针对帧内块复制预测中的块翻动和跳跃模式的编码器侧判定
US9591313B2 (en) 2014-03-04 2017-03-07 Vixs Systems, Inc. Video encoder with transform size preprocessing and methods for use therewith
EP3114839A4 (en) 2014-03-07 2018-02-14 Qualcomm Incorporated Simplified sub-prediction unit (sub-pu) motion parameter inheritence (mpi)
KR102329126B1 (ko) 2014-03-14 2021-11-19 삼성전자주식회사 인터 레이어 비디오의 복호화 및 부호화를 위한 머지 후보 리스트 구성 방법 및 장치
WO2015139187A1 (en) 2014-03-17 2015-09-24 Mediatek Inc. Low latency encoder decision making for illumination compensation and depth look-up table transmission in video coding
WO2015139203A1 (en) 2014-03-18 2015-09-24 Mediatek Singapore Pte. Ltd. Dlt signaling in 3d video coding
CN106105191B (zh) 2014-03-19 2018-08-10 株式会社Kt 用于处理多视图视频信号的方法和装置
US10554967B2 (en) 2014-03-21 2020-02-04 Futurewei Technologies, Inc. Illumination compensation (IC) refinement based on positional pairings among pixels
JP6345805B2 (ja) 2014-05-06 2018-06-20 寰發股▲ふん▼有限公司HFI Innovation Inc. Intraブロックコピーモード符号化のブロックベクトル予測の方法
US10382749B2 (en) 2014-05-23 2019-08-13 Qualcomm Incorporated Coding run values based on palette index in palette-based video coding
WO2015180014A1 (en) 2014-05-26 2015-12-03 Mediatek Singapore Pte. Ltd. An improved merge candidate list construction method for intra block copy
US10567789B2 (en) 2014-06-16 2020-02-18 Qualcomm Incorporated Simplified shifting merge candidate and merge list derivation in 3D-HEVC
JP6401309B2 (ja) 2014-06-19 2018-10-10 ヴィド スケール インコーポレイテッド 3次元ベースのカラーマッピングでのモデルパラメータ最適化のためのシステムおよび方法
CA2950964C (en) * 2014-06-19 2018-10-30 Hfi Innovation Inc. Method and apparatus of candidate generation for single sample mode in video coding
US10681372B2 (en) * 2014-06-23 2020-06-09 Microsoft Technology Licensing, Llc Encoder decisions based on results of hash-based block matching
CN104079944B (zh) 2014-06-30 2017-12-01 华为技术有限公司 视频编码的运动矢量列表构建方法和系统
WO2016008157A1 (en) 2014-07-18 2016-01-21 Mediatek Singapore Pte. Ltd. Methods for motion compensation using high order motion model
WO2016008161A1 (en) 2014-07-18 2016-01-21 Mediatek Singapore Pte. Ltd. Temporal derived bi-directional motion vector predictor
KR102276854B1 (ko) 2014-07-31 2021-07-13 삼성전자주식회사 인루프 필터 파라미터 예측을 사용하는 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
US10027981B2 (en) 2014-09-01 2018-07-17 Hfi Innovation Inc. Method of intra picture block copy for screen content and video coding
WO2016043933A1 (en) 2014-09-15 2016-03-24 Mediatek Inc. Method of deblocking for intra block copy in video coding
US9743110B2 (en) 2014-10-09 2017-08-22 Hfi Innovation Inc. Method of 3D or multi-view video coding including view synthesis prediction
WO2016068685A1 (ko) 2014-10-31 2016-05-06 삼성전자 주식회사 고정밀 스킵 부호화를 이용한 비디오 부호화 장치 및 비디오 복호화 장치 및 그 방법
CN111741310B (zh) 2014-10-31 2024-03-19 三星电子株式会社 用于对运动矢量进行编码/解码的方法和装置
US10182240B2 (en) 2014-11-18 2019-01-15 Mediatek Inc. Method of bi-prediction video coding based on motion vectors from uni-prediction and merge candidate
US20170310988A1 (en) 2014-12-09 2017-10-26 Mediatek Inc. Method of Motion Vector Predictor or Merge Candidate Derivation in Video Coding
WO2016090568A1 (en) 2014-12-10 2016-06-16 Mediatek Singapore Pte. Ltd. Binary tree block partitioning structure
US11477477B2 (en) 2015-01-26 2022-10-18 Qualcomm Incorporated Sub-prediction unit based advanced temporal motion vector prediction
US10070130B2 (en) 2015-01-30 2018-09-04 Qualcomm Incorporated Flexible partitioning of prediction units
US10057574B2 (en) 2015-02-11 2018-08-21 Qualcomm Incorporated Coding tree unit (CTU) level adaptive loop filter (ALF)
EP3262839B1 (en) 2015-04-08 2021-06-16 HFI Innovation Inc. Methods for palette mode context coding and binarization in video coding
CN104915966B (zh) 2015-05-08 2018-02-09 上海交通大学 基于卡尔曼滤波的帧率上变换运动估计方法及系统
US10200713B2 (en) 2015-05-11 2019-02-05 Qualcomm Incorporated Search region determination for inter coding within a particular picture of video data
US10148961B2 (en) 2015-05-29 2018-12-04 Qualcomm Incorporated Arithmetic coder with multiple window sizes
US10887597B2 (en) 2015-06-09 2021-01-05 Qualcomm Incorporated Systems and methods of determining illumination compensation parameters for video coding
US10356416B2 (en) 2015-06-09 2019-07-16 Qualcomm Incorporated Systems and methods of determining illumination compensation status for video coding
US10271064B2 (en) 2015-06-11 2019-04-23 Qualcomm Incorporated Sub-prediction unit motion vector prediction using spatial and/or temporal motion information
US9918102B1 (en) 2015-06-22 2018-03-13 Ambarella, Inc. Inter-prediction candidate selection in a mode decision
WO2017043734A1 (ko) 2015-09-07 2017-03-16 엘지전자(주) 인터 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
US20170094288A1 (en) 2015-09-25 2017-03-30 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
US10812822B2 (en) 2015-10-02 2020-10-20 Qualcomm Incorporated Intra block copy merge mode and padding of unavailable IBC reference region
CN108141507B (zh) 2015-10-02 2020-02-07 Vid拓展公司 利用查找表进行颜色校正
EP3357245A4 (en) 2015-11-05 2019-03-13 MediaTek Inc. METHOD AND DEVICE OF INTERPRESSATION USING AN AVERAGE MOTION VECTOR FOR VIDEO CODING
KR20170058871A (ko) 2015-11-19 2017-05-29 한국전자통신연구원 화면내 예측 모드 부호화/복호화 방법 및 장치
CN108293131B (zh) 2015-11-20 2021-08-31 联发科技股份有限公司 基于优先级运动矢量预测子推导的方法及装置
CN105681807B (zh) 2016-01-06 2018-11-02 福州瑞芯微电子股份有限公司 一种基于h264协议的分像素运动矢量计算方法和装置
JP6495835B2 (ja) 2016-01-06 2019-04-03 日本電信電話株式会社 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法、映像符号化プログラム及び映像復号プログラム
US10368083B2 (en) 2016-02-15 2019-07-30 Qualcomm Incorporated Picture order count based motion vector pruning
US10200715B2 (en) 2016-02-17 2019-02-05 Telefonaktiebolaget Lm Ericsson (Publ) Methods and devices for encoding and decoding video pictures
ES2711189R1 (es) 2016-04-06 2020-02-04 Kt Corp Metodo y aparato para procesar senales de video
CN116546206A (zh) 2016-04-08 2023-08-04 韩国电子通信研究院 用于导出运动预测信息的方法和装置
EP3451668A4 (en) 2016-04-26 2020-04-15 Intellectual Discovery Co., Ltd. METHOD AND DEVICE FOR CODING / DECODING AN IMAGE
US10142652B2 (en) 2016-05-05 2018-11-27 Google Llc Entropy coding motion vector residuals obtained using reference motion vectors
US10560718B2 (en) 2016-05-13 2020-02-11 Qualcomm Incorporated Merge candidates for motion vector prediction for video coding
US10547854B2 (en) 2016-05-13 2020-01-28 Qualcomm Incorporated Neighbor based signaling of intra prediction modes
US10560712B2 (en) 2016-05-16 2020-02-11 Qualcomm Incorporated Affine motion prediction for video coding
US10419755B2 (en) 2016-05-16 2019-09-17 Qualcomm Incorporated Confusion of multiple filters in adaptive loop filtering in video coding
CN116567260A (zh) 2016-05-24 2023-08-08 韩国电子通信研究院 图像编码/解码方法和用于所述方法的记录介质
CN116614641A (zh) * 2016-07-12 2023-08-18 韩国电子通信研究院 图像编码/解码方法和用于所述方法的记录介质
KR102275420B1 (ko) 2016-07-12 2021-07-09 한국전자통신연구원 영상 부호화/복호화 방법 및 이를 위한 기록 매체
US11638027B2 (en) 2016-08-08 2023-04-25 Hfi Innovation, Inc. Pattern-based motion vector derivation for video coding
WO2018045944A1 (en) 2016-09-06 2018-03-15 Mediatek Inc. Methods and apparatuses of candidate set determination for binary-tree splitting blocks
US10721489B2 (en) 2016-09-06 2020-07-21 Qualcomm Incorporated Geometry-based priority for the construction of candidate lists
WO2018049594A1 (en) 2016-09-14 2018-03-22 Mediatek Inc. Methods of encoder decision for quad-tree plus binary tree structure
US10812791B2 (en) 2016-09-16 2020-10-20 Qualcomm Incorporated Offset vector identification of temporal motion vector predictor
WO2018061522A1 (ja) 2016-09-27 2018-04-05 シャープ株式会社 動きベクトル生成装置、予測画像生成装置、動画像復号装置、および動画像符号化装置
AU2016425069B2 (en) 2016-09-30 2022-03-03 Huawei Technologies Co., Ltd. Method and apparatus for image coding and decoding through inter prediction
EP3968633A1 (en) 2016-09-30 2022-03-16 Huawei Technologies Co., Ltd. Video encoding method, video decoding method, and terminal
EP3301919A1 (en) 2016-10-03 2018-04-04 Thomson Licensing Method and apparatus for encoding and decoding motion information
US10448010B2 (en) 2016-10-05 2019-10-15 Qualcomm Incorporated Motion vector prediction for affine motion models in video coding
JP2019216294A (ja) 2016-10-14 2019-12-19 シャープ株式会社 エントロピー復号装置、エントロピー符号化装置、画像復号装置および画像符号化装置
CN117528107A (zh) 2016-11-28 2024-02-06 英迪股份有限公司 图像编码方法、图像解码方法及用于传送比特流的方法
KR102572286B1 (ko) 2016-12-05 2023-08-29 엘지전자 주식회사 영상 코딩 시스템에서 영상 디코딩 방법 및 장치
KR20180073499A (ko) 2016-12-22 2018-07-02 주식회사 케이티 비디오 신호 처리 방법 및 장치
KR20180074000A (ko) 2016-12-23 2018-07-03 삼성전자주식회사 비디오 디코딩 방법, 이를 수행하는 비디오 디코더, 비디오 인코딩 방법, 및 이를 수행하는 비디오 인코더
CN106851046A (zh) 2016-12-28 2017-06-13 中国科学院自动化研究所 视频动态超分辨率处理方法及系统
US10681370B2 (en) 2016-12-29 2020-06-09 Qualcomm Incorporated Motion vector generation for affine motion model for video coding
EP3343925A1 (en) 2017-01-03 2018-07-04 Thomson Licensing Method and apparatus for encoding and decoding motion information
US20180192071A1 (en) 2017-01-05 2018-07-05 Mediatek Inc. Decoder-side motion vector restoration for video coding
US20180242024A1 (en) 2017-02-21 2018-08-23 Mediatek Inc. Methods and Apparatuses of Candidate Set Determination for Quad-tree Plus Binary-tree Splitting Blocks
US10595035B2 (en) 2017-03-22 2020-03-17 Qualcomm Incorporated Constraining motion vector information derived by decoder-side motion vector derivation
WO2018199675A1 (ko) 2017-04-28 2018-11-01 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US20180332312A1 (en) 2017-05-09 2018-11-15 Futurewei Technologies, Inc. Devices And Methods For Video Processing
US10742975B2 (en) 2017-05-09 2020-08-11 Futurewei Technologies, Inc. Intra-prediction with multiple reference lines
EP3410717A1 (en) 2017-05-31 2018-12-05 Thomson Licensing Methods and apparatus for candidate list pruning
US10523934B2 (en) * 2017-05-31 2019-12-31 Mediatek Inc. Split based motion vector operation reduction
KR102438181B1 (ko) 2017-06-09 2022-08-30 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN109089119B (zh) 2017-06-13 2021-08-13 浙江大学 一种运动矢量预测的方法及设备
US10602180B2 (en) 2017-06-13 2020-03-24 Qualcomm Incorporated Motion vector prediction
US10911769B2 (en) 2017-06-23 2021-02-02 Qualcomm Incorporated Motion-based priority for the construction of candidate lists in video coding
US10757420B2 (en) 2017-06-23 2020-08-25 Qualcomm Incorporated Combination of inter-prediction and intra-prediction in video coding
EP3422716A1 (en) 2017-06-26 2019-01-02 Thomson Licensing Method and apparatus for most probable mode (mpm) sorting and signaling in video encoding and decoding
US10687077B2 (en) 2017-06-26 2020-06-16 Qualcomm Incorporated Motion information propagation in video coding
US20200154124A1 (en) 2017-07-04 2020-05-14 Lg Electronics Inc. Image decoding method based on inter prediction and image decoding apparatus therefor
CN107295348A (zh) 2017-07-31 2017-10-24 南通海鑫信息科技有限公司 一种图像编码方法
US10284869B2 (en) 2017-09-28 2019-05-07 Google Llc Constrained motion field estimation for hardware efficiency
CN111567045A (zh) 2017-10-10 2020-08-21 韩国电子通信研究院 使用帧间预测信息的方法和装置
US20190116374A1 (en) 2017-10-17 2019-04-18 Qualcomm Incorporated Coding motion information of video data using coding structure-based candidate list construction
US11563954B2 (en) 2017-10-26 2023-01-24 Electronics And Telecommunications Research Institute Method and device for image encoding/decoding on basis of asymmetric sub-block
WO2019107916A1 (ko) 2017-11-30 2019-06-06 엘지전자 주식회사 영상 코딩 시스템에서 인터 예측에 따른 영상 디코딩 방법 및 장치
US10652571B2 (en) 2018-01-25 2020-05-12 Qualcomm Incorporated Advanced motion vector prediction speedups for video coding
US11303929B2 (en) 2018-04-02 2022-04-12 Lg Electronics Inc. Image coding method using lookup table for intra prediction mode and apparatus therefor
US10986343B2 (en) 2018-04-15 2021-04-20 Arris Enterprises Llc Reducing overhead for multiple-hypothesis temporal prediction
CN112154660B (zh) 2018-05-23 2023-07-14 寰发股份有限公司 使用双向编码单元加权的视频编码方法和装置
KR20190133629A (ko) 2018-05-23 2019-12-03 주식회사 케이티 비디오 신호 처리 방법 및 장치
CN110662053B (zh) 2018-06-29 2022-03-25 北京字节跳动网络技术有限公司 使用查找表的视频处理方法、装置和存储介质
KR102660666B1 (ko) 2018-06-29 2024-04-26 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut들을 업데이트하기 위한 조건들
KR20210025537A (ko) 2018-06-29 2021-03-09 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 하나 또는 다수의 룩업 테이블들을 사용하여 이전에 코딩된 모션 정보를 순서대로 저장하고 이를 사용하여 후속 블록들을 코딩하는 개념
KR20210024502A (ko) 2018-06-29 2021-03-05 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Hmvp 후보를 병합/amvp에 추가할 때의 부분/풀 프루닝
WO2020003284A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and amvp
BR112020024202A2 (pt) 2018-06-29 2021-02-17 Beijing Bytedance Network Technology Co., Ltd. método de processamento de dados de vídeo, aparelho de processamento de vídeo e meios de armazenamento e gravação legíveis por computador não transitório
WO2020003280A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Which lut to be updated or no updating
WO2020003266A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Resetting of look up table per slice/tile/lcu row
KR20240005240A (ko) 2018-06-29 2024-01-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut에서의 모션 후보들의 검사 순서
EP4307679A2 (en) 2018-07-02 2024-01-17 Beijing Bytedance Network Technology Co., Ltd. Luts with intra prediction modes and intra mode prediction from non-adjacent blocks
BR112021000004A8 (pt) * 2018-07-06 2023-02-07 Mediatek Inc Informações de movimento herdadas para decodificar uma unidade de codificação atual em um sistema de codificação de vídeo
US11606575B2 (en) * 2018-07-10 2023-03-14 Qualcomm Incorporated Multiple history based non-adjacent MVPs for wavefront processing of video coding
US11051036B2 (en) 2018-07-14 2021-06-29 Mediatek Inc. Method and apparatus of constrained overlapped block motion compensation in video coding
US10491902B1 (en) 2018-07-16 2019-11-26 Tencent America LLC Method and apparatus for history-based motion vector prediction
US10440378B1 (en) 2018-07-17 2019-10-08 Tencent America LLC Method and apparatus for history-based motion vector prediction with parallel processing
US11381833B2 (en) * 2018-07-19 2022-07-05 Tencent America LLC Method and apparatus for video coding
US10958934B2 (en) 2018-07-27 2021-03-23 Tencent America LLC History-based affine merge and motion vector prediction
US10362330B1 (en) 2018-07-30 2019-07-23 Tencent America LLC Combining history-based motion vector prediction and non-adjacent merge prediction
WO2020030002A1 (en) 2018-08-09 2020-02-13 Huawei Technologies Co., Ltd. Method and apparatus of history-based intra mode coding
BR122021008224A2 (pt) 2018-08-13 2021-05-04 Lg Electronics Inc. método de decodificação de imagem realizado por um aparelho de decodificação, método de codificação de imagem realizado por um aparelho de codificação e mídia de armazenamento legível por computador não transitória
EP3844950A4 (en) 2018-08-28 2022-05-25 FG Innovation Company Limited DEVICE AND METHOD FOR ENCODING VIDEO DATA
WO2020050678A1 (ko) 2018-09-06 2020-03-12 엘지전자 주식회사 Mpm 리스트를 사용하는 인트라 예측 기반 영상 코딩 방법 및 그 장치
TWI820211B (zh) 2018-09-12 2023-11-01 大陸商北京字節跳動網絡技術有限公司 取決於總數減去k的開始檢查hmvp候選的條件
US11212550B2 (en) 2018-09-21 2021-12-28 Qualcomm Incorporated History-based motion vector prediction for affine mode
US20210400298A1 (en) 2018-09-28 2021-12-23 Lg Electronics Inc. Method and apparatus for processing video signal by using affine prediction
US20200112715A1 (en) 2018-10-05 2020-04-09 Qualcomm Incorporated History-based motion vector prediction for inter prediction coding
US11051034B2 (en) 2018-10-08 2021-06-29 Qualcomm Incorporated History-based motion vector predictor
SG11202103661XA (en) * 2018-10-10 2021-05-28 Huawei Tech Co Ltd Inter prediction method and apparatus
US11284066B2 (en) 2018-10-10 2022-03-22 Tencent America LLC Method and apparatus for intra block copy in intra-inter blending mode and triangle prediction unit mode
US11758164B2 (en) 2018-10-23 2023-09-12 Tencent America LLC Method and apparatus for video coding
CN116527882A (zh) * 2018-11-07 2023-08-01 寰发股份有限公司 利用当前画面参照编码方式的视频区块编码或解码方法和装置
US11146810B2 (en) 2018-11-27 2021-10-12 Qualcomm Incorporated Decoder-side motion vector refinement
US11184633B2 (en) 2018-11-27 2021-11-23 Qualcomm Incorporated Simplification of history-based motion vector prediction
CA3190343A1 (en) 2018-12-12 2020-06-18 Lg Electronics Inc. Method and apparatus for processing video signal based on history based motion vector prediction
KR102601014B1 (ko) 2018-12-28 2023-11-09 고도 가이샤 아이피 브릿지 1 화상 부호화 장치, 화상 부호화 방법, 화상 부호화 프로그램, 화상 복호 장치, 화상 복호 방법 및 화상 복호 프로그램
EP3731522A4 (en) 2019-01-01 2021-04-14 LG Electronics Inc. METHOD AND APPARATUS FOR PROCESSING VIDEO SIGNAL BASED ON HISTORY-BASED MOTION VECTOR PREDICTION
US11234007B2 (en) 2019-01-05 2022-01-25 Tencent America LLC Method and apparatus for video coding
EP3888355A4 (en) 2019-01-10 2022-03-23 Beijing Bytedance Network Technology Co., Ltd. LOOKUP TABLE UPDATE INVOCATION
CN113383554B (zh) 2019-01-13 2022-12-16 北京字节跳动网络技术有限公司 LUT和共享Merge列表之间的交互
WO2020147772A1 (en) 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Motion candidates derivation
CN113615193A (zh) 2019-03-22 2021-11-05 北京字节跳动网络技术有限公司 Merge列表构建和其他工具之间的交互

Also Published As

Publication number Publication date
KR20210025537A (ko) 2021-03-09
EP3791586A1 (en) 2021-03-17
US20200195960A1 (en) 2020-06-18
CN110662059A (zh) 2020-01-07
US11895318B2 (en) 2024-02-06
GB2588531B (en) 2023-02-01
JP7137008B2 (ja) 2022-09-13
JP2022172260A (ja) 2022-11-15
WO2020003279A1 (en) 2020-01-02
JP2021530937A (ja) 2021-11-11
GB2588531A (en) 2021-04-28
GB202018437D0 (en) 2021-01-06
US20200195959A1 (en) 2020-06-18
TWI723444B (zh) 2021-04-01
CN110662059B (zh) 2021-04-20

Similar Documents

Publication Publication Date Title
TWI723444B (zh) 使用一個或多個查找表來按順序存儲先前編碼的運動信息並使用它們來編碼後面的塊的概念
TWI728390B (zh) 查找表尺寸
TWI744662B (zh) 更新查閱資料表(lut)的條件
TWI748202B (zh) Lamvr中取整和修剪的順序
TWI728389B (zh) 基於優先級的非相鄰merge設計
TW202007146A (zh) 降低非相鄰merge設計的複雜度