TWI669951B - 多重假設之合併模式 - Google Patents

多重假設之合併模式 Download PDF

Info

Publication number
TWI669951B
TWI669951B TW107100635A TW107100635A TWI669951B TW I669951 B TWI669951 B TW I669951B TW 107100635 A TW107100635 A TW 107100635A TW 107100635 A TW107100635 A TW 107100635A TW I669951 B TWI669951 B TW I669951B
Authority
TW
Taiwan
Prior art keywords
motion
prediction
predictor
candidate
motion predictor
Prior art date
Application number
TW107100635A
Other languages
English (en)
Other versions
TW201832556A (zh
Inventor
徐志瑋
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW201832556A publication Critical patent/TW201832556A/zh
Application granted granted Critical
Publication of TWI669951B publication Critical patent/TWI669951B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures

Abstract

本發明提供了用於視訊編解碼的多重假設運動預測模式。基於用於運動補償的多個預測(假設)的選擇，其是使用自候選運動預測子列表選擇的運動預測子或者運動向量預測子而被分別獲得，多重假設運動預測傳達用於運動補償的預測。當編解碼像素區塊時，實現多重假設運動預測的視訊編譯器自像素區塊的候選運動預測子列表選擇第一運動預測子和第二運動預測子。視訊編譯器對辨識第一運動預測子和第二運動預測子的運動預測碼字進行編碼或解碼。視訊編譯器基於分別使用所選的第一運動預測子和第二運動預測子而獲得的第一像素集和第二像素集計算用於運動補償的組合預測。視訊編譯器透過使用用於運動補償的組合預測編碼或解碼像素區塊。

Description

多重假設之合併模式 【相關申請的交叉引用】
本發明是要求2017年01月06日遞交的申請號為62/443,008的美國臨時專利申請的優先權的非臨時申請的部分。上述列出的申請的內容以引用的方式併入本文。
本發明通常涉及視訊處理領域，具體地，本發明涉及一種傳送運動預測子的方法。
除非此處另有說明外，本部分所描述的方法相對於下面列出的申請專利範圍而言不是先前技術，並且透過本部分的引入不被承認是先前技術。
高效率視訊編碼(High-Efficiency Video Coding，HEVC)是由視訊編碼聯合協作小組(Joint Collaborative Team on Video Coding，JCT-VC)開發的國際視訊編碼標準。HEVC為基於混合區塊的運動補償之類DCT(Discrete Cosine Transform，離散餘弦變換)變換編解碼架構。稱為編碼單元(coding unit，CU)的壓縮的基本單元是2N×2N的正方形區塊，並且每個編碼單元可以被遞歸分割分成四個更小的編碼單元，直到預定的最小尺寸被實現。每個編碼單元包含一個或多個預測單元(prediction unit，PU)。
為了實現混合編解碼體系架構的最佳編解碼效率，HEVC採用畫面內預測模式和/或畫面間預測模式以用於每個預測單元。對於畫面內預測模式而言，空間相鄰重構像素可用於生成35個方向上的方向預測。對於畫面間預測模式而言，時間重構參考資訊框可以用於生成運動補償預測子。存在三種類型的畫面間預測模式：跳過模式、合併模式和高級運動向量預測(advanced motion vector prediction，AMVP)模式。
在高級運動向量預測模式下，根據MV=MVP+MVD，用於預測單元的運動補償預測的運動向量(motion vector，MV)自運動向量預測子(motion vector predictor，MVP)和運動向量差(motion vector difference，MVD)(或殘差運動資料)。對於高級運動向量預測預測的預測單元，運動向量預測子自包括兩個空間候選和一個時間候選的運動向量預測子候選集被選擇。辨識運動向量預測子選擇的索引與相應的運動向量差一起被編碼並傳送。自參考資訊框列表L0和/或參考資訊框列表L1選擇參考資訊框(或用於選擇參考資訊框的參考索引)以用於雙向預測或者單向預測也被編碼和傳送。
當預測單元以跳過模式或合併模式被編解碼時，除了所選候選的合併索引之外，不傳送運動資訊。這是因為跳過模式和合併模式利用運動推理方法(MV=MVP+MVD，其中MVD為零)，以自自參考資訊框列表L0或者參考資訊框列表L1(由片段頭中所示)選擇的時間相鄰圖像(即時間候選)中的空間相鄰塊(即空間候選)或者同位塊獲得運動資訊。在跳過預測單元的情況下，正被編碼的區塊的殘差訊號也被省略。
以下發明內容僅是說明性的，不打算以任何方式加以限制。也就是說，以下發明內容被提供以介紹此處所描述的新且非明顯的技術的概念、重點、好處和優勢。選擇而不是所有的實施方式在下面的詳細說明中進行進一步描述。因此，以下發明內容不用於確定所要求主題的本質特徵，也不用於確定所要求主題的範圍。
本發明的一些實施例提供了用於多重假設運動預測或多重假設跳過/合併模式之方法和系統。基於用於運動不到的多個預測(假設)的選擇，其是使用自候選運動預測子列表選擇的運動預測子或者運動向量預測子而被獲得，多重假設運動預測傳達用於運動補償的預測。當編解碼像素區塊時，實現多重假設運動預測的視頻編譯器(編碼器或者解碼器)自像素區塊的候選運動預測子列表選擇第一運動預測子和第二運動預測子。視訊編譯器編碼或者解碼辨識第一運動預測子和第二運動預測子的運動預測碼字。視訊編譯器基於分別使用第一運動預測子和第二運動預測子而獲得的第一像素集和第二像素集，計算用於運動補償的組合預測(也稱為組合運動補償預測子)。視訊編譯器透過使用用於運動補償的組合預測對像素區塊進行編碼或者解碼。
在一些實施例中，碼字包括辨識第一運動預測子的特定索引。根據特定索引的映射，第二運動預測子被辨識。在一些實施例中，僅一個索引被使用且被編碼為原始合併模式以選擇第一候選，而第二候選透過使用預設方式而被選擇，例 如將固定偏移應用到此索引。在一些實施例中，辨識第一運動預測子和第二運動預測子的碼字包括辨識第一運動預測子的索引，而第二運動預測子根據預設搜索流程而被辨識。在一些實施例中，當視訊編碼器或解碼器接收運動預測子的多個假設的選擇時，第一運動預測子和第二運動預測子的預測像素(即由第一運動預測子和第二運動預測子參考或者獲得的像素集)的簡單平均或者加權之和用於生成用於運動補償的組合預測(或者組合運動補償預測子)，作為用於運動補償的最終預測。在一些實施例中，此平均是兩個假設被不同加權的加權平均。
100‧‧‧當前區塊
501、502、503‧‧‧映射
600、900、1200‧‧‧流程
610~650、910~950、1210~1240‧‧‧步驟
700‧‧‧視訊編碼器
705‧‧‧視訊源
708‧‧‧減法器
710‧‧‧變換模組
711‧‧‧量化模組
712、1012‧‧‧已量化係數
713、1013‧‧‧已預測像素資料
714、1005‧‧‧逆量化模組
715、1015‧‧‧逆變換模組
716、1016‧‧‧變換係數
717‧‧‧已重構像素資料
720、1025‧‧‧畫面內圖像估計模組
725‧‧‧畫面內圖像預測模組
730、1035‧‧‧運動補償模組
735‧‧‧運動估計模組
745、1045‧‧‧環路濾波器
750‧‧‧已重構圖像暫存器
765、1065‧‧‧運動向量暫存器
775、1075‧‧‧運動向量預測模組
790‧‧‧熵編碼器
795、1095‧‧‧位元流
805‧‧‧模式選擇流程
810、1110、1114‧‧‧候選運動預測子
812、1112‧‧‧圖像暫存器資料
814‧‧‧預測
815、1115‧‧‧運動預測碼字
850、1150‧‧‧候選選擇器模組
860、1160‧‧‧預測組合器模組
870、1170‧‧‧選擇編碼器模組
1000‧‧‧視訊解碼器
1017‧‧‧已解碼像素資料
1050‧‧‧已解碼圖像暫存器
1090‧‧‧解析器
1113‧‧‧候選資訊
1300‧‧‧電子系統
1305‧‧‧匯流排
1310‧‧‧處理單元
1315‧‧‧影像處理單元
1320‧‧‧系統記憶體
1325‧‧‧網絡
1330‧‧‧唯讀記憶體
1335‧‧‧永久存放裝置
1340‧‧‧輸入裝置
1345‧‧‧輸出設備
下列圖式用以提供本發明的進一步理解，並被納入且構成本發明的一部分。這些圖式說明了本發明的實施方式，並與說明書一起用以解釋本發明的原理。為了清楚地說明本發明的概念，與實際實施方式中的尺寸相比，一些元件可以不按照比例被示出，這些圖式無需按照比例繪製。
第1圖示出了在HEVC中用於合併模式/跳過模式/高級運動向量預測模式的運動向量預測子候選集。
第2圖示出了包括組合雙向預測合併候選的合併候選列表。
第3圖示出了包括已縮放合併候選的合併候選列表。
第4圖示出了將零向量候選添加到合併候選列表或高級運動向量預測候選列表的示例。
第5圖示出了使用碼字中的一個索引發信一個假設或兩個 假設。
第6圖概念性地示出了編解碼用於像素區塊的運動預測碼字的示例流程。
第7圖示出了實現多重假設運動預測的示例視訊編碼器。
第8圖示出了視訊編碼器中實現多重假設運動預測之運動補償模組。
第9圖概念性地示出了透過使用多重假設運動預測編碼像素區塊的流程。
第10圖示出了實現多重假設運動預測的示例視訊解碼器。
第11圖示出了視訊解碼器中實現多重假設運動預測之運動補償模組。
第12圖概念性地示出了透過使用多重假設運動預測解碼像素區塊的流程。
第13圖概念性地示出了實現本發明的一些實施例之電子系統。
在下面詳細的說明書中，為了透徹理解相關教示內容，透過舉例的方式進行說明大量具體的細節。基於本文所描述的教示內容的任何改變、推導和/或拓展均在本發明的保護範圍內。在一些例子中，為了避免不必要地混淆本發明的教示內容的方面，在相對較高的級別而無細節上描述已知的方法、程式、元件和/或關於此處所公開的一個或者多個示例性實施方式的電路。
I.候選列表
為了透過使用高級運動向量預測、合併模式或跳過模式在HEVC下傳送像素區塊的運動資訊，一索引被使用以自候選運動預測列表選擇運動向量預測子(或運動預測子)。在合併模式/跳過模式中，合併索引用於從包括四個空間候選和一個時間候選的候選運動預測子列表中選擇運動向量預測子。合併索引被傳送，但運動預測不被傳送。
第1圖示出了在HEVC中用於合併模式/跳過模式/高級運動向量預測模式的運動向量預測子候選集。本圖示出了正在被編碼或解碼的視訊圖像或資訊框的當前區塊100(編碼單元或預測單元)。當前區塊100(其可以是預測單元或編碼單元)是指相鄰預測單元以推導出空間運動向量預測子和時間運動向量預測子以用於高級運動向量預測、合併模式或跳過模式。
對於高級運動向量預測來說，左側運動向量預測子是來自A0、A1的第一可用的運動向量預測子，頂部運動向量預測子是來自B0、B1、B2的第一可用的運動向量預測子，而時間運動向量預測子是來自TBR或TCTR的第一可用的運動向量預測子(TBR先被使用，如果TBR不可用，則TCTR被使用)。如果左側運動向量預測子不可用且頂部運動向量預測子不是已縮放運動向量預測子，則如果在B0，B1和B2中存在已縮放運動向量預測子，則可以推導出第二頂部運動向量預測子。在HEVC中，高級運動向量預測的運動向量預測子列表大小是2。因此，在兩個空間運動向量預測子和一個時間運動向量預測子之推導流程之後，只有前兩個運動向量預測子可以被包括在運動向 量預測子列表中。如果移除冗餘之後，可用運動向量預測子的數量少於2，則將0個向量候選添加到候選列表中。
對於跳過模式和合併模式來說，從A0，A1，B0和B1推導出最多四個空間合併索引，並且從TBR或TCTR推導出一個時間合併索引(先使用TBR，如果TBR不可用，則使用TCTR)。如果四個空間合併索引中的任何一個不可用，則位置B2用於推導出合併索引作為替代。在推導出四個空間合併索引和一個時間合併索引之後，冗餘合併索引被移除。如果非冗餘合併索引的數量少於5，則額外的候選可以自原始候選推導出，并被添加到候選列表。存在三種類型的推導候選：
1.組合雙向預測合併候選(推導候選類型1)。
2.已縮放雙向預測合併候選(推導候選類型2)。
3.零向量合併/高級運動向量預測候選(推導候選類型3)。
對於推導候選類型1而言，透過組合原始合併候選創建組合雙向預測合併候選。具體而言，如果當前片段是B片段，則透過組合來自于列表0和列表1的候選，另一合併候選被生成。第2圖示出了包括組合雙向預測合併候選的合併候選列表。如圖所示，具有mvL0(即列表0中的運動向量)與refIdxL0(即列表0中的參考圖像索引)或mvL1(即列表1中的運動向量)與refIdxL1(即列表1中的參考圖像索引)的兩個原始候選用於創建雙向預測合併候選。
對於推導候選類型2而言，透過縮放原始合併候選創建已縮放合併候選。第3圖示出了包括已縮放合併候選的合 併候選列表。如圖所示，原始合併候選具有mvLX(列表X中的運動向量，X可以是0或1)和refIdxLX(列表X中的參考圖像索引，X可以是0或1)。例如，原始候選A是具有mvL0_A和參考圖像索引ref0之列表0之單向預測運動向量。候選A最初被複製到列表L1作為具有參考圖像索引ref0'。透過基於ref0和ref0'縮放mvL0_A，已縮放運動向量mvL0'_A被計算出。在列表L0中具有mvL0_A和ref0且在列表L1中具有mvL0'_A和ref0'的已縮放雙向預測合併候選被創建並被添加到合併候選列表中。類似地，列表0中具有mvL1'_A和ref1'以及列表1中具有mvL1_A和ref1的已縮放雙向預測合併候選被創建並被添加到合併候選列表。
對於推導的候選類型3而言，透過組合零向量和參考索引創建零向量候選。如果創建的零向量候選不是重複的，則其被添加到合併候選列表/高級運動向量預測候選列表中。第4圖示出了將零向量候選添加到合併候選列表或高級運動向量預測候選列表的示例。
II.多重假設運動預測
在跳過模式/合併模式中，一個合併索引用於從候選列表中選擇一個運動預測子候選，其可以包括單向預測或雙向預測運動預測子。如上述部分I中所述，候選列表還可以包括從其他候選導出的推導候選，例如，組合雙向預測合併候選，已縮放雙向預測合併候選和零向量合併候選。
自候選運動預測子列表選擇的運動預測子或運動向量預測子用於獲得由所選擇的運動預測子參考的像素集。然 後，這像素集用作運動補償的預測像素。因此，預測像素可以稱為運動補償的預測、一運動補償預測子或一假設。因此，一個合併索引用於傳達一個所選擇的運動預測子的跳過模式/合併模式方案是單假設合併模式。
本發明的一些實施例提供了用於多重假設運動預測或多重假設跳過/合併模式的方法和系統。多重假設運動預測基於用於運動補償的多個預測(假設)之選擇傳達用於運動補償的預測，其是使用從候選運動預測子列表中選擇的運動預測子或運動向量預測子而分別被獲得。當對像素區塊進行編解碼時，實現多重假設運動預測的視訊編譯器(編碼器或解碼器)從像素區塊的候選運動預測子列表中選擇第一運動預測子和第二運動預測子。視訊編譯器對辨識第一運動預測子和第二運動預測子的運動預測碼字進行編碼或解碼。視訊編譯器基於分別使用所選擇的第一運動預測子和第二運動預測子所獲得的第一像素集和第二像素集計算用於運動補償的組合預測(也稱為組合運動補償預測子)。視訊編譯器透過使用用於運動補償的組合預測編碼或解碼像素區塊。在下面的部分III中描述了實現多重假設運動預測的視訊編碼器示例。在下面的部分IV中描述了實現多重假設運動預測的視訊解碼器示例。
在一些實施例中，兩個或以上運動預測子的選擇由位元流中的運動預測碼字傳達。運動預測碼字可以包括來自于候選運動預測子列表且辨識第一運動預測子的第一索引和辨識第二運動預測子的第二索引。第二索引可以被編解碼為與碼字中的第一索引不同。通常，第二索引可以由除了第一索引 (即，原始合併索引)之外的編解碼參數顯性發信或者隱性推導出。
在一些實施例中，一個索引映射用於指示一個假設選擇和兩個假設選擇。也就是說，用於辨識候選運動預測子的選擇之碼字具有辨識(i)從候選運動預測子列表中選擇的任何一個候選運動預測子，或(ii)從候選運動預測子列表中選擇的任何兩個候選運動預測子的任意組合。
第5圖示出了使用碼字中的一個索引以發信一個假設或兩個假設。本圖示出了將一個索引映射成一個假設或兩個假設的三種示例性映射，即501-503。在本示例中，一個索引被使用以從候選的HEVC合併模式列表的五個候選選擇一個候選(即一個假設)或兩個候選(即兩個假設)。
如果在候選列表中有N個候選，則索引映射可以包含N+N(N-1)/2個條目，其中前N個條目僅包含用於一個候選的索引，而另外N(N-1)/2個條目包含用於N個候選的任意兩個組合的索引。例如，根據一些測試序列的統計，索引的順序可以以預定方式排列。
例如，在映射501中，索引0-索引4用於發信一個假設，索引5-索引14用於發信兩個假設。索引0-索引4分別映射到候選0、候選1、候選2、候選3或候選4。索引5映射到候選0和候選1，索引6映射到候選1和候選2，索引7映射到候選0和候選2，索引8映射到候選2和候選3，索引9映射到候選1和候選3，索引10映射到候選0和候選3，索引11映射到候選2和候選4，索引12映射到候選2和候選4，索引13映射到候選1和候選4，索引 14映射到候選0和候選4。映射502和映射503將這些索引中的一些映射到候選列表中的不同候選(例如，在映射502中，索引4映射到候選0和候選1，而不是候選4)。
在一些實施例中，碼字包括辨識第一運動預測子的特定索引。根據特定索引的映射，第二運動預測子被辨識。在一些實施例中，僅一個索引被使用且編碼成原始合併模式以選擇第一候選，而第二候選透過使用預定方式進行選擇，例如，將固定偏移應用到此索引。固定偏移可以是+1，使得視訊編碼器或解碼器總是從列表中選擇兩個連續候選以用於多重假設運動預測。
在一些實施例中，辨識第一運動預測子和第二運動預測子的碼字包括辨識第一運動預測子的索引，而第二運動預測子根據預設搜索流程被辨識。在一些實施例中，使用率失真優化，第一運動預測子候選被選擇，即考慮預測失真和編解碼位元率以決定最佳候選。因此，第一選擇候選(例如，第一運動預測子)是來自于候選列表的最具成本效益的候選。為了選擇第二選擇候選(例如，第二運動預測子)，候選列表的搜索被執行以將具有與第一選擇候選的最小差的候選辨識為第二選擇候選。在一些實施例中，第一候選和第二候選之間的差被定義為由第一運動預測子候選參考或獲得的第一像素集與由第二運動預測子候選參考或獲得的第二像素集之間的平方差之和(Sum of Squared Differences，SSD)或絕對差之和(Sum of Absolute Differences，SAD)。在一些實施例中，由運動預測子參考或獲得的像素集由預定模板定義，其可以定義像素區 塊、邊緣像素集或由運動預測子參考或作為目標的任何其他像素集。
在一些實施例中，當視訊編碼器或解碼器接收多個運動預測子的選擇時，多個運動預測子的預測像素(即，由多個運動預測子參考或獲得的多個像素集)的簡單平均或加權之和用於生成補償的組合預測(或組合運動補償預測子)作為運動補償的最終預測。在一些實施例中，平均是兩個假設被不同加權的加權平均。例如，由第一選擇候選(第一假設)獲得的像素集可以被分配比由第二選擇候選(第二假設)獲得的像素集更多的權重。如果第一選擇候選和第二選擇候選從當前區塊(例如，100)的空間相鄰區塊(例，A0區塊和A1區塊)中推導出，則權重根據空間相鄰區塊和當前區塊之間的各自像素距離分配，更高權重被給予具有更小距離的候選。在又一個示例中，分配給每個假設的權重基於由假設的運動預測子所參考或獲得的像素集與正被編解碼的當前區塊的內容之間的絕對差之和/平方差之和被確定，其中更高權重被給予具有更小絕對差之和/平方差之和的候選。
在一些實施例中，這兩個假設可以被應用於區塊內的兩個不同的空間區域。例如，如果第一假設是從左側相鄰區塊(例，A1)中推導出的候選並且第二假設是從右上相鄰區塊(例，B0)中導出的，則待預測區塊可以被分割成兩個區域(兩個區域可能有或沒有相同的區域)。使用第一假設(來自于左側相鄰區塊A1)，左側區域被預測，使用第二假設(來自于右上相鄰區塊B0)，右側區域被預測。如果在兩個區域之間 存在重疊，則可以由使用兩個選擇候選運動預測子獲得的像素集的加權平均計算用於重疊區域的運動補償的組合預測。
在一些實施例中，只有候選列表的子集合用於多重假設運動預測。例如，當雙向預測候選不被使用時，編碼器可以僅從用於多重假設的候選列表中的單向預測候選中選擇。
第6圖概念性地示出了用於編解碼(編碼或解碼)像素區塊(編碼單元或預測單元)的運動預測碼字的示例流程600。碼字辨識或傳達區塊是否由一個假設跳過/合併模式、多個假設跳過/合併模式或者高級運動向量預測(具有殘差運動資料)編碼。在一些實施例中，流程600描述了透過使用多重假設跳過/合併模式對像素區塊進行編碼的位元流的語法示例。
在一些實施例中，當根據像素區塊是否將由跳過模式、合併模式或高級運動向量預測進行編碼的模式選擇決策將當前像素區塊編碼成位元流中時，視訊編碼器(例，如下面的部分III中描述的視訊編碼器700)執行流程600。此決策可以由視訊編碼器的速率/失真控制流程基於像素區塊是否可以被適當編碼而沒有殘差運動資料(即運動向量差)和/或沒有殘差訊號而做出。在一些實施例中，當根據位元流的內容解碼當前像素區塊時(例如，當解碼位元流中已編碼的運動預測碼字時)，視訊解碼器(例如，如下面的部分IV中描述的視訊解碼器1000)執行流程600。在一些實施例中，透過執行存儲在電腦可讀介質中的指令，實現視訊編碼器或解碼器的計算設備的一個或多個處理單元(例如，處理器)執行流程600。
流程600開始于當視訊編碼器或解碼器接收透過使用畫面間預測而編解碼的像素區塊。視訊編碼器或解碼器確認區塊是否以單假設跳過模式被編解碼(在步驟610中)。如果該區塊用單假設跳過模式編解碼，則視訊編譯器對一個合併索引進行編碼(在步驟615中)，以用於選擇單一假設(single-hypothesis)跳過模式的一個運動預測子(編碼進運動預測碼字中，或從運動預測碼字解碼)。如果區塊不是以單一假設跳過模式編解碼，則本流程繼續到步驟620。
在步驟620中，視訊編碼器或解碼器確定該區塊是否以多重假設(multi-hypotheses)跳過模式被編解碼。如果區塊用多重假設跳過模式被編解碼，則視訊編碼器或解碼器對多個索引進行編解碼(在步驟625中)，以用於選擇用於多重假設跳過模式的多個運動預測子(編碼進運動預測碼字中或從運動預測碼字解碼)。如果該區塊沒有以單一假設或多重假設跳過模式被編解碼，則本流程繼續到步驟630。
在步驟630中，視訊編碼器或解碼器確定區塊是否以單假設合併模式被編解碼。如果區塊用單假設合併模式被編解碼，則視訊編譯器對一個合併索引進行編解碼(在步驟635中)，以用於選擇單一假設合併模式的一個運動預測子(編碼進運動預測碼字中或從運動預測碼字中解碼)。如果區塊不是以單一假設合併模式被編解碼，則本流程繼續到步驟640。
在步驟640中，視訊編碼器或解碼器在確定區塊是否以多重假設之合併模式被編解碼。如果區塊用多重假設合併模式被編解碼，則視訊編碼器或解碼器對多個索引進行編碼 (在步驟645中)，以用於選擇用於多重假設之合併模式的多個運動預測子(編碼進運動預測碼字中或從運動預測碼字中解碼)。如果區塊不是以單一假設或多重假設合併模式被編解碼，則本流程繼續到步驟650。
在步驟650中，視訊編譯器處理殘差運動資料或運動資訊。在流程600的此步驟中，視訊編譯器已經確定區塊既不以跳過模式也不以合併模式被編解碼，並且可能具有殘差運動資料(例如，運動向量差)。然後，透過將殘差運動資料編碼成位元流，或者自位元流檢索出殘差運動資料，視訊編譯器繼續以另一畫面間預測模式(例如，高級運動向量預測)處理此區塊。然後，本流程結束于步驟650。
III.多重假設視訊編碼器
本發明的一些實施例提供了實現多重假設運動預測(跳過/合併模式)的視訊編碼器，其允許編碼器基於從候選運動預測子列表中多個運動預測子的選擇傳達運動預測。視訊編碼器從候選運動預測子列表中選擇第一運動預測子和第二運動預測子。視訊編碼器基於分別使用第一運動預測子和第二運動預測子而獲得的第一像素集和第二像素集計算組合預測。視訊編碼器透過使用用於運動補償的組合預測編碼像素區塊。視訊編碼器將運動預測碼字和已編碼像素區塊存儲在位元流中。
第7圖示出了實現多重假設運動預測的示例視訊編碼器700。如圖所示，視訊編碼器700從視訊源705接收輸入視訊訊號並將該訊號編碼成位元流795。視訊編碼器700具有用 於編碼視訊信號705的若干組件或模組，包括變換模組710、量化模組711、逆量化模組714、逆變換模組715、畫面內圖像估計模組720、畫面內圖像預測模組725、運動補償模組730、運動估計模組735、環路濾波器745、已重構圖像暫存器750、運動向量暫存器765、運動向量預測模組775以及熵編碼器790。
在一些實施例中，模組710-790是由計算設備或電子裝置的一個或多個處理單元(例如，處理器)執行的軟體指令的模組。在一些實施例中，模組710-790是由電子裝置的一個或多個積體電路(integrated circuit，IC)實現的硬體電路的模組。雖然模組710-790被示出為分離的模組，但是一些模組可以被組合成單個模組。
視訊源705提供原始視訊訊號，其呈現沒有壓縮的每個視訊資訊框的像素資料。減法器708計算視訊源705的原始視訊像素資料與來自於運動補償730或者畫面內圖像預測725的已預測像素資料713之間的差。變換710將此差(或殘差像素資料)轉換為變換係數(例如，透過執行離散餘弦變換(Discrete Cosine Transform，DCT))。量化器711將變換係數量化為已量化資料(或已量化係數)，其由熵編碼器790編碼進位元流795中。
逆量化模組714去量化已量化資料(或已量化係數)712，以獲得變換係數，逆變換模組715對變換係數執行逆變換以產生已重構像素資料717(在添加已預測像素資料713之後)。在一些實施例中，已重構像素資料717被暫時存儲在線暫存器(未示出)中以用於畫面內圖像預測和空間運動向量預 測。已重構像素由環路濾波器745進行濾波並被存儲在已重構圖像暫存器750中。在一些實施例中，已重構圖像暫存器750是視訊編碼器700的外部的記憶體。在一些實施例中，已重構圖像暫存器750是視訊編碼器700的內部的記憶體。
畫面內圖像估計模組720基於已重構像素資料717執行畫面內預測，以產生畫面內預測資料。畫面內預測資料被提供給熵編碼器790以被編碼進位元流795中。畫面內預測資料還由畫面內圖像預測模組725使用，以產生已預測像素資料713。
運動估計模組735透過產生對存儲在已重構圖像暫存器750中的先前已解碼資訊框的像素資料的運動向量，執行畫面間預測。這些運動向量被提供給運動補償模組730以產生已預測像素資料。運動補償模組730還將結合下面第8圖與關於多重假設運動預測進行描述。不是將完整實際運動向量編碼進位元流中，視訊編碼器700使用運動向量預測產生已預測運動向量，並且用於運動補償的運動向量與已預測運動向量之間的差被編碼為殘差運動資料並被存儲在位元流795中。
基於生成以用於編碼先前視訊資訊框的參考運動向量，即，用於執行運動補償的運動補償運動向量，運動向量預測模組775生成已預測運動向量。運動向量預測模組775從來自于運動向量暫存器765的先前視訊資訊框中檢索出參考運動向量。視訊編碼器700將生成以用於當前視訊資訊框的運動向量存儲在運動向量暫存器765中作為用於生成已預測運動向量的參考運動向量。
運動向量預測模組775使用參考運動向量創建已預測運動向量。已預測運動向量可以由空間運動向量預測或時間運動向量預測計算。當前資訊框(殘差運動資料)的已預測運動向量與運動補償運動向量(motion compensation MV，MC MV)之間的差由熵編碼器790編碼進位元流795中。
熵編碼器790透過使用諸如上下文適應性二進制算術編碼(Context-based Adaptive Binary Arithmetic Coding，CABAC)或霍夫曼編碼(Huffman encoding)的熵編碼技術將各種參數和資料編碼進位元流795中。熵編碼器790將諸如已量化變換資料和殘差運動資料的參數編碼進位元流中。
環路濾波器745對已重構像素資料717進行濾波運算或平滑操作運算以減少編碼的失真，特別是在像素區塊的邊界處。在一些實施例中，所執行的濾波操作包括採樣自適應偏移(Sample Adaptive Offset，SAO)。在一些實施例中，濾波操作包括自適應環路濾波器(Adaptive Loop Filter，ALF)。
第8圖示出了視訊編碼器700中實現多重假設運動預測之運動補償模組730。如圖所示，運動補償模組730從運動向量暫存器765接收先前存儲的運動向量作為候選運動預測子810。運動補償模組730還自已重構圖像暫存器750接收圖像暫存器資料812，其提供由運動預測子參考的像素集。運動補償模組反過來產生已預測像素資料713和運動預測碼字815。熵編碼器790將碼字815編碼進位元流795中。
運動補償器模組730包括候選選擇器模組850、預測組合器模組860和選擇編碼器模組870。
候選選擇器模組850接收候選運動預測子810(即，從運動向量暫存器765檢索的存儲的運動向量)並且生成用於一個或多個運動候選的選擇。所選擇的候選運動預測子用於獲得用於運動補償的預測814；預測1對應於使用第一選擇運動預測子所獲得的第一像素集；預測2對應於使用第二選擇運動預測子所獲得的第二像素集。用於運動補償的預測814被轉發到預測組合器860，將所獲得的預測814組合成用於運動補償的組合預測，其用作已預測像素資料713。選擇運動候選的識別(例如，合併索引)被轉發到選擇編碼器模組870，其生成識別選擇運動候選的運動預測碼字815。
候選選擇器模組850確定哪些存儲的運動向量將被包括在運動候選列表中，並且基於視訊編碼標準(例如，HEVC)將一索引分配給候選列表中的每個運動預測子。在一些實施例中，候選選擇器850辨識候選列表中的候選子集(例如，僅單向預測)，並且將其候選的選擇僅限制於子集合中的這些。
候選選擇器模組850可基於模式選擇流程805從候選運動預測子810中選擇一個或兩個候選運動預測子。基於像素區塊是否被適當編解碼而無殘差運動資料(即運動向量差)和/或殘差訊號，模式選擇流程可以是視訊編碼器700的速率/失真控製流程的一部分。
在一些實施例中，候選選擇器模組850基於圖像暫存器資料812進行其選擇。圖像暫存器資料812提供附加資訊以用於候選運動預測子810。對每一個候選運動預測子810來說， 圖像暫存器資料812提供允許候選選擇器850確定：候選運動預測子被採用的相鄰區塊的空間位置；由候選運動預測子作為目標或參考的像素(例如，根據預定模板)；運動向量類型(例如，雙向預測，單向預測)；以及其他類型的資訊的資訊。基於此資訊，候選選擇器850從運動預測列表中選擇第一候選，并可選地選擇第二候選。候選選擇器850可以基於來自于第一選擇候選的索引偏移選擇第二候選。候選選擇器850還可以透過基於圖像暫存器資料812搜索列表選擇第二候選。第一運動候選和第二運動候選的選擇如上面的部分II中描述。
預測組合器模組860將兩個預測814(其是基於兩個選運動預測子而獲得的像素資料)組合成組合預測(已預測像素資料713)。組合可以是預測814的簡單平均或加權之和。預測組合器860還可以使用從圖像暫存器資料812中推導出的資訊，以將權重分配給每個預測814。在計算用於運動補償的組合預測713時，將權重分配給每個預測如部分II中描述。
在一些實施例中，兩個預測814(即預測1和預測2)被分別應用到當前區塊內的不同的第一空間區域和第二空間區域。在這種情況下，預測組合器模組860在當前區塊的第一區域正在被編碼時將使用第一預測(即從第一選擇運動預測子推導出的預測1)，並在當前區塊的第二區域正被編碼時使用第二預測(從第二選擇運動預測子推導出的預測2)。如果兩個區域重疊，則預測組合器860計算組合預測作為兩個預測814的加權平均。分配給每個預測的權重是基於從圖像暫存器資料812中推導出的資訊，例如，當前區塊和兩個選擇運動候選的 空間相鄰區塊之間的像素距離。
選擇編碼器模組870基於由候選選擇器850提供的一個或多個索引生成辨識選擇運動候選的運動預測碼字815。在上面的部分II中描述了碼字815的編碼。上面結合第5圖描述了碼字815的示例性編碼方案以辨識一個或兩個運動候選。
第9圖概念性地示出了透過使用多重假設運動預測編碼像素區塊的流程900。在一些實施例中，視訊編碼器700在對視訊圖像或資訊框中的像素區塊進行編碼時，執行流程900。在一些實施例中，透過執行存儲在電腦可讀介質中的指令，實現視訊編碼器700的計算設備的一個或多個處理單元(例如，處理器)執行流程900。
當視訊編碼器接收當前區塊的像素並且決定透過使用多重假設跳過或合併模式編碼當前區塊時，視訊編碼器開始流程900。
視訊編碼器從像素區塊的候選運動預測子列表中選擇第一運動預測子和第二運動預測子(在步驟910中)。在一些實施例中，視訊編碼器選擇第一候選。然後，視訊編碼器透過將偏移應用到第一候選的索引，或透過基於與第一候選的差搜索候選列表，選擇第二候選。上面部份II描述了第一運動預測子和第二運動預測子的選擇。
視訊編碼器基於分別透過選擇的第一運動預測子和第二運動預測子而獲得的第一像素集和第二像素集(第一預測和第二預測)，計算用於運動補償的組合預測(在步驟920中)。當將其組合為加權平均以產生用於運動補償的組合預測 時，視訊編碼器可將權重分配給每一像素集。在上面的部份II中描述了在計算運動補償的組合預測時為每像素集(預測)分配權重。
視訊編碼器透過使用組合預測編碼像素區塊以執行運動補償(在步驟930中)。
視訊編碼器對辨識所選擇的第一運動預測子和第二運動預測子的運動預測碼字進行編碼(在步驟940中)。運動預測碼字可以顯性地編碼多個候選選擇。運動預測碼字還可顯性地僅對第一候選的選擇進行編碼，同時讓第二候選的選擇被隱性地傳達(根據相應的解碼器執行相同的候選選擇流程)。
在步驟950中，視訊編碼器將已編碼的碼字和已編碼的像素區塊存儲在位元流中。然後，流程900結束。
IV.多重假設視訊解碼器
本發明的一些實施例提供了實現多重假設運動預測(跳過模式/合併模式)的視訊解碼器，其允許解碼器基於從候選運動預測子列表中多個運動預測子的選擇接收運動預測。視訊解碼器接收包括已編碼的像素區塊和用於已編碼的像素區塊的運動預測碼字的位元流。視訊解碼器基於運動預測碼字從候選運動預測子列表中選擇第一運動預測子和第二運動預測子。視訊解碼器基於分別使用第一運動預測子和第二運動預測子而獲得的第一像素集和第二像素集計算組合預測。視訊解碼器透過使用用於運動補償的組合預測解碼像素區塊。視訊解碼器可輸出已解碼的像素區塊。
第10圖示出了實現多重假設運動預測的示例視訊 解碼器1000。如圖所示，視訊解碼器1000是圖像解碼或視訊解碼電路，其接收位元流1095並將位元流的內容解碼為視訊資訊框的像素資料以用於顯示。視訊解碼器1000具有用於解碼位元流1095的若干組件或模組，包括逆量化模組1005，逆變換模組1015，畫面內圖像預測模組1025，運動補償模組1035，環路濾波器1045，已解碼圖像暫存器1050，運動向量暫存器1065，運動向量預測模組1075和位元流解析器1090。
在一些實施例中，模組1010-1090是由計算設備的一個或多個處理單元(例如，處理器)執行的軟體指令的模組。在一些實施例中，模組1010-1090是由電子設備的一個或多個積體電路實現的硬體電路的模組。雖然模組1010-1090被表示為分離的模組，但是一些模組可以被組合成單個模組。
解析器1090(或熵解碼器)接收位元流1095，並且根據由視訊編碼或圖像編碼標准定義的語法執行原始解析。所解析的語法元素包括各種頭元素，旗標以及已量化資料(或已量化係數)1012。解析器1090透過使用諸如上下文適應性二進制算術編碼或霍夫曼編碼的熵編碼技術來解析出各種語法元素。
逆量化模組1005對已量化資料(或已量化係數)1012進行逆量化以獲得變換係數，並且逆變換模組1015對變換係數1016執行逆變換運算以產生已解碼像素資料1017(在添加來自於畫面內預測模組1025或運動補償模組1035的已預測像素資料1013之後)。已解碼像素資料由環路濾波器1045濾波並被存儲在已解碼圖像暫存器1050中。在一些實施例中，已解碼 圖像暫存器1050是視訊解碼器1000的外部記憶體。在一些實施例中，已解碼圖像暫存器1050是視訊解碼器1000的內部記憶體。
畫面內圖像預測模組1025從位元流1095接收畫面內預測資料，並且根據其產生來自於存儲在已解碼畫面暫存器1050中的已解碼像素資料1017的已預測像素資料1013。在一些實施例中，已解碼像素資料1017也被存儲在用於畫面內圖像預測和空間運動向量預測的線暫存器(未示出)中。
在一些實施例中，已解碼圖像暫存器1050的內容被用於顯示。顯示設備1055直接檢索出已解碼圖像暫存器1050的內容以進行顯示，或將已解碼圖像暫存器的內容檢索到顯示暫存器。在一些實施例中，顯示設備透過像素傳輸從已解碼圖像暫存器1050接收像素值。
運動補償模組1035根據運動補償運動向量，產生來自於存儲在已解碼圖像暫存器1050中的已解碼像素資料1017的已預測像素資料1013。運動補償模組1035將結合下面第11圖關於多重假設運動預測而被進一步描述。這些運動補償運動向量透過將添加自位元流1095接收的殘差運動資料與自運動向量預測模組1075接收的預測運動向量被解碼。
基於生成以用於先前視訊資訊框的參考運動向量，例如，用於執行運動補償的運動補償運動向量，運動向量預測模組1075產生預測運動向量。運動向量預測模組1075從運動向量暫存器1065中檢索先前視訊資訊框的參考運動向量。視訊解碼器1000將生成以用於當前視訊資訊框的運動補償運動 向量存儲在運動向量暫存器1065中作為用於產生預測運動向量的參考運動向量。
環路濾波器1045對已解碼像素資料1017執行濾波操作或平滑操作，以減少編解碼偽影，特別是在像素區塊的分界線處。在一些實施例中，所執行的濾波操作包括採樣適應性偏移。在一些實施例中，濾波操作包括適應性環路濾波器。
第11圖出了視訊解碼器1000中實現多重假設運動預測的運動補償模組1035。如圖所示，運動補償模組1035自運動向量暫存器1065接收先前存儲的運動向量作為候選運動預測子1110。運動補償模組1035還從位元流1095接收運動預測碼字1115(由解析器1090解析出)。基於接收到的運動預測碼字1115和接收到的候選運動預測子1110，運動補償器模組1035生成已預測像素資料1013。
運動補償器模組1035包括候選選擇器模組1150、預測組合器模組1160和選擇解碼器模組1170。
選擇解碼器模組1170對運動預測碼字1115進行解碼，運動預測碼字1115提供被選擇並用於編碼當前區塊的一個或兩個運動候選的辨識(或索引)。運動預測碼字可以顯式地編碼多個運動預測子的選擇。運動預測碼字也可以顯性地僅對第一運動候選的選擇進行編碼，同時讓第二運動候選的選擇被隱性地傳達(例如，透過將偏移添加到於第一運動候選的索引或基於與第一運動候選的差搜索運動候選列表)。在上面的部份II中描述了碼字1115的編碼。
在一些實施例中，選擇解碼器模組1170基於圖像 暫存器資料1112確定第二選擇運動候選的隱性辨識。對於每個候選之運動預測子1110而言，圖像暫存器資料1112提供允許選擇解碼器模組1170確定：採用候選運動預測子的相鄰區塊的空間位置；由候選運動預測子作為目標或參考(例如，根據預定模板)的像素；運動向量類型(例，雙向預測，單向預測)；以及其他類型的資訊的資訊。
基於此資訊，選擇解碼器模組1170可以從運動候選列表中選擇第二候選。選擇解碼器1170可以基於候選資訊1113搜索第二運動候選的候選列表。選擇解碼器1170還可以基於來自于第一選擇運動候選的索引偏移選擇第二運動候選。上面部份II描述了第一候選和第二候選的選擇。
所選擇的運動候選的辨識被提供給候選選擇器模組1150，其接收候選運動預測子1110(即，從運動向量暫存器1065中檢索的存儲的運動向量)，並且使用所選擇的運動候選的辨識以從候選運動預測子1110中選擇一個或兩個候選運動預測子1114。所選擇的候選運動預測子用於獲得運動補償的預測1114：預測1對應於使用第一選擇運動預測子所獲得的第一像素集，以及預測2對應於使用第二選擇運動預測子所獲得的第二像素集。用於運動補償的預測1114被轉發到預測組合器1160，其將所獲得的預測1114組合成用於運動補償的組合預測，其被用作已預測像素資料1013。
預測組合器模組1160將兩個預測1114(其是基於兩個所選擇的運動預測子獲得的像素資料)組合到已預測像素資料1013(組合預測)中。此組合可以是預測1114的簡單平均 或加權平均。預測組合器1160還可以使用從圖像暫存器資料1112推導出的資訊，以將權重分配給每個預測1114。在部分II中描述了在計算用於運動補償的組合預測時對每個預測的權重分配。
在一些實施例中，兩個預測1114(即預測1和預測2)被分別應用到當前區塊內的不同的第一空間區域和第二空間區域。在這種情況下，預測組合器模組1160在當前區塊的第一區域正在被解碼時將使用第一預測(從第一選擇運動預測子推導出的預測1)，並在當前區塊的第二區域正被解碼時使用第二預測(從第二選擇運動預測子推導出的預測2)。如果兩個區域重疊，則預測組合器1160將組合預測計算為兩個預測1114的加權平均。分配給每個預測的權重是基於從圖像緩衝資料1112推導出的資訊，例如，當前區塊與兩個所選擇的運動候選的空間相鄰區塊之間的像素距離。
第12圖概念性地示出了透過使用多重假設運動預測解碼像素區塊的流程1200。在一些實施例中，視訊解碼器1000在解碼視訊圖像或資訊框中的像素區塊時執行流程1200。在一些實施例中，透過執行存儲在電腦可讀介質中的指令，實現視訊解碼器1000的計算設備、的一個或多個處理單元(例如，處理器)執行流程1200。
視訊解碼器接收像素區塊的已編碼資料(在步驟1210中)。已編碼資料包括用於已編碼的像素區塊的運動預測碼字。已編碼資料還可以包括像素區塊的殘差訊號的變換資料。
視訊解碼器透過對運動預測碼字進行解碼從候選運動預測子列表中選擇第一運動預測子和第二運動預測子(在步驟1220中)。運動預測碼字可以僅顯性地編碼第一運動候選的選擇，同時讓第二運動候選的選擇被隱性地傳達(例如，透過將偏移應用到第一運動候選的索引或基於第一運動候選搜索運動候選列表)。
視訊解碼器基於分別由選擇的第一運動預測子和第二運動預測子獲得的第一像素集和第二像素集(第一預測和第二預測)計算用於運動補償的組合預測(在步驟1230中)。當將其組合為加權平均以產生用於運動補償的組合預測時，視訊解碼器可將權重分配給每一像素集。在上面的部份II中描述了在計算運動補償的組合預測時為每像素集合分配權重(預測)。
在步驟1240中，視訊解碼器透過基於組合預測執行運動補償解碼或重構像素區塊。然後，流程1200結束。
V.電子系統示例
很多上述的特徵和應用可以被實現為軟體處理，其被指定為記錄在電腦可讀存儲介質(computer readable storage medium)(也被稱為電腦可讀介質)上的指令集。當這些指令由一個或者多個計算單元或者處理單元(例如，一個或者多個處理器、處理器核或者其他處理單元)來執行時，則這些指令使得該處理單元執行這些指令所表示的動作。電腦可讀介質的示例包括但不限於CD-ROM、快閃記憶體驅動器(flash drive)、隨機存取記憶體(random access memory，RAM) 晶片、硬碟、可讀寫可程式設計唯讀記憶體(erasable programmable read only memory，EPROM)，電可擦除可程式設計唯讀記憶體(electrically erasable programmable read-only memory，EEPROM)等。該電腦可讀介質不包括透過無線或有線連接的載波和電信號。
在本說明書中，術語“軟體”意味著包括唯讀記憶體中的韌體或者存儲在磁存放裝置中的應用程式，該應用程式可以被讀入到記憶體中以用於處理器進行處理。同時，在一些實施例中，多個軟體發明可以作為更大程式的子部分來實現，而保留不同的軟體發明。在一些實施例中，多個軟體發明可以作為獨立的程式來實現。最後，一起實現此處所描述的軟體發明的獨立的程式的任何結合是在本發明的範圍內。在一些實施例中，當被安裝以在一個或者多個電子系統上進行操作時，軟體程式定義了一個或者多個特定的機器實現方式，該機器實現方式執行和實施該軟體程式的操作。
第13圖概念性示出了在本發明一些實施例中實現的電子系統1300。電子系統1300可以是電腦(例如，臺式電腦、個人電腦、平板電腦等)、電話、PDA或者其他種類的電子設備。這個電子系統包括各種類型的電腦可讀媒質和用於各種其他類型的電腦可讀媒質的介面。電子系統1300包括匯流排1305、處理單元1310、影像處理單元(graphics-processing unit，GPU)1315、系統記憶體1320、網路1325、唯讀記憶體(read-only memory，ROM)1330、永久存放裝置1335、輸入裝置1340和輸出設備1345。
匯流排1305集體表示與大量的電子系統1300通信連接的內部設備的所有系統匯流排、外設匯流排和晶片組匯流排。例如，匯流排1305透過影像處理單元1315、唯讀記憶體1330、系統記憶體1320和永久存放裝置1335，與處理單元1310通信連接。
對於這些各種記憶體單元，處理單元1310檢索執行的指令和處理的資料，以為了執行本發明的處理。在不同實施例中，該處理單元可以是單個處理器或者多核處理器。某些指令被傳輸影像處理單元1315和並被其執行。該影像處理單元1315可以卸載各種計算或補充由處理單元1310提供的影像處理。
唯讀記憶體1330存儲處理單元1310或者電子系統的其他模組所需要的靜態資料和指令。另一方面，永久存放裝置1335是一種讀寫記憶體設備(read-and-write memory)。這個設備是一種非易失性(non-volatile)記憶體單元，其即使在電子系統1300關閉時也存儲指令和資料。本發明的一些實施例使用大型存放區設備(例如磁片或光碟及其相應的磁碟機)作為永久存放裝置1335。
其他實施例使用卸除式存放裝置設備(如軟碟、快閃記憶體設備等，以及其相應的磁碟機)作為該永久存放裝置。與永久存放裝置1335一樣，系統記憶體1320是一種讀寫記憶體設備。但是，與存放裝置1335不一樣的是，該系統記憶體1320是一種易失性(volatile)讀寫記憶體，例如隨機讀取記憶體。系統記憶體1320存儲一些處理器在運行時需要的指令和資 料。在一些實施例中，根據本發明的處理被存儲在該系統記憶體1320、永久存放裝置1335和/或唯讀記憶體1330中。例如，各種記憶體單元包括用於根據一些實施例的處理多媒體剪輯的指令。對於這些各種記憶體單元，處理單元1310檢索執行的指令和處理的資料，以為了執行某些實施例的處理。
匯流排1305也連接到輸入裝置1340和輸出設備1345。該輸入裝置1340使得使用者溝通資訊並選擇指令到該電子系統上。該輸入裝置1340包括字母數位鍵盤和指點設備(也被稱為“游標控制設備”)，攝像機(如網路攝像機(webcam))，用於接收語音命令的麥克風或類似的設備等。輸出設備1345顯示由電子系統生成的圖像或以其他方式輸出的資料。輸出設備1345包括印表機和顯示裝置，例如陰極射線管(cathode ray tube，CRT)或液晶顯示器(liquid crystal display，LCD)，以及揚聲器或類似的音訊輸出設備。一些實施例包括諸如同時用作輸入裝置和輸出設備的觸控式螢幕等設備。
最後，如第13圖所示，匯流排1305也透過網路介面卡(未示出)將電子系統1300耦接到網路1325。在這個方式中，電腦可以是電腦網路(例如，局域網(local area network，LAN)、廣域網路(wide area network，WAN)或者內聯網)或者網路的網路(例如互聯網)的一部分。電子系統1300的任一或者所有元件可以與本發明結合使用。
一些實施例包括電子元件，例如，微處理器、存放裝置和記憶體，其將電腦程式指令存儲到機器可讀介質或者電腦可讀介質(可選地被稱為電腦可讀存儲介質、機器可讀介 質或者機器可讀存儲介質)。電腦可讀介質的一些實例包括RAM、ROM、唯讀光碟(read-only compact disc，CD-ROM)，可燒錄光碟(recordable compact disc，CD-R)、可讀寫光碟(rewritable compact disc，CD-RW)、唯讀數位通用光碟(read-only digital versatile disc)(例如，DVD-ROM，雙層DVD-ROM)、各種可記錄/可讀寫DVD(例如DVD RAM、DVD-RW、DVD+RW等)、快閃記憶體(如SD卡、迷你SD卡，微SD卡等)、磁性和/或固態硬碟、唯讀和可燒錄藍光®(Blu-Ray®)盤、超高密度光碟和其他任何光學介質或磁介質，以及軟碟。電腦可讀介質可以存儲由至少一個處理單元執行的電腦程式，並且包括用於執行各種操作的指令集。電腦程式或電腦代碼的示例包括機器代碼，例如編譯器產生的機器代碼，以及包含由電腦、電子元件或微處理器使用注釋器(interpreter)而執行的高級代碼的檔。
當以上討論主要是指執行軟體的微處理器或多核處理器時，很多上述的功能和應用程式由一個或多個積體電路執行，如特定應用的積體電路(application specific integratedcircuit，ASIC)或現場可程式設計閘陣列(field programmable gate array，FPGA)。在一些實施例中，這種積體電路執行存儲在該電路本身上的指令。此外，一些實施例執行存儲在可程式設計邏輯器件(programmable logic device，PLD)，ROM或RAM設備中的軟體。
如本發明的說明書和任一請求項中所使用，術語“電腦”、“伺服器”、“處理器”和“記憶體”均指電子設備或其他 技術設備。這些術語不包括人或群體。為了本說明書的目的，術語顯示或顯示裝置指在電子設備上進行顯示。如本發明的說明書和任一請求項中所使用，術語“電腦可讀介質”、“電腦可讀媒質”和“機器可讀介質”完全局限於有形的、物理的物體，其以電腦可讀的形式存儲資訊。這些術語不包括任何無線信號、有線下載信號和其他任何短暫信號。
在結合許多具體細節的情況下描述了本發明時，本領域通常知識者將認識到，本發明可以以其他具體形式而被實施，而不脫離本發明的精神。此外，大量的圖(包括第6圖、第9圖和第12圖)概念性示出了處理。這些處理的具體操作可以不以所示以及所描述的確切順序來被執行。這些具體操作可用不在一個連續的操作系列中被執行，並且不同的具體操作可以在不同的實施例中被執行。另外，該處理透過使用幾個子處理而被實現，或者作為更大巨集處理的部分。因此，本領域通常知識者將能理解的是，本發明不受前述說明性細節的限制，而是由請求項加以界定。
附加的說明
本文所描述的主題有時表示不同的元件，其包含在或者連接到其他不同的元件。可以理解的是，所描述的結構僅是示例，實際上可以由許多其他結構來實施，以實現相同的功能。從概念上講，任何實現相同功能的組件的排列實際上是“相關聯的”，以便實現所需的功能。因此，不論結構或中間部件，為實現特定的功能而組合的任何兩個元件被視為“相互關聯”，以實現所需的功能。同樣，任何兩個相關聯的元件被看 作是相互“可操作連接”或“可操作耦接”，以實現特定功能。能相互關聯的任何兩個組件也被視為相互“可操作地耦合”以實現特定功能。可操作連接的具體例子包括但不限於物理可配對和/或物理上相互作用的元件，和/或無線可交互和/或無線上相互作用的元件，和/或邏輯上相互作用和/或邏輯上可交互的元件。
此外，關於基本上任何複數和/或單數術語的使用，本領域的技術人員可以根據上下文和/或應用從複數轉換為單數和/或從單數到複數。為清楚起見，本文明確規定了不同的單數/複數排列。
此外，本領域的通常知識者可以理解，通常，本發明所使用的術語特別是請求項中的，如請求項的主題，通常用作“開放”術語，例如，“包括”應解釋為“包括但不限於，“有”應理解為“至少有”“包括”應解釋為“包括但不限於”等。本領域的通常知識者可以進一步理解，若計畫介紹特定數量的請求項內容，將在請求項內明確表示，並且，在沒有這類內容時將不顯示。例如，為幫助理解，下面請求項可能包含短語“至少一個”和“一個或多個”，以介紹請求項內容。然而，這些短語的使用不應理解為暗示使用不定冠詞“a”或“an”介紹請求項內容，而限制了任何特定的請求項。甚至當相同的請求項包括介紹性短語“一個或多個”或“至少有一個”，不定冠詞，例如“a”或“an”，則應被解釋為表示至少一個或者更多，對於用於介紹請求項的明確描述的使用而言，同樣成立。此外，即使明確引用特定數量的介紹性內容，本領域通常知識者可以認識到，這 樣的內容應被解釋為表示所引用的數量，例如，沒有其他修改的“兩個引用”，意味著至少兩個引用，或兩個或兩個以上的引用。此外，在使用類似於“A、B和C中的至少一個”的表述的情況下，通常如此表述是為了本領域通常知識者可以理解該表述，例如，“系統包括A、B和C中的至少一個”將包括但不限於單獨具有A的系統，單獨具有B的系統，單獨具有C的系統，具有A和B的系統，具有A和C的系統，具有B和C的系統，和/或具有A、B和C的系統，等。本領域通常知識者進一步可理解，無論在說明書中、請求項中或者附圖中，由兩個或兩個以上的替代術語所表現的任何分隔的單詞和/或短語應理解為，包括這些術語中的一個，其中一個，或者這兩個術語的可能性。例如，“A或B”應理解為，“A”，或者“B”，或者“A和B”的可能性。
從前述可知，為了說明目的，此處已描述了各種實施方案，並且在不偏離本發明的範圍和精神的情況下，可以進行各種變形。因此，此處所公開的各種實施方式不用於限制，請求項表示真實的範圍和精神。

Claims (14)

  1. 一種視訊編解碼方法，包括：自用於像素區塊的候選運動預測子列表選擇第一運動預測子和第二運動預測子；對辨識該第一運動預測子和該第二運動預測子的運動預測碼字進行編解碼；基於使用該第一運動預測子和該第二運動預測子而獲得之第一像素集和該第二像素集，計算一組合預測；以及透過使用用於運動補償的該組合預測，對該像素區塊進行編解碼。
  2. 根據申請專利範圍第1項所述之方法，其中，該候選運動預測子列表係用於合併模式的合併候選集。
  3. 根據申請專利範圍第1項所述之方法，其中，用於辨識該第一運動預測子和該第二運動預測子的該運動預測碼字包括來自于該候選運動預測子列表且辨識該第一運動預測子的第一索引和辨識該第二運動預測子的第二索引。
  4. 根據申請專利範圍第3項所述之方法，其中，該第二索引被編解碼為與該碼字中之該第一索引不同。
  5. 根據申請專利範圍第1項所述之方法，其中，用於辨識該第一運動預測子和該第二運動預測子的該運動預測碼字包括辨識(i)來自於該候選運動預測子列表的任何一個候選運動預測子，或者(ii)來自於該候選運動向量列表的任何兩個候選運動預測子的組合的特定索引。
  6. 根據申請專利範圍第1項所述之方法，其中，用於辨識該第一運動預測子和該第二運動預測子的該運動預測碼字包括辨識該第一運動預測子的特定索引，其中該第二運動預測子係根據該特定索引之偏移而被辨識。
  7. 根據申請專利範圍第1項所述之方法，其中，用於辨識該第一運動預測子和該第二運動預測子的該運動預測碼字包括辨識該第一運動預測子的特定索引，其中該第二運動預測子係根據預定之搜索流程而被辨識。
  8. 根據申請專利範圍第7項所述之方法，其中，該第二運動預測子係基於該第二運動預測子的模板與該第一運動預測子的模板之間的差而被辨識。
  9. 根據申請專利範圍第1項所述之方法，其中，該組合預測是使用該第一運動預測子和該第二運動預測子而獲得的該第一像素集和該第二像素集的平均。
  10. 根據申請專利範圍第9項所述之方法，其中，該平均係傾向於具有正在被編碼的該像素區塊與由一運動預測子獲得的像素集之間的更小差的該運動預測子的加權平均。
  11. 根據申請專利範圍第1項所述之方法，其中，自該候選運動預測子列表選擇該第一運動預測子和該第二運動預測子，包括：自該候選運動預測子列表的子集選擇該第一運動預測子和該第二運動預測子。
  12. 一種視訊解碼電子裝置，包括： 視訊解碼器電路，用於：接收包括已編碼的像素區塊和用於已編碼的像素區塊的運動預測碼字的位元流；基於該運動預測碼字自候選運動預測子列表選擇第一運動預測子和第二運動預測子；基於分別使用該第一運動預測子和該第二運動預測子而獲得之第一像素集和第二像素集，計算一組合預測；以及透過使用用於運動補償的該組合預測，對該像素區塊進行解碼；以及輸出，用於輸出已解碼的該像素區塊。
  13. 根據申請專利範圍第12項所述之電子裝置，其中，對該像素區塊進行解碼包括：使用該第一運動預測子以執行用於該像素區塊的第一區域的運動補償預測；以及使用該第二運動預測量以執行該像素區塊的第二區域的運動補償預測。
  14. 一種視訊編碼電子裝置，包括：視訊編碼器電路，用於：自用於像素區塊的候選運動預測子列表選擇第一運動預測子和第二運動預測子；對辨識該第一運動預測子和該第二運動預測子的運動預測碼字進行編碼；基於分別使用該第一運動預測子和該第二運動預測子而獲 得之第一像素集和第二像素集，計算一組合預測；使用用於運動補償的該組合預測，對該像素區塊進行編碼；以及將該運動預測碼字和已編碼的該像素區塊存儲在位元流中。
TW107100635A 2017-01-06 2018-01-08 多重假設之合併模式 TWI669951B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201762443008P 2017-01-06 2017-01-06
US62/443,008 2017-01-06
US15/863,410 US10715827B2 (en) 2017-01-06 2018-01-05 Multi-hypotheses merge mode
US15/863,410 2018-01-05

Publications (2)

Publication Number Publication Date
TW201832556A TW201832556A (zh) 2018-09-01
TWI669951B true TWI669951B (zh) 2019-08-21

Family

ID=62783748

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107100635A TWI669951B (zh) 2017-01-06 2018-01-08 多重假設之合併模式

Country Status (6)

Country Link
US (1) US10715827B2 (zh)
EP (1) EP3549340A4 (zh)
CN (1) CN110169061B (zh)
SG (2) SG11201906176VA (zh)
TW (1) TWI669951B (zh)
WO (1) WO2018127188A1 (zh)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109963155B (zh) * 2017-12-23 2023-06-06 华为技术有限公司 图像块的运动信息的预测方法、装置及编解码器
US10506242B2 (en) * 2018-01-30 2019-12-10 Google Llc Efficient context model computation design in transform coefficient coding
US10869060B2 (en) * 2018-01-30 2020-12-15 Google Llc Efficient context model computation design in transform coefficient coding
KR20190110044A (ko) * 2018-03-19 2019-09-27 주식회사 케이티 비디오 신호 처리 방법 및 장치
WO2020015706A1 (en) 2018-07-18 2020-01-23 Mediatek Inc. Method and apparatus of motion compensation bandwidth reduction for video coding system utilizing multi-hypothesis
EP3850837A4 (en) * 2018-09-17 2022-06-01 HFI Innovation Inc. METHODS AND APPARATUS COMBINING A PLURALITY OF PREDICTORS FOR BLOCK PREDICTION IN VIDEO CODING SYSTEMS
CN116527889A (zh) * 2018-09-25 2023-08-01 华为技术有限公司 一种图像预测方法和设备
US11544300B2 (en) * 2018-10-23 2023-01-03 EMC IP Holding Company LLC Reducing storage required for an indexing structure through index merging
MX2021004738A (es) 2018-10-27 2021-06-04 Huawei Tech Co Ltd Lista de fusion separada para candidatos de fusion de subbloque y armonizacion de tecnicas intra-inter para codificacion de video.
WO2020094074A1 (en) * 2018-11-06 2020-05-14 Beijing Bytedance Network Technology Co., Ltd. Position-depending ordering of motion candidate list for geometric partitioning mode
EP4287619A3 (en) * 2018-11-08 2024-01-31 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for encoding/decoding image signal and device therefor
CA3118269C (en) * 2018-11-08 2023-10-03 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for encoding/decoding image signal, and apparatus therefor
WO2020098653A1 (en) * 2018-11-12 2020-05-22 Mediatek Inc. Method and apparatus of multi-hypothesis in video coding
WO2020098713A1 (en) * 2018-11-13 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Motion candidate list construction for prediction
WO2020112437A1 (en) * 2018-11-30 2020-06-04 Interdigital Vc Holdings, Inc. Triangle and multi-hypothesis combination for video coding and decoding
WO2020114407A1 (en) * 2018-12-03 2020-06-11 Beijing Bytedance Network Technology Co., Ltd. Partial pruning method for hmvp mode
WO2020123998A1 (en) * 2018-12-13 2020-06-18 Tencent America LLC Video decoding by determining block reconstruction based on signaling information
GB2579824B (en) 2018-12-14 2022-05-18 British Broadcasting Corp Video encoding and video decoding
CN113196758A (zh) * 2018-12-18 2021-07-30 韩国电子通信研究院 图像编码/解码方法和设备以及存储比特流的记录介质
WO2020130714A1 (ko) * 2018-12-21 2020-06-25 주식회사 엑스리스 영상 신호 부호화/복호화 방법 및 이를 위한 장치
GB2580326A (en) 2018-12-28 2020-07-22 British Broadcasting Corp Video encoding and video decoding
US20220070441A1 (en) * 2018-12-31 2022-03-03 Vid Scale, Inc. Combined inter and intra prediction
WO2020147772A1 (en) * 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Motion candidates derivation
US20220303526A1 (en) * 2019-06-12 2022-09-22 lnterDigital VC Holdings, lnc. Illumination compensation for video encoding and decoding
WO2021052491A1 (en) 2019-09-19 2021-03-25 Beijing Bytedance Network Technology Co., Ltd. Deriving reference sample positions in video coding
JP7324940B2 (ja) 2019-09-19 2023-08-10 北京字節跳動網絡技術有限公司 ビデオコーディングにおけるスケーリングウインドウ
JP2021052241A (ja) * 2019-09-20 2021-04-01 Kddi株式会社 画像復号装置、画像復号方法及びプログラム
WO2021063418A1 (en) 2019-10-05 2021-04-08 Beijing Bytedance Network Technology Co., Ltd. Level-based signaling of video coding tools
EP4029262A4 (en) 2019-10-12 2022-11-30 Beijing Bytedance Network Technology Co., Ltd. PREDICTIVE TYPE SIGNALING IN VIDEO ENCODING
MX2022004200A (es) 2019-10-13 2022-05-02 Beijing Bytedance Network Tech Co Ltd Interaccion entre remuestreo de imagen de referencia y herramientas de codificacion de video.
US11195251B1 (en) * 2020-11-19 2021-12-07 Himax Technologies Limited Image processing apparatus and method capable of rapidly determining bounding box for motion objects without iteration
WO2023085704A1 (ko) * 2021-11-09 2023-05-19 삼성전자 주식회사 비디오 복호화 방법, 비디오 복호화 장치, 비디오 부호화 방법, 및 비디오 부호화 장치
WO2023121000A1 (ko) * 2021-12-23 2023-06-29 현대자동차주식회사 적응적 다중 참조라인들을 이용하는 비디오 코딩을 위한 방법 및 장치
WO2023198105A1 (en) * 2022-04-14 2023-10-19 Mediatek Inc. Region-based implicit intra mode derivation and prediction

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110200097A1 (en) * 2010-02-18 2011-08-18 Qualcomm Incorporated Adaptive transform size selection for geometric motion partitioning
US20130163669A1 (en) * 2010-05-26 2013-06-27 Lg Electronics Inc. Method and apparatus for processing a video signal

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102316317B (zh) * 2010-07-10 2013-04-24 华为技术有限公司 一种生成图像预测值的方法和装置
KR102126374B1 (ko) * 2010-11-04 2020-06-24 지이 비디오 컴프레션, 엘엘씨 블록 병합 및 스킵 모드를 지원하는 화상 코딩
JP2012244353A (ja) 2011-05-18 2012-12-10 Sony Corp 画像処理装置および方法
WO2013109026A1 (ko) * 2012-01-18 2013-07-25 엘지전자 주식회사 엔트로피 부호화/복호화 방법 및 그 장치
US9491459B2 (en) * 2012-09-27 2016-11-08 Qualcomm Incorporated Base layer merge and AMVP modes for video coding
CN110996100B (zh) * 2012-10-01 2022-11-25 Ge视频压缩有限责任公司 解码器、解码方法、编码器和编码方法
CN104168480B (zh) 2014-09-09 2017-07-04 西安电子科技大学 基于hevc标准的帧内预测编码模式快速选择方法
US10666940B2 (en) 2014-11-06 2020-05-26 Samsung Electronics Co., Ltd. Video encoding method and apparatus, and video decoding method and apparatus
CN105657420B (zh) 2015-12-30 2018-03-20 邦彦技术股份有限公司 一种面向hevc的快速帧内预测模式判决方法和装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110200097A1 (en) * 2010-02-18 2011-08-18 Qualcomm Incorporated Adaptive transform size selection for geometric motion partitioning
US20130163669A1 (en) * 2010-05-26 2013-06-27 Lg Electronics Inc. Method and apparatus for processing a video signal

Also Published As

Publication number Publication date
US10715827B2 (en) 2020-07-14
EP3549340A4 (en) 2020-11-11
SG11201906176VA (en) 2019-08-27
TW201832556A (zh) 2018-09-01
US20180199054A1 (en) 2018-07-12
CN110169061A (zh) 2019-08-23
CN110169061B (zh) 2022-05-10
EP3549340A1 (en) 2019-10-09
SG10202108418TA (en) 2021-09-29
WO2018127188A1 (en) 2018-07-12

Similar Documents

Publication Publication Date Title
TWI669951B (zh) 多重假設之合併模式
CN111034194B (zh) 编解码视频图像的方法以及电子设备
TWI711300B (zh) 照度補償方法及相應之視訊處理裝置
CN113455003B (zh) 视频编解码方法及电子设备
US11310526B2 (en) Hardware friendly constrained motion vector refinement
TWI688261B (zh) 用於簡化的合併候選發信的編解碼方法及裝置
TWI706667B (zh) 隱式變換設置
US11924413B2 (en) Intra prediction for multi-hypothesis
TW202034689A (zh) 用於發信合併工具的方法及裝置
US20240080490A1 (en) Signaling for multi-reference line prediction and multi-hypothesis prediction
US11245922B2 (en) Shared candidate list
CN112534807A (zh) 用于多假设模式参考和约束的方法和设备
TW202031046A (zh) 具有應用的塊設定以及運動儲存設定的三角形預測
WO2019161798A1 (en) Intelligent mode assignment in video coding
TWI814540B (zh) 視訊編解碼方法及裝置
WO2023020392A1 (en) Latency reduction for reordering merge candidates
WO2023186040A1 (en) Bilateral template with multipass decoder side motion vector refinement
WO2023193769A1 (en) Implicit multi-pass decoder-side motion vector refinement
WO2023020444A1 (en) Candidate reordering for merge mode with motion vector difference