TW202007167A - 視訊編解碼中受約束的重疊塊運動補償的方法及裝置 - Google Patents

視訊編解碼中受約束的重疊塊運動補償的方法及裝置 Download PDF

Info

Publication number
TW202007167A
TW202007167A TW108124469A TW108124469A TW202007167A TW 202007167 A TW202007167 A TW 202007167A TW 108124469 A TW108124469 A TW 108124469A TW 108124469 A TW108124469 A TW 108124469A TW 202007167 A TW202007167 A TW 202007167A
Authority
TW
Taiwan
Prior art keywords
block
obmc
current block
current
predictor
Prior art date
Application number
TW108124469A
Other languages
English (en)
Other versions
TWI717779B (zh
Inventor
林芷儀
莊子德
陳慶曄
陳俊嘉
徐志瑋
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW202007167A publication Critical patent/TW202007167A/zh
Application granted granted Critical
Publication of TWI717779B publication Critical patent/TWI717779B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/583—Motion compensation with overlapping blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

公開了一種使用一幀間編解碼工具以及OBMC(重疊塊運動補償)的方法以及裝置。根據一個方法，當相鄰塊是雙向預測編碼時，藉由基於從自該相鄰塊推導的單向預測運動資訊推導一相關的OBMC預測子來將該相鄰塊視為一單向預測塊。根據另一個方法，當根據一或複數個約束應用OBMC時，在編碼器側有條件地發信一OBMC語法或者在解碼器側有條件地解析該OBMC語法，其中該OBMC語法指示該OBMC是否被應用於該當前塊。

Description

視訊編解碼中受約束的重疊塊運動補償的方法及裝置
本發明涉及用於一視訊編解碼系統的重疊塊運動補償。特別地，本發明涉及應用約束到重疊塊運動補償以減少頻寬(bandwidth)與/或複雜度。
高效視訊編解碼(HEVC)標準是在ITU-T視訊編解碼專家組(VCEG)以及ISO/IEC運動圖像專家組(MPEG)標準組織的聯合視訊專案下制定的，特別是與視訊編碼聯合協作小組(JCT-VC)的合作夥伴關係。在HEVC中，一個切片(slice)被分割成複數個編碼樹單元(coding tree unit，CTU)。在主要規格中，CTU的最小以及最大尺寸由序列參數集(sequence parameter set，SPS)中的語法元素來指定。所允許的CTU尺寸(size)可以是8x8、16x16、32x32或者64x64。對於每一切片，切片內的複數個CTU根據光柵掃描次序(raster scan order)來處理。
重疊塊運動補償(overlapped block motion compensation，OBMC)是減少偽影(artifact)的技術，偽影在塊邊界比較突出。OBMC是基於使用從複數個附近塊的複數個運動向量(MV)推導的運動補償信號來找到像素強度值(pixel intensity)的線性最小均方誤差(LMMSE)估計。從理論估計的角度，這些MV被視為其真正運動的不同似然假設。為了最大化編解碼效率，它們的權重被推導來最小化受單元增益約束的均方誤差。
當提出高效視訊編解碼(HEVC)時，一些OBMC相關技術已被提出作為編解碼工具來改善編解碼增益。它們中的一些被描述如下：
在JCTVC-C251(2010年8月7日-15日，在中國廣州舉行的ITU-T SG 16 WP 3以及ISO/IEC JTC 1/SC 29/WG 11的視訊編解碼聯合合作小組(JCT-VC)，第3次會議，P.Chen等人，Overlapped block motion compensation in TMuC，文獻：JCTVC-C251)中，OBMC被應用於幾何分割。在幾何分割中，轉換塊(transform block)很可能包含屬於不同分割的像素。在幾何分割中，因為兩個不同運動向量被用於運動補償，在分割邊界的複數個像素可能具有大的不連續性，其會引起在塊邊界突出的視覺偽影。這反過來降低轉換效率。將由幾何分割創造的兩個區域標記為區域1以及區域2。如果來自區域1(2)的像素的四個相連的相鄰像素(左、上、右以及下)中的任一個相鄰像素屬於區域2(1)，其該像素被定義為邊界像素。第1圖示出了灰色陰影像素屬於區域1(灰色區域)的邊界而白色陰影像素屬於區域2(白色區域)的邊界的示例。如果像素是邊界像素，使用來自兩個運動向量的運動預測的加權和執行運動補償。對於使用包含邊界像素的區域的運動向量的預測，權重是3/4以及對於使用另一個區域的運動向量的預測，權重是1/4。重疊邊界改善了重構視訊的視覺品質同時也提供了BD率增益。
在JCTVC-F299(在2011年7月14-22日，托裡諾(Torino)舉行的ITU-T SG 16 WP 3以及ISO/IEC JTC 1/SC 29/WG 11的視訊編解碼聯合合作小組(JCT-VC)，第6次會議，L. Guo等人，Overlapped Block Motion Compensation for 2NxN and Nx2N Motion Partitions，文獻：JCTVC-F299)中，OBMC被應用於對稱運動分割。如果編碼單元(CU)被分割成兩個2NxN或Nx2N預測單元(prediction unit，PU)，OBMC被應用於兩個2NxN預測塊的水平邊界，以及被應用於兩個Nx2N預測塊的垂直邊界。因為這些分割可能具有不同的運動向量，在分割邊界處的複數個像素可能具有大的不連續性，其會導致視覺偽影以及也減小轉換/編解碼效率。在JCT-VC-F299中，OBMC被引入來平滑運動分割的邊界。
第2A圖示出了2NxN分割的OBMC示例以及第2B圖示出了Nx2N分割的OBMC示例。點填充的像素表示像素屬於分割0以及空白像素表述像素屬於分割1。亮度分量中的重疊區域被分別定義為在水平或垂直邊界的每一側上的兩列(row)或兩行(column)像素。對於鄰近於分割邊界(210或220)的像素列或行(即，第2A圖以及第2B圖中被標記為A的像素)，OBMC權重因數是(3/4,1/4)。換言之，對於分割1的列212中的像素A，MC(運動補償)像素A1 基於分割1的MV1來生成以及MC像素A0 基於分割0的MV0來生成。OBMC處理過的像素A根據(3/4A1 +1/4A0 )來推導。類似的推導應用於行222中的OBMC像素。對於遠離分割邊界的兩列或行像素(即，第2A圖以及第2B圖中被標記為B的像素)，OBMC權重是(7/8,1/8)。對於色度分量，重疊區域被分別定義為在水平或垂直邊界的每一側上的一列或一行像素，以及權重因數是(3/4,1/4)。
如在視訊編解碼領域所公知的，BIO是在JCTVC-C204(2010年8月7日-15日在中國廣州舉行的ITU-T SG 16 WP 3以及ISO/IEC JTC 1/SC 29/WG 11的視訊編解碼聯合合作小組(JCT-VC)，第3次會議，E. Alshina等人，Bi-directional optical flow,文獻：JCTVC-C204)以及VCEG-AZ05(2015年6月19-26日，在波蘭華沙舉行的ITT-T SG 16問題6，視訊編解碼專家組(VCEG)第52次會議，E. Alshina等人，Known tools performance investigation for next generation video coding，文獻：VCEG-ZA05)中公開的運動估計/補償技術。BIO基於光流以及穩定運動的假設推導樣本級運動細化，其中B切片(雙向預測切片(bi-prediction slice))中的當前像素由參考圖像0中的一個像素以及參考圖像1中的一個像素來預測。
一般地，兩個CU或PU之間的重疊區域的MC結果是在當前CU或PU的正常MC進程之後，藉由另一個MC進程來生成。因此，BIO(Bi-directional Optical flow，雙向光流)在這兩個MC進程中被應用兩次來分別細化這兩個MC結果。當兩個相鄰MV是相同的時，上述處理次序可以幫助跳過冗餘OBMC以及BIO進程。然而，相比於整合的OBMC進程以及正常MC進程，重疊區域所需要的頻寬以及MC操作增加了。例如，當前PU尺寸是16x8，重疊區域尺寸是16x2，以及MC中插值濾波器是8抽頭。如果在正常MC後執行OBMC，用於當前PU以及相關OBMC的每一參考列表將需要(16+7)x(8+7)+(16+7)x(2+7)=552個參考像素。如果OBMC操作與正常MC整合到一起，用於當前PU以及相關OBMC的每一參考列表將僅需要(16+7)x(8+2+7)=391個參考像素。因此，當BIO以及OBMC同時啟用時，其需要減少BIO的計算複雜度或者記憶體頻寬。
在由ITU-T VCEG以及ISO/IEC MEPG的聯合視訊勘探小組制定的JEM(聯合勘探模型)中，OBMC也被應用。在JEM，不同於在H.263中，OBMC可以使用在CU級的語法來啟用以及關閉。當在JEM中使用OBMC時，除了CU的右邊以及底部邊界，OBMC被執行用於所有運動補償(MC)塊邊界。此外，其被應用於亮度以及色度分量兩者。在JEM中，MC塊對應於編碼塊。當CU用子CU模式(包括子CU合併、仿射以及FRUC模式)編解碼時，CU的每一子塊是MC塊。為了以統一方式處理CU邊界，OBMC在子塊級被執行用於所有MC塊邊界，其中子塊尺寸被設置為等於4x4，如第3A圖示出了OBMC用於在CU(編碼單元)或PU(預測單元)邊界的複數個子塊。用點(310)填充的複數個子塊對應於OBMC將應用於的複數個子塊。相鄰塊的運動向量以及當前子塊的運動向量被用於推導OBMC預測子(predictor)。對於子塊PN1(320)，上方子塊(322)的運動向量用於OBMC操作。對於子塊PN2(330)，左邊子塊(332)的運動向量被用於OBMC操作。對於子塊PN3(340)，上方子塊(342)以及左邊子塊(344)的運動向量用於OBMC操作。第3B圖示出了在ATMVP(Advanced Temporal Motion Vector Prediction，高級時間運動向量預測)模式中的子塊的OBMC。ATMVP模式也稱為子PU時間運動向量預測(Sub-PU TMVP)模式，其是改善編解碼效率的編解碼工具。子PU TMVP可以用作合併模式的合併候選。對於ATMVP模式，當當前OBMC被應用於當前子塊(350)時，除了當前運動向量，如果四個相連的相鄰子塊(352-358)的複數個運動向量可用而且不等於當前運動向量，也被用於推導當前子塊的預測塊。基於複數個運動向量的這複數個預測塊被組合來生成當前子塊的最終預測信號。
基於相鄰子塊的運動向量的預測塊被標記為PN，其中N指示相鄰上方、下方、左邊以及右邊子塊的索引以及基於當前子塊的運動向量的預測塊被標記為PC。當PN是基於相鄰子塊的運動資訊，相鄰子塊包含與當前子塊相同的運動資訊時，不對PN執行OBMC。否則，PN的每一樣本被添加到PC中的相同樣本，即，PN的四列/行被添加到PC。用於PN的權重因數是{1/4，1/8,1/16,1/32}以及用於PC的權重因數是{3/4,7/8,15/16,31/32}。例外是小MC子塊(即，當編碼塊的高度或寬度等於4或者CU用子CU模式編解碼時)，其中僅PN的兩列/行被添加到PC。在權重因數{1/4，1/8}用於PN以及權重因數{3/4,7/8}用於PC的情況下。對於基於垂直(水平)相鄰子塊的運動向量生成的PN，PN的相同列(行)中的複數個樣本被添加到具有相同權重因數的PC。
在JEM中，對於尺寸小於或等於256亮度樣本的CU，CU級旗標(flag)被發信來指示OBMC是否被應用於或不被應用於當前CU。對於尺寸大於256亮度樣本的或者不用ATMVP模式編解碼的CU，默認應用OBMC。在編碼器，當OBMC被應用於CU時，在運動估計階段考慮其影響。由OBMC形成的預測信號被用於補償當前CU的原始信號的上方以及左邊邊界，該OBMC使用上方相鄰塊以及左邊相鄰塊的運動資訊，以及然後正常的運動估計進程被應用。
在JEM中，OBMC被應用。例如，如第4圖所示，對於當前塊，如果上方塊以及左邊塊以幀間模式進行編解碼，其使用上方塊的MV來生成OBMC塊A以及使用左邊塊的MV來生成OBMC塊L。OBMC塊A以及OBMC塊L的預測子與當前預測子進行混合。為了減少OBMC的記憶體頻寬，上方4列MC以及左邊四行MC可以用相鄰塊完成。例如，當做上方塊MC時，4個額外列被提取來生成(上方塊+OBMC塊A)的塊。OBMC塊A的預測子被存儲於緩衝器中用於編解碼當前塊。當做左邊塊MC時，4個額外的行被提取來生成(左邊塊+OBMC塊L)的塊。OBMC塊L的預測子被存儲於緩衝器用於編解碼當前塊。因此，當做當前塊MC時，參考像素的四個額外的列以及四個額外的行被提取用於生成當前塊的預測子、OBMC塊B以及OBMC塊R。OBMC塊B以及OBMC塊R的位置被示出於第5A圖中。在一些實施例中，如第5B圖所示的，也生成OBMC塊BR。OBMC塊B以及OBMC塊R被存儲於緩衝器用於下方相鄰塊以及右邊相鄰塊的OBMC進程。
對於MxN塊，如果MV不是整數MCMV以及L抽頭插值濾波器被應用，尺寸為(M+7)x(N+7)的參考塊被用於運動補償。然而，如果BIO以及OBMC被應用，需要額外的參考像素，其增加最壞情況的記憶體頻寬。
根據目前雙向預測OBMC的實踐，運動補償(MC)進程被執行兩次(在原始MC進程以及OBMC階段期間)。進程不僅需要更多的計算，而且還需要對參考資料更多的記憶體存取。除了雙向預測，這有許多其它幀間預測相關的編解碼工具用於改善編解碼性能。通常，這些編解碼工具需要額外的資料存取，其導致更高的系統頻寬。此外，這些編解碼工具可能需要更多的操作以及增加系統複雜度。其需要開發用BIO或其他編解碼工具來減少OBMC所需要的計算或系統頻寬的技術。
公開了一種使用幀間編解碼工具以及OBMC(重疊塊運動補償)的方法以及裝置。根據本發明的一個方法，接收與一當前塊有關的輸入資料，其中該輸入資料對應於在一編碼器側將被編碼的像素資料或者在一解碼器側將被解碼的已編碼資料。然後該當前塊的以及一相鄰塊的預測方向被決定，其中該相鄰塊在該當前塊之前被編碼或解碼以及該預測方向包括單向預測以及雙向預測。當該當前塊、該相鄰塊或者兩者是雙向預測編碼時：用於一當前參考塊中一目標邊界區域的一第一預測子以及一第二預測子被決定。使用該第一預測子與該第二預測子的一加權和生成一組合預測子。包括該組合預測子的一重疊邊界預測子被用於編碼或解碼該當前塊。該第一預測子使用基於該當前塊的第一運動資訊的一單向預測模式來決定，其中該當前參考塊根據該當前塊的一第一位置以及該當前塊的該第一運動資訊來決定。該第二預測子使用基於該相鄰塊的第二運動資訊的該單向預測模式來決定，其中該目標邊界區域鄰近於在該當前參考塊與一相鄰參考塊之間的一塊邊界，以及該相鄰參考塊根據該相鄰塊的一第二位置以及該相鄰塊的該第二運動資訊來決定。
在一個實施例中，當該當前塊是單向預測編碼以及該相鄰塊是雙向預測編碼時，藉由在OBMC推導期間將該相鄰塊視為單向預測編碼來使用該單向預測模式推導用於該目標邊界區域的該第二預測子。例如，從該相鄰塊的該第二運動資訊推導與單向預測模式中該第二預測子有關的第三運動資訊。
在一個實施例中，當該相鄰塊是雙向預測編碼時，藉由從與該相鄰塊有關的兩個預測子選擇一目標預測子來將該相鄰塊視為單向預測編碼，其中該目標預測子從與包含該當前塊的一當前圖像具有較小POC(圖像次序計數)差異的一目標參考圖像來推導。在另一個實施例中，該目標預測子從包含該當前塊的一當前圖像具有較大POC(圖像次序計數)差異的一目標參考圖像來推導。在又一實施例中，該目標預測子被分配一較大權重用於具有不同權重的雙向預測。在又一實施例中，該目標預測子從具有一較小參考圖像索引的一目標參考圖像來推導。在又一實施例中，該目標預測子從具有較大參考圖像索引的一目標參考圖像來推導。在又一實施例中，該目標預測子使用一候選列表來推導，該候選列表包含與該當前塊的一當前運動向量更加類似的一目標運動向量。在又一實施例中，該目標預測子使用一候選列表來推導，該候選列表包含與該當前塊的一當前運動向量較少類似的一目標運動向量。
該當前塊對應於一編碼單元(CU)或一子CU。
根據本發明的另一方法，根據一或複數個約束將OBMC應用於該當前塊。一OBMC語法在編碼器側有條件地被發信或者該OBMC語法在解碼器側有條件地被解析用於該當前塊，其中該OBMC語法指示該OBMC是否被應用於該當前塊。
在一個實施例中，該等約束對應於當該目標塊是單向預測編碼時將該OBMC應用於該目標塊，以及如果該當前塊是雙向預測編碼，該OBMC語法不被發信用於該當前塊。在另一個實施例中，該等約束對應於當該目標塊是單向預測編碼時將該OBMC應用於該目標塊，以及如果該當前塊是雙向預測編碼，該OBMC語法不被發信用於該當前塊。
下文描述是實施本發明的最佳實施方式。所作之描述是為了說明本發明的基本原理以及不應對此做限制性理解。本發明的範圍藉由參考所附申請專利範圍最佳確定。
如上所提到的，OBMC可以改善編解碼效率。然而，因為額外的相鄰樣本需要被提取用於推導OBMC預測子，OBMC將增加系統頻寬。此外，由於與OBMC有關的額外的操作，OBMC也將增加系統複雜度。當OBMC與如BIO的其他編解碼工具一起使用時，系統頻寬以及複雜度問題變得更糟。本發明中公開了各種技術來減小系統頻寬和/或系統複雜度。
在一個實施例中，根據當前塊的資訊或者複數個相鄰塊的資訊決定OBMC是否被應用於當前塊。
在一個示例中，使用複數個相鄰塊的複數個MV從OBMC塊A以及OBMC塊L推導OBMC以及然後如第4圖所示，將當前塊的預測子與兩個已生成的OBMC塊混合。可以根據一或複數個相鄰塊的資訊決定是否應用OBMC。資訊可以是相鄰塊的任何特性，如尺寸、形狀、寬度、高度、寬度與高度兩者、幀間方向(即，單向預測或雙向預測)或者與當前塊的MV差異(即，相鄰MV與當前MV之間的差異)，或者上述特性的任何組合。在一個實施例中，如果參考塊的尺寸小於預定值(如64)，那麼OBMC將不會被應用於參考這一塊的區域(本發明中也稱為範圍(area))。在另一個實施例中，如果參考塊的寬度或高度小於預定值(如，8)，那麼OBMC將不會應用參考這一塊的區域或範圍。在另一個實施例中，如果參考塊的幀內方向是雙向預測，那麼OBMC將不會應用於使用這一塊的區域。在另一個實施例中，如果參考MV與當前MV之間的MV差異小於預定值，那麼OBMC將不會被應用於使用這一塊的複數個塊。在另一個實施例中，如果參考塊的尺寸小於預定值(如64)以及參考塊是雙向預測編解碼的，那麼OBMC將不會應用於參考這一塊的區域。
在另一個示例中，如第5圖所示，從使用MV當前塊從OBMC塊R以及OBMC塊B推導OBMC以及然後存儲將該結果當前塊的到線性緩衝器用於其他塊。是否應用OBMC可以根據當前塊的資訊來決定。資訊可以是當前塊的任何特性，例如尺寸、形狀、寬度、高度、寬度與高度兩者、幀間方向(即單向預測或雙向預測)，或者上述特性的任何組合。在一個實施例中，如果當前塊的尺寸小於預定值(如，64)，那麼OBMC將不被應用於這一塊。在另一實施例中，如果當前塊的寬度或高度小於預定值(如8)，那麼OBMC將不被應用於這一塊。在另一個實施例中，如果當前塊的預測方向是雙向預測，那麼OBMC將不被應用於這一塊。在另一個實施例中，如果當前塊的尺寸小於預定值(如，64)以及它是雙向預測，那麼OBMC將不被應用於這一塊。
從後續討論來看，限制OBMC於小塊的益處是明顯的。對於8x8塊，MC(運動補償)需要水平的8抽頭插值濾波用於(8+7)列，以及需要垂直的8插頭濾波用於8行。如果OBMC被應用以及OBMC寬度與OBMC高度等於4，MC將需要水平的8抽頭插值濾波用於(8+7+4)列，以及需要垂直的8抽頭濾波器用於(8+4)行。因此，相比於沒有OBMC的MC，OBMC將導致多34.8%數目的8插頭濾波。因為塊尺寸變得更大(如，16x16)，在應用OBMC後，相比於沒有OBMC的MC，將有多20.5%的8插頭插值濾波。當塊尺寸等於32x32時，相比於沒有OBMC的MC，額外數目的8抽頭插值濾波器變成11.2%。其很明顯，額外的插值濾波的數目隨著當前塊的尺寸增加而減少。因此，限制OBMC於具有小尺寸(如8x8)的塊可以有效地減小OBMC複雜度。
在本發明的另一方法中，OBMC根據當前塊的寬度、高度、尺寸、形狀或通道類型(即，亮度或色度)來約束。
在一個實施例中，OBMC對每一塊總是打開的。因此，這每一OBMC所需要的額外的語法。在另一個實施例中，如果當前塊的寬度小於預定閾值，OBMC是關閉的。例如，如果當前塊的寬度小於16，OBMC是關閉的。在另一個實施例中，如果當前塊的寬度大於預定閾值，OBMC是關閉的。例如，如果當前塊的寬度大於32，OBMC是關閉的。在另一個實施例中，如果當前塊的高度小於預定閾值，OBMC是關閉的。例如，如果當前塊的高度小於16，OBMC是關閉的。在另一個實施例中，如果當前塊的高度大於預定閾值，OBMC是關閉的。例如，如果當前塊的高度大於32，OBMC是關閉的。在另一個實施例中，如果當前塊的尺寸小於預定閾值，OBMC是關閉的。例如，如果當前塊的尺寸小於64，OBMC是關閉的。在另一個實施例中，如果當前塊的尺寸大於預定閾值，OBMC是關閉的。例如，如果當前塊的尺寸大於1024，OBMC是關閉的。在另一個實施例中，如果當前塊的尺寸小於預定閾值A或者大於預定閾值B，OBMC是關閉的。例如，如果當前塊的尺寸小於64或大於1024，OBMC是關閉的。
在另一個實施例中，如果當前塊是矩形的以及寬度大於M*高度，OBMC是關閉的，其中M是預定值。例如，如果當前塊是矩形以及寬度大於2*高度，其中M2是預定值，OBMC是關閉的。在另一個實施例中，如果當前塊是矩形依據高度大於M*寬度，OBMC是關閉的，其中M是預定值。例如，如果當前塊是矩形以及高度大於2*寬度，其中M2是預定值，OBMC是關閉的。
在另一個實施例中，OBMC對於每一塊中的色度分量是關閉的。在另一個實施例中，根據上述實施例的組合，OBMC是關閉的。例如，如果寬度小於16或者高度小於16，OBMC是關閉的。在另一個示例中，如果尺寸大於1024以及寬度大於2*高度 ，OBMC是關閉的。在另一個示例中，如果尺寸大於1024以及高度大於2*寬度，OBMC是關閉的。在另一個示例中，如果寬度大於32以及寬度大於2*高度，OBMC是關閉的。在另一個示例中，如果高度大於32以及高度大於2*寬度，OBMC是關閉的。在另一個示例中，如果尺寸小於32以及是色度類型，OBMC是關閉的。 具有高層級語法的OBMC
在本發明的一個方面，公開了與約束OBMC有關的高層級語法。其提出添加序列級(如，SPS(序列參數集)旗標)或圖像級(如，PPS(圖像參數集)旗標)用於OBMC。如果用於SPS/PPS的旗標為真，OBMC將在使用另一語法的CU級被決定或者如果該另一個語法在CU級未被發信，OBMC被啟用。如果用於OBMC的SPS/PPS旗標不為真，OBMC將被應用於由幀間預測模式預測的所有塊或者被禁用(對所有幀間塊是禁用的)。語法可以在切片級或者方塊(tile)級被添加。語法可以覆寫(overwrite)SPS/PPS中的旗標。 具有約束的OBMC
如之前所提到的，與OBMC有關的記憶體頻寬問題對於更小的塊變得更糟。對於雙向預測編解碼塊，這一問題變得更加嚴重。為了減少頻寬以及減少計算複雜度，一些方法被提出如下。
在一個實施例中，根據當前塊的尺寸、寬度、高度、一或複數個運動資訊，或者以上所述的任何組合，OBMC被應用具有不同數目的混合線。運動資訊包括MC、幀間方向(inter_dir)、參考圖像列表、參考圖像索引、參考圖像的圖像次序計數或者以上所述的任何組合。
在一個實施例中，如果當前塊的尺寸小於預定值，OBMC將不被應用。尺寸可以是16、32、64、128或256。在一個實施例中，如果當前塊的高度和/或寬度小於預定值，OBMC將不被應用。值可以是4、8、16、32、64或128。
在一個實施例中，如果當前塊的寬度與/或高度大於預定value_A，OBMC將被應用，以及如果當前塊的寬度和/或高度大於預定value_B，其將僅使用單向預測生成OBMC塊。否則，OBMC將不被應用。value_A以及value_B可以是2,4,6,8,16,32或61。value_A和value_B的組合(即，(value_A，value_B))可以是(64,32)、(64,16)、(64, 8)、(64, 4)、(64, 2)、(32, 16)、(32, 8)、(32, 4)、(32, 2)、(16, 8)、(16, 4)、(16, 2)、(8, 4)、(8, 2)以及(4, 2)。
在一個實施例中，如果當前塊的尺寸大於預定value_A，OBMC將被應用以及如果當前塊的尺寸大於預定value_B，其將僅使用單向預測生成OBMC塊。否則，OBMC將不被應用。value_A以及value_B可以是4、8、16、32、64、128、256、512、1024、2048、4096以及8192。value_A以及value_B的組合(即，(value_A,value_B))可以是(8192, 4096)、(8192, 2048)、(8192, 1024)、(8192, 512)、(8192, 256)、(8192, 128)、(8192, 64)、(8192, 32)、(8192, 16)、(8192, 8)、(8192, 4)、(4096, 2048)、(4096, 1024)、(4096, 512)、(4096, 256)、(4096, 128)、(4096, 64)、(4096, 32)、(4096, 16)、(4096, 8)、(4096, 4)、(2048, 1024)、(2048, 512)、(2048, 256)、(2048, 128)、(2048, 64)、(2048, 32)、(2048, 16)、(2048, 8)、(2048, 4)、(1024, 512)、(1024, 256)、(1024, 128)、(1024, 64)、(1024, 32)、(1024, 16)、(1024, 8)、(1024, 4)、(512, 256)、(512, 128)、(512, 64)、(512, 32)、(512, 16)、(512, 8)、(512, 4)、(256, 128)、(256, 64)、(256, 32)、(256, 16)、(256, 8)、(256, 4)、(128, 64)、(128, 32)、(128, 16)、(128, 8)、(128, 4)、(64, 32)、 (64, 16)、(64, 8)、(64, 4)、(32, 16)、(32, 8)、(32, 4)、(16, 8)、(16, 4)、以及(8, 4)。
在另一個實施例中，根據相鄰塊的尺寸、寬度、高度，相鄰塊的一或複數個運動資訊，或者以上所述的任何組合，用不同數目的混合線應用OBMC。運動資訊包括MV、幀間方向(inter_dir)、參考圖像列表、參考圖像索引、參考圖像的圖像次序計數或者以上所述的任何組合。
在一個實施例中，如果相鄰塊的尺寸小於預定值，OBMC將不被應用。該尺寸可以是16、32,、64、128或256。在另一個實施例中，如果相鄰塊的高度和/或寬度小於預定值，OBMC將不被應用。該值可以是4、8、16、32、64、或128。
在一個實施例中，如果相鄰塊的寬度和/或高度大於預定value_A，OBMC將被應用以及如果相鄰塊的寬度和/或高度大於預定value_B，其將僅使用單向預測生成OBMC塊。否則，OBMC將不被應用。value_A以及value_B可以是2、4、8、16、32或64。value_A以及value_B的組合(即，(value_A, value_B))可以是(64, 32)、(64, 16)、(64, 8)、(64, 4)、(64, 2)、(32, 16)、(32, 8)、(32, 4)、(32, 2)、(16, 8)、(16, 4)、(16, 2)、(8, 4)、(8, 2)以及(4, 2)。
在一個實施例中，如果相鄰塊的尺寸大於預定value_A，OBMC將被應用以及如果相鄰塊的尺寸大於預定value_B，其將使用單向預測生成OBMC塊。否則，OBMC將不被應用。value_A以及value_B可以是4、8、16、32、64、128、256、512、1024、2048、4096以及8192。value_A以及value_B的組合(即，(value_A, value_B))可以是(8192, 4096)、(8192, 2048)、(8192, 1024)、(8192, 512)、(8192, 256)、(8192, 128)、(8192, 64)、(8192, 32)、(8192, 16)、(8192, 8)、(8192, 4)、(4096, 2048)、(4096, 1024)、(4096, 512)、(4096, 256)、(4096, 128)、(4096, 64)、(4096, 32)、(4096, 16)、(4096, 8)、(4096, 4)、(2048, 1024)、(2048, 512)、(2048, 256)、(2048, 128)、(2048, 64)、(2048, 32)、(2048, 16)、(2048, 8)、(2048, 4)、(1024, 512)、(1024, 256)、(1024, 128)、(1024, 64)、(1024, 32)、(1024, 16)、(1024, 8)、(1024, 4)、(512, 256)、(512, 128)、(512, 64)、(512, 32)、(512, 16)、(512, 8)、(512, 4)、(256, 128)、(256, 64)、(256, 32)、(256, 16)、(256, 8)、(256, 4)、(128, 64)、(128, 32)、(128, 16)、(128, 8)、(128, 4)、(64, 32)、(64, 16)、(64, 8)、(64, 4)、(32, 16)、(32, 8)、(32, 4)、(16, 8)、(16, 4)、以及(8, 4)。
在上述約束中，當相鄰CU是在來自當前塊的不同區域中時，閾值或者條件可以是不同的。區域可以是CTU、CTU列、方塊、切片或者MxN塊(其中NxM可以是64x64或者等於最大TU尺寸)。
在一個實施例中，如果相鄰塊是雙向預測的以及被改變成單向預測用於當前塊的OBMC，相鄰塊樣本的權重可以乘以另一個預定的或者推導的權重。例如，權重可以是0.5或者相鄰的雙向預測權重和中使用的權重。
在一個實施例中，僅當相鄰塊以及當前塊的參考圖像相同時，OBMC被應用。 L型預測單元分割
根據這一方法，每一編碼單元(CU)使用如第6A圖至第6D圖中示出的L型圖樣被分割成兩個區域。在第6A圖中，區域1對應於在CU的右下角的矩形區域以及區域2對應於在CU的左上角的L型區域。在第6B圖中，區域1對應於在CU的左下角的矩形區域以及區域2對應於在CU的右上角的L型區域。在第6C圖中，區域1對應於在CU的左上角的矩形區域以及區域2對應於在CU的右下角的L型區域。在第6D圖中，區域1對應於在CU的右上角的矩形區域以及區域2對應於在CU的左下角的L型區域。
在一個實施例中，一個編碼單元被拆分成size_region1以及size_region2的兩個區域。兩個區域的預測子由不同的運動資訊生成，以及平滑濾波器將被應用於這兩個區域的邊界。
在另一個實施例中，尺寸等於當前編碼單元的兩個預測子由不同的運動資訊來生成。當前編碼單元的最終預測子根據這兩個預測子的加權和來生成。
預測子1的權重取決於複數個樣本到兩個區域的邊界的距離。具有較短距離的樣本被分配較小的權重。預測子2的權重取決於複數個樣本到兩個區域的邊界的距離。具有較短距離的樣本被分配較小的權重。例如，區域1中預測子的權重(w1)可以根據當前樣本與邊界之間的距離(d)來決定：
Figure 02_image001
w1=1，如果d>4; w1=0.75, 如果4≥d>2; w1=0.25，如果2≥d≥0.
在區域2，預測子1的權重(w2)可以根據當前樣本與邊界之間的距離(d)來決定：
Figure 02_image001
w2=0，如果d>4; w2=0.125, 如果4≥d>2; w2=0.25，如果2≥d≥0.
在一個實施例中，區域1的運動資訊從編碼器被發信，而區域2的運動資訊可以從複數個相鄰塊來推導。在另一個實施例中，區域1中的運動資訊是當前塊的複數個相鄰塊的平均運動。例如，運動向量是複數個相鄰塊的平均運動向量，以及參考圖像時複數個相鄰塊中使用最多的參考圖像。在另一個實施例中，區域2中的運動資訊在複數個子塊中可以是不同的。每一子塊的運動資訊等於塊上方或左邊的子塊。
在一個實施例中，區域1的運動資訊在編碼器側被發信，以及區域2的運動資訊在編碼器側也被發信，但是區域2的幀間模式被限制為合併模式。
L型預測單元分割可以根據尺寸、寬度和/或高度來約束。在一個實施例中，如果當前塊的尺寸小於預定閾值，則當前塊不能應用該模式，以及如果存在任何語法，語法不需要被發信。例如，如果當前塊的尺寸小於16，那麼當前塊將不應用複數個區域幀間預測。
在一個實施例中，這兩個區域的運動資訊被約束為僅是單向預測的。在另一個實施例中，僅這兩個區域中的一個被約束為單向預測。
當運動資訊被約束為單向預測以及運動資訊是從複數個相鄰CU來推導時，雙向預測的運動資訊將被轉換成僅單向預測。
L型預測單元分割可以在CU級中被切換。在一個實施例中，語法被用於指示當前塊是否被進一步拆分成兩個區域。在另一個實施例中，這一模式可以根據塊尺寸來推斷。如果塊尺寸大於預定閾值，那麼當前塊被推斷為被進一步拆分成兩個區域。
在另一個實施例中，僅當前塊以及相鄰塊都是單向預測時應用OBMC。在一個示例中，僅當前塊以及相鄰塊都是單向預測以及相鄰塊不在上方CTU列中時，應用OBMC。
在另一個實施例中，如果當前塊是單向預測以及相鄰塊是雙向預測，那麼OBMC塊將藉由使用基於相鄰塊的運動資訊之一的單向預測來生成。運動資訊可以取自列表(list)0、列表1的任一個、當廣義雙向預測被應用於相鄰塊時具有較大(或較小)權重的列表、具有較小refIdx的圖像、來自較近圖像(如，與當前圖像具有較小POC(圖像次序計數)差異的圖像)的預測子、如果當前塊是單向預測與當前塊的參考列表相同的列表、或者當前塊是單向預測時，當前塊的相反列表，其等於(1-currentList)在一個示例中，如果refIdx在兩個列表中是相同的或者兩個列表中的複數個圖像與當前圖像具有相同的距離，列表0(或列表1)被選擇。在另一個實施例中，運動資訊可以從具有與當前塊相似MV(或其他實施例中遙遠的MV)的列表(相鄰塊的)中取得。
在另一個實施例中，如果當前塊是雙向預測，僅當相鄰塊是單向預測時應用OBMC。
在另一個實施例中，如果當前塊是雙向預測，以及相鄰塊也是雙向預測，那麼OBMC塊將藉由使用基於相鄰塊的運動資訊之一的單向預測來生成。運動資訊可以取自列表0、列表1、當廣義雙向預測被應用於相鄰塊時具有較大(或較小)權重的列表、具有較小refIdx的圖像或者來自較近圖像(如，與當前圖像具有較小POC差異的圖像)的預測子、如果當前塊是單向預測與當前塊的參考列表相同的列表，或者如果當前塊是單向預測，當前塊的相反列表，其等於(1-currentList)，中的任一個。在一個示例中，如果refIdx在兩個列表相同或者兩個列表中的複數個圖像與當前圖像具有相同距離，列表0(或列表1)被選擇。在另一個實施例中，運動資訊可以從具有與當前塊相似MV(其他實施例中遙遠的MV)的列表(相鄰塊的)中取得。
在另一個實施例中，如果當前塊是雙向預測，來自當前塊的OBMC區域中的預測子從雙向預測被減少成單向預測。運動資訊可以取自列表0、列表，的任一個、當廣義雙向預測被應用於相鄰塊時具有較大(或較小)權重的列表、具有較小refIdx的圖像、或者來自較近圖像(如，具有與當前圖像較小POC差異的圖像)的預測子、如果當前塊是單向預測，與當前塊的參考列表相同的列表或者如果當前塊是單向預測，當前塊的相反列表，其等於(1-currentList)。在一個示例中，如果refIdx在兩個列表中是相同的或者兩個列表中的複數個圖像與當前圖像具有相同的距離，列表0(或者列表1)被選擇。在另一個實施例中，運動資訊可以從具有與當前塊相似MV(其他實施例中遙遠的MV)的列表(相鄰塊的)中取得。
在另一個實施例中，如果當前塊以及相鄰塊是雙向預測，OBMC區域中的最終預測子藉由來自當前塊的一個單向預測以及來自相鄰塊的一個單向預測來生成。運動資訊可以取自列表0、列表1的任一個、當廣義雙向預測被應用於相鄰塊時具有較大(或較小)權重的列表，具有較小refIdx的圖像，來自較近圖像(如，具有與當前圖像較小POC差異的圖像)的預測子，如果當前塊是單向預測，與當前塊的參考列表相同的列表，或者如果當前塊是單向預測，當前塊的相反列表，其等於(1-currentList)。在一個示例中，如果兩個列表中的refIdx是相同的或者兩個列表中的複數個圖像與當前圖像具有相同的距離，列表0(或者列表1)被選擇。在另一個實施例中，運動資訊可以取自具有與當前塊相似MV或者其他實施例中遙遠MV的列表(相鄰塊)。
在另一個實施例中，當相鄰塊是雙向預測時，如果OBMC塊被強制使用單向預測，運動資訊可以取自列表0、列表1的任一個、當廣義雙向預測被應用於相鄰塊時具有較大(或較小)權重的列表，具有較小refIdx的圖像，來自較近圖像(如，具有與當前圖像較小POC差異的圖像)的預測子、如果當前塊是單向預測，與當前塊的參考列表相同的列表，或者如果當前塊是單向預測，當前塊的相反列表，其等於(1-currentList)。在一個示例中，如果兩個列表中的refIdx是相同的或者兩個列表中的複數個圖像與當前圖像具有相同的距離，列表0(或者列表1)被選擇。在另一個實施例中，運動資訊可以取自具有與當前塊相似MV(或者其他實施例中遙遠MV)的列表(相鄰塊)。
在另一個實施例中，當相鄰塊是雙向預測時，如果OBMC塊被強制來使用單向預測，混合進程中OBMC塊的權重將被減少成比率*(原始權重)。比率可以是0.25,0.5以及0.75。
上述提到的約束可以與尺寸、面積、寬度或高度約束一起被應用於當前塊與/或相鄰塊來進一步約束或者進一步放鬆OBMC啟用條件。
在另一個實施例中，對於左上子塊的CU邊界OBMC，其將僅選擇左邊OBMC塊，或者其將僅選擇上方OBMC塊。
在另一個實施例中，對於左上子塊的CU邊界OBMC，其將不對原始預測子執行MC也不會將左邊OBMC塊以及上方OBMC塊組合成最終結果。
在另一個實施例中，對於左上子塊的CU邊界OBMC，其將僅選擇左邊OBMC塊，或者其將僅選擇上方OBMC塊。左邊以及上方的選擇可以取決於當前CU形狀，或者左邊/上方MV與當前子塊、具有較小refIdx的圖像或者來自較近圖像(如，具有與當前圖像較小POC(圖像次序計數)差異的圖像)的預測子的相似性。
在另一個實施例中，對於左上子塊的CU邊界OBMC其將從上方相鄰OBMC生成部分線(line)以及從左邊相鄰OBMC生成部分線來與原始預測子組合到一起。
對於子塊OBMC，原始子塊MC(如，ATMVP模式或仿射模式)的生成可以被擴展到具有原始MV的較大塊(如，相比於原始4x4的6x6或8x8)。當前CU中每一子塊的已擴展MC塊可以進一步與其他塊彼此混合來實現子塊OBMC。根據本發明不同的實施例，混合方向(如，上方、左邊、下方、右邊)的選擇可以變化。在一個實施例中，每一已擴展子塊將在4個方向(如，上方、左邊、下方、右邊)與其他子塊混合。在另一個實施例中，每一已擴展子塊將在8個方向(如，上方、左邊、下方、右邊以及4個角落)與其他子塊混合。在另一個實施例中，每一已擴展子塊將在2個方向(上方、左邊)與其他子塊混合。存在混合方向的其他實施例。
為了減小與子塊OBMC有關的頻寬，本發明的一個實施例在生成每一已擴展子塊之前，首先檢查來決定子塊是單向的或者雙向的，以及然後決定是否啟用或者禁用子塊的擴展區域。在一個實施例中，如果子塊是雙向的，擴展區域被禁用。在另一個實施例中，如果一個相鄰子塊是雙向的，用於與相鄰子塊重疊部分的擴展區域被禁用。在一個實施例中，如果當前子塊是雙向的以及相鄰子塊是單向編解碼的，當前子塊的L0或L1預測子被禁用。在另一個實施例中，其強制每一子塊對於原始MC是單向的。
在另一個實施例中，為了減少子塊OBMC的頻寬，本發明的一個實施例在生成每一已擴展子塊之前，首先檢查來決定子塊是單向的或雙向的以及相鄰子塊是單向的或雙向的，以及然後決定是否禁用部分或者整個擴展區域。
在另一個實施例中，當執行OBMC時對CU的一個約束對應於每一樣本將僅具有至多兩個運動補償樣本用於CU邊界或者子CU邊界OBMC的情況。為了滿足這一約束，使用複數個相鄰MV的一個僅推導一個運動補償樣本以及使用當前MV推導一個運動補償樣本。使用雙向預測為CU中的每一樣本生成最終預測。
在另一個實施例中，僅當當前塊是單向預測時應用OBMC。
在另一個實施例中，僅當當前塊是單向預測時應用OBMC。如果相鄰塊是雙向預測，OBMC變成單向預測。在另一個實施例中，僅當相鄰塊是單向預測時應用OBMC。
在另一個實施例中，OBMC被應用而不管當前塊的預測方向。然而，如果相鄰塊是雙向預測，單向預測被用於生成OBMC塊。
在一個實施例中，當將雙向預測減少成單向預測時，列表0總是被選擇。在另一個實施例中，參考列表1總是被選擇。在另一個實施例中，當當前塊是單向預測時，與當前塊相同的列表總是被選擇。在另一個實施例中，當當前塊是單向預測時，不同於當前塊的列表的參考列表至少被選擇。在另一個實施例中，當當前塊是單向預測時，相比於當前塊的參考列表，具有較大(或較小)參考圖像差異的列表被選擇。在另一個實施例中，當當前塊是單向預測以及兩個列表中的參考圖像距離是相同時，相比於當前塊的MV具有較大或較小運動向量差異的列表被選擇。
在一個實施例中，如果當當前塊是單向預測時應用OBMC，如果當前塊是雙向預測，OBMC旗標不需要被發信。在另一個實施例中，在幀間模式(AMVP模式)中，如果當當前塊是單向預測(雙向預測)時應用OBMC，如果當前塊是雙向預測，OBMC旗標不需要被發信。在另一個示例中，可以交換用於單向預測以及雙向預測的條件。例如，如果當當塊是雙向預測時應用OBMC，如果當前塊是單向預測時，OBMC旗標不需要被發信。
在另一個實施例中，來生成OBMC塊的MV可以被轉換成整數MV。對於亮度分量，亮度MV被轉換成整數MV，以及然後生成OBMC亮度塊。對於色度分量，如果色度MV不是整數MV，OBMC色度塊將不會被生成。
為確保頻寬以及需要插值濾波的樣本的數目不超過8x4雙向預測塊中最壞情況，根據本發明的一個實施例，僅當一些預定條件被滿足時應用OBMC。
在一些情況中，塊的高度被選擇為2的冪(如，4、8、16、32、64或128)。在一個實施例中，當當前塊是單向預測以及相鄰塊是單向預測時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度(即，當前塊的寬度)大於8是應用OBMC；以及如果當前塊的高度大於8，僅當寬度大於4時應用OBMC。此處固定值(即，4以及8)是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當當前塊是雙向預測以及相鄰塊是單向預測時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度大於32時應用OBMC；如果當前塊的高度等於16，僅當寬度大於8時應用OBMC；以及如果當前塊的高度大於16，僅當寬度大於4時應用OBMC。此處固定值(即，4、8、16以及32)是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當當前塊是單向預測以及相鄰塊是雙向預測時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度大於32時應用OBMC；如果當前塊的高度大於8以及小於64(即，高度等於16或32)，僅當寬度大於8時應用OBCM；以及如果當前塊的高度大於32(即，高度等於64或128)，僅當寬度大於4時應用OBMC。此處固定值(即，4、8、32以及64)是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當當前塊是單向預測以及相鄰塊是雙向預測時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度大於8時應用OBMC以及如果寬度等於16或32，OBMC塊將從雙向預測減少成單向預測；如果當前塊的高度大於8以及小於64(即，高度等於16或32)，僅當寬度大於4時應用OBMC；以及如果寬度等於8,，OBMC塊將從雙向預測減少成單向預測；以及如果當前塊的高度大於32(即，高度等於64或128)，僅當寬度大於4時應用OBMC。此處固定值(即，4、8、16、32以及64)是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當當前塊是雙向預測以及相鄰塊是雙向預測時，如果當前塊的高度小於16，OBMC被跳過；如果當前塊的高度等於16，僅當寬度大於16時應用OBMC，以及如果當前塊的高度大於16，僅當寬度大於8時應用OBMC。此處固定值(即，8以及16)是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，如果當前塊是雙向預測以及相鄰塊是雙向預測，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度等於64或128時應用OBMC，以及OBMC塊將從雙向預測減少成單向預測；如果當前塊的高度等於16，僅當寬度大於8時應用OBMC，以及如果寬度等於16，OBMC塊將從雙向預測減少成單向預測；以及如果當前塊的高度大於16，僅當寬度大於4時應用OBMC，以及如果寬度等於8，OBMC塊將從雙向預測減少成單向預測。此處固定值(即，4、8、16以及64)是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，不管當前塊以及相鄰塊的預測方向(即，單向或雙向預測)，如果當前塊的高度小於16，OBMC被跳過；如果當前塊的高度等於16，僅當寬度大於16時應用OBMC；以及如果當前塊的高度大於16，僅當寬度大於8時應用OBMC。此處固定值(即，8以及16)是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，不管當前塊以及相鄰塊的預測方向(單向或雙向預測)，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當當前塊的寬度等於64或128時應用OBMC，以及OBMC塊將從雙向預測減少成單向預測(如果當前塊是由雙向預測進行預測)；如果當前塊的高度等於16，僅當寬度大於8時應用OBMC，以及如果當前塊的寬度等於16，OBMC塊將從雙向預測減少到單向預測(如果當前塊是由雙向預測進行預測)；以及如果當前塊的高度大於16，僅當寬度大於4時應用OBMC，以及如果當前塊的寬度等於8，OBMC塊將從雙向預測減少到單向預測(如果當前塊是由雙向預測進行預測)。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當當前塊以單向預測進行編解碼時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度大於32時應用OBMC；如果當前塊的高度大於8以及小於64，僅當寬度大於8時應用OBMC；以及如果當前塊的高度大於32，僅當寬度大於4時應用OBMC。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當當前塊以單向預測進行編解碼時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度大於8時應用OBMC，以及如果寬度等於16或者32，OBMC塊將從雙向預測減少到單向預測(如果當前塊是由雙向預測進行預測)；如果當前塊的高度大於8以及小於64，僅當寬度大於4時應用OBMC，以及如果寬度等於8，OBMC塊將從雙向預測減少到單向預測(如果當前塊是由雙向預測進行預測的)；以及如果當前塊的高度大於32，僅當寬度大於4時應用OBMC。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當當前塊以雙向預測進行編解碼時，如果當前塊的高度小於16，OBMC被跳過；如果當前塊的高度等於16，僅當寬度大於16時應用OBMC；以及如果當前塊的高度大於16，僅當寬度大於8時應用OBMC。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當當前塊以雙向預測進行編解碼時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8時，僅當寬度等於64或128時應用OBMC，以及OBMC塊將從雙向預測減少到單向預測(如果當前塊是由雙向預測進行預測)；如果當前塊的高度等於16，僅當寬度大於8時應用OBMC,以及如果寬度等於16，OBMC塊將從雙向預測減少到單向預測(如果當前塊是由雙向預測進行預測)；以及如果當前塊的高度大於16，僅當寬度大於4時應用OBMC，以及如果寬度等於8，OBMC塊將從雙向預測減少到單向預測(如果當前塊是由雙向預測進行預測)。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當相鄰塊以單向預測進行編解碼時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度大於32時應用OBMC；如果當前塊的高度等於16，僅當寬度大於8時應用OBMC；以及如果當前塊的高度大於16，僅當寬度大於4時應用OBMC。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當相鄰塊是以雙向預測進行編解碼時，如果當前塊的高度小於16，OBMC被跳過；如果當前塊的高度等於16，僅當寬度大於16時應用OBMC；以及如果當前塊的高大於16，僅當寬度大於8時應用OBMC。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當相鄰塊以雙向預測進行編解碼時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度等於64或128時應用OBMC，以及OBMC塊將從雙向預測減少成單向預測；如果當前塊的高度等於16，僅當寬度大於8時應用OBMC，以及如果當前塊的高度等於16，OBMC塊將從雙向預測減少成單向預測；以及如果當前塊的高度大於16，僅當寬度大於4時應用OBMC，以及如果寬度等於8，OBMC將從雙向預測減少成單向預測。此處固定值是閾值設定的示例。值可以由其他整數替代。
在另一個實施例中，當相鄰塊以單向預測進行編解碼時，如果OBMC的MV來自寬度以及高度等於4的塊，OBMC被跳過。此處固定值是閾值設定的示例。值可以由其他整數替代。
在另一個實施例中，當相鄰塊以雙向預測進行編解碼時，如果當前塊的高度等於4，OBMC被跳過，如果當前塊的高度等於8，僅當寬度大於16時應用OBMC；如果當前塊的高度等於16，僅當寬度大於8時應用OBMC；以及如果當前塊的高度大於16，僅當寬度大於4時應用OBMC。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，當相鄰塊以雙向預測進行編解碼時，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度大於8時應用OBMC，以及如果寬度等於16，OBMC塊將從雙向預測減少成單向預測；如果當前塊的高度等於16，僅當寬度大於2時應用OBMC，以及如果寬度等於4或者8，OBMC將從雙向預測減少成單向預測；以及如果當前塊的高度大於16，僅當寬度大於2是應用OBMC，以及如果寬度等於4，OBMC塊將從雙向預測減少成單向預測。此處固定值是閾值設定的示例。值可以由其他整數替代。
在另一個實施例中，不管當前塊以及相鄰塊的預測方向(單向或雙向預測)，如果當前塊的高度等於4，OBMC被跳過，如果當前塊的高度等於8，僅當寬度大於16是應用OBMC；如果當前塊的高度等於16，僅當寬度大於8時應用OBMC；以及如果當前塊的高度大於16，僅當寬度大於4時應用OBMC。此處固定值是閾值設定的示例。值可以由其他整數替代。
在一個實施例中，不管當前塊以及相鄰塊的預測方向(單向或雙向預測)，如果當前塊的高度等於4，OBMC被跳過；如果當前塊的高度等於8，僅當寬度大於8時應用OBMC，以及如果寬度等於16，OBMC塊將從雙向預測減少成單向預測(如果當前塊由雙向預測進行預測)；如果當前塊的高度等於16，僅當寬度大於2時應用OBMC，以及如果寬度等於4或8，OBMC塊將從雙向預測減少成單向預測(如果當前塊由雙向預測進行預測)；以及如果當前塊的高度大於16，僅當寬度大於2時應用OBMC，以及如果當前塊的高度等於4，OBMC塊將從雙向預測減少成單向預測(如果當前塊由雙向預測進行預測)。此處固定值是閾值設定的示例。值可以由其他整數替代。
除了BIO以及ATMVP，這裡有許多近幾年已經開發的其他幀間編解碼工具來改善編解碼效率，例如DMVR(解碼器MV細化)，GBI(廣義雙向預測)，NPO(相鄰推導的預測偏移)，MMVD(具有MVD的合併)，LC(局部亮度補償)，AMVR(高級運動向量解析度)，統一的合併列表，STMVP(空間-時間運動向量預測)，三角形合併模式，以及多假設模式。通常，這些新的幀間編解碼工具導致額外的資料存取以及額外的計算。因此，這些幀間編解碼工具導致系統頻寬增加以及計算複雜度增加。
統一的合併列表(Unified Merge List). 在現代的轉碼器技術中，除了HEVC外，在合併/跳過模式中有許多候選。例如，在文獻JVET-J1008(2018年4月10-20日，在美國聖地牙哥舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第10次會議，“Description of SDR video coding technology proposal by MediaTek”)中，在合併列表中有許多類型的合併候選，例如仿射繼承的、仿射角落、空間、時間、中間的空間等等。
DMVR. 在一些文獻中雙邊模板MV細化(Bilateral Template MV Refinement，BTMVR)也稱為解碼器側MV細化(Decoder-side MV refinement，DMVR)。在JVET-D0029中(2016年10月15-21日，在中國成都舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第4次會議，Xu Chen等人“Decoder-Side Motion Vector Refinement Based on Bilateral Template Matching”，文獻:JVET-D0029)中，公開了基於雙邊模板匹配的解碼器側運動向量細化(DMVR)。對於BTMVR進程，用於當前塊的初始運動向量被決定。BTMVR進程被應用於雙向預測塊。樣本藉由使用分別來自由兩個初始運動向量指定的兩個參考塊的雙向預測來生成。在下一步中，其使用雙邊模板在L0參考圖像的L0參考塊周圍做整數ME(運動估計)以及分數ME，搜索範圍是P像素乘Q像素，以及尋找最小ME成本的位置。最小ME成本的最終位置被分配給L0的細化MV。類似的步驟被應用於定位L1的細化MV。例如，使用模板作為新的當前塊以及執行運動估計來在L0參考圖像以及L1參考圖像中分別尋找更好的匹配塊。已細化的MV用於生成當前塊的最終雙向預測塊。
GBI. 在JVET-C0047(2016年5月26日-6月1日，在瑞士加內瓦舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第3次會議，C Chen等人“Generalized bi-prediction for inter coding”，文獻：JVET-C0047)中提出了廣義的雙向預測。GBi的概念是允許分別使用不同的權重用於來自L0以及L1的預測子，而不是在傳統的雙向預測中使用相等的權重。此外，在JVET-D0120(2016年10月15-21日，在中國成都舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第4次會議，C Chen等人“EE3: Generalized bi-prediction”，文獻：JVET-D0102)中，公開了用於選擇特定權重對的權重表以及相關語法以及碼字。
STMVP. 在JEM-3.0中(2016年5月26日-6月1日，在瑞士加內瓦舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第3次會議，C Chen等人“Algorithm Description of Joint Exploration Test Model 3”)，文獻：JVET-C1001)，時間-空間運動向量預測子(Neighboring-derived Prediction Offset，STMVP)也被包括在合併模式編解碼中。在STMVP中，複數個子CU的複數個運動向量藉由使用時間運動向量預測子以及空間運動向量運動向量遵循光柵掃描次序遞迴地來推導。
NPO. 相鄰推導的預測偏移(Neighboring-derived Prediction Offset，NPO)是用於添加預測偏移來改善運動補償預測子的方法。用這個偏移，幀之間的不同照明條件可以被考慮。偏移使用相鄰重構像素(NRP)以及擴展的運動補償預測子(EMCP)來推導。
為NRP以及EMCP選擇的模板是當前PU左邊的N個像素以及上方的M個像素，其中N以及M是預定值。模板可以是任何尺寸以及形狀以及可以根據任何編解碼參數來決定，例如PU或CU尺寸，只要它們對於NRP以及EMCP兩者是相同的。然後偏移被計算為NRP的平均像素值減去EMCP的平均像素值。這一推導的偏移在PU上將是唯一的以及與運動補償預測子一起被應用於整個PU。
當所有單個偏移被計算以及被獲得時，用於當前PU中每一位置的所推導的偏移將是來自左邊以及上方位置的複數個偏移的平均值。因此對於這一示例中左上角落的第一位置，6的偏移將藉由對來自左邊以及上方偏移求平均來生成。對於下一個位置，偏移將等於(6+4)/2，即，5。用於每一位置的偏移可以以光柵掃描次序順序地處理以及生成。因為相鄰像素更高地與邊界像素相關聯，因此作為偏移。這一方法可以根據像素位置採用偏移。所推導的偏移將在PU上被應用，以及與運動補償預測子一起被應用於每個PU位置。
AMVR. 高級運動向量解析度(Advanced Motion Vector Resolution，AMVR)模式被用於視訊轉碼器中用於改善編解碼增益。AMVR可以適應切換運動向量差異(MVD)的解析度。運動向量差異(MVD)(最終MV與PU的MV預測子之間)可以用四分之一像素解析度或者整數像素解析度來編解碼。切換被控制在編碼單元(CU)級以及整數MVD解析度旗標被(條件地)發信。
MMVD. MMVD(具有MVD的合併，Merge with MVD)合併候選是在稱為VVC(versatile video coding，通用視訊編解碼)的合併視訊編解碼標準下開發的技術。MMVD合併候選也稱為UMVE(最終的運動向量運算式)合併候選。在JVET-K0115(2018年7月10-18日，在斯洛維尼亞的盧布亞納舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第11次會議，S Jeong等人“CE4 Ultimate motion vector expression in J0024 (Test 4.2.9)”，文獻：JVET-K0115)中，給出了JVET-J0024(最終的運動向量運算式)合併候選。在JVET-K0115(2018年4月10-20日，在美國聖地牙哥舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第10次會議，S Akula等人“Description of SDR, HDR and 360° video coding technology proposal considering mobile application scenario by Samsung, Huawei, GoPro, and HiSilicon”，文獻：JVET-J0024)中提出的最終的運動向量運算式(UMVE)中。參考列表L1中的參考幀以及參考列表L1中的參考幀對應於雙向預測的兩個參考幀。穿過當前塊的中心的線穿過兩個參考幀中的兩個對應的像素。搜索在與線有關的中心點周圍執行。為了簡化搜索進程，將僅在垂直以及水平方向上搜索中心點周圍的特定位置以尋找L0參考以及L1參考。UMVE用於具有提出的運動向量運算式方法的跳過或者合併模式兩者之一。UMVE重新使用與VVC相同的合併候選。在複數個合併候選中，候選可以被選擇，並可以進一步由提出的運動向量運算式方法展開。UMVE提供具有簡化的信令的新的運動向量運算式。該運算式方法包括預測方向資訊、起始點、運動梯度以及運動方向。
LIC(Local Illumination Compensation). 局部亮度補償(LIC)是使用當前塊以及參考塊的相鄰樣本執行幀間預測的方法。其基於使用縮放因數a以及偏移b的線性模型。該方法藉由參考當前塊以及相鄰塊的相鄰樣本推導縮放因數a以及偏移b。當前塊以及相鄰塊的相鄰樣本對應於包括當前塊以及參考塊上方的相鄰像素以及左邊的相鄰像素的L型。在縮放因數a以及偏移b被推導後，LIC處理的像素l(x,y)根據l(x,y)=a*r(x,y)+b來推導，其中r(x,y)對應於運動補償參考資料。此外，LIC處理可以針對每一CU被適應性地啟用或禁用。
關於LIC的更多細節可以在JVET-C1001(2016年5月26日-6月1日，在瑞士加內瓦舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第3次會議，Xu Chen等人“Algorithm Description of Joint Exploration Test Model 3”，文獻：JVET-C1001)中找到。
三角形合併模式([00130] Triangular Merge Mode). 在三角形預測單元模式中，CU在對角線或相反的對角線方向，可以使用兩個三角形預測單元來拆分。CU中的每一三角形預測單元具有其自身的單向預測運動向量以及參考幀索引，其從單向預測候選列表中推導。三角形分割僅被應用於運動補償預測，其意味著轉換以及量化進程被應用於由將兩個三角形組合到一起形成的整個CU。在該貢獻中，三角形預測單元模式僅被應用於塊尺寸大於或等於8x8的CU，以及其編解碼預測模式是跳過或合併模式。
多假設模式(Multi-hypothesis mode). 多假設模式是在JVET-L0100(2018年10月3-12日，在中國澳門舉行的ITU/T SG 16 WP3以及ISO/IEC JTC 1/SC 29 WG/11的聯合視訊專家小組(JVET)第12次會議，M.-S. Chiang等人“CE10.1.1: Multi-hypothesis prediction for improving AMVP mode, skip or merge mode, and intra mode”，文獻：JVET-L0100)中公開的新的幀間預測工具。多假設模式使用N個合併候選，N個AMVP候選或者“N個幀間候選+N個幀內候選”來求平均以及形成最終預測子。例如，多假設模式使用1個合併候選，1個AMVP候選或者“1個幀間候選+1個幀內候選”來求平均以及形成最終預測子。
在本發明的另一方面，一些幀間模式不包括OBMC。例如，如果當前幀間模式是BIO模式，那麼OBMC被隱含地關閉。例如，如果當前幀間模式是DMVR模式，那麼OBMC被隱含地關閉。例如，如果當前幀間模式是GBi模式，那麼OBMC被隱含地關閉。例如，如果當前幀間模式是多假設模式，那麼OBMC背隱含地關閉。例如，如果當前幀間模式是三角形合併模式，那麼OBMC背隱含地關閉。
在一個實施例中，OBMC的排除規則可以取決於當前幀間模式以及幀間模式的單向預測或雙向預測。
在一個實施例中，OBMC的排除規則可以取決於當前幀間模式以及當前CU尺寸。
在一個實施例中，OBMC的排除規則可以取決於當前幀間模式以及當前CU寬度或CU高度。
在一個實施例中，OBMC的排除規則可以取決於當前幀間模式以及當前幀間模式的MV多樣性。
在本發明的實施例中，當使用OBMC時，用於OBMC的擴展區域的所有其他幀間模式(如，BIO，GBI，DMVR，仿射模式等等)不被使用。OBMC的擴展區域對應於需要來自相鄰CU的MV的當前CU的區域。換言之，擴展區域對應於來自相鄰MV的擴展結果的區域。其被提出來排除(即，來禁用)所有其他幀間模式以及僅使用傳統MC濾波用於生成OBMC的擴展區域。
提出了一種語法設計的覆寫行為。OBMC的覆寫行為是在視訊分段(segment)的低層級添加一些覆寫語法，使得在視訊分段的低層級的語法值可以覆寫OBMC的高層級視訊設置值。例如，切片層級中的OBMC的“啟用”旗標可以被發信。切片層級OBMC啟用旗標可以覆寫高層級(如，OBMC“啟用”旗標的圖像層級設定)值。對於低層級語法或高層級語法，其可以具有用於啟用旗標值1。如果覆寫啟用旗標是1，那麼覆寫值可以在語法中被發送。如果覆寫啟用旗標是0，那麼OBMC設定來自較高層級設定。覆寫單元可以是圖像級、切片級、方塊級、圖塊組級、CU級或者PU級。
各種覆寫行為示例被示出如下。在示例1中，其具有對SPS(序列參數集)語法的總控制。換言之，指示OBMC啟用/關閉的一個旗標可以在SPS中。如果旗標是關閉，OBMC對序列中每一圖像將是關閉的。然而，如果旗標是啟用，每一圖像可以根據PPS中的旗標啟用OBMC，來指示OBMC啟用/關閉。換言之，PPS旗標可以覆寫SPS中的旗標。
在示例2中，其具有SPS語法中共用模式的總控制。然而，其可以具有PPS中的“覆寫啟用旗標”。如果它是1，每一切片可以具有一個“切片覆寫啟用旗標”。如果“切片覆寫啟用旗標”是1，每一切片可以具有語法來啟用切片的OBMC。如果覆寫沒有被啟用，那麼切片沒有語法來啟用切片的OBMC。這種情況下，切片使用來自SPS的值。
在一個實施例中，當GBI模式被啟用時，OBMC可以與GBI模式組合。在一個示例中，OBMC塊使用從相鄰參考塊繼承的GBi索引來生成。在另一個示例中，OBMC塊使用相等權重的雙向預測來生成。
在一個實施例中，當CPR模式被啟用時，OBMC可以與CPR模式組合。在一個示例中，如果CPR模式被應用於當前塊，OBMC被隱含地禁用。在另一個示例中，如果CPR模式被應用於當前塊中，旗標被用於指示OBMC是否被應用於當前塊。
在一個實施例中，當CPR模式被啟用時，OBMC可以與CPR模式組合。在一個示例中，如果CPR模式被應用於當前塊，OBMC被隱含地禁用。在另一個示例中，如果CPR模式被應用於當前塊，旗標被用於指示OBMC是否被應用於當前塊。
在一個實施例中，當三角形模式被應用時，OBMC可以與三角形模式組合。在另一個實施例中，如果三角形模式被應用於當前塊，OBMC被隱含地禁用。
為了減少額外的頻寬以及插值操作，其提出僅當當前塊以及相鄰塊都是單向預測時應用OBMC。在一個示例中，僅當當前塊以及相鄰塊都是單向預測，並且相鄰塊不在上方CTU列中時，應用OBMC。
在另一個實施例中，如果當前塊是單向預測以及相鄰塊是雙向預測，那麼OBMC塊將藉由使用相鄰塊運動資訊之一使用單向預測來生成。運動資訊可以取自列表0，列表1任一個，當廣義雙向預測被用於相鄰塊時具有較大(或較小)權重的列表，具有較小refIdx的圖像，或者來自較近圖像(如，具有與當前圖像較小POC差異的圖像)的預測子。在一個示例中，如果refIdx在兩個列表中是相同的或者兩個列表中的複數個圖像與當前圖像具有相同的距離，列表0(或列表1)被選擇。在另一個實施例中，運動資訊可以取自具有與當前塊類似MV(或者其他實施例中遙遠的MV)的相鄰塊的列表。在另一個實施例中，選擇具有到當前幀較大距離的參考圖像的列表。在另一個實施例中，具有到當前圖像較小距離的參考圖像的列表被取得。在一個實施例中，如果兩個列表中圖像距離是相同的，選擇列表0。在另一個實施例中，如果兩個列表中圖像距離是相同的，列表1被選擇。在另一個實施例中，當當前塊是單向預測時，具有與當前塊相同的參考圖像的列表被選擇。如果兩個列表中的參考圖像不與當前塊相同，默認的列表被選擇。默認的列表可以是列表0或者列表1。
在一個實施例中，如果僅當當前塊是單向預測時應用OBMC，以及以三角形模式對當前塊進行編解碼，那麼因為三角形模式的複雜度與雙向預測塊類似，OBMC被隱含地禁用。
任何前述提出的方法可以在編碼器和/或解碼器中實施。例如，任何提出的方法可以在編碼器的預測子推導模組，和/或解碼器的預測子推導模組中實施。或者，任何提出的方法可以被實施為耦合到編碼器的預測子推導模組和/或解碼器的預測子推導模組的電路，以致提供預測子推導模組所需要的電路。
第7圖示出了根據本發明實施例的使用OBMC(重疊塊運動補償)的視訊編解碼系統的示例性流程圖。流程圖以及本發明其他流程圖中示出的步驟可以被實施為在編碼器側和/或解碼器側的一或複數個處理器(如，一或複數個CPU)上可執行的程式碼。流程圖中示出的步驟還可以基於硬體來實施，如，用於執行流程圖中步驟的一或複數個電子裝置或處理器。根據這一方法，在步驟710，接收與一當前塊有關的輸入資料，其中該輸入資料在一編碼器側對應於將被編碼的像素資料或者在一解碼器側對應於將被解碼的已編碼資料。在步驟720，該當前塊以及一相鄰塊的預測方向被決定，其中該相鄰塊在該當前塊之前被編碼或解碼。在步驟730，該當前塊，該相鄰塊或者其兩者是否是雙向預測編碼被檢查。如果該當前塊、該相鄰塊或者其兩者是雙向預測編解碼(即，從步驟730的“是”路徑)，步驟740到770被執行。否則(從步驟730的“否”路徑)，步驟740到770被跳過。在步驟740中，用於一當前參考塊中一目標邊界區域的一第一預測子使用基於該當前塊的第一運動資訊的一單向預測模式來決定，其中該當前參考塊根據該當前塊的一第一位置以及該當前塊的該第一運動資訊來決定。在步驟750，用於該目標邊界區域的一第二預測子使用基於該相鄰塊的第二運動資訊的該單向預測模式來決定，其中該目標邊界區域鄰近於在該當前參考塊與一相鄰參考塊之間的一塊邊界，以及其中該相鄰參考塊根據該相鄰塊的一第二位置以及該相鄰塊的該第二運動資訊來決定。在步驟760，一組合預測子使用該第一預測子以及該第二預測子的一加權和來生成。在步驟770，該當前塊使用包括該組合預測子的一重疊邊界預測子來進行編碼或解碼。
第8圖示出了根據本發明實施例的使用OBMC(重疊塊運動補償)的視訊編解碼系統的一示例性流程圖。根據這一方法，在步驟810，接收與一當前塊有關的輸入資料，其中該輸入資料在一編碼器側對應於將被編碼的像素資料或者在一解碼器側對應於將被解碼的已編碼資料。在步驟820，根據一或複數個約束將該OBMC應用於該當前塊。在步驟830，一OBMC語法在該編碼器側被有條件地發信或者在該解碼器側被有條件地解析用於該當前塊，其中該OBMC語法指示該OBMC是否被應用於該當前塊。
上文示出的流程圖旨在示出根據本發明的視訊編解碼的示例。本領域技術人員可以在不背離本發明精神的情況下，修正每一步驟，重新排列步驟，拆分步驟或者組合複數個步驟來實施本發明。在本發明中，特定的語法以及語義已經被用於說明示例來實施本發明的實施例。在不背離本發明精神的情況下，本領域技術人員可以藉由用相等的語法以及語義來替換該語法以及語義來實施本發明。
還公開了存儲程式指令的非暫態電腦可讀媒介，該電腦指令使得裝置的處理電路執行上述的視訊編解碼方法。
呈現上文的描述是為了使本領域技術人員能夠以特定應用的上下文及其需求所提供的來實施本發明。對所描述實施例的各種修正對本領域技術人員將是顯而易見的，以及本文定義的基本原理可以被應用於其他實施例。因此，本發明不旨在限制於所示出以及所描述的特定實施例，而是符合與本文所公開的原理以及新穎特徵一致的最寬範圍。在上文細節描述中，各種的具體細節被示出以提供本發明的透徹理解。然而，本領域技術人員將能理解，可以實施本發明。
如上所描述的本發明的實施例可以以各種硬體、軟體代碼或兩者的組合來實施。例如，本發明的實施例可以是整合到視訊壓縮晶片的一或複數個電子電路或者是整合到視訊壓縮軟體的程式碼來實施本文所描述的處理。本發明的實施例還可以是將在數位訊號處理器(DSP)上執行的程式碼來執行本文所描述的處理。本發明可能還涉及由電腦處理器、數位訊號處理器、微處理器或者現場可程式設計閘陣列(FPGA)執行的許多功能。這些處理器可以用於執行根據本發明的特定任務，藉由執行定義由本發明實施的特定方法的軟體代碼或固件代碼。軟體代碼或固件代碼可以以不同的程式語言以及不同的格式或風格來開發。軟體代碼還可以被編譯用於不同的目標平臺。然而，軟體代碼的不同的代碼格式、風格以及語言以及配置代碼執行根據本發明任務的其他方法將不背離本發明的精神以及範圍。
本發明可以以其他特定的形式實施而不背離其精神以及基本特徵。所描述的示例在所有方面僅被認為是說明性的而非限制性的。因此，本發明的範圍由所附申請專利範圍而非前述的描述來指示。在申請專利範圍的等同含義以及範圍內容的所有變化都在其範圍內。
210、220‧‧‧分割邊界 212‧‧‧列 222‧‧‧行 310‧‧‧點 320~358‧‧‧子塊 710~740、810~830‧‧‧步驟
第1圖示出了雙向光流(BIO)來推導偏移運動向量用於運動細化的示例。 第2A圖示出了2NxN分割的OBMC的示例。 第2B圖示出了Nx2N分割的OBMC的示例。 第3A圖示出了在CU(編碼單元)或PU(預測單元)邊界的子塊的OBMC，其中用點填充的子塊對應於將應用OBMC的子塊。 第3B圖示出了以ATMVP(高級時間運動向量預測)模式的子PU的OBMC，其中子PU TMVP可以用作合併模式的合併候選。 第4圖示出了OBMC的示例，其中如果上方塊以及左邊塊以幀間模式進行編解碼，OBMC使用上方塊的MV來生成OBMC塊A以及使用左邊塊的MV來生成OBMC塊L。 第5A圖示出了在底部(B)的OBMC塊以及在右邊(R)的OBMC塊的示例。 第5B圖示出了在右下(BR)的額外的OBMC塊的示例。 第6A圖示出了L型預測單元分割的示例，其中區域1對應於在CU的右下角的矩形區域以及區域2對應於在CU的左上角的L型區域。 第6B圖示出了L型預測單元分割的示例，其中區域1對應於在CU的左下角的矩形區域以及區域2對應於在CU的右上角的L型區域。 第6C圖示出了L型預測單元分割的示例，其中區域1對應於在CU的左上角的矩形區域以及區域2對應於在CU的右下角的L型區域。 第6D圖示出了L型預測單元分割的示例，其中區域1對應於在CU的右上角的矩形區域以及區域2對應於在CU的左下角的L型區域。 第7圖示出了根據本發明實施例的使用OBMC(重疊塊運動補償)的視訊編解碼系統的示例性流程圖。 第8圖示出了根據本發明實施例的使用OBMC(重疊塊運動補償)的視訊編解碼系統的另一個示例性流程圖。
710~770‧‧‧步驟

Claims (17)

  1. 一種使用OBMC(重疊塊運動補償)的視訊編解碼的方法，該方法包括： 接收與一當前塊有關的輸入資料，其中該輸入資料在一編碼器側對應於將被編碼的像素資料或者在一解碼器側對應於將被解碼的已編碼資料； 決定該當前塊以及一相鄰塊的預測方向，其中該相鄰塊在該當前塊之前被編碼或解碼； 當該當前塊，該相鄰塊或者兩者是雙向預測編解碼時： 使用基於該當前塊的一第一運動資訊的一單向預測模式決定一當前參考塊中一目標邊界區域的一第一預測子，其中該當前參考塊根據該當前塊的一第一位置以及該當前塊的該第一運動資訊來決定； 使用基於該相鄰塊的一第二運動資訊的該單向預測模式決定該目標邊界區域的一第二預測子，其中該目標邊界區域鄰近於在該當前參考塊與一相鄰參考塊之間的一塊邊界，以及其中該相鄰參考塊根據該相鄰塊的一第二位置以及該相鄰塊的該第二運動資訊來決定； 使用該第一預測子以及該第二預測子的一加權和生成一組合預測子；以及 使用包括該組合預測子的一重疊邊界預測子編碼或解碼該當前塊。
  2. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中當該當前塊是單向預測編碼以及該相鄰塊是雙向預測編碼時，藉由在OBMC推導期間將該相鄰塊視為單向預測編碼來使用該單向預測模式來推導該目標邊界區域的該第二預測子。
  3. 如申請專利範圍第2項所述之使用OBMC的視訊編解碼的方法，其中與該單向預測模式中該第二預測子有關的一第三運動資訊從該相鄰塊的該第二運動資訊來推導。
  4. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中當該相鄰塊是雙向預測編碼時，藉由從與該相鄰塊有關的兩個預測子選擇一目標預測子將該相鄰塊被視為單向預測編碼，以及其中該目標預測子從與包含該當前塊的一當前圖像具有一較小POC(圖像次序計數)差異的一目標參考圖像來推導。
  5. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中當該相鄰塊是雙向預測編碼時，藉由從與該相鄰塊有關的兩個預測子選擇一目標預測子將該相鄰塊被視為單向預測編碼，以及其中該目標預測子從與包含該當前塊的一當前圖像具有一較大POC(圖像次序計數)差異的一目標參考圖像來推導。
  6. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中當該相鄰塊是雙向預測編碼時，藉由從與該相鄰塊有關的兩個預測子選擇一目標預測子將該相鄰塊被視為單向預測編碼，以及其中該目標預測子被分配一較大的權重用於具有不同權重的雙向預測。
  7. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中當該相鄰塊是雙向預測編碼時，藉由從與該相鄰塊有關的兩個預測子選擇一目標預測子將該相鄰塊被視為單向預測編碼，以及其中該目標預測子從具有一較小參考圖像索引的一目標參考圖像來推導。
  8. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中當該相鄰塊是雙向預測編碼時，藉由從與該相鄰塊有關的兩個預測子選擇一目標預測子將該相鄰塊被視為單向預測編碼，以及其中該目標預測子從具有一較大參考圖像索引的一目標參考圖像來推導。
  9. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中當該相鄰塊是雙向預測編碼時，藉由從與該相鄰塊有關的兩個預測子選擇一目標預測子將該相鄰塊被視為單向預測編碼，以及其中該目標預測子使用一候選列表來推導，該候選列表包含與該當前塊的一當前運動向量更加類似的一目標運動向量。
  10. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中當該相鄰塊是雙向預測編碼時，藉由從與該相鄰塊有關的兩個預測子選擇一目標預測子將該相鄰塊被視為單向預測編碼，以及其中該目標預測子使用一候選列表來推導，該候選列表包含與該當前塊的一當前運動向量較少類似的一目標運動向量。
  11. 如申請專利範圍第1項所述之使用OBMC的視訊編解碼的方法，其中該當前塊對應於一編碼單元(CU)或一子編碼單元。
  12. 一種使用OBMC(重疊塊運動補償)的視訊編解碼裝置，該視訊編解碼裝置包括一或複數個電子電路或處理器，用於： 接收與一當前塊有關的輸入資料，其中該輸入資料在一編碼器側對應於將被編碼的像素資料或者在一解碼器側對應於將被解碼的已編碼資料； 決定該當前塊以及一相鄰塊的預測方向，其中該相鄰塊在該當前塊之前被編碼或解碼； 當該當前塊，該相鄰塊或者兩者是雙向預測編解碼時： 使用基於該當前塊的一第一運動資訊的一單向預測模式決定一當前參考塊中一目標邊界區域的一第一預測子，其中該當前參考塊根據該當前塊的一第一位置以及該當前塊的該第一運動資訊來決定； 使用基於該相鄰塊的一第二運動資訊的該單向預測模式決定該目標邊界區域的一第二預測子，其中該目標邊界區域鄰近於在該當前參考塊與一相鄰參考塊之間的一塊邊界，以及其中該相鄰參考塊根據該相鄰塊的一第二位置以及該相鄰塊的該第二運動資訊來決定； 使用該第一預測子以及該第二預測子的一加權和生成一組合預測子；以及 使用包括該組合預測子的一重疊邊界預測子編碼或解碼該當前塊。
  13. 一種使用OBMC(重疊塊運動補償)的視訊編解碼方法，該方法包括： 接收與一當前塊有關的輸入資料，其中該輸入資料在一編碼器側對應於將被編碼的像素資料或者在一解碼器側對應於將被解碼的已編碼資料； 根據一或複數個約束將該OBMC應用於該當前塊；以及 在該編碼器側有條件地發信一OBMC語法或者在該解碼器側有條件地解析該OBMC語法用於該當前塊，其中該OBMC語法指示是否該OBMC是否被應用於該當前塊。
  14. 如申請專利範圍第13項所述之使用OBMC的視訊編解碼方法，其中該當前塊對應於一編碼單元(CU)以及該OBMC語法是一編碼單元級語法。
  15. 如申請專利範圍第13項所述之使用OBMC的視訊編解碼方法，其中當該目標塊是單向預測編碼時，該一或複數個約束對應於該OBMC被應用於該目標塊，以及如果該當前塊是雙向預測編碼，該OBMC語法不被發信用於該當前塊。
  16. 如申請專利範圍第13項所述之使用OBMC的視訊編解碼方法，其中當該目標塊是單向預測編碼時，該一或複數個約束對應於該OBMC被應用於幀間模式的該目標塊，以及如果當前塊是雙向預測編碼，該OBMC語法不被發信用於該當前塊。
  17. 一種使用OBMC(重疊塊運動補償)的視訊編解碼裝置，該視訊編解碼裝置包括一或複數個電子電路或處理器用於： 接收與一當前塊有關的輸入資料，其中該輸入資料在一編碼器側對應於將被編碼的像素資料或者在一解碼器側對應於將被解碼的已編碼資料； 根據一或複數個約束將該OBMC應用於該當前塊如果該；以及 在該編碼器側有條件地發信一OBMC語法或者在該解碼器側有條件地解析該OBMC語法用於該當前塊，其中該OBMC語法指示是否該OBMC是否被應用於該當前塊。
TW108124469A 2018-07-14 2019-07-11 視訊編解碼中受約束的重疊塊運動補償的方法及裝置 TWI717779B (zh)

Applications Claiming Priority (16)

Application Number Priority Date Filing Date Title
US201862698116P 2018-07-14 2018-07-14
US62/698,116 2018-07-14
US201862732021P 2018-09-17 2018-09-17
US62/732,021 2018-09-17
US201862744120P 2018-10-10 2018-10-10
US62/744,120 2018-10-10
US201862744687P 2018-10-12 2018-10-12
US62/744,687 2018-10-12
US201862757246P 2018-11-08 2018-11-08
US62/757,246 2018-11-08
US201862770228P 2018-11-21 2018-11-21
US62/770,228 2018-11-21
US201862779559P 2018-12-14 2018-12-14
US62/779,559 2018-12-14
US16/507,403 US11051036B2 (en) 2018-07-14 2019-07-10 Method and apparatus of constrained overlapped block motion compensation in video coding
US16/507,403 2019-07-10

Publications (2)

Publication Number Publication Date
TW202007167A true TW202007167A (zh) 2020-02-01
TWI717779B TWI717779B (zh) 2021-02-01

Family

ID=69138591

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108124469A TWI717779B (zh) 2018-07-14 2019-07-11 視訊編解碼中受約束的重疊塊運動補償的方法及裝置

Country Status (2)

Country Link
US (2) US11051036B2 (zh)
TW (1) TWI717779B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021233449A1 (en) * 2020-05-22 2021-11-25 Beijing Bytedance Network Technology Co., Ltd. Reserved bits in general constraint information of a video
US11838554B2 (en) 2020-02-29 2023-12-05 Beijing Bytedance Network Technology Co., Ltd. Constrains for diferent coding tools

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210025537A (ko) 2018-06-29 2021-03-09 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 하나 또는 다수의 룩업 테이블들을 사용하여 이전에 코딩된 모션 정보를 순서대로 저장하고 이를 사용하여 후속 블록들을 코딩하는 개념
CN110662053B (zh) 2018-06-29 2022-03-25 北京字节跳动网络技术有限公司 使用查找表的视频处理方法、装置和存储介质
TWI719523B (zh) 2018-06-29 2021-02-21 大陸商北京字節跳動網絡技術有限公司 哪個查找表需要更新或不更新
SG11202012293RA (en) 2018-06-29 2021-01-28 Beijing Bytedance Network Technology Co Ltd Update of look up table: fifo, constrained fifo
JP7460617B2 (ja) 2018-06-29 2024-04-02 北京字節跳動網絡技術有限公司 Ｌｕｔ更新条件
US11051025B2 (en) * 2018-07-13 2021-06-29 Tencent America LLC Method and apparatus for video coding
WO2020053800A1 (en) 2018-09-12 2020-03-19 Beijing Bytedance Network Technology Co., Ltd. How many hmvp candidates to be checked
JP7328328B2 (ja) * 2018-10-08 2023-08-16 ホアウェイ・テクノロジーズ・カンパニー・リミテッド コーディングブロックの三角形パーティションのインター予測のための装置および方法
WO2020084506A1 (en) * 2018-10-23 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Harmonized local illumination compensation and intra block copy coding
CN116939198A (zh) 2018-10-23 2023-10-24 北京字节跳动网络技术有限公司 并置的局部照明补偿和修改的帧间预测编解码
EP3847814A4 (en) 2018-11-06 2021-07-14 Beijing Bytedance Network Technology Co. Ltd. POSITION DEPENDENT STORAGE, MOVEMENT INFORMATION
US10778977B2 (en) * 2018-12-05 2020-09-15 Qualcomm Incorporated Triangle motion information for video coding
JP2021510943A (ja) * 2018-12-17 2021-04-30 エルジー エレクトロニクス インコーポレイティド 高周波ゼロイングに基づいて変換係数スキャン順序を決定する方法及び装置
WO2020130600A1 (ko) * 2018-12-17 2020-06-25 주식회사 윌러스표준기술연구소 예측 모드를 시그널링하는 비디오 신호 처리 방법 및 장치
WO2020139059A1 (ko) * 2018-12-28 2020-07-02 삼성전자 주식회사 움직임 벡터 차분의 부호화 방법 및 부호화 장치, 및 움직임 벡터 차분의 복호화 방법 및 복호화 장치
US11032574B2 (en) * 2018-12-31 2021-06-08 Tencent America LLC Method and apparatus for video coding
WO2020141932A1 (ko) * 2019-01-04 2020-07-09 엘지전자 주식회사 Cpr 기반 mmvd를 이용하는 인터 예측 방법 및 장치
KR102648159B1 (ko) * 2019-01-10 2024-03-18 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Lut 업데이트의 호출
CN113383554B (zh) 2019-01-13 2022-12-16 北京字节跳动网络技术有限公司 LUT和共享Merge列表之间的交互
CN113302918A (zh) 2019-01-15 2021-08-24 北京字节跳动网络技术有限公司 视频编解码中的加权预测
WO2020147773A1 (en) 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Inserting order of motion candidates in lut
CN113302919A (zh) 2019-01-17 2021-08-24 北京字节跳动网络技术有限公司 在视频处理中使用虚拟候选预测和加权预测
KR20210127709A (ko) * 2019-03-07 2021-10-22 디지털인사이트 주식회사 영상 부호화/복호화 방법 및 장치
CN113615193A (zh) 2019-03-22 2021-11-05 北京字节跳动网络技术有限公司 Merge列表构建和其他工具之间的交互
CN114175654A (zh) * 2019-08-08 2022-03-11 鸿颖创新有限公司 用于对视频数据编码的设备和方法
US11736720B2 (en) * 2019-09-03 2023-08-22 Tencent America LLC Motion vector refinement methods for video encoding
KR20220058889A (ko) * 2019-09-14 2022-05-10 바이트댄스 아이엔씨 비디오 코딩의 크로마 양자화 파라미터
US11375222B2 (en) * 2019-09-22 2022-06-28 Tencent America LLC Method and device for video encoding and decoding with interpolation filter flag being consistent with MMVD distances
US11259055B2 (en) * 2020-07-10 2022-02-22 Tencent America LLC Extended maximum coding unit size
CN115361550A (zh) * 2021-02-22 2022-11-18 北京达佳互联信息技术有限公司 用于帧间预测的改进重叠块运动补偿
US20240031600A1 (en) * 2022-07-19 2024-01-25 Tencent America LLC Inter prediction direction and bcw index coding in merge mode

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9883203B2 (en) 2011-11-18 2018-01-30 Qualcomm Incorporated Adaptive overlapped block motion compensation
US10230980B2 (en) * 2015-01-26 2019-03-12 Qualcomm Incorporated Overlapped motion compensation for video coding
US10250904B2 (en) 2015-05-05 2019-04-02 Avago Technologies International Sales Pte. Limited Apparatus and method for overlapped motion compensation for video coding
CN109792535B (zh) * 2016-05-13 2023-03-28 夏普株式会社 预测图像生成装置、运动图像解码装置以及运动图像编码装置
US10951912B2 (en) * 2016-10-05 2021-03-16 Qualcomm Incorporated Systems and methods for adaptive selection of weights for video coding
CN116320497A (zh) * 2016-11-28 2023-06-23 韩国电子通信研究院 用于滤波的方法和装置
CN111345041B (zh) * 2017-09-28 2024-01-26 Vid拓展公司 解码、编码视频数据的方法和设备
US11297348B2 (en) * 2018-04-13 2022-04-05 Mediatek Inc. Implicit transform settings for coding a block of pixels

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11838554B2 (en) 2020-02-29 2023-12-05 Beijing Bytedance Network Technology Co., Ltd. Constrains for diferent coding tools
US11889119B2 (en) 2020-02-29 2024-01-30 Beijing Bytedance Network Technology Co., Ltd. Constrains for syntax elements of adaptation parameter set
US11968402B2 (en) 2020-02-29 2024-04-23 Beijing Bytedance Network Technology Co., Ltd. Constrains for high level syntax elements
WO2021233449A1 (en) * 2020-05-22 2021-11-25 Beijing Bytedance Network Technology Co., Ltd. Reserved bits in general constraint information of a video
US11956474B2 (en) 2020-05-22 2024-04-09 Beijing Bytedance Network Technology Co., Ltd. Signalling of general constrains flag

Also Published As

Publication number Publication date
US11051036B2 (en) 2021-06-29
TWI717779B (zh) 2021-02-01
US20210274218A1 (en) 2021-09-02
US20200021845A1 (en) 2020-01-16
US11695953B2 (en) 2023-07-04

Similar Documents

Publication Publication Date Title
TWI717779B (zh) 視訊編解碼中受約束的重疊塊運動補償的方法及裝置
CN113170181B (zh) 块内拷贝模式中的仿射继承方法
TWI737184B (zh) 幀内塊複製模式的合併列表生成的方法和裝置
JP7359878B2 (ja) 変換スキップモードにおける量子化パタメータの修正技術
TWI792152B (zh) 視訊編解碼系統中的視訊處理方法和裝置
US20180077417A1 (en) Method and Apparatus of Encoding Decision for Encoder Block Partition
US11956421B2 (en) Method and apparatus of luma most probable mode list derivation for video coding
CN113170191B (zh) 视频编解码的预测方法以及预测装置
TWI737119B (zh) 視訊編碼的子區塊解塊方法和裝置
CN113228638B (zh) 在区块分割中条件式编码或解码视频区块的方法和装置
CN114175636A (zh) 自适应参数集中的自适应环路滤波的指示
CN114009033A (zh) 用于用信号通知对称运动矢量差模式的方法和装置
US11785242B2 (en) Video processing methods and apparatuses of determining motion vectors for storage in video coding systems
TWI830334B (zh) 視頻編解碼系統中低延遲模板匹配的方法和裝置
TWI752488B (zh) 視訊編解碼之方法和裝置
WO2021056219A1 (zh) 视频编解码的方法和装置
TW202341741A (zh) 視訊編解碼方法及相關裝置
TW202349959A (zh) 使用ｍｖｄ合併模式來降低視頻編解碼複雜度的方法和裝置
CN116456110A (zh) 视频编解码方法及装置