TW201804796A - 視訊編碼方法及裝置 - Google Patents

視訊編碼方法及裝置 Download PDF

Info

Publication number
TW201804796A
TW201804796A TW106117843A TW106117843A TW201804796A TW 201804796 A TW201804796 A TW 201804796A TW 106117843 A TW106117843 A TW 106117843A TW 106117843 A TW106117843 A TW 106117843A TW 201804796 A TW201804796 A TW 201804796A
Authority
TW
Taiwan
Prior art keywords
block
current image
blocks
luma
motion vector
Prior art date
Application number
TW106117843A
Other languages
English (en)
Other versions
TWI702830B (zh
Inventor
莊子德
陳慶曄
孫域晨
黃毓文
杉 劉
許曉中
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW201804796A publication Critical patent/TW201804796A/zh
Application granted granted Critical
Publication of TWI702830B publication Critical patent/TWI702830B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明公開了一種具有當前圖像參考模式使能的視訊編碼系統的方法和裝置。依據一種方法,如果當前圖像參考模式被選擇以用於亮度和色度塊,則使用相同的編碼單元結構來共同編解碼當前圖像的亮度和色度塊。或者,如果使用單獨的編碼單元結構將亮度分量和色度分量分割成亮度塊和色度塊,則使用從除當前圖像參考模式之外的編碼模式組中選擇的編碼模式對亮度塊和色度塊進行編碼或解碼。依據另一種方法,如果當前圖像參考模式被選擇以用於亮度塊和色度塊,則使用不同的編碼單元結構分別對當前圖像的亮度塊和色度塊進行編碼。在另一種方法中,揭示了編碼單元等於預測單元的情況下,重建參考數據用於當前圖像參考模式。

Description

視訊編解碼的當前圖像參考的方法和裝置 【相關申請的交叉引用】
本申請的申請專利範圍依35 U.S.C.§119要求如下申請的優先權:2016年5月28日遞交的申請號為62/342,883的美國臨時案。在此合併參考該申請案的申請標的。
本發明係相關於用於視訊編解碼中的編解碼和/或預測處理的塊分割,尤指用於當前圖像參考(current picture referencing,CPR)的編解碼系統的各種編解碼方案。
高效率視訊編碼(High Efficiency Video Coding,HEVC)標準是在ITU-T視訊編碼專家組(Video Coding Experts Group,VCEG)和ISO/IEC運動圖像專家組(Moving Picture Experts Group,MPEG)標準化組織的聯合視訊項目下開發的,尤其是與稱為視訊編碼聯合協作小組(Joint Collaborative Team on Video Coding,JCT-VC)的合作而開發。在HEVC中,將一個片段(slice)分割為複數個編碼樹單元(coding tree units,以下簡稱為CTU)。在主配置文件(profile)中,CTU的最小尺寸和最大尺寸由序列參數集(sequence parameter set,SPS)中的語法元素指定。允許的CTU大小可以是8x8,16x16,32x32或 64x64。對於每個片段,依據循序掃描(raster scan)順序處理片段內的CTU。
CTU還被分割成複數個編碼單元(multiple coding units,CU)以適應各種局部特性。被稱為編碼樹(coding tree)的四分樹被用於將CTU分割成複數個CU。使CTU大小為MxM,其中M是64,32或16中的一個。CTU可以是單個CU(即,不分割)或可以分成四個相同大小的較小單元(即每個尺寸為M/2xM/2),其對應於編碼樹的節點。如果單元是編碼樹的葉節點,則單元變為CU。否則,可以迭代四分樹分割過程,直到節點的大小達到序列參數集(Sequence Parameter Set,SPS)中規定的最小允許CU大小。該表示方式形成由第1圖中的編碼樹(也稱為分割樹結構)120指定的遞迴結構。第1圖中示出了CTU分割110,其中實線表示CU邊界。使用畫面間(時間)或畫面內(空間)預測編碼圖像區域的決定在CU層做出。由於最小CU尺寸可以為8x8,所以在不同的基本預測類型之間切換的最小粒度(granularity)是8×8。
此外,依據HEVC,每個CU可以被分割成一個或複數個預測單元(prediction units,PU)。與CU一起,PU作為共享預測信息的基本代表塊。在每個PU內部,應用相同的預測處理,並且以PU為基礎將相關信息發送到解碼器。依據PU分割類型,CU可以分為一個,兩個或四個PU。如第2圖所示,HEVC定義了將CU分解為PU的八種形狀,包括分割類型2Nx2N,2NxN,Nx2N,NxN,2NxnU,2NxnD,nLx2N和nRx2N。與CU不同,PU只能依據HEVC分割一次。第二行中顯示的分割對應 於非對稱分割,其中兩個分割部分具有不同的大小。
在透過基於PU分割類型的預測處理獲得殘差塊之後,可以依據如第1圖所示的CU的編碼樹類似的另一四分樹結構,將CU的預測殘差分割成變換單元(TU)。實線表示CU邊界,虛線表示TU邊界。TU是具有殘差或變換係數的基本代表塊以用於應用整數變換(integer transform)和量化。對於每個TU,對TU應用具有相同大小的一個整數變換以獲得殘差係數。這些係數在基於TU的量化之後被傳送到解碼器。
定義術語編碼樹塊(coding tree block,CTB),編碼塊(coding block,CB),預測塊(prediction block,PB)和變換塊(transform block,TB),以指定分別與CTU,CU,PU和TU分別相關聯的一個顏色成分的2-D樣本陣列。因此,CTU由一個亮度CTB,兩個色度CTB和相關聯的語法元素組成。類似的關係對於CU,PU和TU是有效的。樹分割通常同時應用於亮度和色度兩者,儘管當達到用於色度的某些最小尺寸時有異常情況。
或者,在JCTVC-P1005中(D.F.Flynn等人,“HEVC Range Extensions Draft 6”,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,16th Meeting:San Jose,US,9-17 January 2014,Document:JCTVC-P1005),二元樹分割結構被提出。如第3圖所示,在提出的二元樹分割結構中,塊可以使用各種二進位分割類型遞迴地分割成兩個較小的塊。最有效和最簡單的是第3圖的前兩個分割類型中所示的對稱水平分割和對稱垂直分 割。對於給定的大小為MxN的塊,發送一個標誌以指示給定的塊是否被分成兩個較小的塊。如果是,則發出另一個語法元素以指示使用哪種分割類型。如果使用水平分割,給定的塊被分成兩個大小為Mx(N/2)的塊。如果使用垂直分割,給定的塊被分成兩個大小為(M/2)xN的塊。可以重複二元樹分割過程,直到分割塊的大小(寬度或高度)達到允許的最小塊大小(寬度或高度)為止。允許的最小塊大小可以在諸如SPS的進階語法中定義。由於二元樹具有兩種分割類型(即水平和垂直),所以應該指出最小允許的塊寬度和塊高度。當分割會導致塊高度小於指定的最小值時,非水平分割是隱含的。當分割會導致塊寬度小於指定的最小值時,非垂直分割是隱含的。第4圖示出了塊分割410及其對應的二元樹420的示例。在二元樹的每個分割節點(即,非葉節點)中,使用一個標誌來指示使用哪種分割類型(水平或垂直),其中0可以指示水平分割,1可以指示垂直分割。
二元樹結構可以用於將圖像區域分割成複數個較小的塊,例如將片段分割成CTU,將CTU分割成CU,將CU分割成PU,或將CU分成TU等等。二元樹可以用於將CTU分割成CU,其中二元樹的根節點是CTU,二元樹的葉節點是CU。葉節點可以透過預測和變換編碼進一步處理。為簡化起見,沒有從CU到PU或從CU到TU的進一步分割,這意味著CU等於PU以及PU等於TU。因此,換句話說,二元樹的葉節點是用於預測和變換編碼的基本單元。
因為可以支持更多的分割形狀,二元樹結構比四 分樹結構更靈活,這也是編碼效率改進的來源。然而,為了選擇最佳分割形狀,編碼複雜度也將增加。為了平衡複雜度和編碼效率,已經公開了一種組合四分樹和二元樹結構的方法,也稱為四分樹加二元樹(quadtree plus binary tree,QTBT)結構。依據QTBT結構,塊首先被四分樹結構分割,並且四分樹分割可以迭代,直到分割塊的大小達到最小允許的四分樹葉節點大小。如果葉四分樹塊不大於最大允許二元樹根節點大小,則可以透過二元樹結構進一步分割,並且二元樹分割可以迭代,直到分割塊的大小(寬度或高度)達到最小允許二元樹葉節點大小(寬度或高度)或二元樹深度達到允許的最大二元樹深度。在QTBT結構中,最小允許的四分樹葉節點大小,最大允許的二元樹根節點大小,最小允許二元樹葉節點寬度和高度以及最大允許二元樹深度可以在進階語法中指示,例如在SPS中。第5圖示出了塊510的分割及其對應的QTBT 520的實例。實線表示四分樹分割,虛線表示二元樹分割。在二元樹的每個分割節點(即,非葉節點)中,一個標誌指示使用哪種分割類型(水平或垂直),0可以指示水平分割,以及1可以指示垂直分割。
上述QTBT結構可以用於將圖像區域(例如,片段,CTU或CU)分割成複數個更小的塊,例如將片段分割成CTU,將CTU分割成CU,將CU分成PU,將CU分成TU等。例如,QTBT可以用於將CTU分割成CU,其中QTBT的根節點是CTU,該CTU透過QTBT結構被分割為複數個CU,並且透過預測和變換編碼進一步處理這些CU。為簡化起見,沒有從CU到PU或從CU到TU的進一步分割。這意味著CU等於PU和PU等於TU。因 此,換句話說,QTBT結構的葉節點是預測和變換的基本單位。
QTBT結構的示例如下所示。對於大小為128x128的CTU,最小允許的四分樹葉節點大小設置為16x16,最大允許的二元樹根節點大小設置為64x64,最小允許的二元樹葉節點寬度和高度都設置為4,而最大允許二元樹深度設置為4。首先,CTU由四分樹結構分割,並且葉四分樹單元可以具有從16×16(即,最小允許四分樹葉節點大小)到128×128的大小(等於CTU的大小,不分割)。如果葉四分樹單元是128x128,它不能被二元樹進一步分割,因為大小超過最大允許的二元樹根節點大小64x64。否則,可以透過二元樹進一步分割葉四分樹單元。葉四分樹單元也是根二元樹單元,其二元樹深度為0。當二元樹深度達到4(即,如所指示的最大允許二元樹)時,隱含不分割。當對應的二元樹節點的塊的寬度等於4時,隱含非水平分割。當對應的二元樹節點的塊的高度等於4時,隱含非垂直分割。QTBT的葉節點透過預測(畫面內圖像或畫面間圖像)和變換編碼進一步處理。
對於I片段,QTBT樹結構通常應用亮度/色度分離編碼。例如,QTBT樹結構分別應用於I片段的亮度分量和色度分量,並且同時應用於P-片段和B片段的亮度分量和色度分量(除了達到色度的某些最小尺寸之外)。換句話說,在I片段中,亮度CTB具有QTBT結構的塊分割,並且兩個色度CTB具有另一個QTBT結構的塊分割。在另一示例中,兩個色度CTB也可以具有它們自己的QTBT結構的塊分割。
對於基於塊的編碼,總是需要將圖像分割成塊(例 如,CU,PU和TU)以用於編碼目的。如本領域已知的,在應用塊分割之前,圖像可以被分割成更小的圖像區域,例如片段,方格(tiles),CTU行或CTU。用於編碼目的將圖像分割為塊的處理被稱為使用編碼單元結構對圖像進行分割。HEVC採用的特殊分割而生成CU,PU和TU的方法,是編碼單元(CU)結構的一個例子。QTBT樹結構是編碼單元(CU)結構的另一示例。
當前圖像參考
運動估計/補償是混合視訊編碼中的眾所周知的關鍵技術,其探索相鄰圖像之間的像素相關性。在視訊序列中,相鄰訊框之間對象的移動很小,並且對象的移動可以透過二維平移運動進行建模。因此,對應於訊框中的對像或背景的圖案(patterns)被移動位置以在後續訊框中形成對應對像,或對應於訊框中的對像或背景的圖案與當前訊框內的其他模式相關聯。利用移動位置的估計(例如使用塊匹配技術),大部分圖案可以再現,而不需要重新編碼圖案。類似地,還嘗試塊匹配和復制以允許從同一畫面內選擇參考塊。當將這個概念應用於由相機捕獲的視訊時,觀察到效率不高。部分原因是空間相鄰區域中的文本圖案(textual pattern)可能類似於當前的編碼塊,但通常在空間上有一些逐漸的變化。因此,塊難以在由相機拍攝的視訊的相同圖像內找到精確匹配。因此,編碼性能的提高是有限的。
然而,同一畫面內的像素之間的空間相關性對於屏幕內容是不同的。對於具有文本和圖形的典型視訊,通常在 同一圖片中會有重複的圖案。因此,已經觀察到畫面內(圖像)塊補償是非常有效的。已經引入了新的預測模式,即畫面內塊復制(Intra block copy,IBC)模式或被稱為當前圖像參考(current picture referencing,CPR),以用於屏幕內容編碼而利用該特徵。在CPR模式中,從同一畫面內的先前重建的塊預測預測單元(PU)。此外,使用位移矢量(稱為塊矢量或BV)來發送從當前塊的位置到參考塊的位置的相對位移。然後使用變換,量化和熵編碼對預測誤差進行編碼。第6圖中示出了CPR補償的示例,其中區域610對應於要編碼的圖片,片段或圖片區域。塊620和630對應於要編碼的兩個塊。在該示例中,每個塊可以在當前圖像中的先前編碼區域中找到相應的塊(即分別為622和632)。依據該技術,參考樣本對應於包括在HEVC中的環路濾波操作(in-loop filter operations)之前的當前解碼圖像的重建樣本,環路濾波操作包括去塊濾波器和样本自適應偏移(SAO)濾波器。
在JCTVC-M0350(Madhukar Budagavi等人,“AHG8:Video coding using Intra motion compensation”,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,13th Meeting:Incheon,KR,18-26 Apr.2013,Document:JCTVC-M0350)中,CPR的早期版本被揭示,其作為HEVC範圍擴展(RExt)開發的候選技術而被提交。在JCTVC-M0350中,CPR補償被限制在一個小的局部區域內,搜索限於1-D塊矢量以僅用於2Nx2N的塊大小。隨後,在HEVC屏幕內容編碼(screen content coding,SCC) 標準化過程中,開發了一種更先進的CPR方法。
為了有效地發送塊矢量(block vector,BV),以與MV編碼類似的方式,使用BV預測子(BV predictor,BVP)預測地發送BV。因此,如第7圖所示,發送BV差值(BV difference,BVD)並依據BV=BVP+BVD重建BV,其中參考塊720被選擇依照畫面內塊複製(IntraBC)預測以用於當前塊710(即,CU)的。確定用於當前CU的一個BVP。導出運動矢量預測子(motion vector predictor,MVP)的方法在本領域是已知的。類似的推導可以應用於BVP推導。
當使用CPR時,只有當前圖像的一部分可以用作參考圖像。施加一些位元流一致性約束以調節參考當前圖像的有效MV值。
首先,以下兩個方程之一必須為真:BV_x+offsetX+nPbSw+xPbs-xCbs<=0,以及 (1)
BV_y+offsetY+nPbSh+yPbs-yCbs<=0。 (2)
第二,以下波前平行處理(Wavefront Parallel Processing,WPP)條件必須為真:(xPbs+BV_x+offsetX+nPbSw-1)/CtbSizeY-xCbs/CtbSizeY<=yCbs/CtbSizeY-(yPbs+BV_y+offsetY+nPbSh-1)/CtbSizeY (3)
在等式(1)至等式(3)中,(BV_x,BV_y)是當前PU的亮度塊矢量(即CPR的運動矢量);nPbSw和nPbSh是當前PU的寬度和高度;(xPbS,yPbs)是相對於當前圖像的當前PU的左上像素的位置;(xCbs,yCbs)是相對於當前圖像的當前CU的左上角像素的位置;CtbSizeY是CTU的大小。考 慮到CPR模式的色度採樣插值,OffsetX和offsetY是二維空間中的兩個調節的偏移量:offsetX=BVC_x & 0x7?2:0, (4)
offsetY=BVC_y & 0x7?2:0。 (5)
(BVC_x,BVC_y)是HEVC中1/8像素解析度的色度塊矢量。
第三,用於CPR的參考塊必須在相同的方格/片段邊界內。
仿射運動補償
仿射模型可以用於描述2D塊旋轉,以及將方塊(矩形)的2D變形成平行四邊形。該模型可以描述如下:x’=a0+a1*x+a2*y,y’=b0+b1*x+b2*y。 (6)
在該模型中,需要確定6個參數。對於感興趣區域中的每個像素(x,y),運動矢量被確定為給定像素(A)的位置與參考塊(A')中其對應像素的位置之間的差異,即MV=A'-A=(a0+(a1-1)*x+a2*y,b0+b1*x+(b2-1)*y)。因此,每個像素的運動矢量是位置相關的。
依據該模型,如果三個不同位置的運動矢量是已知的,則可以解決上述參數。此條件相當於6個參數已知。具有已知運動矢量的每個位置被稱為控制點。6參數仿射模型對應於3控制點模型。
在Li等人的技術文獻中(“An affine motion compensation framework for high efficiency video coding”,in 2015 IEEE International Symposium on Circuits and Systems(ISCAS),24-27 May 2015,Pages:525-528)以及Huang等人(“Control-Point Representation and Differential Coding Affine-Motion Compensation”,IEEE Transactions on Circuits,System and Video Technology(CSVT),Vol.23,No.10,pages 1651-1660,Oct.2013),呈現了仿射運動補償的一些示例性實施例。在Li等人的技術文獻中,當當前塊以合併模式或AMVP模式編碼時,發送仿射標誌以用於2Nx2N塊分割。如果該標誌為真,則當前塊的運動矢量的推導遵循仿射模型。如果這個標誌是假,則當前塊的運動矢量的推導遵循傳統的平移模型。當使用仿射AMVP模式時,發送三個控制點(3個運動矢量)。在每個控制點位置,MV被預測地編碼。之後,對這些控制點的MVD進行編碼和傳輸。在Huang等人的技術文獻中,研究了不同的控制點位置和控制點中的MV的預測編碼。
表1中示出了仿射運動補償實現的語法表。如表1所示,如合併模式的註釋(1-1)至註釋(1-3)所示,如果至少一個合併候選是仿射編碼並且分割模式是2Nx2N(即,PartMode==PART_2Nx2N),語法元素use_affine_flag被發送。如用於B片段的註釋(1-4)至註釋(1-6)所示),如果當前塊大小大於8x8(即,(log2CbSize>3)以及分割模式是2Nx2N(即PartMode==PART_2Nx2N)),則會發出語法元素use_affine_flag。如註釋(1-7)至註釋(1-9),如果use_affine_flag表示正在使用仿射模型(即,使用值為1的use_affine_flag),則將其他兩個控制點的信息發送給參考列 表L0,以及如註釋(1-10)至註釋(1-12),其他兩個控制點的信息被發送以用於參考列表L1。
Figure TW201804796AD00001
Figure TW201804796AD00002
在本發明中,處理了具有QTBT結構或亮度/色度分離編碼的CPR編碼的各個方面的問題。
本發明提出了一種使用四分樹二元樹結構或亮度/色度分離編碼的視訊編碼的方法和裝置。依據本發明的提出實施例,當使能當前圖像參考(current picture referencing,CPR)模式時,使用相同的編碼單元(CU)結構將當前圖像的亮度分量和一個或複數個色度分量共同地分割為複數個亮度塊和複數個色塊,以及若當前圖像參考模式被選擇以用於複數個亮度塊和複數個色度塊,則對複數個亮度塊和複數個色度塊共同地應用當前圖像參考編碼,或者當當前圖像的亮度分量和一個或複數個色度分量分別使用單獨的編碼單元結構而被分割成複數個亮度塊和複數個色度塊時,利用自當前圖像參考模式之外的一編碼模式組中選擇一編碼模式而編碼或解碼複數個亮度塊和複數個色度塊。
依據本發明的提出另一實施例,分別使用單獨的編碼單元結構將當前圖像的亮度分量和色度分量分割成複數個亮度塊和複數個色度塊。如果當前圖像參考模式分別被選擇以用於複數個亮度塊或複數個色度塊,則將當前圖像參考編碼分別應用於複數個亮度塊或複數個色度塊。對於複數個亮度塊,當前圖像參考是指當前圖像的已重建亮度圖像中的亮度參考數據使用複數個第一運動矢量(first motion vectors,MVs)。 對於複數個色度塊,當前圖像參考是指當前圖像的已重建色度圖像中的色度參考數據使用複數個第二運動矢量。在一個實施例中,複數個第一運動矢量和複數個第二運動矢量不同。在另一實施例中,並置亮度塊的第一運動矢量用於導出相應色度塊的第二運動矢量,並且其中如果亮度分量和一個或多個色度分量有不同的解析度,則第一運動矢量對應於並置亮度塊的縮放運動矢量。如果將當前圖像參考模式應用於對應色度塊並且並置亮度塊以當前圖像參考模式而被編碼,則對於並置亮度塊的第一運動矢量或第一運動矢量的縮放運動矢量直接用作相應色度塊的第二運動矢量。在此情況下,一標誌用於指示並置亮度塊的第一運動矢量或第一運動矢量的縮放運動矢量是否直接用作相應色度塊的第二運動矢量。當以合併模式對相應色度塊進行編碼時或者當並置亮度塊以當前圖像參考模式而被編碼時,標誌被發送或被解析。如果當前圖像參考模式被應用於對應色度塊以及並置亮度塊不被編碼於當前圖像參考模式時,則默認運動矢量被用作該對應色度塊的第二運動矢量。在另一實施例中,若如果將當前圖像參考模式應用於對應色度塊以及並置亮度塊被編碼於當前圖像參考模式時,則並置亮度塊的第一運動矢量或第一運動矢量的縮放運動矢量被用作運動矢量預測子,該運動矢量預測子被添加至合併候選列表或進階運動矢量預測候選列表以用於對應色度塊。並置亮度塊的第一運動矢量或第一運動矢量的縮放運動矢量被添加至合併候選列表或進階運動矢量預測候選列表中的前導候選位置,以用於對應色度塊。如果當前圖像參考模式被應用於對應色度塊以及 並置亮度塊不編碼於當前圖像參考模式,則默認運動矢量被用作運動矢量預測子,該運動矢量預測子被添加至合併候選列表或進階運動矢量預測候選列表以用於對應色度塊。例如,默認運動矢量選自包括(-w,0),(0,-h),(-w,-h),(-2w,0)和(0,-2h)的運動矢量組,其中w是塊寬度,h是塊高度。在又一實施例中,第一運動矢量或第一運動矢量的縮放運動矢量用於並置亮度塊,該並置亮度塊與對應色度塊的相鄰色度塊相關,第一運動矢量或第一運動矢量的縮放運動矢量被用作對應色度塊的第二運動矢量。
依據本發明的另一方面提出用於當前圖像參考模式的受約束的重建數據。當當前圖像參考模式被應用於當前圖像時,在預測包括當前塊的當前編碼單元之前,當前圖像的當前塊的參考數據被約束至可用已重建數據。相應地,當前塊的塊矢量被限制於使得如下兩個公式其中之一為真:BV_x+offsetX+nPbSw<=0 and BV_y+offsetY+nPbSh<=0,其中(BV_x,BV_y)對應於當前塊的亮度分量的塊矢量,鑒於用於當前圖像參考模式的色度樣本插值,(offsetX,offsetY)是兩個調整的偏移,以及nPbSw和nPbSh對應於當前塊的寬度和高度。當前塊可對應於當前亮度塊或當前色度塊。用於圖像區域的當前塊的參考數據被進一步至與波前平行處理相關的梯形預測區域,進一步約束該當前塊的塊矢量:(xPbs+BV_x+offsetX+nPbSw-1)/CtbSizeY-xPbs/CtbSizeY<=yPbs/CtbSizeY-(yPbs+BV_y+offsetY+nPbSh-1)/CtbSizeY,其中((xPbs,yPbs)是該相對於當前圖像相關的當前塊的左 上像素的位置,以及CtbSizeY對應於圖像區域的高度。如果當前區域的亮度分量和色度分量分別使用單獨的編碼單元結構而分別被分割為複數個亮度塊和複數個色度塊,則offsetX和offsetY為0。
110‧‧‧編碼樹單元
120‧‧‧編碼樹
410‧‧‧塊分割
420‧‧‧二元樹
510、620、630、622、632‧‧‧塊
520‧‧‧四分樹加二元樹
610‧‧‧區域
710‧‧‧當前塊
720‧‧‧參考塊
1110、1120、1210、1220、1230、1310、1320、1330‧‧‧步驟
第1圖示出了使用四分樹結構將編碼樹單元分割成編碼單元的塊分割的示例。
第2圖示出了依據高效率視訊編碼的非對稱運動分割(asymmetric motion partition,AMP),其中AMP定義用於將CU分割為PU的八種形狀。
第3圖示出了由二元樹分割結構使用的各種二進位分割類型的示例,其中塊可以使用分割類型被遞迴地分割成兩個較小的塊。
第4圖示出了塊分割及其對應的二元樹的示例,其中在二元樹的每個分割節點(即,非葉節點)中,使用一個標誌來指示哪個分割類型(水平或垂直)被使用,其中0可以指示水平分割,1可以指示垂直分割。
第5圖示出了塊分割及其對應的四分樹加二元樹結構(quad-tree plus binary tree structure,QTBT)的示例,其中實線表示四分樹分割,虛線表示二元樹分割。
第6圖示出了CPR補償的示例,其中區域610對應於要編碼的圖片,片段或圖片區域。塊620和630對應於要編碼的兩個塊。
第7圖示出了預測塊矢量(block vector,BV)編碼的示例, 其中對應於當前BV和BV預測子之間的差值的塊矢量差值(BV difference,BVD)被發送。
第8圖示出了用於畫面內塊複製(IntraBC)模式(即當前圖像參考,CPD模式)的約束參考像素區域的示例。
第9圖示出了與CPR模式相關聯的用於波前平行處理(wavefront parallel processing,WPP)的梯形參考數據區域的示例。
第10圖示出了來自相同幀中的其它顏色平面的並置的顏色平面候選導出的示例,其中(Y1,U1,V1)和(Y2,U2,V2)是兩個連續訊框的顏色平面。
第11圖示出了依據本發明的實施例的具有當前圖像參考(current picture referencing,CPR)模式使能的示例性編碼系統的流程圖,其中如果CPR模式被選擇以用於亮度和色度塊,當前圖像的亮度塊和色度塊使用相同的編碼單元來共同編碼,或者如果使用單獨的CU結構將亮度分量和色度分量分別分割成亮度塊和色度塊,則使用除CPR模式之外的編碼模式中選擇編碼模式來編碼或解碼亮度和色度塊。
第12圖示出了依據本發明實施例的具有當前圖像參考(CPR)模式使能的示例性編碼系統的流程圖,其中如果CPR被選擇以用於亮度塊和色度塊,則使用不同的CU結構分別對當前圖像的亮度塊和色度塊進行編碼。
第13圖示出了依據本發明的實施例的具有當前圖像參考(CPR)模式使能的示例性編碼系統的流程圖,其中如果CPR模式被選擇以用於亮度塊和色度塊,則在預測包括當前區塊的 當前編碼樹單元之前,用於當前塊的參考數據被約束至可用已重建數據。
以下描述是實現本發明的最佳實施方式。這一描述是為了說明本發明的一般原理,而不應被認為是限制性的。本發明的範圍最好透過申請專利範圍來確定。
在基於原始四分樹加二元樹(quad-tree plus binary tree,QTBT)結構和亮度/色度分離編碼的視訊編碼中,針對所有畫面內訊框(例如,I片段)分別對亮度和色度進行編碼。然而,在HEVC-SCC中,CPR被設計以用於三個顏色分量。CPR的MV用於所有三個分量。依據本發明的一個方面,當亮度和色度分別被編碼時,CPR設計被修改。在本公開中,提出了具有亮度/色度分離CU結構的CPR編碼的各種方法如下。在下文中,公開了用於具有QTBT結構或亮度/色度分離編碼的視頻數據分割的CPR模式的各個方面。
CPR模式的聯合顏色分量編碼
當對當前圖像啟用CPR模式時,亮度和色度(或R/G/B)分離編碼被禁能。換句話說,當CPR模式使能時,使用聯合亮度和色度(或R/G/B)編碼。CPR模式的使用可以由進階語法指示,例如圖片參數集(picture parameter set,PPS)中的pps_curr_pic_ref_enabled_flag為真。在這種情況下,亮度和色度分量將按照P-或B-片段的情況共同編碼。換句話說,使用相同的編碼單元(CU)結構來分割圖像區域的亮度和色度分量。此外,用於圖像區域的亮度和色度分量的相同的運動矢 量(MV)或塊矢量(BV)被使用以定位參考數據。
在另一個實施例中,如果應用亮度和色度(或R/G/B)分離編碼,則CPR模式被禁用。換句話說,使用從除了CPR模式之外的編碼組中選擇的編碼模式對亮度和色度分量進行編碼。
換句話說,依據上述實施例,CPR模式的使用和單獨的亮度和色度(或R/G/B)編碼不會同時發生。
用於亮度和色度的分離的CPR編碼
依據另一實施例,當亮度和色度被單獨編碼時,使用單獨的CPR編碼,以用於亮度分量和色度分量。例如,對於亮度分量編碼,以CPR模式編碼的亮度塊的MV僅參考亮度重建圖像。對於色度分量編碼,以CPR模式編碼的色度塊的MV參考是U/V(或Cb/Cr)重建圖像。例如,可以使用第一CU結構將亮度圖像區域(例如亮度片段或編碼樹單元,CTU)分割為亮度塊,以及使用第二CU結構將色度圖像區域(例如,色度片段或編碼樹單元,CTU)分割為色度塊。如果亮度圖像區域的亮度塊具有第一MV並且色度圖像區域的色度塊具有第二MV,則CU/PU的亮度塊和色度塊可以具有不同的MV。換句話說,第一MV和第二MV可以是不同的。
在CPR模式中用於色度CU編碼的MV預測
依據本發明實施例,當亮度分量和色度分量被分別編碼並且單獨的CPR編碼用於亮度分量和色度分量時,(如果亮度分量具有與色度分量不同的解析度)來自亮度MV的MV或縮放的亮度MV被使用以用於色度塊(例如,CU/PU)的MV 編碼。例如,當使用CPR模式對色度CU/PU進行編碼時,如果以CPR模式編碼並置(collocated)亮度CU/PU,則可以將亮度MV或縮放的亮度MV直接用於色度CU/PU或可以用作色度CU/PU的MV預測子(MV predictor,MVP)。此外,可以發出luma_merge_flag以指示亮度MV或縮放亮度MV是否直接用於當前色度CU/PU。luma_merge_flag也可以有條件地被發送。例如,僅在並置亮度CU/PU以CPR模式編碼時才被發送。在另一示例中,總是發送luma_merge_flag來指示當前色度CU/PU是否以CPR模式被編碼,並且從縮放的亮度MV複製MV。在本示例中,如果並置的亮度CU/PU未以CPR模式編碼,則可以應用默認的MV。默認的MV可以是(-w,0),(0,-h),(-w,-h),(-2w,0),(0,-2h)或任何其他預定義的MV,其中w是CU寬度或PU寬度,h是CU高度或PU高度。
在另一示例中,當對色度CU/PU應用合併模式時,總是發送luma_merge_flag。例如,當用於色度分量的merge_flag或skip_flag為真時,總是發送luma_merge_flag。在本示例中,如果並置的亮度CU/PU未以CPR模式編碼,則可以應用默認的MV。默認的MV可以是(-w,0),(0,-h),(-w,-h),(-2w,0),(0,-2h)或任何其他預定義的MV,其中w是CU寬度或PU寬度,以及h是CU高度或PU高度。
在另一個實施例中,並置亮度塊的亮度MV或縮放亮度MV可以用作MVP。它可以插入到合併候選列表或/和AMVP候選列表中。它可以插入列表中的第一個候選位置(即,前導位置(leading location))。MV裁剪(pruning)可以應 用於以下候選。如果未在CPR模式下編碼並置亮度CU/PU,則可以刪除該候選,或者使用默認的MV作為候選。默認的MV可以是(-w,0),(0,-h),(-w,-h),(-2w,0),(0,-2h)或任何其他預定義的MV,其中w是CU寬度或PU寬度,h是CU高度或PU高度。
在另一個實施例中,當前色度相鄰塊的並置亮度塊的亮度MV或縮放亮度MV可用作MVP。它可以插入合併候選列表或/和AMVP候選列表。如果在CPR模式下未編碼並置亮度CU/PU,則可以刪除該候選,或者使用默認的MV作為候選。
在另一個實施例中,並置亮度塊的亮度MV或縮放亮度MV可以用作時間並置MVP。
並置顏色平面候選
當顏色平面中的塊被編碼時,解碼器可以導出其並置的顏色平面候選以預測當前塊的運動矢量。並置的顏色平面候選是從同一幀中的其他顏色平面導出。第10圖示出了來自同一幀中的其他顏色平面的並置顏色平面候選推導的示例,其中(Y1,U1,V1)和(Y2,U2,V2)是兩個連續訊框的顏色平面。當對U2中的塊進行編碼時,可以從Y2導出並置的顏色平面候選。注意,解碼器還可以從在HEVC中編碼的先前訊框中獲得併置的時間候選。新推導的並置顏色平面候選可以與HEVC中的其他候選一起插入到候選列表中。可以組合第10圖中的U/V(或Cb/Cr)顏色平面。例如,可以將其改變為對應於(Y1,U1+V1)和(Y2,U2+V2)的四個圖像。
在另一個實施例中,當對色度圖像進行編碼時, 已編碼的亮度MV場(field)可以用作時間並置圖像的MV場。聯合顏色分量編碼中的原始MV編碼方法可以應用於色度圖像編碼。
在另一個實施例中,當對色度圖像進行編碼時,已編碼的亮度MV場被複製到當前重建的圖像。當CU/PU被解碼時,已重建的樣本和MV被更新。聯合顏色分量編碼中的原始MV編碼方法可以應用於色度圖像編碼。
用於CPR的LM模式
由於亮度圖像和色度圖像被分別編碼,所以可以應用交叉顏色預測來生成用於編碼的新的預測圖像。例如,當解碼色度圖像時,可以使用解碼的亮度圖像來生成用於預測的新的虛擬色度圖像。可以使用在基於HM(HEVC測試模型)/JEM(聯合探索平台(Joint Exploration Model))的軟體中公開的類LM亮度模式預測生成方式,其中,prediction_sample=a*source_sample+b。參數a和b可以在SPS/PPS/片段頭(SliceHeader)中被發送。已解碼的亮度MV場可以被縮放為所生成的新的虛擬色度圖像的MV場。可以應用雙向預測。例如,一個圖像可以是當前重建色度圖像,另一個圖像可以是虛擬色度圖像。當使用虛擬色度圖像時,HEVC-SCC中的梯形預測區域約束可以減輕。
用於QTBT的CPR參考區域約束
當QTBT與等於PU的CU一起使用時,每個CU只有一個預測塊。等式(1)至等式(3)中規定的約束變化如下所示: BV_x+offsetX+nPbSw<=0, (1’)
BV_y+offsetY+nPbSh<=0, (2’)
(xPbs+BV_x+offsetX+nPbSw-1)/CtbSizeY-xPbs/CtbSizeY<=yPbs/CtbSizeY-(yPbs+BV_y+offsetY+nPbSh-1)/CtbSizeY。 (3’)
上述修改的等式也適用於使用編碼單元(CU)結構來生成CU的情況,其中每個CU對應於一個PU。當圖像的三個顏色分量被分別單獨編碼時,其中色度U/V具有獨立的塊矢量,則可以將變量offsetX和offsetY設置為0。
以上公開的發明可以以各種形式併入各種視訊編碼或解碼系統中。例如,可以使用基於硬體的方法來實現本發明,例如專用積體電路(integrated circuits,IC),現場可程式邏輯閘陣列(field programmable logic array,FPGA),數位訊號處理器(digital signal processor,DSP),中央處理單元(CPU)等。本發明也可以使用軟體代碼或韌體代碼來實作,該軟體代碼或韌體代碼在計算機、膝上型電腦、或諸如智能電話的移動設備上執行。此外,軟體代碼或韌體代碼可以在諸如具有專用處理器(例如視訊編碼引擎或協同處理器)的CPU的混合型平台上執行。
第11圖示出了依據本發明的實施例的具有當前圖像參考(current picture referencing,CPR)模式使能的示例性編解碼系統的流程圖,其中如果CPR模式被選擇以用於亮度塊和色度塊,當前圖像的亮度塊和色度塊使用相同的編碼單元結構來共同編碼,或者如果使用單獨的CU結構分別將亮度分量和色度分量分割成亮度塊和色度塊,則使用自除CPR模式之外 的編碼模式組選擇的編碼模式而對亮度塊和色度塊進行編碼或解碼。流程圖中所示的步驟,同本申請中的其他候選流程圖一樣,可以被實現為在編碼器側和/或解碼器側的一個或複數個處理器(例如,一個或複數個CPU)上可執行的程式代碼。流程圖中所示的步驟也可以是基於硬體而實作,例如被佈置為執行流程圖中的步驟的一個或複數個電子設備或處理器。依據該方法,在步驟1110中接收與當前圖像相關聯的輸入數據,其中當前圖像區域包括一個亮度分量和一個或複數個色度分量。在編碼器側,輸入數據可對應於要編碼的視訊數據。在解碼器側,輸入數據可對應於要解碼的已壓縮視訊數據。在步驟1120中,當使能當前圖像參考(CPR)模式時,使用相同的編碼單元(CU)結構將圖像區域的亮度分量和該一個或複數個色度分量共同分割為亮度塊和色度塊,並且如果為亮度塊和色度塊選擇CPR模式,CPR編碼共同地被應用于亮度塊和色度塊,或者當圖像區域的亮度分量和該一個或多個色度分量利用單獨的CU結構被分別分割為亮度塊和色度塊時,使用從除了CPR模式之外的編碼模式組中選擇的編碼模式對亮度塊和色度塊進行編碼或解碼。如果為亮度塊和色度塊選擇CPR模式,則使用當前圖像中的參考數據對亮度塊和色度塊進行編碼。當使用編碼單元(CU)結構來分割圖像時,圖像通常被分割成片段,方框,CTU行或CTU,並且將編碼單元(CU)結構應用於CTU以生成CU,PU和TU,以用於編碼過程。四分樹二元樹(quad-tree plus binary tree,QTBT)結構可以用作編碼單元結構。
第12圖示出了依據本發明的實施例的具有當前圖像參考模式使能的示例性編解碼系統的流程圖,其中如果為亮度和色度塊選擇CPR模式,使用不同的CU結構分別對當前圖像的亮度和色度塊進行編解碼。依據該方法,在步驟1210中接收與當前圖像相關聯的輸入數據,其中圖像區域包括一個亮度分量和一個或複數個色度分量。在步驟1220中,使用單獨的CU結構將圖像區域的該個亮度分量和該一個或複數個色度分量分別分割成亮度塊和色度塊。在步驟1230中,如果CPR模式被選擇以用於亮度塊或色度塊,將當前圖像參考(CPR)編碼分別應用於亮度塊或色度塊。例如,CPR編碼可以利用亮度塊的運動矢量而僅參考亮度已重建參考數據,以用於編碼亮度分量,以及CPR編碼可以利用色度塊的運動矢量而僅參考色度已重建參考數據,以用於編碼色度分量。
第13圖示出了依據本發明的實施例的具有當前圖像參考模式使能的示例性編解碼系統的流程圖,其中如果CPR模式被選擇以用於亮度和色度塊,在預測包括當前塊的當前編碼樹單元之前,用於當前塊的參考數據被約束至可用已重建數據。依據該實施例,在步驟1310中接收與當前圖像相關聯的輸入數據,其中當前圖像包括一個亮度分量和一個或複數個色度分量。在步驟1320中,使用編碼單元(CU)結構將當前圖像的亮度分量和該一個或複數個色度分量分割成亮度塊和色度塊,其中編碼單元(CU)等於預測單元(PU)。在步驟1330中,當將當前圖像參考(CPR)模式應用於亮度塊和色度塊時,依據BV_x+offsetX+nPbSw<=0,或BV_y+offsetY+ nPbSh<=0,在預測包括當前塊的當前編碼單元之前,當前塊的參考數據被約束至可用已重建數據。當前塊對應於當前亮度塊或當前色度塊,(BV_x,BV_y)對應於當前塊的亮度分量的當前塊矢量,鑒於用於CPR模式的色度樣本插值,(offsetX,offsetY)是兩個調整的偏移,以及nPbSw和nPbSh對應於當前塊的寬度和高度,以及其中若利用單獨的編碼單元結構,當前圖像的亮度分量和該一個或複數個色度分量分別被分割為亮度塊和色度塊,則offsetX和offsetY為0。
所示的流程圖旨在說明依據本發明的示範性視訊編解碼的示例。在不脫離本發明的精神的情況下,本領域通常知識者可以修改每個步驟,重新排列步驟,拆分步驟或組合步驟來實施本發明。在本公開中,已經使用具體的語法和語義來說明實現本發明的實施例的示例。本領域通常知識者可以用相同的語法和語義來代替該些語法和語義來實踐本發明,而不脫離本發明的精神。
呈現上述描述以使得本領域通常知識者能夠在特定應用及其要求的上下文中實施本發明。對所描述的實施例的各種修改對於本領域通常知識者將是顯而易見的,並且本文定義的一般原理可以應用於其他實施例。因此,本發明並不限於所示出和描述的特定實施例,而是符合與本文所公開的原理和新穎特徵相一致的最寬範圍。在上述詳細描述中,示出了各種具體細節以便提供對本發明的透徹理解。然而,本領域通常知識者將理解,可以實施本發明。
如上所述的本發明的實施例可以以各種硬體,軟 體代碼或兩者的組合來實現。例如,本發明的實施例可以是整合到視訊壓縮芯片中的一個或複數個電路電路,或整合到視訊壓縮軟體中的程式代碼以執行本文所述的處理。本發明的實施例也可以是要在數位訊號處理器(DSP)上執行的程式代碼,以執行本文所述處理。本發明還可以涉及由計算機處理器,數位訊號處理器,微處理器或現場可程式邏輯閘陣列(FPGA)執行的許多功能。可以透過執行定義本發明所體現的特定方法的機器可讀軟體代碼或韌體代碼來將這些處理器配置成執行依據本發明的特定任務。軟體代碼或韌體代碼可以以不同的編程語言和不同的格式或風格而被開發。也可以為不同的目標平台編譯軟體代碼。然而,執行與本飯一致任務的不同的代碼格式,軟體代碼的樣式和語言以及配置代碼的其他方式將不會脫離本發明的精神和範圍。
在不脫離本發明的精神或基本特徵的情況下,本發明可以以其他具體形式實施。所描述的例子僅在所有方面被認為是說明性的而不是限制性的。因此,本發明的範圍由申請專利範圍而不是前面的描述來指示。屬於申請專利範圍的等同物的含義和範圍的所有變化將被包括在其範圍內。
1110、1120‧‧‧步驟

Claims (20)

  1. 一種視訊編解碼方法,分別由一視訊編碼系統和一視訊解碼系統使用,該方法包括:接收與一當前圖像相關聯的輸入數據,其中該當前圖像包括一亮度分量和一個或複數個色度分量;當對該當前圖像啟用當前圖像參考模式時,使用一相同編碼單元結構將該當前圖像的該亮度分量和該一個或複數個色度分量共同地分割成複數個亮度塊和複數個色塊,以及若該當前圖像參考模式被選擇以用於該複數個亮度塊和該複數個色度塊,則對該複數個亮度塊和該複數個色度塊共同地應用當前圖像參考編碼,或者當該當前圖像的該亮度分量和該一個或複數個色度分量分別使用單獨的編碼單元結構而被分割成該複數個亮度塊和該複數個色度塊時,利用自該當前圖像參考模式之外的一編碼模式組中選擇一編碼模式而編碼或解碼該複數個亮度塊和該複數個色度塊;以及其中如果該當前圖像參考模式被選擇以用於該當前圖像,則使用該當前圖像中的參考數據對該亮度塊和該複數個色度塊進行編解碼。
  2. 一種視訊編解碼裝置,分別由一視訊編碼系統和一視訊解碼系統使用,該裝置包括一個或複數個電子電路或一個或複數個處理器,被配置為:接收與一當前圖像相關聯的輸入數據,其中該當前圖像包括一亮度分量和一個或複數個色度分量; 當對該當前圖像啟用當前圖像參考模式時,使用一相同編碼單元結構將該當前圖像的該亮度分量和該一個或複數個色度分量共同地分割成複數個亮度塊和複數個色度塊,以及若該當前圖像參考模式被選擇以用於該當前圖像,則對該複數個亮度塊和該複數個色度塊共同地應用當前圖像參考編碼,或者當該當前圖像的該亮度分量和該一個或複數個色度分量分別使用單獨的編碼單元結構而被割成該複數個亮度塊和該複數個色度塊時,利用自該當前圖像參考模式之外的一編碼模式組中選擇一編碼模式而編碼或解碼該複數亮度塊和該複數個色度塊;以及其中如果該當前圖像參考模式被選擇以用於該當前圖像,則使用該當前圖像中的參考數據對該亮度塊和該複數個色度塊進行編碼。
  3. 一種視訊編解碼方法,分別由一視訊編碼系統和一視訊解碼系統使用,該方法包括:接收與一當前圖像相關聯的輸入數據,其中該當前圖像包括一亮度分量和一個或複數個色度分量;分別使用單獨的編碼單元結構將該當前圖像的該亮度分量和該一個或複數個色度分量分割成複數個亮度塊和複數個色度塊;以及如果當前圖像參考模式分別被選擇以用於該複數個亮度塊或該複數個色度塊,則將該當前圖像參考編碼分別應用於該複數個亮度塊或該複數個色度塊。
  4. 如申請專利範圍第3項所述之方法,其中 對於該複數個亮度塊,該應用當前圖像參考是指該當前圖像的一已重建亮度圖像中的亮度參考數據使用複數個第一運動矢量。
  5. 如申請專利範圍第4項所述之方法,其中對於該複數個色度塊,該應用當前圖像參考是指該當前圖像的一已重建色度圖像中的色度參考數據使用複數個第二運動矢量。
  6. 如申請專利範圍第5項所述之方法,其中該複數個第一運動矢量和該複數個第二運動矢量不同。
  7. 如申請專利範圍第5項所述之方法,其中,一並置亮度塊的一第一運動矢量用於導出一相應色度塊的一第二運動矢量,並且其中如果該亮度分量和該一個或多個色度分量有不同的解析度,則該第一運動矢量對應於該並置亮度塊的一縮放運動矢量。
  8. 如申請專利範圍第7項所述之方法,其中如果將該當前圖像參考模式應用於對應色度塊並且該並置亮度塊以該當前圖像參考模式而被編碼,則對於該並置亮度塊的該第一運動矢量或該第一運動矢量的縮放運動矢量直接用作該相應色度塊的該第二運動矢量。
  9. 如申請專利範圍第8項所述之方法,其中,一標誌用於指示該並置亮度塊的該第一運動矢量或該第一運動矢量的該縮放運動矢量是否直接用作該相應色度塊的該第二運動矢量。
  10. 如申請專利範圍第9項所述之方法,其中, 當以合併模式對該相應色度塊進行編碼時或者當該並置亮度塊以該當前圖像參考模式而被編碼時,該標誌被發送或被解析。
  11. 如申請專利範圍第7項所述之方法,其中如果該當前圖像參考模式被應用於該對應色度塊以及該並置亮度塊不被編碼於該當前圖像參考模式時,則一默認運動矢量被用作該對應色度塊的該第二運動矢量。
  12. 如申請專利範圍第7項所述之方法,其中如果將該當前圖像參考模式應用於該對應色度塊以及該並置亮度塊被編碼於該當前圖像參考模式時,則該並置亮度塊的該第一運動矢量或該第一運動矢量的該縮放運動矢量被用作一運動矢量預測子,該運動矢量預測子被添加至一合併候選列表或一進階運動矢量預測候選列表以用於該對應色度塊。
  13. 如申請專利範圍第12項所述之方法,其中,該並置亮度塊的該第一運動矢量或該第一運動矢量的該縮放運動矢量被添加至該合併候選列表或該進階運動矢量預測候選列表中的前導候選位置,以用於該對應色度塊。
  14. 如申請專利範圍第7項所述之方法,其中如果該當前圖像參考模式被應用於該對應色度塊以及該並置亮度塊不編碼於該當前圖像參考模式,則一默認運動矢量被用作一運動矢量預測子,該運動矢量預測子被添加至一合併候選列表或一進階運動矢量預測候選列表以用於該對應色度塊。
  15. 如申請專利範圍第14項所述之方法,其中該默認運動矢量選自包括(-w,0),(0,-h),(-w,-h),(-2w,0)和(0,-2h)的一運動矢量組,其中w是塊寬度,h是塊高度。
  16. 如申請專利範圍第7項所述之方法,其中該第一運動矢量或該第一運動矢量的該縮放運動矢量用於一並置亮度塊,該並置亮度塊與該對應色度塊的一相鄰色度塊相關,該第一運動矢量或該第一運動矢量的該縮放運動矢量被用作該對應色度塊的該第二運動矢量。
  17. 一種視頻編解碼裝置,分別由一視訊編碼系統和一視訊解碼系統使用,該裝置包括一個或複數個電子電路或一個或複數個處理器,被配置為:接收與一當前圖像相關聯的輸入數據,其中該當前圖像包括一亮度分量和一個或複數個色度分量;分別使用單獨的編碼單元結構將該當前圖像的該亮度分量和該一個或複數個色度分量分割成複數個亮度塊和複數個色度塊;以及如果當前圖像參考模式分別被選擇以用於該複數個亮度塊或該複數個色度塊,則將該當前圖像參考編碼應用於該複數個亮度塊或該複數個色度塊。
  18. 一種視訊編解碼方法,分別由一視訊編碼系統和一視訊解碼系統使用,該方法包括:接收與一當前圖像相關聯的輸入數據,其中該當前圖像包括一亮度分量和一個或複數個色度分量; 使用複數個編碼單元結構將該當前圖像的該亮度分量和該一個或複數個色度分量分割成複數個亮度塊和複數個色度塊;以及當當前圖像參考模式被應用於該複數個亮度塊和該複數個色度塊時,依據如下公式在預測包括該當前塊的一當前編碼單元之前約束用於一當前塊的參考數據至可用已重建數據:BV_x+offsetX+nPbSw<=0,或者BV_y+offsetY+nPbSh<=0,其中該當前塊對應於一當前亮度塊或一當前色度塊,(BV_x,BV_y)對應於該當前塊的該亮度分量的一當前塊矢量,鑒於用於該當前圖像參考模式的色度樣本插值,(offsetX,offsetY)是兩個調整的偏移,以及nPbSw和nPbSh對應於該當前塊的寬度和高度,以及其中如果該複數個亮度塊和該複數個色度塊分別使用單獨的編碼單元結構而分別被分割為複數個亮度塊和複數個色度塊,則該offsetX和該offsetY為0。
  19. 如申請專利範圍第18項所述之方法,其中該當前塊的參考數據被進一步約束至與波前平行處理相關的梯形預測區域,進一步約束該當前塊的塊矢量:(xPbs+BV_x+offsetX+nPbSw-1)/CtbSizeY-xPbs/CtbSizeY<=yPbs/CtbSizeY-(yPbs+BV_y+offsetY+nPbSh-1)/CtbSizeY, 其中((xPbs,yPbs)是該相對於該當前圖像的該當前塊的一左上像素的一位置,以及CtbSizeY對應於該當前編碼樹單元的高度。
  20. 一種視訊編解碼裝置,分別由一視訊編碼系統和一視訊解碼系統使用,該裝置包括一個或複數個電子電路或一個或複數個處理器,被配置為:接收與一當前圖像中的一圖像區域相關聯的輸入數據,其中該圖像區域包括一亮度分量和一個或複數個色度分量;使用複數個編碼單元結構將該當前區域的該亮度分量和該一個或複數個色度分量分割成複數個亮度塊和複數個色度塊;以及當當前圖像參考模式被應用於該圖像區域,依據如下公式在預測一當前編碼單元之前約束用於該圖像區域的一當前塊的參考數據至可用已重建數據:BV_x+offsetX+nPbSw<=0,或者BV_y+offsetY+nPbSh<=0,其中(BV_x,BV_y)對應於一當前塊的該亮度分量的一當前塊矢量,鑒於用於該當前圖像參考模式的色度樣本插值,(offsetX,offsetY)是兩個調整的偏移,以及nPbSw和nPbSh對應於該當前塊的寬度和高度,以及其中如果該複數個亮度塊和該複數個色度塊分別使用單獨的編碼單元結構而分別被分割為複數個亮度塊和複數個色度塊,則該offsetX和該offsetY為0。
TW106117843A 2016-05-28 2017-05-31 視訊編解碼方法和裝置 TWI702830B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662342883P 2016-05-28 2016-05-28
US62/342,883 2016-05-28
??PCT/CN2017/086049 2017-05-26
PCT/CN2017/086049 WO2017206803A1 (en) 2016-05-28 2017-05-26 Method and apparatus of current picture referencing for video coding
WOPCT/CN2017/086049 2017-05-26

Publications (2)

Publication Number Publication Date
TW201804796A true TW201804796A (zh) 2018-02-01
TWI702830B TWI702830B (zh) 2020-08-21

Family

ID=60478454

Family Applications (2)

Application Number Title Priority Date Filing Date
TW106117843A TWI702830B (zh) 2016-05-28 2017-05-31 視訊編解碼方法和裝置
TW106117846A TWI652939B (zh) 2016-05-28 2017-05-31 視訊編碼方法和裝置

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW106117846A TWI652939B (zh) 2016-05-28 2017-05-31 視訊編碼方法和裝置

Country Status (7)

Country Link
US (2) US11089323B2 (zh)
EP (2) EP3456043A4 (zh)
CN (2) CN109076210B (zh)
CA (1) CA3025490A1 (zh)
RU (1) RU2710667C1 (zh)
TW (2) TWI702830B (zh)
WO (2) WO2017206804A1 (zh)

Families Citing this family (91)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018080122A1 (ko) * 2016-10-28 2018-05-03 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2020065520A2 (en) 2018-09-24 2020-04-02 Beijing Bytedance Network Technology Co., Ltd. Extended merge prediction
WO2019135629A1 (ko) * 2018-01-05 2019-07-11 에스케이텔레콤 주식회사 크로마 블록의 복원 방법 및 이를 이용한 영상 복호화 장치
US10687071B2 (en) * 2018-02-05 2020-06-16 Tencent America LLC Method and apparatus for video coding
US11202079B2 (en) 2018-02-05 2021-12-14 Tencent America LLC Method and apparatus for video decoding of an affine model in an intra block copy mode
WO2019154417A1 (en) * 2018-02-12 2019-08-15 Mediatek Inc. Method and apparatus of current picture referencing for video coding using adaptive motion vector resolution and sub-block prediction mode
CN110324627B (zh) * 2018-03-30 2022-04-05 杭州海康威视数字技术股份有限公司 色度的帧内预测方法及装置
WO2019234598A1 (en) 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Interaction between ibc and stmvp
WO2019234613A1 (en) * 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Partition tree with partition into 3 sub-blocks by horizontal and vertical splits
CN112237001B (zh) * 2018-06-07 2024-04-12 韦勒斯标准与技术协会公司 使用自适应运动矢量分辨率的视频信号处理方法及装置
CN110636298B (zh) 2018-06-21 2022-09-13 北京字节跳动网络技术有限公司 对于Merge仿射模式和非Merge仿射模式的统一约束
KR20210022617A (ko) * 2018-06-21 2021-03-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 칼라 컴포넌트 간의 서브 블록 mv 상속
SG11202013202YA (en) * 2018-07-02 2021-01-28 Huawei Tech Co Ltd Motion vector prediction method and related apparatus
WO2020017513A1 (en) * 2018-07-16 2020-01-23 Sharp Kabushiki Kaisha Systems and methods for generating prediction blocks for coding of video data
HUE064218T2 (hu) * 2018-08-28 2024-02-28 Huawei Tech Co Ltd Képfelosztási eljárás és eszköz
US11750836B2 (en) * 2018-09-13 2023-09-05 Interdigital Vc Holdings, Inc. Virtual temporal affine candidates
BR112020025569A2 (pt) 2018-09-18 2021-03-23 Huawei Technologies Co., Ltd. codificador de vídeo, decodificador de vídeo e métodos correspondentes
WO2020057530A1 (en) 2018-09-18 2020-03-26 Huawei Technologies Co., Ltd. Coding method, device, system
US10848782B2 (en) 2018-09-21 2020-11-24 Tencent America LLC Method and apparatus for video coding
US11317099B2 (en) * 2018-10-05 2022-04-26 Tencent America LLC Method and apparatus for signaling an offset in video coding for intra block copy and/or inter prediction
WO2020084510A1 (en) * 2018-10-23 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Adaptive control point selection for affine coding
CN111107373B (zh) * 2018-10-29 2023-11-03 华为技术有限公司 基于仿射预测模式的帧间预测的方法及相关装置
EP3874757A4 (en) * 2018-11-02 2022-08-24 Sharp Kabushiki Kaisha SYSTEMS AND METHODS FOR REFERENCE OFFSET SIGNALING IN VIDEO CODING
EP3878179A1 (en) * 2018-11-06 2021-09-15 InterDigital VC Holdings, Inc. Parameter grouping among plural coding units for video encoding and decoding
WO2020094149A1 (en) 2018-11-10 2020-05-14 Beijing Bytedance Network Technology Co., Ltd. Rounding in triangular prediction mode
CN112997481B (zh) * 2018-11-16 2024-01-12 寰发股份有限公司 带有约束的亮度-色度单独的编码树编解码的方法和设备
MX2021005911A (es) 2018-11-20 2021-06-30 Interdigital Vc Holdings Inc Inicializacion de vector de bloque que hace referencia a imagen actual con arbol dual.
WO2020108574A1 (en) * 2018-11-28 2020-06-04 Beijing Bytedance Network Technology Co., Ltd. Improving method for transform or quantization bypass mode
WO2020125798A1 (en) 2018-12-22 2020-06-25 Beijing Bytedance Network Technology Co., Ltd. Intra block copy mode with dual tree partition
CN113170111B (zh) * 2018-12-08 2024-03-08 北京字节跳动网络技术有限公司 视频处理方法、装置和计算机可读存储介质
CN113196747B (zh) * 2018-12-21 2023-04-14 北京字节跳动网络技术有限公司 当前图片参考模式下的信息信令通知
CN113228644B (zh) * 2018-12-30 2023-11-17 寰发股份有限公司 带有约束的亮度-色度单独的编码树编码的方法和设备
WO2020141885A1 (ko) 2019-01-02 2020-07-09 엘지전자 주식회사 디블록킹 필터링을 사용하는 영상 코딩 방법 및 장치
US11949851B2 (en) * 2019-01-04 2024-04-02 Lg Electronics Inc. Inter prediction method and apparatus using CPR-based MMVD
US10771799B2 (en) * 2019-01-15 2020-09-08 Tencent America LLC Method and apparatus for video coding
WO2020156545A1 (en) * 2019-02-02 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Prediction using intra-buffer samples for intra block copy in video coding
BR112021014484A2 (pt) 2019-02-02 2021-09-28 Beijing Bytedance Network Technology Co., Ltd. Gerenciamento de buffer para cópia de bloco intra em codificação de vídeo
WO2020169114A1 (en) * 2019-02-22 2020-08-27 Huawei Technologies Co., Ltd. Method and apparatus for affine based inter prediction of chroma subblocks
US11632563B2 (en) * 2019-02-22 2023-04-18 Qualcomm Incorporated Motion vector derivation in video coding
BR112021013611A2 (pt) * 2019-02-28 2021-09-14 Interdigital Vc Holdings, Inc. Método e dispositivo para codificação e decodificação de imagens
JP7405861B2 (ja) 2019-03-01 2023-12-26 北京字節跳動網絡技術有限公司 映像符号化におけるイントラブロックコピーのための方向に基づく予測
JP7284284B2 (ja) 2019-03-04 2023-05-30 北京字節跳動網絡技術有限公司 映像符号化におけるイントラブロックコピーの実装形態の態様
SG11202109150QA (en) 2019-03-08 2021-09-29 Beijing Bytedance Network Technology Co Ltd Constraints on model-based reshaping in video processing
AU2019201649A1 (en) 2019-03-11 2020-10-01 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding a tree of blocks of video samples
US11997255B2 (en) 2019-03-14 2024-05-28 Sk Telecom Co., Ltd. Video encoding and decoding using intra block copy
US11343525B2 (en) * 2019-03-19 2022-05-24 Tencent America LLC Method and apparatus for video coding by constraining sub-block motion vectors and determining adjustment values based on constrained sub-block motion vectors
US11677969B2 (en) * 2019-03-22 2023-06-13 Tencent America LLC Method and apparatus for video coding
WO2020191575A1 (zh) * 2019-03-25 2020-10-01 富士通株式会社 图像编解码方法、装置以及电子设备
WO2020200236A1 (en) 2019-04-01 2020-10-08 Beijing Bytedance Network Technology Co., Ltd. Using interpolation filters for history based motion vector prediction
WO2020211863A1 (en) * 2019-04-18 2020-10-22 Beijing Bytedance Network Technology Co., Ltd. Selective use of cross component mode in video coding
CA3135973A1 (en) 2019-04-23 2020-10-29 Beijing Bytedance Network Technology Co., Ltd. Methods for cross component dependency reduction
WO2020219733A1 (en) 2019-04-24 2020-10-29 Bytedance Inc. Quantized residual differential pulse code modulation representation of coded video
CN113906749B (zh) * 2019-04-30 2023-05-23 北京达佳互联信息技术有限公司 色度残差联合编码方法和装置
CN113796069B (zh) 2019-05-01 2024-03-08 字节跳动有限公司 使用量化残差差分脉冲编解码调制编解码的帧内编解码视频
CN113785306B (zh) * 2019-05-02 2024-06-14 字节跳动有限公司 基于编解码树结构类型的编解码模式
JP7359873B2 (ja) * 2019-05-15 2023-10-11 華為技術有限公司 エンコーダ、デコーダ、及び対応する方法
BR112021000935A2 (pt) * 2019-05-16 2021-04-20 Huawei Technologies Co., Ltd. codificador, decodificador e métodos correspondentes usando buffer dedicado de ibc e atualização de valor padrão para componente luma e croma
EP3954119A4 (en) 2019-05-21 2022-06-22 Beijing Bytedance Network Technology Co., Ltd. SYNTAX SIGNALING IN A SUBBLOCK MERGE MODE
CN113796070A (zh) * 2019-06-10 2021-12-14 Oppo广东移动通信有限公司 预测值的确定方法、编码器以及计算机存储介质
KR20240093880A (ko) * 2019-06-11 2024-06-24 엘지전자 주식회사 크로마 양자화 파라미터 데이터 기반 영상 디코딩 방법 및 그 장치
WO2020256488A1 (ko) 2019-06-19 2020-12-24 엘지전자 주식회사 크로마 블록의 크기를 제한하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
CN112118451B (zh) * 2019-06-20 2022-09-27 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
KR20220024006A (ko) 2019-06-22 2022-03-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로마 잔차 스케일링을 위한 신택스 요소
CN112135128B (zh) * 2019-06-24 2024-07-05 华为技术有限公司 图像预测方法、编码树节点划分方法及其装置
FR3098073B1 (fr) * 2019-06-25 2021-09-24 Fond B Com Procédé de codage et de décodage d’une image d’une séquence vidéo et dispositif associé
EP3981151A4 (en) 2019-07-06 2022-08-24 Beijing Bytedance Network Technology Co., Ltd. VIRTUAL PREDICTION BUFFER FOR INTRA-BLOCK COPY IN VIDEO ENCODING
JP7460748B2 (ja) 2019-07-07 2024-04-02 北京字節跳動網絡技術有限公司 クロマ残差スケーリングのシグナリング
KR102635519B1 (ko) 2019-07-10 2024-02-07 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩에서 인트라 블록 카피를 위한 샘플 식별
CN114097221B (zh) * 2019-07-11 2024-01-12 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的比特流一致性约束
JP7359936B2 (ja) 2019-07-20 2023-10-11 北京字節跳動網絡技術有限公司 パレットモードの使用の指示の条件依存符号化
CN117221536A (zh) * 2019-07-23 2023-12-12 北京字节跳动网络技术有限公司 调色板模式编解码的模式确定
US11277611B2 (en) * 2019-07-24 2022-03-15 Qualcomm Incorporated Delta quantization parameter (QP) signaling in palette mode
EP3994886A4 (en) 2019-08-06 2022-12-28 Beijing Bytedance Network Technology Co., Ltd. VIDEO ZONE PARTITION ACCORDING TO COLOR FORMAT
EP4011082A4 (en) * 2019-08-08 2023-10-25 Fg Innovation Company Limited DEVICE AND METHOD FOR ENCODING VIDEO DATA
CN110446044B (zh) * 2019-08-21 2022-08-09 浙江大华技术股份有限公司 线性模型预测方法、装置、编码器及存储装置
EP4044592A3 (en) * 2019-08-23 2022-12-21 HFI Innovation Inc. Method and apparatus of partitioning small size coding units with partition constraints
US11218718B2 (en) * 2019-08-26 2022-01-04 Tencent America LLC Adaptive motion vector resolution signaling
MX2022002247A (es) 2019-09-02 2022-03-22 Beijing Bytedance Network Tech Co Ltd Particion de region de video basada en formato de color.
BR112022004668A2 (pt) 2019-09-14 2022-05-31 Bytedance Inc Método de processamento de dados de vídeo, aparelho para processar dados de vídeo e meios de armazenamento e de gravação não transitórios legíveis por computador
CN110719467B (zh) * 2019-09-18 2022-04-19 浙江大华技术股份有限公司 色度块的预测方法、编码器及存储介质
EP4014486A4 (en) * 2019-09-20 2023-03-01 Beijing Bytedance Network Technology Co., Ltd. LUMA MAPPING WITH CHROMA SCALING
CN118055248A (zh) 2019-09-21 2024-05-17 北京字节跳动网络技术有限公司 处理视频数据的方法、装置以及计算机可读记录介质
KR20220065879A (ko) * 2019-09-30 2022-05-20 후아웨이 테크놀러지 컴퍼니 리미티드 Dct 기반 보간 필터의 사용
WO2021076475A1 (en) * 2019-10-14 2021-04-22 Bytedance Inc. Joint coding of chroma residual and filtering in video processing
CN114631317B (zh) 2019-10-18 2024-03-15 北京字节跳动网络技术有限公司 子图片的参数集信令中的语法约束
US20220385910A1 (en) * 2019-11-11 2022-12-01 Hfi Innovation Inc. Method and Apparatus of Signaling Adaptive Motion Vector Difference Resolution in Video Coding
CN112823520A (zh) * 2019-12-31 2021-05-18 北京大学 视频处理的方法与装置
US11445176B2 (en) * 2020-01-14 2022-09-13 Hfi Innovation Inc. Method and apparatus of scaling window constraint for worst case bandwidth consideration for reference picture resampling in video coding
CN112203085B (zh) * 2020-09-30 2023-10-17 字节跳动(香港)有限公司 图像处理方法、装置、终端和存储介质
CN112203086B (zh) * 2020-09-30 2023-10-17 字节跳动(香港)有限公司 图像处理方法、装置、终端和存储介质
US20220286666A1 (en) * 2021-02-26 2022-09-08 Lemon Inc. Methods of coding images/videos with alpha channels

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8411746B2 (en) * 2009-06-12 2013-04-02 Qualcomm Incorporated Multiview video coding over MPEG-2 systems
EP2514209A4 (en) * 2009-12-17 2014-03-26 Ericsson Telefon Ab L M METHOD AND DEVICE FOR VIDEO CODING
JPWO2011158657A1 (ja) * 2010-06-17 2013-08-19 シャープ株式会社 画像フィルタ装置、復号装置、符号化装置、および、データ構造
KR20130049526A (ko) * 2011-11-04 2013-05-14 오수미 복원 블록 생성 방법
EP2837186B1 (en) 2012-04-12 2018-08-22 HFI Innovation Inc. Method and apparatus for block partition of chroma subsampling formats
US9532046B2 (en) * 2012-04-16 2016-12-27 Qualcomm Incorporated Reference picture set prediction for video coding
CN103634603B (zh) * 2012-08-29 2017-07-07 中兴通讯股份有限公司 视频编解码方法、装置及系统
US9743091B2 (en) * 2012-12-17 2017-08-22 Lg Electronics Inc. Method for encoding/decoding image, and device using same
GB2512826B (en) * 2013-04-05 2017-05-10 Canon Kk Method and device for determining the value of a quantization parameter
US10015515B2 (en) * 2013-06-21 2018-07-03 Qualcomm Incorporated Intra prediction from a predictive block
US9774879B2 (en) * 2013-08-16 2017-09-26 Sony Corporation Intra-block copying enhancements for HEVC in-range-extension (RExt)
US11470339B2 (en) * 2013-08-27 2022-10-11 Qualcomm Incorporated Residual prediction for intra block copying
AU2013228045A1 (en) * 2013-09-13 2015-04-02 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data
EP3058739B1 (en) * 2013-10-14 2019-08-07 Microsoft Technology Licensing, LLC Features of intra block copy prediction mode for video and image coding and decoding
CA2924501C (en) * 2013-11-27 2021-06-22 Mediatek Singapore Pte. Ltd. Method of video coding using prediction based on intra picture block copy
US9883197B2 (en) * 2014-01-09 2018-01-30 Qualcomm Incorporated Intra prediction of chroma blocks using the same vector
WO2015131326A1 (en) * 2014-03-04 2015-09-11 Microsoft Technology Licensing, Llc Encoder-side decisions for block flipping and skip mode in intra block copy prediction
US10432928B2 (en) * 2014-03-21 2019-10-01 Qualcomm Incorporated Using a current picture as a reference for video coding
US10264286B2 (en) * 2014-06-26 2019-04-16 Qualcomm Incorporated Bitstream conformance constraints in scalable video coding
US9918105B2 (en) * 2014-10-07 2018-03-13 Qualcomm Incorporated Intra BC and inter unification
EP3189661B1 (en) * 2014-10-08 2020-07-29 MediaTek Inc. Method of block vector clipping and coding for screen content coding and video coding
CN108600749B (zh) * 2015-08-29 2021-12-28 华为技术有限公司 图像预测的方法及设备
US10212444B2 (en) * 2016-01-15 2019-02-19 Qualcomm Incorporated Multi-type-tree framework for video coding

Also Published As

Publication number Publication date
WO2017206803A1 (en) 2017-12-07
US20190222859A1 (en) 2019-07-18
CA3025490A1 (en) 2017-12-07
TW201804804A (zh) 2018-02-01
WO2017206804A1 (en) 2017-12-07
TWI702830B (zh) 2020-08-21
EP3449630B1 (en) 2024-07-10
CN109076214A (zh) 2018-12-21
EP3449630A1 (en) 2019-03-06
CN109076210B (zh) 2021-04-09
TWI652939B (zh) 2019-03-01
RU2710667C1 (ru) 2019-12-30
CN109076210A (zh) 2018-12-21
EP3456043A1 (en) 2019-03-20
EP3449630A4 (en) 2019-11-27
US11089323B2 (en) 2021-08-10
EP3456043A4 (en) 2019-11-27
US20200322599A1 (en) 2020-10-08

Similar Documents

Publication Publication Date Title
TWI702830B (zh) 視訊編解碼方法和裝置
TWI692973B (zh) 利用自適應運動向量解析度和子塊預測模式進行視訊編解碼的當前圖像參考的方法和裝置
TWI646829B (zh) 一種視訊編碼系統使用的視訊編碼方法及裝置
CN109479137B (zh) 用于彩色视频数据的调色板模式编解码的方法及装置
WO2020094038A1 (en) Method and apparatus of encoding or decoding video blocks by current picture referencing coding
TWI655863B (zh) 視訊處理系統中基於預測子的分割的方法及裝置
CN114175636A (zh) 自适应参数集中的自适应环路滤波的指示
CN113039782B (zh) 视频编解码中的子块去块方法及装置
CN112567750A (zh) 用于视频编解码的简化合并候选列表的方法和装置
CN112585972B (zh) 视频编解码的帧间预测方法及装置
WO2021093730A1 (en) Method and apparatus of signaling adaptive motion vector difference resolution in video coding