TWI737003B - 使用由預定義準則確定的參考樣本進行編碼或解碼的方法和設備 - Google Patents

使用由預定義準則確定的參考樣本進行編碼或解碼的方法和設備 Download PDF

Info

Publication number
TWI737003B
TWI737003B TW108136609A TW108136609A TWI737003B TW I737003 B TWI737003 B TW I737003B TW 108136609 A TW108136609 A TW 108136609A TW 108136609 A TW108136609 A TW 108136609A TW I737003 B TWI737003 B TW I737003B
Authority
TW
Taiwan
Prior art keywords
current block
block
root
samples
blocks
Prior art date
Application number
TW108136609A
Other languages
English (en)
Other versions
TW202025761A (zh
Inventor
林芷儀
莊子德
陳慶曄
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW202025761A publication Critical patent/TW202025761A/zh
Application granted granted Critical
Publication of TWI737003B publication Critical patent/TWI737003B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一種視頻處理方法包括:接收當前塊的輸入資料;檢查該當前塊是否滿足一個或更多個預定義準則,如果該當前塊滿足該預定義準則,則將該當前塊設置為根塊;如果該當前塊是根塊,則不利用該預定義準則檢查該當前塊中的一個或更多個塊的一個或更多個顏色分量;如果當前塊是根塊,則使用該當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本對該當前塊中一個或更多個塊的一個或更多個顏色分量進行編碼或解碼。如果該當前塊不是根塊,則使用該當前塊中的每個塊的相鄰重構樣本作為參考樣本來對該當前塊中的每個塊進行編碼或解碼。

Description

使用由預定義準則確定的參考樣本進行編碼或解碼的方法和設備
本發明涉及在視頻處理中使用相鄰參考樣本對視頻資料進行編碼或解碼。具體地,本發明涉及利用基於預定義準則確定的參考樣本對視頻資料進行編碼和解碼。
幀內預測(intra prediction)已在各種圖像和視頻編碼標準中廣泛採用,以處理初始圖片或定期插入I圖片或I塊以進行隨機訪問或減輕錯誤傳播。幀內預測旨在利用圖片中的空間特徵(例如,圖片內或圖片區域內的平滑區域、垂直線或邊緣、水平線或邊緣以及對角線或邊緣)。幀內預測對於運動或場景變化較大的區域也很有用。對於基於塊的視頻編碼標準,針對當前塊的幀內預測依賴於已處理的相鄰塊中的樣本。例如,如果圖片或圖片區域中的塊從上到下從左到右逐行順序經過處理,則當前塊的頂部的相鄰塊以及左側的相鄰塊可用于形成用於預測當前塊中的樣本的幀內預測器。
高效視頻編碼(HEVC)標準支援包括33種角模式、DC模式和平面模式在內的35種幀內預測模式。第1圖例示了針對HEVC標準中支援的33種角幀內預測模式的預測方向,其中,H表示水平方向模式,V表示垂直方向模式。通過包括幀內平滑濾波、幀內預測和幀內梯度濾波的三個步驟來生成針對已通過HEVC的幀內預測編碼的或將要通過HEVC的幀內預測編碼的當前塊的幀內預測器。第2圖例示了示例性參考樣本,其由幀內平滑濾波器濾波以得到當前塊的幀內預測器。在計算針對當前塊20的幀內預測器之前,對當前塊20的參考樣本22應用平滑操作作為預處理步驟。該平滑操作對應於應用有限脈衝回應(FIR)幀內平滑濾波,[1 2 1] >> 2,其對屬於當前塊20的左相鄰列和上相鄰行的參考樣本22具有低通特性。平滑操作通過應用FIR濾波減少了某些幀內預測模式引入的不連續性。該平滑操作是根據幀內預測模式和當前塊的大小而適應性地應用的。
幀內預測的第二步驟是根據從35種幀內預測模式中選擇的一種幀內預測模式,從相鄰參考樣本得出幀內預測器。幀內預測模式由編碼器確定,並在位元流中用信號通知,因此相應的解碼器可以從位元流中解析出幀內預測模式。當選擇了角模式時,通過根據所選擇的角模式的預測方向從參考樣本中推測樣本來預測當前塊中的每個樣本的值。當選擇了平面模式時,假定從相鄰塊的邊界樣本得到具有水平和垂直平滑梯度的振幅表面,來計算當前塊中每個樣本的值。當選擇了DC模式時,當前塊的每個樣本的值是參考樣本的平均。
在第三步中,對當前塊的左邊界和頂邊界處的樣本應用幀內梯度濾波器。應用幀內梯度濾波器的概念是利用沿著幀內預測方向的梯度資訊來提高幀內預測的品質。第3A圖例示了將幀內梯度濾波應用於通過垂直模式或水平模式預測的預測器。在第3A圖中,預測像素Pij表示在第i行和第j列的預測器,AL表示在當前塊的左上角的重構樣本,而Li表示在當前塊的左相鄰列的重構樣本。在應用幀內梯度濾波器之後,通過等式(1)計算出針對每個預測像素Pij的最終預測像素P’ij。
Figure 02_image001
等式(1) 其中∝是從0到1的分數,並且是根據水平位移j選擇的,例如,當j = 0時∝= 1/2,當j = 1時∝= 1/4。對於通過水平模式預測的當前塊,通過等式(2)計算出針對每個預測像素Pij的最終所預測的像素P’ij。
Figure 02_image003
等式(2) 其中,Aj是上一行中的重構樣本。至於方向模式v + 1〜v + 8和h + 1〜h + 8,首先沿著幀內預測的方向獲得重構樣本Li或Aj的對應參考樣本RLi或RAj,以替換重構樣本Li 或Aj。當對應的參考樣本RLi或RAj不位於整數像素的位置時,應用當前塊的上方行或左列中的整數像素的插值,以生成對應的參考樣本RLi或RAj。第3B圖例示了針對v + 1〜v + 8方向模式應用幀內梯度濾波器的示例。根據等式(3),從每個所預測的像素Pij計算出最終預測像素P’ij。
Figure 02_image005
等式(3)
與垂直模式類似,∝是從0到1的分數並且是根據幀內預測的方向和水平位移j選擇的。對於方向模式h + 1〜h + 8,根據等式(4)從每個預測像素Pij計算出最終預測像素P’ij,其中,∝是從0到1的分數並且是根據幀內預測的方向和垂直位移i選擇的。
Figure 02_image007
等式(4)
儘管可以將幀內梯度濾波器應用於所有方向模式v + 1〜v + 8和h + 1〜h + 8,但僅當幀內預測模式為HEVC標準中的DC模式、水平模式或垂直模式時,才應用幀內梯度濾波器。當所選擇的幀內預測模式是DC模式時,當前塊的第一行和第一列中的樣本由幀內梯度濾波器濾波。當所選擇的幀內預測模式為水平模式時,第一行中的樣本由幀內梯度濾波器過濾;如果所選擇的幀內預測模式為垂直模式,則第一列中的樣本由幀內梯度濾波器過濾。
除了幀內梯度濾波,還提出了稱為雙向幀內預測的另一方法,來提高幀內預測的品質。對於包括方向模式v + 1〜v + 8和h + 1〜h + 8在內的對角幀內預測模式,將沿著預測方向的上一行的重構樣本和左列的重構樣本的加權和用作幀內預測器。第4圖例示了用於方向模式v + 1〜v + 8的雙向幀內預測的示例。在第4圖中,從上一行的相鄰樣本獲取預測樣本Pij,並且其在沿著預測方向的左列中具有對應的參考樣本Fij。如果對應的參考樣本Fij未位於整數像素的位置,則通過根據預測方向在左列中的整數像素的插值來生成Fij。如等式(5)所示,最終的預測樣本P’ij被計算為Pij和Fij的加權和。
Figure 02_image009
等式(5) 其中∝是0到1的分數並且是根據幀內預測的方向以及方向模式v + 1〜v + 8的水平位移j或方向模式h + 1〜h + 8的垂直位移i選擇的。
在HEVC標準支援的35個幀內預測模式中,三個幀內預測模式被認為是用於預測針對當前塊的當前幀內預測模式的最可能模式(MPM)。左相鄰塊和上相鄰塊的相鄰幀內預測模式包括在這三個MPM中。在兩個相鄰幀內預測模式是相同的方向模式,或者兩個相鄰幀內預測模式中僅一個是可用的並且是方向模式的情況下,則緊接該方向模式的兩個相鄰方向也包括在這三個MPM中。當左或上相鄰幀內預測模式不是有向的,或者當在幀內預測中相鄰塊不可用或未被編碼時,DC模式和平面模式也被視為MPM。第一MPM標誌被用信號通知以指示當前幀內預測模式是否與這三個MPM中的一個相同,如果是,則發送另一標誌以指示選擇了三個MPM中的哪個;如果第一MPM標誌為否定,則當前幀內預測模式為非MPM模式,並且使用5位元固定長度的碼字明確地用信號通知。
第1圖所示的33個角模式可以擴展為具有更多或更少角模式的一般情況,其中每個角模式都可以用模式H + k或模式V + k表示,其中H表示水平模式的方向,V表示垂直模式的方向,k = 0, +-1, +-2,.. +-K。用於幀內預測的65個角模式的示例如第5圖所示,其中k在-16到16的範圍內變化,並且模式H-16和模式V-16是相同的模式,因為此模式指的是從當前塊的左上角到中心的預測方向。第5圖例示了具有位於HEVC的原始33個角模式之間的附加的32個角模式的65個角幀內預測模式。第5圖中的65個角模式包括在塊的左邊界處從底部到頂部的模式H + 16至H-15和在塊的上邊界處從左至右的模式V-16至V + 16。
在該HEVC標準中,一旦決定了方向模式,沿著預測方向,當前塊中的所有樣本使用相同的預測器值。如果預測器落在兩個重構參考樣本之間,則使用雙線性濾波器來將預測器計算為兩個相鄰重構樣本的加權平均。例如,P= [P1*a + P2(32-a)]/32,其中P是預測器,P1和P2是兩個相鄰重構樣本,並且整數a表示從預測器P到P2的距離,其介於0和32之間(含0和32)。
在生成針對當前塊的幀內預測器之後,通過變換和量化進一步處理當前塊的原始樣本和預測樣本之間的預測器誤差。在熵編碼引擎中,量化係數被分成多個4×4係數組,並且根據當前塊的幀內預測模式和變換大小來選擇不同係數組的編碼順序和一個係數組中的係數的掃描順序。如果變換大小小於或等於8×8,則將依賴於幀內模式的掃描用於不同係數組的編碼順序和一個係數組中的係數的掃描順序,否則,將對角掃描用於不同係數組的編碼順序和一個係數組中的係數的掃描順序。
第6圖例示了多參數幀內預測(MPI)的處理。MPI通過計算多個預測器的加權和來生成用於幀內預測的最終預測器。在等式(6)中定義了當前塊中位置(i, j)的最終預測器PMPI [i, j]。
Figure 02_image011
等式(6) 其中,PHEVC [i, j]是由HEVC標準中定義的幀內預測生成的初始預測器,並且>>表示向右移位。如等式(7)中所示,當前塊外部的位置(i, j)的最終預測器PMPI[i, j]等於重構像素。
Figure 02_image013
,如果
Figure 02_image015
等式(7) 等式(6)中的四個參數加起來等於8(即,α + β + δ + γ = 8),並且該後處理的強度以CU級別進行控制,並以高達2個位元用信號通知。
第7圖例示了使用濾波和未濾波的參考樣本的組合生成針對當前塊的最終預測器p[x, y]的技術,其中,x和y是距塊邊界的水平和垂直距離。位於當前塊702周圍且具有未濾波的參考r [x, -1] 704和r [-1, y] 706以及濾波後的預測器q [x, y] 708的序列用於計算最終預測器p[x, y]。如第7圖所示,濾波後的預測器q [x, y] 708是從濾波後的樣本s [x, -1] 710和s [-1, y] 712得到的。最終預測器p [x, y]根據等式(8)將未濾波的參考704和706的加權值與濾波後的預測器708組合。
Figure 02_image017
Figure 02_image019
等式(8) 其中
Figure 02_image021
是存儲的預測參數,對於大至16×16的塊大小而言,d = 1,而對於更大的塊而言,d = 2。歸一化因數b [x, y]在等式(9)中定義。
Figure 02_image023
等式(9)
第8A圖和第8B圖例示了在幀內預測中通過平面模式計算當前塊的幀內預測器。首先通過信號通知或使用對應的左參考樣本和上參考樣本的線性平均進行估計來預測位於當前塊右下角的樣本。如第8A圖所示,使用位於當前塊的最右列上方的樣本和該右下角樣本對最右列中的樣本進行雙線性插值,並且使用位於當前塊底行左側的樣本和該右下角樣本對該底行中的樣本進行雙線性插值。如第8B圖所示,使用類似的雙線性插值來預測幀內預測器的其餘樣本。
公開了一種用於在視頻編碼系統中利用基於一個或更多個預定義準則確定的相鄰重構樣本來處理視頻資料的方法和設備。視頻編碼系統的實施方式接收與當前圖片中的當前塊相關聯的輸入資料。在當前塊的分割期間,利用一個或更多個預定義準則檢查當前塊,並且如果當前塊滿足預定義準則,則當前塊被設置為根塊。如果當前塊滿足一個或更多個預定義準則,則在當前塊中一個或更多個塊的一個或更多個顏色分量中不檢查一個或更多個預定義準則。如果當前塊被設置為根塊,則使用當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對當前塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼,否則如果當前塊不是根塊,則使用當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對當前塊中的每個塊的一個或更多個顏色分量進行編碼或解碼。如果當前塊被設置為根塊,則當前塊內的重構樣本不用作對當前塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼的參考樣本。該方法被應用於幀內預測或需要相鄰參考樣本或相鄰資訊的任何編碼工具中。在將該方法應用於幀內預測的實施方式中,如果當前塊被設置為根塊,則根據幀內預測模式和當前塊的一個或更多個顏色分量的相鄰重構樣本,針對當前塊中的每個塊的一個或更多個顏色分量生成幀內預測器。如果當前塊不被設置為根塊,則根據幀內預測模式和當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本,針對當前塊中的每個塊的一個或更多個顏色分量生成幀內預測器。
在一些實施方式中,由於色度塊小於對應的亮度塊,所以一個或更多個顏色分量僅對應於一個或更多個色度分量,因此,定義用於共用相鄰重構樣本或相鄰資訊的根塊的方法僅應用於小色度塊,而在其他一些實施方式中,該方法被應用於所有亮度和色度分量。
在一些實施方式中,一個或更多個顏色分量對應於一個或更多個色度分量,如果當前塊被設置為根塊,則使用當前塊的一個或更多個色度分量的相鄰重構樣本作為參考樣本來對當前塊中的一個或更多個塊的一個或更多個色度分量進行編碼或解碼,並且使用當前塊中的每個塊的亮度分量的相鄰重構樣本作為參考樣本來對當前塊中的每個塊的亮度分量進行編碼或解碼。否則,如果當前塊不是根塊,則使用當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對當前塊中的每個塊的一個或更多個顏色分量進行編碼或解碼。在一個實施方式中,該方法還包括檢查是否已設置了根塊,並且僅當未設置根塊並且當前塊滿足預定義準則時,當前塊才被設置為根塊。當前塊是亮度塊或色度塊。預定義準則中的一個預定義準則可以與當前塊的大小有關,在實施方式中,如果當前塊的大小小於、等於或小於等於預定義閾值,則當前塊滿足預定義準則。該大小對應於亮度樣本大小或色度樣本大小。在一個實施方式中,一個準則與當前塊的大小有關,而另一準則與從當前塊劃分出的一個子塊的大小有關,並且如果當前塊的大小大於、等於或大於等於預定義閾值,並且一個子塊的大小小於、等於或小於等於另一預定義閾值,則當前塊滿足預定義準則。子塊的大小對應於亮度樣本大小或色度樣本大小。在另一實施方式中,一個準則與當前塊的大小有關,而另一準則與用於分割當前塊的劃分類型有關。
在一些實施方式中,預定義準則與當前塊的大小、當前塊的寬度、當前塊的高度、當前塊的深度、當前塊的相鄰塊的平均深度、用於分割當前塊的劃分類型、從當前塊劃分出的一個子塊的大小、從當前塊劃分出的一個子塊的寬度、從當前塊劃分出的一個子塊的高度、從當前塊劃分出的一個子塊的深度、和從當前塊劃分出的一個子塊的相鄰塊的平均深度中的一項或組合有關。大小、寬度和高度對應於亮度樣本大小、亮度樣本寬度和亮度樣本高度,或色度樣本大小、色度樣本寬度和色度樣本高度。處理方法的一些實施方式還檢查從當前塊劃分出的一個子塊是否滿足一個或更多個第二準則,並且如果當前塊滿足一個或更多個預定義準則並且子塊滿足一個或更多個第二準則,則當前塊被設置為根塊。例如,一個或更多個第二準則與從當前塊劃分出的子塊的大小、寬度、高度、寬度和高度二者、或深度有關。如果當前塊被設置為根塊,則不利用對當前塊進行了檢查的一個或更多個預定義準則以及一個或更多個第二準則來檢查從當前塊劃分出的所有其他子塊。
在一些實施方式中,處理方法還包括檢查當前塊的父塊是否滿足第二準則,並且如果當前塊滿足一個或更多個預定義準則並且父塊滿足第二準則,則當前塊被設置為根塊。
當對根塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼時,將根塊中的亮度樣本或根塊中的色度樣本視為不可用,並且當需要這些亮度或色度樣本來預測根塊中的一個或更多個塊時,可以應用樣本填充處理或幀内邊界樣本生成處理來生成不可用的樣本。在一些示例中,通過複製不可用的樣本的鄰近樣本或使用一個或更多個預設值來生成不可用的樣本。
如果當前塊被設置為根塊,則將根塊位置設置為當前塊的左上位置,並且將根塊的寬度和高度設置為等於當前塊的寬度和高度。
如果當前塊被設置為根塊,則處理方法的一些實施方式從當前塊的相鄰塊的幀內預測模式中得到當前塊中的一個或更多個塊的一個或更多個顏色分量的最可能模式(MPM)。
本公開的方面還提供一種視頻編碼系統中的設備,該設備用於接收與當前塊相關聯的輸入資料,在分割期間檢查當前塊是否滿足一個或更多個預定義準則,如果當前塊滿足預定義準則,則當前塊被設置為根塊,並且如果當前塊被設置為根塊,則使用當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對當前塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼。
本公開的各方面還提供一種非暫時性電腦可讀介質,該非暫時性電腦可讀介質存儲程式指令,所述程式指令用於使裝置的處理電路通過基於一個或更多個預定義準則確定參考樣本來對視頻資料進行編碼或解碼。通過閱讀下面對具體實施方式的描述,本發明的其他方面和特徵對於本領域普通技術人員將變得明顯。
容易理解的是,如本文總體上描述並且在附圖中例示的,本發明的模組和元件可以以多種不同的配置來設置和設計。因此,如附圖中所表示的,對本發明的系統和方法的實施方式的以下更詳細的描述並非旨在限制所要求保護的本發明的範圍,而僅是本發明的所選擇的實施方式的表示。
在整個說明書中,對“一個實施方式”,“一些實施方式”或類似用語的引用意味著結合這些實施方式描述的特定特徵、結構或特性可以被包括在本發明的至少一個實施方式中。因此,在整個說明書中各處出現的短語“在一個實施方式中”或“在一些實施方式中”並不一定全都指同一實施方式,這些實施方式可以單獨實現或與一個或更多個其他實施方式結合實現。此外,所描述的特徵、結構或特性可以在一個或更多個實施方式中以任何合適的方式組合。但是,相關領域的技術人員將認識到,可以在沒有一個或更多個特定細節的情況下,或者在沒有其他具體方法、元件等的情況下實施本發明。在其他情況下,未示出或未詳細描述公知的結構或操作以避免模糊本發明的方面。
當前塊的一個或更多個顏色分量的相鄰重構樣本被用作參考樣本,以預測在幀內預測中編碼的當前塊。處理輸送量受塊大小的限制,因為如果當前塊在幀內預測中被編碼,則處理器最多只能一次預測整個當前塊。對多個幀內編碼塊進行並行處理被禁止,因為直到相應的相鄰重構樣本可用為止,對這些幀內編碼塊中的每個的預測無法進行。當視頻圖片能夠被分割為小塊時,可以提高編碼性能,但是,如果存在通過幀內預測而預測的小塊,則不能提高處理輸送量。本發明的實施方式通過為在幀內預測中編解碼的塊或由需要相鄰重構樣本或相鄰資訊的任何編碼工具處理的塊設置根塊來提高處理輸送量,因此在根塊中的一個或更多個塊的一個或更多個顏色分量內共用沿著根塊邊界的相同的相鄰參考樣本。
在一些實施方式中,根塊由一個或更多個預定義準則或預定義大小定義,並且該根塊用於確定以正常幀內模式、以在幀內預測中從亮度預測色度的線性模型(LM)模式、以及以幀內幀間模式編碼的塊的參考樣本。用於定義根塊的示例性限制限制了所有根塊在幀邊界內,因此不允許根塊超過幀邊界。
如果當前塊滿足預定義準則,則當前塊被設置為根塊。在本發明的各個實施方式中,在分割期間用一個或更多個預定義準則來檢查當前塊,並且如果當前塊滿足一個或更多個預定義準則,則當前塊被設置為根塊。如果當前塊被設置為根塊,則當前塊中的一個或更多個塊的一個或更多個顏色分量使用沿著當前塊的邊界的相鄰重構樣本進行幀內預測,或者使用需要相鄰重構樣本或相鄰資訊的任何工具。當前塊的一個或更多個顏色分量可以被分割為多個塊,並且一旦當前塊被設置為根塊,當前塊內的相鄰重構樣本或相鄰資訊就不能被當前塊中的任何塊使用。例如,當當前塊被設置為根塊時,當前塊中的每個色度塊不能取得當前塊內的相鄰樣本作為用於幀內預測的參考樣本。如果當前塊已經滿足預定義準則,則將不利用相同的預定義準則來檢查當前塊中的一個或更多個塊的一個或更多個顏色分量。如果當前塊不滿足一個或更多個預定義準則,則當前塊中的每個塊的一個或更多個顏色分量使用沿著當前塊中的每個塊的邊界的相鄰重構樣本。例如,如果當前塊被設置為根塊,則編碼器或解碼器根據幀內預測模式和當前塊的一個或更多個顏色分量的相鄰重構樣本,為當前塊中的每個塊生成幀內預測器。否則,如果當前塊不是根塊,則編碼器或解碼器根據幀內預測模式和當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本,為當前塊中的每個塊生成幀內預測器。
根據一個實施方式,一個或更多個顏色分量包括亮度分量和色度分量,並且根據其他實施方式,一個或更多個顏色分量僅包括亮度分量,或色度分量中的一個或更多個。在示例性實施方式中,如果當前塊被設置為根塊,則使用當前塊的一個或更多個色度分量的相鄰重構樣本作為參考樣本來對當前塊中的一個或更多個塊的一個或更多個色度分量進行編碼或解碼,並且如果當前塊被設置為根塊,則使用當前塊中的每個塊的亮度分量的相鄰重構樣本作為參考樣本來對當前塊中的每個塊的亮度分量進行編碼或解碼。
在一個實施方式中,定義了與當前塊相對應的根塊,以得到用於通過幀內預測對當前塊進行編碼或解碼的最可能模式(MPM)。根據HEVC標準,當前塊內的每個塊的MPM是從當前塊中的每個塊的上方和左側相鄰塊的幀內預測模式得到的,其中上方或左側相鄰塊也可以在當前塊內。在該實施方式中,如果當前塊被設置為根塊,則從當前塊的上方和左側相鄰塊的幀內預測模式得到當前塊內的每個塊的MPM。 同一根塊內的相鄰塊的幀內預測模式不能用於得到MPM。
在利用由一個或更多個預定義準則定義的根塊的一些其他實施方式中,對於根塊內的塊,諸如預測器生成處理的樣本重構處理不允許使用根塊內的樣本。樣本可以是指一個或更多個顏色分量的預測樣本或重構樣本。樣本重構處理使用根塊的邊界樣本(boundary sample)作為參考樣本,以處理根塊內的所有塊。
在以下實施方式中,幀內預測被稱為使用相鄰重構樣本或相鄰資訊的代表性工具;然而,下面的各個實施方式可以應用於需要相鄰的重構樣本或相鄰資訊以進行編碼或解碼的任何其他編碼工具。
在一個實施方式中,一旦當前塊被設置為根塊,就不能將該當前塊的一個或更多個顏色分量分割為子塊,並且當前塊中的唯一一個塊使用當前塊的一個或更多個顏色分量的相鄰重構樣本進行幀內預測。在該實施方式中,僅在當前塊不是根塊時,才可以將該當前塊的一個或更多個顏色分量進一步分割為子塊。在另一實施方式中,可以將當前塊的一個或更多個顏色分量進一步分割為子塊,而不管該當前塊是否是根塊,並且所有子塊都使用當前塊的一個或更多個顏色分量的相鄰重構樣本作為用於幀內預測的參考樣本。
準則的實施方式與當前塊的大小有關,例如,如果當前塊的大小小於等於預定義閾值,則當前塊滿足準則;在另一示例中,如果當前塊的大小小於預定義閾值,則該當前塊準則滿足準則;並且在又一示例中,如果當前塊的大小等於預定義閾值,則當前塊滿足準則。該大小可以是指亮度樣本大小或色度樣本大小。一旦當前塊滿足準則,當前塊內的一個或更多個塊的一個或更多個顏色分量就共用沿著當前塊邊界的參考樣本以進行幀內預測,並且在當前塊內的一個或更多個塊的一個或更多個顏色分量中均不檢查相同的準則。針對大小的預定義閾值的一些示例是4、8、16、32、64、128、256、512、1024、2048和4096個樣本。本發明可以應用於亮度分量、色度分量、或亮度分量和色度分量二者。在僅將本發明應用於色度分量的實施方式中,當前塊是色度塊,並且如果當前塊的大小等於預定義閾值(例如,16個色度樣本),則當前塊內的一個或更多個塊的一個或更多個顏色分量將使用沿著當前塊的相同的相鄰重構樣本作為用於幀內預測的參考樣本。可以將當前塊進一步劃分為較小的編碼塊,但是這些較小的編碼塊共用相同參考樣本來進行幀內預測,並且在當前塊中的任何編碼塊中都不再次檢查相同準則。
該準則的另一實施方式與當前塊的寬度或高度有關,例如,如果當前塊的寬度小於等於預定義閾值,則當前塊滿足準則;在另一示例中,如果當前塊的寬度小於預定義閾值,則當前塊滿足準則;並且在又一示例中,如果當前塊的寬度等於預定義閾值,則當前塊滿足準則。當前塊的寬度或高度對應於當前塊的亮度樣本寬度或亮度樣本高度,或當前塊的色度樣本寬度或色度樣本高度。一旦當前塊滿足準則,當前塊中一個或更多個塊的一個或更多個顏色分量就使用沿著當前塊邊界的參考樣本進行幀內預測,並且在當前塊中的一個或更多個塊的一個或更多個顏色分量中不檢查相同的準則。與當前塊的高度有關的準則的示例檢查當前塊的高度是否小於或等於預定義閾值,並且如果當前塊的高度小於或等於預定義閾值,則當前塊滿足準則。在另一示例中,如果當前塊的高度等於預定義閾值,或者如果當前塊的高度小於預定義閾值,則當前塊滿足準則。類似地,當前塊中的一個或更多個塊的一個或更多個顏色分量使用沿著當前塊邊界的參考樣本進行幀內預測,並且在當前塊中滿足準則時,在當前塊中的一個或更多個塊的一個或更多個顏色分量中不執行相同的檢查。針對寬度或高度的預定義閾值的一些示例是2、4、8、16、32、64和128個亮度或色度樣本。
準則的其他一些實施方式與當前塊的大小和寬度或高度有關,例如,如果當前塊的大小小於或等於預定義閾值A,或當前塊的寬度或高度小於或等於預定義閾值B,則當前塊滿足準則,在另一示例中,如果當前塊的大小小於預定義閾值A,或者當前塊的寬度或高度小於預定義閾值B,則當前塊滿足準則,並且在又一示例中,如果當前塊的大小等於預定義閾值A,或者當前塊的寬度或高度等於預定義閾值B,則當前塊滿足準則。一旦當前塊滿足準則,當前塊內的一個或更多個塊的一個或更多個顏色分量就共用沿著當前塊的邊界的參考樣本以進行幀內預測,並且在當前塊內的一個或更多個塊的任何一個或更多個顏色分量中不檢查相同準則。針對大小的預定義閾值A的一些示例是4、8、16、32、64、128、256、512、1024、2048和4096個亮度或色度樣本。針對寬度或高度的預定義閾值B的一些示例是2、4、8、16、32、64和128個亮度或色度樣本。本發明可以應用於亮度分量、色度分量、或亮度和色度分量二者。在將本發明應用於僅色度分量的實施方式中,當前塊是色度塊,並且如果當前塊的大小等於預定義閾值A(例如,16個色度樣本),或當前塊的寬度等於預定義閾值B(例如,2個色度樣本),則當前塊內的一個或更多個塊的一個或更多個顏色分量將使用沿著當前塊的相同的相鄰重構樣本作為用於幀內預測的參考樣本。可以將當前塊進一步劃分為較小的編碼塊,但是這些較小的編碼塊共用相同參考樣本來進行幀內預測,並且在當前塊中的任何編碼塊中都不再次檢查相同準則。
預定義準則的一些其他實施方式與當前塊的寬度和高度二者有關。當寬度滿足一個預定義準則並且高度滿足一個預定義準則時,當前塊被設置為根塊,並且當前塊中的一個或更多個塊的一個或更多個顏色分量共用當前塊的參考樣本來進行幀內預測。在一個示例中,用於共用相鄰參考樣本的根塊總是正方形,而在另一示例中,用於共用相鄰參考樣本的根塊可以是正方形或非正方形。在一個示例性實施方式中,對於寬度大於或等於其高度的當前塊,如果寬度小於預定義閾值A並且高度小於另一預定義閾值B,則當前塊中的一個或更多個子塊使用沿著當前塊的邊界的參考樣本進行幀內預測,並且將不在一個或更多個子塊中檢查準則。寬度的預定義閾值A的一些示例是2、4、8、16、32、64和128個亮度樣本或色度樣本,並且高度的預定義閾值B的一些示例是2、4、8、16、32、64和128個亮度樣本或色度樣本。閾值A和閾值B的組合(thresA, thresB)可以是(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8,4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)或(128, 64)。例如,閾值A和閾值B的組合為(128, 16),那麼大小等於64×8的當前塊滿足由兩個閾值定義的準則。例如,如果進一步劃分當前塊,則通過垂直二叉樹分割將當前塊劃分為兩個32×8子塊,當前塊中的子塊使用沿著當前塊的邊界的相同參考樣本進行幀內預測,並且不在子塊中檢查由兩個閾值定義的準則。在另一實施方式中,當前塊的高度大於或等於其寬度,並且如果該高度小於預定義閾值A並且該寬度小於另一預定義閾值B,則當前塊滿足預定義準則。如果當前塊滿足預定義準則,則當前塊中的所有子塊的一個或更多個顏色分量都使用沿著當前塊的邊界的參考樣本進行幀內預測,並且不在子塊的一個或更多個顏色分量中檢查預定義準則。針對高度的閾值A的一些示例是2、4、8、16、32、64和128個亮度樣本或色度樣本,針對寬度的閾值B的一些示例是2、4、8、16、32、64和128個亮度樣本或色度樣本。閾值A和閾值B的組合(thresA, thresB)可以是(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8, 4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)或(128, 64)。例如,當高度小於或等於64且寬度小於或等於8時,塊滿足預定義準則,並且在此示例中,將8 × 64的當前塊通過水平二叉樹分割進一步劃分為兩個8 × 32的子塊,這兩個子塊使用沿著8×64當前塊的邊界的相同參考樣本進行幀內預測,並且由於當前塊已經滿足了預定義準則,因此不在子塊中檢查預定義準則。
準則的一些其他實施方式與當前塊的大小、寬度和高度有關,例如,如果當前塊的大小小於或等於預定義閾值A,或者當前塊的寬度和高度分別小於或等於預定義閾值B和閾值C,則當前塊滿足準則,在另一示例中,如果當前塊的大小小於預定義閾值A,或者當前塊的寬度和高度分別小於預定義閾值B和閾值C,則當前塊滿足準則,並且在又一示例中,如果當前塊的大小等於預定義閾值A,或者當前塊的寬度和高度分別等於預定的閾值B和閾值C,則當前塊滿足準則。一旦當前塊滿足準則,當前塊內的一個或更多個塊的一個或更多個顏色分量就共用沿著當前塊的邊界的參考樣本以進行幀內預測,並且在當前塊的一個或更多個塊的任何一個或更多個顏色分量中不檢查相同準則。針對大小的預定義閾值A的一些示例是4、8、16、32、64、128、256、512、1024、2048和4096個亮度或色度樣本。針對寬度和高度的預定義閾值B和閾值C的一些示例是2、4、8、16、32、64和128個亮度或色度樣本。本發明可以應用於亮度分量、色度分量或亮度和色度分量二者。在將本發明應用於僅色度分量的實施方式中,當前塊是色度塊,並且如果當前塊的大小等於預定義閾值A(例如,16個色度樣本),或當前塊的寬度等於預定義閾值B(例如2個色度樣本),當前塊的高度等於預定義閾值C(例如,8個色度樣本),當前塊內的一個或更多個塊的一個或更多個顏色分量將使用沿著當前塊的相同的相鄰重構樣本作為參考樣本來進行幀內預測。可以將當前塊進一步劃分為較小的編碼塊,但是這些較小的編碼塊共用相同參考樣本來進行幀內預測,並且在當前塊中的任何編碼塊中都不再次檢查相同準則。
在一些其他實施方式中,預定義準則與當前塊的深度有關,例如,該深度是四叉樹(QT)深度或多樹(MT)深度。在一個實施方式中,當當前塊的QT深度、MT深度或QT深度和MT深度二者大於、等於或大於等於預定義閾值時,當前塊滿足預定義準則。如果當前塊滿足預定義準則,則當前塊中的一個或更多個子塊共用沿著當前塊邊界的參考樣本以進行幀內預測,並且在當前塊中的一個或更多個子塊中不檢查相同預定義準則。針對深度的可能的預定義閾值可以是1、2、3、4或5。例如,預定義閾值是2,並且將深度大於2的塊設置為根塊,以共用沿著該根塊的參考樣本。在分割期間,如果進一步劃分深度大於2的當前塊,則從當前塊劃分出的子塊使用沿著當前塊邊界的相同的參考樣本進行幀內預測,並且在子塊中不檢查與深度有關的準則。在另一示例中,預定義準則與根據QT深度和MT深度二者計算出的加權深度有關,並且如果加權深度大於預定義閾值,則當前塊滿足預定義準則。可以通過avg_depth = (A * QT depth + (2^B – A)) * MT depth >> B)來計算加權深度ave_depth。在一個示例中,A等於3且B等於3。如果當前塊已經滿足預定義準則,則一個或更多個子塊使用沿著當前塊的邊界的參考樣本來進行幀內預測,並且對於一個或更多個子塊不檢查預定義準則。
在又一實施方式中,預定義準則與當前塊的相鄰塊的平均QT深度或平均MT深度有關。例如,如果當前塊的相鄰塊的平均QT深度或MT深度大於預定義閾值,則當前塊滿足預定義準則,並且如果當前塊滿足預定義準則,則當前塊中的一個或更多個子塊使用沿著當前塊邊界的參考樣本來進行幀內預測。針對相鄰塊的平均QT深度或平均MT深度的預定義閾值的一些示例為1、2、3、4和5。
根塊的左上位置為sharedRootPos,根塊的寬度為sharedRootWidth,根塊的高度為sharedRootHeight。在一個實施方式中,如果當前塊滿足一個或更多個預定義準則並且尚未設置根塊,則在分割期間當前塊被設置為根塊。如果當前塊被設置為根塊,則將根塊的左上位置設置為當前塊的左上位置,並且根塊的寬度和高度等於當前塊的寬度和高度;否則不設置根塊。
如果一個子塊滿足預定義準則,則將當前塊設置為根塊。在本發明的一些實施方式中,通過將預定義閾值與從當前塊劃分出的一個子塊進行比較來確定當前塊滿足預定義準則中的一個預定義準則。如果根據從當前塊中劃分出的一個子塊而言當前塊滿足預定義準則,則當前塊被設置為根塊以共用參考樣本。如果當前塊被設置為根塊,則當前塊的所有子塊都將使用當前塊的參考樣本。預定義準則的實施方式與一個子塊的大小有關,並且該大小對應於亮度樣本大小或色度樣本大小。例如,如果從當前塊劃分出的一個子塊的大小小於、等於、或小於等於預定義閾值,則當前塊被設置為根塊,並且針對該大小的預定義閾值可以是4、8、16、32、64、128、256、512,1024、2048或4096個亮度樣本或色度樣本。
第9A圖和第9B圖例示了根據與當前塊中的子塊的大小有關的預定義準則將當前塊設置為根塊的兩個示例。在第9A圖和第9B圖所示的示例中,預定義準則檢查當前塊中任何子塊的大小是否小於64個亮度樣本。在第9A圖中,大小等於64個亮度樣本的當前塊92通過四叉樹分割被劃分成四個子塊,並且每個子塊的大小是16個亮度樣本。第9A圖中的當前塊92滿足預定義準則,因為子塊的大小小於64,因此將當前塊92設置為根塊以共用參考樣本。如第9A圖所示,當前塊92中的所有四個子塊(或稱為當前塊92內的所有四個塊)使用當前塊的參考樣本94來進行幀內預測。第9B圖中的當前塊96的大小是128個亮度樣本,並且通過垂直三叉樹分割將當前塊96劃分成三個子塊。子塊的大小為32、64和32個亮度樣本。當前塊96被設置為根塊以共用參考樣本,因為至少一個子塊的大小小於64個亮度樣本。當前塊96中的三個子塊使用當前塊的參考樣本98來進行幀內預測。
在另一示例中,第9A圖和第9B圖例示了根據與當前塊中的子塊的對應色度大小有關的預定義準則來將當前塊設置為根塊的兩個示例。在第9A圖和第9B圖所示的示例中,預定義準則檢查當前塊中任何子塊的色度大小是否小於16個色度樣本。在第9A圖中,通過四叉樹分割將大小等於16個色度樣本的當前塊92劃分為四個子塊,並且每個子塊的色度大小為4個色度樣本。第9A圖中的當前塊92滿足預定義準則,因為子塊的色度大小小於16個色度樣本,因此將當前塊92設置為根塊以共用參考樣本。在一個實施方式中,將僅使用根塊相鄰樣本來進行幀內預測應用於僅色度分量。如第9A圖所示,當前塊92中的一個或更多個色度塊使用當前塊的參考樣本94進行幀內預測,並且當前塊92中的一個或更多個亮度塊使用沿著每個亮度塊的邊界的參考樣本。第9B圖中的當前塊96的大小是32個色度樣本,並且通過垂直三叉樹分割將當前塊96劃分成三個子塊。子塊的色度大小為8、16和8個色度樣本。當前塊96被設置為根塊以共用參考樣本,因為至少一個子塊的色度大小小於16個色度樣本。當前塊96中的色度塊使用當前塊的參考樣本98進行幀內預測,並且當前塊92中的一個或更多個亮度塊使用沿著每個亮度塊的邊界的參考樣本。
在另一實施方式中,用預定義閾值檢查當前塊中的一個子塊的寬度或高度,以確定當前塊是否滿足預定義準則。例如,如果當前塊中的一個子塊的寬度小於、等於或小於等於預定義閾值,則當前塊滿足預定義準則。在一些其他示例中,如果當前塊中的一個子塊的高度小於、等於或小於等於預定義閾值,則當前塊滿足準則。如果當前塊滿足預定義準則,則當前塊中的所有子塊均使用沿著當前塊邊界的參考樣本進行幀內預測,並且不在當前塊的其他子塊中檢查預定義準則。取決於當前塊是亮度塊還是色度塊,針對寬度或高度的預定義閾值可以是4、8、16、32、64和128個亮度樣本或色度樣本。在示例中,預定義閾值為8個色度樣本,並且如果當前塊中的一個子塊的寬度小於8個色度樣本,則當前塊滿足該準則,如果將8 × 8色度塊劃分成兩個4 × 8子塊,則這兩個子塊使用沿著8 × 8色度塊的邊界的參考樣本,而不是沿子塊的邊界的參考樣本,並且在8 × 8色度塊中的其他4×8子塊中不檢查相同準則。在另一示例中,如果當前塊中的一個子塊的高度小於或等於8個色度樣本,則當前塊滿足準則。在此示例中,如果將8×16色度塊進一步劃分為兩個2×16子塊和一個4×16子塊,則這三個子塊將使用沿著8×16色度塊的邊界的參考樣本,並且不在其他子塊中檢查該準則。
在另一實施方式中,利用預定義閾值檢查當前塊中的一個子塊的大小和寬度或高度,以確定當前塊是否滿足預定義準則。例如,如果當前塊中的一個子塊的大小小於、等於或小於等於預定義閾值A,或者當前塊中的一個子塊的寬度小於、等於或小於等於預定義閾值B,則當前塊滿足預定義準則。在一些其他示例中,如果當前塊中的一個子塊的大小小於、等於或小於等於預定義閾值A,或者當前塊中的一個子塊的高度小於、等於或小於等於預定義閾值B,則當前塊滿足準則。如果當前塊滿足預定義準則,則當前塊中的所有子塊使用沿著當前塊邊界的參考樣本以進行幀內預測,並且在當前塊的其他子塊中不檢查預定義準則。取決於當前塊是亮度塊還是色度塊,針對大小的預定義閾值A可以是4、8、16、32、64、128、256、512、1024、2048或4096個亮度樣本或色度樣本。取決於當前塊是亮度塊還是色度塊,針對寬度或高度的預定義閾值B可以是4、8、16、32、64和128個亮度樣本或色度樣本。在示例中,預定義閾值A為16個色度樣本,並且預定義閾值B為4個色度樣本,並且如果當前塊中的一個子塊的大小小於或等於16個色度樣本,或當前塊中的一個子塊的寬度小於或等於4個色度樣本,則當前塊滿足該準則。在一個示例中,如果將8×8色度塊分成兩個4×8子塊,則這兩個子塊中的每個使用沿著8×8色度塊的邊界的參考樣本,而不使用沿著子塊的邊界的參考樣本,並且在8×8色度塊的其他4×8子塊中不檢查相同準則。在另一示例中,如果將8×8色度塊劃分成兩個2× 8子塊和一個4×8子塊,則這三個子塊中的每個都使用沿著8×8色度塊的邊界的參考樣本,而不使用沿著子塊邊界的參考樣本,並且在8×8色度塊的所有子塊中不檢查相同準則。
在另一實施方式中,預定義準則與當前塊的子塊的寬度和高度二者有關。例如,如果一個子塊的寬度小於預定義閾值A且該子塊的高度小於另一預定義閾值B,則當前塊被設置為根塊,其中,當前塊中的子塊的寬度大於或等於其高度。當當前塊被設置為根塊時,當前塊中的所有子塊共用當前塊的參考樣本。針對寬度的閾值A和針對高度的閾值B的組合(thresA, thresB)可以是(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8, 4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)和(128, 64)。在另一示例中,如果一個子塊的高度小於預定義閾值A且該子塊的寬度小於另一預定義閾值B,則當前塊被設置為根塊,其中,當前塊中的該子塊的高度大於或等於其寬度。當當前塊被設置為根塊時,當前塊中的所有子塊共用當前塊的參考樣本。針對高度的閾值A和針對寬度的閾值B的組合(thresA, thresB)可以是(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8, 4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)和(128, 64)。
在另一實施方式中,預定義準則與當前塊的子塊的大小以及寬度和高度二者有關。例如,如果子塊中的一個子塊的大小小於預定義閾值A,或者一個子塊的寬度小於預定義閾值B且該子塊的高度小於另一預定義閾值C,則當前塊被設置為根塊,其中,當前塊中的子塊的高度大於或等於其寬度。當當前塊被設置為根塊時,當前塊中的所有子塊共用當前塊的參考樣本。取決於當前塊是亮度塊還是色度塊,針對大小的預定義閾值A可以是4、8、16、32、64、128、256、512、1024、2048或4096個亮度樣本或色度樣本。針對寬度的閾值B和針對高度的閾值C的組合(thresC, thresB)可以是(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8, 4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)和(128, 64)。在另一示例中,如果子塊中的一個子塊的大小小於預定義閾值A,或者一個子塊的高度小於預定義閾值B且該子塊的寬度小於另一預定義閾值C,則當前塊被設置為根塊,其中,當前塊中的子塊的寬度大於或等於其高度。當當前塊被設置為根塊時,當前塊中的所有子塊共用當前塊的參考樣本。取決於於當前塊是亮度塊還是色度塊,針對大小的預定義閾值A可以是4、8、16、32、64、128、256、512、1024、2048或4096個亮度樣本或色度樣本。針對寬度的閾值B和針對高度的閾值C的組合(thresB, thresC)可以是(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8, 4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)和(128, 64)。
在又一實施方式中,當從當前塊劃分出的一個子塊的QT深度、MT深度或QT深度和MT深度二者大於、等於或大於等於預定義閾值時,當前塊滿足預定義準則。如果當前塊滿足預定義準則,則當前塊中的所有子塊均使用沿著當前塊邊界的參考樣本,並且不在其他子塊中檢查預定義準則。例如,當當前塊中任何子塊的QT深度或MT深度大於、等於或大於等於預定義閾值時,在分割期間當前塊被設置為根塊。當當前塊被設置為根塊以共用參考樣本時,所有子塊都使用當前塊的參考樣本來進行幀內預測。針對深度的預定義閾值可以是1、2、3、4或5。在另一實施方式中,如果由任何子塊的QT深度和MT深度二者計算出的平均深度大於、等於或大於等於預定義閾值時,則當前塊被設置為根塊,並且當當前塊是根塊時,該當前塊中的所有子塊都使用當前塊的參考樣本。閾值可以是1、2、3、4或5。平均深度可以通過avg_depth = (A * QT depth + (2^B - A) * MT depth >> B)來計算。在一個示例中,A等於3且B等於3。
預定義準則的另一實施方式與從當前塊分割出的一個子塊的相鄰塊的平均QT深度或MT深度有關。如果一個子塊的相鄰塊的平均QT深度或MT深度大於、等於或大於等於預定義閾值,則當前塊被設置為根塊。當當前塊被設置為根塊時,該當前塊中的所有子塊均使用當前塊的參考樣本,並且針對相鄰塊的平均QT深度或MT深度的預定義閾值可以為1、2、3、4或5。
在一個實施方式中,如果從當前塊劃分出的一個子塊滿足一個或更多個預定義準則並且尚未設置根塊,則在分割期間當前塊被設置為根塊。如果當前塊被設置為根塊,則將根塊的左上位置設置為當前塊的左上位置,並且根塊的寬度和高度等於當前塊的寬度和高度;否則不設置根塊。
基於多個準則將當前塊設置為根塊。在本發明的各個實施方式中,用一個或更多個準則來檢查當前塊,並且如果滿足一個或更多個準則,則當前塊被設置為根塊以共用參考樣本。大部分先前描述的實施方式根據僅一個準則來確定當前塊是否是根塊,而在以下實施方式中,檢查多個準則以判定當前塊是否是根塊以共用參考樣本。如果當前塊滿足準則A並且從當前塊劃分出的一個子塊滿足準則B,則進行多準則檢查的示例性實施方式將當前塊設置為根塊。一旦當前塊被設置為根塊,當前塊內的所有子塊使用當前塊的一個或更多個顏色分量的相鄰重構樣本以進行幀內預測。當前塊被設置為根塊之後,相同的多準則檢查將不應用於當前塊的子塊。在一個實施方式中,如果當前塊的大小滿足準則A並且從當前塊劃分出的一個子塊的大小滿足準則B,則當前塊是根塊。例如,如果當前塊的大小小於或等於預定義閾值,並且至少一個子塊的大小小於或等於另一預定義閾值,則當前塊被設置為根塊。在一些另選示例中,如果當前塊的大小等於預定義閾值並且至少一個子塊的大小等於另一預定義閾值,則當前塊被設置為根塊,或者如果當前塊的大小小於預定義閾值並且至少一個子塊的大小小於另一預定義閾值,則當前塊被設置為根塊。如果當前塊是根塊,則所有子塊將使用當前塊的參考樣本來進行幀內預測。針對大小的預定義閾值可以是4、8、16、32、64、128、256、512、1024、2048或4096個亮度樣本或色度樣本。
在另一實施方式中,如果當前塊的寬度大於、等於或大於等於預定義閾值,並且至少一個子塊的寬度小於、等於或小於等於另一預定義閾值,則當前塊被設置為根塊,其中,針對寬度的每個預定義閾值可以是4、8、16、32、64或128個亮度樣本或色度樣本。當當前塊被設置為根塊時,所有子塊使用當前塊的參考樣本來進行幀內預測。在另一實施方式中,如果當前塊的高度等於預定義閾值並且任何子塊的高度小於另一預定義閾值,則當前塊被設置為根塊。在又一實施方式中,如果當前塊的寬度和高度滿足準則A和B,並且當前塊中的一個子塊的寬度和高度滿足準則C和D,則當前塊被設置為根塊。當前塊和從當前塊分割出的子塊的大小可以用深度表示,因此在一些實施方式中,如果當前塊的QT深度或MT深度小於或等於預定義閾值並且至少一個子塊的QT深度或MT深度大於或等於另一預定義閾值,則在分割期間當前塊被設置為根塊。如果當前塊被設置為根塊,則當前塊中的所有子塊都使用當前塊的參考樣本。在一個實施方式中,如果通過當前塊的QT深度和MT深度二者計算出的第一平均深度等於預定義閾值並且通過任一個子塊的QT深度和MT深度計算出的第二平均深度等於另一預定義閾值,則當前塊被設置為根塊。平均深度的示例由avg_depth = (A * QT depth + (2^B - A) * MT depth >> B)計算得出,其中A和B為整數。在另一實施方式中,如果當前塊的平均相鄰QT深度或MT深度小於或等於預定義閾值並且至少一個子塊的平均相鄰QT深度或MT深度大於或等於另一預定義閾值,則當前塊被設置為根塊。如果當前塊被設置為根塊,則所有子塊使用當前塊的參考樣本。深度的預定義閾值可以是1、2、3、4或5。
在另一實施方式中,如果當前塊的大小大於、等於或大於等於預定義閾值A,或者當前塊的寬度大於、等於或大於等於預定義閾值B,並且當前塊的大小小於、或等於、或小於等於預定義閾值A’,或者至少一個子塊的寬度小於、或等於、或小於等於另一預定義閾值B’,則當前塊被設置為根塊,其中,針對大小的每個預定義閾值可以是4、8、16、32、64、128、256、512、1024、2048或4096個亮度樣本或色度樣本,並且對於寬度的預定義閾值可以是2、4、8、16、32、64或128個亮度樣本或色度樣本。當當前塊被設置為根塊時,所有子塊使用當前塊的參考樣本來進行幀內預測。
在另一實施方式中,如果當前塊的大小大於、等於或大於等於預定義閾值A,或者當前塊的寬度大於、等於或大於等於預定義閾值B並且當前塊的高度大於、等於或大於等於預定義閾值C,並且當前塊的大小小於、或等於、或小於等於預定義閾值A’,或至少一個子塊的寬度小於、或等於、或小於等於另一預定義閾值B’並且至少一個子塊的高度小於、或等於、或小於等於另一預定義閾值C’,則當前塊被設置為根塊,其中,針對大小的每個預定義閾值可以是4、8、16、32、64、128、256、512、1024、2048或4096個亮度樣本或色度樣本,並且針對寬度或高度的預定義閾值可以是2、4、8、16、32、64或128個亮度樣本或色度樣本。當當前塊被設置為根塊時,所有子塊使用當前塊的參考樣本來進行幀內預測。
在一些其他實施方式中,如果當前塊滿足準則A且其父塊滿足準則B,則當前塊被設置為根塊。當前塊的相鄰重構樣本用於當前塊內的所有子塊,並且在一旦前塊被設置為根塊,準則檢查就將不應用於所有子塊。例如,如果當前塊的大小小於或等於第一閾值並且其父塊的大小大於第二閾值,則當前塊被設置為根塊,其中第一或第二閾值可以是4、8、16、32、64、128、256、512、1024、2048或4096個亮度樣本或色度樣本。在另一實施方式中,如果當前塊的寬度小於或等於預定義閾值並且當前塊的父塊的寬度大於另一預定義閾值,則當前塊被設置為根塊,其中預定義閾值可以是4、8、16、32、64或128個亮度樣本或色度樣本。在實施方式中,在當前塊的寬度大於或等於其高度時,如果父塊的寬度大於預定義閾值A並且父塊的高度大於另一預定義閾值B,並且當前塊的寬度小於或等於預定義閾值A並且當前塊的高度小於或等於預定義閾值B,則當前塊被設置為根塊。預定義閾值A可以為2、4、8、16、32、64或128個亮度樣本或色度樣本,並且預定義閾值B可以是2、4、8、16、32、64或128個亮度樣本或色度樣本。閾值A和閾值B的組合(thresA, thresB)可以為(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8, 4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)或(128, 64)。
在另一實施方式中,如果父塊的QT深度或MT深度小於或等於預定義閾值並且當前塊的QT深度或MT深度大於或等於預定義閾值,則當前塊被設置為根塊用於共用參考樣本。如果當前塊被設置為根塊,則當前塊中的一個或更多個子塊使用當前塊的參考樣本。針對深度的預定義閾值可以是1、2、3、4或5。在另一實施方式中,如果父塊的平均相鄰塊QT深度或MT深度小於或等於預定義閾值並且當前塊的平均相鄰塊QT深度或MT深度大於或等於預定義閾值,則當前塊被設置為根塊。針對平均相鄰塊QT深度或MT深度的預定義閾值可以是1、2、3、4或5。
在進行多準則檢查的一些實施方式中,如果當前塊滿足兩個或更多個準則,則當前塊被設置為根塊。在應用多準則檢查的實施方式中,如果當前塊的大小滿足準則A並且當前塊的分割滿足準則B,則當前塊被設置為根塊。當前塊的大小對應於亮度樣本大小或色度樣本大小。例如,除了利用準則A檢查當前塊的大小以外,還利用準則B檢查用於對當前塊進行分割的劃分標誌或應用於當前塊的劃分類型,並且如果兩個準則均被滿足則當前塊被設置為根塊。如果當前塊被設置為根塊,則當前塊的一個或更多個子塊使用當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來進行幀內預測。一旦設置了根塊,就不將多個準則檢查應用於當前塊中的一個或更多個子塊。劃分標誌可以指示是否使用特定的劃分類型來分割當前塊,例如,如果劃分標誌為真,則應用四叉樹分割來分割當前塊。劃分類型的一些示例是四叉樹分割、水平二叉樹分割、垂直二叉樹分割、水平三叉樹分割和垂直三叉樹分割。如果當前塊不是根塊,則當前塊中的每個子塊使用當前塊中的該塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來進行幀內預測。
在進行多準則檢查的一些實施方式中,如果當前塊滿足兩個或更多個準則,則當前塊被設置為根塊。在應用多準則檢查的實施方式中,如果當前塊的大小滿足準則A並且當前塊的分割滿足準則B,或者當前塊的寬度滿足準則C並且當前塊的分割滿足準則D,則當前塊被設置為根塊。當前塊的大小和寬度對應於亮度樣本大小和亮度樣本寬度,或色度樣本大小和色度樣本寬度。例如,除了利用準則A檢查當前塊的大小以外,還利用準則B檢查用於分割當前塊的劃分標誌或應用於當前塊的劃分類型,或者除了使用準則C檢查當前塊的寬度以外,還利用準則D檢查用於分割當前塊的劃分標誌或應用於當前塊的劃分類型,並且如果準則A和準則B二者均被滿足,或者準則C和準則D兩者均被滿足,則當前塊被設置為根塊。如果當前塊被設置為根塊,則當前塊的一個或更多個子塊使用當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來進行幀內預測。一旦設置了根塊,就不將多準則檢查應用於當前塊中的一個或更多個子塊。劃分標誌可以指示是否使用特定的劃分類型來分割當前塊,例如,如果劃分標誌為真,則應用四叉樹分割來分割當前塊。劃分類型的一些示例是四叉樹分割、水平二叉樹分割、垂直二叉樹分割、水平三叉樹分割和垂直三叉樹分割。如果當前塊不是根塊,則當前塊中的每個子塊使用當前塊中的該塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來進行幀內預測。
在進行多準則檢查的一些實施方式中,如果當前塊滿足兩個或更多個準則,則當前塊被設置為根塊。在應用多準則檢查的實施方式中,如果當前塊的大小滿足準則A且當前區塊的分割滿足準則B,或者當前塊的寬度和高度的組合滿足準則C並且當前塊的分割滿足準則D,則當前塊被設置為根塊。例如,除了利用準則A檢查當前塊的大小以外,還利用準則B檢查用於分割當前塊的劃分標誌或應用於當前塊的劃分類型,或者除了利用準則C檢查當前塊的寬度和高度的組合以外,還利用準則D檢查用於分割當前塊的劃分標誌或應用於當前塊的劃分類型,並且如果準則A和準則B二者被滿足被滿足或準則C和準則D二者被滿足,則當前塊被設置為根塊。如果當前塊被設置為根塊,則當前塊的一個或更多個子塊使用當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來進行幀內預測。一旦設置了根塊,就不將多準則檢查應用於當前塊中的一個或更多個子塊。劃分標誌可以指示是否使用特定的劃分類型來分割當前塊,例如,如果劃分標誌為真,則應用四叉樹分割來分割當前塊。劃分類型的一些示例是四叉樹分割、水平二叉樹分割、垂直二叉樹分割、水平三叉樹分割和垂直三叉樹分割。如果當前塊不是根塊,則當前塊中的每個子塊使用當前塊中的該塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本以進行幀內預測。
在一些實施方式中,存在針對每個塊的語法元素,該語法元素指示用於幀內預測或需要相鄰參考樣本或相鄰資訊的其他工具的參考樣本的位置。根據一個實施方式,該語法元素在編碼器側和解碼器側處得到,因此在視頻位元流中不用信號發送。
如果滿足預定義準則,則子塊使用父塊的參考樣本。在一些實施方式中,如果當前塊在分割期間滿足一個或更多個預定義準則,則當前塊的所有子塊使用其父塊的參考樣本,否則,每個子塊使用沿著當前塊邊界的參考樣本。在該實施方式中,父塊的參考樣本可以不與當前塊的參考樣本對準。預定義準則的一個實施方式與當前塊的大小有關,例如,如果當前塊的大小小於、等,或小於等於預定義閾值,則所有子塊使用其父塊的參考樣本。針對大小的預定義閾值的一些示例是4、8、16、32、64、128、256、1024、2048和4096個亮度樣本或色度樣本。例如,預定義閾值是32個色度樣本,因而具有16個色度樣本的當前塊小於該預定義閾值,如果將該當前塊進一步劃分為子塊,則使用父塊的參考樣本對這些子塊進行編碼或解碼。在一個實施方式中,預定義準則與當前塊的寬度或高度有關。例如,如果當前塊的寬度小於預定義閾值,則一個或更多個子塊使用其父塊的參考樣本來進行幀內預測。針對寬度或高度的預定義閾值可以是4、8、16、32、64或128個亮度樣本或色度樣本。在一個示例中,如果將一個16乘8的塊進一步劃分為八個8乘2的子塊,則這八個子塊使用其父塊的參考樣本。在另一示例中,如果當前塊的高度小於預定義閾值,則當前塊中的一個或更多個子塊使用當前塊的參考樣本來進行幀內預測,並且在一個或更多個子塊中不檢查相同準則。預定義閾值可以是4、8、16、32、64或128個亮度樣本或色度樣本。例如,如果在分割期間將一個8×16的塊進一步劃分為八個2×8的子塊,則這八個子塊使用其父塊的參考樣本。
在一個實施方式中,預定義準則與當前塊的寬度和高度二者有關。例如,當前塊的寬度大於或等於其高度,並且預定義準則檢查該寬度是否小於預定義閾值A並且高度是否小於另一預定義閾值B。如果當前塊滿足預定義準則,則當前塊中的一個或更多個子塊共用父塊的參考樣本。針對寬度的閾值A的一些示例是2、4、8、16、32、64和128個亮度樣本或色度樣本,並且針對高度的閾值B的一些示例是2、4、8、16、32、64和128個亮度樣本或色度樣本。閾值A和閾值B的組合(thresA, thresB)可以是(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8, 4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)或(128, 64)。例如,在分割期間,一個64乘8的塊被分為兩個32乘8的子塊,並且如果閾值A和閾值B的組合為(128, 16),則這兩個子塊共用64×8父塊的相同參考樣本。在另一示例中,當前塊的高度大於或等於其寬度,並且預定義準則檢查高度是否小於預定義閾值A並且寬度是否小於另一預定義閾值B。如果當前塊滿足預定義準則,則當前塊中的一個或更多個子塊使用當前塊的參考樣本。閾值A或B可以是4、8、16、32、64或128個亮度樣本或色度樣本,(thresA, thresB)的一些示例是(8, 2)、(16, 2)、(32, 2)、(64, 2)、(128, 2)、(8, 4)、(16, 4)、(32, 4)、(64, 4)、(128, 4)、(16, 8)、(32, 8)、(64, 8)、(128, 8)、(32, 16)、(64, 16)、(128, 16)、(64, 32)、(128, 32)和(128, 64)。例如,將一個8乘64的塊劃分成兩個8乘32的子塊,並且如果(thresA, thresB)為(16,128),則這兩個子塊使用8× 64塊的相同參考樣本。
在另一實施方式中,預定義準則與當前塊的QT深度或MT深度有關。例如,當當前塊的QT深度、MT深度或QT深度和MT深度二者大於預定義閾值時,當前塊的一個或更多個子塊使用當前塊的參考樣本來進行幀內預測。針對深度的預定義閾值可以是1、2、3、4或5。例如,在分割期間,將深度大於2的一個塊進一步劃分為子塊,並且這些子塊使用深度為3的父塊的相同參考樣本。在子塊中不檢查預定義準則。在另一示例中,如果根據當前塊的QT深度和MT深度二者計算出的加權深度大於預定義閾值,則當前塊的所有子塊使用其父塊的參考樣本。加權深度avg_depth可以通過avg_depth = (A * QT depth + (2^B - A) * MT depth >> B)來計算。在一個示例中,A等於3且B等於3。
在又一實施方式中,預定義準則與當前塊的相鄰塊的平均QT深度或平均MT深度有關。例如,如果當前塊的相鄰塊的平均QT深度或MT深度大於預定義閾值,則當前塊中的一個或更多個子塊使用父塊的參考樣本。預定義閾值可以是1、2、3、4或5。
通過M×N網格定義用於共用參考樣本的根塊。本發明的一些實施方式通過M×N網格定義了用於共用相鄰參考樣本的根塊,M或N的一些示例是2、4、8、16或32個亮度樣本或色度樣本。M和N可以是相同的值,並且在這種情況下,每個根塊都是一個正方形塊。圖片、切片或圖塊中的視頻資料被劃分為M×N的塊,如果當前塊小於、或小於等於M×N塊,則使用M×N塊的邊界相鄰參考樣本來預測當前塊。當前塊可以是CU、PU或TU。在一些實施方式中,針對每個塊得到指示針對該塊的參考樣本的位置的語法元素,並且根據實施方式,由於解碼器側能夠得到該語法元素,因此該語法元素不被用信號通知給解碼器側。
在一個實施方式中,針對塊寬度定義閾值A,並且針對塊高度定義閾值B。在當前塊的寬度小於、或小於等於閾值A並且當前塊的高度大於等於、或等於閾值B的情況下,使用大小等於A*block_height並且左上x位置等於(floor(pos_x/A))*A的塊來生成針對當前塊的邊界相鄰參考樣本。在當前塊的高度小於、或小於等於閾值B且當前塊的寬度大於等於、或大於閾值A的情況下,使用大小等於block_width*B並且左上y位置等於 (floor(pos_y/B))*B的塊來生成針對當前塊的邊界相鄰參考樣本。如果當前塊的寬度小於、或小於等於閾值A並且當前塊的高度小於、或小於等於閾值B,則使用大小等於A*B並且左上x位置等於(floor(pos_x/A))*A且y位置等於(floor(pos_y/B)*B的塊來生成針對當前塊的邊界相鄰參考樣本。函數floor(x)用於找到接近輸入x的最大整數值。
在一個實施方式中,如果當前塊的左上位置在M×N塊A內,當前塊的右上位置在M×N塊B內,並且當前塊的左下位置在M×N塊C內,則當前塊的參考樣本是左上位置為(floor(topLeftPos_x/M)*M, floor(topLeftPos_y/N)*N)的塊的邊界重構樣本,參考塊寬度等於M*(floor(topRIghtPos_x/M) – floor(topLeftPos_x/M) + 1),並且參考塊高度等於N*(floor(bottomLeftPos_y/N) – floor(topLeftPos_y/N) + 1)。
第10A圖和第10B圖例示了針對利用M×N根塊確定針對每個編碼塊的相鄰參考樣本的示例。第10A圖中示出了編碼塊的塊分割,並且編碼順序是塊A、塊B、塊C、塊D然後是塊E。在第10B圖中示出了與第10A圖的五個編碼塊對應的四個M×N根塊。
對於塊A,整個塊位於一個M×N根塊(根塊1)內,參考塊左上位置在網格域中是根塊1的左上位置。如第11A圖所示,上邊界重構樣本和左邊界重構樣本的長度等於1 + N + M。第11A圖至第11E圖例示了分別用於處理塊A至塊E的相鄰參考樣本。對於塊B,塊B的左上和左下位置二者在網格域中均在根塊1中,並且塊B的右上位置在網格域中在根塊2中,參考塊位置在根塊1的左上位置,但參考塊寬度等於2M並且參考塊高度等於1 + 2M + N,如第11B圖所示。對於塊C,整個塊位於一個M×N根塊(根塊2)內,並且參考塊左上位置在網格域中是根塊2的左上位置。如第11C圖所示,頂部邊界重構樣本和左側邊界重構樣本的長度均等於1 + N + M。對於塊D,塊D的左上位置和左下位置都在根塊1中,並且塊D的右上位置在根塊2中,參考塊位置在根塊1的左上位置,但是參考塊寬度等於2M並且參考塊高度等於1 + 2M + N,如第11D圖所示。對於塊E,塊E的左上和左下位置在網格域中都在根塊3中,並且塊E的右上位置在網格域中在根塊4中,參考塊位置在根塊3的左上位置,但參考塊寬度等於2M並且參考塊高度等於N。如第11E圖所示,上邊界重構樣本和左邊界重構樣本的長度都等於1 + 2M + N。
在另一實施方式中,如果參考塊左上x位置不是CU的左上x位置,則參考塊x位置變為refBlock.position_x-1 *M;如果參考塊左上y位置不是CU的左上y位置,則參考塊y位置變為refBlock.position_y-1 *N。該檢查將反覆運算地應用,直到參考塊左上位置是一個CU的左上位置。
參考塊寬度等於M*(floor(topRightPos_x/M) – floor(topLeftPos_x/M) + 1 + (floor(topLeftPos_x/M) – 參考塊左上x位置/ M)),並且參考塊高度等於N*(floor(bottomLeftPos_y/N) – floor(topLeftPos_y/N) + 1 + (floor(topLeftPos_y/N) – 參考塊左上y位置 / N))。因此,在第10A圖和第10B圖所示的示例中,針對塊C的參考塊左上位置等於根塊1的左上位置。如第12A圖所示,上邊界重構樣本和左邊界重構樣本的長度都等於1 + N + 2M。第12A圖例示了根據該實施方式的針對塊C的參考樣本。在另一實施方式中,針對每個塊的參考塊與其父塊相關。參考塊的左上位置等於(floor(parent.topLeftPos_x/M)*M, floor(parent.topLeftPos_y/N)*N),參考塊寬度等於M*(floor(parent.topRightPos_x/M) – floor(parent.topLeftPos_x/M) + 1),並且參考塊高度等於N*(floor(parent.bottomLeftPos_y/N) – floor(parent.topLeftPos_y/N) + 1)。第12B圖例示了根據該實施方式的針對塊A、塊B、塊C和塊D的相同邊界參考樣本。對於塊E,參考塊的左上位置等於在網格域中的根塊1的左上位置,並且沿上邊界和左邊界的長度等於1 + 2M + 2N,如第12C圖所示。第12C圖例示了根據該實施方式的針對塊E的參考樣本。
為根塊內的塊確定參考樣本的另選方法。在一些其他實施方式中,當對根塊中的塊進行編碼或解碼而需要相鄰重構樣本並且一些相鄰重構樣本在當前塊的根塊內時,這些邊界參考樣本被視為不可用樣本。根據一個實施方式,應用樣本填充處理(sample filing process)來生成那些不可用樣本以用於對根塊中的塊進行編碼或解碼。根據另一實施方式,應用原始幀內邊界樣本生成處理,並且那些不可用樣本按照與出自圖片或圖塊邊界的樣本相同的方式來對待。在又一實施方式中,使用根塊外部的參考樣本來生成或得到根塊內的不可用樣本。例如,如果不可用樣本中的一個與一個或更多個鄰近可用參考樣本鄰近,則通過複製根塊外部的一個或更多個鄰近可用參考樣本來生成不可用樣本。在另一實施方式中,為那些不可用樣本分配一個或更多個預設值(例如,128或1 >> (bitdepth-1))。例如,如果當前塊的任何邊界參考樣本在相應的根塊內部,則將邊界參考樣本設置為預定義值(例如,128、512或1 >> (bitdepth-1))。在另一示例中,如果當前塊的任何邊界參考樣本在根塊內部,則使用根塊的邊界樣本來得到邊界參考樣本。
當當前塊滿足一個或更多個準則時,當前塊被設置為根塊。該準則的一些示例與當前塊的大小、面積、寬度、高度和深度以及從當前塊劃分出的一個子塊的大小、面積、寬度、高度和深度中的一項或組合有關。深度的一些示例是QT深度、BT深度、MT深度、組合深度、或相鄰塊的平均深度。例如,當當前塊的大小小於、等於或小於等於預定義閾值時,當前塊被設置為根塊,其中,預定義閾值可以為4、8、16、32、64、128、256、512、1024、2048或4096個亮度樣本或色度樣本。在另一示例中,如果當前塊的寬度小於、等於或小於等於預定義閾值,則當前塊被設置為根塊,其中預定義閾值可以是2、4、8、16、32、64或128個亮度樣本或色度樣本。在又一示例中,如果當前塊的寬度和高度二者小於、等於或小於等於預定義閾值,則當前塊被設置為根塊,其中,預定義閾值可以是2樣本4、8、16、32、64或128個亮度樣本或色度樣本。確定當前塊是否是根塊的示例是通過檢查當前塊的寬度是否小於、等於或小於等於預定義閾值A,或者當前塊的高度是否小於、等於或小於等於預定義閾值B。針對寬度的閾值A和針對高度的閾值B可以是2、4、8、16、32、64或128個亮度樣本或色度樣本。閾值A和閾值B的組合(thresA, thresB)可以是閾值A和閾值B的任何組合。確定當前塊是否是根塊的另一示例是通過檢查當前塊的深度是否大於、等於或大於等於預定義閾值,其中,深度的閾值可以是1、2、3、4或5。深度可以是當前塊的QT深度、MT深度、或QT深度與MT深度二者,或通過多個深度的線性組合計算出的組合深度。在另一示例中,利用預定義閾值檢查當前塊的加權深度,並且如果加權深度大於、等於或大於等於預定義閾值,則當前塊是根塊。加權深度由當前塊的QT深度和MT深度計算得出,例如,加權深度由avg_depth = (A * QT 深度+ (2^B - A) * MT 深度>> B)計算得出,或者加權深度等於2 * QT深度+ MT深度。在準則中的一個與當前塊的相鄰塊的深度資訊有關的情況下,如果相鄰塊的平均深度大於、等於或大於等於預定義閾值,則當前塊被設置為根塊,其中,針對平均深度的預定義閾值可以是1、2、3、4或5。平均深度的一些示例是相鄰塊的平均QT深度和平均MT深度。
代表性流程圖。第13圖是例示根據本發明實施方式的需要相鄰重構樣本作為參考樣本的處理當前塊的視頻處理方法的流程圖。在步驟S1310中,編碼器或解碼器接收當前圖片中的當前塊的輸入資料。在步驟S1320中,編碼器或解碼器在當前塊的分割期間檢查當前塊是否滿足一個或更多個預定義準則。例如,用一個或更多個預定義閾值檢查當前塊的大小、寬度、高度、寬度和高度、深度、和劃分類型以及從當前塊中劃分出的一個子塊的大小、寬度、高度、寬度和高度、和深度中的一項或組合。如果在步驟S1320中當前塊滿足預定義準則,則通過步驟S1330至S1340處理當前塊。在步驟S1330中,當前塊被設置為根塊,並且不利用相同的預定義準則來檢查當前塊中的一個或更多個塊的一個或更多個顏色分量。然後,在步驟S1340中,視訊編碼器或解碼器使用當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對當前塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼。如果當前塊被設置為根塊,則當前塊內的重構樣本不被用於對當前塊中一個或更多個塊的一個或更多個顏色分量進行編碼或解碼。例如,如果當前塊被設置為根塊,則視訊編碼器或解碼器使用幀內預測模式和當前塊的一個或更多個顏色分量的相鄰重構樣本為當前塊中的每個塊生成幀內預測器,然後視訊編碼器或解碼器根據該幀內預測器對塊進行編碼或解碼。如果在步驟S1320中當前塊不滿足預定義準則,則在步驟S1350中使用該塊的一個或更多個顏色分量的相鄰重構樣本來對當前塊中的每個塊進行編碼或解碼。例如,當當前塊不是根塊時,視訊編碼器或解碼器使用當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本來為當前塊中的每個塊生成幀內預測器。在一個實施方式中,當前塊是色度塊,或者根據另一實施方式,當前塊可以是色度塊或亮度塊。
代表性框圖。第14圖例示了用於實現本發明的一個或更多個視頻處理方法的視訊編碼器1400的示例性系統框圖。將根據相鄰重構樣本或相鄰資訊對當前塊進行編碼,例如,當前塊將在幀內預測中或者在需要相鄰樣本或相鄰資訊的任何其他工具中被編碼。幀內預測模組1410根據幀內預測模式基於當前圖片的重構樣本為要在幀內預測中編碼的每個塊提供幀內預測器。在分割期間,利用一個或更多個預定義準則檢查當前塊,如果當前塊滿足預定義準則,則被設置為根塊。如果當前塊被設置為根塊,則不利用相同預定義準則檢查當前塊中一個或更多個塊的一個或更多個顏色分量。在一些實施方式中,如果當前塊被設置為根塊,則當前塊的一個或更多個顏色分量的相鄰重構樣本被幀內預測模組1410使用作為當前塊中的一個或更多個塊的一個或更多個顏色分量的參考樣本,以生成幀內預測器。在當前塊不是根塊並且進一步被劃分成子塊的情況下,幀內預測模組1410使用每個子塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本,以生成針對子塊的幀內預測器。在一個實施方式中,如果當前塊被設置為根塊,則幀內預測模組1410從當前塊的相鄰幀內預測模式得到MPM,以對當前塊中的一個或更多個塊的一個或更多個顏色分量進行編碼。在當前塊不是根塊的情況下,幀內預測模組1410從當前塊中的每個塊的相鄰幀內預測模式得到MPM,以對當前塊中的塊進行編碼。幀間預測模組1412基於來自其他圖片的視頻資料執行運動估計(ME)和運動補償(MC)以提供幀間預測器。幀內預測模組1410或幀間預測模組1412藉由切換模組1414將所選擇的預測器提供給加法器模組1416以形成預測誤差,也稱為預測殘差(prediction residues)。由於當前塊是通過幀內預測編碼的,所以幀內預測模組1410將針對當前塊的幀內預測器發送到加法器模組1416以產生當前塊的預測殘差。
當前塊的預測殘差由變換模組(T)1418,然後由量化模組(Q)1420進一步處理。經變換和量化的殘差信號然後由熵編碼器1434編碼以形成編碼後的視頻位元流。然後,將編碼後的視頻位元流與邊資訊(side information)封裝在一起。逆量化模組(IQ)1422和逆變換模組(IT)1424對當前塊的經變換和量化的殘差信號進行處理以恢復預測殘差。如第14圖中所示,預測殘差通過在重構模組(REC)1426處加回到所選擇的預測器來恢復以產生重構樣本。重構的樣本可以被存儲在參考圖片緩衝器(Ref.Pict.Buffer)1432中,並且被用於其他圖片的預測。來自REC 1426的重構樣本可以由於編碼處理而遭受各種損害,因此,在存儲到參考圖片緩衝器1432中之前,對重構樣本應用環路處理去塊濾波器(DF)1428和樣本自我調整偏移(SAO)1430以進一步提高圖片品質。與用於環路處理DF 1428和SAO 1430的資訊相關聯的語法被提供給熵編碼器1434,以用於合併到編碼後的視頻位元流中。
第15圖中示出了用於第14圖的視訊編碼器1400的對應的視頻解碼器1500。編碼後的視頻位元流是視頻解碼器1500的輸入,並且由熵解碼器1510解碼以解析和恢復經變換和量化的殘差信號及其他系統資訊。解碼器1500的解碼處理類似於編碼器1400處的重構迴圈,除了解碼器1500僅需要幀間預 測模組1514中的運動補償預測。每個塊由幀內預測模組1512或幀間預測模組1514解碼。切換模組1516根據解碼出的模式資訊選擇來自幀內預測模組1512的幀內預測器或來自幀間預測模組1514的幀間預測器。根據本發明的實施方式,幀內預測模組1512針對當前塊中的每個塊解碼幀內預測模式。在分割期間利用一個或更多個預定義準則檢查當前塊,如果當前塊滿足預定義準則,則被設置為根塊。如果當前塊被設置為根塊,則幀內預測模組1512使用當前塊的一個或更多個顏色分量的相鄰重構樣本和幀內預測模式針對當前塊中的每個塊生成幀內預測器。如果當前塊不是根塊,則幀內預測模組1512使用當前塊中該塊的一個或更多個顏色分量的相鄰重構樣本和幀內預測模式針對當前塊中的每個塊生成幀內預測器。在一個實施方式中,如果當前塊被設置為根塊,則幀內預測模組1512基於當前塊的相鄰幀內預測模式來得到針對當前塊中的每個塊的MPM。由逆量化模組(IQ)1520和逆變換模組(IT)1522恢復與每個塊相關聯的經變換和量化的殘差信號。通過將預測器加回到REC模組1518中以重構出恢復的經變化和量化的殘差信號,以產生重構樣本。重構樣本被DF 1524和SAO 1526進一步處理,以生成最終的解碼視頻。如果當前解碼的圖片是參考圖片,則當前解碼的圖片的重構樣本也被存儲在參考圖片緩衝器1528中以用於按照解碼順序的後面的圖片。
第14圖和第15圖中的視訊編碼器1400和視頻解碼器1500的各種元件可以由硬體元件、被配置為執行存儲在記憶體中的程式指令的一個或更多個處理器、或者硬體和處理器的組合來實施。例如,處理器執行程式指令以控制對與當前圖片中的當前塊相關聯的輸入資料的接收。處理器配備有一個或更多個處理核心。在一些示例中,處理器執行程式指令以執行編碼器1400和解碼器1500中的某些元件中的功能,並且與處理器電連接的記憶體用於存儲程式指令、與塊的重構圖像相對應的資訊和/或編碼或解碼處理期間的中間資料。在 一些實施方式中記憶體包括非暫時性電腦可讀介質,例如,半導體或固態記憶體、隨機存取記憶體(RAM)、唯讀記憶體(ROM)、硬碟、光碟或其他合適的存儲介質。記憶體也可以是上面列出的非暫時性電腦可讀介質中的兩種或更多種的組合。如第14圖和第15圖所示,編碼器1400和解碼器1500可以在同一電子設備中實現,因此,如果在同一電子設備中實現,則編碼器1400和解碼器1500的各種功能元件可以被共用或重複使用。例如,第14圖中的重構模組1426、逆變換模組1424、逆量化模組1422、去塊濾波器1428、樣本自我調整偏移1430和參考圖片緩衝器1432中的一個或更多個也可以分別用作第15圖中的重構模組1518、逆變換模組1522、逆量化模組1520、去塊濾波器1524、樣本自我調整偏移1526和參考圖片緩衝器1528。
用於視頻編碼系統的處理方法的實施方式可以在集成到視訊壓縮晶片中的電路中實現或在集成到視訊壓縮軟體中的程式碼中實現以執行上述處理。例如,檢查當前塊是否滿足一個或更多個預定義準則可以在要在電腦處理器、數位訊號處理器(DSP)、微處理器或現場可程式設計閘陣列(FPGA)上執行的程式碼中實現。這些處理器可以被配置為通過執行定義本發明所體現的特定方法的機器可讀軟體代碼或固件代碼來執行根據本發明的具體任務。
在不脫離本發明的精神或基本特徵的情況下,本發明可以以其他特定形式實施。所描述的示例在所有方面僅應被認為是說明性的而非限制性的。因此,本發明的範圍由所附權利要求而不是前述描述來指示。落入權利要求等同含義和範圍內的所有改變均應包含在其範圍之內。
20、702、92、96:當前塊
22、704、706、94、98:參考樣本
708:預測器
710、712:濾波後的樣本
s1310-s1350:步驟
1400:視訊編碼器
1410、1512:幀內預測模組
1412、1514:幀間預測模組
1416:加法器模組
1418:變換模組(T)
1420:量化模組(Q)
1434:熵編碼器
1422、1520:逆量化模組(IQ)
1424、1522:逆變換模組(IT)
1426、1518:重構模組(REC)
1432、1528:圖片緩衝器(Ref.Pict.Buffer)
1428、1524:去塊濾波器(DF)
1430、1526:樣本自我調整偏移(SAO)
1434:熵編碼器
1414、1516:切換模組
1500:視頻解碼器
1510:熵解碼器
將參考以下附圖詳細描述作為示例提出的本公開的各個實施方式,其中,類似的附圖標記表示類似的要素,並且其中: 第1圖例示了HEVC標準中支援的33種角幀內預測模式。 第2圖例示了示例性參考樣本,其由幀內平滑濾波器濾波以得到當前塊的幀內預測器。 第3A圖例示了對幀內預測中通過垂直模式預測的預測器應用幀內梯度濾波。 第3B圖例示了對幀內預測中通過角模式預測的預測器應用幀內梯度濾波。 第4圖例示了用於方向模式v + 1〜v + 8的雙向幀內預測的示例。 第5圖例示了65個角幀內預測模式的示例。 第6圖例示了多參數幀內預測的示例。 第7圖例示了使用濾波後的和未濾波的參考樣本的組合生成針對當前塊的最終預測器。 第8A圖和第8B圖例示了在幀內預測中通過平面模式生成當前塊的預測器。 第9A圖和第9B圖例示了根據本發明的實施方式的當前塊的子塊將當前塊的參考樣本用於幀內預測。 第10A圖和第10B圖例示根據本發明的實施方式的共用基於預定義的根塊確定的相鄰參考樣本。 第11A圖至第11E圖例示了根據本發明實施方式的分別用於對塊A至塊E進行處理的相鄰參考樣本。 第12A圖至第12C圖例示了根據本發明的一些實施方式的分別用於對塊C、塊A至塊D和塊E進行處理的相鄰參考樣本。 第13圖是例示根據本發明的實施方式的示例性方法的流程圖。 第14圖例示了根據本發明的實施方式的結合了視頻處理方法的視頻編碼系統的示例性系統框圖。 第15圖例示了根據本發明的實施方式的結合了視頻處理方法的視頻解碼系統的示例性系統框圖。
s1310-s1350:步驟

Claims (23)

  1. 一種在視頻編解碼系統中處理視頻資料的方法,該方法包括: 接收與當前圖片中的當前塊相關聯的輸入資料; 在分割期間檢查所述當前塊是否滿足一個或更多個預定義準則; 如果所述當前塊滿足所述一個或更多個預定義準則,則將所述當前塊設置為根塊,並且如果所述當前塊滿足所述一個或更多個預定義準則,則在所述當前塊內的一個或更多個塊中不檢查所述一個或更多個預定義準則;以及 如果所述當前塊被設置為根塊,則使用所述當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對所述當前塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼,並且如果所述當前塊不被設置為根塊,則使用所述當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對所述當前塊中的每個塊的一個或更多個顏色分量進行編碼或解碼,其中,如果所述當前塊被設置為根塊,則所述當前塊內的一個或更多個顏色分量的重構樣本不被用作所述當前塊中的所述一個或更多個塊的一個或更多個顏色分量的參考樣本。
  2. 如申請專利範圍第1項所述之方法,其中,所述方法被應用於幀內預測,其中,如果所述當前塊被設置為根塊,則對所述當前塊中的每個塊的一個或更多個顏色分量進行編碼或解碼包括根據幀內預測模式和所述當前塊的一個或更多個顏色分量的相鄰重構樣本生成幀內預測器;並且如果所述當前塊不被設置為根塊,則對所述當前塊中的每個塊的一個或更多個顏色分量進行編碼或解碼包括根據幀內預測模式和所述當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本來生成幀內預測器。
  3. 如申請專利範圍第1項所述之方法,其中,所述一個或更多個顏色分量僅對應於一個或更多個色度分量。
  4. 如申請專利範圍第3項所述之方法,其中,如果所述當前塊被設置為根塊,則使用所述當前塊的所述一個或更多個色度分量的相鄰重構樣本作為參考樣本來對所述當前塊中的一個或更多個塊的一個或更多個色度分量進行編碼或解碼;並且如果所述當前塊被設置為根塊,則使用所述當前塊中的每個塊的亮度分量的相鄰重構樣本作為參考樣本來對所述當前塊中的每個塊的亮度分量進行編碼或解碼。
  5. 如申請專利範圍第1項所述之方法,其中,所述一個或更多個顏色分量對應於所有亮度分量和色度分量。
  6. 如申請專利範圍第1項所述之方法,其中,所述方法還包括:檢查是否已經設置了根塊,並且僅當尚未設置所述根塊並且所述當前塊滿足所述預定義準則時,才將所述當前塊設置為根塊。
  7. 如申請專利範圍第1項所述之方法,其中,所述預定義準則中的一個預定義準則與所述當前塊的大小有關,其中,所述大小是指所述當前塊的亮度樣本大小或所述當前塊的色度樣本大小。
  8. 如申請專利範圍第7項所述之方法,其中,如果所述當前塊的所述大小小於、等於或小於等於預定義閾值,則所述當前塊滿足所述預定義準則。
  9. 如申請專利範圍第7項所述之方法,其中,所述預定義準則中的另一預定義準則與從所述當前塊劃分出的一個子塊的大小有關,並且如果所述當前塊的大小大於、等於或大於等於預定義閾值並且所述子塊的大小小於、等於或小於等於另一預定義閾值,則所述當前塊滿足所述一個或更多個預定義準則。
  10. 如申請專利範圍第7項所述之方法,其中,所述預定義準則中的另一預定義準則與用於對所述當前塊進行分割的劃分類型有關。
  11. 如申請專利範圍第1項所述之方法,其中,所述預定義準則中的一個預定義準則與從所述當前塊劃分出的一個子塊的大小有關,並且如果所述當前塊的大小大於、等於或大於等於預定義閾值並且所述子塊的大小小於、等於或小於等於另一預定義閾值,則所述當前塊滿足所述一個或更多個預定義準則,其中,所述大小對應於亮度樣本大小或色度樣本大小。
  12. 如申請專利範圍第1項所述之方法,其中,所述一個或更多個預定義準則與以下項中的一項或組合有關:所述當前塊的大小、所述當前塊的寬度、所述當前塊的高度、所述當前塊的深度、所述當前塊的相鄰塊的平均深度、用於對所述當前塊進行分割的劃分類型、從所述當前塊劃分出的一個子塊的大小、從所述當前塊劃分出的一個子塊的寬度、從所述當前塊劃分出的一個子塊的高度、從所述當前塊劃分出的一個子塊的深度以及從所述當前塊劃分出的一個子塊的相鄰塊的平均深度,其中,所述大小、所述寬度和所述高度分別對應於亮度樣本大小、亮度樣本寬度和亮度樣本高度,或者分別對應於色度樣本大小、色度樣本寬度和色度樣本高度。
  13. 如申請專利範圍第1項所述之方法,其中,所述方法還包括:檢查從所述當前塊劃分出的一個子塊是否滿足一個或更多個第二準則,其中,如果所述當前塊滿足所述一個或更多個預定義準則並且所述子塊滿足所述一個或更多個第二準則,則所述當前塊被設置為根塊。
  14. 如申請專利範圍第13項所述之方法,其中,所述一個或更多個第二準則與從所述當前塊劃分出的所述子塊的大小、寬度、高度、寬度和高度二者或深度有關,並且其中,所述大小、所述寬度和所述高度對應於亮度樣本大小、亮度樣本寬度和亮度樣本高度,或者對應於色度樣本大小、色度樣本寬度和色度樣本高度。
  15. 如申請專利範圍第13項所述之方法,其中,如果所述當前塊被設置為根塊,則不利用所述一個或更多個預定義準則和所述一個或更多個第二準則來檢查從所述當前塊劃分出的所有其他子塊。
  16. 如申請專利範圍第1項所述之方法,其中,所述方法還包括檢查所述當前塊的父塊是否滿足第二準則,其中,如果所述當前塊滿足所述一個或更多個預定義準則並且所述父塊滿足所述第二準則,則所述當前塊被設置為根塊。
  17. 如申請專利範圍第1項所述之方法,其中,當對所述根塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼時,將所述根塊內的亮度樣本或所述根塊內的色度樣本視為不可用。
  18. 如申請專利範圍第17項所述之方法,其中,當需要這些亮度樣本或色度樣本來預測所述根塊中的所述一個或更多個塊時,應用樣本填充處理或幀内邊界樣本生成處理來生成不可用樣本。
  19. 如申請專利範圍第17項所述之方法,其中,通過複製所述不可用樣本的鄰近樣本或使用一個或更多個預設值來生成所述不可用樣本。
  20. 如申請專利範圍第1項所述之方法,其中,如果所述當前塊被設置為根塊,則將根塊位置設置為所述當前塊的左上位置,並且將所述根塊的寬度和高度設置為等於所述當前塊的寬度和高度。
  21. 如申請專利範圍第1項所述之方法,其中,如果所述當前塊被設置為根塊,則從所述當前塊的相鄰塊的幀內預測模式得到所述當前塊中的一個或更多個塊的最可能模式MPM。
  22. 一種在視頻編碼系統中處理視頻資料的設備,所述設備包括一個或更多個電子電路,所述一個或更多個電子電路被配置成: 接收與當前圖片中的當前塊相關聯的輸入資料; 在分割期間檢查所述當前塊是否滿足一個或更多個預定義準則; 如果所述當前塊滿足所述一個或更多個預定義準則,則將所述當前塊設置為根塊,並且如果所述當前塊滿足所述一個或更多個預定義準則,則在所述當前塊內的一個或更多個塊中不檢查所述一個或更多個預定義準則;以及 如果所述當前塊被設置為根塊,則使用所述當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對所述當前塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼,並且如果所述當前塊不被設置為根塊,則使用所述當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對所述當前塊中的每個塊的一個或更多個顏色分量進行編碼或解碼,其中,如果所述當前塊被設置為根塊,則所述當前塊內的一個或更多個顏色分量的重構樣本不被用作所述當前塊中的一個或更多個塊的一個或更多個顏色分量的參考樣本。
  23. 一種非暫時性電腦可讀介質,該非暫時性電腦可讀介質存儲程式指令,該程式指令使得設備的處理電路執行用於視頻資料的視頻處理方法,並且該方法包括: 接收與當前圖片中的當前塊相關聯的輸入資料; 在分割期間檢查所述當前塊是否滿足一個或更多個預定義準則; 如果所述當前塊滿足所述一個或更多個預定義準則,則將所述當前塊設置為根塊,並且如果所述當前塊滿足所述一個或更多個預定義準則,則在所述當前塊內的一個或更多個塊中不檢查所述一個或更多個預定義準則;以及 如果所述當前塊被設置為根塊,則使用所述當前塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對所述當前塊中的一個或更多個塊的一個或更多個顏色分量進行編碼或解碼,並且如果所述當前塊不被設置為根塊,則使用所述當前塊中的每個塊的一個或更多個顏色分量的相鄰重構樣本作為參考樣本來對所述當前塊中的每個塊的一個或更多個顏色分量進行編碼或解碼,其中,如果所述當前塊被設置為根塊,則所述當前塊內的一個或更多個顏色分量的重構樣本不被用作所述當前塊中的所述一個或更多個塊的一個或更多個顏色分量的參考樣本。
TW108136609A 2018-10-09 2019-10-09 使用由預定義準則確定的參考樣本進行編碼或解碼的方法和設備 TWI737003B (zh)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
US201862743284P 2018-10-09 2018-10-09
US62/743,284 2018-10-09
US201862767609P 2018-11-15 2018-11-15
US62/767,609 2018-11-15
US201962818314P 2019-03-14 2019-03-14
US62/818,314 2019-03-14
PCT/CN2019/110160 WO2020073924A1 (en) 2018-10-09 2019-10-09 Method and apparatus of encoding or decoding using reference samples determined by predefined criteria
WOPCT/CN2019/110160 2019-10-09

Publications (2)

Publication Number Publication Date
TW202025761A TW202025761A (zh) 2020-07-01
TWI737003B true TWI737003B (zh) 2021-08-21

Family

ID=70163906

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108136609A TWI737003B (zh) 2018-10-09 2019-10-09 使用由預定義準則確定的參考樣本進行編碼或解碼的方法和設備

Country Status (7)

Country Link
US (2) US11178397B2 (zh)
EP (1) EP3854087A4 (zh)
KR (1) KR20210071032A (zh)
CN (2) CN118301355A (zh)
CA (1) CA3113854A1 (zh)
TW (1) TWI737003B (zh)
WO (1) WO2020073924A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2019201649A1 (en) * 2019-03-11 2020-10-01 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding a tree of blocks of video samples

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011126348A2 (en) * 2010-04-09 2011-10-13 Lg Electronics Inc. Method and apparatus for processing video data
WO2012175003A1 (en) * 2011-06-20 2012-12-27 Mediatek Singapore Pte. Ltd. Method and apparatus of chroma intra prediction with reduced line memory
WO2016115981A1 (en) * 2015-01-22 2016-07-28 Mediatek Singapore Pte. Ltd. Method of video coding for chroma components
WO2017144017A1 (en) * 2016-02-25 2017-08-31 Mediatek Inc. Method and apparatus of video coding
WO2018028615A1 (en) * 2016-08-12 2018-02-15 Mediatek Inc. Methods and apparatuses of predictor-based partition in video processing system
WO2018062921A1 (ko) * 2016-09-30 2018-04-05 엘지전자 주식회사 영상 코딩 시스템에서 블록 분할 및 인트라 예측 방법 및 장치

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106454371B (zh) * 2010-04-13 2020-03-20 Ge视频压缩有限责任公司 解码器、数组重建方法、编码器、编码方法及存储介质
US9807401B2 (en) * 2011-11-01 2017-10-31 Qualcomm Incorporated Transform unit partitioning for chroma components in video coding
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
EP3024240A4 (en) * 2013-07-18 2017-03-22 Samsung Electronics Co., Ltd. Intra scene prediction method of depth image for interlayer video decoding and encoding apparatus and method
US20170339403A1 (en) 2014-11-04 2017-11-23 Samsung Electronics Co., Ltd. Method and device for encoding/decoding video using intra prediction
US10567808B2 (en) * 2016-05-25 2020-02-18 Arris Enterprises Llc Binary ternary quad tree partitioning for JVET
CN109565591B (zh) 2016-08-03 2023-07-18 株式会社Kt 用于对视频进行编码和解码的方法和装置
WO2020073911A1 (en) * 2018-10-09 2020-04-16 Huawei Technologies Co., Ltd. Devices and methods for image and video coding

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011126348A2 (en) * 2010-04-09 2011-10-13 Lg Electronics Inc. Method and apparatus for processing video data
WO2012175003A1 (en) * 2011-06-20 2012-12-27 Mediatek Singapore Pte. Ltd. Method and apparatus of chroma intra prediction with reduced line memory
WO2016115981A1 (en) * 2015-01-22 2016-07-28 Mediatek Singapore Pte. Ltd. Method of video coding for chroma components
WO2017144017A1 (en) * 2016-02-25 2017-08-31 Mediatek Inc. Method and apparatus of video coding
WO2018028615A1 (en) * 2016-08-12 2018-02-15 Mediatek Inc. Methods and apparatuses of predictor-based partition in video processing system
WO2018062921A1 (ko) * 2016-09-30 2018-04-05 엘지전자 주식회사 영상 코딩 시스템에서 블록 분할 및 인트라 예측 방법 및 장치

Also Published As

Publication number Publication date
WO2020073924A1 (en) 2020-04-16
US20210314559A1 (en) 2021-10-07
US11178397B2 (en) 2021-11-16
KR20210071032A (ko) 2021-06-15
CN118301355A (zh) 2024-07-05
CN112806006B (zh) 2024-04-16
US20220038688A1 (en) 2022-02-03
EP3854087A4 (en) 2022-07-06
EP3854087A1 (en) 2021-07-28
TW202025761A (zh) 2020-07-01
CN112806006A (zh) 2021-05-14
CA3113854A1 (en) 2020-04-16

Similar Documents

Publication Publication Date Title
TWI739395B (zh) 影像和視訊處理中基於矩陣的畫面內預測方法和裝置
KR102349176B1 (ko) 영상 부호화 방법 및 컴퓨터로 읽을 수 있는 기록 매체
TWI708502B (zh) 視訊編解碼系統中對具有分割約束的視訊圖像進行編碼或解碼的視訊處理方法
TWI839662B (zh) 視訊解碼方法
KR102549987B1 (ko) 영상 처리 방법 및 이를 위한 장치
JP2022078048A (ja) 画像復号方法及び画像符号化方法
KR20190029732A (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
US10893267B2 (en) Method for processing image on basis of intra-prediction mode and apparatus therefor
KR20210152476A (ko) 코딩 된 비디오의 양자화된 잔차 차동 펄스 코드 변조 표현의 제약
KR102517389B1 (ko) 인트라 서브-파티션 코드 모드를 이용한 비디오 코딩
KR20190096432A (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
TWI719612B (zh) 圖像和視訊處理中產生mpm 以進行幀內預測的方法和裝置
US20200351511A1 (en) Method and device for video coding using various transform techniques
JP7393550B2 (ja) クロス成分適応ループフィルタリングのためのサンプルパディング
US20210014484A1 (en) Picture encoding and decoding, picture encoder, and picture decoder
JP2023058560A (ja) パレットモードの使用の指示の共同符号化
JP2024020420A (ja) 適応ループフィルタリングのための境界位置
TWI737003B (zh) 使用由預定義準則確定的參考樣本進行編碼或解碼的方法和設備
Kao et al. Improved transform skip mode for HEVC screen content coding
CN113615202A (zh) 用于屏幕内容编解码的帧内预测的方法和装置
KR20180040827A (ko) 부호화 유닛의 그룹을 사용하는 비디오 코딩 방법 및 장치
WO2023212254A1 (en) Methods and devices for high precision intra prediction
WO2023192336A1 (en) Methods and devices for high precision intra prediction
WO2024006231A1 (en) Methods and apparatus on chroma motion compensation using adaptive cross-component filtering