TWI639334B - 視訊編碼的方法與裝置 - Google Patents

視訊編碼的方法與裝置 Download PDF

Info

Publication number
TWI639334B
TWI639334B TW106108681A TW106108681A TWI639334B TW I639334 B TWI639334 B TW I639334B TW 106108681 A TW106108681 A TW 106108681A TW 106108681 A TW106108681 A TW 106108681A TW I639334 B TWI639334 B TW I639334B
Authority
TW
Taiwan
Prior art keywords
intra
current block
prediction
picture element
reference picture
Prior art date
Application number
TW106108681A
Other languages
English (en)
Other versions
TW201739250A (zh
Inventor
許曉中
杉 劉
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW201739250A publication Critical patent/TW201739250A/zh
Application granted granted Critical
Publication of TWI639334B publication Critical patent/TWI639334B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明提供一種視訊編碼方法。該方法包括接收與圖像訊框中的當前塊相關聯的輸入資料，從與當前塊的邊緣相鄰的複數個候選相鄰圖元組中選擇參考圖元組，基於所選擇的參考圖元組和當前塊的畫面內預測模式生成當前塊的畫面內預測子，並且基於畫面內預測子對當前塊進行編碼或解碼以輸出已編碼的視訊資料或已解碼的塊。每個候選相鄰圖元組與當前塊的邊緣並行佈置。

Description

視訊編碼的方法與裝置 【相關申請的交叉引用】
本申請的申請專利範圍依35 U.S.C.§119要求如下申請的優先權：2016年3月18日遞交的申請號為62/309,991，標題為「Methods for intra prediction in image and video compression」的美國臨時案；2016年7月8日遞交的申請號為62/359,822，標題為「Methods for intra prediction with multiple reference lines in image and video compression」的美國臨時案。在此合併參考這些申請案的申請標的。
本發明係相關於視訊編碼，尤指一種利用視訊編解碼系統中的預測技術。
本文提供的背景描述是為了通常呈現本公開的上下文的目的。在發明人呈現的本公開中，在很大程度上背景部分描述的內容，與實施方式描述的內容一樣不能被視為申請日之前的先前技術。也就是說，既不被明確地也不暗示承認為本發明的先前技術。
許多視訊編碼標準包括將輸入視訊的圖像訊框劃分成一個或複數個編碼單元。通常，編碼單元可以進一步包括對應於圖像訊框的亮度和色度分量的至少一預測單元(或 塊)。當對塊的原始圖像進行編碼時，依據預定的視訊編碼標準，塊的原始圖像可以被劃分為可預測部分(也稱為預測子(predictor))和塊的殘差部分。當解碼塊時，可以透過依據相同的預定視訊編碼標準產生並組合預測子和塊的殘差部分來獲得塊的重構圖像。
在一些應用中，塊的預測子可以基於其他塊和/或其他訊框的圖像來生成。這種預測方案旨在減少編碼視訊資料中的時間冗餘，並且也稱為畫面間預測(inter prediction)。 在一些應用中，塊的預測子可以透過基於複數個預定預測模式中所選擇的一個來外推與相鄰圖元(pixel)的樣本來生成。這種預測方案可以減少已編碼的視訊資料中的空間冗餘，也稱為畫面內預測(intra prediction)。
本公開的方面提供了一種視訊編碼方法。該方法包括接收與圖像訊框中的當前塊相關聯的輸入資料，從與當前塊的邊緣相鄰的複數個候選相鄰圖元組中選擇參考圖元組，基於所選擇的參考圖元組和當前塊的畫面內預測模式生成當前塊的畫面內預測子，並且基於畫面內預測子對當前塊進行編碼或解碼以輸出已編碼的視訊資料或已解碼的塊。每個候選相鄰圖元組與當前塊的邊緣並行佈置。
在一個實施例中，該方法還可以還包括從輸入資料中提取指示所選擇的參考圖元組的訊息、或將所選擇的參考圖元組的訊息包括於已編碼的視訊資料中。在另一個實施例中，該方法還可以包括基於畫面內預測模式或當前塊的形狀導 出所選擇的參考圖元組。
此外，該方法還可以包括從複數個候選相鄰圖元組中選擇第二參考圖元組。所選擇的參考圖元組定義第一參考線，並且所選擇的第二參考圖元組定義第二參考線。當前塊的畫面內預測模式的預測方向定義複數個預測參考線。產生畫面內預測子可以包括：基於所選擇的參考圖元組來確定第一樣本值，第一樣本值對應於第一參考線和複數個預測參考線中的一個相交的第一位置，基於所選擇的第二參考圖元組確定第二樣本值，第二樣本值對應於第二參考線和複數個預測參考線中的一個相交的第二位置，基於第一樣本值和第二樣本值之間的差值以及第一樣本值和第二樣本值中的一個來計算與複數個預測參考線中的一個重疊的該畫面內預測子的圖元值。
在一個實施例中，確定第一樣本值包括在與第一位置相鄰的所選擇的參考圖元組的至少兩個圖元的圖元值之間內插第一樣本值。在一個實施例中，複數個候選相鄰圖元組中選擇參考圖元組包括：選擇複數個候選相鄰圖元組中最接近於當前塊的邊緣的一個候選相鄰圖元組。
在一個示例中，計算畫面內預測子的圖元值可以基於等式：P=Ref1+W．(Ref1-Ref2)，其中P是畫面內預測子的圖元值，Ref1是第一個樣本值，Ref2是第二個樣本值，W是乘法因子(multiplication factor)。
此外，該方法可以包括從複數個候選相鄰圖元組中選擇K個參考圖元組，K個參考圖元組包括所選擇的參考圖元組，K是大於1的正整數。選擇的K個參考圖元組分別定義 K個參考線。當前塊的畫面內預測模式的預測方向定義複數個預測參考線。生成畫面內預測子包括基於選擇的K個參考圖元組來分別確定K個樣本值，以及基於K個樣本值計算與複數個預測參考線中的一個重疊的畫面內預測子的圖元值。K個樣本值中的每一個分別對應於一位置，該位置為各個參考線和複數個預測參考線中的一個相交的位置。
在至少一個實施例中，生成畫面內預測子包括分別基於選擇的K個參考圖元組來確定K個樣本值，並且基於K個樣本值計算與預測參考線中的一個重疊的畫面內預測子的圖元值。
此外，該方法還可以包括基於所選擇的參考圖元組導出當前塊的畫面內預測模式。
本公開的一方面還可以提供一種包括處理電路的視訊編碼裝置。處理電路被配置為接收與圖像訊框中的當前塊相關聯的輸入資料，從與當前塊的邊緣相鄰的複數個候選相鄰圖元組中選擇參考圖元組，基於所選擇的參考圖元組和當前塊的畫面內預測模式生成當前塊的畫面內預測子，並且基於畫面內預測子對當前塊進行編碼或解碼以輸出已編碼的視訊資料或已解碼的塊。每個候選相鄰圖元組與當前塊的邊緣並行佈置。
本公開的方面進一步提供非暫態電腦可讀媒體(non-transitory computer readable medium)，該非暫態電腦可讀媒體存儲用於使裝置的處理電路執行視訊編碼方法的程式指令。該方法包括接收與圖像訊框中的當前塊相關聯的輸入 資料，從與當前塊的邊緣相鄰的複數個候選相鄰圖元組中選擇參考圖元組，基於所選擇的參考圖元組和當前塊的畫面內預測模式生成當前塊的畫面內預測子，並且基於畫面內預測子對當前塊進行編碼或解碼以輸出已編碼的視訊資料或已解碼的塊。每個候選相鄰圖元組與當前塊的邊緣並行佈置。
100‧‧‧視訊編解碼系統
102、502、602‧‧‧已編碼的視訊資料
104、504‧‧‧輸出訊框
106、606‧‧‧輸入訊框
110、510‧‧‧解碼電路
112、122、512、532、622‧‧‧畫面內預測模組
114、124、624、514、624‧‧‧參考圖元組選擇器
116、516‧‧‧解碼控制器
120、620‧‧‧編碼電路
121、621‧‧‧畫面內估計模組
126、626‧‧‧編碼控制器
202‧‧‧預測方向
210、410‧‧‧當前塊
212、412‧‧‧上邊緣
214、414‧‧‧左邊緣
216‧‧‧右下角圖元
226、228、316、m1-a、m2-a、m1-b、m2-b‧‧‧圖元
222[1]-222[M]、224[1]-224[N]、322[m1]~322[m2]、432、434、430‧‧‧圖元組
302‧‧‧預測方向
342‧‧‧第一位置
344‧‧‧第二位置
400‧‧‧訊框
402‧‧‧已處理部分
404‧‧‧未處理部分
422、424‧‧‧參考模板圖元
542、642‧‧‧加法器
544、644‧‧‧殘差解碼器
546‧‧‧輸出濾波器
550、650‧‧‧記憶體
560、660‧‧‧處理器
631‧‧‧畫面間估計模組
632‧‧‧畫面間預測模組
648‧‧‧重建模組
700、800‧‧‧處理
S701、S720、S730、S740、S750、S760、S799、S801、 S820、S830、S840、S850、S860、S870、S899‧‧‧步驟
L1、L2、L3‧‧‧參考線
Ref1‧‧‧第一樣本值
Ref2‧‧‧第二樣本值
Dref、D、D1a、D1b、D2a、D2b‧‧‧距離
LL0、LT0‧‧‧預定高度
LL1、LT1‧‧‧高度
將參考以下圖式詳細描述作為示例提出的本公開的各種實施例，其中相同的圖式標記表示相同的元件，並且其中：第1圖示出了依據本公開的實施例的視訊編解碼系統的示例性功能框圖；第2圖示出了依據本公開的示例性實施例的從與當前塊的第一邊緣相鄰的複數個第一候選相鄰圖元組中選擇至少一個第一參考圖元組並且從與當前塊的第二邊緣相鄰的複數個第二候選相鄰圖元組中選擇至少一個第二參考圖元組以用於生成當前塊的畫面內預測子的示意圖；第3圖示出了依據本公開的示例性實施例的使用兩個選擇的參考圖元組來計算畫面內預測子的圖元值的示意圖；第4圖示出了依據本公開的示例性實施例的從複數個候選相鄰圖元組中選擇參考圖元組以導出當前塊的畫面內預測模式的示意圖；第5圖示出了依據本公開的實施例的第1圖中的視訊編解碼系統中的示例性解碼電路的功能框圖；第6圖示出了依據本公開的實施例的第1圖中的視訊編解 碼系統中用於視訊編碼的處理電路的示例性功能框圖；第7圖示出了依據本公開的實施例的使用諸如第5圖中的處理電路之類的用於視訊解碼的處理電路的視訊解碼處理的流程圖；以及第8圖示出了依據本公開的實施例的使用諸如第6圖中的處理電路之類的用於視訊編碼的處理電路的視訊編碼處理的流程圖。
第1圖示出了依據本公開的實施例的視訊編解碼系統100的示例性功能框圖。視訊編解碼系統100包括用於視訊解碼的處理電路(即，解碼電路)110和用於視訊編碼的處理電路(即，編碼電路)120。編碼電路120接收輸入訊框106作為輸入資料，並透過對輸入訊框106進行編碼產生已編碼的視訊資料102。解碼電路110接收已編碼的視訊資料102作為輸入資料，並透過解碼已編碼的視訊資料102來生成輸出訊框104。視訊編解碼系統100可以透過一個或複數個視訊編解碼裝置來實作，視訊編碼裝置可以包括解碼電路110，編碼電路120，或解碼電路110和編碼電路120。
解碼電路110可以至少包括畫面內預測模組112，參考圖元組選擇器(reference pixel set selector)114和解碼控制器116。畫面內預測模組112可以使用畫面內預測生成在圖像訊框中要解碼的塊(或者當前的塊)的畫面內預測子。參考圖元組選擇器114可以從與當前塊的上邊緣相鄰並與其並行佈置複數個第一候選相鄰圖元組中選擇至少一個水平參考圖元組 和/或從與當前塊的左邊緣相鄰並與其並行佈置的複數個第二候選相鄰圖元組中選擇至少一個垂直參考圖元組。解碼控制器116可以監視已編碼的視訊資料102的解碼，包括確定是否使用畫面內預測模組112來解碼當前塊和/或控制畫面內預測模組112和參考圖元組選擇器114的操作。
在操作中，解碼控制器116接收與當前塊相關聯的已編碼的視訊資料102，並從中提取關於是否使用畫面內預測模組112，相應畫面內預測模式，和/或所選擇的參考圖元組的訊息，以用於生成當前塊的畫面內預測子。所選擇的參考圖元組可以由畫面內預測模組112使用以生成畫面內預測子，以導出用於濾波原始畫面內預測子的梯度濾波參數(gradient filtering parameters)，以計算畫面內預測子的右下角圖元的圖元值，導出用於生成畫面內預測子的畫面內預測模式，或其任何組合等。
可以在編碼視訊資料102中明確地指定所選擇的參考圖元組，或者基於已編碼的視訊資料102和預定視訊編碼標準導出所選擇的參考圖元組。可以基於畫面內預測模式，當前塊的尺寸或形狀，來導出所選擇的參考圖元組。在一些示例中，當當前塊是色度塊時，可以明確地提供所選擇的參考圖元組，其基於與對應於色度塊的亮度塊的所選擇的參考圖元組導出，或者推定為緊鄰色度塊的邊緣的相鄰參考圖元組。
所選擇的參考圖元組可以使用塊級別的語法元素而被發送。此外，僅當當前塊的尺寸大於預定閾值時，才能發送所選擇的參考圖元組。在一些示例中，當前塊的尺寸可基於 塊的圖元面積，塊的相應邊緣的尺寸，塊的較長邊緣的尺寸，和/或塊的較短邊緣的尺寸來測量。在一些示例中，如本申請中所述從複數個候選相鄰集合中選擇一個或複數個參考圖元組可以僅適用於具有大於閾值的尺寸的亮度塊或色度塊的邊緣，而具有等於或小於閾值的尺寸的色度塊或色度塊的邊緣可以自動使用最靠近相應邊緣的參考圖元組。
畫面內預測模式也可以在已編碼的視訊資料102中明確指定，或者基於已編碼的視訊資料102和預定的視訊編碼標準導出。可以使用任何適用的方法來導出畫面內預測模式。在至少一個示例中，可以基於圖像訊框的已解碼部分作為參考模板和所選擇的參考圖元組來導出畫面內預測模式。
編碼電路120可以至少包括畫面內估計模組121，畫面內預測模組122，參考圖元組選擇器124和編碼控制器126。畫面內估計模組121可以分析輸入訊框106並利用畫面內預測確定預測參數以用於編碼圖像訊框中的塊(或當前塊)。預測參數可以包括用於生成當前塊的畫面內預測子的畫面內預測模式和/或用於生成畫面內預測子的所選擇的參考圖元組。參考圖元組選擇器124可以與畫面內估計模組121一起選擇來自與當前塊的上邊緣相鄰並與其並行佈置的複數個第一候選相鄰圖元組中的至少一個水平參考圖元組和/或來自與當前塊的左邊緣相鄰並與其並行佈置的複數個第二候選相鄰圖元組中的至少一個垂直參考圖元。
由畫面內估計模組121選擇或識別的預測參數可以轉發到編碼控制器126，並且編碼控制器126可以使用畫面 內預測來確定是否對當前塊進行編碼，並且如果要使用畫面內預測對當前塊進行編碼，則編碼預測參數作為已編碼視訊資料102的一部分。
由畫面內估計模組121選擇或識別的預測參數也可以被轉發到畫面內預測模組122以生成當前塊的畫面內預測子。畫面內預測模組122可以以類似於畫面內預測模組112的操作的方式生成用於進一步編碼處理的當前塊的畫面內預測子。此外，編碼控制器126可以監視當前塊的編碼，包括確定是否使用畫面內估計模組121和畫面內預測模組122來對當前塊進行編碼，和/或控制畫面內預測模組121，畫面內預測模組122和參考圖元組選擇器124的操作。
在操作中，編碼控制器126可以透過包括關於是否使用畫面內預測，對應的畫面內預測模式和/或所選擇的參考圖元組的訊息來生成與當前塊相關聯的已編碼的視訊資料102以用於產生當前塊的畫面內預測子。所選擇的參考圖元組可以由解碼電路110的畫面內預測模組112使用以生成畫面內預測子，以導出用於對原始畫面內預測子進行濾波的梯度濾波參數，以計算畫面內預測子的右下角圖元的圖元值，或其任意組合等。所選擇的參考圖元組還可以對應於導出用於生成畫面內預測子的畫面內預測模式。
所選擇的參考圖元組可以在已編碼的視訊資料102中被明確指定，或者可以基於已編碼的視訊資料102和預定視訊編碼標準由解碼電路110導出。可以基於畫面內預測模式，當前塊的尺寸或形狀來確定是否發送所選擇的參考圖元 組。在一些示例中，當當前塊是色度塊時，可以基於針對對應於色度塊的亮度塊的所選擇的參考圖元組來顯式地提供或導出所選擇的參考圖元組。
所選擇的參考圖元組可以使用塊級別的語法元素而被發送。此外，僅當當前塊的尺寸，塊的對應邊緣的尺寸，和/或與塊的相應邊緣相對的相鄰塊的邊緣的尺寸大於預定閾值時，才能發送所選擇的參考圖元組。在一些示例中，如本申請中從複數個候選相鄰集合中選擇一個或複數個參考圖元組可以僅適用於具有大於閾值的尺寸的亮度塊或色度塊的邊緣，而具有小於閾值的尺寸的色度塊或色度塊的邊緣可以自動使用最靠近相應邊緣的參考圖元組。
畫面內預測模式也可以在已編碼的視訊資料102中明確指定，或者基於已編碼的視訊資料102和預定視訊編碼標準導出，如參考編碼電路110所描述。
此外，由畫面內估計模組121選擇或識別的預測參數也可以被轉發到畫面內預測模組122以生成當前塊的畫面內預測子。畫面內預測子還可以用於生成當前塊的殘差訊息。 殘留訊息和預測參數可由編碼控制器126編碼并包括在已編碼的視訊資料102中。
如上所述，在一些示例中，所選擇的參考圖元組可以由解碼電路110或編碼電路120使用以用於生成畫面內預測子，以導出用於過濾原始畫面內預測子的梯度濾波參數，以計算畫面內預測子的右下角圖元的圖元值，以導出用於生成畫面內預測子的畫面內預測模式等。參照第2圖-第4圖進一步 說明從解碼的角度來看這些應用的非限制性示例，這將可應用於從編碼的角度的相應的應用。
第2圖示出了依據本公開的示例性實施例的從與當前塊210的上邊緣212相鄰的複數個第一候選相鄰圖元組222[1]-222[M]中選擇至少一個水平參考圖元組並且從與當前塊210的左邊緣214相鄰的複數個第二候選相鄰圖元組224[1]-224[N]選擇至少一個垂直參考圖元組用於生成當前塊210的畫面內預測子。
複數個第一候選相鄰圖元組222[1]-222[M]對應於與上邊緣212相鄰並與其並行佈置的M行圖元。M是大於1的預定整數。複數個第二個候選相鄰圖元組224[1]-224[N]對應於與左邊緣214相鄰並與其並行佈置的N行圖元。N是大於1的預定整數。在一些示例中，M或N可以在2至16的範圍內。在一些實例中，M等於N。
此外，當對應的邊緣(例如，上邊緣212或左邊緣214)具有等於或小於預定閾值的尺寸時，從相應的複數個候選參考圖元組中選擇參考圖元組可能不適用，並且可以默認使用最接近對應邊緣的參考圖元組(例如，對應於左邊緣214的參考圖元組224[1]或對應於上邊緣212的參考圖元組222[1])。在一些示例中，可以基於當前塊210的尺寸是否大於預定閾值，來確定是否從複數個候選參考圖元組中選擇參考圖元組。在一些示例中，基於塊的圖元區域，塊的較長邊緣的尺寸，和/或塊的較短邊緣的尺寸，來測量當前塊的尺寸。
可以基於從已編碼的視訊資料發送或導出的可用 畫面內預測模式中選擇的一個來生成當前塊210的畫面內預測子。可用的畫面內預測模式可以被分為三類，包括：(1)第一組角度畫面內預測模式(例如，從垂直方向到指向左下方向45度方向的預測方向)，其僅需要對應於上邊緣212的水平參考圖元組；(2)第二組角度畫面內預測模式(例如，具有從水平方向到指向上方右-左方向(upper right-left direction)45度的預測方向)，其僅需要對應於左邊緣214的垂直參考圖元組；和(3)第三組角度畫面內預測模式(例如，在垂直方向和水平方向之間的預測方向)和非角度畫面內預測模式，其需要水平參考圖元組和垂直參考圖元組。
在對應於上述類別(1)的示例中，可以基於具有預測方向202和至少一個所選水平參考圖元組的角度畫面內預測模式來生成當前塊210的畫面內預測子。當僅需要一個水平參考圖元組以產生當前塊210的畫面內預測子時，可以選擇M個候選相鄰圖元組222[1]-222[M]中的任何一個。當需要複數個水平參考圖元組來產生當前塊210的畫面內預測子時，可以以任何順序選擇M個候選相鄰圖元組222[1]-222[M]的任何組合，並且所選擇的水平參考圖元組可以是連續行或非連續行。
在對應於上面討論的類別(2)或類別(3)的示例中，可以基於角度預測模式和至少一個所選擇的垂直參考圖元組，或者基於角度預測模式或非角度選擇模式、和至少一個所選擇的水平參考圖元組和至少一個所選擇的垂直參考圖元組，生成當前塊210的畫面內預測子。可以以與當前塊210的 左邊緣214相鄰並且與當前塊210的左邊緣214並行的第二複數個候選相鄰圖元組224[1]-224[N]來選擇至少一個所選擇的垂直參考圖元組，選取方法類似於從複數個候選相鄰圖元組222[1]-222[M]中選擇至少一個所選擇的垂直參考圖元組。
當角度畫面內預測模式具有比垂直方向更靠近水平方向的預測方向時，或者當當前塊的高度大於其寬度時，用於生成畫面內預測子的垂直參考圖元組可以從複數個候選相鄰圖元組224[1]-224[N]中選擇，而水平參考圖元組可以被設置為默認選擇(諸如接近於上邊界的相鄰參考圖元組224[1])，並且因此不需要在塊級別被發送。類似地，當角度預測模式具有比水平方向更靠近垂直方向的預測方向時，或當當前塊的寬度大於其高度時，用於生成畫面內預測子的水平參考圖元組可以從複數個候選相鄰圖元組222[1]-222[M]中選擇，而垂直參考圖元組可以被設置為默認選擇(諸如接近於左邊緣214的相鄰參考圖元組224[1])，並且因此不需要在塊級別被發送。在一些示例中，當選擇兩個或複數個參考圖元組時，最接近候選相鄰圖元組合中的一個(例如，用於上邊緣212的候選相鄰圖元組222[1]和/或用於左邊緣214的候選相鄰圖元組合224[1])可以總是默認地選擇為所選擇的參考圖元組之一。
當選擇對應於特定邊緣的兩個或複數個參考圖元組以產生畫面內預測子時，畫面內預測子可以被生成為從兩個或複數個選擇的參考圖元組導出的各個樣本值的權重組合。相應的權重可以從編碼視頻數據102中提取或包括在編碼視頻數據102中。相應的權重可以依據應用視頻編碼標準導出或預 定。
例如，當從M個候選相鄰圖元組222[1]-222[M]中選擇K個參考圖元組時，K是大於1的正整數，所選擇的K個參考圖元組可以分別定義K個參考線。當前塊的畫面內預測模式的預測方向也可以定義複數個預測參考線。可以透過分別基於K個選擇的參考圖元組來確定K個樣本值來生成與預測參考線之一重疊的畫面內預測子的圖元值，並且基於K個樣本值來計算畫面內預測子的圖元值。K個樣本值中的每個可以對應於所選擇的參考圖元組的各個參考線和一個預測參考線相交的相應位置。可以基於分別適用於K個樣本值的K個權重來計算畫面內預測子的圖元值。換句話說，畫面內預測子的圖元值可以基於以下等式來確定：P=W1．Ref1+W2．Ref2+...+WK．RefK,其中P表示畫面內預測子的圖元值，Ref1-RefK表示從K個選擇的參考圖元組導出的各個樣本值，並且W1-WK表示適用於K個選擇的參考圖元組的各個權重。
在一些示例中，依據適用的視訊編碼標准，權重W1-WK可以基於當前塊中的圖元的位置，當前塊的畫面內預測模式的預測方向，或者在K個選擇的參考圖元組中的主參考圖元組來確定。可以將K個選擇的參考圖元組中的所選主要參考圖元組的權重設置為在所有權重W1-WK中最大。此外，對於更靠近當前塊210的對應邊緣的所選擇的參考圖元組的權重可以被設置為大於對當前塊210的相應邊緣更遠的另一個選擇的參考圖元組的權重。
依據各種替代方法或組合，可以使用來自複數個候選相鄰參考圖元組222[1]-222[M]和/或224[1]-224[N]的所選擇的參考圖元組來生成畫面內預測子。
依據使用所選擇的參考圖元組的一種替代方法，可以基於最接近對應邊緣212和214的相鄰參考圖元組222[1]和224[1]和指定的畫面內預測模式，來生成當前塊的原始畫面內預測子。可以使用基於從複數個相鄰候選圖元組222[1]-222[M]和/或224[1]-224[N]中的所選擇的參考圖元組計算的梯度訊息，來調整原始畫面內預測子。可以透過基於所計算的梯度訊息調整原始畫面內預測子，來生成最終畫面內預測子。
在一些示例中，梯度訊息G可以對應於基於沿特定的畫面內預測模式的預測方向的對應的相同邊緣的兩個選擇的參考圖元組導出的兩個樣本值之間的差值。當原始畫面內預測子的圖元的值是Praw時，可以基於以下等式來確定與Praw對應的最終畫面內預測子P的圖元值：P=Praw+A．G,其中A表示預定參數。在一些示例中，當預測圖元更靠近所選擇的參考圖元組時，可以將參數A設置得更大。在至少另一個示例中，參數A可以隨塊尺寸而變化。
在至少一個實施例中，梯度訊息可以總是透過使用對應邊緣的第一和第二最近參考圖元組(例如，對應於上邊緣212的候選圖元組222[1]和222[2]和/或對應於左邊緣214的候選圖元組224[1]和224[2])之間的差值來生成。
依據使用所選擇的參考圖元組的另一種替代方法，針對相應邊緣選擇至多一個參考圖元組。當選擇水平參考圖元組和垂直參考圖元組以產生當前塊210的畫面內預測子時，所選擇的水平參考圖元組和當前塊210的上邊緣212之間的最短距離可以不同於垂直選擇的參考圖元組與當前塊210的左邊緣214之間的最短距離。
依據使用所選擇的參考圖元組的另一替代方法，在生成如上所述的原始畫面內預測子之後，可以透過應用梯度濾波器和/或雙邊界(bi-boundary)濾波器於原始畫面內預測子生成當前塊的最終畫面內預測子。可以基於所選擇的水平參考圖元組和/或所選擇的垂直參考圖元組而不是僅使用最接近的參考圖元組(例如，候選圖元組222[1]或224[1])，來生成用於梯度濾波器和/或雙邊界濾波器的濾波參數。
依據使用所選擇的參考圖元組的另一替代方法，當前塊的畫面內預測子的生成包括首先計算當前塊210的畫面內預測子的右下角圖元216的圖元值，其可以基於所選擇的參考圖元組來計算。可以基於來自角圖元216正上方的候選圖元組222[1]的圖元226的圖元值，來自角圖元216的正左側的候選圖元組224[1]的圖元228的圖元值，基於來自相鄰候選圖元組222[1]-222[M]的兩個或更多個選擇的參考圖元組導出的第一梯度訊息Delta_T，和基於在來自相鄰候選圖元組224[1]-224[N]的兩個或更多個選擇的參考圖元組導出的第二梯度訊息Delta_L，來確定右下角圖元216的圖元值。角圖元216的圖元值P可以基於以下等式來確定： P=(Ref_T+a．Height．Delta_T+Ref_L+b．Width．Delta_L),其中高和寬對應於當前塊210的尺寸，並且a和b表示預定參數。
參數a和b可以基於預測方向，塊尺寸，角圖元216到所選擇的參考圖元組的距離等來確定。在一些示例中，參數a和b可以基於預測和/或塊尺寸的方向來發送或導出，或從複數個候選值中選擇。
在一些示例中，發送角圖元216的粗略值，並且可以基於從所選擇的參考圖元組導出的梯度訊息來調整角圖元216的最終圖元值。
儘管在本公開中示出了用於使用所選擇的參考圖元組來生成畫面內預測子的許多示例方法，但是存在其他可應用的方法並且這些方法也包括於實施例中。
此外，在一些示例中，是否選擇至少一個對應於當前塊的特定邊緣的參考圖元組或者自動使用最接近對應替代邊緣的參考圖元組可以取決於邊緣的尺寸是否大於預定閾值。例如，當邊緣具有大於預定數量圖元的尺寸時，將基於從複數個相鄰候選參考圖元組中選擇至少一個參考圖元組來執行畫面內預測子的生成。在這種情況下，可以透過已編碼的視訊資料102來發送要被選擇的參考圖元組，或者基於已編碼的視訊資料102來導出要被選擇的參考圖元組。當邊緣具有等於或小於預定數目圖元的尺寸時，可以基於最接近對應邊緣的相鄰候選圖元組來執行畫面內預測子的生成。在這種情況下，不需要指示哪個參考圖元組被選擇。
此外，是否選擇對應於當前塊的特定邊緣的至少一個參考圖元組或者自動使用最接近對應邊緣的相鄰候選圖元組，可以取決於與邊緣及/或當前塊相鄰的相鄰塊的邊緣尺寸是否大於各自的預定閾值。指示要選擇哪個參考圖元組的訊息可以透過已編碼的視訊資料102來發送或者基於已編碼的視訊資料102來導出。
在一些示例中，當當前塊是色度塊時，可以基於為對應於色度塊的亮度塊的所選參考圖元組，來發送或導出所選擇的參考圖元組。在一些示例中，當當前塊是色度塊時，透過如上所述選擇參考圖元組或使用與替代色度塊的邊緣緊鄰的參考圖元組來對色度塊進行編碼或解碼。
此外，當使用四叉樹加二叉樹(quadtree plus binary tree,QTBT)結構對當前塊所屬的訊框進行編碼時，該訊框的亮度和色度塊可以具有不同塊尺寸和/或形狀的不同的塊劃分。用於色度塊的參考圖元組可以使用默認設置的最接近的參考圖元，參考包括與色度的左上角圖元共位(co-located)的圖元的對應亮度塊的參考圖元組的選擇。在一些示例中，當使用4：2：0顏色格式時，用於亮度塊的第一和第二最接近的參考圖元組可以對應於相應色度塊的第一最近參考圖元組，並且用於亮度塊的第三和第四最近參考圖元組可以對應於針對相應色度塊的第二最接近的參考圖元組。當然，色度塊可以使用單獨被發送的或導出的參考圖元組選擇。
第3圖示出了依據本公開的示例性實施例的使用兩個選擇的參考圖元組322[m1]和322[m2]來計算畫面內預測 子的圖元值的示意圖。第3圖示出了使用參考第2圖簡要示出的從複數個相鄰圖元組中選擇的參考圖元組來生成畫面內預測子的具體示例。
從與當前塊210的上邊緣212相鄰並並行的相鄰候選圖元組222[1]-222[M]中選擇所選擇的參考圖元組322[m1]和322[m2]，並且索引m1和m2的範圍從1到M。當然，依據用於生成畫面內預測子的指定畫面內預測模式，可以額外地或替代地基於從相鄰候選參考圖元組224[1]-224[N]中選擇的參考圖元組，以與第3圖所示的示例相似的方式，來計算畫面內預測子的圖元值。
當選擇對應於特定邊緣212的兩個參考圖元組322[m1]和322[m2]以產生畫面內預測子時，可以依據從兩個所選擇的參考圖元組導出樣本值的權重組合，生成畫面內預測子。 權重組合可以以從兩個選擇的參考圖元組中的一個導出的樣本值和從由預定乘法因子(multiplication factor)調整的兩個選擇的參考圖元組導出的不同樣本值的總和的形式來執行。
例如，所選擇的參考圖元組322[m1]可以定義第一參考線L1。所選擇的參考圖元組322[m2]可以定義第二參考線L2。此外，當前塊的指定畫面內預測模式的預測方向302可以定義預測參考線，其中預測參考線L3中的一個與畫面內預測子的圖元316重疊。可以基於所選擇的參考圖元組322[m1]來確定第一樣本值Ref1。第一樣本值Ref1可以對應於第一參考線L1和預測參考線L3相交的第一位置342。在一些示例中，可以透過在被選擇的參考圖元組322[m1]中的至少兩個圖 元(例如，圖元m1-a和m1-b)的圖元值之間，使用與第一位置和至少兩個圖元之間的距離D1a和D1b分別成反比的比率的內插操作來確定第一樣本值Ref1，其中該至少兩個圖元與第一位置342相鄰。此外，可以基於所選擇的參考圖元組322[m2]來確定第二樣本值Ref2。第二樣本值Ref2對應於第二參考線L2和預測參考線L3相交的第二位置344。在一些示例中，可以透過在被選擇的參考圖元組322[m2]中的至少兩個圖元(例如，圖元m2-a和m2-b)的圖元值之間，使用與第二位置和至少兩個圖元之間的距離D2a和D2b分別成反比的比率的內插操作來確定第二樣本值Ref2，其中該至少兩個圖元與第二位置344相鄰。當然，可以透過基於所選擇的參考圖元組322[m1]和/或322[m2]的任何其它適用方法來確定樣本值Ref1和Ref2。
可以基於第一樣本值Ref1和第二樣本值Ref2來計算與預測參考線L3重疊的畫面內預測子的圖元316的圖元值。在一些示例中，可以基於第一樣本值Ref1和第二樣本值Ref2之間的差值以及第一樣本值Ref1和第二樣本值Ref2中的一個，來計算圖元316的值。在至少一個示例中，畫面內預測子的圖元值可以基於以下等式來確定：P=Ref1+W．(Ref1-Ref2),其中P表示畫面內預測子的圖元值，W表示乘法因子。
可以基於當前塊的尺寸或畫面內預測模式或當前塊中的圖元316的位置來設置乘法因子W。在一些示例中，乘法因子W可以基於第一位置342和圖元316之間的距離D和 第一位置342與第二位置344之間的距離Dref來確定。在至少一個示例中，可以基於以下等式來確定畫面內預測子的圖元值： 其中B表示另一預定參數。在一些示例中，可以經由已編碼的視訊資料102發送參數B，或者基於已編碼的視訊資料102中提供的訊息導出參數B。
第4圖示出了使用所選擇的圖元組的另一種方法的示意圖，該方法包括依據本公開的示例性實施例從複數個候選相鄰圖元組中選擇參考圖元組，以導出當前塊410的畫面內預測模式。當前塊410是訊框400的一部分，並且訊框400包括已處理部分402和未處理部分404。已處理部分402包括在處理當前塊410之前已被用於編碼或解碼處理的塊。未處理部分404包括尚未被處理用於編碼或解碼的塊，其中當前塊410是未處理部分404的一部分。
當前塊410包括上邊緣412和左邊緣414。對應於上邊緣412的一個或複數個參考圖元組432和對應於左邊緣414的一個或複數個參考圖元組434，以類似於參考第2圖所示的參考圖元組的方式而被選擇。所選擇的參考圖元組432和所選擇的參考圖元組434被一起標記為所選擇的參考圖元組430。
代替直接用於生成畫面內預測子或除了直接用於生成畫面內預測子之外，所選擇的參考圖元組430可以與訊框400的處理部分402一起使用以導出當前塊410的畫面內預測 模式。例如，處理部分402內與上邊緣412相鄰的參考模板(template)圖元422和與左邊緣414相鄰的參考模板圖元424可以用作表示當前塊410的參考模板。參考模板圖元422可以具有與上邊緣412的長度相同的寬度和預定高度LT0。在一些示例中，參考模板圖元422可以具有與所選參考圖元組432和上邊緣412之間的最短距離相同的高度LT1。參考模板圖元424可以具有與左邊緣414的長度相同的寬度和預定高度LL0。在一些示例中，參考模板圖元424可以具有與所選擇的參考圖元組434和左邊緣414之間的最短距離相同的高度LL1。
因此，編碼電路可以從已編碼的視訊資料排除關於當前塊的畫面內預測模式的訊息，並且解碼電路可以如本文所述相應地導出畫面內預測模式。解碼電路可以推導出畫面內預測模式，其是透過識別對應於參考模板圖元422和參考模板圖元424的已解碼的圖元值和使用選擇的參考圖元組430和各種候選畫面內預測模式產生對應的計算圖元值之間的最小誤差的畫面內預測模式而來導出的。另一方面，編碼電路可以基於參考模板圖元422和參考模板圖元424的圖元值和使用所選擇的參考圖元組430和各種候選畫面內預測模式對應的計算的圖元值，確定畫面內預測模式。在一些示例中，編碼電路可以基於當前塊410和各種候選畫面內預測模式來確定畫面內預測模式，並且還可以確定所選擇的參考圖元組，其可以與參考模板圖元422和424的已解碼圖元值結合，被用作發送所確定的畫面內預測模式的方法。
此外，在確定了畫面內預測模式之後，可以基於 相同的所選擇的參考圖元組430或不同的水平和/或垂直參考圖元組來生成當前塊410的畫面內預測子。
第5圖示出了依據本公開的實施例的諸如第1圖中的視訊編解碼系統100的視訊編解碼系統中的示例性解碼電路510的功能框圖。第5圖是解碼電路510的簡化圖，因此可能不顯示解碼電路510的所有細節和變化。
解碼電路510包括可以對應於第1圖中的畫面內預測模組112，參考圖元組選擇器114和解碼控制器116的畫面內預測模組512，參考圖元組選擇器514和解碼控制器516。 如果解碼控制器516確定使用畫面內預測來解碼當前塊，畫面內預測模組512可以基於指定或導出的畫面內預測模式生成當前塊的最終預測子。如參考第3圖所示，參考圖元組選擇器514可以從複數個相鄰候選圖元組中選擇水平和/或垂直參考圖元組。在一些示例中，如參考第2圖和第3圖所示，畫面內預測模組512可以基於所選擇的參考圖元組和由解碼控制器516通知的畫面內預測模式來生成畫面內預測子。在一些示例中，畫面內預測模組512可以基於如參考第2圖和第4圖所示的所選擇的參考圖元組導出畫面內預測模式。
解碼電路510還包括畫面內預測模組532，加法器542，殘差解碼器544，輸出濾波器546，記憶體550和處理器560。當使用畫面間預測來解碼當前塊時，畫面間預測模組532可以基於指定或導出的運動訊息，生成當前塊的畫面間預測模組。此外，殘差解碼器544可以依據來自解碼控制器516的殘差訊息生成當前塊的剩餘部分。加法器542可以透過將自殘差 解碼器544的當前塊的殘差部分、自畫面內預測模組512的當前塊的畫面內預測子，及/或自畫面間預測模組532的當前塊的畫面間預測子相加，來產生當前塊(即，已解碼的塊)的已解碼圖像。
輸出濾波器546可以將來自加法器542的已解碼塊組合成圖像訊框，依據預定濾波處理來處理圖像訊框，並輸出濾波後的圖像訊框作為輸出訊框504。記憶體550可以存儲來自輸出濾波器546的已濾波的圖像訊框和/或來自預測模組(畫面內預測模組512或畫面間預測模組532)的當前訊框的先前已解碼的塊，其可被預測模組(畫面內預測模組512或畫面間預測模組532)進一步用於檢索參考樣本。
解碼控制器516接收並分析已編碼的視訊資料502並提取當前塊的殘留訊息和預測參數。解碼控制器516可以向殘差解碼器544提供殘留訊息，並將預測參數提供給畫面內預測模組512或畫面間預測模組532，以便重建當前塊的圖像。
在操作中，當要解碼當前塊時，解碼控制器516接收與當前塊相關聯的已編碼的視訊資料502，並使用畫面間預測或畫面內預測來提取關於是否要解碼當前塊的訊息。當解碼控制器516使用畫面內預測確定當前塊要解碼時，解碼控制器516將當前塊的預測參數轉發給畫面內預測模組512。預測參數可以包括畫面內預測訊息，諸如指示要選擇哪一個相鄰候選圖元組的參考圖元組選擇訊息，指示用於生成當前塊的畫面內預測子的畫面內預測模式是否要被發送或導出的標誌，和/或畫面內預測模式。由解碼控制器516提取或識別的預測參數 可以在已編碼的視訊資料502中明確指定，或者基於已編碼的視訊資料502中提供的訊息和預定視訊編碼標準導出。
如參考第2圖和第3圖所示，畫面內預測模組512可以依據由解碼控制器516提供的所選擇的參考圖元組和畫面內預測模式來生成當前塊的畫面內預測子。如參考第2圖和第4圖所示，畫面內預測模組512可以依據所選擇的參考圖元組和當前塊所屬的訊框的處理部分，導出當前塊的畫面內預測模式，並且基於導出的畫面內模式，生成畫面內預測模式模式。
解碼控制器516還將殘差訊息轉發到殘差解碼器544，其中殘差解碼器544生成當前塊的殘差部分。現在當前塊可以透過在加法器542處將來自畫面內預測模組512的畫面內預測子和來自殘差解碼器544的當前塊的殘差部分相加來解碼。
此外，如第5圖所示，處理器560與記憶體550電耦合，並且可以被配置為執行存儲在記憶體550中的程式指令以執行各種功能。處理器560可以包括單個或複數個處理核心。諸如解碼控制器516，畫面內預測模組512，參考圖元組選擇器514，畫面間預測模組532，加法器542，殘差解碼器544，和/或輸出濾波器546等的解碼電路510的各種組件可以由硬件組件，執行程式指令的處理器560，或其組合來實作。 當然，處理器560還可以執行程式指令來控制已編碼的視訊資料502的接收以及輸出訊框504的輸出或顯示。在一些示例中，處理器560可執行程式指令以執行可能不直接涉及解碼已編碼的視訊資料502的功能。
記憶體550可用於存儲程式指令，對應於預測參數的訊息，先前解碼的塊，輸出訊框，和/或中間資料，以用於執行解碼電路510的各種功能。在一些示例中，記憶體550包括諸如半導體或固態記憶體，隨機存取記憶體(RAM)，只讀記憶體(ROM)，硬盤，光盤或其它合適的存儲媒體的非暫態電腦可讀媒體。在一些實施例中，記憶體550包括上面列出的兩個或複數個非暫態電腦可讀媒體的組合。
第6圖示出了依據本公開的實施例的第1圖中的視訊編碼系統100的視訊編解碼系統中用於視訊編碼的編碼電路620的示例性功能框圖。第6圖是編碼電路620的簡化圖，因此可能不顯示編碼電路620的所有細節和變化。
編碼電路620包括畫面內估計模組621，畫面內預測模組622，參考圖元組選擇器624和編碼控制器626，其可分別對應於第1圖中的畫面內估計模組121，畫面內預測模組122，參考圖元組選擇器124和編碼控制器126。編碼電路620還包括畫面間估計模組631，畫面間預測模組632，加法器642，殘差編碼器644，重構模組648，記憶體650和處理器660。
編碼控制器626監視畫面內估計模組621，畫面內預測模組622，參考圖元組選擇器624，畫面間估計模組631和畫面間預測模組632的操作。編碼控制器626可以將每個輸入訊框劃分為複數個塊並且指示畫面內估計模組621和/或畫面間估計模組631確定每個塊的預測方案，預測模式和/或相應的預測參數。編碼控制器626可以選擇畫面內預測模組622或畫面間預測模組632中的一個，以將當前塊的對應的最終預 測子輸出到加法器642。加法器642接收當前塊的原始圖像和當前塊的最終預測子，並透過從當前塊的原始圖像中減去最終預測子來輸出當前塊的殘差部分。殘差編碼器644接收並編碼當前塊的剩餘部分。編碼控制器626可以基於來自畫面內估計模組621和/或畫面間估計模組631的預測參數來產生已編碼的視訊資料602，并自殘差編碼器644來輸出。
畫面內預測模組622和畫面間預測模組632可以分別從畫面內估計模組621和畫面間估計模組631接收預測參數，並且可以以類似於第5圖中畫面內預測模組512和畫面間預測模組532的操作相似的方式來產生用於當前塊的對應的最終預測子。畫面內預測模組622和/或畫面間預測模組632可以以類似於畫面內預測模組512和畫面間預測模組532的操作類似的方式生成最終預測子。因此，省略其詳細描述。
在一些示例中，編碼控制器626可以控制畫面內估計模組621，參考圖元組選擇器624，畫面間估計模組631，畫面內預測模組622，畫面間預測模組632，和/或殘差編碼器644，以對基於不同預測方案和參數編碼當前塊，然後可以選擇用於對當前塊進行編碼的編碼方案和參數的最佳組合。
重構模組648可以從畫面內預測模組622或畫面內預測模組632接收最終預測值，並從殘差編碼器644接收當前塊的已重建殘差部分。基於這樣的訊息，重建模組648可以生成以與第5圖中的加法器542和輸出濾波器546的操作相似的方式，產生當前塊的已重建圖像及/或已重建訊框。已重建的塊和/或訊框可以存儲在記憶體650中，並且可由畫面內預 測模組622，畫面內預測模組632，畫面內估計模組621和/或畫面內估計模組631存取，以用於估計下一個塊的預測參數。
在操作中，當如編碼控制器626所指示，當前塊利用畫面內預測而被編碼時，畫面內估計模組621從輸入訊框606接收當前塊的原始圖像。畫面內估計模組621可以使用參考圖元組選擇器624來確定合適的預測參數，諸如如參考第2圖和3所示的所選擇的畫面內預測模式和/或來自相鄰候選參考圖元組的所選擇的參考圖元組。可以依據預定的視訊編碼標準從可用的畫面內預測模式中選擇畫面內預測模式以用於畫面內預測。
畫面內預測模組622可以基於由畫面內估計模組624提供的預測參數來生成當前塊的畫面內預測子。畫面內預測模組622可以與參考圖元組選擇器624一起工作，以依據如第2圖和第3圖所示的自相鄰候選參考圖像組和畫面內預測模式產生當前塊的畫面內預測子。在一些示例中，畫面內預測模組622可以與相鄰參考圖元組選擇器624一起工作，以依據如第2圖和第4圖所示的來自相鄰參考圖元組的所選擇的參考圖元組來導出畫面內預測模式，并依據所選擇的參考圖元組，其它預定的相鄰參考圖元組和導出的畫面內預測模式，生成當前塊的畫面內預測子。
加法器642可以基於當前塊的原始圖像和最終預測子輸出當前塊的殘差部分，並對殘差部分進行編碼。編碼控制器626可以從畫面間估計模組621和/或畫面間估計模組631和已編碼的殘差訊息收集預測參數，並且確定當前塊的所選編 碼方案是否可接受。
此外，如第6圖所示，處理器660與記憶體650電耦合，並且可以被配置為執行存儲在記憶體650中的程式指令，以執行各種功能。處理器660可以包括單個或複數個處理核心。諸如編碼控制器626，畫面內預測模組622，畫面內估計模組621，畫面間預測模組632，畫面間估計模組631，參考圖元組選擇器624，加法器642，殘差編碼器644和/或重建模組648的編碼單元620的各種組件可以由硬件組件，執行程式指令的處理器660，或其組合來實作。當然，處理器660還可以執行程式指令以控制輸入訊框606的接收和已編碼的視訊資料602的輸出。在一些示例中，處理器660可以執行程式指令以執行可能對編碼視訊資料602進行編碼不直接相關的功能。
記憶體650可用於存儲程式指令，對應於預測參數已重建塊的訊息，輸入訊框，和/或中間資料，以用於執行編碼電路620的各種功能。在一些示例中，記憶體650包括諸如半導體或固態記憶體，隨機存取記憶體(RAM)，只讀記憶體(ROM)，硬盤，光盤或其它合適的存儲媒體之類的非暫態電腦可讀媒體。在一些實施例中，記憶體650包括上面列出的兩個或更多個非暫態電腦可讀媒體的組合。
此外，第5圖中的解碼電路510和第6圖中編碼電路620可以在相同的電子設備中實現，並且解碼電路510和編碼電路620的各種組件可以被共享或重用。例如，解碼電路510中的記憶體550，處理器560，畫面內預測模組512，畫面內預測模組532，相鄰參考圖元組選擇器514和輸出濾波器546 中的一個或複數個也可以用作第6圖中的記憶體650，處理器660，畫面內預測模組622，畫面內預測模組632，相鄰參考圖元組選擇器624和重建模組648。
第7圖示出了依據本公開的實施例的使用諸如第5圖中的解碼電路510的視訊解碼處理電路的視訊解碼處理700的流程圖。應當理解，可以在第7圖所示的處理700之前，期間和/或之後執行附加操作。處理700從S701開始，並進入S710。
在S710，與圖像訊框中的當前塊相關聯的已編碼的視訊資料被接收作為輸入資料。例如，解碼控制器516可以接收包括與當前塊相關聯的輸入資料的已編碼的視訊資料502。
在S720，當使用畫面內預測對當前塊進行編碼時，識別當前塊的畫面內預測模式。在一些示例中，畫面內預測模式可以透過已編碼的視訊資料被發送或者依據已編碼的視訊資料中提供的訊息而導出。在S730和/或S740中與所識別的畫面內預測模式一起選擇的參考圖元組可以被使用，以生成當前塊的畫面內預測子。例如，解碼控制器516可以從已編碼的視訊資料502提取預測參數，並確定當前塊的畫面內預測模式。
在一些示例中，在S730和/或S740中選擇的參考圖元組可以被使用，以導出當前塊的畫面內預測模式。在這種情況下，可以在S730和S740之後執行S720。
在S730，從與當前塊的第一邊緣並列佈置的複數 個第一候選相鄰圖元組中選擇一個或複數個第一參考圖元組。例如，參考圖元組選擇器514可以從對應於上邊緣212的候選相鄰圖元組222[1]-222[M]中選擇一個或複數個參考圖元組，或者從候選向量圖元組224[1]-224[N]中選擇一個或複數個參考圖元組作為如參照第2圖所描述的一個或複數個第一參考圖元組。
在S740，從與當前塊的第二邊緣並列佈置的複數個第二候選相鄰圖元組中選擇一個或複數個第二參考圖元組。例如，參考圖元組選擇器514還可以從如參考第2圖所述的另一個候選相鄰圖元組222[1]-222[M]或224[1]-224[N]中選擇一個或複數個參考圖元組作為一個或複數個第二參考圖元組。
當畫面內預測子的生成需要對應於當前塊的兩個不同邊緣的所選擇的參考圖元組時，可以執行S740。在一些示例中，當依據預定的視訊編碼標準已經預先指定當前塊的第二邊緣的所選擇的參考圖元組時，或者當僅需要來自當前塊的上邊緣或左側邊緣中的一個的選擇的參考圖元組時，可以省略S740。
在一些示例中，S730和S740中所選擇的參考圖元組可用於導出當前塊的畫面內預測模式。在這種情況下，可以在S730和S740之後執行S720。例如，畫面內預測模組512，參考圖元組選擇器514和解碼控制器516可以一起工作，以如參照第4圖所述的方式導出畫面內預測模式。
在S750，使用所識別的畫面內預測模式和/或所選 擇的參考圖元組來生成當前塊的畫面內預測子。例如，當使用畫面內預測對當前塊進行編碼時，畫面內預測模組512可以使用如參考第2圖和第3圖所描述的所選擇的參考圖元組和/或使用如參考第2圖和第4圖所示的所識別的畫面內預測模式，來生成當前塊的畫面內預測子。
在S760，基於畫面內預測子對當前塊進行解碼以輸出已解碼的塊。例如，如參照第5圖所述，加法器542基於組合當前塊的殘差部分和來自畫面內-畫面間預測模組512的最終預測子，來生成當前塊的已解碼塊。
在S760之後，該過程進行到S799並終止。
第8圖示出了依據本公開的實施例的使用諸如第6圖中的編碼電路620的視訊編碼處理電路的視訊編碼處理800的流程圖。應當理解，可以在第8圖所示的處理800之前，期間和/或之後執行附加操作。處理800從S801開始，進入S810。
在S810，包括將利用畫面內預測編碼的當前塊的輸入圖像訊框被接收作為輸入資料。例如，處理電路620可以接收包括具有當前塊的圖像訊框的輸入訊框606。
在S820-S840中，用於使用畫面內-畫面間預測對當前塊進行編碼的預測參數被估計。例如，畫面內估計模組621與相鄰參考圖元組選擇器624一起使用如參照第2圖-第4圖所述畫面內預測來估計用於對當前塊進行編碼的預測參數。
在S820中，用於對當前塊進行編碼的畫面內預測模式被識別。在S830，從與當前塊的第一邊緣並列佈置的複數個第一候選相鄰圖元組中選擇一個或複數個第一參考圖元 組。例如，參考圖元組選擇器624可以從對應於從如第2圖所示的上邊緣212的候選相鄰圖元組222[1]-222[M]中選擇一個或複數個參考圖元組，或者對應於左邊緣214的候選相鄰圖元組224[1]-224[N]選擇一個或複數個參考圖元組作為一個或複數個第一參考圖元組。
在S840，從與當前塊的第二邊緣並聯佈置的複數個第二候選相鄰圖元組中選擇一個或複數個第二參考圖元組。例如，參考圖元組選擇器814還可以從如第2圖所示的對應於邊緣212或邊緣214中的另一個的候選相鄰圖元組222[1]-222[M]或224[1]-224[N]中選擇一個或複數個參考圖元組，作為一個或複數個第二參考圖元組。
當畫面內預測子的生成需要對應於當前塊的兩個不同邊緣的所選擇的參考圖元組時，可以執行S840。在一些示例中，當依據預定的視訊編碼標準已經預先指定當前塊的第二邊緣的所選擇的參考圖元組時，或者當僅需要來自當前塊的上邊緣或左側邊緣中的一個的選擇的參考圖元組時，可以省略S840。
在一些示例中，S830和/或S840中所選擇的參考圖元組可用於導出當前塊的畫面內預測模式。在這種情況下，可以在S830和S840之後執行S820。例如，畫面內估計模組621，參考圖元組選擇器624和編碼控制器626可以一起工作，以參照第6圖所述的方式導出畫面內預測模式。
在S850，基於在S820-S840中確定的預測參數來生成當前塊的畫面內預測子。例如，畫面內預測模組622借助 於參考圖元組選擇器624，基於由參照第6圖所述的畫面內估計模組621提供的預測參數生成當前塊的畫面內預測子。在一些示例中，畫面內預測模組622可以使用如參考第2圖和3所示的所選擇的參考圖元組和/或使用如參考第2圖和第4圖所示的所識別的畫面內預測模式，來生成當前塊的畫面內預測子
在S860，預測參數是否可接受被確定。如果預測參數是可接受的，則處理進行到S870。如果預測參數是不可接受的，則該處理可以進行到S820或S830，以確定可選的畫面內預測模式或替可選的參考圖元組，或者進行到S899，使得可以使用不同的預測方案對當前塊進行編碼。例如，編碼控制器626接收由畫面內估計模組621估計的預測參數和來自殘差編碼器644的編碼殘差訊息，其基於來自畫面內預測模組622的畫面內預測子而被產生。編碼控制器626可以基於預定的編碼標準，確定預測參數和編碼殘差訊息是否可接受，並確定畫面內-畫面間估計模組是否必須提供不同的估計預測參數集合和/或是否僅使用畫面內預測或畫面間預測。
在S870，基於畫面內預測子和估計的預測參數對當前塊進行編碼以輸出已編碼的視訊資料。在一些示例中，透過對來自S820-S840的預測參數進行編碼以及基於從當前塊的原始圖像中減去最終預測子而生成的殘差訊息，對當前塊進行編碼。例如，如第6圖所示的加法器642生成當前塊的殘差訊息，殘差編碼器644生成已編碼的殘差訊息，編碼控制器626基於來自畫面內預測模組621的預測參數和來自殘差編碼器的已編碼的殘差訊息，生成已編碼的視訊資 料。在一些示例中，預測參數可以包括畫面內預測模式，指定是否從複數個相鄰候選集選擇參考圖元組的訊息，和/或所選擇的參考圖元組。可以如參考第2圖和第4圖所示預測參數被發送或被導出。
在S870之後，處理進行到S899並終止。
儘管已經結合作為示例提出的具體實施例描述了本公開的各方面，但是可以對示例的替代，修改和變化進行說明。因此，本文所闡述的實施例旨在是說明性的而不是限制性的。在不脫離下面提出的權利要求的範圍的情況下，可以進行改變。

Claims (22)

  1. 一種視訊編碼方法，包括：接收與一圖像訊框中的一當前塊相關聯的輸入資料；從與該當前塊的一邊緣相鄰的複數個候選相鄰圖元組中選擇一參考圖元組，每組候選相鄰圖元組與該當前塊的該邊緣並行佈置；基於所選擇的該參考圖元組和該當前塊的一畫面內預測模式生成該當前塊的一畫面內預測子；其中，該當前塊的該畫面內預測模式的預測方向定義複數個預測參考線；基於所選擇的該參考圖元組確定一第一樣本值；基於該第一樣本值計算與該複數個預測參考線中的一第一預測參考線重疊的該畫面內預測子的圖元值；以及基於該畫面內預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或一已解碼的塊。
  2. 如申請專利範圍第1項所述之視訊編碼方法，還包括從輸入資料中提取指示所選擇的該參考圖元組的訊息、或將所選擇的該參考圖元組的訊息包括於已編碼的視訊資料中。
  3. 如申請專利範圍第1項所述之視訊編碼方法，還包括基於該畫面內預測模式或該當前塊的形狀導出所選擇的該參考圖元組。
  4. 如申請專利範圍第1項所述之視訊編碼方法，還包括：從該複數個候選相鄰圖元組中選擇一第二參考圖元組，其中，所選擇的該參考圖元組定義一第一參考線，所選擇的該第二參考圖元組定義一第二參考線，以及生成該畫面內預測子包括：基於所選擇的該參考圖元組確定該第一樣本值，該第一樣本值對應於該第一參考線和該複數個預測參考線中的該第一預測參考線相交的一第一位置；基於所選擇的該第二參考圖元組確定一第二樣本值，該第二樣本值對應於該第二參考線和該複數個預測參考線中的該第一預測參考線相交的一第二位置；以及基於該第一樣本值和該第二樣本值之間的差值以及該第一樣本值和該第二樣本值中的一個來計算與該複數個預測參考線中的該第一預測參考線重疊的該畫面內預測子的圖元值。
  5. 如申請專利範圍第4項所述之視訊編碼方法，其中確定該第一樣本值包括在與該第一位置相鄰的所選擇的該參考圖元組的至少兩個圖元的圖元值之間內插該第一樣本值。
  6. 如申請專利範圍第4項所述之視訊編碼方法，其中從該複數個候選相鄰圖元組中選擇參考圖元組包括：選擇該複數個候選相鄰圖元組中最接近於該當前塊的該邊緣的一個候選相鄰圖元組。
  7. 如申請專利範圍第4項所述之視訊編碼方法，其中，計算該畫面內預測子的圖元值還基於以下等式：P=Ref1+W．(Ref1-Ref2),P是該畫面內預測子的圖元值，Ref1是該第一樣本值，Ref2是該第二樣本值，以及W是乘法因子。
  8. 如申請專利範圍第7項所述之視訊編碼方法，還包括基於該當前塊的尺寸或該畫面內預測模式或該當前塊中的圖元的位置來設置該乘法因子。
  9. 如申請專利範圍第1項所述之視訊編碼方法，還包括：從該複數個候選相鄰圖元組中選擇K個參考圖元組，該K個參考圖元組包括所選擇的該參考圖元組，K是大於1的正整數，其中，選擇的該K個參考圖元組分別定義K個參考線，以及生成該畫面內預測子包括：基於選擇的該K個參考圖元組來分別確定K個樣本值，該K個樣本值中的每一個分別對應於一位置，該位置為各個參考線和該複數個預測參考線中的該第一預測參考線相交的位置；以及基於該K個樣本值計算與該複數個預測參考線中的該第一預測參考線重疊的該畫面內預測子的圖元值。
  10. 如申請專利範圍第9項所述之視訊編碼方法，其中，計算該畫面內預測子的圖元值進一步分別基於適用於該K個樣本值的K個權重。
  11. 如申請專利範圍第10項所述之視訊編碼方法，還包括從輸入資料中提取指示該K個權重的訊息、或將該K個權重的訊息包括於已編碼的視訊資料中。
  12. 如申請專利範圍第10項所述之視訊編碼方法，還包括應用基於該當前塊中的圖元的位置，該當前塊的該畫面內預測模式的預測方向，或在選擇的該K個參考圖元組中一主參考圖元組，確定的該K個權重。
  13. 如申請專利範圍第1項所述之視訊編碼方法，還包括：從與該當前塊的一第二邊緣相鄰的複數個第二候選相鄰圖元組中選擇一第二參考圖元組，每組第二候選相鄰圖元組與該當前塊的該第二邊緣並行佈置，而不是與當前塊的該邊緣並行佈置，其中，生成該當前塊的該畫面內預測子還基於選擇的該第二參考圖元組。
  14. 如申請專利範圍第13項所述之視訊編碼方法，其中該第一邊緣是該當前塊的上邊緣，該第二邊緣是該當前塊的左邊緣，所選擇的該參考圖元組和該當前塊的上邊緣之間的最短距離不同於所選擇的第二參考圖元組和該當前塊的左邊緣之間的最短距離。
  15. 如申請專利範圍第1項所述之視訊編碼方法，其中生成該畫面內預測子包括：生成一原始畫面內預測子；基於所選擇的該參考圖元組計算梯度訊息；以及基於計算的梯度訊息，調整該原始畫面內預測子以成為一最終畫面內預測子。
  16. 如申請專利範圍第1項所述之視訊編碼方法，還包括基於所選擇的該參考圖元組導出該當前塊的該畫面內預測模式。
  17. 如申請專利範圍第1項所述之視訊編碼方法，其中該當前塊是一色度塊，而該方法還包括基於與該色度塊對應的一亮度塊的一選擇的參考圖元組來導出所選擇的該參考圖元組。
  18. 如申請專利範圍第1項所述之視訊編碼方法，其中該當前塊是一色度塊，而該方法還包括使用與該色度塊的一邊緣緊鄰的一相鄰參考圖元組來對該色度塊進行編碼或解碼。
  19. 如申請專利範圍第1項所述之視訊編碼方法，其中僅當該當前塊具有大於一預定塊尺寸的塊尺寸時，將指示所選擇的該參考圖元組的訊息併入已編碼的視訊資料。
  20. 一種視訊編碼裝置，包括：一處理電路，被配置為：接收與一圖像訊框中的一當前塊相關聯的輸入資料；從與該當前塊的一邊緣相鄰的複數個候選相鄰圖元組中選擇一參考圖元組，每組候選相鄰圖元組與該當前塊的該邊緣並行佈置；基於所選擇的該參考圖元組和該當前塊的一畫面內預測模式生成該當前塊的一畫面內預測子；其中，該當前塊的該畫面內預測模式的預測方向定義複數個預測參考線；基於所選擇的該參考圖元組確定一第一樣本值；基於該第一樣本值計算與該複數個預測參考線中的一第一預測參考線重疊的該畫面內預測子的圖元值；以及基於該畫面內預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或一已解碼的塊。
  21. 如申請專利範圍第20項所述之視訊編碼裝置，其中，該處理電路還被配置為：從該複數個候選相鄰圖元組中選擇一第二參考圖元組，其中，所選擇的該參考圖元組定義一第一參考線，所選擇的該第二參考圖元組定義一第二參考線，該當前塊的該畫面內預測模式的預測方向定義複數個預測參考線，以及在生成該畫面內預測子時，該處理電路還被配置為：基於所選擇的該參考圖元組確定一第一樣本值，該第一樣本值對應於該第一參考線和該複數個預測參考線中的一第一預測參考線相交的一第一位置；基於所選擇的該第二參考圖元組確定一第二樣本值，該第二樣本值對應於該第二參考線和該複數個預測參考線中的該第一預測參考線相交的一第二位置；以及基於該第一樣本值和該第二樣本值之間的差值以及該第一樣本值和該第二樣本值中的一個來計算與該複數個預測參考線中的該第一預測參考線重疊的該畫面內預測子的圖元值。
  22. 一種非暫態電腦可讀媒體，該非暫態電腦可讀媒體存儲用於使裝置的處理電路執行視訊編碼方法的程式指令，並且該視訊編碼方法包括：接收與一圖像訊框中的一當前塊相關聯的輸入資料；從與該當前塊的一邊緣相鄰的複數個候選相鄰圖元組中選擇一參考圖元組，每組候選相鄰圖元組與該當前塊的該邊緣並行佈置；基於所選擇的該參考圖元組和該當前塊的一畫面內預測模式生成該當前塊的一畫面內預測子；其中，該當前塊的該畫面內預測模式的預測方向定義複數個預測參考線；基於所選擇的該參考圖元組確定一第一樣本值；基於該第一樣本值計算與該複數個預測參考線中的一第一預測參考線重疊的該畫面內預測子的圖元值；以及基於該畫面內預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或一已解碼的塊。
TW106108681A 2016-03-18 2017-03-16 視訊編碼的方法與裝置 TWI639334B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201662309991P 2016-03-18 2016-03-18
US62/309,991 2016-03-18
US201662359822P 2016-07-08 2016-07-08
US62/359,822 2016-07-08
US15/458,446 2017-03-14
US15/458,446 US10390021B2 (en) 2016-03-18 2017-03-14 Method and apparatus of video coding

Publications (2)

Publication Number Publication Date
TW201739250A TW201739250A (zh) 2017-11-01
TWI639334B true TWI639334B (zh) 2018-10-21

Family

ID=59847822

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106108681A TWI639334B (zh) 2016-03-18 2017-03-16 視訊編碼的方法與裝置

Country Status (5)

Country Link
US (2) US10390021B2 (zh)
EP (1) EP3420728A4 (zh)
CN (2) CN114615492A (zh)
TW (1) TWI639334B (zh)
WO (1) WO2017157324A1 (zh)

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8948271B2 (en) * 2011-01-13 2015-02-03 Texas Instruments Incorporated Method and apparatus for a low complexity transform unit partitioning structure for HEVC
CN108886617B (zh) * 2016-04-06 2021-08-27 株式会社Kt 用于处理视频信号的方法和设备
EP3499884B1 (en) * 2016-08-08 2022-12-14 LG Electronics Inc. Intra-prediction mode-based video coding methods and video processing apparatus thereof
US10368107B2 (en) * 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US11128862B2 (en) * 2016-09-13 2021-09-21 Research and Telecommunications Research Insitute Video encoding/decoding method and device, and recording medium having bitstream stored therein
JP6669622B2 (ja) * 2016-09-21 2020-03-18 Kddi株式会社 動画像復号装置、動画像復号方法、動画像符号化装置、動画像符号化方法及びコンピュータ可読記録媒体
CN118660159A (zh) 2016-10-04 2024-09-17 Lx 半导体科技有限公司 图像编码/解码方法和图像数据的发送方法
WO2019009749A1 (en) * 2017-07-05 2019-01-10 Huawei Technologies Co., Ltd APPARATUS AND METHOD FOR INTRA DIRECTIONAL PREDICTION USING AN ADJUSTMENT PLAN AND A PLURALITY OF PRIMARY REFERENCE SAMPLES AND A PLURALITY OF SECONDARY REFERENCE SAMPLES
CN117440151A (zh) 2017-07-06 2024-01-23 Lx 半导体科技有限公司 图像解码方法、图像编码方法、发送方法和数字存储介质
CN109587491B (zh) 2017-09-28 2022-09-23 腾讯科技（深圳）有限公司 一种帧内预测方法、装置及存储介质
GB2567861A (en) * 2017-10-27 2019-05-01 Sony Corp Image data encoding and decoding
CN111386707B (zh) * 2017-11-22 2024-05-17 英迪股份有限公司 图像编码/解码方法和设备以及用于存储比特流的记录介质
WO2019125093A1 (ko) * 2017-12-22 2019-06-27 주식회사 윌러스표준기술연구소 비디오 신호 처리 방법 및 장치
US20190268611A1 (en) * 2018-02-26 2019-08-29 Mediatek Inc. Intelligent Mode Assignment In Video Coding
US10972738B2 (en) * 2018-03-29 2021-04-06 Mediatek Inc. Video encoding apparatus having reconstruction buffer with fixed size and/or bandwidth limitation and associated video encoding method
US10419754B1 (en) * 2018-04-02 2019-09-17 Tencent America LLC Method and apparatus for video decoding using multiple line intra prediction
CN117834858A (zh) * 2018-04-24 2024-04-05 三星电子株式会社 视频编码方法和装置以及视频解码方法和装置
EP3567860A1 (en) * 2018-05-09 2019-11-13 InterDigital VC Holdings, Inc. Method and apparatus for blended intra prediction
US11792426B2 (en) * 2018-06-18 2023-10-17 Industry Academy Cooperation Foundation Of Sejong University Method and apparatus for encoding/decoding image using a prediction value based on reference pixels
KR102436953B1 (ko) * 2018-06-26 2022-08-25 닛본 덴끼 가부시끼가이샤 영상 부호화 또는 영상 복호 장치, 영상 부호화 또는 영상 복호 방법, 프로그램, 및 기록 매체
CN112335240B (zh) * 2018-06-26 2024-09-17 交互数字Vc控股公司 使用可变权重的多参考帧内预测
US10893285B2 (en) * 2018-06-29 2021-01-12 FG Innovation Company Limited Device and method for coding video data based on one or more reference lines
CN118233629A (zh) * 2018-07-11 2024-06-21 三星电子株式会社 用于视频解码的方法和设备以及用于视频编码的方法和设备
WO2020091213A1 (ko) * 2018-11-04 2020-05-07 엘지전자 주식회사 영상 코딩 시스템에서 인트라 예측 방법 및 장치
US10841617B2 (en) * 2018-11-27 2020-11-17 Semiconductor Components Industries, Llc Methods and apparatus for successive intra block prediction
BR112021006547A2 (pt) 2018-12-25 2021-07-06 Guangdong Oppo Mobile Telecommunications Corp Ltd método de previsão para decodificação, dispositivo de previsão para decodificação e mídia de armazenamento de computador que armazena um programa de previsão para decodificação
US11172197B2 (en) * 2019-01-13 2021-11-09 Tencent America LLC Most probable mode list generation scheme
CN116016946A (zh) * 2019-03-05 2023-04-25 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
JP7145793B2 (ja) * 2019-03-11 2022-10-03 Kddi株式会社 画像復号装置、画像復号方法及びプログラム
US11202070B2 (en) * 2019-05-30 2021-12-14 Hulu, LLC Parallel bi-directional intra-coding of sub-partitions
US11902510B2 (en) * 2019-05-30 2024-02-13 Hfi Innovation Inc. Video processing methods and apparatuses for determining deblocking filter decision in video coding systems
CN115460424B (zh) * 2019-06-05 2024-09-20 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
CN113347427A (zh) * 2019-06-21 2021-09-03 杭州海康威视数字技术股份有限公司 一种编解码方法、装置、设备及存储介质
CN110677690B (zh) * 2019-09-27 2022-07-01 腾讯科技（深圳）有限公司 视频处理方法和装置、存储介质
US11388419B2 (en) * 2020-02-05 2022-07-12 Apple Inc. Smoothed directional and DC intra prediction
US11563977B2 (en) * 2020-09-24 2023-01-24 Tencent America LLC Method and apparatus for video coding
CN112565773B (zh) * 2020-12-06 2022-09-06 浙江大华技术股份有限公司 帧内预测方法、帧内预测装置以及存储介质
US12015765B2 (en) 2021-04-26 2024-06-18 Tencent America LLC Template matching based intra prediction
CN118451705A (zh) * 2021-09-28 2024-08-06 欧芬诺有限责任公司 自适应偏移多参考线编码
WO2023133205A1 (en) * 2022-01-05 2023-07-13 Ofinno, Llc Asymmetric offset multiple reference line coding
CN116156180B (zh) * 2023-04-19 2023-06-23 北京中星微人工智能芯片技术有限公司 帧内预测方法、图像编码方法、图像解码方法以及设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200841746A (en) 2007-02-23 2008-10-16 Nippon Telegraph & Telephone Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
TW200931986A (en) 2007-10-15 2009-07-16 Nippon Telegraph & Telephone Image encoding apparatus and decoding apparatus, image encoding method and decoding method, programs therefor, and storage media for storing the programs

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7757996B2 (en) 2004-10-29 2010-07-20 Boone Supply Company Breakable hangers
EP2090112A4 (en) 2006-11-07 2014-04-23 Samsung Electronics Co Ltd METHOD AND DEVICE FOR ENCODING AND DECODING BASED ON INTRA PREDICTION
CN101483780B (zh) * 2008-01-07 2011-08-24 华为技术有限公司 一种帧内dc预测的方法及装置
EP2101504B1 (en) * 2008-03-09 2012-07-25 LG Electronics Inc. Video coding using template matching
US8542938B2 (en) * 2008-12-31 2013-09-24 Entropic Communications, Inc. System and method for intra-frame compression using predictive coding
WO2010090749A1 (en) * 2009-02-06 2010-08-12 Thomson Licensing Methods and apparatus for implicit and semi-implicit intra mode signaling for video encoders and decoders
KR101510108B1 (ko) 2009-08-17 2015-04-10 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
JP2011151682A (ja) * 2010-01-22 2011-08-04 Sony Corp 画像処理装置および方法
EP2375751A1 (en) * 2010-04-12 2011-10-12 Panasonic Corporation Complexity reduction of edge-detection based spatial interpolation
KR101449679B1 (ko) * 2010-08-18 2014-10-15 에스케이텔레콤 주식회사 영상 부호화/복호화 장치 및 방법, 및 참조픽처 인덱싱 장치 및 방법
KR102696949B1 (ko) * 2010-12-08 2024-08-20 엘지전자 주식회사 인트라 예측 방법과 이를 이용한 부호화 장치 및 복호화 장치
US10021384B2 (en) * 2010-12-23 2018-07-10 Samsung Electronics Co., Ltd. Method and device for encoding intra prediction mode for image prediction unit, and method and device for decoding intra prediction mode for image prediction unit
EP3678373A1 (en) * 2011-06-20 2020-07-08 HFI Innovation Inc. Method and apparatus of directional intra prediction
JP2013141187A (ja) * 2012-01-06 2013-07-18 Sony Corp 画像処理装置及び画像処理方法
JP6033725B2 (ja) * 2013-03-28 2016-11-30 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、およびプログラム
US10003792B2 (en) * 2013-05-27 2018-06-19 Microsoft Technology Licensing, Llc Video encoder for images
WO2015057947A1 (en) 2013-10-17 2015-04-23 Huawei Technologies Co., Ltd. Improved reference pixel selection and filtering for intra coding of depth map
CN107409208B (zh) * 2015-03-27 2021-04-20 索尼公司 图像处理装置、图像处理方法以及计算机可读存储介质
CN115134596A (zh) * 2015-06-05 2022-09-30 杜比实验室特许公司 用于执行帧间预测的图像编解码方法、比特流存储方法
CN112929661B (zh) * 2015-10-13 2023-04-21 三星电子株式会社 解码方法和编码方法
US20180316914A1 (en) * 2015-10-30 2018-11-01 Sony Corporation Image processing apparatus and method
CN109565591B (zh) * 2016-08-03 2023-07-18 株式会社Kt 用于对视频进行编码和解码的方法和装置
JP6669622B2 (ja) * 2016-09-21 2020-03-18 Kddi株式会社 動画像復号装置、動画像復号方法、動画像符号化装置、動画像符号化方法及びコンピュータ可読記録媒体

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200841746A (en) 2007-02-23 2008-10-16 Nippon Telegraph & Telephone Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
TW200931986A (en) 2007-10-15 2009-07-16 Nippon Telegraph & Telephone Image encoding apparatus and decoding apparatus, image encoding method and decoding method, programs therefor, and storage media for storing the programs

Also Published As

Publication number Publication date
TW201739250A (zh) 2017-11-01
US20190289299A1 (en) 2019-09-19
US11178404B2 (en) 2021-11-16
CN108781297A (zh) 2018-11-09
EP3420728A4 (en) 2019-11-20
US20170272757A1 (en) 2017-09-21
CN108781297B (zh) 2022-02-11
CN114615492A (zh) 2022-06-10
EP3420728A1 (en) 2019-01-02
US10390021B2 (en) 2019-08-20
WO2017157324A1 (en) 2017-09-21

Similar Documents

Publication Publication Date Title
TWI639334B (zh) 視訊編碼的方法與裝置
US10735761B2 (en) Method and apparatus of video coding
KR20210134554A (ko) 영상 부호화 또는 복호화를 위한 장치 및 방법
JP2020526109A (ja) マルチリファレンス予測のための動きベクトルの精密化
US20180242004A1 (en) Inter prediction mode-based image processing method and apparatus therefor
KR102342870B1 (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
KR20180073499A (ko) 비디오 신호 처리 방법 및 장치
US11659178B2 (en) Image encoding method/device, image decoding method/device, and recording medium in which bitstream is stored
KR20190096432A (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
JP6042556B2 (ja) ３ｄビデオ符号化における制約される視差ベクトル導出の方法と装置
KR20200005648A (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
US20190349589A1 (en) Image processing method based on inter prediction mode, and apparatus therefor
KR20170110557A (ko) 적응적인 디블록킹 필터링을 이용하는 영상 부호화 방법과 영상 복호화 방법 및 장치
KR20180028428A (ko) 적응적 예측 블록 필터링을 이용한 영상 부호화/복호화 장치 및 방법
US11909970B2 (en) Image encoding method/device, image decoding method/device, and recording medium in which bitstream is stored
KR102547353B1 (ko) 영상 코딩 시스템에서 컨스트럭티드 어파인 mvp 후보를 사용하는 어파인 움직임 예측에 기반한 영상 디코딩 방법 및 장치
KR20220046707A (ko) 광 흐름에 의한 예측 개선, 양방향 광 흐름 및 디코더 측 움직임 벡터 개선을 위한 방법들 및 장치들
US20220038688A1 (en) Method and Apparatus of Encoding or Decoding Using Reference Samples Determined by Predefined Criteria
KR20200004348A (ko) 타겟 영역 수정을 통해 비디오 신호를 처리하는 방법 및 장치
CN118077196A (zh) 用于解码器侧帧内模式推导的方法和设备
JP2016092489A (ja) 動画像符号化装置、動画像符号化方法、及び動画像符号化プログラム