TW201735642A - 視訊編解碼的方法與裝置 - Google Patents

視訊編解碼的方法與裝置 Download PDF

Info

Publication number
TW201735642A
TW201735642A TW106106378A TW106106378A TW201735642A TW 201735642 A TW201735642 A TW 201735642A TW 106106378 A TW106106378 A TW 106106378A TW 106106378 A TW106106378 A TW 106106378A TW 201735642 A TW201735642 A TW 201735642A
Authority
TW
Taiwan
Prior art keywords
picture
intra
predictor
current block
inter
Prior art date
Application number
TW106106378A
Other languages
English (en)
Other versions
TWI618402B (zh
Inventor
夜静
杉 劉
雷少民
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW201735642A publication Critical patent/TW201735642A/zh
Application granted granted Critical
Publication of TWI618402B publication Critical patent/TWI618402B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明提供一種視訊編解碼方法。該方法包括接收與圖像訊框中的當前塊相關聯的輸入資料，生成該當前塊的畫面內預測子，並且基於複數個相鄰圖元的複數個樣本和定位該複數個相鄰圖元的該複數個樣本的畫面內預測模式來生成該當前塊的畫面內預測子。該方法還包括透過依據與該畫面內預測模式相關聯的一個或複數個畫面內權重係數組合該畫面間預測子和該畫面內預測子來生成該當前塊的最終預測子，以及基於該最終預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或解碼塊。該一個或複數個畫面內權重係數分別指示對應於該畫面內預測子的一個或複數個部分與該畫面間預測子組合的一個或複數個比率。

Description

視訊編解碼的方法與裝置 【相關申請的交叉引用】
本申請的申請專利範圍依35 U.S.C.§119要求如下申請的優先權：2016年2月25日遞交的申請號為62/299,578，標題為「Methods and Apparatus of intra-inter mode in Video and Image Compression」的美國臨時案；2016年8月5日遞交的申請號為62/371,251，標題為「Methods for QTBT intra chroma coding and intra inter-mode in image and video compression」的美國臨時案。在此合併參考這些申請案的申請標的。
本文提供的背景描述是為了通常呈現本公開的上下文的目的。在發明人呈現的本公開中，在很大程度上背景部分描述的內容，與實施方式描述的內容一樣不能被視為申請日之前的先前技術。也就是說，既不被明確地也不暗示承認為本發明的先前技術。
許多視訊編碼標準包括將輸入視訊的圖像訊框劃分成一個或多個編碼單元。通常，編碼單元可以包括具有亮度預測塊和至少兩個對應的色度預測塊的預測單元。當對塊的原 始圖像進行編碼時，依據預定的視訊編碼標準，塊的原始圖像可以被劃分為可預測部分(也稱為預測子(predictor))和塊的殘差部分。當解碼塊時，可以透過依據相同的預定視訊編碼標準產生並組合預測子和塊的殘留部分來獲得塊的重構圖像。
在一些應用中，塊的預測子可以基於其他塊和/或其他訊框的圖像來生成。這種預測方案旨在減少編碼視訊資料中的時間冗餘，並且也稱為畫面間預測(inter prediction)。在一些應用中，塊的預測子可以透過基於多個預定預測模式中所選擇的一個來外推與與塊相鄰的相鄰圖元的樣本來生成。這種預測方案可以減少編碼視訊資料中的空間冗餘，也稱為畫面內預測(intra prediction)。
本公開的一方面提供了一種視訊編解碼方法。該方法可以包括接收與圖像訊框中的當前塊相關聯的輸入資料，生成該當前塊的畫面間預測子，並且基於複數個相鄰圖元的複數個樣本和定位該複數個相鄰圖元的該複數個樣本的畫面內預測模式來生成該當前塊的畫面內預測子。該方法還包括透過依據與該畫面內預測模式相關聯的一個或複數個畫面內權重係數組合該畫面間預測子和該畫面內預測子來生成該當前塊的最終預測子，以及基於該最終預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或解碼塊。該一個或複數個畫面內權重係數分別指示對應於該畫面內預測子的一個或複數個部分與該畫面間預測子組合的一個或複數個比率。
在一個實施例中，當該畫面內預測模式是非角度 預測模式時，依據可應用於該當前塊的整體的畫面內權重係數來執行組合該畫面間預測子和該畫面內預測子。
在一個實施例中，該方法還包括當該畫面內預測模式是角度預測模式時，將該當前塊劃分成預定數量的部分。依據預定數量的部分的複數個畫面內權重係數，分別組合該畫面間預測子和該畫面內預測子。另外，當沿該畫面內預測模式的參考方向的複數個相應部分和該複數個相鄰圖元的該複數個樣本之間的距離減小時，該複數個畫面內權重係數的值增加。
在一個實施例中，所述方法還包括：當該畫面內預測模式是角度預測模式時，識別與該畫面內預測模式的參考方向最接近的一預定典型的方向；以及將該當前塊劃分為沿著所識別的典型的方向佈置的預定數量的部分。依據預定數量的部分的複數個畫面內權重係數，分別組合該畫面間預測子和該畫面內預測子。另外，當複數個相應部分和該複數個相鄰圖元的該複數個樣本之間的距離沿所識別的典型的方向減小時，該複數個畫面內權重係數的值增加。此外，該預定典型的方向至少包括垂直參考方向和水平參考方向。
該方法還可以包括從複數個第一預定畫面內預測模式中選擇該當前塊的該畫面內預測模式；以及基於依據從複數個第二預定畫面內預測模式中選擇的第二畫面內預測模式導出的畫面內預測子對第二塊進行編碼或解碼。該複數個第一預定畫面內預測模式是該複數個第二預定畫面內預測模式的子集。
在一個實施例中，該複數個第一預定畫面內預測模式至少包括從該複數個第二預定畫面內預測模式中選擇的複數個最可能模式。在一個實施例中，該當前塊是色度塊，以及複數個第一預定畫面內預測模式包括直接模式，線性模式，DC模式，平面模式，水平模式和/或垂直模式中的一個或複數個。
可以基於當前塊的大小來確定複數個第一預定畫面內預測模式中的數量。此外，當該當前塊的寬度大於該當前塊的高度時，該複數個第一預定畫面內預測模式排除了該複數個第二預定畫面內預測模式的第一部分的角度預測模式，該第一部分的角度預測模式的參考方向指向該當前塊的左邊緣。另外，當該當前塊的寬度小於該當前塊的高度時，該複數個第一預定畫面內預測模式排除了該複數個第二預定畫面內預測模式的第二部分的角度預測模式，該第二部分的角度預測模式的參考方向指向該當前塊的上邊緣。
該方法還可以包括一使能標誌包括在該已編碼的視訊資料的序列參數集(SPS)或圖像參數集(PPS)中，或者從輸入資料的序列參數集或圖像參數集提取，指示是否基於組合畫面間預測子和畫面內預測子生成的最終預測子功能性編碼或解碼塊的該使能標誌被使能以用於相應的序列或圖片。
在一個實施例中，包括指示是否該當前塊利用最終預測子而被編碼的一標誌包括于該已編碼的視訊資料中，其中基於組合該畫面內預測子或該畫面間預測子生成該最終預測子，或者僅當該當前塊由另一標誌于該已編碼的視訊資料 中，或于輸入資料中被識別識別作為利用畫面間預測而被編碼時，自輸入資料提取該標誌。在一個實施例中，包括指示是否該當前塊利用最終預測子而被編碼的一標誌包括于該已編碼的視訊資料中，其中基於組合該畫面內預測子或該畫面間預測子生成的該最終預測子，或者僅當該當前塊由另一標誌于該已編碼的視訊資料中，或于輸入資料中被識別識別作為利用畫面內預測而被編碼時，自輸入資料提取該標誌。
另外，在一個實施例中，可以透過使用高級運動向量預測，合併或跳過模式導出運動向量來生成該畫面間預測子。
本公開的一方面進一步提供一種視訊編解碼裝置。該視訊編碼裝置包括處理電路，該處理電路被配置為接收與一圖像訊框中的當前塊相關聯的輸入資料；生成該當前塊的畫面間預測子；基於複數個相鄰圖元的複數個樣本和定位該複數個相鄰圖元的該複數個樣本的畫面內預測模式生成該當前塊的一畫面內預測子；透過依據與該畫面內預測模式相關聯的一個或複數個畫面內權重係數組合該畫面間預測子和該畫面內預測子來生成該當前塊的最終預測子；以及基於該最終預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或一解碼塊。該一個或複數個畫面內權重係數分別指示對應於該畫面內預測子的一個或複數個部分與該畫面間預測子組合的一個或複數個比率。
在一個實施例中，處理電路可以被配置為當該畫面內預測模式是非角度預測模式時，依據可應用於該當前塊的 整體的畫面內權重係數來執行組合該畫面間預測子和該畫面內預測子。
此外，處理電路可以被配置為當該畫面內預測模式是角度預測模式時，將該當前塊劃分成預定數量的部分，以及依據預定數量的部分的複數個畫面內權重係數，分別組合該畫面間預測子和該畫面內預測子。當沿該畫面內預測模式的參考方向的複數個相應部分和該複數個相鄰圖元的該複數個樣本之間的距離減小時，該複數個畫面內權重係數的值增加。
本公開的方面進一步提供了一種非暫時計算機可讀介質，存儲使裝置的處理電路執行視訊編解碼方法的程式指令。該視訊編碼方法包括接收與圖像訊框中的當前塊相關聯的輸入資料；生成該當前塊的畫面間預測子；基於複數個相鄰圖元的複數個樣本和定位該複數個相鄰圖元的該複數個樣本的畫面內預測模式來生成當前塊的畫面內預測子。透過依據與該畫面內預測模式相關聯的一個或複數個畫面內權重係數組合該畫面間預測子和該畫面內預測子來生成該當前塊的最終預測子；以及基於該最終預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或解碼塊。一個或複數個畫面內權重係數分別指示對應於該畫面內預測子的一個或複數個部分與該畫面間預測子組合的一個或複數個比率。
100‧‧‧視訊編解碼系統
102、302、902‧‧‧已編碼的視訊資料
104、304‧‧‧輸出訊框
106、906‧‧‧輸入訊框
110、310‧‧‧解碼電路
112、122、312、922‧‧‧畫面內-畫面間預測模組
116、316‧‧‧解碼控制器
120、920‧‧‧編碼電路
124、924‧‧‧畫面內-畫面間估計模組
126、926‧‧‧編碼控制器
210‧‧‧最終預測子
220‧‧‧畫面內預測子
240‧‧‧畫面間預測子
242‧‧‧參考塊
244‧‧‧運動向量
222a、222b、222c、222d、222e、222f、222g‧‧‧相鄰圖元
344‧‧‧殘差解碼器
332、932‧‧‧畫面間預測模組
336、936‧‧‧畫面內預測模組
342、942‧‧‧加法器
346‧‧‧輸出濾波器
350、950‧‧‧存儲器
360、960‧‧‧處理器
510、520、610、612、614、710、712、713、714、718、810‧‧‧塊
622、624、722、723、724、726、728、820‧‧‧方向
612a、612b、612c、612d、614a、614b、614c、614d、712a、712b、712c、712d、713a、713b、713c、713d、714a、714b、714c、714d、716a、716b、716c、716d、718a、718b、718c、718d、812、814‧‧‧部分
830‧‧‧樣本圖元
D812、D814‧‧‧距離
934‧‧‧畫面間估計模組
938‧‧‧畫面內估計模組
944‧‧‧殘差編碼器
948‧‧‧重構模組
960‧‧‧處理器
1000、1100‧‧‧處理
S1001、S1010、S1020、S1030、S1035、S1040、S1050、S1060、S1070、S1099、S1101、S1110、S1120、S1130、S1140、S1150、S1160、S1170、S1199‧‧‧步驟
將參考以下圖式詳細描述作為示例提出的本公開的各種實施例，其中相同的圖式標記表示相同的元件，並且其中： 第1圖示出了依據本公開的實施例的視訊編解碼系統的示例性功能框圖；第2圖示出了依據本公開的示例性實施例的使用畫面內-畫面間預測來生成塊的最終預測子的示意圖；第3圖示出了依據本公開的示例性實施例的第1圖的視訊編解碼系統中的示例性解碼電路的功能框圖；第4A圖-第4C圖示出了依據本公開的示例性實施例的用於畫面內-畫面間預測的可用畫面內預測模式的示例集合的示意圖；第5A圖-第5D圖示出了依據本公開的示例性實施例的用於畫面內-畫面間預測的另外四個可用畫面內預測模式的示例集合的示意圖；第6圖示出了依據本公開的實施例的可應用於與各種畫面內預測模式的不同參考方向相關聯的塊的各個部分的畫面內權重係數的示例性佈置的示意圖；第7圖示出了依據本公開的實施例的可應用於與各種畫面內預測模式的不同參考方向相關聯的塊的各個部分的畫面內權重係數的另一示例性佈置的示意圖；第8圖示出了依據本公開的實施例的可應用於與沿示例性畫面內預測模式的參考方向的相鄰圖元的樣本的各種距離相關的塊的各個部分的畫面內權重係數的示例性佈置的示意圖；第9圖示出了依據本公開的實施例的第1圖中的視訊編解碼系統中用於視訊編碼的處理電路的示例性功能框圖；第10圖示出了依據本公開的實施例的利用諸如第3圖中 的處理電路的用於視訊解碼的處理電路的示例性視訊解碼處理的流程圖；以及第11圖示出了依據本公開的實施例的利用諸如第9圖中的處理電路的用於視訊編碼的處理電路的示例性視訊編碼處理的流程圖。
第1圖示出了依據本公開的實施例的視訊編解碼系統100的示例性功能框圖。視訊編解碼系統100包括用於視訊解碼的處理電路(即，解碼電路)110和用於視訊編碼的處理電路(即編碼電路)120。編碼電路120接收輸入訊框106作為輸入資料，並透過對輸入訊框106進行編碼產生已編碼的視訊資料102。解碼電路110接收已編碼的視訊資料102作為輸入資料，並透過解碼已編碼的視訊資料102來生成輸出訊框104。視訊編解碼系統100可以由一個或多個視訊編碼裝置來實作，其中該視訊編碼裝置可包括解碼電路110和編碼電路120。
解碼電路110可以包括至少一畫面內-畫面間預測模組112和解碼控制器116。畫面內-畫面間預測模組112可以使用畫面內-畫面間預測生成圖像訊框中待解碼塊(或當前塊)的最終預測子。更具體地，畫面內-畫面間預測模組112依據由解碼控制器116提供的預測參數，可以生成當前塊的畫面內預測子和畫面間預測子。畫面內預測子可以基於與當前塊相鄰的相鄰圖元的樣本和畫面內預測模式來生成，畫面內預測模式可以由已編碼的視訊資料102指示並且可用於定位相鄰圖元的 樣本。可以基於使用運動向量定位的參考塊來生成畫面間預測子，該運動向量可以在已編碼的視訊資料102中顯式提供，或者基於在編碼視訊資料102中提供的訊息導出。最後，畫面內-畫面間預測模組112可以透過依據與畫面內預測模式相關聯的一個或多個畫面內權重係數，組合畫面間預測子和畫面內預測子來生成當前塊的最終預測子。
該一個或多個畫面內權重係數表示對應的畫面內預測子的一個或多個部分分別與畫面間預測子組合的一個或多個比率。可以依據畫面內預測的預測模式來應用權重。例如，當畫面內預測模式是非角度預測模式時，可以依據適用於整個當前塊的畫面內權重係數來執行組合畫面間預測子和畫面內預測子。當畫面內預測模式是角度預測模式時，可以依據當前塊的各個預定部分的畫面內權重係數來執行組合畫面間預測子和畫面內預測子，其中畫面內權重係數的值可以隨沿著畫面內預測模式的參考方向的相應部分和相鄰圖元的樣本之間的距離來改變。
可以從多個第一預定的畫面內預測模式中選擇用於解碼當前塊的畫面內預測模式。解碼電路110還可以基於從多個第二預定畫面內預測模式中選擇的依據第二畫面內預測模式導出的畫面內預測子，對同一圖像訊框或另一圖像訊框中的第二塊進行解碼。在一些示例中，用於畫面內-畫面間預測的多個第一預定畫面內預測模式是用於畫面內預測的多個第二預定畫面內預測模式的子集。
例如，當解碼電路110用於基於國際電信聯盟電 信標準化部門(ITU-T)H.264標準(也稱為H.264，MPEG-4第10部分，高級視訊編碼，MPEG-4 AVC或H.264/MPEG-4 AVC標準)解碼4×4亮度塊時，多個第二預定畫面內預測模式可以包括與H.264標準一致的9種不同的畫面內預測模式，其中9種不同的畫面內預測模式包括8種不同的角度預測模式和一個非角度預測模式(例如，DC模式，其中相鄰樣本的平均值被分配給塊的所有圖元)。在這種情況下，多個第一預定畫面內預測模式可以包括非角度預測模式和九個角度預測模式的一部分。在另一示例中，當解碼電路110用於基於ITU-T H.265標準(也稱為H.265，高效率視訊編碼，HEVC或H.265/HEVC標準)解碼32×32亮度塊時，多個第二預定畫面內預測模式可以包括與H.265標準一致的35種不同的畫面內預測模式。其中，35種不同的畫面內預測模式包括33種不同的角度預測模式和兩種非角度預測模式(例如，如上所述的DC模式和平面模式，其中塊的圖元的值使用相鄰樣本的二維外推法(extrapolation)來確定)。在這種情況下，多個第一預定畫面內預測模式可以包括兩個非角度預測模式和33個畫面內預測模式的一部分。在一些示例中，多個第一預定畫面內預測模式可以至少包括相應的預定畫面內預測模式中的最可能模式(MPM)，其可以基於當前塊的相鄰塊來選擇。當然，可以依據預定的視訊編碼標準來定義多個第二預定畫面內預測模式，並且可以包括與本公開中公開的不同的一些角度預測模式或非角度預測模式。
解碼控制器116可以監督已編碼的視訊資料102 的解碼，包括確定是否使用畫面內-畫面間預測模組112來解碼當前塊和/或控制畫面內-畫面間預測模組112的操作。在一些示例中，解碼控制器116接收與當前塊相關聯的已編碼的視訊資料102，並從其中提取關於是否使用畫面內-畫面間預測模組112、對應的畫面內預測模式，相應的運動向量、和/或一個或多個畫面內權重係數的相關信息。在一些示例中，用於解碼當前塊的畫面內預測模式，運動向量和一個或多個畫面內權重係數中的一些或全部，可以在已編碼的視訊資料102中明確地指定，或者基於已編碼的視訊資料102和預定的視訊編碼標準來得到。
在一些示例中，是否使用畫面內-畫面間預測可以基於當前塊的大小是否大於預定閾值來確定。此外，使用對當前塊的畫面內-畫面間預測可以由在已編碼的視訊資料102中明確指定或從已編碼的視訊資料102導出的標誌來指示，以作為使用與單獨使用畫面內預測或者使用單獨畫面間預測不同的畫面內-畫面間預測。在一些示例中，對於當前塊使用畫面內-畫面間預測可以被表示為畫面內預測的特殊情況。在一些其他示例中，對當前塊使用畫面內-畫面間預測可以被指示為畫面間預測的特殊情況。
編碼電路120可以包括至少畫面內-畫面間預測模組122，畫面內-畫面間估計模組124和編碼控制器126。畫面內-畫面間估計模組124可以分析輸入訊框106並確定預測參數用於使用畫面內-畫面間預測對圖像訊框中的塊(或當前塊)進行編碼。預測參數可以包括用於生成當前塊的畫面內預測子 的畫面內預測模式、用於生成當前塊的畫面間預測子的運動向量、和/或與畫面內預測模式相關聯的一個或多個畫面內權重係數，來用於生成當前塊的最終預測值。由畫面內-畫面間估計模組124選擇或識別的預測參數可以被轉發到編碼控制器126，並且編碼控制器126確定是否使用畫面內-畫面間預測來對當前塊進行編碼，並且如果要使用畫面內-畫面間預測對當前塊進行編碼，則編碼預測參數作為已編碼的視訊資料102的一部分。由畫面內-畫面間估計模組124選擇或識別的預測參數也可以被轉發到畫面內-畫面間預測模組122以生成當前塊的最終預測子。
畫面內預測模組122可以以類似於畫面內-畫面間預測模組112的操作的方式生成用於進一步編碼處理的當前塊的最終預測子。此外，編碼控制器126可以監視編碼當前塊，包括確定是否使用畫面內-畫面間預測模組124和畫面內-畫面間預測模組122對當前塊進行編碼和/或控制畫面內-畫面間估計模組124和畫面內-畫面間預測模組122的操作。
與解碼電路110一樣，編碼電路120可以支援用於畫面內-畫面間預測的多個第一預定畫面內預測模式和用於畫面內預測的多個第二預定畫面內預測模式，其中多個第一預定畫面內預測模式可以是多個第二預定畫面內預測模式的子集。
第2圖示出了依據本公開的示例性實施例的使用畫面內-畫面間預測來生成塊的最終預測子的示意圖。塊的最終預測子210可以是塊的畫面內預測子220和畫面間預測子 240的權重組合。畫面內預測子220可以基於相鄰圖元222a-222g的樣本和指定的畫面內預測模式來生成。當畫面內預測模式是角度預測模式時，畫面內預測模式可以指示針對畫面內預測子的每個圖元的對應樣本的參考方向。當畫面內預測模式是非角度預測模式時，畫面內預測模式可以指示相鄰圖元的上方、左側或所有相鄰圖元用於產生畫面內預測子。在本公開中，畫面內預測模式的方向是指用於定位相鄰樣本的參考方向。在一些應用中，畫面內預測模式可以透過與參考方向相反的預測方向來識別。用於產生當前塊的畫面內預測子220的畫面內預測模式可以依據任何適用的方法來發送或導出。
可以基於指定的運動向量244來定位的另一圖像訊框的參考塊242來生成畫面間預測子240。在一些示例中，參考塊242可以位於與當前塊240的相同訊框中。用於生成當前塊的畫面間預測子240的運動向量244，可以依據任何適用的方法發訊號或導出。在一些示例中，運動向量可以從運動向量預測子(MVP)候選而被得到，運動向量預測子(MVP)候選可以利用高級運動向量預測(AMVP)，合併或跳過模式而被編碼。此外，可以依據正常畫面間模式，訊框速率上變換模式(frame rate up-conversion mode,FRUC)模式，仿射模式(affine mode)，合併模式等來執行畫面間預測。在一些示例中，畫面內-畫面間預測的畫面間預測部分可以被限制為上述畫面間模式的子集。
可以透過依據與畫面內預測模式相關聯的一個或多個畫面內權重係數組合當前塊的畫面內預測子220和畫面間 預測子240來生成當前塊的最終預測子210。在一些示例中，每個畫面內權重係數表示分配給畫面內預測子220的特定部分的權重比率，其是分配給畫面內預測子220的部分的權重與分配給畫面間預測子240的相應部分的權重的和。例如，如果畫面內權重係數的值為0.5，則用於組合畫面內預測子和畫面間預測子的對應部分的權重為0.5-0.5。在另一示例中，如果畫面內權重係數的值為0.8，則用於組合畫面內預測子和畫面間預測子的對應部分的權重為0.8-0.2。此外，在一些示例中，如果基於具有畫面內權重係數w_intra和畫面間權重係數w_inter的畫面內和畫面間預測因數(Pred_intra和Pred_inter)的對應圖元來確定圖元(Pred)的最終預測子，則圖元(Pred)的最終預測子的值可以確定為：Pred=w_intra*Pred_intra+w_inter*Pred_inter，以及w_intra+w_inter=1。
第3圖示出了依據本公開的實施例的諸如第1圖中的視訊編解碼系統100的視訊編解碼系統中的解碼電路310的示例性功能框圖。第3圖是解碼電路310的簡化圖，因此可能不顯示解碼電路310的所有細節和變化。
解碼電路310包括畫面內-畫面間預測模組312和解碼控制器316，分別對應於第1圖中的畫面內-畫面間預測模組112和解碼控制器116。如果解碼控制器316確定使用畫面內-畫面間預測來解碼當前塊，畫面內-畫面間預測模組312可以基於指定的畫面內預測模式和指定的運動向量來生成當前塊的最終預測子。解碼電路310還包括畫面間預測模組332， 畫面內預測模組336，加法器342，殘差解碼器344，輸出濾波器346，存儲器350和處理器360。當使用畫面間預測對當前塊進行解碼時，畫面間預測模組332可以基於指定的運動向量而生成畫面間預測子作為當前塊的最終預測子。當當前塊要使用畫面間預測進行解碼時，畫面內預測模組336可以基於指定的畫面內預測模式生成畫面內預測子，作為當前塊的最終預測子。
此外，殘差解碼器344可以依據來自解碼控制器316的殘留訊息產生當前塊的殘差部分。可以透過將來自殘差解碼器344的當前塊的殘差部分和來自畫面內-畫面間預測模組312，畫面間預測模組332或畫面內預測模組336的當前塊的最終預測子相加，加法器342可生成當前塊的解碼圖像(即，解碼塊)。輸出濾波器348將來自加法器342的已解碼塊轉換成圖像訊框，依據預定的濾波處理来處理圖像訊框，並輸出濾波後的圖像訊框作為輸出訊框304。存儲器350可以存儲來自輸出濾波器348的已濾波的圖像訊框和/或自預測模組312,332或336的當前訊框的先前已解碼的塊，其可被預測模組312,332或336進一步使用以用於檢索參考樣本。
解碼控制器316接收並分析已編碼的視訊資料302並提取當前塊的殘差訊息和預測參數。解碼控制器316可以將殘差訊息提供給殘差解碼器344，並將預測參數提供給畫面內-畫面間預測模組312，畫面間預測模組332或畫面內預測模組336，以便重建當前塊的圖像。在一些示例中，當使用畫面內-畫面間預測對當前塊進行解碼時，畫面內-畫面間預測模組312 可以指示畫面間預測模組332和畫面內預測模組336生成當前塊的對應的畫面間預測子和畫面內預測子，然後組合當前塊的畫面間預測子和畫面內預測子，以輸出當前塊的最終預測子。當然，在一些其他示例中，畫面內-畫面間預測模組312可以被實現為具有內置畫面間預測模組和/或內置畫面內預測模組，使得來自畫面間預測模組332和/或畫面內預測模組336協助可能不是必需的。
在操作中，當圖像訊框中的塊(即，當前塊)要被解碼時，解碼控制器316接收與當前塊相關聯的已編碼的視訊資料302，並且提取關於當前塊將使用畫面間預測，畫面內預測或畫面內-畫面間預測進行解碼的資訊。當解碼控制器316確定使用畫面內-畫面間預測來解碼當前塊時，解碼控制器316將當前塊的預測參數轉發到畫面內-畫面間預測模組312。預測參數可以包括用於生成當前塊的畫面內預測子的畫面內預測模式和用於生成當前塊的畫面間預測子的運動訊息，和/或與用於生成當前塊的最終預測子的畫面內預測模式相關聯的一個或多個畫面內權重係數。可以在已編碼的視訊資料302中明確指定由解碼控制器316選擇或識別的預測參數，或者基於已編碼的視訊資料302中提供的訊息和預定視訊編碼標準導出。
畫面內-畫面間預測模組312可以依據相鄰圖元的樣本和由解碼控制器316提供的畫面內預測模式來生成當前塊的畫面內預測子。或者，畫面內-畫面間預測模組312可以請求畫面內預測模組336，以生成當前塊的畫面內預測子。此外，畫面內-畫面間預測模組312可以依據由解碼控制器316提供 的運動訊息生成當前塊的畫面間預測子。或者，畫面內-畫面間預測模組312可以請求畫面間預測模組332生成當前塊的畫面間預測子。
在當前塊的畫面內預測子和畫面間預測子的產生之後，畫面內-畫面間預測模組312透過依據與畫面內預測模式相關的一個或更多的畫面內權重係數，組合當前塊的畫面內預測子和畫面間預測子來生成當前塊的最終預測子。另一方面，解碼控制器316還將殘差訊息轉發到殘差解碼器344，在殘差解碼器344中產生當前塊的殘差部分。此時當前塊可以透過在加法器342處添加最終預測子和當前塊的殘差部分來解碼。
在一些示例中，解碼控制器316可以從已編碼的視訊資料302中提取指示當前塊是否使用畫面內-畫面間預測編碼的標誌，使得當前塊的最終預測子基於組合它的畫面間預測子和畫面內預測子而被生成。標記可以被提供以作為已編碼的視訊資料302中的塊層級的語法元素(例如，預測單元(PU)層級))。此外，標記可以旁路編碼或使用一個，兩個或三個上下文來上下文編碼。
在一些示例中，當兩個上下文(例如，上下文0和上下文1)用於該標誌時，當上方塊或左側塊中的任一個使用畫面內-畫面間預測時，該標誌可以使用上下文0，並且可以對其他場景使用上下文1。在一些示例中，當三個上下文(例如，上下文0，上下文1和上下文2)用於該標誌時，當上方塊或左側塊都不使用畫面內-畫面間預測時，標誌可以使用上 下文0，當上方塊或左側塊使用畫面內-畫面間預測時，標誌可以使用上下文1，並且當上方塊或左側塊都使用畫面內-畫面間預測時，標誌可以使用上下文2。
可以將畫面內-畫面間預測的使用用訊號通知為獨立預測模式。在一些示例中，對於當前塊使用畫面內-畫面間預測可以被指示為畫面間預測的特殊情況。在這種情況下，解碼控制器316可以首先透過使用另一標誌來確定已編碼的視訊資料302中當前塊是否被識別為利用畫面間預測編碼。當當前塊被識別為使用畫面間預測編碼時，標誌將指示當前塊是否使用畫面內-畫面間預測編碼，並且僅當當前塊被識別為使用畫面間預測編碼時，解碼控制器316才可以提取標誌。在一些示例中，當使用畫面內-畫面間預測對當前塊進行編碼時，將發送畫面內訊息，並且可以發送或導出畫面間訊息(例如，運動訊息)。在這種情況下，發送標誌之後發送畫面內訊息。否則，當僅使用畫面間預測對當前塊進行編碼時，可以發送或導出畫面間訊息，畫面內訊息將不可用(即，沒有發送畫面內訊息)。
在一些其他示例中，對於當前塊使用畫面內-畫面間預測可以被表示為畫面內預測的特殊情況。在這種情況下，解碼控制器316可以首先透過另一標誌來確定編碼視訊資料302中當前塊是否被識別為利用畫面內預測編碼。當當前塊被識別為使用畫面內預測編碼時，標誌將指示當前塊是否使用畫面內-畫面間預測編碼，並且僅當當前塊識別為使用畫面內預測編碼時，解碼控制器316才能提取標誌。在一些示例中，當使用畫面內-畫面間預測對當前塊進行編碼時，發送畫面間訊 息(例如，運動訊息)，並且可以發送或導出畫面內訊息。在這種情況下，在發送標誌之後畫面間訊息被發送。否則，當僅使用畫面內預測對當前塊進行編碼時，可以發送或導出畫面內訊息，同時畫面間訊息將不可用(即，沒有發送畫面間訊息)。
在一些示例中，解碼控制器316還可以從已編碼的視訊資料302的序列參數集(SPS)或圖像參數集(PPS)進一步提取，指示畫面內-畫面間預測是否被啟用或禁用的使能標誌用於相應的序列或圖片。當使能標誌指示對於相應的序列或圖像啟用畫面內-畫面間預測時，解碼控制器316可以檢查塊層級標誌(例如，PU層級標誌)，以識別對應序列或圖像中的對應塊是否利用畫面內-畫面間預測而被編碼。當使能標誌指示對於相應的序列或圖像禁用了畫面內-畫面間預測時，相應的序列或圖像中沒有塊使用畫面內-畫面間預測進行編碼，並且解碼控制器316可以不需要檢查上述塊層級標誌。
此外，對於給定的塊大小，畫面內-畫面間預測模組312可以支援多個第一預定畫面內預測模式，而畫面內預測模組336可以支援多個第二預定畫面內預測模式。在一些示例中，為了減少編碼開銷，多個第一預定畫面內預測模式可以是多個第二預定畫面內預測模式的子集。來自多個第二預定畫面內預測模式的多個第一預定畫面內預測模式的選擇可以隨著當前塊的大小和/或形狀而變化。基於當前塊的相鄰塊，多個第一預定畫面內預測模式可以是從多個第二預定畫面內預測模式中選擇的最可能模式(most probable modes,MPM)。當當前塊是色度塊時，第一組多個預定畫面內預測模式可以至少 包括對應於從與色度塊相對應的一個或多個亮度塊導出的畫面內預測模式的直接模式(direct mode)(DM模式)、或對應於從對應亮度塊和一個或多個相鄰亮度塊和/或相鄰色度塊導出的畫面內預測模式的線性模式(linear mode)(LM模式)。在一些示例中，當當前塊是色度塊時，多個第一預定畫面內預測模式可以包括對應於水平參考方向的直接模式，線性模式，DC模式，平面模式，水平模式中的一個或多個，和/或對應於垂直參考方向的垂直模式。
用於畫面內-畫面間預測的畫面內權重係數與畫面內預測模式相關聯，因此可以基於畫面內預測模式來確定。在一些示例中，當畫面內預測模式是諸如DC模式或平面的非角度預測模式時，可以依據可應用於當前塊的整體的畫面內權重係數來執行組合畫面間預測子和畫面內預測子。在一些示例中，當畫面內預測模式是角度預測模式時，當前塊可以被劃分為預定數量的部分。可以分別依據預定數量的部分的畫面內權重係數來執行組合畫面間預測子和畫面內預測子。在一些示例中，當當前塊的相應部分和沿著畫面內預測模式的參考方向的相鄰圖元的樣本之間的距離減小時，畫面內權重係數的值可能增加。
當然，可以在已編碼的視訊資料中明確地指定用於解碼當前塊的運動訊息，畫面內預測模式和權重係數中的一些或全部。
此外，如第3圖所示，處理器360與存儲器350電耦合，並且可以被配置為執行存儲在存儲器350中的程式指 令，以執行各種功能。處理器360可以包括單個或多個處理核心。諸如解碼控制器316，畫面內-畫面間預測模組312，畫面間預測模組332，畫面內預測模組336，加法器342，殘差解碼器344和/或輸出濾波器346等，解碼電路310的各種組件可以由硬體組件，執行程式指令的處理器360，或其組合來實作。當然，處理器360還可以執行程式指令來控制已編碼的視訊資料302的接收以及輸出訊框304的輸出或顯示。在一些示例中，處理器360可執行程式指令以執行與解碼已編碼的視訊資料302不直接相關的功能。
存儲器350可以用於存儲程式指令，對應於預測參數的訊息，先前已解碼的塊，輸出訊框和/或用於執行解碼電路310的各種功能的中間資料。在一些示例中，存儲器350包括諸如半導體或固態存儲器，隨機存取存儲器(RAM)，只讀存儲器(ROM)，硬盤，光盤或其它合適的存儲介質之類的非暫時計算機可讀介質。在一些實施例中，存儲器350包括上面列出的兩個或更多個非暫時計算機可讀介質的組合。
第4A圖示出了依據本公開的實施例的用於畫面內-畫面間預測的可用畫面內預測模式的示例性集合的示意圖。可用的畫面內預測模式可以包括兩個非角度預測模式和五個角度預測模式。可用的非角度預測模式可以包括平面模式和DC模式。可用的角度預測模式的參考方向可以包括垂直方向(V)和水平方向(H)。垂直方向指示合適的樣本可以位於與當前塊的上側相鄰的位置上，水平方向指示合適的樣本可以是位於與當前塊的左側相鄰的位置。可用角度預測模式的參考 方向還可以包括垂直對角線方向(V+1)、對角線方向(V-1)以及水平對角線方向(H+1)。垂直對角線方向(V+1)對應於垂直方向順時針旋轉45度，對角線方向(V-1)對應於垂直方向逆時針旋轉45度角，以及水平對角線方向(H+1)對應於水平方向逆時針旋轉45度角。
可以有許多不同的方式來發送這七個畫面內預測模式。在一個示例中，可以使用較少的二進制(bin)發送非角度模式，並且可以使用較多的二進制來發出角度模式。表1示出了依據該方法的二進制分配，其中基於相應的參考方向來識別各種角度模式。
在另一示例中，可以基於統計量來佈置畫面內預測模式的信令，其中可以使用較少的二進制來發送更頻繁使用的模式，並且可以使用更多的二進制來發送較不頻繁使用的模式。例如，水平模式(模式H)和垂直模式(模式V)可以使用較少的二進制，而其他模式可以有更多的二進制。表2示出 了依據該方法的二進制分配。
此外，參考表1和表2所示的二進制可以上下文編碼或旁路編碼。此外，用於畫面內-畫面間預測的畫面內預測模式可以是用於畫面內預測的可用畫面內預測模式的子集。例如，雖然畫面內-畫面間預測使用七種不同的畫面內預測模式，畫面內預測可以使用依據H.265/HEVC標準的35個畫面內預測模式，其包括用於畫面內-畫面間預測的七個畫面內預測模式和在方向(V+1)和方向(H+1)之間擴展的參考方向的28個附加角度預測模式。在另一示例中，畫面內預測可以使用67個畫面內預測模式，其包括用於畫面內-畫面間預測的7個畫面內預測模式和在方向(V+1)和方向(H+1)擴展的參考方向的60個附加角度預測模式。
第4B圖示出了依據本公開的實施例的用於畫面內-畫面間預測的可用畫面內預測模式的另一示例性集合的示意 圖。可用的畫面內預測模式可以包括兩個非角度預測模式和九個角度預測模式。可用的非角度預測模式可以包括平面模式和DC模式。可用角度預測模式的參考方向可以包括垂直方向(V)，水平方向(H)和方向(V-2)，方向(V-1)，方向(V+1)，方向(V+2)，方向(H-1)，方向(H+1)和方向(H+2)，其中相鄰方向分開22.5度。選擇的畫面內預測模式的發送可以與參照表1和表2所示的相似安排。另外，畫面內-畫面間預測的畫面內預測模式可以是用於畫面內預測的可用畫面內預測模式的子集。
第4C圖示出了依據本公開的實施例的用於畫面內-畫面間預測的可用畫面內預測模式的一般化示例的示意圖。可用的畫面內預測模式可以包括兩個非角度預測模式和4k+1個角度預測模式，其中k是大於1的正整數。可用的非角度預測模式可以包括平面模式和DC模式。可用的角度預測模式的參考方向可以包括垂直方向(V)，水平方向(H)和方向(V-1)...方向(V-k)，方向(V+1)...方向(V+k)，方向(H-1)...方向(H-k+1)和方向(H+1)...方向(H+k)在從垂直對角線方向(V+1)到水平垂直對角線方向H(+1)的180度範圍內，其中相鄰方向被分開45/k度。在一些示例中，可用的畫面內預測模式還可以包括其他適用的角度或非角度預測模式，例如水平平面模式或垂直平面模式。
選擇的畫面內預測模式的信令可以與參照表1和表2所示的相似安排。另外，用於畫面內-畫面間預測的畫面內預測模式可以是用於畫面內預測的可用畫面內預測模式的 子集。
在一些示例中，用於畫面內-畫面間預測的可用畫面內預測模式可以按照使用頻率的降序排列，或者預定順序或使用頻率的降序在頂部列出用於畫面內預測的MPM，然後是用於畫面內預測的其餘畫面內預測模式的子集。可以相應地使用可變長度或固定長度編碼而編碼可用的畫面內預測。
在一個示例中，畫面內-畫面間預測可以使用69個畫面內預測模式，包括65個角度預測模式和4個非角度預測模式。前五個列出的畫面內預測模式可以是MPM，並且可以共用由畫面內預測或不同的上下文編碼方案使用的上下文編碼方案。剩餘的64個畫面內預測模式可以是固定長度編碼或可變長度編碼。表3示出如上所述的示例編碼方案。
在一個示例中，畫面內-畫面間預測可以使用67 個畫面內預測模式，包括65個角度預測模式和2個非角度預測模式，如聯合視訊探索團隊(JVET)組的聯合探索模型(JEM)命名的參考軟件中所描述。
在另一示例中，畫面內預測可以使用37個畫面內預測模式，包括如H.265/HEVC標準中所提出的33個角度預測模式和2個非角度預測模式。前五個畫面內預測模式可以是畫面內預測的MPM。剩餘的32個畫面內預測模式可以是固定長度編碼(具有五個額外的二進制)或可變長度編碼。表4示出如上所述的示例編碼方案。
在通用示例中，畫面內-畫面間預測可以使用N個畫面內預測模式，其中N是大於5的正整數。前5個畫面內預測模式可以是畫面內預測的MPM。剩餘的畫面內預測模式可以是固定長度編碼或可變長度編碼。表5示出如上所述的示例 編碼方案。
在一個示例中，用於畫面內-畫面間預測的可用畫面內預測模式可以僅包括畫面內預測的五個MPM。
在另一個通用示例中，畫面內-畫面間預測可以使用N個畫面內預測模式，其中N是大於3的正整數。前三個畫面內預測模式可以是畫面內預測的MPM。剩餘的畫面內預測模式可以是固定長度編碼或可變長度編碼。表6示出如上所述的示例編碼方案。
在一個示例中，用於畫面內-畫面間預測的可用畫面內預測模式可以僅包括畫面內預測的五個MPM。
當然，可以存在許多其他適用的方法來排列可用的畫面內預測模式的順序和相應的編碼方案。另外，參照表3，表4，表5和表6示出的二進制可以是上下文編碼或旁路編碼。此外，用於畫面內-畫面間預測的可用畫面內預測模式的數量可以隨著當前塊的大小或形狀而變化。例如，具有較大尺寸的塊可以使用更多數量的可用畫面內預測模式，並且具有較小尺寸的塊可以使用較少數量的可用畫面內預測模式。在一些示例中，已編碼的視訊資料的SPS或PPS中的一個或多個語法元素可以用於指示可用於相應序列或圖片中的畫面內-畫面間預測的畫面內預測模式的預定集合。
第5A圖示出了依據本公開的實施例的用於畫面內-畫面間預測的可用畫面內預測模式的示例性集合的示意圖。用於畫面內預測的可用角度預測模式可以對應於包括垂直方向(V)，水平方向(H)和方向(V-1)...方向(V-k)，方向(V+1)...方向(V+k)，方向(H-1)...方向(H-k+1)和方向(H+1)...方向(H+k)的參考方向，其中k是大於1的正整數。此外，塊510可以具有寬度WIDTH510和高度HEIGHT510。當塊510的寬度WIDTH510大於塊510的高度 HEIGHT510時，用於使用畫面內-畫面間預測對塊510進行編碼的可用畫面內預測模式可以排除一部分角度預測模式，這部分角度預測模式的方向為水平方向(H)逆時針方向旋轉的方向。如第5A圖所示，可排除的角度預測模式可以對應於的方向(H+1)...方向(H+K)。
第5B圖示出了依據本發明實施例的用於具有比第5A圖描述的寬比高長的塊510的畫面內-畫面間預測的可用的畫面內預測模式的示例性集合的示意圖。使用畫面內-畫面間預測編碼塊510的可用畫面內預測模式可以排除在指向左邊緣的所有參考方向之間均勻分佈的角度預測模式的一部分(例如，距離水平方向H偏離+/- 45度的範圍之內)。如圖5B所示，可排除的角度預測模式可以對應於方向(H+k')或(H-k')，其中k'是指+k和-k之間的奇數。減少用於較短邊緣的角度預測模式的數量的其他適用方法在所設想的實施例內。
第5C圖示出了依據本公開的實施例的用於畫面內-畫面間預測的可用畫面內預測模式的示例性集合的示圖。與塊510相比，塊520可以具有寬度WIDTH520和高度HEIGHT520。當塊520的寬度WIDTH520小於塊520的高度HEIGHT520時，用於使用畫面內-畫面間預測對塊520進行編碼的可用畫面內預測模式可以排除具有對應於垂直方向(V)順時針旋轉的一部分角度預測模式。如第5B圖所示，可排除的角度預測模式可以對應於方向(V+1)...方向(V+K)。
第5D圖示出了依據本發明實施例的與第5C圖描述的相比具有高比寬長的塊520的畫面內-畫面間預測的可用 的畫面內預測模式的另一示例性集合的示意圖。使用畫面內-畫面間預測對塊520進行編碼的可用畫面內預測模式可以排除在指向上方邊緣的所有參考方向之間均勻分佈的角度預測模式的一部分(例如，距離垂直方向V偏離+/- 45度的範圍之內)。如第5D圖所示，可排除的角度預測模式可以對應於方向(V+k')或方向(V-k')，其中k'是指+k和-k之間的奇數。減少用於較短邊緣的角度預測模式的數量的其他適用方法在所設想的實施例內。
如第5A圖-第5D圖所示，透過減少用於畫面內-畫面間預測的可用畫面內預測模式的數量，可以進一步減少用於發送預測參數的開銷。
第6圖示出了依據本公開的實施例的與各種畫面內預測模式的不同參考方向相關聯的可應用於塊的各個部分的畫面內權重係數的示例佈置的示意圖。第6圖示出了塊610和兩個典型的方向622和624。典型的方向622對應於可用畫面內預測模式中的垂直方向(V)，典型的方向624對應於可用畫面內預測模式中的水平方向(H)。典型的方向622和典型的方向624中最接近畫面內預測模式的參考方向的一個被識別為已识别的典型方向。此外，塊610可以被劃分為預定數量的、所識別的典型方向佈置的部分。在一些示例中，組合畫面間預測子和畫面內預測子分別依據塊的部分的畫面內權重係數來執行。可以沿所識別的典型方向以升序的方式設置畫面內權重係數的值，使得當沿著所識別的典型方向的對應部分和相鄰圖元的樣本之間的距離減小時，畫面內權重係數的值增加。
例如，當與水平方向(H)相比，畫面內預測模式是更靠近垂直方向(V)的角度模式時，例如，第4C圖中的方向(V-k+1)...(V+k)，典型的方向622或垂直方向(V)將是所識別的典型的方向。塊610可以被分成沿著垂直方向(V)佈置的多個部分，例如具有四個部分612a，612b，612c和612d的示例塊612。對於部分612a，612b，612c和612d的畫面內權重係數w_612a，w_612b，w_612c和w_612d的值可以沿著所標識的代表方向以升序的方式設置。例如，w_612a，w_612b，w_612c和w_612d可以分別設置為0.8,0.6,0.4和0.2。在該示例中，對於部分612a，612b，612c和612d的畫面間權重係數inter_w_612a，inter_w_612b，inter_w_612c和inter_w_612d的值可以被設置為1-w_612a，1-w_612b，1-w_612c和1-w_612d(分別為0.2,0.4,0.6,0.8)。
在另一示例中，當與垂直方向(V)相比，畫面內預測模式是更靠近水平方向(H)的角度模式時，例如，第4C圖中的方向(H-k+1)...(H+k)，典型的方向624或水平方向(H)將是所識別的典型的方向。塊610可以被劃分為沿著水平方向(H)佈置的多個部分，例如具有四個部分614a，614b，614c和614d的示例塊614。部分614a，614b，614c和614d的畫面內權重係數w_614a，w_614b，w_614c和w_614d的值可以沿著所標識的代表方向以升序來設置。例如，w_614a，w_614b，w_614c和w_614d可以分別設置為0.8,0.6,0.4和0.2。在該示例中，對於部分614a，614b，614c和614d的畫面間權重係數inter_w_614a，inter_w_614b，inter_w_614c 和inter_w_614d的值可以被設置為1-w_614a，1-w_614b，1-w_614c和1-w_614d(即，分別為0.2,0.4,0.6,0.8)。
此外，如果畫面內預測模式的參考方向與典型的方向622和624(例如方向(V-k))大致相同的距離，則這樣的方向可以被定義為更靠近其順時針旋轉的方向或逆時針旋轉的方向，或兩者，使得畫面內權重係數將是兩種方案的平均值。
第7圖示出了依據本公開的實施例的與各種畫面內預測模式的不同參考方向相關聯的可應用於塊的各個部分的畫面內權重係數的另一示例性佈置的示意圖。第7圖示出塊710和五個典型的方向722,723,724,726和728。典型的方向722對應於可用畫面內預測模式中的垂直方向(V)，典型的方向724對應於可用的畫面內預測模式中的水平方向(H)。此外，典型的方向723對應於對角線方向(V-k)，典型的方向724對應於垂直對角線方向(V+k)，典型的方向726對應於水平對角線方向(H+k)。在一些示例中，可以使用多於或少於五個典型的方向來分配稱重係數。典型的方向可以從垂直對角線方向(V+k)到水平對角線方向(H+k)的180度跨度均勻地分佈。
與參考第6圖所示的示例類似，將典型的方向722,723,724,726和728中與畫面內預測模式的參考方向最接近的一個標識為所識別的典型的方向。此外，塊710可以被劃分為預定數量的沿著所識別的代表方向佈置的部分。可以沿所識別的代表方向以升序的方式設置畫面內權重係數的值，使得 當沿著所識別的代表方向的對應部分和相鄰圖元的樣本之間的距離減小時，畫面內權重係數的值增加。
例如，當畫面內預測模式是更接近典型的方向722或垂直方向(V)的角度模式時，塊710可以被劃分為沿垂直方向(V)佈置的多個部分，例如具有四個部分712a，712b，712c和712d的示例塊712。可以沿著識別的典型的方向以升序設置適用於部分712a，712b，712c和712d的畫面內權重係數的值。在另一示例中，當畫面內預測模式是更接近典型的方向724或水平方向(H)的角度模式時，塊710可以被劃分為沿水平方向(H)佈置的多個部分，例如示例塊714具有四個部分714a，714b，714c和714d。可以沿著識別的代表方向以升序設置適用於部分714a，714b，714c和714d的畫面內權重係數的值。
類似地，對於具有更接近典型的方向723(V-k)，726(v+k)或728(H+k))的方向的畫面內預測模式，塊710可以被劃分為沿著這樣的方向佈置的多個部分。例如，示例塊713可以對應於更接近典型的方向723(V-k)的畫面內預測模式，其中塊713被分成沿著典型的方向723(V-k)排列的四個部分713a，713b，713c和713d。可以沿著典型的方向723(V-k)以升序設置適用於部分713a，713b，713c和713d的畫面內權重係數的值。示例塊716可以對應於更接近典型的方向726(V+k)的畫面內預測模式，其中塊716被分成沿著典型的方向726(V+k)排列的四個部分716a，716b，716c和716d。可以沿著典型的方向726(V+k)以升序設置適用 於部分716a，716b，716c和716d的畫面內權重係數的值。此外，示例塊718可以對應於更接近典型的方向728(H+k)的畫面內預測模式，其中塊718被劃分為沿著代表方向728(H+k)排列的四個部分718a，718b，718c和718d。可以沿著典型的方向728(H+k)以升序設置適用於部分718a，718b，718c和718d的畫面內權重係數的值。
此外，如果畫面內預測模式的方向與參考方向722-728的距大致相同離，則這樣的方向可以被定義為更接近於如第7圖所示的順時針旋轉或逆時針旋轉的方向，或者兩者。
此外，如第6圖和第7圖所示，塊610或710可以被劃分為四個部分。在一些示例中，可以基於塊610或710的大小來確定部分的數量，其中較大的塊可以被劃分為更多的部分。可能部分的數目可以為從2到在塊的一側上的圖元數目。此外，這些部分可以以任何合適的方式分開，包括任何合適的尺寸或形狀。
第8圖示出了依據本公開的示例性實施例的適用塊810的各種部分的畫面內權重係數的示範性佈置的示意圖。其中，塊810的各種部分的畫面內權重係數與沿示例性畫面內預測模式的參考方向820的相鄰圖元樣本的各種距離相關。當畫面內預測模式是具有參考方向820的角度預測模式時，塊810被劃分成預定數量的部分。塊810的畫面內預測子可以基於參考方向820和相鄰的樣本圖元830而產生。在一些示例中，每個部分可以僅與一個圖元一樣小。
如第8圖所示，塊810被分成16個部分。可以分 別依據預定數量的部分的畫面內權重係數來執行對塊810的畫面間預測子和畫面內預測子的組合。此外，可以基於畫面內預測模式的參考方向820的相應部分和相鄰圖元830的樣本之間的距離來設置畫面內權重係數的值。例如，可以基於沿著參考方向820的部分812和相鄰圖元之間的距離D812來確定可應用於部分812的畫面內權重係數。類似地，可以基於沿著參考方向820的部分814和相鄰圖元之間的距離D814來確定用於部分814的畫面內權重係數。
在一些示例中，當沿畫面內預測模式的參考方向的相應部分和相鄰圖元的樣本之間的距離減小時，畫面內權重係數的值增加。在至少一個示例中，當沿著參考820的方向的塊的特定部分與相鄰圖元之間的距離為D時，畫面內權重係數w_intra的值可以被確定為：w_intra(D)=a*D2+b。
在該等式中，a和b是可以包括在編碼視訊資料中的正數，例如在編碼視訊資料的SPS，PPS或片頭中。或者，可以依據預定的視訊編碼標準預定義a和b，並且因此可以在解碼電路或編碼電路中進行硬編碼。
在一些示例中，當前塊的畫面內權重係數可以自先前塊的畫面內權重係數導出，條件是用於導出畫面內權重係數的調整參數被發送。
當然，第6-8圖用於表示分配畫面內權重係數的非限制性示例。可以存在許多其他合適的方法來分配用於組合當前塊的畫面內預測子和畫面間預測子的畫面內權重係數。
第9圖示出了依據本公開的實施例的在諸如第1圖中的視訊編解碼系統100的視訊編解碼系統中用於視訊編碼的處理電路920的示範性功能塊的示意圖。第9圖是編碼電路920的簡化圖，因此可能不顯示編碼電路920的所有細節和變化。
編碼電路920包括畫面內-畫面間預測模組922，畫面內-畫面間估計模組924和編碼控制器926，其可以對應於畫面內-畫面間預測模組122，畫面內-畫面間估計模組124和第1圖中的編碼控制器126。編碼電路920還包括畫面間預測模組932，畫面間估計模組934，畫面內預測模組936，畫面內估計模組938，加法器942，殘差編碼器944，重構模組948，存儲器950和處理器960。
編碼控制器926監視畫面內-畫面間預測模組922，畫面內-畫面間估計模組924，畫面間預測模組932，畫面間估計模組934，畫面內預測模組936和畫面內估計模組938的操作。編碼控制器926可以指示畫面內-畫面間估計模組924，畫面間估計模組934和/或畫面內估計模組938將每個輸入訊框劃分成塊並且確定每個塊的預測方案，預測模式和/或相應的預測參數。編碼控制器926可以選擇畫面內-畫面間預測模組922，畫面間預測模組932和畫面內預測模組936之一，以將當前塊的對應的最終預測子輸出到加法器942。加法器942接收當前塊的原始圖像和當前塊的最終預測子，並且透過從當前塊的原始圖像中減去最終預測值來輸出當前塊的殘差部分。殘差編碼器944接收並編碼當前塊的殘差部分。編碼控制 器926可以基於來自畫面內-畫面間估計模組924，畫面間估計模組934和/或畫面內估計模組938的預測參數以及來自殘差編碼器944的輸出來生成已編碼的視訊資料902。
在一些示例中，畫面內-畫面間預測的使用可以被用訊號通知為獨立預測模式。在一些示例中，對於當前塊的畫面內-畫面間預測的使用可以被指示為畫面間預測的特殊情況。在這種情況下，編碼控制器926包括於已編碼的視訊資料902中的訊息識別當前塊是否使用畫面間預測進行編碼，然後只有當當前塊被識別為使用畫面間預測進行編碼的情況下(在一些實施例中，相應的畫面間訊息可以相應地被發送)，包括一個標誌，識別畫面內-畫面間預測的使用。如果使用畫面間-畫面內預測對當前塊進行編碼，則發送畫面內訊息(例如，水平模式被選擇)。否則，沒有畫面內訊息被發送。在一些示例中，對於當前塊使用畫面內-畫面間預測可以被表示為畫面內預測的特殊情況。在這種情況下，編碼控制器926包括於已編碼的視訊資料902中的訊息識別當前塊是否使用包畫面內預測進行編碼，然後只有當當前塊被識別為使用畫面內預測編碼的情況下(在一些實施例中，相應的畫面內訊息可以相應地發訊號)，包括一個標識，識別畫面內-畫面間預測的使用。如果使用畫面間-畫面內預測對當前塊進行編碼，則發送畫面間訊息(例如，運動向量預測子索引，預測方向或參考圖像索引)。否則，不會發出任何畫面間訊息。
畫面內-畫面間預測模組922，畫面間預測模組932和畫面內預測模組936可以分別從畫面內-畫面間估計模組 924，畫面間估計模組934和畫面內估計模組938接收預測參數，並且可以以類似於第3圖中的畫面內-畫面間預測模組312，畫面間預測模組332和畫面內預測模組336的操作的方式生成當前塊的對應的最終預測子。因此省略其詳細描述。
在一些示例中，編碼控制器926可以控制畫面內-畫面間估計模組924，畫面間估計模組934，畫面內估計模組938，畫面內-畫面間預測模組922，畫面間預測模組932，畫面內預測模組936和/或殘差編碼器944，以基於不同的預測方案和參數對當前塊進行編碼，然後可以選擇用於編碼當前塊的編碼方案和參數的最佳組合。
重構模組948可以從畫面內-畫面間預測模組922，畫面內預測模組932或畫面間預測模組936接收最終預測子以及從殘差編碼器944接收當前塊的重構殘差部分。基於這樣的訊息，重構模組948可以以類似於第3圖中的加法器342和輸出濾波器346的操作的方式生成當前塊和/或重構訊框的重構圖像。重構的塊和/或訊框可以存儲在存儲器950中，並且可由畫面內-畫面間預測模組922，畫面內預測模組932，畫面間預測模組936，畫面內-畫面間估計模組924，畫面內估計模組934，和/或畫面間估計模組938來存取以用於估計下一個塊的預測參數。
在操作中，當訊框的塊(即，當前塊)編碼要由編碼控制器926指示的畫面內-畫面間預測編碼時，畫面內-畫面間估計模組924自輸入訊框906接收當前塊的原始圖像。畫面內-畫面間估計模組924可以確定合適的預測參數，例如所 選擇的運動向量，所選擇的畫面內預測模式和/或相關聯的權重係數。用於畫面內-畫面間預測的畫面內預測模式可以從可用的畫面內預測模式中選擇，如參照第4A-5D圖所示。可以如參照第6-8圖所示來確定權重係數。
在一些示例中，畫面內-畫面間估計模組924可以與畫面間估計模組934和/或畫面內估計模組938協調以從其獲得運動訊息和/或畫面內預測模式，並且可以做出鑒於權重係數的合適預測參數的最終決策。畫面內-畫面間估計模組924然後將預測參數發送到編碼控制器926和畫面內-畫面間預測模組922。
畫面內-畫面間預測模組922可以基於由畫面內-畫面間估計模組924提供的預測參數來生成當前塊的最終預測子。畫面內-畫面間預測模組922可以依據相鄰圖元的樣本和畫面內預測模式生成當前塊的畫面內預測子。或者，畫面內-畫面間預測模組922可以請求畫面內預測模組936生成當前塊的畫面內預測子。此外，畫面內-畫面間預測模組922可以依據運動訊息生成當前塊的畫面間預測子。或者，畫面內-畫面間預測模組922可以請求畫面間預測模組932生成當前塊的畫面間預測子。在當前塊的畫面內預測子和畫面間預測子生成之後，畫面內-畫面間預測模組922依據與畫面內預測模式相關的一個或多個畫面內權重係數，透過將當前塊的畫面內預測子和畫面間預測子進行組合，來生成當前塊的最終預測子。
畫面內-畫面間預測模組922，畫面間預測模組932，和/或畫面內預測模組936可以以類似於畫面內-畫面間預 測模組312的操作的方式生成最終預測子。因此，省略其詳細描述。
加法器942可以基於當前塊的原始圖像和最終預測子輸出當前塊的殘差部分，並對殘差部分進行編碼。編碼控制器926可以從畫面內-畫面間估計模組924，畫面間估計模組934，和/或畫面內估計模組938以及編碼的殘差訊息中收集預測參數，並且確定當前塊的選擇的編碼方案是否可接受。
此外，編碼控制器926可以以參考表1至表6所示的方式對所選擇的畫面內預測模式進行編碼。
此外，如第9圖所示，處理器960與存儲器950電耦合，並且可以被配置為執行存儲在存儲器950中的程式指令，以執行各種功能。處理器960可以包括單個或多個處理核心。編碼電路920的各種組件，諸如編碼控制器926、畫面內-畫面間預測模組922、畫面內-畫面間估計模組924、畫面間預測模組932、畫面間估計模組934、畫面內預測模組936、畫面內估計模組938、加法器942、殘差編碼器944、和/或重構模組948，可由硬體組件，處理器960執行程式指令或其組合來實作。當然，處理器960還可以執行程式指令以控制輸入訊框906的接收和編碼視訊資料902的輸出。在一些示例中，處理器960可執行程式指令以執行可能與已編碼的視訊資料不直接相關的功能。
存儲器950可以用於存儲程式指令，對應於預測參數重構塊的訊息，輸入訊框和/或用於執行編碼電路910的各種功能的中間資料。在一些示例中，存儲器950包括諸如半 導體或固態存儲器，隨機存取存儲器(RAM)，只讀存儲器(ROM)，硬盤，光盤或其它合適的存儲介質之類的非暫時計算機可讀介質。在一些實施例中，存儲器950包括上面列出的兩個或多個非暫時性計算機可讀介質的組合。
此外，第3圖中的解碼電路310和第9圖中的編碼電路920可以在相同的電子設備中實現，並且解碼電路310和編碼電路920的各種組件可以被共用或重用。例如，解碼電路310中的存儲器350，處理器360，畫面內-畫面間預測模組312，畫面內預測模組332，畫面間預測模組336和輸出濾波器346中的一個或多個也可以用作第9圖中的存儲器950，處理器960，畫面內-畫面間預測模組922，畫面內預測模組932，畫面間預測模組936，以及重構模組948。
第10圖是依據本公開的實施例利用諸如第3圖中的處理電路310的用於視訊解碼的處理電路的示範性視訊解碼處理1000的流程圖。應當理解，可以在第10圖所示的處理1000之前，之中和/或之後執行附加操作。處理1000從步驟S1001開始，進入步驟S1010。
在步驟S1010中，接收與圖像訊框中的當前塊相關聯的已編碼的視訊資料作為輸入資料。例如，解碼控制器316可以接收包括與當前塊相關聯的輸入資料的已編碼的視訊資料302。
在步驟S1020中，確定用於解碼當前塊的預測類型。例如，解碼控制器316可以接收包括與當前塊相關聯的輸入資料的已編碼的視訊資料302。解碼控制器316可以從已編 碼的視訊資料302中提取預測參數，並且使用畫面間預測，畫面內預測或畫面內-畫面間預測來確定當前塊是否被編碼。
如第2圖所示，當使用畫面內-畫面間預測對當前塊進行編碼時，將透過生成畫面間預測子和畫面內預測子來對當前塊進行解碼，並組合畫面間預測子和畫面內預測子以生成最終預測子。在一些示例中，一個標誌指示是否使用基於組合畫面間預測子和畫面內預測子生成的最終預測子來使得當前塊被編碼(即，使用畫面內-畫面間預測)，該標誌自已編碼的視訊數據中的塊層級(例如，PU層級)處的語法元素中提取。標誌可以使用旁路編碼或一個，兩個或三個上下文來上下文編碼。在一些示例中，畫面內-畫面間預測被佈置為畫面間預測的特殊情況，並且僅當當前塊由另一標誌在已編碼的視訊資料中被識別或在輸入資料中被識別作為利用畫面間預測而被編碼時，該標誌自已編碼的視訊資料中被提取。在一些示例中，畫面內預測被佈置為畫面內預測的特殊情況，並且僅當當前塊由另一標誌在已編碼的視訊資料中被識別或在輸入資料中被識別作為利用畫面內預測而被編碼時，該標誌自已編碼的視訊資料中被提取。
此外，可以從SPS，PPS或已編碼的視訊資料的一些其他高級屬性中提取指示對於相應序列或圖片是否啟用畫面內-畫面間預測的使能標誌。當使能標誌指示對於相應的序列或圖像啟用了畫面內-畫面間預測時，可以提取或檢查塊層級標誌，以便識別相應序列或圖像中的相應塊使用畫面內-畫面間預測編碼。當使能標誌指示對於相應的序列或圖像禁用畫 面內-畫面間預測時，相應序列或圖像中沒有塊使用畫面內-畫面間預測進行編碼，並且上述PU標誌可以不需要提取或檢查。
在步驟S1030中，如果使用畫面內-畫面間預測對當前塊進行解碼，則處理進行到步驟S1040。如果要使用畫面內-畫面間預測以外的識別類型的預測來解碼當前塊，則處理進入步驟S1035。例如，如果解碼控制器316識別當前塊是使用畫面內-畫面間預測編碼的，則處理進行到步驟S1040；否則，處理進行到步驟S1035。
在步驟S1035中，使用所識別的預測類型來生成當前塊的最終預測子。例如，當使用畫面間預測編碼當前塊時，畫面間預測模組332可以生成當前塊的最終預測子。此外，當使用畫面內預測編碼當前塊時，畫面內預測模組336可以生成當前塊的最終預測子。
在步驟S1040中，基於運動向量和參考圖像生成當前塊的畫面間預測子。可以在已編碼的視訊資料中明確地提供運動向量，或者基於在已編碼的視訊資料中提供的運動訊息導出運動向量。例如，畫面內-畫面間預測模組312可以透過本身或者在畫面間預測模組332的幫助下，生成如參照第3圖所討論的當前塊的畫面間預測子。在一些示例中，使用運動向量來生成畫面間預測子，即使用高級運動向量預測(AMVP)，合併或跳過模式導出運動向量來確定畫面間預測子。
在步驟S1050中，基於相鄰圖元的樣本和定位相鄰圖元的樣本的畫面內預測模式來生成當前塊的畫面內預測子。畫面內預測模式可以明確地提供在已編碼的視訊資料中， 或者基於在已編碼的視訊資料中提供的訊息導出。例如，畫面內-畫面間預測模組312可以本身或者藉助於畫面內預測模組336生成如參考第3圖所討論的當前塊的畫面內預測子。
在一些示例中，可以從多個第一預定畫面內預測模式中選擇使用畫面內-畫面間預測的當前塊的畫面內預測模式，並且依據自多個第二預定畫面內預測模式中選擇的第二畫面內預測模式，基於得到的畫面內預測子，第二塊可被編碼或被解碼。多個第一預定畫面內預測模式可以是如參考第3圖所討論的多個第二預定畫面內預測模式的子集。多個第一預定畫面內預測模式可以至少包括從多個第二預定畫面內預測模式中選擇的最可能的模式(most probable modes,MPM)。在一些示例中，當當前塊是色度塊時，多個第一預定畫面內預測模式可以包括直接模式，線性模式，DC模式，平面模式，水平模式和/或垂直模式中的一個或多個。
此外，可以基於當前塊的大小來確定一些多個第一預測畫面內預測模式。此外，當當前塊的寬度大於當前塊的高度時，多個第一預定畫面內預測模式可以排除多個第二預定的畫面內預測模式的角度預測模式的第一部分，其具有參考方向指向如第5A和5B圖中的當前塊的左側邊緣。當當前塊的寬度小於當前塊的高度時，多個第一預定畫面內預測模式可以排除多個第二預定畫面內預測模式的角度預測模式的第二部分，其具有參考方向指向如第5C和5D圖中的當前塊的上邊緣。
在步驟S1060中，透過依據與畫面內預測模式相 關聯的一個或多個畫面內權重係數組合畫面間預測子和畫面內預測子來生成當前塊的最終預測子。該一個或多個畫面內權重係數分別指示一個或多個比率，該一個或多個比率對應於將畫面內預測子的一個或多個部分分別與畫面間預測子組合的比率。在一些示例中，如第3圖所示，畫面內-畫面間預測模組312基於由解碼控制器316提供或由畫面內-畫面間預測模組312確定的一個或多個畫面內權重係數來生成當前塊的最終預測子。
在一些示例中，當畫面內預測模式是非角度預測模式時，依據可應用於整個當前塊的畫面內權重係數來執行組合畫面間預測子和畫面內預測子。例如，當畫面內預測模式是DC模式或平面模式時，可以將整個當前塊的畫面內權重係數設置為0.5。在這種情況下，畫面間預測子的畫面間權重係數可以被設置為0.5。
在一些示例中，當畫面內預測模式是角度預測模式時，當前塊可以被劃分成預定數量的部分，並且可以依據用於部分的預定數目的畫面內權重係數可以執行分別組合畫面間預測子和畫面內預測子。例如，如參照第8圖所述，隨著畫面內預測模式的參考方向的對應部分和相鄰圖元的樣本之間的距離的減少，畫面內權重係數的值增加。
在一些示例中，當畫面內預測模式是角度預測模式時，可以識別與畫面內預測模式的參考方向最近的一個預定典型的方向。當前塊可以被劃分為沿著所識別的代表方向佈置的預定數量的部分，如參照第6圖和第7圖所述。在這樣的示 例中，依據預定數量的部分的畫面內權重係數執行分別組合畫面間預測子和畫面內預測子，並且當沿著所識別的典型的方向的對應部分和相鄰圖元的樣本之間的距離減少時，畫面內權重係數的值增加。在一些示例中，預定典型的方向至少包括垂直參考方向和水平參考方向。
在步驟S1070中，基於最終預測子對當前塊進行解碼以輸出解碼塊。例如，加法器342基於組合當前塊的殘差部分和來自畫面內-畫面間預測模組312的最終預測子，生成當前塊的解碼塊，如參照第3圖所述。
在步驟S1070之後，處理進行到步驟S1099並終止。
第11圖示出了依據本公開的實施例的諸如第9圖所示的處理電路920的用於視訊編碼的處理電路的視訊編碼處理1100的流程圖。應當理解，可以在第11圖所示的處理1100之前，之中和/或之後執行附加操作。處理1100從步驟S1101開始，進入步驟S1110。
在步驟S1110中，接收包括使用畫面內-畫面間預測編碼的當前塊的輸入圖像訊框作為輸入資料。例如，處理電路920可以接收包括具有當前塊的圖像訊框的輸入訊框906。
在步驟S1120中，估計用於使用畫面內-畫面間預測對當前塊進行編碼的預測參數。例如，如第9圖所述，畫面內-畫面間估計模組924單獨地或者在畫面間估計模組934和/或畫面內估計模組938的幫助下估計用於使用畫面內-畫面間預測編碼當前塊的預測參數。
如參照第2圖所示，當使用畫面內-畫面間預測對當前塊進行編碼時，基於組合畫面間預測子和畫面內預測子，生成當前塊的最終預測子。可以透過確定參考訊框、指示參考訊框中的參考塊的運動向量、和/或用於生成最終預測子的畫面間權重係數來確定用於生成畫面間預測子的預測參數的估計。用於生成畫面內預測子的預測參數的估計可以基於用於生成最終預測子的相鄰圖元、所選擇的畫面內預測模式、和/或畫面內權重係數。
在一些示例中，可以從多個第一預定畫面內預測模式中選擇使用畫面內-畫面間預測的當前塊的畫面內預測模式，並且可以依據從多個第二預定畫面內預測模式選擇第二畫面內預測模式，基於得到的畫面內預測子，第二塊可被編碼。第一組多個預定畫面內預測模式可以是多個第二預定畫面內預測模式的子集，如參照第3、9、10圖所討論的。此外，畫面內權重係數可以與所選擇的畫面內預測模式相關聯。畫面內權重係數的分配可以被確定，如參考第3、6-9、10圖所討論的那樣。
在步驟S1130中，基於在S1120確定的預測參數來生成當前塊的畫面間預測子。例如，如第9圖所示，畫面內-畫面間預測模組922單獨地或者藉助於畫面間預測模組932，依據畫面內-畫面間估計模組924提供的預測參數生成當前塊的畫面間預測子。
在步驟S1140中，基於在S1120確定的預測參數來生成當前塊的畫面內預測子。例如，如第9圖所描述，畫 面內-畫面間預測模組922單獨地或者藉助於畫面內預測模組936，依據畫面內-畫面間估計模組924提供的預測參數，生成當前塊的畫面內預測子。
在步驟S1150中，透過依據權重係數組合畫面間預測子和畫面內預測子來生成當前塊的最終預測子。例如，如參考第9圖所述，畫面內-畫面間預測模組922基於與所選擇的畫面內預測模式相關聯的畫面內權重係數來生成當前塊的最終預測子，由畫面內-畫面間估計模組924提供或由畫面內-畫面間預測模組922確定。
在步驟S1160中，確定預測參數是否可接受。如果預測參數是可接受的，則處理進行到步驟S1170。如果預測參數不可接受，則處理可以進行到步驟S1120以重做預測參數估計，或者進行步驟S1199以嘗試另一種類型的預測。例如，編碼控制器926接收由畫面內-畫面間估計模組924估計的預測參數和自殘差編碼器944編碼的已編碼殘差信息，已編碼殘差信息基於自畫面內-畫面間預測模組922的最終預測子而生成。編碼控制器926可以基於預定的編碼標準確定預測參數和已編碼殘差訊息是否可接受，並且確定畫面內-畫面間估計模組是否必須提供估計預測參數的不同集合和/或僅使用畫面內預測或畫面間預測。
在步驟S1170中，基於最終預測子對當前塊進行編碼以輸出已編碼的視訊資料。例如，透過對來自步驟S1120的預測參數進行編碼而編碼當前塊，並且基於減去自當前塊的原始圖像的最終預測子而產生殘差信息。例如，如第9圖所述， 加法器942生成當前塊的殘差訊息，殘差編碼器944生成已編碼的殘差訊息，並且編碼控制器926基於來自畫面內-畫面間預測模組924的預測參數以及自殘差編碼器的已編碼殘差信息生成已編碼的視訊資料。
畫面內-畫面間預測和各種預測參數的選擇可以明確地包括在已編碼的視訊資料中，或者可以基於已編碼的視訊資料中提供的訊息在解碼過程期間導出。在一些示例中，用於畫面內-畫面間預測的運動向量可以被明確地提供在編碼視訊資料中，或者透過使用高級運動向量預測(AMVP)，合併或跳過模式導出運動向量來確定。在一些示例中，一個標誌指示當前塊是否使用基於組合畫面間預測子和畫面內預測子(即，使用畫面內-畫面間預測)而生成的最終預測子而被編碼。該標誌被包括于已編碼的視訊數據中作為塊層級的語法元素。標誌可以旁路編碼或使用一個，兩個或三個上下文來上下文編碼。在一些示例中，畫面內-畫面間預測被佈置為畫面間預測的特殊情況，並且僅當當前塊由另一標誌在已編碼的視訊資料中被識別或在輸入資料中被識別作為利用畫面間預測而被編碼時，該標誌包括於自已編碼的視訊資料中。在一些示例中，畫面內-畫面間預測被佈置為畫面內預測的特殊情況，並且僅當由另一標誌在已編碼的視訊資料中或者輸入資料中識別當前塊被識別作為利用畫面內預測而被編碼時，該標誌被包括于已編碼的視訊資料中。
此外，指示畫面內-畫面間預測是否對於相應序列或圖片啟用或禁用的使能標誌還可以被包括為SPS，PPS或已 編碼的視訊資料的任何高級屬性中。
在步驟S1170之後，處理進行到步驟S1199並終止。
儘管已經結合作為示例提出的具體實施例描述了本公開的各方面，但是可以對示例的替代，修改和變化進行說明。因此，本文所闡述的實施例旨在是說明性的而不是限制性的。在不脫離下面提出的權利要求的範圍的情況下，可以進行改變。
1000‧‧‧處理
S1001、S1010、S1020、S1030、S1035、S1040、S1050、S1060、S1070、S1099‧‧‧步驟

Claims (20)

  1. 一種視訊編解碼方法，包括：接收與一圖像訊框中的一當前塊相關聯的輸入資料；生成該當前塊的一畫面間預測子；基於複數個相鄰圖元的複數個樣本和定位該複數個相鄰圖元的該複數個樣本的一畫面內預測模式來生成該當前塊的一畫面內預測子；透過依據與該畫面內預測模式相關聯的一個或複數個畫面內權重係數組合該畫面間預測子和該畫面內預測子來生成該當前塊的一最終預測子，其中該一個或複數個畫面內權重係數分別指示對應於該畫面內預測子的一個或複數個部分與該畫面間預測子組合的一個或複數個比率；以及基於該最終預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或一解碼塊。
  2. 如申請專利範圍第1項所述之方法，其中當該畫面內預測模式是一非角度預測模式時，依據可應用於該當前塊的整體的一畫面內權重係數來執行組合該畫面間預測子和該畫面內預測子。
  3. 如申請專利範圍第1項所述之方法，還包括當該畫面內預測模式是一角度預測模式時，將該當前塊劃分成預定數量的部分，其中依據預定數量的部分的複數個畫面內權重係數，分別組合該畫面間預測子和該畫面內預測子，其中當沿該畫面內預測模式的一參考方向的複數個相應部 分和該複數個相鄰圖元的該複數個樣本之間的距離減小時，該複數個畫面內權重係數的值增加。
  4. 如申請專利範圍第1項所述之方法，還包括：當該畫面內預測模式是一角度預測模式時，識別與該畫面內預測模式的一參考方向最接近的一預定典型的方向；以及將該當前塊劃分為沿著所識別的典型的方向佈置的預定數量的部分，其中依據預定數量的部分的複數個畫面內權重係數，分別組合該畫面間預測子和該畫面內預測子；以及當複數個相應部分和該複數個相鄰圖元的該複數個樣本之間的距離沿所識別的典型的方向減小時，該複數個畫面內權重係數的值增加。
  5. 如申請專利範圍第4項所述之方法，其中該預定典型的方向至少包括一垂直參考方向和一水平參考方向。
  6. 如申請專利範圍第1項所述之方法，還包括：從複數個第一預定畫面內預測模式中選擇該當前塊的該畫面內預測模式；以及基於依據從複數個第二預定畫面內預測模式中選擇的一第二畫面內預測模式導出的一畫面內預測子對一第二塊進行編碼或解碼，其中，該複數個第一預定畫面內預測模式是該複數個第二預定畫面內預測模式的子集。
  7. 如申請專利範圍第6項所述之方法，其中，該複數個第一預定畫面內預測模式至少包括從該複數個第二預定畫面內 預測模式中選擇的複數個最可能模式。
  8. 如申請專利範圍第6項所述之方法，其中該當前塊是色度塊，以及複數個第一預定畫面內預測模式包括直接模式，線性模式，DC模式，平面模式，水平模式和/或垂直模式中的一個或複數個。
  9. 如申請專利範圍第6項所述之方法，其中當該當前塊的寬度大於該當前塊的高度時，該複數個第一預定畫面內預測模式排除了該複數個第二預定畫面內預測模式的第一部分的角度預測模式，該第一部分的角度預測模式的參考方向指向該當前塊的左邊緣；以及當該當前塊的寬度小於該當前塊的高度時，該複數個第一預定畫面內預測模式排除了該複數個第二預定畫面內預測模式的第二部分的角度預測模式，該第二部分的角度預測模式的參考方向指向該當前塊的上邊緣。
  10. 如申請專利範圍第6項所述之方法，其中，基於該當前塊的大小來確定該複數個第一預定畫面內預測模式中的數量。
  11. 如申請專利範圍第1項所述之方法，還包括：一使能標誌包括在該已編碼的視訊資料的序列參數集(SPS)或圖像參數集(PPS)中，或者從輸入資料的序列參數集或圖像參數集提取，指示是否基於組合一畫面間預測子和一畫面內預測子生成的一最終預測子功能性編碼或解碼一塊的該使能標誌被使能以用於相應的序列或圖片。
  12. 如申請專利範圍第1項所述之方法，還包括：指示是否該當前塊利用最終預測子而被編碼的一標誌包括於該已編碼的視訊資料中，其中基於組合該畫面內預測子或該畫面間預測子生成該最終預測子，或者僅當該當前塊在該已編碼的視訊資料中被識別，或由另一標誌於輸入資料中被識別作為利用畫面間預測而被編碼時，自輸入資料提取該標誌。
  13. 如申請專利範圍第1項所述之方法，還包括：指示是否該當前塊利用最終預測子而被編碼的一標誌包括於該已編碼的視訊資料中，其中基於組合該畫面內預測子或該畫面間預測子生成的該最終預測子，或者僅當該當前塊在該已編碼的視訊資料中被識別，或由另一標誌於輸入資料中被識別作為利用畫面內預測而被編碼時，自輸入資料提取該標誌。
  14. 如申請專利範圍第1項所述之方法，其中透過使用高級運動向量預測，合併或跳過模式導出一運動向量來生成該畫面間預測子。
  15. 一種視訊編解碼裝置，包括：處理電路，被配置為：接收與一圖像訊框中的一當前塊相關聯的輸入資料；生成該當前塊的一畫面間預測子；基於複數個相鄰圖元的複數個樣本和定位該複數個相鄰圖元的該複數個樣本的一畫面內預測模式生成該當前塊的一畫面內預測子； 透過依據與該畫面內預測模式相關聯的一個或複數個畫面內權重係數組合該畫面間預測子和該畫面內預測子來生成該當前塊的一最終預測子，其中該一個或複數個畫面內權重係數分別指示對應於該畫面內預測子的一個或複數個部分與該畫面間預測子組合的一個或複數個比率；以及基於該最終預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或一解碼塊。
  16. 如申請專利範圍第15項所述之裝置，其中，該處理電路被配置為當該畫面內預測模式是一非角度預測模式時，依據可應用於該當前塊的整體的一畫面內權重係數來執行組合該畫面間預測子和該畫面內預測子。
  17. 如申請專利範圍第15項所述之裝置，其中，該處理電路被配置為當該畫面內預測模式是一角度預測模式時，將該當前塊劃分成預定數量的部分，以及依據預定數量的部分的複數個畫面內權重係數，分別組合該畫面間預測子和該畫面內預測子，其中當沿該畫面內預測模式的一參考方向的複數個相應部分和該複數個相鄰圖元的該複數個樣本之間的距離減小時，該複數個畫面內權重係數的值增加。
  18. 一種非暫時計算機可讀介質，存儲使裝置的處理電路執行視訊編解碼方法的程式指令，並且該視訊編碼方法包括：接收與一圖像訊框中的一當前塊相關聯的輸入資料；生成該當前塊的一畫面間預測子； 基於複數個相鄰圖元的複數個樣本和定位該複數個相鄰圖元的該複數個樣本的一畫面內預測模式來生成當前塊的一畫面內預測子；透過依據與該畫面內預測模式相關聯的一個或複數個畫面內權重係數組合該畫面間預測子和該畫面內預測子來生成該當前塊的一最終預測子，其中該一個或複數個畫面內權重係數分別指示對應於該畫面內預測子的一個或複數個部分與該畫面間預測子組合的一個或複數個比率；以及基於該最終預測子編碼或解碼該當前塊以輸出已編碼的視訊資料或一解碼塊。
  19. 如申請專利範圍第18項所述之非暫時計算機可讀介質，其中，當該畫面內預測模式是一非角度預測模式時，依據可應用於該當前塊的整體的一畫面內權重係數來執行組合該畫面間預測子和該畫面內預測子。
  20. 如申請專利範圍第18項所述之非暫時計算機可讀介質，其中該方法還包括：當該畫面內預測模式是一角度預測模式時，將該當前塊劃分成預定數量的部分，依據預定數量的部分的複數個畫面內權重係數，分別組合該畫面間預測子和該畫面內預測子，以及當沿該畫面內預測模式的一參考方向的複數個相應部分和該複數個相鄰圖元的該複數個樣本之間的距離減小時，該複數個畫面內權重係數的值增加。
TW106106378A 2016-02-25 2017-02-24 視訊編解碼的方法與裝置 TWI618402B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201662299578P 2016-02-25 2016-02-25
US62/299,578 2016-02-25
US201662371251P 2016-08-05 2016-08-05
US62/371,251 2016-08-05
US15/440,085 US11032550B2 (en) 2016-02-25 2017-02-23 Method and apparatus of video coding
US15/440,085 2017-02-23

Publications (2)

Publication Number Publication Date
TW201735642A true TW201735642A (zh) 2017-10-01
TWI618402B TWI618402B (zh) 2018-03-11

Family

ID=59679977

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106106378A TWI618402B (zh) 2016-02-25 2017-02-24 視訊編解碼的方法與裝置

Country Status (5)

Country Link
US (1) US11032550B2 (zh)
CN (2) CN108702515B (zh)
GB (2) GB2564310B (zh)
TW (1) TWI618402B (zh)
WO (1) WO2017144017A1 (zh)

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10694184B2 (en) * 2016-03-11 2020-06-23 Digitalinsights Inc. Video coding method and apparatus
WO2017209328A1 (ko) * 2016-06-03 2017-12-07 엘지전자 주식회사 영상 코딩 시스템에서 인트라 예측 방법 및 장치
WO2018012808A1 (ko) * 2016-07-14 2018-01-18 삼성전자 주식회사 크로마 인트라 예측 방법 및 그 장치
ES2938187T3 (es) * 2016-08-08 2023-04-05 Lg Electronics Inc Métodos de codificación de vídeo basados en modo de intra predicción y aparato de procesamiento de vídeo de los mismos
US11503315B2 (en) * 2016-08-19 2022-11-15 Lg Electronics Inc. Method and apparatus for encoding and decoding video signal using intra prediction filtering
JP6847211B2 (ja) 2016-10-14 2021-03-24 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 距離重み付けされた双方向性イントラ予測
KR20230033027A (ko) 2016-11-01 2023-03-07 삼성전자주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
CN117041559A (zh) * 2016-12-07 2023-11-10 株式会社Kt 对视频进行解码或编码的方法和存储视频数据的设备
US11496747B2 (en) 2017-03-22 2022-11-08 Qualcomm Incorporated Intra-prediction mode propagation
WO2018181252A1 (en) * 2017-03-28 2018-10-04 Panasonic Intellectual Property Corporation Of America Encoding apparatus, decoding apparatus, encoding method, and decoding method
JP6956543B2 (ja) * 2017-07-03 2021-11-02 日本放送協会 決定装置、符号化装置、復号装置及びプログラム
JP2019041165A (ja) 2017-08-23 2019-03-14 富士通株式会社 画像符号化装置、画像復号装置、画像処理方法、及び画像処理プログラム
WO2019059107A1 (ja) * 2017-09-20 2019-03-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
CA3078804A1 (en) * 2017-10-09 2019-04-18 Arris Enterprises Llc Adaptive unequal weight planar prediction
EP3487177A1 (en) * 2017-11-21 2019-05-22 Thomson Licensing Method and apparatus for low-complexity bi-directional intra prediction in video encoding and decoding
EP3496401A1 (en) * 2017-12-05 2019-06-12 Thomson Licensing Method and apparatus for video encoding and decoding based on block shape
CN111095927A (zh) * 2018-01-30 2020-05-01 深圳市大疆创新科技有限公司 视频数据编码
CN116320402A (zh) * 2018-04-04 2023-06-23 日本放送协会 预测图像校正装置、图像编码装置、图像解码装置以及程序
US10609402B2 (en) * 2018-05-02 2020-03-31 Tencent America LLC Method and apparatus for prediction and transform for small blocks
WO2019210840A1 (en) * 2018-05-03 2019-11-07 FG Innovation Company Limited Device and method for coding video data based on different reference sets in linear model prediction
KR102444294B1 (ko) 2018-05-10 2022-09-16 삼성전자주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
JP2019213096A (ja) * 2018-06-06 2019-12-12 Kddi株式会社 画像復号装置、画像符号化装置、画像処理システム、画像復号方法及びプログラム
US10284860B1 (en) * 2018-07-02 2019-05-07 Tencent America LLC Method and apparatus for video coding
CN112514402A (zh) 2018-07-30 2021-03-16 三星电子株式会社 用于图像编码的方法和设备以及用于图像解码的方法和设备
WO2020054060A1 (ja) * 2018-09-14 2020-03-19 株式会社ソシオネクスト 動画像符号化方法及び動画像符号化装置
US11997311B2 (en) * 2018-09-17 2024-05-28 Hfi Innovation Inc. Methods and apparatuses of combining multiple predictors for block prediction in video coding systems
WO2020073924A1 (en) * 2018-10-09 2020-04-16 Mediatek Inc. Method and apparatus of encoding or decoding using reference samples determined by predefined criteria
US20200120339A1 (en) * 2018-10-11 2020-04-16 Mediatek Inc. Intra Prediction For Multi-Hypothesis
KR20210057187A (ko) * 2018-10-12 2021-05-20 주식회사 윌러스표준기술연구소 다중 가정 예측을 사용하는 비디오 신호 처리 방법 및 장치
WO2020084475A1 (en) 2018-10-22 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Utilization of refined motion vector
CN116939198A (zh) * 2018-10-23 2023-10-24 北京字节跳动网络技术有限公司 并置的局部照明补偿和修改的帧间预测编解码
CN111436227B (zh) 2018-11-12 2024-03-29 北京字节跳动网络技术有限公司 在视频处理中使用组合帧间-帧内预测
US10848763B2 (en) * 2018-11-14 2020-11-24 Tencent America LLC Method and apparatus for improved context design for prediction mode and coded block flag (CBF)
CN113170192B (zh) * 2018-11-15 2023-12-01 北京字节跳动网络技术有限公司 仿射的merge与mvd
US11652984B2 (en) * 2018-11-16 2023-05-16 Qualcomm Incorporated Position-dependent intra-inter prediction combination in video coding
US20200162737A1 (en) 2018-11-16 2020-05-21 Qualcomm Incorporated Position-dependent intra-inter prediction combination in video coding
WO2020098810A1 (en) 2018-11-17 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Merge with motion vector difference in video processing
WO2020103852A1 (en) 2018-11-20 2020-05-28 Beijing Bytedance Network Technology Co., Ltd. Difference calculation based on patial position
BR112021010286A2 (pt) * 2018-11-29 2021-08-17 Huawei Technologies Co., Ltd. codificador, decodificador e métodos correspondentes de construção de lista de modos mais prováveis para blocos com predição de múltiplas hipóteses
US10917636B2 (en) * 2018-12-03 2021-02-09 Tencent America LLC Method and apparatus for video coding
CN111294590A (zh) * 2018-12-06 2020-06-16 华为技术有限公司 用于多假设编码的加权预测方法及装置
US11115652B2 (en) 2018-12-07 2021-09-07 Tencent America LLC Method and apparatus for further improved context design for prediction mode and coded block flag (CBF)
GB2579824B (en) * 2018-12-14 2022-05-18 British Broadcasting Corp Video encoding and video decoding
KR102662036B1 (ko) 2018-12-21 2024-05-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 모션 벡터 차이 모드에서 병합시 모션 벡터 정밀도
US11122272B2 (en) * 2018-12-26 2021-09-14 Mediatek Inc. Triangle prediction with applied-block settings and motion storage settings
CN111372086B (zh) * 2018-12-26 2021-08-03 华为技术有限公司 视频图像解码方法及装置
GB2580326A (en) 2018-12-28 2020-07-22 British Broadcasting Corp Video encoding and video decoding
CN109640087B (zh) * 2018-12-30 2022-12-09 深圳市网心科技有限公司 一种帧内预测模式判决方法、装置及设备
CN116800958A (zh) * 2019-01-02 2023-09-22 Oppo广东移动通信有限公司 帧内预测方法及装置、计算机可读存储介质
CN113676733B (zh) * 2019-01-09 2023-02-24 北京达佳互联信息技术有限公司 视频解码方法、设备、非暂时性计算机可读存储介质
EP3937488A3 (en) 2019-01-09 2022-04-13 Beijing Dajia Internet Information Technology Co., Ltd. System and method for improving combined inter and intra prediction
JP7259053B2 (ja) * 2019-02-01 2023-04-17 北京字節跳動網絡技術有限公司 複合イントラ‐インター予測の拡張適用
WO2020156534A1 (en) * 2019-02-01 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Interactions between in-loop reshaping and intra block copy
CN113383547A (zh) 2019-02-01 2021-09-10 北京字节跳动网络技术有限公司 环路整形和帧间编解码工具之间的相互作用
US11290726B2 (en) 2019-02-07 2022-03-29 Qualcomm Incorporated Inter-intra prediction mode for video data
KR102635518B1 (ko) 2019-03-06 2024-02-07 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 변환된 단예측 후보의 사용
JP7145793B2 (ja) * 2019-03-11 2022-10-03 Kddi株式会社 画像復号装置、画像復号方法及びプログラム
WO2020182187A1 (en) * 2019-03-12 2020-09-17 Beijing Bytedance Network Technology Co., Ltd. Adaptive weight in multi-hypothesis prediction in video coding
CN113574889B (zh) 2019-03-14 2024-01-12 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
CN116708794A (zh) * 2019-03-18 2023-09-05 Oppo广东移动通信有限公司 图像分量预测方法、编码器、解码器以及存储介质
WO2020187328A1 (en) * 2019-03-21 2020-09-24 Beijing Bytedance Network Technology Co., Ltd. Signaling of combined intra-inter prediction
JP7417624B2 (ja) 2019-03-23 2024-01-18 北京字節跳動網絡技術有限公司 適応ループフィルタリングパラメータセットに対する制限
KR20200132762A (ko) * 2019-05-15 2020-11-25 현대자동차주식회사 색차블록을 복원하는 방법 및 영상 복호화 장치
CN113966616B (zh) * 2019-06-04 2023-11-14 北京字节跳动网络技术有限公司 使用临近块信息的运动候选列表构建
EP3975556A4 (en) * 2019-06-19 2022-08-03 Lg Electronics Inc. IMAGE DECODING METHOD FOR PERFORMING INTER-PREDICTION WHEN THE CURRENT BLOCK PREDICTION MODE CANNOT FINALLY BE SELECTED AND ASSOCIATED DEVICE
CN114009017A (zh) * 2019-07-05 2022-02-01 北京达佳互联信息技术有限公司 使用组合帧间和帧内预测进行运动补偿
BR112022002006A2 (pt) 2019-08-06 2022-03-29 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeo, aparelho de processamento de vídeo, e, mídia legível por computador
WO2021027928A1 (en) * 2019-08-14 2021-02-18 Beijing Bytedance Network Technology Co., Ltd. Weighting factors for prediction sample filtering in intra mode
WO2021027925A1 (en) 2019-08-14 2021-02-18 Beijing Bytedance Network Technology Co., Ltd. Position-dependent intra prediction sample filtering
EP4008109A4 (en) 2019-09-02 2022-09-14 Beijing Bytedance Network Technology Co., Ltd. ENCODING MODE DETERMINATION BASED ON COLOR FORMAT
MX2022003122A (es) 2019-09-21 2022-04-06 Beijing Bytedance Network Tech Co Ltd Modo intra basado para croma de restriccion de tama?o.
CN113794878B (zh) * 2019-09-23 2022-12-23 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
US11671110B2 (en) 2019-11-22 2023-06-06 Tencent America LLC Method and apparatus for neural network model compression/decompression
US11363295B2 (en) * 2019-11-27 2022-06-14 Tencent America LLC Method and system for intra mode coding
US11553208B2 (en) * 2019-11-27 2023-01-10 Tencent America LLC Method and system of video coding using a subset of available intra prediction modes for multiple reference lines
CN113099240B (zh) * 2019-12-23 2022-05-31 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
US20230055497A1 (en) * 2020-01-06 2023-02-23 Hyundai Motor Company Image encoding and decoding based on reference picture having different resolution
WO2022141282A1 (zh) * 2020-12-30 2022-07-07 深圳市大疆创新科技有限公司 视频处理方法和编码装置
CN113794885B (zh) * 2020-12-30 2022-12-23 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
US20230217026A1 (en) * 2022-01-05 2023-07-06 Alibaba Singapore Holding Private Limited Fusion of video prediction modes

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4051799B2 (ja) * 1999-02-22 2008-02-27 ソニー株式会社 画像復号装置及び画像復号方法
MXPA05007384A (es) * 2003-01-07 2005-09-12 Thomson Licensing Sa Intra/inter codificacion mezclada de video de divisiones de macrobloque.
US7782955B2 (en) * 2005-09-28 2010-08-24 Avisonic Technology Corporation Transcoder and transcoding method operating in a transform domain for video coding schemes possessing different transform kernels
KR100750136B1 (ko) * 2005-11-02 2007-08-21 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
US8457200B2 (en) * 2006-07-07 2013-06-04 Telefonaktiebolaget Lm Ericsson (Publ) Video data management
WO2008084817A1 (ja) * 2007-01-09 2008-07-17 Kabushiki Kaisha Toshiba 画像符号化と復号化の方法及び装置
CN101877785A (zh) * 2009-04-29 2010-11-03 祝志怡 一种基于混合预测的视频编码方法
CN105120265B (zh) * 2009-08-12 2019-01-29 汤姆森特许公司 用于改进的帧内色度编码和解码的方法及装置
US8879632B2 (en) * 2010-02-18 2014-11-04 Qualcomm Incorporated Fixed point implementation for geometric motion partitioning
KR101379188B1 (ko) * 2010-05-17 2014-04-18 에스케이 텔레콤주식회사 인트라 블록 및 인터 블록이 혼합된 코딩블록을 이용하는 영상 부호화/복호화 장치 및 그 방법
CN102238391B (zh) * 2011-05-25 2016-12-07 深圳市云宙多媒体技术有限公司 一种预测编码方法、装置
CN105187839A (zh) * 2011-05-31 2015-12-23 Jvc建伍株式会社 动图像解码装置、动图像解码方法、接收装置及接收方法
AU2012270359B2 (en) * 2011-06-14 2014-10-30 Samsung Electronics Co., Ltd. Method and apparatus for encoding motion information and method and apparatus for decoding same
US20130051467A1 (en) * 2011-08-31 2013-02-28 Apple Inc. Hybrid inter/intra prediction in video coding systems
US9787982B2 (en) * 2011-09-12 2017-10-10 Qualcomm Incorporated Non-square transform units and prediction units in video coding
US20130070855A1 (en) * 2011-09-17 2013-03-21 Qualcomm Incorporated Hybrid motion vector coding modes for video coding
WO2013074964A1 (en) * 2011-11-16 2013-05-23 Vanguard Software Solutions, Inc. Video compression for high efficiency video coding
US9531990B1 (en) * 2012-01-21 2016-12-27 Google Inc. Compound prediction using multiple sources or prediction modes
US9924169B2 (en) * 2012-03-06 2018-03-20 Lg Electronics Inc. Method and apparatus for selecting a filter based on a variance of depth data
US9503720B2 (en) * 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
WO2014038330A1 (ja) * 2012-09-06 2014-03-13 ソニー株式会社 画像処理装置及び画像処理方法
US9906786B2 (en) * 2012-09-07 2018-02-27 Qualcomm Incorporated Weighted prediction mode for scalable video coding
KR102088801B1 (ko) * 2013-03-07 2020-03-13 삼성전자주식회사 가변블록 사이즈 코딩 정보를 이용한 관심영역 코딩 방법 및 장치
WO2015093565A1 (ja) * 2013-12-19 2015-06-25 シャープ株式会社 画像復号装置、画像符号化装置および残差予測装置
US9609343B1 (en) * 2013-12-20 2017-03-28 Google Inc. Video coding using compound prediction
US10666940B2 (en) * 2014-11-06 2020-05-26 Samsung Electronics Co., Ltd. Video encoding method and apparatus, and video decoding method and apparatus
CN104618718B (zh) * 2014-12-30 2017-04-05 华中科技大学 一种基于空间‑时间多预测模式的无损压缩方法与系统
JP2018050091A (ja) * 2015-02-02 2018-03-29 シャープ株式会社 画像復号装置、画像符号化装置および予測ベクトル導出装置
US20160269737A1 (en) * 2015-03-09 2016-09-15 Panasonic Intellectual Property Management Co., Ltd. Intra prediction device and intra prediction method
WO2017043816A1 (ko) * 2015-09-10 2017-03-16 엘지전자(주) 인터-인트라 병합 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
US20170150176A1 (en) * 2015-11-25 2017-05-25 Qualcomm Incorporated Linear-model prediction with non-square prediction units in video coding
WO2017105097A1 (ko) * 2015-12-17 2017-06-22 삼성전자 주식회사 머지 후보 리스트를 이용한 비디오 복호화 방법 및 비디오 복호화 장치
WO2017123133A1 (en) * 2016-01-12 2017-07-20 Telefonaktiebolaget Lm Ericsson (Publ) Video coding using hybrid intra prediction

Also Published As

Publication number Publication date
GB2591968B (en) 2021-12-01
CN108702515B (zh) 2021-10-01
CN108702515A (zh) 2018-10-23
GB202107290D0 (en) 2021-07-07
TWI618402B (zh) 2018-03-11
GB201815108D0 (en) 2018-10-31
WO2017144017A1 (en) 2017-08-31
US11032550B2 (en) 2021-06-08
CN113784121B (zh) 2023-07-21
GB2564310B (en) 2021-08-18
CN113784121A (zh) 2021-12-10
GB2591968A (en) 2021-08-11
US20170251213A1 (en) 2017-08-31
GB2564310A (en) 2019-01-09

Similar Documents

Publication Publication Date Title
TWI618402B (zh) 視訊編解碼的方法與裝置
US11863763B2 (en) Adaptive partition coding
US11032555B2 (en) Effective prediction using partition coding
US20230088154A1 (en) Effective wedgelet partition coding using spatial prediction
US20230353726A1 (en) Effective wedgelet partition coding
WO2013107931A1 (en) An apparatus, a method and a computer program for video coding and decoding
TWI688266B (zh) 用於圖像和視訊編解碼的畫面內預測融合的方法和裝置
CN112640467A (zh) 用于帧内预测的方法和装置
TWI719612B (zh) 圖像和視訊處理中產生mpm 以進行幀內預測的方法和裝置
US10075692B2 (en) Method of simple intra mode for video coding
WO2019206115A1 (en) Method and apparatus for restricted linear model parameter derivation in video coding
KR101601856B1 (ko) 방향적 인트라 예측 장치 및 그 예측 방법