TW202005396A - 幀內塊複製與仿射的交互 - Google Patents

幀內塊複製與仿射的交互 Download PDF

Info

Publication number
TW202005396A
TW202005396A TW108119573A TW108119573A TW202005396A TW 202005396 A TW202005396 A TW 202005396A TW 108119573 A TW108119573 A TW 108119573A TW 108119573 A TW108119573 A TW 108119573A TW 202005396 A TW202005396 A TW 202005396A
Authority
TW
Taiwan
Prior art keywords
picture
block
indicator
encoding
affine
Prior art date
Application number
TW108119573A
Other languages
English (en)
Other versions
TWI736902B (zh
Inventor
張凱
張莉
劉鴻彬
王悅
Original Assignee
大陸商北京字節跳動網絡技術有限公司
美商字節跳動有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商北京字節跳動網絡技術有限公司, 美商字節跳動有限公司 filed Critical 大陸商北京字節跳動網絡技術有限公司
Publication of TW202005396A publication Critical patent/TW202005396A/zh
Application granted granted Critical
Publication of TWI736902B publication Critical patent/TWI736902B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167Position within a video image, e.g. region of interest [ROI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/523Motion estimation or motion compensation with sub-pixel accuracy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/583Motion compensation with overlapping blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

描述了在視頻編碼中應用幀內塊複製(IBC)的設備、系統和方法。總體來說,描述了將IBC與用於視頻編碼和解碼的現有運動補償演算法相結合的方法。在一個典型的方面,一種使用IBC進行視頻編碼的方法,包括:確定是否使用運動補償演算法對當前圖片的當前塊進行編碼;以及基於該確定,通過將幀內塊複製選擇性地應用到當前塊,對當前塊進行編碼。在一個典型的方面,另一種使用IBC進行視頻編碼方法,包括:確定是否使用幀內塊複製對當前圖片的當前塊進行編碼;以及基於該確定,通過將運動補償演算法選擇性地應用到當前塊,對當前塊進行編碼。

Description

幀內塊複製與仿射的交互
本發明是有關於一種視頻編碼技術,且特別是有關於一種對視覺資訊進行編碼的方法。
運動補償是視頻處理中的一種技術,其通過考慮相機和/或視頻中的物件的運動,給定先前幀和/或將來幀來預測視頻中的幀。運動補償可以用於視頻資料的編碼和解碼中以實現視訊壓縮。
描述了與用於運動補償的幀內塊複製相關的設備、系統和方法。
在一個典型的方面,可以使用所公開的技術來提供使用幀內塊複製的視頻編碼方法。該方法包括:確定是否使用運動補償演算法對當前圖片的當前塊進行編碼;以及基於該確定,通過將幀內塊複製選擇性地應用到當前塊對當前塊進行編碼。
在另一典型的方面,可以使用所公開的技術來提供使用幀內塊複製的視頻編碼的另一種方法。該方法包括:確定是否使用幀內塊複製對當前圖片的當前塊進行編碼;以及基於該確定,通過將運動補償演算法選擇性地應用到當前塊對當前塊進行編碼。
在又一典型的方面,可以使用所公開的技術來提供使用幀內塊複製的視頻解碼方法。該方法包括:確定是否使用運動補償演算法對當前圖片的當前塊進行解碼;以及基於該確定,通過將幀內塊複製選擇性地應用到當前塊對當前塊進行解碼。
在又一典型的方面,可以使用所公開的技術來提供使用幀內塊複製的視頻解碼的另一種方法。該方法包括:確定是否使用幀內塊複製對當前圖片的當前塊進行解碼;以及基於該確定,通過將運動補償演算法選擇性地應用到當前塊對當前塊進行解碼。
在又一示例方面,公開了一種視頻處理方法。該方法包括:確定表示視覺資訊的一部分的被解碼的塊是使用第一編碼技術編碼的;以及通過使用與第一編碼技術相對應的第一解碼技術並且避免使用與第二編碼技術相對應的第二解碼技術對編碼表示進行解碼;其中第一和第二編碼技術中的一種對應於幀內塊複製(IBC)技術,該IBC技術使用相同視頻圖像的第二塊對被解碼的塊進行編碼,另一種對應於仿射編碼技術,該仿射編碼技術使用仿射運動模型對被解碼的塊進行編碼。
在又一示例方面,公開了一種視覺資訊處理的方法。該方法包括:確定表示視覺資訊的編碼圖像的一部分的被解碼的塊是使用幀內塊複製(IBC)技術和仿射編碼技術編碼的,該IBC技術使用圖像的第二塊編碼被解碼的塊,該仿射編碼技術使用仿射運動模型編碼被解碼的塊;以及通過使用與IBC編碼技術相對應的IBC解碼技術、以及與仿射編碼技術相對應的仿射解碼技術來解碼編碼表示。
在又一典型的方面,上述方法以處理器可執行代碼的形式實施,並且存儲在電腦可讀取紀錄媒體中。
在又一典型的方面,公開了一種設備,其被配置為或可操作以執行上述方法。該設備可以包括被程式設計以實現該方法的處理器。
在又一典型的方面,可以實現如本文中所述方法的視頻解碼器裝置。
在附圖、說明書和權利要求書中更詳細地描述了所公開技術的上述方面、以及其他方面和特徵。
為了便於理解,本文中使用了章節標題,並且不將各章節中討論的技術和實施例的範圍僅局限於該章節。
由於對諸如視頻、圖片、三維場景等高解析度視覺資訊的需求日益增加,視頻編碼方法和技術在現代技術中無所不在。本申請所述的技術可以應用於各種視覺資訊,包括視頻、圖片、三維場景等。視覺資訊的圖片可以是視頻中的幀、圖片的一部分、三維場景中的物件、三維場景的一部分等。塊可以是視覺資訊圖片的一部分,諸如編碼單元(CU)、最大編碼單元(LCU)、樣本、預測單元(PU)等,如本申請中所述。視覺資訊的子塊可以是PU,諸如子CU、樣本等。PU可以是視覺資訊的像素、體素或最小分辨量子。視頻轉碼器通常包括壓縮或解壓縮數位視訊的電子電路或軟體,並且不斷地被改進以提供更高的編碼效率。視頻轉碼器將未壓縮的視訊轉換為壓縮格式,或反之亦然。視頻品質、用於表示視頻的資料量(由位元速率決定)、編碼和解碼演算法的複雜度、對資料丟失和錯誤的敏感度、易於編輯、隨機訪問和端到端延遲(延遲)之間存在複雜的關係。壓縮格式通常符合標準視訊壓縮規範,例如,高效視頻編碼(HEVC)標準(也稱為H.265或MPEG-H第2部分)、待最終確定的通用視頻編碼標準或其他當前和/或未來的視頻編碼標準。
所公開技術的實施例可以應用于現有的視頻編碼標準(例如,HEVC、H.265)和未來的標準,以提高執行時間性能。在本檔中,使用章節標題來提高描述的可讀性,並且不以任何方式將討論或實施例(和/或實現)僅限於各自的章節。
1. 參考圖片和參考圖片清單的示例
在HEVC中,存在短期和長期兩種參考圖片。當參考圖片不再需要用於預測參考時,可以將其標記為「不用於參考」。HEVC引入了一種全新的參考圖片管理方法,被稱為參考圖片集(RPS)或緩衝描述。
使用RPS概念完成將圖片標記為「用於短期參考」、「用於長期參考」或「不用於參考」的處理。RPS是一組圖片指示器,其在每個切片(slice)標頭中發出信號,並且由一組短期圖片和一組長期圖片組成。在對圖片的第一個切片標頭進行解碼後,DPB中的圖片將按RPS的指定進行標記。在DPB中被RPS的短期圖片部分指示的圖片被保持為短期圖片。在DPB中被RPS的長期圖片部分指示的短期或長期圖片被轉換為或保持為長期圖片。最後,DPB中在RPS中沒有指示器的圖片被標記為不用於參考。因此,所有可能被用作任何後續圖片解碼順序預測的參考的已解碼的圖片必須包含在RPS中。
RPS由一組用於識別DPB中圖片的圖片順序計數(POC)值組成。除了對POC資訊發信號外,RPS還為每個圖片發送一個標誌。每個標誌指示當前圖片是否有對應圖片是否可用或不可用於參考。應當注意的是,即使參考圖片被發信號為對當前圖片不可用,它仍被保留在DPB中,並且可能稍後可用於參考,並用於解碼未來圖片。
從POC資訊和可用性標誌,可以創建表1所示的五個參考圖片清單。清單RefPicSetStCurrBefore由可供當前圖片參考且POC值低於當前圖片的POC值的短期圖片組成。RefPicSetStCurrAfter由POC值高於當前圖片的POC值的可用短期圖片組成。RefPicSetStFoll是包含當前圖片不可用、但可以用作按解碼順序解碼後續圖片的參考圖片的所有短期圖片的清單。最後,列表RefPicSetLtCurr 和 RefPicSetLtFoll分別包含可供當前圖片參考和不可供當前圖片參考的長期圖片。
表1參考圖片清單的清單
Figure 108119573-A0304-0001
1.1短期和長期參考圖片示例
通用序列參數集的語法如下示出:
Figure 108119573-A0304-0002
Figure 108119573-A0304-0003
通用切片段標頭的語法如下示出:
Figure 108119573-A0304-0004
Figure 108119573-A0304-0005
上述語法表中使用的語義定義如下:
num_short_term_ref_pic_sets指定SPS中包含的st_ref_pic_set()語法結構的數目。num_short_term_ref_pic_sets的值應在0到64之間(包括0和64)。
在一些實施例中,解碼器可以為num_short_term_ref_pic_sets+1 st_ref_pic_set()語法結構的總數目分配記憶體,因為在當前圖片的切片標頭中可能直接發出一個st_ref_pic_set()語法結構的信號。直接在當前圖片的切片標頭中發出信號的st_-ref_-pic_set()語法結構具有等於num_-short_-term_-ref_-pic_set的索引。
long_term_ref_pics_present_flag等於0指定CVS中的任何編碼圖片的幀間預測不使用長期參考圖片。long_term_ref_pics_present_flag等於1指定CVS中的一個或多個編碼圖片的幀間預測可以使用長期參考圖片。
num_long_term_ref_pics_sps指定在SPS中指定的候選長期參考圖片的數量。num_long_term_ref_pics_sps的值應在0到32之間(包括0和32)。
lt_ref_pic_poc_lsb_sps[i]指定SPS中的第i個候選長期參考圖片的圖片順序計數模組MaxPicOrderCntLsb。用於表示lt_ref_pic_poc_lsb_sps[i]的位數等於log2_max_pic_order_cnt_lsb_minus4+4。
used_by_curr_pic_lt_sps_flag[i]等於0指定在SPS中指定的第i個候選長期參考圖片不被其長期參考圖片集(RPS)中包含在SPS中指定的其第i個候選長期參考圖片的圖片用於參考。
short_term_ref_pic_set_sps_flag等於1指定當前圖片的短期RPS是基於活動SPS中的一個st_ref_pic_set()語法結構匯出的,該活動SPS由切片標頭中的語法元素short_term_ref_pic_set_idx標識。short_term_ref_pic_set_sps_flag等於0指定當前圖片的短期RPS是基於直接包含在當前圖片切片標頭中的st_ref_pic_set()語法結構匯出的。當num_short_term_ref_pic_sets等於0時,short_term_ref_pic_set_sps_flag的值應等於0。
short_term_ref_pic_set_idx將用於匯出當前圖片的短期RPS的語法結構st_ref_pic_set()的索引指定給活動SPS中包含的語法結構st_ref_pic_set()的列表。語法元素short_term_ref_pic_set_idx由Ceil(log2(num_short_term_ref_pic_set))位表示。當不存在時,short_term_ref_pic_set_idx的值被推斷為等於0。short_term_ref_pic_set_idx的值應在0至num_short_term_ref_pic_sets–1的範圍內(包含0和num_short_term_ref_pic_sets−1)。
在一些實施例中,變數CurrRpsIdx匯出如下: --如果short_term_ref_pic_set_sps_flag等於1,則將CurrRpsIdx設置為等於short_term_ref_pic_set_idx。 --否則,將CurrRpsIdx設置為等於num_short_term_ref_pic_sets。
num_long_term_sps指定當前圖片的長期RPS中的條目的數量,該當前圖片是基於活動SPS中指定的候選長期參考圖片匯出的。num_long_term_sps的值應在0到num_long_term_ref_pics_sps的範圍內(包括0和num_long_term_ref_pics_sps)。當不存在時,num_long_term_sps的值被推斷為等於0。
num_long_term_pics指定直接在切片標頭發出信號的當前圖片的長期RPS中條目的數量。當不存在時,num_long_term_pics的值被推斷為等於0。
在一些實施例中,當nuh_layer_id等於0時,num_long_term_pics的值應小於或等於sps_max_dec_pic_buffering_minus1[TemporalId]−NumNegativePics[CurrRpsIdx]−NumPositivePics[CurrRpsIdx]−num_long_term_sps–TwoVersionsOfCurrDecPicFlag。
lt_idx_sps[i]將當前圖片的長期RPS中第i個條目的索引指定給活動SPS中指定的候選長期參考圖片的清單。用於表示lt_idx_sps[i]的位數等於Ceil(Log2(num_long_term_ref_pics_sps))。當不存在時,lt_idx_sps[i]的值被推斷為等於0。lt_idx_sps[i]的值應在0到num_long_term_ref_pics_sps−1的範圍內(包括0和num_long_term_ref_pics_sps−1)。
poc_lsb_lt[i]指定當前圖片的長期RPS中第i個條目的圖片順序計數模組MaxPicOrderCntLsb的值。poc_lsb_lt[i]語法元素的長度為log2_max_pic_order_cnt_lsb_minus4+4位。
used_by_curr_pic_lt_flag[i]等於0指定當前圖片的長期RPS中的第i個條目不被當前圖片用於參考。
在一些實施例中,變數PocLsbLt[i]和UsedByCurrPicLt[i]匯出如下: --如果i小於num_long_term_sps,則將PocLsbLt[i]設置為等於lt_ref_pic_poc_lsb_sps[lt_idx_sps[i]],並且將UsedByCurrPicLt[i] 設置為等於used_by_curr_pic_lt_sps_flag[ lt_idx_sps[i]]。 --否則,將PocLsbLt[i]設置為等於poc_lsb_lt[i],並且將UsedByCurrPicLt[i]設置為等於used_by_curr_pic_lt_flag[i]。
delta_poc_msb_present_flag[i]等於1指delta_poc_msb_cycle_lt[i]存在。delta_poc_msb_present_flag[i]等於0指定delta_poc_msb_cycle_lt[i]不存在。
在一些實施例中,讓prevTid0Pic作為以解碼順序的前一圖片,其具有TemporalId 等於 0 並且不是 RASL、RADL 或SLNR圖片。讓 setOfPrevPocVals 作為包含以下的集合: -- prevTid0Pic的PicOrderCntVal, -- prevTid0Pic的RPS中每個圖片的PicOrderCntVal, --以解碼順序在prevTid0Pic之後且以解碼順序在當前圖片之前的每個圖片的PicOrderCntVal 。
在一些實施例中,當setOfPrevPocVals中有多於一個值時(其中值模組MaxPicOrderCntLsb 等於 PocLsbLt[i]),delta_poc_msb_present_flag[i]應等於1。
delta_poc_msb_cycle_lt[i]被用於確定當前圖片長期RPS中第i個條目的圖片順序計數值的最有效位的值。當delta_poc_msb_cycle_lt[i]不存在時,推斷其等於0。
在一些實施例中,變數DeltaPocMsbCycleLt[i]匯出如下: 如果(i==0||i==num_long_term_sps) DeltaPocMsbCycleLt[i]=delta_poc_msb_cycle_lt[i] 否則DeltaPocMsbCycleLt[i]=delta_poc_msb_cycle_lt[i]+DeltaPocMsbCycleLt[i−1]
1.2短期和長期參考圖片之間的運動向量預測(MVP)示例
在一些實施例中,僅當目標參考圖片類型和預測參考圖片類型相同時,才允許進行運動向量預測。換句話說,當類型不同時,不允許進行運動向量預測。
高級運動向量預測(AMVP)是包含現有實現的運動向量預測的示例。現有AMVP實施的相關部分如下所述。
運動向量mvLXA和可用性標誌availableFlagLXA按以下順序步驟匯出: (1)樣本位置(xNbA0, yNbA0)被設置為等於(xPb−1, Pb+nPbH),樣本位置(xNbA1, yNbA1)被設置為等於(xNbA0, yNbA0−1)。 (7)當availableFlagLXA等於0時,以下適用於(xNbAk, yNbAk),從(xNbA0, yNbA0)到(xNbA1, yNbA1)或直到availableFlagLXA等於1: --當availableAk等於TRUE且availableFlagLXA等於0時,以下內容適用: 如果PredFlagLX[xNbAk][yNbAk]等於1且LongTermRefPic(currPic, currPb, refIdxLX, RefPicListX)等於LongTermRefPic(currPic, currPb, RefIdxLX[xNbAk][yNbAk], RefPicListX),則將availableFlagLXA設置為1,並做出以下分配: mvLXA=MvLX[xNbAk][yNbAk] refIdxA=RefIdxLX[xNbAk][yNbAk] refPicListA=RefPicListX 否則,當PredFlagLY[xNbAk][yNbAk] (其中Y=!X)等於1且LongTermRefPic(currPic, currPb, refIdxLX, RefPicListX)等於 LongTermRefPic(currPic, currPb, RefIdxLY[xNbAk][yNbAk], RefPicListY)時,將availableFlagLXA設置為1。
運動向量mvLXB和可用性標誌availableFlagLXB按以下順序步驟匯出: (1)樣本位置(xNbB0, yNbB0),(xNbB1, yNbB1)和(xNbB2, yNbB2)分別設置為(xPb+nPbW, yPb−1),(xPb+ nPbW−1, yPb−1)和(xPb−1, yPb−1)。 (5)當IsScaledFlagLx等於0時,availableFlagLXB設置為0,並且以下適用於(xNbBk, yNbBk),從(xNbB0, yNbB0)到(xNbB2, yNbB2)或直到availableFlagLXB等於1: --用亮度位置(xCb, yCb)、當前亮度編碼塊大小nCbS、亮度位置(xPb, yPb)、亮度預測塊寬度nPbW、亮度預測塊高度nPbH、亮度位置(xNbY, yNbY)設置等於(xNbBk, yNbBk)、以及分區索引partIdx作為輸入調用第6.4.2條中規定的預測塊的可用性推導過程,並將輸出分配給預測塊可用性標誌availableBk。 --當availableBk等於TRUE且availableFlagLXB等於0時,以下內容適用: 如果PredFlagLX[xNbBk][yNbBk]等於1且 LongTermRefPic(currPic, currPb,refIdxLX,RefPicListX)等於LongTermRefPic(currPic,currPb, RefIdxLX[xNbBk][yNbBk], RefPicListX),則將availableFlagLXB設為等於1,並做出以下分配: mvLXB=MvLX[xNbBk][yNbBk] refIdxB=RefIdxLX[xNbBk][yNbBk] refPicListB=RefPicListX 否則,當PredFlagLY[xNbBk][yNbBk](其中Y=!X)等於1且LongTermRefPic(currPic, urrPbrefIdxLX, PicListX)等於LongTermRefPic(currPic, currPb, RefIdxLY[xNbBk][yNbBk], RefPicListY),將availableFlagLXB設為等於1,並進行以下分配: mvLXB=MvLY[xNbBk][yNbBk]。
時間運動向量預測(TMVP)是包含現有實現的運動向量預測的另一個示例。現有TMVP實施的相關部分如下所述。
變數mvLXCol和availableFlagLXCol匯出如下: 如果LongTermRefPic(currPic, rrPb, efIdxLX,LX) 不等於 LongTermRefPic(ColPic, colPb, refIdxCol, listCol),則將mvLXCol的兩個分量都設為等於0且將availableFlagLXCol設為等於0。 否則,將變數availableFlagLXCol設置為1,refPicListCol[refIdxCol]設置為ColPic指定的並置圖片中包含預測塊colPb的切片的參考圖片清單listCol中的參考索引為refIdxCol的圖片。
2.幀內塊複製(IBC)的示例實施例
幀內塊複製(IBC)將運動補償的概念從幀間編碼擴展到幀內編碼。如圖1所示,當應用IBC時,通過同一圖片中的參考塊預測當前塊。在對當前塊進行編碼或解碼之前,必須已重建參考塊中的樣本。雖然IBC對於大多數相機捕獲的序列不是這樣有效,但它顯示出了對螢幕內容的顯著編碼增益。原因是在螢幕內容圖片中有許多重複的模式,諸如圖示和文本字元。IBC可以有效地消除這些重疊模式之間的冗餘。
在HEVC-SCC中,如果選擇當前圖片作為參考圖片,則可以使用內部編碼編碼單元(CU)。在這種情況下,MV被重命名為塊向量(BV),並且BV始終具有整數像素的精度。為了與主要規格HEVC相相容,當前圖片在解碼圖片緩衝區(DPB)中被標記為「長期」參考圖片。應注意的是,類似地,在多視圖/3D視頻編碼標準中,視圖間參考圖片也被標記為「長期」參考圖片。
2.1啟用IBC時圖片標記的實施例
PPS中與IBC相關的語義。pps_curr_pic_ref_enabled_flag等於1指定引用PPS的圖片可能包含在圖片本身切片的參考圖片清單中。pps_curr_pic_ref_enabled_flag等於0指定引用PPS的圖片從不包含在圖片切片的參考圖片清單中。當不出現時,pps_curr_pic_ref_enabled_flag的值被推斷為等於0。
當sps_curr_pic_ref_enabled_flag等於0時pps_curr_pic_ref_enabled_flag的值應等於0是位元流一致性的要求。
變數TwoVersionsOfCurrDecPicFlag推導如下: TwoVersionsOfCurrDecPicFlag=pps_curr_pic_ref_enabled_flag&&(sample_adaptive_offset_enabled_flag||!pps_deblocking_filter_disabled_flag||deblocking_filter_override_enabled_flag)
當sps_max_dec_pic_buffering_minus1[TemporalId]等於0時TwoVersionsOfCurrDecPicFlag的值應當等於0。
解碼過程。在調用迴圈過濾進程後,當前解碼的圖片被存儲在DPB中的空圖片存儲緩衝區中,DPB的充滿度增加1,此圖片被標記為「用於短期參考」。
當TwoVersionsOfCurrDecPicFlag等於1時,按照第F.8.7[1]條規定的迴圈內過濾進程調用前的當前解碼圖片被存儲在DPB中的空圖片存儲緩衝區中,DPB的充滿度增加1,此圖片標記為「用於長期參考」。
3. 聯合探索模型(JEM)示例
在一些實施例中,使用名為聯合探索模型(JEM)的參考軟體來探索未來的視頻編碼技術。在JEM中,基於子塊的預測被用於多種編碼工具中,諸如仿射預測、可選時域運動向量預測(ATMVP)、空時運動向量預測(STMVP)、雙向光流(BIO)、畫面播放速率上轉換(FRUC)、局部自我調整運動向量解析度(LAMVR)、重疊塊運動補償(OBMC)、局部照明補償(LIC)和解碼器側運動向量優化(DMVR)。
3.1仿射預測的示例
在HEVC中,運動補償預測(MCP)僅採用平移運動模型。然而,相機和物件可能具有多種運動,例如放大/縮小、旋轉、透視運動和/或其他不規則運動。另一方面,JEM應用了簡化的仿射變換運動補償預測。圖2示出了由兩個控制點運動向量v 0v1 描述的塊200的仿射運動場的示例。塊200的運動向量場(MVF)可以用以下等式描述:
Figure 02_image001
等式(1)
如圖2所示,(v0 x ,v0 y )是左上角控制點的運動向量,並且(v1 x ,v1 y )是右上角控制點的運動向量。為了簡化運動補償預測,可以應用基於子塊的仿射變換預測。子塊尺寸M×N推導如下:
Figure 02_image003
等式(2)
這裡,MvPre是運動向量分數精度(例如,JEM中的1/16)。(v2 x ,v2 y )是左下控制點的運動向量,其根據等式(1)計算。如果需要,M和N可以被向下調節使其分別作為w和h的除數。
圖3示出了塊300的每個子塊的仿射MVF的示例。為了推導出每個M×N子塊的運動向量,可以根據等式(1)計算每個子塊的中心樣本的運動向量,並且四捨五入到運動向量分數精度(例如,JEM中的1/16)。然後可以應用運動補償插值濾波器,利用推導出的運動向量生成各子塊的預測。在MCP之後,對每個子塊的高精度運動向量進行取整,並將其保存為與正常運動向量相同的精度。
在JEM中,有兩個仿射運動模式:AF_INTER模式和AF_MERGE模式。對於寬度和高度都大於8的CU,可以應用AF_INTER模式。在位流中,CU級別的仿射標誌被發出信號,以指示是否使用AF_INTER模式。在AF_INTER模式中,使用相鄰的塊構造具有運動向量對
Figure 02_image005
的候選列表。
圖4示出了在AF_INTER模式中塊400的運動向量預測(MVP)的示例。如圖4所示,v0 從子塊A、B或C的運動向量中選擇。可以根據參考清單對相鄰塊的運動向量進行縮放。也可以根據相鄰塊參考的圖片順序計數(POC)、當前CU參考的POC和當前CU的POC之間的關係對運動向量進行縮放。從相鄰的子塊D和E中選擇v1 的方法類似。如果候選清單的數目小於2時,該列表由複製每個AMVP候選組成的運動向量對來填充。當候選清單大於2時,可以首先根據相鄰的運動向量對候選進行排序(例如,基於一對候選中兩個運動向量的相似性)。在一些實現中,保留前兩個候選。在一些實施例中,使用速率失真(RD)成本檢查來確定選擇哪個運動向量對候選作為當前CU的控制點運動向量預測(CPMVP)。可以在位流中發出指示CPMVP在候選清單中的位置的索引。在確定了當前仿射CU的CPMVP後,應用仿射運動估計,並且找到控制點運動向量(CPMV)。然後,在位元流中對CPMV和CPMVP的差異發出信號。
當在AF_MERGE模式下應用CU時,它從有效的相鄰重構塊中獲取用仿射模式編碼的第一塊。圖5A示出了當前編碼單元CU 500的候選塊的選擇順序的示例。如圖5A所示,選擇順序可以是從當前CU 500的左(501)、上(502)、右上(503)、左下(504)到左上(505)。圖5B示出了在AF_MERGE模式中當前CU 500候選塊的另一個示例。如果相鄰的左下塊501以仿射模式編碼,如圖5B所示,則匯出包含子塊501的CU左上角、右上角和左下角的運動向量v2、v3和v4。當前CU 500左上角的運動向量v0是基於v2、v3和v4計算的。可以相應地計算當前CU右上方的運動向量v1。
根據等式(1)中的仿射運動模型計算當前CU的CPMV v0和v1後,可以生成當前CU的MVF。為了確定當前CU是否使用AF_MERGE模式編碼,當至少有一個相鄰的塊以仿射模式編碼時,可以在位元流中指示仿射標誌。
4. 視頻編碼中IBC的示例方法
圖6示出使用幀內塊複製進行視頻編碼的示例性方法的流程圖。方法600包括在步驟610處,確定是否使用運動補償演算法對當前圖片的當前塊進行編碼。方法600包括在步驟620處,基於該確定,通過選擇性地將幀內塊複製應用於當前塊對當前塊進行編碼。更一般來說,是否將幀內塊複製應用到當前塊是基於是否使用特定的運動補償演算法對當前塊進行編碼。
圖7示出了使用幀內塊複製進行視頻編碼的另一個示例方法的流程圖。方法700包括在步驟710處,確定是否使用幀內塊複製對當前圖片的當前塊進行編碼。方法700包括在步驟720處,基於該確定,通過選擇性地將運動補償演算法應用於當前塊對當前塊進行編碼。更一般來說,是否使用運動補償演算法對當前塊進行編碼是基於是否使用幀內塊複製對當前塊進行編碼。
圖8示出了使用幀內塊複製進行視頻解碼的示例性方法的流程圖。該方法800包括在步驟810處,確定是否使用運動補償演算法對當前圖片的當前塊進行解碼。方法800包括在步驟820處,基於該確定,通過選擇性地將幀內塊複製應用於當前塊來對當前塊進行解碼。更一般來說,是否將幀內塊複製應用到當前塊是基於是否使用特定的運動補償演算法對當前塊進行解碼。
圖9示出了使用幀內塊複製進行視頻解碼的另一個示例性方法的流程圖。方法900包括在步驟910處,確定是否使用幀內塊複製對當前圖片的當前塊進行解碼。方法900包括在步驟920處,基於該確定,通過選擇性地將運動補償演算法應用於當前塊對當前塊進行解碼。更一般來說,是否使用運動補償演算法對當前塊進行解碼是基於是否使用幀內塊複製對當前塊進行解碼。
在圖6至圖9的上下文中所述的方法600、700、800和900可以進一步包括確定運動補償演算法是否與幀內塊複製相容的步驟。在下面的示例中說明了對於不同的特定運動補償演算法,幀內塊複製和運動補償演算法的相容性。
例1:在確定當前圖片必須以與長期參考圖片的持續時間相對應的持續時間存儲在緩衝區中後,當前圖片在緩衝區(例如,解碼圖片緩衝區)中不會標記為的「長期」參考圖片。相反地,它被標記為一種不同於「短期」或「長期」的新型參考圖片。例如,它可以標記為「當前」參考圖片、「自」參考圖片、「暫態」參考圖片、「幀內塊複製」參考圖片等。
(a)類似地,不允許在新圖片類型的圖片和短期圖片之間進行預測(例如,運動資訊預測),和/或在新圖片類型的圖片和長期圖片之間進行預測(例如,運動資訊預測)。
(b)當新圖片類型的圖片與短/長期圖片之間的預測被允許時,可以跳過運動向量的縮放過程。
例2:提出仿射預測不能應用於IBC編碼塊。在這種情況下,當塊用IBC模式編碼時,仿射預測的指示發出信號被跳過。
(a)在一個示例中,如果參考圖片清單中當前塊的至少一個參考圖片是當前圖片,則指示是否使用仿射預測的標誌(又稱為affine_flag)不會發出信號並被推斷為0。
(b)或者,如果兩個參考清單的兩個參考圖片都是當前圖片,則affine_flag不會發出信號並被推斷為0。
(c)或者,如果一個塊與M組運動資訊相關聯(M>2),並且所有關聯的參考圖片都是當前圖片,則affine_flag不會發出信號,並且推斷為0。
(d)或者,如果當前塊的參考圖片包括當前圖片和其他參考圖片,則可以發出affine_flag信號。在這種情況下,affine_flag僅控制仿射預測是否用於非IBC交互預測,即不來自當前圖片的交互預測。本情形的一些示例如下: (i)在一個示例中,當前塊與兩個參考圖片相關聯,並且只有一個參考圖片是當前圖片。 (ii)在一個示例中,當前塊與兩個以上參考圖片相關聯,並且至少一個參考圖片是當前圖片,並且至少一個參考圖片不是當前圖片。 (iii)即使affine_flag等於1,仿射預測也不用於參考圖片與當前圖片相同的IBC預測。 (iv)或者,另外,即使affine_flag等於1,仿射預測也不用於啟用了IBC預測的參考圖片與當前圖片相同的參考清單。
(e)在一個示例中,是否以及如何將仿射預測應用於IBC編碼塊可以在序列級、圖片級、切片級、編碼樹單元(CTU)(又稱為最大編碼單元(LCU)級)、區域級、CU級或PU級從編碼器傳輸到解碼器。這些資訊可以在序列參數集(SPS)、圖片參數集(PPS)、切片標頭(SH)、CTU(又稱為LCU)、區域、CU或PU中發出信號。
例3:提出IBC不能應用於仿射預測的塊。在這種情況下,當使用仿射模式對塊進行編碼時,IBC的指示發出信號被跳過。
(a)在示例中,如果一個塊的affine_flag為1,則當前塊的任何參考圖片都不能是當前圖片。在另一個示例中,如果一個塊的affine_flag為1,則當前塊的至少一個參考圖片與當前圖片不相同。
(b)或者,是否以及如何將IBC應用於仿射預測的塊可以在序列級、圖片級、切片級、編碼樹單元(CTU)(例如,最大編碼單元(LCU)級、區域級、CU級或PU級)從編碼器傳輸到解碼器。這些資訊可以在序列參數集(SPS)、圖片參數集(PPS)、切片標頭(SH)、CTU(又稱為LCU)、區域、CU或PU中發出信號。
例4:此外,還提出仿射預測可以應用於IBC編碼塊。在這種情況下,可以同時發出仿射和IBC的指示。當對IBC編碼塊應用仿射預測時,以下可能進一步適用:
(a)在一個示例中,控制點(諸如
Figure 02_image007
Figure 02_image009
)的MV預測(MVP)只能從在當前圖片作為參考圖片的情況下先前解碼的MV中推導。MV縮放對於MVP推導是禁用的。反之亦然,對於在仿射預測而沒有IBC編碼的情況下的塊的控制點,MVP只能從在參考圖片與當前圖片不相同情況下先前解碼的MV中推導。
(b)在一個示例中,“仿射預測示例”部分中解釋的控制點處的MV以整數精度發出信號。它們的MVP應該被截斷或四捨五入到整數像素精度。
(c)在一個示例中,如果控制點(諸如
Figure 02_image007
Figure 02_image009
)處的MV是從相鄰的MV(諸如在仿射MERGE模式中)中推導出的,則推導出的MV被截斷或四捨五入到整數像素精度。
(d)在一個示例中,從控制點(諸如等式(1)中的(
Figure 02_image011
))處的MV推導出的塊內MV被截斷或四捨五入為整數像素精度。
(e)在一個示例中,不應用OBMC。
(f)在一個示例中,控制點(例如,
Figure 02_image009
)處的MV的y分量沒有發出信號並且始終被視為零。
下面列出的是本申請中所述技術的一些示例。本申請中使用的塊可以是像素、體素、子像素和/或子體素的連續或非連續集合。例如,塊可以是直線圍成的,例如4 x 4正方形、6 x 4矩形,或者由曲線圍成的,例如橢圓。
本申請中使用的視覺資訊的一部分可以是視覺資訊的子集。本申請中使用的編碼表示可以是表示已使用本申請中描述的技術之一編碼的可視資訊的位元流。本申請中使用的指示可以是編碼表示中的標誌或欄位,也可以是多個單獨的標誌或欄位。
本申請中使用的解碼技術可由解碼器應用,並且可以在硬體或軟體中實現。解碼技術可以以相反的順序撤銷編碼器所做的一切。當適當的解碼技術應用到編碼表示時,結果是可以獲得視覺資訊。
本申請中所用的多個塊中的初始塊是出現在編碼表示中第一塊之前的塊。本申請中使用的預定分量可以是運動向量的x軸、y軸或z軸分量。
示例
1. 如圖12所示,一種視覺資訊解碼方法(1200),包括: 確定(1202)表示所述視覺資訊的一部分的被解碼的塊是使用第一編碼技術編碼的;以及 通過使用與所述第一編碼技術相對應的第一解碼技術並且避免使用與第二編碼技術相對應的第二解碼技術,解碼(1204)編碼的表示; 其中,所述第一編碼技術和第二編碼技術中的一種對應於幀內塊複製(IBC)技術,所述幀內塊複製技術使用相同視頻圖片的第二塊對被解碼的所述塊進行編碼;並且所述第一編碼技術和第二編碼技術中的另一種對應於仿射編碼技術,所述仿射編碼技術使用仿射運動模型對被解碼的所述塊進行編碼。
2. 如圖13所示,一種對視覺資訊進行編碼的方法(1300),包括: 確定(1302)表示視覺資訊的編碼圖像的一部分的被解碼的塊是使用幀內塊複製(IBC)技術和仿射編碼技術編碼的,所述幀內塊複製技術使用所述圖片的第二塊編碼所述被解碼的塊,所述仿射編碼技術使用仿射運動模型編碼所述被解碼的塊;以及 通過使用與所述IBC編碼技術相對應的IBC解碼技術,以及與所述仿射編碼技術相對應的仿射解碼技術來解碼(1304)所述編碼表示。
3. 根據示例1或2所述的方法,所述IBC解碼技術包括: 獲取表示所述編碼圖片的多個塊、以及所述IBC技術的使用指示符; 解碼所述圖片中的多個初始塊;以及 在對所述初始塊進行解碼後,基於所述初始塊對所述多個塊中的第一塊進行解碼。
4. 根據示例1所述的方法,包括: 基於所述確定,判定所述被解碼的塊的編碼表示不包括第二編碼技術的使用指示符;以及 基於所述判定解析所述編碼表示。
5. 一種視頻處理方法,包括: 確定與編碼圖片相關聯的指示符包括替代類型的參考圖片指示符,所述替代類型的參考圖片指示符指示應用於所述編碼圖片的編碼技術是幀內塊複製技術,其中所述替代類型的參考圖片指示符不同於長期參考圖片指示符和短期參考圖片指示符,其中包含所述長期參考圖片指示符的圖片以第一持續時間被存儲在記憶體中,並且其中包含所述短期參考圖片指示符的圖片以短於所述第一持續時間的第二持續時間被存儲在記憶體中。
6. 根據示例5所述的方法,包括: 獲取第一指示符,其包括所述長期參考圖片指示符或與第一圖片相關聯的所述長期參考圖片指示符; 獲取第二指示符,其包括與第二圖片相關聯的所述替代類型的參考圖片指示符; 避免基於所述第一圖片解碼所述第二圖片;以及 避免基於所述第二圖片解碼所述第一圖片。
7. 根據示例6所述的方法,包括: 獲取第一指示符,其包括所述長期參考圖片指示符或與第一圖片相關聯的所述長期參考圖片指示符; 獲取第二指示符,其包括與第二圖片相關聯的所述替代類型的參考圖片指示符; 在解碼所述第二圖片時跳過與所述第一圖片相關聯的運動向量的縮放處理;以及 在解碼所述第一圖片時跳過與所述第二圖片相關聯的運動向量的縮放處理。
8. 根據示例1至7中任一項所述的方法,包括: 當與所述編碼圖片的塊相關聯的指示符指示使用所述IBC技術時,在不應用所述仿射解碼技術的情況下解碼所述塊。
9. 根據示例8所述的方法,包括: 獲取多個參考圖片,其用於解碼包含多個塊的所述編碼圖片的塊;以及 當所述多個參考圖片中的至少一個參考圖片包含所述編碼圖片時,在不應用所述仿射解碼技術的情況下解碼所述塊。
10. 根據示例8所述的方法,包括: 獲取多個參考圖片,其用於解碼包含多個塊的所述編碼圖片的塊;以及 在塊與多組運動資訊相關聯的情況下,其中所述多組運動資訊包含多於兩組的運動資訊,並且所述多個參考圖片中的每個參考圖片都是所述編碼圖片時,在不應用所述仿射解碼技術的情況下解碼所述塊。
11. 根據示例8所述的方法,包括: 獲取多個參考圖片,其用於解碼包含多個塊的所述編碼圖片的塊,所述多個參考圖片包括所述編碼圖片和所述視覺資訊中的另一圖片; 獲取第一指示符,其指示所述仿射編碼技術被應用於所述塊;以及 使用所述仿射解碼技術和所述視覺資訊中的所述另一圖片解碼所述塊。
12. 根據示例11所述的方法,其中所述編碼圖片和所述視覺資訊中的所述另一圖片相同,所述方法包括:避免使用所述仿射解碼技術和所述編碼圖片解碼所述塊。例如,可以通過在解碼處理中禁用仿射解碼技術和編碼圖片來執行上述避免。
13. 根據示例1至12中任一項所述的方法,包括: 確定與所述編碼圖片相關聯的指示符指示所述仿射編碼技術被應用於所述編碼圖片;以及 當與所述編碼圖片相關聯的所述指示符指示所述仿射編碼技術被應用於所述編碼圖片時,在不應用所述IBC解碼技術的情況下解碼所述編碼圖片。
14. 根據示例13所述的方法,包括: 獲取一個或多個用於解碼所述編碼圖片的塊的參考圖片,所述參考圖片包括多個塊和與所述編碼圖片相關聯的所述指示符;以及 當與所述編碼圖片相關聯的所述指示符指示所述仿射編碼技術被應用於所述編碼圖片時,假設所述一個或多個參考圖片不包含所述編碼圖片。
15. 根據示例13所述的方法,包括: 獲取一個或多個用於解碼所述編碼圖片的塊的參考圖片,所述參考圖片包括多個塊和與所述編碼圖片相關聯的所述指示符;以及 在與所述編碼圖片相關聯的所述指示符指示所述仿射編碼技術被應用於所述編碼圖片情況下,假設所述一個或多個參考圖片中的至少一個參考圖片不同於所述編碼圖片。
16. 根據示例1至7中任一項所述的方法,包括: 獲取與所述編碼圖片相關聯的第一指示符、以及與所述編碼圖片相關聯的第二指示符,所述第一指示符指示所述仿射編碼技術被應用於所述塊,所述第二指示符指示所述IBC技術被應用於所述塊;以及 通過將所述仿射解碼技術和所述IBC解碼技術應用於所述塊,解碼包含多個塊的所述編碼圖片的所述塊。
17. 根據示例16所述的方法,包括: 獲取表示所述編碼圖片的多個塊中的初始塊; 解碼與所述初始塊相關聯的初始控制點的初始運動向量; 獲取表示所述編碼圖片的多個塊中的第一塊,以及指示所述IBC技術被應用於所述第一塊的第一指示符; 禁用運動向量縮放;以及 禁用運動向量縮放時,基於與所述初始塊相關聯的所述初始控制點的所述初始運動向量,創建與所述第一塊相關聯的第一控制點的運動向量預測(MVP)。
18. 根據示例16至17所述的方法,包括: 獲取表示所述編碼圖片的多個塊中的第一塊,以及指示所述仿射編碼技術被應用於所述第一塊的第一指示符;以及 基於與屬於與所述編碼圖片不同的圖片的所述塊相關聯的控制點的運動向量,創建與所述第一塊相關聯的所述第一控制點的所述MVP。
19. 根據示例16或17所述的方法,包括: 獲取表示所述編碼圖片的多個塊;以及 獲取與所述多個塊中的塊相關聯的控制點的運動向量,其中所述運動向量以整數精度發出信號;基於所述運動向量進行運動向量預測;以及將所述運動向量預測四捨五入到整數像素精度。
20. 根據示例16或17所述的方法,包括: 獲取表示所述編碼圖片的多個塊中的塊; 從相鄰控制點處的相鄰運動向量推導出與所述塊相關聯的控制點處的運動向量;以及將所述運動向量四捨五入到整數像素精度。
21. 根據示例16至20中任一項所述的方法,包括: 避免進行重疊塊運動補償(OBMC)。
22. 根據示例16或20中任一項所述的方法,包括: 假設運動向量在控制點處的預定分量是常數整數。
23. 一種對視覺資訊進行編碼的方法,包括: 將所述視覺資訊編碼成多個編碼圖片和多個指示符,所述多個指示符指示應用一種或多種編碼技術,所述多個指示符包括幀內塊複製(IBC)技術指示符和仿射編碼技術指示符,其中,使用所述IBC技術對與所述視覺資訊相關聯的第一圖片的第一塊進行編碼,並且使用所述仿射編碼技術對與所述視覺資訊相關聯的第二圖片的第二塊進行編碼,其中所述IBC技術使用所述第一圖片的不同塊對所述第一圖片的所述第一塊進行編碼,並且所述仿射編碼技術使用與所述視覺資訊相關聯的第三圖片對所述第二塊進行編碼。
24. 根據示例23所述的方法,所述IBC技術包括: 將所述第一圖片劃分成多個塊; 對所述多個塊中的初始塊進行編碼;以及 在對所述初始塊進行編碼後,基於所述初始塊對所述多個塊中的第一塊進行編碼。
25. 一種方法,包括: 編碼與多個編碼圖片中的編碼圖片相關聯的多個指示符中的指示符,所述指示符包括指示應用於所述編碼圖片的編碼技術是幀內塊複製技術的替代類型的參考圖片指示符,其中所述替代類型的參考圖片指示符不同於長期參考圖片指示符和短期參考圖片指示符,其中包含所述長期參考圖片指示符的圖片以第一持續時間被存儲在記憶體中,並且其中包含所述短期參考圖片指示符的圖片以短於所述第一持續時間的第二持續時間被存儲在記憶體中。
26. 根據示例25所述的方法,包括: 獲取第一指示符,其包括所述長期參考圖片指示符或與第一圖片相關聯的所述長期參考圖片指示符; 獲取第二指示符,其包括與第二圖片相關聯的所述替代類型的參考圖片指示符;避免基於所述第一圖片編碼所述第二圖片;以及避免基於所述第二圖片編碼所述第一圖片。
27. 根據示例25所述的方法,包括: 編碼第一指示符,其包括所述長期參考圖片指示符或與第一圖片相關聯的所述長期參考圖片指示符; 編碼第二指示符,其包括與第二圖片相關聯的所述替代類型的參考圖片指示符; 在編碼所述第二圖片時跳過與所述第一圖片相關聯的運動向量的縮放處理;以及 在編碼所述第一圖片時跳過與所述第二圖片相關聯的運動向量的縮放處理。
28. 根據示例23至27中任一項所述的方法,包括: 將IBC技術應用於所述視覺資訊中的所述第一圖片的塊,以獲取編碼塊; 根據所述IBC技術編碼與所述編碼圖片相關聯的指示符;以及 跳過使用所述仿射編碼技術對所述編碼塊進行編碼,並且對指示所述仿射編碼技術的指示符進行編碼。
29. 根據示例28所述的方法,包括: 對用於編碼所述第一圖片的所述塊的多個參考圖片進行編碼;以及 當所述多個參考圖片中的至少一個參考圖片包含所述第一圖片時,跳過對所述仿射編碼技術的使用指示符的編碼。
30. 根據示例28所述的方法,包括: 對用於編碼所述第一圖片的所述塊的多個參考圖片進行編碼;當塊與多組運動資訊相關聯時,其中所述多組運動資訊包含多於兩組的運動資訊,並且所述多個參考圖片中的每個參考圖片都是所述第一圖片,跳過對指示所述仿射編碼技術的指示符的編碼。
31. 根據示例28所述的方法,其包括: 對用於編碼所述第一圖片的塊的多個參考圖片進行編碼,所述多個參考圖片包括所述視覺資訊中的所述第一圖片和另一圖片;編碼第一指示符,其指示將所述仿射編碼技術應用於所述塊;以及將所述仿射編碼技術應用於所述視覺資訊中所述第一圖片和所述另一圖片的所述塊。
32. 根據示例31所述的方法,其中所述視覺資訊中的所述編碼圖片和所述另一圖片相同,所述方法包括: 跳過將所述仿射編碼技術應用於所述視覺資訊中的所述第一圖片和所述另一圖片的所述塊。
33. 根據示例23至32中任一項所述的方法,包括: 將所述仿射編碼技術應用於與所述視覺資訊相關聯的所述第二圖片;以及跳過對包含所述IBC技術的指示符的編碼。
34. 根據示例33所述的方法,包括: 對用於編碼所述第二圖片的塊的一個或多個參考圖片進行編碼,其中所述一個或多個參考圖片不包括所述第二圖片;以及 對所述多個指示符中來指示使用所述仿射編碼技術對所述第二圖片進行編碼的指示符進行編碼。
35. 根據示例33所述的方法,包括: 對用於編碼所述第二圖片的塊的一個或多個參考圖片進行編碼,其中所述一個或多個參考圖片中的至少一個參考圖片不同於所述第二圖片;以及 對所述多個指示符中來指示使用所述仿射編碼技術對所述第二圖片進行編碼的指示符進行編碼。
36. 根據示例23至27中任一項所述的方法,包括: 使用所述IBC技術和所述仿射編碼技術對所述第一圖片的塊進行編碼;以及 對與所述第一圖片的所述塊相關聯的第一指示符和第二指示符進行編碼,所述第一指示符指示所述IBC技術被用於編碼所述塊,並且所述第二指示符指示所述仿射編碼技術被用於編碼所述塊。
37. 根據示例36所述的方法,包括: 將所述第一圖片劃分成多個塊; 編碼與所述多個塊中的初始塊相關聯的控制點的運動向量;以及 基於與所述初始塊相關聯的所述控制點的所述運動向量,對與所述多個塊中的第一塊相關聯的控制點的運動向量進行編碼;以及禁用運動向量縮放。
38. 根據示例36或37所述的方法,所述方法包括: 將所述第二圖片劃分成第二多個塊,並且將所述視覺資訊中的第三圖片劃分成第三多個塊,其中所述第三圖片不同於所述第二圖片; 編碼與所述第二多個塊中的第二塊相關聯的控制點的運動向量;以及 基於與所述第二塊相關聯的所述控制點的所述運動向量,對與所述第三多個塊中的第三塊相關聯的控制點的運動向量進行編碼。
39. 根據示例36或37所述的方法,包括: 將所述第一圖片劃分成多個塊; 使用所述仿射編碼技術對所述多個塊中的塊進行編碼; 使用整數精度對所述多個塊中與所述塊相關聯的控制點的運動向量進行編碼;以及 通過將所述運動向量預測四捨五入到整數像素精度,基於所述運動向量對運動向量預測進行編碼。
40. 根據示例36至39中任一項所述的方法,包括: 將所述第一圖片劃分成多個塊; 使用所述仿射編碼技術對所述多個塊中的塊進行編碼; 使用整數精度對所述多個塊中與所述塊相關聯的控制點的運動向量進行編碼;以及 通過將所述塊內所述點的所述運動向量四捨五入到整數像素精度,基於與所述塊相關聯的所述控制點的所述運動向量對所述塊內點的運動向量進行編碼。
41. 根據示例36至40中任一項所述的方法,包括: 避免應用重疊塊運動補償(OBMC)。
42. 根據示例36至40中任一項所述的方法,包括: 跳過在控制點處對運動向量的預定分量的編碼。
43. 根據示例1至42中任一項所述的方法,包括: 在編碼器和解碼器之間傳輸指示符,所述指示符指示是否以及如何在序列級、圖片級、片級、編碼樹單元(CTU)、區域級、CU級或PU級將所述仿射編碼技術應用於所述IBC技術編碼的塊。
44. 根據示例43所述的方法,包括: 在序列參數集(SPS)、圖片參數集(PPS)、切片標頭(SH)、片組標頭、CTU、區域、CU或PU處傳輸所述指示符。
45. 一種視頻處理裝置,包括處理器,其被配置為實現示例1至44中一項或多項所述的方法。在一些實施例中,所述視頻處理裝置可以是視訊轉碼器。在一些實施例中,所述視頻處理裝置可以是視頻解碼器。在一些實施例中,所述視頻處理裝置可以是視頻轉碼器。
46. 一種其上存儲了處理器可執行代碼的電腦可讀取紀錄媒體,當執行所述代碼時,使處理器實現示例1至44中一項或多項所述的方法。
5.公開技術的示例實施例
圖10是說明可用於實現本公開技術的各個部分的電腦系統或其他控制設備1000的結構示例的框圖,包括(但不限於)方法600、700、800、900、1200和1300。在圖10中,電腦系統1000包括通過互連1025連接的一個或多個處理器1005和記憶體1010。互連1025可以表示由適當的橋、適配器或控制器連接的任何一條或多條單獨的物理匯流排、點對點連接或兩者。因此,互連1025可以包括例如系統匯流排、周邊元件連接(PCI)匯流排、超傳輸或行業標準體系結構(ISA)匯流排、小型電腦系統介面(SCSI)匯流排、通用序列匯流排(USB)、IIC(I2C)匯流排或電氣與電子工程師協會(IEEE)標準674匯流排(有時被稱為「火線」)。
處理器1005可以包括中央處理單元(CPU),來控制例如主機的整體操作。在一些實施例中,處理器1005通過執行存儲在記憶體1010中的軟體或固件來實現這一點。處理器1005可以是或可以包括一個或多個可程式設計通用或專用微處理器、數位訊號處理器(DSP)、可程式設計控制器、專用積體電路(ASIC)、可程式設計邏輯器件(PLD)等,或這些器件的組合。
記憶體1010可以是或包括電腦系統的主記憶體。記憶體1010代表任何適當形式的隨機存取記憶體(RAM)、唯讀記憶體(ROM)、快閃記憶體等,或這些設備的組合。在使用中,記憶體1010除其他外可包含一組機器指令,當處理器1005執行該指令時,使處理器1005執行操作以實現本公開技術的實施例。
通過互連1025連接到處理器1005的還有(可選的)網路介面卡1015。網路介面卡1015為電腦系統1000提供與遠端設備(諸如存儲客戶機和/或其他存儲伺服器)通信的能力,並且可以是例如乙太網適配器或光纖通道適配器。
圖11示出了可以用於實施本公開技術的各個部分的移動設備1100的示例實施例的框圖,包括(但不限於)方法600、700、800、900、1200和1300。移動設備1100可以是筆記型電腦、智慧手機、平板電腦、相機或其他能夠處理視頻的設備。移動設備1100包括處理器或控制器1101來處理資料,以及與處理器1101通信的記憶體1102來存儲和/或緩衝資料。例如,處理器1101可以包括中央處理單元(CPU)或微控制器單元(MCU)。在一些實現中,處理器1101可以包括現場可程式設計閘陣列(FPGA)。在一些實現中,移動設備1100包括或與圖形處理單元(GPU)、視頻處理單元(VPU)和/或無線通訊單元通信,以實現智慧手機設備的各種視覺和/或通信資料處理功能。例如,記憶體1102可以包括並存儲處理器可執行代碼,當處理器1101執行該代碼時,將移動設備1100配置為執行各種操作,例如,接收資訊、命令和/或資料、處理資訊和資料,以及將處理過的資訊/資料發送或提供給另一個設備,諸如執行器或外部顯示器。
為了支援移動設備1100的各種功能,記憶體1102可以存儲資訊和資料,例如指令、軟體、值、圖片以及處理器1101處理或引用的其他資料。例如,可以使用各種類型的隨機存取記憶體(RAM)設備、唯讀記憶體(ROM)設備、快閃記憶體設備和其他合適的存儲介質來實現記憶體1102的存儲功能。在一些實施例中,移動設備1100包括輸入/輸出(I/O)單元1103,以將處理器1101和/或記憶體1102與其他模組、單元或設備進行介面。例如,I/O單元1103可以與處理器1101和記憶體1102進行介面,以利用與典型資料通信標準相容的各種無線介面,例如,在雲中的一台或多台電腦和使用者設備之間。在一些實現中,移動設備1100可以通過I/O單元1103使用有線連接與其他設備進行介面。移動設備1100還可以與其他外部介面(例如,資料記憶體)和/或可視或音訊顯示裝置1104進行介面,以檢索和傳輸可由處理器處理、存儲在記憶體中或顯示在顯示裝置1104或外部設備的輸出單元上的資料和資訊。例如,顯示裝置1104可以顯示包括塊(CU,PU或TU)的視頻幀,該塊基於是否使用運動補償演算法並且根據所公開的技術應用幀內塊複製。
在一些實施例中,視頻解碼器裝置可以實現視頻解碼方法,其中,如本文所述的幀內塊複製被用於視頻解碼。該方法可以類似於上述方法600、700、800和900。
在一些實施例中,視頻解碼的解碼器端方法可以使用幀內塊複製,通過使用運動補償演算法確定當前圖片的當前塊是否要解碼來提高視頻品質,並且基於該確定,通過選擇性地將幀內塊複製應用於當前塊來對當前塊進行解碼。
在其他實施例中,視頻解碼的解碼器端方法可以使用幀內塊複製,通過確定是否使用幀內塊複製對當前圖片的當前塊進行解碼來提高視頻品質,並且基於該確定,通過選擇性地將運動補償演算法應用於當前塊來對當前塊進行解碼。
在一些實施例中,視頻解碼方法可以使用在硬體平臺上實現的解碼裝置來實現,如圖10和圖11所述。
下面是通過將IBC合併到VTM-1.0中所測量到的改進,VTM-1.0是名為通用視頻編碼(VVC)的視頻編碼標準的參考軟體。VTM代表VVC測試模型。
Figure 108119573-A0304-0006
在上表中,「Y」、「U」、「V」代表YUV顏色編碼系統中的顏色,YUV顏色編碼系統在考慮人類感知的情況下對顏色圖片或視頻進行編碼。EncT和DecT分別表示使用IBC的編碼和解碼時間與不使用IBC的編碼和解碼時間之比。具體來說, EncT = 測試編碼時間(TestEncodingTime)/(錨編碼時間)anchorEncodingTime DecT =測試編碼時間(TestDecodingTime)/(錨編碼時間)anchorDecodingTime
各種類別(諸如A1、A2等)代表一組用於測試各種視頻編碼技術性能的標準視頻序列。「Y」、「U」、「V」列下的負百分比表示將IBC添加到VTM-1.0時的位元速率節省。EncT和DecT列下的超過100%的百分比表示使用IBC進行編碼/解碼比不使用IBC進行編碼/解碼慢多少。例如,150%意味著使用IBC進行編碼/解碼比不使用IBC進行編碼/解碼慢50%。低於100%的百分比表示使用IBC進行編碼/解碼比不使用IBC進行編碼/解碼快多少。上表中顯示的兩個類(F類和SCC類)表明位元速率節省超過3%。
從上述來看,應當理解的是,為了便於說明,本發明公開的技術的具體實施例已經在本文中進行了描述,但是可以在不偏離本發明範圍的情況下進行各種修改。因此,除了權利要求限定的之外,本發明公開的技術不受限制。
本說明書中描述的主題的實施和功能操作可以在各種系統、數位電子電路、或電腦軟體、硬體或硬體中實現,包括本說明書中所公開的結構及其結構等效體,或其中一個或多個的組合。本說明書中描述的主題的實施可以實現為一個或多個電腦程式產品,即一個或多個編碼在有形的和非易失的電腦可讀介質上的電腦程式指令的模組,以供資料處理裝置執行或控制資料處理裝置的操作。電腦可讀取紀錄媒體可以是機器可讀存放裝置、機器可讀存儲基板、存放裝置、影響機器可讀傳播信號的物質組成或其中一個或多個的組合。術語“資料處理單元”或“資料處理裝置”包括用於處理資料的所有裝置、設備和機器,包括例如可程式設計處理器、電腦或多處理器或電腦組。除硬體外,該裝置還可以包括為電腦程式創建執行環境的代碼,例如,構成處理器固件的代碼、協定棧、資料庫管理系統、作業系統或其中一個或多個的組合。
電腦程式(也稱為程式、軟體、軟體應用、腳本或代碼)可以用任何形式的程式設計語言(包括編譯語言或解釋語言)編寫,並且可以以任何形式部署,包括作為獨立程式或作為模組、元件、副程式或其他適合在計算環境中使用的單元。電腦程式不一定與檔案系統中的檔對應。程式可以存儲在保存其他程式或資料的檔的部分中(例如,存儲在標記語言文檔中的一個或多個腳本)、專用於該程式的單個檔中、或多個協調檔(例如,存儲一個或多個模組、副程式或部分代碼的檔)中。電腦程式可以部署在一台或多台電腦上來執行,這些電腦位於一個網站上或分佈在多個網站上,並通過通信網路互連。
本說明書中描述的處理和邏輯流可以通過一個或多個可程式設計處理器執行,該處理器執行一個或多個電腦程式,通過在輸入資料上操作並生成輸出來執行功能。處理和邏輯流也可以通過特殊用途的邏輯電路來執行,並且裝置也可以實現為特殊用途的邏輯電路,例如,FPGA(現場可程式設計閘陣列)或ASIC(專用積體電路)。
例如,適於執行電腦程式的處理器包括通用和專用微處理器,以及任何類型數位電腦的任何一個或多個。通常,處理器將從唯讀記憶體或隨機存取記憶體或兩者接收指令和資料。電腦的基本元件是執行指令的處理器和存儲指令和資料的一個或多個存放裝置。通常,電腦還將包括一個或多個用於存儲資料的大型存放區設備,例如,磁片、磁光碟或光碟,或通過操作耦合到一個或多個大型存放區設備來從其接收資料或將資料傳輸到一個或多個大型存放區設備,或兩者兼有。然而,電腦不一定具有這樣的設備。適用於存儲電腦程式指令和資料的電腦可讀介質包括所有形式的非易失性記憶體、介質和記憶體設備,包括例如半導體記憶體設備,例如EPROM、EEPROM和快閃記憶體設備。處理器和記憶體可以由專用邏輯電路來補充,或合併到專用邏輯電路中。
本說明書和附圖僅意在被視為示例性的,其中示例性是指示例。如本文所用,除非上下文另有明確說明,否則單數形式「一」和「所述」也應包括複數形式。此外,「或」的使用旨在包括「和/或」,除非上下文另有明確說明。
雖然本說明書包含許多細節,但不應將其解釋為對任何發明或權利要求範圍的限制,而應解釋為對特定發明的特定實施例的特徵的描述。本說明書在單獨實施例的上下文描述的某些特徵也可以在單個實施例中組合實施。相反,在單個實施例的上下文中描述的各種功能也可以在多個實施例中單獨實施,或在任何合適的子組合中實施。此外,儘管上述特徵可以描述為在某些組合中起作用,甚至最初要求是這樣,但在某些情況下,可以從組合中刪除權利要求組合中的一個或多個特徵,並且權利要求的組合可以指向子組合或子組合的變體。
同樣,儘管附圖中以特定順序描述了操作,但這不應理解為要獲得想要的結果必須按照所示的特定順序或循序執行此類操作,或執行所有說明的操作。此外,本說明書所述實施例中各種系統元件的分離不應理解為在所有實施例中都需要這樣的分離。
僅描述了一些實現和示例,其他實現、增強和變體可以基於本說明書中所描述和說明的做出。 標頭標頭
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
200、300、400、500、501~505‧‧‧塊 A、B、C、D、E‧‧‧子塊 600、700、800、900、1200、1300‧‧‧方法 610、620、710、720、810、820、910、920、1202、1204、1302、1304‧‧‧步驟 1000‧‧‧電腦系統 1005‧‧‧處理器 1010、1102‧‧‧記憶體 1015‧‧‧網路介面卡 1025‧‧‧互連 1100‧‧‧移動設備 1101‧‧‧處理器/控制器 1103‧‧‧I/O單元和感測器 1104‧‧‧顯示裝置 v0、v1、v2、v3、v4‧‧‧運動向量
圖1示出了幀內塊複製技術的示例。 圖2示出了簡化仿射運動模型的示例。 圖3示出了每個子塊的仿射運動向量場(MVF)的示例。 圖4示出了AF_INTER仿射運動模式的運動向量預測(MVP)的示例。 圖5A和圖5B示出了AF_MERGE仿射運動模式的示例候選。 圖6示出了根據所公開的技術使用幀內塊複製進行視頻編碼的示例方法的流程圖。 圖7示出了根據所公開的技術使用幀內塊複製進行視頻編碼的另一示例方法的流程圖。 圖8示出了根據所公開的技術使用幀內塊複製進行視頻解碼的示例方法的流程圖。 圖9示出了根據所公開的技術使用幀內塊複製進行視頻解碼的另一示例方法的流程圖。 圖10是說明可用於實現本公開技術的各個部分的電腦系統或其他控制設備的結構示例的框圖。 圖11示出了可用於實現本公開技術的各個部分的移動設備的示例實施例的框圖。 圖12示出了視覺資訊處理的示例方法的流程圖。 圖13示出了視覺資訊處理的示例方法的流程圖。
610、620‧‧‧步驟

Claims (46)

  1. 一種視覺資訊解碼方法,包括: 確定表示所述視覺資訊的一部分的被解碼的塊是使用第一編碼技術編碼的;以及 通過使用與所述第一編碼技術相對應的第一解碼技術並且避免使用與第二編碼技術相對應的第二解碼技術,解碼編碼的表示; 其中,所述第一編碼技術和第二編碼技術中的一種對應於幀內塊複製(IBC)技術,所述幀內塊複製技術使用相同視頻圖片的第二塊對被解碼的所述塊進行編碼;並且所述第一編碼技術和第二編碼技術中的另一種對應於仿射編碼技術,所述仿射編碼技術使用仿射運動模型對被解碼的所述塊進行編碼。
  2. 一種視覺資訊解碼方法,包括: 確定表示視覺資訊的編碼圖像的一部分的被解碼的塊是使用幀內塊複製(IBC)技術和仿射編碼技術編碼的,所述幀內塊複製技術使用所述圖片的第二塊編碼所述被解碼的塊,所述仿射編碼技術使用仿射運動模型編碼所述被解碼的塊;以及 通過使用與所述IBC編碼技術相對應的IBC解碼技術、以及與所述仿射編碼技術相對應的仿射解碼技術來解碼所述編碼表示。
  3. 如申請專利範圍第1或2項所述的方法,其中所述IBC解碼技術包括: 獲取表示所述編碼圖片的多個塊、以及所述IBC技術的使用指示符; 解碼所述圖片中的多個初始塊;以及 在對所述初始塊進行解碼後,基於所述初始塊對所述多個塊中的第一塊進行解碼。
  4. 如申請專利範圍第1項所述的方法,更包括: 基於所述確定,判定所述被解碼的塊的編碼表示不包括第二編碼技術的使用指示符;以及 基於所述判定解析所述編碼表示。
  5. 一種處理視覺資訊的方法,包括: 確定與編碼圖片相關聯的指示符包括替代類型的參考圖片指示符,所述替代類型的參考圖片指示符指示應用於所述編碼圖片的編碼技術是幀內塊複製技術,其中所述替代類型的參考圖片指示符不同於長期參考圖片指示符和短期參考圖片指示符,其中包含所述長期參考圖片指示符的圖片以第一持續時間被存儲在記憶體中,並且其中包含所述短期參考圖片指示符的圖片以短於所述第一持續時間的第二持續時間被存儲在記憶體中。
  6. 如申請專利範圍第5項所述的方法,更包括: 獲取第一指示符,其包括所述長期參考圖片指示符或與第一圖片相關聯的所述長期參考圖片指示符; 獲取第二指示符,其包括與第二圖片相關聯的所述替代類型的參考圖片指示符; 避免基於所述第一圖片解碼所述第二圖片;以及 避免基於所述第二圖片解碼所述第一圖片。
  7. 如申請專利範圍第6項所述的方法,更包括: 獲取第一指示符,其包括所述長期參考圖片指示符或與第一圖片相關聯的所述長期參考圖片指示符; 獲取第二指示符,其包括與第二圖片相關聯的所述替代類型的參考圖片指示符; 在解碼所述第二圖片時跳過與所述第一圖片相關聯的運動向量的縮放處理;以及 在解碼所述第一圖片時跳過與所述第二圖片相關聯的運動向量的縮放處理。
  8. 如申請專利範圍第1至7項中任一項所述的方法,更包括: 當與所述編碼圖片的塊相關聯的指示符指示使用所述IBC技術時,在不應用所述仿射解碼技術的情況下解碼所述塊。
  9. 如申請專利範圍第8項所述的方法,更包括: 獲取多個參考圖片,其用於解碼包含多個塊的所述編碼圖片的塊;以及 當所述多個參考圖片中的至少一個參考圖片包含所述編碼圖片時,在不應用所述仿射解碼技術的情況下解碼所述塊。
  10. 如申請專利範圍第8項所述的方法,更包括: 獲取多個參考圖片,其用於解碼包含多個塊的所述編碼圖片的塊;以及 當塊與多組運動資訊相關聯時,其中所述多組運動資訊包含多於兩組的運動資訊,並且所述多個參考圖片中的每個參考圖片都是所述編碼圖片時,在不應用所述仿射解碼技術的情況下解碼所述塊。
  11. 如申請專利範圍第8項所述的方法,更包括: 獲取多個參考圖片,其用於解碼包含多個塊的所述編碼圖片的塊,所述多個參考圖片包括所述編碼圖片和所述視覺資訊中的另一圖片; 獲取第一指示符,其指示所述仿射編碼技術被應用於所述塊;以及 使用所述仿射解碼技術和所述視覺資訊中的所述另一圖片解碼所述塊。
  12. 如申請專利範圍第11項所述的方法,其中所述編碼圖片和所述視覺資訊中的所述另一圖片相同,所述方法包括: 避免使用所述仿射解碼技術和所述編碼圖片解碼所述塊。
  13. 如申請專利範圍第1至12項中任一項所述的方法,更包括: 確定與所述編碼圖片相關聯的指示符指示所述仿射編碼技術被應用於所述編碼圖片;以及 當與所述編碼圖片相關聯的所述指示符指示所述仿射編碼技術被應用於所述編碼圖片時,在不應用所述IBC解碼技術的情況下解碼所述編碼圖片。
  14. 如申請專利範圍第13項所述的方法,更包括: 獲取一個或多個用於解碼所述編碼圖片的塊的參考圖片,所述參考圖片包括多個塊和與所述編碼圖片相關聯的所述指示符;以及 當與所述編碼圖片相關聯的所述指示符指示所述仿射編碼技術被應用於所述編碼圖片時,假設所述一個或多個參考圖片不包含所述編碼圖片。
  15. 如申請專利範圍第13項所述的方法,更包括: 獲取一個或多個用於解碼所述編碼圖片的塊的參考圖片,所述參考圖片包括多個塊和與所述編碼圖片相關聯的所述指示符;以及 當與所述編碼圖片相關聯的所述指示符指示所述仿射編碼技術被應用於所述編碼圖片時,假設所述一個或多個參考圖片中的至少一個參考圖片不同於所述編碼圖片。
  16. 如申請專利範圍第1至7項中任一項所述的方法,更包括: 獲取與所述編碼圖片相關聯的第一指示符、以及與所述編碼圖片相關聯的第二指示符,所述第一指示符指示所述仿射編碼技術被應用於所述塊,所述第二指示符指示所述IBC技術被應用於所述塊;以及 通過將所述仿射解碼技術和所述IBC解碼技術應用於所述塊,解碼包含多個塊的所述編碼圖片的所述塊。
  17. 如申請專利範圍第16項所述的方法,更包括: 獲取表示所述編碼圖片的多個塊中的初始塊; 解碼與所述初始塊相關聯的初始控制點的初始運動向量; 獲取表示所述編碼圖片的多個塊中的第一塊,以及指示所述IBC技術被應用於所述第一塊的第一指示符; 禁用運動向量縮放;以及 禁用運動向量縮放時,基於與所述初始塊相關聯的所述初始控制點的所述初始運動向量,創建與所述第一塊相關聯的第一控制點的運動向量預測(MVP)。
  18. 如申請專利範圍第16或17項所述的方法,更包括: 獲取表示所述編碼圖片的多個塊中的第一塊,以及指示所述仿射編碼技術被應用於所述第一塊的第一指示符;以及 基於與屬於與所述編碼圖片不同的圖片的所述塊相關聯的控制點的運動向量,創建與所述第一塊相關聯的所述第一控制點的所述MVP。
  19. 如申請專利範圍第16或17項所述的方法,更包括: 獲取表示所述編碼圖片的多個塊; 獲取與所述多個塊中的塊相關聯的控制點的運動向量,其中所述運動向量以整數精度發出信號; 基於所述運動向量進行運動向量預測;以及 將所述運動向量預測四捨五入到整數像素精度。
  20. 如申請專利範圍第16或17項所述的方法,更包括: 獲取表示所述編碼圖片的多個塊中的塊; 從相鄰控制點處的相鄰運動向量推導出與所述塊相關聯的控制點處的運動向量;以及 將所述運動向量四捨五入到整數像素精度。
  21. 如申請專利範圍第16至20項中任一項所述的方法,更包括: 避免進行重疊塊運動補償(OBMC)。
  22. 如申請專利範圍第16至20項中任一項所述的方法,更包括: 假設運動向量在控制點處的預定分量是常數整數。
  23. 一種對視覺資訊進行編碼的方法,包括: 將所述視覺資訊編碼成多個編碼圖片和多個指示符,所述多個指示符指示應用一種或多種編碼技術,所述多個指示符包括幀內塊複製(IBC)技術指示符和仿射編碼技術指示符,其中,使用所述IBC技術對與所述視覺資訊相關聯的第一圖片的第一塊進行編碼,並且使用所述仿射編碼技術對與所述視覺資訊相關聯的第二圖片的第二塊進行編碼,其中所述IBC技術使用所述第一圖片的不同塊對所述第一圖片的所述第一塊進行編碼,並且所述仿射編碼技術使用與所述視覺資訊相關聯的第三圖片對所述第二塊進行編碼。
  24. 如申請專利範圍第23項所述的方法,所述IBC技術包括: 將所述第一圖片劃分成多個塊; 對所述多個塊中的初始塊進行編碼;以及 在對所述初始塊進行編碼後,基於所述初始塊對所述多個塊中的第一塊進行編碼。
  25. 一種視頻處理方法,包括: 編碼與多個編碼圖片中的編碼圖片相關聯的多個指示符中的指示符,所述指示符包括指示應用於所述編碼圖片的編碼技術是幀內塊複製技術的替代類型的參考圖片指示符,其中所述替代類型的參考圖片指示符不同於長期參考圖片指示符和短期參考圖片指示符,其中包含所述長期參考圖片指示符的圖片以第一持續時間被存儲在記憶體中,並且其中包含所述短期參考圖片指示符的圖片以短於所述第一持續時間的第二持續時間被存儲在記憶體中。
  26. 如申請專利範圍第25項所述的方法,更包括: 獲取第一指示符,其包括所述長期參考圖片指示符或與第一圖片相關聯的所述長期參考圖片指示符; 獲取第二指示符,其包括與第二圖片相關聯的所述替代類型的參考圖片指示符; 避免基於所述第一圖片編碼所述第二圖片;以及 避免基於所述第二圖片編碼所述第一圖片。
  27. 如申請專利範圍第25項所述的方法,更包括: 編碼第一指示符,其包括所述長期參考圖片指示符或與第一圖片相關聯的所述長期參考圖片指示符; 編碼第二指示符,其包括與第二圖片相關聯的所述替代類型的參考圖片指示符; 在編碼所述第二圖片時跳過與所述第一圖片相關聯的運動向量的縮放處理;以及 在編碼所述第一圖片時跳過與所述第二圖片相關聯的運動向量的縮放處理。
  28. 如申請專利範圍第23或27項中任一項所述的方法,更包括: 將IBC技術應用於所述視覺資訊中的所述第一圖片的塊,以獲取編碼塊; 根據所述IBC技術編碼與所述編碼圖片相關聯的指示符;以及 跳過使用所述仿射編碼技術對所述編碼塊進行編碼,並且對指示所述仿射編碼技術的指示符進行編碼。
  29. 如申請專利範圍第28項所述的方法,更包括: 對用於編碼所述第一圖片的所述塊的多個參考圖片進行編碼;以及 當所述多個參考圖片中的至少一個參考圖片包含所述第一圖片時,跳過對所述仿射編碼技術的使用指示符的編碼。
  30. 如申請專利範圍第28項所述的方法,更包括: 對用於編碼所述第一圖片的所述塊的多個參考圖片進行編碼;以及 當塊與多組運動資訊相關聯時,其中所述多組運動資訊包含多於兩組的運動資訊,並且所述多個參考圖片中的每個參考圖片都是所述第一圖片,跳過對指示所述仿射編碼技術的指示符的編碼。
  31. 如申請專利範圍第28項所述的方法,更包括: 對用於編碼所述第一圖片的塊的多個參考圖片進行編碼,所述多個參考圖片包括所述視覺資訊中的所述第一圖片和另一圖片; 編碼第一指示符,其指示將所述仿射編碼技術應用於所述塊;以及 將所述仿射編碼技術應用於所述視覺資訊中所述第一圖片和所述另一圖片的所述塊。
  32. 如申請專利範圍第31項所述的方法,其中所述視覺資訊中的所述編碼圖片和所述另一圖片相同,所述方法包括: 跳過將所述仿射編碼技術應用於所述視覺資訊中的所述第一圖片和所述另一圖片的所述塊。
  33. 如申請專利範圍第23至32項中任一項所述的方法,更包括: 將所述仿射編碼技術應用於與所述視覺資訊相關聯的所述第二圖片;以及 跳過對包含所述IBC技術的指示符的編碼。
  34. 如申請專利範圍第33項所述的方法,更包括: 對用於編碼所述第二圖片的塊的一個或多個參考圖片進行編碼,其中所述一個或多個參考圖片不包括所述第二圖片;以及 對所述多個指示符中來指示使用所述仿射編碼技術對所述第二圖片進行編碼的指示符進行編碼。
  35. 如申請專利範圍第33項所述的方法,更包括: 對用於編碼所述第二圖片的塊的一個或多個參考圖片進行編碼,其中所述一個或多個參考圖片中的至少一個參考圖片不同於所述第二圖片;以及 對所述多個指示符中來指示使用所述仿射編碼技術對所述第二圖片進行編碼的指示符進行編碼。
  36. 如申請專利範圍第23至27項中任一項所述的方法,更包括: 使用所述IBC技術和所述仿射編碼技術對所述第一圖片的塊進行編碼;以及 對與所述第一圖片的所述塊相關聯的第一指示符和第二指示符進行編碼,所述第一指示符指示所述IBC技術被用於編碼所述塊,並且所述第二指示符指示所述仿射編碼技術被用於編碼所述塊。
  37. 如申請專利範圍第36項所述的方法,更包括: 將所述第一圖片劃分成多個塊; 編碼與所述多個塊中的初始塊相關聯的控制點的運動向量; 基於與所述初始塊相關聯的所述控制點的所述運動向量,對與所述多個塊中的第一塊相關聯的控制點的運動向量進行編碼;以及 禁用運動向量縮放。
  38. 如申請專利範圍第36或37項所述的方法,更包括: 將所述第二圖片劃分成第二多個塊,並且將所述視覺資訊中的第三圖片劃分成第三多個塊,其中所述第三圖片不同於所述第二圖片; 編碼與所述第二多個塊中的第二塊相關聯的控制點的運動向量;以及 基於與所述第二塊相關聯的所述控制點的所述運動向量,對與所述第三多個塊中的第三塊相關聯的控制點的運動向量進行編碼。
  39. 如申請專利範圍第36或37項所述的方法,更包括: 將所述第一圖片劃分成多個塊; 使用所述仿射編碼技術對所述多個塊中的塊進行編碼; 使用整數精度對所述多個塊中與所述塊相關聯的控制點的運動向量進行編碼;以及 通過將所述運動向量預測四捨五入到整數像素精度,基於所述運動向量對運動向量預測進行編碼。
  40. 如申請專利範圍第36至39項中任一項所述的方法,更包括: 將所述第一圖片劃分成多個塊; 使用所述仿射編碼技術對所述多個塊中的塊進行編碼; 使用整數精度對所述多個塊中與所述塊相關聯的控制點的運動向量進行編碼;以及 通過將所述塊內所述點的所述運動向量四捨五入到整數像素精度,基於與所述塊相關聯的所述控制點的所述運動向量對所述塊內點的運動向量進行編碼。
  41. 如申請專利範圍第36至40項中任一項所述的方法,更包括: 避免應用重疊塊運動補償(OBMC)。
  42. 如申請專利範圍第36至40項中任一項所述的方法,更包括: 跳過在控制點處對運動向量的預定分量的編碼。
  43. 如申請專利範圍第1至42項中任一項所述的方法,更包括: 在編碼器和解碼器之間傳輸指示符,所述指示符指示是否以及如何在序列級、圖片級、片級、編碼樹單元(CTU)、區域級、CU級或PU級將所述仿射編碼技術應用於所述IBC技術編碼的塊。
  44. 如申請專利範圍第43項所述的方法,更包括: 在序列參數集(SPS)、圖片參數集(PPS)、切片標頭(SH)、片組標頭、編碼樹單元(CTU)、區域、編碼單元(CU)或預測單元(PU)處傳輸所述指示符。
  45. 一種視頻處理裝置,包括處理器,其被配置為如申請專利範圍第1至44項中一項或多項所述的方法。
  46. 一種其上存儲了處理器可執行代碼的電腦可讀取紀錄媒體,當執行所述代碼時,使處理器實現如申請專利範圍第1至44項中一項或多項所述的方法。
TW108119573A 2018-06-05 2019-06-05 幀內塊複製與仿射的交互 TWI736902B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
WOPCT/CN2018/089920 2018-06-05
CN2018089920 2018-06-05

Publications (2)

Publication Number Publication Date
TW202005396A true TW202005396A (zh) 2020-01-16
TWI736902B TWI736902B (zh) 2021-08-21

Family

ID=67185524

Family Applications (8)

Application Number Title Priority Date Filing Date
TW108119573A TWI736902B (zh) 2018-06-05 2019-06-05 幀內塊複製與仿射的交互
TW108119572A TWI704802B (zh) 2018-06-05 2019-06-05 幀內塊複製與可選時域運動向量預測的交互
TW108119603A TWI708504B (zh) 2018-06-05 2019-06-05 幀內塊複製與解碼器側運動矢量細化的交互
TW108119601A TWI725445B (zh) 2018-06-05 2019-06-05 幀內塊複製與空時運動向量預測的交互
TW108119607A TWI740155B (zh) 2018-06-05 2019-06-05 幀塊內複製與局部自適應運動矢量分辨率的交互
TW108119598A TWI708503B (zh) 2018-06-05 2019-06-05 成對平均merge候選與幀內塊複製的交互
TW108119586A TWI715993B (zh) 2018-06-05 2019-06-05 幀內塊複製和雙向光流的交互
TW108119583A TWI750477B (zh) 2018-06-05 2019-06-05 幀內塊複製與幀間編碼工具的交互

Family Applications After (7)

Application Number Title Priority Date Filing Date
TW108119572A TWI704802B (zh) 2018-06-05 2019-06-05 幀內塊複製與可選時域運動向量預測的交互
TW108119603A TWI708504B (zh) 2018-06-05 2019-06-05 幀內塊複製與解碼器側運動矢量細化的交互
TW108119601A TWI725445B (zh) 2018-06-05 2019-06-05 幀內塊複製與空時運動向量預測的交互
TW108119607A TWI740155B (zh) 2018-06-05 2019-06-05 幀塊內複製與局部自適應運動矢量分辨率的交互
TW108119598A TWI708503B (zh) 2018-06-05 2019-06-05 成對平均merge候選與幀內塊複製的交互
TW108119586A TWI715993B (zh) 2018-06-05 2019-06-05 幀內塊複製和雙向光流的交互
TW108119583A TWI750477B (zh) 2018-06-05 2019-06-05 幀內塊複製與幀間編碼工具的交互

Country Status (8)

Country Link
US (10) US20200396465A1 (zh)
EP (1) EP3788787A1 (zh)
JP (3) JP7104186B2 (zh)
KR (1) KR20210016581A (zh)
CN (11) CN110572669B (zh)
GB (4) GB2588023B (zh)
TW (8) TWI736902B (zh)
WO (8) WO2019234606A1 (zh)

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210016581A (ko) 2018-06-05 2021-02-16 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Ibc 및 atmvp 간의 상호 작용
CN110620932B (zh) 2018-06-19 2022-11-08 北京字节跳动网络技术有限公司 依赖模式的运动矢量差精度集
CN110636298B (zh) 2018-06-21 2022-09-13 北京字节跳动网络技术有限公司 对于Merge仿射模式和非Merge仿射模式的统一约束
WO2019244119A1 (en) 2018-06-21 2019-12-26 Beijing Bytedance Network Technology Co., Ltd. Sub-block mv inheritance between color components
SG11202100434TA (en) * 2018-07-17 2021-02-25 Huawei Tech Co Ltd Motion model signaling
CN110891175B (zh) 2018-09-08 2023-04-07 北京字节跳动网络技术有限公司 视频编解码和解码中的仿射模式
EP4054191A1 (en) * 2018-09-14 2022-09-07 Panasonic Intellectual Property Corporation of America Encoding device, decoding device, encoding method, and decoding method
KR20240005178A (ko) 2018-09-19 2024-01-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 적응적 움직임 벡터 해상도를 가지는 어파인 모드에 대한 구문 재사용
TWI831837B (zh) 2018-09-23 2024-02-11 大陸商北京字節跳動網絡技術有限公司 仿射模型的多個假設
WO2020058952A1 (en) 2018-09-23 2020-03-26 Beijing Bytedance Network Technology Co., Ltd. 8-parameter affine mode
CN110944206B (zh) 2018-09-23 2023-05-26 北京字节跳动网络技术有限公司 涉及仿射运动的一般应用
CN117768651A (zh) 2018-09-24 2024-03-26 北京字节跳动网络技术有限公司 处理视频数据的方法、装置、介质、以及比特流存储方法
US11317099B2 (en) * 2018-10-05 2022-04-26 Tencent America LLC Method and apparatus for signaling an offset in video coding for intra block copy and/or inter prediction
CN111083487B (zh) 2018-10-22 2024-05-14 北京字节跳动网络技术有限公司 仿射模式的运动信息的存储
US11758164B2 (en) * 2018-10-23 2023-09-12 Tencent America LLC Method and apparatus for video coding
JP7324841B2 (ja) 2018-11-10 2023-08-10 北京字節跳動網絡技術有限公司 ビデオ・データ処理方法、装置、記憶媒体及び記憶方法
CN113261293B (zh) 2018-11-13 2023-11-03 北京字节跳动网络技术有限公司 用于帧内块复制的基于历史的运动候选列表构建
WO2020098803A1 (en) 2018-11-15 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Harmonization between affine mode and other inter coding tools
CN113039800B (zh) 2018-11-16 2024-05-10 北京字节跳动网络技术有限公司 用于基于历史的仿射参数的修剪方法
WO2020098810A1 (en) 2018-11-17 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Merge with motion vector difference in video processing
US11490112B2 (en) * 2018-11-29 2022-11-01 Interdigital Vc Holdings, Inc. Motion vector predictor candidates ordering in merge list
KR20210094530A (ko) 2018-11-29 2021-07-29 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 화면 내 블록 복사 모드 및 화면 간 예측 도구들 간의 상호작용
WO2020125798A1 (en) 2018-12-22 2020-06-25 Beijing Bytedance Network Technology Co., Ltd. Intra block copy mode with dual tree partition
CN113170128B (zh) 2018-12-03 2024-05-28 北京字节跳动网络技术有限公司 帧间预测的部分修剪方法
CN113196747B (zh) 2018-12-21 2023-04-14 北京字节跳动网络技术有限公司 当前图片参考模式下的信息信令通知
KR20210121021A (ko) 2019-01-31 2021-10-07 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 어파인 모드 적응적 움직임 벡터 해상도 코딩 문맥
JP7384912B2 (ja) 2019-02-02 2023-11-21 北京字節跳動網絡技術有限公司 映像符号化におけるイントラブロックコピーのためのバッファにおけるデータ記憶
CN113383541B (zh) 2019-02-02 2024-02-20 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的缓冲区访问方法
WO2020164629A1 (en) 2019-02-17 2020-08-20 Beijing Bytedance Network Technology Co., Ltd. Restriction of applicability for intra block copy mode
WO2020169109A1 (en) 2019-02-22 2020-08-27 Beijing Bytedance Network Technology Co., Ltd. Sub-table for history-based affine mode
CN117395439A (zh) 2019-03-01 2024-01-12 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的基于方向的预测
CN113508581B (zh) 2019-03-04 2023-11-14 北京字节跳动网络技术有限公司 视频编解码中的帧内块复制中的实施方式方面
KR102609947B1 (ko) 2019-04-02 2023-12-04 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 양방향 광학 흐름 기반 비디오 코딩 및 디코딩
CN113711609B (zh) 2019-04-19 2023-12-01 北京字节跳动网络技术有限公司 利用光流的预测细化过程中的增量运动矢量
CN113711608B (zh) 2019-04-19 2023-09-01 北京字节跳动网络技术有限公司 利用光流的预测细化过程的适用性
CN113728626B (zh) 2019-04-19 2023-05-30 北京字节跳动网络技术有限公司 不同运动矢量细化中的基于区域的梯度计算
CN117294841A (zh) 2019-07-06 2023-12-26 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的虚拟预测缓冲
CA3146391A1 (en) 2019-07-10 2021-01-14 Beijing Bytedance Network Technology Co., Ltd. Sample identification for intra block copy in video coding
KR20220030957A (ko) 2019-07-11 2022-03-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩에서 인트라 블록 카피를 위한 비트스트림 적합 제약
EP3991423A4 (en) 2019-07-25 2022-09-07 Beijing Bytedance Network Technology Co., Ltd. MAPPING RESTRICTION FOR INTRABLOC COPY VIRTUAL BUFFER
CN117499659A (zh) 2019-07-25 2024-02-02 北京字节跳动网络技术有限公司 帧内块复制虚拟缓冲区的尺寸限制
CN114342410A (zh) 2019-09-05 2022-04-12 北京字节跳动网络技术有限公司 帧内块复制模式下块矢量的范围约束
KR20220053580A (ko) 2019-09-09 2022-04-29 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인트라 블록 복제 코딩 및 디코딩
WO2021057751A1 (en) 2019-09-23 2021-04-01 Beijing Bytedance Network Technology Co., Ltd. Setting intra-block copy virtual buffer based on virtual pipeline data unit
CN115362674A (zh) 2020-03-18 2022-11-18 抖音视界有限公司 帧内块复制缓冲区和调色板预测值更新
CN116233464B (zh) * 2020-04-08 2024-03-19 北京达佳互联信息技术有限公司 用于视频编码的方法、装置和非暂态计算机可读存储介质
CN113709458B (zh) * 2020-05-22 2023-08-29 腾讯科技(深圳)有限公司 视频编解码中的位移矢量预测方法、装置及设备
KR20220112984A (ko) 2021-02-05 2022-08-12 주식회사 엘지에너지솔루션 이차전지용 테이프의 부착 방법
CN113038131B (zh) * 2021-03-15 2023-04-07 北京奇艺世纪科技有限公司 视频编码方法、装置、计算机设备和存储介质
CN117597923A (zh) * 2021-04-09 2024-02-23 交互数字Ce专利控股有限公司 用于视频编码和解码的利用模板匹配的帧内块复制
WO2023046127A1 (en) * 2021-09-25 2023-03-30 Beijing Bytedance Network Technology Co., Ltd. Method, apparatus, and medium for video processing
WO2023132615A1 (ko) * 2022-01-04 2023-07-13 현대자동차주식회사 쌍 머지 후보들을 생성하여 머지 후보 리스트를 구성하는 비디오 부호화/복호화 방법 및 장치
US20240137552A1 (en) * 2022-10-10 2024-04-25 Tencent America LLC Method and apparatus for extended decoder side motion vector refinement
WO2024108169A1 (en) * 2022-11-18 2024-05-23 Comcast Cable Communications, Llc Improved prediction with local illumination compensation

Family Cites Families (232)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08186825A (ja) 1994-12-28 1996-07-16 Nippon Hoso Kyokai <Nhk> 動きベクトル検出方法
JP4398099B2 (ja) 1999-04-26 2010-01-13 エヌエックスピー ビー ヴィ サブピクセル精度の動きベクトル推定及び動き補償された補間
US7382899B2 (en) 2002-07-31 2008-06-03 Koninklijke Philips Electronics N. V. System and method for segmenting
CA2473897C (en) 2002-11-25 2012-10-16 Matsushita Electric Industrial Co., Ltd. Motion compensation method, picture coding method and picture decoding method
US8064520B2 (en) 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
CN100344163C (zh) 2004-06-16 2007-10-17 华为技术有限公司 视频编解码处理方法
CN1777283A (zh) 2004-12-31 2006-05-24 上海广电(集团)有限公司 一种基于微块的视频信号编/解码方法
US8954943B2 (en) 2006-01-26 2015-02-10 International Business Machines Corporation Analyze and reduce number of data reordering operations in SIMD code
JP4826315B2 (ja) 2006-03-31 2011-11-30 ソニー株式会社 画像処理装置および方法、並びにプログラム
US8184715B1 (en) 2007-08-09 2012-05-22 Elemental Technologies, Inc. Method for efficiently executing video encoding operations on stream processor architectures
US8670488B2 (en) * 2007-12-21 2014-03-11 Telefonaktiebolaget Lm Ericsson (Publ) Adaptive intra mode selection
CN101605255B (zh) * 2008-06-12 2011-05-04 华为技术有限公司 一种视频编解码的方法及装置
US20110002386A1 (en) 2009-07-06 2011-01-06 Mediatek Singapore Pte. Ltd. Video encoder and method for performing intra-prediction and video data compression
JP5234368B2 (ja) 2009-09-30 2013-07-10 ソニー株式会社 画像処理装置および方法
JP2011147049A (ja) 2010-01-18 2011-07-28 Sony Corp 画像処理装置および方法、並びにプログラム
BR112012019560B1 (pt) 2010-02-05 2021-08-24 Telefonaktiebolaget Lm Ericsson Método para gerenciar candidatos a vetor de movimento predito, e, aparelhos de codificação e de decodificação de vídeo
KR101630688B1 (ko) 2010-02-17 2016-06-16 삼성전자주식회사 움직임 예측 장치 및 방법과 영상 처리 장치
CN101895751B (zh) * 2010-07-06 2012-02-08 北京大学 帧内预测的方法及装置、基于帧内预测的编/解码方法及系统
KR101393824B1 (ko) 2010-10-06 2014-05-13 인텔 코오퍼레이션 저 복잡성 움직임 벡터 도출을 위한 시스템 및 방법
CN102685479A (zh) 2011-03-11 2012-09-19 华为技术有限公司 视频编解码处理方法和装置
US9374598B2 (en) 2011-03-21 2016-06-21 Lg Electronics Inc. Method for selecting motion vector predictor and device using same
US20120287999A1 (en) 2011-05-11 2012-11-15 Microsoft Corporation Syntax element prediction in error correction
CN107277539B (zh) 2011-05-27 2020-11-06 寰发股份有限公司 减少用于上下文自适应熵解码中的行缓存的方法及装置
US9866859B2 (en) 2011-06-14 2018-01-09 Texas Instruments Incorporated Inter-prediction candidate index coding independent of inter-prediction candidate list construction in video coding
GB201113527D0 (en) 2011-08-04 2011-09-21 Imagination Tech Ltd External vectors in a motion estimation system
KR101492105B1 (ko) 2011-08-29 2015-02-11 주식회사 아이벡스피티홀딩스 Amvp 모드에서 영상 부호화 방법
CN103891291A (zh) 2011-08-30 2014-06-25 诺基亚公司 用于视频编码和解码的设备、方法和计算机程序
CN103828364B (zh) * 2011-09-29 2018-06-12 夏普株式会社 图像解码装置、图像解码方法及图像编码装置
JP5768662B2 (ja) * 2011-10-31 2015-08-26 富士通株式会社 動画像復号装置、動画像符号化装置、動画像復号方法、動画像符号化方法、動画像復号プログラム及び動画像符号化プログラム
JP2013098933A (ja) 2011-11-04 2013-05-20 Sony Corp 画像処理装置および方法
CN107835412A (zh) 2011-11-08 2018-03-23 株式会社Kt 对视频信号进行解码的方法
WO2013070028A1 (ko) * 2011-11-11 2013-05-16 엘지전자 주식회사 영상 정보 전송 방법 및 장치와 이를 이용한 복호화 방법 및 장치
JP5895469B2 (ja) 2011-11-18 2016-03-30 富士通株式会社 動画像符号化装置、および動画像復号装置
KR20130058524A (ko) 2011-11-25 2013-06-04 오수미 색차 인트라 예측 블록 생성 방법
US9451252B2 (en) 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
EP2806649A1 (en) 2012-01-18 2014-11-26 Electronics and Telecommunications Research Institute Method and device for encoding and decoding image
US9503720B2 (en) * 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
US9325991B2 (en) 2012-04-11 2016-04-26 Qualcomm Incorporated Motion vector rounding
US10009612B2 (en) 2012-04-12 2018-06-26 Hfi Innovation Inc. Method and apparatus for block partition of chroma subsampling formats
PL2847996T3 (pl) * 2012-05-09 2021-04-19 Sun Patent Trust Sposoby wykonywania predykcji wektora ruchu, sposoby kodowania i dekodowania oraz służące do tego urządzenia
US20130329007A1 (en) 2012-06-06 2013-12-12 Qualcomm Incorporated Redundancy removal for advanced motion vector prediction (amvp) in three-dimensional (3d) video coding
MX358773B (es) 2012-07-02 2018-09-04 Samsung Electronics Co Ltd Metodo y aparato para predecir un vector de movimiento para la codificacion de video o decodificacion de video.
KR101754999B1 (ko) 2012-08-29 2017-07-06 브이아이디 스케일, 인크. 스케일러블 비디오 코딩을 위한 모션 벡터 예측 방법 및 장치
US9491461B2 (en) 2012-09-27 2016-11-08 Qualcomm Incorporated Scalable extensions to HEVC and temporal motion vector prediction
AU2012232992A1 (en) 2012-09-28 2014-04-17 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding the transform units of a coding unit
US20140286408A1 (en) 2012-09-28 2014-09-25 Intel Corporation Inter-layer pixel sample prediction
KR101835358B1 (ko) * 2012-10-01 2018-03-08 지이 비디오 컴프레션, 엘엘씨 향상 레이어 예측에 대한 인터-레이어 예측 기여를 이용한 스케일러블 비디오 코딩
US9615089B2 (en) * 2012-12-26 2017-04-04 Samsung Electronics Co., Ltd. Method of encoding and decoding multiview video sequence based on adaptive compensation of local illumination mismatch in inter-frame prediction
US9294777B2 (en) 2012-12-30 2016-03-22 Qualcomm Incorporated Progressive refinement with temporal scalability support in video coding
US9674542B2 (en) 2013-01-02 2017-06-06 Qualcomm Incorporated Motion vector prediction for video coding
US20140254678A1 (en) 2013-03-11 2014-09-11 Aleksandar Beric Motion estimation using hierarchical phase plane correlation and block matching
US9521425B2 (en) 2013-03-19 2016-12-13 Qualcomm Incorporated Disparity vector derivation in 3D video coding for skip and direct modes
US9491460B2 (en) 2013-03-29 2016-11-08 Qualcomm Incorporated Bandwidth reduction for video coding prediction
WO2014166116A1 (en) 2013-04-12 2014-10-16 Mediatek Inc. Direct simplified depth coding
WO2015007159A1 (en) 2013-07-15 2015-01-22 Mediatek Singapore Pte. Ltd. Method of disparity derived depth coding in 3d video coding
US9628795B2 (en) 2013-07-17 2017-04-18 Qualcomm Incorporated Block identification using disparity vector in video coding
WO2015006967A1 (en) 2013-07-19 2015-01-22 Mediatek Singapore Pte. Ltd. Simplified view synthesis prediction for 3d video coding
CN104488271B (zh) 2013-07-26 2019-05-07 北京大学深圳研究生院 一种基于p帧的多假设运动补偿方法
WO2015010319A1 (zh) 2013-07-26 2015-01-29 北京大学深圳研究生院 一种基于p帧的多假设运动补偿编码方法
AU2013228045A1 (en) * 2013-09-13 2015-04-02 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data
US9762927B2 (en) 2013-09-26 2017-09-12 Qualcomm Incorporated Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC
US9667996B2 (en) 2013-09-26 2017-05-30 Qualcomm Incorporated Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC
CN103561263B (zh) * 2013-11-06 2016-08-24 北京牡丹电子集团有限责任公司数字电视技术中心 基于运动矢量约束和加权运动矢量的运动补偿预测方法
CN105723713A (zh) 2013-12-19 2016-06-29 夏普株式会社 合并候选导出装置、图像解码装置以及图像编码装置
TWI536811B (zh) * 2013-12-27 2016-06-01 財團法人工業技術研究院 影像處理方法與系統、解碼方法、編碼器與解碼器
EP3090553B1 (en) * 2014-01-03 2022-07-06 Microsoft Technology Licensing, LLC Block vector prediction in video and image coding/decoding
WO2015109598A1 (en) 2014-01-27 2015-07-30 Mediatek Singapore Pte. Ltd. Methods for motion parameter hole filling
CN108989815B9 (zh) 2014-03-19 2021-06-04 株式会社Kt 针对多视图视频信号生成合并候选列表的方法及解码装置
KR101863487B1 (ko) 2014-05-06 2018-05-31 에이치에프아이 이노베이션 인크. 인트라 블록 카피 모드 부호화를 위한 블록 벡터 예측 방법
US10327002B2 (en) * 2014-06-19 2019-06-18 Qualcomm Incorporated Systems and methods for intra-block copy
KR102413529B1 (ko) 2014-06-19 2022-06-24 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 통합된 인트라 블록 카피 및 인터 예측 모드
US20150373362A1 (en) * 2014-06-19 2015-12-24 Qualcomm Incorporated Deblocking filter design for intra block copy
US20150373350A1 (en) 2014-06-20 2015-12-24 Qualcomm Incorporated Temporal motion vector prediction (tmvp) indication in multi-layer codecs
WO2016008157A1 (en) 2014-07-18 2016-01-21 Mediatek Singapore Pte. Ltd. Methods for motion compensation using high order motion model
CN105282558B (zh) * 2014-07-18 2018-06-15 清华大学 帧内像素预测方法、编码方法、解码方法及其装置
US10412387B2 (en) * 2014-08-22 2019-09-10 Qualcomm Incorporated Unified intra-block copy and inter-prediction
KR102034938B1 (ko) * 2014-09-01 2019-10-21 에이치에프아이 이노베이션 인크. 스크린 콘텐츠 및 비디오 코딩을 위한 인트라 픽처 블록 카피의 방법
EP3175618A1 (en) 2014-09-11 2017-06-07 Euclid Discoveries, LLC Perceptual optimization for model-based video encoding
KR20170066457A (ko) * 2014-09-26 2017-06-14 브이아이디 스케일, 인크. 시간적 블록 벡터 예측을 갖는 인트라 블록 카피 코딩
US9918105B2 (en) * 2014-10-07 2018-03-13 Qualcomm Incorporated Intra BC and inter unification
CN111741312B (zh) * 2014-10-31 2024-03-19 三星电子株式会社 用于对运动矢量进行编码/解码的方法和装置
SG11201703454XA (en) 2014-11-18 2017-06-29 Mediatek Inc Method of bi-prediction video coding based on motion vectors from uni-prediction and merge candidate
WO2016090568A1 (en) 2014-12-10 2016-06-16 Mediatek Singapore Pte. Ltd. Binary tree block partitioning structure
US11477477B2 (en) * 2015-01-26 2022-10-18 Qualcomm Incorporated Sub-prediction unit based advanced temporal motion vector prediction
CN107431817B (zh) 2015-01-29 2020-03-24 Vid拓展公司 用于调色板译码的方法及装置
JP2018050091A (ja) 2015-02-02 2018-03-29 シャープ株式会社 画像復号装置、画像符号化装置および予測ベクトル導出装置
US10171828B2 (en) * 2015-02-27 2019-01-01 Arris Enterprises Llc Modification of unification of intra block copy and inter signaling related syntax and semantics
US10200711B2 (en) 2015-03-27 2019-02-05 Qualcomm Incorporated Motion vector derivation in video coding
WO2016165069A1 (en) * 2015-04-14 2016-10-20 Mediatek Singapore Pte. Ltd. Advanced temporal motion vector prediction in video coding
WO2016173519A1 (en) 2015-04-29 2016-11-03 Hfi Innovation Inc. Method and apparatus for intra block copy reference list construction
US20160337662A1 (en) * 2015-05-11 2016-11-17 Qualcomm Incorporated Storage and signaling resolutions of motion vectors
CN106303543B (zh) 2015-05-15 2018-10-30 华为技术有限公司 视频图像编码和解码的方法、编码设备和解码设备
EP3298785A4 (en) * 2015-06-03 2019-02-13 MediaTek Inc. METHOD AND APPARATUS FOR RESOURCE SHARING BETWEEN INTRA BLOCK COPY MODE AND INTER-PREDICTION MODE IN VIDEO CODING SYSTEMS
KR102390073B1 (ko) * 2015-06-08 2022-04-25 브이아이디 스케일, 인크. 스크린 콘텐츠 코딩을 위한 인트라 블록 카피 모드
GB2539213A (en) * 2015-06-08 2016-12-14 Canon Kk Schemes for handling an AMVP flag when implementing intra block copy coding mode
US10148977B2 (en) 2015-06-16 2018-12-04 Futurewei Technologies, Inc. Advanced coding techniques for high efficiency video coding (HEVC) screen content coding (SCC) extensions
CN112887711B (zh) 2015-07-27 2023-06-30 寰发股份有限公司 一种视频编解码方法及系统
US10728571B2 (en) * 2015-08-04 2020-07-28 Lg Electronics Inc. Inter prediction method and device in video coding system
JP6320440B2 (ja) 2015-08-04 2018-05-09 ドルビー ラボラトリーズ ライセンシング コーポレイション ハイダイナミックレンジ信号のための信号再構成
CN114866769A (zh) 2015-08-07 2022-08-05 Lg 电子株式会社 视频编译系统中的帧间预测方法和装置
KR102531222B1 (ko) 2015-08-25 2023-05-10 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 루미넌스 존들에 기초한 역 톤 맵핑
US20180249172A1 (en) 2015-09-02 2018-08-30 Mediatek Inc. Method and apparatus of motion compensation for video coding based on bi prediction optical flow techniques
WO2017041271A1 (en) 2015-09-10 2017-03-16 Mediatek Singapore Pte. Ltd. Efficient context modeling for coding a block of data
US10375413B2 (en) * 2015-09-28 2019-08-06 Qualcomm Incorporated Bi-directional optical flow for video coding
CN108965871B (zh) 2015-09-29 2023-11-10 华为技术有限公司 图像预测的方法及装置
US10412407B2 (en) 2015-11-05 2019-09-10 Mediatek Inc. Method and apparatus of inter prediction using average motion vector for video coding
CN105306944B (zh) 2015-11-30 2018-07-06 哈尔滨工业大学 混合视频编码标准中色度分量预测方法
US20190158870A1 (en) 2016-01-07 2019-05-23 Mediatek Inc. Method and apparatus for affine merge mode prediction for video coding system
CN105678808A (zh) 2016-01-08 2016-06-15 浙江宇视科技有限公司 运动目标跟踪方法及装置
US9955186B2 (en) 2016-01-11 2018-04-24 Qualcomm Incorporated Block size decision for video coding
WO2017130696A1 (ja) 2016-01-29 2017-08-03 シャープ株式会社 予測画像生成装置、動画像復号装置、および動画像符号化装置
WO2017133661A1 (en) * 2016-02-05 2017-08-10 Mediatek Inc. Method and apparatus of motion compensation based on bi-directional optical flow techniques for video coding
US10368083B2 (en) 2016-02-15 2019-07-30 Qualcomm Incorporated Picture order count based motion vector pruning
WO2017142449A1 (en) * 2016-02-17 2017-08-24 Telefonaktiebolaget Lm Ericsson (Publ) Methods and devices for encoding and decoding video pictures
US10200715B2 (en) 2016-02-17 2019-02-05 Telefonaktiebolaget Lm Ericsson (Publ) Methods and devices for encoding and decoding video pictures
WO2017143467A1 (en) 2016-02-22 2017-08-31 Mediatek Singapore Pte. Ltd. Localized luma mode prediction inheritance for chroma coding
WO2017156669A1 (en) 2016-03-14 2017-09-21 Mediatek Singapore Pte. Ltd. Methods for motion vector storage in video coding
CN114466193A (zh) 2016-03-16 2022-05-10 联发科技股份有限公司 视频编码的样式基础的运动向量推导之方法及装置
US11223852B2 (en) 2016-03-21 2022-01-11 Qualcomm Incorporated Coding video data using a two-level multi-type-tree framework
US10567759B2 (en) 2016-03-21 2020-02-18 Qualcomm Incorporated Using luma information for chroma prediction with separate luma-chroma framework in video coding
US10939105B2 (en) 2016-03-25 2021-03-02 Panasonic Intellectual Property Management Co., Ltd. Methods and apparatuses for encoding and decoding video using signal dependent adaptive quantization
WO2017171107A1 (ko) 2016-03-28 2017-10-05 엘지전자(주) 인터 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
CN116546206A (zh) 2016-04-08 2023-08-04 韩国电子通信研究院 用于导出运动预测信息的方法和装置
US10462459B2 (en) 2016-04-14 2019-10-29 Mediatek Inc. Non-local adaptive loop filter
WO2017188509A1 (ko) 2016-04-28 2017-11-02 엘지전자(주) 인터 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
CN109417625B (zh) 2016-05-05 2023-02-28 交互数字麦迪逊专利控股公司 编码或解码视频的装置及方法
US20170332000A1 (en) 2016-05-10 2017-11-16 Lytro, Inc. High dynamic range light-field imaging
WO2017194756A1 (en) 2016-05-12 2017-11-16 Telefonaktiebolaget Lm Ericsson (Publ) Methods and arrangements for coding and decoding motion vectors
WO2017197146A1 (en) 2016-05-13 2017-11-16 Vid Scale, Inc. Systems and methods for generalized multi-hypothesis prediction for video coding
CN109792535B (zh) 2016-05-13 2023-03-28 夏普株式会社 预测图像生成装置、运动图像解码装置以及运动图像编码装置
US10560718B2 (en) * 2016-05-13 2020-02-11 Qualcomm Incorporated Merge candidates for motion vector prediction for video coding
US10560712B2 (en) 2016-05-16 2020-02-11 Qualcomm Incorporated Affine motion prediction for video coding
WO2017201141A1 (en) * 2016-05-17 2017-11-23 Arris Enterprises Llc Template matching for jvet intra prediction
US20170339405A1 (en) * 2016-05-20 2017-11-23 Arris Enterprises Llc System and method for intra coding
CN109076214A (zh) * 2016-05-28 2018-12-21 联发科技股份有限公司 使用仿射运动补偿的视频编码的当前图像参考的方法和装置
WO2018009828A1 (en) 2016-07-08 2018-01-11 Vid Scale, Inc. Systems and methods for region-of-interest tone remapping
US10326986B2 (en) 2016-08-15 2019-06-18 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10368107B2 (en) 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
EP3497932A4 (en) 2016-08-15 2020-03-25 Nokia Technologies Oy VIDEO CODING AND DECODING
EP3522537A1 (en) * 2016-09-12 2019-08-07 Sony Corporation Image processing device and image processing method
WO2018049594A1 (en) 2016-09-14 2018-03-22 Mediatek Inc. Methods of encoder decision for quad-tree plus binary tree structure
US11095892B2 (en) 2016-09-20 2021-08-17 Kt Corporation Method and apparatus for processing video signal
US10778999B2 (en) 2016-09-30 2020-09-15 Qualcomm Incorporated Frame rate up-conversion coding mode with affine motion model
EP3520402A4 (en) 2016-10-03 2019-09-18 Sharp Kabushiki Kaisha SYSTEMS AND METHOD FOR APPLYING DEFLECTION FILTERS IN RECONSTRUCTED VIDEO DATA
EP3301919A1 (en) 2016-10-03 2018-04-04 Thomson Licensing Method and apparatus for encoding and decoding motion information
US10448010B2 (en) 2016-10-05 2019-10-15 Qualcomm Incorporated Motion vector prediction for affine motion models in video coding
EP3525460A4 (en) 2016-10-06 2020-06-17 LG Electronics Inc. -1- METHOD FOR PROCESSING A VIDEO BASED ON AN INTRAPREDICATION MODE AND DEVICE THEREFOR
WO2018070152A1 (en) 2016-10-10 2018-04-19 Sharp Kabushiki Kaisha Systems and methods for performing motion compensation for coding of video data
US10880546B2 (en) 2016-10-11 2020-12-29 Lg Electronics Inc. Method and apparatus for deriving intra prediction mode for chroma component
US10750190B2 (en) 2016-10-11 2020-08-18 Lg Electronics Inc. Video decoding method and device in video coding system
US20180109810A1 (en) * 2016-10-17 2018-04-19 Mediatek Inc. Method and Apparatus for Reference Picture Generation and Management in 3D Video Compression
WO2018097693A2 (ko) 2016-11-28 2018-05-31 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2018097692A2 (ko) * 2016-11-28 2018-05-31 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US20200021837A1 (en) 2016-12-16 2020-01-16 Sharp Kabushiki Kaisha Video decoding apparatus and video coding apparatus
US10750203B2 (en) 2016-12-22 2020-08-18 Mediatek Inc. Method and apparatus of adaptive bi-prediction for video coding
US10911761B2 (en) 2016-12-27 2021-02-02 Mediatek Inc. Method and apparatus of bilateral template MV refinement for video coding
US10681370B2 (en) 2016-12-29 2020-06-09 Qualcomm Incorporated Motion vector generation for affine motion model for video coding
WO2018128380A1 (ko) 2017-01-03 2018-07-12 엘지전자(주) 어파인 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치
US10873744B2 (en) 2017-01-03 2020-12-22 Lg Electronics Inc. Method and device for processing video signal by means of affine prediction
US10931969B2 (en) 2017-01-04 2021-02-23 Qualcomm Incorporated Motion vector reconstructions for bi-directional optical flow (BIO)
US20180199057A1 (en) 2017-01-12 2018-07-12 Mediatek Inc. Method and Apparatus of Candidate Skipping for Predictor Refinement in Video Coding
US10701366B2 (en) 2017-02-21 2020-06-30 Qualcomm Incorporated Deriving motion vector information at a video decoder
US10523964B2 (en) 2017-03-13 2019-12-31 Qualcomm Incorporated Inter prediction refinement based on bi-directional optical flow (BIO)
US10701390B2 (en) 2017-03-14 2020-06-30 Qualcomm Incorporated Affine motion information derivation
CN117395395A (zh) 2017-03-22 2024-01-12 韩国电子通信研究院 使用参考块的预测方法和装置
US10701391B2 (en) 2017-03-23 2020-06-30 Qualcomm Incorporated Motion vector difference (MVD) prediction
US10440396B2 (en) 2017-03-28 2019-10-08 Qualcomm Incorporated Filter information sharing among color components
US10542264B2 (en) 2017-04-04 2020-01-21 Arris Enterprises Llc Memory reduction implementation for weighted angular prediction
US10873760B2 (en) 2017-04-07 2020-12-22 Futurewei Technologies, Inc. Motion vector (MV) constraints and transformation constraints in video coding
US20180310017A1 (en) 2017-04-21 2018-10-25 Mediatek Inc. Sub-prediction unit temporal motion vector prediction (sub-pu tmvp) for video coding
US10805630B2 (en) 2017-04-28 2020-10-13 Qualcomm Incorporated Gradient based matching for motion search and derivation
US20180332298A1 (en) 2017-05-10 2018-11-15 Futurewei Technologies, Inc. Bidirectional Prediction In Video Compression
CN116866585A (zh) * 2017-05-17 2023-10-10 株式会社Kt 对图像解码和编码的方法以及存储压缩视频数据的装置
EP4351139A3 (en) 2017-06-09 2024-05-15 Electronics and Telecommunications Research Institute Video encoding/decoding method and device, and recording medium storing bit stream
US10904565B2 (en) 2017-06-23 2021-01-26 Qualcomm Incorporated Memory-bandwidth-efficient design for bi-directional optical flow (BIO)
CN110870314B (zh) 2017-06-26 2024-04-02 交互数字Vc控股公司 用于运动补偿的多个预测器候选
US10477237B2 (en) 2017-06-28 2019-11-12 Futurewei Technologies, Inc. Decoder side motion vector refinement in video coding
US11184636B2 (en) 2017-06-28 2021-11-23 Sharp Kabushiki Kaisha Video encoding device and video decoding device
US11172203B2 (en) 2017-08-08 2021-11-09 Mediatek Inc. Intra merge prediction
US10880573B2 (en) 2017-08-15 2020-12-29 Google Llc Dynamic motion vector referencing for video coding
US20200221077A1 (en) 2017-09-05 2020-07-09 Lg Electronics Inc. Inter prediction mode-based image processing method and apparatus therefor
JP2021005741A (ja) 2017-09-14 2021-01-14 シャープ株式会社 画像符号化装置及び画像復号装置
KR101984687B1 (ko) 2017-09-21 2019-05-31 한국해양과학기술원 선박 충돌 회피용 부유식 해양구조물의 계류삭 장치 및 이의 운용방법과 설치방법
US10785494B2 (en) 2017-10-11 2020-09-22 Qualcomm Incorporated Low-complexity design for FRUC
CN109963155B (zh) 2017-12-23 2023-06-06 华为技术有限公司 图像块的运动信息的预测方法、装置及编解码器
WO2019143602A1 (en) 2018-01-16 2019-07-25 Vid Scale, Inc. Motion compensated bi-prediction based on local illumination compensation
US10757417B2 (en) 2018-01-20 2020-08-25 Qualcomm Incorporated Affine motion compensation in video coding
US10687071B2 (en) 2018-02-05 2020-06-16 Tencent America LLC Method and apparatus for video coding
US11012715B2 (en) * 2018-02-08 2021-05-18 Qualcomm Incorporated Intra block copy for video coding
KR102424189B1 (ko) * 2018-02-14 2022-07-21 후아웨이 테크놀러지 컴퍼니 리미티드 적응형 보간 필터
US20190306502A1 (en) 2018-04-02 2019-10-03 Qualcomm Incorporated System and method for improved adaptive loop filtering
US10708592B2 (en) 2018-04-02 2020-07-07 Qualcomm Incorporated Deblocking filter for video coding and processing
US20190320181A1 (en) 2018-04-17 2019-10-17 Qualcomm Incorporated Generation of motion vector predictors from multiple neighboring blocks in video coding
US10779002B2 (en) 2018-04-17 2020-09-15 Qualcomm Incorporated Limitation of the MVP derivation based on decoder-side motion vector derivation
US20190364295A1 (en) 2018-05-25 2019-11-28 Tencent America LLC Method and apparatus for video coding
US10986340B2 (en) * 2018-06-01 2021-04-20 Qualcomm Incorporated Coding adaptive multiple transform information for video coding
US11109025B2 (en) 2018-06-04 2021-08-31 Tencent America LLC Method and apparatus for sub-block based temporal motion vector prediction
KR20210016581A (ko) 2018-06-05 2021-02-16 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 Ibc 및 atmvp 간의 상호 작용
EP3788788A1 (en) 2018-06-07 2021-03-10 Beijing Bytedance Network Technology Co. Ltd. Partial cost calculation
US11303923B2 (en) 2018-06-15 2022-04-12 Intel Corporation Affine motion compensation for current picture referencing
CN110620932B (zh) 2018-06-19 2022-11-08 北京字节跳动网络技术有限公司 依赖模式的运动矢量差精度集
WO2019244119A1 (en) 2018-06-21 2019-12-26 Beijing Bytedance Network Technology Co., Ltd. Sub-block mv inheritance between color components
CN110636298B (zh) 2018-06-21 2022-09-13 北京字节跳动网络技术有限公司 对于Merge仿射模式和非Merge仿射模式的统一约束
WO2020003256A1 (en) 2018-06-29 2020-01-02 Beijing Bytedance Network Technology Co., Ltd. Restriction of motion information sharing
TWI719519B (zh) 2018-07-02 2021-02-21 大陸商北京字節跳動網絡技術有限公司 對於dmvr的塊尺寸限制
US11606575B2 (en) 2018-07-10 2023-03-14 Qualcomm Incorporated Multiple history based non-adjacent MVPs for wavefront processing of video coding
US10491902B1 (en) 2018-07-16 2019-11-26 Tencent America LLC Method and apparatus for history-based motion vector prediction
US10440378B1 (en) 2018-07-17 2019-10-08 Tencent America LLC Method and apparatus for history-based motion vector prediction with parallel processing
US10362330B1 (en) 2018-07-30 2019-07-23 Tencent America LLC Combining history-based motion vector prediction and non-adjacent merge prediction
TWI752341B (zh) 2018-08-04 2022-01-11 大陸商北京字節跳動網絡技術有限公司 不同解碼器側運動矢量推導模式之間的交互
US11336914B2 (en) 2018-08-16 2022-05-17 Qualcomm Incorporated History-based candidate list with classification
KR20240005178A (ko) 2018-09-19 2024-01-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 적응적 움직임 벡터 해상도를 가지는 어파인 모드에 대한 구문 재사용
US11212550B2 (en) 2018-09-21 2021-12-28 Qualcomm Incorporated History-based motion vector prediction for affine mode
US11297330B2 (en) 2018-09-22 2022-04-05 Lg Electronics Inc. Method and apparatus for processing video signal based on inter prediction
CN116647697A (zh) 2018-09-23 2023-08-25 北京字节跳动网络技术有限公司 具有自适应运动矢量分辨率的运动矢量精度指示的信令通知
US11146800B2 (en) 2018-09-24 2021-10-12 Tencent America LLC Low latency local illumination compensation
CN117768651A (zh) 2018-09-24 2024-03-26 北京字节跳动网络技术有限公司 处理视频数据的方法、装置、介质、以及比特流存储方法
US11051034B2 (en) 2018-10-08 2021-06-29 Qualcomm Incorporated History-based motion vector predictor
US11284066B2 (en) 2018-10-10 2022-03-22 Tencent America LLC Method and apparatus for intra block copy in intra-inter blending mode and triangle prediction unit mode
WO2020084463A1 (en) 2018-10-22 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Sub-block based decoder side motion vector derivation
US11032541B2 (en) 2018-10-22 2021-06-08 Tencent America LLC Method and apparatus for video coding
WO2020084461A1 (en) 2018-10-22 2020-04-30 Beijing Bytedance Network Technology Co., Ltd. Restrictions on decoder side motion vector derivation based on coding information
CN116471403A (zh) 2018-10-23 2023-07-21 北京字节跳动网络技术有限公司 基于子块的运动信息列表的简化熵编解码
CN111147850B (zh) 2018-11-02 2022-10-11 北京字节跳动网络技术有限公司 用于基于历史的运动矢量预测的表维护
EP3861731A4 (en) 2018-11-05 2021-11-24 Beijing Bytedance Network Technology Co. Ltd. INTERPOLATION TO INTERPRDICTION WITH REFINEMENT
JP7324841B2 (ja) 2018-11-10 2023-08-10 北京字節跳動網絡技術有限公司 ビデオ・データ処理方法、装置、記憶媒体及び記憶方法
WO2020103934A1 (en) 2018-11-22 2020-05-28 Beijing Bytedance Network Technology Co., Ltd. Construction method for inter prediction with geometry partition
US11394989B2 (en) 2018-12-10 2022-07-19 Tencent America LLC Method and apparatus for video coding
US11032574B2 (en) 2018-12-31 2021-06-08 Tencent America LLC Method and apparatus for video coding
US11122260B2 (en) 2019-02-22 2021-09-14 Mediatek Inc. Method and apparatus of Merge list generation for Intra Block Copy mode
EP3939262A4 (en) 2019-03-11 2022-11-09 Alibaba Group Holding Limited METHOD, DEVICE AND SYSTEM FOR DETERMINING PREDICTION WEIGHT FOR MERGE MODE
US11290722B2 (en) 2019-03-12 2022-03-29 Tencent America LLC Method and apparatus for video encoding or decoding

Also Published As

Publication number Publication date
GB2588003B (en) 2023-04-19
TW202005390A (zh) 2020-01-16
US20200396465A1 (en) 2020-12-17
US20220217363A1 (en) 2022-07-07
US11831884B2 (en) 2023-11-28
US20210392341A1 (en) 2021-12-16
CN110572668A (zh) 2019-12-13
JP2023175898A (ja) 2023-12-12
TW202005394A (zh) 2020-01-16
TW202013978A (zh) 2020-04-01
TW202002643A (zh) 2020-01-01
WO2019234636A1 (en) 2019-12-12
EP3788787A1 (en) 2021-03-10
TWI708503B (zh) 2020-10-21
JP2021525497A (ja) 2021-09-24
US20200413048A1 (en) 2020-12-31
TWI704802B (zh) 2020-09-11
GB202018255D0 (en) 2021-01-06
US20210006780A1 (en) 2021-01-07
TWI725445B (zh) 2021-04-21
CN110572670A (zh) 2019-12-13
WO2019234600A1 (en) 2019-12-12
US20200404255A1 (en) 2020-12-24
JP7361845B2 (ja) 2023-10-16
CN110572671B (zh) 2022-11-25
US20240121410A1 (en) 2024-04-11
US20210203958A1 (en) 2021-07-01
TW202005391A (zh) 2020-01-16
TWI750477B (zh) 2021-12-21
CN110572648A (zh) 2019-12-13
US20220078452A1 (en) 2022-03-10
CN110572647B (zh) 2022-07-29
GB2588023B (en) 2023-04-12
US11973962B2 (en) 2024-04-30
US11202081B2 (en) 2021-12-14
CN114666605A (zh) 2022-06-24
TWI708504B (zh) 2020-10-21
US20200404260A1 (en) 2020-12-24
CN110572648B (zh) 2023-05-02
GB2588003A (en) 2021-04-14
CN110572669B (zh) 2022-06-21
TW202002644A (zh) 2020-01-01
KR20210016581A (ko) 2021-02-16
CN110572647A (zh) 2019-12-13
WO2019234638A1 (en) 2019-12-12
GB2588317B (en) 2023-05-17
WO2019234609A1 (en) 2019-12-12
GB202018465D0 (en) 2021-01-06
TWI736902B (zh) 2021-08-21
US11523123B2 (en) 2022-12-06
GB2588023A (en) 2021-04-14
US11509915B2 (en) 2022-11-22
JP7104186B2 (ja) 2022-07-20
CN115529458A (zh) 2022-12-27
CN110572646A (zh) 2019-12-13
GB2588004B (en) 2023-03-01
WO2019234607A1 (en) 2019-12-12
GB202018254D0 (en) 2021-01-06
CN115442612A (zh) 2022-12-06
CN110572671A (zh) 2019-12-13
TWI740155B (zh) 2021-09-21
CN110572658B (zh) 2022-08-12
TWI715993B (zh) 2021-01-11
GB2588004A (en) 2021-04-14
WO2019234598A1 (en) 2019-12-12
WO2019234606A1 (en) 2019-12-12
WO2019234639A1 (en) 2019-12-12
CN110572669A (zh) 2019-12-13
GB2588317A (en) 2021-04-21
CN110572670B (zh) 2022-05-20
CN110572646B (zh) 2022-12-13
GB202018447D0 (en) 2021-01-06
JP2022132346A (ja) 2022-09-08
TW202013977A (zh) 2020-04-01
CN110572658A (zh) 2019-12-13

Similar Documents

Publication Publication Date Title
TWI736902B (zh) 幀內塊複製與仿射的交互