TWI752739B - 視訊編解碼系統中的視訊處理方法和裝置 - Google Patents

視訊編解碼系統中的視訊處理方法和裝置 Download PDF

Info

Publication number
TWI752739B
TWI752739B TW109141495A TW109141495A TWI752739B TW I752739 B TWI752739 B TW I752739B TW 109141495 A TW109141495 A TW 109141495A TW 109141495 A TW109141495 A TW 109141495A TW I752739 B TWI752739 B TW I752739B
Authority
TW
Taiwan
Prior art keywords
image
current
picture
motion compensation
block
Prior art date
Application number
TW109141495A
Other languages
English (en)
Other versions
TW202127885A (zh
Inventor
邱志堯
陳俊嘉
徐志瑋
陳慶曄
黃毓文
莊子德
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW202127885A publication Critical patent/TW202127885A/zh
Application granted granted Critical
Publication of TWI752739B publication Critical patent/TWI752739B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

用於處理當前圖像中的當前塊的視訊處理方法和設備包括：接收當前塊的輸入資料；確定參考圖像；確定當前圖像和參考圖像的圖像大小是否不同；確定水平環繞運動補償被致能用於預測當前塊，對當前塊進行運動補償，以從參考圖像中獲得參考塊，以及根據參考塊對當前塊進行編碼或解碼。當當前圖像和參考圖像的圖像大小不同時，水平環繞運動補償被禁能。

Description

視訊編解碼系統中的視訊處理方法和裝置
本發明涉及視訊編碼和解碼系統中的視訊處理方法和裝置。具體地，本發明涉及水平環繞運動補償。
高效率視訊編解碼(High Efficiency Video Coding，HEVC)標準是在ITU-T研究組的視訊編解碼專家組成的聯合協作小組(Joint Collaborative Team on Video Coding，JCT-VC)開發的最新視訊編解碼標準。HEVC標準改進了其後續標準H.264/AVC的視訊壓縮性能，以滿足對更高圖像解析度，更高幀頻和更好視訊品質的需求。HEVC標準依賴於基於塊的編解碼結構，該結構將每個視訊片段(slince)分成多個方形編解碼樹單元(Coding Tree Unit，簡稱CTU)，其中CTU是HEVC標準中視訊壓縮的基本單位。光柵掃描順序用於對每個片段中的CTU進行編碼或解碼。每個CTU可包含一個編解碼單元(coding unit，簡稱CU)，也可以根據四分樹分割結構被遞迴地拆分為四個較小的CU，直到達到預定義的最小CU大小為止。預測決策在CU級別做出，其中每個CU使用圖像間預測或幀內預測進行編解碼。一旦CU分層樹的分割完成，則根據用於預測的PU分割類型，每個CU被進一步劃分成一個或多個預測單元(prediction unit，簡稱PU)。由於相同的預測過程被應用於PU中的所有像素，因此PU用作共用預測資訊的基本代表塊。預測資訊以PU為基礎傳送到解碼器。圖像間預測中的運動估 計識別一或兩個參考圖像中的當前塊的一個(單向預測)或兩個(雙向預測)最佳參考塊，以及根據到一個或兩個運動向量(motion vector，簡稱MV)，圖像間預測中的運動補償定位一個或兩個最佳參考塊。當前塊和相應的預測子之間的差值被稱為預測殘差。當單向預測被使用時，相應的預測子是最佳參考塊。當雙向預測被使用時，兩個參考塊被合併以形成預測子。
參考圖像重采樣(reference picture resampling，簡稱RPR) 在即將到來的新興視訊編解碼標準多樣化視訊編解碼(Versatile Video Coding，簡稱VVC)的開發中，用於適應性流服務的快速表示切換被期望提供相同視訊內容的多個表示，每個表示具有不同的屬性。不同的屬性涉及不同的空間解析度或不同的採樣位深度。在即時視訊通訊中，藉由允許在不插入I圖像的情況下編解碼視訊序列中的解析度更改，不僅視訊資料可以無縫地適應動態通道條件和使用者偏好，由I圖像引起的跳動效果也可被刪除。第1圖示出應用參考圖像重採樣以對當前圖像進行編碼或解碼的示例，其中，根據不同大小的參考圖像，當前圖像被預測。空間可伸縮性在流應用程式中是有益的。當空間可伸縮性被支援時，參考圖像的圖像大小可與當前圖像不同。參考圖像重採樣(reference picture resampling，簡稱RPR)，也被稱為自我調整解析度更改(Adaptive Resolution Change，簡稱ARC)，已在即將到來的新興視訊編解碼標準的開發過程中進行了研究和評估。
水平環繞運動補償 水平環繞運動補償是一種360特定的編解碼工具，旨在提高以等角投影(Equi-Rectangular Projection，簡稱ERP)格式重構的360度視訊的視覺品質。在傳統的運動補償中，當運動向量指定超出參考圖像的圖像邊界的樣本時，重複填充被用來導出出界樣本的值。從重複填充導出的出界樣本的值直接從對應圖像邊界上的最近相鄰樣本中複製一個值。對於360度視訊圖像，圖像邊界的重複填充是不合適的，因為它會在重構的視口(viewport) 視訊中導致稱為“接縫偽影”的視覺偽影。360度視訊在球形上捕獲，以及固有地沒有邊界，換言之，投影域中參考圖像邊界之外的參考樣本可始終從球形域中的相鄰樣本中獲得。對於一般的投影格式，可能難以在球形域中導出相應的相鄰樣本，因為它涉及2D到3D和3D到2D座標轉換以及分數樣本位置的樣本插值。但是，以ERP投影格式導出相應的相鄰樣本要簡單得多，因為左圖像邊界外的球形相鄰樣本可以從右圖像邊界內的樣本獲得，反之亦然。考慮到ERP投影格式的廣泛使用和相對容易實現，水平環繞運動補償在即將出現的新興視訊編碼標準被提出，以提高以ERP投影格式編解碼的360視訊的視覺品質。
第2圖示出具有填充ERP(Padded ERP，簡稱PERP)格式的水平環繞運動補償過程的示例。PERP投影格式被提出，以減少ERP投影格式中的主觀偽像。藉由複製像素，在編碼過程之前，填充被用來將每個ERP圖像轉換為PERP圖像。例如，像素將從當前圖像20的左邊緣區域複製到當前圖像20右邊緣區域的填充區域中。類似地，像素將從當前圖像20的右邊緣區域複製到當前圖像20的左邊緣區域的填充區域中，PERP格式的圖像隨後由視訊編碼器編碼。在由視訊解碼器解碼之後，藉由裁剪左右填充像素，重構的PERP圖像被轉換回重構的ERP格式。在該示例中，藉由水平環繞運動補償，當前圖像20中的當前CU 202被編碼。藉由來自同位的CU 222的運動向量，參考圖像22中的參考塊224被定位。由於參考塊224的一部分在投影域中在參考圖像22的左邊界之外，代替重複填充，出界(out-of-boundary)部分從位於參考圖像22內的朝向投影域中的右邊界的對應球形鄰近樣本獲取。在該示例中，根據環繞偏移，出界部分從環繞參考塊226獲得。高級語法元素在序列參數集合(Sequence Parameter Set，簡稱SPS)中發送，以指示環繞偏移。用於在參考同一SPS的任一圖像中的所有塊上執行水平環繞運動補償的環繞偏移是相同的。例如，環繞偏移被設置為等於填充前的ERP圖像寬度。ERP寬度等於PERP格式圖像的圖像寬度，其中減去了左填充區 域的左填充邊距和右填充區域的右填充邊距。重複填充僅用於頂部和底部圖像邊界。如第2圖所示，水平環繞運動補償可以與360度視訊編解碼中經常使用的非規範填充方法結合使用。SPS中發送的環繞偏移用於計算參考SPS的圖像中環繞參考塊的位置。環繞偏移語法元素不受左右圖像邊界上特定填充量的影響，因此自然支援ERP圖像的非對稱填充。ERP圖像的非對稱填充允許左右填充邊距不同。當參考樣本在參考圖像的左和右邊界之外時，水平環繞運動補償過程可對運動補償提供更有意義的資訊。這種水平環繞運動補償編碼工具不僅在速率失真性能方面，而且在減少接縫偽像和改善重構的360度視訊的主觀品質方面，都改善了壓縮性能。水平環繞運動補償還可用於在水平方向上具有恒定採樣密度的其他單面投影格式，例如360Lib中調整後的等面積投影。
在用於處理當前圖像中的當前塊的視訊處理方法的示例性實施例中，實現該視訊處理方法的視訊編碼系統接收與當前塊相關聯的輸入視訊資料，確定當前塊的參考圖像，確定當前圖像和參考圖像的圖像大小是否相同，判斷水平環繞運動補償是否被致能以預測當前塊，以及相應地對當前塊進行運動補償，以從參考圖像中獲取參考塊。當前圖像和參考圖像的圖像大小不同時，水平環繞運動補償將被禁能。在水平環繞運動補償被致能以預測當前塊的情況下，當參考塊的一部分位於參考圖像的右/左邊界之外時，出界部分位於參考圖像內朝向左/右邊界。根據參考塊，當前塊被編碼或解碼。
在一些示例性實施例中，確定當前圖像和參考圖像的圖像大小是否相同的步驟包括：將當前圖像的圖像寬度與參考圖像的圖像寬度進行比較。當當前圖像的圖像寬度和參考圖像的圖像寬度不同時，當前圖像和參考圖像的圖像大小不同。在一實施例中，當前圖像的圖像高度與參考圖像的圖像高度進 一一步被比較，當圖像寬度和圖像高度中之一或兩者不同時，當前圖像和參考圖像的圖像大小也不同。
在示例性實施例中，確定當前圖像和參考圖像的圖像大小是否相同的步驟包括：檢查水平縮放是否被用來縮放參考圖像，以及當水平縮放被用來縮放參考圖像以預測當前圖像中的當前塊時，當前圖像和參考圖像的圖像大小不同。在另一實施例中，視訊處理方法檢查縮放是否被用來縮放參考圖像，以及當水平縮放和垂直縮放中之一或兩者被用來縮放參考圖像以預測當前圖像中的當前塊時，當前圖像和參考圖像的圖像大小不同。
在一些實施例中，當圖像大小不同或縮放被應用於參考圖像時，水平環繞運動補償被禁能。例如，視訊處理方法包括：當當前圖像和參考圖像的圖像輸出寬度不同時，確定縮放被用於參考圖像。該視訊處理方法還可將當前圖像和參考圖像的圖像輸出高度進行比較，以及當當前圖像和參考圖像的圖像輸出高度不同時，水平環繞運動補償被禁能。在另一示例中，視訊處理方法包括：當當前圖像的四個側面的縮放視窗偏移中的至少一個與參考圖像的對應縮放視窗偏移不同時，確定縮放被應用於參考圖像。
在一些示例性實施例中，當層間參考被允許時，水平環繞運動補償被禁能，例如，層間參考圖像存在標誌等於用於指定在幀間預測中層間參考被允許的標誌。
根據一實施例，當參考圖像重採樣被致能時，水平環繞運動補償被禁能。藉由允許參考圖像的圖像大小不同於當前圖像，參考圖像重採樣支援空間可伸縮性。
視訊解碼系統解析環繞致能標誌，以及確定水平環繞運動補償是否被致能以預測當前塊。當環繞致能標誌等於零時，水平環繞運動補償不被用於預測當前塊。環繞致能標誌從CU級別，圖像級別和序列級別之一或它們的組 合進行解析。例如，SPS環繞致能標誌從SPS解析，然後，如果SPS環繞致能標誌為真，則PPS環繞致能標誌從PPS解析。
當水平環繞運動補償被致能以預測當前塊時，視訊編碼系統確定環繞偏移。環繞偏移被用來定位參考塊內朝向左邊界或右邊界的出界部分。根據一實施例，環繞偏移在PPS中發送或從PPS解析。
本公開的各方面還提供一種用於在視訊編碼系統中對塊進行編碼或解碼的視訊處理裝置，以及當當前圖像和參考圖像的圖像大小不同時，水平環繞運動補償被禁能。該裝置包括一個或多個電子電路，該電子電路被配置為接收當前圖像中的當前塊的輸入視訊資料，確定參考圖像，確定當前圖像和參考圖像的圖像大小是否相同，確定水平環繞運動補償是否被致能以預測當前塊，對當前塊執行運動補償以從參考圖像獲得參考塊，以及根據參考塊對當前塊進行編碼或解碼。當前圖像和參考圖像的圖像大小不同時，水平環繞運動補償被禁能。當水平環繞運動補償被致能以預測當前塊時，當參考塊的一部分在參考圖像的右/左邊界之外時，出界部分位元於參考圖像內朝向左/右邊界圖像。
本公開的各方面還提供了一種非暫時性電腦可讀介質，存儲用於使裝置的處理電路執行視訊處理方法以對當前塊進行編碼或解碼的程式指令。當當前圖像和參考圖像的圖像大小不同時，水平環繞運動補償被禁能。藉由閱讀以下對具體實施例的描述，本發明的其他方面和特徵對於本領域之通常技術者將變得顯而易見。
20:當前圖像
22:參考圖像
202:當前CU
222:同位的CU
224:參考塊
226:參考塊
30:當前圖像
32:參考圖像
302:當前CU
322:同位的CU
324:參考塊
326:參考塊
S402、S404、S406、S408、S410、S412、S414:步驟
500:編碼器
510:幀內預測模組
512:幀間預測模組
514:開關
516:加法器
518:變換模組
520:量化模組
522:逆量化模組
524:逆變換模組
526:REC模組
528:環路處理濾波器
530:參考圖像緩衝器
532:熵編碼器
600:解碼器
610:熵解碼器
612:幀內預測模組
614:幀間預測模組
616:開關
618:REC模組
620:逆量化模組
622:逆變換模組
624:環路處理濾波器
626:參考圖像緩衝器
參考以下附圖，作為示例提出的本公開的各種實施例將被詳細描述，以及其中：第1圖示出致能適應性解析度更改的假設示例。
第2圖示出應用水平環繞運動補償來定位參考塊的示例。
第3圖示出將水平環繞運動補償應用於當前圖像中的當前塊的示例，該當前圖像參考參考圖像中的參考塊，該參考圖像與當前圖像大小不同。
第4圖示出視訊處理方法的實施例的流程圖，該視訊處理方法根據當前圖像與參考圖像之間的圖像大小禁能水平環繞運動補償。
第5圖示出結合根據本發明實施例的視訊處理方法的視訊編碼系統的示例性系統框圖。
第6圖示出結合根據本發明實施例的視訊處理方法的視訊解碼系統的示例性系統框圖。
容易理解的是，如本文附圖中一般描述和說明的本發明的組件可以以各種不同的配置來佈置和設計。因此，如附圖所示，本發明的系統和方法的實施例的以下更詳細的描述並非旨在限制所要求保護的本發明的範圍，而僅僅代表本發明的所選實施例。
在視訊編碼器和解碼器中實現當前版本的水平環繞運動補償存在幾個缺點。例如，在當前版本的水平環繞運動補償中，環繞偏移以序列級別發送，因此對於引用相同SPS的圖像中的所有塊，環繞偏移的值均保持不變。環繞偏移被設置為等於以填充式ERP(PERP)格式編解碼的360度視訊的等角投影(Rectangular Projection，簡稱ERP)寬度。但是，當RPR被致能時，具有不同解析度的參考圖像的環繞偏移應有所不同。另一個問題是，在當前版本中，只要引用SPS的圖像之一違反一致性規定(conformance regulation)，對於引用SPS的圖像中的所有塊，水平環繞運動補償被禁能。一致性規定與(CtbSizeY/MinCbSizeY+1)值和(pic_width_in_luma_samples/MinCbSizeY-1) 值之間的比較相關聯，其中CtbSizeY表示亮度編解碼樹塊(Coding Tree Block，簡稱CTB)的預定義大小，MinCbSizeY表示預定義的最小允許亮度編碼塊(Coding Block，簡稱CB)大小，而pic_width_in_luma_samples表示引用SPS的任一圖像的亮度樣本中的圖像寬度。當(CtbSizeY/MinCbSizeY+1)的值大於或等於(pic_width_in_luma_samples/MinCbSizeY-1的值)時，一致性規定藉由將標誌sps_ref_wraparound_engabled_flag設置為等於0來強制在序列級別禁能水平環繞運動補償)。
PPS中的水平環繞運動補償發送 本發明的一些實施例在諸如圖像參數集(picture parameter set，簡稱PPS)中的圖像級別中發送與水平環繞運動補償相關聯的資訊，而不是在序列級別發送水平環繞運動補償資訊。在圖像級別中發送水平環繞運動補償資訊的優點是可以提高應用水平環繞運動補償的靈活性和適應性。在一些實施例中，環繞偏移是在PPS中發送的，而不是在SPS中發送的。在一實施例中，水平環繞運動補償致能標誌pps_ref_wraparound_enabled_flag在當前圖像的PPS中發送，以指示在當前圖像中水平環繞運動補償是否被允許。僅當水平環繞運動補償致能標誌等於1時，環繞偏移才會在PPS中發送。
在一實施例中，環繞致能標誌在圖像級別中發送，以及如果環繞致能標誌指示水平環繞運動補償被允許，則環繞偏移被發送。圖像參數集合(Picture Parameter Set，簡稱PPS)原始位元組序列有效載荷(Raw Byte Sequence Payload，簡稱RBSP)語法的示例被顯示如下。
Figure 109141495-A0305-02-0010-4
語法元素pps_ref_wraparound_enabled_flag等於1指定水平環繞運動補償被應用於幀間預測，語法元素pps_ref_wraparound_enabled_flag等於零指 定水平環繞運動補償不被應用。當(CtbSizeY/MinCbSizeY+1)的值大於或等於(pic_width_in_luma_samples/MinCbSizeY-1)時，此語法元素的值等於零。語法元素pps_ref_wraparound_offset_minus1指定環繞偏移值減去1被用來以MinCbSizeY亮度樣本為單位計算水平環繞位置的值。ref_wraparound_offset_minus1的值被限制在(CtbSizeY/MinCbSizeY)+1到(pic_width_in_luma_samples/MinCbSizeY)-1(包含端點)範圍內。
在一些其他實施例中，與水平環繞運動補償相關聯的資訊可根據一個或多個預定義條件以不同的級別發送。例如，當RPR被禁能時，環繞偏移的資訊在SPS中被發送，而當RPR被致能時，環繞偏移的資訊在PPS中被發送。此示例的序列參數集合RBSP語法和圖像參數集合RBSP語法被顯示如下。
序列參數集合RBSP語法
Figure 109141495-A0305-02-0011-5
圖像參數集合RBSP語法
Figure 109141495-A0305-02-0011-6
語法元素sps_ref_wraparound_enabled_flag指定水平環繞運動補償是否被應用於幀間預測，語法元素ref_pic_resampling_enabled_flag指定在對參考SPS的分層編解碼視訊序列(Coded Layer-wise Video sequence，簡稱CLVS)中的編解碼圖像進行解碼時參考圖像重採樣是否被應用，以及語法元素sps_ref_wraparound_offset_minus1指定環繞偏移，該環繞偏移用於以MinCbSizeY 亮度樣本為單位計算水平環繞位置。sps_ref_wraparound_offset_minus1的值應在(CtbSizeY/MinCbSizeY)+1到(pic_width_in_luma_samples/MinCbSizeY)-1(包含端點)的範圍內，其中，pic_width_in_luma_samples是引用此SPS的任一PPS中的圖像寬度值。語法元素pps_ref_wraparound_present_flag指定與水平環繞運動補償相關的資訊是否在PPS中發送。當(CtbSizeY/MinCbSizeY+1)的值大於或等於(pic_width_in_luma_samples/MinCbSizeY-1)時，此PPS環繞存在標誌的值等於零。在一實施例中，當參考圖像重採樣致能標誌ref_pic_resampling_enabled_flag為0時，該PPS環繞存在標誌被設置為零，這意味著當參考圖像重採樣被禁能時，與水平環繞運動補償相關聯的資訊不存在於PPS中。當參考圖像重採樣被禁能時，與水平環繞運動補償相關的資訊(例如環繞偏移)在SPS中發送，以及當參考圖像重採樣被致能時，與水平環繞運動補償相關的資訊在PPS中發送。語法元素pps_ref_wraparound_offset_minus1指定用於以MinCbSizeY亮度樣本為單位計算水平環繞位置的偏移。ref_wraparound_offset_minus1的值被限制在(CtbSizeY/MinCbSizeY)+1到(ref_width_in_luma_samples/MinCbSizeY)-1(包含端點)範圍內。
在另一實施例中，與水平環繞運動補償相關聯的資訊以包括序列，圖像和塊級別的多個級別發送。例如，當SPS環繞致能標誌等於1時，SPS環繞致能標誌在SPS中發送，PPS環繞致能標誌在PPS中發送。當PPS環繞致能標誌等於1，CU環繞致能標誌被發送用於每個幀間編解碼的CU。下面示出該實施例的序列參數集合RBSP語法和PPS RBSP語法。
序列參數集合RBSP語法
Figure 109141495-A0305-02-0012-8
圖像參數集合RBSP語法
Figure 109141495-A0305-02-0012-10
Figure 109141495-A0305-02-0013-3
語法元素pps_ref_wraparound_present_flag指定水平環繞運動補償是否應用於引用PPS的所有圖像的幀間預測中。在一實施例中，當(CtbSizeY/MinCbSizeY+1)的值大於或等於(pic_width_in_luma_samples/MinCbSizeY-1)時，該語法元素的值為零。根據一實施例，當參考圖像重採樣被致能時，該語法元素的值為零。當語法元素sps_ref_wraparound_enabled_flag等於零時，語法元素pps_ref_wraparound_present_flag等於零。
藉由比較當前圖像和參考圖像來禁能水平環繞運動補償 在本發明的一些實施例中，僅當當前圖像與參考圖像之間的圖像大小相同時，水平環繞運動補償才被支援。也就是說，當當前圖像和參考圖像的圖像大小不同時，水平環繞運動補償被禁能。在一實施例中，當前圖像的圖像寬度與參考圖像的圖像寬度進行比較，以及當當前圖像和參考圖像的圖像寬度不同時，視訊編碼器或解碼器確定當前圖像和參考圖像的圖像大小不同。在另一實施例中，當前圖像的圖像寬度和圖像高度與參考圖像的圖像寬度和圖像高度兩者進行比較，以及當當前圖像和參考圖像的圖像寬度和圖像高度之一被確定為不同時，當前圖像和參考圖像的圖像大小被確定為不同。例如，當當前圖像的圖像寬度和圖像高度與參考圖像的圖像寬度和圖像高度都相同時(即pic_width==refPic_width && pic_height==refPic_height)，水平環繞運動補償可被致能。在一實施例中，視訊編碼器或解碼器檢查縮放是否被需要用來縮放參考圖像以預測當前圖像中的當前塊，以及當縮放被用來縮放參考圖像時，當前圖像和參考圖像的圖像大小被認為是不同的。
在一些實施例中，視訊編碼器或解碼器確定縮放是否被應用於參 考圖像，以及當縮放被應用於參考圖像時水平環繞運動補償被禁能。縮放的實施例是水平縮放，以及沒有水平縮放意味著當前圖像和參考圖像的圖像輸出寬度PicOutputWidthL相同。視訊編碼器或解碼器將當前圖像和參考圖像的圖像輸出寬度進行比較，以及在當前圖像和參考圖像的圖像輸出寬度不同時確定水平縮放被應用於參考圖像。在另一實施例中，視訊編碼器或解碼器還比較當前圖像和參考圖像的圖像輸出高度PicOutputHeightL，以及在當前圖像和參考圖像的圖像輸出高度不同時禁能水平環繞運動補償。圖像輸出寬度和圖像輸出高度表示應用縮放視窗後當前圖像和參考圖像的圖像大小。例如，當當前圖像的圖像輸出寬度與參考圖像的圖像輸出寬度相同，以及當前圖像的圖像輸出高度與參考圖像的圖像輸出高度相同時(即PicOutputWidth==refPicOutputWidth && PicOutputHeight==refPicOutputHeight)，水平環繞運動補償被致能。
在一實施例中，不是比較當前圖像和參考圖像的圖像輸出寬度和高度，而是當前圖像和參考圖像的四個側面的縮放視窗偏移被比較，以確定縮放是否被應用於參考圖像。縮放視窗偏移包括縮放視窗左偏移，縮放視窗右偏移，縮放視窗頂部偏移和縮放視窗底部偏移。例如，如果當前圖像的任一縮放視窗偏移與參考圖像的相應縮放視窗偏移不同，則水平環繞運動補償被禁能。
藉由組合以上實施例中的一個或多個，編碼器或解碼器可實現以下情形之一以致能或禁能環繞運動補償。在一實施例中，僅當當前圖像和參考圖像之間的圖像輸出寬度和圖像輸出高度都相同時，水平環繞運動補償才被支援。在另一實施例中，僅當當前圖像和參考圖像之間的圖像輸出寬度和圖像大小相同時，水平環繞運動補償才被支援。在又一實施例中，僅當當前圖像和參考圖像之間的所有圖像輸出寬度，圖像輸出高度和圖像大小相同時，水平環繞運動補償才被支援。例如，當當前圖像和參考圖像之間的所有圖像寬度，圖像高度，圖像輸出寬度和圖像輸出高度都相同時(也就是，pic_width==refPic_width && pic_height==refPic_height && PicOutputWidth==refPicOutputWidth && PicOutputHeight==refPicOutputHeight)，水平環繞運動補償才被致能。在另一示例中，僅當當前圖像和參考圖像之間的所有圖像寬度，圖像高度以及四個側面的縮放視窗偏移相同時，水平環繞運動補償才被致能。
視訊編碼器或解碼器的實施例檢查在幀間預測中層間參考是否被允許，以及當在幀間預測中層間參考被允許時，禁能水平環繞運動補償。當參考圖像和當前圖像位於不同的層中時，需要對參考圖像進行縮放。在視訊位元流中層間參考圖像存在標誌由視訊編碼器發送，指示層間參考是否被允許，因此，根據一實施例，當層間參考圖像存在標誌等於1時，視訊解碼器禁能水平環繞運動補償。在一實施例中，層間參考圖像存在標誌在SPS級別中發送。根據一實施例，SPS或PPS中的環繞致能標誌的值取決於層間參考圖像存在標誌的值。根據另一實施例，根據層間參考圖像存在標誌的值，環繞偏移被適應性地發送。
禁能水平環繞運動補償的一些實施例將環繞致能標誌的值設置為等於零，其中，環繞致能標誌是在塊級別，片段級別，圖像級別或序列級別中發送或解析的。例如，當當前圖像和參考圖像的圖像大小不同時，當前圖像中當前塊的環繞致能標誌被設置為零。在另一示例中，當參考圖像的縮放被要求以預測當前塊時，當前圖像中的當前塊的環繞致能標誌被設置為零。在一實施例中，高級環繞致能標誌在諸如PPS之類的圖像級別中發送，以及對於當前圖像中引用PPS的當前塊，塊級環繞致能標誌被發送。當高級環繞致能標誌等於零或當前圖像和參考圖像的圖像大小不同時，塊級環繞致能標誌被設置為零。僅當高級環繞致能標誌等於1以及當前圖像和參考圖像的圖像大小相同時，塊級環繞致能標誌才被設置為1。在解碼器側運動向量細化(Decoder-side Motion Vector Refinement，簡稱DMVR)操作中的亮度採樣雙線性內插過程中，視訊編碼器的實施例確定致能還是禁能當前塊的水平環繞運動補償，以及相應地，在運動補 償過程中，視訊編碼器執行當前塊的水平環繞運動補償。當前塊的示例是編解碼單元(coding unit，簡稱CU)。在從PPS解析的高級環繞致能標誌等於1的情況下，對於引用PPS的圖像中的每個幀間預測塊，視訊解碼器的實施例根據塊級環繞致能標誌確定水平環繞運動補償被致能還是禁能用於每個幀間預測塊。
藉由比較當前圖像和參考圖像禁能水平環繞運動補償的示例性流程圖。第4圖示出根據本發明實施例的視訊編碼或解碼系統的示例性流程圖，該視訊編碼或解碼系統用於處理將要藉由幀間預測來編碼或解碼的當前塊。在步驟S402中，視訊編碼或解碼系統接收與位於當前圖像中的當前塊相關聯的輸入資料。當前塊是幀間預測塊，或者當前塊將藉由幀間預測進行編碼。在步驟S404中，當前塊的參考圖像被確定。在步驟S406中，視訊編碼或解碼系統檢查當前圖像和參考圖像的圖像大小是否相同，以及在步驟S408中，在當前圖像和參考圖像的圖像大小相同時時，進一步檢查是否藉由水平環繞運動補償來預測當前塊或將要預測當前塊。步驟S406的一些示例確定當圖像寬度相同，圖像高度相同，水平縮放不被需要，縮放不被需要，圖像輸出寬度相同，圖像輸出高度相同，縮放視窗偏移相同或以上條件的任一組合為真時，當前圖像和參考圖像的圖像大小相同。如果在步驟S406中當前圖像和參考圖像的圖像大小不同，或者在步驟S408中沒有使用水平環繞運動補償來預測當前塊，則在步驟S412中，藉由禁能水平環繞MC，視訊編碼或解碼系統會對當前塊執行運動補償以從參考圖像獲得參考塊，其中當前塊未被編碼或將藉由水平環繞運動補償被編碼。在步驟S410中，當參考塊的一部分在參考圖像的右/左邊界之外時，藉由將出界部分定位於參考圖像內朝向左/右邊界，視訊編碼或解碼系統對當前塊執行水平環繞運動補償以從參考圖像獲得參考塊。在步驟S414中，根據在步驟S410或步驟S412中獲得的參考塊，當前圖像中的當前塊被編碼或解碼。
互斥RPR和水平環繞運動補償 本發明的其他一些實施例相互排 斥參考圖像重採樣(Reference Picture Resampling，簡稱RPR)和水平環繞運動補償。在這些實施例中，當RPR被致能時，水平環繞運動補償被禁能。例如，當RPR被致能時，以SPS級別發送的環繞致能標誌被設置為零。SPS RBSP語法的兩個示例在以下被顯示。語法元素sps_ref_wraparound_enabled_flag指定水平環繞運動補償是否被應用於幀間預測，語法元素ref_pic_resampling_enabled_flag指定在對參考SPS的CLVS中的編碼圖像進行解碼時參考圖像重採樣是否可被應用。語法元素sps_ref_wraparound_offset_minus1指定以MinCbSizeY亮度樣本為單位用於計算水平環繞位置的偏移。
Figure 109141495-A0305-02-0017-11
在一些其他實施例中，在確定水平環繞運動補償是否被致能時，層間參考被考慮，也就是說，在RPR被致能或層間參考被致能時，水平環繞運動補償被禁能。例如，當RPR被致能或當層間參考圖像存在標誌inter_layer_ref_pics_present_flag等於1時，在SPS中發送的環繞啟用標誌被設置為零。序列參數集合RBSP語法的兩個示例在以下被顯示。語法元素inter_layer_ref_pics_present_flag指定層間參考圖像(Inter Layer Reference Picture，簡稱ILRP)是否被用於CLVS中任一編解碼圖像的幀間預測。在一實施例中，當sps_video_parameter_set_id等於零時，inter_layer_ref_pics_present_flag的值被推斷為等於零。當vps_independent_layer_flag[GeneralLayerIdx[nuh_layer_id]]等於1時，inter_layer_ref_pics_present_flag的值應等於零。
Figure 109141495-A0305-02-0018-13
視訊編碼器和解碼器的實現 上述提出的用於子塊運動補償的視訊處理方法可以在視訊編碼器或解碼器中實現。例如，所提出的視訊處理方法在編碼器的幀間預測模組和/或解碼器的幀間預測模組中實現。在另一示例中，所提出的視訊處理方法在編碼器的解碼器側運動向量細化(Decoder-side Motion Vector Refinement，簡稱DMVR)模組和運動補償(Motion Compensation，簡稱MC)模組和/或解碼器的DMVR模組和MC模組中實現。可替代地，任一所提出的方法被實現為與一個幀間預測模組或組合相耦合的電路，和/或與解碼器的一個幀間預測模組或組合相耦合的電路，以便提供幀間預測所需的資訊。第5圖示出用於實現本發明的各個實施例的視訊編碼器500的示例性系統框圖。幀內預測 模組510基於當前圖像的重構視訊資料來提供幀內預測子。幀間預測模組512執行運動估計(motion estimation，簡稱ME)和MC，以基於來自其他圖像的視訊資料提供幀間預測子。根據本發明的一些實施例，為了對當前圖像中的當前塊進行編碼，當當前圖像和參考圖像的圖像大小不同時，和/或當縮放被需要以縮放參考圖像時，水平環繞運動補償不被允許。幀間預測模組512確定參考圖像中當前塊的參考塊，以及如果在編碼當前塊時水平環繞運動補償被允許，則當參考塊的一部分在參考圖像的右/左邊界之外時，參考塊的出界部分位於參考圖像內朝向左/右邊界。否則，當參考塊的一部分在參考圖像的右/左邊界之外時，參考塊的出界部分藉由填充來導出。幀內預測模組510或幀間預測模組512將所選擇的預測子提供給加法器516以形成預測誤差，也被稱為預測殘差。當前塊的預測殘差由變換模組(Transformation module，簡稱T)518進一步處理，隨後由量化模組(Quantizaton module，簡稱Q)520處理。然後，經變換和量化的殘差訊號由熵編碼器532編碼以形成視訊位元流。然後，視訊位元流與輔助資訊被打包在一起。然後，當前塊的經變換和量化的殘差訊號由逆量化模組(Inverse QuantizationIQ)522和逆變換模組(Inverse Transformation，簡稱IT)524進行處理以恢復預測殘差。如第5圖所示，預測殘差藉由在重構模組(Reconsruction Module，簡稱REC)526處將其加回到所選擇的預測子來恢復，以產生重構的視訊資料。重構的視訊資料可被存儲在參考圖像緩衝器(Ref.Pict.Buffer)530中，以及用於其他圖像的預測。從REC模組526恢復的重構的視訊資料可能由於編碼處理而遭受各種損害；因此，從REC模組526恢復的重構視訊資料可能遭受各種損害。因此，在存儲至參考圖像緩衝器530中之前，環路處理濾波器528被用於重構的視訊資料，以進一步提高圖像品質。
第6圖示出用於解碼從第5圖的視訊編碼器500生成的視訊位元流的相應視訊解碼器600。視訊位元流是視訊解碼器600的輸入，以及由熵解碼器 610解碼以解析和恢復經變換和經量化的殘差訊號以及其他系統資訊。解碼器600的解碼過程類似於編碼器500處的重構迴圈，不同之處在於解碼器600僅在幀間預測614中需要運動補償預測。每個塊由幀內預測模組612或幀間預測模組614解碼。根據本發明的一些實施例，為了解碼當前圖像中的當前塊，幀間預測模組614確定水平環繞運動補償是否被用來預測當前塊，其中，當當前圖像和參考圖片的圖像大小的圖像大小不同或縮放被需要以縮放參考圖片時，水平環繞運動補償被禁能。幀間預測模組614對當前塊執行運動補償以獲得參考圖片中的參考塊。在水平環繞運動補償被致能以對當前塊進行解碼的情況下，當參考塊的一部分在參考圖像的左/右邊界之外時，出界部分位於參考圖片內朝向右/左邊界。根據解碼的模式資訊，開關616從幀內預測模組612選擇幀內預測子，或者從幀間預測模組614選擇幀間預測子。與每個塊相關聯的經變換和經量化的殘差訊號由逆量化模組(Inverse Quantization，簡稱IQ)620和逆變換模組(Inverse Trnasformation，簡稱IT)622來恢復。藉由將預測子加回至REC模組618中，恢復的殘差訊號被重構以產生重構視訊。重構視訊由環路處理濾波器(濾波器)624進一步處理以生成最終的解碼視訊。如果當前解碼的圖片是按解碼順序的後續圖片的參考圖片，則當前解碼的圖片的重構視訊也存儲在參考圖像緩衝器(Ref.Pict.Buffer)626。
第5圖和第6圖中的視訊編碼器500和視訊解碼器600的各種組件可由硬體組件，配置為執行存儲在記憶體中的程式指令的一個或多個處理器，或硬體和處理器的組合來實現。例如，處理器執行程式指令以控制與當前圖片相關聯的輸入資料的接收。該處理器配備有一個或多個處理核心。在一些示例中，處理器執行程式指令以執行編碼器500和解碼器600中的一些組件中的功能，以及與處理器電耦合的記憶體用於存儲程式指令，與塊的重構圖像相對應的資訊和/或編碼或解碼過程中的中間資料。在一些實施例中，記憶體包括非暫時性電 腦可讀介質，例如半導體或固態記憶體，隨機存取記憶體(random access memory，簡稱RAM)，唯讀記憶體(read-only memory，簡稱ROM)，硬碟，光碟或其他合適的存儲介質。記憶體也可以是上面列出的兩個或多個非暫時性電腦可讀介質的組合。如圖所示。參照第5圖和第6圖，編碼器500和解碼器600可以在同一電子設備中實現，因此，如果在同一電子設備中實現，則編碼器500和解碼器600的各種功能組件可以被共用或重用。
用於編碼或解碼的視訊處理方法的實施例可以在集成到視訊壓縮晶片中的電路或集成到視訊壓縮軟體中的程式碼中執行，以執行上述處理。例如，確定當前圖片和參考圖片的圖片大小是否相同可以在將在電腦處理器，數位訊號處理器(Digital Signal Processor，簡稱DSP)，微處理器或現場可程式設計閘陣列(field programmable gate array，簡稱FPGA)上執行的程式碼中實現。這些處理器可被配置為藉由執行定義本發明所體現的特定方法的機器可讀軟體代碼或韌體代碼來執行根據本發明的特定任務。
在整個說明書中，對“一實施例”，“一些實施例”或類似語言的引用意味著結合這些實施例描述的特定特徵，結構或特性可以包括在本發明的至少一個實施例中。因此，在整個說明書中各處出現的短語“在一實施例中”或“在一些實施例中”並不一定全都指同一實施例，這些實施例可以單獨實現或與一個或多個其他實施例結合實現。此外，在一個或多個實施例中，所描述的特徵，結構或特性可以以任何合適的方式組合。然而，相關領域的技術人員將認識到，可以在沒有一個或多個特定細節的情況下，或者在沒有其他具體方法，組件等的情況下實踐本發明。在其他情況下，習知的結構或操作未被示出或未被詳細描述以避免混淆本發明的各方面。
在不脫離本發明的精神或基本特徵的情況下，本發明可以以其他具體形式實施。所描述的例子僅在所有方面被認為是說明性的而不是限制性 的。因此，本發明的範圍由申請專利範圍而不是前面的描述來指示。屬於申請專利範圍的等同物的含義和範圍的所有變化將被包括在其範圍內。
S402、S404、S406、S408、S410、S412、S414:步驟

Claims (18)

  1. 一種視訊編解碼系統中的視訊處理方法，包括： 接收一當前圖像中與一當前塊相關聯的輸入視訊資料； 確定該當前塊的一參考圖像； 確定該當前圖像和該參考圖像的圖像大小是否相同； 確定水平環繞運動補償是否被致能用於預測該當前塊，其中當該當前圖像和該參考圖像的該圖像大小不同時，水平環繞運動補償被禁能； 對該當前塊執行運動補償以從該參考圖像獲取該參考塊，其中當該水平環繞運動補償被致能用於預測該當前塊時，當該參考塊的一部分在該參考圖像的左邊界之外時，一出界部分被定位於該參考圖像内朝向一右邊界，以及當該參考塊的一部分在該參考圖像的右邊界之外時，一出界部分被定位於該參考圖像内朝向一左邊界；以及 根據該參考塊對該當前塊進行編碼或解碼。
  2. 如請求項1所述之視訊編解碼系統中的視訊處理方法，其中，確定該當前圖像和該參考圖像的該圖像大小是否相同的步驟包括將該當前圖像的一圖像寬度與該參考圖像的一圖像寬度相比較，其中當該當前圖像的該當前寬度和該參考圖像的該圖像寬度不同時，該當前圖像和該參考圖像的該圖像大小不同。
  3. 如請求項2所述之視訊編解碼系統中的視訊處理方法，其中，確定該當前圖像和該參考圖像的該圖像大小是否相同的步驟進一步包括將該當前圖像的一圖像高度與該參考圖像的一圖像高度相比較，其中當該當前圖像的該當前高度和該參考圖像的該圖像高度不同時，該當前圖像和該參考圖像的該圖像大小不同。
  4. 如請求項1所述之視訊編解碼系統中的視訊處理方法，其中，確定該當前圖像和該參考圖像的該圖像大小是否相同的步驟包括檢查水平縮放是否被需要用於縮放該參考圖像，其中當該水平縮放被應用於縮放該參考圖像以預測該當前圖像中的該當前塊時，該當前圖像和該參考圖像的該圖像大小不同。
  5. 如請求項1所述之視訊編解碼系統中的視訊處理方法，其中，確定該當前圖像和該參考圖像的該圖像大小是否相同的步驟包括檢查縮放是否被需要用於縮放該參考圖像，其中當水平縮放或垂直縮放之一或兩者被應用於縮放該參考圖像以預測該當前圖像中的該當前塊時，該當前圖像和該參考圖像的該圖像大小不同。
  6. 如請求項1所述之視訊編解碼系統中的視訊處理方法，進一步包括確定縮放是否被應用於該參考圖像，其中當縮放被應用於該參考圖像時，水平環繞運動補償被禁能。
  7. 如請求項6所述之視訊編解碼系統中的視訊處理方法，其中，確定縮放是否被應用於該參考圖像的步驟包括比較該當前圖像和該參考圖像的圖像輸出寬度，其中當該當前圖像和該參考圖像的該圖像輸出寬度不同時，縮放被確定應用於該參考圖像。
  8. 如請求項7所述之視訊編解碼系統中的視訊處理方法，其中，進一步包括比較該當前圖像和該參考圖像的該圖像輸出高度，其中當該當前圖像和該參考圖像的該圖像輸出高度不同時，水平環繞運動補償被禁能。
  9. 如請求項6所述之視訊編解碼系統中的視訊處理方法，其中，確定縮放是否被應用於該參考圖像的步驟包括比較該當前圖像的四個側面的縮放視窗偏移和該參考圖像的四個側面的縮放視窗偏移，其中當該當前圖像和該參考圖像之間的多個縮放視窗偏移之一不同時，縮放被確定應用於該參考圖像。
  10. 如請求項1所述之視訊編解碼系統中的視訊處理方法，其中，當一層間參考圖像存在標誌等於1時，水平環繞運動補償被禁能，以及該層間參考圖像存在標誌等於1指定層間參考被允許用於幀間預測。
  11. 如請求項1所述之視訊編解碼系統中的視訊處理方法，其中，當參考圖像重采樣被致能時，水平環繞運動補償被禁能，其中藉由允許多個參考圖像的圖像大小不同於該當前塊的該圖像大小，該參考圖像重采樣支援空間可伸縮性。
  12. 如請求項1所述之視訊編解碼系統中的視訊處理方法，其中，確定水平環繞運動補償是否被致能用於預測該當前塊的步驟包括解析一環繞致能標誌，其中當該環繞致能標誌等於0時，水平環繞運動補償不被用來預測該當前塊。
  13. 如請求項12所述之視訊編解碼系統中的視訊處理方法，其中該環繞致能標誌從一編解碼級別，一圖像級別和一序列級別中的一個或結合中解析。
  14. 如請求項13所述之視訊編解碼系統中的視訊處理方法，其中，該環繞致能標誌從圖像參數集合和序列參數集合中的一個或兩者中解析。
  15. 如請求項1所述之視訊編解碼系統中的視訊處理方法，進一步包括當水平環繞運動補償被致能用於預測該當前塊時，確定一環繞偏移，其中根據該環繞偏移，該出界部分被定位於該參考塊内朝向該左或右邊界。
  16. 如請求項15所述之視訊編解碼系統中的視訊處理方法，其中，該環繞偏移在圖像參數集合中發送或從圖像參數集合中解析。
  17. 一種視訊編解碼系統中的視訊資料處理裝置，該裝置包括一個或多個電子電路，被設置為： 接收一當前圖像中與一當前塊相關聯的輸入視訊資料； 確定該當前塊的一參考圖像； 確定該當前圖像和該參考圖像的圖像大小是否相同； 確定水平環繞運動補償是否被致能用於預測該當前塊，其中當該當前圖像和該參考圖像的該圖像大小不同時，水平環繞運動補償被禁能； 對該當前塊執行運動補償以從該參考圖像獲取該參考塊，其中當該水平環繞運動補償被致能用於預測該當前塊時，當該參考塊的一部分在該參考圖像的左邊界之外時，一出界部分被定位於該參考圖像内朝向一右邊界，以及當該參考塊的一部分在該參考圖像的右邊界之外時，一出界部分被定位於該參考圖像内朝向一左邊界；以及 根據該參考塊對該當前塊進行編碼或解碼。
  18. 一種存儲程式指令的非暫時性電腦可讀介質，該程式指令使得一裝置的一處理電路執行視訊處理方法，以及該方法包括： 接收一當前圖像中與一當前塊相關聯的輸入視訊資料； 確定該當前塊的一參考圖像； 確定該當前圖像和該參考圖像的圖像大小是否相同； 確定水平環繞運動補償是否被致能用於預測該當前塊，其中當該當前圖像和該參考圖像的該圖像大小不同時，水平環繞運動補償被禁能； 對該當前塊執行運動補償以從該參考圖像獲取該參考塊，其中當該水平環繞運動補償被致能用於預測該當前塊時，當該參考塊的一部分在該參考圖像的左邊界之外時，一出界部分被定位於該參考圖像内朝向一右邊界，以及當該參考塊的一部分在該參考圖像的右邊界之外時，一出界部分被定位於該參考圖像内朝向一左邊界；以及 根據該參考塊對該當前塊進行編碼或解碼。
TW109141495A 2019-11-27 2020-11-26 視訊編解碼系統中的視訊處理方法和裝置 TWI752739B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962940958P 2019-11-27 2019-11-27
US62/940,958 2019-11-27
US17/104,037 US11539939B2 (en) 2019-11-27 2020-11-25 Video processing methods and apparatuses for horizontal wraparound motion compensation in video coding systems
US17/104,037 2020-11-25

Publications (2)

Publication Number Publication Date
TW202127885A TW202127885A (zh) 2021-07-16
TWI752739B true TWI752739B (zh) 2022-01-11

Family

ID=75971413

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109141495A TWI752739B (zh) 2019-11-27 2020-11-26 視訊編解碼系統中的視訊處理方法和裝置

Country Status (2)

Country Link
US (1) US11539939B2 (zh)
TW (1) TWI752739B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4074042A4 (en) * 2019-12-17 2023-01-25 Alibaba Group Holding Limited METHODS OF ACHIEVING MOTION COMPENSATION WITH ENVELOPMENT
US11589037B2 (en) * 2019-12-20 2023-02-21 Qualcomm Incorporated Motion compensation using size of reference picture
US11425420B2 (en) * 2019-12-27 2022-08-23 Qualcomm Incorporated Wraparound offsets for reference picture resampling in video coding
US11368708B2 (en) * 2020-01-08 2022-06-21 Tencent America LLC Method for combination of wrap-around offset and reference picture resampling
WO2021173475A1 (en) * 2020-02-24 2021-09-02 Alibaba Group Holding Limited Methods for combining decoder side motion vector refinement with wrap-around motion compensation
WO2021195546A1 (en) * 2020-03-26 2021-09-30 Alibaba Group Holding Limited Methods for signaling video coding data
WO2021194308A1 (ko) * 2020-03-26 2021-09-30 엘지전자 주식회사 랩-어라운드 움직임 보상에 기반하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2024016955A1 (en) * 2022-07-22 2024-01-25 Mediatek Inc. Out-of-boundary check in video coding

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170085917A1 (en) * 2015-09-23 2017-03-23 Nokia Technologies Oy Method, an apparatus and a computer program product for coding a 360-degree panoramic video
US20180109810A1 (en) * 2016-10-17 2018-04-19 Mediatek Inc. Method and Apparatus for Reference Picture Generation and Management in 3D Video Compression
EP3422724A1 (en) * 2017-06-26 2019-01-02 Nokia Technologies Oy An apparatus, a method and a computer program for omnidirectional video
TW201944781A (zh) * 2018-04-16 2019-11-16 聯發科技股份有限公司 視訊編解碼系統中具有重疊塊運動補償的視訊處理的方法以及裝置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10511839B2 (en) * 2015-09-23 2019-12-17 Lg Electronics Inc. Image encoding/decoding method and device for same
WO2021007328A1 (en) * 2019-07-11 2021-01-14 Tencent America LLC Method and apparatus for video coding
US11095916B2 (en) * 2019-07-23 2021-08-17 Qualcomm Incorporated Wraparound motion compensation in video coding
US11659201B2 (en) * 2019-08-16 2023-05-23 Qualcomm Incorporated Systems and methods for generating scaling ratios and full resolution pictures

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170085917A1 (en) * 2015-09-23 2017-03-23 Nokia Technologies Oy Method, an apparatus and a computer program product for coding a 360-degree panoramic video
US20180109810A1 (en) * 2016-10-17 2018-04-19 Mediatek Inc. Method and Apparatus for Reference Picture Generation and Management in 3D Video Compression
EP3422724A1 (en) * 2017-06-26 2019-01-02 Nokia Technologies Oy An apparatus, a method and a computer program for omnidirectional video
TW201944781A (zh) * 2018-04-16 2019-11-16 聯發科技股份有限公司 視訊編解碼系統中具有重疊塊運動補償的視訊處理的方法以及裝置

Also Published As

Publication number Publication date
US20210160482A1 (en) 2021-05-27
TW202127885A (zh) 2021-07-16
US11539939B2 (en) 2022-12-27

Similar Documents

Publication Publication Date Title
TWI752739B (zh) 視訊編解碼系統中的視訊處理方法和裝置
KR102653570B1 (ko) 참조 픽처 리샘플링을 위한 신호
US20120230423A1 (en) Line memory reduction for video coding and decoding
WO2017158236A2 (en) A method, an apparatus and a computer program product for coding a 360-degree panoramic images and video
US20120320970A1 (en) Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11146824B2 (en) Video encoding or decoding methods and apparatuses related to high-level information signaling
CN113826382B (zh) 视频编解码中的自适应比特深度转换
TWI770681B (zh) 視訊編碼或解碼系統中的視訊處理方法和裝置
JP2024009018A (ja) サブピクチャのパラメータセットシグナリングにおける構文制約
JP2013258771A (ja) 予測データ精緻化を使用してビデオを符号化する方法及び装置
TWI535273B (zh) 經組態以寫碼視訊資訊之設備及視訊寫碼裝置、編碼及解碼視訊資訊之方法與非暫態電腦可讀媒體
US20130101027A1 (en) Deblocking control by individual quantization parameters
WO2021068954A1 (en) High level syntax for video coding tools
CN114641992B (zh) 参考图片重采样的信令
US20220353523A1 (en) Method and device for coding image/video on basis of prediction weighted table
US20230217015A1 (en) Prediction weighted table-based image/video coding method and apparatus
CN114600461A (zh) 用于多编解码工具的计算
KR20220100019A (ko) 루프 필터링을 제어하기 위한 영상 코딩 장치 및 방법
US20220400287A1 (en) Method and Apparatus for Signaling Horizontal Wraparound Motion Compensation in VR360 Video Coding
JP2024020420A (ja) 適応ループフィルタリングのための境界位置
KR20220100018A (ko) 필터링 기반 영상 코딩 장치 및 방법
US20230217017A1 (en) Method, An Apparatus and a Computer Program Product for Implementing Gradual Decoding Refresh
WO2024006231A1 (en) Methods and apparatus on chroma motion compensation using adaptive cross-component filtering
KR20230010739A (ko) 비디오 코딩 방법 및 장치
KR20240049612A (ko) 비디오 처리를 위한 방법, 기기 및 매체