TW202404367A - 空間幾何分割模式 - Google Patents

空間幾何分割模式 Download PDF

Info

Publication number
TW202404367A
TW202404367A TW112124462A TW112124462A TW202404367A TW 202404367 A TW202404367 A TW 202404367A TW 112124462 A TW112124462 A TW 112124462A TW 112124462 A TW112124462 A TW 112124462A TW 202404367 A TW202404367 A TW 202404367A
Authority
TW
Taiwan
Prior art keywords
ipm
template
candidate
coding block
block
Prior art date
Application number
TW112124462A
Other languages
English (en)
Inventor
陳婭
卡拉姆 納澤
安托萬 羅伯特
凱文 勒茲
Original Assignee
法商內數位Ce專利控股公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 法商內數位Ce專利控股公司 filed Critical 法商內數位Ce專利控股公司
Publication of TW202404367A publication Critical patent/TW202404367A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

揭示與空間幾何分割模式(SGPM)相關聯的系統、方法及儀器。在實例中,一種裝置(例如,視訊編碼器及/或視訊解碼器)可基於一編碼區塊之一第一範本而導算一第一候選幀內預測模式(IPM)。該裝置可基於該編碼區塊之一第二範本導算一第二候選IPM。該裝置可基於該第一候選IPM及該第二候選IPM來處理該編碼區塊。

Description

空間幾何分割模式
相關申請案之交互參照
本申請案主張2022年7月5日申請之歐洲臨時專利申請案第22306007.0號之優先權,其全文以引用方式併入本文中。
視訊編解碼系統可用以壓縮數位視訊信號例如以降低此類信號所需的儲存及/或傳輸頻寬。視訊編解碼系統可包括例如基於區塊、基於小波及/或基於物件之系統。
揭示與空間幾何分割模式(spatial geometric partition mode, SGPM)相關聯的系統、方法及儀器。在實例中,一種視訊解碼裝置可基於一編碼區塊之一第一範本而導算一第一候選幀內預測模式(intra prediction mode, IPM)。該裝置可基於該編碼區塊之一第二範本導算一第二候選IPM。該裝置可基於該第一候選IPM及該第二候選IPM來解碼該編碼區塊。該第二範本可與該第一範本不同。
該裝置可將該第一候選IPM及該第二候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單,且可基於該IPM候選者清單來解碼該編碼區塊。
該裝置可基於該編碼區塊之一分割模式而選擇一第三候選IPM。該裝置可將該第一候選IPM、該第二候選IPM、及該第三候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單。可基於該IPM候選者清單來解碼該編碼區塊。
該編碼區塊可包括一第一分割區及一第二分割區。該裝置可基於該第一候選IPM及該第二候選IPM產生與該編碼區塊相關聯的一IPM候選者清單。該裝置可基於一空間幾何分割模式(SGPM)索引及該IPM候選者清單來判定該第一分割區的一第一預測模式及該第二分割區的一第二預測模式。
該裝置可判定一SGPM用於該編碼區塊。基於判定該SGPM用於該編碼區塊,該裝置可獲得該編碼區塊之該第一範本及該第二範本以進行IPM導算。該第二範本可與該第一範本不同。
該裝置可判定一SGPM用於該編碼區塊。基於判定該SGPM用於該編碼區塊,該裝置可獲得該編碼區塊之該第一範本及該第二範本以進行IPM導算。該裝置可基於該編碼區塊之一第三範本而對與該編碼區塊相關聯的一SGPM候選者清單中的候選者進行排名。該編碼區塊之該第三範本可包括該第一範本及該第二範本。
該裝置可基於與該編碼區塊相關聯的一分割模式來判定該編碼區塊之該第一範本及該第二範本。
該編碼區塊可包括一第一分割區及一第二分割區。該裝置可基於該第一分割區來判定該編碼區塊之該第一範本。該裝置可至少基於該第一範本導出之該第一候選IPM來解碼該編碼區塊之該第一分割區。該裝置可基於該第二分割區來判定該編碼區塊之該第二範本。該裝置可至少基於該第二範本導出之該第二候選IPM來解碼該編碼區塊之該第二分割區。
該裝置可獲得該編碼區塊之一左範本作為該第一範本。該裝置可獲得該編碼區塊之一頂範本作為該第二範本。該裝置可獲得具有寬度為1的該編碼區塊之一左範本作為該第一範本。該裝置可獲得具有高度為1的該編碼區塊之一頂範本作為該第二範本。
當基於該第一範本導算該第一候選IPM時,該裝置可獲得與該編碼區塊相關聯的最有可能模式(most probable mode, MPM)。該裝置可判定對應於該等MPM的該第一範本之預測。該裝置可基於比較該第一範本與對應於該等最有可能模式的該等預測而從該等MPM選擇該第一候選IPM。
揭示與空間幾何分割模式(SGPM)相關聯的系統、方法及儀器。在實例中,一種視訊編碼裝置可基於一編碼區塊之一第一範本而導算一第一候選幀內預測模式(IPM)。該裝置可基於該編碼區塊之一第二範本導算一第二候選IPM。該裝置可基於該第一候選IPM及該第二候選IPM來編碼該編碼區塊。
該裝置可將該第一候選IPM及該第二候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單,且可基於該IPM候選者清單來編碼該編碼區塊。
該裝置可基於該編碼區塊之一分割模式而選擇一第三候選IPM。該裝置可將該第一候選IPM、該第二候選IPM、及該第三候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單。可基於該IPM候選者清單來編碼該編碼區塊。
該編碼區塊可包括一第一分割區及一第二分割區。該裝置可判定該第一分割區的一第一預測模式及該第二分割區的一第二預測模式。該裝置可基於該第一候選IPM及該第二候選IPM產生與該編碼區塊相關聯的一IPM候選者清單。該裝置可基於該第一預測模式及該第二預測模式來判定一特殊幾何分割模式(SGPM)索引。該裝置可將該索引包括在該IPM候選者清單中。該裝置可判定一SGPM用於該編碼區塊。基於判定該SGPM用於該編碼區塊,該裝置可獲得該編碼區塊之該第一範本及該第二範本以進行IPM導算。該第二範本可與該第一範本不同。
該裝置可判定一SGPM用於該編碼區塊。基於判定該SGPM用於該編碼區塊,該裝置可獲得該編碼區塊之該第一範本及該第二範本以進行IPM導算。該裝置可獲得包含該第一範本及該第二範本的該編碼區塊之一第三範本。該裝置可基於該編碼區塊之該第三範本而對與該編碼區塊相關聯的一SGPM候選者清單中的候選者進行排名。該裝置可基於該等經排名候選者來判定一SGPM索引。
該裝置可基於與該編碼區塊相關聯的一分割模式來判定該編碼區塊之該第一範本及該第二範本。
該編碼區塊可包括一第一分割區及一第二分割區。該裝置可基於該第一分割區來判定該編碼區塊之該第一範本。該裝置可至少基於該第一範本導出之該第一候選IPM而編碼該編碼區塊之該第一分割區。該裝置可基於該第二分割區來判定該編碼區塊之該第二範本。該裝置可至少基於該第二範本導出之該第二候選IPM而編碼該編碼區塊之該第二分割區。
當基於該第一範本導算該第一候選IPM時進一步包含,該裝置可獲得與該編碼區塊相關聯的最有可能模式(MPM)。該裝置可判定對應於該等MPM的該第一範本之預測。該裝置可基於比較該第一範本與對應於該等最有可能模式的該等預測而從該等MPM選擇該第一候選IPM。
該裝置可基於該編碼區塊之一分割模式而選擇一第三候選IPM。該裝置可基於該編碼區塊之一預測與該編碼區塊之一重建之間的絕對差異總和(SAD),依遞增順序對該第一候選IPM、該第二候選IPM及/或該第三候選IPM的組合進行排名。
揭示與空間幾何分割模式(SGPM)相關聯的系統、方法及儀器。在實例中,該裝置可獲得與一目前區塊相關聯的特性。可基於該等特性中之一或多者,針對與該目前區塊相關聯的SGPM來判定一幀內預測模式候選者清單大小。可基於該所判定幀內預測模式候選者清單大小,針對該目前區塊獲得一幀內預測模式候選者清單。在實例中,可基於該等特性,判定用於幀內預測模式候選者類型之一順序。可基於該所判定順序而獲得該幀內預測模式候選者清單。
在實例中,該裝置可獲得與一目前區塊相關聯的特性。可基於該等特性中之一或多者,針對與該目前區塊相關聯的SGPM來判定一分割模式候選者清單大小。可基於該所判定分割模式候選者清單大小,針對該目前區塊獲得一分割模式候選者清單。在實例中,可基於該等特性來判定針對分割模式候選者的一選擇。
在實例中,該裝置可獲得與一目前區塊相關聯的特性。可基於該等特性中之一或多者,判定與該目前區塊相關聯的一SGPM候選者清單大小。可基於該所判定SGPM候選者清單大小而獲得與該目前區塊相關聯的一SGPM候選者清單。可使用該SGPM候選者清單來解碼該目前區塊。該等特性可包括下列:訊框解析度、切片類型、區塊大小及/或區塊形狀。
本文所述之系統、方法及儀器可涉及解碼器。在一些實例中,本文所述之系統、方法及儀器可涉及編碼器。在一些實例中,本文所述之系統、方法及儀器可涉及信號(例如,來自編碼器及/或由解碼器接收)。一種電腦可讀媒體可包括用於引起一或多個處理器執行本文所述之方法的指令。一種電腦程式產品可包括指令,其當由一或多個處理器執行程式時可導致一或多個處理器實行本文所述之方法。
更詳細的瞭解可藉由舉與附圖結合的實例的方式給出而從以下描述得到。
圖1A係繪示一或多個經揭示實施例可實施於其中的實例通訊系統100的圖。通訊系統100可以是提供內容(諸如語音、資料、視訊、傳訊、廣播等)至多個無線使用者的多重存取系統。通訊系統100可使多個無線使用者能夠通過系統資源(包括無線頻寬)的共用而存取此類內容。例如,通訊系統100可採用一或多個通道存取方法,諸如分碼多重存取(code division multiple access, CDMA)、分時多重存取(time division multiple access, TDMA)、分頻多重存取(frequency division multiple access, FDMA)、正交FDMA (orthogonal FDMA, OFDMA)、單載波FDMA (single-carrier FDMA, SC-FDMA)、零尾唯一字DFT擴展OFDM (zero-tail unique-word DFT-Spread OFDM, ZT UW DTS-s OFDM)、唯一字OFDM (unique word OFDM, UW-OFDM)、資源區塊濾波OFDM、濾波器組多載波(filter bank multicarrier, FBMC)、及類似者。
如圖1A所示,通訊系統100可包括無線傳輸/接收單元(WTRU) 102a、102b、102c、102d、RAN 104/113、CN 106/115、公共交換電話網路(public switched telephone network, PSTN) 108、網際網路110、及其他網路112,雖然將理解所揭示的實施例設想任何數目的WTRU、基地台、網路、及/或網路元件。WTRU 102a、102b、102c、102d之各者可以是經組態以在無線環境中操作及/或通訊的任何類型的裝置。舉實例而言,WTRU 102a、102b、102c、102d(其任一者可稱為「站台(station)」及/或「STA」)可經組態以傳輸及/或接收無線信號,並可包括使用者設備(user equipment, UE)、行動站台、固定或行動訂戶單元、基於訂閱的單元、呼叫器、蜂巢式電話、個人數位助理(personal digital assistant, PDA)、智慧型手機、膝上型電腦、輕省筆電、個人電腦、無線感測器、熱點或Mi-Fi裝置、物聯網(Internet of Things, IoT)裝置、手錶或其他可穿戴式、頭戴式顯示器(head-mounted display, HMD)、車輛、無人機、醫療裝置及應用(例如,遠端手術)、工業裝置及應用(例如,在工業及/或自動化處理鏈背景中操作的機器人及/或其他無線裝置)、消費性電子裝置、在商業及/或工業無線網路上操作的裝置、及類似者。WTRU 102a、102b、102c、及102d的任一者可互換地稱為UE。
通訊系統100亦可包括基地台114a及/或基地台114b。基地台114a、114b之各者為可經組態以與WTRU 102a、102b、102c、102d中之至少一者無線地介接之任何類型的裝置,以促進存取一或多個通訊網路(諸如CN 106/115、網際網路110、及/或其他網路112)。舉實例而言,基地台114a、114b可以是基地收發站(base transceiver station, BTS)、節點B、e節點B、本地節點B、本地e節點B、gNB、NR節點B、站台控制器、存取點(access point, AP)、無線路由器、及類似者。雖然將基地台114a、114b各描繪成單一元件,但將理解基地台114a、114b可包括任何數目的互連基地台及/或網路元件。
基地台114a可係RAN 104/113的部分,該RAN亦可包括其他基地台及/或網路元件(未圖示),諸如基地台控制器(base station controller, BSC)、無線電網路控制器(radio network controller, RNC)、中繼節點等。基地台114a及/或基地台114b可經組態以在一或多個載波頻率上傳輸及/或接收無線信號,其可稱為胞元(cell)(未圖示)。此等頻率可在授權頻譜、非授權頻譜、或授權頻譜及非授權頻譜的組合中。胞元可以為可為相對固定或有可能隨時間變化的特定地理區提供無線服務覆蓋。該胞元可被進一步劃分成胞元扇區(cell sector)。例如,與基地台114a相關聯的胞元可被劃分成三個扇區。因此,在一個實施例中,基地台114a可包括三個收發器,亦即,胞元的每個扇區有一個收發器。在一實施例中,基地台114a可採用多輸入多輸出(multiple-input multiple output, MIMO)技術,且可以為胞元的各扇區使用多個收發器。例如,波束成形可用以在所欲空間方向上傳輸及/或接收信號。
基地台114a、114b可透過空中介面116與WTRU 102a、102b、102c、102d的一或多者通訊,該空中介面可以是任何合適的無線通訊鏈路(例如,射頻(radio frequency, RF)、微波、厘米波、微米波、紅外線(infrared, IR)、紫外線(ultraviolet, UV)、可見光等)。空中介面116可使用任何合適的無線電存取技術(radio access technology, RAT)建立。
更具體地說,如上文提到的,通訊系統100可係多重存取系統且可採用一或多個通道存取方案,諸如CDMA、TDMA、FDMA、OFDMA、SC-FDMA、及類似者。例如,RAN 104/113中的基地台114a及WTRU 102a、102b、102c可實施無線電技術,諸如可使用寬頻CDMA (wideband CDMA, WCDMA)建立空中介面115/116/117的通用行動電信系統(Universal Mobile Telecommunications System, UMTS)地面無線電存取(UTRA)。WCDMA可包括通訊協定,諸如高速封包存取(High-Speed Packet Access, HSPA)及/或演進HSPA (HSPA+)。HSPA可包括高速下行(DL)封包存取(High-Speed Downlink Packet Access, HSDPA)及/或高速UL封包存取(High-Speed Uplink Packet Access, HSUPA)。
在一實施例中,基地台114a及WTRU 102a、102b、102c可實施無線電技術,諸如可使用長期演進技術(Long Term Evolution, LTE)及/或進階LTE (LTE-Advanced, LTE-A)及/或進階LTE加強版(LTE-Advanced Pro, LTE-A Pro)建立空中介面116的演進UMTS地面無線電存取(Evolved UMTS Terrestrial Radio Access, E-UTRA)。
在一實施例中,基地台114a及WTRU 102a、102b、102c可實施無線電技術,諸如可使用新無線電(New Radio, NR)建立空中介面116的NR無線電存取。
在一實施例中,基地台114a及WTRU 102a、102b、102c可實施多個無線電存取技術。例如,基地台114a及WTRU 102a、102b、102c可一起實施LTE無線電存取及NR無線電存取,例如使用雙連接性(dual connectivity, DC)原理。因此,由WTRU 102a、102b、102c利用的空中介面可藉由多種類型的無線電存取技術及/或發送至/自多種類型之基地台(例如,eNB及gNB)的傳輸特徵化。
在其他實施例中,基地台114a及WTRU 102a、102b、102c可實施無線電技術,諸如IEEE 802.11(亦即,無線保真度(Wireless Fidelity, WiFi)、IEEE 802.16(亦即,全球互通微波存取(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000 EV-DO、暫時性標準2000 (IS-2000)、暫時性標準95 (IS-95)、暫時性標準856 (IS-856)、全球行動通訊系統(GSM)、GSM演進增強型資料速率(EDGE)、GSM EDGE (GERAN)、及類似者。
圖1A中的基地台114b可係無線路由器、本地節點B、本地e節點B、或存取點,例如,且可利用任何合適的RAT以用於促進局部化區(諸如營業場所、家庭、車輛、校園、工業設施、空中走廊(例如,用於由無人機使用)、道路、及類似者)中的無線連接性。在一個實施例中,基地台114b及WTRU 102c、102d可實施無線電技術,諸如IEEE 802.11以建立無線區域網路(wireless local area network, WLAN)。在一實施例中,基地台114b及WTRU 102c、102d可實施無線電技術,諸如IEEE 802.15以建立無線個人區域網路(wireless personal area network, WPAN)。在又另一實施例中,基地台114b及WTRU 102c、102d可利用基於蜂巢式的RAT(例如,WCDMA、CDMA2000、GSM、LTE、LTE-A、LTE-A Pro、NR等)以建立微微胞元或毫微微胞元。如圖1A所示,基地台114b可具有至網際網路110的直接連接。因此,基地台114b可能不需要經由CN 106/115存取網際網路110。
RAN 104/113可與CN 106/115通訊,其可為經組態以提供語音、資料、應用、及/或網際網路協定上的語音(voice over internet protocol, VoIP)服務至WTRU 102a、102b、102c、102d的一或多者的任何類型的網路。資料可具有不同的服務品質(quality of service, QoS)需求,諸如不同的輸送量需求、延遲需求、容錯需求、可靠性需求、資料輸送量需求、行動需求、及類似者。CN 106/115可提供呼叫控制、帳單服務、基於行動定位的服務、預付電話、網際網路連接、視訊分布等、及/或執行高階安全功能,諸如使用者認證。雖然未顯示於圖1A中,將理解RAN 104/113及/或CN 106/115可與採用與RAN 104/113相同之RAT或採用不同RAT的其他RAN直接或間接通訊。例如,除了連接至RAN 104/113(其可利用NR無線電技術)外,CN 106/115亦可與採用GSM、UMTS、CDMA 2000、WiMAX、E-UTRA、或WiFi無線電技術的另一RAN(未圖示)通訊。
CN 106/115亦可作用為用於WTRU 102a、102b、102c、102d的閘道,以存取PSTN 108、網際網路110、及/或其他網路112。PSTN 108可包括提供簡易老式電話服務(plain old telephone service, POTS)的電路交換電話網路。網際網路110可包括使用共同通訊協定的互連電腦網路及裝置的全球系統,諸如TCP/IP網際網路協定套組中的傳輸控制協定(transmission control protocol, TCP)、使用者資料包協定(user datagram protocol, UDP)、及/或網際網路協定(internet protocol, IP)。網路112可包括由其他服務供應商所擁有及/或操作的有線及/或無線通訊網路。例如,網路112可包括連接至一或多個RAN的另一CN,該一或多個RAN可採用與RAN 104/113相同的RAT或不同的RAT。
通訊系統100中的WTRU 102a、102b、102c、102d的一些或全部可包括多模式能力(例如,WTRU 102a、102b、102c、102d可包括用於透過不同的無線鏈路與不同的無線網路通訊的多個收發器)。例如,顯示於圖1A中的WTRU 102c可經組態以與可採用基於蜂巢式的無線電技術的基地台114a,並與可採用IEEE 802無線電技術的基地台114b通訊。
圖1B係繪示實例WTRU 102的系統圖。如圖1B所示,WTRU 102可包括處理器118、收發器120、傳輸/接收元件122、揚聲器/麥克風124、小鍵盤126、顯示器/觸控板128、非可移除式記憶體130、可移除式記憶體132、電源134、全球定位系統(global positioning system, GPS)晶片組136、及/或其他週邊設備138等。將理解WTRU 102可包括上述元件的任何次組合,同時仍與一實施例保持一致。
處理器118可以是一般用途處理器、特殊用途處理器、習知處理器、數位信號處理器(digital signal processor, DSP)、複數個微處理器、與DSP核心關聯的一或多個微處理器、控制器、微控制器、特殊應用積體電路(Application Specific Integrated Circuit, ASIC)、現場可程式化閘陣列(Field Programmable Gate Array, FPGA)電路、任何其他類型的積體電路(integrated circuit, IC)、狀態機、及類似者。處理器118可執行信號編碼、資料處理、電力控制、輸入/輸出處理、及/或使WTRU 102能在無線環境中操作的任何其他功能性。處理器118可耦接至收發器120,該收發器可耦接至傳輸/接收元件122。雖然圖1B將處理器118及收發器120描繪成分開的組件,但將理解處理器118及收發器120可在電子封裝或晶片中整合在一起。
傳輸/接收元件122可經組態以透過空中介面116傳輸信號至基地台(例如,基地台114a)或自該基地台接收信號。例如,在一個實施例中,傳輸/接收元件122可經組態以傳輸及/或接收RF信號的天線。在一實施例中,例如,傳輸/接收元件122可經組態以傳輸及/或接收IR、UV、或可見光信號的發射器/偵測器。在又另一實施例中,傳輸/接收元件122可經組態以傳輸及/或接收RF及光信號二者。應理解傳輸/接收元件122可經組態以傳輸及/或接收無線信號的任何組合。
雖然在圖1B中將傳輸/接收元件122描繪成單一元件,但WTRU 102可包括任何數目的傳輸/接收元件122。更具體地說,WTRU 102可採用MIMO技術。因此,在一個實施例中,WTRU 102可包括二或更多個傳輸/接收元件122(例如,多個天線)以用於透過空中介面116傳輸及接收無線信號。
收發器120可經組態以調變待藉由傳輸/接收元件122傳輸的信號及解調變藉由傳輸/接收元件122接收的信號。如上文提到的,WTRU 102可具有多模式能力。因此,例如,收發器120可包括用於使WTRU 102能經由多個RAT(諸如,NR及IEEE 802.11)通訊的多個收發器。
WTRU 102的處理器118可耦接至揚聲器/麥克風124、小鍵盤126、及/或顯示器/觸控板128(例如,液晶顯示器(liquid crystal display, LCD)顯示器單元或有機發光二極體(organic light-emitting diode, OLED)顯示器單元)並可接收來自其等的使用者輸入資料。處理器118亦可將使用者資料輸出至揚聲器/麥克風124、小鍵盤126、及/或顯示器/觸控板128。額外地,處理器118可存取來自任何類型的合適記憶體(諸如非可移除式記憶體130及/或可移除式記憶體132)的資訊及將資料儲存在任何類型的合適記憶體中。非可移除式記憶體130可包括隨機存取記憶體(random-access memory, RAM)、唯讀記憶體(read-only memory, ROM)、硬碟、或任何其他類型的記憶體儲存裝置。可移除式記憶體132可包括用戶身份模組(subscriber identity module, SIM)卡、記憶棒、安全數位(secure digital, SD)記憶卡、及類似者。在其他實施例中,處理器118可存取來自未實體上位於WTRU 102(諸如在伺服器或家用電腦(未圖示)上)上之記憶體的資訊及將資料儲存在該記憶體中。
處理器118可接收來自電源134的電力,並可經組態以分布及/或控制至WTRU 102中之其他組件的電力。電源134可以是用於對WTRU 102供電的任何合適裝置。例如,電源134可包括一或多個乾電池電池組(例如,鎳-鎘(NiCd)、鎳-鋅(NiZn)、鎳氫(NiMH)、鋰離子(Li-離子)等)、太陽能電池、燃料電池、及類似者。
處理器118亦可耦接至GPS晶片組136,該GPS晶片組可經組態以提供關於WTRU 102之目前位置的位置資訊(例如,經度和緯度)。除了(或替代)來自GPS晶片組136的資訊外,WTRU 102可透過空中介面116接收來自基地台(例如,基地台114a、114b)的位置資訊,及/或基於從二或更多個附近基地台接收之信號的時序判定其位置。將理解WTRU 102可藉由任何合適的位置判定方法獲得位置資訊,同時仍與一實施例保持一致。
處理器118可進一步耦接至其他週邊設備138,該等週邊設備可包括提供額外特徵、功能性、及/或有線或無線連接性的一或多個軟體及/或硬體模組。例如,週邊設備138可包括加速度計、電子羅盤、衛星收發器、數位相機(用於相片及/或視訊)、通用串列匯流排(universal serial bus, USB)埠、振動裝置、電視機收發器、免持式頭戴裝置、Bluetooth®模組、調頻(frequency modulated, FM)無線電單元、數位音樂播放器、媒體播放器、視訊遊戲機模組、網際網路瀏覽器、虛擬實境及/或擴增實境(virtual reality and/or augmented reality, VR/AR)裝置、活動追蹤器、及類似者。週邊設備138可包括一或多個感測器,該等感測器可以是陀螺儀、加速度計、霍爾效應感測器、磁力計、定向感測器、近接感測器、溫度感測器、時間感測器;地理位置感測器;高度計、光感測器、觸控感測器、磁力計、氣壓計、手勢感測器、生物特徵感測器、及/或濕度感測器的一或多者。
WTRU 102可包括一些或所有信號(例如,與用於UL(例如,用於傳輸)及下行鏈路(例如,用於接收)二者的特定子訊框關聯)針對其的傳輸及接收可係並行及/或同時的全雙工無線電。全雙工無線電可包括干擾管理單元,以經由硬體(例如,扼流器)或經由處理器(例如,分開的處理器(未圖示)或經由處理器118)的信號處理的其中一者降低及或實質消除自干擾。在一實施例中,WRTU 102可包括一些或所有信號(例如,與用於UL(例如,用於傳輸)或下行鏈路(例如,用於接收)其中一者的特定子訊框關聯)針對其的傳輸及接收的半雙工無線電。
圖1C係根據一實施例繪示RAN 104及CN 106的系統圖。如上文提到的,RAN 104可採用E-UTRA無線電技術以透過空中介面116與WTRU 102a、102b、102c通訊。RAN 104亦可與CN 106通訊。
RAN 104可包括e節點B 160a、160b、160c,雖然應理解RAN 104可包括任何數目的e節點B,同時仍與一實施例保持一致。e節點B 160a、160b、160c各可包括一或多個收發器以用於透過空中介面116與WTRU 102a、102b、102c通訊。在一個實施例中,e節點B 160a、160b、160c可實施MIMO技術。因此,e節點B 160a,例如,可使用多個天線以傳輸無線信號至WTRU 102a,及/或接收來自該WTRU的無線信號。
e節點B 160a、160b、160c之各者可與特定胞元(未圖示)相關聯,並可經組態以處理無線電資源管理決策、交遞決策、UL及/或DL中之使用者的排程、及類似者。如圖1C所示,e節點B160a、160b、160c可透過X2介面彼此通訊。
顯示於圖1C中的CN 106可包括行動管理實體(mobility management entity, MME) 162、服務閘道(serving gateway, SGW) 164、及封包資料網路(packet data network, PDN)閘道(或PGW)166。雖然將上述元件之各者描繪成CN 106的部分,但將理解此等元件的任何者可由CN操作者之外的實體擁有及/或操作。
MME 162可經由S1介面連接至RAN 104中的e節點B 162a、162b、162c之各者,並可作用為控制節點。例如,MME 162可負責在WTRU 102a、102b、102c、及類似者的最初附接期間認證WTRU 102a、102b、102c的使用者、承載啟動/停用、選擇特定的服務閘道。MME 162可提供控制平面功能以用於在RAN 104與採用其他無線電技術(諸如GSM及/或WCDMA)的其他RAN(未圖示)之間切換。
SGW 164可經由S1介面連接至RAN 104中的e節點B 160a、160b、160c之各者。SGW 164大致可將使用者資料封包路由及轉發至WTRU 102a、102b、102c/路由及轉發來自該等WTRU的使用者資料封包。SGW 164可執行其他功能,諸如在e節點B間交遞期間錨定使用者平面、在DL資料可用於WTRU 102a、102b、102c時觸發呼叫、管理及儲存WTRU 102a、102b、102c的背景、及類似者。
SGW 164可連接至PGW 166,該PGW可將對封包交換網路(諸如網際網路110)的存取提供給WTRU 102a、102b、102c,以促進WTRU 102a、102b、102c與啟用IP之裝置之間的通訊。
CN 106可促進與其他網路的通訊。例如,CN 106可將對電路交換網路(諸如PSTN 108)的存取提供給WTRU 102a、102b、102c,以促進WTRU 102a、102b、102c與傳統陸地線路通訊裝置之間的通訊。例如,CN 106可包括作用為CN 106與PSTN 108之間的介面的IP閘道器(例如,IP多媒體子系統(IP multimedia subsystem, IMS)伺服器)或可與該IP閘道器通訊。額外地,CN 106可將對其他網路112的存取提供給WTRU 102a、102b、102c,該等其他網路可包括由其他服務供應商擁有及/或操作的其他有線及/或無線網路。
雖然在圖1A至圖1D中將WTRU描述為無線終端,但設想到在某些代表性實施例中,此一終端可與通訊網路一起使用(例如,暫時地或永久地)有線通訊介面。
在代表性實施例中,其他網路112可以是WLAN。
在基礎設施基本服務集(Basic Service Set, BSS)模式中的WLAN可具有用於BSS的存取點(AP)及與AP相關聯的一或多個站台(STA)。AP可具有對分配系統(Distribution System, DS)或將訊務載入及/或載出BSS之另一類型的有線/無線網路的存取或介面。源自BSS外側之至STA的訊務可通過AP到達且可遞送至STA。可將源自STA至BSS外側之目的地的訊務發送至AP以遞送至各別目的地。在BSS內的STA之間的訊務可通過AP發送,例如其中來源STA可將訊務發送至AP且AP可將訊務遞送至目的地STA。可將BSS內的STA之間的訊務視為及/或稱為同級間訊務。同級間流量可使用直接鏈路設置(direct link setup, DLS)在來源STA與目的地STA之間(例如,直接於其間)發送。在某些代表性實施例中,DLS可使用802.11e DLS或802.11z隧道式DLS (tunneled DLS, TDLS)。使用獨立BSS (Independent BSS, IBSS)模式的WLAN可不具有AP,且在IBSS內或使用該IBSS的STA(例如,所有的STA)可彼此直接通訊。IBSS通訊模式在本文中有時可稱為「專設(ad-hoc)」通訊模式。
當使用802.11ac基礎設施操作模式或類似操作模式時,AP可在固定通道(諸如主通道)上傳輸信標。主通道可以是固定寬度的(例如,20 MHz寬的頻寬)或經由傳訊動態地設定寬度。主通道可係BSS的操作通道並可由STA使用以建立與AP的連接。在某些代表性實施例中,可將具有碰撞避免的載波感測多重存取(Carrier Sense Multiple Access with Collision Avoidance, CSMA/CA)實施例如在802.11系統中。對於CSMA/CA,包括AP的STA(例如,每一個STA)可感測主通道。若主通道由特定STA感測/偵測及/或判定成忙碌,該特定STA可退出。一個STA(例如,僅一個站台)可在給定BSS中的任何給定時間傳輸。
高輸送量(High Throughput, HT) STA可使用40 MHz寬的通道以用於通訊,例如經由20 MHz主通道與相鄰或不相鄰的20 MHz通道的組合以形成40 MHz寬的通道。
非常高輸送量(Very High Throughput, VHT) STA可支援20 MHz、40 MHz、80 MHz、及/或160 MHz寬的通道。40 MHz及/或80 MHz通道可藉由組合連續的20 MHz通道形成。160 MHz通道可藉由組合8個連續的20 MHz通道,或藉由組合二個非連續的80 MHz通道(其可稱為80+80組態)形成。對於80+80組態,在通道編碼後,可將資料傳過可將資料劃分成二個串流的區段剖析器。快速傅立葉逆變換(Inverse Fast Fourier Transform, IFFT)處理及時域處理可在各串流上分開完成。可將串流映射至二個80 MHz通道上,且資料可藉由傳輸STA傳輸。在接收STA的接收器處,用於80+80組態的上述操作可反轉,並可將經組合資料發送至媒體存取控制(MAC)。
次1 GHz操作模式是由802.11af及802.11ah所支援。通道操作頻寬及載波在802.11af及802.11ah中相對於使用在802.11n及802.11ac中的通道操作頻寬及載波係降低的。802.11af在電視空白頻段(TV White Space, TVWS)頻譜中支援5 MHz、10 MHz、及20 MHz頻寬,且802.11ah使用非TVWS頻譜支援1 MHz、2 MHz、4 MHz、8 MHz、及16 MHz頻寬。根據代表性實施例,802.11ah可支援儀表類型控制/機器類型通訊(Meter Type Control/Machine-Type Communications),諸如在大型涵蓋區中的MTC裝置。MTC裝置可具有某些能力,例如包括支援(例如,僅支援)某些及/或有限頻寬的有限能力。MTC裝置可包括具有高於臨限之電池壽命的電池(例如,以維持非常長的電池壽命)。
可支援多個通道及通道頻寬(諸如802.11n、802.11ac、802.11af、及802.11ah)的WLAN系統包括可指定成主通道的通道。主通道可具有等於由BSS中的所有STA支援的最大共同操作頻寬的頻寬。主通道的頻寬可由在BSS中操作的所有STA之中的支援最小頻寬操作模式的STA設定及/或限制。在802.11ah的實例中,即使AP及BSS中的其他STA支援2 MHz、4 MHz、8 MHz、16 MHz、及/或其他通道頻寬操作模式,主通道對於支援(例如,僅支援)1 MHz模式的STA(例如,MTC類型裝置)可係1 MHz寬的。載波感測及/或網路配置向量(Network Allocation Vector, NAV)設定可取決於主通道的狀態。例如,若主通道例如因為STA(其僅支援1 MHz操作模式)傳輸至AP而是忙碌的,即使大部分的頻帶維持閒置且可以是可用的,可將整個可用頻帶視為是忙碌的。
在美國,可用頻帶(其可由802.11ah使用)是從902 MHz至928 MHz。在韓國,可用頻帶是從917.5 MHz至923.5 MHz。在日本,可用頻帶係從916.5 MHz至927.5 MHz。取決於國碼,可用於802.11ah的總頻寬係6 MHz至26 MHz。
圖1D係根據一實施例繪示RAN 113及CN 115的系統圖。如上文提到的,RAN 113可採用NR無線電技術以透過空中介面116與WTRU 102a、102b、102c通訊。RAN 113亦可與CN 115通訊。
RAN 113可包括gNB 180a、180b、180c,雖然應理解RAN 113可包括任何數目的gNB,同時仍與一實施例保持一致。gNB 180a、180b、180c各可包括一或多個收發器以用於透過空中介面116與WTRU 102a、102b、102c通訊。在一個實施例中,gNB 180a、180b、180c可實施MIMO技術。例如,gNB 180a、108b可利用波束成形以傳輸信號至gNB 180a、180b、180c及/或接收來自該等gNB的信號。因此,gNB 180a例如可使用多個天線以傳輸無線信號至WTRU 102a、及/或接收來自該WTRU的無線信號。在一實施例中,gNB 180a、180b、180c可實施載波聚合技術。例如,gNB 180a可將多個組成載波傳輸至WTRU 102a(未圖示)。此等組成載波的子集可在非授權頻譜上,而其餘的組成載波可在授權頻譜上。在一實施例中,gNB 180a、180b、180c可實施協調多點(Coordinated Multi-Point, CoMP)技術。例如,WTRU 102a可接收來自gNB 180a及gNB 180b(及/或gNB 180c)的經協調傳輸。
WTRU 102a、102b、102c可使用與可縮放參數集(numerology)相關聯的傳輸來與gNB 180a、180b、180c通訊。例如,OFDM符號間距及/或OFDM副載波間距可針對不同傳輸、不同胞元、及/或無線傳輸頻譜的不同部分變化。WTRU 102a、102b、102c可使用子訊框或各種長度或可縮放長度的傳輸時間間隔(transmission time interval, TTI)(例如,含有變化數目的OFDM符號及/或持續變化的絕對時間長度)來與gNB 180a、180b、180c通訊。
gNB 180a、180b、180c可經組態以與以獨立組態及/或非獨立組態的WTRU 102a、102b、102c通訊。在獨立組態中,WTRU 102a、102b、102c可與gNB 180a、180b、180c通訊而無需亦存取其他RAN(例如,諸如e節點B 160a、160b、160c)。在獨立組態中,WTRU 102a、102b、102c可將gNB 180a、180b、180c的一或多者使用為行動錨點。在獨立組態中,WTRU 102a、102b、102c可使用在非授權頻帶中的信號來與gNB 180a、180b、180c通訊。在非獨立組態中,WTRU 102a、102b、102c可與gNB 180a、180b、180c通訊/連接至該等gNB,同時亦與另一RAN(諸如e節點B 160a、160b、160c)通訊/連接至該另一RAN。例如,WTRU 102a、102b、102c可實施DC原理以實質同時地與一或多個gNB 180a、180b、180c及一或多個e節點B 160a、160b、160c通訊。在非獨立組態中,e節點B 160a、160b、160c可作用為WTRU 102a、102b、102c的行動錨點,且gNB 180a、180b、180c可提供用於服務WTRU 102a、102b、102c的額外覆蓋及/或輸送量。
gNB 180a、180b、180c之各者可與特定胞元(未圖示)關聯,並可經組態以處理無線電資源管理決策、交遞決策、UL及/或DL中之使用者的排程、網路切片的支援、雙連接性、NR與E-UTRA之間的交互工作、使用者平面資料朝向使用者平面功能(User Plane Function, UPF) 184a、184b的路線、控制平面資訊朝向存取及行動性管理功能(Access and Mobility Management Function, AMF) 182a、182b的路線、及類似者。如圖1D所示,gNB 180a、180b、180c可透過Xn介面彼此通訊。
顯示於圖1D中的CN 115可包括至少一個AMF 182a、182b、至少一個UPF 184a、184b、至少一個工作階段管理功能(Session Management Function, SMF) 183a、183b、並可能包括資料網路(Data Network, DN) 185a、185b。雖然將上述元件之各者描繪成CN 115的部分,但將理解此等元件的任一者可由CN操作者之外的實體擁有及/或操作。
AMF 182a、182b可經由N2介面連接至RAN 113中的gNB 180a、180b、180c中的一或多者,並可作用為控制節點。例如,AMF 182a、182b可負責認證WTRU 102a、102b、102c的使用者、支援網路切片(例如,具有不同需求之不同PDU工作階段的處理)、選擇特定的SMF 183a、183b、登錄區的管理、NAS傳訊的終止、行動性管理、及類似者。網路切片可由AMF 182a、182b使用,以基於正使用之WTRU 102a、102b、102c之服務的類型將用於WTRU 102a、102b、102c的CN支援客製化。例如,不同網路切片可針對不同的使用情形建立,諸如依賴超可靠低延時(ultra-reliable low latency, URLLC)存取的服務、依賴增強大量行動寬頻(enhanced massive mobile broadband, eMBB)存取的服務、用於機器類型通訊(machine type communication, MTC)存取的服務、及/或類似者。AMF 162可提供用於在RAN 113與其他RAN(未圖示)之間切換的控制平面功能,該等其他RAN採用其他無線電技術(諸如LTE、LTE-A、LTE-A Pro、及/或非3GPP存取技術(諸如WiFi))。
SMF 183a、183b可經由N11介面連接至CN 115中的AMF 182a、182b。SMF 183a、183b亦可經由N4介面連接至CN 115中的UPF 184a、184b。SMF 183a、183b可選擇及控制UPF 184a、184b並組態通過UPF 184a、184b之訊務的路線。SMF 183a、183b可執行其他功能,諸如管理及分配UE IP位址、管理PDU工作階段、控制政策執行及QoS、提供下行鏈路資料通知、及類似者。PDU工作階段類型可係基於IP的、非基於IP的、基於乙太網路的、及類似者。
UPF 184a、184b可經由N3介面連接至RAN 113中的gNB 180a、180b、180c的一或多者,該介面可將對封包交換網路(諸如網際網路110)的存取提供給WTRU 102a、102b、102c,以促進WTRU 102a、102b、102c與啟用IP之裝置之間的通訊。UPF 184、184b可執行其他功能,諸如路由及轉發封包、執行使用者平面政策、支援多宿主(multi-homed) PDU工作階段、處理使用者平面QoS、緩衝下行鏈路封包、提供移動性錨定、及類似者。
CN 115可促進與其他網路的通訊。例如,CN 115可包括作用為CN 115與PSTN 108之間的介面的IP閘道器(例如,IP多媒體子系統(IP multimedia subsystem, IMS)伺服器)或可與該IP閘道器通訊。額外地,CN 115可將對其他網路112的存取提供給WTRU 102a、102b、102c,該等其他網路可包括由其他服務供應商擁有及/或操作的其他有線及/或無線網路。在一個實施例中,WTRU 102a、102b、102c可經由至UPF 184a、184b的N3介面及UPF 184a、184b與DN 185a、185b之間的N6介面通過UPF 184a、184b連接至區域資料網路(DN) 185a、185b。
鑑於圖1A至圖1D及圖1A至圖1D的對應描述,關於下列一或多者於本文描述之功能的一或多者或全部可藉由一或多個仿真裝置(未圖示)執行:可藉由一或多個仿真裝置(未圖示)執行WTRU 102a至102d、基地台114a至114b、e節點B 160a至160c、MME 162、SGW 164、PGW 166、gNB 180a至180c、AMF 182a至182b、UPF 184a至184b、SMF 183a至183b、DN 185a至185b、及/或本文描述的任何其他(多個)裝置。仿真裝置可經組態以仿真本文描述之功能的一或多者或全部的一或多個裝置。例如,仿真裝置可用以測試其他裝置及/或模擬網路及/或WTRU功能。
仿真裝置可經設計以在實驗室環境及/或操作者網路環境中實施其他裝置的一或多個測試。例如,一或多個仿真裝置可在完全或部分地實施及/或部署為有線及/或無線通訊網路的部分的同時執行該一或多個或全部的功能以測試通訊網路內的其他裝置。一或多個仿真裝置可在暫時地實施/部署成有線及/或無線通訊網路的部分的同時執行一或多個或全部的功能。仿真裝置可針對測試目的而直接耦接至另一裝置及/或可使用空中無線通訊執行測試。
一或多個仿真裝置可在未實施/部署成有線及/或無線通訊網路的部分的同時執行一或多個(包括全部)功能。例如,仿真裝置可使用在測試實驗室及/或非部署(例如,測試)的有線及/或無線通訊網路中的測試場景中,以實施一或多個組件的測試。一或多個仿真裝置可係測試儀器。直接RF耦合及/或經由RF電路系統(例如,其可包括一或多個天線)的無線通訊可由仿真裝置使用以傳輸及/或接收資料。
本申請案描述多種態樣,包括工具、特徵、實例或實施例、模型、方法等。此等態樣中的許多態樣係以特定性描述(以至少顯示個別特性),且常以聽起來可係限定的方式描述。然而,此係出於描述清楚性的目的,且並不限制此等態樣的應用或範圍。確實,所有的不同態樣皆可組合及互換以提供進一步態樣。此外,該等態樣亦可與描述於先前申請案中的態樣組合及互換。
於此申請案中描述及設想的態樣可以許多不同形式實施。本文描述的圖5至圖32可提供一些實施例,但亦設想其他實施例。圖5至圖32的討論不限制實施方案的廣泛性。該等態樣中之至少一者大致關於視訊編碼及解碼,且至少一個其他態樣大致關於產生位元串流、儲存位元串流、及/或傳輸經產生或經編碼的位元串流。可將此等及其他態樣實施為方法、設備、具有儲存於其上之用於根據所描述之方法的任一者編碼或解碼視訊資料之指令的電腦可讀儲存媒體、及/或具有儲存於其上之根據所描述之方法的任一者產生之位元串流的電腦可讀儲存媒體。如本文中所使用,可或可不傳輸位元串流。
在本申請案中,用語「經重建(reconstructed)」及「經解碼(decoded)」可互換地使用、用語「像素(pixel)」及「樣本(sample)」可互換地使用、用語「影像(image)」、「圖像(picture)」、及「訊框(frame)」可互換地使用。
於本文中描述各種方法,且該等方法之各者包含用於實現所描述之方法的一或多個步驟或動作。除非方法的適當操作需要特定順序的步驟或動作,可修改或組合特定步驟及/或動作的順序及/或用途。額外地,諸如「第一(first)」、「第二(second)」等的用語可使用在各種實例中,以修飾元件、組件、步驟、操作等,諸如例如「第一解碼(first decoding)」及「第二解碼(second decoding)」。除非具體要求,此類用語的使用並不意味對經修飾操作的排序。所以在此實例中,第一解碼不需要在第二解碼之前執行,並可例如在第二解碼之前、期間、或與其重疊的時間期間中發生。
本申請案中所描述之各種方法及其他態樣可用以修改如圖2及圖3所示之視訊編碼器200及解碼器300的模組,例如,解碼模組。此外,本文揭示的標的可應用至例如任何類型、格式、或版本的視訊編解碼(無論是在標準或建議中描述、無論是預先存在或未來發展的、及任何此類標準及建議的延伸的態樣。除非以其他方式指示或在技術上排除,描述於本申請案中的態樣可個別或組合地使用。
各種數值係用於本申請案的實例中,諸如0、1、2、3、4、6、7、8、11、16、18、26、33、45、50、64、65、66、67、80、129、131、135、1456等。此等及其他特定值為描述實例之目的,且所描述之態樣不限於此等特定值。
圖2係顯示實例視訊編碼器的圖。設想實例編碼器200的變化,但編碼器200於下文的描述係出於清楚的目的而未描述所有的預期變化。
在編碼前,視訊序列可完成預編碼處理(201)例如將顏色轉換施用至輸入顏色圖像(例如,從RGB 4:4:4轉換成YCbCr 4:2:0),或執行輸入圖像分量的重新映射以得到對壓縮更有彈性的信號分布(例如,使用顏色分量的一者的直方圖等化)。後設資料可與預處理相關聯,並附加至位元串流。
在編碼器200中,圖像係藉由如下文描述的編碼器元件編碼。待編碼圖像係以例如編碼單元(coding unit, CU)為單位分割(202)及處理。各單元係使用例如幀內或幀間模式任一者編碼。當單元以幀內模式編碼時,其執行幀內預測(260)。在幀間模式中,執行運動評估(275)及補償(270)。編碼器決定(205)將幀內或幀間模式的哪一者用於編碼該單元,並藉由例如預測模式旗標指示幀內/幀間決策。預測殘量係例如藉由從原始影像區塊減去(210)經預測區塊而計算。
接著轉換(225)及量化(230)預測殘量。將量化轉換係數以及運動向量及其他語法元素熵編解碼(245)以輸出位元串流。編碼器可跳過轉換,並將量化直接施用至未轉換的殘餘信號。編碼器可略過轉換及量化二者,亦即殘量係在未應用轉換或量化程序的狀況下直接編解碼。
編碼器解碼經編碼區塊以提供用於進一步預測的參考。將量化轉換係數解量化(240)及逆轉換(250)以解碼預測殘量。組合(255)經解碼預測殘量及預測區塊,重建影像區塊。將迴路內濾波器(in-loop filter) (265)施用至重建圖像,以執行例如解塊/SAO(樣本適應性偏移(Sample Adaptive Offset))濾波以降低編碼假影。將經濾波影像儲存在參考圖像緩衝器(280)處。
圖3係顯示視訊解碼器的一實例的圖。在實例解碼器300中,位元串流係藉由如下文描述的解碼器元件解碼。視訊解碼器300大致執行與圖2中所描述之編碼階段互逆的解碼階段。編碼器200通常亦執行視訊解碼作為編碼視訊資料的部分。
具體而言,解碼器的輸入包括可由視訊編碼器200產生的視訊位元串流。位元串流首先經熵解碼(330)以獲得轉換係數、運動向量、及其他經編解碼資訊。圖像分割資訊指示該圖像係如何分割的。解碼器因此可根據經解碼圖像分割資訊劃分(335)圖像。將轉換係數解量化(340)及逆轉換(350)以解碼預測殘量。組合(355)經解碼預測殘量及預測區塊,重建影像區塊。經預測區塊可從幀內預測(360)或運動補償預測(亦即,幀間預測)(375)獲得(370)。將迴路內濾波器(365)施用至經重建影像。將經濾波影像儲存在參考圖像緩衝器(380)處。
經解碼圖像可進一步完成後解碼處理(385),例如顏色逆轉換(例如,從YCbCr 4:2:0至RGB 4:4:4的轉換)或執行在預編碼處理(201)中執行之重新映射處理之相反的逆重新映射。後解碼處理可使用在預編碼處理中衍生並在位元串流中傳訊的後設資料。在一實例中,經解碼影像(例如,施用迴路內濾波器(365)之後,及/或若使用後解碼處理,則後解碼處理(385)之後)可被發送至顯示裝置以供演現給使用者。
圖4係展示本文描述的各種態樣及實例可實施於其中之系統的一實例的圖。系統400可體現為包括下文所描述的各種組件,並經組態以執行描述於本文件中之態樣的一或多者的裝置。此類裝置的實例包括,但不限於,各種電子裝置,諸如個人電腦、膝上型電腦、智慧型手機、平板電腦、數位多媒體機上盒、數位電視接收器、個人視訊記錄系統、連接式家用電器、及伺服器。系統400的元件可單一地或組合地體現在單一積體電路(IC)、多個IC、及/或離散組件中。例如,在至少一個實例中,系統400的處理及編碼器/解碼器元件跨多個IC及/或離散組件分布。在各種實例中,系統400經由例如通訊匯流排或通過專用輸入埠及/或輸出埠通訊地耦接至一或多個其他系統或其他電子裝置。在各種實例中,系統400經組態以實施描述於本文件中之態樣的一或多者。
系統400包括至少一個處理器410,該處理器經組態以執行載入至其中之用於實施例如描述於本文件中的各種態樣的指令。處理器410可包括嵌入式記憶體、輸入輸出介面、及所屬技術領域中已知的各種其他電路系統。系統400包括至少一個記憶體420(例如,揮發性記憶體裝置及/或非揮發性記憶體裝置)。系統400包括儲存裝置440,該儲存裝置可包括非揮發性記憶體及/或揮發性記憶體,包括但不限於電可抹除可程式化唯讀記憶體(Electrically Erasable Programmable Read-Only Memory, EEPROM)、唯讀記憶體(ROM)、可程式化唯讀記憶體(Programmable Read-Only Memory, PROM)、隨機存取記憶體(RAM)、動態隨機存取記憶體(Dynamic Random Access Memory, DRAM)、靜態隨機存取記憶體(Static Random Access Memory, SRAM)、快閃記憶體、磁碟驅動機、及/或光碟驅動機。作為非限制性實例,儲存裝置440可包括內部儲存裝置、附接儲存裝置(包括可拆離及不可拆離儲存裝置)、及/或網路可存取儲存裝置。
系統400包括編碼器/解碼器模組430,該編碼器/解碼器模組經組態以例如處理資料以提供經編碼視訊或經解碼視訊,且編碼器/解碼器模組430可包括其自有的處理器及記憶體。編碼器/解碼器模組430表示可包括在裝置中以執行編碼及/或解碼功能的(多個)模組。如已知的,裝置可包括編碼及解碼模組的一或二者。額外地,如所屬技術領域中具有通常知識者所已知的,可將編碼器/解碼器模組430實施為系統400的分開元件,或可併入處理器410內作為硬體與軟體的組合。
待載入至處理器410或編碼器/解碼器430上以執行描述於本文件中的各種態樣的程式碼可儲存在儲存裝置440中,且隨後載入至記憶體420上以用於處理器410執行。根據各種實例,處理器410、記憶體420、儲存裝置440、及編碼器/解碼器模組430的一或多者可在描述於本文件中的程序的執行期間儲存各種項目的一或多者。此類經儲存項目可包括但不限於來自方程式、公式、操作、及操作邏輯之處理的輸入視訊、經解碼視訊或經解碼視訊的部分、位元串流、矩陣、變數、及中間或最終結果。
在一些實例中,處理器410及/或編碼器/解碼器模組430內側的記憶體係用以儲存指令,並為編碼或解碼期間所需的處理提供工作記憶體。然而,在其他實例中,處理裝置(例如,處理裝置可係處理器410或編碼器/解碼器模組430的任一者)外部的記憶體係用於此等功能的一或多者。外部記憶體可係記憶體420及/或儲存裝置440,例如動態揮發性記憶體及/或非揮發性快閃記憶體。在數個實例中,外部非揮發性快閃記憶體係用以儲存例如電視機的作業系統。在至少一個實例中,一快速外部動態揮發性記憶體(諸如RAM)用作為工作記憶體以進行視訊編碼及解碼操作。
至系統400之元件的輸入可通過如方塊445中所指示的各種輸入裝置提供。此類輸入裝置包括但不限於(i)射頻(RF)部分,其接收例如由廣播器透過空氣傳輸的RF信號、(ii)分量(COMP)輸入端子(或一組COMP輸入端子)、(iii)通用串列匯流排(Universal Serial Bus, USB)輸入端子、及/或(iv)高畫質多媒體介面(High Definition Multimedia Interface, HDMI)輸入端子。其他實例(未顯示於圖4中)包括複合視訊。
在各種實例中,方塊445的輸入裝置具有如所屬技術領域中已知的相關聯各別輸入處理元件。例如,RF部分可與適用於(i)選擇所欲頻率(亦稱為選擇信號或將信號頻帶限制至頻帶)、(ii)降頻轉換所選取信號、(iii)再次頻帶限制至更窄的頻帶以選擇(例如)在某些實例中可稱為通道的信號頻帶、(iv)解調變經降頻轉換及經頻帶限制的信號、(v)執行錯誤校正、及/或(vi)解多工以選擇所欲的資料封包串流的元件關聯。各種實例的RF部分包括一或多個元件以執行此等功能,例如頻率選擇器、信號選擇器、頻帶限制器、通道選擇器、濾波器、降頻轉換器、解調變器、錯誤校正器、及解多工器。RF部分可包括執行各種此等功能(包括例如將經接收信號降頻轉換至較低頻率(例如,中間頻率或近基帶頻率)或至基帶)的調諧器。在一個機上盒實例中,RF部分及其相關聯輸入處理元件接收透過有線(例如,纜線)媒體傳輸的RF信號,並藉由濾波、降頻轉換、及再次濾波至所欲頻帶來執行頻率選擇。各種實例重新配置上述(及其他)元件的順序、移除此等元件中的一些者、及/或加入執行類似或不同功能的其他元件。加入元件可包括將元件插入在現有元件之間,諸如例如插入放大器及類比轉數位轉換器。在各種實例中,RF部分包括天線。
USB及/或HDMI端子可包括用於跨USB及/或HDMI連接將系統400連接至其他電子裝置的各別介面處理器。應理解輸入處理的各種態樣(例如,里德-所羅門(Reed-Solomon)錯誤校正)可依需要實施在例如分開的輸入處理IC內或處理器410內。類似地,USB或HDMI介面處理的態樣可依需要實施在分開的介面IC內或在處理器410內。經解調變、錯誤校正、及解多工物流係提供至各種處理元件,包括例如處理器410,及編碼器/解碼器430,其與記憶體及儲存元件組合操作以處理用於呈現在一輸出裝置上所需的資料流。
系統400的各種元件可提供於整合外殼內,在整合外殼內,各種元件可使用合適的連接配置425(例如,如所屬技術領域中已知的內部匯流排,包括IC間(Inter-IC, I2C)匯流排、佈線、及印刷電路板)於之間互連並傳輸資料。
系統400包括通訊介面450,該通訊介面實現經由通訊通道460與其他裝置的通訊。通訊介面450可包括但不限於經組態以透過通訊通道460傳輸及接收資料的收發器。通訊介面450可包括但不限於數據機或網路卡,且通訊通道460可實施在例如有線及/或無線媒體內。
在各種實例中,使用無線網路(諸如Wi-Fi網路,例如IEEE 802.11(IEEE係指電機電子工程師學會))將資料流或以其他方式提供至系統400。此等實例的Wi-Fi信號係透過經調適用於Wi-Fi通訊的通訊通道460及通訊介面450接收。此等實例的通訊通道460一般連接至提供對外部網路(包括網際網路)之存取以用於允許串流應用及其他過頂通訊的存取點或路由器。其他實例使用透過輸入方塊445的HDMI連接遞送資料的機上盒將經串流資料提供至系統400。又其他實例使用輸入方塊445的RF連接將經串流資料提供至系統400。如上文所指示的,各種實例以非串流方式提供資料。額外地,各種實例使用Wi-Fi以外的無線網路,例如蜂巢式網路或Bluetooth ®網路。
系統400可將輸出信號提供至各種輸出裝置,包括顯示器475、揚聲器485、及其他週邊裝置495。各種實例的顯示器475包括例如觸控螢幕顯示器、有機發光二極體(OLED)顯示器、曲面顯示器、及/或可摺疊顯示器的一或多者。顯示器475可用於電視機、平板電腦、膝上型電腦、蜂巢式電話(行動電話)、或其他裝置。顯示器475亦可與其他組件整合(例如,如智慧型手機中),或係分開的(例如,膝上型電腦的外部監視器)。在實例的各種實例中,其他週邊裝置495包括獨立數位視訊光碟(或數位多功能光碟)(DVD,針對二種用語)、光碟機、立體聲系統、及/或照明系統的一或多者。各種實例使用基於系統400的輸出提供功能的一或多個週邊裝置495。例如,光碟機執行播放系統400之輸出的功能。
在各種實例中,控制信號使用傳訊(諸如AV.Link、消費性電子控制(Consumer Electronics Control, CEC)、或以需要或不需要使用者介入的方式實現裝置對裝置控制的其他通訊協定)在系統400與顯示器475、揚聲器485、或其他週邊裝置495之間傳達。輸出裝置可經由通過各別介面470、480、及490的專用連接通訊地耦接至系統400。替代地,輸出裝置可經由通訊介面450使用通訊通道460連接至系統400。顯示器475及揚聲器485可與電子裝置(諸如例如電視機)中的系統400的其他組件整合在單一單元中。在各種實例中,顯示器介面470包括顯示驅動器,諸如例如時序控制器(T Con)晶片。
例如,若輸入445的RF部分係分開的機上盒的部件,顯示器475及揚聲器485可替代地與其他組件的一或多者分開。在顯示器475及揚聲器485係外部組件的各種實例中,輸出信號可經由專用輸出連接(包括例如HDMI埠、USB埠、或COMP輸出)提供。
實例可藉由處理器410實施的電腦軟體或藉由硬體、或藉由硬體及軟體的組合實行。作為非限制性實例,實例可藉由一或多個積體電路實施。作為非限制性實例,記憶體420可係對技術環境適當的任何類型的,且可使用任何適當的資料儲存技術實施,諸如光學記憶體裝置、磁性記憶體裝置、基於半導體的記憶體裝置、固定式記憶體、及可移除式記憶體。作為非限制性實例,處理器410可係對技術環境適當的任何類型的,並可涵蓋微處理器、一般用途電腦、特殊用途電腦、及基於多核心架構之處理器的一或多者。
各種實施方案涉及解碼。如本申請案中所使用的,「解碼(decoding)」可涵蓋例如在經接收經編碼序列上執行以產生適合顯示器的最終輸出之程序的全部或部分。在各種實例中,此類程序包括一般藉由解碼器執行之程序(例如,熵解碼、逆量化、逆轉換、及差分解碼)的一或多者。在各種實例中,此類程序亦包括藉由本申請案中描述之各種實施方案的解碼器執行的程序,例如,基於一編碼區塊之一第一範本來導出一第一候選幀內預測模式(IPM);基於該編碼區塊之一第二範本導算一第二候選IPM;及基於該第一候選IPM及該第二候選IPM來解碼該編碼區塊。
舉進一步實例,在一實例中,「解碼」僅指熵解碼,在另一實例中,「解碼」僅指差分解碼,且在另一實例中,「解碼」係指熵解碼與差分解碼的組合。不論片語「解碼程序」是否意圖具體地係指操作的子集或大致係指更廣泛者,解碼程序將基於特定描述的上下文而係清楚的並據信可係所屬技術領域中具有通常知識者良好地理解的。
各種實施方案涉及編碼。以類似於上述關於「解碼」的討論之方式,在本申請案中所使用的「編碼」可涵蓋例如在輸入視訊序列上執行以產生經編碼位元串流的程序之全部或部分。在各種實例中,此類程序包括一般藉由編碼器執行之程序(例如,分割、差分編碼、轉換、量化、及熵編碼)的一或多者。在各種實例中,此類程序亦包括藉由本申請案中描述之各種實施方案的編碼器執行的程序,例如,基於一編碼區塊之一第一範本來導出一第一候選幀內預測模式(IPM);基於該編碼區塊之一第二範本導算一第二候選IPM;及基於該第一候選IPM及該第二候選IPM來編碼該編碼區塊。
舉進一步實例,在一實例中,「編碼」僅指熵編碼,在另一實例中,「編碼」僅指差分編碼,且在另一實例中,「編碼」係指熵編碼與差分編碼的組合。不論片語「編碼程序」是否意圖具體地指稱操作的子集或大致係指更廣泛者,編碼程序將基於特定描述的上下文而係清楚的並據信可係所屬技術領域中具有通常知識者良好地理解的。
應注意,如本文中所使用的語法元素,例如,關於分割模式數目、幀內預測模式候選者數目、幀間預測模式候選者數目、分割模式候選者數目、區塊大小、分割區、分割模式、切片類型等的編碼語法皆是描述性詞彙。如此,其等未排除其他語法元素名稱的使用。
當將圖式表示成流程圖時,應瞭解其亦提供對應設備的方塊圖。類似地,當將圖式表示成方塊圖時,應瞭解其亦提供對應方法/程序的流程圖。
描述於本文中的實施方案及態樣可以例如方法或程序、設備、軟體程式、資料流、或信號實施。即使僅在單一形式的實施方案的上下文中討論(例如,僅作為方法討論),所討論之特徵的實施方案亦可以其他形式實施(例如,設備或程式)。設備可以例如適當硬體、軟體、及韌體實施。方法可在例如處理器中實施,該處理器大致係指處理裝置,包括例如電腦、微處理器、積體電路、或可程式化邏輯裝置。處理器亦包括通訊裝置,諸如例如電腦、蜂巢式電話、可攜式/個人數位助理(「PDA」)、及促進終端使用者之間的資訊的通訊的其他裝置。
對「一個實例(one example)」或「一實施例(an example)」或「一個實施方案(one implementation)」、或「一實施方案(an implementation)」以及其等的其他變化的參考意指相關於該實例描述的特定特徵、結構、特性等等係包括在至少一個實例中。因此,片語「在一個實例中(in one example)」或「在一實施例中(in an example)」或「在一個實施方案中(in one implementation)」、或「在一實施方案中(in an implementation)」的出現,以及在遍及本申請案各處出現的任何其他變化不必須全部參考至相同的實施例。
額外地,此申請案可與「判定」各項資訊相關。判定資訊可包括例如評估資訊、計算資訊、預測資訊、或從記憶體檢索資訊的一或多者。獲得可包括接收、檢索、建構、產生、及/或判定。
進一步地,此申請案可與「存取」各項資訊相關。存取資訊可包括例如接收資訊、檢索資訊(例如,從記憶體)、儲存資訊、移動資訊、複製資訊、計算資訊、判定資訊、預測資訊、或評估資訊的一或多者。
額外地,此申請案可與「接收」各項資訊相關。意圖使接收與「存取(accessing)」般成為廣泛用語。接收資訊可包括例如存取資訊或檢索資訊(例如,從記憶體)的一或多者。進一步地,在操作期間(諸如例如儲存資訊、處理資訊、傳輸資訊、移動資訊、複製資訊、抹除資訊、計算資訊、判定資訊、預測資訊、或評估資訊)一般以某種方式或另一者涉及「接收(receiving)」。
應理解下列「/」、「及/或(and/or)」、及「中之至少一者(at least one of)」在例如「A/B」、「A及/或B (A and/or B)」、及「A及B中之至少一者(at least one of A and B)」之情形中的使用意圖涵蓋僅選擇第一列出選項(A)、或僅選擇第二列出選項(B)、或選擇二個選項(A及B)。作為進一步實例,在「A、B、及/或C (A, B, and/or C)」及「A、B、及C中之至少一者(at least one of A, B, and C)」的情形中,此類片語意圖涵蓋僅選擇第一列出選項(A)、或僅選擇第二列出選項(B)、或僅選擇第三列出選項(C)、或僅選擇第一及第二列出選項(A及B)、或僅選擇第一及第三列出選項(A及C)、或僅選擇第二及第三列出選項(B及C)、或選擇所有三個選項(A及B及C)。此可針對所列出般的許多項目延伸,如對所屬及相關技術領域中具有通常知識者係清楚的。
再者,如本文中所使用的,用詞「傳訊(signal)」尤其係指將某物指示給對應解碼器。編碼器信號可包括例如幀內預測模式候選者、分割模式候選者、區塊大小、切片類型等。以此方式,在一實例中,在編碼器側及解碼器側兩者使用相同參數。因此,舉例來說,一編碼器可傳輸(明確傳訊)一特定參數至解碼器,使得解碼器可使用相同的特定參數。相反地,若解碼器已具有該特定參數以及其他參數,則可使用傳訊而不傳輸(隱式傳訊),以僅允許解碼器知道並選擇特定參數。藉由避免傳輸任何實際功能,在各種實例中實現位元節省。應理解傳訊可以各種方式達成。例如,在各種實例中,將一或多個語法元素、旗標等用以將資訊傳訊至對應解碼器。雖然前文係關於用詞「傳訊(signal)」的動詞形式,但用詞「信號(signal)」在本文中亦可使用為名詞。
如所屬技術領域中具有通常知識者所將顯而易見的,實施方案可產生經格式化以運載可例如儲存或傳輸之資訊的各種信號。該資訊可包括例如用於執行方法的指令、或由所描述的實施方案的一者產生的資料。例如,可將信號格式化以運載所描述實例的位元串流。此一信號可格式化成例如電磁波(例如,使用光譜的射頻部分)或基頻信號。格式化可包括例如編碼資料流及調變具有經編碼資料流的載波。該信號所運載的資訊可係例如類比或數位資訊。如已知的,該信號可透過各種不同的有線或無線鏈路傳輸。該信號可儲存在處理器可讀媒體上,或從處理器可讀媒體存取或接收。
於本文中描述許多實例。可單獨或採任何組合跨各種請求項類別及類型提供實例的特徵。進一步地,實例可包括單獨或採任何組合跨各種請求項類別及類型的本文所描述之特徵、裝置、或態樣的一或多者。例如,本文所描述之特徵可實施在包括如本文所描述之資訊的位元串流或信號中。根據所描述之實施例中之任一者,資訊可允許解碼器解碼位元串流、編碼器、位元串流及/或解碼器。例如,本文所描述之特徵可藉由建立及/或傳輸及/或接收及/或解碼位元串流或信號而實施。例如,本文中所描述之特徵可實施一種方法、程序、設備、儲存指令的媒體、儲存資料或信號的媒體。例如,本文中所描述之特徵可藉由電視、機上盒、蜂巢式電話、平板電腦或執行解碼的其他電子裝置來實施。電視、機上盒、蜂巢式電話、平板電腦、或其他電子裝置可顯示(例如,使用監視器、螢幕或其他類型的顯示器)所得影像(例如,來自視訊位元串流之殘量重建的影像)。電視、機上盒、蜂巢式電話、平板電腦、或其他電子裝置可接收包括經編碼影像的信號及執行解碼。
可使用幀內預測以利用圖像之局部區域內的相關性。對於幀內預測,圖像區域之紋理可類似於局部鄰區中之紋理,且可自該紋理而預測。可採用相鄰的樣本(諸如來自在目前區塊上方之樣本線的樣本,以及從最後一行經重建區塊至目前區塊左方的樣本)進行預測。
用於預測目前區塊的參考相鄰樣本可取決於由各別幀內預測模式(IPM)之幀內預測角度指示的方向。圖5展示具有參考相鄰樣本之方向性幀內預測的實例。例如,對於水平預測,可使用來自左行之參考相鄰樣本。對於垂直預測,可使用來自上方列之參考相鄰樣本。對於右斜下預測,可施用來自左上側的參考相鄰樣本。來自右上側的參考相鄰樣本可施用於左斜下預測。
圖6展示與67個IPM相關聯之幀內模式編碼的實例。為了擷取在視訊中呈現的任意邊緣方向,如圖6中所描繪,方向性幀內模式的數目可從33延伸至65,且平面及DC模式的數目可保持相同。密集方向性IPM可適用於區塊大小且用於輝度及色度幀內預測。
對於方形CU,可使用有角度IPM 2-66。預測模式可對應於經界定例如在順時針方向從45度至135度有角度幀內預測方向。
寬角幀內預測可用於非方形區塊。針對非方形區塊,可用寬角IPM置換(例如,適應性置換)多個有角度IPM。如圖6中之虛線箭頭所示,超出左下方向模式之寬角模式可經編索引有14至1,而超出右上方向之寬角模式可經編索引有67至80。平區塊( )及高區塊( )可使用廣角模式以在相反方向上置換相等數目個常規角模式。
圖7展示可用廣角幀內預測進行預測的目前 個區塊的實例。如圖7所示,一組經解碼參考樣本可用於待預測的目前 區塊。該組經解碼參考樣本可包括長度 之頂經解碼參考樣本陣列及長度 之左經解碼參考樣本陣列。如圖7所示,可提供介於目前 區塊周圍的經解碼參考樣本之幅度與所允許幀內預測角度之範圍之間的關係。
圖8展示矩陣加權幀內預測(MIP)的實例。為了預測寬度 及高度 之矩形區塊的樣本,MIP可採用該區塊左方之一行 經重建相鄰邊界樣本及該區塊上方之一行 經重建相鄰邊界樣本作為輸入。在實例中,若經重建樣本不可用,則可使用幀內預測(例如,非矩陣加權幀內預測)產生經重建樣本。可基於下列之一或多者來產生預測信號:平均化、矩陣向量乘法及/或線性內插(例如,如圖8中所示)。
對於一經幀內編碼區塊,旗標 mip_flag指示待施用MIP模式是否可被傳訊。
解碼器側幀內模式導算(DIMD)可用以導出用於編碼一編碼單元(CU)的幀內模式。圖9展示DIMD的實例。在實例中,若施用DIMD,則可從自目前區塊之相鄰像素所算出的定向梯度直方圖(HOG)來導出很可能是用於預測目前CU的最佳IPM(例如,兩個最佳IPM)的IPM(例如,兩個IPM)。可用從範本中之HOG導出的權重來組合IPM(例如,兩個預測器)與平面模式預測器,如圖9所示。
圖10展示從範本中之梯度導算DIMD之IPM的實例。在實例中,對於目前CU,可從範本中之梯度來導出IPM(例如,兩個IPM),如圖10所示。對應於65個方向性IPM的HOG(含65個資料間隔(bin))可初始化為0。對於在目前CU上方之三列解碼參考樣本及在目前CU左方之三行經解碼參考樣本的範本之中間列或中間行中的解碼參考樣本,下列一或多項可適用。置中於此經解碼參考樣本的3×3個水平索貝爾濾波器(sobel filter)及3×3垂直索貝爾濾波器分別可產出水平梯度 及垂直梯度 的正負號可指示在方向範圍(例如,四個範圍)中的哪一者中發現目標方向,該目標方向垂直於水平分量 及垂直分量 的梯度 。在實例中,若 ,則錨定方向可對應於水平方向。在實例中,若 ,錨定方向可對應於垂直方向。目標方向可相對於錨定方向形成角度 。藉由離散化按比例調整版本之 ,可發現其方向最接近目標方向的IPM之索引 。索引 之HOG資料間隔可依 增量。最大HOG資料間隔(例如,兩個最大HOG資料間隔)之索引可係所導出IPM(例如,兩個所導出IPM)之索引。對於一經幀內編碼區塊,旗標 dimd_flag指示待施用之DIMD模式是否可被傳訊。
融合可用於基於範本之幀內模式導算(TIMD)。可在本文中描述用以編碼針對TIMD使用融合所導出之CU的幀內模式。
圖11展示用於針對TIMD來導出融合之IPM的範本的實例。對於最有可能模式(MPM)中之IPM,可計算範本之預測與經重建樣本之間的絕對變換差異總和(SATD),如圖11中所示。可選擇具有最小SATD之IPM(例如,最前面二個IPM)。對於TIMD,可藉由在如圖6中所示之黑色實線箭頭之間插入方向,該組方向性IPM可從65延伸至129。此可意指經由TIMD蒐集131個模式來導出該組可能IPM。基於從涉及補充有預設模式之最有可能模式清單的第一遍測試中保留IPM(例如,兩個IPM),對於模式(例如,兩個模式中的一或多者),若IPM既不是平面也不是DC,則TIMD可就預測SATD方一面測試其兩個最接近的經延伸方向性IPM。基於 為真的條件下,此等所選取IPM(例如,最後兩個所選取IPM)可與權重(其可取決於IPM(例如,兩個IPM)之SATD)融合;否則,可使用第一個IPM。對於一經幀內編碼區塊,旗標 timd_flag指示待施用之TIMD模式是否被傳訊。
多重參考線(MRL)幀內預測可使用更多參考線以進行幀內預測。圖12展示與MRL相關聯之4個參考線的實例。區段A及F之樣本可不從經重建相鄰樣本提取,且可分別用來自區段B及E之最接近樣本來填補。圖像內預測可使用最接近的基準線(例如,參考線0)。在MRL中,可使用2條線(例如,額外線,諸如參考線1及基準線3)。所選取參考線之索引 可被傳訊及用以產生幀內預測器。
取決於區塊大小,幀內子分割區(ISP)可用以將經輝度幀內預測區塊垂直或水平地以劃分成2或4個子分割區。圖13展示ISP的實例。子分割區之經重建樣本值可係可用的以產生下一個子分割區的預測,且可重複處理子分割區。子分割區可滿足具有至少16個樣本之條件且可共用相同的幀內模式。
對於經幀內編碼區塊,旗標 isp_flag指示待施用之ISP模式是否可被傳訊。語法 isp_mode可指定垂直或水平地分割,且可基於 isp_flag為真的條件下而被傳訊。
可提供幀內預測模式傳訊。在實例中,若經選擇以預測目前CU的幀內預測模式不是DIMD、MIP模式、或TIMD(例如,其係67個IPM中之一者,如本文中所描述),則可使用CU的最有可能模式清單來傳訊幀內預測模式之索引。區塊差分脈碼調變(BDPCM)、基於範本之幀內預測(TMP)、幀內區塊複本(IBC)、及調色板編碼可被啟動以用於視訊序列(例如,僅用於畫面內容),且可當使用MPM清單時停用。
最有可能模式清單可包括主要MPM清單(例如,6個主要MPM)及次要MPM清單(例如,16個次要MPM),如圖14所示。圖14展示MPM清單的實例。MPM清單可藉由從最有可能被選擇作為用於預測目前CU之IPM者至最不可能被選擇作為用於預測目前CU之IPM者來依序新增候選IPM索引而建構。MPM清單中的冗餘可移除,例如,使得MPM清單可不包括多個相同的IPM索引。
圖15展示在編碼器側上經選擇以預測目前CU的幀內預測模式之傳訊的實例。在實例中,在編碼器側上經選擇以預測目前CU的幀內預測模式之傳訊可施用在解碼器側上。
幾何分割模式(GPM)可用於幀間預測邊界與物件的較佳對準。GPM可包括總計64個分割區以進幀間預測。在實例中,若使用幾何合併模式,則CU可藉由經幾何定位之筆直線(例如,如圖16中所示)分成分割區(例如,兩個分割區)。圖16展示針對GPM之64個分割區的實例。分割線之位置可以數學地從特定分割區之角度 及偏移距離 導出。CU中的分割區可使用其運動參數而預測。可允許分割區的單預測。在實例中,分割區可具有運動向量及參考索引。基於預測分割區,可使用具有適應性權重的摻混程序來調整沿著分割邊緣的樣本值。
可基於個別位置與分割區邊緣之間的距離而導出CU之位置的摻混權重。位置 至分割區邊緣的的距離可如下導算:
幾何分割區之一部分的權重可如下導算:
其中 取決於角度索引 。圖17展示在實例摻混程序中之權重 的實例。
圖18展示GPM幀內模式的實例。GPM幀內模式可與將幀內模式新增至GPM相關聯以組合幀間預測與幀內預測。在具有幀間及幀內預測之GPM中,針對經GPM分離之區域,可藉由加權所幀間預測樣本及所幀內預測樣本而產生預測樣本(例如,最終預測樣本)。可藉由與GPM相同的方案來導出所幀間預測樣本,其中可藉由IPM候選者清單及從編碼器傳訊的索引來導出所幀內預測樣本。IPM候選者清單大小可預定義為3。可用之IPM候選者可係針對GPM區塊邊界的平行角模式(例如,平行模式)、針對GPM區塊邊界的垂直角模式(例如,垂直模式)、及平面模式,如圖18所示。
如圖18所示,具有幀內及幀內預測之GPM可被限制以減少IPM之傳訊附加項,且避免增加在硬體解碼器上之幀內預測電路的大小。
圖19展示針對圖像之一部分的非矩形分割的實例。預測中之非矩形分割(例如,對角分割(1010)及一般幾何分割(1020))可用於描畫來自背景之物件或其他物件的形狀(例如,經結構複雜地定形狀)。矩形(例如,包括方形)分割可施用於訊框內(intra frame),且具有不同特徵之物件可被包含在經幀內編碼區塊內。在實例中,若區塊同時具有沿著某些方向的改變中區域及恆定改變中區域,或若區塊具有沿著不同方向的多於一個改變中區域,則可不藉由單一對應角模式、藉由平面模式、或藉由DC模式來描述改變中區域。
圖20展示分段式平滑影像模型的實例。在實例中,分段式平滑影像模型被視為如圖20所示,其中藉由邊緣(1110)分離具有平滑度性質(例如,不同平滑度性質)的平滑區域(例如,不同平滑區域),其可能較不準確以用單一幀內預測模型來預測該兩個區域。在近邊緣區域中,區域可被連續地分割成較小方形/矩形區塊,並分開地編碼成較小區塊。具有類似資料的較小預測區塊可導致附加項。
可支援用於CU的多於2個IPM(例如,TIMD可支援2個IPM;DIMD可支援3個IPM)。可對具有相同權重之一或多個像素執行摻混程序。為了模型化此類區塊,可考慮用於幀內預測的幾何分割模式。GPM可延伸至幀內預測,其可稱為空間GPM (SGPM)。圖21A展示SGPM的實例。此可包括分割模式及相關聯之IPM(例如,兩個相關聯之IPM)。圖21B展示分割模式及與在視訊位元串流中傳訊之SGPM相關聯的兩個IPM的實例。在實例中,若在位元串流中傳訊此等模式(如圖21B所示),則可產生附加項位元。為了在位元串流中有效地表達分割區及預測資訊,則可採用候選者清單,且可在位元串流中傳訊候選者索引。清單中之候選者可導出分割模式及幀內預測模式(例如,兩個預測模式)之組合,如圖21C所示。
圖21C展示分割模式及與在視訊位元串流中傳訊之SGPM相關聯的兩個IPM的導算組合。範本可用以產生候選者清單。範本之形狀可與TIMD相同。對於分割模式及幀內預測模式(例如,兩個幀內預測模式)的可能組合,可用延伸至範本之分割權重而針對範本產生預測,如圖22所示。圖22展示用延伸至範本之分割權重而針對範本產生預測的實例。依在範本之預測與重建之間的SATD之遞增順序對組合進行排名。候選者清單的長度可設定等於16,且候選者可視為用於目前區塊的最有可能模式SGPM組合。圖23展示SGPM之流程圖的實例。編碼器及解碼器可基於範本建構相同候選者清單。在2302,可針對可能分割模式及範本中的幀內預測模式(IPM)產生預測,且可計算SATD。在2304,可檢查一個分割模式及兩個IPM的組合,且組合的SATD可依遞增順序對組合之SATD進行排名,以建構候選者清單。在2306,可針對目前區塊中之各可能候選者產生預測,且SATD經排序以判定最終全位元率失真(RD)候選者。為了降低建置候選者清單的複雜度,可能會精簡可能分割模式數目及可能幀內預測模式數目。如本文所述,可使用64個分割模式中的26個,且可使用67個幀內預測模式中的MPM。
SGPM可嘗試限制可能分割區及IPM。權衡可發生在複雜度與效能之間(例如,在172%編碼時間及114%解碼時間增加的情況下,對於幀內組態(AI)增益為0.26%)。例如,若使用DIMD、TIMD或MIP,則可停用SGPM。例如,若使用SGPM(例如,如圖24中所示),則可停用MRL及ISP。圖24展示在編碼器側上經選擇以預測目前CU的幀內預測模式之傳訊的實例,包括新增SGPM。
對於SGPM,下列之一或多者可適用。導出幀內預測模式;選擇分割模式;組合幀內預測模式及分割模式;用於建置SGPM候選者清單的範本;SGPM候選者清單的長度;及/或介於SGPM與其他幀內模式之間的相互作用。
SGPM可包括用於經幀內編碼區塊的分割模式及相關聯之IPM(例如,兩個相關聯之IPM)。SGPM模式可與其他幀內模式(諸如DIMD、TIMD、ISP及/或類似者)相互作用。
幀內預測模式可用於建置候選者清單。為了降低建置候選者清單的複雜度,可能會精簡可能幀內預測模式數目。在實例中,可使用67個幀內預測模式中的MPM。可獲得與編碼區塊相關聯之MPM。可判定對應於該等MPM的第一範本之預測。可從該等MPM選擇第一候選幀內預測模式(IPM)。可基於第一範本與對應於MPM之預測的比較進行選擇。可基於範本匹配、運動估計或圖案辨識而導出預測模式。可使用幀間模式預測。可使用MPM來選擇目前訊框中之區塊的最有可能運動向量。可從編碼區塊與MPM之對應預測的比較來判定選擇。
圖25展示針對SGPM之可能IPM候選者之導算的實例。在3001,可初始化IPM清單。可用的主要MPM(例如,在2504,6個主要MPM,諸如平面、左/上方/左下/右上/左上區塊的IPM)及DIMD IPM(例如,在2506,2個DIMD IPM)可被包括於可能的幀內預測模式清單中。在2508,對於經幀內編碼切片(例如,I切片),可在清單中插入(例如,連續插入)額外IPM(例如,DC、水平及/或垂直)。在實例中,在2510,對於經幀內編碼切片,若目前可能IPM的大小未到達4,則可指示至可將至多8個IPM候選者新增至清單中。否則,在2512,可可在清單中插入(例如,連續插入)3個額外IPM,其可指示可將至多11個IPM候選者新增至經幀間編碼切片(例如,B/P切片)清單中。在實例中,若將IPM候選者插入至清單中,則可施用冗餘檢查以找出已在清單中是否存在相同IPM。在實例中,對於I切片,可能的IPM候選者可達到8個。對於SGPM,可選擇8個IPM候選者中的2個,其意指可產生 個預測,且可計算相關範本SATD成本。可檢查 比較。
可基於可動態地改變的IPM清單大小而導出SGPM的可能IPM候選者。在實例中,為了降低複雜度,最大所允許IPM清單大小可設定為 ( )。在實例中, 可係4。若可用之IPM候選者之總數目到達 ,則可終止針對SGPM的IPM候選者清單構建構程序。
在實例中,所允許IPM清單大小(例如,最大值所允許IPM清單大小)可取決於訊框解析度、切片類型、區塊大小、及/或區塊形狀。對於訊框解析度,例如,可針對更大的解析度內容(例如,4K內容)施用較大的IPM清單大小。對於切片類型,可針對經幀間編碼切片施用較小(例如,或較大)IPM清單大小。在實例中,若係B切片,則對應的IPM清單大小可設定為 。區塊大小(例如,目前區塊之寬度及/或高度)可滿足(例如,小於、大於、等於等)一特定數字。在此情況下,可針對此區塊施用較小(例如,或較大)IPM清單大小。在實例中,若區塊大小小於8×8,則對應之IPM清單大小可設定為 ,及待預測之像素數目(例如,小數目個像素)不能證明粒度(例如,額外粒度)之搜尋成本是合理的。
IPM候選者清單可藉由包括下列可能類型之IPM候選者中之一或多者而建構:平面;DIMD IPM(例如,2個DIMD IPM);TIMD IPM(例如,2個TIMD IPM);DC;或水平(例如,IPM=18)、垂直(例如,IPM=50)、對角(例如,IPM=34)、及/或反對角(例如,IPM=66)。
度之IPM清單不完全基於本文中所描述之要被新增的IPM候選者,則可例如在末端處插入來自主要MPM(例如,6個主要MPM)清單及次要MPM(例如,16個次要MPM)清單中之IPM,直到遇到IPM候選者編號(例如,最大IPM候選者)為止。
在實例中,所選取之幀內模式可包括正交於所導出TIMD及/或DIMD IPM的幀內模式。該等模式可包括在DIMD及/或TIMD模式之前/之後發現45度的模式。
待新增至清單中之本文中所描述之IPM候選者的順序可取決於切片類型、區塊大小及/或區塊形狀。本文中所描述之IPM候選者可被其他可用之IPM候選者(例如,上方/左/左下/右上/左上相鄰區塊)置換。置換可取決於切片類型、區塊大小、及/或區塊形狀。在實例中,若目前切片係經幀間編碼切片(例如,B切片),則可置換新增IPM候選者的順序,使得DC可插入至IPM清單中(例如,第一個)。在實例中,區塊形狀(例如,寬度( w)對高度( h)的比率)可滿足(例如,小於、大於、等於等)一特定數字,且可置換新增IPM候選者或可能IPM候選者的順序。在實例中,若區塊的縱橫比係 ,則來自上方/右上/左上的可用IPM可被插入至IPM清單中(例如,第一個)。
在實例中,可在上方或左範本上(例如,分開地)叫用DIMD及/或TIMD程序。可使用TIMD及/或DIMD自上方範本(例如,可經垂直定向)導出一個幀內模式,且可自左範本導出另一個幀內模式(例如,可經水平定向)。可將該等幀內模式新增至候選者清單中。該等幀內模式可被視為候選者清單之可能模式。
分割模式(例如,可能分割模式)可用於建置候選者清單。為了降低建置候選者清單的複雜度,可能會精簡可能分割模式數目。在實例中,可使用64個分割模式中的26個。
圖26展示針對SGPM之所選取可能分割模式候選者的實例。候選者可以灰線框標示,如圖26所示。對於26個分割模式,可存在所產生的 個預測,且可計算相關之範本SATD成本。可檢查 比較。
可選擇用於SGPM的可能分割模式候選者。在實例中,為了進一步降低複雜度,所允許分割模式清單大小(例如,最大化所允許分割模式清單大小)可設定為 ( )(例如, 可為8)。圖27展示SGPM之經減少所選取分割模式候選者的實例。利用分割模式的選擇,區塊可例如被平分地劃分成兩個子分割區。
在實例中,所允許分割模式清單大小(例如,最大值所允許分割模式清單大小)可取決於訊框解析度、切片類型、區塊大小、及/或區塊形狀。對於切片類型,可針對經幀間編碼切片施用較小分割模式清單大小。在實例中,切片類型可係B切片,且對應的分割模式清單大小可設定為 ,其允許中對角分割(例如,諸如圖27中之分割模式10所示)、水平分割(例如,諸如圖27中之分割模式18所示)、垂直分割(例如,諸如圖27中之分割模式36所示)、及/或對角分割(例如,諸如圖27中之分割模式55所示))。區塊大小(例如,目前區塊之寬度及/或高度)可滿足(例如,小於、大於、等於等)一特定數字。可針對區塊施用較小(例如,或較大)分割模式清單大小。在實例中,若區塊大小小於8×8,則對應的分割模式清單大小可設定為 ,其中允許對角分割(例如,圖27中之分割模式10)。
在實例中,語法元素可被傳訊以指示在編碼器側施用的分割。分割可係來自範本分析之所導出分割線的校正。可傳訊Δ角度I之值,其中I可係1、2等,其中將來自範本分析的分割(例如,最佳分割)移位+/-I度,以獲得所施用分割。
分割模式候選者的選擇可取決於區塊形狀。區塊形狀(例如,目前區塊的寬度對高度之比率)可滿足(例如,小於、大於、等於等)一特定數字。可針對區塊施用不同組所選取分割模式。在實例中,若區塊的縱橫比係 ,則對應組分割模式候選者可包括一或多個分割模式,其可導致子分割區相鄰於具有較大表面之上方邊界,諸如在圖27中的分割模式40、42、43、45、46、47、48、49、50、51、52、53、及54。
組合(例如,可能組合)可用於建置候選者清單。對於分割模式及幀內預測模式(例如,兩個幀內預測模式)的可能組合,可用延伸至範本之分割權重而針對範本產生預測。依在範本之預測與重建之間的SATD之遞增順序對組合進行排名。
圖28展示檢查及排序可能組合以導出SGPM候選者清單的的實例流程圖。可判定SGPM用於編碼區塊。可基於判定SGPM用於該編碼區塊,而獲得該編碼區塊的一第一範本及一第二範本以進行IPM導算。在一些實例中,可獲得該編碼區塊之該第一範本及該第二範本以進行幀間預測模式導算。該第二範本可與該第一範本不同。可獲得可包括該第一範本及該第二範本的一第三範本。可基於該編碼區塊之該第三範本而對與該編碼區塊相關聯的一SGPM清單中的候選者進行排名。例如,依在第三範本之預測與重建之間的各別SATD之遞增順序對SGPM清單中的候選者組合進行排名。
在2800,可用IPM產生預測。可根據分割模式來分割範本,且可計算兩個子分割範本(SATD_PART1 [m][p]及SATD_PART2 [m][p])的SATD成本。在2802,若分割模式係在SGPM候選者清單中,則在2804,可判定第一IPM m1是否存在於SGPM候選者清單中。在2806,識別SGPM候選者清單中的第二IPM m2,且可判定m2是否不同於m1。
在2808中,兩個IPM {m1, m2}可與分割模式「p」組合,且可計算整個範本的SATD成本。在2810,所計算的SATD成本可依遞增順序排名,且可更新SGPM候選者清單。在2812,可檢查可能的組合,且可達到SGPM候選者清單的最大長度。
如圖28所示,可存在 比較在實例中,對於I切片,可能的IPM候選者可達到8個,且可能分割模式可係26個,其意指 比較。識別16個候選者的搜尋可增加編碼及解碼時間。可減少分割區及預測模式的組合數目。
在本文中可描述用於建置SGPM候選者清單的可能分割及預測模式候選者之組合限制。在實例中,在選擇一個特定分割模式之後,為了減少複雜度,可基於所選取分割模式而允許用於組合的一或多個IPM候選者。在實例中,IPM候選者清單大小可預定義為3。可基於該編碼區塊之一第一範本來導出一第一候選幀內預測模式(IPM)。可基於該編碼區塊之一第二範本來導出一第二候選IPM。可基於該第一候選IPM及該第二候選IPM來解碼該編碼區塊。可基於該編碼區塊之一分割模式而選擇一第三候選IPM。可將該第一候選IPM、該第二候選IPM、及該第三候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單。可基於該IPM候選者清單來解碼該編碼區塊。幀間預測模式可使用該等範本以導出相異的幀間預測候選模式,且基於該等幀間預測候選模式來解碼該編碼區塊。
可用之IPM候選者可係針對分割區塊邊界的平行角模式(例如,平行模式)、針對分割區塊邊界的垂直角模式(例如,垂直模式)、及/或平面模式。在實例中,若選擇水平分割(例如,圖27中所示之分割模式18),則可允許水平模式(例如,平行模式)、垂直模式(vertical mode)(例如,垂直模式(perpendicular mode))用於組合。
IPM候選者清單大小可減少至2。在實例中,可將一第一候選IPM及一第二候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單。可基於該IPM候選者清單來編碼及/或解碼該編碼區塊。可用之IPM候選者可係針對分割邊界的平行角模式(例如,平行模式)及平面模式。
可用之IPM候選者可係針對分割邊界的平行角模式及其(多個)最接近的角模式。在實例中,可用之IPM候選者可係針對分割邊界的垂直角模式及其(多個)最接近的角模式。
一或多個子分割區的可用之IPM候選者可取決於所選取分割模式候選者及子分割區的位置而受到影響。在實例中,可選擇對角分割(例如,如圖27中所示之分割模式10)。針對相鄰於左邊界的子分割區,可允許在水平方向的IPM候選者。針對相鄰於上方邊界之另一子分割區,可允許在垂直方向的IPM候選者。
對於IPM(例如,第一IPM),可允許一或多個IPM候選者作為第二IPM以進行組合。
可能第二IPM候選者可係對於IPM(例如,第一IPM)較接近的角模式,其意指此等IPM索引(例如,兩個IPM索引)的絕對差可小於一數字(例如,臨限 )。此臨限 之值可經預定義且針對序列固定,或可在序列參數集(SPS)、視圖參數集(VPS)、圖像參數集(PPS)、及/或圖像標頭中傳訊,或可基於區塊大小而導出。在實例中,若水平模式(例如,IPM=18)被選擇作為IPM(例如,第一IPM),則可允許具有在(18- , 18+ )範圍內之IPM索引的角模式成為可能第二IPM候選者。
可能第二IPM候選者可係針對第一IPM的垂直角模式,其意指此等IPM索引(例如,兩個IPM索引)的絕對差可大於一數字。在實例中,若水平模式(例如,IPM=18)經選擇作為第一IPM,則可允許垂直模式(例如,諸如IPM=50)成為可能第二IPM候選者。
範本可用以產生候選者清單。範本之形狀可與TIMD相同,其可包括4個上方相鄰列及4個左相鄰行,如圖22中所示。可存在針對範本產生的 個預測,且可計算相關SATD成本以用於排序SGPM候選者。範本之設計可影響介於複雜度與效能之間的權衡。在實例中,範本之大小愈大,編碼器/解碼器可具有的運算複雜度愈高(例如,可用於存取相鄰樣本)。範本之大小愈大,分割區及預測模式之估計及選擇可愈準確。
可獲得用於建置SGPM候選者清單的範本。在實例中,範本大小可取決於訊框解析度、切片類型、區塊大小、及/或區塊形狀。在實例中,塊大小(例如,目前區塊之寬度及/或高度)可滿足(例如,小於、大於、等於等)一數字。在實例中,範本大小可設定為等於1。上部(例如,頂部)範本之高度可為1,且左範本之寬度可為1。可獲得左範本作為第一範本,且可獲得頂範本作為第二範本。可針對此區塊施用較小(例如,或較大)範本大小。為了改善估計及選擇之準確性,若區塊大小小於8×8,則對應範本可包括目前區塊的一個上方相鄰列及一個左相鄰行。在實例中,若區塊大小大於16×16,則對應範本可包括目前區塊的整個上方相鄰區塊及整個左相鄰區塊。為了降低運算與記憶體存取的複雜度,較小區塊可使用較大範本,且反之亦然。對於訊框解析度,可針對更大的解析度內容(例如,4K內容)施用較大範本大小以找出SGPM候選者。對於切片類型,可針對經幀間編碼切片施用較小(或較大)範本大小。在實例中,若切片係B切片,則對應範本大小可包括設定為 之目前區塊的一個上方相鄰列及一個左相鄰行。
範本可取決於所選取分割模式候選者及/或子分割區之位置。在實例中,可判定編碼區塊之第一及第二範本。可基於與該編碼區塊相關聯的一分割模式來判定該第一及第二編碼區塊。該編碼區塊可包括一第一分割區及一第二分割區。可基於該第一分割區來判定該編碼區塊之一第一範本。可依據基於該第一範本導出的該第一候選IPM來編碼及/或解碼該編碼區塊之該第一分割區。可基於該第二分割區來判定該編碼區塊之該第二範本。可依據基於該第二範本導出的該第二候選IPM來編碼及/或解碼該編碼區塊之該第二分割區。幀間預測模式可經整合,其中可基於該編碼區塊之各別分割區來判定該第一範本及該第二範本。可基於所導出幀間預測模式來編碼及/或解碼各別分割區。
如本文所描述,若選擇對角分割(例如,如圖27中所示之分割模式10)的對角分割,則針對相鄰於左邊界的子分割區,可允許在水平方向的IPM候選者,且針對相鄰於上方邊界之另一子分割區,可允許在垂直方向的IPM候選者。在實例中,可施用左範本以導出水平方向性模式,且可施用上述範本以導出垂直方向性模式。
在實例中,可能候選者清單長度可係靜態的。可採用候選者清單,且可在視訊資料中傳訊候選者索引。清單中之候選者可導出分割模式及幀內預測模式(例如,兩個幀內預測模式)之組合。在實例中,可基於該第一候選IPM及該第二候選IPM產生與一編碼區塊相關聯的一IPM候選者清單。基於一SGPM索引及該IPM候選者清單來判定一第一分割區的一第一預測模式及一第二分割區的一第二預測模式。
候選者清單的長度可設定等於16,且候選者可視為用於目前區塊的最有可能模式SGPM組合。對16個候選者執行全無線電失真最佳化(RDO)可。編碼時間可增加。SGPM索引可使用經截短二進位編碼,且SGPM索引的箱長度可取決於SGPM候選者清單的長度。16長度之候選者清單可產出最高有效編碼位元。
在實例中,可動態地判定可能SGPM候選者之長度。為了減少複雜度及位元成本,SGPM候選者清單之長度可設定為 ( ),且候選者清單長度可取決於訊框解析度、切片類型及/或區塊大小。對於切片類型,可針對經幀間編碼切片施用較小(或較大)SGPM候選者清單長度。在實例中,若係B切片,則對應的SGPM候選者清單長度可設定為 。區塊大小(例如,目前區塊之寬度及/或高度)可滿足(例如,小於、大於、等於等)一數字。在此情況下,可針對此區塊施用較小(例如,或較大)SGPM候選者清單長度。在實例中,若區塊大小小於8×8,則對應的SGPM候選者清單長度可設定為 。待預測的少量像素可不能證明粒度之搜尋成本是合理的。
在實例中,基於對候選者(例如,此等16個候選者)施用全RDO,可施用SATD檢查(例如,第一施用)以就最小SATD成本而論來排序此等16個候選者中之(多個)最有可能可候選者(例如,一或兩個候選者)。(多個)保留候選者(例如,保留一或兩個候選者)可執行全RDO。RDO候選者清單長度(例如,最終RDO候選者清單長)可取決於訊框解析度、切片類型、及/或區塊大小。
在實例中,對候選者施用全RDO之前,可施用SATD檢查(例如,先施用)以排序此等候選者。可針對具有低於(例如,低於或等於)一個(例如,一個最佳者,諸如一個最小者)之量的SATD成本執行全RDO程序。在實例中,可在全RDO中處理具有小於1.5倍最低SATD成本的SATD成本之候選者。
可提供介於SGPM、DIMD與/或TIMD之間的相互作用。例如,若使用DIMD及/或TIMD(例如,如圖24中所示),則可停用SGPM。可在本文中描述介於SGPM、DIMD及/或TIMD之間的相互作用。
在實例中,若DIMD經啟用,可測試SGPM。如本文所述,DIMD IPM(例如,兩個最佳DIMD IPM)可導出自HOG。可用從HOG導出的權重來組合預測器(例如,兩個預測器)與平面模式預測器。可儲存混合預測器 及相關的RDO成本 。針對SGPM,DIMD IPM(例如,兩個最佳DIMS IPM)可被重複使用作為可能幀內預測模式(例如,兩個可能幀內預測模式)。64個分割模式中的26個(或本文所描述之可能分割模式)可用於與DIMD IPM組合。候選者清單建構可類似於本文描述之技術。基於從SGPM候選者清單獲得最小RDO成本 及相關混合預測器 ,可執行與 比較。可傳訊旗標 dimd_sgpm_flag,其指示是否要對DIMD模式的頂部施用SGPM模式。在 為真的條件下, dimd_sgpm_flag可設定為真,可傳訊一個額外索引 dimd_sgpm_index,且經混合預測器(例如,最終經混合預測器)可被置換為
在實例中,若TIMD經啟用,可測試SGPM。本文描述,在遍次(例如,第一遍)中可保留涉及具有範本之預測及經重建樣本之間最小SATD的MPM清單之IPM(例如,最前面二個IPM)。對於此等模式(例如,兩種模式),若IPM既不是平面也不是DC,則TIMD可就預測SATD方面測試其最接近的經延伸方向性IPM(例如,兩個最接近的經延伸方向IPM)。在 為真的條件下,所選取IPM(例如,最後兩個所選取IPM)可與權重(其可取決於IPM(例如,兩個IPM)之SATD)融合。可儲存混合預測器 及相關的RDO成本 。針對SGPM,TIMD IPM(例如,兩個最佳TIMD IPM)可被重複使用作為幀內預測模式。64個分割模式中的26個(或本文所描述之可能分割模式)可用於與TIMD IPM(例如,兩個最佳TIMD IPM)組合。候選者清單建構可類似於本文描述之技術。基於從SGPM候選者清單獲得最小RDO成本 及相關混合預測器 ,可執行與 比較。可傳訊旗標 timd_sgpm_flag,其指示是否要對TIMD模式的頂部施用SGPM模式。在 為真的條件下, timd_sgpm_flag可設定為真,可傳訊一個額外索引 timd_sgpm_index,且經混合預測器(例如,最終經混合預測器)可被置換為 。在實例中,若 為真,則可使用第一IPM,且SGPM模式可不施用。
可提供介於SGPM與ISP之間的相互作用。例如,若使用SGPM(例如,如圖24中所示),則可停用ISP。在實例中,若SGPM經啟用,可測試ISP。如本文所描述,取決於區塊大小,可將經輝度幀內預測區塊垂直或水平地以劃分成2或4個子分割區。子分割區之經重建樣本值可係可用的以產生下一個子分割區的預測。基於不同IPM(例如,兩個不同IPM)分別被施用於SGPM之子分割區(例如,兩個子分割區),例如,若選擇SGPM的分割模式(例如,特定分割模式),則可允許ISP。若針對SGPM選擇垂直地分割的分割模式(例如,諸如圖27中之分割模式0/1/36/37)及水平地分割的分割模式(例如,諸如圖27中之分割模式18/19/50/51),則可允許ISP。
ISP之分割方向可取決於SGPM之分割模式。在實例中,若SGPM用以垂直地分割區目前區塊,則左與右子分割區可施用不同IPM(例如,兩個不同IPM)。在實例中,若ISP用以垂直地分割區塊,則右子分割區可不受益於使用在左子分割區中的可用之經重建樣本,這係由於其等不同的IPM。ISP的分割方向可垂直於SGPM的分割邊界。若選擇SGPM垂直分割模式中之一者,則取決於區塊大小,區塊可被水平地劃分成2或4個子分割區,且反之亦然。可略過指定垂直或水平地分割之語法 isp_mode的傳訊。
圖29係(例如,在解碼器側)基於特性來判定IPM候選者清單大小的實例流程圖。
在實例中,可獲得特性。特性可與目前區塊相關聯。特性可包括下列之一或多者:訊框解析度、切片類型、區塊大小及/或區塊形狀。在實例中,訊框解析度可係4k。切片類型可為經幀內編碼切片,諸如I切片。切片類型可為經幀間編碼切片,諸如B切片。區塊大小可與寬度( w)及高度( h)相關聯。在實例中,區塊大小可係8×8。
可基於複數個特性(例如,訊框解析度、切片類型、區塊大小、及/或區塊形狀)中之一或多者,針對與目前區塊相關聯的SGPM來判定一幀內預測模式候選者清單大小。在實例中,若切片類型係經幀內編碼切片及/或若訊框解析度係4k,則清單大小可設定為3。若區塊大小係8×8或小於8×8,則清單大小可設定為2。可基於該所判定幀內預測模式候選者清單大小,針對該目前區塊獲得一幀內預測模式候選者清單。在實例中,獲得清單可包括檢查潛在IPM候選者是否已在清單中(例如,冗餘檢查)及是否新增潛在候選者將導致清單超過其所判定候選者清單大小(例如,使用如本文所述之NUM_VALID_IPM)。
在實例中,可基於該複數個特性中之一或多者,判定與該目前區塊相關聯的一SGPM候選者清單大小。可基於該所判定SGPM候選者清單大小而獲得與該目前區塊相關聯的一SGPM候選者清單。可基於該SGPM候選者清單來解碼該目前區塊。特性可包括下列之一或多者:訊框解析度、切片類型、區塊大小或區塊形狀。
圖30係(例如,在解碼器側)基於特性來判定分割區候選者清單大小的實例流程圖。
在實例中,在3002,可獲得一或多個特性。特性可與目前區塊相關聯。特性可包括下列之一或多者:訊框解析度、切片類型、區塊大小及/或區塊形狀。在實例中,訊框解析度可係4k。切片類型可為經幀內編碼切片,諸如I切片。切片類型可為經幀間編碼切片,諸如B切片。區塊大小可與寬度( w)及高度( h)相關聯。在實例中,區塊大小可係8×8。
在3004,可基於複數個特性(例如,訊框解析度、切片類型、區塊大小、及/或區塊形狀)中之一或多者,針對與目前區塊相關聯的SGPM來判定一分割模式候選者清單大小。在3006,可基於該所判定分割模式候選者清單大小,針對該目前區塊獲得一分割模式候選者清單。在3008,可基於該分割模式候選者清單來解碼該目前區塊。
圖31係(例如,在編碼器側上)基於特性來判定IPM候選者清單大小的實例流程圖。
在實例中,在3102,可獲得特性。特性可與目前區塊相關聯。特性可包括下列之一或多者:訊框解析度、切片類型、區塊大小及/或區塊形狀。在實例中,訊框解析度可係4k。切片類型可為經幀內編碼切片,諸如I切片。切片類型可為經幀間編碼切片,諸如B切片。區塊大小可與寬度( w)及高度( h)相關聯。在實例中,區塊大小可係8×8。
在3104,可基於複數個特性(例如,訊框解析度、切片類型、區塊大小、及/或區塊形狀)中之一或多者,針對與目前區塊相關聯的SGPM來判定一幀內預測模式候選者清單大小。在實例中,若切片類型係經幀內編碼切片及/或若訊框解析度係4k,則清單大小可設定為3。若區塊大小係8×8或小於8×8,則清單大小可設定為2。在3106,可基於該所判定幀內預測模式候選者清單大小,針對該目前區塊獲得一幀內預測模式候選者清單。在實例中,該產生可包括檢查潛在IPM候選者是否已在清單中(例如,冗餘檢查)及是否新增潛在候選者將導致清單超過其所判定候選者清單大小(例如,使用如本文所述之NUM_VALID_IPM)。
在實例中,可基於該複數個特性中之一或多者,判定與該目前區塊相關聯的一SGPM候選者清單大小。可基於該所判定SGPM候選者清單大小而獲得與該目前區塊相關聯的一SGPM候選者清單。在3108,可基於該SGPM候選者清單來編碼該目前區塊。特性可包括下列之一或多者:訊框解析度、切片類型、區塊大小或區塊形狀。
圖32係(例如,在編碼器側上)基於特性來判定分割區候選者清單大小的實例流程圖。
在實例中,在3202,可獲得特性。特性可與目前區塊相關聯。特性可包括下列之一或多者:訊框解析度、切片類型、區塊大小及/或區塊形狀。在實例中,訊框解析度可係4k。切片類型可為經幀內編碼切片,諸如I切片。切片類型可為經幀間編碼切片,諸如B切片。區塊大小可與寬度( w)及高度( h)相關聯。在實例中,區塊大小可係8×8。
在3204,可基於複數個特性(例如,訊框解析度、切片類型、區塊大小、及/或區塊形狀)中之一或多者,針對與目前區塊相關聯的SGPM來判定一分割模式候選者清單大小。在3206,可基於該所判定分割模式候選者清單大小,針對該目前區塊獲得一分割模式候選者清單。在3208,可基於該分割模式候選者清單來編碼該目前區塊。
圖33係基於使用不同範本導出之候選IPM來處理(例如編碼及/或解碼)編碼區塊的實例流程圖。在3302,可基於該編碼區塊之一第一範本來導出一第一候選幀內預測模式(IPM)。在3304,可基於該編碼區塊之一第二範本來導出一第二候選IPM。在3306,可基於該第一候選IPM及該第二候選IPM來處理(例如,編碼及/或解碼)該編碼區塊。
雖然於上文描述採特定組合的特徵及元件,所屬技術領域中具有通常知識者將理解各特徵或元件可單獨使用或與其他特徵及元件組合使用。額外地,本文描述的方法可以併入電腦可讀媒體中以用於由電腦或處理器執行的電腦程式、軟體、或韌體實施。電腦可讀媒體的實例包括電子信號(透過有線或無線連接傳輸)及電腦可讀儲存媒體。電腦可讀儲存媒體的實例包括但不限於唯讀記憶體(ROM)、隨機存取記憶體(RAM)、暫存器、快取記憶體、半導體記憶體裝置、磁性媒體(諸如內接硬碟及可移除式磁碟)、磁光媒體、及光學媒體(諸如,CD-RAM光碟、及數位多功能光碟(digital versatile disk, DVD))。與軟體相關聯的處理器可用以實施用於在WTRU、UE、終端機、基地台、RNC、或任何主機電腦中使用的射頻收發器。
100:通訊系統 102a:無線傳輸/接收單元(WTRU) 102b:無線傳輸/接收單元(WTRU) 102c:無線傳輸/接收單元(WTRU) 102d:無線傳輸/接收單元(WTRU) 104:無線電存取網路(RAN) 106:核心網路 108:公共交換電話網路(PSTN) 110:網際網路 112:其他網路 113:無線電存取網路(RAN) 114a:基地台 114b:基地台 115:核心網路 116:空中介面 118:處理器 120:收發器 122:傳輸/接收元件 124:揚聲器/麥克風 126:鍵板 128:顯示器/觸控板 130:非可移除式記憶體 132:可移除式記憶體 134:電源 136:全球定位系統(GPS)晶片組 138:週邊設備 160a:eNode-B 160b:eNode-B 160c:eNode-B 162:行動性管理實體(MME) 164:服務閘道 166:封包資料網路(PDN)閘道 180a:gNB 180b:gNB 180c:gNB 182a:存取及行動性管理功能(AMF) 182b:存取及行動性管理功能(AMF) 183a:對話管理功能(SMF) 183b:對話管理功能(SMF) 184a:使用者平面功能(UPF) 184b:使用者平面功能(UPF) 185a:資料網路(DN) 185b:資料網路(DN) 200:編碼器 201:預編碼處理 202:分割 205:決定 210:減去 225:轉換 230:量化 240:解量化 245:熵編碼 250:逆轉換 255:組合 260:幀內預測 265:迴路內濾波器 270:補償 275:運動評估 280:參考圖像緩衝器 300:解碼器 330:熵解碼 335:劃分 340:解量化 350:逆轉換 355:組合 360:幀內預測 365:迴路內濾波器 370:獲得 375:運動補償預測 380:參考圖像緩衝器 385:後解碼處理 400:系統 410:處理器 420:記憶體 425:連接配置 430:編碼器/解碼器模組 440:儲存裝置 445:輸入方塊;輸入裝置 450:通訊介面 460:通訊通道 470:介面;顯示器介面 475:顯示器 480:介面 485:揚聲器 490:介面 495:週邊裝置 1010:對角分割 1020:一般幾何分割 1110:邊緣 2302:方塊 2304:方塊 2306:方塊 2308:方塊 2502:方塊 2504:方塊 2506:方塊 2508:方塊 2510:方塊 2512:方塊 2514:方塊 2800:方塊 2802:方塊 2804:方塊 2806:方塊 2808:方塊 2810:方塊 2812:方塊 2814:方塊 2902:方塊 2904:方塊 2906:方塊 2908:方塊 3002:方塊 3004:方塊 3006:方塊 3008:方塊 3102:方塊 3104:方塊 3106:方塊 3108:方塊 3202:方塊 3204:方塊 3206:方塊 3208:方塊 3302:方塊 3304:方塊 3306:方塊 H:高度 N2:介面 N3:介面 N4:介面 N6:介面 N11:介面 S1:介面 W:寬度 X2:介面 Xn:介面
[圖1A]係繪示一或多個經揭示實施例可實施於其中之實例通訊系統的系統圖。 [圖1B]係繪示根據一實施例之可使用在繪示於圖1A中的通訊系統內的實例無線傳輸/接收單元(wireless transmit/receive unit, WTRU)的系統圖。 [圖1C]係繪示根據一實施例之可使用在繪示於圖1A中的通訊系統內的實例無線電存取網路(radio access network, RAN)及實例核心網路(core network, CN)的系統圖。 [圖1D]係繪示根據一實施例之可使用在繪示於圖1A中的通訊系統內的進一步實例RAN及進一步實例CN的系統圖。 [圖2]繪示實例視訊編碼器。 [圖3]繪示實例視訊解碼器。 [圖4]繪示各種態樣及實例可實施於其中之系統的實例的圖。 [圖5]展示具有參考相鄰樣本之方向性幀內預測的實例。 [圖6]展示與67個幀內預測模式(IPM)相關聯之幀內模式編碼的實例。 [圖7]展示可用廣角幀內預測進行預測的目前 個區塊的實例。 [圖8]展示矩陣加權幀內預測(matrix weighted intra prediction, MIP)的實例。 [圖9]展示解碼器側幀內預測模式導算(DIMD)的實例。 [圖10]展示從範本中之梯度導算DIMD之IPM的實例。 [圖11]展示用於針對基於範本之幀內模式導算(template-based intra mode derivation, TIMD)來導出融合之IPM的範本的實例。 [圖12]展示與多重參考線(MRL)相關聯之4個參考線的實例。 [圖13]展示幀內子分割區(ISP)的實例。 [圖14]展示最有可能模式(MPM)清單的實例。 [圖15]展示在編碼器側上經選擇以預測目前編碼單元(CU)的幀內預測模式之傳訊的實例。 [圖16]展示幾何分割模式(GPM)之64個分割區的實例。 [圖17]展示GPM中的摻混實例。 [圖18]展示GPM幀內模式的實例。 [圖19]展示在針對圖像之一部分的幀間預測中之非矩形分割的實例。 [圖20]展示分段式平滑影像模型的實例。 [圖21A]展示空間幾何分割模式(SGPM)的實例。 [圖21B]展示分割模式及與在視訊位元串流中傳訊之SGPM相關聯的兩個IPM的實例。 [圖21C]展示分割模式及與在視訊位元串流中傳訊之SGPM相關聯的兩個IPM的導算組合。 [圖22]展示用延伸至範本之分割權重而針對範本獲得預測的實例。 [圖23]展示SGPM之流程圖的實例。 [圖24]展示在編碼器側上經選擇以預測目前CU的幀內預測模式之傳訊的實例,包括新增SGPM。 [圖25]展示針對SGPM之可能IPM候選者之導算的實例。 [圖26]展示針對SGPM之所選取可能分割模式候選者的實例。 [圖27]展示針對SGPM所提議之經簡約所選取分割模式候選者的實例。 [圖28]展示檢查及排序可能組合以導出SGPM候選者清單的實例。 [圖29]展示基於特性來判定IPM候選者清單大小的實例。 [圖30]展示基於特性來判定分割區候選者清單大小的實例。 [圖31]展示基於特性來判定IPM候選者清單大小的實例。 [圖32]展示基於特性來判定分割區候選者清單大小的實例。
2800:方塊
2802:方塊
2804:方塊
2806:方塊
2808:方塊
2810:方塊
2812:方塊
2814:方塊

Claims (26)

  1. 一種用於視訊解碼之方法,該方法包含: 基於一編碼區塊之一第一範本導算一第一候選幀內預測模式(IPM); 基於該編碼區塊之一第二範本導算一第二候選IPM;及 基於該第一候選IPM及該第二候選IPM來解碼該編碼區塊。
  2. 如請求項1之方法,其中該方法進一步包含: 將該第一候選IPM及該第二候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單,其中基於該IPM候選者清單來解碼該編碼區塊。
  3. 如請求項1之方法,其中該方法進一步包含: 基於該編碼區塊之一分割模式而選擇一第三候選IPM;及 將該第一候選IPM、該第二候選IPM、及該第三候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單,其中基於該IPM候選者清單來解碼該編碼區塊。
  4. 如請求項1之方法,其中該編碼區塊包含一第一分割區及一第二分割區,且其中該方法進一步包含: 基於該第一候選IPM及該第二候選IPM產生與該編碼區塊相關聯的一IPM候選者清單;及 基於一空間幾何分割模式(SGPM)索引及該IPM候選者清單來判定該第一分割區的一第一預測模式及該第二分割區的一第二預測模式。
  5. 如請求項1之方法,其中該方法進一步包含: 判定一SGPM用於該編碼區塊;及 基於判定用於該編碼區塊的該SGPM,獲得該編碼區塊之該第一範本及該第二範本以進行IPM導算,其中該第二範本與該第一範本不同。
  6. 如請求項1之方法,其中該方法進一步包含: 判定一SGPM用於該編碼區塊; 基於判定該SGPM用於該編碼區塊,獲得該編碼區塊之該第一範本及該第二範本以進行IPM導算; 獲得包含該第一範本及該第二範本的該編碼區塊之一第三範本;及 基於該編碼區塊之該第三範本而對與該編碼區塊相關聯的一SGPM候選者清單中的複數個候選者進行排名。
  7. 如請求項1之方法,其中該方法進一步包含: 基於與該編碼區塊相關聯的一分割模式來判定該編碼區塊之該第一範本及該第二範本。
  8. 如請求項1之方法,其中該編碼區塊包含一第一分割區及一第二分割區,且其中該方法進一步包含: 基於該第一分割區來判定該編碼區塊之該第一範本; 至少基於該第一範本導出之該第一候選IPM來解碼該編碼區塊之該第一分割區; 基於該第二分割區來判定該編碼區塊之該第二範本;及 至少基於基於該第二範本導出的該第二候選IPM來解碼該編碼區塊之該第二分割區。
  9. 如請求項1之方法,其中該方法進一步包含: 獲得該編碼區塊之一左範本作為該第一範本;及 獲得該編碼區塊之一頂範本作為該第二範本。
  10. 如請求項1之方法,其中該方法進一步包含: 獲得具有寬度為1的該編碼區塊之一左範本作為該第一範本;及 獲得具有高度為1的該編碼區塊之一頂範本作為該第二範本。
  11. 如請求項1之方法,其中基於該第一範本導算該第一候選IPM進一步包含: 獲得與該編碼區塊相關聯的複數個最有可能模式(MPM); 判定對應於該複數個MPM的該第一範本之複數個預測;及 基於比較該第一範本與對應於該複數個最有可能模式的該複數個預測而從該複數個MPM選擇該第一候選IPM。
  12. 一種用於視訊編碼之方法,其包含: 基於一編碼區塊之一第一範本導算一第一候選幀內預測模式(IPM); 基於該編碼區塊之一第二範本導算一第二候選IPM;及 基於該第一候選IPM及該第二候選IPM來編碼該編碼區塊。
  13. 如請求項12之方法,其中該方法進一步包含: 將該第一候選IPM及該第二候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單,其中基於該IPM候選者清單來編碼該編碼區塊。
  14. 如請求項12之方法,其中該方法進一步包含: 基於該編碼區塊之一分割模式而選擇一第三候選IPM;及 將該第一候選IPM、該第二候選IPM、及該第三候選IPM新增至與該編碼區塊相關聯的一IPM候選者清單,其中基於該IPM候選者清單來編碼該編碼區塊。
  15. 如請求項12之方法,其中該編碼區塊包含一第一分割區及一第二分割區,且其中該方法進一步包含: 判定該第一分割區的一第一預測模式及該第二分割區的一第二預測模式; 基於該第一候選IPM及該第二候選IPM產生與該編碼區塊相關聯的一IPM候選者清單; 基於該第一預測模式及該第二預測模式來判定一特殊幾何分割模式(SGPM)索引;及 將該索引包括在該IPM候選者清單中。
  16. 如請求項12之方法,其中該方法進一步包含: 判定一SGPM用於該編碼區塊;及 基於判定用於該編碼區塊的該SGPM,獲得該編碼區塊之該第一範本及該第二範本以進行IPM導算,其中該第二範本與該第一範本不同。
  17. 如請求項12之方法,其中該方法進一步包含: 判定一SGPM用於該編碼區塊; 基於判定該SGPM用於該編碼區塊,獲得該編碼區塊之該第一範本及該第二範本以進行IPM導算; 獲得包含該第一範本及該第二範本的該編碼區塊之一第三範本; 基於該編碼區塊之該第三範本而對與該編碼區塊相關聯的一SGPM候選者清單中的複數個候選者進行排名;及 基於該等經排名候選者來判定一SGPM索引。
  18. 如請求項12之方法,其中該方法進一步包含: 基於與該編碼區塊相關聯的一分割模式來判定該編碼區塊之該第一範本及該第二範本。
  19. 如請求項12之方法,其中該編碼區塊包含一第一分割區及一第二分割區,且其中該方法進一步包含: 基於該第一分割區來判定該編碼區塊之該第一範本; 至少基於基於該第一範本導出之該第一候選IPM來編碼該編碼區塊之該第一分割區; 基於該第二分割區來判定該編碼區塊之該第二範本;及 至少基於基於該第二範本導出的該第二候選IPM來編碼該編碼區塊之該第二分割區。
  20. 如請求項12之方法,其中基於該第一範本導算該第一候選IPM進一步包含: 獲得與該編碼區塊相關聯的複數個最有可能模式(MPM); 判定對應於該複數個MPM的該第一範本之複數個預測;及 基於比較該第一範本與對應於該複數個最有可能模式的該複數個預測而從該複數個MPM選擇該第一候選IPM。
  21. 如請求項12之方法,其中該方法進一步包含: 基於該編碼區塊之一分割模式而選擇一第三候選IPM;及 基於在該編碼區塊之一預測與該編碼區塊之一重建之間的絕對差異總和(SAD),依遞增順序對該第一候選IPM、該第二候選IPM、及該第三候選IPM之一或多者的組合進行排名。
  22. 一種視訊解碼裝置,其包含一處理器,其中該處理器經組態以實施如請求項1至11中任一項之方法的步驟。
  23. 一種視訊編碼裝置,其包含一處理器,其中該處理器經組態以實施如請求項12至21中任一項之方法的步驟。
  24. 一種電腦程式產品,其儲存在一非暫時性電腦可讀媒體上且包含程式碼指令,該等程式碼指令當由一處理器執行時用於實施如請求項1至21中之至少一者之方法的步驟。
  25. 一種電腦程式,其包含程式碼指令,該等程式碼指令當由一處理器執行時用於實施如請求項1至21中之至少一者之方法的步驟。
  26. 一種視訊資料,其包含表示根據請求項12至21中任一項之方法中之一者編碼之編碼區塊的資訊。
TW112124462A 2022-07-05 2023-06-30 空間幾何分割模式 TW202404367A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP22306007.0 2022-07-05
EP22306007 2022-07-05

Publications (1)

Publication Number Publication Date
TW202404367A true TW202404367A (zh) 2024-01-16

Family

ID=82786772

Family Applications (1)

Application Number Title Priority Date Filing Date
TW112124462A TW202404367A (zh) 2022-07-05 2023-06-30 空間幾何分割模式

Country Status (2)

Country Link
TW (1) TW202404367A (zh)
WO (1) WO2024008611A1 (zh)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019007490A1 (en) * 2017-07-04 2019-01-10 Huawei Technologies Co., Ltd. DECODER INTEGRATED MODE (DIMD) INTEGRATED DEVICE TOOL CALCULATION COMPLEXITY REDUCTION

Also Published As

Publication number Publication date
WO2024008611A1 (en) 2024-01-11

Similar Documents

Publication Publication Date Title
CN110199523B (zh) 用于帧内平面编码的预测方法
US20210185353A1 (en) Overlapped block motion compensation
KR20200095463A (ko) 병합 모드를 위한 서브-블록 모션 도출 및 디코더측 모션 벡터 정교화
US20220377344A1 (en) Systems and methods for versatile video coding
CN113826400A (zh) 用于利用光流的解码器侧运动向量细化的预测细化的方法和装置
US20220394298A1 (en) Transform coding for inter-predicted video data
US20220385897A1 (en) Adaptive interpolation filter for motion compensation
TW202143732A (zh) 合併模式、適應性運動向量精密度及轉換跨越語法
US20220150486A1 (en) Intra sub-partitions in video coding
CN114556928A (zh) 帧内子分区相关的帧内编码
KR20220027833A (ko) 광류를 이용한 블록 경계 예측 정제
EP3909240A1 (en) Improved intra planar prediction using merge mode motion vector candidates
TW202404367A (zh) 空間幾何分割模式
TW202416715A (zh) 非幀內預測編碼區塊的等效幀內模式
TW202404365A (zh) 利用次取樣之模板匹配預測
TW202404357A (zh) 色度多重轉換選擇
TW202406346A (zh) 具有翻轉的幀內模板匹配
WO2024079193A1 (en) Extended angular prediction modes with decoder side refinement
WO2024079185A1 (en) Equivalent intra mode for non-intra predicted coding blocks
WO2023118048A1 (en) Most probable mode list generation with template-based intra mode derivation and decoder-side intra mode derivation
WO2023194568A1 (en) Template based most probable mode list reordering
WO2024079187A1 (en) Video coding combining intra-sub partition and template-based intra-mode derivation techniques
WO2023194193A1 (en) Sign and direction prediction in transform skip and bdpcm
WO2023198535A1 (en) Residual coefficient sign prediction with adaptive cost function for intra prediction modes
JP2024513939A (ja) 重複ブロック動き補償