TW202101985A - 子圖片適應性解析度改變方法及裝置 - Google Patents

子圖片適應性解析度改變方法及裝置 Download PDF

Info

Publication number
TW202101985A
TW202101985A TW109107953A TW109107953A TW202101985A TW 202101985 A TW202101985 A TW 202101985A TW 109107953 A TW109107953 A TW 109107953A TW 109107953 A TW109107953 A TW 109107953A TW 202101985 A TW202101985 A TW 202101985A
Authority
TW
Taiwan
Prior art keywords
sub
picture
resolution
pictures
arc
Prior art date
Application number
TW109107953A
Other languages
English (en)
Inventor
永 何
賀玉文
羅夫 奈夫
Original Assignee
美商Vid衡器股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商Vid衡器股份有限公司 filed Critical 美商Vid衡器股份有限公司
Publication of TW202101985A publication Critical patent/TW202101985A/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

提供了針對子圖片適應性解析度改變(ARC) (例如,在圖片和/或視訊位元串流或訊框中)的程序、方法、架構、裝置、系統、裝置和電腦程式產品。其中包括一種方法,該方法包括:接收包括用於視埠的適應性切換的子圖片屬性資訊的補充增強資訊(SEI)訊息,以及基於該子圖片屬性資訊來執行ARC。

Description

子圖片適應性解析度改變方法及裝置
相關申請案的交叉引用
本申請要求2019年3月11日在美國專利商標局提交的美國臨時申請號62/816,686和2019年6月25日在美國專利商標局提交的美國臨時申請號62/866,528的優先權和益處,其各自的全部內容藉由引用而被併入本文,便如同在以下被整體地和針對所有適用目的而被完全闡述一樣。
本文揭露的實施例主要涉及用於通信系統中的圖片和/或視訊寫碼的方法和裝置。
在以下詳細描述中,闡述了許多具體細節以提供對本文所揭露的實施例和/或範例的透徹理解。然而,將理解,可以在沒有本文闡述的一些或全部具體細節的情況下實踐這樣的實施例和範例。在其它情況下,沒有詳細描述公知的方法、程序、元件和電路,以免混淆下面的描述。此外,本文中沒有具體描述的實施例和範例可以代替本文中描述、揭露或以其他方式明確地、隱含地和/或固有地(統稱為“提供”)提供的實施例和其他範例或與其組合地實施。儘管本文描述和/或要求保護了各種實施例(其中,裝置、系統、裝置等和/或其任何元件執行操作、程序、演算法、功能等和/或其任何部分),但是應當理解,本文描述和/或要求保護的任何實施例假定了任何裝置、系統、裝置等和/或其任何元件被配置成執行任何操作、程序、演算法、功能等和/或其任何部分。代表性通信網路
本文提供的方法、裝置和系統非常適合於涉及有線和無線網路這兩者的通信。有線網路是公知的。關於圖1A至圖1D提供了各種類型的無線裝置和基礎設施的概述,其中網路的各種元件可以利用、執行這裡提供的方法、裝置和系統,和/或根據這裡提供的方法、裝置和系統來被佈置和/或被調適和/或被配置以用於該方法、裝置和系統。
圖1A是示出了可以實施所揭露的一個或複數實施例的範例性通信系統100的圖式。該通信系統100可以是為複數無線使用者提供諸如語音、資料、視訊、訊息傳遞、廣播等內容的多重存取系統。該通信系統100可以藉由共用包括無線頻寬在內的系統資源而使複數無線使用者能夠存取此類內容。舉例來說,通信系統100可以使用一種或多種通道存取方法,例如分碼多重存取(CDMA)、分時多重存取(TDMA)、分頻多重存取(FDMA)、正交FDMA(OFDMA)、單載波FDMA(SC-FDMA)、零尾唯一字DFT-擴展OFDM(ZT UW DTS-s OFDM)、唯一字OFDM(UW-OFDM)、資源塊過濾OFDM以及濾波器組多載波(FBMC)等等。
如圖1A所示,通信系統100可以包括無線傳輸/接收單元(WTRU)102a、102b、102c、102d、RAN 104/113、CN 106/115、公共交換電話網路(PSTN)108、網際網路110以及其他網路112,然而應該瞭解,所揭露的實施例設想了任意數量的WTRU、基地台、網路和/或網路元件。WTRU 102a、102b、102c、102d每一者可以是被配置成在無線環境中操作和/或通信的任何類型的裝置。舉例來說,WTRU 102a、102b、102c、102d任何一者都可以被稱為“站”和/或“STA”,其可以被配置成傳輸和/或接收無線信號,並且可以包括使用者設備(UE)、行動站、固定或行動用戶單元、基於訂閱的單元、呼叫器、行動電話、個人數位助理(PDA)、智慧型電話、膝上型電腦、小筆電、個人電腦、無線感測器、熱點或Mi-Fi裝置、物聯網(IoT)裝置、手錶或其他可穿戴裝置、頭戴顯示器(HMD)、車輛、無人機、醫療裝置和應用(例如遠端手術)、工業裝置和應用(例如機器人和/或在工業和/或自動處理鏈環境中操作的其他無線裝置)、消費類電子裝置、以及在商業和/或工業無線網路上操作的裝置等等。WTRU 102a、102b、102c、102d中的任何一者可被可交換地稱為UE。
該通信系統100還可以包括基地台114a和/或基地台114b。基地台114a、114b的每一者可以是被配置成藉由以無線方式與WTRU 102a、102b、102c、102d中的至少一者有無線介面來促進存取一個或複數通信網路(例如CN 106/115、網際網路110、和/或其他網路112)的任何類型的裝置。例如,基地台114a、114b可以是基地收發站(BTS)、節點B、e節點B、本地節點B、本地e節點B、gNB、新無線電(NR)節點B、網站控制器、存取點(AP)、以及無線路由器等等。雖然基地台114a、114b的每一者都被描述成了單個元件,然而應該瞭解,基地台114a、114b可以包括任何數量的互連基地台和/或網路元件。
基地台114a可以是RAN 104/113的一部分,其還可以包括其他基地台和/或網路元件(未顯示),例如基地台控制器(BSC)、無線電網路控制器(RNC)、中繼節點等等。基地台114a和/或基地台114b可被配置成在名為胞元(未顯示)的一個或複數載波頻率上傳輸和/或接收無線信號。這些頻率可以處於授權頻譜、無授權頻譜或是授權與無授權頻譜的組合之中。胞元可以為相對固定或者有可能隨時間變化的特定地理區域提供無線服務覆蓋。胞元可被進一步分成胞元扇區。例如,與基地台114a相關聯的胞元可被分為三個扇區。由此,在一個實施例中,基地台114a可以包括三個收發器,例如,胞元的每一個扇區有一個。在實施例中,基地台114a可以使用多輸入多輸出(MIMO)技術,並且可以為胞元的每一個扇區使用複數收發器。例如,藉由使用波束成形,可以在期望的空間方向上傳輸和/或接收信號。
基地台114a、114b可以經由空中介面116來與WTRU 102a、102b、102c、102d中的一者或多者進行通信,其中所述空中介面可以是任何適當的無線通訊鏈路(例如射頻(RF)、微波、釐米波、微米波、紅外線(IR)、紫外線(UV)、可見光等等)。空中介面116可以使用任何適當的無線電存取技術(RAT)來建立。
更具體地說,如上所述,通信系統100可以是多重存取系統,並且可以使用一種或多種通道存取方案,例如CDMA、TDMA、FDMA、OFDMA以及SC-FDMA等等。例如,RAN 104/113中的基地台114a與WTRU 102a、102b、102c可以實施無線電技術,例如通用行動電信系統(UMTS)陸地無線電存取(UTRA),其可以使用寬頻CDMA(WCDMA)來建立空中介面115/116/117。WCDMA可以包括如高速封包存取(HSPA)和/或演進型HSPA(HSPA+)之類的通信協定。HSPA可以包括高速下鏈(DL)封包存取(HSDPA)和/或高速UL封包存取(HSUPA)。
在實施例中,基地台114a和WTRU 102a、102b、102c可以實施無線電技術,例如演進型UMTS陸地無線電存取(E-UTRA),其可以使用長期演進(LTE)和/或先進LTE(LTE-A)和/或先進LTE Pro(LTE-A Pro)來建立空中介面116。
在實施例中,基地台114a和WTRU 102a、102b、102c可以實施可以使用新無線電(NR)建立空中介面116的無線電技術,例如NR無線電存取。
在實施例中,基地台114a和WTRU 102a、102b、102c可以實施多種無線電存取技術。例如,基地台114a和WTRU 102a、102b、102c可以將LTE無線電存取和NR無線電存取(例如使用雙連接(DC)原理)實施在一起。由此,WTRU 102a、102b、102c使用的空中介面可以多種類型的無線電存取技術和/或向/從多種類型的基地台(例如,eNB和gNB)傳送的傳輸為特徵。
在其他實施例中,基地台114a和WTRU 102a、102b、102c可以實施以下的無線電技術,例如IEEE 802.11(例如,無線保真度(WiFi))、IEEE 802.16(例如,全球互通微波存取(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000 EV-DO、臨時標準2000(IS-2000)、臨時標準95(IS-95)、臨時標準856(IS-856)、全球行動通信系統(GSM)、用於GSM演進的增強資料速率(EDGE)、以及GSM EDGE(GERAN)等等。
圖1A中的基地台114b可以例如是無線路由器、本地節點B、本地e節點B或存取點,並且可以使用任何適當的RAT來促成局部區域中的無線連接,例如營業場所、住宅、車輛、校園、工業設施、空中走廊(例如供無人機使用)以及道路等等。在一個實施例中,基地台114b與WTRU 102c、102d可以藉由實施IEEE 802.11之類的無線電技術來建立無線區域網路(WLAN)。在實施例中,基地台114b與WTRU 102c、102d可以藉由實施IEEE 802.15之類的無線電技術來建立無線個人區域網路(WPAN)。在再一個實施例中,基地台114b和WTRU 102c、102d可藉由使用基於蜂巢的RAT(例如WCDMA、CDMA2000、GSM、LTE、LTE-A、LTE-A Pro、NR等等)來建立微微胞元或毫微微胞元。如圖1A所示,基地台114b可以直連到網際網路110。由此,基地台114b不需要經由CN 106/115來存取網際網路110。
RAN 104/113可以與CN 106/115進行通信,所述CN可以是被配置成向WTRU 102a、102b、102c、102d的一者或多者提供語音、資料、應用和/或網際網路協定語音(VoIP)服務的任何類型的網路。該資料可以具有不同的服務品質(QoS)需求,例如不同的輸送量需求、潛時需求、容錯需求、可靠性需求、資料輸送量需求、以及移動性需求等等。CN 106/115可以提供呼叫控制、記帳服務、基於行動位置的服務、預付費呼叫、網際網路連接、視訊分發等等,和/或可以執行使用者認證之類的高級安全功能。雖然在圖1A中沒有顯示,然而應該瞭解,RAN 104/113和/或CN 106/115可以直接或間接地和其他那些與RAN 104/113使用相同RAT或不同RAT的RAN進行通信。例如,除了與使用NR無線電技術的RAN 104/113相連之外,CN 106/115還可以與使用GSM、UMTS、CDMA 2000、WiMAX、E-UTRA或WiFi無線電技術的別的RAN(未顯示)通信。
CN 106/115還可以充當供WTRU 102a、102b、102c、102d存取PSTN 108、網際網路110和/或其他網路112的閘道。PSTN 108可以包括提供簡易老式電話服務(POTS)的電路交換電話網路。網際網路110可以包括使用了共同通信協定(例如傳輸控制協定/網際網路協定(TCP/IP)網際網路協定族中的TCP、使用者資料報協定(UDP)和/或IP)的全球性互聯電腦網路及裝置之系統。所述網路112可以包括由其他服務供應商擁有和/或操作的有線或無線通訊網路。例如,所述網路112可以包括與一個或複數RAN相連的另一個CN,其中所述一個或複數RAN可以與RAN 104/113使用相同RAT或不同RAT。
通信系統100中的一些或所有WTRU 102a、102b、102c、102d可以包括多模式能力(例如WTRU 102a、102b、102c、102d可以包括在不同無線鏈路上與不同無線網路通信的複數收發器)。例如,圖1A所示的WTRU 102c可被配置成與使用基於蜂巢的無線電技術的基地台114a通信,以及與可以使用IEEE 802無線電技術的基地台114b通信。
圖1B是示出了範例性WTRU 102的系統圖式。如圖1B所示,WTRU 102可以包括處理器118、收發器120、傳輸/接收元件122、揚聲器/麥克風124、小鍵盤126、顯示器/觸控板128、非可移記憶體130、可移記憶體132、電源134、全球定位系統(GPS)晶片組136和/或其他週邊設備138。應該瞭解的是,在保持符合實施例的同時,WTRU 102還可以包括前述元件的任何子組合。
處理器118可以是通用處理器、專用處理器、常規處理器、數位訊號處理器(DSP)、複數微處理器、與DSP核心關聯的一個或複數微處理器、控制器、微控制器、專用積體電路(ASIC)、現場可程式設計閘陣列(FPGA)電路、其他任何類型的積體電路(IC)以及狀態機等等。處理器118可以執行信號寫碼、資料處理、功率控制、輸入/輸出處理、和/或其他任何能使WTRU 102在無線環境中操作的功能。處理器118可以耦合至收發器120,收發器120可以耦合至傳輸/接收元件122。雖然圖1B將處理器118和收發器120描述成各別組件,然而應該瞭解,處理器118和收發器120也可以一起整合在一電子元件或晶片中。
傳輸/接收元件122可被配置成經由空中介面116來傳輸或接收往或來自基地台(例如,基地台114a)的信號。舉個例子,在一個實施例中,傳輸/接收元件122可以是被配置成傳輸和/或接收RF信號的天線。作為範例,在一實施例中,傳輸/接收元件122可以是被配置成傳輸和/或接收IR、UV或可見光信號的放射器/檢測器。在再一個實施例中,傳輸/接收元件122可被配置成傳輸和/或接收RF和光信號兩者。應該瞭解的是,傳輸/接收元件122可以被配置成傳輸和/或接收無線信號的任何組合。
雖然在圖1B中將傳輸/接收元件122描述成是單個元件,但是WTRU 102可以包括任何數量的傳輸/接收元件122。更具體地說,WTRU 102可以使用MIMO技術。由此,在一個實施例中,WTRU 102可以包括兩個或複數經由空中介面116來傳輸和接收無線信號的傳輸/接收元件122(例如複數天線)。
收發器120可被配置成對傳輸/接收元件122所要傳輸的信號進行調變,以及對傳輸/接收元件122接收的信號進行解調。如上所述,WTRU 102可以具有多模式能力。因此,收發器120可以包括使WTRU 102能借助多種RAT(例如NR和IEEE 802.11)來進行通信的複數收發器。
WTRU 102的處理器118可以耦合到揚聲器/麥克風124、小鍵盤126和/或顯示器/觸控板128(例如液晶顯示器(LCD)顯示單元或有機發光二極體(OLED)顯示單元),並且可以接收來自揚聲器/麥克風124、小鍵盤126和/或顯示器/觸控板128(例如液晶顯示器(LCD)顯示單元或有機發光二極體(OLED)顯示單元)的使用者輸入資料。處理器118還可以向揚聲器/麥克風124、小鍵盤126和/或顯示器/觸控板128輸出使用者資料。此外,處理器118可以從諸如非可移記憶體130和/或可移記憶體132之類的任何適當的記憶體中存取資訊,以及將資料存入這些記憶體。非可移記憶體130可以包括隨機存取記憶體(RAM)、唯讀記憶體(ROM)、硬碟或是其他任何類型的記憶存放裝置。可移記憶體132可以包括用戶身份模組(SIM)卡、記憶條、安全數位(SD)記憶卡等等。在其他實施例中,處理器118可以從那些並非實體位於WTRU 102的記憶體存取資訊,以及將資料存入該記憶體,作為範例,此類記憶體可以位於伺服器或家用電腦(未顯示)。
處理器118可以接收來自電源134的電力,並且可被配置分發和/或控制用於WTRU 102中的其他組件的電力。電源134可以是為WTRU 102供電的任何適當裝置。例如,電源134可以包括一個或複數乾電池組(如鎳鎘(NiCd)、鎳鋅(NiZn)、鎳氫(NiMH)、鋰離子(Li-ion)等等)、太陽能電池以及燃料電池等等。
處理器118還可以耦合到GPS晶片組136,該GPS晶片組可被配置成提供與WTRU 102的目前位置相關的位置資訊(例如經度和緯度)。除了還有GPS晶片組136資訊或將GPS晶片組136資訊取而代之的是,WTRU 102可以經由空中介面116接收來自基地台(例如基地台114a、114b)的位置資訊,和/或根據從兩個或複數附近基地台接收的信號定時來確定其位置。應該瞭解的是,在保持符合實施例的同時,WTRU 102可以借助任何適當的定位方法來獲取位置資訊。
處理器118還可以耦合到其他週邊設備138,其中所述週邊設備可以包括提供附加特徵、功能和/或有線或無線連接的一個或複數軟體和/或硬體模組。例如,所述週邊設備138可以包括加速度計、電子指南針、衛星收發器、數位相機(用於照片和/或視訊)、通用序列匯流排(USB)埠、振動裝置、電視收發器、免持耳機、藍牙®模組、調頻(FM)無線電單元、數位音樂播放機、媒體播放機、視訊遊戲機模組、網際網路瀏覽器、虛擬實境和/或增強實境(VR/AR)裝置、以及活動跟蹤器等等。所述週邊設備138可以包括一個或複數感測器,所述感測器可以是以下的一者或多者:陀螺儀、加速度計、霍爾效應感測器、磁力計、方位感測器、鄰近感測器、溫度感測器、時間感測器、地理位置感測器、高度計、光感測器、觸控感測器、磁力計、氣壓計、手勢感測器、生物測定感測器和/或濕度感測器等。
WTRU 102可以包括全雙工無線電裝置,其中對於該無線電裝置來說,一些或所有信號(例如與用於UL(例如對傳輸而言)和下鏈(例如對接收而言)的特別子訊框相關聯)的接收或傳輸可以是併行和/或同時的。全雙工無線電裝置可以包括借助於硬體(例如扼流圈)或是憑藉處理器(例如各別的處理器(未顯示)或是憑藉處理器118)的信號處理來減小和/或實質消除自干擾的干擾管理單元139。在實施例中,WTRU 102可以包括傳輸和接收一些或所有信號(例如與用於UL(例如對傳輸而言)或下鏈(例如對接收而言)的特別子訊框相關聯)的半雙工無線電裝置。
圖1C是示出了根據實施例的RAN 104和CN 106的系統圖式。如上所述,RAN 104可以藉由空中介面116使用E-UTRA無線電技術來與WTRU 102a、102b、102c進行通信。所述RAN 104還可以與CN 106進行通信。
RAN 104可以包括e節點B 160a、160b、160c,然而應該瞭解,在保持符合實施例的同時,RAN 104可以包括任何數量的e節點B。e節點B 160a、160b、160c每一者都可以包括經由空中介面116與WTRU 102a、102b、102c通信的一個或複數收發器。在一個實施例中,e節點B 160a、160b、160c可以實施MIMO技術。由此,舉例來說,e節點B 160a可以使用複數天線來向WTRU 102a傳輸無線信號,和/或接收來自WTRU 102a的無線信號。
e節點B 160a、160b、160c每一者都可以關聯於一個特別胞元(未顯示),並且可被配置成處理無線電資源管理決策、交接決策、UL和/或DL中的使用者排程等等。如圖1C所示,e節點B 160a、160b、160c彼此可以經由X2介面進行通信。
圖1C所示的CN 106可以包括移動性管理實體(MME)162、服務閘道(SGW)164以及封包資料網路(PDN)閘道(或PGW)166。雖然每一前述元件都被描述成是CN 106的一部分,然而應該瞭解,這其中的任一元件都可以由CN操作者之外的實體擁有和/或操作。
MME 162可以經由S1介面連接到RAN 104中的e節點B 160a、160b、160c的每一者,並且可以充當控制節點。例如,MME 162可以負責認證WTRU 102a、102b、102c的使用者,執行承載啟動/去啟動處理,以及在WTRU 102a、102b、102c的初始附著程序中選擇特定的服務閘道等等。MME 162可以提供用於在RAN 104與使用其他無線電技術(例如GSM和/或WCDMA)的其他RAN(未顯示)之間進行切換的控制平面功能。
SGW 164可以經由S1介面連接到RAN 104中的e節點B 160a、160b、160c的每一者。SGW 164通常可以路由和轉發去往/來自WTRU 102a、102b、102c的使用者資料封包。並且,SGW 164還可以執行其他功能,例如在eNB間的交接程序中錨定使用者平面,在DL資料可供WTRU 102a、102b、102c使用時觸發尋呼處理,以及管理並儲存WTRU 102a、102b、102c的上下文等等。
SGW 164可以連接到PGW 146,所述PGW可以為WTRU 102a、102b、102c提供封包交換網路(例如網際網路110)存取,以便促成WTRU 102a、102b、102c與賦能IP的裝置之間的通信。
CN 106可以促成與其他網路的通信。例如,CN 106可以為WTRU 102a、102b、102c提供對電路切換式網路(例如PSTN 108)的存取,以便促成WTRU 102a、102b、102c與傳統的陸線通信裝置之間的通信。例如,CN 106可以包括IP閘道(例如IP多媒體子系統(IMS)伺服器)或與之進行通信,並且該IP閘道可以充當CN 106與PSTN 108之間的介面。此外,CN 106可以為WTRU 102a、102b、102c提供針對所述其他網路112的存取,其中該網路可以包括其他服務供應商擁有和/或操作的其他有線和/或無線網路。
雖然在圖1A至圖1D中將WTRU描述成了無線終端,然而應該想到的是,在某些代表性實施例中,此類終端與通信網路可以使用(例如臨時或永久性)有線通信介面。
在代表性實施例中,所述其他網路112可以是WLAN。
採用基礎架構基本服務集(BSS)模式的WLAN可以具有用於所述BSS的存取點(AP)以及與所述AP相關聯的一個或複數站(STA)。所述AP可以存取或是有介面到分散式系統(DS)或是將訊務送入和/或送出BSS的別的類型的有線/無線網路。源於BSS外部且往STA的訊務可以通過AP到達並被遞送至STA。源自STA且往BSS外部的目的地的訊務可被傳送至AP,以便遞送到分別的目的地。處於BSS內部的STA之間的訊務可以通過AP來傳送,例如其中源STA可以向AP傳送訊務並且AP可以將訊務遞送至目的地STA。處於BSS內部的STA之間的訊務可被認為和/或稱為點到點訊務。所述點到點訊務可以在源與目的地STA之間(例如在其間直接)用直接鏈路建立(DLS)來傳送。在某些代表性實施例中,DLS可以使用802.11e DLS或802.11z隧道化DLS(TDLS)。使用獨立BSS(IBSS)模式的WLAN不具有AP,並且處於所述IBSS內部或是使用所述IBSS的STA(例如所有STA)彼此可以直接通信。在這裡,IBSS通信模式有時可被稱為“特定(Ad-hoc)”通信模式。
在使用802.11ac基礎設施操作模式或類似的操作模式時,AP可以在固定通道(例如主通道)上傳輸信標。所述主通道可以具有固定寬度(例如20MHz的頻寬)或是經由傳訊動態設置的寬度。主通道可以是BSS的操作通道,並且可被STA用來與AP建立連接。在某些代表性實施例中,所實施的可以是具有衝突避免的載波感測多重存取(CSMA/CA)(例如在802.11系統中)。對於CSMA/CA來說,包括AP在內的STA(例如每一個STA)可以感測主通道。如果特定STA感測到/檢測到和/或確定主通道繁忙,那麼所述特別STA可以回退。在指定的BSS中,在任何指定時間都有一個STA(例如只有一個站)進行傳輸。
高輸送量(HT)STA可以使用寬度為40MHz的通道來進行通信(例如借助於將20MHz的主通道與20MHz的相鄰或不相鄰通道相結合來形成寬度為40MHz的通道)。
超高輸送量(VHT)STA可以支援寬度為20MHz、40MHz、80MHz和/或160MHz的通道。40MHz和/或80MHz通道可以藉由組合連續的20MHz通道來形成。160MHz通道可以藉由組合8個連續的20MHz通道或者藉由組合兩個不連續的80MHz通道(這種組合可被稱為80+80配置)來形成。對於80+80配置來說,在通道編碼之後,資料可被傳遞並經過一個分段解析器,所述分段解析器可以將資料分成兩個串流。在每一個串流上可以各別執行逆快速傅利葉變換(IFFT)處理以及時域處理。所述串流可被映射在兩個80MHz通道上,並且資料可以由執行傳輸的STA來傳輸。在執行接收的STA的接收機上,用於80+80配置的上述操作可以是相反的,並且組合資料可被傳送至媒體存取控制(MAC)。
802.11af和802.11ah支持1GHz以下的操作模式。相比於802.11n和802.11ac中使用的,在802.11af和802.11ah中通道操作頻寬和載波有所縮減。802.11af在TV白空間(TVWS)頻譜中支援5MHz、10MHz和20MHz頻寬,並且802.11ah支援使用非TVWS頻譜的1MHz、2MHz、4MHz、8MHz和16MHz頻寬。依照代表性實施例,802.11ah可以支援儀錶類型控制/機器類型通信(MTC)(例如巨集覆蓋區域中的MTC裝置)。MTC裝置可以具有某種能力,例如包含了支援(例如只支持)某些和/或有限頻寬在內的受限能力。MTC裝置可以包括電池,並且該電池的電池壽命高於臨界值(例如用於保持很長的電池壽命)。
可以支援複數通道和通道頻寬的WLAN系統(例如802.11n、802.11ac、802.11af以及802.11ah)包含了可被指定成主通道的通道。所述主通道的頻寬可以等於BSS中的所有STA所支援的最大共同操作頻寬。主通道的頻寬可以由STA設置和/或限制,其中所述STA源自在支援最小頻寬操作模式的BSS中操作的所有STA。在關於802.11ah的範例中,即使BSS中的AP和其他STA支持2 MHz、4 MHz、8 MHz、16 MHz和/或其他通道頻寬操作模式,但對支援(例如只支援)1MHz模式的STA(例如MTC類型的裝置)來說,主通道的寬度可以是1MHz。載波感測和/或網路分配向量(NAV)設置可以取決於主通道的狀態。如果主通道繁忙(例如因為STA(其只支援1MHz操作模式)對AP進行傳輸),那麼即使大多數的可用頻帶保持空閒並且可供使用,也可以認為整個可用頻帶繁忙。
在美國,可供802.11ah使用的可用頻帶是902 MHz到928 MHz。在韓國,可用頻帶是917.5MHz到923.5MHz。在日本,可用頻帶是916.5MHz到927.5MHz。依照國家碼,可用於802.11ah的總頻寬是6MHz到26MHz。
圖1D是示出了根據實施例的RAN 113和CN 115的系統圖式。如上所述,RAN 113可以藉由空中介面116使用NR無線電技術來與WTRU 102a、102b、102c進行通信。RAN 113還可以與CN 115進行通信。
RAN 113可以包括gNB 180a、180b、180c,但是應該瞭解,在保持符合實施例的同時,RAN 113可以包括任何數量的gNB。gNB 180a、180b、180c每一者都可以包括一個或複數收發器,以便藉由空中介面116來與WTRU 102a、102b、102c通信。在一個實施例中,gNB 180a、180b、180c可以實施MIMO技術。例如,gNB 180a、180b可以使用波束成形處理來向和/或從gNB 180a、180b、180c傳輸和/或接收信號。由此,舉例來說,gNB 180a可以使用複數天線來向WTRU 102a傳輸無線信號,以及接收來自WTRU 102a的無線信號。在實施例中,gNB 180a、180b、180c可以實施載波聚合技術。例如,gNB 180a可以向WTRU 102a(未顯示)傳輸複數分量載波。這些分量載波的子集可以處於無授權頻譜上,而剩餘分量載波則可以處於授權頻譜上。在實施例中,gNB 180a、180b、180c可以實施協作多點(CoMP)技術。例如,WTRU 102a可以接收來自gNB 180a和gNB 180b(和/或gNB 180c)的協作傳輸。
WTRU 102a、102b、102c可以使用與可縮放參數配置相關聯的傳輸來與gNB 180a、180b、180c進行通信。例如,對於不同的傳輸、不同的胞元和/或不同的無線傳輸頻譜部分來說,OFDM符號間距和/或OFDM子載波間距可以是不同的。WTRU 102a、102b、102c可以使用不同或可縮放長度的子訊框或傳輸時間間隔(TTI)(例如包含了不同數量的OFDM符號和/或持續不同的絕對時間長度)來與gNB 180a、180b、180c進行通信。
gNB 180a、180b、180c可被配置成與採用分立配置和/或非分立配置的WTRU 102a、102b、102c進行通信。在分立配置中,WTRU 102a、102b、102c可以在不存取其他RAN(例如,e節點B 160a、160b、160c)的情況下與gNB 180a、180b、180c進行通信。在分立配置中,WTRU 102a、102b、102c可以使用gNB 180a、180b、180c中的一者或多者作為行動錨點。在分立配置中,WTRU 102a、102b、102c可以使用無授權頻帶中的信號來與gNB 180a、180b、180c進行通信。在非分立配置中,WTRU 102a、102b、102c會在與別的RAN(例如e節點B 160a、160b、160c)進行通信/相連的同時與gNB 180a、180b、180c進行通信/相連。舉例來說,WTRU 102a、102b、102c可以藉由實施DC原理而以實質同時的方式與一個或複數gNB 180a、180b、180c以及一個或複數e節點B 160a、160b、160c進行通信。在非分立配置中,e節點B 160a、160b、160c可以充當WTRU 102a、102b、102c的行動錨點,並且gNB 180a、180b、180c可以提供附加的覆蓋和/或輸送量,以便為WTRU 102a、102b、102c提供服務。
gNB 180a、180b、180c每一者都可以關聯於特別胞元(未顯示),並且可以被配置成處理無線電資源管理決策、交接決策、UL和/或DL中的使用者排程、支援網路截割、雙連接、實施NR與E-UTRA之間的交互工作、路由往使用者平面功能(UPF)184a、184b的使用者平面資料、以及路由往存取和移動性管理功能(AMF)182a、182b的控制平面資訊等等。如圖1D所示,gNB 180a、180b、180c彼此可以藉由Xn介面通信。
圖1D所示的CN 115可以包括至少一個AMF 182a、182b,至少一個UPF 184a、184b,至少一個對話管理功能(SMF)183a、183b,並且有可能包括資料網路(DN)185a、185b。雖然每一前述元件都被描述成CN 115的一部分,但是應該瞭解,這其中的任一元件都可以被CN操作者之外的實體擁有和/或操作。
AMF 182a、182b可以經由N2介面連接到RAN 113中的gNB 180a、180b、180c的一者或多者,並且可以充當控制節點。例如,AMF 182a、182b可以負責認證WTRU 102a、102b、102c的使用者,支援網路截割(例如處理具有不同需求的不同PDU對話),選擇特別的SMF 183a、183b,管理註冊區域,終止NAS傳訊,以及移動性管理等等。AMF 182a、182b可以使用網路截割處理,以便基於WTRU 102a、102b、102c使用的服務類型來定制為WTRU 102a、102b、102c提供的CN支援。作為範例,針對不同的用例,可以建立不同的網路截割,例如依賴於超可靠低潛時 (URLLC)存取的服務、依賴於增強型大規模行動寬頻(eMBB)存取的服務、和/或用於機器類通信(MTC)存取的服務等等。AMF 182可以提供用於在RAN 113與使用其他無線電技術(例如,LTE、LTE-A、LTE-A Pro和/或諸如WiFi之類的非3GPP存取技術)的其他RAN(未顯示)之間切換的控制平面功能。
SMF 183a、183b可以經由N11介面連接到CN 115中的AMF 182a、182b。SMF 183a、183b還可以經由N4介面連接到CN 115中的UPF 184a、184b。SMF 183a、183b可以選擇和控制UPF 184a、184b,並且可以藉由UPF 184a、184b來配置訊務路由。SMF 183a、183b可以執行其他功能,例如管理和分配WTRU或UE IP位址、管理PDU對話、控制策略實施和QoS,以及提供下鏈資料通知等等。PDU對話類型可以是基於IP的、不基於IP的,以及基於乙太網路的等等。
UPF 184a、184b可以經由N3介面連接RAN 113中的gNB 180a、180b、180c的一者或多者,這樣可以為WTRU 102a、102b、102c提供對封包交換網路(例如網際網路110)的存取,以便促成WTRU 102a、102b、102c與賦能IP的裝置之間的通信。UPF 184、184b可以執行其他功能,例如路由和轉發封包、實施使用者平面策略、支援多連接(multi-homed)PDU對話、處理使用者平面QoS、快取下鏈封包、以及提供移動性錨定處理等等。
CN 115可以促成與其他網路的通信。例如,CN 115可以包括充當CN 115與PSTN 108之間的介面的IP閘道(例如IP多媒體子系統(IMS)伺服器)或與該IP閘道進行通信。此外,CN 115可以為WTRU 102a、102b、102c提供針對其他網路112的存取,其可以包括其他服務供應商擁有和/或操作的其他有線和/或無線網路。在一個實施例中,WTRU 102a、102b、102c可以經由到UPF 184a、184b的N3介面以及介於UPF 184a、184b與本地資料網路(DN) 185a、185b之間的N6介面並藉由UPF 184a、184b連接到DN 185a、185b。
有鑒於圖1A至圖1D以及關於圖1A至圖1D的相應描述,在這裡對照以下的一項或多項描述的一個或複數或所有功能可以由一個或複數仿真裝置(未顯示)來執行:WTRU 102a-d、基地台114a-b、e節點B 160a-c、MME 162、SGW 164、PGW 166、gNB 180a-c、AMF 182a-b、UPF 184a-b、SMF 183a-b、DN185 a-b和/或這裡描述的一個或複數其他任何裝置。這些仿真裝置可以是被配置成仿真這裡描述的一個或複數或所有功能的一個或複數裝置。舉例來說,這些仿真裝置可用於測試其他裝置和/或仿真網路和/或WTRU功能。
仿真裝置可被設計成在實驗室環境和/或操作者網路環境中實施關於其他裝置的一項或多項測試。例如,所述一個或複數仿真裝置可以在被完全或部分作為有線和/或無線通訊網路一部分實施和/或部署的同時執行一個或複數或所有功能,以便測試通信網路內部的其他裝置。所述一個或複數仿真裝置可以在被臨時作為有線和/或無線通訊網路的一部分實施/部署的同時執行一個或複數或所有功能。所述仿真裝置可以直接耦合到別的裝置以用於測試的目的,和/或可以使用空中無線通訊來執行測試。
一個或複數仿真裝置可以在未被作為有線和/或無線通訊網路一部分實施/部署的同時執行包括所有功能在內的一個或複數功能。例如,該仿真裝置可以在測試實驗室和/或未被部署(例如測試)的有線和/或無線通訊網路的測試場景中使用,以便實施關於一個或複數元件的測試。所述一個或複數仿真裝置可以是測試設備。所述仿真裝置可以使用直接的RF耦合和/或經由RF電路(例如,該電路可以包括一個或複數天線)的無線通訊來傳輸和/或接收資料。代表性架構 / 框架
視訊寫碼系統可以用於壓縮數位視訊信號,這可以減少視訊訊號的儲存需求和/或傳輸頻寬。視訊寫碼系統可以包括基於塊的系統、基於小波的系統和/或基於物件的系統。基於塊的視訊寫碼系統可以基於、使用、根據、符合一個或複數標準,例如MPEG-1/2/4第2部分、H.264/MPEG-4第10部分AVC、VC-1、高效視訊寫碼(HEVC)和/或通用視訊寫碼(VVC)。基於塊的視訊寫碼系統可以包括基於塊的混合視訊寫碼框架。
圖2是示出了視訊串流傳輸架構200的範例的框圖。在此實例中,伺服器202可由一個或複數視訊編碼器(例如,編碼器204、206和208)組成,每一編碼器可產生不同解析度、訊框率或位元速率的視訊位元串流。可以使用或配置中間盒210。在一個範例中,該中間盒210可以是媒體感知網路元件(MANE)。所述中間盒210可產生、轉發、指示或解析(一個或複數)輸入視訊位元串流的高級語法,從一個輸入視訊位元串流擷取子位元串流,和/或將所擷取的子位元串流輸出到使用者端或解碼器212。所述中間盒210可以從複數輸入視訊位元串流中擷取複數子位元串流,並且將它們組合在一起以形成遞送到所述使用者端或解碼器212的新的輸出視訊位元串流。
在各種實施例中,一個或一個以上編碼器(例如,編碼器204、206和/或208)、所述中間盒210和/或所述解碼器212可實施於具有以通信方式與記憶體耦合的處理器的裝置中。所述記憶體可以包括可由處理器執行的指令,這其中包括用於執行本文揭露的各種實施例中的任何實施例(例如,代表性程序)的指令。在各種實施方式中,所述裝置可以被配置為和/或配置有無線傳輸和接收單元(WTRU)的各種元件。WTRU及其元件的範例細節在此提供於圖1A至圖1D及其附帶的揭露中。用於解析度改變的適應性程序的代表性程序
使用AVC和/或HEVC的各種方案可能不具有在不引入訊框內隨機存取點(IRAP)圖片的情況下改變解析度的能力。以合理品質寫碼的IRAP圖片通常具有比非IRAP圖片大得多的訊框大小(例如,用於寫碼(code)所述訊框的較大數目的位元)。另外,IRAP圖片的解碼更複雜。適應性解析度改變(ARC)可以指空間解析度可以在非IRAP圖片處改變的方案和能力中的任意者。
圖3示出了ARC機制300的範例。參考圖3,3號高解析度圖片訊框可以利用來自具有相同解析度的2號參考圖片訊框的訊框間預測來編碼,並且5號低解析度圖片訊框可以利用來自具有相同解析度的4號參考圖片訊框的訊框間預測來編碼。在ARC期間,所述3號高解析度圖片訊框可以由從用於運動補償的2號低解析度圖片訊框放大的2號參考圖片訊框來重構,並且所述5號低解析度圖片訊框可以由從用於運動補償的4號高解析度圖片訊框縮小的4號參考圖片訊框來重構。結果,可以對一個或複數非IRAP訊框發生或執行(一個或複數)解析度切換。
在各種實現方式中,例如,多方視訊會議可以受益於使用ARC來處理圖片和/或視訊(“圖片/視訊”)訊框,其中一個或複數或所有參與者(即,其圖片/視訊)被個別地顯示在共用螢幕上,並且活動發言者(即,其圖片/視訊)以比其餘參與者更大的視訊大小來顯示。如果活動發言者頻繁改變,則可以使用(例如,需要使用) ARC來有效地實現由於換入新的活動發言者和換出舊的發言者而引起的頻繁和/或不可預測的解析度改變。目前的適應性視訊串流傳輸方法通常在IRAP圖片之後改變視訊表示位元速率或解析度以匹配變化的網路頻寬。
ARC可以藉由消除傳送一個或複數高(或大)訊框大小的IRAP圖片的需要來改善適應性串流傳輸性能。ARC可以減少串流傳輸開始潛時,因為應用通常在顯示之前並且例如考慮到較小大小的圖片,快取多達一定數量的解碼圖片和/或一定範圍的解碼時間。在目前的基於運動約束圖塊集合(MCTS)的視埠適應性360度視訊串流傳輸之下,通常使用高解析度來遞送表示視埠的子圖片,並且通常使用較低解析度來遞送表示其他區域(例如,不在使用者的視圖中的區域)的子圖片。當所述視埠改變時,所述子圖片的對應解析度相應地改變,且使用者體驗會受高品質視埠的切換潛時影響。
圖4示出了視埠適應性串流傳輸機制400的範例。從大解析度360度視訊(1號表示)擷取視埠子圖片(例如,前視圖),且從低解析度360度視訊(2號表示)擷取表示其它區域的子圖片。所擷取的子圖片可以被組合成單個表示(例如,如圖4的右下角的一系列訊框所示)。所得到的合成或合併的視埠適應性視訊被遞送給使用者(或用戶端),使得使用者可以體驗具有減少的遞送頻寬的高品質視埠。在使用者將視埠從前視圖改變為右視圖的情況下,在IRAP圖片上擷取高解析度右視圖子圖片,且形成所合成或合併的視訊的新視訊訊框,其併入了所述高解析度右視圖子圖片和低解析度前子圖片。結果,IRAP距離的長度可能影響高品質視埠切換潛時,並且高位元速率IRAP圖片也可能增加網路和/或處理負載。ARC可以實現更快的視埠切換,並且可以支持用於不同(例如,360度)視訊表示的不同IRAP距離。
藉由重新縮放參考圖片(例如,使用在[1]和/或[2]中提出的方法),可以跨解析度來預測圖片/視訊訊框。圖片解析度索引(PRI)可在圖片參數集(PPS)中被用信號通知以指示截割(例如,與圖片相關聯的截割)來自所述圖片且具有由所述索引指示的解析度。可能需要允許將源自隨機存取(例如,IRAP)圖片的子圖片和源自非隨機存取(例如,非IRAP)圖片的另一子圖片合併成符合通用視訊寫碼(VVC)的相同所寫碼圖片(例如,藉由使用在[3]中提出的方案)。用於視埠切換的代表性程序
對於視埠適應性串流傳輸(例如,結合360度視訊),可從其原始位元串流和/或表示中擷取對應於每一子圖片的子位元串流,且可合併複數子位元串流以形成新位元串流。該原始和/或新位元串流可為(例如) HEVC、VVC和/或類似類型的位元串流。在目前的視埠適應性串流傳輸中,在壓縮域中執行子位元串流合併,並且這樣做可能引入若干問題。舉例來說,僅當所有涉及的子圖片為暫態解碼刷新(IDR)圖片時才進行視埠切換,以確保(在時間上)隨後的非IRAP圖片具有正確的參考圖片和/或參考子圖片。然而,IDR圖片的使用可能引入潛時問題。
圖5示出了視埠切換機制500,其中目前視埠被切換到新視埠。參考圖5,右視圖子圖片經歷從較低解析度到較高解析度的切換,並且前視圖子圖片經歷從較高解析度到較低解析度的切換,以匹配新視埠。虛線表示時間訊框間預測。在目前視埠切換方案中,該切換可僅在較高解析度的右視圖子圖片和較低解析度的前視圖子圖片這兩者均為IDR圖片時發生,因為相同視圖的隨後子圖片是從相同解析度子圖片訊框間預測的。諸如頂部、後部、左部和底部視圖的其它子圖片不必被編碼為IRAP圖片,因為訊框間預測在具有相同解析度的該子圖片上繼續。
根據本文提供的方法和/或技術,ARC可以結合適應性視點切換(和/或適應性視埠串流傳輸)來執行,使得例如可以從相同視圖的不同解析度的子圖片來預測子圖片。圖6示出了具有ARC的視埠切換機制600的範例。參照圖6,可從先前的低解析度右視圖子圖片預測高解析度右視圖子圖片,並且可從先前的高解析度前視圖子圖片預測低解析度前視圖子圖片。藉由使用先前子圖片,可預測待預測的子圖片而不引入IRAP子圖片。可藉由不引入IRAP子圖片來減少切換潛時和輸送位元速率這兩者。
目前,VVC沒有指定用於這種子圖片擷取和重新定位方案的解碼程序,這其中包括當相同的視圖子圖片可以被包裝在圖片內的不同位置(例如,在某些時間改變的位置)時。每個子圖片的運動向量可以提供從解碼的子圖片中的(一個或複數)座標到參考子圖片中的(一個或複數)座標的偏移,並且該座標在具有相同解析度的圖片之間應當是(或者至少可以被假設是)一致的。
仍然參考圖6,可以放大或縮小所述參考子圖片以匹配目前子圖片的解析度,但是所述參考子圖片和所述圖片內的目前子圖片的座標可以不同。根據本文提供的方法和/或技術,可以修改目前解碼程序和相關聯的傳訊,以實現和/或實現本文揭露的視埠適應性方法。本文提供的方法和/或技術解決了與解碼相關聯的目前傳訊中的缺陷,這其中包括不存在例如在基本位元串流級或系統級用於指示映射到相同二維(2D)或三維(3D)內容區域的複數表示的子圖片集合或子圖片組的傳訊或元資料的缺陷。
若干補充增強資訊(SEI)訊息可指定HEVC中的矩形區域和360度視訊資訊。橫搖-掃描(pan-scan)矩形SEI訊息指定一或複數矩形區域相對於由活動SPS指定的符合性裁剪視窗的座標。等矩形和立方體貼圖投影SEI訊息提供了資訊以使得能夠將所投影的圖片的顏色樣本重新映射到球座標空間(例如,使用球面座標定址)上以支援360度視訊圖片。逐區域包裝SEI訊息提供了使得能夠將裁剪的解碼圖片的顏色樣本重新映射到投影圖片上的資訊以及關於保護帶的位置和大小的資訊(如果有的話)。然而,所有這些SEI訊息都是針對單個表示(或層)設計的,且因此沒有解決具有不同解析度的複數表示上的子圖片之間的關係。基於子圖片的應用的代表性程序
對於一些基於子圖片的應用,每個擷取的子圖片可以被指派到新的圖片中的不同位置。如本文中所使用,子圖片屬性SEI訊息指代包含子圖片屬性資訊的SEI訊息,所述子圖片屬性資訊可指示與同一源內容區域相關聯的複數層或表示上的一個或一個以上子圖片或圖塊組(和/或界定其屬性或所指示的所界定的屬性)。在一個實施例中,所述子圖片屬性資訊可以包括一個或複數附加指示符,以便指示一個或複數推薦的ARC切換點。作為替代,所述子圖片屬性SEI訊息或類似類型的SEI訊息可包括指示一個或複數推薦的ARC切換點的指示符。在一個實施例中,所述子圖片屬性資訊可以包括一個或複數實際ARC切換點,例如,以實現更好的重構圖片品質或應用某些約束。作為替代,所述子圖片屬性SEI訊息或類似類型的SEI訊息可包括所述一個或複數實際ARC切換點。子圖屬性 SEI 訊息
在一個實施例中,視訊內容可以被編碼成複數寫碼版本或表示(或層)。每個表示可以以不同的解析度和/或品質被寫碼。例如,對於360度視訊,每個表示可以處於不同的投影和/或逐區域包裝格式。原始內容區域可以映射到所述表示的不同部分,即,子圖片。在不同的表示中,可以不同地旋轉、縮放或投影子圖片。對應於相同內容區域的子圖片的位置和大小也可以在不同的表示之間變化。中間盒或用戶端可以跨複數表示而擷取一個或複數子圖片。所述中間盒或用戶端可以使用複數所擷取的子圖片來形成用於依賴於視埠的串流傳輸應用的新圖片。該新圖片可以組合不同的品質等級和/或解析度的不同的子圖片。例如,可以執行所述新圖片形成以滿足(例如,360度)視訊用戶端的串流傳輸需要。
在一個實施例中,內容製作者可以產生複數表示。與相同內容相關聯的所有表示可被配置成多層結構。在一個實施例中,每個表示可以是一層。每一層可獨立地寫碼或可取決於其它層。層ID可用於指示特定寫碼視訊表示。每一層可具有複數子圖片。每一子圖片可由唯一子圖片ID或圖塊組ID指示。可以從與每個表示相關聯的投影和逐區域包裝SEI訊息來導出子圖片和原始內容區域(例如,360度內容球體上的區域)之間的對應關係。然而,這樣做將需要中間盒或用戶端解析來自每一層的複數SEI訊息,並且該導出程序可能增加中間盒或用戶端的工作負荷。描述所述子圖片屬性(例如,跨越複數層的子圖片之間的對應性,以及每一層中的子圖片到(例如,360度)視訊球體上的區域的映射)的單個SEI訊息或參數集可簡化所述子圖片與對應原始內容區域之間的映射,以利於基於子圖片的應用。
在一實施例中,可在PPS中用信號通知子圖片分割佈局。可明確地用信號通知子圖片解析度(例如,在PPS或圖塊組標頭中)。作為替代,可從圖塊組佈局和整個圖片解析度導出子圖片解析度。為了將(例如,每一)子圖片映射到對應球體空間,所述子圖片屬性SEI訊息可包含和/或提供諸如以下的資訊:層ID、圖塊組ID、子圖片的座標及其到球體座標空間上的映射。所述SEI訊息可列出可用於子圖片的逐區域包裝和視埠適應性串流傳輸的任何或所有子圖片。解碼器可基於此SEI訊息來指示可或可不與目前子圖片並置(collocate)的對應參考子圖片。根據該參考子圖片的解析度,解碼器可以縮放所述子圖片以用於ARC,並對準所述目前子圖片和所述參考子圖片之間的座標。
1 提供了子圖片屬性SEI訊息語法結構的範例。 1 列出了球體區域(視埠)的數目和覆蓋相同球體區域的子圖片。 1 還提供了每個重新定位的子圖片相對於由活動序列參數集(SPS)指定的一致性裁剪視窗的座標。表1 - 子圖片屬性SEI 訊息的範例
sub_picture_property( payloadSize ) { 描述符
    num_source_content_regions_minus1 ue(v)
     for( i = 0; i <= num_source_content_regions_minus1; i++ ) {   
         source_content_region_position [ i ]   
         source_content_region_size [ i ]   
         num_subpics_minus1 ue(v)
          for( j = 0; j <= num_subpics_minus1; j++ ) {   
        layer_id[ i ][ j ] u(16)
               subpic_ id [ i ][ j ] u(16)
        subpic_coordinate[ i ][ j ]   
               subpic_width [ i ][ j ] u(16)
               subpic_height [ i ][ j ] u(16)
          }   
     }   
}   
在表1中,num_source_content_regions_minus1 加1可指定由所述SEI訊息指定的源內容區域的數量。
在表1中,source_content_region_position 可以指定第i個源內容區域的位置。對於2D源內容,它可以是該區域的2D座標中的左上位置。對於360度視訊內容,它可以是球中心方位角和傾斜位置。
在表1中,source_content_region_size 可指定第i個源內容區域的大小。對於2D源內容,它可以是所述區域的寬度和高度。對於360度視訊內容,它可以是通過球體範圍的中心點的所述球體區域的相對於全域坐標軸的傾斜角、方位角範圍和仰角範圍(以度為單位)。
在表1中,num_subpics_minus1 [ i ]加1可以指定與第i源內容區域相關聯的子圖片的數目。
在表1中,layer_id [ i ] [ j ]可以指定與第i源內容區域相關聯的第j子圖片所屬的層指示符。
在表1中,subpic_coordinate [ i ] [ j ]可以指定與圖片內的第i源內容區域相關聯的第j子圖片的座標。它可以是所述子圖片的左上位置或所述子圖片的中心位置。
在表1中,subpic_id [ i ] [ j ]可以指定與第i源內容區域相關聯的第j子圖片的子圖片ID。該子圖片ID和/或圖塊組ID可用於指示子圖片。
在表1中,subpic_width [ i ] [ j ]和subpic_height [ i ] [ j ]可以指定與第i源內容區域相關聯的第j子圖片的解析度。
在各種實施例中,可以在子圖片屬性SEI訊息中包括用於每個子圖片或子圖片組的諸如位元深度、顏色子取樣、編碼簡檔和/或編碼級別之類的屬性。
在各種實施例中,子圖片屬性SEI訊息可指示複數表示或層當中與同一源內容區域相關聯的子圖片的數目。解碼器可以確定在先前圖片中可用的相應參考子圖片,並且從活動PPS導出所述參考子圖片位置和大小以執行ARC。所揭露的SEI訊息可明確地用信號通知每一子圖片的位置和大小,例如以簡化所述導出,使得解碼器不必解析每一表示或層的參數集或SEI訊息。所揭露的子圖片屬性SEI訊息的語法元件還可由例如視訊參數集VPS或解碼器參數集DPS等跨層參數集來攜載。
在各種實施例中,所述中間盒可依賴於所揭露的SEI訊息。例如,所述中間盒可基於所述SEI訊息來擷取與視埠匹配的子圖片。所述中間盒可使用所擷取的子圖片來形成ARC圖片,例如以減小訊框大小(例如,對該訊框進行寫碼所需的位元數目)。所述用戶端可依賴於所提議的SEI訊息。例如,所述用戶端可以基於所述SEI訊息來指示所述ARC子圖片和相關聯的參考子圖片。所述用戶端可以將ARC子圖片和參考子圖片之間的(一個或複數)座標對準,以進行適當的運動補償處理。
圖7示出了基於子圖片的ARC機制700的例子。參考圖7,立方體貼圖投影格式的每個子圖片可以被寫碼成兩種解析度。可以從高解析度表示中擷取與視埠匹配的子圖片。其餘的子圖片可以從低解析度表示中擷取。在各種實施例中,子圖片屬性SEI訊息可指示與同一源內容區域相關聯的那些子圖片。例如,0號圖塊組和6號圖塊組都覆蓋左面,並且1號圖塊組和7號圖塊組都覆蓋前面,但是處於不同的解析度和不同的表示。
在擷取器擷取非IRAP高解析度子圖片以匹配視埠改變的情況下,該擷取器可以利用該子圖片屬性SEI訊息來用信號通知ARC出現。所述解碼器可以斷定右側和前側子圖片都是ARC子圖片,因為2號(右側)和7號(前側)子圖片在前一個圖片中不可用。為了重構所述ARC子圖片,解碼器可以解析所述SEI訊息,並且可以將與相同區域相關聯的那些子圖片指示為2號圖塊組和7號圖塊組。舉例來說,1號圖塊組可與7號圖塊組與同一內容區域相關聯,且可在先前經解碼圖片中可用。8號圖塊組可與2號圖塊組與同一內容區域相關聯,且可在先前經解碼圖片中可用。基於從PPS導出的子圖片位置和大小,解碼器可以縮小解碼的1號子圖片並且放大解碼的8號子圖片以用於ARC運動補償。2號子圖片的每個樣本的運動向量可以(例如,應當)移位2號子圖片的座標和8號子圖片的座標之間的偏移量,例如,如圖7中所標記的(dMVx,dMVy)。舉例來說,該偏移量可相對於亮度取樣柵格以十六分之一樣本間距為單位。相同的運動向量移位也可應用於7號圖塊組的每一樣本。
在一個實施例中,與相同源內容區域相關聯的所有子圖片可以被指派給一子圖片組,每個子圖片組可以具有其自己的唯一ID。該子圖片組ID及其屬性(例如,區域位置和大小)可攜載於圖塊組標頭中,或攜載於PPS圖塊組佈局語法欄位中。
在一個實施例中,SEI屬性訊息可在ARC期間用信號通知目前子圖片及其相關聯的參考子圖片的屬性,這其中包括指示符、座標、子圖片大小、位元深度、色度子取樣、投影格式、逐區域包裝等。 2 提供了ARC子圖片屬性SEI訊息的範例。表2 - ARC 子圖片屬性SEI 訊息的範例
arc_sub_picture_property( payloadSize ) { 描述符
    num_arc_subpics_minus1 ue(v)
     for( i = 0; i <= num_arc_subpics_minus1; i++ ) {   
         arc_subpic_id [ i ] ue(v)
         arc_subpic_coordinate [ i ]   
         arc_subpic_size [ i ] ue(v)
         reference_subpic_id [ i ] ue(v)
         reference_subpic_coordinate [ i ]   
         reference_subpic_size [ i ] ue(v)
     }   
}   
在表2中,num_arc_subpics_minus1 加1可以指定與適應性解析度改變相關聯的子圖片的數目。
在表2中,arc_subpic_id [ i ]和arc_subpic_id [ i ]可以指定第i個ARC子圖片和相關聯的參考子圖片的指示符。
在表2中,arc_subpic_coordinate [ i ]和arc_subpic_size [ i ]可以指定第i個ARC子圖片的座標(例如,中心或左上樣本位置)和大小。
在表2中,reference_subpic_coordinate [ i ]和reference_subpic_size [ i ]可以指定第i個ARC子圖片的參考子圖片的座標(例如,中心或左上樣本位置)和大小。
在各種實施方式中,ARC子圖片SEI訊息可以包括指示ARC子圖片和相關聯的參考子圖片的格式的資訊,這其中包括位元深度、顏色子取樣、編碼簡檔和/或編碼級別。
在各種實施例中,ARC子圖片SEI訊息可以包括資訊,其指示ARC之後的(一個或複數)寫碼子圖片和ARC之前的(一個或複數)對應參考子圖片。所述用戶端可以基於這樣的(一個或複數)指示來縮放或變換(例如,鏡像、縮放或旋轉)對應的參考圖片以用於運動補償。所述訊息可以(例如,通常)由中間盒或擷取並重新定位子圖片位元串流的擷取器產生。該訊息可以(例如,應當)附加到所述ARC圖片。基於這種訊息,用戶端或解碼器可以指示所述ARC子圖片和相關聯的參考子圖片,並且對準兩個子圖片之間的座標以用於運動補償。推薦 ARC 轉換 SEI 訊息
在各種實施例中,ARC可以使用縮放的重構圖片作為參考圖片,例如,以避免高位元速率IDR或IRAP圖片和/或保持可接受的解碼圖片品質。可以存在相同內容的編碼視訊的複數版本。ARC轉換性能(包括重構圖片品質和誤差傳播)可取決於縮放濾波器設計、參考圖片和時間層。
圖8示出了時間可縮放性機制800,其中4號POC上的ARC轉換可能不會導致誤差傳播。根據子圖片在不同版本之間的相關性和寫碼結構,編碼器可以知道最佳ARC轉換點。例如,編碼器可以在每個IRAP間隔或圖片組(GOP)間隔內仿真ARC,以確定ARC的轉換點。
圖9示出了確定最佳ARC轉換點的範例。除了傳統的時間訊框間預測和運動補償之外,編碼器可以藉由參考來自不同表示的經縮放圖片來仿真重構所述圖片,並計算PSNR,並將達到最高峰值信號噪訊比(PSNR)的圖片標記為推薦的ARC轉換點。
在一個實施例中,為了確定ARC轉換點(例如,3號POC),機制900可以在兩個表示之間週期性地執行SHVC中所指定的層間預測。當執行ARC時,該額外的層間寫碼資料可以被遞送給終端使用者。
圖10示出了範例性機制1000,其中高解析度表示圖片是週期性地從縮放的低解析度IRAP圖片預測的。這些圖片被標記為ARC轉換圖片。從低解析度到高解析度表示的轉換可以僅發生在這些ARC轉換點處,而從高解析度到低解析度表示的轉換可以發生在任何低解析度IRAP圖片處,因為低解析度IRAP圖片的大小遠小於高解析度IRAP圖片的大小。當執行ARC時,所述低解析度IRAP圖片可作為用於高解析度圖片的層間參考圖片而被攜載於位元串流中。
仍參照圖10,1號位元串流可以是具有週期性IRAP圖片的時間預測低解析度寫碼串流,2號位元串流可以是具有從低解析度IRAP圖片而層間預測的ARC圖片的時間預測高解析度寫碼串流。所述ARC轉換位元串流可包括所述低解析度參考圖片(4號POC)、所述層間預測的ARC圖片(4號POC)和隨後的時間預測的高解析度圖片。
在各種實施例中,推薦ARC轉換SEI訊息可以被包括在子圖片屬性SEI訊息中,或者被各別地使用或傳送。所述推薦ARC轉換SEI訊息可包括用於高解析度表示的POC值、具有諸如層ID或圖塊組ID的表示ID的對應較低層參考圖片的POC值、縮放濾波器係數、以及預測方法(例如,時間預測或層間預測)。
3 提供了關於推薦ARC轉換SEI訊息的範例性語法。該訊息對所推薦的ARC子圖片以其層ID、POC值和子圖片ID進行指示。該訊息還指示被推薦切換所來自的複數子圖片。所述縮放濾波器可以支援定制的縮放濾波器以提高ARC品質。 3 – 一推薦 ARC 轉換 SEI 訊息的範例
recommended_arc_transition( payloadSize ) { 描述符
    arc_layer_id ue(v)
    arc_poc_lsb ue(v)
    arc_subpic_id ue(v)
    num_ref_subpic_minus1 ue(v)
     for (i = 0; i <= num_recommended_ref_subpic_minus1; i++) {   
        reference_subpic_id [ i ] ue(v)
        scaling_filter()   
    }   
}   
在表3中,arc_layer_id 可以指定與所述ARC子圖片相關聯的層的指示符。
在表3中,arc_poc_lsb 可以指定所述ARC子圖片的POC LSB值。
在表3中,arc_subpic_id 可以指定所述ARC子圖片的指示符。
在表3中,num_ref_subpic_minus1 加一可指定從ARC期間切換的推薦子圖片的數量。
在表3中,reference_subpic_id [ i ]可指定從ARC期間切換的第i個推薦的子圖片。
在表3中,scaling_filter 可以是包含推薦的縮放濾波器係數的結構。
在各種實施例中,該SEI訊息可以提供複數推薦的ARC轉換點並且對這些點進行優先順序排序。可以在SEI訊息中用信號通知優先順序指示符,以指示執行ARC的子圖片的優先順序。較高的優先順序指示了在相關聯的子圖片上可以實現較好的ARC性能。( 一個或複數 )ARC 切換指示符
指示符可用於在SEI訊息、PPS或子圖片相關參數集中發信號通知以向解碼器指示ARC發生。該指示符可以攜載諸如層ID和POC號的參數。由於ARC切換點之後的一些圖片將使用經縮放圖片作為參考,因此運動補償誤差可能損害依賴於準確時間資訊和參考樣本的那些寫碼工具的性能。例如,雙向光流(BDOF)需要使用來自前向和後向預測的兩個時間預測之間的差和空間梯度,基於時間預測信號來導出每個4×4子塊的差量運動向量。在ARC切換點之後的參考圖片的空間縮放之後,時間差和空間梯度都將改變,導出結果將極大地改變。解碼器側運動向量細化(DMVR)使用來自兩個參考圖片的兩個時間預測來導出寫碼單元內部的每一子塊(例如,16×16)的差量運動向量。如果時間參考圖片被縮放,則所述導出結果將改變。解碼器側導出相關的寫碼技術(例如BDOF和DMVR)應該在ARC圖片和按解碼次序在下一IRAP圖片之前的所有後續圖片處被停用。在各種實施例中,可以基於在與ARC有關的SEI訊息中用信號通知的指示符來停用那些寫碼技術,或者可以基於縮放比來適應性地停用它們。如果所述縮放比接近1,則可以賦能它們;否則,如果縮放比遠離1,則可以停用它們。停用這些寫碼工具可以在不影響寫碼性能的情況下進一步減少解碼器工作負荷和功耗。
時間運動向量預測(TMVP)及子塊時間運動向量預測(SbTMVP)也可能因解析度改變、因運動向量縮放而受到影響,且所述運動向量誤差可能會因運動向量預測而在一個圖片內傳播。由於運動補償,運動向量的誤差對圖片品質具有很大的影響。在不同的實施例中,當編碼那些圖片(例如那些在ARC切換點之後的訊框間圖片,其可能受到參考圖片縮放和運動向量縮放的影響)時,編碼器可以停用這些解碼器側導出相關的寫碼技術、TMVP和SbTMVP,以便在ARC切換之後圖片品質不會受到太多影響。
在各種實施例中,指示或標誌(例如,約束標誌)可以用於指示是否要在ARC轉換點處停用一個或複數寫碼工具(例如,預定寫碼工具)。在一範例中,解碼器可檢測約束標誌被設置在SPS中,且所述約束標誌指示所述一或複數寫碼工具的約束適用於整個寫碼視訊序列(CVS)。例如,基於層的空間可縮放性可允許從低解析度(例如,基礎層)圖片來預測每一高解析度增強圖片,且所述一個或一個以上寫碼工具的約束應用於每一增強層(例如,除基礎層以外的層,其中所述基礎層為位元串流中的第一層)訊框。對於單層序列,編碼器可以在用於ARC轉換的(一個或複數)某或預定訊框上設置一約束標誌。解碼器可以在截割級檢測該標誌,並對相關訊框(例如,包含該截割的訊框)執行ARC。
表4提供了SPS的示範性語法,其包含約束標誌SPS_arc_constraint_flag,其在SPS中被用信號通知。 4 - SPS 語法的範例
seq_parameter_set_rbsp( ) { 描述符
sps_decoding_parameter_set_id u(4)
sps_video_parameter_set_id u(4)
sps_max_sub_layers_minus1 u(3)
sps_reserved_zero_5bits u(5)
    profile_tier_level( sps_max_sub_layers_minus1 )   
gra_enabled_flag u(1)
sps_seq_parameter_set_id ue(v)
…. ue(v)
   sps_arc_constraint_flag u(1)
timing_info_present_flag u(1)
….   
    rbsp_trailing_bits( )   
}   
在表4中,sps_arc_constraint_flag 是約束標誌。當sps_arc_constraint_flag的值等於1時,其指示或指定了應針對與SPS相關聯的CVS來停用寫碼工具TMVP、DMVR和/或BDOF (例如,slice_temporal_mvp_enabled_flag、bdofFlag、和/或dmvrFlag具有等於0的值)。當sps_arc_constraint_flag 具有等於0的值時,該標誌指示或指定了其不施加約束。
表5提供了截割標頭的範例性語法。在所述截割標頭中用信號通知約束標誌slice_arc_constraint_flag。 5 – 截割標頭語法的範例
slice_header( ) { 描述符
   slice_pic_parameter_set_id ue(v)
    if( rect_slice_flag  | |  NumBricksInPic > 1 )   
      slice_address u(v)
    if( !rect_slice_flag  &&  !single_brick_per_slice_flag )   
      num_bricks_in_slice_minus1 ue(v)
   slice_type ue(v)
if( NalUnitType  = =  GRA_NUT )   
recovery_poc_cnt se(v)
   slice_pic_order_cnt_lsb u(v)
    if ( !sps_arc_constraint_flag )   
      slice_arc_constraint_flag u(1)
  
    if ( slice_type  !=  I ) {   
       if( sps_temporal_mvp_enabled_flag && !slice_arc_constraint_flag )   
          slice_temporal_mvp_enabled_flag u(1)
    …   
在表5中,slice_arc_constraint_flag 是約束標誌。當slice_arc_constraint_flag的值等於1時,其指示或指定對於相關聯的片,應該停用寫碼工具TMVP、DMVR和/或BDOF (例如,具有等於0的值的相關聯的截割的slice_temporal_mvp_enabled_flag、bdofFlag、和/或dmvrFlag)。當slice_arc_constraint_flag 具有等於0的值時,該標誌指示或指定其不施加約束。當slice_arc_constraint_flag 不存在時,推斷其具有等於1的值。
在一個實施例中,寫碼工具約束(例如,如使用上述一個或複數約束標誌用信號通知的約束)可以指示在ARC轉換之後要被停用的已知或固定工具集(或提供對要被停用的已知或固定工具集的引用)。舉例來說,所述寫碼工具約束可在ARC轉換之後和/或直到下一IRAP圖片為止停用BDOF和DMVR。在另一實施例中,可在所述語法中提供額外傳訊(例如,一或複數額外標誌)以在所述寫碼工具約束為活動時適應性地指定將停用哪些寫碼工具。例如,第一標誌可以指定BDOF是否將由所述編碼工具約束停用,第二標誌可以指定DMVR是否將由所述寫碼工具約束停用,並且一個或複數附加標誌可以指定其他工具是否將由所述寫碼工具約束停用。
在一個實施例中,表6提供了VPS的範例性語法,其中使用所有層獨立標誌來指示每一層被獨立寫碼,從而不需要指定層之間的依賴性。 6 - VPS 語法的範例
video_parameter_set_rbsp( ) { 描述符
vps_video_parameter_set_id u(4)
vps_max_layers_minus1 u(8)
    for( i = 0; i  <=  vps_max_layers_minus1; i++ ) {   
      vps_included_layer_id [ i ] u(7)
      vps_reserved_zero_bit u(1)
    }   
   vps_all_layers_independent_flag u(1)
     for( i = 1; i <= MaxLayersMinus1; i++ ) {   
         layer_id_in_nuh [ i ] u(6)
         if (!vps_all_layers_independent_flag)   
          for( j = 0; j < i; j++ )   
              direct_dependency_flag [ i ][ j ] u(1)
    }   
  
}   
在表6中,等於1的vps_all_layers_independent_flag 可指定(由該VPS指定的)每層是獨立層,而等於0的vps_all_layers_independent_flag 可指定(由該VPS指定的)一個或複數層可能不是獨立層。當vps_all_layers_independent_flag 被設置為1時,層依賴性傳訊(例如,direct_dependency_flag)不必被用信號通知。
以下參考文獻中的每一個都藉由引用而被併入本文:[1] JCTVC-F158, “Resolution switching for coding efficiency and resilience”, 2011年7月; [2] JVET-M0135, “On adaptive resolution change for VVC”, 2019年1月; [3] JVET-M0259, “Use cases and proposed design choices or adaptive resolution changing”, 2019年1月; [4] JVET-M0261, “AHG12: On grouping of tiles”, 2019年1月; 以及 [5] 美國臨時專利申請No. 62/775,130。結論
儘管上述按照特定組合描述了特徵和元件,但是本領域技術人員將理解的是每個特徵或元件可以被單獨使用或以與其它特徵和元件的任何組合來使用。此外,於此描述的方法可以在併入在電腦可讀媒體中由電腦或處理器執行的電腦程式、軟體或韌體中實施。非暫態電腦可讀媒體的範例包括但不限於唯讀記憶體(ROM)、隨機存取記憶體(RAM)、暫存器、快取記憶體、半導體存放裝置、諸如內部硬碟和可移除磁片之類的磁媒體、磁光媒體、以及諸如CD-ROM碟片和數位多用途碟片(DVD)之類的光媒體。與軟體相關聯的處理器可以用於實施在WTRU 102、UE、終端、基地台、RNC或任意主機電腦中使用的射頻收發器。
此外,在上述的實施方式中,提及了處理平臺、計算系統、控制器以及包含處理器的其他裝置。這些裝置可以包含至少一個中央處理單元(“CPU”)和記憶體。根據電腦程式設計領域的技術人員的實踐,對動作和操作或指令的符號描述的引用可以由各種CPU和記憶體執行。這些動作和操作或指令可以稱為“被執行”、“電腦執行”或“CPU執行”。
本領域技術人員可以理解動作和符號代表的操作或指令包括CPU對電信號的操縱。電氣系統可以表示資料位元,其使得電信號產生變換或還原以及資料位元在記憶體系統中的儲存位置的維持由此以重新配置或其他方式改變CPU的操作以及信號的其他處理。維持資料位元的記憶體位置是具有對應於或代表資料位元的特別電、磁、光或有機屬性的實體位置。應當理解,代表性實施方式不限於上述的平臺或CPU且其他平臺和CPU可以支援提供的方法。
所述資料位元也可以被維持在電腦可讀媒體上,其包括磁片、光碟以及任意其他揮發性(例如隨機存取記憶體(“RAM”))或非揮發性(例如唯讀記憶體(“ROM”))CPU可讀的大型儲存系統。電腦可讀媒體可以包括協作或互連的電腦可讀媒體,其專門存在於處理器系統上或分佈在可以是處理系統本地的或遠端的複數互連處理系統間。可以理解代表性實施方式不限於上述的記憶體且其他平臺和記憶體可以支援所描述的方法。
在示出的實施方式中,這裡描述的操作、處理等的任一者可以被實施為儲存在電腦可讀媒體上的電腦可讀指令。該電腦可讀指令可以由行動單元、網路元件和/或任意其他計算裝置的處理器執行。
系統方面的硬體和軟體實施之間有一點區別。硬體或軟體的使用一般(例如但不總是,因為在某些環境中硬體與軟體之間的選擇可以是很重要的)是代表成本與效率折的設計選擇。可以有影響這裡描述的程序和/或系統和/或其他技術的各種載具(例如,硬體、軟體、和/或韌體),且較佳的載具可以隨著部署的程序和/或系統和/或其他技術的上下文而改變。例如,如果實施方確定速度和精度是最重要的,則實施方可以選擇主要是硬體和/或韌體載具。如果靈活性是最重要的,則實施方可以選擇主要是軟體實施。可替換地,實施方可以選擇硬體、軟體和/或韌體的某種組合。
上述詳細描述經由框圖、流程圖和/或範例已經提出了裝置和/或程序的各種實施方式。在這些框圖、流程圖和/或範例包含一個或複數功能和/或操作的範圍內,本領域技術人員可以理解這些框圖、流程圖或範例內的每個功能和/或操作可以被寬範圍的硬體、軟體或韌體或實質上的其任意組合方式個別實施和/或一起實施。合適的處理器包括例如通用處理器、專用處理器、常規處理器、數位訊號處理器(DSP)、複數微處理器、與DSP核相關聯的一個或複數微處理器、控制器、微控制器、專用積體電路(ASIC)、專用標準產品(ASSP);場可程式設計閘陣列(FPGA)電路、任意其他類型的積體電路(IC)和/或狀態機。
儘管上述按照特定組合描述了特徵和元件,但是本領域技術人員將理解的是每個特徵或元件可以被單獨使用或以與其它特徵和元件的任何組合來使用。本揭露不限於本申請描述的特定實施方式,這些實施方式旨在作為各種方面的範例。在不背離其實質和範圍的情況下可以進行許多修改和變形,這些對本領域技術任意是所知的。本申請的描述中使用的元件、動作或指令不應被理解為對本發明是關鍵或必要的除非顯式說明。除了本文中列舉的這些方法和裝置本領域技術人員根據以上描述還可以知道在本揭露範圍內的功能上等同的方法和裝置。這些修改和變形也應落入所附申請專利範圍的範圍。本揭露僅由所附申請專利範圍限定,包括其等同的全面的範圍。應當理解本揭露不限於特定的方法或系統。
還應理解,本文所用的術語僅是為了描述具體實施例的目的,而不是旨在限制。如這裡所使用的,當這裡提及術語“站”及其縮寫“STA”、“使用者裝置”及其縮寫“UE”時可以表示:(i)無線傳輸和/或接收單元(WTRU),例如下面所描述的;(ii)WTRU的複數實施方式中的任一個,例如下文所描述的;(iii)一種有無線和/或有線(例如可接線的)能力之裝置,其配置有WTRU的一些或所有結構和功能,例如下文所述;(iii)一種具有無線能力和/或有線能力的裝置,其被配置為具有少於WTRU的所有結構和功能的結構和功能,例如下文所描述的;或(iv)類似物。下面參考圖1A至圖1D提供了範例WTRU的細節,該範例WTRU可以代表這裡所述的任何UE或行動裝置(或可與該UE與行動裝置互換使用)。
在某些代表性實施方式中,這裡描述的主題的一些部分可以經由專用積體電路(ASIC)、現場可程式設計閘陣列(FPGA)、數位訊號處理器(DSP)和/或其他整合格式來實施。但是,本領域技術人員可以理解這裡揭露的實施方式的一些方面,其整體或部分,可以同等地由積體電路實施,作為在一個或複數電腦上運行的一個或複數電腦程式(例如在一個或複數電腦系統上運行的一個或複數程式)、在一個或複數處理器上運行的一個或複數程式(例如在一個或複數微處理器上運行的一個或複數程式)、韌體、或實質上地這些的任意組合,以及根據本揭露針對該軟體和/或韌體設計電路和/或寫代碼是本領域技術人員所知的。此外,本領域技術人員可以理解這裡描述的主題的機制可以被分佈為各種形式的程式產品,以及這裡描述的主題的範例性實施方式適用,不管用於實際執行該分佈的信號承載媒體的特定類型如何。信號承載媒體的範例包括但不限於以下:可記錄類型的媒體,例如軟碟、硬碟、CD、DVD、數位帶、電腦記憶體等,以及傳輸類型的媒體,例如數位和/或類比通信媒體(例如光纖電纜、波導、有線通信鏈路、無線通訊鏈路等)。
這裡描述的主題有時示出了不同組件,其包含在或連接到不同的其他組件。可以理解這些描繪的架構僅是範例,且實際中達成相同的功能的許多其他架構可以被實施。在概念上,達成相同功能更的組件的任何安排有效地“相關聯”由此可以達成期望的功能。因此,這裡組合以達成特定功能的任意兩個組件可以視為彼此“相關聯”由此達成期望的功能,不管架構或中間組件如何。同樣地,相關聯的任意兩個元件也可以被視為彼此“操作上連接”或“操作上耦合”以達成期望的功能,以及任意兩個能夠這樣相關聯的組件也可以被視為彼此“操作上可耦合”以達成期望的功能。操作上可耦合的特定範例包括但不限於實體上可配對和/或實體上交互作用的組件和/或無線可交互作用的和/或無線交互作用的組件和/或邏輯上交互作用和/或邏輯上可交互作用的組件。
關於這裡使用基本上任何複數和/或單數術語,本領域技術人員可以在適合上下文和/或應用時從複數轉義到單數和/或從單數轉義到複數。為了清晰,這裡可以顯式提出各種單數/複數置換。
本領域技術人員可以理解一般地這裡使用的術語以及尤其在申請專利範圍中使用的術語(例如申請專利範圍的主體部分)一般是“開放性”術語(例如術語“包括”應當理解為“包括但不限於”,術語“具有”應當理解為“至少具有”,術語“包括”應當理解為“包括但不限於”等)。本領域技術人員還可以理解如果申請專利範圍要描述特定數量,則在申請專利範圍中會顯式描述,且在沒有這種描述的情況下不存在這種意思。例如,如果要表示僅一個項,則可以使用術語“單個”或類似的語言。為幫助理解,以下所附的申請專利範圍和/或這裡的描述可以包含前置短語“至少一個”或“一個或複數”的使用以引出申請專利範圍描述。但是,這些短語的使用不應當理解為暗示被不定冠詞“一”引出的申請專利範圍描述將包含這樣的被引出的申請專利範圍描述的任意特別申請專利範圍限定到包含僅一個這樣的描述的實施方式,即使在同一個申請專利範圍包括前置短語“一個或複數”或“至少一個”以及不定冠詞(例如“一”)(例如“一”應當被理解為表示“至少一個”或“一個或複數”)。對於用於引出申請專利範圍描述的定冠詞的使用也是如此。此外,即使引出的申請專利範圍描述的特定數量被顯式描述,但是本領域技術人員可以理解這種描述應當被理解為表示至少被描述的數量(例如光描述“兩個描述”沒有其他修改符,表示至少兩個描述,或兩個或更複數描述)。
此外,在使用類似於“A、B和C等中的至少一者”的慣例的這些實例中,一般來說這種慣例是本領域技術人員理解的慣例(例如“系統具有A、B和C中的至少一者”可以包括但不限於系統具有僅A、僅B、僅C、A和B、A和C、B和C和/或A、B和C等)。在使用類似於“A、B或C等中的至少一者”的慣例的這些實例中,一般來說這種慣例是本領域技術人員理解的慣例(例如“系統具有A、B或C中的至少一者”可以包括但不限於系統具有僅A、僅B、僅C、A和B、A和C、B和C和/或A、B和C等)。本領域技術人員還可以理解表示兩個或更複數可替換項的實質上任何分隔的字和/或短語,不管是在說明書中、申請專利範圍還是附圖中,應當被理解為包括包含兩個項之一、任意一個或兩個項的可能性。例如,短語“A或B”被理解為包括“A”或“B”或“A”和“B”的可能性。此外,這裡使用的術語“任意”之後接列舉的複數項和/或多種項旨在包括該複數項和/或多種項的“任意”、“任意組合”、“任意複數”和/或“複數的任意組合”,單獨或與其他項和/或其他種項結合。此外,這裡使用的術語“集合”或“組”旨在包括任意數量的項,包括零。此外,這裡使用的術語“數量”旨在包括任意數量,包括零。
此外,如果按照馬庫西組描述本揭露的特徵或方面,本領域技術人員可以理解也按照馬庫什組的任意個別成員或成員子組來描述本揭露。
本領域技術人員可以理解,出於任意和所有目的,例如為了提供書面描述,這裡揭露的所有範圍還包括任意和所有可能的子範圍以及其子範圍的組合。任意列出的範圍可以容易被理解為足以描述和實施被分成至少相等的兩半、三份、四份、五份、十份等的相同範圍。作為非限制性範例,這裡描述的每個範圍可以容易被分成下三分之一、中三分之一和上三分之一等。本領域技術人員還可以理解諸如“多至”、“至少”、“大於”、“小於”等的所有語言包括描述的數位並至可以隨之被分成上述的子範圍的範圍。最後,本領域技術人員可以理解,範圍包括每個個別的成員。因此,例如具有1-3個胞元的組和/或集合指具有1、2、或3個胞元的組/集合。類似地,具有1-5個胞元的組/集合指具有1、2、3、4或5個胞元的組/集合等等。
此外,申請專利範圍不應當理解為限制到提供的順序或元件除非描述有這種效果。此外,在任意申請專利範圍中術語“用於…的裝置” 的使用旨在援引35 U.S.C. §112, ¶ 6或手段功能用語的申請專利範圍格式,沒有術語“用於…的裝置”的任意申請專利範圍不具有此種意圖。
與軟體相關聯的處理器可以用於實施在無線傳輸/接收單元(WTRU)、使用者設備(UE)、終端、基地台、行動管理實體(MME)或演進封包核心(EPC)或任何主機電腦中使用的射頻收發器。WTRU可以結合以硬體和/或軟體實施的模組(包括軟體定義無線電(SDR))和其他組件,該組件例如是相機、視訊相機模組、視訊電話、對講電話、振動裝置、揚聲器、麥克風、電視收發器、免持耳機、小鍵盤、藍牙®模組、調頻(FM)無線電單元、近場通信(NFC)模組、液晶顯示(LCD)顯示單元、有機發光二極體(OLED)顯示單元、數位音樂播放機、媒體播放機、視訊遊戲機模組、網際網路瀏覽器和/或任意無線區域網路(WLAN)或超寬頻(UWB)模組。
雖然本發明已經根據通信系統進行了描述,但是可以預期,該系統可以在微處理器/通用電腦(未示出)上以軟體實現。在某些實施例中,各種組件的功能中的一個或複數可以在控制通用電腦的軟體中實現。
此外,儘管在此參考具體實施例示出和描述了本發明,但是本發明並不限於所示的細節。相反,在申請專利範圍的等同範圍內並且在不背離本發明的情況下,可以對所述細節進行各種修改。
在整個揭露中,技術人員理解,某些代表性實施例可以替代地或與其它代表性實施例組合地使用。
儘管上述按照特定組合描述了特徵和元件,但是本領域技術人員將理解的是每個特徵或元件可以被單獨使用或以與其它特徵和元件的任何組合來使用。另外,在此所述的方法可以在結合在電腦可讀媒體中的電腦程式、軟體或韌體中實施,以由電腦或處理器執行。非暫態電腦可讀媒體的範例包括但不限於唯讀記憶體(ROM)、隨機存取記憶體(RAM)、暫存器、快取記憶體、半導體記憶體裝置、諸如內部硬碟和可移除磁片之類的磁媒體、磁光媒體、以及諸如CD-ROM碟片和數位多用途碟片(DVD)之類的光媒體。與軟體相關聯的處理器可用於實施用於WTRU、UE、終端、基地台、RNC和任何主機電腦的射頻收發器。
此外,在上述的實施方式中,提及了處理平臺、計算系統、控制器以及包含處理器的其他裝置。這些裝置可以包含至少一個中央處理單元(“CPU”)和記憶體。根據電腦程式設計領域的技術人員的實踐,對動作和操作或指令的符號描述的引用可以由各種CPU和記憶體執行。這些動作和操作或指令可以稱為“被執行”、“電腦執行”或“CPU執行”。
本領域技術人員可以理解動作和符號描述的操作或指令包括CPU對電信號的操縱。電氣系統表示可以表示資料位元,其能造成電信號產生變換或還原以及資料位元在記憶體系統中的記憶體位置的維持由此以重新配置或其他方式改變CPU的操作以及信號的其他處理。維持資料位元的記憶體位置是具有對應於或代表資料位元的特別電、磁、光或有機屬性的實體位置。
該資料位元也可以被維持在電腦可讀媒體上,其包括磁片、光碟以及任意其他揮發性(例如隨機存取記憶體(“RAM”))或非揮發性(例如唯讀記憶體(“ROM”))CPU可讀的大型儲存系統。所述電腦可讀媒體可以包括協作或互連的電腦可讀媒體,其專門存在於處理器系統上或分佈在可以是處理系統本地的或遠端的複數互連處理系統間。可以理解代表性實施方式不限於上述的記憶體且其他平臺和記憶體可以支援所描述的方法。
舉例來說,合適的處理器包括通用處理器、專用處理器、常規處理器、數位訊號處理器(DSP)、複數微處理器、與DSP核心相關聯的一個或一個以上微處理器、控制器、微控制器、專用積體電路(ASIC)、專用標準產品(ASSP);現場可程式設計閘陣列(FPGA)電路、任何其它類型的積體電路(IC)和/或狀態機。
雖然本發明已經根據通信系統進行了描述,但是可以預期,該系統可以在微處理器/通用電腦(未示出)上以軟體實現。在某些實施例中,各種組件的功能中的一個或複數可以在控制通用電腦的軟體中實現。
此外,儘管在此參考具體實施例示出和描述了本發明,但是本發明並不限於所示的細節。相反,在申請專利範圍的等同範圍內並且在不背離本發明的情況下,可以對所述細節進行各種修改。
100:通訊系統 102、102a、102b、102c、102d:無線傳輸/接收單元(WTRU) 104、113:無線電存取網路(RAN) 106、115:核心網路(CN) 108:公共交換電話網路(PSTN) 110:網際網路 112:其他網路 114a、114b:基地台 116:空中介面 118:處理器 120:收發器 122:傳輸/接收元件 124:揚聲器/麥克風 126:小鍵盤 128:顯示器/觸控板 130:非可移記憶體 132:可移記憶體 134:電源 136:全球定位系統(GPS)晶片組 138:其他週邊設備 160a、160b、160c:e節點B 162:移動性管理實體(MME) 164:服務閘道(SGW) 180a、180b、180c:gNB 182a、182b:移動性管理功能(AMF) 184a、184b:使用者平面功能(UPF) 183a、183b:對話管理功能(SMF) 185a、185b:資料網路(DN) 200:視訊串流傳輸架構 202:伺服器 204、206和208:編碼器 210:中間盒 212:解碼器 300:ARC機制 400:視埠適應性串流傳輸機制 500:視埠切換機制 600:具有ARC的視埠切換機制 700:基於子圖片的ARC機制 800:時間可縮放性機制 ARC:子圖片適應性解析度改變 SEI:補充增強資訊
從以下結合附圖以範例方式給出的詳細描述中可以獲得更詳細的理解。類似於具體實施方式,附圖中的圖中是範例。因此,附圖和詳細描述不應被認為是限制性的,並且其它等效的範例是可行的並且是可能的。此外,圖中的相同參考標號指示相同元件,且其中: 圖1A是示出了可以實施所揭露的一個或複數實施例的範例性通信系統的系統圖式; 圖1B是示出了根據實施例的可以在圖1A所示的通信系統內部使用的範例性無線傳輸/接收單元(WTRU)的系統圖式; 圖1C是示出了根據實施例的可以在圖1A所示的通信系統內部使用的範例性無線電存取網路(RAN)和範例性核心網路(CN)的系統圖式; 圖1D是示出了根據實施例的可以在圖1A所示的通信系統內部使用的另一個範例性RAN和另一個範例性CN的系統圖式; 圖2是示出了視訊串流傳輸架構的範例的框圖; 圖3示出了適應性解析度改變(adaptive resolution change,ARC)的範例; 圖4示出了視埠適應性串流傳輸的範例; 圖5示出了視埠切換的範例; 圖6示出了具有ARC的視埠切換的範例; 圖7示出了基於由補充增強資訊(SEI)訊息提供的子圖片屬性資訊來執行的ARC的範例; 圖8示出了低解析度表示和高解析度表示之間的ARC轉換的範例; 圖9示出了用於確定一個或更複數ARC轉換點的範例編碼程序;以及 圖10示出了基於層間預測的ARC的範例。
700:基於子圖片的ARC機制
ARC:子圖片適應性解析度改變
SEI:補充增強資訊

Claims (52)

  1. 一種方法,包括: 選擇性地在一補充增強資訊(SEI)訊息中包括用於一視埠的適應性切換的子圖片屬性資訊;以及 傳送該SEI訊息。
  2. 如請求項1所述的方法,還包括: 指示與該視埠相關聯的子圖片之一集合;以及 指示與子圖片之該所指示集合相關聯的該子圖片屬性資訊,其中選擇性地將該子圖片屬性資訊包含於該SEI訊息中包括: 產生包括該所指示的子圖片屬性資訊的該SEI訊息。
  3. 如前述請求項中任一項所述的方法,其中該子圖片屬性資訊指示和/或包括以下中的任意項:一個或複數層指示(ID)、一個或複數圖塊組ID、每個子圖片的該座標、子圖片之該集合中的每個子圖片的一位置和一格式、用於要被映射到該圖片的一球座標空間上的每個子圖片的映射資訊、一位元深度、顏色子取樣資訊、一編碼簡檔和一編碼級別,其用於一個或複數子圖片。
  4. 如前述請求項中任一請求項所述的方法,其中該將該子圖片屬性資訊選擇性地包含於該SEI訊息中包括: 產生指示該SEI訊息中的該子圖片屬性資訊的一語法。
  5. 如請求項2至請求項4所述的方法,其中子圖片之該集合是與該圖片相關聯的圖塊組之一集合。
  6. 一種方法,包括: 選擇性地在一補充增強資訊(SEI)訊息中包括用於與一視埠的適應性切換有關的適應性解析度改變(ARC)的子圖片屬性資訊;以及 傳送該SEI訊息。
  7. 如請求項6所述的方法,其中該子圖片屬性資訊包括指示一低解析度子圖片和一高解析度子圖片中的任意者的資訊,ARC能夠被應用於該低解析度子圖片和該高解析度子圖片以用於該視埠的適應性切換。
  8. 如請求項6所述的方法,其中該低解析度子圖片和該高解析度子圖片與用於該視埠的相同源內容區域相關聯。
  9. 如前述請求項中任一請求項所述的方法,其中該SEI訊息是在包含一第一訊框內隨機存取點(IRAP)圖片的一訊框之後且在包含一第二IRAP圖片的一下一訊框之前被傳送。
  10. 如前述請求項中任一項所述的方法,還包括: 指示與可用於ARC的一圖片相關聯的子圖片之一集合,其中子圖片之該集合包括該低解析度子圖片和該高解析度子圖片;以及 指示與子圖片之該所指示集合相關聯的該子圖片屬性資訊,其中選擇性地將該子圖片屬性資訊包含於該SEI訊息中包括: 產生包括該所指示的子圖片屬性資訊的該SEI訊息。
  11. 如前述請求項中任一項所述的方法,其中該子圖片屬性資訊指示和/或包括以下中的任意項:一個或複數層指示(ID)、一個或複數圖塊組ID、每個子圖片的該座標、子圖片之該集合中的每個子圖片的一位置和一格式、用於要被映射到該圖片的一球座標空間上的每個子圖片的映射資訊、一位元深度、顏色子取樣資訊、一編碼簡檔和一編碼級別,其用於一個或複數子圖片。
  12. 如前述請求項中任一請求項所述的方法,其中該在該SEI訊息中選擇性地包含該子圖片屬性資訊包括: 產生指示該SEI訊息中的該子圖片屬性資訊的一語法。
  13. 如請求項6所述的方法,其中該子圖片集合是與該圖片相關聯的圖塊組之一集合。
  14. 一種方法,包括: 接收一補充增強資訊(SEI)訊息,該補充增強資訊(SEI)訊息包括用於一視埠的適應性切換的子圖片屬性資訊;以及 基於該子圖片屬性資訊,執行適應性解析度改變(ARC)。
  15. 如請求項14所述的方法,其中該子圖片屬性資訊包括指示一低解析度子圖片和一高解析度子圖片中的任意者的資訊,其中該ARC能夠被應用於該低解析度子圖片和該高解析度子圖片以用於該視埠的適應性切換。
  16. 如請求項15所述的方法,其中該ARC至少部分地藉由將該所指示的低解析度子圖片調適到一高解析度子圖片和/或將該所指示的高解析度子圖片調適到一低解析度子圖片而被執行。
  17. 如請求項14所述的方法,其中執行該ARC包括基於該子圖片屬性資訊結合該視埠的適應性切換來執行該ARC。
  18. 如請求項14所述的方法,其中該ARC在不引入一訊框內隨機存取點(IRAP)圖片訊框的情況下被執行。
  19. 如請求項15所述的方法,其中該ARC至少部分地藉由以下而被執行:將該所指示的低解析度子圖片調適到一高解析度子圖片,並且將該所指示的高解析度子圖片調適到一低解析度子圖片。
  20. 如請求項14所述的方法,其進一步包括解碼該所接收的SEI訊息。
  21. 如前述請求項中任一項所述的方法,其中該子圖片屬性資訊指示和/或包括以下中的任意項:一個或複數層指示(ID)、一個或複數圖塊組ID、每個子圖片的該座標、子圖片之該集合中的每個子圖片的一位置和一格式、用於要被映射到該圖片的一球座標空間上的每個子圖片的映射資訊、一位元深度、顏色子取樣資訊、一編碼簡檔和一編碼級別,其用於一個或複數子圖片。
  22. 如請求項14所述的方法,其中執行該ARC包括基於該子圖片屬性資訊來放大該低解析度子圖片。
  23. 如請求項14所述的方法,其中執行該ARC包括基於該子圖片屬性資訊來縮小該高解析度子圖片。
  24. 如請求項14所述的方法,其中執行該ARC包括基於該子圖片屬性資訊來對準子圖片之一集合與對應參考子圖片之一集合之間的座標。
  25. 如請求項14所述的方法,其中執行該ARC包括: 基於該子圖片屬性資訊來確定一子圖片的一位置和一格式; 確定一對應參考子圖片的解析度; 基於該所確定的位置和格式以及該參考子圖片的該解析度,縮放該子圖片的一解析度;以及 將該縮放後的子圖片映射到該圖片的一對應座標。
  26. 如請求項25所述的方法,其中該子圖片包含一圖塊組。
  27. 如請求項25所述的方法,還包括: 基於該子圖片屬性資訊來確定該對應參考子圖片是否與該子圖片並置。
  28. 如請求項14所述的方法,其中該SEI訊息包含一語法,該語法包含該子圖片屬性資訊。
  29. 如請求項28所述的方法,其中該語法由一跨層參數集攜載。
  30. 如請求項14所述的方法,其中該子圖片屬性資訊指示每一經重新定位的子圖片相對於符合性裁剪視窗的該座標。
  31. 如請求項14所述的方法,還包括: 確定在一個或複數先前圖片中可用的一對應參考子圖片;以及 基於該子圖片屬性資訊,導出該對應參考子圖片的一位置和一格式。
  32. 如請求項14所述的方法,其中該子圖片屬性資訊指示包括一個或複數低解析度子圖片和一個或複數高解析度子圖片的子圖片之一集合的屬性。
  33. 一種方法,包括: 指示一適應性解析度改變(ARC)切換點,其中該ARC切換點之後的一個或複數圖片使用一經縮放圖片作為一參考;以及 發送指示該ARC切換點的一指示符。
  34. 如請求項33所述的方法,其中該指示符是在以下各項中的任意項中被傳輸的:一SEI訊息、一圖片參數集(PPS)及一子圖片相關參數集。
  35. 如請求項33所述的方法,其中該指示符包括參數,其中該參數包括以下各項中的任意者:一層ID和一圖片次序計數(POC)值。
  36. 一種方法,包括: 接收指示一適應性解析度改變(ARC)切換點的一指示符;以及 指示該ARC切換點和一經縮放圖片,其中在該ARC切換點之後接收的一個或複數圖片使用該經縮放圖片作為一參考。
  37. 一種方法,包括: 指示與可用於或被推薦執行一適應性解析度改變(ARC)的一圖片相關聯的子圖片之一集合;以及 傳送指示子圖片之該集合的一或複數參數的一補充增強資訊(SEI)訊息。
  38. 如請求項37所述的方法,其中該一個或複數參數包括以下中的任意者: 用於該圖片的一高解析度表示的一POC值, 具有一表示ID的一對應下層參考圖片的一POC值, 一個或複數縮放濾波器係數,以及 一預測方法。
  39. 如請求項38所述的方法,其中該表示ID是一層ID或一圖塊組ID。
  40. 如請求項28所述的方法,其中該預測方法包括以下任意者:一時間預測和一層間預測。
  41. 如請求項37所述的方法,其中該SEI訊息包含一語法。
  42. 如請求項41所述的方法,其中該語法指示子圖片之該集合中的一子圖片的資訊,其中該資訊包含以下各項中的任意者:一層ID、一POC值以及一子圖片ID,其與該子圖片相關聯。
  43. 一種方法,包括: 接收與一圖片相關聯的一補充增強資訊(SEI)訊息;以及 基於在該SEI訊息中指示的一個或複數參數,指示被推薦用於執行適應性解析度改變(ARC)的子圖片之一集合;以及 從子圖片之該集合中選擇一個或複數子圖片以執行該ARC。
  44. 如請求項43所述的方法,其中該一個或複數參數包括以下中的任意者: 用於該圖片的一高解析度表示的一POC值, 具有一表示ID的一對應的較低解析度參考圖片的一POC值, 一個或複數縮放濾波器係數,以及 一預測方法。
  45. 如請求項44所述的方法,其中該表示ID是一層ID或一圖塊組ID。
  46. 如請求項44所述的方法,其中該預測方法包括以下中的任意者:一時間預測和一層間預測。
  47. 如請求項43所述的方法,其中該SEI訊息包含一語法。
  48. 如請求項47所述的方法,其中該語法指示子圖片之該集合中的一子圖片的資訊,其中該資訊包含以下各項中的任意者:一層ID、一POC值以及一子圖片ID,其與該子圖片相關聯。
  49. 如前述請求項中任一項所述的方法,其中該SEI訊息包含指示子圖片之該集合中的一分別子圖片的一優先順序的一指示符。
  50. 如請求項49所述的方法,其中該優先順序是一高優先順序,該高優先順序指示在該分別子圖片上的一較好ARC性能。
  51. 一種裝置,包括實施請求項1至請求項50項中任一項所述的方法的一處理器、一收發器和一記憶體。
  52. 一種中間盒,包括實施請求項1至請求項50項中任一項所述的方法的一處理器、一收發器和一記憶體。
TW109107953A 2019-03-11 2020-03-11 子圖片適應性解析度改變方法及裝置 TW202101985A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962816686P 2019-03-11 2019-03-11
US62/816686 2019-03-11
US201962866528P 2019-06-25 2019-06-25
US62/866528 2019-06-25

Publications (1)

Publication Number Publication Date
TW202101985A true TW202101985A (zh) 2021-01-01

Family

ID=70057365

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109107953A TW202101985A (zh) 2019-03-11 2020-03-11 子圖片適應性解析度改變方法及裝置

Country Status (9)

Country Link
US (1) US20220191543A1 (zh)
EP (1) EP3939311A1 (zh)
JP (2) JP2022525399A (zh)
KR (1) KR20210146901A (zh)
CN (1) CN113678463A (zh)
CA (1) CA3133224A1 (zh)
SG (1) SG11202109950UA (zh)
TW (1) TW202101985A (zh)
WO (1) WO2020185842A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113853792A (zh) * 2019-05-11 2021-12-28 北京字节跳动网络技术有限公司 带有参考图片重采样的编解码工具
US20200404241A1 (en) * 2019-06-20 2020-12-24 At&T Intellectual Property I, L.P. Processing system for streaming volumetric video to a client device
CN114270837A (zh) * 2019-06-20 2022-04-01 交互数字Vc控股法国公司 用于通用视频编解码的无损模式
WO2020264529A1 (en) * 2019-06-28 2020-12-30 Beijing Dajia Internet Information Technology Co., Ltd. Lossless coding modes for video coding
CN114223203A (zh) * 2019-08-27 2022-03-22 松下电器(美国)知识产权公司 编码装置、解码装置、编码方法和解码方法
EP4018659A4 (en) 2019-09-19 2022-11-30 Beijing Bytedance Network Technology Co., Ltd. SCALE WINDOW IN VIDEO CODING
BR112022005293A2 (pt) 2019-09-19 2022-09-20 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeo, aparelho para processar dados de vídeo e meios de armazenamento e de gravação não transitórios legíveis por computador
EP4026336A4 (en) 2019-10-05 2022-12-07 Beijing Bytedance Network Technology Co., Ltd. LEVEL-BASED SIGNALING OF VIDEO CODING TOOLS
KR20220073752A (ko) 2019-10-12 2022-06-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩 툴들을 위한 상위 레벨 신택스
CN114556934A (zh) 2019-10-12 2022-05-27 北京字节跳动网络技术有限公司 视频编解码中的预测类型信令
CN114556955B (zh) 2019-10-13 2024-04-05 北京字节跳动网络技术有限公司 参考图片重采样与视频编解码工具之间的相互作用
JP2023529430A (ja) 2020-06-08 2023-07-10 バイトダンス インコーポレイテッド 映像ビットストリームにおけるサブレイヤ信号通知
WO2022144262A1 (en) * 2020-12-29 2022-07-07 Koninklijke Kpn N.V. Adaptive resolution coding for video coding
US20230007305A1 (en) * 2021-06-28 2023-01-05 Tencent America LLC Subpicture partitioning and scaling window information
WO2024004708A1 (en) * 2022-06-27 2024-01-04 Panasonic Intellectual Property Corporation Of America Decoding apparatus, encoding apparatus, decoding method, and encoding method
EP4300960A1 (en) * 2022-06-27 2024-01-03 Panasonic Intellectual Property Corporation of America Encoder, decoder, encoding method, and decoding method

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140010291A1 (en) * 2012-07-05 2014-01-09 Vid Scale, Inc. Layer Dependency and Priority Signaling Design for Scalable Video Coding
US9591321B2 (en) * 2013-04-07 2017-03-07 Dolby International Ab Signaling change in output layer sets
US10003815B2 (en) * 2013-06-03 2018-06-19 Qualcomm Incorporated Hypothetical reference decoder model and conformance for cross-layer random access skipped pictures
MY178305A (en) * 2013-10-11 2020-10-07 Vid Scale Inc High level syntax for hevc extensions
EP3254466A1 (en) * 2015-02-05 2017-12-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. 3d-video codec supporting inter-component prediction
CN113875250A (zh) * 2019-05-12 2021-12-31 北京字节跳动网络技术有限公司 通过参考图片重采样从时域块进行运动预测

Also Published As

Publication number Publication date
WO2020185842A1 (en) 2020-09-17
US20220191543A1 (en) 2022-06-16
CN113678463A (zh) 2021-11-19
JP2022525399A (ja) 2022-05-13
JP2024063173A (ja) 2024-05-10
KR20210146901A (ko) 2021-12-06
CA3133224A1 (en) 2020-09-17
SG11202109950UA (en) 2021-10-28
EP3939311A1 (en) 2022-01-19

Similar Documents

Publication Publication Date Title
TW202101985A (zh) 子圖片適應性解析度改變方法及裝置
JP7460611B2 (ja) ポイントクラウド圧縮ビットストリームフォーマットに対する方法および装置
US11770594B2 (en) 360-degree video delivery over next generation network
TWI667911B (zh) 視訊編碼裝置及方法及視訊解碼裝置
TWI830777B (zh) 可撓柵區方法及裝置
TW202029755A (zh) 視訊編碼雙預測
CN113273195A (zh) 图块组划分
JP2023093440A (ja) ジオメトリパディングに基づいた360度ビデオのための予測符号化
TW201937923A (zh) 360度視訊編碼適應性訊框填裝
JP2022548107A (ja) 多用途ビデオ符号化のためのシステム及び方法
TW202116071A (zh) 在串流服務中立體內容成分次位元串流動態適應
TW202032986A (zh) 基於歷史之運動向量預測
TW202103493A (zh) 視訊編碼中訊框內次分區
TW202038626A (zh) 對稱運動向量差寫碼