TWI782342B - 一種視訊解碼方法 - Google Patents

一種視訊解碼方法 Download PDF

Info

Publication number
TWI782342B
TWI782342B TW109136686A TW109136686A TWI782342B TW I782342 B TWI782342 B TW I782342B TW 109136686 A TW109136686 A TW 109136686A TW 109136686 A TW109136686 A TW 109136686A TW I782342 B TWI782342 B TW I782342B
Authority
TW
Taiwan
Prior art keywords
projection
layout
cube
frame
hemispherical
Prior art date
Application number
TW109136686A
Other languages
English (en)
Other versions
TW202123685A (zh
Inventor
李亞璇
林建良
Original Assignee
聯發科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 聯發科技股份有限公司 filed Critical 聯發科技股份有限公司
Publication of TW202123685A publication Critical patent/TW202123685A/zh
Application granted granted Critical
Publication of TWI782342B publication Critical patent/TWI782342B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/1883—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit relating to sub-band structure, e.g. hierarchical level, directional tree, e.g. low-high [LH], high-low [HL], high-high [HH]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

一種視訊解碼方法，包括：解碼一位元流的一部份以產生一解碼後的幀。解碼後的幀是一基於投影的幀，包括有被打包在一投影布局(projection layout)的至少一投影面(projection face)與至少一保護帶(guard band)。一球形的一360度內容的至少一部份經由投影被映射到所述的至少一投影面。解碼後的幀是一4：2：0色度格式或一4：2：2色度格式，以及每一該至少一保護帶的一保護帶尺寸大小等於一偶數數目個亮度樣本。

Description

一種視訊解碼方法
本申請案要求下列優先權：2019年10月28日提交申請號為62/926,600的美國臨時專利申請案、以及2020年6月23日提交申請號為63/042,610的美國臨時專利申請案。相關申請案的全部內容(包括62/926,600的美國臨時專利申請案以及63/042,610的美國臨時專利申請案)以引用方式併入本文。
本發明關於視訊處理，尤其，關於用來解碼一位元流的一部份以產生基於投影並具有一約束後保護帶尺寸大小、一約束後投影面尺寸大小、與/或一約束後畫面尺寸大小的幀的一視訊解碼方法。
具有頭戴式顯示器(head-mounted displays，HMDs)的虛擬真實(VR)與多種應用相關。對一使用者顯示觀賞內容廣域的能力可以用來提供身歷其境的視覺經驗。一真實世界的環境必須從各方向被拍攝，形成一全方位視訊而相對應於一觀賞球形。藉由相機設備與HMD的發展進步，由於用來代表此種360度內容所需的高位元率，VR內容的傳送可能很快變成瓶頸。當全方位視訊的解析度是4K或更高時，資料壓縮/編碼對 於位元率的降低至關重要。
一般而言，相對應於一球形的全方位視訊被轉換為具有一360度影像內容的一幀，所述內容是藉由安排於一360度虛擬真實(360VR)投影布局的一或多個投影面來加以代表，而然後所產生的幀被編碼進一位元流加以傳輸。色度次取樣是一種視訊編碼技術，其對色度信息比亮度信息採用較少解析度，這是利用人類視覺系統對色彩差異的敏銳度比亮度要低。換句話說，色度次取樣是一種類型的壓縮，來降低在一信號中的色彩信息，因此降低頻寬而卻不顯著地影響畫面品質。例如，一視訊編碼器可以將一基於投影的幀以一4：2：0色度格式或一4：2：2色度格式編碼進一位元流加以傳輸。因此，當色度次取樣被施行對色度信息採用較少解析度時，需要有一種創新的設計來對基於投影的幀加上約束。
所請求發明的目的之一是提供一視訊解碼方法，以用來解碼一位元流的一部份以產生基於投影並具有一約束後保護帶尺寸大小、一約束後投影面尺寸大小、與/或一約束後畫面尺寸大小的幀。
依據本發明的一第一方面，揭示一示例性的視訊解碼方法。該示例性的視訊解碼方法包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一投影布局的至少一投影面與至少一保護 帶，以及一球形的一360度內容的至少一部份經由投影被映射到該至少一投影面。該解碼後的幀是一4：2：0色度格式或一4：2：2色度格式，以及每一該至少一保護帶的一保護帶尺寸大小等於一偶數數目個亮度樣本。
依據本發明的一第二方面，揭示一示例性的視訊解碼方法。該示例性的視訊解碼方法包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一投影布局的一複數個投影面，以及一球形的一360度內容的至少一部份經由投影被映射到該等投影面。該解碼後的幀是一4：2：0色度格式或一4：2：2色度格式，以及每一該等投影面的一面寬度等於一偶數數目個亮度樣本。
依據本發明的一第三方面，揭示一示例性的視訊解碼方法。該示例性的視訊解碼方法包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一投影布局的一複數個投影面，以及一球形的一360度內容的至少一部份經由投影被映射到該等投影面。該解碼後的幀是一4：2：0色度格式，以及每一該等投影面的一面高度等於一偶數數目個亮度樣本。
依據本發明的一第四方面，揭示一示例性的視訊解碼方法。該示例性的視訊解碼方法包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一投影布局的一複數個投影面，該投影布局具有M個投影面欄與N個投影面行，而M與N為正整數，以及一球形的一360度內容的至少一部份經由投影被映射到該等投 影面。關於該解碼後的幀，排除保護帶樣本的一畫面寬度等於M的一整數倍，而且排除保護帶樣本的一畫面高度等於N的一整數倍。
依據本發明的一第五方面，揭示一示例性的視訊解碼方法。該示例性的視訊解碼方法包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一半球形立方體映射投影布局的一複數個投影面，以及一球形的一360度內容的一部份經由半球形立方體映射投影被映射到該等投影面。關於該解碼後的幀，排除保護帶樣本的一畫面寬度以及排除保護帶樣本的一畫面高度中之一等於6的一整數倍。
本發明的這些與其他目的，毫無疑問地將會使習知技藝人士在讀完下列以各種圖示與圖形所闡明的較佳實施例的詳細描述後變的明白。
100:360VR系統
102:來源電子裝置
103:傳輸介質
104:目的地電子裝置
112:視訊獲取裝置
114:轉換電路
115:填補電路
116:視訊編碼器
122:視訊解碼器
124:圖形生成電路
126:顯示螢幕
200:球形
201:立方體
202:基於立方體投影布局
204:基於立方體投影布局
302:基於立方體投影布局
304:基於立方體投影布局
第1圖為一圖示，根據本發明的一實施例繪示一360度虛擬真實(360VR)的系統。
第2圖為一圖示，根據本發明的一實施例繪示一基於立方體的投影。
第3圖為一圖示，根據本發明的一實施例繪示另一基於立方體的投影。
第4-6圖為圖示，根據本發明的一實施例繪示被打包在一一般 立方體映射投影或一半球形立方體映射投影的保護帶的一種規格。
第7-9圖為圖示，根據本發明的一實施例繪示被打包在一一般立方體映射投影或一半球形立方體映射投影的保護帶的另一種規格。
第10圖為一圖示，繪示沒有保護帶的一1x6布局的一例子。
第11圖為一圖示，繪示沒有保護帶的一2x3布局的一例子。
第12圖為一圖示，繪示沒有保護帶的一3x2布局的一例子。
第13圖為一圖示，繪示沒有保護帶的一6x1布局的一例子。
於以下描述與申請專利範圍通篇使用某些術語，其指稱的是特定的組成成份。如習知技藝人士會察知者，電子設備製造商可能會將一組成成份指稱為不同名字。本文不意圖對於名字不同但非功能不同的組成成份之間做出區別。於以下描述與申請專利範圍中，這些術語“包含”與“包括”被使用做為開放性的方式，因此應該被解讀為“包含，但不以此為限...”。術語“耦合”也是意圖表示一間接或直接電性連接。因此，如果一裝置耦合至另一裝置，其連接可能是通過一直接電性連接，或經由其他裝置與連接通過一間接電性連接。
第1圖為一圖示，根據本發明的一實施例繪示一360度虛擬真實(360VR)的系統。360VR系統100包括二個視訊處理設備(例如一來源電子裝置102與一目的地電子裝置104)。一來源電子裝置102包括一視訊獲取裝置(video capture device)112、一轉換電路(conversion circuit)114、與一視訊編碼器116。例如，視訊獲取裝置112可以是一組相機用來提供對應於一球形的一全方向(omnidirectional)影像內容(例如覆蓋整個場景的多重影像)S_IN。轉換電路114耦合於視訊獲取裝置112與視訊編碼器116之間。轉換電路114依據該全方向影像內容S_IN產生具有一360度虛擬真實(360VR)投影布局L_VR的一基於投影的幀IMG。例如，該基於投影的幀IMG可以是由轉換電路114所產生的一系列基於投影的幀中所包括的其中一幀。視訊編碼器116是一編碼電路用來編碼/壓縮該等基於投影的幀IMG，而產生一位元流BS的一部份。此外，視訊編碼器116藉由一傳輸介質(transmission means)103輸出位元流BS到目的地電子裝置104。例如，該系列基於投影的幀可以被編碼進位元流BS，而且該傳輸介質103可以是一有線/無限通訊聯結或一儲存媒介。
目的地電子裝置104可以是一頭戴式顯示裝置(head-mounted display，HMD)。如第1圖所示，目的地電子裝置104包括一視訊解碼器122、一圖形生成電路(graphic rendering circuit)124、與一顯示螢幕126。視訊解碼器122是一解碼電路用來接收來自傳輸介質103(例如，有線/無限通訊聯結或儲存媒介)的位元流BS，以及解碼所接收位元流BS的一部份而產生一解碼後的幀IMG’。例如，視訊解碼器122藉由解碼所接收到的位元流BS來產生一系列解碼後的幀，其中該解碼後的幀IMG’是包括在該系列解碼後的幀其中一幀。在此環境中，於編碼器側所要被編碼的基於投影的幀IMG為具有一投影 布局的一360VR投影格式。因此，在位元流BS於解碼器側被解碼之後，解碼後的幀IMG’具有相同的360VR投影格式與相同的投影布局。圖形生成電路124耦合於視訊解碼器122與顯示螢幕126之間。圖形生成電路124依據解碼後的幀IMG’生成並顯示一輸出影像資料於顯示螢幕126上。例如，由解碼後的幀IMG’所攜帶的360度影像內容的一部份相關聯的一視口區域(viewport area)，可以經由圖形生成電路124來加以顯示於顯示螢幕126上。
如上所述，轉換電路114依據360VR投影布局L_VR以及全方向影像內容S_IN來產生基於投影的幀IMG。在此環境中，360VR投影布局L_VR可以由下列所組成的一群組來加以選擇：具有/不具有保護帶的一基於立方體的投影布局，具有/不具有保護帶的一基於三角形的投影布局，具有/不具有保護帶的一經過分段的球(segmented sphere)的投影布局，具有/不具有保護帶的一經過旋轉的球(rotated sphere)的投影布局，具有/不具有保護帶的一視口依存(viewport-dependent)的投影布局，具有/不具有保護帶的一等距柱狀(equi-rectangular)的投影布局，具有/不具有保護帶的一等角立方體映射(equi-angular cubemap)的投影布局，以及具有/不具有保護帶的一赤道圓筒(equatorial cylindrical)的投影布局。例如，360VR投影布局L_VR可以藉由具有/不具有保護帶的一一般立方體映射的投影布局或是具有/不具有保護帶的一半球形立方體映射的投影布局來加以設定。
考慮一例子，其中360VR投影布局L_VR是一基於 立方體的投影布局。因此，一球形的360度內容的至少一部份(即，部份或全部)經由基於立方體的投影被映射到投影面，以及由一三維物件(例如一立方體或一半球形立方體)的不同面所推導出的投影面被打包為一二維基於立方體的投影布局，而所述投影布局被基於投影的幀IMG/解碼後的幀IMG’來加以施行。
在一實施例中，具有代表整個360°x1S0°全方向視訊(即一球形的360度內容的全部)的六個方形投影面的基於立方體的投影可以被施行。關於來源電子裝置102的轉換電路114，基於立方體的投影被施行來產生在三維(3D)空間的一立方體的方形投影面。第2圖為一圖示，根據本發明的一實施例繪示一基於立方體的投影。在球形200的整個360度內容被投影到一立方體201的六個方形面，包括一上面(標示為“上”)、一下面(標示為“下”)、一左面(標示為“左”)、一前面(標示為“前”)、一右面(標示為“右”)、以及一後面(標示為“後”)。如第2圖所示，球形200的一北端區域的一影像內容被投影到上面“上”，球形200的一南端區域的一影像內容被投影到下面“下”，以及球形200的一赤道區域的一影像內容被投影到左面“左”、前面“前”、右面“右”、以及後面“後”。
正向轉換(forward transformation)可以被用來從3D空間轉換為2D平面。因此，3D空間中的立方體201的上面“上”、下面“下”、左面“左”、前面“前”、右面“右”、以及後面“後”，被轉換為2D平面的一上面(標示為“2”)、一下面(標示為“3”)、一左面(標示為“5”)、一前面(標示為“0”)、 一右面(標示為“4”)、以及一後面(標示為“1”)。
逆向轉換(inverse transformation)可以被用來從2D平面轉換為3D空間。因此，2D平面的一上面(標示為“2”)、一下面(標示為“3”)、一左面(標示為“5”)、一前面(標示為“0”)、一右面(標示為“4”)、以及一後面(標示為“1”)，被轉換為3D空間中的立方體201的上面“上”、下面“下”、左面“左”、前面“前”、右面“右”、以及後面“後”。
逆向轉換可以被來源電子裝置102的轉換電路114用來產生上面“2”、下面“3”、左面“5”、前面“0”、右面“4”、以及後面“1”。2D平面上的上面“2”、下面“3”、左面“5”、前面“0”、右面“4”、以及後面“1”被打包來形成被視訊編碼器116所編碼的基於投影的幀IMG。
視訊解碼器122接收來自傳輸介質103的位元流BS，以及解碼所接收位元流BS的一部份而產生解碼後的幀IMG’，此IMG’具有與在編碼器側所採用的相同投影布局L_VR。關於目的地電子裝置的圖形生成電路124，正向轉換可以被用來從3D空間轉換為2D平面，以決定在任何上面“上”、下面“下”、左面“左”、前面“前”、右面“右”、以及後面“後”中像素的像素值。或者，逆向轉換可以被用來從2D平面轉換為3D空間，來將一基於投影的幀的樣本位置再映射到球形上。
如上所述，上面“2”、下面“3”、左面“5”、前面“0”、右面“4”、以及後面“1”被打包來形成該基於投影的幀IMG。例如，轉換電路114可以選擇一種打包類型(packing type)，使 得該基於投影的幀IMG可以具有安排如基於立方體的投影布局202中的投影後影像資料，其中具有基於立方體投影布局202的該基於投影的幀IMG具有一畫面高度cmpPicHeight與一畫面寬度cmpPicWidth，而且打包於基於立方體投影布局202的每一方形面具有一面高度faceHeight與一面寬度faceWidth。另一例子中，轉換電路114可以選擇另一種打包類型，使得該基於投影的幀IMG可以具有與基於立方體的投影布局202不同而安排如基於立方體投影布局204中的投影後影像資料，其中具有基於立方體投影布局204的該基於投影的幀IMG具有一畫面高度cmpPicHeight與一畫面寬度cmpPicWidth，而且打包於基於立方體投影布局204的每一方形面具有一面高度faceHeight與一面寬度faceWidth。
在另一實施例中，具有代表1S0°x1S0°全方向視訊(即一球形的360度內容的部份)的五個方形投影面(其包含一個全面與四個半面)的基於立方體的投影可以被施行。關於來源電子裝置102的轉換電路114，基於立方體的投影被施行來產生在3D空間的一立方體的一個全面與四個半面。第3圖為一圖示，根據本發明的一實施例繪示另一基於立方體的投影。在球形200的360度內容只有一半被投影到一立方體201的面上，包括：一上半面(標示為“上_半”(“Top_H”))、一下半面(標示為“下_半”(“Bottom_H”))、一左半面(標示為“左_半”(“Left_H”))、一前全面(標示為“前”(“Front”))、以及一右半面(標示為“右_半”(“Right_H”))。在此例子中，一半球形立方體(例如立方體201的一半)被施行用於半球形 立方體映射投影，其中一半球形(例如球形200的一半)被內接入(inscribe)該半球形立方體(例如立方體201的一半)。如第3圖所示，球形200的一北極區域的一半的一影像內容被投影到上半面“上_半”，球形200的一南極區域的一半的一影像內容被投影到下半面“下_半”，以及球形200的一赤道區域的一半的一影像內容被投影到左半面“左_半”、前全面“前”、以及右半面“右_半”。
正向轉換可以被用來從3D空間轉換為2D平面。因此，3D空間中的立方體201的上半面“上_半”(“Top_H”)、下半面“下_半”(“Bottom_H”)、左半面“左_半”(“Left_H”)、前全面“前”(“Front”)、以及右半面“右_半”(“Right_H”)，被轉換為2D平面的一上半面(標示為“2”)、一下半面(標示為“3”)、一左半面(標示為“5”)、一前全面(標示為“0”)、以及一右半面(標示為“4”)。此外，前全面(標示為“0”)的一尺寸大小是每一上半面(標示為“2”)、下半面(標示為“3”)、左半面(標示為“5”)、以及右半面(標示為“4”)的尺寸大小的二倍。
逆向轉換可以被用來從2D平面轉換為3D空間。因此，2D平面的上半面(標示為“2”)、下半面(標示為“3”)、左半面(標示為“5”)、前全面(標示為“0”)、以及右半面(標示為“4”)，被轉換為3D空間中的立方體201的上半面“上_半”(“Top_H”)、下半面“下_半”(“Bottom_H”)、左半面“左_半”(“Left_H”)、前全面“前”、以及右半面“右_半”(“Right_H”)。
逆向轉換可以被來源電子裝置102的轉換電路114用來產生上半面“2”、下半面“3”、左半面“5”、前全面“0”、以及右半面“4”。2D平面上的上半面“2”、下半面“3”、左半面“5”、前全面“0”、以及右半面“4”被打包來形成被視訊編碼器116所編碼的基於投影的幀IMG。
視訊解碼器122接收來自傳輸介質103的位元流BS，以及解碼所接收位元流BS的一部份而產生解碼後的幀IMG’，此IMG’具有與在編碼器側所採用的相同投影布局L_VR。關於目的地電子裝置的圖形生成電路124，正向轉換可以被用來從3D空間轉換為2D平面，以決定在任何上半面“上_半”、下半面“下_半”、左半面“左_半”、前全面“前”、以及右半面“右_半”中像素的像素值。或者，逆向轉換可以被用來從2D平面轉換為3D空間，來將一基於投影的幀的樣本位置再映射到球形上。
如上所述，上半面“2”、下半面“3”、左半面“5”、前全面“0”、以及右半面“4”被打包以形成基於投影的幀IMG。例如，轉換電路114可以選擇一種打包類型，使得該基於投影的幀IMG可以具有安排如基於立方體的投影布局302中的投影後影像資料，其中具有基於立方體投影布局302的該基於投影的幀IMG具有一畫面高度cmpPicHeight與一畫面寬度cmpPicWidth，而且被打包在基於立方體投影布局302的方形面(即，全面)具有一面高度faceHeight與一面寬度faceWidth。另一例子中，轉換電路114可以選擇另一種打包類型，使得該基於投影的幀IMG可以具有與基於立方體投影布局302不同而 安排如基於立方體投影布局304中的投影後影像資料，其中具有基於立方體投影布局304的該基於投影的幀IMG具有一畫面高度cmpPicHeight與一畫面寬度cmpPicWidth，而且被打包在基於立方體投影布局304的方形面(即，全面)具有一面高度faceHeight與一面寬度faceWidth。在下文，基於立方體的投影布局302也被稱為一水平地打包半球形立方體映射投影布局，其所有投影面是被水平打包的；而且基於立方體的投影布局304也被稱為一垂直地打包半球形立方體映射投影布局，其所有投影面是被垂直打包的。在此實施例中，前面(front face)被選擇為被打包在基於立方體的投影布局302/304的全面(full face)。在此作法中，被打包在基於立方體的投影布局302/304的全面可以是上面、下面、前面、後面、左面、以及右面中的任何一個，而且被打包在基於立方體的投影布局302/304的四個半面取決於全面的選擇。
關於如第2圖所示的實施例，投影面被打包在無保護帶(或填補(padding))的一一般CMP布局202/204。關於如第3圖所示的實施例，投影面被打包在無保護帶(或填補)的一半球形CMP布局302/304。然而，由於CMP布局(可能是一一般CMP布局或一半球形CMP布局)的不連續布局邊界(boundary)，與/或CMP布局(可能是一一般CMP布局或一半球形CMP布局)的不連續邊緣(edge)，該基於投影的幀IMG在經過編解碼後可能有偽影。例如，無保護帶(或填補)的CMP布局具有一上方不連續布局邊界、一下方不連續布局邊界、一左方不連續布局邊界、以及一右方不連續布局邊界。此外，有 至少一影像內容不連續邊緣在被打包於無保護帶(或填補)的CMP布局的二個相鄰投影面之間。以基於立方體的投影布局202/204為例，一不連續邊緣存在於下面“3”的一面邊界與左面“5”的一面邊界，一不連續邊緣存在於後面“1”的一面邊界與前面“0”的一面邊界，以及一不連續邊緣存在於上面“2”的一面邊界與右面“4”的一面邊界。以基於立方體的投影布局302/304為例，一不連續邊緣存在於下面“3”的一面邊界與左面“5”的一面邊界，以及一不連續邊緣存在於右面“4”的一面邊界與上面“2”的一面邊界。
為了處理這個議題，360VR投影布局L_VR可以藉由具有至少一保護帶(或填補)的一投影布局(例如一基於立方體的投影布局)加以設定。例如，在布局邊界與/或不連續邊緣附近，例如由像素填補(pixel padding)所產生的額外保護帶可以被插入以用來降低接縫偽影(seam artifact)。備選地，在布局邊界與/或連續邊緣附近，例如由像素填補(pixel padding)所產生的額外保護帶可以被插入。簡言之，被加入一投影布局的每一保護帶的位置可以取決於實際設計考量。關於具有一約束後保護帶尺寸大小、一約束後投影面尺寸大小、與/或一約束後畫面尺寸大小的一基於投影的幀，當具有保護帶(或填補)的一投影布局被施行時，本發明對保護帶的數目以及每一保護帶的位置並無限制。
在此實施例中，轉換電路114具有一填補電路115被安排來產生至少一填補區域(即至少一保護帶)。轉換電路114藉由對360VR投影布局L_VR的投影面與至少一填補區域 (即至少一保護帶)進行打包來建立基於投影的幀IMG。例如，轉換電路114決定基於投影的幀IMG的一保護帶配置，上述幀IMG由從基於立方體投影(例如第2圖所示的一般立方體映射投影或是第3圖所示的半球形立方體映射投影)所推導的投影面來加以組成，而且解碼後的幀IMG’是一基於投影的幀，其從視訊解碼器122所產生，而且具有一保護帶配置是相同於藉由視訊編碼器116所接收與編碼的基於投影的幀IMG的保護帶配置。
第4-6圖為圖示，根據本發明的一實施例繪示被打包在一一般立方體映射投影或一半球形立方體映射投影的保護帶的一種規格。如第4圖上半部份所示，一第一保護帶被加入到具有位置索引2的一面位置所被打包的一第一投影面的一下面邊界，以及一第二保護帶被加入到具有位置索引3的一面位置所被打包的一第二投影面的一上面邊界，其中該第一保護帶與該第二保護帶具有相同的保護帶尺寸大小D(即相同的保護帶樣本數目)。如果第一投影面的下面邊界直接連接第二投影面的上面邊界，一邊緣(例如一不連續邊緣或一連續邊緣)存在於第一投影面與第二投影面之間。保護帶可以被加入於第一投影面與第二投影面之間的邊緣。例如，關於一3D空間中的一立方體，第一投影面(其為立方體的一個方形面)的下面邊界可能被連接到或沒有連接到第二投影面(其為立方體的另一個方形面)的上面邊界；以及關於一2D平面上的一基於立方體的投影布局，第一投影面的下面邊界平行於第二投影面的上面邊界，而且第一保護帶與第二保護帶二者皆位於第一投影面與 第二投影面之間，以將第一投影面的下面邊界與第二投影面的上面邊界加以隔離，其中第一保護帶連接於第一投影面的下面邊界以及第二保護帶，而且第二保護帶連接於第一保護帶以及第二投影面的上面邊界。因此，插入於第一投影面(其在具有位置索引2的面位置處被打包)與第二投影面(其在具有位置索引3的面位置處被打包)之間的一個保護帶區域(其由第一保護帶與第二保護帶所組成)的寬度等於2*D。
如第4圖下半部份所示，一第一保護帶被加入到具有位置索引2的一面位置處被打包的一投影面的一下面邊界，一第二保護帶被加入到具有位置索引3的一面位置處被打包的一投影面的一上面邊界，一第三保護帶被加入到具有位置索引0的一面位置處被打包的一投影面的一上面邊界，一第四保護帶被加入到具有位置索引5的一面位置處被打包的一投影面的一下面邊界，一第五保護帶被加入到具有位置索引0-5的面位置處被打包的投影面的左面邊界，以及一第六保護帶被加入到具有位置索引0-5的面位置所打包的投影面的右面邊界，其中該第一保護帶、第二保護帶、第三保護帶、第四保護帶、第五保護帶、以及第六保護帶具有相同的保護帶尺寸大小D(即相同的保護帶樣本數目)。詳言之，該第三保護帶、第四保護帶、第五保護帶、以及第六保護帶作為基於立方體的投影布局的邊界。此外，在二個投影面(其在具有位置索引2與3的面位置所被打包)之間所插入的一保護帶區域(其由二個保護帶所組成)的寬度等於2*D。
由於習知技藝人士在閱讀上述段落後可以容易地 了解第5圖與第6圖所示其他保護帶配置的細節，為求簡潔起見此處就不進一步贅述。具有保護帶的一立方體映射投影布局(例如第4-6圖所示的立方體映射投影布局之一)的一基於投影的幀可以具有排除保護帶樣本的一畫面寬度，該畫面寬度等於另一基於投影的幀的一畫面寬度，而所述另一基於投影的幀具有於寬度方向無保護帶的一立方體映射投影布局，與/或可以具有排除保護帶樣本的一畫面高度，該畫面高度等於另一基於投影的幀的一畫面高度，而所述另一基於投影的幀具有於高度方向無保護帶的一立方體映射投影布局。
第7-9圖為圖示，根據本發明的一實施例繪示被打包在一一般立方體映射投影或一半球形立方體映射投影的保護帶的另一種規格。第4-6圖所示保護帶配置與第7-9圖所示保護帶配置之間的主要差異為，一單一的保護帶被加入於一基於立方體的投影布局所打包的二相鄰投影面之間的一邊緣(例如一不連續邊緣或一連續邊緣)。如第7圖上半部份所示，一保護帶被插入於下列二者之間：在具有位置索引2的一面位置處被打包的一第一投影面的一下面邊界，以及在具有位置索引3的一面位置處被打包的一第二投影面的一上面邊界，其中該保護帶具有保護帶尺寸大小D。如果第一投影面的下面邊界直接連接第二投影面的上面邊界，一邊緣(例如一不連續邊緣或一連續邊緣)存在於第一投影面與第二投影面之間。一保護帶可以被加入於第一投影面與第二投影面之間的邊緣。例如，關於一3D空間中的一立方體，第一投影面(其為立方體的一個方形面)的下面邊界可能被連接到或沒有連接到第二投影面(其為 立方體的另一個方形面)的上面邊界；以及關於一2D平面上的一基於立方體的投影布局，第一投影面的下面邊界平行於第二投影面的上面邊界，而且保護帶是位於第一投影面與第二投影面之間，以將第一投影面的下面邊界與第二投影面的上面邊界加以隔離，其中該保護帶連接於第一投影面的下面邊界，而且也連接於第二投影面的上面邊界。因此，插入於第一投影面(其在具有位置索引2的面位置處被打包)與第二投影面(其在具有位置索引3的面位置處被打包)之間的一個保護帶區域(其由一單一保護帶所組成)的寬度等於D。
如第7圖下半部份所示，一第一保護帶被加入到具有位置索引2的一面位置所被打包的一投影面的一下面邊界以及具有位置索引3的一面位置所被打包的一投影面的一上面邊界之間，一第二保護帶被加入到具有位置索引0的一面位置所被打包的一投影面的一上面邊界，一第三保護帶被加入到具有位置索引5的一面位置所被打包的一投影面的一下面邊界，一第四保護帶被加入到具有位置索引0-5的面位置所被打包的投影面的左面邊界，以及一第五保護帶被加入到具有位置索引0-5的面位置所被打包的投影面的右面邊界，其中該第一保護帶、第二保護帶、第三保護帶、第四保護帶、以及第五保護帶具有相同的保護帶尺寸大小D(即相同的保護帶樣本數目)。詳言之，該第二保護帶、第三保護帶、第四保護帶、以及第五保護帶作為基於立方體的投影布局的邊界。此外，在二個投影面(其在具有位置索引2與3的面位置所被打包)之間所插入的一保護帶區域(其由一單一保護帶所組成)的寬度等於D。
由於習知技藝人士在閱讀上述段落後可以容易地了解第8圖與第9圖所示其他保護帶配置的細節，為求簡潔起見此處就不進一步贅述。具有保護帶的一立方體映射投影布局(例如第7-9圖所示的立方體映射投影布局之一)的一基於投影的幀可以具有排除保護帶樣本的一畫面寬度，該畫面寬度等於另一基於投影的幀的一畫面寬度，而所述另一基於投影的幀具有無保護帶的一修正後立方體映射投影布局，與/或可以具有排除保護帶樣本的一畫面高度，該畫面高度等於另一基於投影的幀的一畫面高度，而所述另一基於投影的幀具有無保護帶的一修正後立方體映射投影布局。
如上所述，色度次取樣是降低於一信號中的顏色信息的一種壓縮類型，來降低頻寬而不顯著地影響畫面品質。例如，轉換電路114可以進行RGB-到-YCrCb轉換與色度次取樣，而且視訊編碼器116可以將以一4：2：0色度格式或一4：2：2色度格式的基於投影的幀IMG編碼進位元流BS以進行傳輸。關於保護帶配置，轉換電路114可以施加約束在被打包於基於投影的幀IMG的每一保護帶的保護帶尺寸大小D，而且視訊解碼器122可以忽略/放棄不依循這些約束的位元流。假設該基於投影的幀IMG為一4：2：0色度格式或一4：2：2色度格式，被打包於基於投影的幀IMG的每一保護帶的保護帶尺寸大小D可以被約束為一偶數數目個亮度樣本。4：2：0色度格式(或4：2：2色度格式)的基於投影的幀IMG被編碼進位元流BS。由於解碼後的幀IMG’是從解碼位元流BS所推導出的一基於投影的幀，該解碼後的幀IMG’也是為4：2：0色度格式(或4：2：2色度格式)，而且被打包 於該解碼後的幀IMG’的每一保護帶的保護帶尺寸大小D也等於一偶數數目個亮度樣本。
視訊編碼器116可以將基於投影的幀IMG的保護帶配置相關的語法元素經由位元流BS加以發信，其中該保護帶配置包括保護帶尺寸大小D。因此，視訊解碼器122可以從位元流BS對保護帶配置相關的語法元素進行剖析。例如，語法元素gcmp_guard_band_samples_minus1被安排來提供被打包於具有一基於立方體的投影布局的基於投影的幀(IMG或IMG’)的每一保護帶的尺寸大小信息。例如，gcmp_guard_band_samples_minus1加1指明使用在立方體映射投影後畫面的保護帶樣本的數目(以亮度樣本為單位)。當參數ChromaFormatIdc等於1(4：2：0色度格式)或2(4：2：2色度格式)時，gcmp_guard_band_samples_minus1加1應當對應於一偶數數目個亮度樣本。也就是說，如果使用4：2：0色度格式或4：2：2色度格式時，gcmp_guard_band_samples_minus1加1應當對應於一偶數數目個亮度樣本。
應該要注意的是，所提議的保護帶尺寸大小約束可以應用於具有保護帶的任何投影布局，以確保當基於投影的幀是一4：2：0色度格式或一4：2：2色度格式時，打包於該基於投影的幀的每一保護帶的保護帶尺寸大小被約束為一偶數數目個亮度樣本。
在本發明的一些實施例中，當基於投影的幀IMG為色度次取樣(chroma subsampled)時，轉換電路114可以施加約束於投影面尺寸大小，而且視訊解碼器122可以忽略/放棄 不依循這些約束的位元流。例如，當一基於投影的幀(IMG或IMG’)是一4：2：0色度格式或一4：2：2色度格式時，被打包於該基於投影的幀(IMG或IMG’)的每一投影面的一面寬度等於一偶數數目個亮度樣本。在另一例子中，當一基於投影的幀(IMG或IMG’)是一4：2：0色度格式時，被打包於該基於投影的幀(IMG或IMG’)的每一投影面的一面高度等於一偶數數目個亮度樣本。應該要注意的是，所提議的投影面尺寸大小約束可以應用於具有/不具有保護帶的任何投影布局。
考慮一第一案例，其中約束是施加在被打包於一基於投影的幀(IMG或IMG’)並具有一基於立方體的投影布局(例如一般CMP布局或半球形CMP布局)的面。當參數ChromaFormatIdc等於1(4：2：0色度格式)或2(4：2：2色度格式)時，被打包於基於投影的幀(IMG或IMG’)的每一面的寬度應當對應於一偶數數目個亮度樣本。當參數ChromaFormatIdc等於1(4：2：0色度格式)時，被打包於基於投影的幀(IMG或IMG’)的每一面的高度應當對應於一偶數數目個亮度樣本。
考慮一第二案例，其中約束是施加在被打包於一基於投影的幀(IMG或IMG’)並具有一基於立方體的投影布局(例如一般CMP布局或半球形CMP布局)的面，而且faceWidth與faceHeight代表包括在被打包於基於立方體的投影布局的投影面的一方形投影面的寬度與高度。當參數ChromaFormatIdc等於1(4：2：0色度格式)或2(4：2：2色度格式)時，faceWidth應當為4(以亮度樣本為單位)的一整數倍。當參數ChromaFormatIdc等於1(4：2：0色度格式)時，faceHeight應當 為4(以亮度樣本為單位)的一整數複數倍。
考慮一第三案例，其中約束是施加在被打包於一基於投影的幀(IMG或IMG’)並具有一基於立方體的投影布局(例如一般CMP布局或半球形CMP布局)的面，而且faceWidth與faceHeight代表包括在被打包於基於立方體的投影布局的投影面的一方形投影面的寬度與高度。如果水平地打包半球形立方體映射布局被施行時，應用下列約束：當參數ChromaFormatIdc等於1(4：2：0色度格式)或2(4：2：2色度格式)時，faceWidth應當為4(以亮度樣本為單位)的一整數複數倍；而且當參數ChromaFormatIdc等於1(4：2：0色度格式)時，faceHeight應當為2(以亮度樣本為單位)的一整數複數倍。
如果垂直地打包半球形立方體映射布局被施行時，應用下列約束：當參數ChromaFormatIdc等於1(4：2：0色度格式)或2(4：2：2色度格式)時，faceWidth應當為2(以亮度樣本為單位)的一整數複數倍；而且當參數ChromaFormatIdc等於1(4：2：0色度格式)時，faceHeight應當為4(以亮度樣本為單位)的一整數複數倍。
如果一般立方體映射布局被施行時，應用下列約束：當參數ChromaFormatIdc等於1(4：2：0色度格式)或2(4：2：2色度格式)時，faceWidth應當為2(以亮度樣本為單位)的一整數複數倍；而且 當參數ChromaFormatIdc等於1(4：2：0色度格式)時，faceHeight應當為2(以亮度樣本為單位)的一整數複數倍。
考慮一第四案例，其中約束是施加在被打包於一基於投影的幀(IMG或IMG’)並具有包括一個全面與四個半面的一半球形立方體映射的投影布局(例如水平地打包半球形立方體映射投影布局或是垂直地打包半球形立方體映射投影布局)的面。當參數ChromaFormatIdc等於1(4：2：0色度格式)或2(4：2：2色度格式)時，被打包於半球形立方體映射投影布局的每一面的寬度應當為2(以亮度樣本為單位)的一整數複數倍。當參數ChromaFormatIdc等於1(4：2：0色度格式)時，被打包於半球形立方體映射投影布局的每一面的高度應當為2(以亮度樣本為單位)的一整數複數倍。
在本發明的一些實施例中，當基於投影的幀IMG包括有被打包在一投影布局的一複數個投影面，該投影布局具有M個投影面欄與N個投影面行(M與N為正整數)時，轉換電路114可以施加約束於投影尺寸大小，而且視訊解碼器122可以忽略/放棄不依循這些約束的位元流。例如，當一基於投影的幀(IMG或IMG’)包括MxN個投影面，排除保護帶樣本的一畫面寬度cmpPicWidth等於M的一整數倍，而且排除保護帶樣本的一畫面高度cmpPicHeight等於N的一整數倍。應該要注意的是，所提議的投影尺寸大小約束可以應用於具有/不具有保護帶的任何投影布局。
考慮一第一案例，其中約束是施加在被打包於一基於投影的幀(IMG或IMG’)並具有一一般立方體映射投影布 局的面，其中cmpPicWidth是排除保護帶樣本的畫面寬度，而且cmpPicHeight是排除保護帶樣本的畫面高度。如果一般立方體映射投影布局如第10圖所示被一1x6布局所設定，cmpPicHeight應當為6的一整數複數倍(N=6)，而且cmpPicWidth應當等於cmpPicHeight/6。如果一般立方體映射投影布局如第11圖所示被一2x3布局所設定，cmpPicWidth應當為2的一整數複數倍(M=2)而且cmpPicHeight應當為3的一整數複數倍(N=3)，而且cmpPicWidth/2應當等於cmpPicHeight/3。如果一般立方體映射投影布局如第12圖所示被一3x2布局所設定，cmpPicWidth應當為3的一整數複數倍(M=3)而且cmpPicHeight應當為2的一整數複數倍(N=2)，而且cmpPicWidth/3應當等於cmpPicHeight/2。如果一般投影布局如第13圖所示被一6×1布局所設定，cmpPicWidth應當為6的一整數複數倍(M=6)，而且cmpPicWidth/6應當等於cmpPicHeight。
考慮一第二案例，其中基於投影的幀IMG包括被打包於一半球形立方體映射投影布局的一個全面與四個半面。轉換電路114可以施加約束於投影尺寸大小，而且視訊解碼器122可以忽略/放棄不依循這些約束的位元流。例如，一基於投影的幀(IMG或IMG’)利用一半球形立方體映射投影布局，而且排除保護帶樣本的一畫面寬度以及排除保護帶樣本的一畫面高度其中之一等於6的一整數倍。當該半球形立方體映射投影布局是一水平地打包半球形立方體映射投影布局時，cmpPicWidth是排除保護帶樣本的畫面寬度，而且cmpPicHeight是排除保護帶樣本的畫面高度，cmpPicWidth應 當為6的一整數複數倍，而且cmpPicWidth/3應當等於cmpPicHeight。當該半球形立方體映射投影布局是一垂直地打包半球形立方體映射投影布局時，cmpPicWidth是排除保護帶樣本的畫面寬度，而且cmpPicHeight是排除保護帶樣本的畫面高度，cmpPicHeight應當為6的一整數複數倍，而且cmpPicWidth應當等於cmpPicHeight/3。
那些習知技藝人士將毫無困難地觀察到對於裝置與方法可以進行各種修正與改變，然而仍保留本發明的教導。因此，對於以上揭示的解讀應該僅限於所附加專利範圍的界線為之。
100:360VR系統
102:來源電子裝置
103:傳輸介質
104:目的地電子裝置
112:視訊獲取裝置
114:轉換電路
115:填補電路
116:視訊編碼器
122:視訊解碼器
124:圖形生成電路
126:顯示螢幕

Claims (20)

  1. 一種視訊解碼方法，包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一投影布局的一複數個投影面，以及一球形的一360度內容的至少一部份經由投影被映射到該等投影面；其中該解碼後的幀是一4：2：0色度格式或一4：2：2色度格式，以及每一該等投影面的一面寬度等於一偶數數目個亮度樣本。
  2. 如請求項1所述的視訊解碼方法，其中該投影是基於立方體的投影，而且該投影布局是一基於立方體的投影布局。
  3. 如請求項2所述的視訊解碼方法，其中該基於立方體的投影是半球形立方體映射投影，而且該基於立方體的投影布局是一半球形立方體映射投影布局。
  4. 如請求項2所述的視訊解碼方法，其中包括在該等投影面的每一方形投影面的一面寬度等於4個亮度樣本的一整數複數倍。
  5. 如請求項4所述的視訊解碼方法，其中該基於立方體的投影是半球形立方體映射投影，而且該基於立方體的投影布局是一水平打包半球形立方體映射投影布局。
  6. 如請求項2所述的視訊解碼方法，其中該基於立方體的投影是半球形立方體映射投影，而且該基於立方體的投影布局是一垂直打包半球形立方體映射投影布局。
  7. 如請求項2所述的視訊解碼方法，其中該基於立方體的投影是立方體映射投影，而且該基於立方體的投影布局是一立方體映射投影布局。
  8. 一種視訊解碼方法，包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一投影布局的一複數個投影面，以及一球形的一360度內容的至少一部份經由投影被映射到該等投影面；其中該解碼後的幀是一4：2：0色度格式，以及每一該等投影面的一面高度等於一偶數數目個亮度樣本。
  9. 如請求項8所述的視訊解碼方法，其中該投影是基於立方體的投影，而且該投影布局是一基於立方體的投影布局。
  10. 如請求項9所述的視訊解碼方法，其中該基於立方體的投影是半球形立方體映射投影，而且該基於立方體的投影布局是一半球形立方體映射投影布局。
  11. 如請求項10所述的視訊解碼方法，其中該半球形立方體映射投影布局是一水平地被打包的半球形立方體映射投影布局，而且包括在該等投影面的一方形投影面的一面高度等於一偶數數目個亮度樣本。
  12. 如請求項9所述的視訊解碼方法，其中包括在該等投影面的每一方形投影面的一面高度等於4個亮度樣本的一整數複數倍。
  13. 如請求項12所述的視訊解碼方法，其中該基於 立方體的投影是半球形立方體映射投影，而且該基於立方體的投影布局是一垂直地被打包半球形立方體映射投影布局。
  14. 如請求項9所述的視訊解碼方法，其中該基於立方體的投影是立方體映射投影，而且該基於立方體的投影布局是一立方體映射投影布局。
  15. 一種視訊解碼方法，包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一投影布局的一複數個投影面，該投影布局具有M個投影面欄與N個投影面行，而M與N為正整數，以及一球形的一360度內容的至少一部份經由投影被映射到該等投影面；以及其中關於該解碼後的幀，排除保護帶樣本的一畫面寬度等於M的一整數倍，而且排除保護帶樣本的一畫面高度等於N的一整數倍。
  16. 如請求項15所述的視訊解碼方法，其中該投影是基於立方體的投影，而且該投影布局是一基於立方體的投影布局。
  17. 如請求項16所述的視訊解碼方法，其中M=1、N=6，而且排除保護帶樣本的該畫面寬度等於排除保護帶樣本的該畫面高度的六分之一；或是其中M=2、N=3，而且排除保護帶樣本的該畫面寬度的二分之一等於排除保護帶樣本的該畫面高度的三分之一；或是其中M=3、N=2，而且排除保護帶樣本的該畫面寬度的 三分之一等於排除保護帶樣本的該畫面高度的二分之一；或是其中M=6、N=1，而且排除保護帶樣本的該畫面高度等於排除保護帶樣本的該畫面寬度的六分之一。
  18. 一種視訊解碼方法，包括：解碼一位元流的一部份以產生一解碼後的幀，其中該解碼後的幀是一基於投影的幀，包括有被打包在一半球形立方體映射投影布局的一複數個投影面，以及一球形的一360度內容的一部份經由半球形立方體映射投影被映射到該等投影面；其中關於該解碼後的幀，排除保護帶樣本的一畫面寬度以及排除保護帶樣本的一畫面高度中之一等於6的一整數倍。
  19. 如請求項18所述的視訊解碼方法，其中該半球形立方體映射投影布局是一水平地被打包的半球形立方體映射投影布局，排除保護帶樣本的該畫面寬度等於6的一整數倍，而且排除保護帶樣本的該畫面寬度的三分之一等於排除保護帶樣本的該畫面高度。
  20. 如請求項18所述的視訊解碼方法，其中該半球形立方體映射投影布局是一垂直地被打包的半球形立方體映射投影布局，排除保護帶樣本的該畫面高度等於6的一整數倍，而且排除保護帶樣本的該畫面高度的三分之一等於排除保護帶樣本的該畫面寬度。
TW109136686A 2019-10-28 2020-10-22 一種視訊解碼方法 TWI782342B (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201962926600P 2019-10-28 2019-10-28
US62/926,600 2019-10-28
US202063042610P 2020-06-23 2020-06-23
US63/042,610 2020-06-23
US17/075,724 US11095912B2 (en) 2019-10-28 2020-10-21 Video decoding method for decoding part of bitstream to generate projection-based frame with constrained guard band size, constrained projection face size, and/or constrained picture size
US17/075,724 2020-10-21

Publications (2)

Publication Number Publication Date
TW202123685A TW202123685A (zh) 2021-06-16
TWI782342B true TWI782342B (zh) 2022-11-01

Family

ID=75587227

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109136686A TWI782342B (zh) 2019-10-28 2020-10-22 一種視訊解碼方法

Country Status (5)

Country Link
US (3) US11095912B2 (zh)
EP (1) EP4028982A4 (zh)
CN (1) CN114651271A (zh)
TW (1) TWI782342B (zh)
WO (1) WO2021083187A1 (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106162139A (zh) * 2016-08-04 2016-11-23 微鲸科技有限公司 编码方法、视频输出装置、解码方法、以及视频播放装置
WO2019062714A1 (en) * 2017-09-27 2019-04-04 Mediatek Inc. PROJECTION-BASED FRAME PROCESSING METHOD COMPRISING AT LEAST ONE CONDITIONED PROJECTION FACE IN A 360 DEGREE VIRTUAL REALITY PROJECTION LAYOUT

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102313485B1 (ko) 2015-04-22 2021-10-15 삼성전자주식회사 가상현실 스트리밍 서비스를 위한 영상 데이터를 송수신하는 방법 및 장치
US20180054613A1 (en) 2016-08-22 2018-02-22 Mediatek Inc. Video encoding method and apparatus with in-loop filtering process not applied to reconstructed blocks located at image content discontinuity edge and associated video decoding method and apparatus
CN117201817A (zh) * 2016-09-02 2023-12-08 Vid拓展公司 用于用信号通知360度视频信息的方法和系统
WO2018233662A1 (en) 2017-06-23 2018-12-27 Mediatek Inc. METHOD AND APPARATUS FOR MOTION VECTOR DERIVATIONS IN IMMERSIVE VIDEO CODING
WO2019002662A1 (en) * 2017-06-26 2019-01-03 Nokia Technologies Oy APPARATUS, METHOD AND COMPUTER PROGRAM FOR OMNIDIRECTIONAL VIDEO
WO2019065587A1 (en) 2017-09-29 2019-04-04 Sharp Kabushiki Kaisha SYSTEMS AND METHODS FOR SIGNALING INFORMATION ASSOCIATED WITH A CONSTITUTIVE IMAGE
US10939086B2 (en) 2018-01-17 2021-03-02 Mediatek Singapore Pte. Ltd. Methods and apparatus for encoding and decoding virtual reality content
TWI822863B (zh) * 2018-09-27 2023-11-21 美商Ｖｉｄ衡器股份有限公司 360度視訊寫碼樣本導出
US11756153B2 (en) 2018-12-31 2023-09-12 Intel Corporation Hemisphere cube map projection format in imaging environments

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106162139A (zh) * 2016-08-04 2016-11-23 微鲸科技有限公司 编码方法、视频输出装置、解码方法、以及视频播放装置
WO2019062714A1 (en) * 2017-09-27 2019-04-04 Mediatek Inc. PROJECTION-BASED FRAME PROCESSING METHOD COMPRISING AT LEAST ONE CONDITIONED PROJECTION FACE IN A 360 DEGREE VIRTUAL REALITY PROJECTION LAYOUT

Also Published As

Publication number Publication date
TW202123685A (zh) 2021-06-16
WO2021083187A1 (en) 2021-05-06
CN114651271A (zh) 2022-06-21
US20210127126A1 (en) 2021-04-29
EP4028982A4 (en) 2023-05-03
US11405630B2 (en) 2022-08-02
US20210337229A1 (en) 2021-10-28
US11095912B2 (en) 2021-08-17
US11405629B2 (en) 2022-08-02
EP4028982A1 (en) 2022-07-20
US20210337230A1 (en) 2021-10-28

Similar Documents

Publication Publication Date Title
US11758187B2 (en) Methods, devices and stream for encoding and decoding volumetric video
KR102594003B1 (ko) 볼류메트릭 비디오를 인코딩/디코딩하기 위한 방법, 장치 및 스트림
EP3249930B1 (en) Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices
CN110383842B (zh) 一种视频处理方法和装置
KR20200065076A (ko) 볼류메트릭 비디오 포맷을 위한 방법, 장치 및 스트림
US11647177B2 (en) Method, apparatus and stream for volumetric video format
TWI666912B (zh) 具有由封包於分段球體投影設計並以投影面表示之360度內容之投影訊框生成及編碼之方法及裝置
EP3562159A1 (en) Method, apparatus and stream for volumetric video format
KR20190046850A (ko) 몰입형 비디오 포맷을 위한 방법, 장치 및 스트림
US11659206B2 (en) Video encoding method with syntax element signaling of guard band configuration of projection-based frame and associated video decoding method and apparatus
KR20220109433A (ko) 다중 뷰포인트 3DoF+ 콘텐츠의 인코딩 및 디코딩을 위한 방법 및 장치
TWI681662B (zh) 用於減少基於投影的圖框中的偽影的方法和裝置
US10573076B2 (en) Method and apparatus for generating and encoding projection-based frame with 360-degree content represented by rectangular projection faces packed in viewport-based cube projection layout
TWI782342B (zh) 一種視訊解碼方法
KR20220066328A (ko) 볼류메트릭 비디오를 인코딩, 송신 및 디코딩하기 위한 방법 및 장치
KR20220127258A (ko) 뷰-유도 스펙큘러리티를 갖는 볼류메트릭 비디오를 코딩 및 디코딩하기 위한 방법 및 장치
WO2021136372A1 (en) Video decoding method for decoding bitstream to generate projection-based frame with guard band type specified by syntax element signaling
US11190768B2 (en) Video encoding method with syntax element signaling of packing of projection faces derived from cube-based projection and associated video decoding method and apparatus
CN109845270B (zh) 一种视频处理方法和装置