TWI803274B - 點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備 - Google Patents

點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備 Download PDF

Info

Publication number
TWI803274B
TWI803274B TW111113336A TW111113336A TWI803274B TW I803274 B TWI803274 B TW I803274B TW 111113336 A TW111113336 A TW 111113336A TW 111113336 A TW111113336 A TW 111113336A TW I803274 B TWI803274 B TW I803274B
Authority
TW
Taiwan
Prior art keywords
point cloud
frame rate
track
file
media
Prior art date
Application number
TW111113336A
Other languages
English (en)
Other versions
TW202243481A (zh
Inventor
胡穎
Original Assignee
大陸商騰訊科技（深圳）有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商騰訊科技（深圳）有限公司 filed Critical 大陸商騰訊科技（深圳）有限公司
Publication of TW202243481A publication Critical patent/TW202243481A/zh
Application granted granted Critical
Publication of TWI803274B publication Critical patent/TWI803274B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G06T9/001—Model-based coding, e.g. wire frame
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605—Creation or processing of packetized elementary streams [PES]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申請屬於電腦及通信技術領域，具體涉及一種點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備。本申請實施例中的點雲解碼方法包括：接收由資料來源傳輸的點雲檔案，點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，點雲檔案中包括部分幀率不同的點雲媒體軌道；解析一個或者多個點雲媒體軌道的檔案封裝資訊，得到檔案封裝資訊中攜帶的幀率指示資訊，幀率指示資訊用於指示一個或者多個點雲媒體軌道的幀率；以及根據檔案封裝資訊中攜帶的幀率指示資訊，從點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道。

Description

點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備
本申請涉及電腦及通信技術領域，特別涉及一種點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備。
點雲是空間中一組無規則分佈的、表達三維物體或場景的空間結構及表面屬性的離散點集。在通過點雲採集設備獲取到大規模的點雲資料後，可以對點雲資料進行編碼封裝以向使用者傳輸和呈現。
本申請實施例提供了一種點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備。
根據本申請實施例的一個方面，提供一種點雲解碼方法，該方法包括：接收由資料來源傳輸的點雲檔案，所述點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述點雲檔案中包括部分幀率不同的點雲媒體軌道；解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，得到所述檔案封裝資訊中攜帶的幀率指示資訊，所述幀率指示資訊用於指示所述一個或者多個點雲媒體軌道的幀率；以及根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道。
根據本申請實施例的一個方面，提供一種點雲解碼裝置，該裝置包括：接收模組，被配置為接收由資料來源傳輸的點雲檔案，所述點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述點雲檔案中包括部分幀率不同的點雲媒體軌道；解析模組，被配置為解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，得到所述檔案封裝資訊中攜帶的幀率指示資訊，所述幀率指示資訊用於指示所述一個或者多個點雲媒體軌道的幀率；以及解碼模組，被配置為根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道。
在本申請的一些實施例中，基於以上技術方案，所述接收模組包括：信令接收單元，被配置為接收由資料來源發送的用於傳輸點雲資料的流媒體信令；信令解析單元，被配置為解析所述流媒體信令，得到所述流媒體信令中攜帶的用於標識軌道組的時域層級組標識，所述軌道組包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述軌道組中包括部分幀率不同的點雲媒體軌道；請求發送單元，被配置為根據所述時域層級組標識，向所述資料來源發送第一資料傳輸請求；以及檔案接收單元，被配置為接收由所述資料來源傳輸的與所述第一資料傳輸請求相對應的點雲檔案。
在本申請的一些實施例中，基於以上技術方案，所述請求發送單元包括：頻寬獲取子單元，被配置為獲取與所述資料來源進行資料傳輸的網路頻寬；軌道選取子單元，被配置為根據所述時域層級組標識，從所述軌道組中選取與所述網路頻寬相匹配的具有目標幀率的一個或者多個目標點雲媒體軌道；以及請求發送子單元，被配置為向所述資料來源發送用於請求傳輸所述一個或者多個目標點雲媒體軌道的第一資料傳輸請求。
在本申請的一些實施例中，基於以上技術方案，所述解析模組包括：資訊解析單元，被配置為解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，以確定與所述一個或者多個點雲媒體軌道的幀率相對應的幀率指示欄位；以及資訊確定單元，被配置為根據所述幀率指示欄位的取值，確定所述一個或者多個點雲媒體軌道的幀率指示資訊。
在本申請的一些實施例中，基於以上技術方案，所述點雲解碼裝置還包括：幀率獲取模組，被配置為獲取待展示的點雲媒體軌道的幀率；軌道選取模組，被配置為根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取與所述待展示的點雲媒體軌道具有相同幀率的其他點雲媒體軌道；以及第一替換模組，被配置為將所述待展示的點雲媒體軌道替換為所述其他點雲媒體軌道，以解碼並展示所述其他點雲媒體軌道。
在本申請的一些實施例中，基於以上技術方案，所述點雲解碼裝置還包括：幀率獲取模組，被配置為獲取待展示的點雲媒體軌道的幀率；軌道選取模組，被配置為根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取與所述待展示的點雲媒體軌道具有相同幀率的一個或者多個其他點雲媒體軌道；以及第一合併模組，被配置為解碼所述一個或者多個其他點雲媒體軌道，並將所述一個或者多個其他點雲媒體軌道與所述待展示的點雲媒體軌道進行合併展示。
在本申請的一些實施例中，基於以上技術方案，所述點雲解碼裝置還包括：幀率獲取模組，被配置為獲取待展示的點雲媒體軌道的幀率；檔案獲取模組，被配置為向所述資料來源發送第二資料傳輸請求，以接收由所述資料來源傳輸的補充點雲檔案，所述補充點雲檔案包括與所述待展示的點雲媒體軌道具有相同點雲內容和相同幀率的其他點雲媒體軌道；以及第二替換模組，被配置為將所述待展示的點雲媒體軌道替換為所述其他點雲媒體軌道，以解碼並展示所述其他點雲媒體軌道。
在本申請的一些實施例中，基於以上技術方案，所述點雲解碼裝置還包括：幀率獲取模組，被配置為獲取待展示的點雲媒體軌道的幀率；檔案獲取模組，被配置為向所述資料來源發送第三資料傳輸請求，以接收由所述資料來源傳輸的補充點雲檔案，所述補充點雲檔案包括與所述待展示的點雲媒體軌道具有相同點雲內容和相同幀率的一個或者多個其他點雲媒體軌道；以及第二合併模組，被配置為解碼所述一個或者多個其他點雲媒體軌道，並將所述一個或者多個其他點雲媒體軌道與所述待展示的點雲媒體軌道進行合併展示。
根據本申請實施例的一個方面，提供一種點雲編碼方法，該方法包括：按照不同的編碼標準對待傳輸的點雲資料進行編碼處理，得到具有相同點雲內容的多個點雲碼流，所述多個點雲碼流中包括部分幀率不同的點雲碼流；以及將所述多個點雲碼流封裝為多個點雲媒體軌道，並向所述多個點雲媒體軌道中填充與所述多個點雲碼流相對應的幀率指示資訊，所述幀率指示資訊用於指示所述多個點雲媒體軌道的幀率。
根據本申請實施例的一個方面，提供一種點雲編碼裝置，該裝置包括：編碼模組，被配置為按照不同的編碼標準對待傳輸的點雲資料進行編碼處理，得到具有相同點雲內容的多個點雲碼流，所述多個點雲碼流中包括部分幀率不同的點雲碼流；以及封裝模組，被配置為將所述多個點雲碼流封裝為多個點雲媒體軌道，並向所述多個點雲媒體軌道中填充與所述多個點雲碼流相對應的幀率指示資訊，所述幀率指示資訊用於指示所述多個點雲媒體軌道的幀率。
在本申請的一些實施例中，基於以上技術方案，所述點雲編碼裝置還包括：信令生成模組，被配置為生成用於傳輸點雲資料的流媒體信令；信令填充模組，被配置為向所述流媒體信令中填充用於標識軌道組的時域層級組標識，所述軌道組包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述軌道組中包括部分幀率不同的點雲媒體軌道；以及信令發送模組，被配置為向資料接收方發送所述流媒體信令。
在本申請的一些實施例中，基於以上技術方案，所述點雲編碼裝置還包括：請求接收模組，被配置為接收由所述資料接收方發送的基於所述流媒體信令生成的資料傳輸請求；以及檔案傳輸模組，被配置為根據所述資料傳輸請求，向所述資料接收方傳輸點雲檔案，所述點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述點雲檔案中包括部分幀率不同的點雲媒體軌道。
在本申請的一些實施例中，基於以上技術方案，所述封裝模組包括：資訊確定單元，被配置為在所述多個點雲媒體軌道的檔案封裝資訊中確定與所述幀率指示資訊相對應的幀率指示欄位；以及資訊填充單元，被配置為將與所述多個點雲碼流相對應的幀率指示資訊填充至所述檔案封裝資訊中的幀率指示欄位。
根據本申請實施例的一個方面，提供一種電腦可讀介質，其上存儲有電腦程式，該電腦程式被處理器執行時實現如以上技術方案中的方法。
根據本申請實施例的一個方面，提供一種電子設備，該電子設備包括：處理器；以及記憶體，用於存儲所述處理器的可執行指令；其中，所述處理器被配置為經由執行所述可執行指令來執行如以上技術方案中的方法。
根據本申請實施例的一個方面，提供一種電腦程式產品或電腦程式，該電腦程式產品或電腦程式包括電腦指令，該電腦指令存儲在電腦可讀存儲介質中。電腦設備的處理器從電腦可讀存儲介質讀取該電腦指令，處理器執行該電腦指令，使得該電腦設備執行如以上技術方案中的方法。
在本申請實施例提供的技術方案中，通過對具有相同幀率以及具有不同幀率的點雲媒體資源進行關聯，構造了點雲媒體在時間上的漸進關係。基於這種時間上的漸進關係，使用者在消費點雲媒體時，可以根據自身需求請求對應的點雲媒體檔案，從而節省傳輸網路頻寬，提高點雲資料編解碼的靈活性。
現在將參考附圖更全面地描述示例實施方式。然而，示例實施方式能夠以多種形式實施，且不應被理解為限於在此闡述的範例；相反，提供這些實施方式使得本申請將更加全面和完整，並將示例實施方式的構思全面地傳達給本領域的通常知識者。
此外，所描述的特徵、結構或特性可以以任何合適的方式結合在一個或更多實施例中。在下面的描述中，提供許多具體細節從而給出對本申請的實施例的充分理解。然而，本領域通常知識者將意識到，可以實踐本申請的技術方案而沒有特定細節中的一個或更多，或者可以採用其它的方法、組元、裝置、步驟等。在其它情況下，不詳細示出或描述習知方法、裝置、實現或者操作以避免模糊本申請的各方面。
附圖中所示的方塊圖僅僅是功能實體，不一定必須與物理上獨立的實體相對應。即，可以採用軟體形式來實現這些功能實體，或在一個或多個硬體模組或積體電路中實現這些功能實體，或在不同網路和/或處理器裝置和/或微控制器裝置中實現這些功能實體。
附圖中所示的流程圖僅是示例性說明，不是必須包括所有的內容和操作/步驟，也不是必須按所描述的循序執行。例如，有的操作/步驟還可以分解，而有的操作/步驟可以合併或部分合併，因此實際執行的順序有可能根據實際情況改變。
點雲是空間中一組無規則分佈的、表達三維物體或場景的空間結構及表面屬性的離散點集。點雲中的每個點至少具有三維位置資訊，根據應用場景的不同，還可能具有色彩、材質或其他資訊。通常，點雲中的每個點都具有相同數量的附加屬性。點雲媒體從編碼方式上又可以分為基於傳統視頻編碼方式進行壓縮的點雲媒體（Video-based Point Cloud Compression ，VPCC）以及基於幾何特徵進行壓縮的點雲媒體（Geometry-based Point Cloud Compression，GPCC）。在點雲媒體的檔案封裝中，三維位置資訊通常稱為點雲檔案的幾何分量（Geometry Component），屬性資訊稱為點雲檔案的屬性分量（Attribute Component）。一個點雲檔案可能僅有一個幾何分量，但可以存在一個或多個屬性分量。
點雲可以靈活方便地表達三維物體或場景的空間結構及表面屬性，因而應用廣泛，其主要應用場景可以歸為兩大類別。1）機器感知點雲，例如自主導航系統、即時巡檢系統、地理資訊系統、視覺分揀機器人、搶險救災機器人。2）人眼感知點雲，例如數位文化遺產、自由視點廣播、三維沉浸通信、三維沉浸交互等點雲應用場景。
點雲的獲取主要有以下途徑：電腦生成、3D雷射掃描、3D攝影測量等。電腦可以生成虛擬三維物體及場景的點雲。3D掃描可以獲得靜態現實世界三維物體或場景的點雲，每秒可以獲取百萬級點雲。3D攝像可以獲得動態現實世界三維物體或場景的點雲，每秒可以獲取千萬級點雲。此外，在醫學領域，由MRI、CT、電磁定位資訊，可以獲得生物組織器官的點雲。這些技術降低了點雲資料獲取成本和時間週期，提高了資料的精度。點雲資料獲取方式的變革，使大量點雲資料的獲取成為可能。伴隨著大規模的點雲資料不斷積累，點雲資料的高效存儲、傳輸、發佈、共用和標準化，成為點雲應用的關鍵。
在對點雲媒體進行編碼後，需要對編碼後的資料流程進行封裝並傳輸給使用者。相對應的，在點雲媒體播放器端，需要先對點雲檔案進行解封裝，然後再進行解碼，最後將解碼後的資料流程呈現。
第1圖示出了可以應用本申請實施例的技術方案的示例性系統架構的示意圖。
如第1圖所示，系統架構100包括多個終端裝置，所述終端裝置可通過例如網路150彼此通信。舉例來說，系統架構100可以包括通過網路150互連的第一終端裝置110和第二終端裝置120。在第1圖的實施例中，第一終端裝置110和第二終端裝置120執行單向資料傳輸。
舉例來說，第一終端裝置110可以對點雲資料（例如由第一終端裝置110採集的點雲碼流）進行編碼以通過網路150傳輸到第二終端裝置120，已編碼的點雲資料以一個或多個已編碼點雲碼流的形式傳輸，第二終端裝置120可從網路150接收已編碼點雲資料，對已編碼點雲資料進行解碼並顯示已解碼的點雲資料。
在本申請的一個實施例中，系統架構100可以包括執行已編碼點雲資料的雙向傳輸的第三終端裝置130和第四終端裝置140，所述雙向傳輸比如可以發生在視訊會議期間。對於雙向資料傳輸，第三終端裝置130和第四終端裝置140中的每個終端裝置可對點雲資料（例如由終端裝置採集的點雲碼流）進行編碼，以通過網路150傳輸到第三終端裝置130和第四終端裝置140中的另一終端裝置。第三終端裝置130和第四終端裝置140中的每個終端裝置還可接收由第三終端裝置130和第四終端裝置140中的另一終端裝置傳輸的已編碼點雲資料，且可對已編碼點雲資料進行解碼以復原點雲資料，並可根據恢復的點雲資料在可訪問的顯示裝置上顯示點雲資料。
在第1圖的實施例中，第一終端裝置110、第二終端裝置120、第三終端裝置130和第四終端裝置140可為伺服器、個人電腦和智慧型電話，但本申請公開的原理可不限於此。本申請公開的實施例適用於膝上型電腦、平板電腦、媒體播放器和/或專用視訊會議設備。網路150表示在第一終端裝置110、第二終端裝置120、第三終端裝置130和第四終端裝置140之間傳送已編碼點雲資料的任何數目的網路，包括例如有線和/或無線通訊網路。網路150可在電路交換和/或封包交換通道中交換資料。該網路可包括電信網路、局域網、廣域網路和/或互聯網。出於本申請的目的，除非在下文中有所解釋，否則網路150的架構和拓撲對於本申請公開的操作來說可能是無關緊要的。
在本申請的一個實施例中，第2圖示出點雲編碼裝置和點雲解碼裝置在資料流環境中的放置方式。本申請所公開主題可同等地適用於其它支援點雲的應用，包括例如視訊會議、數位電視、在包括CD、DVD、存儲棒等的數位介質上存儲已壓縮的點雲資料等等。
資料流系統可包括採集子系統213，採集子系統213可包括數碼相機等點雲資料來源201，點雲資料來源201例如可以創建未壓縮的點雲資料202。在實施例中，未壓縮的點雲資料202包括由數碼相機拍攝的樣本。相較於已編碼的點雲資料204（或已編碼的點雲碼流），未壓縮的點雲資料202被描繪為粗線以強調高資料量的點雲資料，未壓縮的點雲資料202可由電子裝置220處理，電子裝置220包括耦接到點雲資料來源201（即視頻源）的視頻編碼裝置203。視頻編碼裝置203可包括硬體、軟體或軟硬體組合以實現或實施如下文更詳細地描述的所公開主題的各方面。相較於未壓縮的點雲資料202，已編碼的點雲資料204（或已編碼的點雲碼流）被描繪為細線以強調較低資料量的已編碼的點雲資料，其可存儲在資料流伺服器205上以供將來使用。一個或多個資料流用戶端子系統，例如第2圖中的用戶端子系統206和用戶端子系統208，可訪問資料流伺服器205以檢索已編碼的作為已編碼的點雲資料204的副本的點雲資料207和點雲資料209。用戶端子系統206可包括例如電子裝置230中的點雲解碼裝置210。點雲解碼裝置210對已編碼的點雲資料204的傳入點雲資料207進行解碼，且產生可在顯示器212（例如顯示幕）或另一呈現裝置上呈現的輸出點雲資料211。在一些資料流系統中，可根據某些點雲編碼/壓縮標準對已編碼的點雲資料204、點雲資料207和點雲資料209（例如點雲碼流）進行編碼。這些標準的實施例可以包括由MPEG為GPCC開發的標準。
應注意，電子裝置220和電子裝置230可包括圖中未示出的其它元件。舉例來說，電子裝置220可包括點雲解碼裝置，且電子裝置230還可包括點雲編碼裝置。
下面結合具體實施方式對本申請提供的點雲編解碼方法、點雲編解碼裝置、電腦可讀介質以及電子設備等技術方案做出詳細說明。
第3圖示出了本申請一個實施例中的點雲解碼方法的步驟流程圖，該方法可以應用於點雲媒體系統的伺服器、用戶端以及中間節點等環節，本申請實施例以安裝有點雲解碼裝置的用戶端設備執行的點雲解碼方法作為示例。如第3圖所示，該點雲解碼方法主要可以包括如下的步驟S310至步驟S330。
步驟S310：接收由資料來源傳輸的點雲檔案，點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，點雲檔案中包括部分幀率不同的點雲媒體軌道。
在本申請的一個實施例中，點雲檔案可以單獨封裝一個對應於指定幀率的點雲媒體軌道，或者也可以封裝多個具有相同或者不同幀率的點雲媒體軌道。其中，多個點雲媒體軌道可以組成一個軌道組，軌道組的內容可以包括單軌封裝模式下的點雲媒體軌道（包含幾何成分、屬性成分）或者可以包括多軌封裝模式下的幾何成分軌道（屬性成分軌道由幾何成分軌道索引得到）。相同幀率的點雲媒體軌道在解碼和展示時，可以相互進行替代，而且相同幀率的點雲媒體軌道可以組合消費，以達到更好的點雲呈現效果。
在本申請的一個實施例中，點雲檔案中的部分點雲媒體軌道具有相同的幀率，而其他的點雲媒體軌道可以具有不同的幀率。例如，點雲檔案中封裝track1、track2和track3三個點雲媒體軌道，其中track1的幀率為60 fps，而track2和track3的幀率均為30 fps。
在點雲檔案中可以封裝對應於不同點雲媒體軌道的可替換組（alternative group），具有相同點雲內容且具有不同點雲品質的點雲媒體軌道可以劃分在同一個可替換組內，點雲品質可以包括碼率、幀率、解析度等各種對應於不同標準的品質參數。
當GPCC點雲資料以單軌道封裝時，不同品質的點雲內容的軌道同屬一個可替換組。當GPCC點雲資料以多軌道封裝時，不同品質的點雲內容的幾何成分軌道同屬一個可替換組，而屬性成分軌道可以關聯至幾何成分軌道。
第4圖示出了本申請一個實施例中以多軌道封裝的可替換組示意圖。如第4圖所示，在可替換組400中包括具有相同點雲內容的第一點雲資料410和第二點雲資料420。其中，第一點雲資料410是點雲品質相對較高的無失真壓縮點雲資料（Lossless coded GPCC），第二點雲資料420是點雲品質相對較低的失真壓縮點雲資料（Lossy coded GPCC）。
第一點雲資料410中包括第一幾何成分軌道411和關聯至第一幾何成分軌道411的第一屬性成分軌道412，第二點雲資料420中包括第二幾何成分軌道421和關聯至第二幾何成分軌道421的第二屬性成分軌道422。
步驟S320：解析一個或者多個點雲媒體軌道的檔案封裝資訊，得到檔案封裝資訊中攜帶的幀率指示資訊，幀率指示資訊用於指示一個或者多個點雲媒體軌道的幀率。
在本申請的一個實施例中，解析檔案封裝資訊得到品質指示資訊（幀率指示資訊）的方法可以包括：解析一個或者多個點雲媒體軌道的檔案封裝資訊，以確定與一個或者多個點雲媒體軌道的幀率相對應的幀率指示欄位；根據幀率指示欄位的取值，確定一個或者多個點雲媒體軌道的幀率指示資訊。
在本申請的一個實施例中，檔案封裝資訊是在將點雲碼流封裝為點雲媒體軌道時生成的ISOBMFF（ISO基礎媒體檔案格式）資料盒，ISOBMFF的具體內容可參考國際標準ISO/IEC 14496-12。
在本申請的一個實施例中，檔案封裝資訊具體可以表現為擴展得到的軌道組資料盒TrackGroupTypeBox，其語法如下。
aligned(8) class GPCCTemporalScaleBox extends TrackGroupTypeBox('gpts') {
// track_group_id is inherited from TrackGroupTypeBox;
unsigned int(8) frame_rate;
}
其中，frame_rate為用於指示點雲檔案對應幀率的幀率指示資訊，其取值是一個長度為8位元組的不帶正負號的整數。
通過擴展軌道組資料盒，可以將同一內容、不同幀率的點雲媒體軌道進行相互關聯。同屬於一個軌道組的點雲軌道滿足如下條件。
（1）該軌道為單軌封裝模式下的點雲軌道（包含幾何、屬性成分）或者多軌封裝模式下的幾何成分軌道（屬性成分軌道由幾何成分軌道索引得到）。
（2）同幀率的軌道在解碼和呈現時可以相互替代。
（3）同幀率的軌道可以組合消費，以達到更高幀率的呈現效果。
步驟S330：根據檔案封裝資訊中攜帶的幀率指示資訊，從點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道。
在每個點雲媒體軌道對應的檔案封裝資訊中，均攜帶有該點雲媒體軌道的幀率指示資訊，該幀率指示資訊以顯性標識的方式標識出點雲媒體軌道的幀率。當點雲檔案由資料來源傳輸至使用者所在的資料接收方時，資料接收方可以根據設備性能以及使用者需求解碼具有指定的幀率的點雲媒體軌道。
在本申請的一個實施例中，可以通過採集資料接收方的設備性能，並將設備性能與檔案封裝資訊中攜帶的品質指示資訊（幀率指示資訊）進行匹配檢測，確定與資料接收方的設備性能相匹配的幀率，進而從點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道。
設備性能可以包括硬體性能、軟體性能和網路性能中的至少一種。硬體性能例如可以包括電子設備的設備型號、處理器型號、記憶體容量、顯示器尺寸等等，軟體性能例如可以包括資料接收方安裝的點雲解碼器的程式版本，網路性能例如可以包括網路頻寬、網路傳輸狀態等等。
在本申請的一個實施例中，可以獲取資料接收方配置的幀率選取規則，並將幀率選取規則與檔案封裝資訊中攜帶的幀率指示資訊進行匹配檢測，確定與資料接收方配置幀率選取規則相匹配的幀率，進而從點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道。
幀率選取規則可以是根據使用者需求配置的用於選取具有指定幀率的點雲資料的選取規則，例如根據使用者指令選取幀率大於（或者小於）指定數值的點雲資料。
第5圖示出了本申請一個實施例中從資料來源接收點雲檔案的步驟流程圖。如第5圖所示，在以上實施例的基礎上，步驟S310中的接收由資料來源傳輸的點雲檔案，可以包括如下的步驟S510至步驟S540。
步驟S510：接收由資料來源發送的用於傳輸點雲資料的流媒體信令。
在本申請的一個實施例中，用於傳輸點雲資料的流媒體信令可以是基於HTTP的動態自適應流（dynamic adaptive streaming over HTTP，DASH）信令，DASH是一種自適應位元速率流技術，該技術可以使高品質流媒體通過傳統的HTTP網路服務器進行互聯網傳遞。
步驟S520：解析流媒體信令，得到流媒體信令中攜帶的用於標識軌道組的時域層級組標識，軌道組包括一個或者多個具有相同點雲內容的點雲媒體軌道，軌道組中包括部分幀率不同的點雲媒體軌道。
在DASH信令中，可以利用已有的欄位來存儲點雲媒體軌道的幀率指示資訊，例如可以利用DASH信令中的frameRate欄位來指示多種不同點雲媒體軌道的幀率。
在本申請的一個實施例中，對於在檔案封裝中同屬於一個gpts軌道組的所有幀率的點雲媒體軌道，在DASH信令中可以通過一個組ID進行標識，例如，GPCC時域層級組標識（GPCCTemporalScaleGroupId）。該組ID元素為自適應調集AdaptationSet元素的子元素。GPCCTemporalScaleGroupId元素可以出現在adaptation set層級，而不能出現在任何其他層級。表1示出了本申請一個實施例中GPCC時域層級組ID的語義及屬性。 [表1]
Element Use Data type Description
GPCCTemporalScaleGroupId 0..N xs: unsignedShort 若一個Adaptation Set中的一個或多個representation對應攜帶了一個或多個同屬一個GPCC時域層級組的不同幀率的軌道，則該Adaptation Set對應的GPCC時域層級組ID由該欄位標識。
步驟S530：根據時域層級組標識，向所述資料來源發送資料傳輸請求。
根據解析得到的流媒體信令中攜帶的時域層級組標識，可以選擇其中一種或者多種幀率指示資訊作為目標幀率，並進一步向資料來源發送對應於目標幀率的資料傳輸請求。該資料傳輸請求例如為第一資料傳輸請求。
在本申請的一個實施例中，發送資料傳輸請求的方法可以包括：獲取與資料來源進行資料傳輸的網路頻寬；根據時域層級組標識，從軌道組中選取與網路頻寬相匹配的具有目標幀率的一個或者多個目標點雲媒體軌道；向資料來源發送用於請求傳輸目標點雲媒體軌道的資料傳輸請求。
在本申請的一個實施例中，當網路頻寬大於設定閾值時，可以選取兩個或者兩個以上的目標點雲媒體軌道。當網路頻寬小於或等於設定閾值時，可以選取一個目標點雲媒體軌道。
步驟S540：接收由資料來源傳輸的與資料傳輸請求相對應的點雲檔案。
當根據時域層級組標識向資料來源發送針對一個對應於目標點雲媒體軌道的資料傳輸請求時，資料來源可以基於該請求向資料接收方傳輸相應的一個目標點雲媒體軌道。當根據時域層級組標識向資料來源發送針對多個對應於目標點雲媒體軌道的資料傳輸請求時，資料來源可以基於該請求向資料接收方傳輸相應的具有相同幀率或者不同幀率的多個目標點雲媒體軌道。
在本申請的一個實施例中，通過獲取具有相同幀率的多個點雲媒體檔案，可以對各個點雲媒體檔案進行替換或者合併，以改善點雲媒體檔案的展示效果。
在本申請的一個實施例中，當待展示的點雲媒體軌道出現選取失敗、解碼失敗或者解碼後得到點雲品質差等問題時，可以利用具有相同幀率的其他點雲媒體軌道進行軌道替換。例如，兩個幀率均為30 fps的具有相同點雲內容的點雲媒體檔案可以相互進行替換。
在本申請的一個實施例中，當資料接收方的網路環境得到優化、網路頻寬較高時，可以將多個具有相同幀率的點雲媒體軌道進行軌道合併，以提高點雲資料的展示幀率。例如，兩個幀率均為30 fps的具有相同點雲內容的點雲媒體軌道可以經過軌道合併後形成一個幀率為60 fps的點雲媒體軌道，從而以提高幀率的方式獲得更好的點雲媒體檔案展示效果。
在本申請的一個實施例中，當從點雲檔案中選取並解碼出待展示的點雲媒體軌道後，如果點雲檔案中還包括有具有相同幀率的其他點雲媒體軌道，則可以執行點雲媒體軌道替換方法：獲取待展示的點雲媒體軌道的幀率；根據檔案封裝資訊中攜帶的幀率指示資訊，從點雲檔案中選取與待展示的點雲媒體軌道具有相同幀率的其他點雲媒體軌道；將待展示的點雲媒體軌道替換為其他點雲媒體軌道，以解碼並展示其他點雲媒體軌道。
在本申請的一個實施例中，當從點雲檔案中選取並解碼出待展示的點雲媒體軌道後，如果點雲檔案中還包括有具有相同幀率的其他點雲媒體軌道，則可以執行點雲媒體軌道合併方法：獲取待展示的點雲媒體軌道的幀率；根據檔案封裝資訊中攜帶的幀率指示資訊，從點雲檔案中選取與待展示的點雲媒體軌道具有相同幀率的一個或者多個其他點雲媒體軌道；解碼一個或者多個其他點雲媒體軌道，並將一個或者多個其他點雲媒體軌道與待展示的點雲媒體軌道進行合併展示。
在本申請的一個實施例中，當從點雲檔案中選取並解碼出待展示的點雲媒體軌道後，如果點雲檔案僅封裝有一個點雲媒體軌道，或者點雲檔案中的其他點雲媒體軌道的幀率均與待展示的點雲媒體軌道不一致，則可以執行點雲媒體軌道替換方法：獲取待展示的點雲媒體軌道的幀率；向資料來源發送資料傳輸請求（例如，第二資料傳輸請求），以接收由資料來源傳輸的補充點雲檔案，補充點雲檔案包括與待展示的點雲媒體軌道具有相同點雲內容和相同幀率的其他點雲媒體軌道；將待展示的點雲媒體軌道替換為其他點雲媒體軌道，以解碼並展示其他點雲媒體軌道。
在本申請的一個實施例中，當從點雲檔案中選取並解碼出待展示的點雲媒體軌道後，如果點雲檔案僅封裝有一個點雲媒體軌道，或者點雲檔案中的其他點雲媒體軌道的幀率均與待展示的點雲媒體軌道不一致，則可以執行點雲媒體軌道合併方法：獲取待展示的點雲媒體軌道的幀率；向資料來源發送資料傳輸請求（例如，第三資料傳輸請求），以接收由資料來源傳輸的補充點雲檔案，補充點雲檔案包括與待展示的點雲媒體軌道具有相同點雲內容和相同幀率的一個或者多個其他點雲媒體軌道；解碼一個或者多個其他點雲媒體軌道，並將一個或者多個其他點雲媒體軌道與待展示的點雲媒體軌道進行合併展示。
第6圖示出了本申請一個實施例中的點雲編碼方法的步驟流程圖，該點雲編碼方法可以應用於點雲媒體系統的伺服器、用戶端以及中間節點等環節，本申請實施例以安裝有點雲編碼裝置的伺服器設備執行的點雲編碼方法作為示例。如第6圖所示，該點雲編碼方法主要可以包括如下的步驟S610至步驟S620。
步驟S610：按照不同的編碼標準對待傳輸的點雲資料進行編碼處理，得到具有相同點雲內容的多個點雲碼流，多個點雲碼流中包括部分幀率不同的點雲碼流。
為了滿足不同的資料接收方對於點雲資料的幀率需求，針對某一點雲內容的點雲資料，可以按照多種不同的編碼標準進行編碼處理後得到多個具有相同幀率或者不同幀率的點雲碼流。編碼標準可以包括一種或者多種品質參數的參數取值，將各種品質參數的不同參數取值進行組合可以形成多種不同的編碼標準。例如當品質參數包括碼率和幀率，而碼率包括兩種不同的碼率取值A1、A2，幀率也包括兩種不同的幀率取值B1、B2，由此可以確定對應於不同品質參數取值的四種編碼標準：A1B1、A1B2、A2B1和A2B2。
步驟S620：將多個點雲碼流封裝為多個點雲媒體軌道，並向多個點雲媒體軌道中填充與多個點雲碼流相對應的幀率指示資訊，幀率指示資訊用於指示多個點雲媒體軌道的幀率。
每個點雲媒體軌道均具有與之對應的檔案封裝資訊，該檔案封裝資訊可以是在將點雲碼流封裝為點雲媒體軌道時生成的ISOBMFF資料盒，例如可以是擴展得到的軌道組資料盒TrackGroupTypeBox。在點雲媒體軌道的檔案封裝資訊中確定與幀率指示資訊相對應的幀率指示欄位之後，可以通過引用點雲碼流的幀率的方式，將與點雲碼流相對應的幀率指示資訊填充至檔案封裝資訊中的幀率指示欄位。
在本申請的一個實施例中，在將點雲碼流封裝為點雲媒體軌道之後，可以根據資料傳輸需求，生成用於傳輸點雲資料的流媒體信令；該流媒體信令可以是以上實施例中的DASH信令。向流媒體信令中填充用於標識軌道組的時域層級組標識，軌道組包括一個或者多個具有相同點雲內容的點雲媒體軌道，軌道組中包括部分幀率不同的點雲媒體軌道。然後向資料接收方發送流媒體信令，以便在資料來源與資料接收方之間進行點雲資料傳輸。
在本申請的一個實施例中，當資料接收方對流媒體信令做出回應後，資料來源可以接收由資料接收方發送的基於流媒體信令生成的資料傳輸請求；根據資料傳輸請求，向資料接收方傳輸點雲檔案，點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，點雲檔案中包括部分幀率不同的點雲媒體軌道。
第7圖示出了本申請實施例在一個應用場景中進行點雲資料編解碼的步驟流程圖。如第7圖所示，伺服器作為生產點雲資料的資料來源，在伺服器與使用者所在用戶端之間進行點雲資料傳輸和編解碼的方法可以包括如下步驟。
步驟S701：對伺服器上的點雲內容A進行編碼處理，得到對應於兩種不同幀率的三個點雲碼流S1、S2和S3。例如，點雲碼流S1的幀率為60 fps，點雲碼流S2的幀率為30 fps，點雲碼流S3的幀率也是30 fps。
步驟S702：將三個點雲碼流分別封裝為三個相互關聯的點雲媒體軌道Track1、Track2和Track3，對應填充每個點雲媒體軌道的幀率指示資訊。例如，在軌道組資料盒中，將點雲媒體軌道Track1的幀率指示欄位填充為frame_rate = 60；將點雲媒體軌道Track2的幀率指示欄位填充為frame_rate = 30；將點雲媒體軌道Track3的幀率指示欄位填充為frame_rate = 30。
步驟S703：利用DASH信令中的frameRate欄位指示各個點雲媒體軌道的幀率，利用DASH信令中的時域層級組標識GPCCTemporalScaleGroupId指示多個點雲媒體軌道組成的軌道組，將DASH信令發送給使用者所在的用戶端C1和C2。
步驟S704：用戶端C1和C2根據網路頻寬和DASH信令中的資訊，請求點雲檔案。其中，C1請求的點雲檔案中包括點雲媒體軌道Track1；C2請求的點雲檔案中包括點雲媒體軌道Track2。
步驟S705：伺服器分別向用戶端C1和C2傳輸點雲檔案。伺服器向用戶端C1傳輸的點雲檔案中包括點雲媒體軌道Track1；向用戶端C2傳輸的點雲檔案中包括點雲媒體軌道Track2。
步驟S706：用戶端接收點雲檔案，通過Track1和Track2中的frameRate欄位資訊解碼並展示相應的點雲媒體軌道。
當用戶端C2的網路狀態好轉後，可以進一步請求點雲媒體軌道Track3，將點雲媒體軌道Track2與點雲媒體軌道Track3一起進行呈現消費，從而達到幀率為60 fps的點雲展示效果。
在本申請實施例提供的技術方案中，通過對具有相同幀率以及具有不同幀率的點雲媒體資源進行關聯，構造了點雲媒體在時間上的漸進關係。基於這種時間上的漸進關係，使用者在消費點雲媒體時，可以根據自身需求請求對應的點雲媒體檔案，從而節省傳輸頻寬。
應當注意，儘管在附圖中以特定順序描述了本申請中方法的各個步驟，但是，這並非要求或者暗示必須按照該特定順序來執行這些步驟，或是必須執行全部所示的步驟才能實現期望的結果。附加的或備選的，可以省略某些步驟，將多個步驟合併為一個步驟執行，以及/或者將一個步驟分解為多個步驟執行等。
以下介紹本申請的裝置實施例，可以用於執行本申請上述實施例中的點雲編解碼方法。
第8圖示出了本申請一個實施例中的點雲解碼裝置的結構方塊圖。如第8圖所示，點雲解碼裝置800主要可以包括：接收模組810，被配置為接收由資料來源傳輸的點雲檔案，所述點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述點雲檔案中包括部分幀率不同的點雲媒體軌道；解析模組820，被配置為解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，得到所述檔案封裝資訊中攜帶的幀率指示資訊，所述幀率指示資訊用於指示所述一個或者多個點雲媒體軌道的幀率；解碼模組830，被配置為根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道。
在本申請的一些實施例中，基於以上各實施例，所述接收模組810包括：信令接收單元，被配置為接收由資料來源發送的用於傳輸點雲資料的流媒體信令；信令解析單元，被配置為解析所述流媒體信令，得到所述流媒體信令中攜帶的用於標識軌道組的時域層級組標識，所述軌道組包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述軌道組中包括部分幀率不同的點雲媒體軌道；請求發送單元，被配置為根據所述時域層級組標識，向所述資料來源發送第一資料傳輸請求；檔案接收單元，被配置為接收由所述資料來源傳輸的與所述第一資料傳輸請求相對應的點雲檔案。
在本申請的一些實施例中，基於以上各實施例，所述請求發送單元包括：頻寬獲取子單元，被配置為獲取與所述資料來源進行資料傳輸的網路頻寬；軌道選取子單元，被配置為根據所述時域層級組標識，從所述軌道組中選取與所述網路頻寬相匹配的具有目標幀率的一個或者多個目標點雲媒體軌道；請求發送子單元，被配置為向所述資料來源發送用於請求傳輸所述一個或者多個目標點雲媒體軌道的第一資料傳輸請求。
在本申請的一些實施例中，基於以上各實施例，所述解析模組820包括：資訊解析單元，被配置為解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，以確定與所述一個或者多個點雲媒體軌道的幀率相對應的幀率指示欄位；資訊確定單元，被配置為根據所述幀率指示欄位的取值，確定所述一個或者多個點雲媒體軌道的幀率指示資訊。
在本申請的一些實施例中，基於以上各實施例，所述點雲解碼裝置800還包括：幀率獲取模組，被配置為獲取待展示的點雲媒體軌道的幀率；軌道選取模組，被配置為根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取與所述待展示的點雲媒體軌道具有相同幀率的其他點雲媒體軌道；第一替換模組，被配置為將所述待展示的點雲媒體軌道替換為所述其他點雲媒體軌道，以解碼並展示所述其他點雲媒體軌道。
在本申請的一些實施例中，基於以上各實施例，所述點雲解碼裝置800還包括：幀率獲取模組，被配置為獲取待展示的點雲媒體軌道的幀率；軌道選取模組，被配置為根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取與所述待展示的點雲媒體軌道具有相同幀率的一個或者多個其他點雲媒體軌道；第一合併模組，被配置為解碼所述一個或者多個其他點雲媒體軌道，並將所述一個或者多個其他點雲媒體軌道與所述待展示的點雲媒體軌道進行合併展示。
在本申請的一些實施例中，基於以上各實施例，所述點雲解碼裝置800還包括：幀率獲取模組，被配置為獲取待展示的點雲媒體軌道的幀率；檔案獲取模組，被配置為向所述資料來源發送第二資料傳輸請求，以接收由所述資料來源傳輸的補充點雲檔案，所述補充點雲檔案包括與所述待展示的點雲媒體軌道具有相同點雲內容和相同幀率的其他點雲媒體軌道；第二替換模組，被配置為將所述待展示的點雲媒體軌道替換為所述其他點雲媒體軌道，以解碼並展示所述其他點雲媒體軌道。
在本申請的一些實施例中，基於以上各實施例，所述點雲解碼裝置800還包括：幀率獲取模組，被配置為獲取待展示的點雲媒體軌道的幀率；檔案獲取模組，被配置為向所述資料來源發送第三資料傳輸請求，以接收由所述資料來源傳輸的補充點雲檔案，所述補充點雲檔案包括與所述待展示的點雲媒體軌道具有相同點雲內容和相同幀率的一個或者多個其他點雲媒體軌道；第二合併模組，被配置為解碼所述一個或者多個其他點雲媒體軌道，並將所述一個或者多個其他點雲媒體軌道與所述待展示的點雲媒體軌道進行合併展示。
第9圖示出了本申請一個實施例中的點雲編碼裝置的結構方塊圖。如第9圖所示，點雲編碼裝置900主要可以包括：編碼模組910，被配置為按照不同的編碼標準對待傳輸的點雲資料進行編碼處理，得到具有相同點雲內容的多個點雲碼流，所述多個點雲碼流中包括部分幀率不同的點雲碼流；封裝模組920，被配置為將所述多個點雲碼流封裝為多個點雲媒體軌道，並向所述多個點雲媒體軌道中填充與所述多個點雲碼流相對應的幀率指示資訊，所述幀率指示資訊用於指示所述多個點雲媒體軌道的幀率。
在本申請的一些實施例中，基於以上各實施例，所述點雲編碼裝置900還包括：信令生成模組，被配置為生成用於傳輸點雲資料的流媒體信令；信令填充模組，被配置為向所述流媒體信令中填充用於標識軌道組的時域層級組標識，所述軌道組包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述軌道組中包括部分幀率不同的點雲媒體軌道；信令發送模組，被配置為向資料接收方發送所述流媒體信令。
在本申請的一些實施例中，基於以上各實施例，所述點雲編碼裝置900還包括：請求接收模組，被配置為接收由所述資料接收方發送的基於所述流媒體信令生成的資料傳輸請求；檔案傳輸模組，被配置為根據所述資料傳輸請求，向所述資料接收方傳輸點雲檔案，所述點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述點雲檔案中包括部分幀率不同的點雲媒體軌道。
在本申請的一些實施例中，基於以上各實施例，所述封裝模組920包括：資訊確定單元，被配置為在所述多個點雲媒體軌道的檔案封裝資訊中確定與所述幀率指示資訊相對應的幀率指示欄位；資訊填充單元，被配置為將與所述多個點雲碼流相對應的幀率指示資訊填充至所述檔案封裝資訊中的幀率指示欄位。
本申請各實施例中提供的點雲編解碼裝置的具體細節已經在對應的方法實施例中進行了詳細的描述，此處不再贅述。
第10圖示意性地示出了用於實現本申請實施例的電子設備的電腦系統結構方塊圖。
需要說明的是，第10圖示出的電子設備的電腦系統（以下以電腦系統1000表示）僅是一個示例，不應對本申請實施例的功能和使用範圍帶來任何限制。
如第10圖所示，電腦系統1000包括中央處理器1001（Central Processing Unit，CPU），其可以根據存儲在唯讀記憶體1002（Read-Only Memory，ROM）中的程式或者從存儲部分1008載入到隨機存取記憶體1003（Random Access Memory，RAM）中的程式而執行各種適當的動作和處理。在隨機存取記憶體1003中，還存儲有系統操作所需的各種程式和資料。中央處理器1001、唯讀記憶體1002以及隨機存取記憶體1003通過匯流排1004彼此相連。輸入/輸出介面1005（Input /Output介面，即I/O介面）也連接至匯流排1004。
以下部件連接至輸入/輸出介面1005：包括鍵盤、滑鼠等的輸入部分1006；包括諸如陰極射線管（Cathode Ray Tube，CRT）、液晶顯示器（Liquid Crystal Display，LCD）等以及揚聲器等的輸出部分1007；包括硬碟等的存儲部分1008；以及包括諸如局域網卡、數據機等的網路介面卡的通信部分1009。通信部分1009經由諸如網際網路的網路執行通信處理。驅動器1010也根據需要連接至輸入/輸出介面1005。可拆卸介質1011，諸如磁片、光碟、磁光碟、半導體記憶體等等，根據需要安裝在驅動器1010上，以便於從其上讀出的電腦程式根據需要被安裝入存儲部分1008。
特別地，根據本申請的實施例，各個方法流程圖中所描述的過程可以被實現為電腦軟體程式。例如，本申請的實施例包括一種電腦程式產品，其包括承載在電腦可讀介質上的電腦程式，該電腦程式包含用於執行流程圖所示的方法的程式碼。在這樣的實施例中，該電腦程式可以通過通信部分1009從網路上被下載和安裝，和/或從可拆卸介質1011被安裝。在該電腦程式被中央處理器1001執行時，執行本申請的系統中限定的各種功能。
需要說明的是，本申請實施例所示的電腦可讀介質可以是電腦可讀信號介質或者電腦可讀存儲介質或者是上述兩者的任意組合。電腦可讀存儲介質例如可以是——但不限於——電、磁、光、電磁、紅外線、或半導體的系統、裝置或器件，或者任意以上的組合。電腦可讀存儲介質的更具體的例子可以包括但不限於：具有一個或多個導線的電連接、可擕式電腦磁片、硬碟、隨機存取記憶體（RAM）、唯讀記憶體（ROM）、可擦除可程式設計唯讀記憶體（Erasable Programmable Read Only Memory，EPROM）、快閃記憶體、光纖、唯讀記憶光碟（Compact Disc Read-Only Memory，CD-ROM）、光記憶體件、磁記憶體件、或者上述的任意合適的組合。在本申請中，電腦可讀存儲介質可以是任何包含或存儲程式的有形介質，該程式可以被指令執行系統、裝置或者器件使用或者與其結合使用。而在本申請中，電腦可讀信號介質可以包括在基帶中或者作為載波一部分傳播的資料信號，其中承載了電腦可讀的程式碼。這種傳播的資料信號可以採用多種形式，包括但不限於電磁信號、光信號或上述的任意合適的組合。電腦可讀信號介質還可以是電腦可讀存儲介質以外的任何電腦可讀介質，該電腦可讀介質可以發送、傳播或者傳輸用於由指令執行系統、裝置或者器件使用或者與其結合使用的程式。電腦可讀介質上包含的程式碼可以用任何適當的介質傳輸，包括但不限於：無線、有線等等，或者上述的任意合適的組合。
本申請所屬技術領域中具有通常知識者在考慮說明書及實踐這裡公開的發明後，將容易想到本申請的其它實施方案。本申請旨在涵蓋本申請的任何變型、用途或者適應性變化，這些變型、用途或者適應性變化遵循本申請的一般性原理並包括本申請未公開的所屬技術領域中的習知技術或慣用技術手段。
應當理解的是，本申請並不局限於上面已經描述並在圖式中示出的精確結構，並且可以在不脫離其範圍進行各種修改和改變。本申請的範圍僅由所附的發明申請專利範圍來限制。
雖然本申請已用較佳實施例揭露如上，然其並非用以限定本申請，本申請所屬技術領域中具有通常知識者在不脫離本申請之精神與範圍內，可作各種之更動與潤飾，因此本申請之保護範圍當視後附之申請專利範圍所界定者為準。
100:系統架構 110:第一終端裝置 120:第二終端裝置 130:第三終端裝置 140:第四終端裝置 150:網路 201:點雲資料來源 202:未壓縮的點雲資料 203:視頻編碼裝置 204:已編碼的點雲資料 205:資料流伺服器 206,208:用戶端子系統 207,209:點雲資料 210:點雲解碼裝置 211:輸出點雲資料 212:顯示器 213:採集子系統 220,230:電子裝置 400:可替換組 410:第一點雲資料 411:第一幾何成分軌道 412:第一屬性成分軌道 420:第二點雲資料 421:第二幾何成分軌道 422:第二屬性成分軌道 800:點雲解碼裝置 810:接收模組 820:解析模組 830:解碼模組 900:點雲編碼裝置 910:編碼模組 920:封裝模組 1000:電腦系統 1001:中央處理器 1002:唯讀記憶體 1003:隨機存取記憶體 1004:匯流排 1005:輸入/輸出介面 1006:輸入部分 1007:輸出部分 1008:存儲部分 1009:通信部分 1010:驅動器 1011:可拆卸介質 S310~S330,S510~S540,S610~S620,S701~S706:步驟
[第1圖]顯示可以應用本申請實施例的技術方案的示例性系統架構的示意圖。 [第2圖]顯示點雲編碼裝置和點雲解碼裝置在資料流環境中的放置方式。 [第3圖]顯示本申請一個實施例中的點雲解碼方法的步驟流程圖。 [第4圖]顯示本申請一個實施例中以多軌道封裝的可替換組示意圖。 [第5圖]顯示本申請一個實施例中從資料來源接收點雲檔案的步驟流程圖。 [第6圖]顯示本申請一個實施例中的點雲編碼方法的步驟流程圖。 [第7圖]顯示本申請實施例在一個應用場景中進行點雲資料編解碼的步驟流程圖。 [第8圖]顯示本申請實施例提供的點雲解碼裝置的結構方塊圖。 [第9圖]顯示本申請實施例提供的點雲編碼裝置的結構方塊圖。 [第10圖]顯示適於用來實現本申請實施例的電子設備的電腦系統結構方塊圖。
S310-S330:步驟

Claims (15)

  1. 一種點雲解碼方法，包括：接收由資料來源傳輸的點雲檔案，所述點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述點雲檔案中包括部分幀率不同的點雲媒體軌道以及包括部分幀率相同的點雲媒體軌道；解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，得到所述檔案封裝資訊中攜帶的幀率指示資訊，所述幀率指示資訊用於指示所述一個或者多個點雲媒體軌道的幀率；以及根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道，其中所述點雲解碼方法還包括：向所述資料來源請求至少另一點雲媒體軌道，其中所述至少另一點雲媒體軌道與所述具有指定幀率的點雲媒體軌道具有相同點雲內容；以及將所述具有指定幀率的點雲媒體軌道與所述至少另一點雲媒體軌道合併成一合併後點雲媒體軌道，其中所述合併後點雲媒體軌道的幀率等於所述指定幀率與所述至少另一點雲媒體軌道的幀率之和。
  2. 如請求項1之點雲解碼方法，其中接收由資料來源傳輸的點雲檔案，包括：接收由資料來源發送的用於傳輸點雲資料的流媒體信令；解析所述流媒體信令，得到所述流媒體信令中攜帶的用於標識軌道組的時域層級組標識，所述軌道組包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述軌道組中包括部分幀率不同的點雲媒體軌道； 根據所述時域層級組標識，向所述資料來源發送第一資料傳輸請求；以及接收由所述資料來源傳輸的與所述第一資料傳輸請求相對應的點雲檔案。
  3. 如請求項2之點雲解碼方法，其中根據所述時域層級組標識，向所述資料來源發送第一資料傳輸請求，包括：獲取與所述資料來源進行資料傳輸的網路頻寬；根據所述時域層級組標識，從所述軌道組中選取與所述網路頻寬相匹配的具有目標幀率的一個或者多個目標點雲媒體軌道；以及向所述資料來源發送用於請求傳輸所述一個或者多個目標點雲媒體軌道的第一資料傳輸請求。
  4. 如請求項1之點雲解碼方法，其中解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，得到所述檔案封裝資訊中攜帶的幀率指示資訊，包括：解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，以確定與所述一個或者多個點雲媒體軌道的幀率相對應的幀率指示欄位；以及根據所述幀率指示欄位的取值，確定所述一個或者多個點雲媒體軌道的幀率指示資訊。
  5. 如請求項1至4任一項之點雲解碼方法，其中在根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道之後，所述方法還包括：獲取待展示的點雲媒體軌道的幀率；根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取與所述待展示的點雲媒體軌道具有相同幀率的其他點雲媒體軌道；以及 將所述待展示的點雲媒體軌道替換為所述其他點雲媒體軌道，以解碼並展示所述其他點雲媒體軌道。
  6. 如請求項1至4任一項之點雲解碼方法，其中在根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道之後，所述方法還包括：獲取待展示的點雲媒體軌道的幀率；根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取與所述待展示的點雲媒體軌道具有相同幀率的一個或者多個其他點雲媒體軌道；以及解碼所述一個或者多個其他點雲媒體軌道，並將所述一個或者多個其他點雲媒體軌道與所述待展示的點雲媒體軌道進行合併展示。
  7. 如請求項1至4任一項之點雲解碼方法，其中在根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道之後，所述方法還包括：獲取待展示的點雲媒體軌道的幀率；向所述資料來源發送第二資料傳輸請求，以接收由所述資料來源傳輸的補充點雲檔案，所述補充點雲檔案包括與所述待展示的點雲媒體軌道具有相同點雲內容和相同幀率的其他點雲媒體軌道；以及將所述待展示的點雲媒體軌道替換為所述其他點雲媒體軌道，以解碼並展示所述其他點雲媒體軌道。
  8. 如請求項1至4任一項之點雲解碼方法， 其中在根據所述檔案封裝資訊中攜帶的幀率指示資訊，從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道之後，所述方法還包括：獲取待展示的點雲媒體軌道的幀率；向所述資料來源發送第三資料傳輸請求，以接收由所述資料來源傳輸的補充點雲檔案，所述補充點雲檔案包括與所述待展示的點雲媒體軌道具有相同點雲內容和相同幀率的一個或者多個其他點雲媒體軌道；以及解碼所述一個或者多個其他點雲媒體軌道，並將所述一個或者多個其他點雲媒體軌道與所述待展示的點雲媒體軌道進行合併展示。
  9. 一種點雲編碼方法，包括：按照不同的編碼標準對待傳輸的點雲資料進行編碼處理，得到具有相同點雲內容的多個點雲碼流，所述多個點雲碼流中包括部分幀率不同的點雲碼流以及包括部分幀率相同的點雲碼流；以及將所述多個點雲碼流封裝為多個點雲媒體軌道，並向所述多個點雲媒體軌道中填充與所述多個點雲碼流相對應的幀率指示資訊，所述幀率指示資訊用於指示所述多個點雲媒體軌道的幀率，所述多個點雲媒體軌道的幀率用於供資料接收方選取並解碼具有指定幀率的點雲媒體軌道，其中所述點雲編碼方法還包括：接收所述資料接收方請求至少另一點雲媒體軌道，其中所述至少另一點雲媒體軌道與所述具有指定幀率的點雲媒體軌道具有相同點雲內容，所述至少另一點雲媒體軌道用於供所述資料接收方將所述具有指定幀率的點雲媒體軌道與所述至少另一點雲媒體軌道合併成一合併後點雲媒體軌道，所述合併後點雲媒體軌道的幀率等於所述指定幀率與所述至少另一點雲媒體軌道的幀率之和。
  10. 如請求項9之點雲編碼方法，其中在將所述多個點雲碼流封裝為多個點雲媒體軌道之後，所述方法還包括：生成用於傳輸點雲資料的流媒體信令；向所述流媒體信令中填充用於標識軌道組的時域層級組標識，所述軌道組包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述軌道組中包括部分幀率不同的點雲媒體軌道；以及向資料接收方發送所述流媒體信令。
  11. 如請求項10之點雲編碼方法，其中在向資料接收方發送所述流媒體信令之後，所述方法還包括：接收由所述資料接收方發送的基於所述流媒體信令生成的資料傳輸請求；以及根據所述資料傳輸請求，向所述資料接收方傳輸點雲檔案，所述點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述點雲檔案中包括部分幀率不同的點雲媒體軌道。
  12. 如請求項9至11任一項之點雲編碼方法，其中向所述多個點雲媒體軌道中填充與所述多個點雲碼流相對應的幀率指示資訊，包括：在所述多個點雲媒體軌道的檔案封裝資訊中確定與所述幀率指示資訊相對應的幀率指示欄位；以及將與所述多個點雲碼流相對應的幀率指示資訊填充至所述檔案封裝資訊中的幀率指示欄位。
  13. 一種點雲解碼裝置，包括： 接收模組，被配置為接收由資料來源傳輸的點雲檔案，所述點雲檔案包括一個或者多個具有相同點雲內容的點雲媒體軌道，所述點雲檔案中包括部分幀率不同的點雲媒體軌道以及包括部分幀率相同的點雲媒體軌道；解析模組，被配置為解析所述一個或者多個點雲媒體軌道的檔案封裝資訊，得到所述檔案封裝資訊中攜帶的幀率指示資訊，所述幀率指示資訊用於指示所述一個或者多個點雲媒體軌道的幀率；以及解碼模組，被配置為根據所述檔案封裝資訊中攜帶的幀率指示資訊從所述點雲檔案中選取並解碼具有指定幀率的點雲媒體軌道，其中所述點雲解碼裝置還包括：請求模組，被配置為向所述資料來源請求至少另一點雲媒體軌道，其中所述至少另一點雲媒體軌道與所述具有指定幀率的點雲媒體軌道具有相同點雲內容；以及合併模組，被配置為將所述具有指定幀率的點雲媒體軌道與所述至少另一點雲媒體軌道合併成一合併後點雲媒體軌道，其中所述合併後點雲媒體軌道的幀率等於所述指定幀率與所述至少另一點雲媒體軌道的幀率之和。
  14. 一種點雲編碼裝置，包括：編碼模組，被配置為按照不同的編碼標準對待傳輸的點雲資料進行編碼處理，得到具有相同點雲內容的多個點雲碼流，所述多個點雲碼流中包括部分幀率不同的點雲碼流以及包括部分幀率相同的點雲碼流；以及封裝模組，被配置為將所述多個點雲碼流封裝為多個點雲媒體軌道，並向所述多個點雲媒體軌道中填充與所述多個點雲碼流相對應的幀率指示資訊，所 述幀率指示資訊用於指示所述多個點雲媒體軌道的幀率，所述多個點雲媒體軌道的幀率用於供資料接收方選取並解碼具有指定幀率的點雲媒體軌道，其中所述點雲編碼裝置還包括：接收模組，被配置為接收所述資料接收方請求至少另一點雲媒體軌道，其中所述至少另一點雲媒體軌道與所述具有指定幀率的點雲媒體軌道具有相同點雲內容，所述至少另一點雲媒體軌道用於供所述資料接收方將所述具有指定幀率的點雲媒體軌道與所述至少另一點雲媒體軌道合併成一合併後點雲媒體軌道，所述合併後點雲媒體軌道的幀率等於所述指定幀率與所述至少另一點雲媒體軌道的幀率之和。
  15. 一種電子設備，包括：處理器；記憶體，用於存儲所述處理器的可執行指令；其中，所述處理器配置為經由執行所述可執行指令來執行如請求項1至8任一項之點雲解碼方法或如請求項9至12任一項之點雲編碼方法。
TW111113336A 2021-04-22 2022-04-07 點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備 TWI803274B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202110437255.4A CN115243053B (zh) 2021-04-22 2021-04-22 点云编解码方法及相关设备
CN202110437255.4 2021-04-22

Publications (2)

Publication Number Publication Date
TW202243481A TW202243481A (zh) 2022-11-01
TWI803274B true TWI803274B (zh) 2023-05-21

Family

ID=83666808

Family Applications (1)

Application Number Title Priority Date Filing Date
TW111113336A TWI803274B (zh) 2021-04-22 2022-04-07 點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備

Country Status (6)

Country Link
US (1) US20230061573A1 (zh)
JP (1) JP2024508865A (zh)
KR (1) KR20230144620A (zh)
CN (1) CN115243053B (zh)
TW (1) TWI803274B (zh)
WO (1) WO2022222641A1 (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190318488A1 (en) * 2018-04-12 2019-10-17 Samsung Electronics Co., Ltd. 3d point cloud compression systems for delivery and access of a subset of a compressed 3d point cloud
WO2020070379A1 (en) * 2018-10-03 2020-04-09 Nokia Technologies Oy Method and apparatus for storage and signaling of compressed point clouds
TW202041020A (zh) * 2019-03-15 2020-11-01 新加坡商 聯發科技（新加坡）私人有限公司 用信號通知點雲多媒體資料軌道的空間關係的方法和裝置
US20200381022A1 (en) * 2019-05-29 2020-12-03 Nokia Technologies Oy Method and apparatus for storage and signaling of compressed point clouds

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10535161B2 (en) * 2017-11-09 2020-01-14 Samsung Electronics Co., Ltd. Point cloud compression using non-orthogonal projection
CN110012279B (zh) * 2018-01-05 2020-11-17 上海交通大学 基于3d点云数据的分视角压缩和传输方法及系统
US11049266B2 (en) * 2018-07-31 2021-06-29 Intel Corporation Point cloud viewpoint and scalable compression/decompression
US20210194946A1 (en) * 2018-09-12 2021-06-24 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
AU2019342612B2 (en) * 2018-09-18 2024-05-16 Vid Scale, Inc. Methods and apparatus for point cloud compression bitstream format
CN113015677A (zh) * 2018-10-29 2021-06-22 大疆科技股份有限公司 用于执行实时地图构建的可移动物体
EP3905532A4 (en) * 2018-12-28 2022-11-30 Sony Group Corporation INFORMATION PROCESSING DEVICE AND INFORMATION PROCESSING METHOD
US11704867B2 (en) * 2019-09-27 2023-07-18 Intel Corporation Methods for timed metadata priority rank signaling for point clouds
EP4026094A4 (en) * 2019-10-07 2022-11-09 Huawei Technologies Co., Ltd. VIDEO-BASED POINT CLOUD COMPRESSION (V-PCC) TIME INFORMATION
US11302063B2 (en) * 2020-07-21 2022-04-12 Facebook Technologies, Llc 3D conversations in an artificial reality environment
CN114079781B (zh) * 2020-08-18 2023-08-22 腾讯科技（深圳）有限公司 一种点云媒体的数据处理方法、装置、设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190318488A1 (en) * 2018-04-12 2019-10-17 Samsung Electronics Co., Ltd. 3d point cloud compression systems for delivery and access of a subset of a compressed 3d point cloud
WO2020070379A1 (en) * 2018-10-03 2020-04-09 Nokia Technologies Oy Method and apparatus for storage and signaling of compressed point clouds
TW202041020A (zh) * 2019-03-15 2020-11-01 新加坡商 聯發科技（新加坡）私人有限公司 用信號通知點雲多媒體資料軌道的空間關係的方法和裝置
US20200381022A1 (en) * 2019-05-29 2020-12-03 Nokia Technologies Oy Method and apparatus for storage and signaling of compressed point clouds

Also Published As

Publication number Publication date
US20230061573A1 (en) 2023-03-02
JP2024508865A (ja) 2024-02-28
WO2022222641A1 (zh) 2022-10-27
CN115243053B (zh) 2024-04-16
CN115243053A (zh) 2022-10-25
TW202243481A (zh) 2022-11-01
KR20230144620A (ko) 2023-10-16

Similar Documents

Publication Publication Date Title
EP3466091A1 (en) Method, device, and computer program for improving streaming of virtual reality media content
CN112804256B (zh) 多媒体文件中轨道数据的处理方法、装置、介质及设备
CN114697668B (zh) 点云媒体的编解码方法及相关产品
EP3888375A1 (en) Method, device, and computer program for encapsulating media data into a media file
WO2023207119A1 (zh) 沉浸媒体的处理方法、装置、设备及存储介质
EP3637722A1 (en) Method and apparatus for processing media information
TWI806479B (zh) 點雲編解碼方法、裝置、電腦可讀介質及電子設備
WO2024041239A1 (zh) 一种沉浸媒体的数据处理方法、装置、设备、存储介质及程序产品
WO2023226504A1 (zh) 一种媒体数据处理方法、装置、设备以及可读存储介质
TWI803274B (zh) 點雲解碼方法及裝置、點雲編碼方法及裝置以及電子設備
CN115150368B (zh) 媒体文件的关联处理方法、装置、介质及电子设备
WO2023169003A1 (zh) 点云媒体的解码方法、点云媒体的编码方法及装置
CN118118694A (zh) 点云封装与解封装方法、装置、介质及电子设备
US20240129537A1 (en) Method and apparatus for signaling cmaf switching sets in isobmff
US20230034937A1 (en) Media file encapsulating method, media file decapsulating method, and related devices
WO2022134962A1 (zh) 点云视窗的呈现方法、装置、计算机可读介质及电子设备
WO2023169004A1 (zh) 点云媒体的数据处理方法、装置、设备及介质
CN116455880A (zh) 流媒体传输方法及相关产品
CN116347118A (zh) 一种沉浸媒体的数据处理方法及相关设备
CN116781675A (zh) 一种点云媒体的数据处理方法、装置、设备及介质