JP2024511726A - データ処理方法、装置、コンピュータ機器、記憶媒体及びコンピュータプログラム - Google Patents
データ処理方法、装置、コンピュータ機器、記憶媒体及びコンピュータプログラム Download PDFInfo
- Publication number
- JP2024511726A JP2024511726A JP2023554318A JP2023554318A JP2024511726A JP 2024511726 A JP2024511726 A JP 2024511726A JP 2023554318 A JP2023554318 A JP 2023554318A JP 2023554318 A JP2023554318 A JP 2023554318A JP 2024511726 A JP2024511726 A JP 2024511726A
- Authority
- JP
- Japan
- Prior art keywords
- component
- track
- atlas
- tracks
- data box
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 10
- 238000003860 storage Methods 0.000 title claims description 23
- 238000004590 computer program Methods 0.000 title claims description 7
- 238000000034 method Methods 0.000 claims abstract description 65
- 238000012545 processing Methods 0.000 claims description 46
- 238000005538 encapsulation Methods 0.000 claims description 20
- 230000008569 process Effects 0.000 claims description 13
- 238000000638 solvent extraction Methods 0.000 claims description 8
- 238000010586 diagram Methods 0.000 abstract description 23
- 238000005516 engineering process Methods 0.000 description 5
- 230000000717 retained effect Effects 0.000 description 5
- 230000011218 segmentation Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23605—Creation or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/51—Indexing; Data structures therefor; Storage structures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4343—Extraction or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computer Security & Cryptography (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
データ処理方法を提供する。該方法は、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得するステップであって、コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、ステップ(ステップS401)と、コンポーネントトラックデータボックスに従って、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得するステップ(ステップS402)と、を含む。【選択図】図4
Description
本発明は、2021年7月12日に出願した出願番号が2021107868087であり、発明の名称が「データ処理方法、装置、コンピュータ及び読み取り可能な記憶媒体」である中国特許出願に基づく優先権を主張し、その全ての内容を参照により本発明に援用する。
本発明は、コンピュータ技術の分野に関し、特にデータ処理方法、装置、コンピュータ及び読み取り可能な記憶媒体に関する。
没入型メディアとは、ユーザに没入型体験を提供するメディアコンテンツを意味し、点群は、空間内に不規則に分散した、3次元物体又はシーンの空間構造及び表面属性を表現する離散点の集合である。一般的に、点群は、コンピュータにより生成され、3Dレーザースキャン又は3D撮影測定などの手段で取得でき、点群取得手段の変革に伴い、大量の点群データを取得することができる。大規模な点群データの蓄積に伴い、点群データの効率的な保存、伝送、配信、共有及び標準化などは、点群の応用のキーとなる。ここで、点群データを符号化した後、符号化されたデータストリームをカプセル化してユーザに伝送する必要がある。現在、一般的には、符号化されたデータストリームを直接カプセル化し、カプセル化されたデータをユーザに伝送する。点群データの符号化とカプセル化などのプロセスでは、一部のデータを損失し、ユーザは、カプセル化されたデータを受信した後、カプセル化されたデータからより精確なデータ取得プロセスを行うことができず、データ処理の効率及び効果などが比較的悪い。
本発明の各実施例は、データ処理方法、装置、コンピュータ及び読み取り可能な記憶媒体を提供する。
本発明の実施例の1つの態様では、コンピュータ機器が実行するデータ処理方法であって、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得するステップであって、前記コンポーネントトラックは、コンポーネントトラックデータボックスを含み、前記コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、前記タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、前記空間領域情報は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、ステップと、前記コンポーネントトラックデータボックスに従って、前記k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得するステップと、を含む、方法を提供する。
本発明の実施例の1つの態様では、コンピュータ機器が実行するデータ処理方法であって、ターゲットファイルにおけるk個のコンポーネントトラックを取得するステップであって、前記コンポーネントトラックは、コンポーネントトラックデータボックスを含み、前記コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、前記タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、前記空間領域情報は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、ステップと、前記コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得するステップと、を含む、方法を提供する。
本発明の実施例の1つの態様では、データ処理装置であって、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得するデータ取得モジュールであって、前記コンポーネントトラックは、コンポーネントトラックデータボックスを含み、前記コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、前記タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、前記空間領域情報は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、データ取得モジュールと、前記コンポーネントトラックデータボックスに従って、前記k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得するデータカプセル化モジュールと、を含む、装置を提供する。
本発明の実施例の1つの態様では、データ処理装置であって、ターゲットファイルにおけるk個のコンポーネントトラックを取得するトラック取得モジュールであって、前記コンポーネントトラックは、コンポーネントトラックデータボックスを含み、前記コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、前記タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、前記空間領域情報は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、トラック取得モジュールと、前記コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得するデータデカプセル化モジュールと、を含む、装置を提供する。
本発明の実施例の1つの態様では、1つ又は複数のプロセッサと、メモリと、入出力インターフェースと、を含むコンピュータ機器であって、前記プロセッサは、前記メモリ及び前記入出力インターフェースにそれぞれ接続され、前記入出力インターフェースは、データを送受信し、前記メモリは、コンピュータ読み取り可能な命令を記憶し、前記プロセッサは、前記コンピュータ機器に本発明の実施例の上記の態様に記載の方法を実行させるように、前記コンピュータ読み取り可能な命令を呼び出す、コンピュータ機器を提供する。
本発明の実施例の1つの態様では、コンピュータ読み取り可能な命令が記憶された1つ又は複数のコンピュータ読み取り可能な記憶媒体であって、前記コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサを有するコンピュータ機器に本発明の実施例の上記の態様に記載の方法を実行させるように、前記プロセッサによりロードされて実行される、記憶媒体を提供する。
本発明の実施例の1つの態様では、コンピュータ読み取り可能な命令を含むコンピュータプログラム製品であって、前記コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサにより実行される際に、本発明の実施例の上記の態様に記載の方法のステップを実現する、コンピュータプログラム製品を提供する。
本発明の1つ又は複数の実施形態の詳細は、以下の図面及び説明において提示される。本発明の他の特徴、目的及び利点は、明細書、図面及び特許請求の範囲から明らかになる。
本発明の実施例に係る技術をより明確に説明するために、以下は、実施例の説明に必要な図面を簡単に紹介する。なお、以下の説明における図面は、単なる本発明の幾つかの実施例であり、当業者にとって、創造的な作業を行うことなく、これらの図面に基づいて他の図面を得ることができる。
本発明の実施例に係るデータ処理のアーキテクチャ図である。
本発明の実施例に係るコンポーネントトラック生成のシナリオの概略図である。
本発明の実施例に係るデータ処理のシナリオの概略図である。
本発明の実施例に係るデータカプセル化方法のフローチャートである。
本発明の実施例に係るトラックグループ区分の概略図である。
本発明の実施例に係るデータデカプセル化方法のフローチャートである。
本発明の実施例に係るデータ処理のシナリオの概略図である。
本発明の実施例に係るデータ処理装置の概略図である。
本発明の実施例に係る他のデータ処理装置の概略図である。
本発明の実施例に係るコンピュータ機器の構成の概略図である。
以下は、本発明の実施例における図面を参照しながら、本発明の実施例における技術を明確、且つ完全に説明するが、説明される実施例は、単なる本発明の実施例の一部であり、全ての実施例ではない。本発明の実施例に基づいて、当業者が創造的な労働を行わずに取得した他の全ての実施例は、本発明の範囲内のものである。
本発明の実施例は、アトラス(atlas)のためのデータカプセル化及びデカプセル化の技術であるデータ処理技術に関する。ここで、該アトラスは、2D平面フレームにおける領域情報、3D表現空間の領域情報、及び両者間のマッピング関係及びマッピングに必要なパラメータ情報などを示す。該アトラスは、ボリュメトリックビデオに対応するアトラスを意味してもよい。該ボリュメトリックビデオ(volumetric video)とは、3次元空間視覚内容(コンテンツ)から取り込まれ、且つ3自由度プラス(3 Degree of Freedom+:3DoF+)又は6自由度(6 Degree of Freedom:6DoF)などの視聴体験を提供する、ファイルパッケージにボリュメトリックビデオタイプトラックを含む没入型メディアを意味し、多視角ビデオ及びビデオ符号化点群などを含む。ここで、該多視角/多視点ビデオとは、複数組のカメラアレイを採用し、複数の角度から撮影された深度情報を持つビデオであり、該多視角/多視点ビデオは、自由視角/自由視点ビデオとも称され、6自由度体験を提供する没入型メディアである。点群は、空間内に不規則に分布する、三次元物体又はシーンの空間構造及び表面属性を表現する離散点の集合である。点群における各点は、少なくとも三次元位置情報を有し、応用シーンに応じて、色、材質又は他の情報などを有する場合がある。通常、点群における各点は、全て同一の数の付加属性を有する。
また、自由度(Degree of Freedom:DoF)とは、ユーザが没入型メディアを視聴する際に動きをサポートし、且つコンテンツのインタラクションを生み出す自由度である。3DoFとは、ユーザの頭部が3次元空間の座標軸(x軸、y軸、z軸)回りに回転する3つの自由度である。3DoF+とは、3自由度に加えて、x軸、y軸、z軸に沿った有限の動きの自由度を持つことを意味する。6DoFとは、3自由度に加えて、x軸、y軸、z軸に沿った自由の運動の自由度を持つことを意味する。
好ましくは、本発明は、多視角/多視点ビデオ、及び従来のビデオ符号化に基づく点群圧縮(Video-based Point Cloud Compression:V-PCC)点群メディアなどのボリュメトリックビデオのカプセル化及びデカプセル化に適用される。
具体的には、図1を参照しながら説明する。図1は、本発明の実施例に係るデータ処理のアーキテクチャ図である。図1に示すように、本発明の実施例は、コンピュータ機器101により実現され、コンピュータ機器101は、サーバ及び端末装置から構成されてもよい。コンピュータ機器101は、サーバ又は端末装置であってもよく、これに限定されない。
例えば、コンピュータ機器101は、ボリュメトリックビデオのデータを取得してもよく、該データは該ボリュメトリックビデオに対応するアトラスを含み、該アトラスはN個のアトラスタイル(atlas tile)からなり、Nは正の整数である。好ましくは、コンピュータ機器101は、1つ又は少なくとも2つのボリュメトリックビデオを取得してもよく、1つのボリュメトリックビデオは1つのアトラスに対応してもよく、或いは、1つのボリュメトリックビデオは少なくとも2つのアトラスに対応してもよく、或いは、少なくとも2つのボリュメトリックビデオは1つのアトラスに対応してもよい。好ましくは、1つのボリュメトリックビデオが少なくとも2つのアトラスに対応する場合、コンピュータ機器101は、各アトラスについてアトラスIDを追加し、該アトラスIDに基づいて、該アトラスが属するボリュメトリックビデオを決定してもよい。具体的には、コンピュータ機器101は、カプセル化を必要とするk個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得してもよい。ここで、該コンポーネントトラックは、コンポーネントトラックデータボックス(component track data box)を含む。コンピュータ機器101は、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスに基づいて、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得してもよく、kは正の整数である。コンピュータ機器101は、該ターゲットファイルを、ユーザ装置102a、ユーザ装置102b又はユーザ装置102cなどのユーザ装置に送信してもよい。具体的には、コンピュータ機器101は、ターゲットファイルに対するユーザ装置のファイル取得要求を受信し、該ファイル取得要求に基づいてターゲットファイルを該ユーザ装置に送信してもよい。或いは、コンピュータ機器101は、ボリュメトリックビデオに対するユーザ装置のデータ取得要求を取得し、該データ取得要求に基づいて、該ボリュメトリックビデオに関連するk個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得し、各コンポーネントトラックに含まれるコンポーネントトラックデータボックスに基づいて、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得してもよい。或いは、コンピュータ機器101は、該ボリュメトリックビデオに対応するアトラスを取得し、該アトラスに対してタイル処理を行い、該アトラスに含まれるアトラスタイルを取得すると共に、該アトラスに対してタイル処理を行う際に、該ボリュメトリックビデオのビデオ情報に基づいて、各アトラスタイルに関連するコンポーネントトラックを取得し、コンポーネントトラックとアトラスタイルとの関連関係に基づいて、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得してもよい。
言い換えれば、コンピュータ機器101は、ターゲットデータに対する取得要求を受信した場合、該ターゲットデータに関連付けられたk個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得し、各コンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスに基づいて、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得し、該ターゲットファイルを、ターゲットデータの取得要求を行ったユーザ装置に送信してもよい。ここで、該ターゲットデータは、ターゲットファイルであってもよく、この場合、該ターゲットファイルは、事前に生成されてもよい。該ターゲットデータは、ボリュメトリックビデオであってもよく、この場合、該ターゲットファイルは、事前に生成されてもよいし、ターゲットデータに対する取得要求を受信した後に生成されてもよい。該ターゲットデータは、コンポーネントトラックであってもよく、即ち、該ターゲットデータは、k個のコンポーネントトラックを含み、コンピュータ機器は、該ターゲットデータに対応するアトラスタイルなどを取得してもよいが、これに限定されない。
好ましくは、本発明のデータは、コンピュータ機器に記憶されてもよいし、ブロックチェーン技術又はクラウドストレージ技術などに基づいて記憶されてもよい。即ち、本発明のデータは、ブロックチェーンネットワーク又はクラウドスペースなどに記憶されてもよいが、これらに限定されない。例えば、コンピュータ機器101は、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイル、並びに各コンポーネントトラックのコンポーネント関連情報、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化して得られたターゲットファイル等を、コンピュータ機器101、ブロックチェーンネットワーク又はクラウドスペース等における1つ以上の(少なくとも2つ)場所に記憶してもよい。コンピュータ機器101は、リソースを節約するために、本発明のデータを1つの場所に記憶してもよい。また、データのセキュリティを確保するために、複数の場所に記憶してもよい。
本発明の実施例は、各コンポーネントトラックに、対応するコンポーネントトラックのコンポーネント関連情報を表示するためのコンポーネントトラックデータボックスをカプセル化することによって、各コンポーネントトラックのコンポーネント関連情報を全て取得することができ、できるだけ全面的にコンポーネントトラックの情報を保留することができ、カプセル化されたターゲットファイルにおけるコンポーネントトラックの情報も一層整理化及び精密化させるため、該ターゲットファイルを受信したユーザ装置は各コンポーネントトラックのコンポーネントトラックデータボックスに基づいて、必要なコンポーネントトラックをデカプセル化して取得することができ、データ処理にかかる時間及びリソースなどを節約することができる。
次に、図2を参照しながら説明する。図2は、本発明の実施例に係るコンポーネントトラック生成のシナリオの概略図である。図2に示すように、1つのボリュメトリックビデオが1つのアトラスに対応することを一例とし、本発明の実施例は、コンピュータ機器により実現される。該コンピュータ機器は、ボリュメトリックビデオ201を取得し、ボリュメトリックビデオ201に対して解析及び情報抽出を行い、ボリュメトリックビデオ201のアトラス202を取得し、ボリュメトリックビデオ201のアトラス202に対してアトラスタイルを行い、アトラス202に対応するN個のアトラスタイル203を取得する。具体的には、領域ごとにボリュメトリックビデオ201のアトラス202に対してアトラスタイルを行ってもよい。ボリュメトリックビデオ201に基づいてN個のアトラスタイル203のそれぞれに対応するコンポーネントトラックを取得し、アトラスタイルとコンポーネントトラックとの関連関係に基づいて、アトラストラック204を取得する。具体的には、コンピュータ機器は、N個のアトラスタイル203のそれぞれに対応するコンポーネントトラックを取得し、具体的には、各アトラスタイルのタイル情報を取得し、該タイル情報に対応するタイル情報タイプに基づいて各アトラスタイルのそれぞれに対応するコンポーネントトラックタイプを決定し、各アトラスタイルのそれぞれに対応するコンポーネントトラックタイプに基づいて各アトラスタイルのそれぞれに対応するコンポーネントトラックを取得してもよい。例えば、該タイル情報に対応するタイル情報タイプが色情報タイプである場合、コンピュータ機器は、該タイル情報に関連するアトラスタイルに対応するコンポーネントトラックタイプを属性コンポーネントタイプとして決定してもよく、該タイル情報に対応するタイル情報タイプが位置情報タイプである場合、コンピュータ機器は、該タイル情報に関連するアトラスタイルに対応するコンポーネントトラックタイプを幾何学的コンポーネントタイプなどとして決定してもよい。ここで、該アトラストラック204は、1群のコンポーネントトラックを含むトラックであってもよく、即ち、アトラストラック204は、少なくとも2つのコンポーネントトラックと、各コンポーネントトラックにそれぞれ対応するアトラスタイルとを含んでもよい。ここで、1つのアトラスタイルは、1つのコンポーネントトラックに対応してもよいし、少なくとも2つのコンポーネントトラックに対応してもよいし、1つのコンポーネントトラックは、少なくとも2つのアトラスタイルに対応してもよいが、これらに限定されない。好ましくは、コンピュータ機器がボリュメトリックビデオに対応するターゲットファイルを生成する場合、該少なくとも2つのコンポーネントトラックの数はkである。
次に、図3を参照しながら説明する。図3は、本発明の実施例に係るデータ処理のシナリオの概略図である。図3に示すように、コンピュータ機器301は、k個のコンポーネントトラックにそれぞれ対応するコンポーネント関連情報302を取得してもよく、コンポーネント関連情報302は、k個のコンポーネントトラック及び各コンポーネントトラックにそれぞれ対応するアトラスタイル、例えば、コンポーネントトラック1及びコンポーネントトラック1に対応するアトラスタイル、コンポーネントトラック2及びコンポーネントトラック2に対応するアトラスタイル、並びにコンポーネントトラックk及びコンポーネントトラックkに対応するアトラスタイルなどを含む。ここで、各コンポーネントトラックは、コンポーネントトラックデータボックスを含む。コンピュータ機器301は、k個のコンポーネントトラック及び各コンポーネントトラックのコンポーネント関連情報302をカプセル化し、ターゲットファイルを取得し、該ターゲットファイルをユーザ装置303に送信してもよい。ユーザ装置303は、ターゲットファイルから必要なコンポーネントトラックを取得し、該コンポーネントトラックのコンポーネント関連情報をデカプセル化し、タイル表示内容304を取得してもよい。さらに、ユーザ装置303は、タイル表示内容304を表示してもよい。
なお、コンピュータ機器は、端末装置又はサーバを含み、ユーザ端末(User Equipment:UE)であってもよいが、これらに限定されない。ユーザ装置は、端末装置又はサーバを含んでもよいが、これらに限定されない。言い換えれば、コンピュータ機器は、サーバ又は端末装置であってもよいし、サーバと端末装置とからなるシステムであってもよい。ここで、上述した端末装置は、電子機器であってもよく、該電子機器は、携帯電話、タブレットコンピュータ、デスクトップコンピュータ、ラップトップコンピュータ、ハンドヘルドコンピュータ、車載デバイス、拡張現実/仮想現実(Augmented Reality/Virtual Reality:AR/VR)デバイス、ヘッドマウントディスプレイ、スマートテレビ、ウェアラブルデバイス、スマートスピーカー、デジタルカメラ、カメラ、及び他のネットワークアクセス機能を有するモバイルインターネットデバイス(mobile internet device:MID)、又は列車、船、飛行機などのシナリオにおける端末装置などを含むが、これらに限定されない。ここで、上述したサーバは、独立した物理サーバであってもよく、複数の物理サーバから構成されるサーバクラスタ又は分散型システムであってもよく、或いは、クラウドサービス、クラウドデータベース、クラウドコンピューティング、クラウド関数、クラウドストレージ、ネットワークサービス、クラウド通信、ミドルウェアサービス、ドメインネームサービス、セキュリティサービス、車両道路協同、コンテンツ配信ネットワーク(Content Delivery Network:CDN)、並びにビッグデータ及び人工知能プラットフォームなどの基礎クラウドコンピューティングサービスを提供するクラウドサーバであってもよい。
ここで、本明細書における「又は」とは、複数のもののうちの任意の1つ又は複数のものを意味し、例えば、「A又はB」とは、「A」、「B」及び「AとB」を意味する。
次に、図4を参照しながら説明する。図4は、本発明の実施例に係るデータカプセル化方法のフローチャートである。図4に示すように、該データカプセル化方法は、以下のステップを含む。
ステップS401:k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得する。
具体的に、各コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数(num_tilesと表記されてもよい)及び空間領域情報(3D_spatial_region_flagと表記されてもよい)を含む。ここで、該タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である。好ましくは、該コンポーネントトラックデータボックスは、アトラスID及びアトラスタイルIDなどをさらに含んでもよい。
好ましくは、1つ又は少なくとも2つのトラックグループ区分情報が存在してもよく、各トラックグループ区分情報は、それぞれ1つのトラックグループ区分方法に対応する。ここで、該トラックグループ区分情報は、必要に応じて変更してもよく、例えば、トラックグループ区分情報を追加し、或いはトラックグループ区分情報を削除してもよい。
1つのトラックグループ区分方法では、各コンポーネントトラックに対応するアトラスタイルは、第1のアトラスタイル及び第2のアトラスタイルを含み、即ち、第1のコンポーネントトラックに含まれる第1のアトラスタイル及び第2のコンポーネントトラックに含まれる第2のアトラスタイルを含む。第1のアトラスタイルの第1のアトラスタイルIDに関連するアトラスIDと第2のアトラスタイルの第2のアトラスタイルIDに関連するアトラスIDとが同一である場合、第1のアトラスタイルと第2のアトラスタイルとは、同一のタイルトラックグループに属し、即ち、第1のアトラスタイルに対応する第1のコンポーネントトラック、及び第2アトラスタイルに対応する第2のコンポーネントトラックを同一のタイルトラックグループに追加してもよい。この場合、各タイルトラックグループは、1つのアトラスに対応するコンポーネントトラックの情報を示し、即ち、1つのタイルトラックグループにおけるコンポーネントトラックに対応するアトラスタイルは同一のアトラスに属すると見なしてもよい。
1つのトラックグループ区分方法では、コンポーネントトラックは、コンポーネントトラックタイプをさらに含む。k個のコンポーネントトラックは、第1のコンポーネントトラック及び第2のコンポーネントトラックを含むと仮定すると、第1のコンポーネントトラックの第1のコンポーネントトラックタイプと第2のコンポーネントトラックの第2のコンポーネントトラックタイプとが同一であり、且つ第1のコンポーネントトラックに対応するアトラスタイルに関連するアトラスIDと第2のコンポーネントトラックに対応するアトラスタイルに関連するアトラスIDとが同一である場合、第1のコンポーネントトラックに対応するアトラスタイルと第2のコンポーネントトラックに対応するアトラスタイルとは、同一のタイルトラックグループに属する。言い換えれば、同一のタイルトラックグループに含まれるコンポーネントトラックのコンポーネントトラックタイプは同一であり、且つ該コンポーネントトラックに対応するアトラスタイルは同一のアトラスに属する。
ここで、該コンポーネントトラックデータボックスは、トラックグループデータボックスを含み、該トラックグループデータボックスは、アトラスID及びアトラスタイルIDを含み、アトラスIDは、アトラスタイルが属するアトラスのIDを示す。好ましくは、アトラスタイルIDがアトラスIDに関連する場合、アトラスタイルIDに対応するアトラスタイルは、アトラスIDに対応するアトラスに属する。ここで、該トラックグループデータボックスは、タイル数及び空間領域情報などをさらに含んでもよい。
好ましくは、コンポーネントトラックデータボックスは、コンポーネント情報データボックスを含んでもよく、コンポーネント情報データボックスは、データボックスタイプを含んでもよく、データボックスタイプは、コンポーネント情報データボックスにより指示される、コンポーネント情報データボックスが属するコンポーネントトラックの情報を示し、k個のコンポーネントトラックは、ターゲットコンポーネントトラックを含む。具体的には、該コンポーネント情報データボックスは、データボックスタイプ、コンポーネント情報データボックスが属する親データボックス(例えばSchemeInformationBoxというデータボックスなど)、実行状態(強制実行状態及びオプション実行状態などを含む)、及びデータボックス数などを含んでもよく、該コンポーネント情報データボックスは、タイル数、空間領域情報及びアトラスIDなどをさらに含んでもよい。ターゲットコンポーネントトラックにコンポーネント情報データボックスをカプセル化する場合、コンポーネント情報データボックスは、ターゲットコンポーネントトラックに対応するアトラスタイル及び空間情報を示す。
好ましくは、該コンポーネントトラックデータボックスは、トラックグループデータボックス又はコンポーネント情報データボックスのうちの1つ又は少なくとも2つを含んでもよく、ここで、該トラックグループデータボックスとコンポーネント情報データボックスとのコンポーネントトラックにおける位置は異なる。
例えば、図5を参照しながら説明する。図5は、本発明の実施例に係るトラックグループ区分の概略図である。図5に示すように、コンピュータ機器は、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイル、例えば、コンポーネントトラック1(track11と表記される)、コンポーネントトラック2(track12と表記される)、コンポーネントトラック3(track13と表記される)及びコンポーネントトラック4(track14と表記される)を取得する。ここで、track11に対応するコンポーネントトラックタイプは、幾何学的コンポーネントタイプであり、アトラスタイル1(tile1と表記される)に対応し、track12に対応するコンポーネントトラックタイプは、幾何学的コンポーネントタイプであり、アトラスタイル2(tile2と表記される)に対応し、track13に対応するコンポーネントトラックタイプは、属性コンポーネントタイプであり、アトラスタイル3(tile3と表記される)に対応し、track14に対応するコンポーネントトラックタイプは、属性コンポーネントタイプであり、アトラスタイル4(tile4と表記される)に対応する。好ましくは、該コンポーネントトラックタイプは、プレースホルダコンポーネントタイプ、幾何学的コンポーネントタイプ、属性コンポーネントタイプ及びパッケージコンポーネントタイプなどを含んでもよいが、これらに限定されない。
ステップS402:コンポーネントトラックに含まれるコンポーネントトラックデータボックスに従って、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得する。
具体的には、コンピュータ機器は、トラックグループ区分情報を取得し、トラックグループ区分情報に基づいて、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスから、k個のコンポーネントトラックのコンポーネントトラック情報を取得してもよい。該トラックグループ区分情報は、k個のコンポーネントトラックをグループ分けする方式を示す。例えば、該トラックグループ区分情報がアトラスに基づくトラックグループ区分方法を示す場合、コンピュータ機器により取得されたコンポーネントトラック情報は、k個のコンポーネントトラックにそれぞれ対応するアトラスタイルが属するアトラスを含んでもよい。該トラックグループ区分情報は、アトラス及びコンポーネントトラックタイプに基づくトラックグループ区分方法を示す場合、コンピュータ機器により取得されたコンポーネントトラック情報は、k個のコンポーネントトラックにそれぞれ対応するアトラスタイルが属するアトラス、及び各コンポーネントトラックのコンポーネントトラックタイプなどを含んでもよい。トラックグループ区分情報及びコンポーネントトラック情報に基づいてk個のコンポーネントトラックを区分し、M個のタイルトラックグループを取得する。Mは正の整数である。M個のタイルトラックグループ及び各タイルトラックグループに関連するアトラスタイルをカプセル化し、ターゲットファイルを取得する。
具体的には、1つのトラックグループ区分方法では、トラックグループ区分情報は、アトラス区分情報を含み、k個のコンポーネントトラックのコンポーネントトラック情報は、k個のコンポーネントトラックのそれぞれに対応するアトラスタイルに関連するアトラスIDを含み、アトラスIDは、アトラスタイルが属するアトラスのIDを示す。トラックグループ区分情報及びコンポーネントトラック情報に基づいてk個のコンポーネントトラックを区分し、M個のタイルトラックグループを取得する際に、コンピュータ機器は、k個のコンポーネントトラックにおいて、アトラス区分情報に基づいて、同一のアトラスIDに関連するアトラスタイルに対応するコンポーネントトラックをグループ分けし、M個のタイルトラックグループを取得してもよい。
1つのトラックグループ区分方法では、トラックグループ区分情報は、アトラスコンポーネント区分情報を含み、k個のコンポーネントトラックのコンポーネントトラック情報は、k個のコンポーネントトラックのそれぞれに対応するアトラスタイルに関連するアトラスID、及びk個のコンポーネントトラックのそれぞれに対応するコンポーネントトラックタイプを含み、アトラスIDは、前記アトラスタイルが属するアトラスのIDを示す。トラックグループ区分情報及びコンポーネントトラック情報に基づいてk個のコンポーネントトラックを区分し、M個のタイルトラックグループを取得する際に、コンピュータ機器は、k個のコンポーネントトラックにおいて、アトラスコンポーネント区分情報に基づいて、同一のコンポーネントトラックタイプを有し、且つ同一のアトラスIDに関連するコンポーネントトラックをグループ分けし、M個のタイルトラックグループを取得してもよい。
好ましくは、コンピュータ機器は、コンポーネントトラック情報に基づいて、k個のコンポーネントトラックのそれぞれに対応するコンポーネントトラックタイプ、及びk個のコンポーネントトラックのそれぞれに対応するアトラスタイルが属するアトラスIDを決定してもよい。アトラスIDは、アトラスタイルが属するボリュメトリックビデオのアトラスのIDを示す。k個のコンポーネントトラックに区分すべきコンポーネントトラックが存在する場合、区分すべきコンポーネントトラックに対応するアトラスタイルが属するアトラスIDに基づいて、区分すべきコンポーネントトラックを少なくとも2つのコンポーネントサブトラックに分割する。区分すべきコンポーネントトラックは、少なくとも2つのアトラスタイルに対応し、且つ少なくとも2つのアトラスタイルのそれぞれに対応するアトラスIDが異なるコンポーネントトラックであり、同一のコンポーネントサブトラックに対応するコンポーネントタイルは、同一のアトラスIDに関連する。例えば、コンポーネントトラックAに対応するアトラスタイル1及びアトラスタイル2が存在し、ここで、該アトラスタイル1がアトラスID1に対応し、該アトラスタイル2がアトラスID2に対応する場合、該コンポーネントトラックAを区分すべきコンポーネントトラックとして決定し、区分すべきコンポーネントトラックを少なくとも2つのコンポーネントサブトラックに分割する。該少なくとも2つのコンポーネントサブトラックは、コンポーネントサブトラック1(アトラスタイル1に対応する)及びコンポーネントサブトラック2(アトラスタイル2に対応する)を含む。次に、少なくとも2つのコンポーネントサブトラック及び通常コンポーネントトラックを候補コンポーネントトラックとして決定する。通常コンポーネントトラックは、k個のコンポーネントトラックのうちの区分すべきコンポーネントトラック以外のコンポーネントトラックである。同一のコンポーネントトラックタイプを有し、且つ同一のアトラスIDに関連する候補コンポーネントトラックを区分し、M個のタイルトラックグループを取得する。
ここで、M個のタイルトラックグループのうちのi番目のタイルトラックグループに対応するコンポーネントトラックタイプ情報のトラックインデックスiを取得する。iはM以下の正の整数である。i番目のタイルトラックグループについてトラックインデックスiを追加し、トラックインデックスiに基づいて、i番目のタイルトラックグループとi番目のタイルトラックグループに含まれるコンポーネントトラックに対応するアトラスタイルとを関連付ける。関連付け結果に基づいてM個のタイルトラックグループ及び各タイルトラックグループに関連するアトラスタイルをカプセル化し、ターゲットファイルを取得する。ここで、該トラックインデックスは、文字列により表されてもよく、該文字列は、トラックインデックスの生成順序に基づいて生成されてもよく、即ち、トラックインデックスの生成順序を表してもよいし、ランダムに生成された一意のインデックスであってもよいし、或いは、コンポーネントトラックが持つデータタイプに基づいて決定されてもよいが、これらに限定されない。
例えば、該トラックインデックスは、表1に示すものを参照してもよい。
例えば、図5に示すように、コンポーネントトラック1(track11)及びコンポーネントトラック2(track12)がいずれも幾何学的コンポーネントタイプに対応し、コンポーネントトラック3(track13)及びコンポーネントトラック4(track14)がいずれも属性コンポーネントタイプに対応する場合、コンピュータ機器は、コンポーネントトラックタイプに基づいて、track11及びtrack12を1つのトラックグループ、即ち、タイルトラックグループ1に配置し、track13及びtrack14を1つのトラックグループ、即ち、タイルトラックグループ2に配置してもよい。好ましくは、表1に基づいて、トラックインデックス「v3vg」を用いてタイルトラックグループ1をラベル付けし、track11及びtrack12のそれぞれに対応するアトラスタイルをタイルトラックグループ1に関連付け、タイルトラックグループ1をアトラストラックに関連付けてもよい(図2参照)。トラックインデックス「v3va」を用いてタイルトラックグループ2をラベル付けし、track13及びtrack14のそれぞれに対応するアトラスタイルをタイルトラックグループ2に関連付け、タイルトラックグループ2をアトラストラックに関連付けてもよい(図2参照)。
本発明の実施例は、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得し、コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数であり、コンポーネントトラックデータボックスに従って、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得する。以上のプロセスによれば、各コンポーネントトラックに1つのコンポーネントトラックデータボックスをカプセル化することができ、該コンポーネントトラックデータボックスは所在するコンポーネントトラックの関連情報を示す。アトラスタイル情報とコンポーネントトラック(即ち、コンポーネントタイルとコンポーネントトラック)などの関連関係を単一のコンポーネントトラックの粒度に精緻化することができ、できるだけ全面的にコンポーネントトラックの情報を保持することができ、カプセル化して得られたターゲットファイルにおけるコンポーネントトラックの情報をより整然化と精緻化することができる。また、該ターゲットファイルをユーザ装置に送信した後、該ユーザ装置は、必要なコンポーネントトラックを精確に選択することができ、部分的なデカプセル化及び部分的なデコーディングの目的に達成することができるため、ターゲットファイルに全面的にデカプセル化とデコーディングを行う必要がなく、データ処理にかかる時間及びリソースを節約し、データ処理の精確性及び効率を向上させることができる。
次に、図6を参照しながら説明する。図6は、本発明の実施例に係るデータデカプセル化方法のフローチャートである。図6に示すように、該方法は、以下のステップを含む。
ステップS601:ターゲットファイルにおけるk個のコンポーネントトラックを取得し、該コンポーネントトラックは、コンポーネントトラックデータボックスを含む。
具体的には、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である。
ステップS602:コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得する。
具体的には、ターゲットコンポーネントトラックに対する表示要求に応答する場合、ターゲットファイルからターゲットコンポーネントトラックに含まれるターゲットコンポーネントトラックデータボックスを取得し、ターゲットコンポーネントトラックデータボックスからターゲットコンポーネントトラックに対応するターゲットタイル数を取得する。ここで、該ターゲットコンポーネントトラックデータボックスのコンポーネントトラックにおける位置が既知であり、コンピュータ機器は、データボックス位置を取得し、ターゲットコンポーネントトラックにおけるデータボックス位置においてターゲットコンポーネントトラックデータボックスを取得してもよい。好ましくは、該ターゲットコンポーネントトラックデータボックスは、トラックグループデータボックスであってもよいし、アセンブリ情報データボックスであってもよいし、トラックグループデータボックス及びコンポーネント情報データボックスを含んでもよい。コンピュータ機器がターゲットトラックコンポーネントに含まれるターゲットコンポーネントトラックデータボックスを決定し、且つ該ターゲットコンポーネントトラックデータボックスのターゲットデータボックス位置を取得した場合、ターゲットコンポーネントトラックにおけるターゲットデータボックス位置においてターゲットコンポーネントトラックデータボックスを取得する。コンピュータ機器がターゲットコンポーネントトラックデータボックスの構成要素を取得しておらず、或いは該ターゲットコンポーネントトラックデータボックスにトラックグループデータボックス及びコンポーネント情報データボックスが含まれる場合、トラックグループデータボックスに対応する第1のデータボックス位置及びコンポーネント情報データボックスに対応する第2のデータボックス位置を取得し、ターゲットコンポーネントトラックの第1のデータボックス位置及び第2のデータボックス位置において検索を行い、発見されたデータボックスに基づいて後続処理を行ってもよい。言い換えれば、該トラックグループデータボックスとコンポーネント情報データボックスとは相互に代替してもよく、実質的には同一の情報を示してもよい。ここで、該ターゲットコンポーネントトラックは、k個のコンポーネントトラックのうちの任意の1つのコンポーネントトラックであってよい。
次に、コンピュータ機器は、ターゲットタイル数に基づいてターゲットファイルに対してh回の反復的なデカプセル化を行い、ターゲットコンポーネントトラックに対応するタイル表示内容を取得してもよい。hは前記ターゲットタイル数である。言い換えれば、該ターゲットコンポーネントトラックはh個のアトラスタイルに対応し、ターゲットファイルにおけるターゲットコンポーネントトラックに対してh回の反復的なデカプセル化を行い、h個のアトラスタイルのそれぞれに対応するアトラスタイル情報を取得する。
処理すべきアトラスタイルに対する表示要求に応答する場合、処理すべきアトラスタイルの処理すべきアトラスタイルIDを取得する。ターゲットファイルからk個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスを取得し、コンポーネントトラックデータボックスにおけるタイル数及び処理すべきアトラスタイルIDに基づいて、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスに対して走査検索を行う。具体的には、該コンポーネントトラックは、h個のアトラスタイルに対応し、即ち、該コンポーネントトラックに含まれるコンポーネントトラックデータボックスは、該コンポーネントトラックに対応するh個のアトラスタイルのアトラスタイルIDを含み、コンピュータ機器は、タイル数hに基づいて、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスにおけるアトラスタイルIDを走査検索する。h回検索しても処理すべきアトラスタイルIDが取得されていない場合、現在検索しているコンポーネントトラックに処理すべきアトラスタイルIDが存在しないことを意味する。次に、処理すべきアトラスタイルIDが発見されたコンポーネントトラックデータボックスが属するコンポーネントトラックを処理すべきコンポーネントトラックとして決定し、処理すべきコンポーネントトラックに対してデカプセル化処理を行い、処理すべきアトラスタイルに対応するタイル表示内容を取得する。図5に示すように、処理すべきアトラスタイルがtile1である場合、コンピュータ機器は、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスに対して走査検索を行い、コンポーネントトラック1及びコンポーネントトラック3を含む処理すべきコンポーネントトラックを取得する。
また、好ましくは、コンピュータ機器は、コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得し、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスにおける空間領域情報に基づいて、ボリュメトリックビデオにおけるk個のコンポーネントトラックが所在する空間領域を決定し、ボリュメトリックビデオにおけるk個のコンポーネントトラックが所在する空間領域、及び各コンポーネントトラックに対応するアトラスタイルに基づいて、タイル表示内容を生成してもよい。
好ましくは、ターゲットコンポーネントトラックに対する表示要求に応答する場合、コンピュータ機器は、ターゲットファイルからターゲットトラックコンポーネントを取得し、ターゲットトラックコンポーネントに含まれるターゲットコンポーネントトラックデータボックスに従ってターゲットトラックコンポーネントに対してデカプセル化処理を行い、ターゲットトラックコンポーネントに対応する符号化ビットストリームを取得してもよい。また、符号化ビットストリームを復号し、符号化ビットストリームに対応する復号信号を生成してもよい。また、ターゲットコンポーネントトラックに対応するアトラスタイルデータを取得し、アトラスタイルデータに基づいてターゲットコンポーネントトラックに対応するアトラスタイルの点群情報を決定してもよい。点群情報に基づいて、ターゲットコンポーネントトラックに対応するタイル表示内容を決定してもよい。
本発明の実施例は、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得し、コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数であり、コンポーネントトラックデータボックスに従って、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得する。以上のプロセスによれば、各コンポーネントトラックに1つのコンポーネントトラックデータボックスをカプセル化することができ、該コンポーネントトラックデータボックスは所在するコンポーネントトラックの関連情報を示す。アトラスタイル情報とコンポーネントトラック(即ち、コンポーネントタイルとコンポーネントトラック)などの関連関係を単一のコンポーネントトラックの粒度に精緻化することができ、できるだけ全面的にコンポーネントトラックの情報を保持することができ、カプセル化して得られたターゲットファイルにおけるコンポーネントトラックの情報をより整然化と精緻化することができる。また、該ターゲットファイルをユーザ装置に送信した後、該ユーザ装置は、必要なコンポーネントトラックを精確に選択することができ、部分的なデカプセル化及び部分的なデコーディングの目的に達成することができるため、ターゲットファイルに全面的にデカプセル化とデコーディングを行う必要がなく、データ処理にかかる時間及びリソースを節約し、データ処理の精確性及び効率を向上させることができる。
次に、図7を参照しながら説明する。図7は、本発明の実施例に係るデータ処理のシナリオの概略図である。図7に示すように、実世界又は合成視覚シーン(A)は、複数のレンズ及びセンサを有するカメラ又は仮想カメラの群によりキャプチャされ、実世界又は合成視覚シーン(A)はボリュメトリックビデオなどを意味してもよく、コンピュータ機器の収集結果は、ソースボリュメトリックデータ(B)であり、該ソースボリュメトリックデータを符号化し、1つのアトラスビットストリーム、最大1つの占有ビットストリーム、1つの幾何学的ビットストリーム、及びゼロ又は少なくとも1つの属性ビットストリームを含む符号化されたV3Cビットストリーム(Ev)を取得する。次に、コンピュータ機器は、特定のメディアコンテナファイルフォーマットに従って、1つ又は複数の符号化されたV3Cビットストリームをファイル/セグメントのカプセル化して、ローカル再生のためのメディアファイル(F)、又はストリーミング伝送のための初期化セグメント及びメディアセグメントのシーケンス(Fs)を取得してもよい。ここで、該メディアコンテナファイルフォーマットは、ISO/IEC 14496-12に規定されるISOベースメディアファイルフォーマットであってもよい。配信メカニズムに基づいて初期化セグメント及びメディアセグメントのシーケンス(Fs)をユーザ装置に送信してもよい。
また、ファイルカプセル化装置により出力されたメディアファイル(F)は、ファイルデカプセル化装置の入力とするファイル(F’)と同一である。ファイルデカプセル化装置は、ファイル(F’)又は受信されたセグメント(Fs’)を処理してもよく、即ち、ファイル(F’)又は受信されたセグメント(Fs’)を処理してファイル/セグメントのデカプセル化を行い、符号化ビットストリーム(Ev’)を抽出し、該符号化ビットストリームを復号して復号信号(D’)を取得してもよい。現在の視聴方向又はビューポートに基づいて、復号信号(D’)を再構成し、再構成情報(B’)を取得し、再構成情報(B’)をレンダリングし、タイル表示内容(A’)を取得し、ユーザ装置に該タイル表示内容(A’)を表示し、例えば、ヘッドマウントディスプレイ又は他の任意のディスプレイ装置のスクリーンなどに表示してもよい。好ましくは、現在の視聴方向は、ヘッドトラッキング又はアイトラッキング機能により決定される。好ましくは、コンピュータ機器は、現在の視聴方向をポリシーモジュールに渡し、該ポリシーモジュールに基づいて受信すべき軌跡を決定してもよい。
ここで、1つ又は複数の符号化されたV3Cビットストリームに対してファイル/セグメントのカプセル化を行う際に、本明細書の図4に示す各ステップを用いて、1つ又は複数の符号化されたV3Cビットストリームに対してカプセル化処理を行い、メディアファイル(F)又は初期化セグメント及びメディアセグメントのシーケンス(Fs)を含むターゲットファイルを取得してもよい。処理ファイル(F’)又は受信されたセグメント(Fs’)に対してファイル/セグメントのデカプセル化を行う際に、図6における各ステップを用いて、処理ファイル(F’)又は受信されたセグメント(Fs’)に対してファイル/セグメントのデカプセル化を行い、タイル表示内容を取得してもよい。
図8は、本発明の実施例に係るデータ処理装置の概略図である。上述のデータ処理装置は、コンピュータ機器内で実行されるコンピュータ読み取り可能な命令(プログラムコードを含む)であってもよく、例えば、該データ処理装置は、アプリケーションソフトウェアである。該装置は、本発明の実施例に係る方法の対応するステップを実行するために使用されてもよい。図8に示すように、データ処理装置800は、上述した図4に対応する実施例のコンピュータ機器に適用されてもよく、具体的には、該装置は、データ取得モジュール11及びデータカプセル化モジュール12を含んでもよい。
データ取得モジュール11は、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得する。コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である。
データカプセル化モジュール12は、コンポーネントトラックデータボックスに従って、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得する。
ここで、コンポーネントトラックデータボックスは、トラックグループデータボックスを含み、トラックグループデータボックスは、アトラスID及びアトラスタイルIDを含み、アトラスIDは、アトラスタイルが属するアトラスのIDを示す。
アトラスタイルIDがアトラスIDに関連する場合、アトラスタイルIDに対応するアトラスタイルは、アトラスIDに対応するボリュメトリックビデオのアトラスに属する。
ここで、コンポーネントトラックデータボックスは、トラックグループデータボックスを含み、トラックグループデータボックスは、アトラスID及びアトラスタイルIDを含み、アトラスIDは、アトラスタイルが属するアトラスのIDを示し、各コンポーネントトラックに対応するアトラスタイルは、第1のアトラスタイル及び第2のアトラスタイルを含む。
第1のアトラスタイルの第1のアトラスタイルIDに関連するアトラスIDと第2のアトラスタイルの第2のアトラスタイルIDに関連するアトラスIDとが同一である場合、第1のアトラスタイルと前記第2のアトラスタイルとは、同一のタイルトラックグループに属し、同一のタイルトラックグループにおけるコンポーネントトラックに対応するアトラスタイルは、同一のアトラスに属する。
ここで、コンポーネントトラックは、コンポーネントトラックタイプをさらに含み、k個のコンポーネントトラックは、第1のコンポーネントトラック及び第2のコンポーネントトラックを含む。
第1のコンポーネントトラックの第1のコンポーネントトラックタイプと第2のコンポーネントトラックの第2のコンポーネントトラックタイプとが同一である場合、第1のコンポーネントトラックに対応するアトラスタイルと第2のコンポーネントトラックに対応するアトラスタイルとは、同一のタイルトラックグループに属する。
ここで、コンポーネントトラックデータボックスは、コンポーネント情報データボックスを含み、コンポーネント情報データボックスは、データボックスタイプを含み、データボックスタイプは、コンポーネント情報データボックスにより指示される、コンポーネント情報データボックスが属するコンポーネントトラックの情報を示し、k個のコンポーネントトラックは、ターゲットコンポーネントトラックを含む。
ターゲットコンポーネントトラックにコンポーネント情報データボックスをカプセル化する場合、コンポーネント情報データボックスは、ターゲットコンポーネントトラックに対応するアトラスタイル及び空間領域情報を含む。
ここで、データカプセル化モジュール12は、以下のユニットを含む。
情報取得ユニット121は、トラックグループ区分情報を取得し、トラックグループ区分情報に基づいて、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスから、k個のコンポーネントトラックのコンポーネントトラック情報を取得する。トラックグループ区分情報は、k個のコンポーネントトラックをグループ分けする方式を示す。
トラックグループ分けユニット122は、トラックグループ区分情報及びコンポーネントトラック情報に基づいてk個のコンポーネントトラックを区分し、M個のタイルトラックグループを取得する。Mは正の整数である。
トラックカプセル化ユニット123は、M個のタイルトラックグループ及び各タイルトラックグループに関連するアトラスタイルをカプセル化し、ターゲットファイルを取得する。
ここで、トラックグループ区分情報は、アトラス区分情報を含み、k個のコンポーネントトラックのコンポーネントトラック情報は、k個のコンポーネントトラックのそれぞれに対応するアトラスタイルに関連するアトラスIDを含み、アトラスIDは、アトラスタイルが属するアトラスのIDを示す。
トラックグループ分けユニット122は、以下のユニットを含む。
アトラスグループ分けサブユニット1221は、k個のコンポーネントトラックにおいて、アトラス区分情報に基づいて、同一のアトラスIDに関連するアトラスタイルに対応するコンポーネントトラックをグループ分けし、M個のタイルトラックグループを取得する。
ここで、トラックグループ区分情報は、アトラスコンポーネント区分情報を含み、k個のコンポーネントトラックのコンポーネントトラック情報は、k個のコンポーネントトラックのそれぞれに対応するアトラスタイルに関連するアトラスID、及びk個のコンポーネントトラックのそれぞれに対応するコンポーネントトラックタイプを含み、アトラスIDは、アトラスタイルが属するアトラスのIDを示す。
トラックグループ分けユニット122は、以下のユニットを含む。
タイプグループ分けサブユニット1222は、k個のコンポーネントトラックにおいて、アトラスコンポーネント区分情報に基づいて、同一のコンポーネントトラックタイプを有し、且つ同一のアトラスIDに関連するコンポーネントトラックをグループ分けし、M個のタイルトラックグループを取得する。
ここで、トラックグループ分けユニット122は、以下のユニットを含む。
タイプ決定サブユニット1223は、コンポーネントトラック情報に基づいて、k個のコンポーネントトラックのそれぞれに対応するコンポーネントトラックタイプ、及びk個のコンポーネントトラックのそれぞれに対応するアトラスタイルが属するアトラスIDを決定する。アトラスIDは、アトラスタイルが属するボリュメトリックビデオのアトラスのIDを示す。
トラック分割サブユニット1224は、k個のコンポーネントトラックに区分すべきコンポーネントトラックが存在する場合、区分すべきコンポーネントトラックに対応するアトラスタイルが属するアトラスIDに基づいて、区分すべきコンポーネントトラックを少なくとも2つのコンポーネントサブトラックに分割する。区分すべきコンポーネントトラックは、少なくとも2つのアトラスタイルに対応し、且つ少なくとも2つのアトラスタイルのそれぞれに対応するアトラスIDが異なるコンポーネントトラックであり、同一のコンポーネントサブトラックに対応するコンポーネントタイルは、同一のアトラスIDに関連する。
トラック決定サブユニット1225は、少なくとも2つのコンポーネントサブトラック及び通常コンポーネントトラックを候補コンポーネントトラックとして決定する。通常コンポーネントトラックは、k個のコンポーネントトラックのうちの区分すべきコンポーネントトラック以外のコンポーネントトラックである。
トラックグループ分けサブユニット1226は、同一のコンポーネントトラックタイプを有し、且つ同一のアトラスIDに関連する候補コンポーネントトラックを区分し、M個のタイルトラックグループを取得する。
ここで、トラックカプセル化ユニット123は、以下のユニットを含む。
インデックス取得サブユニット1231は、M個のタイルトラックグループのうちのi番目のタイルトラックグループに対応するコンポーネントトラックタイプ情報のトラックインデックスiを取得する。iはM以下の正の整数である。
インデックス関連付けサブユニット1232は、i番目のタイルトラックグループについてトラックインデックスiを追加し、トラックインデックスiに基づいて、i番目のタイルトラックグループとi番目のタイルトラックグループに含まれるコンポーネントトラックに対応するアトラスタイルとを関連付ける。
ファイル生成サブユニット1233は、関連付け結果に基づいてM個のタイルトラックグループ及び各タイルトラックグループに関連するアトラスタイルをカプセル化し、ターゲットファイルを取得する。
本発明の実施例に係るデータ処理装置は、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得し、コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数であり、コンポーネントトラックデータボックスに従って、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得する。以上のプロセスによれば、各コンポーネントトラックに1つのコンポーネントトラックデータボックスをカプセル化することができ、該コンポーネントトラックデータボックスは所在するコンポーネントトラックの関連情報を示す。アトラスタイル情報とコンポーネントトラック(即ち、コンポーネントタイルとコンポーネントトラック)などの関連関係を単一のコンポーネントトラックの粒度に精緻化することができ、できるだけ全面的にコンポーネントトラックの情報を保持することができ、カプセル化して得られたターゲットファイルにおけるコンポーネントトラックの情報をより整然化と精緻化することができる。また、該ターゲットファイルをユーザ装置に送信した後、該ユーザ装置は、必要なコンポーネントトラックを精確に選択することができ、部分的なデカプセル化及び部分的なデコーディングの目的に達成することができるため、ターゲットファイルに全面的にデカプセル化とデコーディングを行う必要がなく、データ処理にかかる時間及びリソースを節約し、データ処理の精確性及び効率を向上させることができる。
図9を参照しながら説明する。図9は、本発明の実施例に係る他のデータ処理装置の概略図である。上述のデータ処理装置は、コンピュータ機器内で実行されるコンピュータ読み取り可能な命令(プログラムコードを含む)であってもよく、例えば、該データ処理装置は、アプリケーションソフトウェアである。該装置は、本発明の実施例に係る方法の対応するステップを実行するために使用されてもよい。図9に示すように、データ処理装置900は、上述した図6に対応する実施例のコンピュータ機器に適用されてもよく、具体的には、該装置は、トラック取得モジュール21及びデータデカプセル化モジュール22を含んでもよい。
トラック取得モジュール21は、ターゲットファイルにおけるk個のコンポーネントトラックを取得する。コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である。
データデカプセル化モジュール22は、コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得する。
ここで、データデカプセル化モジュール22は、以下のユニットを含む。
数取得ユニット221は、ターゲットコンポーネントトラックに対する表示要求に応答する場合、ターゲットファイルからターゲットコンポーネントトラックに含まれるターゲットコンポーネントトラックデータボックスを取得し、ターゲットコンポーネントトラックデータボックスからターゲットコンポーネントトラックに対応するターゲットタイル数を取得する。
デカプセル化反復ユニット222は、ターゲットタイル数に基づいてターゲットファイルに対してh回の反復的なデカプセル化を行い、ターゲットコンポーネントトラックに対応するタイル表示内容を取得する。hはターゲットタイル数である。
ここで、データデカプセル化モジュール22は、以下のユニットを含む。
ID取得ユニット223は、処理すべきアトラスタイルに対する表示要求に応答する場合、処理すべきアトラスタイルの処理すべきアトラスタイルIDを取得する。
データボックス検索ユニット224は、ターゲットファイルからk個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスを取得し、コンポーネントトラックデータボックスにおけるタイル数及び処理すべきアトラスタイルIDに基づいて、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスに対して走査検索を行う。
トラック選択ユニット225は、処理すべきアトラスタイルIDが発見されたコンポーネントトラックデータボックスが属するコンポーネントトラックを処理すべきコンポーネントトラックとして決定する。
トラックデカプセル化ユニット226は、処理すべきコンポーネントトラックに対してデカプセル化処理を行い、処理すべきアトラスタイルに対応するタイル表示内容を取得する。
ここで、データデカプセル化モジュール22は、以下のユニットを含む。
ファイルデカプセル化ユニット227は、コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得する。
空間決定ユニット228は、k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスにおける空間領域情報に基づいて、ボリュメトリックビデオにおけるk個のコンポーネントトラックが所在する空間領域を決定する。
内容生成ユニット229は、ボリュメトリックビデオにおけるk個のコンポーネントトラックが所在する空間領域、及び各コンポーネントトラックに対応するアトラスタイルに基づいて、タイル表示内容を生成する。
本発明の実施例に係るデータ処理装置は、ターゲットファイルにおけるk個のコンポーネントトラックを取得し、コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数であり、コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得する。以上のプロセスによれば、各コンポーネントトラックに1つのコンポーネントトラックデータボックスをカプセル化することができ、該コンポーネントトラックデータボックスは所在するコンポーネントトラックの関連情報を示す。アトラスタイル情報とコンポーネントトラック(即ち、コンポーネントタイルとコンポーネントトラック)などの関連関係を単一のコンポーネントトラックの粒度に精緻化することができる。ユーザ装置は、ターゲットファイルを受信した後、単一のコンポーネントトラックの粒度で、各コンポーネントトラックのコンポーネントトラックデータボックスに基づいて、各コンポーネントトラックの情報を取得することができる。ユーザ装置は、必要に応じて、ターゲットファイルにおける必要な部分に対してデカプセル化及びデコーディングなどの操作を行うことができ、データ処理にかかる時間及びリソースを節約することができるため、データ処理の精確性及び効率を向上させることができる。
図10を参照しながら説明する。図10は、本発明の実施例に係るコンピュータ機器の構成の概略図である。図10に示すように、本発明の実施例に係るコンピュータ機器は、1つ又は複数のプロセッサ1001と、メモリ1002と、入出力インターフェース1003とを含んでもよい。プロセッサ1001、メモリ1002、入出力インターフェース1003は、バス1004を介して接続されている。メモリ1002は、プログラム命令を含むコンピュータ読み取り可能な命令を記憶する。入出力インターフェース1003は、データを受信し、或いはデータを出力し、コンピュータ機器とユーザ装置との間のデータのインタラクションを実現する。プロセッサ1001は、メモリ1002に記憶されたプログラム命令を実行する。
プロセッサ1001は、コンピュータ機器内にある場合、以下の動作を実行する。
k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得する。コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である。
コンポーネントトラックデータボックスに従って、k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得する。
或いは、プロセッサ1001は、コンピュータ機器内にある場合、以下の動作を実行する。
ターゲットファイルにおけるk個のコンポーネントトラックを取得する。コンポーネントトラックは、コンポーネントトラックデータボックスを含み、コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、タイル数は、コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、空間領域情報は、コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である。
コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得する。
幾つかの実現可能な実施形態では、プロセッサ1001は、中央処理装置(central processing unit:CPU)であってもよく、他の汎用プロセッサ、デジタル信号プロセッサ(digital signal processor:DSP)、特定用途向け集積回路(application specific integrated circuit:ASIC)、既存のプログラマブルゲートアレイ(field-programmable gate array:FPGA)又は他のプログラマブル論理デバイス、個別ゲート又はトランジスタ論理デバイス、個別ハードウェア構成要素などであってもよい。汎用プロセッサは、マイクロプロセッサであってもよいし、任意の従来のプロセッサ等であってもよい。
メモリ1002は、読み取り専用メモリ及びランダムアクセスメモリを含んでもよく、プロセッサ1001及び入出力インターフェース1003に命令及びデータを提供する。メモリ1002の一部は、不揮発性ランダムアクセスメモリをさらに含んでもよい。例えば、メモリ1002は、デバイスタイプの情報をさらに記憶してもよい。
具体的な実施形態では、上述のコンピュータ機器は、上述の図4又は図6の各ステップに係る実施形態を、組み込まれた個々の機能モジュールによって実行することができ、具体的な実施形態は、上述の図4又は図6の各ステップに係る実施形態を参照することができ、ここでは説明しない。
本発明の実施例は、1つ又は複数のプロセッサと、メモリと、入出力インターフェースと、を含むコンピュータ機器を提供する。プロセッサによってメモリ内のコンピュータ命令を取得し、上記の図4又は図6に示す方法の各ステップを実行して、データ処理動作を行う。本発明の実施例は、各コンポーネントトラックに1つのコンポーネントトラックデータボックスをカプセル化することができ、該コンポーネントトラックデータボックスは所在するコンポーネントトラックの関連情報を示す。アトラスタイル情報とコンポーネントトラック(即ち、コンポーネントタイルとコンポーネントトラック)などの関連関係を単一のコンポーネントトラックの粒度に精緻化することができ、できるだけ全面的にコンポーネントトラックの情報を保持することができ、カプセル化して得られたターゲットファイルにおけるコンポーネントトラックの情報をより整然化と精緻化することができる。また、該ターゲットファイルをユーザ装置に送信した後、該ユーザ装置は、必要なコンポーネントトラックを精確に選択することができ、部分的なデカプセル化及び部分的なデコーディングの目的に達成することができるため、ターゲットファイルに全面的にデカプセル化とデコーディングを行う必要がなく、データ処理にかかる時間及びリソースを節約し、データ処理の精確性及び効率を向上させることができる。
本発明の実施例は、コンピュータ読み取り可能な命令が記憶された1つ又は複数のコンピュータ読み取り可能な記憶媒体であって、コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサを有するコンピュータ機器に図4又は図6における各ステップを含むデータ処理方法を実行させるように、プロセッサによりロードされて実行される、記憶媒体をさらに提供する。詳細は、図4又は図6の各ステップに係る実施形態を参照してもよく、ここでその説明を省略する。また、同様な方法を採用した有益な効果についても説明しない。本発明に係るコンピュータ読み取り可能な記憶媒体の実施形態において開示されていない技術的詳細については、本発明の方法の実施形態の説明を参照されたい。一例として、プログラム命令は、1つのコンピュータ機器上で実行されるように、又は1つの場所に配置された複数のコンピュータ機器上で実行されるように、又は通信ネットワークによって相互接続された複数の場所に配置された複数のコンピュータ機器上で実行されるように配置されてもよい。
本発明の実施例は、コンピュータ読み取り可能な命令を含むコンピュータプログラム製品であって、コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサにより実行される際に、本発明の実施例の方法のステップを実現する、コンピュータプログラム製品をさらに提供する。
上述したコンピュータ読み取り可能な記憶媒体は、上述した実施形態の何れかに係るデータ処理装置であってもよいし、コンピュータ機器のハードディスクやメモリなどのコンピュータ機器の内部記憶装置であってもよい。コンピュータ読み取り可能な記憶媒体は、コンピュータ機器に装備されたプラグインハードディスク、スマートメモリカード(smart media card:SMC)、セキュアデジタル(secure digital:SD)カード、フラッシュメモリカード(flash card)などのコンピュータ機器の外部記憶装置であってもよい。さらに、コンピュータ読み取り可能な記憶媒体は、コンピュータ機器の内部記憶ユニットと外部記憶装置の両方を含んでもよい。上記のコンピュータ読み取り可能な記憶媒体は、コンピュータ読み取り可能な命令及び該コンピュータ機器が必要とする他のプログラムとデータを記憶する。コンピュータ読み取り可能な記憶媒体は、出力されたデータ又は出力されるべきデータを一時的に記憶するために使用されてもよい。
本願の実施例の明細書及び特許請求の範囲、並びに図面における用語「含む」、並びにそれらの任意の変形は、排他的な包含をカバーすることを意図している。例えば、一連のステップ又はユニットを含むプロセス、方法、装置、製品、又はデバイスは、列挙されたステップ又はモジュールに限定されず、列挙されていないステップ又はモジュールを含んでもよいし、これらのプロセス、方法、装置、製品、又はデバイスに固有の他のステップユニットを含んでもよい。
当業者であれば、本明細書に開示された実施形態に関連して説明された様々な例の要素及びアルゴリズムステップは、電子ハードウェア、コンピュータソフトウェア、又はその両方の組み合わせで実装することができ、ハードウェア及びソフトウェアの互換性を明確に示すために、上記の説明では、様々な例の構成及びステップが機能的に一般的に説明されていることを理解するであろう。これらの機能がハードウェアで実行されるかソフトウェアで実行されるかは、特定のアプリケーションや設計上の制約によって異なる。当業者は、記載された機能を実現するために、特定のアプリケーションごとに異なる方法を使用することができるが、そのような実現は、本発明の範囲を超えるものとみなされるべきではない。
本発明の実施例に係る方法及び関連する装置は、本発明の実施例に係る方法のフローチャート及び/又は構造の概略図を参照して説明され、特に、コンピュータ読み取り可能な命令によって、方法のフローチャート及び/又は構造の概略図の各フロー及び/又はブロック、並びに、フローチャート及び/又はブロック図のフロー及び/又はブロックの組み合わせを実施してもよい。これらのコンピュータ読み取り可能な命令は、汎用コンピュータ、専用コンピュータ、組み込みプロセッサ、又は他のプログラミング可能なデータ処理装置のプロセッサに提供されて、コンピュータ又は他のプログラミング可能なデータ処理装置のプロセッサによって実行される命令が、フローチャートの1つ又は複数のフロー及び/又は構造図の1つ又は複数のブロックで指定される機能を実現する手段を生成するように、機器を生成することができる。これらのコンピュータ読み取り可能な命令は、コンピュータ又は他のプログラミング可能なデータ処理装置を特定の方法で動作させることができるコンピュータ読み取り可能なメモリに格納することもでき、その結果、コンピュータ読み取り可能なメモリに格納された命令は、フローチャートの1つ又は複数のフロー及び/又は構造図の1つ又は複数のブロックで指定された機能を実現する命令手段を含む製造物を生成する。これらのコンピュータ読み取り可能な命令は、コンピュータ又は他のプログラミング可能なデータ処理装置にロードされてもよく、その結果、コンピュータ又は他のプログラミング可能な装置上で一連の動作ステップが実行されて、コンピュータによって実現される処理が生成され、その結果、コンピュータ又は他のプログラミング可能な装置上で実行される命令は、フローチャートの1つ又は複数のフロー及び/又は構造概略図の1つ又は複数のブロックで指定される機能を実現するためのステップを提供する。
以上の開示されたのは、本発明の好ましい実施形態に過ぎず、それによって本発明の権利範囲を限定することはできないため、本発明の請求項によってなされた同等の変更は、本発明の範囲内のものである。
Claims (19)
- コンピュータ機器が実行するデータ処理方法であって、
k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得するステップであって、前記コンポーネントトラックは、コンポーネントトラックデータボックスを含み、前記コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、前記タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、前記空間領域情報は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、ステップと、
前記コンポーネントトラックデータボックスに従って、前記k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得するステップと、を含む、方法。 - 前記コンポーネントトラックデータボックスは、トラックグループデータボックスを含み、
前記トラックグループデータボックスは、アトラスID及びアトラスタイルIDを含み、
前記アトラスIDは、前記アトラスタイルが属するアトラスのIDを示し、
前記アトラスタイルIDが前記アトラスIDに関連する場合、前記アトラスタイルIDに対応するアトラスタイルは、前記アトラスIDに対応するアトラスに属する、請求項1に記載の方法。 - 前記コンポーネントトラックデータボックスは、トラックグループデータボックスを含み、
前記トラックグループデータボックスは、アトラスID及びアトラスタイルIDを含み、
前記アトラスIDは、前記アトラスタイルが属するアトラスのIDを示し、
前記各コンポーネントトラックに対応するアトラスタイルは、第1のアトラスタイル及び第2のアトラスタイルを含み、
前記第1のアトラスタイルの第1のアトラスタイルIDに関連するアトラスIDと前記第2のアトラスタイルの第2のアトラスタイルIDに関連するアトラスIDとが同一である場合、前記第1のアトラスタイルと前記第2のアトラスタイルとは、同一のタイルトラックグループに属し、
同一のタイルトラックグループにおけるコンポーネントトラックに対応するアトラスタイルは、同一のアトラスに属する、請求項1に記載の方法。 - 前記コンポーネントトラックは、コンポーネントトラックタイプをさらに含み、
前記k個のコンポーネントトラックは、第1のコンポーネントトラック及び第2のコンポーネントトラックを含み、
前記第1のコンポーネントトラックの第1のコンポーネントトラックタイプと前記第2のコンポーネントトラックの第2のコンポーネントトラックタイプとが同一である場合、前記第1のコンポーネントトラックに対応するアトラスタイルと前記第2のコンポーネントトラックに対応するアトラスタイルとは、同一のタイルトラックグループに属する、請求項1に記載の方法。 - 前記コンポーネントトラックデータボックスは、コンポーネント情報データボックスを含み、
前記コンポーネント情報データボックスは、データボックスタイプを含み、
前記データボックスタイプは、前記コンポーネント情報データボックスにより指示される、前記コンポーネント情報データボックスが属するコンポーネントトラックの情報を示し、
前記k個のコンポーネントトラックは、ターゲットコンポーネントトラックを含み、
前記ターゲットコンポーネントトラックに前記コンポーネント情報データボックスをカプセル化する場合、前記コンポーネント情報データボックスは、前記ターゲットコンポーネントトラックに対応するアトラスタイル及び空間領域情報を含む、請求項1に記載の方法。 - 前記コンポーネントトラックデータボックスに従って、前記k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得するステップは、
トラックグループ区分情報を取得し、前記トラックグループ区分情報に基づいて、前記k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスから、前記k個のコンポーネントトラックのコンポーネントトラック情報を取得するステップであって、前記トラックグループ区分情報は、前記k個のコンポーネントトラックをグループ分けする方式を示す、ステップと、
前記トラックグループ区分情報及び前記コンポーネントトラック情報に基づいて前記k個のコンポーネントトラックを区分し、M個のタイルトラックグループを取得するステップであって、Mは正の整数である、ステップと、
前記M個のタイルトラックグループ及び各タイルトラックグループに関連するアトラスタイルをカプセル化し、ターゲットファイルを取得するステップと、を含む、請求項1乃至5の何れかに記載の方法。 - 前記トラックグループ区分情報は、アトラス区分情報を含み、
前記k個のコンポーネントトラックのコンポーネントトラック情報は、前記k個のコンポーネントトラックのそれぞれに対応するアトラスタイルに関連するアトラスIDを含み、
前記アトラスIDは、前記アトラスタイルが属するアトラスのIDを示し、
前記トラックグループ区分情報及び前記コンポーネントトラック情報に基づいて前記k個のコンポーネントトラックを区分し、M個のタイルトラックグループを取得するステップは、
前記k個のコンポーネントトラックにおいて、前記アトラス区分情報に基づいて、同一のアトラスIDに関連するアトラスタイルに対応するコンポーネントトラックをグループ分けし、M個のタイルトラックグループを取得するステップ、を含む、請求項6に記載の方法。 - 前記トラックグループ区分情報は、アトラスコンポーネント区分情報を含み、
前記k個のコンポーネントトラックのコンポーネントトラック情報は、前記k個のコンポーネントトラックのそれぞれに対応するアトラスタイルに関連するアトラスID、及び前記k個のコンポーネントトラックのそれぞれに対応するコンポーネントトラックタイプを含み、
前記アトラスIDは、前記アトラスタイルが属するアトラスのIDを示し、
前記トラックグループ区分情報及び前記コンポーネントトラック情報に基づいて前記k個のコンポーネントトラックを区分し、M個のタイルトラックグループを取得するステップは、
前記k個のコンポーネントトラックにおいて、前記アトラスコンポーネント区分情報に基づいて、同一のコンポーネントトラックタイプを有し、且つ同一のアトラスIDに関連するコンポーネントトラックをグループ分けし、M個のタイルトラックグループを取得するステップ、を含む、請求項6に記載の方法。 - 前記トラックグループ区分情報及び前記コンポーネントトラック情報に基づいて前記k個のコンポーネントトラックを区分し、M個のタイルトラックグループを取得するステップは、
前記コンポーネントトラック情報に基づいて、前記k個のコンポーネントトラックのそれぞれに対応するコンポーネントトラックタイプ、及び前記k個のコンポーネントトラックのそれぞれに対応するアトラスタイルが属するアトラスIDを決定するステップであって、前記アトラスIDは、前記アトラスタイルが属するアトラスのIDを示す、ステップと、
前記k個のコンポーネントトラックに区分すべきコンポーネントトラックが存在する場合、前記区分すべきコンポーネントトラックに対応するアトラスタイルが属するアトラスIDに基づいて、前記区分すべきコンポーネントトラックを少なくとも2つのコンポーネントサブトラックに分割するステップであって、前記区分すべきコンポーネントトラックは、少なくとも2つのアトラスタイルに対応し、且つ前記少なくとも2つのアトラスタイルのそれぞれに対応するアトラスIDが異なるコンポーネントトラックであり、同一のコンポーネントサブトラックに対応するコンポーネントタイルは、同一のアトラスIDに関連する、ステップと、
前記少なくとも2つのコンポーネントサブトラック及び通常コンポーネントトラックを候補コンポーネントトラックとして決定するステップであって、前記通常コンポーネントトラックは、前記k個のコンポーネントトラックのうちの前記区分すべきコンポーネントトラック以外のコンポーネントトラックである、ステップと、
同一のコンポーネントトラックタイプを有し、且つ同一のアトラスIDに関連する候補コンポーネントトラックを区分し、M個のタイルトラックグループを取得するステップと、を含む、請求項6に記載の方法。 - 前記M個のタイルトラックグループ及び各タイルトラックグループに関連するアトラスタイルをカプセル化し、ターゲットファイルを取得するステップは、
前記M個のタイルトラックグループのうちのi番目のタイルトラックグループに対応するコンポーネントトラックタイプ情報のトラックインデックスiを取得するステップであって、iはM以下の正の整数である、ステップと、
前記i番目のタイルトラックグループについて前記トラックインデックスiを追加し、前記トラックインデックスiに基づいて、前記i番目のタイルトラックグループと前記i番目のタイルトラックグループに含まれるコンポーネントトラックに対応するアトラスタイルとを関連付けるステップと、
関連付け結果に基づいて前記M個のタイルトラックグループ及び各タイルトラックグループに関連するアトラスタイルをカプセル化し、ターゲットファイルを取得するステップと、を含む、請求項6に記載の方法。 - コンピュータ機器が実行するデータ処理方法であって、
ターゲットファイルにおけるk個のコンポーネントトラックを取得するステップであって、前記コンポーネントトラックは、コンポーネントトラックデータボックスを含み、前記コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、前記タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、前記空間領域情報は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、ステップと、
前記コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得するステップと、を含む、方法。 - 前記コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得するステップは、
ターゲットコンポーネントトラックに対する表示要求に応答する場合、ターゲットファイルから前記ターゲットコンポーネントトラックに含まれるターゲットコンポーネントトラックデータボックスを取得し、前記ターゲットコンポーネントトラックデータボックスから前記ターゲットコンポーネントトラックに対応するターゲットタイル数を取得するステップと、
前記ターゲットタイル数に基づいて前記ターゲットファイルに対してh回の反復的なデカプセル化を行い、前記ターゲットコンポーネントトラックに対応するタイル表示内容を取得するステップであって、hは前記ターゲットタイル数である、ステップと、を含む、請求項11に記載の方法。 - 前記コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得するステップは、
処理すべきアトラスタイルに対する表示要求に応答する場合、前記処理すべきアトラスタイルの処理すべきアトラスタイルIDを取得するステップと、
前記ターゲットファイルから前記k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスを取得し、前記コンポーネントトラックデータボックスにおけるタイル数及び前記処理すべきアトラスタイルIDに基づいて、前記k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスに対して走査検索を行うステップと、
前記処理すべきアトラスタイルIDが発見されたコンポーネントトラックデータボックスが属するコンポーネントトラックを処理すべきコンポーネントトラックとして決定するステップと、
前記処理すべきコンポーネントトラックに対してデカプセル化処理を行い、前記処理すべきアトラスタイルに対応するタイル表示内容を取得するステップと、を含む、請求項11に記載の方法。 - 前記コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得するステップは、
前記コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、前記k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得するステップと、
前記k個のコンポーネントトラックのそれぞれに含まれるコンポーネントトラックデータボックスにおける空間領域情報に基づいて、ボリュメトリックビデオにおける前記k個のコンポーネントトラックが所在する空間領域を決定するステップと、
ボリュメトリックビデオにおける前記k個のコンポーネントトラックが所在する空間領域、及び前記各コンポーネントトラックに対応するアトラスタイルに基づいて、タイル表示内容を生成するステップと、を含む、請求項11に記載の方法。 - データ処理装置であって、
k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルを取得するデータ取得モジュールであって、前記コンポーネントトラックは、コンポーネントトラックデータボックスを含み、前記コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、前記タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、前記空間領域情報は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、データ取得モジュールと、
前記コンポーネントトラックデータボックスに従って、前記k個のコンポーネントトラック及び各コンポーネントトラックに対応するアトラスタイルをカプセル化し、ターゲットファイルを取得するデータカプセル化モジュールと、を含む、装置。 - データ処理装置であって、
ターゲットファイルにおけるk個のコンポーネントトラックを取得するトラック取得モジュールであって、前記コンポーネントトラックは、コンポーネントトラックデータボックスを含み、前記コンポーネントトラックデータボックスは、タイル数及び空間領域情報を含み、前記タイル数は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックに対応するアトラスタイルの数であり、前記空間領域情報は、前記コンポーネントトラックデータボックスが属するコンポーネントトラックの空間領域であり、kは正の整数である、トラック取得モジュールと、
前記コンポーネントトラックデータボックスに従ってターゲットファイルをデカプセル化し、タイル表示内容を取得するデータデカプセル化モジュールと、を含む、装置。 - 1つ又は複数のプロセッサと、メモリと、入出力インターフェースと、を含むコンピュータ機器であって、
前記プロセッサは、前記メモリ及び前記入出力インターフェースにそれぞれ接続され、前記入出力インターフェースは、データを送受信し、前記メモリは、コンピュータ読み取り可能な命令を記憶し、前記プロセッサは、前記コンピュータ機器に請求項1乃至5の何れか、又は請求項11乃至14の何れかに記載の方法を実行させるように、前記コンピュータ読み取り可能な命令を呼び出す、コンピュータ機器。 - コンピュータ読み取り可能な命令が記憶された1つ又は複数のコンピュータ読み取り可能な記憶媒体であって、前記コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサを有するコンピュータ機器に請求項1乃至5の何れか、又は請求項11乃至14の何れかに記載の方法を実行させるように、前記プロセッサによりロードされて実行される、記憶媒体。
- コンピュータ読み取り可能な命令を含むコンピュータプログラムであって、前記コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサにより実行される際に、請求項1乃至5の何れか、又は請求項11乃至14の何れかに記載の方法のステップを実現する、コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110786808.7A CN115618027A (zh) | 2021-07-12 | 2021-07-12 | 一种数据处理方法、装置、计算机及可读存储介质 |
CN202110786808.7 | 2021-07-12 | ||
PCT/CN2022/099726 WO2023284488A1 (zh) | 2021-07-12 | 2022-06-20 | 一种数据处理方法、装置、计算机及可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2024511726A true JP2024511726A (ja) | 2024-03-15 |
Family
ID=84855492
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023554318A Pending JP2024511726A (ja) | 2021-07-12 | 2022-06-20 | データ処理方法、装置、コンピュータ機器、記憶媒体及びコンピュータプログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US20230403383A1 (ja) |
EP (1) | EP4373089A4 (ja) |
JP (1) | JP2024511726A (ja) |
KR (1) | KR20230141835A (ja) |
CN (1) | CN115618027A (ja) |
WO (1) | WO2023284488A1 (ja) |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2574445A (en) * | 2018-06-06 | 2019-12-11 | Canon Kk | Method, device, and computer program for transmitting media content |
JP7402976B2 (ja) * | 2019-09-30 | 2023-12-21 | 中興通訊股▲ふん▼有限公司 | 点群データのためのファイルフォーマット |
BR112022012990A2 (pt) * | 2019-12-31 | 2022-11-16 | Nokia Technologies Oy | Um método, um aparelho e um produto de programa de computador para codificação de vídeo e decodificação de vídeo |
JP7407951B2 (ja) * | 2020-01-08 | 2024-01-04 | 中興通訊股▲ふん▼有限公司 | 点群データ処理 |
CN112492385A (zh) * | 2020-09-30 | 2021-03-12 | 中兴通讯股份有限公司 | 点云数据处理方法、装置、存储介质及电子装置 |
CN112700550A (zh) * | 2021-01-06 | 2021-04-23 | 中兴通讯股份有限公司 | 三维点云数据处理方法、装置、存储介质及电子装置 |
CN112887733A (zh) * | 2021-01-25 | 2021-06-01 | 中兴通讯股份有限公司 | 一种容积媒体处理方法、装置、存储介质及电子装置 |
CN112804256B (zh) * | 2021-02-09 | 2022-05-24 | 腾讯科技(深圳)有限公司 | 多媒体文件中轨道数据的处理方法、装置、介质及设备 |
-
2021
- 2021-07-12 CN CN202110786808.7A patent/CN115618027A/zh active Pending
-
2022
- 2022-06-20 KR KR1020237029719A patent/KR20230141835A/ko active Search and Examination
- 2022-06-20 EP EP22841128.6A patent/EP4373089A4/en active Pending
- 2022-06-20 JP JP2023554318A patent/JP2024511726A/ja active Pending
- 2022-06-20 WO PCT/CN2022/099726 patent/WO2023284488A1/zh active Application Filing
-
2023
- 2023-08-28 US US18/239,080 patent/US20230403383A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
KR20230141835A (ko) | 2023-10-10 |
US20230403383A1 (en) | 2023-12-14 |
EP4373089A4 (en) | 2024-10-09 |
EP4373089A1 (en) | 2024-05-22 |
WO2023284488A1 (zh) | 2023-01-19 |
CN115618027A (zh) | 2023-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109691103B (zh) | 视频编码 | |
WO2019202207A1 (en) | Processing video patches for three-dimensional content | |
TWI672947B (zh) | 用於推導複合軌的方法和裝置 | |
US20230421810A1 (en) | Encapsulation and decapsulation methods and apparatuses for point cloud media file, and storage medium | |
TW201946464A (zh) | 用於提供二維空間關係的方法以及裝置 | |
WO2023202095A1 (zh) | 点云媒体的编解码方法、装置、电子设备和存储介质 | |
WO2024041238A1 (zh) | 一种点云媒体的数据处理方法及相关设备 | |
CN114095737B (zh) | 媒体文件封装及解封装方法、装置、设备及存储介质 | |
WO2023061131A1 (zh) | 媒体文件封装方法、装置、设备及存储介质 | |
WO2021209044A1 (zh) | 多媒体数据收发方法、系统、处理器和播放器 | |
WO2023024839A1 (zh) | 媒体文件封装与解封装方法、装置、设备及存储介质 | |
JP2024511726A (ja) | データ処理方法、装置、コンピュータ機器、記憶媒体及びコンピュータプログラム | |
CN115086635B (zh) | 多视角视频的处理方法、装置、设备及存储介质 | |
US20220060750A1 (en) | Freeview video coding | |
JP2023550752A (ja) | 非時系列ポイントクラウドメディアの処理方法、装置、機器、及びコンピュータプログラム | |
CN115733576A (zh) | 点云媒体文件的封装与解封装方法、装置及存储介质 | |
CN115280336A (zh) | 通过沉浸式媒体引用神经网络模型以适配流式传输到异构客户端端点的媒体 | |
CN114598692B (zh) | 点云文件传输方法、应用方法、装置、设备及存储介质 | |
WO2023024843A1 (zh) | 媒体文件封装与解封装方法、设备及存储介质 | |
WO2023169003A1 (zh) | 点云媒体的解码方法、点云媒体的编码方法及装置 | |
CN117082262A (zh) | 点云文件封装与解封装方法、装置、设备及存储介质 | |
JP2023507586A (ja) | 3dof構成要素からの6dofコンテンツを符号化、復号化、及びレンダリングするための方法及び装置 | |
CN115481280A (zh) | 容积视频的数据处理方法、装置、设备及可读存储介质 | |
CN118648291A (zh) | 使用itmf进行资产交换的独立映射空间 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230906 |