JP7402976B2

JP7402976B2 - 点群データのためのファイルフォーマット

Info

Publication number: JP7402976B2
Application number: JP2022519702A
Authority: JP
Inventors: チェンファン，
Original assignee: ZTE Corp
Current assignee: ZTE Corp
Priority date: 2019-09-30
Filing date: 2019-09-30
Publication date: 2023-12-21
Anticipated expiration: 2039-09-30
Also published as: KR102624994B1; JP2022550150A; KR20220071256A; US20220215616A1; CN114365194A; WO2021062645A1; EP4042381A1; EP4042381A4

Description

本特許文書は、マルチメディアデータ処理および伝送技術、および点群データ処理の方法、装置、およびシステムを対象とする。

ビデオエンコーディングは、圧縮されたビットストリーム表現にエンコードするために圧縮ツールを使用し、圧縮されたビットストリーム表現は、２次元のビデオフレームを記憶するために、またはネットワークを経由して搬送するためにより効率的である。エンコーディングのために２次元のビデオフレームを使用する従来的なビデオコーディング技法は、時として、３次元の視覚場面の視覚情報の表現に関して非効率的である。

本特許文書は、とりわけ、多次元画像に関連する視覚情報を搬送するデジタルビデオをエンコードおよびデコードするための技法を説明する。

１つの例示的側面では、点群データ処理の方法が、開示される。方法は、点群データの３Ｄ領域および３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域を決定することと、２Ｄ領域に含まれるパッチフレームデータおよび対応する点群コンポーネントトラックのビデオフレームデータから、点群データの３Ｄ領域を再構築することとを含む。

別の例示的側面では、点群データ処理の別の方法が、開示される。方法は、点群データの３Ｄ領域および３Ｄ領域に対応する点群コンポーネントトラックグループを決定することと、点群コンポーネントトラックグループ内の点群コンポーネントトラックからのビデオフレームデータおよび対応する点群トラックパッチフレームデータに基づいて、点群データの３Ｄ領域を再構築することとを含む。

別の例示的側面では、点群データ処理のための装置が、開示される。

さらに別の例示的側面では、コンピュータプログラム記憶媒体が、開示される。コンピュータプログラム記憶媒体は、その上に記憶されたコードを含む。コードは、プロセッサによって実行されると、説明される方法をプロセッサに実装させる。

これらおよび他の側面が、本書に説明される。
本発明は、例えば、以下を提供する。
（項目１）
点群データ処理の方法であって、前記方法は、
点群データの３Ｄ領域と、前記３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域とを決定することと、
前記２Ｄ領域に含まれるパッチフレームデータと、対応する点群コンポーネントトラックのビデオフレームデータとから、前記点群データの前記３Ｄ領域を再構築することと
を含む、方法。
（項目２）
前記点群データの前記３Ｄ領域と、前記３Ｄ領域の１つ以上の点が投影される前記点群トラックパッチフレームの前記２Ｄ領域とは、点群トラックサンプルエントリまたはサンプル内の要素に基づいて決定される、項目１に記載の方法。
（項目３）
特定のボックスタイプに従って前記点群トラック内のパッチデータボックスを識別することを含み、前記パッチデータボックスは、前記２Ｄ領域が前記点群データの前記３Ｄ領域を再構築するためのパッチデータを含むことを示す、項目１または項目２に記載の方法。
（項目４）
特定のボックスタイプに従って前記点群トラック内の２Ｄタイルデータボックスを識別することを含み、前記２Ｄタイルデータボックスは、前記２Ｄ領域が前記点群データの前記３Ｄ領域の２Ｄタイルデータを含むことを示す、項目１または項目２に記載の方法。
（項目５）
特定のボックスタイプに従って前記点群トラック内のタイルグループデータボックスを識別することを含み、前記タイルグループデータボックスは、前記２Ｄ領域が前記点群データの前記３Ｄ領域を再構築するためのタイルグループデータを含むことを示す、項目１または項目２に記載の方法。
（項目６）
前記決定することは、時間指定メタデータトラック内の要素に基づいて、前記点群データの前記３Ｄ領域を決定することを含み、前記時間指定メタデータトラックは、前記点群トラックへの特定のトラック参照を含む、項目１に記載の方法。
（項目７）
特定のサンプルエントリタイプに従って前記時間指定メタデータトラックを識別することを含み、
前記時間指定メタデータトラックは、前記２Ｄ領域が前記点群データの前記３Ｄ領域を再構築するための以下の情報：パッチデータ、２Ｄタイルデータ、タイルグループデータのうちの１つを含むことを示す、項目１または項目６に記載の方法。
（項目８）
点群データ処理の方法であって、前記方法は、
点群データの３Ｄ領域と、前記３Ｄ領域に対応する点群コンポーネントトラックグループとを決定することと、
前記点群コンポーネントトラックグループ内の点群コンポーネントトラックからのビデオフレームデータと、対応する点群トラックパッチフレームデータとに基づいて、前記点群データの前記３Ｄ領域を再構築することと
を含む、方法。
（項目９）
前記３Ｄ領域を決定することは、点群コンポーネントトラックのトラックグループデータボックス内の要素に基づいて、前記点群データの前記３Ｄ領域と、前記３Ｄ領域に対応する点群コンポーネントトラックグループとを決定することを含み、
前記点群コンポーネントトラックグループは、占有マップトラック、幾何学形状トラック、または属性トラックを含む、項目８に記載の方法。
（項目１０）
特定のトラックグループタイプに従って前記点群コンポーネントトラック内のトラックグループデータボックスを識別することを含み、
前記トラックグループデータボックスは、前記点群コンポーネントトラックグループに対応する前記点群データの前記３Ｄ領域を示し、点群データの同じ３Ｄ領域に対応する点群データコンポーネントトラックの前記トラックグループデータボックスは、同じトラックグループ識別を有する、項目８または９に記載の方法。
（項目１１）
前記特定のトラックグループタイプに従って前記点群コンポーネント２Ｄタイルトラック内のトラックグループデータボックスを識別することを含み、
前記トラックグループデータボックスは、前記点群コンポーネント２Ｄタイルトラックグループに対応する前記点群データの前記３Ｄ領域を示し、前記点群データの同じ３Ｄ領域に対応する点群コンポーネント２Ｄタイルトラックの前記トラックグループデータボックスは、同じトラックグループ識別を有する、項目８または９に記載の方法。
（項目１２）
前記特定のトラックグループタイプに従って前記点群コンポーネントタイルグループトラック内のトラックグループデータボックスを識別することを含み、
前記トラックグループデータボックスは、前記点群コンポーネントタイルグループトラックグループに対応する前記点群データの前記３Ｄ領域を示し、前記点群データの同じ３Ｄ領域に対応する点群コンポーネントタイルグループトラックの前記トラックグループデータボックスは、同じトラックグループ識別を有する、項目８または９に記載の方法。
（項目１３）
前記決定することは、
時間指定メタデータトラック内の要素に基づいて、前記点群データの前記３Ｄ領域と、前記３Ｄ領域に対応する点群コンポーネントトラックグループとを決定することを含み、
前記時間指定メタデータトラックは、前記点群コンポーネントトラックグループへの特定のトラック参照を含む、項目８に記載の方法。
（項目１４）
特定のサンプルエントリタイプに従って前記時間指定メタデータトラックを識別することを含み、
前記時間指定メタデータトラックは、前記点群コンポーネントトラックグループに対応する前記点群データの前記３Ｄ領域を示す、項目８または項目１３に記載の方法。
（項目１５）
前記３Ｄ領域は、前記点群トラックパッチフレームの２つ以上の２Ｄ領域上に投影される点を含む、項目１－１４のいずれかに記載の方法。
（項目１６）
点群データの３Ｄ領域に関する情報は、３Ｄ境界ボックスパラメータを含み、前記３Ｄ境界ボックスパラメータは、前記３Ｄ領域のｘ、ｙ、ｚ座標オフセットおよび／または前記３Ｄ領域の幅、高さ、および奥行を含む、項目１－１５のいずれか１項に記載の方法。
（項目１７）
点群データの３Ｄ領域は、以下の情報：
点群データの標識と、
点群データの点の数と、
点群の属性の数およびタイプと
のうちの１つをさらに含む、項目１－１６のいずれかに記載の方法。
（項目１８）
前記点群トラックパッチフレームの前記２Ｄ領域に関する情報は、２Ｄ境界ボックスパラメータを含み、前記２Ｄ境界ボックスパラメータは、前記２Ｄ領域のｘ、ｙ座標オフセットおよび／または前記２Ｄ領域の幅および高さを含む、項目１－１７のいずれか１項に記載の方法。
（項目１９）
点群トラックパッチフレームの２Ｄ領域は、以下の情報：
レイヤ情報と、
説明情報と、
パッチの数と、
２Ｄタイル情報と、
タイルグループ情報と
のうちの１つをさらに含む、項目１－１８のいずれか１項に記載の方法。
（項目２０）
項目１－１９のうちのいずれかに規定される方法を実装するように構成されたプロセッサを備えているビデオ処理装置。
（項目２１）
コンピュータ読み取り可能な媒体であって、前記コンピュータ読み取り可能な媒体は、上で説明される方法をプロセッサによって実行するためのコードを記憶している、コンピュータ読み取り可能な媒体。

図１は、３Ｄ点群データ処理の例示的方法のフローチャートである。

図２は、３Ｄ点群データ処理の例示的方法のフローチャートである。

図３は、３Ｄ点群データ処理の例示的方法のフローチャートである。

図４は、３Ｄ点群データ処理の例示的方法のフローチャートである。

図５は、３Ｄ点群データ処理の例示的方法のフローチャートである。

図６は、データ構文のある例を示す。

図７は、別の例示的データ構文を示す。

図８は、例示的ハードウェア装置のブロック図である。

節の見出しは、本書では、読みやすさを改善するためにのみ使用され、各節内の開示される実施形態および技法の範囲をその節のみに限定しない。ある特徴が、Ｈ．２６４／ＡＶＣ（高度なビデオコーディング）およびＨ．２６５／ＨＥＶＣおよびＭＰＥＧ規格の例を使用して説明される。しかしながら、開示される技法の適応性は、Ｈ．２６４／ＡＶＣまたはＨ．２６５／ＨＥＶＣシステムのみに限定されない。

本書では、点群データ処理のための種々の構文要素が、異なる節に開示される。しかしながら、別様に注記されない限り、同じ名称を伴う構文要素が、異なる節において使用される場合、同じフォーマットおよび構文を有するであろうことを理解されたい。さらに、異なる節の見出し下に説明される異なる構文要素および構造が、種々の実施形態では、一緒に組み合わせられ得る。加えて、具体的な構造が、実装の例として説明されるが、構文構造の種々のエントリの順序が変更され得ることも理解されたい。

ビデオベースの点群圧縮（ＶＰＣＣまたはＶ－ＰＣＣ）は、点群視覚情報の体積エンコーディングを表す。コード化点群シーケンス（ＣＰＣＳ）を含むＶ－ＰＣＣビットストリームは、シーケンスパラメータセット（ＳＰＳ）データ、パッチ情報ビットストリーム、２Ｄビデオエンコード占有マップビットストリーム、２Ｄビデオエンコード幾何学形状ビットストリーム、およびゼロ以上の２Ｄビデオエンコード属性ビットストリームを搬送するＶＰＣＣユニットから構成される。

ユーザは、典型的に、点群オブジェクトを視認するために６自由度（ＤｏＦ）を有する。任意の所与の時点において、ユーザの場所、視点、視野等に応じて、利用可能な点群オブジェクトの一部のみが、ユーザの各々に見えるであろう。多くの用途に関して、点群オブジェクトデータ全体が、送達され、デコードされ、レンダリングされる必要はない。点群オブジェクトの部分的なアクセスおよび送達をサポートするために、ユーザが点群オブジェクトを視認することを望むＤｏＦおよび方向の全ての可能性を完全に対象にするための１つ以上の３Ｄ空間の小領域を識別することへのサポートが、必要である。

（Ｖ－ＰＣＣＩＳＯＢＭＦＦコンテナの例示的構造）

Ｖ－ＰＣＣ基本ストリーム内のＶ－ＰＣＣユニットが、それらのタイプに基づいて、ＩＳＯＢＭＦＦファイル内の個々のトラックにマップされる。マルチトラックＩＳＯＢＭＦＦＶ－ＰＣＣコンテナにおいて、２つのタイプのトラックがある：Ｖ－ＰＣＣトラック、およびＶ－ＰＣＣコンポーネントトラック。

Ｖ－ＰＣＣトラックは、Ｖ－ＰＣＣビットストリームにおける体積視覚情報を搬送するトラックであり、体積視覚情報は、パッチ情報サブビットストリームとシーケンスパラメータセットとを含む。

Ｖ－ＰＣＣコンポーネントトラックは、制限されたビデオスキームトラックであり、Ｖ－ＰＣＣビットストリームの占有マップサブビットストリーム、幾何学形状サブビットストリーム、および属性サブビットストリームのための２Ｄビデオエンコードデータを搬送する。

このレイアウトに基づいて、Ｖ－ＰＣＣＩＳＯＢＭＦＦコンテナは、以下を含むものとする：

Ｖ－ＰＣＣトラック：Ｖ－ＰＣＣトラックは、（サンプルエントリ内の）シーケンスパラメータセットと、シーケンスパラメータセットＶ－ＰＣＣユニット（ユニットタイプＶＰＣＣ＿ＳＰＳ）およびパッチデータ群Ｖ－ＰＣＣユニット（ユニットタイプＶＰＣＣ＿ＰＤＧ）のペイロードを搬送するサンプルとを含む。このトラックは、ビデオ圧縮Ｖ－ＰＣＣユニット（すなわち、ユニットタイプＶＰＣＣ＿ＯＶＤ、ＶＰＣＣ＿ＧＶＤ、およびＶＰＣＣ＿ＡＶＤ）のペイロードを搬送する他のトラックへのトラック参照も含む。

制限されたビデオスキームトラック：サンプルが、占有マップデータのためのビデオコード基本ストリームのアクセスユニット（すなわち、タイプＶＰＣＣ＿ＯＶＤのＶ－ＰＣＣユニットのペイロード）を含む。

１つ以上の制限されたビデオスキームトラック：サンプルが、幾何学形状データのためのビデオコード基本ストリームのアクセスユニット（すなわち、タイプＶＰＣＣ＿ＧＶＤのＶ－ＰＣＣユニットのペイロード）を含む。

ゼロ以上の制限されたビデオスキームトラック：サンプルが、属性データのためのビデオコード基本ストリームのアクセスユニット（すなわち、タイプＶＰＣＣ＿ＡＶＤのＶ－ＰＣＣユニットのペイロード）を含む。

（簡潔な解説）

本願に開示される技法は、ファイルフォーマットを使用して、点群をビットストリーム表現にエンコード（およびデコード）するために使用され得、ファイルフォーマットは、ＩＳＯＢＭＦＦと互換性があり、同時に、全方向性ビデオ処理技法を可能にし、全方向性ビデオ処理技法は、異なる視点の全方向性ビデオ間の自然切り替えを実装し、それによって、ユーザの視認体験を改善する。

本発明の実施形態の技術的解決策は、全方向性ビデオトラックに関するビューグループ情報を提供し、同じ視点に属する全方向性ビデオトラックの全てが、そのビューに対応するトラックグループを構成することを示す。全方向性ビデオ視点切り替えプロセスでは、視点切り替えの前後の全方向性ビデオウィンドウコンテンツの一貫性が、確保され、異なる視点の全方向性ビデオ間の自然切り替えが、実現され、それによって、ユーザの視認体験を改善する。

一般に、開示される技法に基づく実施形態が、ビデオデータ処理のために使用され得る。いくつかの実施形態では、全方向性ビデオデータが、ＩＳＯ（国際標準化機構）基本メディアファイルフォーマットに基づいて、ファイル内に記憶される。それらの中で、制限付きスキーム情報ボックス、トラック参照ボックス、およびトラックグループボックス等のＩＳＯ基本メディアファイルフォーマットは、動作するためのＩＳＯ／ＩＥＣＪＴＣ１／ＳＣ２９／ＷＧ１１動画専門家集団（ＭＰＥＧ）ＭＰＥＧ－４．Ｐａｒｔ１２ＩＳＯ基本メディアファイルフォーマットを指し得る。

ＩＳＯ基本ファイルフォーマット内のデータの全てが、ボックス内にインストールされる。ＭＰ４ファイルによって表されるＩＳＯ基本ファイルフォーマットは、いくつかのボックスから構成され、それらの各々は、タイプと長さとを有し、データオブジェクトと見なされることができる。ボックスは、コンテナボックスと呼ばれる、別のボックスを含むことができる。ＭＰ４ファイルは、最初に、ファイルフォーマットのマークアップとして１つのみの「ｆｔｙｐ」タイプのボックスを有し、そのファイルについてのある情報を含むであろう。コンテナボックス（そのサブボックスがそのメディアに関するメタデータ情報を含む）である１つのみの「ＭＯＯＶ」タイプのボックス（ムービーボックス）が、存在するであろう。ＭＰ４ファイルのメディアデータは、「ｍｄａｔ」タイプのメディアボックス（メディアデータボックス）（それは、コンテナボックスでもあり、（メディアデータが他のファイルを参照するときに）利用可能であることも、そうでないこともある）に含まれ、メディアデータの構造は、メタデータから構成される。

時間指定メタデータトラックは、ＩＳＯ基本メディアファイルフォーマット（ＩＳＯＢＭＦＦ）における機構であり、それは、特定のサンプルに関連付けられる時間指定メタデータを確立する。時間指定メタデータは、メディアデータとの結合が少なく、通常、「説明的」である。

本書では、従来的な２Ｄビデオフォーマット（ＭＰ４またはＩＳＯＢＭＦＦフォーマット等）と互換性があるフォーマットへの点群データ（ＭＰＥＧのＶ－ＰＣＣデータ等）の３Ｄまたは空間領域の表現を可能にするためのいくつかの技術的解決策が、提供される。提案される解決策の１つの有利な側面は、新しい機能性の実装のために従来的な２Ｄビデオ技法および構文を再利用することが可能であることである。

（解決策１）

図１の例示的フローチャートに示されるように、方法は、以下のステップを含む。

ステップＳ１１０は、点群データの３Ｄ領域と３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域とを決定することを含む。

ステップＳ１２０は、２Ｄ領域に含まれるパッチフレームデータと対応する点群コンポーネントトラックのビデオフレームデータとから、点群データの３Ｄ領域を再構築することを含む。

いくつかの実施形態では、Ｓ１１０内の決定する動作は、３Ｄ領域内の１つ以上の点に対応する２つ以上の２Ｄ領域を使用することによって、実施され得る。

いくつかの実施形態では、点群データの空間領域（例えば、３Ｄ領域）は、以下の情報のうちの少なくとも１つを含むか、または、それらを使用して説明される。

ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）は、空間領域のｘ、ｙ、ｚ座標オフセットと、その領域の幅、高さ、および奥行と、そのソース境界ボックス情報とを含む空間領域の情報を提供する。

１）点群データのｘ、ｙ、ｚ座標オフセットと、点群データの幅、高さ、および奥行とを含む点群データの３Ｄ境界ボックスパラメータ（３Ｄ空間位置）。

２）点群データの３Ｄ領域のｘ、ｙ、ｚ座標オフセットと、点群データの３Ｄ領域の幅、高さ、および奥行とを含む点群データの３Ｄ領域（または３Ｄブロック）パラメータ。

３）点群データの点の数。

４）点群データの標識。

５）点群の属性の数およびタイプ。

代替として、点群データの空間領域（例えば、３Ｄ領域）は、少なくとも以下の情報を含む。

１）点群データの境界ボックスのサイズを表すために使用される点群データの３Ｄ境界ボックスの幅、高さ、および奥行と、点群データの３Ｄ境界ボックスがｘ、ｙ、およびｚ座標方向に分割される３Ｄブロックの数と、３Ｄブロックの幅、高さ、および奥行；
または、

２）点群データを含む境界球の半径を規定する点群データの３Ｄ境界球半径と、点群データの３Ｄ境界球が行、列、およびレイヤ方向に分割される３Ｄサブ球の数と、３Ｄサブ球の幅、高さ、および厚さ。

ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）は、点群データの３Ｄ領域と、３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域とを含む点群データの空間領域情報を提供し、以下のように定義される。

（構文例）
ａｌｉｇｎｅｄ（８）ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｎｕｍ＿ｐｏｉｎｔｓ；
ｓｔｒｉｎｇｌａｂｅｌ；

ｕｎｓｉｇｎｅｄｉｎｔ（４）ｎｕｍ＿ａｔｔｒｉｂｕｔｅｓ；
ｆｏｒ（ｉ＝０；ｉ＜ｎｕｍ＿ａｔｔｒｉｂｕｔｅｓ；ｉ＋＋）｛
ｕｎｓｉｇｎｅｄｉｎｔ（４）ａｔｔｒｉｂｕｔｅ＿ｔｙｐｅ［ｉ］；
｝
ｕｎｓｉｇｎｅｄｉｎｔ（１）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ；
ｉｆ（３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｐｒｅｓｅｎｔ＿ｆｌａｇ）｛
３ＤＲｅｇｉｏｎＳｔｒｕｃｔ（）；
ｕｎｓｉｇｎｅｄｉｎｔ（１）２ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｕｐｄａｔｅ＿ｆｌａｇ；
ｉｆ（２ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｕｐｄａｔｅ＿ｆｌａｇ）
２ＤＲｅｇｉｏｎＳｔｒｕｃｔ（）；
｝
｝
ａｌｉｇｎｅｄ（８）ｃｌａｓｓ３ＤＲｅｇｉｏｎＳｔｒｕｃｔ（ｄｅｌｔａ＿ｉｎｃｌｕｄｅｄ＿ｆｌａｇ）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｒｅｇｉｏｎ＿ｉｄ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｘ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｙ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｚ；
ｉｆ（ｄｅｌｔａ＿ｉｎｃｌｕｄｅｄ＿ｆｌａｇ）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｌｔａ＿ｘ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｌｔａ＿ｙ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｌｔａ＿ｚ；
｝
ｅｌｓｅ｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｗｉｄｔｈ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｈｅｉｇｈｔ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｐｔｈ；
｝
｝
ａｌｉｇｎｅｄ（８）ｃｌａｓｓ２ＤＲｅｇｉｏｎＳｔｒｕｃｔ（）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｔｏｐ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｌｅｆｔ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｗｉｄｔｈ；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｈｅｉｇｈｔ；
｝

（意味例）

ｎｕｍｂｅｒ＿ｐｏｉｎｔｓは、点群データの点の数を規定する。

ｌａｂｌｅは、点群データの標識を規定する。

ｎｕｍｂｅｒ＿ａｔｔｒｉｂｕｔｅｓは、点群データの属性の数を規定する。

ａｔｔｒｉｂｕｔｅｓ＿ｔｙｐｅ［ｉ］は、点群データのｉ番目の属性のタイプを規定する。

３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｐｒｅｓｅｎｔ＿ｆｌａｇは、点群データの３Ｄ境界ボックスパラメータが存在するかどうかを示す。

２ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｕｐｄａｔｅ＿ｆｌａｇは、点群データの３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域が、更新されるかどうかを示す。

ｒｅｇｉｏｎ＿ｉｄは、点群データの３Ｄ領域の識別を規定する。

３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｘ、３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｙ、および３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｚは、それぞれ、デカルト座標内のソース境界ボックスの３Ｄ空間部分に対応する３Ｄ領域のｘオフセット、ｙオフセット、およびｚオフセットの最小値を規定する。

ｄｅｌｔａ＿ｉｎｃｌｕｄｅｄ＿ｆｌａｇは、３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｌｔａ＿ｘ、３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｈｅｉｇｈｔ、および３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｌｔａ＿ｚが、３ＤＲｅｇｉｏｎＳｔｒｕｃｔ（）内に存在するかどうかを示す。

３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｌｔａ＿ｘ、３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｌｔａ＿ｙ、および３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｌｔａ＿ｚは、それぞれ、デカルト座標内のソース境界ボックスの３Ｄ空間部分に対応する３Ｄ領域のｘオフセット、ｙオフセット、およびｚオフセットの最大値を規定する。

３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｗｉｄｔｈ、３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｈｅｉｇｈｔ、および３ｄ＿ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｄｅｐｔｈは、それぞれ、デカルト座標内のソース境界ボックスの３Ｄ空間部分に対応する空間領域の幅、高さ、および奥行を示す。

ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｔｏｐ、ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｌｅｆｔは、それぞれ、長方形の２Ｄ領域の上および左からパッチフレームの上縁までの距離を規定する。

ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｗｉｄｔｈ、ｂｏｕｎｄｉｎｇ＿ｂｏｘ＿ｈｅｉｇｈｔは、それぞれ、パッチフレームにおける長方形の２Ｄ領域の幅および高さを規定する。

パッチフレーム、タイル、およびタイルグループの区分が、以下のように実施され得る。

Ｖ－ＰＣＣトラックからのパッチフレームが、タイルおよびタイルグループに区分され得る。

パッチフレームが、１つ以上のタイル行および１つ以上のタイル列に分割される。タイルは、パッチフレームの長方形の領域である。

タイルグループは、パッチフレームのいくつかのタイルを含む。

いくつかの実施形態では、長方形のタイルグループのみが、サポートされる。このモードでは、タイルグループは、パッチフレームの長方形の領域を集合的に形成するパッチフレームのいくつかのタイルを含む。

故に、点群トラックパッチフレームの２Ｄ領域（その上に、点群データの３Ｄ領域の１つ以上の点が投影される）が、少なくとも以下の分割原理に基づいて発生させられる。

１．点群データの３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域が、パッチフレーム上のパッチ位置に基づいて定義される。

２．点群データの３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域が、タイルに区分されるパッチフレーム上のタイル位置に基づいて定義される。

３．点群データの３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域が、タイルグループに区分されるパッチフレーム上のタイルグループ位置基づいて定義される。

対応して、点群パッチフレーム上の２Ｄ領域は、以下の情報のうちの少なくとも１つを含む。

１）２Ｄ境界ボックスのｘ、ｙオフセットと、２Ｄ境界ボックスの幅、高さとを含む２Ｄ領域位置パラメータ。

２）２Ｄ領域レイヤインデックス情報。

３）２Ｄ領域説明情報（例えば、意図）。

４）点群パッチ情報（例えば、パッチの数）。

５）点群タイル情報。

６）点群タイルグループ情報。

いくつかの実施形態では、Ｓ１２０における点群再構築動作が、以下のように実施され得る。

点群再構築プロセスへの入力は、以下の通りである：

－２Ｄ領域に含まれるブロックからパッチへのマッピング情報、

－公称分解能における対応する点群コンポーネントトラックのデコード幾何学形状ビデオフレーム、

－公称分解能における対応する点群コンポーネントトラックのデコード属性ビデオフレーム、

－公称分解能における対応する点群コンポーネントトラックのデコード占有マップビデオフレーム、および／または

出力順序における、フレームインデックス。

いくつかの実施形態では、上記の入力は、点群データの視覚的に正確な範囲を提供するためのアップスケーリング動作に基づき得る。

点群再構築プロセスの出力は、以下の通りである。

－３Ｄ領域に関する再構築された点群フレーム内の点のリストを保持するコンテナ、および、

－３Ｄ領域に関する再構築された点群内の点の数。

（実施形態１）

図２に示されるように、ステップＳ２１０は、点群トラックサンプルエントリまたはサンプル内の要素に基づいて決定される点群の３Ｄ領域を決定することを説明する。点群トラックのサンプルエントリおよびサンプルフォーマットが、代替実施形態と併せて下で説明される。

（Ｖ－ＰＣＣトラック）

従来的な平面状の２Ｄビデオ情報を記憶するビデオトラックとは異なり、Ｖ－ＰＣＣトラックは、３Ｄ体積視覚情報を記憶するための新しいタイプのトラックである。

（体積視覚トラック）

各体積視覚場面は、特有の体積視覚トラックによって表される。ＩＳＯＢＭＦＦファイルが、複数の場面を含み得、したがって、複数の体積視覚トラックが、ファイル内に存在し得る。

体積視覚トラックは、ＩＳＯ／ＩＥＣ１４４９６－１２内で定義されるＭｅｄｉａＢｏｘのＨａｎｄｌｅｒＢｏｘ内の体積視覚メディアハンドラタイプ‘ｖｏｌｖ’によって識別され得る。

（Ｖ－ＰＣＣトラックサンプルエントリ）
サンプルエントリタイプ：‘ｖｐｃ１’、’ｖｐｃｇ’
コンテナ：ＳａｍｐｌｅＤｅｓｃｒｉｐｔｉｏｎＢｏｘ（‘ｓｔｓｄ’）
必須：‘ｖｐｃ１’または‘ｖｐｃｇ’サンプルエントリが、必須である。
数量：１つ以上のサンプルエントリが、存在し得る。

Ｖ－ＰＣＣトラックは、’ｖｐｃ１’または’ｖｐｃｇ’のサンプルエントリタイプを伴うＶｏｌｕｍｅｔｒｉｃＶｉｓｕａｌＳａｍｐｌｅＥｎｔｒｙを拡張する、ＶＰＣＣＳａｍｐｌｅＥｎｔｒｙを使用するべきである。

ＶＰＣＣ体積サンプルエントリは、ここで定義されるようなＶＰＣＣＤｅｃｏｄｅｒＣｏｎｆｉｇｕｒａｔｉｏｎＲｅｃｏｒｄを含むＶＰＣＣＣｏｎｆｉｇｕｒａｔｉｏｎＢｏｘを含むべきである。
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＤｅｃｏｄｅｒＣｏｎｆｉｇｕｒａｔｉｏｎＲｅｃｏｒｄ｛
ｕｎｓｉｇｎｅｄｉｎｔ（８）ｃｏｎｆｉｇｕｒａｔｉｏｎＶｅｒｓｉｏｎ＝１；
ｓａｍｐｌｅ＿ｓｔｒｅａｍ＿ｖｐｃｃ＿ｈｅａｄｅｒｈｅａｄｅｒ；
ｕｎｓｉｇｎｅｄｉｎｔ（８）ｎｕｍＯｆＳｅｔｕｐＵｎｉｔｓ；
ｆｏｒ（ｉ＝０；ｉ＜ｎｕｍＯｆＳｅｔｕｐＵｎｉｔｓ；ｉ＋＋）｛
ｓａｍｐｌｅ＿ｓｔｒｅａｍ＿ｖｐｃｃ＿ｕｎｉｔｓｅｔｕｐＵｎｉｔ；
｝
｝
ｃｌａｓｓＶＰＣＣＣｏｎｆｉｇｕｒａｔｉｏｎＢｏｘｅｘｔｅｎｄｓＢｏｘ（’ｖｐｃｃ’）｛
ＶＰＣＣＤｅｃｏｄｅｒＣｏｎｆｉｇｕｒａｔｉｏｎＲｅｃｏｒｄ（）ＶＰＣＣＣｏｎｆｉｇ；
｝

（代替実施形態１）

点群データの３Ｄ領域は、点群トラックパッチフレームの１つ以上の２Ｄ領域に関連付けられており、点群トラックパッチフレームは、以下のように定義されるＶｏｌｕｍｅｔｒｉｃＴｉｌｅＩｎｆｏＢｏｘ（）を使用して点群データの３Ｄ領域を再構築するためのパッチデータ、２Ｄタイルデータ、またはタイルグループデータを含み得る。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＳａｍｐｌｅＥｎｔｒｙ（）ｅｘｔｅｎｄｓＶｏｌｕｍｅｔｒｉｃＶｉｓｕａｌＳａｍｐｌｅＥｎｔｒｙ（’ｖｐｃ１’）｛
ＶＰＣＣＣｏｎｆｉｇｕｒａｔｉｏｎＢｏｘｃｏｎｆｉｇ；
ＶＰＣＣＵｎｉｔＨｅａｄｅｒＨｅａｄｅｒＢｏｘｕｎｉｔ；
ＶｏｌｕｍｅｔｒｉｃＴｉｌｅＩｎｆｏＢｏｘ（）；
｝
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶｏｌｕｍｅｔｒｉｃＴｉｌｅＩｎｆｏＢｏｘｅｘｔｅｎｄｓＦｕｌｌＢｏｘ（’ｖｏｔｉ’，０，０）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｎｕｍ＿ｒｅｇｉｏｎｓ；
ｆｏｒ（ｉ＝０；ｉ＜ｎｕｍ＿ｒｅｇｉｏｎｓ；ｉ＋＋）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）；

ｓｔｒｉｎｇｒｅｇｉｏｎ＿ｉｎｔｅｎｔ［ｉ］；
ｕｎｓｉｇｎｅｄｉｎｔ（４）ｌａｙｅｒ＿ｉｎｄｅｘ［ｉ］；
ｕｎｓｉｇｎｅｄｉｎｔ（４）ｍａｐｐｉｎｇ＿ｔｙｐｅ［ｉ］；

ｉｆ（ｍａｐｐｉｎｇ＿ｔｙｐｅ［ｉ］＝＝０）｛
ｕｎｓｉｇｎｅｄｉｎｔ（８）ｎｕｍ＿ｐａｔｃｈｅｓ［ｉ］；
ｉｆ（ｍａｐｐｉｎｇ＿ｔｙｐｅ［ｉ］＝＝１）｛
ｕｎｓｉｇｎｅｄｉｎｔ（８）ｎｕｍ＿ｔｉｌｅｓ［ｉ］；
ｆｏｒ（ｊ＝０；ｊ＜ｎｕｍ＿ｔｉｌｅｓ［ｉ］；ｊ＋＋）｛
ｕｎｓｉｇｎｅｄｉｎｔ（３２）ｔｉｌｅ＿ｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄ［ｉ］［ｊ］；
ｉｆ（ｍａｐｐｉｎｇ＿ｔｙｐｅ［ｉ］＝＝２）｛
ｕｎｓｉｇｎｅｄｉｎｔ（８）ｎｕｍ＿ｔｉｌｅ＿ｇｒｏｕｐｓ［ｉ］；
ｆｏｒ（ｊ＝０；ｊ＜ｎｕｍ＿ｔｉｌｅ＿ｇｒｏｕｐｓ［ｉ］；ｊ＋＋）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｔｉｌｅ＿ｇｒｏｕｐ＿ｉｄ［ｉ］［ｊ］；
｝
｝
｝

（意味例）

ｎｕｍ＿ｒｅｇｉｏｎｓは、点群データの３Ｄ領域の数を規定する。

ｒｅｇｉｏｎ＿ｉｎｔｅｎｔ［ｉ］は、点群データの領域［ｉ］の意図を規定する。

ｌａｙｅｒ＿ｉｎｄｅｘ［ｉ］は、点群データの領域［ｉ］のレイヤインデックスを規定する。

ｍａｐｐｉｎｇ＿ｔｙｐｅ［ｉ］は、点群データの領域［ｉ］のマッピングタイプを規定する。

ｎｕｍ＿ｐａｔｃｈｅｓ［ｉ］は、点群データの領域［ｉ］内のパッチの数を規定する。

ｎｕｍ＿ｔｉｌｅｓ［ｉ］は、点群データの領域［ｉ］内の２Ｄタイルの数を規定する。

ｔｉｌｅ＿ｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄ［ｉ］［ｊ］は、点群データの領域［ｉ］の２Ｄタイルトラックグループ識別のアレイを規定する。

ｎｕｍ＿ｔｉｌｅ＿ｇｒｏｕｐｓ［ｉ］は、点群データの領域［ｉ］内のタイルグループの数を規定する。

ｔｉｌｅ＿ｇｒｏｕｐ＿ｉｄ［ｉ］［ｊ］は、点群データの領域［ｉ］のタイルグループ識別のアレイを規定する。

（代替実施形態２）

点群データの３Ｄ領域は、点群トラックパッチフレームの１つ以上の２Ｄ領域に関連付けられており、点群トラックパッチフレームは、本書で定義される３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＢｏｘ（）を使用して点群データの３Ｄ領域を再構築するためのパッチデータを含む。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＳａｍｐｌｅＥｎｔｒｙ（）ｅｘｔｅｎｄｓＶｏｌｕｍｅｔｒｉｃＶｉｓｕａｌＳａｍｐｌｅＥｎｔｒｙ（’ｖｐｃ１’）｛
ＶＰＣＣＣｏｎｆｉｇｕｒａｔｉｏｎＢｏｘｃｏｎｆｉｇ；
ＶＰＣＣＵｎｉｔＨｅａｄｅｒＨｅａｄｅｒＢｏｘｕｎｉｔ；
３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＢｏｘ（）；
｝
ａｌｉｇｎｅｄ（８）ｃｌａｓｓ３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＢｏｘｅｘｔｅｎｄｓＦｕｌｌＢｏｘ（’ｒ２ｐａ’，０，０）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｎｕｍ＿ｒｅｇｉｏｎｓ；
ｆｏｒ（ｉ＝０；ｉ＜ｎｕｍ＿ｒｅｇｉｏｎｓ；ｉ＋＋）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）；
ｓｔｒｉｎｇｒｅｇｉｏｎ＿ｉｎｔｅｎｔ［ｉ］；
ｕｎｓｉｇｎｅｄｉｎｔ（４）ｌａｙｅｒ＿ｉｎｄｅｘ［ｉ］；
ｕｎｓｉｇｎｅｄｉｎｔ（８）ｎｕｍ＿ｐａｔｃｈｅｓ［ｉ］；
｝
｝

（意味例）

（代替実施形態３）

点群データの３Ｄ領域は、点群トラックパッチフレームの１つ以上の２Ｄ領域に関連付けられており、点群トラックパッチフレームは、以下のように定義される３ＤＲｅｇｉｏｎＴｏ２ＤＴｉｌｅＢｏｘ（）を使用して点群データの３Ｄ領域を再構築するための２Ｄタイルデータを含む。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＳａｍｐｌｅＥｎｔｒｙ（）ｅｘｔｅｎｄｓＶｏｌｕｍｅｔｒｉｃＶｉｓｕａｌＳａｍｐｌｅＥｎｔｒｙ（’ｖｐｃ１’）｛
ＶＰＣＣＣｏｎｆｉｇｕｒａｔｉｏｎＢｏｘｃｏｎｆｉｇ；
ＶＰＣＣＵｎｉｔＨｅａｄｅｒＨｅａｄｅｒＢｏｘｕｎｉｔ；
３ＤＲｅｇｉｏｎＴｏ２ＤＴｉｌｅＢｏｘ（）；
｝
ａｌｉｇｎｅｄ（８）ｃｌａｓｓ３ＤＲｅｇｉｏｎＴｏ２ＤＴｉｌｅＢｏｘｅｘｔｅｎｄｓＦｕｌｌＢｏｘ（’ｒ２ｔｉ’，０，０）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｎｕｍ＿ｒｅｇｉｏｎｓ；
ｆｏｒ（ｉ＝０；ｉ＜ｎｕｍ＿ｒｅｇｉｏｎｓ；ｉ＋＋）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）；
ｓｔｒｉｎｇｒｅｇｉｏｎ＿ｉｎｔｅｎｔ［ｉ］；
ｕｎｓｉｇｎｅｄｉｎｔ（４）ｌａｙｅｒ＿ｉｎｄｅｘ［ｉ］；
ｕｎｓｉｇｎｅｄｉｎｔ（８）ｎｕｍ＿ｔｉｌｅｓ［ｉ］；
ｆｏｒ（ｊ＝０；ｊ＜ｎｕｍ＿ｔｉｌｅｓ［ｉ］；ｊ＋＋）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｔｉｌｅ＿ｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄ［ｉ］［ｊ］；
｝
｝
｝

（意味例）

（代替実施形態４）

点群データの３Ｄ領域は、点群トラックパッチフレームの１つ以上の２Ｄ領域に関連付けられており、点群トラックパッチフレームは、以下のように定義される３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＴｉｌｅＧｒｏｕｐＢｏｘ（）を使用して点群データの３Ｄ領域を再構築するためのタイルグループデータを含む。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＳａｍｐｌｅＥｎｔｒｙ（）ｅｘｔｅｎｄｓＶｏｌｕｍｅｔｒｉｃＶｉｓｕａｌＳａｍｐｌｅＥｎｔｒｙ（’ｖｐｃ１’）｛
ＶＰＣＣＣｏｎｆｉｇｕｒａｔｉｏｎＢｏｘｃｏｎｆｉｇ；
ＶＰＣＣＵｎｉｔＨｅａｄｅｒＨｅａｄｅｒＢｏｘｕｎｉｔ；
３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＴｉｌｅＧｒｏｕｐＢｏｘ（）；
｝
ａｌｉｇｎｅｄ（８）ｃｌａｓｓ３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＴｉｌｅＧｒｏｕｐＢｏｘｅｘｔｅｎｄｓＦｕｌｌＢｏｘ（’ｒｐｔｇ’，０，０）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｎｕｍ＿ｒｅｇｉｏｎｓ；
ｆｏｒ（ｉ＝０；ｉ＜ｎｕｍ＿ｒｅｇｉｏｎｓ；ｉ＋＋）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）；
ｓｔｒｉｎｇｒｅｇｉｏｎ＿ｉｎｔｅｎｔ［ｉ］；
ｕｎｓｉｇｎｅｄｉｎｔ（４）ｌａｙｅｒ＿ｉｎｄｅｘ［ｉ］；
ｕｎｓｉｇｎｅｄｉｎｔ（８）ｎｕｍ＿ｔｉｌｅ＿ｇｒｏｕｐｓ［ｉ］；
ｆｏｒ（ｊ＝０；ｊ＜ｎｕｍ＿ｔｉｌｅ＿ｇｒｏｕｐｓ［ｉ］；ｊ＋＋）｛
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｔｉｌｅ＿ｇｒｏｕｐ＿ｉｄ［ｉ］［ｊ］；
｝
｝
｝

（意味例）

（Ｖ－ＰＣＣトラックサンプルフォーマット）

Ｖ－ＰＣＣトラック内の各パッチサンプルは、単一の点群フレームに対応する。各コンポーネントビデオトラック内のフレームに対応するサンプルは、Ｖ－ＰＣＣトラックパッチサンプルと同じ合成時間を有するべきである。各Ｖ－ＰＣＣパッチサンプルは、１つ以上のパッチシーケンスユニットペイロードを含み得るＶＰＣＣ＿ＰＤＧタイプの１つのみのＶ－ＰＣＣユニットペイロードを含むべきである。

（代替実施形態１）

点群データの３Ｄ領域は、点群トラックパッチフレームの１つ以上の２Ｄ領域に関連付けられており、点群トラックパッチフレームは、以下のように定義されるＶｏｌｕｍｅｔｒｉｃＴｉｌｅＩｎｆｏＢｏｘ（）を使用して、点群データの３Ｄ領域を再構築するためのパッチデータ、２Ｄタイルデータ、またはタイルグループデータを含み得る。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＳａｍｐｌｅ
｛
ｕｎｓｉｇｎｅｄｉｎｔＶＰＣＣＬｅｎｇｔｈ＝ｓａｍｐｌｅ＿ｓｉｚｅ；
ｆｏｒ（ｉ＝０；ｉ＜ＶＰＣＣＬｅｎｇｔｈ；）｛
ｓａｍｐｌｅ＿ｓｔｒｅａｍ＿ｖｐｃｃ＿ｕｎｉｔｕｎｉｔ；
ｉ＋＝（ｓｓｖｈ＿ｕｎｉｔ＿ｓｉｚｅ＿ｐｒｅｃｉｓｉｏｎ＿ｂｙｔｅｓ＿ｍｉｎｕｓ１＋１）＋
ｕｎｉｔ．ｓｓｖｕ＿ｖｐｃｃ＿ｕｎｉｔ＿ｓｉｚｅ；
｝
ＶｏｌｕｍｅｔｒｉｃＴｉｌｅＩｎｆｏＢｏｘ（）；
｝

（意味例）
ｖｐｃｃ＿ｕｎｉｔ＿ｐａｙｌｏａｄ＿ｓｉｚｅは、ｖｐｃｃ＿ｕｎｉｔ＿ｐａｙｌｏａｄ（）に関するバイト数を提供する。
ｖｐｃｃ＿ｕｎｉｔ＿ｐａｙｌｏａｄ（）は、タイプＶＰＣＣ＿ＰＤＧのＶ－ＰＣＣユニットのペイロードであり、１つのｐａｔｃｈ＿ｄａｔａ＿ｇｒｏｕｐ（）事例を含むものとする。

（代替実施形態２）

点群データの３Ｄ領域は、点群トラックパッチフレームの１つ以上の２Ｄ領域に関連付けられており、点群トラックパッチフレームは、以下のように定義される３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＢｏｘ（）を使用して点群データの３Ｄ領域を再構築するためのパッチデータを含む。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＳａｍｐｌｅ
｛
ｕｎｓｉｇｎｅｄｉｎｔＶＰＣＣＬｅｎｇｔｈ＝ｓａｍｐｌｅ＿ｓｉｚｅ；
ｆｏｒ（ｉ＝０；ｉ＜ＶＰＣＣＬｅｎｇｔｈ；）｛
ｓａｍｐｌｅ＿ｓｔｒｅａｍ＿ｖｐｃｃ＿ｕｎｉｔｕｎｉｔ；
ｉ＋＝（ｓｓｖｈ＿ｕｎｉｔ＿ｓｉｚｅ＿ｐｒｅｃｉｓｉｏｎ＿ｂｙｔｅｓ＿ｍｉｎｕｓ１＋１）＋
ｕｎｉｔ．ｓｓｖｕ＿ｖｐｃｃ＿ｕｎｉｔ＿ｓｉｚｅ；
｝
３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＢｏｘ（）；
｝

（代替実施形態３）

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＳａｍｐｌｅ
｛
ｕｎｓｉｇｎｅｄｉｎｔＶＰＣＣＬｅｎｇｔｈ＝ｓａｍｐｌｅ＿ｓｉｚｅ；
ｆｏｒ（ｉ＝０；ｉ＜ＶＰＣＣＬｅｎｇｔｈ；）｛
ｓａｍｐｌｅ＿ｓｔｒｅａｍ＿ｖｐｃｃ＿ｕｎｉｔｕｎｉｔ；
ｉ＋＝（ｓｓｖｈ＿ｕｎｉｔ＿ｓｉｚｅ＿ｐｒｅｃｉｓｉｏｎ＿ｂｙｔｅｓ＿ｍｉｎｕｓ１＋１）＋
ｕｎｉｔ．ｓｓｖｕ＿ｖｐｃｃ＿ｕｎｉｔ＿ｓｉｚｅ；
｝
３ＤＲｅｇｉｏｎＴｏ２ＤＴｉｌｅＢｏｘ（）；
｝

（代替実施形態４）

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＳａｍｐｌｅ
｛
ｕｎｓｉｇｎｅｄｉｎｔＶＰＣＣＬｅｎｇｔｈ＝ｓａｍｐｌｅ＿ｓｉｚｅ；
ｆｏｒ（ｉ＝０；ｉ＜ＶＰＣＣＬｅｎｇｔｈ；）｛
ｓａｍｐｌｅ＿ｓｔｒｅａｍ＿ｖｐｃｃ＿ｕｎｉｔｕｎｉｔ；
ｉ＋＝（ｓｓｖｈ＿ｕｎｉｔ＿ｓｉｚｅ＿ｐｒｅｃｉｓｉｏｎ＿ｂｙｔｅｓ＿ｍｉｎｕｓ１＋１）＋
ｕｎｉｔ．ｓｓｖｕ＿ｖｐｃｃ＿ｕｎｉｔ＿ｓｉｚｅ；
｝
３ＤＲｅｇｉｏｎＴｏＰａｔｃｈＴｉｌｅＧｒｏｕｐＢｏｘ（）；
｝

（実施形態２）

図３に示されるように、ステップＳ３１０は、時間指定メタデータトラック内の要素に基づいて、点群データの３Ｄ領域を決定することを説明し、時間指定メタデータトラックは、点群トラックへの特定のトラック参照を含む。時間指定メタデータトラックは、代替実施形態と併せて下で説明される。

（Ｖ－ＰＣＣ時間指定メタデータトラック）

Ｖ－ＰＣＣ空間領域の時間指定メタデータトラックは、経時的に動的に変化する点群データの対応する空間領域情報を示す、’ｃｄｓｃ’トラック参照タイプのＴｒａｃｋＲｅｆｅｒｅｎｃｅＢｏｘを利用することによって、それぞれのＶ－ＰＣＣトラックにリンクされる。

Ｖ－ＰＣＣ時間指定メタデータトラックのサンプルエントリおよびそのサンプルフォーマットは、以下のように定義される。

（構文例）
ｃｌａｓｓＶＰＣＣＳｐａｔｉａｌＲｅｇｉｏｎＳａｍｐｌｅＥｎｔｒｙｅｘｔｅｎｄｓＭｅｔａＤａｔａＳａｍｐｌｅＥｎｔｒｙ（’ｐｃｓｒ’）｛
ＶｏｌｕｍｅｔｒｉｃＴｉｌｅＩｎｆｏＢｏｘ（）；
｝
ａｌｉｇｎｅｄ（８）ＶＰＣＣＳｐａｔｉａｌＲｅｇｉｏｎＳａｍｐｌｅ（）｛
ＶｏｌｕｍｅｔｒｉｃＴｉｌｅＩｎｆｏＢｏｘ（）；
｝

（解決策２）

この例は、点群データ処理方法を提供する。図４に示されるように、方法は、以下のステップを含む。

ステップＳ４１０は、点群データの３Ｄ領域と、３Ｄ領域に対応する点群コンポーネントトラックグループとを決定することを含む。

ステップＳ４２０は、点群コンポーネントトラックグループ内の点群コンポーネントトラックからのビデオフレームデータと、対応する点群トラックパッチフレームデータとに基づいて、点群データの３Ｄ領域を再構築することを含む。

いくつかの実施形態では、点群データの空間領域（例えば、３Ｄ領域）は、解決策１（段落［００４２］以下参照）に関して既に説明されたフォーマットに類似するフォーマットを含むか、または、それを使用して説明される。

いくつかの実施形態では、Ｓ４２０における点群再構築動作が、以下のように実施され得る。

点群再構築プロセスへの入力は、以下の通りである：

－公称分解能における点群コンポーネントトラックグループ内の点群コンポーネントトラックからのデコード幾何学形状ビデオフレーム、

－公称分解能における点群コンポーネントトラックグループ内の点群コンポーネントトラックからのデコード属性ビデオフレーム、

－公称分解能における点群コンポーネントトラックグループ内の点群コンポーネントトラックからのデコード占有マップビデオフレーム、

－対応する点群トラックのブロックからパッチへのマッピング情報、および／または、

－出力順序における、フレームインデックス。

いくつかの実施形態では、アップスケーリングが、ビデオおよび他のパラメータと点群データとの間の正確なマッピングを提供するために、上記の入力に適用され得る。

点群再構築プロセスの出力は、以下の通りである：

－３Ｄ領域に関する再構築された点群フレーム内の点のリストを保持するコンテナ、および

－３Ｄ領域に関する再構築された点群内の点の数。

（実施形態３）

図５に示されるように、ステップＳ５１０は、点群コンポーネントトラックのトラックグループデータボックス内の要素に基づいて、点群データの３Ｄ領域および３Ｄ領域に対応する点群コンポーネントトラックグループを決定することを説明し、点群コンポーネントトラックグループは、占有マップトラック、幾何学形状トラック、または属性トラックを含む。

（ビデオエンコードＶ－ＰＣＣコンポーネントトラック）

プレーヤ側において点群を再構築することなく属性トラック、幾何学形状トラック、または占有マップトラックからのデコードフレームを表示することが意義がないこともあるので、制限されたビデオスキームタイプが、これらのビデオコードトラックのために定義される。

Ｖ－ＰＣＣコンポーネントビデオトラックは、制限されたビデオとしてファイル内に表され、それらの制限されたビデオサンプルエントリのＲｅｓｔｒｉｃｔｅｄＳｃｈｅｍｅＩｎｆｏＢｏｘのＳｃｈｅｍｅＴｙｐｅＢｏｘのｓｃｈｅｍｅ＿ｔｙｐｅフィールド内の’ｐｃｃｖ’によって識別され得る。

Ｖ－ＰＣＣコンポーネントビデオトラック内に、ＶＰＣＣＵｎｉｔＨｅａｄｅｒＢｏｘを含むＳｃｈｅｍｅＩｎｆｏｒｍａｔｉｏｎＢｏｘが、存在するべきである。

Ｖ－ＰＣＣコンポーネントビデオトラックは、少なくとも、２Ｄビデオエンコード占有マップトラックと、２Ｄビデオエンコード幾何学形状トラックと、ゼロ以上の２Ｄビデオエンコード属性トラックとを含む。

（代替実施形態１）

点群データの同じ空間領域に対応するＶ－ＰＣＣコンポーネントトラック（占有マップトラック、幾何学形状トラック、および属性トラック）の全てが、ＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘ（‘ｐｃｔｇ’）の具体的なタイプをコンポーネントトラックの全てに追加することによって、ＩＳＯ／ＩＥＣ１４４９６－１２のトラックグループ化ツールを使用して、一緒にグループ化され得る。Ｖ－ＰＣＣコンポーネントビデオトラック内のＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘが、随意の実装と併せて下で説明される。
ＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘ
ボックスタイプ： ’ｐｃｔｇ’
コンテナ：ＴｒａｃｋＢｏｘ
必須：いいえ
数量：ゼロまたは１

’ｐｃｔｇ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘは、Ｖ－ＰＣＣコンポーネントトラックグループを示す、ＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘである。

’ｐｃｔｇ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ内のｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄの同じ値を有するＶ－ＰＣＣコンポーネントトラックは、３Ｄ空間関係を伴う同じトラックグループに属する（例えば、点群データの同じ３Ｄ領域に対応する）。’ｐｃｔｇ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅ内のｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄは、点群データの空間領域の識別子として使用され得る。

同じ空間領域に対応するＶ－ＰＣＣコンポーネントトラックは、ｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅ ’ｐｃｔｇ’のためのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄの同じ値を有し、１つの空間領域からのトラックのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄは、任意の他の空間領域からのトラックのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄと異なる。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘｅｘｔｅｎｄｓＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ（’ｐｃｔｇ’）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）；
｝

Ｖ－ＰＣＣコンポーネントビデオトラックは、’ｐｃｔｇ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ、すなわち、ＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘを含み得、ＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘを含むＶ－ＰＣＣコンポーネントビデオトラックに関する随意の実施形態が、下で説明される。

図６は、ある実施形態による、Ｖ－ＰＣＣコンポーネントトラック内のＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘの概略図である。

図６に示されるように、点群データファイルは、１つの占有マップコンポーネントビデオトラックと、１つの幾何学形状コンポーネントビデオトラックと、ゼロ以上の属性コンポーネントビデオトラックとを含む。異なるＶ－ＰＣＣコンポーネントビデオトラックは、’ｐｃｔｇ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ、すなわち、ＶＰＣＣＴｒａｃｋＧｒｏｕｐＢｏｘを含み、Ｖ－ＰＣＣ占有マップ、幾何学形状、および属性コンポーネントビデオトラックが、点群データの同じ空間領域（例えば、点群の３Ｄ領域）に対応するＶ－ＰＣＣコンポーネントトラックグループを形成することを示す、同じｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄ値を有する。

（代替実施形態２）

点群データの同じ空間領域に対応するＶ－ＰＣＣコンポーネント２Ｄタイルトラック（占有マップ２Ｄタイルトラック、幾何学形状２Ｄタイルトラック、および属性２Ｄタイルトラック）の全てが、具体的なタイプのＶＰＣＣ２ＤＴｉｌｅＧｒｏｕｐＢｏｘ（‘ｐｃｔｉ’）をコンポーネント２Ｄタイルトラックの全てに追加することによって、ＩＳＯ／ＩＥＣ１４４９６－１２のトラックグループ化ツールを使用して、一緒にグループ化され得る。Ｖ－ＰＣＣコンポーネントビデオトラック内のＶＰＣＣ２ＤｔｉｌｅＧｒｏｕｐＢｏｘが、随意の実装と併せて下で説明される。
ＶＰＣＣ２ＤＴｉｌｅＧｒｏｕｐＢｏｘ
ボックスタイプ： ’ｐｃｔｉ’
コンテナ：ＴｒａｃｋＢｏｘ
必須：いいえ
数量：ゼロまたは１

’ｐｃｔｉ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘは、Ｖ－ＰＣＣコンポーネント２Ｄタイルトラックグループを示すＶＰＣＣ２ＤＴｉｌｅＧｒｏｕｐＢｏｘである。

’ｐｃｔｉ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ内のｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄの同じ値を有するＶ－ＰＣＣコンポーネント２Ｄタイルトラックは、３Ｄ空間関係を伴う同じトラックグループに属する（例えば、点群データの同じ３Ｄ領域に対応する）。’ｐｃｔｉ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ内のｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄは、点群データの空間領域の識別子として使用され得る。

同じ空間領域に対応するＶ－ＰＣＣコンポーネント２Ｄタイルトラックは、ｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅ ’ｐｃｔｉ’のためのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄの同じ値を有し、１つの空間領域からのトラックのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄは、任意の他の空間領域からのトラックのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄと異なる。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＶＰＣＣ２ＤＴｉｌｅＧｒｏｕｐＢｏｘｅｘｔｅｎｄｓＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ（’ｐｃｔｉ’）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）；
｝

（代替実施形態３）

同じ点群３Ｄ領域に対応する全ての点群コンポーネント（幾何学形状コンポーネント、占有グラフコンポーネント、属性コンポーネント）内の点群コンポーネントタイルグループトラックは、３Ｄ領域に関する点群コンポーネントタイルグループトラックグループ内の具体的なタイプのトラックグループデータボックス（トラックグループボックス）から構成されることができる。以下は、随意の実装との組み合わせにおける点群コンポーネントタイルグループトラック内の点群コンポーネントタイルグループデータボックスを説明する。

点群データの同じ空間領域に対応するＶ－ＰＣＣコンポーネントタイルグループトラック（占有マップタイルグループトラック、幾何学形状タイルグループトラック、および属性タイルグループトラック）の全てが、具体的なタイプのＶＰＣＣＴｉｌｅＧｒｏｕｐＢｏｘ（‘ｐｔｇｇ’）をコンポーネント２Ｄタイルトラックの全てに追加することによって、ＩＳＯ／ＩＥＣ１４４９６－１２のトラックグループ化ツールを使用して、一緒にグループ化され得る。Ｖ－ＰＣＣコンポーネントビデオトラック内のＶＰＣＣＴｉｌｅＧｒｏｕｐＢｏｘが、随意の実装と併せて下で説明される。
ＶＰＣＣＴｉｌｅＧｒｏｕｐＢｏｘ
ボックスタイプ： ’ｐｔｇｇ’
コンテナ：ＴｒａｃｋＢｏｘ
必須：いいえ
数量：ゼロまたは１

そのトラックグループタイプ（ｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅ）が’ｐｔｇｇ’に等しいトラックグループタイプデータボックス（ＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ）は、点群コンポーネント内の点群コンポーネントタイルグループトラックグループを示す点群コンポーネントタイルグループのグループデータボックスである。同じトラックグループ識別子（ｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄ）値を有する点群コンポーネントタイルグループのグループデータボックスの点群コンポーネントの全てが、空間領域関係（例えば、同じ点群に対応する３Ｄ領域）を有するトラックグループに属する。点群コンポーネント群のグループデータボックスのトラックグループ識別子は、点群空間エリア識別子（ｒｅｇｉｏｎ＿ｉｄ）として使用されることもでき、異なる点群空間エリアに対応するトラックグループ識別子の値は、異なるべきである。

’ｐｔｇｇ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘは、Ｖ－ＰＣＣコンポーネントタイルグループトラックグループを示すＶＰＣＣＴｉｌｅＧｒｏｕｐＢｏｘである。

’ｐｔｇｇ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ内のｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄの同じ値を有するＶ－ＰＣＣコンポーネントタイルグループトラックは、３Ｄ空間関係を伴う同じトラックグループに属する（例えば、点群データの同じ３Ｄ領域に対応する）。’ｐｔｇｇ’に等しいｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅを伴うＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ内のｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄは、点群データの空間領域の識別子として使用され得る。

同じ空間領域に対応するＶ－ＰＣＣコンポーネントタイルグループトラックは、ｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅ ’ｐｔｇｇ’のためのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄの値を有し、１つの空間領域からのトラックのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄは、任意の他の空間領域からのトラックのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄと異なる。

（構文例）
ａｌｉｇｎｅｄ（８）ｃｌａｓｓＰＣＣＴｉｌｅＧｒｏｕｐＢｏｘｅｘｔｅｎｄｓＴｒａｃｋＧｒｏｕｐＴｙｐｅＢｏｘ（’ｐｔｇｇ’）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）；
ｕｎｓｉｇｎｅｄｉｎｔ（１６）ｔｉｌｅ＿ｇｒｏｕｐ＿ｉｄ；
｝

（意味例）

ｔｉｌｅ＿ｇｒｏｕｐ＿ｉｄは、Ｖ－ＰＣＣコンポーネントタイルグループトラックグループのタイルグループ識別を規定する。

（実施形態４）

（Ｖ－ＰＣＣ時間指定メタデータトラック）

Ｖ－ＰＣＣ空間領域の時間指定メタデータトラックは、経時的に動的に変化する、点群データの対応する空間領域情報を示す’ｃｄｓｃ’トラック参照タイプのＴｒａｃｋＲｅｆｅｒｅｎｃｅＢｏｘを利用することによって、それぞれのＶ－ＰＣＣコンポーネントトラックグループにリンクされる。

Ｖ－ＰＣＣコンポーネントトラックグループのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄ値への‘ｃｄｓｃ’トラック参照を含むＶ－ＰＣＣ空間領域の時間指定メタデータトラックは、個々に、トラックグループ内の各Ｖ－ＰＣＣコンポーネントトラックを説明する。

Ｖ－ＰＣＣ時間指定メタデータトラックのサンプルエントリおよびそのサンプルフォーマットが、以下のように定義される。

（構文例）
ｃｌａｓｓＶＰＣＣＳｐａｔｉａｌＲｅｇｉｏｎＳａｍｐｌｅＥｎｔｒｙｅｘｔｅｎｄｓＭｅｔａＤａｔａＳａｍｐｌｅＥｎｔｒｙ（’ｐｃｓｒ’）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＩｎｆｏＳｔｒｕｃｔ（）；
｝
ａｌｉｇｎｅｄ（８）ＶＰＣＣＳｐａｔｉａｌＲｅｇｉｏｎＳａｍｐｌｅ（）｛
ＳｐａｔｉａｌＲｅｇｉｏｎＳｔｒｕｃｔ（）；
｝

図６は、ビデオサンプルがメディアデータとして配置される、ある例示的ファイルフォーマットを示す。ビデオサンプルは、トラック（ｔｒａｋとして示される）に従って並べられる。トラックの一例は、トラックグループエントリおよび特定のトラックグループタイプ（ｐｃｔｇ）に基づいて識別される点群データの幾何学形状トラックを含む。示されるトラックの別の例は、点群データの属性トラックである。トラックの第３の例は、点群データの占有マップトラックである。占有マップは、例えば、３Ｄ領域内の種々の点のマッピングを対応する１つ以上の２Ｄ領域に提供するデータを含む。

図７は、本発明のある実施形態による、Ｖ－ＰＣＣコンポーネントトラックグループへのＶ－ＰＣＣ空間領域時間指定メタデータトラック参照の概略図である。

図７に示されるように、ＴｒａｃｋＲｅｆｅｒｅｎｃｅＢｏｘは、サンプルエントリタイプが’ｐｃｓｒ’に等しく、ＴｒａｃｋＲｅｆｅｒｅｎｃｅＢｏｘ内のｔｒａｃｋ＿ＩＤｓ［］がＶ－ＰＣＣコンポーネントトラックグループのｔｒａｃｋ＿ｇｒｏｕｐ＿ｉｄ値を参照するＶ－ＰＣＣ時間指定メタデータトラックに含まれる。ＴｒａｃｋＲｅｆｅｒｅｎｃｅＢｏｘ内のｒｅｆｅｒｅｎｃｅ＿ｔｙｐｅは、値‘ｃｄｓｃ’をとり、時間指定メタデータトラックが、参照されたＶ－ＰＣＣコンポーネントトラックグループのコンテンツ説明情報を含むことを示す。本実施形態では、Ｖ－ＰＣＣ空間領域時間指定メタデータビデオトラックは、Ｖ－ＰＣＣコンポーネントトラックグループのｔｒａｃｋ＿ｇｒｏｕｐ＿ｔｙｐｅが、’ｐｃｔｇ’に等しく、経時的に動的に変化する点群データの対応する空間領域情報を示すＶ－ＰＣＣコンポーネントトラックグループのトラックグループ識別子を参照する。

いくつかの実施形態が、好ましくは、以下の技術的解決策を実装し得る。

１．点群データ処理の方法であって、方法は、点群データの３Ｄ領域および３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域を決定することと、２Ｄ領域に含まれるパッチフレームデータおよび対応する点群コンポーネントトラックのビデオフレームデータから、点群データの３Ｄ領域を再構築することとを含む、方法。この解決策のある例が、解決策１および図１を参照して説明される。

２．点群データの３Ｄ領域および３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域は、点群トラックサンプルエントリまたはサンプル内の要素に基づいて決定される、解決策１に記載の方法。この解決策のある例が、および図２を参照して説明される。

３．特定のボックスタイプに従って点群トラック内のパッチデータボックスを識別することを含み、パッチデータボックスは、２Ｄ領域が、点群データの３Ｄ領域を再構築するためのパッチデータを含むことを示す、解決策１または解決策２に記載の方法。

４．特定のボックスタイプに従って点群トラック内の２Ｄタイルデータボックスを識別することを含み、２Ｄタイルデータボックスは、２Ｄ領域が点群データの３Ｄ領域の２Ｄタイルデータを含むことを示す、解決策１または解決策２に記載の方法。

５．特定のボックスタイプに従って点群トラック内のタイルグループデータボックスを識別することを含み、タイルグループデータボックスは、２Ｄ領域が点群データの３Ｄ領域を再構築するためのタイルグループデータを含むことを示す、解決策１または解決策２に記載の方法。

６．決定することは、時間指定メタデータトラック内の要素に基づいて、点群データの３Ｄ領域を決定することを含み、時間指定メタデータトラックは、点群トラックへの特定のトラック参照を含む、解決策１に記載の方法。図３および関連するテキストが、この解決策のいくつかの追加の特徴および実施形態を説明している。

７．特定のサンプルエントリタイプに従って時間指定メタデータトラックを識別することを含み、時間指定メタデータトラックは、２Ｄ領域が点群データの３Ｄ領域を再構築するための以下の情報：パッチデータ、２Ｄタイルデータ、タイルグループデータのうちの１つを含むことを示す、解決策１または解決策６に記載の方法。

８．点群データ処理の方法であって、方法は、点群データの３Ｄ領域および３Ｄ領域に対応する点群コンポーネントトラックグループを決定することと、点群コンポーネントトラックグループ内の点群コンポーネントトラックからのビデオフレームデータおよび対応する点群トラックパッチフレームデータに基づいて、点群データの３Ｄ領域を再構築することとを含む、方法。図４、解決策２、および関連するテキストが、この解決策のいくつかの実施形態および特徴を説明する。

９．３Ｄ領域を決定することは、点群コンポーネントトラックのトラックグループデータボックス内の要素に基づいて、点群データの３Ｄ領域および３Ｄ領域に対応する点群コンポーネントトラックグループを決定することを含み、点群コンポーネントトラックグループは、占有マップトラック、幾何学形状トラック、または属性トラックを含む解決策８に記載の方法。

１０．特定のトラックグループタイプに従って点群コンポーネントトラック内のトラックグループデータボックスを識別することを含み、トラックグループデータボックスは、点群コンポーネントトラックグループに対応する点群データの３Ｄ領域を示す、点群データの同じ３Ｄ領域に対応する点群データコンポーネントトラックのトラックグループデータボックスは、同じトラックグループ識別を有する、解決策８または９に記載の方法。

１１．特定のトラックグループタイプに従って点群コンポーネント２Ｄタイルトラック内のトラックグループデータボックスを識別することを含み、トラックグループデータボックスは、点群コンポーネント２Ｄタイルトラックグループに対応する点群データの３Ｄ領域を示し、点群データの同じ３Ｄ領域に対応する点群コンポーネント２Ｄタイルトラックのトラックグループデータボックスは、同じトラックグループ識別を有する、解決策８または９に記載の方法。

１２．特定のトラックグループタイプに従って点群コンポーネントタイルグループトラック内のトラックグループデータボックスを識別することを含み、トラックグループデータボックスは、点群コンポーネントタイルグループトラックグループに対応する点群データの３Ｄ領域を示し、点群データの同じ３Ｄ領域に対応する点群コンポーネントタイルグループトラックのトラックグループデータボックスは、同じトラックグループ識別を有する、解決策８または９に記載の方法。

１３．決定することは、時間指定メタデータトラック内の要素に基づいて、点群データの３Ｄ領域および３Ｄ領域に対応する点群コンポーネントトラックグループを決定することを含み、時間指定メタデータトラックは、点群コンポーネントトラックグループへの特定のトラック参照を含む、解決策８に記載の方法。

１４．特定のサンプルエントリタイプに従って時間指定メタデータトラックを識別することを含み、時間指定メタデータトラックは、点群コンポーネントトラックグループに対応する点群データの３Ｄ領域を示す、解決策８または解決策１３に記載の方法。

１５．３Ｄ領域は、点群トラックパッチフレームの２つ以上の２Ｄ領域上に投影される点を含む、解決策１－１４のいずれかに記載の方法。

１６．点群データの３Ｄ領域に関する情報は、３Ｄ領域のｘ、ｙ、ｚ座標オフセットおよび／または３Ｄ領域の幅、高さ、および奥行を含む３Ｄ境界ボックスパラメータを含む、解決策１－１５のいずれか１項に記載の方法。

１７．点群データの３Ｄ領域は、以下の情報：点群データの標識、点群データの点の数、または点群の属性の数およびタイプのうちの１つをさらに含む、解決策１－１６のいずれかに記載の方法。

１８．点群トラックパッチフレームの２Ｄ領域に関する情報は、２Ｄ領域のｘ、ｙ座標オフセットおよび／または２Ｄ領域の幅および高さを含む２Ｄ境界ボックスパラメータを含む、解決策１－１７のいずれか１項に記載の方法。

１９．点群トラックパッチフレームの２Ｄ領域は、以下の情報：レイヤ情報、説明情報、パッチの数、２Ｄタイル情報、またはタイルグループ情報のうちの１つをさらに含む、解決策１－１８のいずれか１項に記載の方法。

２０．前述の解決策のうちのいずれかに列挙される方法を実装するように構成されたプロセッサを備えているビデオ処理装置。

２１．コンピュータ読み取り可能な媒体であって、コンピュータ読み取り可能な媒体は、プロセッサによって上で説明される方法を実行するためのコードを記憶している、コンピュータ読み取り可能な媒体。

図６および図７は、本明細書に説明される点群データ処理技法を促進するために使用される、ファイルフォーマットの例を示す。

図８は、点群データの処理のために使用される装置８００のある例のブロック図である。装置８００は、本書に説明される方法を実装するようにプログラムされるプロセッサ８０２を含む。装置８００は、データのデコーディング、コンポーネントトラックへのアクセス等の具体的な関数を実施するための、専用のハードウェア回路網をさらに含み得る。装置８００は、メモリも含み得、メモリは、プロセッサのための実行可能コード、および／または２Ｄボリュームデータおよび他のデータ（本書に説明される種々の構文要素に準拠するデータを含む）を記憶している。

いくつかの実施形態では、３Ｄ点群データエンコーダは、本書に説明されるような構文および意味論を使用して３Ｄ空間情報をエンコードすることによって、３Ｄ点群のビットストリーム表現を発生させるように実装され得る。

点群データエンコーディング装置または点群データデコーディング装置は、コンピュータ、ラップトップ、タブレット、またはゲーム用デバイス等のユーザデバイスの一部として実装され得る。

本書に説明される、開示されるおよび他の実施形態、モジュール、および機能動作が、デジタル電子回路網で、または本書に開示される構造およびそれらの構造均等物を含むコンピュータソフトウェア、ファームウェア、またはハードウェアで、またはそれらのうちの１つ以上の組み合わせで、実装されることができる。開示されるおよび他の実施形態は、１つ以上のコンピュータプログラム製品、すなわち、データ処理装置による実行のために、またはその動作を制御するために、コンピュータ読み取り可能な媒体上でエンコードされるコンピュータプログラム命令の１つ以上のモジュールとして、実装されることができる。コンピュータ読み取り可能な媒体は、機械読み取り可能な記憶デバイス、機械読み取り可能な記憶基板、メモリデバイス、機械読み取り可能な伝搬信号を生じさせる組成物、または１つ以上のそれらの組み合わせであり得る。用語「データ処理装置」は、例として、プログラマブルプロセッサ、コンピュータ、または複数のプロセッサまたはコンピュータを含むデータを処理するための全ての装置、デバイス、および機械を包含する。装置は、ハードウェアに加えて、当該コンピュータプログラムのための実行環境を生成するコード、例えば、プロセッサファームウェア、プロトコルスタック、データベース管理システム、オペレーティングシステム、またはそれらのうちの１つ以上のある組み合わせを成すコードを含むことができる。伝搬信号は、人工的に発生させられる信号、例えば、好適な受信機装置に伝送するために情報をエンコードするように発生させられる、機械で発生させられる電気、光学、または電磁信号である。

コンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、スクリプト、またはコードとしても公知である）が、コンパイラ型またはインタープリタ型言語を含む任意の形態のプログラミング言語で書かれることができ、独立型プログラムとして、またはコンピューティング環境内での使用のために好適なモジュール、コンポーネント、サブルーチン、または他のユニットとしてのものを含む任意の形態で展開されることができる。コンピュータプログラムは、必ずしもファイルシステム内のファイルに対応するわけではない。プログラムは、他のプログラムまたはデータを保持するファイル（例えば、マークアップ言語文書内に記憶された１つ以上のスクリプト）の一部内に、当該プログラム専用の単一のファイル内に、または複数の協調ファイル（例えば、１つ以上のモジュール、サブプログラム、またはコードの一部を記憶するファイル）内に記憶されることができる。コンピュータプログラムは、１つのコンピュータ上で、または１つの地点に位置する、または複数の地点を横断して分散され、通信ネットワークによって相互接続される複数のコンピュータ上で、実行されるように展開されることができる。

本書に説明されるプロセスおよび論理フローは、入力データに作用し、出力を発生させることによって機能を実施するように、１つ以上のコンピュータプログラムを実行する１つ以上のプログラマブルプロセッサによって、実施されることができる。プロセスおよび論理フローはまた、特殊目的論理回路網、例えば、ＦＰＧＡ（フィールドプログラマブルゲートアレイ）またはＡＳＩＣ（特定用途向け集積回路）によって実施されることもでき、装置も、それらとして実装されることもできる。

コンピュータプログラムの実行のために好適なプロセッサは、例として、汎用および特殊用途マイクロプロセッサの両方、および任意の種類のデジタルコンピュータのいずれか１つ以上のプロセッサを含む。概して、プロセッサは、読取専用メモリまたはランダムアクセスメモリまたは両方から、命令およびデータを受信するであろう。コンピュータの不可欠な要素は、命令を実施するためのプロセッサ、および命令およびデータを記憶するための１つ以上のメモリデバイスである。概して、コンピュータは、データを記憶するための１つ以上の大容量記憶デバイス、例えば、磁気、磁気光学ディスク、または光ディスクを含むか、または、それらからデータを受信し、またはそれらにデータを転送するか、または、両方を行うように動作可能に結合されるであろう。しかしながら、コンピュータは、そのようなデバイスを有する必要はない。コンピュータプログラム命令およびデータを記憶するために好適なコンピュータ読み取り可能な媒体は、例として、半導体メモリデバイス、例えば、ＥＰＲＯＭ、ＥＥＰＲＯＭ、およびフラッシュメモリデバイス、磁気ディスク、例えば、内部ハードディスクまたはリムーバブルディスク、磁気光学ディスク、およびＣＤ－ＲＯＭおよびＤＶＤ－ＲＯＭディスクを含むあらゆる形態の不揮発性メモリ、媒体、およびメモリデバイスを含む。プロセッサおよびメモリは、特殊用途論理回路網によって補完される、またはそれに組み込まれることができる。

本特許文書は、多くの詳細を含むが、これらは、任意の発明または請求され得るものの範囲への限定としてではなく、むしろ、特定の発明の特定の実施形態に特有であり得る特徴の説明として解釈されるべきである。別個の実施形態との関連で本特許文書に説明されるある特徴も、単一の実施形態において組み合わせて実装されることができる。逆に、単一の実施形態との関連で説明される種々の特徴も、複数の実施形態において別個に、または任意の好適な副次的組み合わせにおいて実装されることができる。さらに、特徴が、ある組み合わせにおいて作用するものとして上で説明され、そのようなものとして最初に請求され得るが、請求される組み合わせからの１つ以上の特徴が、ある場合、組み合わせから削除されることができ、請求される組み合わせは、副次的組み合わせまたは副次的組み合わせの変形例を対象とし得る。

同様に、動作が、特定の順序で図面に描写されるが、それは、望ましい結果を達成するために、そのような動作が示される特定の順序で、または順次順序で実施されること、または全ての図示される動作が実施されることを要求するものとして理解されるべきではない。さらに、本特許文書に説明される実施形態における種々のシステムコンポーネントの分離は、全ての実施形態においてそのような分離を要求するものとして理解されるべきではない。

いくつかの実装および例のみが、説明され、他の実装、強化、および変形例も、本特許文書に説明および図示されるものに基づいて成されることができる。

Claims

点群データ処理の方法であって、前記方法は、
点群データの３Ｄ領域を決定することと、
点群トラックパッチフレームの２Ｄ領域を決定することであって、前記３Ｄ領域の前記点群データ内の１つ以上の点が前記２Ｄ領域に投影される、ことと、
（ａ）特定のボックスタイプに従って前記点群トラック内のパッチデータボックスを識別すること、または、（ｂ）前記特定のボックスタイプに従って前記点群トラック内の２Ｄタイルデータボックスを識別することであって、前記パッチデータボックスは、前記２Ｄ領域が前記点群データの前記３Ｄ領域を再構築するためのパッチデータを含むことを示し、前記２Ｄタイルデータボックスは、前記２Ｄ領域が前記点群データの前記３Ｄ領域の２Ｄタイルデータを含むことを示す、ことと、
前記２Ｄ領域に含まれているパッチフレームデータと、対応する点群コンポーネントトラックのビデオフレームデータとから、前記点群データの前記３Ｄ領域を再構築することと
を含む、方法。
前記点群データの前記３Ｄ領域と、前記３Ｄ領域の１つ以上の点が投影される前記点群トラックパッチフレームの前記２Ｄ領域とは、点群トラックサンプルエントリまたはサンプル内の要素に基づいて決定される、請求項１に記載の方法。
点群データ処理の方法であって、前記方法は、
点群データの３Ｄ領域と、前記３Ｄ領域の１つ以上の点が投影される点群トラックパッチフレームの２Ｄ領域とを決定することと、
前記２Ｄ領域に含まれているパッチフレームデータと、対応する点群コンポーネントトラックのビデオフレームデータとから、前記点群データの前記３Ｄ領域を再構築することと
を含み、
前記決定することは、時間指定メタデータトラック内の要素に基づいて、前記点群データの前記３Ｄ領域を決定することを含み、前記時間指定メタデータトラックは、前記点群トラックへの特定のトラック参照を含む、方法。
前記方法は、特定のサンプルエントリタイプに従って前記時間指定メタデータトラックを識別することを含み、
前記時間指定メタデータトラックは、前記点群データの前記３Ｄ領域を再構築するための情報として、パッチデータ、２Ｄタイルデータ、タイルグループデータのうちの１つを前記２Ｄ領域が含むことを示す、請求項３に記載の方法。
点群データ処理の方法であって、前記方法は、
点群データの３Ｄ領域を決定することと、
前記３Ｄ領域に対応する点群コンポーネントトラックグループを決定することと、
特定のトラックグループタイプに従って前記点群コンポーネントトラック内の第１のボックスを識別することであって、前記第１のボックスは、前記点群コンポーネントトラックグループに対応する前記点群データの前記３Ｄ領域を示し、前記点群データの同一のＤ領域に対応する点群データコンポーネントトラックの前記第１のボックスは、同一のトラックグループ識別を有する、ことと、
前記点群コンポーネントトラックグループ内の点群コンポーネントトラックからのビデオフレームデータと、対応する点群トラックパッチフレームデータとに基づいて、前記点群データの前記３Ｄ領域を再構築することであって、前記ビデオフレームデータは、１）デコード幾何学形状ビデオフレーム、２）デコード属性ビデオフレーム、３）デコード占有マップビデオフレーム、４）ブロックからパッチへのマッピング情報、または、５）出力順序における、フレームインデックスのうちの少なくとも１つを含む、ことと
を含む、方法。
前記３Ｄ領域を決定することは、点群コンポーネントトラックのトラックグループデータボックス内の要素に基づいて、前記点群データの前記３Ｄ領域と、前記３Ｄ領域に対応する前記点群コンポーネントトラックグループとを決定することを含み、
前記点群コンポーネントトラックグループは、占有マップトラック、幾何学形状トラック、または、属性トラックを含む、請求項５に記載の方法。
点群データ処理の方法であって、前記方法は、
点群データの３Ｄ領域と、前記３Ｄ領域に対応する点群コンポーネントトラックグループとを決定することと、
前記点群コンポーネントトラックグループ内の点群コンポーネントトラックからのビデオフレームデータと、対応する点群トラックパッチフレームデータとに基づいて、前記点群データの前記３Ｄ領域を再構築することと
を含み、
前記決定することは、時間指定メタデータトラック内の要素に基づいて、前記点群データの前記３Ｄ領域と、前記３Ｄ領域に対応する前記点群コンポーネントトラックグループとを決定することを含み、
前記時間指定メタデータトラックは、前記点群コンポーネントトラックグループへの特定のトラック参照を含む、方法。
前記方法は、特定のサンプルエントリタイプに従って前記時間指定メタデータトラックを識別することを含み、
前記時間指定メタデータトラックは、前記点群コンポーネントトラックグループに対応する前記点群データの前記３Ｄ領域を示す、請求項７に記載の方法。
前記点群データの前記３Ｄ領域に関する情報は、３Ｄ境界ボックスパラメータを含み、前記３Ｄ境界ボックスパラメータは、前記３Ｄ領域のｘ、ｙ、ｚ座標オフセット、および／または、前記３Ｄ領域の幅および高さおよび奥行を含む、請求項１に記載の方法。
前記点群トラックパッチフレームの前記２Ｄ領域に関する情報は、２Ｄ境界ボックスパラメータを含み、前記２Ｄ境界ボックスパラメータは、前記２Ｄ領域のｘ、ｙ座標オフセット、および／または、前記２Ｄ領域の幅および高さ、パッチの説明情報、または、２Ｄタイル情報を含む、請求項９に記載の方法。
請求項１～１０のうちのいずれか一項に記載の方法を実装するように構成されているプロセッサを備えているビデオ処理装置。
請求項１～１０のいずれか一項に記載の方法をプロセッサによって実装するためのコードが記憶されているコンピュータ読み取り可能な媒体。