CN115061984A - 点云媒体的数据处理方法、装置、设备、存储介质 - Google Patents

Abstract

本申请实施例公开了一种点云媒体的数据处理方法、装置、设备、存储介质。其中方法包括：一方面获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，根据码流数据生成属性指示信息，对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。另一方面获取点云媒体的媒体文件，根据媒体文件中的属性指示信息和码流数据，解析并呈现点云媒体。可见，内容制作设备通过属性指示信息来对至少两个属于同一类型的属性组件进行描述，使得内容消费设备可以根据属性指示信息对点云媒体进行解析并呈现。

Description

点云媒体的数据处理方法、装置、设备、存储介质

技术领域

本申请涉及计算机技术领域，具体涉及一种点云(Point Cloud)媒体的数据处理方法、一种点云媒体的数据处理装置、一种计算机设备及一种存储介质。

背景技术

随着科技研究的进步，目前已经能够以较低的成本、在较短的时间周期内获得大量高精度的点云，点云中可以包括多个点，点云中的每个点具备几何信息和属性信息，属性信息由一种或多种类型的属性组件构成。实践发现，随着点云技术的广泛应用，在一些场景中(如数字文物场景)每个点的属性信息中包括多个属于同一种类型的属性组件，如何对多个属于同一类型的属性组件进行描述，以便于对点云媒体进行解析并呈现，成为目前研究的热门问题。

发明内容

本发明实施例提供了一种点云媒体的数据处理方法、装置、设备及计算机可读存储介质，能够对多个属于同一类型的属性组件进行描述。

一方面，本申请实施例提供了一种点云媒体的数据处理方法，包括：

获取点云媒体的媒体文件，媒体文件包含点云媒体的码流数据和属性指示信息，码流数据包含至少两个属于同一类型的属性组件，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式；

根据属性指示信息和码流数据，解析并呈现点云媒体。

本申请实施例中，获取点云媒体的媒体文件，媒体文件包含点云媒体的码流数据和属性指示信息，码流数据包含至少两个属于同一类型的属性组件，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式，根据属性指示信息和码流数据，解析并呈现点云媒体。可见，通过属性指示信息可以对至少两个属于同一类型的属性组件进行描述，使得内容消费设备可以根据属性指示信息对点云媒体进行解析并呈现。

一方面，本申请实施例提供了一种点云媒体的数据处理方法，包括：

获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，点云媒体的码流数据包含至少两个属于同一类型的属性组件；

根据码流数据生成属性指示信息，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式；

对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。

本申请实施例中，获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，点云媒体的码流数据包含至少两个属于同一类型的属性组件，根据码流数据生成属性指示信息，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式，对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。可见，通过属性指示信息来对至少两个属于同一类型的属性组件进行描述，以便于内容消费设备根据属性指示信息对点云媒体进行解析并呈现。

一方面，本申请实施例提供了一种点云媒体的数据处理装置，该点云媒体的数据处理装置包括：

一方面，本申请实施例提供了一种点云媒体的数据处理装置，该点云媒体的数据处理装置包括：

获取单元，用于获取点云媒体的媒体文件，媒体文件包含点云媒体的码流数据和属性指示信息，码流数据包含至少两个属于同一类型的属性组件，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式；

处理单元，用于根据属性指示信息和码流数据，解析并呈现点云媒体。

获取单元，用于获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，点云媒体的码流数据包含至少两个属于同一类型的属性组件；

处理单元，用于根据码流数据生成属性指示信息，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式；

以及用于对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。

相应地，本申请提供了一种计算机设备，该计算机设备包括：

处理器，用于加载并执行计算机程序；

存储器，该存储器中存储有计算机程序，该计算机程序被处理器执行时，实现上述点云媒体的数据处理方法。

相应地，本申请提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，该计算机程序适于由处理器加载并执行上述点云媒体的数据处理方法。

相应地，本申请提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述点云媒体的数据处理方法。

本申请实施例中，内容制作设备获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，根据码流数据生成属性指示信息，对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。内容消费设备获取点云媒体的媒体文件，根据媒体文件中的属性指示信息和码流数据，解析并呈现点云媒体。可见，内容制作设备通过属性指示信息来对至少两个属于同一类型的属性组件进行描述，使得内容消费设备可以根据属性指示信息对点云媒体进行解析并呈现。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1a为本申请实施例提供的一种6DoF的示意图；

图1b为本申请实施例提供的一种3DoF的示意图；

图1c为本申请实施例提供的一种3DoF+的示意图；

图1d为本申请实施例提供的一种点云媒体的数据处理架构图；

图2为本申请实施例提供的一种点云媒体的数据处理方法的流程图；

图3为本申请实施例提供的另一种点云媒体的数据处理方法的流程图；

图4为本申请实施例提供的一种点云媒体的数据处理装置的结构示意图；

图5为本申请实施例提供的另一种点云媒体的数据处理装置的结构示意图；

图6为本申请实施例提供的一种内容消费设备的结构示意图；

图7为本申请实施例提供的一种内容制作设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

一、沉浸媒体：

沉浸媒体是指能够提供沉浸式的媒体内容，使沉浸于该媒体内容中的观看者能够获得现实世界中视觉、听觉等感官体验的媒体文件。沉浸式媒体按照观看者在消费媒体内容时的自由度，可以分为：6DoF(Degree of Freedom)沉浸媒体，3DoF沉浸媒体，3DoF+沉浸媒体。

二、点云：

所谓点云是指空间中一组无规则分布的、表达三维物体或场景的空间结构及表面属性的离散点集。点云中的每个点至少具有三维位置信息，根据应用场景的不同，还可能具有色彩、材质或其他信息。通常，点云中的每个点都具有相同数量的附加属性。

三、点云媒体：

点云媒体一种典型的6DoF沉浸媒体。点云媒体可以灵活方便地表达三维物体或场景的空间结构及表面属性，因此被广泛应用在虚拟现实(Virtual Reality，VR)游戏、计算机辅助设计(Computer Aided Design,CAD)、地理信息系统(Geography InformationSystem，GIS)、自动导航系统(Autonomous Navigation System，ANS)、数字文化遗产、自由视点广播、三维沉浸远程呈现、生物组织器官三维重建等项目中。

四、轨道(Track)：

轨道是媒体文件封装过程中的媒体数据集合，一个媒体文件可由一个或多个轨道组成，例如常见的：一个媒体文件可以包含一个视频轨道、一个音频轨道及一个字幕轨道。特别地，元数据信息也可以作为一种媒体类型，以元数据媒体轨道的形式包含于文件中。

五、样本(Sample)：

样本是媒体文件封装过程中的封装单位，一个轨道由很多个样本组成，例如：一个视频轨道可以由很多个样本组成，一个样本通常为一个视频帧。在本申请实施例中，轨道中的一个样本可以为一个点云帧。

六、特定样本的序号(Sample Number)：

在一种实施方式中，轨道中第一个样本的序号为1。

七、样本入口(SampleEntry)：

样本入口用于指示轨道中所有样本相关的元数据信息。例如，在视频轨道的样本入口中，通常会包含解码器初始化相关的元数据信息。

八、点云片/点云条(Slice)：

点云片/点云条是指部分或全部编码后点云媒体中点云帧的一系列语法元素(比如几何slice、属性slice)集合。

九、点云空间分块(Tile)：

点云空间分块又称为点云帧边界空间区域内的六面体空间分块区域，一个点云空间分块由一个或多个点云片组成，点云空间分块之间不存在编解码依赖关系。

十、ISOBMFF(ISO Based Media File Format，基于ISO标准的媒体文件格式)：

ISOBMFF是媒体文件的封装标准，较为典型的ISOBMFF文件即为MP4文件。

十一、DASH(Dynamic Adaptive Streaming over HTTP，基于HTTP的动态自适应流)：

DASH是一种自适应比特率技术，使高质量流媒体可以通过传统的HTTP网络服务器在互联网传递。

十二、MPD(Media Presentation Description，DASH中的媒体演示描述信令):

MPD用于描述媒体文件中的媒体片段信息。

十三、表示层级(Representation)：

Representation是指DASH中一个或多个媒体成分的组合，比如某种分辨率的视频文件可以看做一个Representation；在本申请中，某种时域层级的视频文件可以看做一个Representation。

十四、自适应集层级(Adaptation Sets)：

Adaptation Sets是指DASH中一个或多个视频流的集合，一个Adaptation Sets中可以包含多个Representation。

本申请实施例涉及点云媒体的数据处理技术，下面将对点云媒体的数据处理过程中的一些概念进行介绍，特别说明的是，本申请后续实施例中均以沉浸媒体为点云媒体为例进行说明。

图1a为本申请实施例提供的一种6DoF的示意图；6DoF分为窗口6DoF、全方向6DoF和6DoF，其中，窗口6DoF是指沉浸媒体的观看者在X轴、Y轴的旋转移动受限，以及在Z轴的平移受限；例如，沉浸媒体的观看者不能够看到窗户框架外的景象，以及沉浸媒体的观看者无法穿过窗户。全方向6DoF是指沉浸媒体的观看者在X轴、Y轴和Z轴的旋转移动受限，例如，沉浸媒体的观看者在受限的移动区域中不能自由的穿过三维的360度VR内容。6DoF是指沉浸媒体的观看者可以沿着X轴、Y轴、Z轴自由平移，例如，沉浸媒体的观看者可以在三维的360度VR内容中自由的走动。与6DoF相类似的，还有3DoF和3DoF+制作技术。图1b为本申请实施例提供的一种3DoF的示意图；如图1b所示，3DoF是指沉浸媒体的观看者在一个三维空间的中心点固定，沉浸媒体的观看者头部沿着X轴、Y轴和Z轴旋转来观看媒体内容提供的画面。图1c为本申请实施例提供的一种3DoF+的示意图，如图1c所示，3DoF+是指当沉浸媒体提供的虚拟场景具有一定的深度信息，沉浸媒体的观看者头部可以基于3DoF在一个有限的空间内移动来观看媒体内容提供的画面。

随着科技技术的不断发展，目前已经能够以较低的成本在较短的时间周期内获得大量精确度较高的点云数据。点云数据的获取途径包括：计算机生成、三维(3-Dimension，3D)激光扫描、3D摄影测量等。具体来说，点云数据可以是通过采集设备(一组摄像机或具有多个镜头和传感器的摄像机设备)对现实世界的视觉场景进行采集得到的，通过3D激光扫描可以获得静态现实世界三维物体或场景的点云，每秒可以获取百万级点云数据；通过3D摄影可以获得动态现实世界三维物体或场景的点云，每秒可以获取千万级点云数据；此外，在医学领域，可以通过磁共振成像(Magnetic Resonance Imaging，MRI)、电子计算机断层扫描(Computed Tomography，CT)、电磁定位信息获得生物组织器官的点云数据。又如，点云数据还可以由计算机根据虚拟三维物体及场景直接生成，如计算机可以生成虚拟三维物体及场景的点云数据。伴随着大规模的点云数据不断积累，点云数据的高效存储、传输、发布、共享和标准化，成为点云应用的关键。

图1d为本申请实施例提供的一种点云媒体的数据处理架构图。如图1d所示，在内容制作设备端的数据处理过程主要包括：(1)点云数据的媒体内容的获取过程；(2)点云数据的编码及文件封装的过程。在内容消费设备端的数据处理过程主要包括：(3)点云数据的文件解封装及解码的过程；(4)点云数据的渲染过程。另外，内容制作设备与内容消费设备之间涉及点云媒体的传输过程，该传输过程可以基于各种传输协议来进行，此处的传输协议可包括但不限于：DASH(Dynamic Adaptive Streaming over HTTP，动态自适应流媒体传输)协议、HLS(HTTP Live Streaming，动态码率自适应传输)协议、SMTP(Smart MediaTransportProtocol，智能媒体传输协议)、TCP(Transmission Control Protocol，传输控制协议)等。

下面对点云媒体的数据处理过程进行详细描述：

(1)获取点云媒体的媒体内容。

从点云媒体的媒体内容的获取方式看，可以分为通过捕获设备采集现实世界的声音-视觉场景获得的以及通过计算机生成的两种方式。在一种实现中，捕获设备可以是指设于内容制作设备中的硬件组件，例如捕获设备是指终端的麦克风、摄像头、传感器等。另一种实现中，该捕获设备也可以是与内容制作设备相连接的硬件装置，例如与服务器相连接摄像头；用于为内容制作设备提供点云数据的媒体内容的获取服务。该捕获设备可以包括但不限于：音频设备、摄像设备及传感设备。其中，音频设备可以包括音频传感器、麦克风等。摄像设备可以包括普通摄像头、立体摄像头、光场摄像头等。传感设备可以包括激光设备、雷达设备等。捕获设备的数量可以为多个，这些捕获设备被部署在现实空间中的一些特定位置以同时捕获该空间内不同角度的音频内容和视频内容，捕获的音频内容和视频内容在时间和空间上均保持同步。由于获取的方式不同，不同点云数据的媒体内容对应的压缩编码方式也可能有所区别。

(2)点云媒体的媒体内容的编码及文件封装的过程。

目前，通常采用基于几何的点云压缩(Geometry-based point cloudcompression，GPCC)编码方式对获取的点云数据进行编码处理，得到基于几何的点云压缩比特流(包括编码的几何比特流和属性比特流)。基于几何的点云压缩比特流的封装模式包括单轨道封装模式和多轨道封装模式。

单轨道封装模式是指以单一轨道的形式对点云码流进行封装，在单轨道封装模式下，一个样本中会包含一个或多个编码内容单元(比如一个几何编码内容单元和多个属性编码内容单元)，单轨道封装模式的好处在于：在点云码流的基础上，无需过多的处理即可得到一个单轨道封装的点云文件。

多轨道封装模式是指以多个轨道的形式对点云码流进行封装，在多轨道封装模式下，每个轨道包含点云码流中的一个组件，即一个几何组件轨道和一个或多个属性组件轨道，多轨道封装的好处在于：将不同的组件分别封装，有利于客户端根据自身需求选择所需要的组件进行传输和解码消费。

(3)点云媒体的文件解封装及解码的过程；

内容消费设备可以通过内容制作设备获得点云数据的媒体文件资源和相应的媒体呈现描述信息。点云数据的媒体文件资源和媒体呈现描述信息通过传输机制(如DASH、SMT)由内容制作设备传输给内容消费设备。内容消费设备端的文件解封装的过程与内容制作设备端的文件封装过程是相逆的，内容消费设备按照点云媒体的文件格式要求对媒体文件资源进行解封装，得到编码比特流(GPCC比特流或VPCC比特流)。内容消费设备端的解码过程与内容制作设备端的编码过程是相逆的，内容消费设备对编码比特流进行解码，还原出点云数据。

(4)点云媒体的渲染过程。

内容消费设备根据媒体呈现描述信息中与渲染、视窗相关的元数据对GPCC比特流解码得到的点云数据进行渲染，得到点云媒体的点云帧，并根据点云帧的呈现时间呈现点云媒体。

在一个实施例中，内容制作设备端：首先通过采集设备对真实世界的视觉场景进行采样，得到与真实世界的视觉场景对应的点云数据；然后通过基于几何的点云压缩(Geometry-based point cloud compression，GPCC)对获取的点云数据进行编码处理，得到GPCC比特流(包括编码的几何比特流和属性比特流)；接着对GPCC比特流进行封装得到点云数据对应的媒体文件(即点云媒体)，具体地，内容制作设备根据特定媒体容器文件格式，将一个或多个编码比特流合成为用于文件回放的媒体文件，或用于流式传输的初始化片段和媒体片段的序列；其中，媒体容器文件格式是指在国际标准化组织(InternationalOrganization for Standardization，ISO)/国际电工委员会(InternationalElectrotechnical Commission，IEC)14496-12中规定的ISO基本媒体文件格式。在一种实施方式中，内容制作设备还将元数据封装到媒体文件或初始化/媒体片段的序列中，并通过传输机制(如动态自适应流媒体传输接口)将初始化/媒体片段的序列传送给内容消费设备。

在内容消费设备端：首先接收内容制作设备发送的点云媒体文件，包括：用于文件回放的媒体文件，或用于流式传输的初始化片段和媒体片段的序列；然后对点云媒体文件进行解封装处理，得到编码的GPCC比特流；接着解析编码的GPCC比特流(即对编码的GPCC比特流进行解码处理，得到点云数据)；在具体实现中，内容消费设备基于当前对象的观看位置/观看方向确定呈现点云媒体所需的媒体文件，或者媒体片段序列；并对呈现点云媒体所需的媒体文件，或者媒体片段序列进行解码处理，得到呈现所需的点云数据。最后基于当前对象的观看(视窗)方向，对解码后的点云数据进行渲染，得到点云媒体的点云帧，并按照点云帧的呈现时间在内容消费设备携带的头戴式显示器或任何其他显示设备的屏幕上呈现点云媒体。需要说明的是，当前对象的观看位置/观看方向由头部追踪以及可能还有视觉追踪功能确定。除了通过渲染器用来渲染当前对象的观看位置/观看方向的点云数据外，还可以通过音频解码器来对当前对象的观看(视窗)方向的音频进行解码优化。

其中，内容制作设备和内容消费设备可以共同组成点云媒体系统。内容制作设备可以是指点云媒体的提供者(例如点云媒体的内容制作者)所使用的计算机设备，该计算机设备可以是终端(如PC(Personal Computer，个人计算机)、智能移动设备(如智能手机)等)或服务器；其中，服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。内容消费设备可以是指点云媒体的使用者(例如点云媒体的观看者)所使用的计算机设备，该计算机设备可以是终端(如PC(Personal Computer，个人计算机)、智能移动设备(如智能手机)、VR设备(如VR头盔、VR眼镜等)、智能家电、车载终端、飞行器等)。

可以理解的是，本申请涉及点云媒体的数据处理技术可以依托于云技术进行实现；例如，将云服务器作为内容制作设备。云技术(Cloud technology)是指在广域网或局域网内将硬件、软件、网络等系列资源统一起来，实现数据的计算、储存、处理和共享的一种托管技术。

基于上述点云媒体的相关介绍，本申请提出一种点云媒体的数据处理方法，该方法可以应用在包含多个同类型的属性组件的场景(如数字文物点云场景)中，通过属性指示信息来对至少两个属于同一类型的属性组件进行描述，使得内容消费设备可以根据属性指示信息对点云媒体进行解析并呈现。

在一种实施方式中，属性指示信息包含多属性实例信息数据盒(GPCCMultiAttrInsInfoBox)，多属性实例信息数据盒用于指示同一类型属性的多个属性组件的描述信息。多属性实例信息数据盒可以包含于样本入口(SampleEntry)中，多属性实例信息数据盒的类型为：'gmai'；强制类型为：否；数量为0或1。多属性实例信息数据盒的语法可参见下述表1：

表1

上述表1中的语法的语义如下：

属性数量字段(attr_num)用于指示当前轨道中具备多属性实例信息的属性组件(即属于同一类型的属性组件)的数量。在一个实施例中，属于同一类型的属性组件被封装在一个或多个轨道中，每个轨道中封装有多属性实例信息数据盒，目标轨道中的多属性实例信息数据盒中的属性数量字段用于指示目标轨道中具备多属性实例信息的属性组件(即属于同一类型的属性组件)的数量，目标轨道可以是上述一个或多个轨道中的任一个轨道。

属性索引字段(attr_index)用于指示相应属性组件的索引号。在一实施例中，每个属性索引字段对应一个属性组件，目标属性组件对应的属性索引字段用于指示该目标属性组件的索引号，目标属性组件可以是多个属于同一类型的属性组件中的任一个。

默认属性标志字段(default_attr_flag)当该字段取值为第一设定值(如1)时，表示当前属性组件为多个同类型属性组件中默认呈现的属性组件；当该字段取值为第二设定值(如0)时，表示当前属性组件不是多个同类型属性组件中默认呈现的属性组件。在一个实施例中，每个默认属性标志字段对应一个属性组件，当目标属性组件对应的默认属性标志字段的值为第一设定值时，表示目标属性组件为多个属于同一类型的属性组件中默认呈现的属性组件；当目标属性组件对应的默认属性标志字段的值为第二设定值时，表示目标属性组件不为多个属于同一类型的属性组件中默认呈现的属性组件，目标属性组件可以是多个属于同一类型的属性组件中的任一个。

属性标签字段(attr_label)指示当前属性组件的描述信息；例如，属性标签字段的值可以指示当前属性组件的属性的类型。在一个实施例中，每个属性标签字段对应一个属性组件，目标属性组件对应的属性标签字段用于指示目标属性组件的描述信息，目标属性组件可以是多个属于同一类型的属性组件中的任一个。此外，属性标签字段可用于描述多个同类型属性组件之间的差异信息等，也就是说，可以通过各个属性组件对应的属性标签字段来描述各个属性组件之间的差异。

可选地，若码流数据中多个属性类型均具备多个属性实例，即码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件；则在呈现这些属性实例时，属性标签字段(attr_label)的值相同的属性组件可以被同时呈现。

在另一种实施方式中，属性指示信息包含组件信息数据盒(GPCCComponentInfoBox)，组件信息数据盒包含码流数据中各个组件的描述信息(如多个属于同一类型的属性组件的描述信息)。多属性实例信息数据盒的语法可参见下述表2：

表2

上述表2中的语法的语义如下：

G-PCC类型字段(gpcc_type)用于指示G-PCC组件的类型，当该字段取值为2时表示当前组件为几何组件；当该字段取值为4时表示当前组件为属性组件；其余取值保留。

属性索引字段(attr_index)用于指示该字段对应的属性组件在序列参数集合中的序号。

属性类型标志字段(attr_type_present_flag)用于指示当前数据盒(如组件信息数据盒)中是否包含属性类型字段。当该字段取值为1时，表示当前数据盒中包含属性类型指示字段；当该字段取值为0时，表示当前数据盒中不包含属性类型指示字段。

属性类型字段(attr_type)用于指示属性组件的类型，该字段的取值含义遵循相应G-PCC编码标准的定义。

属性名字段(attr_name)用于指示可读的属性组件的类型。

属性信息标志字段(attr_info_present_flag)用于指示当前数据盒(如组件信息数据盒)中是否包含属性组件的描述信息。当该字段取值为第一设定值(如1)时，表示当前数据盒中包含属性组件的描述信息；当该字段取值为第二设定值(如0)时，表示当前数据盒中不包含属性组件的描述信息。

默认属性标志字段(default_attr_flag)当该字段取值为第一设定值(如1)时，表示当前属性组件为多个同类型属性组件中默认呈现的属性组件；当该字段取值为第二设定值(如0)时，表示当前属性组件不是多个同类型属性组件中默认呈现的属性组件。在一实施例中，每个默认属性标志字段对应一个属性组件，当目标属性组件对应的默认属性标志字段的值为第一设定值时，表示目标属性组件为多个属于同一类型的属性组件中默认呈现的属性组件；当目标属性组件对应的默认属性标志字段的值为第二设定值时，表示目标属性组件不为多个属于同一类型的属性组件中默认呈现的属性组件，目标属性组件可以是多个属于同一类型的属性组件中的任一个。

属性标签字段(attr_label)指示当前属性组件的描述信息；例如，属性标签字段的值可以指示当前属性组件的属性的类型。在一个实施例中，每个属性标签字段对应一个属性组件，目标属性组件对应的属性标签字段用于指示目标属性组件的描述信息，目标属性组件可以是多个属于同一类型的属性组件中的任一个。此外，属性标签字段可用于描述多个同类型属性组件之间的差异信息等，也就是说，可以通过各个属性组件对应的属性标签字段来描述各个属性组件之间的差异。

可选地，若码流数据中多个属性类型均具备多个属性实例，即码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件；则在呈现这些属性实例时，属性标签字段(attr_label)的值相同的属性组件可以被同时呈现。

在再一种实施方式中，若码流数据中不止一个类型的属性存在多个属性组件，即码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件；则属性指示信息包含轨道组指示信息(AttrInsCombinationGroup)，轨道组指示信息用于指示可以被同时呈现属性组件。在一个实施例中，轨道组指示信息通过指示封装了属性组件的轨道关联的轨道组，来指示可以被同时呈现属性组件。轨道组指示信息的语法可参见下述表3：

表3

上述表3中的语法的语义如下：

轨道组标识字段(track_group_id)用于指示轨道组的标识符，具备相同轨道组类型和轨道组标识符的多个轨道属于同一个轨道组。在一个实施例中，轨道组指示信息还包含轨道组类型字段，轨道组类型字段用于指示该轨道组标识字段对应的轨道所属的轨道组的类型；第一轨道的轨道组标识字段的值用于指示第一轨道所属的轨道组的标识符。若第一轨道的轨道组标识字段的值与第二轨道的轨道组标识字段的值相同，且第一轨道所属的轨道组类型与第二轨道所属的轨道组类型相同(如第一轨道的轨道组类型字段的值与第二轨道的轨道组类型字段的值相同)；则表示第一轨道和第二轨道属于同一个轨道组。

与多属性实例信息数据盒(GPCCMultiAttrInsInfoBox)对应的描述信息被存放于本申请实施例提供的多属性实例信息描述子(GPCCMultiAttrInsInfo descriptor)中，多属性实例信息描述子用于指示同一属性类型的多个不同属性实例(即多个属于同一属性类型的属性组件)的描述信息。多属性实例信息描述子为补充属性(SupplementalProperty)元素，其@schemeIdUri属性为"urn:avs:ims:2022:apcc"。多属性实例信息描述子包含在传输信令文件中。具体地，传输信令文件包含表示层级和自适应集层级，一个自适应集层级中可以包含一个或多个表示层级。多属性实例信息描述子可以存在于表示层级，或者自适应集层级中；当多属性实例信息描述子存在于目标自适应集层级时，用于对目标自适应集层级中所有表示层级进行描述；当多属性实例信息描述子存在于目标表示层级时，用于对目标表示层级进行描述。传输信令文件包含的属性如下表4所示：

表4

其中，O代表对应属性为Optional；CM代表对应属性为Conditional Mandatory；M代表对应属性为Mandatory。

本申请实施例中，通过属性指示信息来对至少两个属于同一类型的属性组件进行描述，使得内容消费设备可以根据属性指示信息对点云媒体进行解析并呈现。

图2为本申请实施例提供的一种点云媒体的数据处理方法的流程图；该方法可由点云媒体系统中的内容消费设备来执行，该方法包括以下步骤S201和步骤S202：

S201、获取点云媒体的媒体文件。

媒体文件包含点云媒体的码流数据和属性指示信息，码流数据包含至少两个属于同一类型的属性组件；例如，码流数据包含属性组件1和属性组件2，且属性组件1和属性组件2均属于颜色类型属性组件。属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式，具体来说，属性指示信息一方面对码流数据中的属性组件进行了描述(如码流数据中包含的属于同一类型的属性组件数量、各个属性组件的索引号等)，另一方面对属性组件如何呈现进行了指示(如当前属性组件是否为默认呈现的属性组件，与当前属性组件可以同时呈现的属性组件等)。

在一种实施方式中，内容消费设备下载点云媒体的完整文件，点云媒体的媒体文件是内容消费设备根据对象的需求(如对象设置的点云媒体的呈现帧率)，或者自身解码能力从本地存储的点云媒体的完整文件中获取的。

在另一种实施方式中，点云媒体的媒体文件被切片为多个媒体片段，内容消费设备获取点云媒体的传输信令文件，传输信令文件中包含属性指示信息的描述信息，属性指示信息的描述信息包括多属性实例信息描述子(GPCCMultiAttrInsInfo descriptor)，多属性实例信息描述子为补充属性(SupplementalProperty)元素，详见上述表4，在此不再赘述。内容消费设备根据传输信令文件中属性指示信息的描述信息，以及对象(如观看者)的需求(如对象设置的点云媒体的呈现帧率)，或者观看者在观看时的虚拟视角，或者自身解码能力，或者当前网络条件(如网络传输速度)，确定呈现点云媒体所需的媒体片段(如呈现点云媒体所需的属性组件)，并通过流化传输方式拉取所确定的点云媒体的媒体文件。例如，假设点云媒体的完整文件包含两个属于同一类型的属性组件1和属性组件2，且当前呈现点云媒体只需要属性组件1；则此时内容消费设备仅需通过流化传输的方式拉取属性组件1。

S202、根据属性指示信息和码流数据，解析并呈现点云媒体。

在一种实施方式中，属性指示信息包含多属性实例信息数据盒，多属性实例信息数据盒用于指示至少两个属于同一类型的属性组件的描述信息。

在一个实施例中，至少两个属于同一类型的属性组件被封装在一个或多个轨道中，至少两个属于同一类型的属性组件具备多属性实例信息，多属性实例信息数据盒包含属性数量字段(attr_num)；内容消费设备根据属性指示信息和码流数据，解析点云媒体的过程包括根据属性数量字段，确定该属性数量字段对应轨道中具备多属性实例信息的属性组件的数量；例如，设轨道1中多属性实例信息数据盒包含的属性数量字段的值为3，则内容消费设备确定轨道1中具备多属性实例信息的属性组件的数量为3(即轨道1中封装了3个属于同一类型的属性组件)。

需要说明的是，若一个类型的属性仅包含一个属性组件，则该属性组件具备单属性实例信息；若一个类型的属性仅包含多个(至少两个)属性组件，则每个属性组件具备多属性实例信息。

在一个实施例中，多属性实例信息数据盒包含属性索引字段(attr_index)；内容消费设备根据属性指示信息和码流数据，解析点云媒体的过程包括根据属性索引字段，确定该属性索引字段对应的属性组件的索引号；例如，设属性组件1对应的属性索引字段的值为x，则内容消费设备根据属性索引字段确定属性组件1的索引号为x。

在一个实施例中，多属性实例信息数据盒包含默认属性标志字段(default_attr_flag)；内容消费设备根据属性指示信息和码流数据，解析点云媒体的过程包括：若默认属性标志字段取值为第一设定值(如1)，则确定默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；若默认属性标志字段取值为第二设定值(如0)，则确定默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

举例来说，假设属性组件1和属性组件2属于同一类型，且属性组件1对应的默认属性标志字段的值为1，属性组件2对应默认属性标志字段的值为0；则内容消费设备根据属性组件1对应的默认属性标志字段的值确定属性组件1为属性组件1和属性组件2中默认呈现的属性组件，相应地，内容消费设备根据属性组件2对应的默认属性标志字段的值确定属性组件2不为属性组件1和属性组件2中默认呈现的属性组件。

在一个实施例中，多属性实例信息数据盒包含属性标签字段(attr_label)；内容消费设备根据属性指示信息和码流数据，解析点云媒体的过程包括根据属性标签字段，确定该属性标签字段对应的属性组件的描述信息。需要说明的是，每个属于同一类型的属性组件对应的属性标签字段可用描述该属性组件与同类型的属性组件之间的差异信息等。

以数字文物修复场景为例，假设属性组件1和属性组件2属于颜色类型，且属性组件1对应的属性标签字段的值为“original”，属性组件2对应的属性标签字段的值为“repaired”；则内容消费设备根据属性组件1对应的属性标签字段的值确定属性组件1用于指示数字文物修复之前的颜色，内容消费设备根据属性组件2对应的属性标签字段的值确定属性组件2用于指示数字文物修复之后的颜色。

可选地，若码流数据中多个属性类型均具备多个属性实例(如一个属性实例对应一个属性组件)，即码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件；则在呈现这些属性实例时，属性标签字段(attr_label)的值相同的属性组件可以被同时呈现；例如，设码流数据中包含属于颜色类型的属性组件1和属性组件2，以及属于反射率类型的属性组件3和属性组件4，且属性组件1和属性组件3的属性标签字段的值相同，属性组件2和属性组件4的属性标签字段的值相同；则属性组件1和属性组件3可以被同时呈现，属性组件2和属性组件4可以被同时呈现。

在另一种实施方式中，属性指示信息包含组件信息数据盒(GPCCComponentInfoBox)，组件信息数据盒包含码流数据中各个组件的描述信息。需要说明的是，本申请中的组件信息数据盒是基于现有组件信息数据盒进行扩展得到的，扩展后的组件信息数据盒包含多个(至少两个)属于同一类型的属性组件的描述信息。

在一个实施例中，组件信息数据盒包含属性信息标志字段(attr_info_present_flag)；内容消费设备根据属性指示信息和码流数据，解析点云媒体的过程包括：若属性信息标志字段取值为第一设定值(如1)，则确定属性信息标志字段对应的数据盒(即组件信息数据盒)包含属性组件的描述信息；若属性信息标志字段取值为第二设定值(如0)，则确定属性信息标志字段对应的数据盒(即组件信息数据盒)不包含属性组件的描述信息。

在一个实施例中，组件信息数据盒包含默认属性标志字段(default_attr_flag)；内容消费设备根据属性指示信息和码流数据，解析点云媒体的过程包括：若默认属性标志字段取值为第一设定值(如1)，则确定默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；若默认属性标志字段取值为第二设定值(如0)，则确定默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

举例来说，假设属性组件1和属性组件2属于同一类型，且属性组件1对应的默认属性标志字段的值为1，属性组件2对应默认属性标志字段的值为0；则内容消费设备根据属性组件1对应的默认属性标志字段的值确定属性组件1为属性组件1和属性组件2中默认呈现的属性组件，相应地，内容消费设备根据属性组件2对应的默认属性标志字段的值确定属性组件2不为属性组件1和属性组件2中默认呈现的属性组件。

在一个实施例中，组件信息数据盒包含属性标签字段(attr_label)；内容消费设备根据属性指示信息和码流数据，解析点云媒体的过程包括根据属性标签字段，确定该属性标签字段对应的属性组件的描述信息。需要说明的是，每个属于同一类型的属性组件对应的属性标签字段可用描述该属性组件与同类型的属性组件之间的差异信息等。

以数字文物修复场景为例，假设属性组件1和属性组件2属于颜色类型，且属性组件1对应的属性标签字段的值为“original”，属性组件2对应的属性标签字段的值为“repaired”；则内容消费设备根据属性组件1对应的属性标签字段的值确定属性组件1用于指示数字文物修复之前的颜色，内容消费设备根据属性组件2对应的属性标签字段的值确定属性组件2用于指示数字文物修复之后的颜色。

可选地，若码流数据中多个属性类型均具备多个属性实例(如一个属性实例对应一个属性组件)，即码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件；则在呈现这些属性实例时，属性标签字段(attr_label)的值相同的属性组件可以被同时呈现；例如，设码流数据中包含属于颜色类型的属性组件1和属性组件2，以及属于反射率类型的属性组件3和属性组件4，且属性组件1和属性组件3的属性标签字段的值相同，属性组件2和属性组件4的属性标签字段的值相同；则属性组件1和属性组件3可以被同时呈现，属性组件2和属性组件4可以被同时呈现。

在再一种实施方式中，码流数据中不止一个类型的属性存在多个属性组件，也就是说，码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件，每个属性组件被封装在一个轨道中；具体来说，在多轨道封装模式下，不同的的属性组件可以被封装在不同的轨道中；在单轨道封装模式下，不同的属性组件可以被封装在同一轨道中。属性指示信息包含轨道组指示信息(AttrInsCombinationGroup)，轨道组指示信息用于指示可以被同时呈现的属性组件。在一种实现方式中，内容消费设备可以通过两个属性组件所属的轨道所对应的轨道组确定这两个属性组件是否可以被同时呈现；例如，若两个属性组件所属的轨道对应同一轨道组，则表示这两个属性组件可以被同时呈现。

在一个实施例中，轨道组指示信息包含轨道组标识字段(track_group_id)；内容消费设备根据属性指示信息和码流数据，解析点云媒体的过程包括根据轨道组标识字段，确定该轨道组标识字段对应的轨道所属的轨道组；例如，设轨道1对应的轨道组标识字段的值为2，则内容消费设备根据轨道1对应的轨道组标识字段的值确定轨道1属于轨道组2。

进一步地，轨道组指示信息还包含轨道组类型字段，轨道组类型字段用于指示该轨道组类型字段对应的轨道所属的轨道组的类型。若码流数据中存在至少两个轨道的轨道组标识字段的值相同，且轨道组类型字段的值也相同；则内容消费设备确定这至少两个轨道属于同一轨道组；例如，假设轨道1对应的轨道组标识字段的值为2，轨道组类型字段的值为x；轨道2对应的轨道组标识字段的值为1，轨道组类型字段的值为y；轨道3对应的轨道组标识字段的值为2，轨道组类型字段的值为x；则内容消费设备确定轨道1和轨道3属于同一轨道组。

再进一步地，内容消费设备根据属性指示信息和码流数据，呈现点云媒体的过程包括将属于同一轨道组中的属性组件同时呈现。

本申请实施例中，获取点云媒体的媒体文件，媒体文件包含点云媒体的码流数据和属性指示信息，码流数据包含至少两个属于同一类型的属性组件，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式，根据属性指示信息和码流数据，解析并呈现点云媒体。可见，通过属性指示信息可以对至少两个属于同一类型的属性组件进行描述，使得内容消费设备可以根据属性指示信息对点云媒体进行解析并呈现。

图3为本申请实施例提供的另一种点云媒体的数据处理方法的流程图；该方法可由点云媒体系统中的内容制作设备来执行，该方法包括以下步骤S301和步骤S303：

S301、获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据。

点云媒体的码流数据包含至少两个属于同一类型的属性组件。点云媒体的点云数据的具体获取方式可参考图1d中(1)的实施方式，内容制作设备对点云数据进行编码处理得到点云媒体的码流数据的具体实施方式可参考图1d中(2)的实施方式，在此不再赘述。

S302、根据码流数据生成属性指示信息。

属性指示信息用于指示码流数据中包含的至少两个属于同一类型的属性组件的呈现方式。

在一种实施方式中，属性指示信息包含多属性实例信息数据盒(GPCCMultiAttrInsInfoBox)，多属性实例信息数据盒用于指示至少两个属于同一类型的属性组件的描述信息。

在一个实施例中，至少两个属于同一类型的属性组件被封装在一个或多个轨道中，至少两个属于同一类型的属性组件具备多属性实例信息；多属性实例信息数据盒包含属性数量字段(attr_num)，属性数量字段用于指示该属性数量字段对应的轨道中具备多属性实例信息的属性组件的数量。内容制作设备根据码流数据生成属性指示信息的过程包括：根据轨道中具备多属性实例信息的属性组件的数量，确定该轨道对应的属性数量字段的值。

需要说明的是，若一个类型的属性仅包含一个属性组件，则该属性组件具备单属性实例信息；若一个类型的属性仅包含多个(至少两个)属性组件，则每个属性组件具备多属性实例信息。

在一个实施例中，多属性实例信息数据盒包含属性索引字段(attr_index)，属性索引字段用于指示该属性索引字段对应的属性组件的索引号。内容制作设备根据码流数据生成属性指示信息的过程包括：为不同的属性组件分配不同的索引号，将目标属性组件的索引号设置为目标属性组件对应的属性索引字段的值；其中，目标属性组件可以是码流数据中的任一个属性组件。

在一个实施例中，多属性实例信息数据盒包含默认属性标志字段(default_attr_flag)；当默认属性标志字段取值为第一设定值(如1)时，用于指示默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；当默认属性标志字段取值为第二设定值(如0)时，用于指示默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

内容制作设备根据码流数据生成属性指示信息的过程包括：若目标属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件，则内容制作设备将目标属性组件对应的默认属性标志字段设为第一设定值(如1)；若目标属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件，则内容制作设备将目标属性组件对应的默认属性标志字段设为第二设定值(如0)；其中，目标属性组件可以是至少两个属于同一类型的属性组件中的任一个属性组件。

在一个实施例中，多属性实例信息数据盒包含属性标签字段(attr_label)，属性标签字段用于该属性标签字段对应的属性组件的描述信息。内容制作设备根据码流数据生成属性指示信息的过程包括：根据目标属性组件的描述信息配置目标属性组件对应的属性标签字段的值。需要说明的是，每个属于同一类型的属性组件对应的属性标签字段可用描述该属性组件与同类型的属性组件之间的差异信息等。

可选地，若码流数据中多个属性类型均具备多个属性实例(如一个属性实例对应一个属性组件)，即码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件；则内容制作设备可以通过属性标签字段来是指可以同时呈现的属性组件。内容制作设备根据码流数据生成属性指示信息的过程包括：将可以同时呈现的属性组件对应的属性标签字段的值配置为相同的。

在另一种实施方式中，属性指示信息包含组件信息数据盒(GPCCComponentInfoBox)，组件信息数据盒包含码流数据中各个组件的描述信息。需要说明的是，本申请中的组件信息数据盒是基于现有组件信息数据盒进行扩展得到的，扩展后的组件信息数据盒包含多个(至少两个)属于同一类型的属性组件的描述信息。

在一个实施例中，组件信息数据盒包含属性信息标志字段(attr_info_present_flag)；属性信息标志字段用于指示组件信息数据盒中是否包含属性组件的描述信息；当属性信息标志字段取值为第一设定值(如1)时，用于指示组件信息数据盒包含属性组件的描述信息；当属性信息标志字段取值为第二设定值(如0)时，用于指示组件信息数据盒不包含属性组件的描述信息。

内容制作设备根据码流数据生成属性指示信息的过程包括：若组件信息数据盒中包含属性组件的描述信息，则将组件信息数据盒中的属性信息标志字段的配置为第一设定值(如1)；若组件信息数据盒中不包含属性组件的描述信息，则将组件信息数据盒中的属性信息标志字段的配置为第二设定值(如0)。

在一个实施例中，组件信息数据盒包含默认属性标志字段(default_attr_flag)；当默认属性标志字段取值为第一设定值(如1)时，用于指示默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；当默认属性标志字段取值为第二设定值(如0)时，用于指示默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

内容制作设备根据码流数据生成属性指示信息的过程包括：若目标属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件，则内容制作设备将目标属性组件对应的默认属性标志字段设为第一设定值(如1)；若目标属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件，则内容制作设备将目标属性组件对应的默认属性标志字段设为第二设定值(如0)；其中，目标属性组件可以是至少两个属于同一类型的属性组件中的任一个属性组件。

在一个实施例中，组件信息数据盒包含属性标签字段(attr_label)，属性标签字段用于该属性标签字段对应的属性组件的描述信息。内容制作设备根据码流数据生成属性指示信息的过程包括：根据目标属性组件的描述信息配置目标属性组件对应的属性标签字段的值。需要说明的是，每个属于同一类型的属性组件对应的属性标签字段可用描述该属性组件与同类型的属性组件之间的差异信息等。

可选地，若码流数据中多个属性类型均具备多个属性实例(如一个属性实例对应一个属性组件)，即码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件；则内容制作设备可以通过属性标签字段来是指可以同时呈现的属性组件。内容制作设备根据码流数据生成属性指示信息的过程包括：将可以同时呈现的属性组件对应的属性标签字段的值配置为相同的。

在再一种实施方式中，码流数据中不止一个类型的属性存在多个属性组件，也就是说，码流数据中至少包含属于第一类型的多个(至少两个)属性组件和属于第二类型的多个(至少两个)属性组件；每个属性组件被封装在一个轨道中，属性指示信息包含轨道组指示信息(AttrInsCombinationGroup)，轨道组指示信息用于指示同时呈现的属性组件。

在一个实施例中，轨道组指示信息包含轨道组标识字段(track_group_id)，轨道组标识字段用于指示该轨道组标识字段对应的轨道所属的轨道组。内容制作设备根据码流数据生成属性指示信息的过程包括：根据目标轨道所属的轨道组的标识配置目标轨道对应的轨道组标识字段的值；其中，目标轨道可以是码流数据中的任一个轨道。

进一步地，轨道组指示信息还包含轨道组类型字段，轨道组类型字段用于指示该轨道组类型字段对应的轨道所属的轨道组的类型；若至少两个轨道的轨道组标识字段的取值相同，且至少两个轨道的轨道组类型字段的取值相同，则表示至少两个轨道属于同一轨道组。内容制作设备根据码流数据生成属性指示信息的过程包括：若第一轨道和第二轨道属于同一轨道组，则内容制作设备将第一轨道和第二轨道对应轨道组标识字段配置为相同的值，并将第一轨道和第二轨道对应轨道组类型字段也配置为相同的值。

在一种实现方式中，内容制作设备可以通过指示两个属性组件所属的轨道所对应的轨道组来指示这两个属性组件是否可以被同时呈现；例如，若两个属性组件可以被同时呈现，则通过轨道组指示信息指示将这两个属性组件所属的轨道属于同一轨道组。

S303、对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。

内容制作设备对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件的具体实施方式可参考图1d中(2)的实施方式，在此不再赘述。

在一种实施方式中，内容制作设备还可以生成点云媒体的传输信令文件，传输信令文件包含属性指示信息的描述信息。属性指示信息的描述信息包括多属性实例信息描述子(GPCCMultiAttrInsInfo descriptor)，多属性实例信息描述子为补充属性(SupplementalProperty)元素，详见上述表4，在此不再赘述。

具体地，传输信令文件包含表示层级和自适应集层级，自适应集层级中包括一个或多个表示层级；当描述信息存在于目标自适应集层级时，用于对目标自适应集层级中所有表示层级进行描述；当描述信息存在于目标表示层级时，用于对目标表示层级进行描述。

内容制作设备对码流数据和属性指示信息进行封装可以采用多轨道封装模式，也可以采用单轨道封装模式。下面分别以多轨道封装模式和单轨道封装模式进行举例，来对本申请提供的点云媒体的数据处理方法进行详细说明。

在一个实施例中，内容制作设备获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，根据码流数据生成属性指示信息，并采用多轨道封装模式对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。

假设点云媒体的码流数据中存在一个几何组件数据、两个颜色属性组件数据、两个反射率属性组件数据，且点云媒体的所有组件数据以多轨道封装模式进行封装，即一个组件数据包含于一个轨道内。则：

轨道0(Track0)：用于封装几何组件的轨道。

轨道1(Track1)：用于封装第一个颜色属性组件的轨道。轨道1对应的属性指示信息如下：

其中，“attr_num＝1”表示轨道1中包含的具备多属性实例信息的属性组件的数量为1；“attr_index＝1”表示该字段对应的属性组件的索引号为1；“default_attr_flag＝1”表示该字段对应的属性组件为颜色类型的属性组件中默认呈现的属性组件；“attr_label＝“original””表示该字段对应的属性组件的属性标签为“original”。

轨道2(Track2)：用于封装第二个颜色属性组件的轨道。轨道2对应的属性指示信息如下：

其中，“attr_num＝1”表示轨道2中包含的具备多属性实例信息的属性组件的数量为1；“attr_index＝2”表示该字段对应的属性组件的索引号为2；“default_attr_flag＝0”表示该字段对应的属性组件不为颜色类型的属性组件中默认呈现的属性组件；“attr_label＝“repaired””表示该字段对应的属性组件的属性标签为“repaired”。

轨道3(Track3)：用于封装第一个反射率属性组件的轨道。轨道3对应的属性指示信息如下：

其中，“attr_num＝1”表示轨道3中包含的具备多属性实例信息的属性组件的数量为1；“attr_index＝3”表示该字段对应的属性组件的索引号为3；“default_attr_flag＝1”表示该字段对应的属性组件为反射率类型的属性组件中默认呈现的属性组件；“attr_label＝“original””表示该字段对应的属性组件的属性标签为“original”。

轨道4(Track4)：用于封装第二个反射率属性组件的轨道。轨道4对应的属性指示信息如下：

其中，“attr_num＝1”表示轨道4中包含的具备多属性实例信息的属性组件的数量为1；“attr_index＝4”表示该字段对应的属性组件的索引号为4；“default_attr_flag＝0”表示该字段对应的属性组件不为反射率类型的属性组件中默认呈现的属性组件；“attr_label＝“repaired””表示该字段对应的属性组件的属性标签为“repaired”。

可选地，内容制作设备还可以将Track1与Track3放入一个轨道组，Track2与Track4放入一个轨道组；以指示Track1与Track3中的属性组件可以被同时呈现，Track2与Track4中的属性组件可以被同时呈现。

具体地，Track1与Track3的AttrInsCombinationGroup：

{track_group_id＝100}

其中，“track_group_id＝100”用于指示Track1与Track3所属的轨道组的标识为“100”。

Track2与Track4的AttrInsCombinationGroup：

{track_group_id＝200}

其中，“track_group_id＝200”用于指示Track2与Track4所属的轨道组的标识为“200”。

内容制作设备将点云媒体的媒体文件传输给内容消费设备。

在一种实现方式中，内容消费设备直接下载点云媒体的完整文件后，对点云媒体进行呈现。

在另一种实现方式中，点云媒体的媒体文件被切片为多个媒体片段，内容消费设备与内容制作设备，或者服务器(存储有点云媒体的完整文件)建立流化传输，在接收媒体片段的同时进行呈现消费。此时，内容制作设备，或者服务器生成传输信令，发送给内容消费设备。在传输信令中，包含track1～track4的描述信息(GPCCMultiAttrInsInfodescriptor)，具体如下：

Representation1(对应Track1)：

{GPCCMultiAttrInsInfo@defaultAttrFlag＝1；GPCCMultiAttrInsInfo@attrLabel＝“original”；GPCCMultiAttrInsInfo@attrIndex＝1；GPCCMultiAttrInsInfo@attrCombinationGroupId＝100}

Representation2(对应Track2)：

{GPCCMultiAttrInsInfo@defaultAttrFlag＝0；GPCCMultiAttrInsInfo@attrLabel＝“repaired”；GPCCMultiAttrInsInfo@attrIndex＝2；GPCCMultiAttrInsInfo@attrCombinationGroupId＝200}

Representation3(对应Track3)：

{GPCCMultiAttrInsInfo@defaultAttrFlag＝1；GPCCMultiAttrInsInfo@attrLabel＝“original”；GPCCMultiAttrInsInfo@attrIndex＝3；GPCCMultiAttrInsInfo@attrCombinationGroupId＝100}

Representation4(对应Track4)：

{GPCCMultiAttrInsInfo@defaultAttrFlag＝0；GPCCMultiAttrInsInfo@attrLabel＝“repaired”；GPCCMultiAttrInsInfo@attrIndex＝4；GPCCMultiAttrInsInfo@attrCombinationGroupId＝200}

其中，以Representation1为例，“GPCCMultiAttrInsInfo@defaultAttrFlag＝1”用于指示轨道1中的属性组件为颜色类型的属性组件中默认呈现的属性组件；“GPCCMultiAttrInsInfo@attrLabel＝“original””用于指示轨道1中的属性组件的属性标签为“original”；“GPCCMultiAttrInsInfo@attrIndex＝1”用于指示轨道1中的属性组件的索引号为1；“GPCCMultiAttrInsInfo@attrCombinationGroupId＝100”用于指示轨道1所属的轨道组的标识为“100”。Representation2-Representation4中的语法的语义可参考Representation1，在此不再赘述。

内容消费设备在对点云媒体的媒体文件，或者媒体片段进行解析并呈现。

若内容消费设备下载了点云媒体的完整文件，则可以根据上述GPCCMultiAttrInsInfoBox中的信息，确定track1和track2对应2个颜色点云属性实例，track3和track4对应2个反射率属性实例(内容消费设备通过attr_index可以索引到相应的属性类型信息)。track1和track3中的属性组件是默认呈现的属性组件。由于track1和track3具备相同的AttrInsCombinationGroup轨道组标识符，因此track1和track3中的属性组件需要一起呈现；类似地，由于track2和track4具备相同的AttrInsCombinationGroup轨道组标识符，因此track2和track4中的属性组件需要一起呈现。内容消费设备根据上述GPCCMultiAttrInsInfoBox中的信息，默认呈现track1和track3中的属性组件的组件数据，并在目标时刻(根据观看者交互反馈或者应用算法)，呈现track2和track4中属性组件的组件数据。

若内容消费设备采用流化传输的方式拉取点云媒体的媒体片段，则根据信令中的描述信息请求所需的媒体片段。例如，内容消费设备可以先请求track1和track3对应的码流数据进行解析并呈现。并在目标时刻(根据观看者交互反馈或者应用算法)，请求track2和track4对应的码流数据进行解析并呈现，具体实施方式可参考内容消费设备下载了点云媒体的完整文件并进行解析和呈现的实施方式，在此不再赘述。

在另一个实施例中，内容制作设备获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，根据码流数据生成属性指示信息，并采用单轨道封装模式对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。

假设点云媒体的码流数据中存在一个几何组件数据、两个颜色属性组件数据、两个反射率属性组件数据，且点云媒体的所有组件数据以单轨道封装模式进行封装，即点云媒体的所有组件数据均在一个轨道内。则：

轨道1(Track1)对应的属性指示信息如下：

“attr_num＝4”表示轨道1中包含的具备多属性实例信息的属性组件的数量为4；以“{attr_index＝1；default_attr_flag＝1；attr_label＝“original”}”进行说明，“attr_index＝1”表示该字段对应的属性组件的索引号为1；“default_attr_flag＝1”表示该字段对应的属性组件为属于同一类型的多个属性组件中默认呈现的属性组件；“attr_label＝“original””表示该字段对应的属性组件的属性标签为“original”。

内容制作设备将点云媒体的媒体文件传输给内容消费设备。

在一种实现方式中，内容消费设备直接下载点云媒体的完整文件后，对点云媒体进行呈现。

在另一种实现方式中，点云媒体的媒体文件被切片为多个媒体片段，内容消费设备与内容制作设备，或者服务器(存储有点云媒体的完整文件)建立流化传输，在接收媒体片段的同时进行呈现消费。此时，内容制作设备，或者服务器生成传输信令，发送给内容消费设备。在传输信令中，包含track1的描述信息(GPCCMultiAttrInsInfo descriptor)，具体如下：

{GPCCMultiAttrInsInfo@defaultAttrFlag＝1；GPCCMultiAttrInsInfo@attrLabel＝“original”；GPCCMultiAttrInsInfo@attrIndex＝1；}

{GPCCMultiAttrInsInfo@defaultAttrFlag＝0；GPCCMultiAttrInsInfo@attrLabel＝“repaired”；GPCCMultiAttrInsInfo@attrIndex＝2；}

{GPCCMultiAttrInsInfo@defaultAttrFlag＝1；GPCCMultiAttrInsInfo@attrLabel＝“original”；GPCCMultiAttrInsInfo@attrIndex＝3；}

{GPCCMultiAttrInsInfo@defaultAttrFlag＝0；GPCCMultiAttrInsInfo@attrLabel＝“repaired”；GPCCMultiAttrInsInfo@attrIndex＝4；}

其中，“GPCCMultiAttrInsInfo@defaultAttrFlag＝1”用于指示轨道1中的属性组件为属于同一类型的多个属性组件中默认呈现的属性组件；“GPCCMultiAttrInsInfo@attrLabel＝“original””用于指示轨道1中的属性组件的属性标签为“original”；“GPCCMultiAttrInsInfo@attrIndex＝1”用于指示轨道1中的属性组件的索引号为1。

内容消费设备在对点云媒体的媒体文件，或者媒体片段进行解析并呈现。

若内容消费设备下载了点云媒体的完整文件，则可以根据上述GPCCMultiAttrInsInfoBox中的信息，确定track1中包含4个点云属性实例，分别对应颜色类型的属性组件(attr_index＝1的属性组件和attr_index＝2的属性组件)，以及反射率类型的属性组件(attr_index＝3的属性组件和attr_index＝4的属性组件)；其中attr_index＝1的属性组件和attr_index＝3的属性组件是默认呈现的属性组件。由于attr_index＝1的属性组件和attr_index＝3的属性组件具备相同的label，因此attr_index＝1的属性组件和attr_index＝3的属性组件需要一起呈现；类似地，由于attr_index＝2的属性组件和attr_index＝4的属性组件具备相同的label，因此attr_index＝2的属性组件和attr_index＝4的属性组件需要一起呈现。内容消费设备根据上述GPCCMultiAttrInsInfoBox中的信息，默认呈现attr_index＝1的属性组件和attr_index＝3的属性组件的组件数据，并在目标时刻(根据观看者交互反馈或者应用算法)，呈现attr_index＝2的属性组件和attr_index＝4的属性组件的组件数据。

若内容消费设备采用流化传输的方式拉取点云媒体的媒体片段，则根据信令中的描述信息请求所需的媒体片段。例如，内容消费设备可以先请求attr_index＝1的属性组件和attr_index＝3的属性组件对应的码流数据进行解析并呈现。并在目标时刻(根据观看者交互反馈或者应用算法)，请求attr_index＝2的属性组件和attr_index＝4的属性组件对应的码流数据进行解析并呈现，具体实施方式可参考内容消费设备下载了点云媒体的完整文件并进行解析和呈现的实施方式，在此不再赘述。

本申请实施例中，获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，点云媒体的码流数据包含至少两个属于同一类型的属性组件，根据码流数据生成属性指示信息，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式，对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。可见，通过属性指示信息来对至少两个属于同一类型的属性组件进行描述，以便于内容消费设备根据属性指示信息对点云媒体进行解析并呈现。

上述详细阐述了本申请实施例的方法，为了便于更好地实施本申请实施例的上述方案，相应地，下面提供了本申请实施例的装置。

请参见图4，图4为本申请实施例提供的一种点云媒体的数据处理装置的结构示意图；该点云媒体的数据处理装置可以是运行于内容消费设备中的一个计算机程序(包括程序代码)，例如该点云媒体的数据处理装置可以是内容消费设备中的一个应用软件。由图4所示，该点云媒体的数据处理装置包括获取单元401和处理单元402。

请参见图4，在一个示例性实施例中，各个单元的详细描述如下：

获取单元401，用于获取点云媒体的媒体文件，媒体文件包含点云媒体的码流数据和属性指示信息，码流数据包含至少两个属于同一类型的属性组件，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式；

处理单元402，用于根据属性指示信息和码流数据，解析并呈现点云媒体。

在一种实施方式中，属性指示信息包含多属性实例信息数据盒，多属性实例信息数据盒用于指示至少两个属于同一类型的属性组件的描述信息。

在一种实施方式中，至少两个属于同一类型的属性组件被封装在一个或多个轨道中，至少两个属于同一类型的属性组件具备多属性实例信息，多属性实例信息数据盒包含属性数量字段；处理单元402用于，根据属性指示信息和码流数据，解析点云媒体，具体用于：

根据属性数量字段，确定该属性数量字段对应轨道中具备多属性实例信息的属性组件的数量。

在一种实施方式中，多属性实例信息数据盒包含默认属性标志字段；处理单元402用于，根据属性指示信息和码流数据，解析点云媒体，具体用于：

若默认属性标志字段取值为第一设定值，则确定默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；

若默认属性标志字段取值为第二设定值，则确定默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

在一种实施方式中，属性指示信息包含组件信息数据盒，组件信息数据盒包含码流数据中各个组件的描述信息。

在一种实施方式中，组件信息数据盒包含属性信息标志字段；处理单元402用于，根据属性指示信息和码流数据，解析点云媒体，具体用于：

若属性信息标志字段取值为第一设定值，则确定属性信息标志字段对应的数据盒包含属性组件的描述信息；

若属性信息标志字段取值为第二设定值，则确定属性信息标志字段对应的数据盒不包含属性组件的描述信息。

在一种实施方式中，组件信息数据盒包含默认属性标志字段；处理单元402用于，根据属性指示信息和码流数据，解析点云媒体，具体用于：

若默认属性标志字段取值为第一设定值，则确定默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；

若默认属性标志字段取值为第二设定值，则确定默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

在一种实施方式中，属性指示信息包含属性标签字段，码流数据包含至少两个属性标签字段的值相同的属性组件；处理单元402用于，根据属性指示信息和码流数据，呈现点云媒体，具体用于：

将至少两个属性标签字段的值相同的属性组件同时呈现。

在一种实施方式中，码流数据包含属于第一类型的多个属性组件和属于第二类型的多个属性组件；

每个属性组件被封装在一个轨道中，属性指示信息包含轨道组指示信息，轨道组指示信息用于指示同时呈现的属性组件。

在一种实施方式中，轨道组指示信息包含轨道组标识字段；处理单元402用于，根据属性指示信息和码流数据，解析点云媒体，具体用于：

根据轨道组标识字段，确定该轨道组标识字段对应的轨道所属的轨道组；

轨道组指示信息还包含轨道组类型字段，轨道组类型字段用于指示该轨道组类型字段对应的轨道所属的轨道组的类型；处理单元402还用于：

若存在至少两个轨道的轨道组标识字段的值相同，且至少两个轨道的轨道组类型字段的值相同；则确定至少两个轨道属于同一轨道组。

在一种实施方式中，处理单元402用于，根据属性指示信息和码流数据，呈现点云媒体，具体用于：

将属于同一轨道组中的属性组件同时呈现。

根据本申请的一个实施例，图2所示的点云媒体的数据处理方法所涉及的部分步骤可由图4所示的点云媒体的数据处理装置中的各个单元来执行。例如，图2中所示的步骤S201可由图4所示的获取单元401执行，步骤S202可由图4所示的处理单元402执行。图4所示的点云媒体的数据处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成，或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成，这可以实现同样的操作，而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的，在实际应用中，一个单元的功能也可以由多个单元来实现，或者多个单元的功能由一个单元实现。在本申请的其它实施例中，点云媒体的数据处理装置也可以包括其它单元，在实际应用中，这些功能也可以由其它单元协助实现，并且可以由多个单元协作实现。

根据本申请的另一个实施例，可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算装置上运行能够执行如图2中所示的相应方法所涉及的各步骤的计算机程序(包括程序代码)，来构造如图4中所示的点云媒体的数据处理装置，以及来实现本申请实施例的点云媒体的数据处理方法。计算机程序可以记载于例如计算机可读记录介质上，并通过计算机可读记录介质装载于上述计算装置中，并在其中运行。

基于同一发明构思，本申请实施例中提供的点云媒体的数据处理装置解决问题的原理与有益效果与本申请方法实施例中点云媒体的数据处理方法解决问题的原理和有益效果相似，可以参见方法的实施的原理和有益效果，为简洁描述，在这里不再赘述。

请参见图5，图5为本申请实施例提供的另一种点云媒体的数据处理装置的结构示意图；该点云媒体的数据处理装置可以是运行于内容制作设备中的一个计算机程序(包括程序代码)，例如该点云媒体的数据处理装置可以是内容制作设备中的一个应用软件。由图5所示，该点云媒体的数据处理装置包括获取单元501和处理单元502。请参见图5，各个单元的详细描述如下：

获取单元501，用于获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，点云媒体的码流数据包含至少两个属于同一类型的属性组件；

处理单元502，用于根据码流数据生成属性指示信息，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式；

以及用于对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。

在一种实施方式中，属性指示信息包含多属性实例信息数据盒，多属性实例信息数据盒用于指示至少两个属于同一类型的属性组件的描述信息。

在一种实施方式中，至少两个属于同一类型的属性组件被封装在一个或多个轨道中，至少两个属于同一类型的属性组件具备多属性实例信息；

多属性实例信息数据盒包含属性数量字段，属性数量字段用于指示该属性数量字段对应的轨道中具备多属性实例信息的属性组件的数量。

在一种实施方式中，多属性实例信息数据盒包含默认属性标志字段；

当默认属性标志字段取值为第一设定值时，用于指示默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；

当默认属性标志字段取值为第二设定值时，用于指示默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

在一种实施方式中，属性指示信息包含组件信息数据盒，组件信息数据盒包含码流数据中各个组件的描述信息。

在一种实施方式中，组件信息数据盒包含属性信息标志字段；属性信息标志字段用于指示组件信息数据盒中是否包含属性组件的描述信息；

当属性信息标志字段取值为第一设定值时，用于指示组件信息数据盒包含属性组件的描述信息；

当属性信息标志字段取值为第二设定值时，用于指示组件信息数据盒不包含属性组件的描述信息。

在一种实施方式中，组件信息数据盒包含默认属性标志字段；

当默认属性标志字段取值为第一设定值时，用于指示默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；

当默认属性标志字段取值为第二设定值时，用于指示默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

在一种实施方式中，属性指示信息包含属性标签字段；

若至少两个属性组件对应的属性标签字段的值相同，则表示至少两个属性组件能够同时呈现。

在一种实施方式中，码流数据包含属于第一类型的多个属性组件和属于第二类型的多个属性组件；

每个属性组件被封装在一个轨道中，属性指示信息包含轨道组指示信息，轨道组指示信息用于指示同时呈现的属性组件。

在一种实施方式中，轨道组指示信息包含轨道组标识字段，轨道组标识字段用于指示该轨道组标识字段对应的轨道所属的轨道组；

轨道组指示信息还包含轨道组类型字段，轨道组类型字段用于指示该轨道组类型字段对应的轨道所属的轨道组的类型；

若至少两个轨道的轨道组标识字段的取值相同，且至少两个轨道的轨道组类型字段的取值相同，则表示至少两个轨道属于同一轨道组。

根据本申请的一个实施例，图3所示的点云媒体的数据处理方法所涉及的部分步骤可由图5所示的点云媒体的数据处理装置中的各个单元来执行。例如，图3中所示的步骤S301可由图5所示的获取单元501执行，步骤S302和步骤S303可由图5所示的处理单元502执行。图5所示的点云媒体的数据处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成，或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成，这可以实现同样的操作，而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的，在实际应用中，一个单元的功能也可以由多个单元来实现，或者多个单元的功能由一个单元实现。在本申请的其它实施例中，点云媒体的数据处理装置也可以包括其它单元，在实际应用中，这些功能也可以由其它单元协助实现，并且可以由多个单元协作实现。

根据本申请的另一个实施例，可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算装置上运行能够执行如图3中所示的相应方法所涉及的各步骤的计算机程序(包括程序代码)，来构造如图5中所示的点云媒体的数据处理装置，以及来实现本申请实施例的点云媒体的数据处理方法。计算机程序可以记载于例如计算机可读记录介质上，并通过计算机可读记录介质装载于上述计算装置中，并在其中运行。

基于同一发明构思，本申请实施例中提供的点云媒体的数据处理装置解决问题的原理与有益效果与本申请方法实施例中点云媒体的数据处理方法解决问题的原理和有益效果相似，可以参见方法的实施的原理和有益效果，为简洁描述，在这里不再赘述。

图6为本申请实施例提供的一种内容消费设备的结构示意图；该内容消费设备可以是指点云媒体的使用者所使用的计算机设备，该计算机设备可以是终端(如PC、智能移动设备(如智能手机)、VR设备(如VR头盔、VR眼镜等))。如图6所示，该内容消费设备包括接收器601、处理器602、存储器603、显示/播放装置604。其中：

接收器601用于实现解码与其他设备的传输交互，具体用于实现内容制作设备与内容消费设备之间关于进行点云媒体的传输。即内容消费设备通过接收器601来接收内容制作设备传输点云媒体的相关媒体资源。

处理器602(或称CPU(Central Processing Unit，中央处理器))是内容制作设备的处理核心，该处理器602适于实现一条或多条程序指令，具体适于加载并执行一条或多条程序指令从而实现图2所示的点云媒体的数据处理方法的流程。

存储器603是内容消费设备中的记忆设备，用于存放程序和媒体资源。可以理解的是，此处的存储器603既可以包括内容消费设备中的内置存储介质，当然也可以包括内容消费设备所支持的扩展存储介质。需要说明的是，存储器603可以是高速RAM存储器，也可以是非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器；可选的还可以是至少一个位于远离前述处理器的存储器。存储器603提供存储空间，该存储空间用于存储内容消费设备的操作系统。并且，在该存储空间中还用于存储计算机程序，该计算机程序包括程序指令，且该程序指令适于被处理器调用并执行，以用来执行点云媒体的数据处理方法的各步骤。另外，存储器603还可用于存储经处理器处理后形成的点云媒体的三维图像、三维图像对应的音频内容及该三维图像和音频内容渲染所需的信息等。

显示/播放装置604用于输出渲染得到的声音和三维图像。

再请参见图6，处理器602可包括解析器621、解码器622、转换器623和渲染器624；其中：

解析器621用于对来自内容制作设备的渲染媒体的封装文件进行文件解封装，具体是按照点云媒体的文件格式要求对媒体文件资源进行解封装，得到音频码流和视频码流；并将该音频码流和视频码流提供给解码器622。

解码器622对音频码流进行音频解码，得到音频内容并提供给渲染器进行音频渲染。另外，解码器622对视频码流进行解码得到2D图像。根据媒体呈现描述信息提供的元数据，如果该元数据指示点云媒体执行过区域封装过程，该2D图像是指封装图像；如果该元数据指示点云媒体未执行过区域封装过程，则该平面图像是指投影图像。

转换器623用于将2D图像转换为3D图像。如果点云媒体执行过区域封装过程，转换器623还会先将封装图像进行区域解封装得到投影图像。再对投影图像进行重建处理得到3D图像。如果渲染媒体未执行过区域封装过程，转换器623会直接将投影图像重建得到3D图像。

渲染器624用于对点云媒体的音频内容和3D图像进行渲染。具体根据媒体呈现描述信息中与渲染、视窗相关的元数据对音频内容及3D图像进行渲染，渲染完成交由显示/播放装置进行输出。

在一个示例性实施例中，处理器602(具体是处理器包含的各器件)通过调用存储器中的一条或多条指令来执行图2所示的点云媒体的数据处理方法的各步骤。具体地，存储器存储有一条或多条第一指令，该一条或多条第一指令适于由处理器602加载并执行如下步骤：

获取点云媒体的媒体文件，媒体文件包含点云媒体的码流数据和属性指示信息，码流数据包含至少两个属于同一类型的属性组件，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式；

根据属性指示信息和码流数据，解析并呈现点云媒体。

一种实施方式中，属性指示信息包含多属性实例信息数据盒，多属性实例信息数据盒用于指示至少两个属于同一类型的属性组件的描述信息。

一种实施方式中，至少两个属于同一类型的属性组件被封装在一个或多个轨道中，至少两个属于同一类型的属性组件具备多属性实例信息，多属性实例信息数据盒包含属性数量字段；处理器602根据属性指示信息和码流数据，解析点云媒体的具体实施例为：

根据属性数量字段，确定该属性数量字段对应轨道中具备多属性实例信息的属性组件的数量。

一种实施方式中，多属性实例信息数据盒包含默认属性标志字段；处理器602根据属性指示信息和码流数据，解析点云媒体的具体实施例为：

若默认属性标志字段取值为第一设定值，则确定默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；

若默认属性标志字段取值为第二设定值，则确定默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

一种实施方式中，属性指示信息包含组件信息数据盒，组件信息数据盒包含码流数据中各个组件的描述信息。

一种实施方式中，组件信息数据盒包含属性信息标志字段；处理器602根据属性指示信息和码流数据，解析点云媒体的具体实施例为：

若属性信息标志字段取值为第一设定值，则确定属性信息标志字段对应的数据盒包含属性组件的描述信息；

若属性信息标志字段取值为第二设定值，则确定属性信息标志字段对应的数据盒不包含属性组件的描述信息。

一种实施方式中，媒组件信息数据盒包含默认属性标志字段；处理器602根据属性指示信息和码流数据，解析点云媒体的具体实施例为：

若默认属性标志字段取值为第一设定值，则确定默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；

若默认属性标志字段取值为第二设定值，则确定默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

一种实施方式中，属性指示信息包含属性标签字段，码流数据包含至少两个属性标签字段的值相同的属性组件；处理器602根据属性指示信息和码流数据，呈现点云媒体的具体实施例为：

将至少两个属性标签字段的值相同的属性组件同时呈现。

一种实施方式中，码流数据包含属于第一类型的多个属性组件和属于第二类型的多个属性组件；

每个属性组件被封装在一个轨道中，属性指示信息包含轨道组指示信息，轨道组指示信息用于指示同时呈现的属性组件。

一种实施方式中，轨道组指示信息包含轨道组标识字段；处理器602根据属性指示信息和码流数据，解析点云媒体的具体实施例为：

根据轨道组标识字段，确定该轨道组标识字段对应的轨道所属的轨道组；

轨道组指示信息还包含轨道组类型字段，轨道组类型字段用于指示该轨道组类型字段对应的轨道所属的轨道组的类型；存储器603中的计算机程序由处理器602加载并且还执行如下步骤：

若存在至少两个轨道的轨道组标识字段的值相同，且至少两个轨道的轨道组类型字段的值相同；则确定至少两个轨道属于同一轨道组。

一种实施方式中，处理器602根据属性指示信息和码流数据，呈现点云媒体的具体实施例为：

将属于同一轨道组中的属性组件同时呈现。

基于同一发明构思，本申请实施例中提供的内容消费设备解决问题的原理与有益效果与本申请方法实施例中点云媒体的数据处理方法解决问题的原理和有益效果相似，可以参见方法的实施的原理和有益效果，为简洁描述，在这里不再赘述。

图7为本申请实施例提供的一种内容制作设备的结构示意图；该内容制作设备可以是指点云媒体的提供者所使用的计算机设备，该计算机设备可以是终端(如PC、智能移动设备(如智能手机)等)或服务器。如图7所示，该内容制作设备包括捕获设备701、处理器702、存储器703和发射器704。其中：

捕获设备701用于采集现实世界的声音-视觉场景获得点云媒体的原始数据(包括在时间和空间上保持同步的音频内容和视频内容)。该捕获设备701可以包括但不限于：音频设备、摄像设备及传感设备。其中，音频设备可以包括音频传感器、麦克风等。摄像设备可以包括普通摄像头、立体摄像头、光场摄像头等。传感设备可以包括激光设备、雷达设备等。

处理器702(或称CPU(Central Processing Unit，中央处理器))是内容制作设备的处理核心，该处理器702适于实现一条或多条程序指令，具体适于加载并执行一条或多条程序指令从而实现图3所示的点云媒体的数据处理方法的流程。

存储器703是内容制作设备中的记忆设备，用于存放程序和媒体资源。可以理解的是，此处的存储器703既可以包括内容制作设备中的内置存储介质，当然也可以包括内容制作设备所支持的扩展存储介质。需要说明的是，存储器可以是高速RAM存储器，也可以是非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器；可选的还可以是至少一个位于远离前述处理器的存储器。存储器提供存储空间，该存储空间用于存储内容制作设备的操作系统。并且，在该存储空间中还用于存储计算机程序，该计算机程序包括程序指令，且该程序指令适于被处理器调用并执行，以用来执行点云媒体的数据处理方法的各步骤。另外，存储器703还可用于存储经处理器处理后形成的点云媒体文件，该点云媒体文件包括媒体文件资源和媒体呈现描述信息。

发射器704用于实现内容制作设备与其他设备的传输交互，具体用于实现内容制作设备与内容播放设备之间关于进行点云媒体的传输。即内容制作设备通过发射器704来向内容播放设备传输点云媒体的相关媒体资源。

再请参见图7，处理器702可包括转换器721、编码器722和封装器723；其中：

转换器721用于对捕获到的视频内容进行一系列转换处理，使视频内容成为适合被执行点云媒体的视频编码的内容。转换处理可包括：拼接和投影，可选地，转换处理还包括区域封装。转换器721可以将捕获到的3D视频内容转换为2D图像，并提供给编码器进行视频编码。

编码器722用于对捕获到的音频内容进行音频编码形成点云媒体的音频码流。还用于对转换器721转换得到的2D图像进行视频编码，得到视频码流。

封装器723用于将音频码流和视频码流按照点云媒体的文件格式(如ISOBMFF)封装在文件容器中形成点云媒体的媒体文件资源，该媒体文件资源可以是媒体文件或媒体片段形成点云媒体的媒体文件；并按照点云媒体的文件格式要求采用媒体呈现描述信息记录该点云媒体的媒体文件资源的元数据。封装器处理得到的点云媒体的封装文件会保存在存储器中，并按需提供给内容播放设备进行点云媒体的呈现。

处理器702(具体是处理器包含的各器件)通过调用存储器中的一条或多条指令来执行图4所示的点云媒体的数据处理方法的各步骤。具体地，存储器703存储有一条或多条第一指令，该一条或多条第一指令适于由处理器702加载并执行如下步骤：

获取点云媒体的点云数据，并对点云数据进行编码处理得到点云媒体的码流数据，点云媒体的码流数据包含至少两个属于同一类型的属性组件；

根据码流数据生成属性指示信息，属性指示信息用于指示至少两个属于同一类型的属性组件的呈现方式；

对码流数据和属性指示信息进行封装，得到点云媒体的媒体文件。

一种实施方式中，属性指示信息包含多属性实例信息数据盒，多属性实例信息数据盒用于指示至少两个属于同一类型的属性组件的描述信息。

一种实施方式中，至少两个属于同一类型的属性组件被封装在一个或多个轨道中，至少两个属于同一类型的属性组件具备多属性实例信息；

多属性实例信息数据盒包含属性数量字段，属性数量字段用于指示该属性数量字段对应的轨道中具备多属性实例信息的属性组件的数量。

一种实施方式中，多属性实例信息数据盒包含默认属性标志字段；

当默认属性标志字段取值为第一设定值时，用于指示默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；

当默认属性标志字段取值为第二设定值时，用于指示默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

一种实施方式中，属性指示信息包含组件信息数据盒，组件信息数据盒包含码流数据中各个组件的描述信息。

一种实施方式中，组件信息数据盒包含属性信息标志字段；属性信息标志字段用于指示组件信息数据盒中是否包含属性组件的描述信息；

当属性信息标志字段取值为第一设定值时，用于指示组件信息数据盒包含属性组件的描述信息；

当属性信息标志字段取值为第二设定值时，用于指示组件信息数据盒不包含属性组件的描述信息。

一种实施方式中，组件信息数据盒包含默认属性标志字段；

当默认属性标志字段取值为第一设定值时，用于指示默认属性标志字段对应的属性组件为至少两个属于同一类型的属性组件中默认呈现的属性组件；

当默认属性标志字段取值为第二设定值时，用于指示默认属性标志字段对应的属性组件不为至少两个属于同一类型的属性组件中默认呈现的属性组件。

一种实施方式中，属性指示信息包含属性标签字段；

若至少两个属性组件对应的属性标签字段的值相同，则表示至少两个属性组件能够同时呈现。

一种实施方式中，码流数据包含属于第一类型的多个属性组件和属于第二类型的多个属性组件；

每个属性组件被封装在一个轨道中，属性指示信息包含轨道组指示信息，轨道组指示信息用于指示同时呈现的属性组件。

一种实施方式中，轨道组指示信息包含轨道组标识字段，轨道组标识字段用于指示该轨道组标识字段对应的轨道所属的轨道组；

轨道组指示信息还包含轨道组类型字段，轨道组类型字段用于指示该轨道组类型字段对应的轨道所属的轨道组的类型；

若至少两个轨道的轨道组标识字段的取值相同，且至少两个轨道的轨道组类型字段的取值相同，则表示至少两个轨道属于同一轨道组。

基于同一发明构思，本申请实施例中提供的内容制作设备解决问题的原理与有益效果与本申请方法实施例中点云媒体的数据处理方法解决问题的原理和有益效果相似，可以参见方法的实施的原理和有益效果，为简洁描述，在这里不再赘述。

本申请实施例还提供一种计算机可读存储介质，计算机可读存储介质中存储有一条或多条指令，一条或多条指令适于由处理器加载并执行上述方法实施例的点云媒体的数据处理方法。

本申请实施例还提供一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述方法实施例的点云媒体的数据处理方法。

本申请实施例还提供一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述的点云媒体的数据处理方法。

本申请实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。

本申请实施例装置中的模块可以根据实际需要进行合并、划分和删减。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，可读存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机存取器(RandomAccess Memory，RAM)、磁盘或光盘等。

以上所揭露的仅为本申请一种较佳实施例而已，当然不能以此来限定本申请之权利范围，本领域普通技术人员可以理解实现上述实施例的全部或部分流程，并依本申请权利要求所作的等同变化，仍属于申请所涵盖的范围。

Claims (25)

1.一种点云媒体的数据处理方法，其特征在于，所述方法包括：

获取点云媒体的媒体文件，所述媒体文件包含所述点云媒体的码流数据和属性指示信息，所述码流数据包含至少两个属于同一类型的属性组件，所述属性指示信息用于指示所述至少两个属于同一类型的属性组件的呈现方式；

根据所述属性指示信息和所述码流数据，解析并呈现所述点云媒体。

2.如权利要求1所述的方法，其特征在于，所述属性指示信息包含多属性实例信息数据盒，所述多属性实例信息数据盒用于指示所述至少两个属于同一类型的属性组件的描述信息。

3.如权利要求2所述的方法，其特征在于，所述至少两个属于同一类型的属性组件被封装在一个或多个轨道中，所述至少两个属于同一类型的属性组件具备多属性实例信息，所述多属性实例信息数据盒包含属性数量字段；所述根据所述属性指示信息和所述码流数据，解析所述点云媒体，包括：

根据所述属性数量字段，确定该属性数量字段对应轨道中具备多属性实例信息的属性组件的数量。

4.如权利要求2所述的方法，其特征在于，所述多属性实例信息数据盒包含默认属性标志字段；所述根据所述属性指示信息和所述码流数据，解析所述点云媒体，包括：

若所述默认属性标志字段取值为第一设定值，则确定所述默认属性标志字段对应的属性组件为所述至少两个属于同一类型的属性组件中默认呈现的属性组件；

若所述默认属性标志字段取值为第二设定值，则确定所述默认属性标志字段对应的属性组件不为所述至少两个属于同一类型的属性组件中默认呈现的属性组件。

5.如权利要求1所述的方法，其特征在于，所述属性指示信息包含组件信息数据盒，所述组件信息数据盒包含所述码流数据中各个组件的描述信息。

6.如权利要求5所述的方法，其特征在于，所述组件信息数据盒包含属性信息标志字段；所述根据所述属性指示信息和所述码流数据，解析所述点云媒体，包括：

若所述属性信息标志字段取值为第一设定值，则确定所述属性信息标志字段对应的数据盒包含属性组件的描述信息；

若所述属性信息标志字段取值为第二设定值，则确定所述属性信息标志字段对应的数据盒不包含属性组件的描述信息。

7.如权利要求5所述的方法，其特征在于，所述组件信息数据盒包含默认属性标志字段；所述根据所述属性指示信息和所述码流数据，解析所述点云媒体，包括：

若所述默认属性标志字段取值为第一设定值，则确定所述默认属性标志字段对应的属性组件为所述至少两个属于同一类型的属性组件中默认呈现的属性组件；

若所述默认属性标志字段取值为第二设定值，则确定所述默认属性标志字段对应的属性组件不为所述至少两个属于同一类型的属性组件中默认呈现的属性组件。

8.如权利要求1所述的方法，其特征在于，所述属性指示信息包含属性标签字段，所述码流数据包含至少两个属性标签字段的值相同的属性组件；所述根据所述属性指示信息和所述码流数据，呈现所述点云媒体，包括：

将所述至少两个属性标签字段的值相同的属性组件同时呈现。

9.如权利要求1或2所述的方法，其特征在于，所述码流数据包含属于第一类型的多个属性组件和属于第二类型的多个属性组件；

每个属性组件被封装在一个轨道中，所述属性指示信息包含轨道组指示信息，所述轨道组指示信息用于指示同时呈现的属性组件。

10.如权利要求9所述的方法，其特征在于，所述轨道组指示信息包含轨道组标识字段；所述根据所述属性指示信息和所述码流数据，解析所述点云媒体，包括：

根据所述轨道组标识字段，确定该轨道组标识字段对应的轨道所属的轨道组；

所述轨道组指示信息还包含轨道组类型字段，所述轨道组类型字段用于指示该轨道组类型字段对应的轨道所属的轨道组的类型；所述方法还包括：

若存在至少两个轨道的轨道组标识字段的值相同，且所述至少两个轨道的轨道组类型字段的值相同；则确定所述至少两个轨道属于同一轨道组。

11.如权利要求10所述的方法，其特征在于，所述根据所述属性指示信息和所述码流数据，呈现所述点云媒体，包括：

将属于同一轨道组中的属性组件同时呈现。

12.一种点云媒体的数据处理方法，其特征在于，所述方法包括：

获取点云媒体的点云数据，并对所述点云数据进行编码处理得到所述点云媒体的码流数据，所述点云媒体的码流数据包含至少两个属于同一类型的属性组件；

根据所述码流数据生成属性指示信息，所述属性指示信息用于指示所述至少两个属于同一类型的属性组件的呈现方式；

对所述码流数据和所述属性指示信息进行封装，得到所述点云媒体的媒体文件。

13.如权利要求12所述的方法，其特征在于，所述属性指示信息包含多属性实例信息数据盒，所述多属性实例信息数据盒用于指示所述至少两个属于同一类型的属性组件的描述信息。

14.如权利要求13所述的方法，其特征在于，所述至少两个属于同一类型的属性组件被封装在一个或多个轨道中，所述至少两个属于同一类型的属性组件具备多属性实例信息；

所述多属性实例信息数据盒包含属性数量字段，所述属性数量字段用于指示该属性数量字段对应的轨道中具备多属性实例信息的属性组件的数量。

15.如权利要求13所述的方法，其特征在于，所述多属性实例信息数据盒包含默认属性标志字段；

当所述默认属性标志字段取值为第一设定值时，用于指示所述默认属性标志字段对应的属性组件为所述至少两个属于同一类型的属性组件中默认呈现的属性组件；

当所述默认属性标志字段取值为第二设定值时，用于指示所述默认属性标志字段对应的属性组件不为所述至少两个属于同一类型的属性组件中默认呈现的属性组件。

16.如权利要求12所述的方法，其特征在于，所述属性指示信息包含组件信息数据盒，所述组件信息数据盒包含所述码流数据中各个组件的描述信息。

17.如权利要求16所述的方法，其特征在于，所述组件信息数据盒包含属性信息标志字段；所述属性信息标志字段用于指示所述组件信息数据盒中是否包含属性组件的描述信息；

当所述属性信息标志字段取值为第一设定值时，用于指示所述组件信息数据盒包含属性组件的描述信息；

当所述属性信息标志字段取值为第二设定值时，用于指示所述组件信息数据盒不包含属性组件的描述信息。

18.如权利要求16所述的方法，其特征在于，所述组件信息数据盒包含默认属性标志字段；

当所述默认属性标志字段取值为第一设定值时，用于指示所述默认属性标志字段对应的属性组件为所述至少两个属于同一类型的属性组件中默认呈现的属性组件；

当所述默认属性标志字段取值为第二设定值时，用于指示所述默认属性标志字段对应的属性组件不为所述至少两个属于同一类型的属性组件中默认呈现的属性组件。

19.如权利要求12所述的方法，其特征在于，所述属性指示信息包含属性标签字段；

若至少两个属性组件对应的属性标签字段的值相同，则表示所述至少两个属性组件能够同时呈现。

20.如权利要求12或13所述的方法，其特征在于，所述码流数据包含属于第一类型的多个属性组件和属于第二类型的多个属性组件；

每个属性组件被封装在一个轨道中，所述属性指示信息包含轨道组指示信息，所述轨道组指示信息用于指示同时呈现的属性组件。

21.如权利要求20所述的方法，其特征在于，所述轨道组指示信息包含轨道组标识字段，所述轨道组标识字段用于指示该轨道组标识字段对应的轨道所属的轨道组；

所述轨道组指示信息还包含轨道组类型字段，所述轨道组类型字段用于指示该轨道组类型字段对应的轨道所属的轨道组的类型；

若至少两个轨道的轨道组标识字段的取值相同，且所述至少两个轨道的轨道组类型字段的取值相同，则表示所述至少两个轨道属于同一轨道组。

22.一种点云媒体的数据处理装置，其特征在于，所述点云媒体的数据处理装置包括：

获取单元，用于获取点云媒体的媒体文件，所述媒体文件包含所述点云媒体的码流数据和属性指示信息，所述码流数据包含至少两个属于同一类型的属性组件，所述属性指示信息用于指示所述至少两个属于同一类型的属性组件的呈现方式；

处理单元，用于根据所述属性指示信息和所述码流数据，解析并呈现所述点云媒体。

23.一种点云媒体的数据处理装置，其特征在于，所述点云媒体的数据处理装置包括：

获取单元，用于获取点云媒体的点云数据，并对所述点云数据进行编码处理得到所述点云媒体的码流数据，所述点云媒体的码流数据包含至少两个属于同一类型的属性组件；

处理单元，用于根据所述码流数据生成属性指示信息，所述属性指示信息用于指示所述至少两个属于同一类型的属性组件的呈现方式；

以及用于对所述码流数据和所述属性指示信息进行封装，得到所述点云媒体的媒体文件。

24.一种计算机设备，其特征在于，包括：存储装置和处理器；

存储器，所述存储器中存储有计算机程序；

处理器，用于加载所述计算机程序实现如权利要求1-11任一项所述的点云媒体的数据处理方法；或用于加载所述计算机程序实现如权利要求12-21任一项所述的点云媒体的数据处理方法。

25.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序适于被处理器加载并执行如权利要求1-11任一项所述的点云媒体的数据处理方法；或加载并执行如权利要求12-214任一项所述的点云媒体的数据处理方法。

Images