CN107959861B - 一种数据处理方法、相关设备及系统 - Google Patents

一种数据处理方法、相关设备及系统 Download PDF

Info

Publication number
CN107959861B
CN107959861B CN201610909014.4A CN201610909014A CN107959861B CN 107959861 B CN107959861 B CN 107959861B CN 201610909014 A CN201610909014 A CN 201610909014A CN 107959861 B CN107959861 B CN 107959861B
Authority
CN
China
Prior art keywords
code stream
complementary
identifier
view
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610909014.4A
Other languages
English (en)
Other versions
CN107959861A (zh
Inventor
邸佩云
方华猛
谢清鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201610909014.4A priority Critical patent/CN107959861B/zh
Priority to PCT/CN2017/092772 priority patent/WO2018072488A1/zh
Publication of CN107959861A publication Critical patent/CN107959861A/zh
Application granted granted Critical
Publication of CN107959861B publication Critical patent/CN107959861B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例公开了一种数据的处理方法、相关设备及系统，该方法包括：接收媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；根据该互补标识获取该视角码流和该互补码流。采用本发明，能够节省服务器与客户端之间的传输带宽以及节省该客户端的存储空间。

Description

一种数据处理方法、相关设备及系统
技术领域
本发明涉及计算机技术领域，尤其涉及一种数据处理方法、相关设备及系统。
背景技术
随着虚拟现实(英文：virtual reality，VR)技术的日益发展完善，360度等超出人眼正常视觉范围的VR视频观看应用越来越多地呈现在用户面前。在VR视频观看过程中，需要保证用户视角(英文：field of view，FOV)注视的空间对象的内容尽可能清晰，而视角外的空间对象的内容可以相对模糊些。
视频从时域上分为多个播放时段且每个播放时段均对应多个不同分辨率的片段(segment)，用户就可以根据网络状况等信息从多种不同质量的视频片段(例如，高清视频、标清视频等)中选择出较适合自己的视频片段。目前，用户在观看视频时，呈现在用户视角范围内的空间对象的内容为视频质量相对较高的视频，而呈现在用户视角范围外空间对象的内容为视频质量相对较低的视频，保证了视角范围内的空间对象的内容尽可能清晰。具体实现如下：提供VR视频的服务器对视频的任意一个播放时段的全部视频内容均进行低质量编码，作为基本层(Base layer)，整个基本层为低质量编码内容(通常情况下，FOV切换后播放时段也相应发生改变，对应的基本层也会发生改变)；同时将相同播放时段的视频划分为多个部分并将每个部分的视频均进行高质量编码，作为增强层(Enhancement layer)，每个部分为一个空间对象的高质量编码内容，每个空间对象各自对应一组空间信息；然后根据由FOV确定的空间信息确定空间对象(FOV可能会对应一个或多个空间对象)并进一步根据确定的空间对象确定该空间对象的高质量编码内容，再将基本层的全部低质量编码内容发送给客户端以及将基于该FOV确定的空间对象的高质量编码内容发送给该客户端。
相应地，客户端接收基于FOV确定的空间对象的高质量编码内容和基本层的全部低质量编码内容。当用户的FOV不发生改变时，在当前FOV范围内呈现该空间对象的高质量编码内容；当用户切换FOV时，如果切换前的FOV对应的空间对象已经不能完全覆盖新的FOV对应的空间对象，那么在不能覆盖的部分采用低质量的编码内容来解码呈现，并及时从服务器获得新FOV对应的空间对象的高质量编码内容；可以理解的是，客户端在请求新FOV对应的空间对象的高质量编码内容的过程中在该新FOV内先呈现该部分或全部的低质量编码内容，能够避免因等待该新FOV对应的空间对象的高质量编码内容而导致用户不适。
现有技术的缺陷在于，当用户的FOV保持不变时该服务器不仅要向客户端发送FOV对应的空间对象的高质量编码内容还要发送该FOV对应的空间对象的低质量编码内容，不仅浪费了带宽还导致该客户端中的内容出现冗余。
发明内容
本发明实施例公开了一种视频数据处理方法、相关设备及系统，能够节省服务器与客户端之间的传输带宽和该客户端上的存储空间。
下面先对本发明涉及到的相关技术和专业术语进行简单的介绍以方便理解。
一、MPEG-DASH技术介绍
2011年11月，MPEG组织批准了DASH标准，DASH标准是基于HTTP协议传输媒体流的技术规范(以下称DASH技术规范)；DASH技术规范主要由两大部分组成：媒体呈现描述(英文：Media Presentation Description，MPD)和媒体文件格式(英文：file format)。如图1，图1是系统层视频流媒体传输采用的DASH标准传输的框架实例示意图。系统层视频流媒体传输方案的数据传输过程包括两个过程：服务器端(如HTTP服务器，以下简称服务器)为视频内容生成媒体数据的过程，和客户端(如HTTP流媒体客户端)向服务器请求并获取媒体数据的过程。其中，上述媒体数据包括媒体呈现描述(英文：Media PresentationDescription，MPD)。服务器上的MPD中包括多个表示(也称呈现或者描述层，英文：representation)，每个表示描述多个片段。客户端的HTTP流媒体请求控制模块获取服务器发送的MPD，并对MPD进行分析，确定MPD中描述的视频码流的各个片段的信息，进而可确定要请求的片段，通过HTTP请求接收端向服务器请求相应的片段，并通过媒体播放器进行解码播放。
1、媒体文件格式：
在DASH中服务器会为同一个视频内容准备多种版本的码流，例如，服务器为同一集电视剧的视频内容生成低分辨率低码率低帧率(如360p分辨率、300kbps码率、15fps帧率)的码流，中分辨率中码率高帧率(如720p分辨率、1200kbps码率、25fps帧率)的码流，高分辨率高码率高帧率(如1080p分辨率、3000kbps码率、25fps帧率)的码流等。每个版本的码流在DASH标准中称为表示(英文：representation)。表示是在传输格式中的一个或者多个码流的集合和封装，一个表示中包含一或者多个分段。不同版本的码流的码率、分辨率等编码参数可以不同，每个码流分割成多个小的文件，每个小文件被称为分段(或称分段，英文：segment)。在客户端请求媒体分段数据的过程中可以在不同的媒体表示之间切换，如图2所示，服务器为一部电影准备了3个表示，包括rep1，rep2，rep3。其中，rep1是码率为4mbps(每秒兆比特)的高清视频，rep2是码率为2mbps的标清视频，rep3是码率为1mbps的标清视频。图2中标记为阴影的分段是客户端请求播放的分段数据，客户端请求的前三个分段是媒体表示rep3的分段，第四个分段切换到rep2，请求第四个分段，之后切换到rep1，请求第五个分段和第六个分段等。每个表示的分段可以首尾相接的存在一个文件中，也可以独立存储为一个个的小文件。segment可以按照标准ISO/IEC 14496-12中的格式封装(ISO BMFF(Base Media File Format))，也可以是按照ISO/IEC13818-1中的格式封装(MPEG-2TS)。
2、媒体呈现描述
在DASH标准中，媒体呈现描述被称为MPD，MPD可以是一个xml的文件，文件中的信息是采用分级方式描述，如图3所示，上一级的信息被下一级完全继承。在该文件中描述了一些媒体元数据，这些元数据可以使得客户端了解服务器中的媒体内容信息，并且可以使用这些信息构造请求segment的http-URL。
在DASH标准中，媒体呈现(英文：media presentation)，是呈现媒体内容的结构化数据的集合；媒体呈现描述(英文：media presentation description)，一个规范化描述媒体呈现的文件，用于提供流媒体服务；时期(英文：period)，一组连续的时期组成整个媒体呈现，时期具有连续和不重叠的特性；表示(英文：representation)，封装有一个或多个具有描述性元数据的的媒体内容成分(编码的单独的媒体类型，例如音频、视频等)的结构化的数据集合即表示是传输格式中一个或者多个码流的集合和封装，一个表示中包含一个或者多个分段；自适应集(英文：AdaptationSet)，表示同一媒体内容成分的多个可互替换的编码版本的集合，一个自适应集包含一个或者多个表示；子集(英文：subset)，一组自适应集合的组合，当播放器播放其中所有自适应集合时，可以获得相应的媒体内容；分段信息，是媒体呈现描述中的HTTP统一资源定位符引用的媒体单元，分段信息描述媒体数据的分段。
上述segment有两种存储方式：一种是每个segment分开独立存储，如图4，图4是码流数据中的片段存储方式的一示意图；另一种是同一个rep上的所有segment均存储在一个文件中，如图5，图5是码流数据中的片段存储方式的另一示意图。如图4，repA的segment中每个segment单独存储为一个文件，repB的segment中每个segment也单独存储为一个文件。对应的，图4所示的存储方式，服务器可在码流的MPD中可采用模板的形式或者列表的形式描述每个segment的URL等信息。如图5，rep1的segment中所有segment存储为一个文件，rep2的segment中所有segment存储为一个文件。对应的，图5所示的存储方法，服务器可在码流的MPD中采用一个索引片段(英文：index segment，也就是图5中的sidx)来描述每个segment的相关信息。索引分段描述了每个segment在其所存储的文件中的字节偏移，每个segment大小以及每个segment持续时间(duration，也称每个segment的播放时长，简称时长)等信息。
本发明实施例中的自适应集(例如，第一自适应集、第二自适应集等等)用于描述同一媒体内容成分的多个可互相替换的编码版本的媒体数据分段的属性的数据集合。本方面实施例中的表示为传输格式中的一个或者多个码流的集合和封装。本发明实施例中的描述子用于描述关联到的空间对象的空间信息。
本发明有关MPEG-DASH技术的相关技术概念可以参考ISO/IEC23009-1：2014Information technology---Dynamic adaptive streaming over HTTP(DASH)--Part 1:Media presentation description and segment formats，中的有关规定，也可以参考历史标准版本中的相关规定，如ISO/IEC 23009-1:2013或ISO/IEC23009-1:2012等。
二、虚拟现实(virtual reality，VR)技术介绍
虚拟现实技术是一种可以创建和体验虚拟世界的计算机仿真系统，它利用计算机生成一种模拟环境，是一种多源信息融合的交互式的三维动态视景和实体行为的系统仿真，可以使用户沉浸到该环境中。VR主要包括模拟环境、感知、自然技能和传感设备等方面。模拟环境是由计算机生成的、实时动态的三维立体逼真图像。感知是指理想的VR应该具有一切人所具有的感知。除计算机图形技术所生成的视觉感知外，还有听觉、触觉、力觉、运动等感知，甚至还包括嗅觉和味觉等，也称为多感知。自然技能是指人的头部转动，眼睛、手势、或其他人体行为动作，由计算机来处理与参与者的动作相适应的数据，并对用户的输入作出实时响应，并分别反馈到用户的五官。传感设备是指三维交互设备。当VR视频(或者360度视频，或者全方位视频(英文：Omnidirectional video))在头戴设备和手持设备上呈现时，只有对应于用户头部的方位部分的视频图像呈现和相关联的音频呈现。
VR视频和通常的视频(英文：normal video)的差别在于通常的视频是整个视频内容都会被呈现给用户；VR视频是只有整个视频的一个子集被呈现给用户(英文：in VRtypically only a subset of the entire video region represented by the videopictures)。
三、现有DASH标准的空间描述：
现有标准中，对空间信息的描述原文是“The SRD scheme allows MediaPresentation authors to express spatial relationships between SpatialObjects.A Spatial Object is defined as a spatial part of a content component(e.g.a region of interest,or a tile)and represented by either an AdaptationSet or a Sub-Representation.”
【中文】：MPD中描述的是空间对象(即Spatial Objects)之间的空间关系(即spatial relationships)。空间对象被定义为一个内容成分的一部分空间，比如现有的感兴趣区域(英文：region of interest，ROI)和tile；空间关系可以在Adaptation Set和Sub-Representation中描述。现有DASH标准在MPD中定义了一些描述子元素，每个描述子元素都有两个属性，schemeIdURI和value。其中，schemeIdURI描述了当前描述子是什么，value是描述子的参数值。在已有的标准中有两个已有描述子SupplementalProperty和EssentialProperty(补充特性描述子和基本特性描述子)。现有标准中如果这两个描述子的schemeIdURI＝"urn:mpeg:dash:srd:2014"(或者schemeIdURI＝urn:mpeg:dash:VR:2017)，则表示该描述子描述了关联到的空间对象的空间信息(spatial informationassociated to the containing Spatial Object.)，相应的value中列出了SDR的一系列参数值。具体value的语法如下表0:
Figure BDA0001133144710000071
表0
MPD样例如下：
Figure BDA0001133144710000081
Figure BDA0001133144710000091
Figure BDA0001133144710000101
其中，上述空间对象的左上坐标、空间对象的长宽和空间对象参考的空间，也可以是相对值，比如：上述value＝"1,0,0,1920,1080,3840,2160,2"可以描述成value＝"1,0,0,1,1,2,2,2"。
在一些可行的实施方式中，对于360度大视角的视频图像的输出，服务器可将360度的视角范围内的空间进行划分以得到多个空间对象，每个空间对象对应用户的一个子视角，多个子视角的拼接形成一个完整的人眼观察视角。其中，人眼观察视角的动态变化的，通常可为120度*120度。例如图6所述的空间对象1和空间对象2分别为用户的两个不同视角所注视的空间对象。服务器可为每个空间对象准备一组视频码流，具体的，服务器可获取视频中每个码流的编码配置参数，并根据码流的编码配置参数生成视频的各个空间对象对应的码流。客户端可在视频输出时向服务器请求某一时间段某个视角对应的视频码流分段并输出至该视角对应的空间对象。客户端在同一个时间段内输出360度的视角范围内的所有视角对应的视频码流分段，则可在整个360度的空间内输出显示该时间段内的完整视频图像。
具体实现中，在360度的空间的划分中，服务器可首先将球面映射为平面，在平面上对空间进行划分。具体的，服务器可采用经纬度的映射方式将球面映射为经纬平面图。如图7，图7是本发明实施例提供的空间对象的示意图。服务器可将球面映射为经纬平面图，并将经纬平面图划分为A～I等多个空间对象。进一步的，服务器可也将球面映射为立方体，再将立方体的多个面进行展开得到平面图，或者将球面映射为其他多面体，在将多面体的多个面进行展开得到平面图等。服务器还可采用更多的映射方式将球面映射为平面，具体可根据实际应用场景需求确定，在此不做限制。下面将以经纬度的映射方式，结合图7进行说明。
如图7，服务器可将球面的空间对象划分为A～I等多个空间对象之后，则可通过服务器为每个空间对象准备一组DASH码流。其中，每个空间对象对应一个子视角，每个空间对象对应的一组DASH码流为每个子视角的视角码流。一个视角码流中每个图像所关联的空间对象的空间信息相同，由此可将视角码流设为静态视角码流。每个子视角的视角码流为整个视频码流的一部分，所有子视角的视角码流构成一个完整的视频码流。视频播放过程中，可根据用户当前观看的视角选择相应的空间对象对应的DASH码流进行播放。用户切换视频观看的视角时，客户端则可根据用户选择的新视角确定切换的目标空间对象对应的DASH码流。
以下具体讲述本发明实施例提供的方法、相关设备及系统。
第一方面，本发明实施例提供了一种数据的处理方法，该方法包括：接收媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；根据该互补标识获取该视角码流和该互补码流。在一种可选的方案中，该以表明该媒体呈现描述中描述了视角码流和互补码流可以理解为：该互补标识用于标识互补的码流，该互补的码流包含视角码流和互补码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
第二方面，本发明实施例提供一种数据处理方法，该方法包括：接收媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识，该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
通过执行上述步骤，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
第三方面，本发明实施例提供一种数据的处理方法，该方法包括：生成媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片该第一空间对象的内容和该第二空间对象的内容；向客户端发送该媒体呈现描述，以使该客户端根据该互补标识获取该视角码流和该互补码流。在一种可选的方案中，该以表明该媒体呈现描述中描述了视角码流和互补码流可以理解为：该互补标识用于标识互补的码流，该互补的码流包含视角码流和互补码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
第四方面，本发明实施例提供一种数据处理方法，该方法包括：生成媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识；该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；向客户端发送该媒体呈现描述，以使该客户端根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
通过执行上述步骤，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
第五方面，本发明实施例提供一种客户端，该客户端包括接收单元和获取单元，其中，接收单元用于接收媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；获取单元用于根据该互补标识获取该视角码流和该互补码流。在一种可选的方案中，该以表明该媒体呈现描述中描述了视角码流和互补码流可以理解为：该互补标识用于标识互补的码流，该互补的码流包含视角码流和互补码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
第六方面，本发明实施例提供一种客户端，该终端包括接收单元和获取单元，其中，接收单元用于接收媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识，该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；获取单元用于根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
通过运行上述单元，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
第七方面，本发明实施例提供一种服务器，该服务器包括生成单元和发送单元，其中，生成单元用于生成媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；发送单元用于向客户端发送该媒体呈现描述，以使该客户端根据该互补标识获取该视角码流和该互补码流。在一种可选的方案中，该以表明该媒体呈现描述中描述了视角码流和互补码流可以理解为：该互补标识用于标识互补的码流，该互补的码流包含视角码流和互补码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
第八方面，本发明实施例提供一种服务器，该服务器包括生成单元和发送单元，其中，生成单元用于生成媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识，该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；发送单元用于向客户端发送该媒体呈现描述，以使该客户端根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
通过运行上述单元，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
第九方面，本发明实施例提供了一种客户端，该客户端包括处理器、存储器和输入组件，该存储器用于存储程序和数据，该处理器调用该存储器中的程序，用于执行如下操作：通过该输入组件接收媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；根据该互补标识获取该视角码流和该互补码流。在一种可选的方案中，该以表明该媒体呈现描述中描述了视角码流和互补码流可以理解为：该互补标识用于标识互补的码流，该互补的码流包含视角码流和互补码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
第十方面，本发明实施例提供一种客户端，该客户端包括处理器、存储器和输入组件，该存储器用于存储程序和数据，该处理器调用该存储器中的程序，用于执行如下操作：通过该输入组件接收媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识，该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
通过执行上述操作，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
第十一方面，本发明实施例提供一种服务器，该服务器包括处理器、存储器和输出组件，该存储器用于存储程序和数据，该处理器调用该存储器中的程序，用于执行如下操作：生成媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；通过该输出组件向客户端发送该媒体呈现描述，以使该客户端根据该互补标识获取该视角码流和该互补码流。在一种可选的方案中，该以表明该媒体呈现描述中描述了视角码流和互补码流可以理解为：该互补标识用于标识互补的码流，该互补的码流包含视角码流和互补码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
第十二方面，本发明实施例提供一种服务器，该服务器包括处理器、存储器和输出组件，该存储器用于存储程序和数据，该处理器调用该存储器中的程序，用于执行如下操作：生成媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识；该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；通过该输出组件向客户端发送该媒体呈现描述，以使该客户端根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。在一种可选的方案中，该目标图片包括该第一空间对象的内容和该第二空间对象的内容可以理解为：该目标图片由该第一空间对象的内容和该第二空间对象的内容组成。
通过执行上述操作，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
结合第一方面、或者第三方面、或者第五方面、或者第七方面、或者第九方面，或者第十一方面，在第一种可能的实现方式中，该媒体呈现描述包含第一自适应集，该第一自适应集中的一个表示的信息包含该互补标识，以用于标识该一个表示的信息所描述的码流为该互补码流。
结合第一种可能的实现方式，在第二种可能的实现方式中，该互补标识的值为该媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识该另一个表示的信息所描述的码流为该视角码流。
结合第一方面、或者第二方面、或者第三方面、或者第四方面、或者第五方面，或者第六方面，在第三种可能的实现方式中，该媒体呈现描述包含第二自适应集，该第二自适应集包含该互补标识，以表明该第二自适应集包含用于描述该互补码流的表示的信息。
结合第三种可能的实现方式，在第四种可能的实现方式中，该互补标识的值为该媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识该第三自适应集中的表示的信息所描述的码流为该视角码流。
第十三方面，本发明实施例提供一种数据处理系统，该系统包括客户端和服务器，其中：
该客户端为第五方面的任一可能的实现方式所描述的客户端，或者第六方面的任一可能的实现方式所描述的客户端，或者第九方面的任一可能的实现方式所描述的客户端，或者第十方面的任一可能的实现方式所描述的客户端；
该服务器为第七方面的任一可能的实现方式所描述的服务器，或者第八方面的任一可能的实现方式所描述的服务器，或者十一方面的任一可能的实现方式所描述的服务器，或者第十二方面的任一可能的实现方式所描述的服务器。
通过实施本发明实施例，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1是系统层视频流媒体传输采用的DASH标准传输的框架实例示意图；
图2是本发明实施例提供的视频文件被编码为多种码率的码流的示意图；
图3是本发明实施例提供的MPD文件分段描述的场景示意图；
图4是本发明实施例提供的一种码流数据分段存储的场景示意图；
图5是本发明实施例提供的又一种码流数据分段存储的场景示意图；
图6是本发明实施例提供的一种空间对象的场景示意图；
图7是本发明实施例提供的又一种空间对象的场景示意图；
图8是本发明实施例提供的一种数据处理方法的流程示意图；
图9是本发明实施例提供的一种客户端的结构示意图；
图10是本发明实施例提供的一种服务器的结构示意图；
图11是本发明实施例提供的又一种客户端的结构示意图；
图12是本发明实施例提供的又一种服务器的结构示意图；
图13是本发明实施例提供的一种数据处理系统的结构示意图。
具体实施方式
下面将结合附图对本发明实施例中的技术方案进行清楚地描述。
请参见图6，用户在观看视频的过程中，可通过眼部或者头部转动，或者视频观看设备的画面切换等操作进行视角的切换，相应地，视角注视的位置由空间对象1切换到空间对象2。视角从注视空间对象1切换到注视空间对象2时服务器需要向客户端发送空间对象2的高质量编码内容，在发送该高质量编码内容的同时该客户端会先呈现空间对象2的低质量编码内容，等该客户端接收到该空间对象2的高质量编码内容时显示该空间对象2的高质量编码内容而不再显示该空间对象2的低质量编码内容，相当于空间对象2的低质量编码内容只是用来过渡以避免用户因无法及时看到空间对象2的内容而出现不适。然而，实际应用中，用户的视角FOV停留在空间对象2上的时间往往比较长，在FOV停留在空间对象2的过程中，服务器向该客户端发送的该空间对象2的低质量编码内容均未被用上，这些低质量编码内容造成了传输带宽的浪费，也造成了客户端中出现较多冗余数据。为了解决这个问题，本发明实施例提供如下方法。
请参见图8，图8是本发明实施例提供的一种视频数据处理方法的流程示意图，该方法包括但不限于如下步骤。
步骤S801：服务器生成媒体呈现描述MPD。
具体地，生成该MPD的过程包含建立视角码流与互补码流的对应关系，可以在该MPD中配置互补标识来体现该对应关系(或者配置第一互补标识和第二互补标识来体现该对应关系，如样例三)；该视角码流为对目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片由该第一空间对象的内容和该第二空间对象的内容组成(可以称第一空间对象与第二空间对象的在该目标图片中“互补”)，该目标图片为该服务器提供的视频源(例如，电视剧、电影等)中的某张图片(或称某帧)。该第一空间对象和该第二空间对象均被定义为一个内容成分的一部分空间，用来描述空间关系(spatial relationships)，例如，现有的感兴趣区域(英文：regionof interest，简称：ROI)、片(tile)等均属于一个内容(如一张图片)的部分空间，该空间对象的信息可以在自适应集Adaptation Set、表示(Representation)信息、子表示(Sub-Representation)、描述子等中描述。
图片的内容在编码时需要参照预先设定的编码参数来编码，该编码参数往往定义了辨率、压缩率、码率等信息，采用的编码参数不同则编码出的效果也不同，例如，分辨率、码率越大则编码得到的图片看起来越清晰。本发明实施例编码得到视角码流和互补码流时可以各自参照不同的编码参数编码，使得该视角码流和互补码流显示出的效果不同。本发明实施例要预先建立该视角码流与该互补码流的对应关系来表明该视角码流与该互补码流之间互补，以便确定视角码流后可以根据该对应关系找到该视角码流对应的互补码流，确定视角码流的规则此处不作限定，为了便于理解以下举一例进行说明：由于视角码流是对第一空间对象内的内容编码得到，因此确定该第一空间对象即可确定该视角码流，可以将用户的FOV注视到的空间对象确定为第一空间对象从而确定该视角码流。在根据编码参数编码得到该视角码流和互补码流时，可以将视角码流编码得更清晰一点。需要说明的是，若用户的视角FOV发生了改变则基于改变后的FOV确定的视角码流也会发生改变，重新确定的视角码流也会对应新的互补码流。以图8为例，目标图片的完整空间为空间对象A～I拼接形成的空间，当视角码流对应的第一空间对象为空间对象A时，该互补码流对应的第二空间对象为空间对象B～I拼接形成的空间；当视角码流对应的第一空间对象为空间对象E时，该互补码流对应的第二空间对象为空间对象A、B、C、D、F、G、E和I拼接形成的空间，其余依次类推，上述的空间对象A和其对应的互补空间对象的空间内容可以完全不重叠，也可以部分重叠。
优选的，该目标图片用于360度地展示某个场景，该目标图片的轮廓可以为规则的形状也可以为不规则的形状。
以下举例讲述如何通过互补标识来体现视角码流与互补码流的对应关系。
样例一：
在MPD中增加互补标识ComplementaryId来标记视角码流的representation ID。以下先通过表1对涉及到的ComplementaryId进行介绍，然后结合相关代码讲述具体如何应用。
Figure BDA0001133144710000201
表1
在样例一中，该媒体呈现描述包含自适应集(AdaptationSet)，为了与其他样例中的自适应集区分，可以称样例一中的自适应集为第一自适应集，该第一自适应集中的一个表示的信息包含该互补标识，以用于标识该一个表示的信息所描述的码流为该互补码流。该互补标识的值为该媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识该另一个表示的信息所描述的码流为该视角码流。举例来说，若描述码流A的表示的信息中存在ComplementaryId则认为码流A为互补码流且存在与码流A对应的视角码流，若描述码流B的表示的信息中的Representation ID的值等于该ComplementaryId的值则认为码流B为该视角码流。以下提供一种MPD的样例。
Figure BDA0001133144710000211
Figure BDA0001133144710000221
在上述代码中，描述码流video-3.mp4的表示的信息为<Representation id＝“3"bandwidth＝"450000"complementaryId＝”2”><BaseURL>video-3.mp4</BaseURL></Representation>，该表示的信息中存在complementaryId即表明码流video-3.mp4为互补码流，且video-3.mp4存在对应的视角码流；由于描述码流video-2.mp4的表示的信息<Representation id＝"2"bandwidth＝"450000"><BaseURL>video-2.mp4</BaseURL></Representation>中的表示标识Representation id的值等于互补标识complementaryId的值，即均等于2，因此码流video-2.mp4为该视角码流。
样例二：
在MPD中添加描述互补码流的adaptation set的互补标识ComplementaryId。以下先通过表2对涉及到的ComplementaryId进行介绍，然后通过相关代码讲述如何具体应用。
Figure BDA0001133144710000222
表2
在样例二中，该媒体呈现描述包含自适应集(AdaptationSet)，为了与其他样例中的自适应集区分，可以称样例二中的自适应集为第二自适应集，该第二自适应集包含该互补标识ComplementaryId，以表明该第二自适应集包含用于描述该互补码流的表示的信息。该互补标识ComplementaryId的值为该媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识该第三自适应集中的表示的信息所描述的码流为该视角码流，该第三自适应集为区别于该第二自适应集的自适应集。举例来说，自适应集A中存在ComplementaryId，那么该自适应集A中的表示的信息所描述的码流为互补码流，且该互补码流存在对应的视角码流；若自适应集B中的自适应集标识adaptationSet ID的值等于该自适应集A中的互补标识ComplementaryId的值，那么，该自适应集B中的表示的信息描述的码流为该视角码流。
以下提供一种MPD样例。
Figure BDA0001133144710000231
Figure BDA0001133144710000241
在上述代码中，第二自适应集<AdaptationSet id＝“2”complementaryId＝“1”[…]><EssentialProperty schemeIdUri＝"urn:mpeg:dash:srd:2014"value＝"1"/><Representation id＝"2"bandwidth＝"450000"><BaseURL>video-2.mp4</BaseURL></Representation></AdaptationSet>中存在complementaryId表明该第二自适应集所描述的表示的信息描述的码流video-2.mp4为互补码流，且该互补码流存在对应的视角码流；AdaptationSet ID的值等于complementaryId的值(即等于1)的自适应集中的表示的信息所描述的码流为该视角码流。
样例三：
在MPD的第一描述子中添加第一互补标识ComplementaryId1来体现该第一描述子描述的对象为视角码流，在该MPD的第二描述子中添加第二互补标识ComplementaryId2来体现该第二描述子指定的对象为互补码流，以下先通过表3和表4对涉及到的ComplementaryId1和ComplementaryId2进行介绍，然后通过相关代码讲述具体如何应用。
Figure BDA0001133144710000251
表3
Figure BDA0001133144710000252
表4
在样例三中，该媒体呈现描述包含两个描述子，可称其中一个描述子为第一描述子，称另一个描述子为第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识，该第一互补标识的值等于预设的第一数值，以表明该第一描述子所描述的码流为该互补码流，该第二互补标识的值等于预设的第二数值，以表明该第二描述子所描述的码流为该视角码流。可选的，该第一描述子和该第二描述子分别为两个不同自适应集中的描述子。该第一数值和第二数值为预先配置的两个可以相互区分的数值。
可以理解的是，MPD中的描述子可以用来定义视频流中的空间对象，以下先简单介绍一下现有技术中的描述子，描述子的值value＝"1,0,0,1920,1080,3840,2160,2"，其中，value的第一个值为视频源标识，该视频源标识等于1表明该value描述的内容源与上面的视频源相同；value的第二个值和第三个值用于体现空间对象的左上坐标，此处表明value描述的空间对象的坐标为(0,0)；value的第四个值和第五个值为空间坐标，该空间坐标用于体现该空间对象的长宽，此处表明该空间对象的长宽为(1920,1080)；value的第六个值和第七个值用于表示该空间对象参考的空间，此处表明该空间对象参考的空间为(3840,2160)；value的第八个值为空间对象组标识，此处的空间对象组标识是2。
本发明实施例是在现有技术中的value的基础上，为该value新增一个属性，新增的属性排在该value中的哪个位置此处暂不作限定。该第一描述子中新增的属性可以称为第一互补标识，该第二描述子中新增的属性可以称为第二互补标识。该第一互补标识的值等于第一数值(例如，等于0)以表明该第一描述子描述的空间对象的内容为视角码流，并且，在参考的空间中该空间坐标所表示的区域为该value描述的空间对象。该第二互补标识的值等于第二数值(例如，等于1)表明该第二描述子描述的空间对象的内容为互补码流。并且，在参考的空间中该空间坐标所表示的区域以外的部分为该value描述的空间对象。以下提供一种用于具体实现的程序代码。
Figure BDA0001133144710000261
Figure BDA0001133144710000271
在上述代码中，包括描述子的值value＝"1,0,0,0,1920,1080,3840,2160,2"/>和描述子的值value＝"1,1,0,0,960,540,1920,1080,2"/>，可称value＝"1,0,0,0,1920,1080,3840,2160,2"/>的描述子为第一描述子，称value＝"1,1,0,0,960,540,1920,1080,2"/>的描述子为第二描述子，第一描述子的值value＝"1,0,0,0,1920,1080,3840,2160,2"/>中列出了9个值，其中的第2个值为第一互补标识ComplementaryId1，也即是说，value＝"1,0,0,0,1920,1080,3840,2160,2"/>中的ComplementaryId2＝0，因此第一描述子所描述的空间对象的内容为视角码流，并且，该空间对象为空间坐标(1920,1080)在参考的空间(3840,2160)中的区域。第二描述子的值value＝"1,1,0,0,960,540,1920,1080,2"/>中列出了9个值，其中的第2个值为第二互补标识ComplementaryId2，也即是说，value＝"1,1,0,0,960,540,1920,1080,2"/>中的ComplementaryId2＝1，因此第二描述子所描述空间对象的内容为互补码流，并且，该空间对象为参考的空间(1920,1080)中除空间坐标(960,540)表示的空间区域以外的区域。进一步地，由于空间坐标(1920,1080)在参考的空间(3840,2160)中的空间区域，与空间坐标(960,540)在参考的空间(1920,1080)中的空间区域为同一个空间区域，因此第一描述子描述的空间对象为第一空间对象，第二描述子描述的空间对象为第二空间对象。
步骤S802：该服务器向客户端发送以上生成的媒体呈现描述MPD。
步骤S803：该客户端接收该MPD。
步骤S804：该客户获取该MPD中的互补标识，从而根据该互补标识确定视角码流和互补码流(或者解析出第一互补标识和第二互补标识，并根据该第一互补标识和该第二互补标识确定该视角码流和该互补码流)。
具体地，该服务器生成该MPD的规则不同则该客户端解析该MPD的方式也不同，以下分别以样例一、样例二和样例三为例讲述该客户端如何解析该MPD。
当该服务器按照上述样例一的规则生成MPD时，该客户端接收到该MPD后获取该MPD中的第一自适应集，分析该第一自适应集中的表示的信息，当某个表示的信息中包含互补ComplementaryId时，表明该某个表示的信息用于描述互补码流且该互补码流存在对应的视角码流，若存在另一个表示(Representation)的信息中的Representation ID的值等于该互补标识ComplementaryId的值则该另一个表示所描述的码流为该视角码流。
当服务器按照上述样例二的规则生成MPD时，该客户端接收到该MPD后获取该MPD的第二自适应集，如果该第二自适应集中包含互补标识ComplementaryId则表明该第二自适应集中的表示的信息描述的码流为互补码流且该互补码流存在对应的视角码流，若某个自适应集的自适应集标识AdaptationSet ID的值等于该互补标识ComplementaryId的值，则表明该某个自适应集的表示的信息所描述的码流为该视角码流。
当服务器按照上述样例三的规则生成MPD时，该客户端接收到该MPD后获取该MPD的描述子value，如果该MPD中有两个value之间满足预设关系，那么确定其中一个value描述的空间对象的内容为视角码流，确定另一个value描述的空间对象的内容为互补码流，该预设关系为：这两个value中一个value存在第一互补ComplementaryId1，另一个value存在第二互补标识ComplementaryId2，第一互补标识的值为第一数值，第二互补标识的值为第二数值，该其中一个value描述的空间对象为第一空间对象且该另一个value描述的空间对象为第二空间对象。
步骤S805：该客户端向该服务器请求该视角码流和该互补码流。
具体地，该MPD中可以携带该视角码流的网络存储地址和该互补码流的网络存储地址，该网络存储地址可以通过统一资源定位符(英文：Universal Resource Locator，URL)、偏移量等方式来体现。
步骤S806：该服务器接收该请求并根据该请求将该视角码流和该互补码流发送给该客户端。
步骤S807：该客户端接收该视角码流和互补码流，解码该视角码流和该互补码流并通过显示屏呈现。
在图8所描述的方法中，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
上述详细阐述了本发明实施例的方法，为了便于更好地实施本发明实施例的上述方案，相应地，下面提供了本发明实施例的装置。
请参见图9，图9是本发明实施例提供的一种客户端90的结构示意图，该客户端90可以包括接收单元901和获取单元902，各个单元的详细描述如下。
接收单元901用于接收媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；
获取单元902用于根据该互补标识获取该视角码流和该互补码流。
通过运行上述单元，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端90接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端90之间的传输带宽和该客户端90上的存储空间。
在一种可选的方案中，该媒体呈现描述包含第一自适应集，该第一自适应集中的一个表示的信息包含该互补标识，以用于标识该的一个表示的信息所描述的码流为该互补码流。可选的，该互补标识的值为该媒体呈现描述中另一个表示的信息的表示标识representaion ID的值，以用于标识该另一个表示的信息所描述的码流为该视角码流。
在又一种可选的方案中，该媒体呈现描述包含第二自适应集，该第二自适应集包含该互补标识，以表明该第二自适应集包含用于描述该互补码流的表示的信息。可选的，该互补标识的值为该媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识该第三自适应集中的表示的信息所描述的码流为该视角码流。
在本发明实施例中，该客户端90包括的接收单元901和获取单元902的相关描述还可以为：
接收单元901用于接收媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识，该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；
获取单元902用于根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。
需要说明的是，各个单元的具体实现还可以对应参照图8所示的方法实施例的相应描述。
在图9所描述的客户端90中，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端90接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端90之间的传输带宽和该客户端90上的存储空间。
请参见图10，图10是本发明实施例提供的一种服务器100的结构示意图，该服务器100可包括生成单元1001和发送单元1002，各个单元的详细描述如下。
生成单元1001用于生成媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；
发送单元1002用于向客户端发送该媒体呈现描述，以使该客户端根据该互补标识获取该视角码流和该互补码流。
通过运行上述单元，该服务器100在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器100请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器100与该客户端之间的传输带宽和该客户端上的存储空间。
在一种可选的方案中，该媒体呈现描述包含第一自适应集，该第一自适应集中的一个表示的信息包含该互补标识，以用于标识该一个表示的信息所描述的码流为该互补码流。可选的，该互补标识的值为该媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识该另一个表示的信息所描述的码流为该视角码流。
在又一种可选的方案中，该媒体呈现描述包含第二自适应集，该第二自适应集包含该互补标识，以表明该第二自适应集包含用于描述该互补码流的表示的信息。可选的，该互补标识的值为该媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识该第三自适应集中的表示的信息所描述的码流为该视角码流。
在本发明实施例中，该服务器100包括的生成单元1001和发送单元1002的描述还可以如下：
生成单元1001用于生成媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识，该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；
发送单元1002用于向客户端发送该媒体呈现描述，以使该客户端根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。
需要说明的是，各个单元的具体实现还可以对应参照图8所示的方法实施例的相应描述。
在图10所描述的服务器100中，该服务器100在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器100请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器100与该客户端之间的传输带宽和该客户端上的存储空间。
请参见图11，图11是本发明实施例提供的又一种客户端110的结构示意图，该客户端110可以包括处理器1101、存储器1102和输入组件1103，该处理器1101与存储器1102以及与输入组件1103通过总线相互连接。
存储器1102包括但不限于是随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或者快闪存储器)、或便携式只读存储器(CD-ROM)，该存储器1102用于相关指令及数据。
处理器1101可以是一个或多个中央处理器(英文：Central Processing Unit，简称：CPU)，在处理器1101是一个CPU的情况下，该CPU可以是单核CPU，也可以是多核CPU。
输入组件1103可为用来收发信号的射频模块、用于网络通信的通信接口等。
该客户端110中的处理器1101用于读取该存储器1102中存储的程序代码，执行以下操作：
通过该输入组件1103接收媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；
根据该互补标识获取该视角码流和该互补码流。
通过执行上述操作，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端110接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端110之间的传输带宽和该客户端110上的存储空间。
在一种可选的方案中，该媒体呈现描述包含第一自适应集，该第一自适应集中的一个表示的信息包含该互补标识，以用于标识该一个表示的信息所描述的码流为该互补码流。可选的，该互补标识的值为该媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识该另一个表示的信息所描述的码流为该视角码流。
在又一种可选的方案中，该媒体呈现描述包含第二自适应集，该第二自适应集包含该互补标识，以表明该第二自适应集包含用于描述该互补码流的表示的信息。可选的，该互补标识的值为该媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识该第三自适应集中的表示的信息所描述的码流为该视角码流。
在本发明实施例中，该客户端110中的处理器1101还可以用于读取该存储器1102中存储的程序代码，来执行以下操作：
通过该输入组件1103接收媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识，该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；
根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。
需要说明的是，各个操作的具体实现还可以对应参照图8所示的方法实施例的相应描述。
在图11所描述的客户端110中，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端110接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端110之间的传输带宽和该客户端110上的存储空间。
请参见图12，图12是本发明实施例提供的又一种服务器120的结构示意图，该服务器120可以包括处理器1201、存储器1202和输出组件1203，该处理器1201与存储器1202以及与输出组件1203通过总线相互连接。
存储器1202包括但不限于是随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或者快闪存储器)、或便携式只读存储器(CD-ROM)，该存储器1202用于相关指令及数据。
处理器1201可以是一个或多个中央处理器(英文：Central Processing Unit，简称：CPU)，在处理器1201是一个CPU的情况下，该CPU可以是单核CPU，也可以是多核CPU。
输出组件1203可为用来收发信号的射频模块、用于网络通信的通信接口等。
该服务器120中的处理器1201用于读取该存储器1202中存储的程序代码，执行以下操作：
生成媒体呈现描述，该媒体呈现描述包含互补标识，以表明该媒体呈现描述中描述了视角码流和互补码流，该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；
通过该输出组件1203向客户端发送该媒体呈现描述，以使该客户端根据该互补标识获取该视角码流和该互补码流。
通过执行上述操作，该服务器120在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器120请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器120与该客户端之间的传输带宽和该客户端上的存储空间。
在一种可选的方案中，该媒体呈现描述包含第一自适应集，该第一自适应集中的一个表示的信息包含该互补标识，以用于标识该的一个表示的信息所描述的码流为该互补码流。可选的，该互补标识的值为该媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识该另一个表示的信息所描述的码流为该视角码流。
在又一种可选的方案中，该媒体呈现描述包含第二自适应集，该第二自适应集包含该互补标识，以表明该第二自适应集包含用于描述该互补码流的表示的信息。可选的，该互补标识的值为该媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识该第三自适应集中的表示的信息所描述的码流为该视角码流。
在本发明实施例中，该服务器120中的处理器1201还可以用于读取该存储器1202中存储的程序代码，来执行以下操作：
生成媒体呈现描述，该媒体呈现描述包含第一描述子和第二描述子，该第一描述子包含第一互补标识，该第二描述子包含第二互补标识；该第一互补标识的值等于预设的第一数值，以用于标识该第一描述子所描述的码流为互补码流，该第二互补标识的值等于预设的第二数值，以用于标识该第二描述子所描述的码流为视角码流；该视角码流为对该目标图片的第一空间对象的内容编码得到码流，该互补码流为对该目标图片的第二空间对象的内容编码得到码流，该目标图片包括该第一空间对象的内容和该第二空间对象的内容；
通过该输出组件1203向客户端发送该媒体呈现描述，以使该客户端根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流。
需要说明的是，各个操作的具体实现还可以对应参照图8所示的方法实施例的相应描述。
在图12所描述的服务器120中，该服务器120在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器120请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器120与该客户端之间的传输带宽和该客户端上的存储空间。
上述详细阐述了本发明实施例的方法和装置，为了便于更好地实施本发明实施例的上述方案，相应地，下面提供了本发明实施例的相关系统。
请参见图13，图13是本发明实施例提供的一种数据处理系统130的结构示意图，该系统130包括客户端1301和服务器1302，其中：
客户端1301可以为图9描述的客户端90或者图11描述的客户端110；
服务器1302可以为图10描述的服务器100或者图12描述的服务器120。
在图13所描述的数据处理系统130中，该服务器1302在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端1301接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器1302请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器1302与该客户端1301之间的传输带宽和该客户端1301上的存储空间。
综上该，通过实施本发明实施例，该服务器在MPD中通过互补标识标明视角码流和互补码流，相应地，客户端接收到该MPD后根据该互补标识确定该视角码流和该互补码流，然后向该服务器请求该视角码流和该互补码流并呈现；由于该视角码流对应的第一空间对象的内容与该互补码流对应的第二空间对象的内容组成完整的目标图片，因此该视角码流与该互补码流几乎不存在交叠的内容，节省了该服务器与该客户端之间的传输带宽和该客户端上的存储空间。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施例仅揭露了本发明中较佳实施例，不能以此来限定本发明之权利范围，本领域普通技术人员可以理解实现上述实施例的全部或部分流程，并依本发明权利要求所作的等同变化，仍属于发明所涵盖的范围。

Claims (25)

1.一种数据的处理方法，其特征在于，包括：
接收媒体呈现描述，所述媒体呈现描述包含互补标识，以表明所述媒体呈现描述中描述了视角码流和互补码流，所述视角码流为对所述目标图片的第一空间对象的内容编码得到码流，所述互补码流为对所述目标图片的第二空间对象的内容编码得到码流，在根据编码参数编码得到所述视角码流和互补码流时，所述视角码流编码得更清晰，所述目标图片由所述第一空间对象的内容和所述第二空间对象的内容组成，所述目标图片用于360度地展示某个场景；
根据所述互补标识获取所述视角码流和所述互补码流；
所述根据所述互补标识获取所述视角码流和所述互补码流包括：
根据所述互补标识确定视角码流和互补码流；
向服务器请求所述视角码流和所述互补码流；
接收所述服务器发送的所述视角码流和所述互补码流，解码所述视角码流和所述互补码流并通过显示屏呈现。
2.根据权利要求1所述的方法，其特征在于，所述媒体呈现描述包含第一自适应集，所述第一自适应集中的一个表示的信息包含所述互补标识，以用于标识所述一个表示的信息所描述的码流为所述互补码流。
3.根据权利要求2所述的方法，其特征在于，所述互补标识的值为所述媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识所述另一个表示的信息所描述的码流为所述视角码流。
4.根据权利要求1所述的方法，其特征在于，所述媒体呈现描述包含第二自适应集，所述第二自适应集包含所述互补标识，以表明所述第二自适应集包含用于描述所述互补码流的表示的信息。
5.根据权利要求4所述的方法，其特征在于，所述互补标识的值为所述媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识所述第三自适应集中的表示的信息所描述的码流为所述视角码流。
6.一种数据处理方法，其特征在于，包括：
接收媒体呈现描述，所述媒体呈现描述包含第一描述子和第二描述子，所述第一描述子包含第一互补标识，所述第二描述子包含第二互补标识，所述第一互补标识的值等于预设的第一数值，以用于标识所述第一描述子所描述的码流为互补码流，所述第二互补标识的值等于预设的第二数值，以用于标识所述第二描述子所描述的码流为视角码流；所述视角码流为对所述目标图片的第一空间对象的内容编码得到码流，所述互补码流为对所述目标图片的第二空间对象的内容编码得到码流，在根据编码参数编码得到所述视角码流和互补码流时，所述视角码流编码得更清晰，所述目标图片由所述第一空间对象的内容和所述第二空间对象的内容组成，所述目标图片用于360度地展示某个场景；
根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流；
根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流包括：
根据所述第一互补标识确定所述互补码流以及根据所述第二互补标识确定所述视角码流；
向服务器请求所述视角码流和所述互补码流；
接收所述服务器发送的所述视角码流和所述互补码流，解码所述视角码流和所述互补码流并通过显示屏呈现。
7.一种数据的处理方法，其特征在于，包括：
生成媒体呈现描述，所述媒体呈现描述包含互补标识，以表明所述媒体呈现描述中描述了视角码流和互补码流，所述视角码流为对所述目标图片的第一空间对象的内容编码得到码流，所述互补码流为对所述目标图片的第二空间对象的内容编码得到码流，在根据编码参数编码得到所述视角码流和互补码流时，所述视角码流编码得更清晰，所述目标图片由所述第一空间对象的内容和所述第二空间对象的内容组成，所述目标图片用于360度地展示某个场景；
向客户端发送所述媒体呈现描述，以使所述客户端根据所述互补标识获取所述视角码流和所述互补码流；
接收所述客户端根据所述互补标识发送的针对所述视角码流和所述互补码流的请求；
向所述客户端发送所述视角码流和所述互补码流。
8.根据权利要求7所述的方法，其特征在于，所述媒体呈现描述包含第一自适应集，所述第一自适应集中的一个表示的信息包含所述互补标识，以用于标识所述一个表示的信息所描述的码流为所述互补码流。
9.根据权利要求8所述的方法，其特征在于，所述互补标识的值为所述媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识所述另一个表示的信息所描述的码流为所述视角码流。
10.根据权利要求7所述的方法，其特征在于，所述媒体呈现描述包含第二自适应集，所述第二自适应集包含所述互补标识，以表明所述第二自适应集包含用于描述所述互补码流的表示的信息。
11.根据权利要求10所述的方法，其特征在于，所述互补标识的值为所述媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识所述第三自适应集中的表示的信息所描述的码流为所述视角码流。
12.一种数据处理方法，其特征在于，包括：生成媒体呈现描述，所述媒体呈现描述包含第一描述子和第二描述子，所述第一描述子包含第一互补标识，所述第二描述子包含第二互补标识；所述第一互补标识的值等于预设的第一数值，以用于标识所述第一描述子所描述的码流为互补码流，所述第二互补标识的值等于预设的第二数值，以用于标识所述第二描述子所描述的码流为视角码流；所述视角码流为对所述目标图片的第一空间对象的内容编码得到码流，所述互补码流为对所述目标图片的第二空间对象的内容编码得到码流，在根据编码参数编码得到所述视角码流和互补码流时，所述视角码流编码得更清晰，所述目标图片由所述第一空间对象的内容和所述第二空间对象的内容组成，所述目标图片用于360度地展示某个场景；
向客户端发送所述媒体呈现描述，以使所述客户端根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流；
接收所述客户端根据所述第一互补标识和所述第二互补标识发送的针对所述视角码流和所述互补码流的请求；
向所述客户端发送所述视角码流和所述互补码流。
13.一种客户端，其特征在于，包括：
接收单元，用于接收媒体呈现描述，所述媒体呈现描述包含互补标识，以表明所述媒体呈现描述中描述了视角码流和互补码流，所述视角码流为对所述目标图片的第一空间对象的内容编码得到码流，所述互补码流为对所述目标图片的第二空间对象的内容编码得到码流，在根据编码参数编码得到所述视角码流和互补码流时，所述视角码流编码得更清晰，所述目标图片由所述第一空间对象的内容和所述第二空间对象的内容组成，所述目标图片用于360度地展示某个场景；
获取单元，用于根据所述互补标识获取所述视角码流和所述互补码流；
所述根据所述互补标识获取所述视角码流和所述互补码流包括：
根据所述互补标识确定视角码流和互补码流；
向服务器请求所述视角码流和所述互补码流；
接收所述服务器发送的所述视角码流和所述互补码流，解码所述视角码流和所述互补码流并通过显示屏呈现。
14.根据权利要求13所述的客户端，其特征在于，所述媒体呈现描述包含第一自适应集，所述第一自适应集中的一个表示的信息包含所述互补标识，以用于标识所述一个表示的信息所描述的码流为所述互补码流。
15.根据权利要求14所述的客户端，其特征在于，所述互补标识的值为所述媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识所述另一个表示的信息所描述的码流为所述视角码流。
16.根据权利要求13所述的客户端，其特征在于，所述媒体呈现描述包含第二自适应集，所述第二自适应集包含所述互补标识，以表明所述第二自适应集包含用于描述所述互补码流的表示的信息。
17.根据权利要求16所述的客户端，其特征在于，所述互补标识的值为所述媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识所述第三自适应集中的表示的信息所描述的码流为所述视角码流。
18.一种客户端，其特征在于，包括：
接收单元，用于接收媒体呈现描述，所述媒体呈现描述包含第一描述子和第二描述子，所述第一描述子包含第一互补标识，所述第二描述子包含第二互补标识，所述第一互补标识的值等于预设的第一数值，以用于标识所述第一描述子所描述的码流为互补码流，所述第二互补标识的值等于预设的第二数值，以用于标识所述第二描述子所描述的码流为视角码流；所述视角码流为对所述目标图片的第一空间对象的内容编码得到码流，所述互补码流为对所述目标图片的第二空间对象的内容编码得到码流，在根据编码参数编码得到所述视角码流和互补码流时，所述视角码流编码得更清晰，所述目标图片由所述第一空间对象的内容和所述第二空间对象的内容组成，所述目标图片用于360度地展示某个场景；
获取单元，用于根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流；
根据所述第一互补标识获取所述互补码流以及根据所述第二互补标识获取所述视角码流包括：
根据所述第一互补标识确定所述互补码流以及根据所述第二互补标识确定所述视角码流；
向服务器请求所述视角码流和所述互补码流；
接收所述服务器发送的所述视角码流和所述互补码流，解码所述视角码流和所述互补码流并通过显示屏呈现。
19.一种服务器，其特征在于，包括：
生成单元，用于生成媒体呈现描述，所述媒体呈现描述包含互补标识，以表明所述媒体呈现描述中描述了视角码流和互补码流，所述视角码流为对所述目标图片的第一空间对象的内容编码得到码流，所述互补码流为对所述目标图片的第二空间对象的内容编码得到码流，在根据编码参数编码得到所述视角码流和互补码流时，所述视角码流编码得更清晰，所述目标图片由所述第一空间对象的内容和所述第二空间对象的内容组成，所述目标图片用于360度地展示某个场景；
发送单元，用于向客户端发送所述媒体呈现描述，以使所述客户端根据所述互补标识获取所述视角码流和所述互补码流；
接收所述客户端根据所述互补标识发送的针对所述视角码流和所述互补码流的请求；
向所述客户端发送所述视角码流和所述互补码流。
20.根据权利要求19所述的服务器，其特征在于，所述媒体呈现描述包含第一自适应集，所述第一自适应集中的一个表示的信息包含所述互补标识，以用于标识所述一个表示的信息所描述的码流为所述互补码流。
21.根据权利要求20所述的服务器，其特征在于，所述互补标识的值为所述媒体呈现描述中的另一个表示的信息的表示标识representaion ID的值，以用于标识所述另一个表示的信息所描述的码流为所述视角码流。
22.根据权利要求19所述的服务器，其特征在于，所述媒体呈现描述包含第二自适应集，所述第二自适应集包含所述互补标识，以表明所述第二自适应集包含用于描述所述互补码流的表示的信息。
23.根据权利要求22所述的服务器，其特征在于，所述互补标识的值为所述媒体呈现描述中的第三自适应集标识adaptationSet ID的值，以用于标识所述第三自适应集中的表示的信息所描述的码流为所述视角码流。
24.一种服务器，其特征在于，包括：
生成单元，用于生成媒体呈现描述，所述媒体呈现描述包含第一描述子和第二描述子，所述第一描述子包含第一互补标识，所述第二描述子包含第二互补标识，所述第一互补标识的值等于预设的第一数值，以用于标识所述第一描述子所描述的码流为互补码流，所述第二互补标识的值等于预设的第二数值，以用于标识所述第二描述子所描述的码流为视角码流；所述视角码流为对所述目标图片的第一空间对象的内容编码得到码流，所述互补码流为对所述目标图片的第二空间对象的内容编码得到码流，在根据编码参数编码得到所述视角码流和互补码流时，所述视角码流编码得更清晰，所述目标图片由所述第一空间对象的内容和所述第二空间对象的内容组成，所述目标图片用于360度地展示某个场景；
发送单元，用于向客户端发送所述媒体呈现描述，以使所述客户端根据所述第一互补标识获取所述互补码流并根据所述第二互补标识获取所述视角码流；
接收所述客户端根据所述第一互补标识和所述第二互补标识发送的针对所述视角码流和所述互补码流的请求；
向所述客户端发送所述视角码流和所述互补码流。
25.一种数据处理系统，其特征在于，所述系统包括客户端和服务器，所述客户端为权利要求13～18任一项所述的客户端；所述服务器为权利要求19～24任一项所述的服务器。
CN201610909014.4A 2016-10-18 2016-10-18 一种数据处理方法、相关设备及系统 Active CN107959861B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610909014.4A CN107959861B (zh) 2016-10-18 2016-10-18 一种数据处理方法、相关设备及系统
PCT/CN2017/092772 WO2018072488A1 (zh) 2016-10-18 2017-07-13 一种数据处理方法、相关设备及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610909014.4A CN107959861B (zh) 2016-10-18 2016-10-18 一种数据处理方法、相关设备及系统

Publications (2)

Publication Number Publication Date
CN107959861A CN107959861A (zh) 2018-04-24
CN107959861B true CN107959861B (zh) 2020-08-25

Family

ID=61954277

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610909014.4A Active CN107959861B (zh) 2016-10-18 2016-10-18 一种数据处理方法、相关设备及系统

Country Status (2)

Country Link
CN (1) CN107959861B (zh)
WO (1) WO2018072488A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110519652B (zh) 2018-05-22 2021-05-18 华为软件技术有限公司 Vr视频播放方法、终端及服务器
CN108833937B (zh) * 2018-05-30 2021-03-23 华为技术有限公司 视频处理方法和装置
US20220150458A1 (en) * 2019-03-20 2022-05-12 Beijing Xiaomi Mobile Software Co., Ltd. Method and device for transmitting viewpoint switching capabilities in a vr360 application

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102137137A (zh) * 2010-09-17 2011-07-27 华为技术有限公司 基于http流的媒体内容动态插播方法、装置及系统
CN102217322A (zh) * 2011-05-27 2011-10-12 华为技术有限公司 媒体发送方法、媒体接收方法和客户端及系统
CN102595111A (zh) * 2011-01-11 2012-07-18 中兴通讯股份有限公司 一种多视角编码码流的传输方法、装置和系统
CN105933343A (zh) * 2016-06-29 2016-09-07 深圳市优象计算技术有限公司 一种用于720度全景视频网络播放的码流缓存机制

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102055967B (zh) * 2009-10-28 2012-07-04 中国移动通信集团公司 多视点视频的视角切换以及编码方法和装置
CN102595203A (zh) * 2011-01-11 2012-07-18 中兴通讯股份有限公司 一种多媒体数据的传输、接收方法及其传输、接收设备
JP6289478B2 (ja) * 2012-10-12 2018-03-07 キヤノン株式会社 ビデオデータをストリーミングするための方法および対応するデバイス
US20140156865A1 (en) * 2012-11-30 2014-06-05 Futurewei Technologies, Inc. Generic Substitution Parameters in DASH
US9628528B2 (en) * 2013-07-19 2017-04-18 Electronics And Telecommunications Research Institute Apparatus and method for providing content
CN104301769B (zh) * 2014-09-24 2017-12-15 华为技术有限公司 呈现图像的方法、终端设备和服务器
CN105554513A (zh) * 2015-12-10 2016-05-04 Tcl集团股份有限公司 一种基于h.264的全景视频传输方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102137137A (zh) * 2010-09-17 2011-07-27 华为技术有限公司 基于http流的媒体内容动态插播方法、装置及系统
CN102595111A (zh) * 2011-01-11 2012-07-18 中兴通讯股份有限公司 一种多视角编码码流的传输方法、装置和系统
CN102217322A (zh) * 2011-05-27 2011-10-12 华为技术有限公司 媒体发送方法、媒体接收方法和客户端及系统
CN105933343A (zh) * 2016-06-29 2016-09-07 深圳市优象计算技术有限公司 一种用于720度全景视频网络播放的码流缓存机制

Also Published As

Publication number Publication date
CN107959861A (zh) 2018-04-24
WO2018072488A1 (zh) 2018-04-26

Similar Documents

Publication Publication Date Title
CN110121734B (zh) 一种信息的处理方法及装置
CN108965929B (zh) 一种视频信息的呈现方法、呈现视频信息的客户端和装置
CN107888993B (zh) 一种视频数据的处理方法及装置
RU2711591C1 (ru) Способ, устройство и компьютерная программа для адаптивной потоковой передачи мультимедийного контента виртуальной реальности
CN109362242B (zh) 一种视频数据的处理方法及装置
WO2018058773A1 (zh) 一种视频数据的处理方法及装置
CN108282449B (zh) 一种应用于虚拟现实技术的流媒体的传输方法和客户端
CN109218755B (zh) 一种媒体数据的处理方法和装置
WO2018068236A1 (zh) 一种视频流传输方法、相关设备及系统
CN110913278B (zh) 视频播放方法、显示终端及存储介质
CN107959861B (zh) 一种数据处理方法、相关设备及系统
WO2018058993A1 (zh) 一种视频数据的处理方法及装置
CN111937043B (zh) 将文件格式对象和基于超文本传输协议的动态自适应流媒体(dash)对象进行关联
WO2018120474A1 (zh) 一种信息的处理方法及装置
CN108271084B (zh) 一种信息的处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant