CN108111899A - 视频传输方法、客户端、服务器 - Google Patents

视频传输方法、客户端、服务器 Download PDF

Info

Publication number
CN108111899A
CN108111899A CN201711484881.9A CN201711484881A CN108111899A CN 108111899 A CN108111899 A CN 108111899A CN 201711484881 A CN201711484881 A CN 201711484881A CN 108111899 A CN108111899 A CN 108111899A
Authority
CN
China
Prior art keywords
window
video
recommended
information
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711484881.9A
Other languages
English (en)
Other versions
CN108111899B (zh
Inventor
黄成�
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201711484881.9A priority Critical patent/CN108111899B/zh
Publication of CN108111899A publication Critical patent/CN108111899A/zh
Priority to PCT/CN2018/125303 priority patent/WO2019129258A1/zh
Priority to EP18893835.1A priority patent/EP3734979A4/en
Priority to US16/958,830 priority patent/US11539983B2/en
Application granted granted Critical
Publication of CN108111899B publication Critical patent/CN108111899B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种视频传输方法、客户端、服务器，其中，该方法包括：确定播放虚拟现实VR视频的推荐视窗；向服务器请求对应于所述推荐视窗的一个或者多个视频文件。通过本发明，解决了相关技术中VR视频视窗切换所导致的系统延时问题。

Description

视频传输方法、客户端、服务器
技术领域
本发明涉及通信领域，具体而言，涉及一种视频传输方法、客户端、服务器。
背景技术
相关技术中的虚拟现实(VR，Virtual Reality)是指利用计算机技术模拟产生的三维虚拟世界，让使用者在视、听、触、味觉等方面体验高度逼真的虚拟空间环境。随着VR技术的快速发展，VR视频直播、点播等应用也越来越广泛，这给用户带来了沉浸感很强的视频业务体验。
VR视频传输方案包括：用户视点独立的VR全景视频传输方案，以及用户视点自适应的VR视频传输方案。在视点独立传输模式下，终端向服务器请求获取无差别的全景视频文件，当用户视点发生变化时，所有的处理都在终端完成。与传统视频相比，VR视频的特点在于某一时刻仅显示对应用户视窗(即，用户当前观看区域)的全景视频中的部分视频，因此传输其他部分视频对网络资源造成了浪费。
相关技术中还提出了支持用户视点自适应的VR视频传输方案。在视点自适应传输模式下，所传输的VR视频具有预先确定的主视场，主视场内视频质量(分辨率)高于周围视频质量(分辨率)。终端根据当前用户视点向服务器请求对应的VR视频文件。当用户视点的变化量超过特定阈值时，终端将向服务器请求获取对应于新视点的VR视频文件。
然而，由于存在终端-服务器请求响应交互流程，以及视频解码、缓存等处理步骤，视点自适应VR视频传输方案从检测到用户视点发生变化到终端播放显示当前用户视窗的新的VR视频画面之间存在较明显的系统时延，这对用户业务体验造成较大影响。
针对相关技术中存在的上述问题，目前尚未发现有效的解决方案。
发明内容
本发明实施例提供了一种视频传输方法、客户端、服务器。
根据本发明的一个实施例，提供了一种视频传输方法，包括：确定播放虚拟现实VR视频的推荐视窗；向服务器请求对应于所述推荐视窗的一个或者多个视频文件。
根据本发明的一个实施例，提供了另一种虚拟现实场景中的视频数据方法，包括：接收客户端发送的虚拟现实VR视频获取请求，其中，所述请求中携带推荐视窗信息；返回与所述推荐视窗信息对应的一个或者多个视频文件。
根据本发明的另一个实施例，提供了一种客户端，包括：确定模块，用于确定播放虚拟现实VR视频的推荐视窗；请求模块，用于向服务器请求对应于所述推荐视窗的一个或者多个视频文件。
根据本发明的另一个实施例，提供了一种服务器，包括：接收模块，用于接收客户端发送的虚拟现实VR视频获取请求，其中，所述请求中携带推荐视窗信息；发送模块，用于返回与所述推荐视窗信息对应的一个或者多个视频文件。
根据本发明的又一个实施例，还提供了一种存储介质，所述存储介质包括存储的程序，其中，所述程序运行时执行上述任一项所述的方法。
根据本发明的又一个实施例，还提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行上述任一项所述的方法。
通过本发明，通过向服务器请求对应于推荐视窗的视频文件，可以从服务器提前获取对应于推荐视窗的视频文件，并缓存加载在本地，解决了相关技术中VR视频视窗切换所导致的系统延时问题，使得VR视频传输处理更加高效，同时也提高用户业务体验。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1为本发明实施例的视频传输系统的结构组成示意图；
图2是本发明实施例一种VR视频图像投影结构示意图；
图3是本发明实施例一种基于运动约束瓦片集合的VR视频投影帧示意图；
图4是根据本发明实施例的一种视频传输方法的流程图；
图5是根据本发明实施例的另一种视频传输方法的流程图；
图6是本实施例的一种视频传输系统图；
图7是本实施例中VR视频视点自适应传输与VR视频视窗切换延时示意图；
图8是根据本发明实施方式的一种视频传输方法的流程图一；
图9是根据本发明可选实施方式的一种MPD Event消息示例；
图10是根据本发明可选实施方式的一种低延时视窗切换视频传输方法的流程图一；
图11是根据本发明实施方式的一种视频传输方法的流程图二；
图12是根据本发明实施方式的一种确定推荐视窗的起始播放媒体片段的示例图；
图13是根据本发明可选实施方式的一种低延时视窗切换视频传输方法的流程图二；
图14是根据本发明实施方式的一种视频传输方法的流程图三；
图15是根据本发明可选实施方式的一种MPD Viewport描述子示例；
图16是根据本发明可选实施方式的一种低延时视窗切换视频传输方法的流程图三；
图17是根据本发明实施方式的一种视频传输方法的流程图四；
图18是根据本发明可选实施方式的一种VR视频视窗切换无时延传输方法的流程图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
实施例1
图1为本发明实施例的视频传输系统的结构组成示意图，如图1所示，所述系统包括内容制作域10、服务器20，以及终端30。其中，
内容制作域10，完成音视频源的捕获、编码压缩、分片处理等，功能上可划分为内容获取101，编码器102，封装器103。
在虚拟现实内容制作阶段，内容获取101利用一组摄像机或者一个带有多个摄像头和传感器的摄像设备，以及音频传感器，完成现实物理世界声音-视觉场景的录制。其中，摄像头通常可以获取设备中心周围所有方向的视频内容，故名全景视频或者360度视频。对于VR视频而言，同一时刻的VR视频图像经过拼接、投影到一个三维投影结构上，例如一个单位球体或者正六面体。VR音频可以通过不同的麦克风配置获取，并可以用不同格式存储，包括：基于声道信号，静态或动态对象信号，以及基于场景的信号(HOA)。
与传统视频相比，VR视频的独特特征在于通常仅显示对应于用户当前观看区域,即视窗(Viewport)的全景视频中的部分视频。
图2是本发明实施例一种VR视频图像投影结构示意图。其中，VR视频图像被投影在单位球体上，全局坐标轴的原点与音频/视频采集设备的中心点以及观察者的头部在三维空间中的位置相同。用户在观看VR视频时，视窗的位置通过视窗所在球面区域中心点，以及通过该中心点的水平视场和垂直视场表达。而中心点的位置则利用上述坐标轴原点移动至该中心点所需旋转的方位角、俯仰角和倾斜角表示。如图2所示,某一时刻用户视窗Viewport#1的中心点位置在(center_azimuth,center_elevation,centre_tilt)，视窗Viewport#1的水平视角和垂直视角分别为(hor_range,ver_range)。另一时刻，用户视窗从Viewport#1切换至Viewport#2。
投影结构上的VR视频图像数据将被进一步地排布形成二维平面的投影帧。VR视频投影帧在编码之前可以被分割成子图像序列或者运动约束瓦片集合(Motion ConstraintTile Set),保证为用户提供相同视频分辨率/质量条件下，可以减少视频传输带宽需求，或者降低视频解码复杂度。
图3是本发明实施例一种基于运动约束瓦片集合(Motion-Constrained TileSet，MCTS)的VR视频投影帧示意图。其中，每个运动约束瓦片集合序列作为一个瓦片轨道(Tile Track)覆盖VR视频空间区域的子集，彼此可以独立解码并封装成视频文件用于流式传输。同一VR视频内容源可被编码为多个不同分辨率或质量(码率)的比特流。如图3所示，瓦片视频Tile1和Tile4与用户视窗Viewport#1对应，瓦片视频Tile3和Tile6与用户视窗Viewport#1对应。
编码器102，将内容获取101中输出的数字化视频信号和音频信号进行编码压缩，通常被编成多个码率的音视频基本流，以覆盖不同网络带宽需求。封装器103，将原始的音视频基本流封装成为具有固定时间间隔的多个媒体分片文件。此外，还负责提供媒体分片文件的索引信息，譬如：动态自适应流媒体(DASH,Dynamic Adaptive Streaming overHTTP)中媒体呈现描述(MPD,Media Presentation Description)。
流媒体服务器20，负责存储内容制作域10制作输出的媒体分片文件，以及对应的媒体呈现描述信息。流媒体服务器20，可以是任何合适类型的网络服务器，例如内容分发网络(CDN，Content Delivery Network)的中心节点、边缘节点服务器，或者代理服务器、Web服务器，以及上述各项的组合。终端30可以通过任何合适类型的接入网与流媒体服务器20建立网络连接，请求访问媒体分片文件。
终端30，包括：流媒体客户端301：例如动态自适应流媒体(DASH，DynamicAdaptive Streaming over HTTP)客户端，提供针对VR视频等媒体资源的访问、解码和缓存。视频播放器302：例如虚拟现实头戴式显示设备(HDM)，能够跟踪用户视角姿态变化，通过位于用户眼睛前方的目视光学系统放大微型显示屏上的图像，从而提供VR视频沉浸式显示效果。
终端30基于视点朝向、视窗等元数据选择要传输的VR视频文件分辨率或质量。如图3所示，某一时刻用户视窗为Viewport#1，终端30请求获取的对应视窗Viewport#1的Tile1和Tile4视频轨道分辨率或质量应高于其他不可见区域的视频轨道。而当用户视窗切换至Viewport#2时，终端30则会请求获取更高分辨率或质量的Tile3和Tile6视频轨道。
在本实施例中提供了一种运行于上述网络架构的视频传输方法，图4是根据本发明实施例的一种视频传输方法的流程图，可以应用在终端或客户端上，如图4所示，该流程包括如下步骤：
步骤S402，确定播放虚拟现实VR视频的推荐视窗；
步骤S404，向服务器请求对应于推荐视窗的一个或者多个视频文件。
通过上述步骤，通过向服务器请求对应于推荐视窗的视频文件，可以从服务器提前获取对应于推荐视窗的视频文件，并缓存加载在本地，解决了相关技术中VR视频视窗切换所导致的系统延时问题，使得VR视频传输处理更加高效，同时也提高用户业务体验。
在本实施例中提供了一种运行于上述网络架构的视频传输方法，图5是根据本发明实施例的另一种视频传输方法的流程图，可以应用在服务器上，如图5所示，该流程包括如下步骤：
步骤S502，接收客户端发送的虚拟现实VR视频获取请求，其中，请求中携带推荐视窗信息；
步骤S504，返回与推荐视窗信息对应的一个或者多个视频文件。
可选的，确定播放VR视频的推荐视窗的方式，包括以下之一：
获取媒体呈现描述MPD中事件携带的第一推荐视窗信息，根据第一推荐视窗信息确定播放VR视频的推荐视窗；
获取媒体呈现描述MPD中视窗描述子携带的第二推荐视窗信息，根据第二推荐视窗信息确定播放VR视频的推荐视窗；
获取媒体片段中带内事件消息携带的第三推荐视窗信息，根据第三推荐视窗信息确定播放VR视频的推荐视窗；
获取网络与服务器辅助SAND消息中携带的第四推荐视窗信息，根据第四推荐视窗信息确定播放VR视频的推荐视窗。
在本实施例中，推荐视窗在VR视频中的球面区域不同于当前视频播放视窗的球面区域。
可选的，推荐视窗信息包括以下至少之一：推荐视窗的球面区域信息，推荐视窗的类型信息，推荐视窗的描述信息，推荐视窗的播放时间信息。
本实施例的方案还包括：获取MPD中内容覆盖描述子携带的视频内容覆盖的球面区域信息。
在本实施例中，球面区域的位置通过以下信息表征：球面区域的中心点，中心点的方位角范围和俯仰角范围。
可选的，向服务器请求对应于推荐视窗的一个或者多个视频文件包括：向服务器请求视频内容覆盖的球面区域对应于推荐视窗的球面区域的一个或者多个视频文件。
可选的，向服务器请求对应于推荐视窗的一个或者多个视频文件还包括：根据推荐视窗的播放时间信息，向服务器请求对应于推荐视窗的一个或者多个视频文件。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台客户端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
实施例2
在本实施例中还提供了一种视频传输装置，包括客户端，服务器，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
本实施例提供一种客户端60，包括：确定模块600，用于确定播放虚拟现实VR视频的推荐视窗；请求模块602，用于向服务器请求对应于推荐视窗的一个或者多个视频文件。
本实施例提供一种服务器62，包括：接收模块620，用于接收客户端发送的虚拟现实VR视频获取请求，其中，请求中携带推荐视窗信息；发送模块622，用于返回与推荐视窗信息对应的一个或者多个视频文件。
图6是本实施例的一种视频传输系统图，如图6所示，本实施例的系统包括上述客户端60和服务器62。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。
实施例3
本实施例包括多个实施方式，用于通过不同的实例对本申请进行详细说明：
图7是本实施例中VR视频视点自适应传输与VR视频视窗切换延时示意图，可以用于解释本申请实施例的所有实施方式，包括图7A，7B，图7C三个图。
图7A中，根据用户当前视频播放视窗Viewport#i，客户端请求对应视窗Viewport#i的视频文件中的Segmenti k-1和Segmenti k等媒体片段。
图7B中，用户即将从当前视频播放视窗Viewport#i切换至视窗Viewport#j，客户端虽然已经请求对视窗Viewport#j的视频文件中的媒体片段Segmentj k+1，但由于存在客户端-服务器请求响应交互流程，以及视频解码、缓存等处理步骤，现有方案存在较明显的视窗切换时延。
图7C为基于本发明提出的低延时VR视窗切换视频传输技术示意。在图7C中，客户端首先根据推荐视窗信息确定播放VR视频的推荐视窗Viewport#j，继续下载当前视频播放视窗Viewport#i视频文件的Segmenti k，提前向服务器请求对应于推荐视窗Viewport#j的视频文件中的Segmentj k+1和Segmentj k+2等媒体片段，从而实现低延时视窗切换VR视频传输。
图8是根据本发明实施方式的一种视频传输方法的流程图一，如图8所示，该流程包括如下步骤：
步骤S802，获取媒体呈现描述MPD中事件携带的第一推荐视窗信息，根据所述第一推荐视窗信息确定播放VR视频的推荐视窗；
步骤S804，向服务器请求对应于所述推荐视窗的一个或者多个视频文件。
步骤S802中记载了MPD事件中携带推荐视窗信息，下面结合可选实施对MPD事件中的推荐视窗信息进行说明。
图9是根据本发明可选实施方式的一种MPD Event消息示例，如图9所示，媒体呈现描述MPD中的事件流<EventStream>元素中的schemeIdUri＝"urn:avs:vr:event:2018"属性值和value＝"1"属性值共同标识该事件为推荐视窗事件。其中，<EventStream>元素包含一个或者多个事件<Event>元素，每个<Event>元素中的"presentationTime"属性和"messageData"属性分别表示推荐视窗事件中的推荐视窗信息。作为本实施例一个示例，presentationTime＝"10000"属性值以及messageData＝"60,30,0,90,60"属性值分别代表推荐视窗的播放时间信息和推荐视窗的球面区域信息，用于表示在该时刻推荐视窗所在的球面区域。不失一般性，媒体呈现描述MPD推荐视窗事件中还可以包含其他推荐视窗信息，包括：推荐视窗的类型信息，推荐视窗的描述信息等。
步骤S804中记载了向服务器请求对应于所述推荐视窗信息的一个或者多个视频文件，下面结合可选实施来对向服务器请求对应于所述推荐视窗信息的一个或者多个视频文件进行说明。图10是根据本发明可选实施方式的一种低延时视窗切换视频传输方法的流程图一，如图10所示，该流程包括如下步骤：
步骤1～2，某一时刻VR视频播放的用户视窗为Viewport#1，客户端请求获取对应于视窗Viewport#1的视频文件中的媒体分片Viewport#1_Segmentk-1；
步骤3～4，客户端请求服务器获取更新的媒体呈现描述MPD文件，所述MPD文件包含本发明中定义的推荐视窗MPD事件及其携带的推荐视窗信息。客户端获取MPD事件携带的推荐视窗信息包括以下至少之一：推荐视窗的球面区域信息，推荐视窗的类型信息，推荐视窗的描述信息，推荐视窗的播放时间信息。
同时，客户端还获取MPD中内容覆盖描述子携带的视频内容覆盖的球面区域信息，例如图3中所示的基于MCTS编码的Tile视频对应的球面区域信息。
步骤5～8，客户端继续请求获取对应于视窗Viewport#1的视频文件中的媒体分片Viewport#1_Segmentk。本实施例假设该推荐视窗MPD事件中包含对应于Viewport#2的推荐视窗信息，客户端将根据所述推荐视窗信息确定播放VR视频的推荐视窗Viewport#2。如果推荐视窗Viewport#2在VR视频中的球面区域不同于当前视频播放视窗Viewport#1的球面区域，客户端根据推荐视窗Viewport#2的播放时间信息，向所述服务器请求视频内容覆盖的球面区域对应于推荐视窗Viewport#2的球面区域的一个或者多个视频文件中的媒体分片Viewport#2_Segmentk+1。
步骤9～10，VR视频播放视窗切换至Viewport#2，客户端请求获取对应于视窗Viewport#2的视频文件中的媒体分片Viewport#2_Segmentk+2。
图11是根据本发明实施方式的另一种视频传输方法的流程图二，如图11所示，该流程包括如下步骤：
步骤S1102，获取媒体片段中带内事件消息携带的第二推荐视窗信息，根据所述第二推荐视窗信息确定播放VR视频的推荐视窗；
步骤S1104，向服务器请求对应于所述推荐视窗的一个或者多个视频文件。
步骤S1102中记载了带内Inband事件消息盒中携带推荐视窗信息，下面结合可选实施对Inband事件消息盒中的推荐视窗信息进行说明。
图11中步骤S1102中获取到的是推荐视窗事件消息，在一个可选的实施方式中，推荐视窗事件消息可以使用推荐视窗事件消息盒来实现。下面对使用推荐视窗事件消息盒的可选实施方式进行了说明。
推荐视窗(Recommended Viewport)事件设置为通知客户端视频播放推荐视窗的信息。
若事件消息盒中“scheme_id_uri”字段设置为“urn:avs:vr:event:2018”，“value”字段设置为“1”，则是推荐视窗事件消息盒，其所携带的消息字段遵循以下规定：
“presentation_time_delta”字段提供推荐视窗事件中的推荐视窗的播放时间信息,即推荐视窗的媒体呈现时间相对于片段最早呈现时间的增量；
“message_data[]”字段提供推荐视窗事件中推荐视窗的球面区域信息。
事件消息盒中“presentation_time_delta”字段取值为“0”的片段就是推荐视窗事件中推荐视窗的起始播放片段。
针对推荐视窗事件中相同的推荐视窗，推荐视窗事件消息盒实例须具有相同“id”字段值，且满足：
其中，
RVMPTid代表推荐视窗事件中起始播放片段的媒体呈现时间
代表推荐视窗事件中片段i的最早呈现时间
与分别代表推荐视窗事件消息匣实例i中的媒体呈现时间增量值及时间标度值。
图12是根据本发明实施方式的一种确定推荐视窗的起始播放媒体片段的示例图，如图12所示，包括：
MPD文档的多个Representation元素中包含对应于本事件方案的InbandEventStream元素。当需要通知推荐视窗事件时，推荐视窗的起始播放片段相对于片段最早呈现时间增量(presentation_time_delta)，以及推荐视窗的球面区域(message_data[])等信息将被添加到对应的推荐视窗事件消息盒。推荐视窗事件消息可以出现在多个片段中。
终端根据事件流方案标识字段值，例如"urn:avs:vr:event:2018"，以及事件流值字段值，例如"1"，检索确定MPD中Period元素的AdaptationSet和Representation级别中的InbandEventStream元素，即图12中@id属性值分为"1"的Period元素所包含的InbandEventStream元素。
终端使用该Period元素的媒体片段模板(SegmentTemplate)子元素或者媒体片段URL(SegmentURL)子元素，并结合MPD其他层次中定义的资源URL地址基址(BaseURL)元素，譬如："http://www.example.com/"，从而构造带内事件流所对应媒体片段的HTTP URL，即图12中不同指向的URL。
终端根据上述HTTP URL请求获取媒体片段内容，并提取其中携带的事件消息盒，即本发明定义的“推荐视窗”事件信息。终端根据事件标识字段值，例如："123"，检索“推荐视窗”事件消息匣的“id”字段，将检索结果中“presentation_time_delta”字段值为“0”事件消息匣对应的媒体片段确定为推荐视窗的起始播放片段，即图12中左起第四个媒体片段。
步骤S1104中记载了向服务器请求对应于该推荐视窗的一个或者多个视频文件，下面结合可选实施来对向服务器请求对应于推荐视窗的一个或者多个视频文件进行说明。
图13是根据本发明可选实施方式的一种低延时视窗切换视频传输方法的流程图二，如图13所示，该流程包括如下步骤：
步骤1～2，某一时刻VR视频播放的用户视窗为Viewport#1，客户端请求获取对应于视窗Viewport#1的视频文件中的媒体分片Viewport#1_Segmentk-1,片段Viewport#1_Segmentk-1中包含本发明中定义的推荐视窗带内事件及其携带的推荐视窗信息；
客户端获取推荐视窗带内事件中的推荐视窗信息包括以下至少之一：推荐视窗的球面区域信息，推荐视窗的类型信息，推荐视窗的描述信息，推荐视窗的播放时间信息。
同时，客户端还获取MPD中内容覆盖描述子携带的视频内容覆盖的球面区域信息，例如图3中所示的基于MCTS编码的Tile视频对应的球面区域信息。
步骤3～6，客户端继续请求获取对应于视窗Viewport#1的视频文件中的媒体分片Viewport#1_Segmentk。本实施例假设所述推荐视窗带内事件中包含对应于Viewport#2的推荐视窗信息，客户端将根据所述推荐视窗信息确定播放VR视频的推荐视窗Viewport#2。如果推荐视窗Viewport#2在VR视频中的球面区域不同于当前视频播放视窗Viewport#1的球面区域，客户端根据推荐视窗Viewport#2的播放时间信息，向所述服务器请求视频内容覆盖的球面区域对应于推荐视窗Viewport#2的球面区域的一个或者多个视频文件中的媒体分片Viewport#2_Segmentk+1；
步骤7～8，VR视频播放视窗切换至Viewport#2，客户端请求获取对应于视窗Viewport#2的视频文件中的媒体分片Viewport#2_Segmentk+2。
图14是根据本发明实施方式的一种视频传输方法的流程图三，如图14所示，该流程包括如下步骤：
步骤S1402，获取媒体呈现描述MPD中视窗描述子携带的第三推荐视窗信息，根据所述第三推荐视窗信息确定播放VR视频的推荐视窗；
步骤S1404，向服务器请求对应于所述推荐视窗的一个或者多个视频文件。
步骤S1402中记载了Viewport描述子中携带推荐视窗信息，下面结合可选实施对Viewport描述子中的推荐视窗信息进行说明。
图15是根据本发明可选实施方式的一种MPD Viewport描述子示例，如图15所示，媒体呈现描述MPD中的视窗<Viewport>元素的schemeIdUri＝"urn:avs:vr:rcvp:event:2018"属性值标识该辅助描述子为视窗描述子。媒体呈现描述MPD中球面空间关系<SSR>元素中的schemeIdUri＝"urn:avs:vr:cc:event:2018"属性值标识该辅助描述子为内容覆盖描述子。其中，视窗<Viewport>元素以及与其相同层级的球面空间关系<SSR>元素共同表示视窗描述子的推荐视窗信息。
作为本实施例一个示例，<Viewport>元素的value＝"10000"属性值以及<SSR>元素的value＝＝"60,30,0,90,60"属性值分别代表推荐视窗的播放时间信息和推荐视窗的球面区域信息，用于表示在该时刻推荐视窗所在的球面区域。不失一般性，媒体呈现描述MPD推荐视窗事件中还可以包含其他推荐视窗信息，包括：推荐视窗的类型信息，推荐视窗的描述信息等。
步骤S1404中记载了向服务器请求对应于所述推荐视窗的一个或者多个视频文件，下面结合可选实施来对向服务器请求对应于所述推荐视窗的一个或者多个视频文件进行说明。
图16是根据本发明可选实施方式的一种低延时视窗切换视频传输方法的流程图三，如图16所示，该流程包括如下步骤：
步骤1～2，客户端请求服务器获取更新的媒体呈现描述MPD文件，所述MPD文件包含本发明中定义的视窗描述子及其携带的推荐视窗信息。客户端获取视窗描述子携带的推荐视窗信息包括以下至少之一：推荐视窗的球面区域信息，推荐视窗的类型信息，推荐视窗的描述信息，推荐视窗的播放时间信息；
同时，客户端还获取MPD中内容覆盖描述子携带的视频内容覆盖的球面区域信息，例如图3中所示的基于MCTS编码的Tile视频对应的球面区域信息。
步骤3～4，客户端首先请求获取对应于视窗Viewport#1的视频文件中的媒体分片Viewport#1_Segmentk-1；
步骤5～8，客户端继续请求获取对应于视窗Viewport#1的视频文件中的媒体分片Viewport#1_Segmentk。本实施例假设该视窗描述子中包含对应于Viewport#2的推荐视窗信息，客户端将根据所述推荐视窗信息确定播放VR视频的推荐视窗Viewport#2。如果推荐视窗Viewport#2在VR视频中的球面区域不同于当前视频播放视窗Viewport#1的球面区域，客户端根据推荐视窗Viewport#2的播放时间信息，向所述服务器请求视频内容覆盖的球面区域对应于推荐视窗Viewport#2的球面区域的一个或者多个视频文件中的媒体分片Viewport#2_Segmentk+1；
步骤9～10，VR视频播放视窗切换至Viewport#2，客户端请求获取对应于视窗Viewport#2的视频文件中的媒体分片Viewport#2_Segmentk+2。
图17是根据本发明实施方式的一种视频传输方法的流程图四，如图17所示，该流程包括如下步骤：
步骤S1702，获取网络与服务器辅助DASH(SAND)推荐资源携带的第四推荐视窗信息，根据所述第四推荐视窗信息确定播放VR视频的推荐视窗；
步骤S1704，向服务器请求对应于所述推荐视窗的一个或者多个视频文件。
步骤S1702中记载了SAND推荐资源携带推荐视窗信息，下面结合可选实施对SAND推荐资源中的推荐视窗信息进行说明。
SAND推荐资源消息允许DASH感知网络实体(DASH Aware Network Entity，DANE)通知DASH客户端提前下载推荐视窗资源，可以通过球面区域的空间位置或者视频文件的表示Representation标识ID指定推荐视窗资源。
推荐视窗资源定义如下：
类型:接收辅助消息
发送方:DASH网络实体
接收方:DASH客户端
表1用于描述推荐视窗资源(空间位置)的参数
表1
表2用于描述推荐视窗资源(表示标识)的参数
表2
步骤S1704中记载了向服务器请求对应于所述推荐视窗的一个或者多个视频文件，下面结合可选实施来对向服务器请求对应于所述推荐视窗的一个或者多个视频文件进行说明。
图18是根据本发明可选实施方式的一种VR视频视窗切换无时延传输方法的流程图，如图18所示，该流程包括如下步骤：
步骤1～2，某一时刻VR视频播放的用户视窗为Viewport#1，客户端请求获取对应于视窗Viewport#1的视频文件中的媒体分片Viewport#1_Segmentk-1。服务器同时返回SAND推荐视窗资源的访问地址；
步骤3～4，客户端请求上述访问地址获取SAND推荐视窗资源，所述SAND推荐视窗资源包含前述表1或表2中定义的推荐视窗信息。客户端获取SAND推荐视窗资源的推荐视窗信息包括以下至少之一：推荐视窗的球面区域信息，推荐视窗的类型信息，推荐视窗的描述信息，推荐视窗的播放时间信息。
同时，客户端还获取MPD中内容覆盖描述子携带的视频内容覆盖的球面区域信息，例如图3中所示的基于MCTS编码的Tile视频对应的球面区域信息。
步骤5～8，客户端继续请求获取对应于视窗Viewport#1的视频文件中的媒体分片Viewport#1_Segmentk。本实施例假设该推荐视窗MPD事件中包含对应于Viewport#2的推荐视窗信息，客户端将根据所述推荐视窗信息确定播放VR视频的推荐视窗Viewport#2。如果推荐视窗Viewport#2在VR视频中的球面区域不同于当前视频播放视窗Viewport#1的球面区域，客户端根据推荐视窗Viewport#2的播放时间信息，向所述服务器请求视频内容覆盖的球面区域对应于推荐视窗Viewport#2的球面区域的一个或者多个视频文件中的媒体分片Viewport#2_Segmentk+1。
步骤9～10，VR视频播放视窗切换至Viewport#2，客户端请求获取对应于视窗Viewport#2的视频文件中的媒体分片Viewport#2_Segmentk+2。
通过上述步骤，终端利用推荐视窗位置信息提前向服务器请求获取对应于推荐视窗的一个或者多个视频文件，从而解决了相关技术中存在的VR视频视窗切换所导致的系统延时问题，使得VR视频传输处理更加高效，同时也提高用户业务体验。
实施例4
本发明的实施例还提供了一种存储介质，该存储介质包括存储的程序，其中，上述程序运行时执行上述任一项所述的方法。
可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的程序代码：
S1，确定播放虚拟现实VR视频的推荐视窗；
S2，向服务器请求对应于推荐视窗的一个或者多个视频文件。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本发明的实施例还提供了一种处理器，该处理器用于运行程序，其中，该程序运行时执行上述任一项方法中的步骤。
可选地，在本实施例中，上述程序用于执行以下步骤：
S1，确定播放虚拟现实VR视频的推荐视窗；
S2，向服务器请求对应于推荐视窗的一个或者多个视频文件。
可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.一种视频传输方法，其特征在于，包括：
确定播放虚拟现实VR视频的推荐视窗；
向服务器请求对应于所述推荐视窗的一个或者多个视频文件。
2.根据权利要求1所述的方法，其特征在于，所述确定播放VR视频的推荐视窗的方法，包括以下之一：
获取媒体呈现描述MPD中事件携带的第一推荐视窗信息，根据所述第一推荐视窗信息确定播放VR视频的推荐视窗；
获取媒体片段中带内事件消息携带的第二推荐视窗信息，根据所述第二推荐视窗信息确定播放VR视频的推荐视窗；
获取媒体呈现描述MPD中视窗描述子携带的第三推荐视窗信息，根据所述第三推荐视窗信息确定播放VR视频的推荐视窗；
获取网络与服务器辅助DASH推荐资源携带的第四推荐视窗信息，根据所述第四推荐视窗信息确定播放VR视频的推荐视窗。
3.根据权利要求1或者2所述的方法，其特征在于，其中，所述推荐视窗在VR视频中的球面区域不同于当前视频播放视窗的球面区域。
4.根据权利要求2所述的方法，其特征在于，所述推荐视窗信息包括以下至少之一：
推荐视窗的球面区域信息，推荐视窗的类型信息，推荐视窗的描述信息，推荐视窗的播放时间信息。
5.根据权利要求1所述的方法，其特征在于，该方法还包括：
获取MPD中内容覆盖描述子携带的视频内容覆盖的球面区域信息。
6.根据权利要求3或者5所述的方法，其特征在于，所述球面区域的位置通过以下信息表征：所述球面区域的中心点，所述中心点的方位角范围和俯仰角范围。
7.根据权利要求1所述的方法，其特征在于，向服务器请求对应于所述推荐视窗的一个或者多个视频文件包括：
向所述服务器请求视频内容覆盖的球面区域对应于所述推荐视窗的球面区域的一个或者多个视频文件。
8.根据权利要求4所述的方法，其特征在于，向服务器请求对应于所述推荐视窗的一个或者多个视频文件还包括：
根据所述推荐视窗的播放时间信息，向所述服务器请求对应于所述推荐视窗的一个或者多个视频文件。
9.一种视频传输方法，其特征在于，包括：
接收客户端发送的虚拟现实VR视频获取请求，其中，所述请求中携带推荐视窗信息；
返回与所述推荐视窗信息对应的一个或者多个视频文件。
10.根据权利要求9所述的方法，其特征在于，所述推荐视窗信息包括以下至少之一：
推荐视窗的球面区域信息，推荐视窗的类型信息，推荐视窗的描述信息，推荐视窗的播放时间信息。
11.一种客户端，其特征在于，包括：
确定模块，用于确定播放虚拟现实VR视频的推荐视窗；
请求模块，用于向服务器请求对应于所述推荐视窗的一个或者多个视频文件。
12.一种服务器，其特征在于，包括：
接收模块，用于接收客户端发送的虚拟现实VR视频获取请求，其中，所述请求中携带推荐视窗信息；
发送模块，用于返回与所述推荐视窗信息对应的一个或者多个视频文件。
13.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，所述程序运行时执行权利要求1至10中任一项所述的方法。
14.一种处理器，其特征在于，所述处理器用于运行程序，其中，所述程序运行时执行权利要求1至10中任一项所述的方法。
CN201711484881.9A 2017-12-29 2017-12-29 视频传输方法与装置、客户端、服务器及存储介质 Active CN108111899B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201711484881.9A CN108111899B (zh) 2017-12-29 2017-12-29 视频传输方法与装置、客户端、服务器及存储介质
PCT/CN2018/125303 WO2019129258A1 (zh) 2017-12-29 2018-12-29 视频传输方法以及客户端、服务器
EP18893835.1A EP3734979A4 (en) 2017-12-29 2018-12-29 VIDEO TRANSMISSION METHOD, CLIENT AND SERVER
US16/958,830 US11539983B2 (en) 2017-12-29 2018-12-29 Virtual reality video transmission method, client device and server

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711484881.9A CN108111899B (zh) 2017-12-29 2017-12-29 视频传输方法与装置、客户端、服务器及存储介质

Publications (2)

Publication Number Publication Date
CN108111899A true CN108111899A (zh) 2018-06-01
CN108111899B CN108111899B (zh) 2021-05-11

Family

ID=62215049

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711484881.9A Active CN108111899B (zh) 2017-12-29 2017-12-29 视频传输方法与装置、客户端、服务器及存储介质

Country Status (4)

Country Link
US (1) US11539983B2 (zh)
EP (1) EP3734979A4 (zh)
CN (1) CN108111899B (zh)
WO (1) WO2019129258A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109068151A (zh) * 2018-08-14 2018-12-21 浙江万里学院 基于毫米波蜂窝网络的虚拟现实视频无线传输方法
WO2019129258A1 (zh) * 2017-12-29 2019-07-04 中兴通讯股份有限公司 视频传输方法以及客户端、服务器
CN113556619A (zh) * 2021-07-15 2021-10-26 广州市奥威亚电子科技有限公司 一种链路传输的设备与方法、链路接收的方法
CN113691883A (zh) * 2019-03-20 2021-11-23 北京小米移动软件有限公司 在vr360应用中传输视点切换能力的方法和装置
WO2022116822A1 (zh) * 2020-12-02 2022-06-09 腾讯科技（深圳）有限公司 沉浸式媒体的数据处理方法、装置和计算机可读存储介质
WO2023024843A1 (zh) * 2021-08-23 2023-03-02 腾讯科技（深圳）有限公司 媒体文件封装与解封装方法、设备及存储介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11822555B2 (en) * 2020-02-03 2023-11-21 Tencent America LLC Signaling and resolution model for multi-level session-based description descriptors
CN115002518B (zh) * 2022-05-30 2024-03-22 咪咕视讯科技有限公司 数据监测方法、装置及计算机可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105812961A (zh) * 2014-12-31 2016-07-27 中兴通讯股份有限公司 自适应流媒体处理方法及装置
CN105915937A (zh) * 2016-05-10 2016-08-31 上海乐相科技有限公司 一种全景视频播放方法及设备
WO2016208988A1 (en) * 2015-06-23 2016-12-29 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving signal in multimedia system
CN106534716A (zh) * 2016-11-17 2017-03-22 三星电子（中国）研发中心 一种全景视频的传输和显示方法
CN106612426A (zh) * 2015-10-26 2017-05-03 华为技术有限公司 一种多视点视频传输方法及装置
WO2017205794A1 (en) * 2016-05-26 2017-11-30 Vid Scale, Inc. Methods and apparatus of viewport adaptive 360 degree video delivery
US10270825B2 (en) * 2016-03-31 2019-04-23 Verizon Patent And Licensing Inc. Prediction-based methods and systems for efficient distribution of virtual reality media content

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109691094B (zh) * 2016-08-25 2021-10-22 Lg电子株式会社 发送全向视频的方法、接收全向视频的方法、发送全向视频的装置和接收全向视频的装置
US10917564B2 (en) * 2016-10-12 2021-02-09 Qualcomm Incorporated Systems and methods of generating and processing files for partial decoding and most interested regions
US20180176468A1 (en) * 2016-12-19 2018-06-21 Qualcomm Incorporated Preferred rendering of signalled regions-of-interest or viewports in virtual reality video
CN108111899B (zh) 2017-12-29 2021-05-11 中兴通讯股份有限公司 视频传输方法与装置、客户端、服务器及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105812961A (zh) * 2014-12-31 2016-07-27 中兴通讯股份有限公司 自适应流媒体处理方法及装置
WO2016208988A1 (en) * 2015-06-23 2016-12-29 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving signal in multimedia system
CN106612426A (zh) * 2015-10-26 2017-05-03 华为技术有限公司 一种多视点视频传输方法及装置
US10270825B2 (en) * 2016-03-31 2019-04-23 Verizon Patent And Licensing Inc. Prediction-based methods and systems for efficient distribution of virtual reality media content
CN105915937A (zh) * 2016-05-10 2016-08-31 上海乐相科技有限公司 一种全景视频播放方法及设备
WO2017205794A1 (en) * 2016-05-26 2017-11-30 Vid Scale, Inc. Methods and apparatus of viewport adaptive 360 degree video delivery
CN106534716A (zh) * 2016-11-17 2017-03-22 三星电子（中国）研发中心 一种全景视频的传输和显示方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
IRAJ SODAGAR: "《ISO/IEC JTC1/SC29/WG11 W13533》", 30 April 2012 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019129258A1 (zh) * 2017-12-29 2019-07-04 中兴通讯股份有限公司 视频传输方法以及客户端、服务器
US11539983B2 (en) 2017-12-29 2022-12-27 Zte Corporation Virtual reality video transmission method, client device and server
CN109068151A (zh) * 2018-08-14 2018-12-21 浙江万里学院 基于毫米波蜂窝网络的虚拟现实视频无线传输方法
CN113691883A (zh) * 2019-03-20 2021-11-23 北京小米移动软件有限公司 在vr360应用中传输视点切换能力的方法和装置
WO2022116822A1 (zh) * 2020-12-02 2022-06-09 腾讯科技（深圳）有限公司 沉浸式媒体的数据处理方法、装置和计算机可读存储介质
CN113556619A (zh) * 2021-07-15 2021-10-26 广州市奥威亚电子科技有限公司 一种链路传输的设备与方法、链路接收的方法
CN113556619B (zh) * 2021-07-15 2024-04-19 广州市奥威亚电子科技有限公司 一种链路传输的设备与方法、链路接收的方法
WO2023024843A1 (zh) * 2021-08-23 2023-03-02 腾讯科技（深圳）有限公司 媒体文件封装与解封装方法、设备及存储介质

Also Published As

Publication number Publication date
EP3734979A1 (en) 2020-11-04
US20210076081A1 (en) 2021-03-11
US11539983B2 (en) 2022-12-27
CN108111899B (zh) 2021-05-11
WO2019129258A1 (zh) 2019-07-04
EP3734979A4 (en) 2021-06-23

Similar Documents

Publication Publication Date Title
CN108111899B (zh) 视频传输方法与装置、客户端、服务器及存储介质
KR102246002B1 (ko) 가상 현실 미디어 콘텐트의 스트리밍을 개선하는 방법, 디바이스, 및 컴퓨터 프로그램
RU2711591C1 (ru) Способ, устройство и компьютерная программа для адаптивной потоковой передачи мультимедийного контента виртуальной реальности
EP3782368A1 (en) Processing video patches for three-dimensional content
JP7085816B2 (ja) 情報処理装置、情報提供装置、制御方法、及びプログラム
CN110876051B (zh) 视频数据的处理，传输方法及装置，视频数据的处理系统
CN108282449B (zh) 一种应用于虚拟现实技术的流媒体的传输方法和客户端
JP2020529149A (ja) イメージ処理方法、端末およびサーバ
KR102133207B1 (ko) 통신장치, 통신 제어방법 및 통신 시스템
CN112219403B (zh) 沉浸式媒体的渲染视角度量
CN109644296A (zh) 一种视频流传输方法、相关设备及系统
US10313763B2 (en) Method and apparatus for requesting and receiving selected segment streams based on projection information
CN111869221B (zh) Dash对象之间的有效关联
KR102401666B1 (ko) 목록을 설정하기 위한 방법 및 네트워크 장비
CN110351492B (zh) 一种视频数据处理方法、装置及介质
US20240119660A1 (en) Methods for transmitting and rendering a 3d scene, method for generating patches, and corresponding devices and computer programs
CN111263191A (zh) 视频数据的处理方法、装置、相关设备及存储介质
WO2023226504A1 (zh) 一种媒体数据处理方法、装置、设备以及可读存储介质
CN110198457B (zh) 视频播放方法及其设备、系统、存储介质、终端、服务器
CN114513702B (zh) 基于Web的分块全景视频处理方法、系统及存储介质
CN116848840A (zh) 多视图视频流式传输

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant