CN108668138B - 一种视频下载方法以及用户终端 - Google Patents
一种视频下载方法以及用户终端 Download PDFInfo
- Publication number
- CN108668138B CN108668138B CN201710193867.7A CN201710193867A CN108668138B CN 108668138 B CN108668138 B CN 108668138B CN 201710193867 A CN201710193867 A CN 201710193867A CN 108668138 B CN108668138 B CN 108668138B
- Authority
- CN
- China
- Prior art keywords
- video
- user terminal
- level
- panoramic
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 82
- 239000012634 fragment Substances 0.000 claims abstract description 33
- 238000005192 partition Methods 0.000 claims description 58
- 230000015654 memory Effects 0.000 claims description 18
- 230000000007 visual effect Effects 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 6
- 230000000875 corresponding effect Effects 0.000 description 138
- 230000000903 blocking effect Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 14
- 230000008569 process Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000011022 operating instruction Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 2
- 230000011664 signaling Effects 0.000 description 2
- UFHFLCQGNIYNRP-UHFFFAOYSA-N Hydrogen Chemical compound [H][H] UFHFLCQGNIYNRP-UHFFFAOYSA-N 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 229910052739 hydrogen Inorganic materials 0.000 description 1
- 239000001257 hydrogen Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4385—Multiplex stream processing, e.g. multiplex stream decrypting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请实施例公开了一种视频下载方法和用户终端,可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。本申请实施例方法包括:用户终端获取全景视频的分块信息,所述分块信息包含所述全景视频的每个视频分块的位置信息;所述用户终端根据所述分块信息,确定所述全景视频每个视频分块的位置信息;所述用户终端根据与服务器建立的多个网络连接的连接质量,以及所述每个视频分块的位置信息,确定所述全景视频每个视频分块对应的网络连接;所述用户终端通过所述对应的网络连接下载对应视频分块的视频分片。
Description
技术领域
本申请涉及流媒体技术,尤其涉及到一种视频下载方法以及用户终端。
背景技术
全景视频又叫360度视频,是指采用多个摄像头对环境进行拍摄,并通过同步、拼接以及投影等技术,将摄像头拍摄的多个角度的图像合成全景图像,并将多个全景图像组成全景视频。全景视频包含了环境上下、左右、前后的信息,但受限于人眼的视场角范围(120度左右)以及显示设备的视场角范围,如目前市面上头戴设备的视角(英文:field ofview,缩写:FOV)大小通常是96~110度,用户在观看全景视频时,实际上只能看到全景视频的一小部分,通常把用户当前实际观看的内容在全景视频坐标系所处的区域称为当前视角。在观看全景视频时,用户可通过拖动鼠标、转动头部等方式来更改当前视角位置,从而从不同的角度观看全景视频。由于全景视频包含了360度视角的信息,因此全景视频的传输带宽需求通常是普通非全景视频的4~6倍。因此需要一种下载技术,来提升下载的可靠性及下载速率,从而来保证全景视频能够流畅的进行在线播放,减少用户观看的等待时间和卡顿。
在现有技术中,提供了一种多连接下载方法,用于提升下载速率和可靠性的下载技术。其基本思想是,用户终端和服务器同时建立多个网络连接。用户终端采用不同的网络连接来下载不同的视频分片,例如网络连接1下载0~1s(秒)的视频分片,网络连接2下载1~2s的视频分片。用户终端可以根据各网络连接的质量(例如统计下载速率、预测可用带宽等),来为不同的网络连接分配不同大小的视频分片。从而对下载速率高的网络连接,分配较多的下载任务;对下载速率低的网络连接,分配较少的下载任务。然而,现有技术的不足在于,现有技术仅考虑各个网络连接的质量来分配视频分片,在全景视频下载过程中,用户视角所对应的视频分片可能被分配到网络质量较差的网络连接下载,用户视角所对应的视频分片不能够被及时下载,从而导致用户在线观看全景视频时,全景视频出现卡顿的现象。
发明内容
本申请实施例提供了一种视频下载方法和用户终端,有效的保障了用户视角内的视频分块对应的视频分片被优先下载,从而可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。
为了解决上述问题,本申请实施例提供以下技术方案:
第一方面,本申请实施例提供了一种视频下载方法,在该视频下载方法中,用户终端获取包含全景视频的每个视频分块的位置信息的分块信息,根据分块信息,确定该全景视频每个视频分块的位置信息;接着,用户终端可以根据用户终端与服务器建立的多个网络连接的连接质量,以及每个视频分块的位置信息,确定出该全景视频每个视频分块对应的网络连接;最后,用户终端通过对应的网络连接下载对应视频分块的视频分片。由此可见,本申请实施例提供的视频下载方法中,通过确定全景视频每个视频分块的位置信息,能够根据当前各个网络连接的连接质量,以及确定每个视频分块的位置,来为每一个视频分块的分配下载视频分片的网络连接,这样可以设置用户视角所在的视频分块分配连接质量好的网络连接,有效的保障了用户视角内的视频分块对应的视频分片被优先下载,从而可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。
在一种可能的实现中,用户终端根据分块信息,确定全景视频每个视频分块的位置信息之后,用户终端可以根据每个视频分块的位置信息,确定每个视频分块对应的下载等级。此时,用户终端根据用户终端与服务器建立的多个网络连接的连接质量,以及每个视频分块的位置信息,确定全景视频每个视频分块对应的网络连接,可以是指:用户终端确定与服务器建立的多个网络连接的连接质量;根据与服务器建立的多个网络连接的连接质量,以及每个视频分块对应的下载等级,确定全景视频每个视频分块对应的网络连接。由此可见,在本实现中,提出了一种用户终端根据用户终端与服务器建立的多个网络连接的连接质量以及每个视频分块的位置信息,确定全景视频每个视频分块对应的网络连接的一种实现方式,具体是根据每个视频分块的位置信息为每个视频分块分配对应的下载等级,从而根据视频分块的下载等级和网络连接的连接质量分配每个视频分块的网络连接,提高了方案的可实施性。
在一种可能的实现中,用户终端根据每个视频分块的位置信息,确定每个视频分块对应的下载等级,包括:用户终端根据位置信息确定全景视频每个视频分块的位置等级;将全景视频每个视频分块的位置等级作为全景视频对应的视频分块的下载等级。
在一种可能的实现中,用户终端根据位置信息确定全景视频每个视频分块的位置等级之前,用户终端可以获取用户当前视角的位置信息。用户终端根据位置信息确定全景视频每个视频分块的位置等级,包括:用户终端根据用户当前视角的位置信息,以及全景视频中各个视频分块的位置信息,确定用户当前视角内的视频分块;将用户视角内的视频分块设为第一位置等级,将非用户视角内的视频分块设为第二位置等级,第一位置等级高于第二位置等级。即在本实现中,提出了一种具体的确定全景视频每个视频分块的下载等级的方式,将用户视角内的视频分块设为高下载优先级,将非用户视角内的视频分块设为低下载优先级,可以有效的确保在播放全景视频过程中,用户视角内的视频分块对应的视频分片被优先下载,从而有效地保证了用户观看的全景视频的流畅度。
在一种可能的实现中,用户终端根据每个视频分块的位置信息,确定每个视频分块对应的下载等级,还包括:用户终端确定全景视频每个视频分块的缓冲等级;用户终端根据全景视频每个视频分块对应的位置等级以及缓冲等级,确定每个视频分块对应的下载等级。
在一种可能的实现中,用户终端确定全景视频每个视频分块的缓冲等级,包括:用户终端确定全景视频中每个视频分块对应的缓冲数据量;根据每个视频分块对应的缓冲数据量设置对应视频分块的缓冲等级,对应视频分块的缓冲等级与对应视频分块的缓冲数据量反相关。由此可见,在前述实现中,是根据全景视频的视频分块位置分配网络连接,具体是将每个视频分块的位置等级作为下载等级,只考虑了视频分块的位置信息,而在本实现中,除了考虑视频分块的在全景视频中的位置,还考虑了每个视频分块的缓冲数据量,结合视频分块在全景视频中的位置和缓冲数据量大小来确定每个视频分块的下载等级,对应视频分块的缓冲等级与对应视频分块的缓冲数据量反相关,可以兼顾视频分块在全景视频中的位置和缓冲数据量大小的具体情况来确定对应视频分块的下载等级。从视频分块的缓冲数据量方面考虑了对全景视频播放流畅度的影响,可以更有效地保证了用户观看的全景视频的流畅度。
在一种可能的实现中,用户终端根据每个视频分块对应的位置等级以及缓冲等级,确定每个视频分块对应的下载等级,包括:用户终端根据以下计算方式确定全景视频每个视频分块对应的下载等级:下载等级D=N*位置等级L+M*缓冲等级B;其中,N为位置等级的权重参数,M为缓冲等级的权重参数,L、B以及D分别表示全景视频的视频分块对应的位置等级、缓冲等级以及下载等级。或,下载等级D=位置等级L*缓冲等级B,其中,L、B以及D分别表示全景视频的视频分块对应的位置等级、缓冲等级以及下载等级。
即在本实现中,具体的提出了如何兼顾视频分块在全景视频中的位置和缓冲数据量大小的具体情况来确定对应视频分块的下载等级的方式,提高了方案的可实施性以及多样性。例如,下载等级D=N*位置等级L+M*缓冲等级B方式,可以对视频分块的位置等级以及缓冲等级设置权重系数,当着重考虑视频分块的位置时,则可以将位置等级的权重系数设得比缓冲等级的权重系数高;当着重考虑视频分块的位置时,则可以将缓冲等级的权重系数设得比位置等级的高。
在一种可能的实现中,用户终端根据每个视频分块的位置信息,确定每个视频分块对应的下载等级之前,方法还包括:用户终端确定用户视角内的视频分块是否有缓冲数据量小于预设值的视频分块;若用户视角内的视频分块有缓冲数据量小于预设值的视频分块,则用户终端将非用户视角内的视频分块标记为不下载。在本实现中,当用户终端确定用户当前视角内的视频分块有缓冲数据量小于预设值的视频分块,则将非用户视角内的视频分块标记为不下载。这样,可以保证用户当前视角内的分块尽可能快的获取到足够的缓冲数据,从而有效地提高了后续播放全景视频的流畅性。
在一种可能的实现中,用户终端根据与服务器建立的多个网络连接的连接质量,以及每个视频分块的下载等级,确定全景视频每个视频分块对应的网络连接,包括以下a-e步骤:a、确定全景视频待分配网络连接的视频分块中,最高下载等级的视频分块对应的视频分片的码率;b、确定码率所需的目标带宽;c、从用户终端与服务器建立的多个网络连接中确定是否存在N条网络连接满足条件:N条网络连接的剩余可用带宽大于或等于目标带宽,若满足则执行d;d、分配N条网络连接为最高下载等级的视频分块对应的网络连接;e、重复上述a-d步骤,直至全景视频中的视频分块的网络连接全部分配完毕,或不存在满足d步骤条件的网络连接。由此可见,在本实现中,可以使得在可用带宽较高(充足)的情况下,不会出现未分配的网络连接的情况,从而使得网络连接得到充分利用,有效地提高了全景视频的下载效率以及网络资源利用率。并且,为某个时刻,该时刻下载等级高的视频分块优先分配网络连接,可以保证下载等级高的视频分块对应的视频分块被优先下载,从而可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。
在一种可能的实现中,用户终端根据与服务器建立的多个网络连接的连接质量,以及每个视频分块的下载等级,确定全景视频每个视频分块对应的网络连接,包括:用户终端根据与服务器建立的多个网络连接的丢包率或往返时间(英文:round-trip time,缩写:RTT),为对应的网络连接设置连接等级,网络连接的丢包率或RTT的数值与对应的连接等级反相关;为下载等级高的视频分块分配连接等级高的网络连接。在本实现中,提出了另一种确定全景视频每个视频分块对应的网络连接的方式提高了本申请是实施的多样性,即直接为下载等级高的视频分块分配连接质量(连接等级高)好的网络连接的,可以保证下载等级高的视频分块对应的视频分块被优先下载,从而可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。
第二方面,本申请实施例还提供一种用户终端,该用户终端包括:第一获取模块,用于获取包含全景视频的每个视频分块的位置信息的分块信息;第一确定模块,用于根据第一获取模块获取的分块信息,确定全景视频每个视频分块的位置信息;第二确定模块,用于根据与用户终端服务器建立的多个网络连接的连接质量,以及第一确定模块确定的每个视频分块的位置信息,确定全景视频每个视频分块对应的网络连接;下载模块,用于通过第二确定模块确定的对应的网络连接下载对应视频分块的视频分片。
在本申请的第二方面中,用户终端的组成模块还可以执行前述第一方面以及各种可能的实现方式中所描述的步骤,详见前述对第一方面以及各种可能的实现方式中的说明,具体此处不再做赘述。
第三方面,本申请实施例还提供另一种用户终端,该用户终端具有实现上述方法中用户终端的行为的功能,上述功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块。在一种可能的设计中,用户终端的结构中包括通信端口,通信端口用于被配置为支持用户终端与服务器之间进行的数据/信息的转发,用于发送或接收上述方法中所涉及的信息、指令或数据。例如全景视频的分块信息等。用户终端还可以包括存储器和处理器,处理器用于被配置为支持用户终端执行上述方法中相应的功能;存储器用于存储用户终端必要的程序和、指令、数据等内容。
第四方面,本申请提供了一种计算机可读存储介质,计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述各方面/各实现的方法。
从以上技术方案可以看出,在本申请实施例中,用户终端获取包含有全景视频每个视频分块的位置信息的分块信息;用户终端根据分块信息,确定全景视频每个视频分块的位置信息;用户终端根据与服务器建立的多个网络连接的连接质量,以及每个视频分块的位置信息,确定全景视频每个视频分块对应的网络连接。由此可见,本申请实施例提供的视频下载方法,通过确定全景视频每个视频分块的位置信息,能够根据当前各个网络连接的连接质量,以及确定每个视频分块的位置,来为每一个视频分块的分配下载视频分片的网络连接,这样可以设置用户视角所在的视频分块分配连接质量好的网络连接,有效的保障了用户视角内的视频分块对应的视频分片被优先下载,从而可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。
附图说明
图1为本申请实施例一种视频下载方法一个系统框架示意图;
图2为本申请实施例一种视频下载方法另一系统框架示意图;
图3为本申请实施例一种用户终端一个结构示意图;
图4为本申请实施例一种视频下载方法一个实施例流程示意图;
图5为本申请实施例一个用户视角观看全景视频的位置关系示意图;
图6为本申请实施例一种视频下载方法一个下载优先级设置示意图;
图7为本申请实施例一种确定视频分块对应的网络连接的一个流程示意图;
图8为本申请实施例一种确定视频分块对应的网络连接的另一流程示意图;
图9为本申请实施例一种用户终端另一结构示意图;
图10为本申请实施例一种用户终端另一结构示意图;
图11为本申请实施例一种用户终端另一结构示意图;
图12为本申请实施例一种用户终端另一结构示意图。
具体实施方式
本申请实施例提供了一种视频下载方法以及用户终端、可以使得用户终端能够根据当前各个网络连接的连接质量,以及确定每个视频分块的在全景视频中的位置,为每一个视频分块的分配下载视频分片的网络连接,从而可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,描述本申请实施例中的技术方案。显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面对本申请实施例进行说明。
首先,对本申请实施例所提供的视频下载方法所应用的系统框架进行说明,在本申请实施例中所提供的视频下载方法可以应用于包括有用户终端以及服务器所构成的系统,其中,该服务器可以是指一个服务器或者多个服务器,具体此处不做限定。其中,根据服务器为单个服务器或者多个服务器,本申请实施例中主要分为两种系统框架场景。
如图1所示,图1为本申请实施例一种视频下载方法一个系统框架示意图,在图1所示的系统框架图中,包括用户终端以及单个服务器。其中,用户终端和单个服务器同时建立多个(N个)网络连接,N具体的为多少由服务器的端口、所拥有的IP地址,以及实际应用所需的网络连接所确定,具体此处不做限定。用户终端与服务器之间通过建立的网络连接相互传输数据或者信令。每个网络连接对应一个IP地址。例如IP地址1、IP地址2对应不同的网络连接。在该系统框架下,需要服务器包含多个IP地址,同时提供多个不同的端口号,用户终端通过服务器的多个IP地址以及端口,和服务器建立多个网络连接。
如图2所示,图2为本申请实施例一种视频下载方法另一系统框架示意图,在图2所示的系统框架图中,包括用户终端以及多个(N个)服务器,用户终端和上述N个服务器分别建立一个或多个网络连接。这里需要说明的是,在实际应用中,用户终端可以通过域名服务器获取到上述N个服务器的中每个服务器的IP地址。
在本申请实施例中,用户终端与一个服务器建立多个网络连接,或者与多个服务器建立多个网络连接,当用户终端建立完多个网络连接后,用户终端可以确定各个网络连接的连接质量,并且,用户终端获取全景视频的分块信息,根据各个视频分块的分块信息确定全景视频的各个视频分块的位置信息;当确定了全景视频各个视频分块的位置信息后,用户终端根据各个网络连接的连接质量以及各个视频分块的位置信息,为各个视频分块分配对应的网络连接,再通过全景视频各个视频分块对应的网络连接下载该视频分块对应的视频分片。上述过程为本申请实施例的一种视频下载方法进行了大致的描述。
另外需要说明的是,在本申请实施例中,用户终端也称为客户端(client),也可以称之为用户设备(英文:user equipment,英文:UE)、移动台(英文:mobile station,英文简称:MS)、移动终端等,具体的可以是手机、个人电脑(英文:personal computer,缩写:PC),例如平板电脑(英文:tablet personal computer,缩写:Tablet PC)等设备、还可以是头戴式可视设备(英文:head mount display,缩写:HMD),例如指虚拟现实(英文:virtualreality,缩写:VR)头显,增强现实(英文:Augmented Reality,缩写:AR)头显、混合现实(英文:mixed reality,缩写:MR)头显等头显设备。本申请实施例的用户终端泛指可以用于播放全景视频的装置/设备,具体此处不一一赘述,也不做限定。而服务器具体是指向本申请实施例的用户终端提供全景视频的服务器。
接着,对图1以及图2中涉及到的用户终端的结构进行说明。
请参阅图3,图3为本申请实施例一种用户终端一个结构示意图,该用户终端300主要包括处理器301(其中,用户终端300中的处理器302的数量可以一个或多个,图3中以一个处理器为例)、存储器302、通信端口303等硬件结构,还包括电源、以及安装在硬件上的操作系统等部分,具体在图3中未一一列举出来,但并不对本申请实施例中的用户终端构成限定。在本申请的一些实施例中,处理器301、存储器302以及通信端口303可通过总线或其它方式进行连接,具体此处不做限定。其中,图3中以通过总线连接为例进行示例说明。
处理器301用于控制用户终端300的操作,处理器301还可以称为中央处理单元(英文:central processing unit,缩写:CPU)。具体的应用中,用户终端300的各个组件通过总线系统耦合在一起,其中总线系统除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等,但是为了清楚说明起见,在图3中将各种总线都称为总线系统。
存储器302,可以包括只读存储器(英文:read-only memory,缩写:ROM)和随机存取存储器(英文:random access memory,缩写:RAM),还可以其他存储器或者是存储介质,并向处理器301提供指令和数据。存储器302的一部分还可以包括非易失性随机存取存储器(英文:non-volatile random access memory,缩写:NVRAM)。存储器302存储有操作系统和操作指令、可执行模块或者数据结构,或者它们的子集,或者它们的扩展集,其中,操作指令可包括各种操作指令,各种操作指令用于实现各种操作。操作系统可包括各种系统程序,用于实现各种基础业务以及处理基于硬件的任务。存储器302还存储有本申请实施例所涉及的数据、信令等。
本申请实施例揭示的用户终端侧的方法可以应用于处理器301中,或者由处理器301实现。处理器301可以是一种集成电路芯片,具有信号的处理能力。在本申请实施例实现过程中,本申请实施例中用户终端侧所执行的各步骤可以通过处理器301中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器301可以是通用处理器、数字信号处理器(英文:digital signal processing,缩写:DSP)、专用集成电路(英文:application-specific integrated circuit,缩写:ASIC)、现场可编程门阵列(英文:field-programmable gate array,缩写:FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器302,处理器301读取存储器302中的信息,结合其硬件完成本申请实施例的视频下载方法中用户终端侧的步骤。
通信端口303可用于接收或者发送信息/数据,例如用于接收服务器反馈的视频数据等数据、全景视频的分块信息等,以及产生与用户终端的相关设置以及功能控制有关的信号,从而进行用户终端的初始化等处理。
本申请实施例中,处理器301,可用于执行本申请实施例用户终端侧执行的视频下载方法。
另外需说明的是,以上所描述的装置实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外,本申请提供的装置实施例附图中,模块之间的连接关系表示它们之间具有通信连接,具体可以实现为一条或多条通信总线或信号线。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,模块和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
下面对本申请实施例一种视频下载方法进行详细的描述。
请参阅图4,图4为本申请实施例一种视频下载方法一个实施例流程示意图,包括:
步骤401、用户终端与服务器建立多个网络连接。
上述多个网络连接可以是用户终端和多个服务器分别建立网络连接,为了便于理解,下面将描述下网络连接的建立的过程。
用户终端向发起域名系统(英文:domain name system,缩写:DNS)服务器发送DNS解析请求,DNS服务器接收到DNS解析氢气后,下发多个可用的源服务器IP地址,用户终端根据DNS服务器下发的IP地址,分别向上述源服务器分别建立传输控制协议(英文:transmission control protocol,缩写:TCP)连接。上述多个网络连接也可以是用户终端和同一服务器建立的多个网络连接,例如用户终端向一个源服务器发起多次TCP连接请求,从而与源服务器建立多个TCP连接,具体此处不做限定。
步骤402、用户终端获取全景视频的分块信息。
在本申请实施例中,服务器按照预设规则将完整的全景视频分割成不同的视频分块。示例性的,服务器将完整的全景视频根据空间位置分割成不同的视频分块。例如表1所示:
表1
视频分块1 | 视频分块2 | 视频分块3 | 视频分块4 |
视频分块5 | 视频分块6 | 视频分块7 | 视频分块8 |
视频分块9 | 视频分块10 | 视频分块11 | 视频分块12 |
视频分块13 | 视频分块14 | 视频分块15 | 视频分块16 |
在表1中,将完整的全景视频分割成了16个视频分块,每个小方框代表一个视频分块,并且对每一个视频分块都进行编码,生成每个视频分块对应的视频分片。通常,一个视频分块可以包含多个视频分片,并且按照视频的时间顺序生成多个视频分片。实例性的,例如假设视频分块1对应有8秒的视频内容,则可对应生成0-2秒的视频分片,3-4的视频分片,以及5-8秒的视频分片,具体此处不做限定。需要说明的是,上述表1所示的视频分块分割方式,在这里只是举例说明,但并不对本申请实施例构成限定。
在本申请实施例中,当服务器对全景视频分割成视频分块后,服务器可以生成对应的分块信息,该分块信息包含全景视频中各个视频分块的位置信息(例如坐标位置)、大小,以及各视频分块包含的视频分片对应的下载地址、码率等信息。
在本申请实施例中,服务器可以根据传输全景视频时采用的流媒体传输协议的不同,将分块信息传输给用户终端,其中,常用的流媒体传输协议有基于超文本传输协议(英文:hypertext transfer protocol,缩写:HTTP)的流媒体传输协议,例如动态图像专家组(英文:moving picture experts group,缩写:MEPG)动态自适应HTTP流(英文:dynamicadaptive streaming http,缩写:DASH)协议、HTTP流媒体直播(英文:http livestreaming,缩写:HLS)协议,或者是实时流传输协议(英文:real time streamingprotocol,缩写:RTSP)、实时消息传输协议(英文:real time messaging protocol,缩写:RTMP)等流媒体传输协议,具体此处不做限定。
示例性的,MPEG DASH协议为例,在MPEG DASH协议的空间描述关系(英文:spatialrelation description,缩写:SRD)规范中,定义了如何在媒体演示描述(英文:mediapresentation description,缩写:MPD)文件中包含分块信息。本申请实施例中,用户终端可以获取全景视频对应的MPD文件,通过解释下载的MPD文件,从而获取全景视频的分块信息。
如MPD文件的示例如下:
在该示例中,每个AdaptationSet使用“SupplementalProperty::schemeIdUri==”urn:mpeg:dash:srd:2014”来告知用户终端该AdaptationSet对应的是一个视频分块。
每个AdaptationSet中的“SupplementalProperty::value”值是用来表示该视频分块的空间信息,具体含义为“视频分块id,视频分块左上角x坐标,视频分块左上角y坐标,视频分块高度,视频分块宽度,全景图像高度,全景图像宽度”。例如,上述示例中的tile1的value值“0,0,0,1080,1920,2160,3840”表示该视频分块属于视频分块0,左上角位于(0,0)位置,大小为1080x1920,整个全景图像的大小为2160x3840,即该视频分块位于全景图像左上角1/4区域。
上述示例中的所有AdaptationSet对应的视频分块id都为0,从而表示这些视频分块属于同一个全景视频。
每个视频分块通过Representation来定义该视频分块对应的视频分片信息,在本示例中,tile1包含了3个时间上连续的视频分片(tile1_video_1.mp4,tile1_video_2.mp4,tile1_video_3.mp4),通过SegmentList定义,每个视频分片长度为10s。
需要说明的是,上述MPD文件在这里只是举例进行说明,不对本申请实施例构成限定,另外关于上述MPD文件的更多内容,这里不再一一赘述。
需要说明的是,在实际应用中,在用户终端下载全景视频之前,用户终端可以通过向提供全景视频的服务器发送请求信息,从而使得服务器向用户终端反馈该全景视频的分块信息。当然,也可以由服务器通过主动的方式向用户终端发送全景视频的分块信息,例如通过广播的方式发送全景视频的分块信息,用户终端从中获取需要的全景视频的分块信息。
步骤403、用户终端根据分块信息确定全景视频中每个视频分块的位置信息。
由步骤402下的对分块信息的描述可知,分块信息包含全景视频每个视频分块的各种信息,其中就包括每个视频分块的位置信息,示例性的,例如每个视频分块在整个全景视频中的位置坐标。因此,在本申请实施例中,当用户终端接收到全景视频的分块信息后,通过分块信息可以确定每一个视频分块的位置信息。
步骤404、用户终端获取用户当前视角的位置信息。
当用户使用用户终端进行观看全景视频时,用户终端可以实时的获取用户当前视角的位置信息,在本申请实施例中,用户终端可以实时的获取用户当前视角在全景视频中的位置信息,示例性的,例如用户当前视角在全景视频中对应的位置坐标。
需要说明的是,上述步骤401、步骤402与步骤404这三个步骤之间并无执行时序限定,具体此处不做限定。
步骤405、用户终端根据用户当前视角的位置信息,以及全景视频中各个视频分块的位置信息,确定用户当前视角内的视频分块。
当用户终端确定了用户当前视角的位置信息,以及全景视频中各个视频分块的位置信息后,用户终端根据用户当前视角的位置信息以及全景视频中各个视频分块的位置信息这两者的位置关系,可以进一步确定用户当前视角内的视频分块。
示例性的,如图5所示,为本申请实施例一个用户视角观看全景视频的位置关系示意图。在图5中,黑色虚线方框包含的视频分块为用户当前视角内的视频分块(视频分块6、视频分块10以及视频分块14)。对应的,黑色虚线方框外的视频分片,为全景视频中用户当前视角外的视频分片。
步骤406、用户终端确定用户当前视角内的视频分块是否有缓冲数据量小于预设值的视频分块,若是,则执行步骤407,若否,则执行步骤408。
其中,视频分块的缓冲数据量是指该视频分块已经下载并缓冲在用户终端本地的视频数据量的大小。例如,假设用户当前看到10秒的全景视频,但实际已经下载了15秒的视频数据,则说明有5秒的缓冲数据。
在本申请实施例中,当确定了用户当前视角内的视频分块后,用户终端确定用户当前视角内的视频分块是否有缓冲数据量小于预设值的视频分块,如果有,则执行步骤407,之后再执行步骤408;若无,则直接执行步骤408。
其中,预设值可以根据实际应用情况进行配置,具体可以由用户自定也设置,示例性的,用户可以自定义为3秒,也可以采用默认值(例如2秒),具体此处不做限定。
步骤407、用户终端将非用户视角内的视频分块标记为不下载。
当用户终端确定用户当前视角内的视频分块有缓冲数据量小于预设值的视频分块,则将非用户视角内的视频分块标记为不下载。这样,可以保证用户当前视角内的分块尽可能快的获取到足够的缓冲数据,从而有效地提高了后续播放全景视频的流畅性。
再以图5所示的示意图为例,此时,用户终端将视频分块6、视频分块10以及视频分块14之外的视频分块标记为不下载。这样,可以将用户当前视角内的视频分块6、视频分块10以及视频分块14对应的视频分块被优先处理。
步骤408、用户终端将用户终端将用户视角内的视频分块设为第一位置等级,将非用户视角内的视频分块设为第二位置等级。
在本申请实施例中,在用户终端确定了用户当前视角的视频分块后,可以确定每一个视频分块的位置关系等级,其中,该位置等级是由每一个视频分块与用户当前视角的位置关系所确定。
示例性的,在本申请实施例,用户终端将用户视角内的视频分块设为第一位置等级,将非用户视角内的视频分块设为第二位置等级,其中,第一位置等级高于第二位置等级。
步骤409、用户终端将全景视频每个视频分块的位置等级作为全景视频对应的视频分块的下载等级。
在步骤408确定了每个视频分块的位置等级后,用户终端将每一个视频分块的位置等级作为每个视频分块对应的下载等级,即将用户当前视角内的视频分块作为高下载优先级的视频分块,将用户视角外的视频分块作为低下载优先级的视频分块,视频分块的下载等级越高,对应的下载优先级越高。示例性的,将用户当前视角内的视频分块的下载等级设置为5,将用户当前视角外的视频分块的下载等级设置为3。
另外,请参阅图6所示,图6为本申请实施例中一种下载优先级设置示意图,在本申请实施例中,在上述位置等级的基础上,用户终端还可以对用户视角外的视频分块的下载等级进行更进一步的细分,例如将用户视角外,与高下载优先级相邻的视频分块设置为中下载优先级;将用户视角外,不与高下载优先级相邻的视频分块设置为底下载优先级,使得最终的下载等级关系为:离用户当前视角的视频分块越近的视频分块,下载等级顺序递增。示例性的,假设用户终端将用户视角内的视频分块的下载等级设置为5,那么可以将与下载等级为5的视频分块相邻的视频分块的下载等级设置为4,将没有与下载等级为5的视频分块相邻的视频分块的下载等级设置为3。
在上述用户终端确定视频分块的下载等级的方式中,是用户终端根据视频分块与用户当前视角的位置关系确定每一个视频分块的下载等级,即下载优先级。在实际应用中,有多种对全景视频的每一个视频分块下载优先级设置的方式,具体此处不做限定。例如,有可以有以下设置每个视频分块的下载等级的方式。示例性的,下面再给出一些确定视频分块的下载等级的方式。
第一种,用户终端在根据视频分块与用户当前视角的位置关系的基础上,进一步根据视频分块的缓冲数据量对应的确定每一个视频分块的下载等级。
具体的,用户终端根据每个视频分块的位置信息,确定每个视频分块对应的下载等级,还包括:
用户终端确定全景视频每个视频分块的缓冲等级;
用户终端根据全景视频每个视频分块对应的位置等级以及缓冲等级,确定每个视频分块对应的下载等级。
其中,用户终端根据分块信息确定每个视频分块的位置等级的方式可以参阅前述描述,具体此处不再赘述。
在本申请实施例中,用户终端确定全景视频每个视频分块的缓冲等级,包括:
用户终端确定全景视频中每个视频分块对应的缓冲数据量;
用户终端根据每个视频分块对应的缓冲数据量设置对应视频分块的缓冲等级,对应视频分块的缓冲等级与对应视频分块的缓冲数据量反相关。其中,对应视频分块的缓冲等级与对应视频分块的缓冲数据量反相关,说明视频分块的缓冲数据量越高,该视频分块对应的缓冲等级越低。
例如,缓冲数据量>10秒的的设为低缓冲等级(例如设为1);2秒<缓冲数据量≤10秒的设为中缓冲等级(例如设为2);缓冲数据量≤2秒的设为高缓冲等级(例如设为3),即低缓冲等级≤中缓冲等级≤高缓冲等级。
在本申请实施例的一些实施例中,用户终端根据每个视频分块对应的位置等级以及缓冲等级,确定每个视频分块对应的下载等级,包括:
用户终端根据以下计算方式确定全景视频每个视频分块对应的下载等级:
下载等级D=N*位置等级L+M*缓冲等级B;
其中,N标识位置等级的权重系数,M为缓冲等级的权重系数,L、B以及D分别表示全景视频的视频分块对应的位置等级、缓冲等级以及下载等级。可以理解的是,N与M取值的侧重不同,说明在设置视频分块的下载等级的时候,着重的考虑了该视频分块的位置等级或缓冲等级,如果N值高于M值,说明用户终端以位置等级为重设置视频分块的下载等级,但同时也考虑了该视频分块的缓冲数据量。
示例性的,在本申请实施例中,权重系数都取1,即:下载等级D=位置等级L+缓冲等级B;
或,
示例性的,下载等级D=0.8*位置等级L+0.2*缓冲等级B;
需要说明的是,上述组合在这里只是举例说明,根据权重系数的不同,还可以有多种组合方式,本申请实施例不做限定,具体此处也不一一列举说明。
在本申请实施例中,用户终端还可以根据以下计算方式确定全景视频每个视频分块对应的下载等级:
下载等级D=位置等级L*缓冲等级B,其中,L、B以及D分别表示全景视频的视频分块对应的位置等级、缓冲等级以及下载等级。
同样需要说明的是,除了上述缓冲等级与位置等级的简单叠加/相乘的方式确定每个视频分块的下载等级外,在实际应用中,根据缓冲等级与位置等级还可以有多种计算视频分块的下载等级的方式,具体此处不做限定。
步骤410、用户终端根据与服务器建立的多个网络连接的连接质量,以及每个视频分块的下载等级,确定全景视频每个视频分块对应的网络连接。
在步骤409确定了全景视频中,每个视频分块的下载等级后,可以根据已经建立的多个网络连接的质量以及每个视频分块的下载等级,确定每个视频分块对应的网络连接。
其中,请参阅图7,在本申请的一些实施例中,用户终端根据与服务器建立的多个网络连接的连接质量,以及每个视频分块的下载等级,确定全景视频每个视频分块对应的网络连接,主要包括以下步骤:
4101、用户终端确定全景视频待分配网络连接的视频分块中,最高下载等级的视频分块对应的视频分片的码率。
在本申请实施例中,当经过前述步骤确定了每个视频分片的下载等级后,可以进一步下载等级最高(即最高下载优先级),且未分配网络连接的视频分块对应的视频分片的码率。当然,若全景视频中的所有视频分块都未分配网络连接则从全景视频中,确定下载等级最高的视频分块对应的视频分片的码率。
4102、用户终端确定码率所需的目标带宽。
当经过步骤4101确定出全景视频待分配网络连接的视频分块中,最高下载等级的视频分块对应的视频分片的码率,计算出该视频分块所需的带宽。在本申请实施例中,可以将该码率乘以一个固定的扩大系数得到所需的目标带宽,示例性的,目标带宽=1.2*码率,其中,扩大系数可以根据实际应用场景进行配置,具体此处不做限定。
需要说明的是,在本申请实施例中,还有其他确定码率所需的目标带宽的方式,例如:
另一种实现方式是,根据视频分块的下载等级的不同,计算视频分块的码率对应的所需目标带宽时,权重比例不同。对高下载等级的视频分块设置较高的权值,如目标带宽=1.4*码率;对低下载等级的视频分块设置较低的权重,如目标带宽=1.1*码率。
另一种实现方式是,根据用户终端与服务器建立的所有网络连接的剩余可用带宽总和,以及全景视频所有视频分块的码率总和,计算出一个动态的权值。例如,例如动态权值=所有网络连接的剩余可用带宽总和/所有视频分块的码率总和。则视频分块所需的目标带宽等于该动态权值与该视频分块的码率的乘积。
当然,在实际应用中,假设计算出来的动态权值小于预设的最小权值阈值(例如1.1),则将该动态权值设为上述最小权值阈值。这样,采用本实现方式,可以使得在可用带宽较高(充足)的情况下,不会出现未分配的网络连接的情况,从而使得网络连接得到充分利用,有效地提高了全景视频的下载效率以及网络资源利用率。
4103、用户终端确定多条网络连接中,是否存在N条网络连接的剩余可用带宽总和大于或等于目标带宽,若是,则执行步骤4104。
在本申请实施例中,用户终端确定用户端与服务器建立的各个网络连接的剩余可用带宽,确定是否存在N(N为一个或多个)个网络连接的剩余可用带宽总和大于或等于目标带宽,如果有,则执行步骤4104。如果没有,则结束分配网络连接的过程。
4104、用户终端分配N条网络连接为最高下载等级的视频分块对应的网络连接。
当用户终端确定多条网络连接中,存在N条网络连接的剩余可用带宽总和大于或等于目标带宽,则用户终端分配N条网络连接为最高下载等级的视频分块对应的网络连接。
为了便于理解,下面通过具体的实例进行说明。
例如,假设待分配网络连接的视频分块A所需的目标带宽为2Mbps(兆比特每秒),用户终端与服务器建立的网络连接网络连接1、2以及3。其中,网络连接1剩余可用带宽为1.5Mbps,网络连接剩余可用带宽为1Mbps,网络连接3剩余可用带宽为0.3Mbps,则存在网络连接1与网络连接2的剩余可用带宽总和(1.5+1)Mbps大于目标带宽为2Mbps,故将网络连接1以及网络连接2作为视频分块A的网络连接。
需要说明的是,在步骤4104之后,若全景视频中的某给视频分块分配了网络连接,则记录该视频分块与该网络连接的对应关系,将该视频从全景视频的待分配网络连接的视频分块视频列表中删除。同时更新用户终端与服务器建立的网络连接的剩余可用带宽。
例如,同样以上述例子为例,视频分块A分配了网络连接1以及网络连接2,则说明视频分块A已经分配了网络连接,将视频分块A从全景视频待分配网络连接的视频分块列表中剔除,不再重复为视频分块A分配网络连接的步骤。此时假设网络连接1的剩余可用带宽(1.5Mbps)全部被下载视频分块A所占用,网络连接2被占用了(1-0.5)Mbps,还剩余0.5Mbps,此时用户终端与服务器建立的网络连接1剩余可用带宽为0,网络连接2剩余可用带宽为0.5Mbps,网络连接3剩余可用带宽为0.3Mbps。
4105、用户终端确定全景视频中,是否存在未分配网络连接的视频分块,若有,则重述执行步骤4101-4105。
这样经过上述步骤,在带宽充足的情况下,可用对往全景视频中的每一个视频分块都分配网络连接,并且对高下载等级的视频分块分优先分配有剩余可用带宽的网络连接,可以使得下载等级高的视频分块对应的视频分片被用户终端优先下载。
在带宽不足的情况下,则优先为下载等级高的视频分块分配网络连接,可以使得下载等级高的视频分块对应的视频分片被用户终端优先下载。
需要说明的是,除了图7所示的确定全景视频每个视频分块对应的网络连接的方式外,还可以有其他的确定方式,具体此处不做限定。
在本申请的一些实施例中,请参阅图8,用户终端根据与服务器建立的多个网络连接的连接质量,以及每个视频分块的下载等级确定全景视频每个视频分块对应的网络连接,主要包括以下步骤:
4101、用户终端确定与服务器建立的各个网络连接的丢包率。
在申请实施例中,用户终端可以确定与服务器建立的各个网络连接的丢包率。
4102、用户确定根据各个网络连接的丢包率对应确定各个网络连接的连接等级。
在确定了各个网络连接的丢包率后,用户终端可以根据丢包率确定每个一个网络连接的连接等级。
其中,在本申请的一些实施例中,网络连接的连接等级的数值与丢包率反相关,即网络连接的丢包率越高,对应的连接等级越低;网络连接的丢包率越低,则对应的连接等级越高。
需要说明的是,除了根据网络连接的丢包率,还可以根据其他的连接质量,例如往返时延(RTT)来确定该网络连接的连接等级。其中,网络连接的连接等级的数值与RTT反相关,即网络连接的RTT越高,对应的连接等级越低;网络连接的RTT越低,则对应的连接等级越高。
当然,在本申请的一些实施例中,也可以根据网络连接的RTT以及丢包率,综合的计算出该网络连接的连接等级,具体此处不做限定。
示例性的,连接等级=RTT*丢包率。
4103、用户终端为下载等级高的视频分块分配连接等级高的网络连接。
在本申请实施例中,当用户终端确定了用户终端与服务器建立的多个网络连接的连接等级后,为下载等级高的视频分块分配连接等级高的网络连接。
一种实现方式是按照等比例分配方式进行分配。假设有全景视频中有K个视频分块,M个网络连接,则每个网络连接分配K/M个视频分块,其中,将高下载等级的视频分块分配给高连接等级的网络连接,将低下载等级的视频分块分配给低连接等级的网络连接。
示例性的,假设网络连接1的连接等级最高,则将下载等级为最高的K/M个视频分块分配给网络连接1。
当然,除了上述等比例分配方式进行分配外,还可以有多种分配方式,具体此处不做限定。例如,不按照等比例分配方式进行分配。假设有全景视频中有12个分块,4个网络连接,网络连接1以及网络连接2分别分配2个视频分块,网络连接3分配4个视频分块,网络连接4分配4个视频分块。其中,将高下载等级的视频分块分配给高连接等级的网络连接,将低下载等级的视频分块分配给低连接等级的网络连接。
步骤411、用户终端通过对应的网络连接下载对应视频分块的视频分片。
当用户终端为全景视频的视频分块分配了网络连接后,根据视频分块对应的网络连接下载该视频分块对应的视频分块。
另外需要说明的是,在用户使用用户终端的过程中,实际应用情况多变,主要包括有以下2种应用场景变化情况。
第一种,由于网络质量的会随着时间不断的变化,随之导致用户终端与服务器建立的网络连接的连接质量不断变化。
第二种,是随着用户当前视角的改变和/或视频分块的缓冲数据量的变化。
因此,本申请实施例中,用户终端可以实时,或者定期(具体时间可以被配置,不做限定)的检测网络质量和/或用户当前视角,和/或视频分块的缓冲数据量的变化,从而通过上述方法实施例描述的方式重新计算上述描述的各种等级(例如下载等级、连接等级等),即实时或定期更新上述描述的各种等级,从而达到由于应用场景的改变,更新视频分块的下载优先级的目的。
当然,需要说明的是,若只是采用视频分块的位置的等级作为该视频分块的下载等级时,应理解,只有在用户当前视角发生变化时,视频分块的优先级才会发生变化,因此,在这种情况下,可采用基于用户视角变化触发的方式,即若用户当前视角发送变化时,重新计算视频分块的下载等级,具体此处不再赘述。
综上,本申请实施例提供的视频下载方法中,通过确定全景视频每个视频分块的位置信息确定下载等级,即下载优先级,可以使得用户终端能够根据当前各个网络连接的连接质量,以及确定每个视频分块的下载等级,来为每一个视频分块的分配下载视频分片的网络连接,这样可以设置用户视角所在的视频分块分配连接质量好的网络连接,有效的保障了用户视角内的视频分块对应的视频分片被优先下载,从而可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于示例性实施例,所涉及的动作和模块并不一定是本申请所必须的。
为便于更好的实施本申请上述方法实施例中所描述的方案,下面还提供用于实施上述方案的相关装置。
请参阅图9所示,本申请实施例提供的一种用户终端另一结构示意图,该用户终端可以包括:第一获取模块901、第一确定模块902、第二确定模块903以及下载模块904。其中,
第一获取模块901用于获取全景视频的分块信息,分块信息包含全景视频的每个视频分块的位置信息;
第一确定模块902用于根据第一获取模块901获取的分块信息,确定全景视频每个视频分块的位置信息;
第二确定模块903用于根据与用户终端服务器建立的多个网络连接的连接质量,以及第一确定模块902确定的每个视频分块的位置信息,确定全景视频每个视频分块对应的网络连接;
下载模块904,用于通过第二确定模块903确定的对应的网络连接下载对应视频分块的视频分片。
请参阅图10,在本申请的一些实施例中,用户终端还包括第三确定模块905。
其中,第三确定模块905用于第一确定模块902根据分块信息,确定全景视频每个视频分块的位置信息之后,根据每个视频分块的位置信息,确定每个视频分块对应的下载等级;
第二确定模块903用于根据与服务器建立的多个网络连接的连接质量,以及每个视频分块的位置信息,确定全景视频每个视频分块对应的网络连接,包括:
第二确定模块903用于确定与服务器建立的多个网络连接的连接质量;
根据用户终端与服务器建立的多个网络连接的连接质量,以及每个视频分块对应的下载等级,确定全景视频每个视频分块对应的网络连接。
在本申请的一些实施例中,第三确定模块905用于根据第一确定模块902确定的每个视频分块的位置信息,确定每个视频分块对应的下载等级,包括:
第三确定模块905用于根据第一确定模块902确定的位置信息确定全景视频每个视频分块的位置等级;将全景视频每个视频分块的位置等级作为全景视频对应的视频分块的下载等级。
请参阅图11,在本申请的一些实施例中,用户终端还包括:第二获取模块906。
其中,第二获取模块906用于第三确定模块905根据第一确定模块902确定的位置信息确定全景视频每个视频分块的位置等级之前,获取用户当前视角的位置信息;
第三确定模块905用于根据第一确定模块902确定的位置信息确定全景视频每个视频分块的位置等级,包括:
第三确定模块905用于根据第二获取模块906获取的用户当前视角的位置信息,以及第一确定模块902确定的全景视频中各个视频分块的位置信息,确定用户当前视角内的视频分块;将用户视角内的视频分块设为第一位置等级,将非用户视角内的视频分块设为第二位置等级,第一位置等级高于第二位置等级。
在本申请的一些实施例中,第三确定模块905用于根据第一确定模块902确定的每个视频分块的位置信息,确定每个视频分块对应的下载等级,还包括:
第三确定模块905用于确定全景视频每个视频分块的缓冲等级;根据全景视频每个视频分块对应的位置等级以及缓冲等级,确定每个视频分块对应的下载等级。
在本申请的一些实施例中,第三确定模块905用于确定全景视频每个视频分块的缓冲等级,包括:
第三确定模块905用于确定全景视频中每个视频分块对应的缓冲数据量;根据每个视频分块对应的缓冲数据量设置对应视频分块的缓冲等级,对应视频分块的缓冲等级与对应视频分块的缓冲数据量反相关。
在本申请的一些实施例中,第三确定模块905用于根据每个视频分块对应的位置等级以及缓冲等级,确定每个视频分块对应的下载等级,包括:
第三确定模块905用于根据以下计算方式确定全景视频每个视频分块对应的下载等级:
下载等级D=N*位置等级L+M*缓冲等级B;
其中,N为位置等级的权重参数,M为缓冲等级的权重参数,L、B以及D分别表示全景视频的视频分块对应的位置等级、缓冲等级以及下载等级;
或,下载等级D=位置等级L*缓冲等级B,其中,L、B以及D分别表示全景视频的视频分块对应的位置等级、缓冲等级以及下载等级。
请参阅图12,在本申请的一些实施例中,用户终端还包括:第四确定模块907以及标记模块908。
其中,第四确定模块907用于第三确定模块905根据每个视频分块的位置信息,确定每个视频分块对应的下载等级之前,确定用户视角内的视频分块是否有缓冲数据量小于预设值的视频分块;
标记模块908,若第四确定模块907确定用户视角内的视频分块有缓冲数据量小于预设值的视频分块,则将非用户视角内的视频分块标记为不下载。
在本申请的一些实施例中,第二确定模块903用于根据用户终端与服务器建立的多个网络连接的连接质量,以及每个视频分块的下载等级,确定全景视频每个视频分块对应的网络连接,包括以下步骤:
a、确定全景视频待分配网络连接的视频分块中,最高下载等级的视频分块对应的视频分片的码率;
b、确定码率所需的目标带宽;
c、从用户终端与服务器建立的多个网络连接中确定是否存在N条网络连接满足条件:N条网络连接的剩余可用带宽大于或等于目标带宽,若满足则执行d;
d、分配N条网络连接为最高下载等级的视频分块对应的网络连接;
e、重复上述a-d步骤,直至全景视频中的视频分块的网络连接全部分配完毕,或不存在满足d步骤条件的网络连接。
在本申请的一些实施例中,第二确定模块903用于根据用户终端与服务器建立的多个网络连接的连接质量,以及每个视频分块的下载等级,确定全景视频每个视频分块对应的网络连接,包括:
第二确定模块903用于根据用户终端与服务器建立的多个网络连接的丢包率或往返时间(RTT),为对应的网络连接设置连接等级,网络连接的丢包率或RTT的数值与对应的连接等级反相关;为下载等级高的视频分块分配连接等级高的网络连接。
由此可见,本申请实施例提供了一种用户终端,用户终端确定全景视频每个视频分块的位置信息,能够根据当前各个网络连接的连接质量,以及确定每个视频分块的位置,来为每一个视频分块的分配下载视频分片的网络连接,这样可以设置用户视角所在的视频分块分配连接质量好的网络连接,有效的保障了用户视角内的视频分块对应的视频分片被优先下载,从而可以有效地的减少了用户在线观看全景视频时,全景视频出现卡顿的现象。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储有程序,该程序被计算机执行时能实现上述方法实施例中记载的部分或全部步骤。
需要说明的是,上述装置各模块/单元之间的信息交互、执行过程等内容,由于与本申请实施例中的方法实施例基于同一构思,具体的更多细节可以参阅方法实施例部分,其带来的技术效果也与本申请方法实施例相同,具体内容可参见本申请前述所示的方法实施例中的叙述,此处不再赘述。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件的方式来实现,当然也可以通过专用硬件包括专用集成电路、专用CPU、专用存储器、专用元器件等来实现。一般情况下,凡由计算机程序完成的功能都可以很容易地用相应的硬件来实现,而且,用来实现同一功能的具体硬件结构也可以是多种多样的,例如模拟电路、数字电路或专用电路等。但是,对本申请而言更多情况下软件程序实现是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在可读取的存储介质中,如计算机的软盘、U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (21)
1.一种视频下载方法,其特征在于,包括:
用户终端获取全景视频的分块信息,所述分块信息包含所述全景视频的每个视频分块的位置信息;
所述用户终端根据所述分块信息,确定所述全景视频每个视频分块的位置信息;
所述用户终端根据与服务器建立的多个网络连接的连接质量,以及所述每个视频分块的位置信息,确定所述全景视频每个视频分块对应的网络连接;
所述用户终端通过所述对应的网络连接下载对应视频分块的视频分片。
2.根据权利要求1所述的方法,其特征在于,所述用户终端根据所述分块信息,确定所述全景视频每个视频分块的位置信息之后,所述方法还包括:
所述用户终端根据所述每个视频分块的位置信息,确定每个视频分块对应的下载等级;
所述用户终端根据与服务器建立的多个网络连接的连接质量,以及所述每个视频分块的位置信息,确定所述全景视频每个视频分块对应的网络连接,包括:
所述用户终端确定与所述服务器建立的多个网络连接的连接质量;
所述用户终端根据与所述服务器建立的多个网络连接的连接质量,以及每个视频分块对应的下载等级,确定所述全景视频每个视频分块对应的网络连接。
3.根据权利要求2所述的方法,其特征在于,所述用户终端根据所述每个视频分块的位置信息,确定每个视频分块对应的下载等级,包括:
所述用户终端根据所述位置信息确定所述全景视频每个视频分块的位置等级;
所述用户终端将所述全景视频每个视频分块的位置等级作为所述全景视频对应的视频分块的下载等级。
4.根据权利要求3所述的方法,其特征在于,所述用户终端根据所述位置信息确定所述全景视频每个视频分块的位置等级之前,所述方法还包括:
所述用户终端获取用户当前视角的位置信息;
所述用户终端根据所述位置信息确定所述全景视频每个视频分块的位置等级,包括:
所述用户终端根据所述用户当前视角的位置信息,以及所述全景视频中各个视频分块的位置信息,确定所述用户当前视角内的视频分块;
所述用户终端将所述用户当前视角内的视频分块设为第一位置等级,将非所述用户视角内的视频分块设为第二位置等级,所述第一位置等级高于所述第二位置等级。
5.根据权利要求4所述的方法,其特征在于,所述用户终端根据所述每个视频分块的位置信息,确定每个视频分块对应的下载等级,还包括:
所述用户终端确定所述全景视频每个视频分块的缓冲等级;
所述用户终端根据所述全景视频每个视频分块对应的位置等级以及缓冲等级,确定所述每个视频分块对应的下载等级。
6.根据权利要求5所述的方法,所述用户终端确定所述全景视频每个视频分块的缓冲等级,包括:
所述用户终端确定所述全景视频中每个视频分块对应的缓冲数据量;
所述用户终端根据所述每个视频分块对应的缓冲数据量设置对应视频分块的缓冲等级,所述对应视频分块的缓冲等级与所述对应视频分块的缓冲数据量反相关。
7.根据权利要求5所述的方法,其特征在于,所述用户终端根据所述每个视频分块对应的位置等级以及缓冲等级,确定所述每个视频分块对应的下载等级,包括:
所述用户终端根据以下计算方式确定所述全景视频每个视频分块对应的下载等级:
下载等级D=N*位置等级L+M*缓冲等级B;
其中,所述N为所述位置等级的权重参数,所述M为所述缓冲等级的权重参数,所述L、B以及D分别表示所述全景视频的视频分块对应的位置等级、缓冲等级以及下载等级;
或,
下载等级D=位置等级L*缓冲等级B,其中,所述L、B以及D分别表示所述全景视频的视频分块对应的位置等级、缓冲等级以及下载等级。
8.根据权利要求2-7任一项所述的方法,其特征在于,所述用户终端根据所述每个视频分块的位置信息,确定每个视频分块对应的下载等级之前,所述方法还包括:
所述用户终端确定用户当前视角内的视频分块是否有缓冲数据量小于预设值的视频分块;
若有,则所述用户终端将非用户当前 视角内的视频分块标记为不下载。
9.根据权利要求1-7任一项所述的方法,其特征在于,所述用户终端根据与服务器建立的多个网络连接的连接质量,以及所述每个视频分块的下载等级,确定所述全景视频每个视频分块对应的网络连接,包括以下步骤:
a、所述用户终端确定所述全景视频待分配网络连接的视频分块中,最高下载等级的视频分块对应的视频分片的码率;
b、所述用户终端确定所述码率所需的目标带宽;
c、所述用户终端从与所述服务器建立的多个网络连接中确定是否存在N条网络连接满足条件:所述N条网络连接的剩余可用带宽大于或等于所述目标带宽,若满足则执行d;
d、所述用户终端分配所述N条网络连接为所述最高下载等级的视频分块对应的网络连接;
e、所述用户终端重复上述a-d步骤,直至所述全景视频中的视频分块的网络连接全部分配完毕,或不存在满足所述d步骤所述条件的网络连接。
10.根据权利要求1-7任一项所述的方法,其特征在于,所述用户终端根据与服务器建立的多个网络连接的连接质量,以及所述每个视频分块的下载等级,确定所述全景视频每个视频分块对应的网络连接,包括:
所述用户终端根据与所述服务器建立的多个网络连接的丢包率或往返时间RTT,为对应的网络连接设置连接等级,所述网络连接的丢包率或RTT的数值与对应的连接等级反相关;
所述用户终端为下载等级高的视频分块分配连接等级高的网络连接。
11.一种用户终端,其特征在于,包括:
第一获取模块,用于获取全景视频的分块信息,所述分块信息包含所述全景视频的每个视频分块的位置信息;
第一确定模块,用于根据所述第一获取模块获取的所述分块信息,确定所述全景视频每个视频分块的位置信息;
第二确定模块,用于根据与所述用户终端服务器建立的多个网络连接的连接质量,以及所述第一确定模块确定的所述每个视频分块的位置信息,确定所述全景视频每个视频分块对应的网络连接;
下载模块,用于通过所述第二确定模块确定的所述对应的网络连接下载对应视频分块的视频分片。
12.根据权利要求11所述的用户终端,其特征在于,所述用户终端还包括:
第三确定模块,用于所述第一确定模块根据所述分块信息,确定所述全景视频每个视频分块的位置信息之后,根据所述每个视频分块的位置信息,确定每个视频分块对应的下载等级;
所述第二确定模块用于根据与服务器建立的多个网络连接的连接质量,以及所述每个视频分块的位置信息,确定所述全景视频每个视频分块对应的网络连接,包括:
所述第二确定模块用于确定与所述服务器建立的多个网络连接的连接质量;根据所述用户终端与所述服务器建立的多个网络连接的连接质量,以及每个视频分块对应的下载等级,确定所述全景视频每个视频分块对应的网络连接。
13.根据权利要求12所述的用户终端,其特征在于,所述第三确定模块用于根据所述第一确定模块确定的所述每个视频分块的位置信息,确定每个视频分块对应的下载等级,包括:
所述第三确定模块用于根据所述第一确定模块确定的位置信息确定所述全景视频每个视频分块的位置等级;将所述全景视频每个视频分块的位置等级作为所述全景视频对应的视频分块的下载等级。
14.根据权利要求13所述的用户终端,其特征在于,所述用户终端还包括:
第二获取模块,用于所述第三确定模块根据所述第一确定模块确定的位置信息确定所述全景视频每个视频分块的位置等级之前,获取用户当前视角的位置信息;
所述第三确定模块用于根据所述第一确定模块确定的位置信息确定所述全景视频每个视频分块的位置等级,包括:
所述第三确定模块用于根据所述第二获取模块获取的所述用户当前视角的位置信息,以及所述第一确定模块确定的所述全景视频中各个视频分块的位置信息,确定所述用户当前视角内的视频分块;将所述用户视角内的视频分块设为第一位置等级,将非所述用户当前视角内的视频分块设为第二位置等级,所述第一位置等级高于所述第二位置等级。
15.根据权利要求14所述的用户终端,其特征在于,所述第三确定模块用于根据所述第一确定模块确定的所述每个视频分块的位置信息,确定每个视频分块对应的下载等级,还包括:
所述第三确定模块用于确定所述全景视频每个视频分块的缓冲等级;根据所述全景视频每个视频分块对应的位置等级以及缓冲等级,确定所述每个视频分块对应的下载等级。
16.根据权利要求15所述的用户终端,其特征在于,所述第三确定模块用于确定所述全景视频每个视频分块的缓冲等级,包括:
所述第三确定模块用于确定所述全景视频中每个视频分块对应的缓冲数据量;根据所述每个视频分块对应的缓冲数据量设置对应视频分块的缓冲等级,所述对应视频分块的缓冲等级与所述对应视频分块的缓冲数据量反相关。
17.根据权利要求15所述的用户终端,其特征在于,所述第三确定模块用于根据所述每个视频分块对应的位置等级以及缓冲等级,确定所述每个视频分块对应的下载等级,包括:
所述第三确定模块用于根据以下计算方式确定所述全景视频每个视频分块对应的下载等级:
下载等级D=N*位置等级L+M*缓冲等级B;
其中,所述N为所述位置等级的权重参数,所述M为所述缓冲等级的权重参数,所述L、B以及D分别表示所述全景视频的视频分块对应的位置等级、缓冲等级以及下载等级;
或,
下载等级D=位置等级L*缓冲等级B,其中,所述L、B以及D分别表示所述全景视频的视频分块对应的位置等级、缓冲等级以及下载等级。
18.根据权利要求12-17任一项所述的用户终端,其特征在于,所述用户终端还包括:
第四确定模块,用于所述第三确定模块根据所述每个视频分块的位置信息,确定每个视频分块对应的下载等级之前,确定所述用户视角内的视频分块是否有缓冲数据量小于预设值的视频分块;
标记模块,若所述第四确定模块确定用户当前视角内的视频分块有缓冲数据量小于预设值的视频分块,则将非用户当前 视角内的视频分块标记为不下载。
19.根据权利要求11-17任一项所述的用户终端,其特征在于,所述第二确定模块用于根据所述用户终端与服务器建立的多个网络连接的连接质量,以及所述每个视频分块的下载等级,确定所述全景视频每个视频分块对应的网络连接,包括以下步骤:
a、确定所述全景视频待分配网络连接的视频分块中,最高下载等级的视频分块对应的视频分片的码率;
b、确定所述码率所需的目标带宽;
c、从所述用户终端与所述服务器建立的多个网络连接中确定是否存在N条网络连接满足条件:所述N条网络连接的剩余可用带宽大于或等于所述目标带宽,若满足则执行d;
d、分配所述N条网络连接为所述最高下载等级的视频分块对应的网络连接;
e、重复上述a-d步骤,直至所述全景视频中的视频分块的网络连接全部分配完毕,或不存在满足所述d步骤所述条件的网络连接。
20.根据权利要求11-17任一项所述的用户终端,其特征在于,所述第二确定模块用于根据所述用户终端与服务器建立的多个网络连接的连接质量,以及所述每个视频分块的下载等级,确定所述全景视频每个视频分块对应的网络连接,包括:
所述第二确定模块用于根据所述用户终端与所述服务器建立的多个网络连接的丢包率或往返时间RTT,为对应的网络连接设置连接等级,所述网络连接的丢包率或RTT的数值与对应的连接等级反相关;为下载等级高的视频分块分配连接等级高的网络连接。
21.一种用户终端,其特征在于,包括处理器和存储器,其中,
所述存储器中存有计算机可读程序;
所述处理器通过运行所述存储器中的程序,以用于完成上述权利要求1至10任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710193867.7A CN108668138B (zh) | 2017-03-28 | 2017-03-28 | 一种视频下载方法以及用户终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710193867.7A CN108668138B (zh) | 2017-03-28 | 2017-03-28 | 一种视频下载方法以及用户终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108668138A CN108668138A (zh) | 2018-10-16 |
CN108668138B true CN108668138B (zh) | 2021-01-29 |
Family
ID=63785925
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710193867.7A Active CN108668138B (zh) | 2017-03-28 | 2017-03-28 | 一种视频下载方法以及用户终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108668138B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109587579A (zh) * | 2018-11-09 | 2019-04-05 | 深圳威尔视觉传媒有限公司 | 基于cdn的多视角码流传输方法、装置、设备和存储介质 |
CN111225293B (zh) * | 2018-11-23 | 2023-10-03 | 深圳市中兴微电子技术有限公司 | 一种视频数据处理方法、装置以及计算机存储介质 |
CN116389822A (zh) * | 2020-03-30 | 2023-07-04 | 华为技术有限公司 | 数据传输方法、芯片系统及相关装置 |
CN111885417B (zh) * | 2020-07-28 | 2022-10-25 | 北京奇艺世纪科技有限公司 | Vr视频播放方法、装置、设备以及存储介质 |
CN113141415B (zh) * | 2021-05-07 | 2023-05-12 | 广州小鹏汽车科技有限公司 | 车辆的远程驾驶系统、方法、电子设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101491036A (zh) * | 2006-06-21 | 2009-07-22 | 贺利实公司 | 用于对事件驱动的基于消息的数据的自适应处理量管理的系统和方法 |
JP2013168847A (ja) * | 2012-02-16 | 2013-08-29 | Fuji Xerox Co Ltd | 画像伝送装置、画像伝送システムおよびプログラム |
CN103702123A (zh) * | 2013-12-16 | 2014-04-02 | 浙江宇视科技有限公司 | 一种视频编码和处理的方法以及设备 |
CN105005964A (zh) * | 2015-06-30 | 2015-10-28 | 南京师范大学 | 基于视频序列影像的地理场景全景图快速生成方法 |
CN106060570A (zh) * | 2016-06-30 | 2016-10-26 | 北京奇艺世纪科技有限公司 | 一种全景视频图像播放、编码方法及装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9401121B2 (en) * | 2012-09-27 | 2016-07-26 | Futurewei Technologies, Inc. | Network visualization through augmented reality and modeling |
CN106416239B (zh) * | 2014-05-29 | 2019-04-09 | 奈克斯特Vr股份有限公司 | 用于交付内容和/或回放内容的方法和装置 |
CN105916060A (zh) * | 2016-04-26 | 2016-08-31 | 乐视控股(北京)有限公司 | 数据传输的方法、装置及系统 |
CN106454321A (zh) * | 2016-10-26 | 2017-02-22 | 深圳市道通智能航空技术有限公司 | 全景视频的处理方法、装置及系统 |
-
2017
- 2017-03-28 CN CN201710193867.7A patent/CN108668138B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101491036A (zh) * | 2006-06-21 | 2009-07-22 | 贺利实公司 | 用于对事件驱动的基于消息的数据的自适应处理量管理的系统和方法 |
JP2013168847A (ja) * | 2012-02-16 | 2013-08-29 | Fuji Xerox Co Ltd | 画像伝送装置、画像伝送システムおよびプログラム |
CN103702123A (zh) * | 2013-12-16 | 2014-04-02 | 浙江宇视科技有限公司 | 一种视频编码和处理的方法以及设备 |
CN105005964A (zh) * | 2015-06-30 | 2015-10-28 | 南京师范大学 | 基于视频序列影像的地理场景全景图快速生成方法 |
CN106060570A (zh) * | 2016-06-30 | 2016-10-26 | 北京奇艺世纪科技有限公司 | 一种全景视频图像播放、编码方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN108668138A (zh) | 2018-10-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108668138B (zh) | 一种视频下载方法以及用户终端 | |
US10594752B2 (en) | System and method of managing multiple video players | |
CN109891850B (zh) | 用于减少360度视区自适应流媒体延迟的方法和装置 | |
CN115379244B (zh) | 360度视频回放空间增强自适应比特率直播流送方法和装置 | |
US10231014B2 (en) | Virtual reality (VR) video distribution using edge resources | |
CN108156467B (zh) | 数据传输方法和装置、存储介质及电子装置 | |
CN108616557B (zh) | 一种全景视频传输方法、装置、终端、服务器及系统 | |
US20080278582A1 (en) | Video Fusion Display Systems | |
CN104378586B (zh) | 基于桌面虚拟化的图像设备重定向的方法及系统 | |
WO2017107911A1 (zh) | 一种视频云平台播放视频的方法及装置 | |
CN109792544A (zh) | 用于流传输全景视频的方法和装置 | |
US9832442B2 (en) | System and method of managing multiple video players executing on multiple devices | |
JP6224516B2 (ja) | エンコード方法およびエンコードプログラム | |
CN114513506A (zh) | 业务处理方法、接入边缘云服务器及业务处理系统 | |
JP6560696B2 (ja) | データのセグメント受信を制御するクライアント、プログラム及び方法 | |
CN108810567B (zh) | 一种音频与视频视角匹配的方法、客户端和服务器 | |
CN106331764A (zh) | 一种全景视频分享方法及其分享装置 | |
CN117115326A (zh) | 三维场景模型的渲染方法、装置及分布式渲染服务器 | |
KR101906066B1 (ko) | 다중 시점 영상의 송신 방법 및 장치 | |
JP6513054B2 (ja) | コンテンツ配信システムのクライアント装置、コンテンツの取得方法及びプログラム | |
JP5717589B2 (ja) | コンテンツ配信制御サーバ、方法及びプログラム | |
US20140327781A1 (en) | Method for video surveillance, a related system, a related surveillance server, and a related surveillance camera | |
CN114866829A (zh) | 同步播放的控制方法及装置 | |
WO2021018223A1 (zh) | 视频的缓存方法和装置 | |
EP3635958B1 (en) | Image processing device and system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |