CN115348460B - 视频的预加载方法、装置、设备及存储介质 - Google Patents

视频的预加载方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN115348460B
CN115348460B CN202110523764.9A CN202110523764A CN115348460B CN 115348460 B CN115348460 B CN 115348460B CN 202110523764 A CN202110523764 A CN 202110523764A CN 115348460 B CN115348460 B CN 115348460B
Authority
CN
China
Prior art keywords
candidate
determining
video
candidate video
sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110523764.9A
Other languages
English (en)
Other versions
CN115348460A (zh
Inventor
黄胜兰
李小成
严冰
马超
钟振东
黄清
姜建华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202110523764.9A priority Critical patent/CN115348460B/zh
Priority to PCT/CN2022/087441 priority patent/WO2022237461A1/zh
Publication of CN115348460A publication Critical patent/CN115348460A/zh
Application granted granted Critical
Publication of CN115348460B publication Critical patent/CN115348460B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开公开了一种视频的预加载方法、装置、设备及存储介质。包括：根据当前待下载视频和码率种类确定候选视频分片；将当前时刻之后的设定时长划分为设定数量的时间窗口；根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列；确定每个候选分片序列在所述设定时长内的播放性能；将所述播放性能最高的候选分片序列确定为目标分片序列，并预加载所述目标分片序列中处于第一个时间窗口的候选视频分片。本公开实施例提供的视频的预加载方法，将播放性能最高的候选分片序列确定为目标分片序列，并预加载目标分片序列中处于第一个时间窗口的候选视频分片，可以最大化的预先下载到符合用户需求的视频，提高带宽资源的利用率。

Description

视频的预加载方法、装置、设备及存储介质
技术领域
本公开实施例涉及视频处理技术领域，尤其涉及一种视频的预加载方法、装置、设备及存储介质。
背景技术
在短视频下载的场景中，用户会依次播放在视频队列内的视频。其中每个视频会有不同的码率清晰度可供下载。此外，为了避免下载资源的浪费通常会把视频进行分片下载。当下载的分片是连续的，那么用户就可以流畅的播放视频。
不同于传统的长视频播放，在短视频播放中，用户会收到一个基于用户历史观看记录推荐的若干视频组成的视频流，每个视频长短不一。由于是基于推荐算法下发的视频，相比于长视频来说，用户就有很大的概率并不依次观看所有在推荐列表中的视频。用户很有可能会直接跳过某些不喜欢的视频，直接向后观看。
以上用户的观看行为，就对用户的播放体验带来了新的挑战：如何利用有限的带宽资源，最大化的下载到符合用户需求的视频。
发明内容
本公开实施例提供一种视频的预加载方法、装置、设备及存储介质，可以最大化的预先下载到符合用户需求的视频，提高带宽资源的利用率。
第一方面，本公开实施例提供了一种视频的预加载方法，包括：
根据当前待下载视频和码率种类确定候选视频分片；
将当前时刻之后的设定时长划分为设定数量的时间窗口；
根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列；其中，所述候选分片序列包括所述设定数量的候选视频分片；
确定每个候选分片序列在所述设定时长内的播放性能；
将所述播放性能最高的候选分片序列确定为目标分片序列，并预加载所述目标分片序列中处于第一个时间窗口的候选视频分片。
第二方面，本公开实施例还提供了一种视频的预加载装置，包括：
候选视频分片确定模块，用于根据当前待下载视频和码率种类确定候选视频分片；
时间窗口划分模块，用于将当前时刻之后的设定时长划分为设定数量的时间窗口；
候选分片序列确定模块，用于根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列；其中，所述候选分片序列包括所述设定数量的候选视频分片；
播放性能确定模块，用于确定每个候选分片序列在所述设定时长内的播放性能；
目标分片序列确定模块，用于将所述播放性能最高的候选分片序列确定为目标分片序列，并预加载所述目标分片序列中处于第一个时间窗口的候选视频分片。
第三方面，本公开实施例还提供了一种电子设备，所述电子设备包括：
一个或多个处理装置；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理装置执行，使得所述一个或多个处理装置实现如本公开实施例所述的视频的预加载方法。
第四方面，本公开实施例公开了一种计算机可读介质，其上存储有计算机程序，该程序被处理装置执行时实现如本公开实施例所述的视频的预加载方法。
本公开实施例公开了一种视频的预加载方法、装置、设备及存储介质。根据当前待下载视频和码率种类确定候选视频分片；将当前时刻之后的设定时长划分为设定数量的时间窗口；根据候选视频分片和设定数量的时间窗口确定多个候选分片序列；确定每个候选分片序列在设定时长内的播放性能；将播放性能最高的候选分片序列确定为目标分片序列，并预加载目标分片序列中处于第一个时间窗口的候选视频分片。本公开实施例提供的视频的预加载方法，将播放性能最高的候选分片序列确定为目标分片序列，并预加载目标分片序列中处于第一个时间窗口的候选视频分片，可以最大化的预先下载到符合用户需求的视频，提高带宽资源的利用率。
附图说明
图1是本公开实施例中的一种视频的预加载方法的流程图；
图2是本公开实施例中的一种视频的预加载装置的结构示意图；
图3是本公开实施例中的一种电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
为了能够让用户有较低的起播延迟，在客户端，用户除了可以下载当前播放的视频以外，也会提前进行下一个视频的提前加载。该下载行为称之为视频的预加载。目前业内采用的预加载行为可以归纳为闲时预加载任务：即当当前正在播放的视频已经完全下载完成之后，就认为当前的网络为空闲的，利用此网络空闲的时间，进行串行的下载后面的视频的任务。通常情况下，业务侧可以统一设置一个预加载的大小，例如800KB，以及需要下载多少个视频N。当前视频下载完成后，业务段则会顺序预加载后面N个视频的800KB的字节，保证起播的时候前几秒的数据流已经缓存在本地，不用花费额外的时间进行网络请求就可以起播。
图1为本公开实施例提供的一种视频的预加载方法的流程图，本实施例可适用于对即将播放的视频进行预先下载的情况，该方法可以由视频的预加载装置来执行，该装置可由硬件和/或软件组成，并一般可集成在具有视频的预加载功能的设备中，该设备可以是服务器、移动终端或服务器集群等电子设备。如图1所示，该方法具体包括如下步骤：
步骤110，根据当前待下载视频和码率种类确定候选视频分片。
其中，待下载视频可以包括当前正在播放的视频以及推送至视频队列中且未播放的视频。码率种类可以理解为每个待下载视频可供选择的码率。视频分片可以理解为固定时长St的视频片段，例如：可以是时长为5秒的视频片段。假设V表示当前待下载视频的总数，L表示可供选择的码率种类，则候选视频分片的总数为V*L，假设由X表示视频分片，则Xvl表示第v个待下载视频中码率为l的视频分片。
步骤120，将当前时刻之后的设定时长划分为设定数量的时间窗口。
其中，设定时长T可以设置为15-25秒之间，时间窗口所占的时长可以由视频分片的时长确定，例如5秒。则T＝K*St，其中，K为时间窗口的数量，为3-5个。
步骤130，根据候选视频分片和设定数量的时间窗口确定多个候选分片序列。
其中，候选分片序列包括设定数量的候选视频分片。本实施例中，在每个时间窗口中候选视频分片有V*L个选择，则在K的时间窗口中，候选分片序列共有(V*L)^K个。因此要从(V*L)^K确定出目标分片序列。
具体的，根据候选视频分片和设定数量的时间窗口确定多个候选分片序列的方式可以是：分别在每个时间窗口中从候选视频分片中选择一个候选视频分片，获得设定数量的候选视频分片；将设定数量的候选视频分片按照时间顺序组成候选分片序列。
其中，假设设定数量为K，则候选分片序列中包含有K个候选视频分片。示例性的，假设K＝3，V＝5，L＝3，则其中一个候选分片序列可以是[X01，X11，X42]，该候选分片序列表示在第一个时间窗口选择了视频序号为0且码率序号为1的视频分片，在第二个时间窗口选择了视频序号为1且码率序号为1的视频分片，在第三个时间窗口选择了视频序号为4且码率序号为2的视频分片。
步骤140，确定每个候选分片序列在设定时长内的播放性能。
其中，播放性能由终端收益和系统收益来确定。
具体的，确定每个候选分片序列在设定时长内的播放性能的过程可以是：对于每个候选分片序列，确定候选分片序列中各候选视频分片的终端收益和播放概率；根据终端收益和播放概率候选分片序列的总终端收益；确定候选分片序列的系统收益；将总终端收益和系统收益进行求和，获得候选分片序列在设定时长内的播放性能。
其中，播放概率可以根据用户的历史观看行为进行统计，并根据马尔科夫概率模型的转移方程进行更新。
本实施例中，根据终端收益和播放概率候选分片序列的总终端收益的方式可以是：分别将各候选视频分片的终端收益和播放概率相乘后累加，获得总终端收益。计算公式如下：其中，pkv为在第k个时间窗口播放视频v的概率，表示第k个时间窗口播放视频v的终端收益。
其中，播放概率满足如下条件：系统收益可以由/>表示，则候选分片序列在设定时长内的播放性能的计算公式为：
具体的，确定候选分片序列中各候选视频分片的终端收益的方式可以是：对于候选分片序列中的每个候选视频分片，确定候选视频分片的图像质量、卡顿损失及首帧估计耗时；基于图像质量、卡顿损失及首帧估计耗时确定候选视频分片的终端收益。
其中，图像质量可以采用设定质量评价指标来表征，例如峰值信噪比(PeakSignal-to-Noise Ratio，PSNR)或者结构相似性(Structural SIMilarity，SSIM)。卡顿损失可以理解为对当前播放视频的卡顿影响。首帧估计耗时可以理解为起播时间损失。
本实施例中，基于图像质量、卡顿损失及首帧估计耗时确定候选视频分片的终端收益的计算公式为：其中，Qkv为在第k个时间窗口在视频v上的图像质量，Rkv为在第k个时间窗口在视频v上的卡顿损失，STkv为在第k个时间窗口在视频v上的首帧估计耗时，α，β，μ为各部分的权重系数，可调节。
具体的，确定候选视频分片的卡顿损失的过程可以是：获取下载候选视频分片所需的第一时长、接收到候选视频分片设定数据量所需的第二时长以及候选视频分片的缓存播放时长；根据第一时长、第二时长和缓存播放时长确定卡顿损失。
其中，第一时长由候选视频分片的数据量及预测带宽确定。设定数量可以是1个字节，第二时长可以表示从发送下载请求到接收到第一字节的数据所需的时长。缓存播放时长可以理解为在缓存(buffer)中候选播放分片剩余的可播放数据量对应的时长。
本实施例中，获取下载候选视频分片所需的第一时长的方式可以是：获取候选视频分片的数据量以及预测带宽；将候选视频分片的数据量除以预测带宽，获得下载候选视频分片所需的第一时长。
其中，预测带宽可以是预测未来一定时间段内的平均带宽。第一时长的计算公式为：其中，Skv在第k个时间窗口中视频v对应的视频分片的数据量，C表示预测带宽。
本实施例中，获取候选视频分片的缓存播放时长的方式可以是：获取候选视频分片的上一时间窗口的缓存播放时长及从上一时间窗口到当前时间窗口的缓存增加时长；根据上一时间窗口的缓存播放时长、第一时长、缓存增加时长和第二时长确定当前时刻候选视频分片的缓存播放时长。
具体的，根据上一时间窗口的缓存播放时长、第一时长、缓存增加时长和第二时长确定当前时刻候选视频分片的缓存播放时长的计算公式为：
其中，D(k-1)v为从上一时间窗口到当前时间窗口的缓存增加时长，Δt为第二时长。
本实施例中，根据第一时长、第二时长和缓存播放时长确定卡顿损失的计算公式为：其中，Bl为Buffer警戒值，是一个设定的常数。
本实施例中，确定候选视频分片的首帧估计耗时的方式可以是：若候选视频分片的缓存播放时长大于或者等于起播所需时长，则首帧估计耗时为0；若候选视频分片的缓存播放时长小于起播所需时长，则首帧估计耗时为设定值。
具体的，确定候选视频分片的首帧估计耗时的计算公式为：其中，r为起播所需时长，为一常数，/>为设定值。
本实施例中，确定候选分片序列的系统收益的方式可以是：将候选分片序列中各候选视频分片对应的数据量求和，获得总数据量；确定用户观看候选分片序列中各候选视频分片的期望值；根据总数据量和期望值确定系统收益。
具体的，根据总数据量和期望值确定系统收益的计算公式为：
其中，Ev为在各个时间窗口中用户观看候选视频分片的期望值，γ为权重参数，可调节。
步骤150，将播放性能最高的候选分片序列确定为目标分片序列，并预加载目标分片序列中处于第一个时间窗口的候选视频分片。
具体的，在获得各候选分片序列的播放性能之后，将将播放性能最高的候选分片序列确定为目标分片序列，并预加载目标分片序列中处于第一个时间窗口的候选视频分片。本实施例中，在下载完成目标分片序列中处于第一个时间窗口的候选视频分片之后，会重复S110-S150的过程，以计算下一个时刻需要预加载的候选视频分片。
本公开实施例的技术方案，根据当前待下载视频和码率种类确定候选视频分片；将当前时刻之后的设定时长划分为设定数量的时间窗口；根据候选视频分片和设定数量的时间窗口确定多个候选分片序列；确定每个候选分片序列在设定时长内的播放性能；将播放性能最高的候选分片序列确定为目标分片序列，并预加载目标分片序列中处于第一个时间窗口的候选视频分片。本公开实施例提供的视频的预加载方法，将播放性能最高的候选分片序列确定为目标分片序列，并预加载目标分片序列中处于第一个时间窗口的候选视频分片，可以最大化的预先下载到符合用户需求的视频，提高带宽资源的利用率。
图2是本公开实施例公开的一种视频的预加载装置的结构示意图。如图2所示，该装置包括：
候选视频分片确定模块210，用于根据当前待下载视频和码率种类确定候选视频分片；
时间窗口划分模块220，用于将当前时刻之后的设定时长划分为设定数量的时间窗口；
候选分片序列确定模块230，用于根据候选视频分片和设定数量的时间窗口确定多个候选分片序列；其中，候选分片序列包括设定数量的候选视频分片；
播放性能确定模块240，用于确定每个候选分片序列在设定时长内的播放性能；
目标分片序列确定模块250，用于将播放性能最高的候选分片序列确定为目标分片序列，并预加载目标分片序列中处于第一个时间窗口的候选视频分片。
可选的，候选分片序列确定模块230，还用于：
分别在每个时间窗口中从候选视频分片中选择一个候选视频分片，获得设定数量的候选视频分片；
将设定数量的候选视频分片按照时间顺序组成候选分片序列。
可选的，播放性能确定模块240，还用于：
对于每个候选分片序列，确定候选分片序列中各候选视频分片的终端收益和播放概率；
根据终端收益和播放概率确定候选分片序列的总终端收益；
确定候选分片序列的系统收益；
将总终端收益和系统收益进行求和，获得候选分片序列在设定时长内的播放性能。
可选的，播放性能确定模块240，还用于：：
对于候选分片序列中的每个候选视频分片，确定候选视频分片的图像质量、卡顿损失及首帧估计耗时；
基于图像质量、卡顿损失及首帧估计耗时确定候选视频分片的终端收益。
可选的，播放性能确定模块240，还用于：：
获取下载候选视频分片所需的第一时长、接收到候选视频分片设定数据量所需的第二时长以及候选视频分片的缓存播放时长；
根据第一时长、第二时长和缓存播放时长确定卡顿损失。
可选的，播放性能确定模块240，还用于：：
若候选视频分片的缓存播放时长大于或者等于起播所需时长，则首帧估计耗时为0；
若候选视频分片的缓存播放时长小于起播所需时长，则首帧估计耗时为设定值。
可选的，播放性能确定模块240，还用于：：
获取候选视频分片的数据量以及预测带宽；
将候选视频分片的数据量除以预测带宽，获得下载候选视频分片所需的第一时长。
可选的，播放性能确定模块240，还用于：
获取候选视频分片的上一时间窗口的缓存播放时长及从上一时间窗口到当前时间窗口的缓存增加时长；
根据上一时间窗口的缓存播放时长、第一时长、缓存增加时长和第二时长确定当前时刻候选视频分片的缓存播放时长。
可选的，播放性能确定模块240，还用于：
将候选分片序列中各候选视频分片对应的数据量求和，获得总数据量；
确定用户观看候选分片序列中各候选视频分片的期望值；
根据总数据量和期望值确定系统收益。
上述装置可执行本公开前述所有实施例所提供的方法，具备执行上述方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本公开前述所有实施例所提供的方法。
下面参考图3，其示出了适于用来实现本公开实施例的电子设备300的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端，或者各种形式的服务器，如独立服务器或者服务器集群。图3示出的电子设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图3所示，电子设备300可以包括处理装置(例如中央处理器、图形处理器等)301，其可以根据存储在只读存储装置(ROM)302中的程序或者从存储装置305加载到随机访问存储装置(RAM)303中的程序而执行各种适当的动作和处理。在RAM 303中，还存储有电子设备300操作所需的各种程序和数据。处理装置301、ROM 302以及RAM 303通过总线304彼此相连。输入/输出(I/O)接口305也连接至总线304。
通常，以下装置可以连接至I/O接口305：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置306；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置307；包括例如磁带、硬盘等的存储装置308；以及通信装置309。通信装置309可以允许电子设备300与其他设备进行无线或有线通信以交换数据。虽然图3示出了具有各种装置的电子设备300，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行词语的推荐方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置309从网络上被下载和安装，或者从存储装置305被安装，或者从ROM 302被安装。在该计算机程序被处理装置301执行时，执行本公开实施例的方法中限定的上述功能。
需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：根据当前待下载视频和码率种类确定候选视频分片；将当前时刻之后的设定时长划分为设定数量的时间窗口；根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列；其中，所述候选分片序列包括所述设定数量的候选视频分片；确定每个候选分片序列在所述设定时长内的播放性能；将所述播放性能最高的候选分片序列确定为目标分片序列，并预加载所述目标分片序列中处于第一个时间窗口的候选视频分片。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开实施例的一个或多个实施例，本公开实施例公开了一种视频的预加载方法，包括：
根据当前待下载视频和码率种类确定候选视频分片；
将当前时刻之后的设定时长划分为设定数量的时间窗口；
根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列；其中，所述候选分片序列包括所述设定数量的候选视频分片；
确定每个候选分片序列在所述设定时长内的播放性能；
将所述播放性能最高的候选分片序列确定为目标分片序列，并预加载所述目标分片序列中处于第一个时间窗口的候选视频分片。
进一步地，根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列，包括：
分别在每个所述时间窗口中从所述候选视频分片中选择一个候选视频分片，获得设定数量的候选视频分片；
将所述设定数量的候选视频分片按照时间顺序组成候选分片序列。
进一步地，确定每个候选分片序列在所述设定时长内的播放性能，包括：
对于每个候选分片序列，确定所述候选分片序列中各候选视频分片的终端收益和播放概率；
根据所述终端收益和所述播放概率确定所述候选分片序列的总终端收益；
确定所述候选分片序列的系统收益；
将所述总终端收益和所述系统收益进行求和，获得所述候选分片序列在所述设定时长内的播放性能。
进一步地，确定所述候选分片序列中各候选视频分片的终端收益，包括：
对于所述候选分片序列中的每个候选视频分片，确定所述候选视频分片的图像质量、卡顿损失及首帧估计耗时；
基于所述图像质量、卡顿损失及首帧估计耗时确定所述候选视频分片的终端收益。
进一步地，确定所述候选视频分片的卡顿损失，包括：
获取下载所述候选视频分片所需的第一时长、接收到所述候选视频分片设定数据量所需的第二时长以及所述候选视频分片的缓存播放时长；
根据所述第一时长、所述第二时长和所述缓存播放时长确定卡顿损失。
进一步地，确定所述候选视频分片的首帧估计耗时，包括：
若所述候选视频分片的缓存播放时长大于或者等于起播所需时长，则所述首帧估计耗时为0；
所述若所述候选视频分片的缓存播放时长小于起播所需时长，则所述首帧估计耗时为设定值。
进一步地，获取下载所述候选视频分片所需的第一时长，包括：
获取所述候选视频分片的数据量以及预测带宽；
将所述候选视频分片的数据量除以所述预测带宽，获得下载所述候选视频分片所需的第一时长。
进一步地，获取所述候选视频分片的缓存播放时长，包括：
获取所述候选视频分片的上一时间窗口的缓存播放时长及从上一时间窗口到当前时间窗口的缓存增加时长；
根据所述上一时间窗口的缓存播放时长、第一时长、所述缓存增加时长和所述第二时长确定当前时刻所述候选视频分片的缓存播放时长。
进一步地，确定所述候选分片序列的系统收益，包括：
将所述候选分片序列中各候选视频分片对应的数据量求和，获得总数据量；
确定用户观看所述候选分片序列中各候选视频分片的期望值；
根据所述总数据量和所述期望值确定系统收益。
注意，上述仅为本公开的较佳实施例及所运用技术原理。本领域技术人员会理解，本公开不限于这里的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本公开的保护范围。因此，虽然通过以上实施例对本公开进行了较为详细的说明，但是本公开不仅仅限于以上实施例，在不脱离本公开构思的情况下，还可以包括更多其他等效实施例，而本公开的范围由所附的权利要求范围决定。

Claims (12)

1.一种视频的预加载方法，其特征在于，包括：
根据当前待下载视频和码率种类确定候选视频分片；
将当前时刻之后的设定时长划分为设定数量的时间窗口；
根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列；其中，所述候选分片序列包括所述设定数量的候选视频分片；
确定每个候选分片序列在所述设定时长内的播放性能，其中，所述播放性能由终端收益和系统收益来确定；所述终端收益根据所述候选视频分片的图像质量、卡顿损失及首帧估计耗时进行确定；所述系统收益根据所述候选视频分片的总数据量和期望值进行确定；
将所述播放性能最高的候选分片序列确定为目标分片序列，并预加载所述目标分片序列中处于第一个时间窗口的候选视频分片。
2.根据权利要求1所述的方法，其特征在于，根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列，包括：
分别在每个所述时间窗口中从所述候选视频分片中选择一个候选视频分片，获得设定数量的候选视频分片；
将所述设定数量的候选视频分片按照时间顺序组成候选分片序列。
3.根据权利要求1所述的方法，其特征在于，确定每个候选分片序列在所述设定时长内的播放性能，包括：
对于每个候选分片序列，确定所述候选分片序列中各候选视频分片的终端收益和播放概率；
根据所述终端收益和所述播放概率确定所述候选分片序列的总终端收益；
确定所述候选分片序列的系统收益；
将所述总终端收益和所述系统收益进行求和，获得所述候选分片序列在所述设定时长内的播放性能。
4.根据权利要求3所述的方法，其特征在于，确定所述候选分片序列中各候选视频分片的终端收益，包括：
对于所述候选分片序列中的每个候选视频分片，确定所述候选视频分片的图像质量、卡顿损失及首帧估计耗时；
基于所述图像质量、卡顿损失及首帧估计耗时确定所述候选视频分片的终端收益。
5.根据权利要求4所述的方法，其特征在于，确定所述候选视频分片的卡顿损失，包括：
获取下载所述候选视频分片所需的第一时长、接收到所述候选视频分片设定数据量所需的第二时长以及所述候选视频分片的缓存播放时长；
根据所述第一时长、所述第二时长和所述缓存播放时长确定卡顿损失。
6.根据权利要求5所述的方法，其特征在于，确定所述候选视频分片的首帧估计耗时，包括：
若所述候选视频分片的缓存播放时长大于或者等于起播所需时长，则所述首帧估计耗时为0；
所述若所述候选视频分片的缓存播放时长小于起播所需时长，则所述首帧估计耗时为设定值。
7.根据权利要求5所述的方法，其特征在于，获取下载所述候选视频分片所需的第一时长，包括：
获取所述候选视频分片的数据量以及预测带宽；
将所述候选视频分片的数据量除以所述预测带宽，获得下载所述候选视频分片所需的第一时长。
8.根据权利要求5所述的方法，其特征在于，获取所述候选视频分片的缓存播放时长，包括：
获取所述候选视频分片的上一时间窗口的缓存播放时长及从上一时间窗口到当前时间窗口的缓存增加时长；
根据所述上一时间窗口的缓存播放时长、第一时长、所述缓存增加时长和所述第二时长确定当前时刻所述候选视频分片的缓存播放时长。
9.根据权利要求3所述的方法，其特征在于，确定所述候选分片序列的系统收益，包括：
将所述候选分片序列中各候选视频分片对应的数据量求和，获得总数据量；
确定用户观看所述候选分片序列中各候选视频分片的期望值；
根据所述总数据量和所述期望值确定系统收益。
10.一种视频的预加载装置，其特征在于，包括：
候选视频分片确定模块，用于根据当前待下载视频和码率种类确定候选视频分片；
时间窗口划分模块，用于将当前时刻之后的设定时长划分为设定数量的时间窗口；
候选分片序列确定模块，用于根据所述候选视频分片和所述设定数量的时间窗口确定多个候选分片序列；其中，所述候选分片序列包括所述设定数量的候选视频分片；
播放性能确定模块，用于确定每个候选分片序列在所述设定时长内的播放性能，其中，所述播放性能由终端收益和系统收益来确定；所述终端收益根据所述候选视频分片的图像质量、卡顿损失及首帧估计耗时进行确定；所述系统收益根据所述候选视频分片的总数据量和期望值进行确定；
目标分片序列确定模块，用于将所述播放性能最高的候选分片序列确定为目标分片序列，并预加载所述目标分片序列中处于第一个时间窗口的候选视频分片。
11.一种电子设备，其特征在于，所述电子设备包括：
一个或多个处理装置；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理装置执行，使得所述一个或多个处理装置实现如权利要求1-9中任一所述的视频的预加载方法。
12.一种计算机可读介质，其上存储有计算机程序，其特征在于，该程序被处理装置执行时实现如权利要求1-9中任一所述的视频的预加载方法。
CN202110523764.9A 2021-05-13 2021-05-13 视频的预加载方法、装置、设备及存储介质 Active CN115348460B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110523764.9A CN115348460B (zh) 2021-05-13 2021-05-13 视频的预加载方法、装置、设备及存储介质
PCT/CN2022/087441 WO2022237461A1 (zh) 2021-05-13 2022-04-18 视频的预加载方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110523764.9A CN115348460B (zh) 2021-05-13 2021-05-13 视频的预加载方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN115348460A CN115348460A (zh) 2022-11-15
CN115348460B true CN115348460B (zh) 2024-06-07

Family

ID=83977858

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110523764.9A Active CN115348460B (zh) 2021-05-13 2021-05-13 视频的预加载方法、装置、设备及存储介质

Country Status (2)

Country Link
CN (1) CN115348460B (zh)
WO (1) WO2022237461A1 (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2915739A1 (en) * 2015-01-23 2016-07-28 Huawei Technologies Co., Ltd. Method and device for visually presenting data preloading
CN106791898A (zh) * 2016-12-12 2017-05-31 广州华多网络科技有限公司 一种直播视频加载方法和装置
WO2017129096A1 (zh) * 2016-01-28 2017-08-03 腾讯科技（深圳）有限公司 视频预加载的方法和装置
CN109040801A (zh) * 2018-07-19 2018-12-18 北京达佳互联信息技术有限公司 媒体码率自适应方法、装置、计算机设备及存储介质
WO2019109643A1 (zh) * 2017-12-07 2019-06-13 北京百度网讯科技有限公司 视频推荐方法、装置、计算机设备和存储介质
CN110868626A (zh) * 2019-11-06 2020-03-06 北京达佳互联信息技术有限公司 一种内容数据预加载的方法及装置
CN111385660A (zh) * 2018-12-28 2020-07-07 广州市百果园信息技术有限公司 视频的点播方法、装置、设备及存储介质
WO2020220984A1 (zh) * 2019-04-29 2020-11-05 腾讯科技（深圳）有限公司 一种视频处理方法及装置、终端、存储介质
CN112423125A (zh) * 2020-11-20 2021-02-26 上海哔哩哔哩科技有限公司 视频加载方法及装置
CN112672186A (zh) * 2020-12-09 2021-04-16 北京达佳互联信息技术有限公司 视频预加载的方法和装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5679840B2 (ja) * 2011-01-31 2015-03-04 三菱電機株式会社 プレイリスト作成装置、プレイリスト編集装置
TW201615022A (en) * 2014-10-14 2016-04-16 Hon Hai Prec Ind Co Ltd Video preloading system and method of video preloading
US20160308994A1 (en) * 2015-04-19 2016-10-20 Carlos Manuel Gonzalez Pre-Load of Video Content to Optimize Internet Usage
CN106550284B (zh) * 2015-09-21 2020-04-17 北京国双科技有限公司 一种播放分片视频的方法及装置
US10116981B2 (en) * 2016-08-01 2018-10-30 Microsoft Technology Licensing, Llc Video management system for generating video segment playlist using enhanced segmented videos
US20180109827A1 (en) * 2016-10-13 2018-04-19 International Business Machines Corporation User affinity for video content and video content recommendations
CN107241639A (zh) * 2017-05-05 2017-10-10 广州优视网络科技有限公司 预加载视频的方法、设备、视频播放器、电子设备
CN107948740B (zh) * 2017-10-30 2020-08-28 广州虎牙信息科技有限公司 视频播放控制方法、装置及终端
US20190200051A1 (en) * 2017-12-27 2019-06-27 Facebook, Inc. Live Media-Item Transitions
CN110072145A (zh) * 2019-04-03 2019-07-30 北京字节跳动网络技术有限公司 用于终端设备的信息播放方法、装置和终端设备
CN112423127A (zh) * 2020-11-20 2021-02-26 上海哔哩哔哩科技有限公司 视频加载方法及装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2915739A1 (en) * 2015-01-23 2016-07-28 Huawei Technologies Co., Ltd. Method and device for visually presenting data preloading
WO2017129096A1 (zh) * 2016-01-28 2017-08-03 腾讯科技（深圳）有限公司 视频预加载的方法和装置
CN106791898A (zh) * 2016-12-12 2017-05-31 广州华多网络科技有限公司 一种直播视频加载方法和装置
WO2019109643A1 (zh) * 2017-12-07 2019-06-13 北京百度网讯科技有限公司 视频推荐方法、装置、计算机设备和存储介质
CN109040801A (zh) * 2018-07-19 2018-12-18 北京达佳互联信息技术有限公司 媒体码率自适应方法、装置、计算机设备及存储介质
CN111385660A (zh) * 2018-12-28 2020-07-07 广州市百果园信息技术有限公司 视频的点播方法、装置、设备及存储介质
WO2020220984A1 (zh) * 2019-04-29 2020-11-05 腾讯科技（深圳）有限公司 一种视频处理方法及装置、终端、存储介质
CN110868626A (zh) * 2019-11-06 2020-03-06 北京达佳互联信息技术有限公司 一种内容数据预加载的方法及装置
CN112423125A (zh) * 2020-11-20 2021-02-26 上海哔哩哔哩科技有限公司 视频加载方法及装置
CN112672186A (zh) * 2020-12-09 2021-04-16 北京达佳互联信息技术有限公司 视频预加载的方法和装置

Also Published As

Publication number Publication date
CN115348460A (zh) 2022-11-15
WO2022237461A1 (zh) 2022-11-17

Similar Documents

Publication Publication Date Title
CN114401447B (zh) 一种视频卡顿预测方法、装置、设备和介质
CN112135169B (zh) 一种媒体内容加载方法、装置、设备和介质
CN112954354B (zh) 视频的转码方法、装置、设备和介质
CN112887795B (zh) 视频播放方法、装置、设备和介质
CN110765354A (zh) 信息的推送方法、装置、电子设备及存储介质
CN110636367A (zh) 一种视频加载方法、装置、终端设备及介质
CN115103210B (zh) 信息处理方法、装置、终端和存储介质
CN110856004B (zh) 消息处理方法、装置、可读存储介质及电子设备
CN112543487A (zh) 电子设备的控制方法、装置、终端和存储介质
CN114389975A (zh) 网络带宽预估方法、装置、系统、电子设备及存储介质
CN114257870B (zh) 短视频播放方法、装置、设备及存储介质
CN114786055A (zh) 一种预加载方法、装置、电子设备及介质
CN112084447B (zh) 一种数据分配方法、装置、介质和电子设备
CN115348460B (zh) 视频的预加载方法、装置、设备及存储介质
CN112000842A (zh) 视频处理方法和装置
CN114339402B (zh) 视频播放完成率预测方法、装置、介质及电子设备
CN116304427A (zh) 一种预加载方法、装置、存储介质及电子设备
CN115145974A (zh) 一种指标值波动的归因方法、装置、电子设备及存储介质
CN115412731B (zh) 视频处理方法、装置、设备及存储介质
CN115378878B (zh) Cdn的调度方法、装置、设备及存储介质
CN115842937A (zh) 视频播放方法、装置、设备及存储介质
CN112153322B (zh) 数据分发方法、装置、设备及存储介质
CN114760506B (zh) 视频转码的评估方法、装置、设备及存储介质
CN114915849B (zh) 视频的预加载方法、装置、设备和介质
CN115379243B (zh) Cdn的调度方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant