CN114630150A - 一种适应用户多样性的视频流abr算法 - Google Patents

一种适应用户多样性的视频流abr算法 Download PDF

Info

Publication number
CN114630150A
CN114630150A CN202210145249.6A CN202210145249A CN114630150A CN 114630150 A CN114630150 A CN 114630150A CN 202210145249 A CN202210145249 A CN 202210145249A CN 114630150 A CN114630150 A CN 114630150A
Authority
CN
China
Prior art keywords
video
user diversity
penalty
code rate
adapt
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210145249.6A
Other languages
English (en)
Inventor
苗升展
庄涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ruan Internet Of Things Technology Group Co ltd
Original Assignee
Ruan Internet Of Things Technology Group Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ruan Internet Of Things Technology Group Co ltd filed Critical Ruan Internet Of Things Technology Group Co ltd
Priority to CN202210145249.6A priority Critical patent/CN114630150A/zh
Publication of CN114630150A publication Critical patent/CN114630150A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/251Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4662Learning process for intelligent management, e.g. learning user preferences for recommending movies characterized by learning algorithms

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明涉及多媒体视频传输领域,具体涉及一种适应用户多样性的视频流ABR算法,包括如下步骤:定义惩罚函数;设置惩罚约束;记视频被分割的块数为n,当i<n时,执行下列步骤,对所有码率计算惩罚ybs[i],yre[i],ybo[i];选择码率r*使得视频块i最小化
Figure DDA0003508601530000011
下载码率为r*的视频块c[i],计算Zbs[i+1],Zre[i+1],Zbo[i+1],更新缓存占用和虚拟队列Zbs,Zre,Zbo,更新i=i+1,更新α1,α2,α3,返回视频被分割步骤;使用流动与惩罚技术进行算法设计,引入虚拟队列选择最优的码率。

Description

一种适应用户多样性的视频流ABR算法
技术领域
本发明涉及多媒体视频传输技术领域,具体涉及一种适应用户多样性的视频流ABR算法。
背景技术
随着电视、移动设备、笔记本电脑等视频播放设备类型的增加,HTTP视频流已成为视频服务的理想候选技术。由于不同的终端用户情况因网络、设备各异,视频提供商使用ABR算法在动态网络中自适应地选择合适的比特率以提高QoE。主要的QoE指标包括平均码率、码率切换和卡顿,现有的ABR算法使用单个或多个QoE指标,并使用基于预测模型的技术来提高QoE。
但是,现有视频供应商通常拥有大量的视频内容和终端用户,不同的用户对于视频播放指标具有不同的偏好。现有的ABR算法通常采用固定的用户体验量化函数,并且在整体应用中表现较好。然而,对于某一个具体的用户,这种方式可能会导致不合适的码率选择。基于有预测能力的模型和机器学习的ABR算法采用固定形式的用户体验函数,如果要想使其能够对用户体验多样性适应,必须采用具体的用户体验函数,而用户体验函数的变化会产生大量的模型计算开销,无法在现实场景中使用,为此,我们提出一种适应用户多样性的视频流ABR算法。
发明内容
本发明针对现有技术存在的上述问题,提供了一种适应用户多样性的视频流ABR算法,将偏好反映在相应的视频播放指标权重上。
本发明的基本方案为:一种适应用户多样性的视频流ABR算法,包括如下步骤:
A、定义惩罚函数Zbs,、Zre、Zbo
Zbs[i]=α1×e|c[i]-c[i-1]|
Zre[t]=α2×[1-I(buf(t))]
Zbo[t]=α3×buf(t);
B、设置惩罚约束cbs,cre,cbo,约束设置如下:
Figure BDA0003508601510000011
C、记视频被分割的块数为n,当i<n时,执行D-J步骤;
D、对所有码率计算惩罚ybs[i],yre[i],ybo[i];
Figure BDA0003508601510000021
F、下载码率为r*的视频块c[i];
G、根据下式计算Zbs[f+1],Zre[i+1],Zbo[i+1]
Figure BDA0003508601510000022
H、更新缓存占用和虚拟队列Zbs,Zre,Zbo
I、更新i=i+1;
J、更新α1,α2,α3;返回第C步骤。
优选地,Zbs,、Zre、Zbo分别为码率切换、卡顿、缓存占用。
优选地,步骤B中,m为视频可选的码率个数,s[j]为码率j对应的视频块大小,bmax为最大缓存,
Figure BDA0003508601510000023
表示预期下载时间的上界。
优选地,进行步骤A之前,需将视频流模型被建模为更新系统模型,一个视频块的行为是系统中的一帧,每一帧中,系统中的策略
Figure BDA0003508601510000024
选择视频块i的码率,并在完成后会产生一个惩罚向量y和效用向量u,
Figure BDA0003508601510000025
为码率选择的决策空间。
优选地,更新系统中的惩罚与体验指标对应,表示为:
y=(y1[i],y1[i],y2[i],y3[i])=(-u[i],ybs[i],yre[i],ybo[i])。
优选地,系统的目标是在满足惩罚约束cl的情况下最大化整体效用:
Figure BDA0003508601510000026
Figure BDA0003508601510000027
Figure BDA0003508601510000028
为了处理约束cl(l∈{1,2,3}),定义相应的虚拟队列Zl[i](Zl[0]=0)如下,其中T[i]为视频块i的传输时间,得出:
Zl[i+1]=max[Zl[i]+yl[i]-clT[i],0]。
优选地,对于视频块i,定义Lyapunov函数如下:
Figure BDA0003508601510000029
其中,K表示约束的数量,K=3,因此,条件Lyapunov流动表示为:
Figure BDA0003508601510000031
式(5)中的Lyapunov流动满足:
Figure BDA0003508601510000032
其中,B是有限的常数。因此,B存在并且对于全部的i和可能的Z[i]:
Figure BDA0003508601510000038
对于视频块i的流动与惩罚,满足
Figure BDA0003508601510000034
优选地,V是恒定的常量。
优选地,步骤B中,设置i=0,默认用户体验函数参数α1,α2,α3
本发明的工作原理及优点在于:本发明使用流动与惩罚技术进行算法设计,同时引入虚拟队列选择最优的码率,通过对用户体验多样性的建模定义具体的用户体验函数,能够在线感知用户体验函数,有效处理用户体验多样性,将偏好反映在相应的视频播放指标权重上,并通过线上参数更新对ABR算法进行设计和实现,有效地适应用户体验多样性。
附图说明
图1为本发明的算法流程图。
具体实施方式
下面通过具体实施方式进一步详细的说明:
如图1所示,一种适应用户多样性的视频流ABR算法,视频流模型被建模为更新系统模型,一个视频块的行为是系统中的一帧。每一帧中,系统中的策略
Figure BDA0003508601510000036
选择视频块i的码率,并在完成后会产生一个惩罚向量y和效用向量u。
Figure BDA0003508601510000037
为码率选择的决策空间,更新系统中的惩罚与体验指标对应,表示为:
y=(y1[i],y1[i],y2[i],y3[i])=(-u[i],ybs[i],yre[i],ybo[i]) (1)
系统的目标是在满足惩罚约束cl的情况下最大化整体效用:
Figure BDA0003508601510000035
Figure BDA0003508601510000041
Figure BDA0003508601510000042
其中,cl(2∈{1,…,3})对应着卡顿、码率切换和缓存占用的平均惩罚约束,为了处理约束cl(l∈{1,2,3}),定义相应的虚拟队列Zl[i](Zl[0]=0)如下,其中T[i]为视频块i的传输时间;
Zl[i+1]=max[Zl[i]+yl[i]-clT[i],0] (3)
对于视频块i,定义Lyapunov函数如下:
Figure BDA0003508601510000043
其中,K表示约束的数量,K=3。因此,条件Lyapunov流动表示为:
Figure BDA0003508601510000044
式(5)中的Lyapunov流动满足:
Figure BDA0003508601510000045
其中,B是有限的常数。因此,B存在并且对于全部的i和可能的Z[i]:
Figure BDA0003508601510000046
对于视频块i的流动与惩罚,满足
Figure BDA0003508601510000047
其中,V是恒定的常量。
式(8)中的最优化策略π[i]可以通过最小化下面的比率得到,即对于视频块i,该码率会最小化公式(9)中的比率:
Figure BDA0003508601510000048
S1、定义惩罚函数Zbs,、Zre、Zbo
Zbs[i]=α1×e|c[i]-c[i-1]|
Zre[t]=α2×[1-I(buf(t))]
Zbo[t]=α3×buf(t);
I(x)=1当x>0,否则,I(x)=0;i是视频块的序号,c[i]表示视频块i的码率,buf(t)为时间t的缓存占用,参数α1,α2,和α3为对应惩罚的权重,并可以根据用户体验多样性进行调整。过调整α1,α2,以及α3可以对码率切换、卡顿和缓存占用的惩罚设置约束。越大的权重会越限制对应的体验指标,使其惩罚降低;
设置惩罚约束cbs,cre,cbo,约束设置如下:
Figure BDA0003508601510000051
S2、记视频被分割的块数为n,当i<n时,执行S3-S9步骤;
S3、对所有码率计算惩罚ybs[i],yre[i],ybo[i];
Figure BDA0003508601510000052
S5、下载码率为r*的视频块c[i];
S6、根据下式计算Zbs[i+1],Zre[i+1],Zbo[i+1]
Figure BDA0003508601510000053
S7、更新缓存占用和虚拟队列Zbs,Zre,Zbo
S8、更新i=i+1;
S9、更新α1,α2,α3,返回S2步骤。
以上所述的仅是本发明的实施例,方案中公知的具体结构及特性等常识在此未作过多描述,所属领域普通技术人员知晓申请日或者优先权日之前发明所属技术领域所有的普通技术知识,能够获知该领域中所有的现有技术,并且具有应用该日期之前常规实验手段的能力,所属领域普通技术人员可以在本申请给出的启示下,结合自身能力完善并实施本方案,一些典型的公知结构或者公知方法不应当成为所属领域普通技术人员实施本申请的障碍。应当指出,对于本领域的技术人员来说,在不脱离本发明结构的前提下,还可以作出若干变形和改进,这些也应该视为本发明的保护范围,这些都不会影响本发明实施的效果和专利的实用性。

Claims (9)

1.一种适应用户多样性的视频流ABR算法,其特征在于,包括如下步骤:
A、定义惩罚函数Zbs,Zre、Zbo
Zbs[i]=α1×e|c[i]-c[i-1]|
Zre[t]=α2×[1-I(buf(t))]
Zbo[t]=α3×buf(t);
B、设置惩罚约束cbs,cre,cbo,约束设置如下:
Figure FDA0003508601500000011
C、记视频被分割的块数为n,当i<n时,执行D-J步骤;
D、对所有码率计算惩罚ybs[i],yre[i],ybo[i];
E、根据公式,选择码率r*使得视频块i最小化
Figure FDA0003508601500000012
Figure FDA0003508601500000013
F、下载码率为r*的视频块c[i];
G、根据下式计算Zbs[i+1],Zre[i+1],Zbo[i+1]
Figure FDA0003508601500000014
H、更新缓存占用和虚拟队列Zbs,Zre,Zbo
I、更新i=i+1;
J、更新α1,α2,α3;返回第C步骤。
2.根据权利要求1所述的一种适应用户多样性的视频流ABR算法,其特征在于:Zbs,、Zre、Zbo分别为码率切换、卡顿、缓存占用。
3.根据权利要求2所述的一种适应用户多样性的视频流ABR算法,其特征在于:步骤B中,m为视频可选的码率个数,s[j]为码率j对应的视频块大小,bmax为最大缓存,
Figure FDA0003508601500000015
Figure FDA0003508601500000016
表示预期下载时间的上界。
4.根据权利要求3所述的一种适应用户多样性的视频流ABR算法,其特征在于:进行步骤A之前,需将视频流模型被建模为更新系统模型,一个视频块的行为是系统中的一帧,每一帧中,系统中的策略
Figure FDA0003508601500000017
选择视频块i的码率,并在完成后会产生一个惩罚向量y和效用向量u,
Figure FDA0003508601500000018
为码率选择的决策空间。
5.根据权利要求4所述的一种适应用户多样性的视频流ABR算法,其特征在于:更新系统中的惩罚与体验指标对应,表示为:
y=(y1[i],y1[i],y2[i],y3[i])=(-u[i],ybs[i],yre[i],ybo[i])。
6.根据权利要求5所述的一种适应用户多样性的视频流ABR算法,其特征在于:系统的目标是在满足惩罚约束cl的情况下最大化整体效用:
Figure FDA0003508601500000021
Figure FDA0003508601500000022
Figure FDA0003508601500000023
为了处理约束cl(l∈{1,2,3}),定义相应的虚拟队列Zl[i](Zl[0]=0)如下,其中T[i]为视频块i的传输时间,得出:
Zl[i+1]=max[Zl[i]+yl[i]-clT[i],0]。
7.根据权利要求6所述的一种适应用户多样性的视频流ABR算法,其特征在于:对于视频块i,定义Lyapunov函数如下:
Figure FDA0003508601500000024
其中,K表示约束的数量,K=3,因此,条件Lyapunov流动表示为:
Figure FDA0003508601500000025
式(5)中的Lyapunov流动满足:
Figure FDA0003508601500000026
其中,B是有限的常数。因此,B存在并且对于全部的i和可能的Z[i]:
Figure FDA0003508601500000027
对于视频块i的流动与惩罚,满足
Figure FDA0003508601500000028
8.根据权利要求7所述的一种适应用户多样性的视频流ABR算法,其特征在于:V是恒定的常量。
9.根据权利要求8所述的一种适应用户多样性的视频流ABR算法,其特征在于:步骤B中,设置i=0,默认用户体验函数参数α1,α2,α3
CN202210145249.6A 2022-02-17 2022-02-17 一种适应用户多样性的视频流abr算法 Pending CN114630150A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210145249.6A CN114630150A (zh) 2022-02-17 2022-02-17 一种适应用户多样性的视频流abr算法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210145249.6A CN114630150A (zh) 2022-02-17 2022-02-17 一种适应用户多样性的视频流abr算法

Publications (1)

Publication Number Publication Date
CN114630150A true CN114630150A (zh) 2022-06-14

Family

ID=81900708

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210145249.6A Pending CN114630150A (zh) 2022-02-17 2022-02-17 一种适应用户多样性的视频流abr算法

Country Status (1)

Country Link
CN (1) CN114630150A (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060126527A1 (en) * 2004-12-13 2006-06-15 Gene Cheung Methods and systems for controlling the number of computations involved in computing the allocation of resources given resource constraints
CN104506453A (zh) * 2014-12-24 2015-04-08 中国科学院声学研究所 一种面向用户体验质量的码率分配方法
CN105245919A (zh) * 2015-10-08 2016-01-13 清华大学 智能终端能耗优化的自适应流媒体分发方法
CN106131597A (zh) * 2016-07-19 2016-11-16 武汉烽火网络有限责任公司 流媒体在网络上高效传输的方法
US20190158564A1 (en) * 2016-03-06 2019-05-23 Ssimwave Inc. Method and system for automatic user quality-of-experience measurement of streaming video
US20190191197A1 (en) * 2017-12-14 2019-06-20 Arris Enterprises Llc Elastic Switched Digital Video (SDV) Traffic Control with Adaptive Bit Rate Streaming
CN110300315A (zh) * 2019-07-24 2019-10-01 北京达佳互联信息技术有限公司 一种视频码率确定方法、装置、电子设备及存储介质
CN112291620A (zh) * 2020-09-22 2021-01-29 北京邮电大学 视频播放方法、装置、电子设备及存储介质
CN112929691A (zh) * 2021-01-29 2021-06-08 复旦大学 多用户全景视频传输方法
CN113170214A (zh) * 2020-03-13 2021-07-23 深圳市大疆创新科技有限公司 自动调整视频直播码率的方法、视频传输装置和服务器

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060126527A1 (en) * 2004-12-13 2006-06-15 Gene Cheung Methods and systems for controlling the number of computations involved in computing the allocation of resources given resource constraints
CN104506453A (zh) * 2014-12-24 2015-04-08 中国科学院声学研究所 一种面向用户体验质量的码率分配方法
CN105245919A (zh) * 2015-10-08 2016-01-13 清华大学 智能终端能耗优化的自适应流媒体分发方法
US20190158564A1 (en) * 2016-03-06 2019-05-23 Ssimwave Inc. Method and system for automatic user quality-of-experience measurement of streaming video
CN106131597A (zh) * 2016-07-19 2016-11-16 武汉烽火网络有限责任公司 流媒体在网络上高效传输的方法
US20190191197A1 (en) * 2017-12-14 2019-06-20 Arris Enterprises Llc Elastic Switched Digital Video (SDV) Traffic Control with Adaptive Bit Rate Streaming
CN110300315A (zh) * 2019-07-24 2019-10-01 北京达佳互联信息技术有限公司 一种视频码率确定方法、装置、电子设备及存储介质
CN113170214A (zh) * 2020-03-13 2021-07-23 深圳市大疆创新科技有限公司 自动调整视频直播码率的方法、视频传输装置和服务器
CN112291620A (zh) * 2020-09-22 2021-01-29 北京邮电大学 视频播放方法、装置、电子设备及存储介质
CN112929691A (zh) * 2021-01-29 2021-06-08 复旦大学 多用户全景视频传输方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
SENG KYOUN JO ET AL.: ""Threshold-based admission control method for multicast environment"", 《2006 8TH INTERNATIONAL CONFERENCE ADVANCED COMMUNICATION TECHNOLOGY》 *
SUMAN PANDEY ET AL.: ""Streaming Pattern Based Feature Extraction for Training Neural Network Classifier to Predict Quality of VOD services"", 《2021 IFIP/IEEE INTERNATIONAL SYMPOSIUM ON INTEGRATED NETWORK MANAGEMENT (IM)》 *
杜丽娜等: ""基于强化学习的移动视频流业务码率自适应算法研究进展"", 《通信学报》, vol. 42, no. 09 *
陈梓晗等: ""一种基于视频分类的码率自适应算法"", 《计算机工程》, vol. 47, no. 12 *
陈锋: ""面向用户体验的移动互联网资源管理研究"", 《万方在线出版》 *

Similar Documents

Publication Publication Date Title
CN108965949B (zh) 一种视频业务中满足用户个性化体验的码率自适应方法
CN1276367C (zh) 多媒体数据流网络代码转换用的系统
Fu et al. 360SRL: A sequential reinforcement learning approach for ABR tile-based 360 video streaming
EP1540536B1 (en) Method for the real-time distribution of streaming data on a network
CN113282786B (zh) 一种基于深度强化学习的全景视频边缘协作缓存替换方法
CN110248210A (zh) 视频传输优化方法
WO2020230740A1 (ja) 制御装置、制御方法及びプログラム
US9665646B1 (en) Method and system for providing bit rate adaptaion to video files having metadata
CN117221403A (zh) 一种基于用户移动和联邦缓存决策的内容缓存方法
CN111629218A (zh) 一种vanet中基于时变线性的加速强化学习边缘缓存方法
CN113490239B (zh) 基于自适应网络编码的异构无线链路并发传输控制方法
CN114630150A (zh) 一种适应用户多样性的视频流abr算法
US7228535B2 (en) Methods and apparatus for multimedia stream scheduling in resource-constrained environment
Hung et al. Flexible HTTP-based Video Adaptive Streaming for good QoE during sudden bandwidth drops
CN115484314B (zh) 一种移动边缘计算网络下推荐赋能的边缘缓存优化方法
CN114554252A (zh) 一种适应用户多样性的QoE建模方法
Xiao et al. Deep reinforcement learning-driven intelligent panoramic video bitrate adaptation
CN116248922A (zh) 一种基于编码器-解码器预测模型的视频自适应调度方法
US11871061B1 (en) Automated adaptive bitrate encoding
WO2017018072A1 (ja) 配信レート選択装置、配信レート選択方法、及びプログラム
CN114301845A (zh) 一种自适应的数据中心网络传输协议选择方法
CN113852817A (zh) 一种自适应码率传输的服务器及码率确定方法
Singh et al. Modeling and Optimization of Video Transmission in Data Compression & Source Coding
CN114666620B (zh) 基于视觉敏感度的自适应流媒体方法
CN117376661B (zh) 一种基于神经网络的细粒度视频流自适应调节系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20220614