CN109040855B - 一种无线dash流媒体码率平滑自适应传输方法 - Google Patents

一种无线dash流媒体码率平滑自适应传输方法 Download PDF

Info

Publication number
CN109040855B
CN109040855B CN201811019788.5A CN201811019788A CN109040855B CN 109040855 B CN109040855 B CN 109040855B CN 201811019788 A CN201811019788 A CN 201811019788A CN 109040855 B CN109040855 B CN 109040855B
Authority
CN
China
Prior art keywords
slice
bandwidth
code rate
selecting
rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811019788.5A
Other languages
English (en)
Other versions
CN109040855A (zh
Inventor
黄胜
付园鹏
贾艳秋
司朋涛
肖傲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing University of Post and Telecommunications
Original Assignee
Chongqing University of Post and Telecommunications
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing University of Post and Telecommunications filed Critical Chongqing University of Post and Telecommunications
Priority to CN201811019788.5A priority Critical patent/CN109040855B/zh
Publication of CN109040855A publication Critical patent/CN109040855A/zh
Application granted granted Critical
Publication of CN109040855B publication Critical patent/CN109040855B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2385Channel allocation; Bandwidth allocation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26208Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
    • H04N21/26216Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints involving the channel capacity, e.g. network bandwidth
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明涉及流媒体码率自适应技术领域,特别涉及一种无线DASH流媒体码率平滑自适应传输方法,包括统计前N个切片的下载速率数据,预测无线网络的带宽趋势以及带宽值;根据预测的带宽趋势、带宽值以及缓存占用情况,切片调度模型自适应选择最优码率;本发明的方法考虑多组参数,对无线网络的带宽变化趋势做出准确判断的同时,可以“平滑”处理带宽的短暂波动,本发明在维持较少码率切换次数的同时在视频播放过程中提供较高的平均码率,为观众提供良好的无线端视频体验质量。

Description

一种无线DASH流媒体码率平滑自适应传输方法
技术领域
本发明涉及流媒体码率自适应技术领域,特别涉及一种无线基于HTTP动态自适应流标准(Dynamic Adaptive Streaming over HTTP,DASH)流媒体码率平滑自适应传输方法。
背景技术
最近的研究表明,视频业务已经占据移动数据总量的66%,就国内而言更是达到了69.3%。而移动视频数据相比其他应用占据相当大的比例,移动视频流量的増长也十分迅速,尤其是近几年的増速,据Cisco研究报告预测,到2021年,78%的移动IP流量将由用户观看视频过程中的传输消耗。考虑到视频在移动网络中传输受众多因素的影响,比如无线网络网络状态以及缓冲队列大小等,而移动用户总是希望得到更好的视频质量、更小的延迟、更少的播放中断。故对移动端视频传输的相关研究显得很有意义。
3G和4G移动通信的一个显著差异是多媒体服务取代语音服务成为最引人注目的需求。未来的5G预计将由软件定义网络支撑,主要承载多媒体流量。现在视频流量已经成为移动数据流量的一个重要组成部分,并且未来几年将持续增长。无线网络中带宽资源通常有限并且带宽不稳定,无线信道状况波动将会影响视频数据的传输,严重时数据包将会丢失,这将不能很好地保证用户观看体验。另外,在高密区域的场景,用户可用带宽会随着终端接入数目的变化而受到较大影响。因此,无线和移动网络环境中自适应多媒体技术匹配视频质量与时变的网络带宽的难度更高。因此,如何综合考虑终端的异构性和变化的网络环境,为用户提供良好的QoE是一项具有挑战性的工作。
传统的流媒体协议,实时传输协议/实时流化协议(Real-time TransportProtocol/Real-time Transport Control Protocol,RTP/RTSP)使用面向无连接的用户数据报协议(User Datagram Protocol,UDP),在视频传输的过程中丢包率较高,并且难以穿越防火墙以及网络地址转换器(Networking Address Translator,NAT)。此外,RTP/RTSP协议的流媒体传输需要特定的服务器,部署成本高。因此,基于HTTP动态自适应流标准DASH应运而生。DASH采用HTTP协议作为传输协议能够很好地解决防火墙、网络地址转换穿越问题,同时能够有效利用现有的网络服务体系架构,现有的HTTP服务器就能提供良好的视频服务,大大减少了部署成本。目前,DASH算法的研究主要集中在有线网络应用场景的PC端,而智能移动端上的流媒体自适应算法研究还较少。
由于移动设备使用场景的多变性、复杂性,因此存在着信号传输过程中时延高、丢包率高以及网络类型切换导致的带宽波动幅度大等问题。现有基于有线网环境的HTTP流媒体码率自适应算法如Adobe公司的OSMF流媒体播放器,其自适应机制是根据最近请求的两个片段的下载时长来估计可用带宽,而下一个片段的码率则是小于该估计带宽的最大等级码率。文献《Rate Adaptation for Adaptive HTTP Streaming》(C.Liu,I.Bouazizi,andM.Gabbouj,“Rate Adaptation for Adaptive HTTP Streaming,”in Proc.ACM MMSys,pp.169–174,Feb.2011)中提出一种缓存保存速率自适应机制的RAAHS算法,采用保守的逐级切换策略来提高视频比特率。同时,当下载速率变小时,采用激进的策略迅速降低切片的码率,该算法能够较好地将缓存占用稳定在目标区间,但是带宽变化频繁时,选择的码率等级很不稳定。文献《Fuzzy-Based MPEG/DASH Adaptation Algorithm》(Vergados D J,Michalas A,Sgora A,et al.FDASH:A Fuzzy-Based MPEG/DASH Adaptation Algorithm[J].IEEE Systems Journal,2016,10(2):859-868)所提出的FDASH算法则运用模糊逻辑控制器,根据当前播放缓存与目标缓存的差值和播放缓存变化量这两个参数,结合滑动窗口取最近一段时间内切片下载的平均速率数据,按照一定的规则控制输出码率。FDASH在缓存控制方面性能很好,但是仅以一段时间内均值作为带宽预测值,存在着估计值迟滞于实时带宽的情况,从而导致码率上升、下降的速度趋于迟缓,不能快速适应波动频率高的网络环境。文献《A novel bandwidth estimation method based on MACD for DASH》(Vu V H,Mashal I,Chung T Y.A Novel Bandwidth Estimation Method Based on MACD for DASH[J].Ksii Transactions on Internet&Information Systems,2017,11)提出了一种基于带宽估计的模型来选择比特率,利用MACD指标判断无线网络的波动趋势并预测带宽,然后相对独立地考虑缓存占用情况保守作出码率机械地上升、保持和下降选择,MACD指标选取的数据样本较大,因此对最近的带宽波动趋势感应比较迟钝,切片码率切换时间滞后,虽然视频码率能够比较平稳切换,但是平均码率偏低。
发明内容
对以上存在的问题,本发明提出了一种无线DASH流媒体码率平滑自适应传输方法,包括:
统计前N个切片的下载速率数据,预测无线网络的带宽趋势以及带宽值;
根据预测的带宽趋势、带宽值以及缓存占用情况,切片调度模型自适应选择最优码率。
优选的,预测无线网络的带宽值包括:
利用滑动窗口选定最近N个切片并统计切片的下载速率,计算出下载速率的平均值davg、标准差σN,并得到带宽偏移系数cv
若带宽偏移系数在集中(0,θ)之间时,则将网络状态看做是长期平稳或者短期波动,使用最近M个切片下载速率平均值作为带宽的预测值,其中θ为带宽偏移系数的稳定阈值,M≤N;
当带宽偏移系数cv>θ时,可以认为带宽具有持续性大幅上升或者下降趋势,考虑到与第i+1个切片越靠近的切片下载速率相关性越大,利用指数平均数指标(ExponentialMoving Average,EMA)平滑公式计算带宽的预测值;其中θ表示带宽偏移系数的额稳定阈值。
优选的,带宽偏移系数cv的计算包括:
Figure GDA0002648371850000041
其中,dj表示第j个切片的下载速率。
优选的,根据预测的带宽趋势、带宽值以及缓存占用情况,切片调度模型自适应选择最优码率包括:
S1、若当前第i个切片时的缓存占用q(t)满足q(t)<qmin,选择第i+1个切片的码率等级为最低码率等级,即li+1=r0
S2、若当前第i个切片时的缓存占用q(t)满足qmin≤q(t)<qlow,根据带宽变化趋势选择第i+1个切片的码率等级;
S3、若当前第i个切片时的缓存占用q(t)满足qlow≤q(t)<qhigh,根据带宽偏移系数cv和带宽变化趋势选择第i+1个切片的码率等级;
S4、若当前第i个切片时的缓存占用q(t)满足qhigh≤q(t)<qmax,延迟ts直到缓存占用下降到目标区间内后,根据cv和带宽变化趋势选择第i+1个切片的码率等级;
其中,qmin表示第一阈值,qlow表示第二阈值,qhigh表示第三阈值,qmax表示第四阈值。
优选的,步骤S2中根据带宽变化趋势选择第i+1个切片的码率等级包括:
S21、若第i个切片的下载速率小于等于第i-1个切片的下载速率,表示为di≤di-1,则采取保守下降策略,选择切片码率等级;
S22、若第i个切片的下载速率大于第i-1个切片的下载速率,表示为di>di-1,则采取保守上升策略,选择不高于带宽预测值的码率对应的等级。
优选的,步骤S3中根据带宽偏移系数cv和带宽变化趋势选择第i+1个切片的码率等级包括:
S31、若cv>θ且di>di-1,采取激进上升策略,选择不低于带宽预测值的最小码率所对应的等级;
S32、若cv>θ且di≤di-1,采取保守下降策略选择第i+1个切片的码率等级;
S33、若cv≤θ,采取平稳保持策略,选择和第i个切片相同的码率等级;
其中,di表示第i个切片的下载速率。
优选的,采用激进上升策略选择第i+1个切片的码率等级包括:
Figure GDA0002648371850000051
其中,li+1表示第i+1个切片的码率等级;
Figure GDA0002648371850000052
表示第i+1个切片带宽的预测值,rm表示第m个码率等级,s(rm)表示码率等级rm对应的码率,k表示码率等级的个数,R表示切片码率等级集合。
优选的,所述采取保守下降策略选择第i+1个切片的码率等级包括:
Figure GDA0002648371850000053
其中,li表示第i个切片的码率等级;s(li)表示第i个等级为li的切片的码率,
Figure GDA0002648371850000054
表示第i+1个切片带宽的预测值。
优选的,所述采取保守上升策略选择第i+1个切片的码率等级包括:
Figure GDA0002648371850000055
其中,li+1表示第i+1个切片的码率等级;
Figure GDA0002648371850000056
表示第i+1个切片带宽的预测值,rm表示第m个码率等级,s(rm)表示码率等级rm对应的码率,k表示表示码率等级的个数。
本发明主要包括带宽检测机制和切片调度模型两部分,通过算法中的带宽检测机制,客户端能够区分无线网络的短暂抖动效应以及持续变化趋势,同时预测可用带宽,并将这些信息传递给切片调度模型;切片调度模型,综合考虑带宽波动趋势、带宽预测结果、历史下载速率变化趋势和缓存占用情况,选择出合适等级的切片;本发明的方法考虑多组参数,对无线网络的带宽变化趋势做出准确判断的同时,可以“平滑”处理带宽的短暂波动;因此,本发明在维持较少码率切换次数的同时在视频播放过程中提供较高的平均码率,为观众提供良好的无线端视频体验质量。
附图说明
图1是本发明一种无线DASH流媒体码率平滑自适应传输方法流程图;
图2是本发明缓存阈值设置图;
图3是本发明切片调度模型执行流程图;
图4为本发明实施例中带宽变化示意图。
具体实施方式
为使本发明的要解决的技术问题、技术有点和技术成效更佳清晰,以下将结合附图对本发明进行进一步说明,但是不作为本发明的限定。本发明还可通过不同的实施方式进行应用,对于发明中不同的观点和应用,在符合本发明基本精神下可进行合适的改变。
为了在维持较少码率切换次数的同时在视频播放过程中提供较高的平均码率,为观众提供良好的无线端视频体验质量,本发明提供一种无线DASH流媒体码率平滑自适应传输方法,如图1,包括:
统计前N个切片的下载速率数据,预测无线网络的带宽趋势以及带宽值;
根据预测的带宽趋势、带宽值以及缓存占用情况,切片调度模型自适应选择最优码率。
若服务端将存储的视频进行切片,每个视频片段均具有k个不同码率等级{rm|r0,r1,…,rk-1},每个码率等级对应的码率为s(rm);
客户端从服务器获取MPD文件并提取相关信息,并完成对缓存区间的第一阈值qmin、第二阈值qlow、第三阈值qhigh、第四阈值qmax的初始化,缓存区间的第一阈值qmin、第二阈值qlow、第三阈值qhigh、第四阈值qmax之间的关系如图2,即0<qmin<qlow<qhigh<qmax
客户端向服务器发起切片的Get请求,以最低码率等级r0请求前三个切片,之后N-3(N≥10)个切片以不高于前一切片下载速率的最大码率下载。
执行带宽检测机制,统计最初N个切片的下载速率数据,在请求下载第N+1个切片之前,计算前N个切片下载期间的下载速率的平均值davg,和前N个切片下载速率数据的标准差σN,最后计算带宽的带宽偏移系数cv,通过判断带宽偏移系数cv是否处于稳定区间(0,θ)内;若带宽偏移系数cv在(0,θ)内,则计算最近M(M≤N)个切片下载速率的平均值作为带宽预测值;否则,使用EMA公式计算带宽预测值;其中θ表示带宽偏移系数的稳定阈值。
根据预测的带宽趋势、带宽值以及缓存占用情况,切片调度模型自适应选择最优码率,具体包括:
S1、若当前第i个切片时的缓存占用q(t)满足q(t)<qmin,选择第i+1个切片的码率等级为最低码率等级,即li+1=r0
S2、若当前第i个切片时的缓存占用q(t)满足qmin≤q(t)<qlow,根据带宽变化趋势选择第i+1个切片的码率等级;
S3、若当前第i个切片时的缓存占用q(t)满足qlow≤q(t)<qhigh,根据带宽偏移系数cv和带宽变化趋势选择第i+1个切片的码率等级;
S4、若当前第i个切片时的缓存占用q(t)满足qhigh≤q(t)<qmax,延迟ts直到缓存占用下降到目标区间内后,根据带宽偏移系数cv和带宽变化趋势选择第i+1个切片的码率等级;
其中,延迟ts直到缓存占用下降到目标区间内再下载第i+1个切片是为了防止缓存上溢,延迟ts可表示为ts=q(t)-qhigh,q(t)表示当前的缓存占用;为了保持码率的平稳变化,同qlow≤q(t)<qhigh情形,考虑带宽偏移系数cv和带宽变化趋势选择码率等级。
在确定码率等级并完成切片下载后,客户端根据用户需要考虑是否继续请求缓存视频,如果是则利用滑动窗口选取最近N个已下载执行带宽检测机制,之后执行切片调度模型选择切片;如此循环,达到视频码率自适应效果。
本实施例中,若服务器中存储有某一视频内容的视频切片,服务端将存储的视频切为多个视频片段,每个视频片段具有k个码率等级,本例中k取10,码率等级由0到9,每个等级的码率分别取300Kbps,450Kbps,700Kbps,1050Kbps,1400Kbps,2100Kbps,2800Kbps,3600Kbps,4750Kbps,5500Kbps。
客户端从服务器获取MPD文件并提取相关信息:切片播放时长τ(本例取2s)、码率大小和相应等级,完成对缓存阈值(qmin=4s、qlow=50s、qhigh=70s、qmax=80s)的初始化。
本例实施例中N取12,当户端向服务器发起切片的Get请求,以最低码率等级0请求前3个切片,之后9个切片以不高于前一切片下载速率的最大码率下载。
完成初始12个切片下载之后,统计它们的下载速率数据,在请求下载第13个切片之前,计算前12个切片的下载速率的平均值davg和标准差σN,最后计算带宽的带宽偏移系数cv,通过判断带宽偏移系数cv是否小于稳定阈值(本例带宽偏移系数的稳定阈值θ取0.2)内。若cv在(0,0.2)内,则计算最近10(本例M取10)个切片下载速率的平均值作为带宽预测值;否则,使用EMA公式计算带宽预测值,并将带宽偏移系数cv和带宽预测值
Figure GDA0002648371850000081
传递给切片调度模型。
若需预测第i+1个切片的带宽
Figure GDA0002648371850000082
则需要第(i-N+1)个切片~第i个切片这最近N个切片的下载速率的平均值davg、标准差σN以及带宽偏移系数cv,带宽偏移系数cv在数学理论中称为变异系数,可以认为和极差、标准差和方差一样,都是反映数据离散程度的绝对值。其数据大小不仅受变量值离散程度的影响,而且还受变量值平均水平大小的影响,最近N个切片的下载速率的平均值davg、标准差σN、带宽偏移系数cv表示为:
Figure GDA0002648371850000091
Figure GDA0002648371850000092
Figure GDA0002648371850000093
其中,di为已下载的第i个切片的下载速率,若第i个切片的码率等级为li,码率等级li对应的码率为s(li),第i个切片的播放时长为τ,第i个切片的下载花费的时长为t0,则di表示为
Figure GDA0002648371850000094
另外,若带宽偏移系数cv在集中(0,θ)之间时,则将网络状态看做是长期平稳或者短期波动,令最近的M个切片下载速率的平均值作为带宽预测值
Figure GDA0002648371850000095
Figure GDA0002648371850000096
表示为:
Figure GDA0002648371850000097
若cv>θ,对于下载速率单调递增或者单调递减的情形,利用速率差值计算带宽预测值
Figure GDA0002648371850000098
Figure GDA0002648371850000099
表示为:
Figure GDA00026483718500000910
其中,
Figure GDA00026483718500000911
为第i+1个切片的下载速率与第i个切片下载速率差值的估计值,
Figure GDA00026483718500000912
表示为:
Figure GDA00026483718500000913
其中,α为EMA公式的平滑指数,α=2/(1+L),L为下载速率单调周期(单调递增或者单调递减)。其中,L的值根据切片下载速率变化趋势进行确定,通过分析Δdj值的正负性,可以得出近期带宽的变化趋势是上升还是下降。若在一段时间内L个切片的下载速率差值都满足Δdj≥0且L>3,j∈[i-L-1,i],则带宽变化趋势为持续上升;同理,若在一段时间内L个切片的下载速率差值都满足Δdj≤0且L>3,j∈[i-L-1,i],则带宽一致性变化趋势为下降。否则若L≤3,带宽不具有一致性变化趋势,可当做平稳状态以均值作带宽预测值。Δdj表示第j个切片的下载速率与第j-1个切片的差值,表示为:
Δdj=dj-dj-1
若是在cv>θ时,切片下载速率不满足单调变化,则仍旧利用最近的M个切片下载速率的平均值作为带宽预测值
Figure GDA0002648371850000101
在计算出带宽偏移系数cv和带宽预测值
Figure GDA0002648371850000102
之后,开始执行切片调度模型,得出第i+1个切片的码率等级,如图3,包括以下情形:
情形一:若当前缓存占用q(t)满足q(t)<4s,选择第i+1个切片的码率等级为li+1=0。
情形二:若当前缓存占用q(t)满足4s≤q(t)<45s,根据网络吞吐量变化趋势选择码率等级,具体表示为:
1)若变化趋势是呈下降,即di≤di-1(实际下载速率降低),则采取保守下降策略,选择切片码率等级,每一次向下切换至多三个等级,保守下降策略选择码率等级,表示为:
Figure GDA0002648371850000103
2)若变化趋势是呈上升,即di>di-1(实际下载速率升高),采取保守上升策略,选择不高于带宽预测值的码率对应的等级,保守上升策略表示为:
Figure GDA0002648371850000111
且rm∈R;
其中,R表示切片码率等级集合。
情形三:若当前缓存占用q(t)满足45s≤q(t)<70s,则根据cv和带宽变化趋势选择码率等级:
1)若cv>0.2且di>di-1,采取激进上升策略,选择不低于带宽预测值的最小码率所对应的等级,其中,激进上升策略表示为:
Figure GDA0002648371850000112
且rm∈R;
2)若cv>0.2且di≤di-1,同情形二中的1)采取保守下降策略选择第i+1个切片的码率等级;
3)若cv≤0.2且di≤di-1,采取平稳保持策略,选择和前一切片相同的码率等级;
情形四:70s≤q<80s,为防止缓存上溢,延迟ts直到缓存占用下降到目标区间内再下载第i+1个切片,其中ts=q(t)-80s;为了保持码率的平稳变化,同qlow≤q(t)<qhigh情形,根据cv和带宽变化趋势选择码率等级。
在确定码率等级并完成切片下载后,客户端根据用户需要考虑是否继续请求缓存视频,如果是则利用滑动窗口选取最近12个已下载执行带宽检测机制,之后执行切片调度模型选择切片;如此循环,达到视频码率自适应效果。
视频传输过程中网络带宽的变化如图4所示,在整个传输过程中,带宽变化有明显的短暂波动(第51秒至第54秒)、上下抖动区间(第154秒至第166秒)以及长期下降趋势(第87秒至第120秒)。
根据本发明的传输方法,将客户端请求的初始码率设置为300Kbps。由图4所示,初始的网络带宽设定为3700Kbps,而初始码率设定为300Kbps,在以最低等级下载完前三个切片后,缓存快速上升,此时缓存占用会超过最低阈值。接着,后面9个切片根据前面切片的下载速率选择切片,视频码率迅速增大,此时缓存上升速率变小,但依旧保持上升。当前12个切片下载完成后,开始执行带宽检测机制,根据初始12个切片的下载速率估计带宽值,并判断带宽的平稳程度。由图4可知,在0s~51s播放启动期间带宽相对稳定,此时带宽偏移系数小于0.2,缓存占用会由4s~45s逐渐过渡到45s~70s区间,视频码率维持在3600Kbs水平。当客户端运行到第51秒时,带宽突然变大,但是估计带宽是依据51s之前的下载速率来选择的码率等级,所以选择的码率仍为3600Kbps。在51s~54s,带宽急剧上升,但是持续时间不久,这段时间下载速率较大,但是在与前11切片求平均后计算的带宽偏移系数值仍在0.2以内,取最近的10切片的下载速率求平均值,将会超过稳定时期的带宽值3700Kbps,但是达不到高于之前等级的码率4750Kbps。因此,下一个切片等级仍然同之前,但是缓存占用略微上升。接下来的54s~87s由于带宽稳定在3700Kbps,客户端会选择3600Kbps的切片,缓存占用维持在比较稳定范围内。
当传输进行到87s秒后,带宽急剧下降至1700Kbps,在这期间,最初的2~3切片依旧会按照接近于之前的码率等级来下载。之后,带宽偏移系数明显增大,超过阈值0.2。缓存也开始增加,这时候带宽检测机制切换至EMA指数计算带宽估计值,客户端开始以2~3个步长降低视频码率等级,直至降低到当前带宽以下,带宽偏移系数降到0.2以下,宽检测机制切换至以均值作为带宽估计值,码率将稳定在1400Kbps。当传输进行到120s秒后,带宽瞬间恢复到3700Kbps,同样,最初的2~3切片依旧会按照接近于之前的码率等级来下载。之后,带宽偏移系数明显增大,超过阈值0.2。缓存开始快速下降,这时候带宽检测机制切换至EMA指数计算带宽估计值,客户端开始以激进上升策略迅速提升码率等级,恢复到3600Kbps水平。
当传输进行到154s秒后,带宽进入到高频振动区间,此时但个切片的下载速率很不稳定,但是平均值相对波动较小,带宽偏移系数仍能够稳定在0.2以下,因此带宽预测值小幅度波动稳定,略低于3700Kbps,客户端将选码率下调并稳定在2800Kbps的切片。最后,在166s~200s期间,视频码率再次迅速恢复到3600Kbps水平。
本发明对无线网络变化特点进行了分析,并通过多组参数来控制码率自适应过程,在保证较少码率切换次数的条件下,为客户提供较高的视频码率,且尽量避免码率阶跃和骤降等情况出现,而码率偏移率的引入能够较快将初始码率切换到高码率上去,同时能够保证较低的初始播放时延,从而提供较好的QoE。
本发明通过综合考虑带宽、缓存以及历史下载速率,在保证平滑无线网络短暂波动的条件下,为客户提供较稳定的视频画质,且尽量避免码率阶跃和骤降等情况出现。同时,考虑激进上升和保守下降策略选择码率能够将视频维持在较高码率,从而提供较好的QoE。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:ROM、RAM、磁盘或光盘等。
以上所述本发明的具体实施方式,并不构成对本发明保护范围的限定。任何根据本发明的技术构思所做出的各种其他相应的改变与变形,均应包含在本发明权利要求的保护范围内。

Claims (7)

1.一种无线DASH流媒体码率平滑自适应传输方法,其特征在于,包括:
统计前N个切片的下载速率数据,预测无线网络的带宽趋势以及带宽值;
根据预测的带宽趋势、带宽值以及缓存占用情况,切片调度模型自适应选择最优码率,具体包括以下步骤:
S1、若当前第i个切片时的缓存占用q(t)满足q(t)<qmin,选择第i+1个切片的码率等级为最低码率等级,即li+1=r0
S2、若当前第i个切片时的缓存占用q(t)满足qmin≤q(t)<qlow,根据带宽变化趋势选择第i+1个切片的码率等级;
S3、若当前第i个切片时的缓存占用q(t)满足qlow≤q(t)<qhigh,根据带宽偏移系数cv和带宽变化趋势选择第i+1个切片的码率等级;
S4、若当前第i个切片时的缓存占用q(t)满足qhigh≤q(t)<qmax,延迟ts直到缓存占用下降到目标区间内后,根据cv和带宽变化趋势选择第i+1个切片的码率等级;
其中,带宽偏移系数cv表示为
Figure FDA0002796705480000011
dj表示第j个切片的下载速率;qmin表示第一阈值,qlow表示第二阈值,qhigh表示第三阈值,qmax表示第四阈值,且0<qmin<qlow<qhigh<qmax;li+1表示第i+1个切片的码率等级,r0表示码率等级为0。
2.根据权利要求1所述的一种无线DASH流媒体码率平滑自适应传输方法,其特征在于,预测无线网络的带宽值包括:
利用滑动窗口选定最近N个切片并统计切片的下载速率,计算出切片下载速率的平均值davg、标准差σN,并得到带宽偏移系数cv
若带宽偏移系数cv在(0,θ)之间时,则将网络状态看做是长期平稳或者短期波动,使用最近M个切片下载速率平均值作为带宽的预测值,其中θ为带宽偏移系数的稳定阈值,M≤N;
当带宽偏移系数cv>θ时,若下载速率在单调周期内呈单调上升或单调下降,则利用指数平均数指标EMA平滑公式计算带宽的预测值,否则使用最近M个切片下载速率平均值作为带宽的预测值。
3.根据权利要求1所述的一种无线DASH流媒体码率平滑自适应传输方法,其特征在于,步骤S2中根据带宽变化趋势选择第i+1个切片的码率等级包括:
S21、若第i个切片的下载速率di小于等于第i-1个切片的下载速率di-1,表示为di≤di-1,则采取保守下降策略,选择第i+1个切片的码率等级;
S22、若第i个切片的下载速率大于第i-1个切片的下载速率,表示为di>di-1,则采取保守上升策略,选择不高于带宽预测值的码率对应的等级作为第i+1个切片的码率等级。
4.根据权利要求3所述的一种无线DASH流媒体码率平滑自适应传输方法,其特征在于,所述采取保守上升策略选择第i+1个切片的码率等级包括:
Figure FDA0002796705480000021
其中,li+1表示第i+1个切片的码率等级;
Figure FDA0002796705480000022
表示第i+1个切片带宽的预测值,rm表示第m个码率等级,s(rm)表示码率等级rm对应的码率,k表示码率等级的个数,R表示切片码率等级集合。
5.根据权利要求1所述的一种无线DASH流媒体码率平滑自适应传输方法,其特征在于,步骤S3中根据带宽偏移系数cv和带宽变化趋势选择第i+1个切片的码率等级包括:
S31、若cv>θ且di>di-1,采取激进上升策略,选择不低于带宽预测值的最小码率所对应的等级;
S32、若cv>θ且di≤di-1,采取保守下降策略,选择第i+1个切片的码率等级;
S33、若cv≤θ,采取平稳保持策略,选择和第i个切片相同的码率等级;
其中,di表示第i个切片的下载速率,θ表示带宽偏移系数的稳定阈值。
6.根据权利要求5所述的一种无线DASH流媒体码率平滑自适应传输方法,其特征在于,采用激进上升策略选择第i+1个切片的码率等级包括:
Figure FDA0002796705480000031
其中,li+1表示第i+1个切片的码率等级;
Figure FDA0002796705480000032
表示第i+1个切片带宽的预测值,rm表示第m个码率等级,s(rm)表示码率等级rm对应的码率,k表示码率等级的个数,R表示切片码率等级集合。
7.根据权利要求5所述的一种无线DASH流媒体码率平滑自适应传输方法,其特征在于,所述采取保守下降策略选择第i+1个切片的码率等级包括:
Figure FDA0002796705480000033
其中,li表示第i个切片的码率等级;s(li)表示第i个等级为li的切片的码率;rm表示码率等级为m,m={0,1,...,k-1},k表示码率等级的个数,
Figure FDA0002796705480000034
表示第i+1个切片带宽的预测值。
CN201811019788.5A 2018-09-03 2018-09-03 一种无线dash流媒体码率平滑自适应传输方法 Active CN109040855B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811019788.5A CN109040855B (zh) 2018-09-03 2018-09-03 一种无线dash流媒体码率平滑自适应传输方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811019788.5A CN109040855B (zh) 2018-09-03 2018-09-03 一种无线dash流媒体码率平滑自适应传输方法

Publications (2)

Publication Number Publication Date
CN109040855A CN109040855A (zh) 2018-12-18
CN109040855B true CN109040855B (zh) 2021-01-29

Family

ID=64622803

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811019788.5A Active CN109040855B (zh) 2018-09-03 2018-09-03 一种无线dash流媒体码率平滑自适应传输方法

Country Status (1)

Country Link
CN (1) CN109040855B (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111510770B (zh) * 2019-01-30 2021-08-24 上海哔哩哔哩科技有限公司 切换清晰度的方法、装置、计算机设备及可读存储介质
CN109922010A (zh) * 2019-02-12 2019-06-21 成都德芯数字科技股份有限公司 缓存数据管理方法及装置
CN109862442B (zh) * 2019-02-22 2022-05-17 伟乐视讯科技股份有限公司 一种基于ip传输的输入流处理方法及处理装置
CN110012324B (zh) * 2019-03-28 2020-10-13 武汉大学 一种嵌入式无线视频传输的码率自适应方法、wifi相机、控制装置以及码率自适应系统
CN111314772B (zh) * 2019-11-29 2022-07-08 广州市百果园信息技术有限公司 一种视频下载码率的确定方法、装置、终端和存储介质
CN111031347A (zh) * 2019-11-29 2020-04-17 广州市百果园信息技术有限公司 一种视频处理的方法及装置、电子设备、存储介质
CN111225254B (zh) * 2020-01-20 2023-04-18 视联动力信息技术股份有限公司 一种视频传输方法、装置、终端设备及存储介质
CN111432270B (zh) * 2020-03-09 2022-03-11 重庆邮电大学 一种基于分层缓存的实时业务时延优化方法
CN111617466B (zh) * 2020-05-12 2023-04-28 咪咕文化科技有限公司 编码格式的确定方法、装置及云游戏的实现方法
CN111859218A (zh) * 2020-07-21 2020-10-30 广州华多网络科技有限公司 数据下载方法、装置、计算机设备和计算机可读存储介质
CN113301398B (zh) * 2020-07-27 2022-12-02 阿里巴巴集团控股有限公司 信息处理方法及系统、服务端设备、客户端设备
CN112437321B (zh) * 2020-11-11 2022-04-19 天津大学 一种基于直播流媒体的自适应码率计算方法
CN112423125A (zh) * 2020-11-20 2021-02-26 上海哔哩哔哩科技有限公司 视频加载方法及装置
CN112637631B (zh) * 2020-12-17 2022-04-26 清华大学 码率确定方法、装置、电子设备和存储介质
CN113114540B (zh) * 2021-04-23 2024-03-01 百果园技术(新加坡)有限公司 一种带宽预测器的设置、服务调整方法及相关装置
CN113645487B (zh) * 2021-07-14 2022-05-17 上海交通大学 码率自适应分配方法
CN113747229B (zh) * 2021-08-03 2022-08-02 上海交通大学 一种切片大小预测和自适应码率控制方法、系统及介质
CN113691880B (zh) * 2021-08-25 2024-04-16 三星电子(中国)研发中心 一种应用于dash低延迟直播流的带宽测量方法和设备
CN113810728B (zh) * 2021-08-31 2023-09-26 深圳力维智联技术有限公司 直播数据传输控制方法、装置及直播设备
CN115842928B (zh) * 2021-09-18 2024-03-12 腾讯科技(深圳)有限公司 视频码率切换方法、装置、计算机设备和存储介质
CN114007113B (zh) * 2021-11-01 2023-12-01 迪爱斯信息技术股份有限公司 视频码率自适应调整方法及其装置
CN114979726B (zh) * 2022-06-30 2023-09-26 重庆紫光华山智安科技有限公司 码率调整方法、装置、服务器和存储介质
CN117544809B (zh) * 2024-01-10 2024-03-26 北京科技大学 服务器端动态码率生成及推荐网络视频应用方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105376176A (zh) * 2014-08-21 2016-03-02 中国电信股份有限公司 保障移动互联网视频业务服务质量的方法、装置和系统
CN106686409A (zh) * 2015-11-09 2017-05-17 中国移动通信集团公司 一种流媒体码率自适应方法及装置、服务器、终端
CN107659601A (zh) * 2016-07-26 2018-02-02 中国科学院声学研究所 一种基于http自适应流的码率自适应方法
WO2018140158A1 (en) * 2017-01-30 2018-08-02 Euclid Discoveries, Llc Video characterization for smart enconding based on perceptual quality optimization
US10045053B1 (en) * 2017-08-23 2018-08-07 Amazon Technologies, Inc. Fragment insertion for live media streams

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9294531B2 (en) * 2012-07-12 2016-03-22 Futurewei Technologies, Inc. Signaling and processing content with variable bitrates for adaptive streaming
CN105025330B (zh) * 2014-04-30 2018-04-10 深圳Tcl新技术有限公司 基于dash协议的媒体文件播控方法和装置
CN106210777B (zh) * 2015-05-08 2019-04-23 北京大学 视频质量控制方法
WO2017031692A1 (zh) * 2015-08-25 2017-03-02 华为技术有限公司 视频下载方法、装置及系统
CN106993237B (zh) * 2017-04-13 2019-05-10 中北大学 基于mpeg-dash协议的动态自适应码率选择方法
CN107124603A (zh) * 2017-05-10 2017-09-01 中国电子科技集团公司第五十四研究所 一种基于缓存的多视点视频自适应传输方法
CN107613330B (zh) * 2017-10-20 2019-09-20 清华大学 一种视频码率自适应方法
CN108063955B (zh) * 2017-12-15 2020-02-11 重庆邮电大学 基于状态机的动态自适应视频传输的码率切换方法
CN108184152B (zh) * 2018-01-03 2020-01-24 湖北大学 一种dash传输系统两阶段客户端码率选择方法
CN108235131B (zh) * 2018-01-30 2020-07-03 重庆邮电大学 一种基于dash的全景视频自适应传输方法
CN108271048B (zh) * 2018-02-09 2020-08-07 北京邮电大学 一种兼顾吞吐量和视频缓冲的码率自适应调整装置和方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105376176A (zh) * 2014-08-21 2016-03-02 中国电信股份有限公司 保障移动互联网视频业务服务质量的方法、装置和系统
CN106686409A (zh) * 2015-11-09 2017-05-17 中国移动通信集团公司 一种流媒体码率自适应方法及装置、服务器、终端
CN107659601A (zh) * 2016-07-26 2018-02-02 中国科学院声学研究所 一种基于http自适应流的码率自适应方法
WO2018140158A1 (en) * 2017-01-30 2018-08-02 Euclid Discoveries, Llc Video characterization for smart enconding based on perceptual quality optimization
US10045053B1 (en) * 2017-08-23 2018-08-07 Amazon Technologies, Inc. Fragment insertion for live media streams

Also Published As

Publication number Publication date
CN109040855A (zh) 2018-12-18

Similar Documents

Publication Publication Date Title
CN109040855B (zh) 一种无线dash流媒体码率平滑自适应传输方法
CN109302623B (zh) 一种基于QoE模型动态自适应视频的传输方法
El Essaili et al. QoE-based traffic and resource management for adaptive HTTP video delivery in LTE
CN109379632B (zh) 一种动态自适应http流的码率渐进切换方法及系统
CN108833996B (zh) 分布式dash系统中服务节点选择、更新和码率自适应方法
CN108184152B (zh) 一种dash传输系统两阶段客户端码率选择方法
Le et al. Buffer-based bitrate adaptation for adaptive HTTP streaming
US8578436B2 (en) Method for two time-scales video stream transmission control
US10320869B2 (en) Network-capacity optimized adaptive HTTP streaming
CN108063955B (zh) 基于状态机的动态自适应视频传输的码率切换方法
KR101982290B1 (ko) 적응적 스트리밍 서비스의 체감 품질 향상을 위한 콘텐츠 특성 기반 스트리밍 시스템 및 방법
CN107135411B (zh) 一种调整视频码率的方法及电子设备
WO2005002156A1 (en) Method and apparatus for dynamic bandwidth adaptation
CN108833995B (zh) 一种无线网络环境中自适应流媒体的传输方法
CN113301392A (zh) 码率确定方法、装置、设备及存储介质
US9131251B2 (en) Use of a receive-window size advertised by a client to a content server to change a video stream bitrate streamed by the content server
KR102647461B1 (ko) 비디오 스트리밍에서의 다중 프로토콜 예측 및 세션내 적응
Rahman et al. SABA: Segment and buffer aware rate adaptation algorithm for streaming over HTTP
CN113207015B (zh) 任务调度策略生成方法、装置、存储介质和计算机设备
Choi et al. SATE: Providing stable and agile adaptation in HTTP-based video streaming
CN107659601B (zh) 一种基于http自适应流的码率自适应方法
Le et al. Seamless mobile video streaming over HTTP/2 with gradual quality transitions
Togou et al. An elastic DASH-based bitrate adaptation scheme for smooth on-demand video streaming
Park et al. Client-side rate adaptation scheme for HTTP adaptive streaming based on playout buffer model
Mushtaq et al. Regulating QoE for adaptive video streaming using BBF method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant