CN109413456A - 一种面向基于http的动态自适应流媒体多假设码率自适应系统及方法 - Google Patents

一种面向基于http的动态自适应流媒体多假设码率自适应系统及方法 Download PDF

Info

Publication number
CN109413456A
CN109413456A CN201811167151.0A CN201811167151A CN109413456A CN 109413456 A CN109413456 A CN 109413456A CN 201811167151 A CN201811167151 A CN 201811167151A CN 109413456 A CN109413456 A CN 109413456A
Authority
CN
China
Prior art keywords
adaptive approach
code rate
video
indicate
http
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811167151.0A
Other languages
English (en)
Other versions
CN109413456B (zh
Inventor
元辉
胡晓倩
孙国霞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shandong University
Original Assignee
Shandong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shandong University filed Critical Shandong University
Priority to CN201811167151.0A priority Critical patent/CN109413456B/zh
Publication of CN109413456A publication Critical patent/CN109413456A/zh
Application granted granted Critical
Publication of CN109413456B publication Critical patent/CN109413456B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明涉及一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统及方法，包括依次连接的服务器端、信道端和客户端；客户端包括MPD文件获取解析模块、自适应方法集合、控制器、码率集合模块、缓存区；自适应方法集合连接控制器，控制器、码率集合模块、缓存区依次连接；每个自适应方法运行一种码率请求算法，每个自适应方法运行的自适应方法均不相同；本发明使用户的长期体验质量达到最优。本发明可以集成多种单一的速率自适应方法，各方法之间优势互补，相互独立，具有通用性和易操作性。与现有的码率优先的方法和基于比例微分控制器的方法相比，本发明回报值更高，弥补了基于增强学习的方法在开始阶段回报极其不稳定的缺陷。

Description

一种面向基于HTTP的动态自适应流媒体多假设码率自适应系 统及方法
技术领域
本发明涉及一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统及方法，属于多媒体通信技术领域。
背景技术
在过去几年，视频流媒体已经成为互联网流量的主要来源。面对流媒体流量日益增长的需求，人们开发了新的高效视频流媒体技术，例如MPEG制定的基于HTTP的动态自适应流媒体(DASH)技术。DASH标准是新一代流媒体标准中的佼佼者，它融合了面向连接的流媒体技术以及渐进式下载技术的优点，具有高效、可扩展以及兼容性强的特点。DASH标准实现了混合的媒体分发方式，给用户提供不间断的流媒体服务，采用HTTP协议完成了视频内容的下载分发，视频具有特定的格式并且依据DASH制定的规则进行传输。DASH是在HTTP/TCP协议之上进行视频传输的，相比于过去的RTP/UDP标准，DASH更易于配置，特别是可以极大地简化防火墙和网络地址转换器的遍历。此外，DASH采用的是标准HTTP服务器，部署成本相对较低，可以很容易部署到内容传输网络。因此，这些年来DASH广泛用于动态网络环境下为用户提供连续的视频流服务，并且针对DASH系统提出了一系列速率适配机制，以便提供与动态网络条件下的吞吐量相匹配的视频质量，从而丰富用户的体验。
DASH的关键概念是，将每个视频以不同的比特率，编码成多个表示(representation)，然后将这些表示再分成视频块(segment)(通常时间间隔为1-10s)。在DASH传输连接开始时，首先由客户端从服务器下载媒体呈现描述文件(MultimediaPresentation Description,MPD)，该MPD文件中记录了视频的所有可用块的描述信息(例如，URL地址，块长度，质量水平，分辨率等)。然后，客户端动态地根据MPD文件及其速率自适应逻辑，请求和切换到特定比特率的块，基本传输过程如图1。简单概括来说，就是在服务器端提前存好同一内容的不同码率、不同分辨率的多个视频块以及相应的MPD，客户端在播放时即可以根据自身性能以及网络环境选择最适宜的码率版本。
流媒体服务的关键在于提高用户的体验质量(Quality of Experience,QoE)。值得注意的是，在DASH协议中并未规定客户端的速率自适应逻辑。在下载视频时，通常会遭受大量的质量波动或者播放缓冲区下溢(即，出现播放中断)，这极大地降低了用户的QoE。由于网络带宽的高动态性，使得为用户提供稳定的、高质量的视频服务成了一项挑战。因此，如何在客户端设计一种高效的速率自适应策略，实现DASH系统中的自适应码率切换以提高用户的QoE，成为DASH最重要的研究课题之一。
发明内容
在基于DASH的自适应流媒体传输过程中，由于网络带宽动态多变，任何一种单一的码率自适应方法都无法长时期有效地适配网络的变化。因此，为了提高用户的QoE，本发明提供了一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统，本发明还提供了一种面向基于HTTP的动态自适应流媒体多假设码率自适应方法
与现有的基于单一模型的码率自适应方法不同，本发明将多种码率自适应方法结合在一起，充分发挥不同方法在不同网络环境下的优势。然后采用决策控制器，选择最合适的码率自适应方法，以适应不同的网络条件。
术语解释：
1、连续信道，是指当输入集和输出集都是连续集时，称信道为连续信道。
2、短波动信道，是指信道容量在短期内有波动，即信道容量发生变化后，短暂时间内又恢复到原来的信道容量。
3、长波动信道，是指信道容量在长期内有波动，即信道容量变动后维持在恒定值，一段时间后又恢复到原来的信道容量。
4、长期QoE，是指一段时间内评估的用户体验质量。
5、瞬时QoE，是指某一时刻的用户体验质量。
本发明的技术方案为：
一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统，包括依次连接的服务器端、信道端和客户端；
所述服务器端包括MPD文件和视频块Segment；MPD文件用于描述服务器端可用的内容、不同码流的选择和媒体文件的URL地址；视频块Segment包括视频块形式的现有多媒体比特流，存储在一个或多个媒体文件中；
所述信道端为所述服务器端与所述客户端之间通信的媒介；
所述客户端包括MPD文件获取解析模块、自适应方法集合、控制器、码率集合模块、缓存区；所述MPD文件获取解析模块连接所述自适应方法集合，所述自适应方法集合连接所述控制器，所述控制器、所述码率集合模块、所述缓存区依次连接；
所述自适应方法集合包括若干个自适应方法，每个自适应方法对应一种码率请求算法，每种码率请求算法均不相同，每种码率请求算法之间是并行关系且相互独立；
所述控制器用于选择自适应方法；
所述码率集合模块用于存储下一时刻需要下载的码率等级；
所述缓存区用于表示已下载的视频时长，即客户端观看的视频时长。
根据本发明优选的，若干种码率请求算法包括码率优先的方法、基于比例微分控制器的方法、基于增强学习的方法。
根据本发明优选的，所述信道端为连续信道、短波动信道、长波动信道或更为动态的Markov信道。
一种面向基于HTTP的动态自适应流媒体多假设码率自适应方法，运行于所述面向基于HTTP的动态自适应流媒体多假设码率自适应系统，包括步骤如下：
(1)在流媒体播放过程中，所述客户端通过所述信道端下载所述服务器端上的MPD文件；
(2)通过MPD文件获取解析模块解析MPD文件；由于MPD文件是以XML的格式进行内容表述的，MPD文件获取解析模块相当于具有特定用途的XML解析器。在点播系统中需要从MPD文件中解析出来的信息包括视频下载信息(视频可用码率，URL地址)和视频解码播放信息(视频的分辨率、编码格式和帧率)。该模块将视频下载信息发送给视频段下载模块供视频段下载模块做自适应决策使用，将视频解码播放信息发送给视频段播放模块做视频播放之用。
(3)所述控制器从自适应方法集合中选择滑动窗口n中具有最大的平均瞬时回报值对应的自适应方法，或者，所述控制器从自适应方法集合中选择前一集视频段中具有最大的平均瞬时回报值对应的自适应方法；瞬时回报函数值Rwd是指瞬时的用户体验指标，用数值的形式进行反馈；平均瞬时回报值是指一集范围内瞬时回报值的统计平均；
(4)通过步骤(3)选择的自适应方法向服务器端发送视频下载请求；进行第一次视频段下载时一般选择低码率的初始段以减少初始播放延迟，之后每次请求的视频段的码率由步骤(3)选择的自适应方法决定。通过自适应码率切换算法，利用之前视频段的下载状态(如前几段视频的下载时间或播放器缓存区建立情况)决定下一视频段的码率。
(5)服务器端响应，将相应码率的视频段传送到客户端供用户观看。
根据本发明优选的，所述步骤(3)，所述控制器从自适应方法集合中选择滑动窗口n中具有最大的平均瞬时回报值对应的自适应方法，包括：
A、从自适应方法集合中任选一个自适应方法向所述服务器端真实的发送HTTP请求，获得系统信息，包括带宽估计值、视频复杂度和缓存区状态；
B、根据步骤A获取的系统信息，其它自适应方法发送虚拟请求；虚拟请求是指客户端并未向服务器端发出实际的请求，服务器端自然也没有响应，而是在每个自适应算法机制内的虚拟模式，目的是为了完善自身的经验，更快达到收敛。
C、通过式(Ⅰ)计算每个自适应方法对应的瞬时回报函数值：
式(Ⅰ)中，Rwd表示任一自适应方法对应的瞬时回报函数值，是对某一时刻用户体验质量的反馈；qt表示t时刻的视频质量；|qt-qt-1|表示t时刻的视频质量波动；表示t时刻的下载时间，bt表示t时刻的缓存长度，表示t时刻的下载时间与缓存长度的差，当该差值大于零，表示发生视频中断(即重缓存事件)；PB是安全缓存长度；ω1表示质量波动部分的权重参数，ω2表示视频中断部分的权重参数，ω3表示安全缓存部分的权重参数，ω1，ω2和ω3值都为正数；
进一步优选的，ω1＝2，ω2＝50，ω3＝0.0001。
通过式(Ⅱ)计算瞬时回报函数值的平均值
式(Ⅱ)中，在请求第t个视频段时，表示第t段之前的n个已请求段的瞬时回报函数值Rwd的平均值。
根据本发明优选的，所述步骤(3)，所述控制器从自适应方法集合中选择前一集视频段中具有最大的平均瞬时回报值对应的自适应方法，包括：
a、从自适应方法集合中任选一个自适应方法向所述服务器端真实的发送HTTP请求，获得系统信息，包括带宽估计值、视频复杂度和缓存区状态；
b、根据步骤a获取的系统信息，其它自适应方法发送虚拟请求；虚拟请求是指客户端并未向服务器端发出实际的请求，服务器端自然也没有响应，而是在每个自适应算法机制内的虚拟模式，目的是为了完善自身的经验，更快达到收敛。
c、通过式(Ⅰ)计算每个自适应方法对应的瞬时回报函数值：
式(Ⅰ)中，Rwd是指任一自适应方法对应的瞬时回报函数值，是对某一时刻用户体验质量的反馈；qt表示t时刻的视频质量；|qt-qt-1|表示t时刻的视频质量波动；表示t时刻的下载时间，bt表示t时刻的缓存长度，表示t时刻的下载时间与缓存长度的差，当该差值大于零，表示发生视频中断(即重缓存事件)；PB是安全缓存长度；ω1表示质量波动部分的权重参数，ω2表示视频中断部分的权重参数，ω3表示安全缓存部分的权重参数，ω1，ω2和ω3值都为正数；
进一步优选的，ω1＝2，ω2＝50，ω3＝0.0001。
通过式(Ⅲ)计算平均瞬时回报值
式(Ⅲ)中，以集为单位，1集中包含N个视频段，Rwd,t是指第t视频段的瞬时回报函数值；表示每隔一集的时间检查每种自适应方法的平均瞬时回报值，在一段时间内进行实际请求时，只使用一种自适应方法的决策方案,其它自适应方法则进行虚拟请求。
本发明的有益效果为：
1、本发明为DASH客户端提供了一种新型的速率自适应决策框架，可以根据当前信道环境，实施高效的挑选出最适合于当前时刻的决策机制，使用户的长期体验质量达到最优。
2、本发明可以集成多种单一的速率自适应方法，各方法之间优势互补，相互独立，具有通用性和易操作性。
3、与现有的码率优先的方法和基于比例微分控制器的方法相比，本发明回报值更高，弥补了基于增强学习的方法在开始阶段回报极其不稳定的缺陷。
附图说明
图1是本发明一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统框架图；
图2是本发明一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统概述图；
图3是马尔科夫信道波形示意图；
图4是用户再下载某个视频段后的瞬时回报值比较图；
具体实施方式
下面结合说明书附图和实施例对本发明作进一步限定，但不限于此。
实施例1
一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统，如图1、图2所示，包括依次连接的服务器端、信道端和客户端；
服务器端包括MPD文件和视频块Segment；MPD文件用于描述服务器端可用的内容、不同码流的选择和媒体文件的URL地址；视频块Segment包括视频块形式的现有多媒体比特流，存储在一个或多个媒体文件中；
信道端为服务器端与客户端之间通信的媒介；
客户端通过HTTP Get命令请求合适的segment，并同时监控网络带宽的变动，必要时还会调整segment的码率，保证视频的流畅播放。
客户端包括MPD文件获取解析模块、自适应方法集合、控制器、码率集合模块、缓存区；MPD文件获取解析模块连接自适应方法集合，自适应方法集合连接控制器，控制器、码率集合模块、缓存区依次连接；
自适应方法集合包括若干个自适应方法，每个自适应方法对应一种码率请求算法，每种码率请求算法均不相同，每种码率请求算法之间是并行关系且相互独立；在某一时刻，有且只有一种自适应方法发送真实请求，其它的自适应方法，则利用该真实请求后获得的带宽估计值、视频复杂度等系统信息，进行虚拟请求，计算每个自适应方法的长期QoE。
控制器用于选择自适应方法；
码率集合模块用于存储下一时刻需要下载的码率等级；
缓存区用于表示已下载的视频时长，即客户端观看的视频时长。
若干种码率请求算法包括码率优先的方法、基于比例微分控制器的方法、基于增强学习的方法。
信道端为连续信道、短波动信道、长波动信道或更为动态的Markov信道。马尔科夫信道波形示意图如图3所示。
与现有的单一数学模型设计的速率自适应方法不同，本发明将多种码率自适应方法结合在一起，并加入控制器，在不同的视频块下载时间，选择适合当前时刻的最佳方法，以适应不同的网络条件。基于多假设框架，本发明将能够最大化用户长期QoE的码率定义为最佳请求码率，以限制视频质量的波动和重缓冲事件的发生。
实施例2
一种面向基于HTTP的动态自适应流媒体多假设码率自适应方法，运行于实施例1所述面向基于HTTP的动态自适应流媒体多假设码率自适应系统，包括步骤如下：
(1)在流媒体播放过程中，客户端通过信道端下载服务器端上的MPD文件；
(2)通过MPD文件获取解析模块解析MPD文件；解析后得到多媒体内容的时间长度、媒体类型、分辨率、最小/最大带宽、码率和媒体各编码组件、媒体组件在网络中的位置、访问控制授权和媒体URI等信息。
(3)控制器从自适应方法集合中选择滑动窗口n中具有最大的平均瞬时回报值对应的自适应方法，包括：
A、从自适应方法集合中任选一个自适应方法向服务器端真实的发送HTTP请求，获得系统信息，包括带宽估计值、视频复杂度和缓存区状态；
B、根据步骤A获取的系统信息，其它自适应方法发送虚拟请求；虚拟请求是指客户端并未向服务器端发出实际的请求，服务器端自然也没有响应，而是在每个自适应算法机制内的虚拟模式，目的是为了完善自身的经验，更快达到收敛。
C、通过式(Ⅰ)计算每个自适应方法对应的瞬时回报函数值：
式(Ⅰ)中，Rwd表示任一自适应方法对应的瞬时回报函数值，是对某一时刻用户体验质量的反馈；qt表示t时刻的视频质量；|qt-qt-1|表示t时刻的视频质量波动；表示t时刻的下载时间，bt表示t时刻的缓存长度，表示t时刻的下载时间与缓存长度的差，当该差值大于零，表示发生视频中断(即重缓存事件)；PB是安全缓存长度；ω1表示质量波动部分的权重参数，ω2表示视频中断部分的权重参数，ω3表示安全缓存部分的权重参数，ω1，ω2和ω3值都为正数；ω1＝2，ω2＝50，ω3＝0.0001。
通过式(Ⅱ)计算瞬时回报函数值的平均值
式(Ⅱ)中，在请求第t个视频段时，表示第t段之前的n个已请求段的瞬时回报函数值Rwd的平均值。
(4)通过步骤(3)选择的自适应方法向服务器端发送视频下载请求；进行第一次视频段下载时一般选择低码率的初始段以减少初始播放延迟，之后每次请求的视频段的码率由步骤(3)选择的自适应方法决定。通过自适应码率切换算法，利用之前视频段的下载状态(如前几段视频的下载时间或播放器缓存区建立情况)决定下一视频段的码率。
(5)服务器端响应，将相应码率的视频段传送到客户端供用户观看。
实施例3
一种面向基于HTTP的动态自适应流媒体多假设码率自适应方法，运行于实施例1所述面向基于HTTP的动态自适应流媒体多假设码率自适应系统，包括步骤如下：
(1)在流媒体播放过程中，客户端通过信道端下载服务器端上的MPD文件；
(2)通过MPD文件获取解析模块解析MPD文件；由于MPD文件是以XML的格式进行内容表述的，MPD文件获取解析模块相当于具有特定用途的XML解析器。在点播系统中需要从MPD文件中解析出来的信息包括视频下载信息(视频可用码率，URL地址)和视频解码播放信息(视频的分辨率、编码格式和帧率)。该模块将视频下载信息发送给视频段下载模块供视频段下载模块做自适应决策使用，将视频解码播放信息发送给视频段播放模块做视频播放之用。
(3)控制器从自适应方法集合中选择前一集视频段中具有最大的平均瞬时回报值对应的自适应方法，包括：
a、从自适应方法集合中任选一个自适应方法向所述服务器端真实的发送HTTP请求，获得系统信息，包括带宽估计值、视频复杂度和缓存区状态；
b、根据步骤a获取的系统信息，其它自适应方法发送虚拟请求；虚拟请求是指客户端并未向服务器端发出实际的请求，服务器端自然也没有响应，而是在每个自适应算法机制内的虚拟模式，目的是为了完善自身的经验，更快达到收敛。
c、通过式(Ⅰ)计算每个自适应方法对应的瞬时回报函数值：
式(Ⅰ)中，Rwd是指任一自适应方法对应的瞬时回报函数值，是对某一时刻用户体验质量的反馈；qt表示t时刻的视频质量；|qt-qt-1|表示t时刻的视频质量波动；表示t时刻的下载时间，bt表示t时刻的缓存长度，表示t时刻的下载时间与缓存长度的差，当该差值大于零，表示发生视频中断(即重缓存事件)；PB是安全缓存长度；ω1表示质量波动部分的权重参数，ω2表示视频中断部分的权重参数，ω3表示安全缓存部分的权重参数，ω1，ω2和ω3值都为正数；ω1＝2，ω2＝50，ω3＝0.0001。
通过式(Ⅲ)计算平均瞬时回报值
式(Ⅲ)中，以集为单位，1集中包含0个视频段，Rwd,t是指第t视频段的瞬时回报函数值；表示每隔一集的时间检查每种自适应方法的平均瞬时回报值，在一段时间内进行实际请求时，只使用一种自适应方法的决策方案,其它自适应方法则进行虚拟请求。
(4)通过步骤(3)选择的自适应方法向服务器端发送视频下载请求；进行第一次视频段下载时一般选择低码率的初始段以减少初始播放延迟，之后每次请求的视频段的码率由步骤(3)选择的自适应方法决定。通过自适应码率切换算法，利用之前视频段的下载状态(如前几段视频的下载时间或播放器缓存区建立情况)决定下一视频段的码率。
(5)服务器端响应，将相应码率的视频段传送到客户端供用户观看。
用户再下载某个视频段后的瞬时回报值比较图如图4所示，有图4可知，与现有的码率优先的方法、基于比例微分控制器的方法相比，本发明回报值更高，弥补了基于增强学习的方法在开始阶段回报极其不稳定的缺陷。

Claims (7)

1.一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统，其特征在于，包括依次连接的服务器端、信道端和客户端；
所述服务器端包括MPD文件和视频块Segment；MPD文件用于描述服务器端可用的内容、不同码流的选择和媒体文件的URL地址；视频块Segment包括视频块形式的现有多媒体比特流，存储在一个或多个媒体文件中；
所述信道端为所述服务器端与所述客户端之间通信的媒介；
所述客户端包括MPD文件获取解析模块、自适应方法集合、控制器、码率集合模块、缓存区；所述MPD文件获取解析模块连接所述自适应方法集合，所述自适应方法集合连接所述控制器，所述控制器、所述码率集合模块、所述缓存区依次连接；
所述自适应方法集合包括若干个自适应方法，每个自适应方法对应一种码率请求算法，每种码率请求算法均不相同，每种码率请求算法之间是并行关系且相互独立；
所述控制器用于选择自适应方法；
所述码率集合模块用于存储下一时刻需要下载的码率等级；
所述缓存区用于表示已下载的视频时长，即客户端观看的视频时长。
2.根据权利要求1所述的一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统，其特征在于，若干种码率请求算法包括码率优先的方法、基于比例微分控制器的方法、基于增强学习的方法。
3.根据权利要求1所述的一种面向基于HTTP的动态自适应流媒体多假设码率自适应系统，其特征在于，所述信道端为连续信道、短波动信道、长波动信道或Markov信道。
4.一种面向基于HTTP的动态自适应流媒体多假设码率自适应方法，运行于权利要求1所述面向基于HTTP的动态自适应流媒体多假设码率自适应系统，其特征在于，包括步骤如下：
(1)在流媒体播放过程中，所述客户端通过所述信道端下载所述服务器端上的MPD文件；
(2)通过MPD文件获取解析模块解析MPD文件；
(3)所述控制器从自适应方法集合中选择滑动窗口n中具有最大的平均瞬时回报值对应的自适应方法，或者，所述控制器从自适应方法集合中选择前一集视频段中具有最大的平均瞬时回报值对应的自适应方法；瞬时回报函数值Rwd是指瞬时的用户体验指标，用数值的形式进行反馈；平均瞬时回报值是指一集范围内瞬时回报值的统计平均；
(4)通过步骤(3)选择的自适应方法向服务器端发送视频下载请求；
(5)服务器端响应，将相应码率的视频段传送到客户端供用户观看。
5.根据权利要求4所述的一种面向基于HTTP的动态自适应流媒体多假设码率自适应方法，其特征在于，所述步骤(3)，所述控制器从自适应方法集合中选择滑动窗口n中具有最大的平均瞬时回报值对应的自适应方法，包括：
A、从自适应方法集合中任选一个自适应方法向所述服务器端真实的发送HTTP请求，获得系统信息，包括带宽估计值、视频复杂度和缓存区状态；
B、根据步骤A获取的系统信息，其它自适应方法发送虚拟请求；
C、通过式(I)计算每个自适应方法对应的瞬时回报函数值：
式(I)中，Rwd表示任一自适应方法对应的瞬时回报函数值，是对某一时刻用户体验质量的反馈；qt表示t时刻的视频质量；|qt-qt-1|表示t时刻的视频质量波动；表示t时刻的下载时间，bt表示t时刻的缓存长度，表示t时刻的下载时间与缓存长度的差，当该差值大于零，表示发生视频中断；PB是安全缓存长度；ω1表示质量波动部分的权重参数，ω2表示视频中断部分的权重参数，ω3表示安全缓存部分的权重参数，ω1，ω2和ω3值都为正数；
通过式(II)计算瞬时回报函数值的平均值
式(II)中，在请求第t个视频段时，表示第t段之前的n个已请求段的瞬时回报函数值Rwd的平均值。
6.根据权利要求4所述的一种面向基于HTTP的动态自适应流媒体多假设码率自适应方法，其特征在于，所述步骤(3)，所述控制器从自适应方法集合中选择前一集视频段中具有最大的平均瞬时回报值对应的自适应方法，包括：
a、从自适应方法集合中任选一个自适应方法向所述服务器端真实的发送HTTP请求，获得系统信息，包括带宽估计值、视频复杂度和缓存区状态；
b、根据步骤a获取的系统信息，其它自适应方法发送虚拟请求；
c、通过式(I)计算每个自适应方法对应的瞬时回报函数值：
式(I)中，Rwd是指任一自适应方法对应的瞬时回报函数值，是对某一时刻用户体验质量的反馈；qt表示t时刻的视频质量；|qt-qt-1|表示t时刻的视频质量波动；表示t时刻的下载时间，bt表示t时刻的缓存长度，表示t时刻的下载时间与缓存长度的差，当该差值大于零，表示发生视频中断；PB是安全缓存长度；ω1表示质量波动部分的权重参数，ω2表示视频中断部分的权重参数，ω3表示安全缓存部分的权重参数，ω1，ω2和ω3值都为正数；
通过式(III)计算平均瞬时回报值
式(III)中，以集为单位，1集中包含N个视频段，Rwa，t是指第t视频段的瞬时回报函数值；表示每隔一集的时间检查每种自适应方法的平均瞬时回报值，在一段时间内进行实际请求时，只使用一种自适应方法的决策方案，其它自适应方法则进行虚拟请求。
7.根据权利要求5或6所述的一种面向基于HTTP的动态自适应流媒体多假设码率自适应方法，其特征在于，ω1＝2，ω2＝50，ω3＝0.0001。
CN201811167151.0A 2018-10-08 2018-10-08 一种面向基于http的动态自适应流媒体多假设码率自适应系统及方法 Active CN109413456B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811167151.0A CN109413456B (zh) 2018-10-08 2018-10-08 一种面向基于http的动态自适应流媒体多假设码率自适应系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811167151.0A CN109413456B (zh) 2018-10-08 2018-10-08 一种面向基于http的动态自适应流媒体多假设码率自适应系统及方法

Publications (2)

Publication Number Publication Date
CN109413456A true CN109413456A (zh) 2019-03-01
CN109413456B CN109413456B (zh) 2021-05-18

Family

ID=65466835

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811167151.0A Active CN109413456B (zh) 2018-10-08 2018-10-08 一种面向基于http的动态自适应流媒体多假设码率自适应系统及方法

Country Status (1)

Country Link
CN (1) CN109413456B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109819312A (zh) * 2019-03-19 2019-05-28 四川长虹电器股份有限公司 基于动态缓冲区的播放器系统及其控制方法
CN110381036A (zh) * 2019-06-26 2019-10-25 东南大学 一种用于dash流媒体的tcp拥塞控制方法
CN111490983A (zh) * 2020-04-03 2020-08-04 武汉理工大学 一种基于视频感知质量的自适应流媒体码率选择系统
CN113301398A (zh) * 2020-07-27 2021-08-24 阿里巴巴集团控股有限公司 信息处理方法及系统、服务端设备、客户端设备
CN113747184A (zh) * 2021-08-03 2021-12-03 上海交通大学 基于缓冲区位移的低延迟比特率自适应方法、设备及介质
CN113852818A (zh) * 2020-06-28 2021-12-28 上海交通大学 一种自适应码率传输的服务器及码率确定方法
CN114885208A (zh) * 2022-03-21 2022-08-09 中南大学 Ndn网络下可伸缩流媒体传输的动态自适应方法、设备及介质
CN115914680A (zh) * 2022-10-13 2023-04-04 中国传媒大学 一种面向短视频流的联合视频下载和动态码率自适应方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103945245A (zh) * 2014-04-16 2014-07-23 上海交通大学 一种dash码率切换方法以及快速视频启动的方法
CN106375790A (zh) * 2016-09-23 2017-02-01 西安交通大学 一种QoE驱动的多频道HAS码率自适应调度方法
CN106470350A (zh) * 2015-08-21 2017-03-01 中国电信股份有限公司 基于动态比特率的码率自适应方法及装置
CN106658226A (zh) * 2015-10-28 2017-05-10 中兴通讯股份有限公司 一种播放方法及装置
CN107613330A (zh) * 2017-10-20 2018-01-19 清华大学 一种视频码率自适应方法
CN107770633A (zh) * 2017-09-14 2018-03-06 华为技术有限公司 码率自适应算法优化系统、方法及终端
CN108063961A (zh) * 2017-12-22 2018-05-22 北京联合网视文化传播有限公司 一种基于强化学习的自适应码率视频传输方法以及系统
US20180160159A1 (en) * 2016-12-01 2018-06-07 The Directv Group, Inc. Enhanced streaming source change
US20180184145A1 (en) * 2016-12-22 2018-06-28 Cisco Technology, Inc. Abr network profile selection engine
US20180278975A1 (en) * 2011-08-30 2018-09-27 Divx, Llc Systems and Methods for Encoding and Streaming Video Encoded Using a Plurality of Maximum Bitrate Levels

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180278975A1 (en) * 2011-08-30 2018-09-27 Divx, Llc Systems and Methods for Encoding and Streaming Video Encoded Using a Plurality of Maximum Bitrate Levels
CN103945245A (zh) * 2014-04-16 2014-07-23 上海交通大学 一种dash码率切换方法以及快速视频启动的方法
CN106470350A (zh) * 2015-08-21 2017-03-01 中国电信股份有限公司 基于动态比特率的码率自适应方法及装置
CN106658226A (zh) * 2015-10-28 2017-05-10 中兴通讯股份有限公司 一种播放方法及装置
CN106375790A (zh) * 2016-09-23 2017-02-01 西安交通大学 一种QoE驱动的多频道HAS码率自适应调度方法
US20180160159A1 (en) * 2016-12-01 2018-06-07 The Directv Group, Inc. Enhanced streaming source change
US20180184145A1 (en) * 2016-12-22 2018-06-28 Cisco Technology, Inc. Abr network profile selection engine
CN107770633A (zh) * 2017-09-14 2018-03-06 华为技术有限公司 码率自适应算法优化系统、方法及终端
CN107613330A (zh) * 2017-10-20 2018-01-19 清华大学 一种视频码率自适应方法
CN108063961A (zh) * 2017-12-22 2018-05-22 北京联合网视文化传播有限公司 一种基于强化学习的自适应码率视频传输方法以及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
XIAOQI YIN等: "A control-theoretic approach for dynamic adaptive video streaming over HTTP", 《PROC.ACM CONFERENCE ON SPECIAL INTEREST GROUP ON DATA COMMUNICATION (SIGCOMM)》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109819312A (zh) * 2019-03-19 2019-05-28 四川长虹电器股份有限公司 基于动态缓冲区的播放器系统及其控制方法
CN110381036A (zh) * 2019-06-26 2019-10-25 东南大学 一种用于dash流媒体的tcp拥塞控制方法
CN111490983A (zh) * 2020-04-03 2020-08-04 武汉理工大学 一种基于视频感知质量的自适应流媒体码率选择系统
CN111490983B (zh) * 2020-04-03 2021-06-04 武汉理工大学 一种基于视频感知质量的自适应流媒体码率选择系统
CN113852818A (zh) * 2020-06-28 2021-12-28 上海交通大学 一种自适应码率传输的服务器及码率确定方法
CN113301398A (zh) * 2020-07-27 2021-08-24 阿里巴巴集团控股有限公司 信息处理方法及系统、服务端设备、客户端设备
CN113747184A (zh) * 2021-08-03 2021-12-03 上海交通大学 基于缓冲区位移的低延迟比特率自适应方法、设备及介质
CN114885208A (zh) * 2022-03-21 2022-08-09 中南大学 Ndn网络下可伸缩流媒体传输的动态自适应方法、设备及介质
CN114885208B (zh) * 2022-03-21 2023-08-08 中南大学 Ndn网络下可伸缩流媒体传输的动态自适应方法、设备及介质
CN115914680A (zh) * 2022-10-13 2023-04-04 中国传媒大学 一种面向短视频流的联合视频下载和动态码率自适应方法

Also Published As

Publication number Publication date
CN109413456B (zh) 2021-05-18

Similar Documents

Publication Publication Date Title
CN109413456A (zh) 一种面向基于http的动态自适应流媒体多假设码率自适应系统及方法
US11076187B2 (en) Systems and methods for performing quality based streaming
US10298985B2 (en) Systems and methods for performing quality based streaming
CN100426865C (zh) 根据内容属性自适应控制缓冲量的设备和方法
CN102232298B (zh) 媒体内容的传输处理方法、装置与系统
KR101737325B1 (ko) 멀티미디어 시스템에서 멀티미디어 서비스의 경험 품질 감소를 줄이는 방법 및 장치
RU2622621C2 (ru) Система и способ для потоковой передачи воспроизводимого контента
KR101484900B1 (ko) 코덱이 적용된 프레임 크기로의 오디오 분할
JP7059509B1 (ja) ピア・トゥ・ピアネットワークにおけるストリーミングコンテンツの配信方法
CN107707937A (zh) 基于hls协议的时移优化方法及系统
KR101982290B1 (ko) 적응적 스트리밍 서비스의 체감 품질 향상을 위한 콘텐츠 특성 기반 스트리밍 시스템 및 방법
CN105323604B (zh) 一种QoE驱动的HTTP流媒体点播缓冲区控制方法
CN101778104A (zh) 一种实现自适应带宽播放流媒体的系统及其方法
CN105393516A (zh) 在自适应流送中用缓冲器和范围约束来进行质量优化
CN101156388A (zh) 用于控制可变位速率数据的数据包传输的技术
RU2598805C2 (ru) Способ для динамической адаптации частоты следования битов при приеме и соответствующий приемник
CN106303562B (zh) 基于pi控制的多视点视频自适应传输控制算法
KR102652518B1 (ko) 비디오 스트리밍을 위한 세션 기반 적응적 재생 프로파일 판정
CN102739627A (zh) 视频切换播放方法及系统
CN106453270B (zh) 基于pi控制流媒体的自适应传输算法
WO2017084277A1 (zh) 在线媒体服务的码流自适应方法及系统
US20060031564A1 (en) Methods and systems for streaming data at increasing transmission rates
CN106454317B (zh) 基于模糊控制的立体视频质量自适应算法
CN107124603A (zh) 一种基于缓存的多视点视频自适应传输方法
KR102304476B1 (ko) 적응적 스트리밍 서비스를 위한 다중 경로 기반 블록 전송 시스템 및 스트리밍 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant