CN116132746A - 一种动态码率自适应网络视频传输方法及终端设备 - Google Patents
一种动态码率自适应网络视频传输方法及终端设备 Download PDFInfo
- Publication number
- CN116132746A CN116132746A CN202111347058.XA CN202111347058A CN116132746A CN 116132746 A CN116132746 A CN 116132746A CN 202111347058 A CN202111347058 A CN 202111347058A CN 116132746 A CN116132746 A CN 116132746A
- Authority
- CN
- China
- Prior art keywords
- server
- information
- video
- network
- client
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 53
- 230000005540 biological transmission Effects 0.000 title claims abstract description 37
- 230000000903 blocking effect Effects 0.000 claims description 17
- 230000003044 adaptive effect Effects 0.000 claims description 12
- 238000011084 recovery Methods 0.000 claims description 9
- 238000004891 communication Methods 0.000 claims description 5
- 230000006399 behavior Effects 0.000 claims description 4
- 238000004146 energy storage Methods 0.000 claims 1
- 230000011664 signaling Effects 0.000 abstract description 5
- 230000008569 process Effects 0.000 description 9
- 238000012544 monitoring process Methods 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000006978 adaptation Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000003139 buffering effect Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000011217 control strategy Methods 0.000 description 2
- 230000002787 reinforcement Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229920003087 methylethyl cellulose Polymers 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000013468 resource allocation Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/437—Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/4424—Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/654—Transmission by server directed to the client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种动态码率自适应网络视频传输方法及终端设备，视频传输方法包括：向所述边缘侧服务器发送请求信息，所述请求信息中携带有目标缓冲区的长度信息、时间戳以及客户端感知的网络信息；接收所述边缘侧服务器发送的视频质量参考信息和目标媒体文件段；基于所述视频质量参考信息配置播放参数，以及，在基于所述媒体文件填充所述目标缓冲区的长度到达指定阈值的情况下，开始执行播放。本公开的方法充分利用边缘计算的特点，实现利用边缘侧服务器向用户提供视频服务，并且本公开的方法不需要单独的网元来负责信息的传输，不会增加网络的复杂性和信令开销。
Description
技术领域
本发明涉及通信技术领域，尤其涉及一种动态码率自适应网络视频传输方法及终端设备。
背景技术
多接入边缘计算(Multi-access Edge Computing，MEC)的基本概念在2014年由ETSI(欧洲电信标准协会)正式提出，并且ETSI成立了相关的规范工作组。在2016年，欧洲电信标准协会又将边缘计算的场景从移动蜂窝网络中推广到了其他的无线接入网络，而原有的概念也进一步扩展成了多接入MEC，现在MEC逐渐成为5G中的重要技术之一。根据ETSI的定义，移动边缘计算通过在网络边缘侧部署相应的基础设施，并向广大用户提供网络、存储、计算等能力的平台。
随着互联网的不断发展，视频流应用将在不久的将来主导互联网流量已成为共同愿景。同时，随着新兴的多媒体应用的出现，如虚拟现实(VR)和增强现实(AR)技术，未来互联网架构支持4K超高清视频内容流媒体已经成为了基本要求。在5G网络的背景下，运营商的主要目标之一是为用户提供有保证的用户体验质量(Quality of Experience，QoE)。在这种情况下，QoE的保证目标是双重的，首先，应提供无缝的流媒体体验，同时应尽可能减少播放中断。其次，应保证视频播放具有较高的比特率。
近年来，一些视频内容提供商已经采用动态自适应HTTP视频流(DynamicAdaptive Streaming over HTTP，DASH)也称为MPEG-DASH来提供视频流服务。虽然MPEG-DASH有许多好处，例如通过现有的视频质量自适应算法提供更加灵活的码率自适应，并且在现有的HTTP基础设施上易于实现，同时基于TCP使其意味着可靠的内容传输，可以避免例如由I帧丢失引起的视频质量下降。但是另一方面，当无线移动用户设备采用DASH流式传输视频时，传统的DASH往往都是采用由客户端驱动的方式，DASH这种客户端驱动和分散的性质限制了客户端和服务器或网络行为之间的控制和协调，从而导致了次优的流性能。
随着移动终端用户数量的不断攀升以及网络通信技术的飞速发展，各用户会有相同的数据流需求，例如交互式网络电视、音频或者视频多播数据流、体育赛事直播等，广播多播业务技术将在5G系统中扮演重要角色，具有较大的发展前景。利用无线信道的信息传输的特性，可以将各用户都需要的单播、组播和广播信号进行同时传输，充分利用下行传输链路的通信效率，节约频谱资源。
现有方法中没有结合5G边缘计算的特点，并且需要设置单独的网络元素来负责信息的传输，额外增加网络的复杂性和信令开销。
发明内容
本发明实施例提供一种动态码率自适应网络视频传输方法及终端设备，用以充分利用边缘计算的特点，实现利用边缘侧服务器向用户提供视频服务。
本发明实施例提供一种动态码率自适应网络视频传输方法，应用于用户的客户端、由边缘侧服务器和远端服务器组成的网络架构，其中所述边缘侧服务器设置在靠近用户的一侧，通过骨干网络与所述远端服务器实现通信，具备存储能力，用以为所述客户端提供视频服务，所述视频传输方法包括：
向所述边缘侧服务器发送请求信息，所述请求信息中携带有目标缓冲区的长度信息、时间戳以及客户端感知的网络信息；
接收所述边缘侧服务器发送的视频质量参考信息和目标媒体文件段；
基于所述视频质量参考信息配置播放参数，以及，在基于所述媒体文件填充所述目标缓冲区的长度到达指定阈值的情况下，开始执行播放。
在一些实施例中，在向所述边缘侧服务器发送请求信息之前，所述视频传输方法，还包括：向所述边缘侧服务器发送第一请求信息，以请求所述边缘侧服务器的MPD文件，并基于所述MPD文件的媒体信息请求指定码率的目标媒体文件段；以及
在所述客户端无法确认其网络信息的情况下，根据所述MPD文件请求最低码流的目标媒体文件段。
在一些实施例中，在执行播放后，所述客户端基于所述MPD文件检测是否下载完成目标媒体文件的最后一个段；
在未下载完成目标媒体文件的最后一个段的情况下，判断所述目标缓冲区是否填充到达上限，在未到达上限的情况下，继续执行下载。
在一些实施例中，在未下载完成目标媒体文件的最后一个段的情况下，还包括：检测所述目标缓冲区是否被播放行为消耗完毕，若所述目标缓冲区被消耗完毕，则确定播放卡顿，向所述边缘侧服务器发送卡顿信息，所述卡顿信息中具有卡顿的时间戳；以及
继续获取目标媒体文件段，并在回复播放后向所述边缘侧服务器发送恢复信息，所述恢复信息具有恢复的时间戳。
在一些实施例中，所述边缘侧服务器包括视频代理子服务器，网络辅助子服务器和本地视频源子服务器；
所述视频代理子服务器，被配置为获取所述请求信息；
所述网络辅助子服务器，被配置为基于所述请求信息向所述客户端发送视频质量参考信息；
所述本地视频源子服务器，被配置为基于所述请求信息实现向所述客户端发送目标媒体文件段。
在一些实施例中，所述视频代理子服务器，还被配置为在基于所述请求信息确定目标媒体文件段不存在于本地缓存中的情况下，将所述请求信息发送至所述远端服务器，以从所述远端服务器获取相应的资源后再发送给所述客户端。
在一些实施例中，所述网络辅助子服务器，还被配置为基于各时间戳确定播放相关事件，并基于所述播放相关事件确定视频质量参考信息，所述播放相关事件包括开始下载，结束下载，开始卡顿以及开始重新播放。
本发明实施例还提供一种终端设备，所述终端设备包括处理器和存储器，所述存储器中安装有客户端程序，所述客户端程序被处理器调用时实现本公开各实施例所述的动态码率自适应网络视频传输方法。
本发明实施例充分利用边缘计算的特点，实现利用边缘侧服务器向用户提供视频服务，并且本公开的方法不需要单独的网元来负责信息的传输，不会增加网络的复杂性和信令开销。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1为本公开的视频传输方法的基本架构示意图；
图2为本公开的视频传输方法的基本流程图；
图3为本公开的视频传输方法中边缘侧服务器的基本架构。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明实施例提供一种动态码率自适应网络视频传输方法，应用于用户的客户端、由边缘侧服务器和远端服务器组成的网络架构，其中所述边缘侧服务器设置在靠近用户的一侧，通过骨干网络与所述远端服务器实现通信，具备存储能力，用以为所述客户端提供视频服务。如图1所示，本公开的方法将MEC作为边缘侧服务器具有普通远端服务器和现有CDN不具备的功能。部署DASH服务的网络运营商的目的是为网络中的用户提供一致的服务质量，而且内容提供商希望给所有之前保证能够获取网络和服务的用户提供足够高的QoE。即使在用户面数据拥塞的时候，内容提供商还是希望能够为某些高级用户提供稳定的特定的服务质量，而这就需要运营商们能够通过影响其QoS控制和资源分配以支持这种需求。
本公开的方法的MEC处在用户和Internet之间，具备存储能力，而且更靠近用户，具有延迟低，带宽高的特点，适合做高速缓存，而且MEC是运营商的基础设施，和骨干网的通信能力强，适合做视频内容的预取。
MEC作为边缘云平台对QoS有比较好的控制，加之其具有网络监控的能力，而且能够对无线侧资源进行管控，能够为用户提供对无线网络中短期吞吐量的更好的估计，能够提供实时准确的无线接入网信息使得DASH传输能更好的适应无线网络的状况避免客户端缓冲区欠载而出现卡顿的情况，故MEC对在蜂窝网络视频传输优化有很大帮助。
MEC同时是服务提供商部署业务的节点，适合部署一些控制策略以持续保障用户QoE。
MEC作为边缘节点，可以做多边缘节点的协同缓存协同控制等。
如图2所示，所述视频传输方法包括如下步骤：
在S201中、向所述边缘侧服务器发送请求信息，所述请求信息中携带有目标缓冲区的长度信息、时间戳以及客户端感知的网络信息。本公开的方法所指的请求信息是客户端请求视频数据的一段时候发送的请求，在用户播放一个视频数据的过程中，可以将视频分为连续的多个视频段，每次发送请求信息来请求一个视频段。该请求信息包括下请求以及下载结束后的第一post请求，其中可以在下载结束后的第一post请求中携带目标缓冲区的长度信息、时间戳以及客户端感知的网络信息，其中客户端感知的网络信息可以用于描述客户端当前所处的网络环境。
在S202中、接收所述边缘侧服务器发送的视频质量参考信息和目标媒体文件段。边缘侧服务器在接收到请求信息后，可以根据客户端感知的网络信息来向客户端发送视频质量参考信息和目标媒体文件段。
在S203中、基于所述视频质量参考信息配置播放参数，以及，在基于所述媒体文件填充所述目标缓冲区的长度到达指定阈值的情况下，开始执行播放。每次下载完毕后，客户端检测是否缓冲区长度达到设定的播放阈值，若达到则开始播放视频，若没达到则继续下载视频段填充缓冲区直到达到视频可以播放的阈值。
本发明实施例充分利用边缘计算的特点，实现利用边缘侧服务器向用户提供视频服务，并且本公开的方法不需要单独的网元来负责信息的传输，不会增加网络的复杂性和信令开销。
在一些实施例中，在向所述边缘侧服务器发送请求信息之前，所述视频传输方法，还包括：向所述边缘侧服务器发送第一请求信息，以请求所述边缘侧服务器的MPD文件，并基于所述MPD文件的媒体信息请求指定码率的目标媒体文件段；以及
在所述客户端无法确认其网络信息的情况下，根据所述MPD文件请求最低码流的目标媒体文件段。
具体的，在客户端需要播放某个视频之前，可以向所述边缘侧服务器发送第一请求信息，第一请求信息可以是第二post请求，用以请求所述边缘侧服务器的MPD文件，并基于所述MPD文件的媒体信息请求指定码率的目标媒体文件段。在首次请求的时，可以从最低码率去开始请求，也就是说在客户端没有对当前网络信息有认知的情况下，对自动请求最低码率的视频以保证用户观看视频的流畅。也即在开始下载目标媒体文件段之前，还可以向边缘侧服务器的服务和网络辅助服子服务器发送第二post请求，该第二post请求携带当前请求的时间戳等信息，以用于边缘侧服务器确定客户端的播放相关事件。在发送第二post请求之后，发送前述请求信息，请求指定码率的视频段，下载完毕再向服务器发送第一post请求，请求携带信息有当前缓冲区的长度信息、当前客户端感知的网络信息、时间戳等。
在一些实施例中，在执行播放后，所述客户端基于所述MPD文件检测是否下载完成目标媒体文件的最后一个段；在未下载完成目标媒体文件的最后一个段的情况下，判断所述目标缓冲区是否填充到达上限，在未到达上限的情况下，继续执行下载。
具体的，在客户端开始播放视频之后，其下载任务不会停止，下载文件(视频段)是填充目标缓冲区的行为，而播放视频是消耗目标缓冲区的行为。目标缓冲区会有一个最大值，而开始播放的缓冲区阈值是小于其缓冲区最大值的，因此客户端开始播放消耗该缓冲区的时候，也在一致填充该缓冲区。在填充该缓冲区的过程中和服务器端的交互和播放前述填充缓冲区的交互类似，也是在准备下载之前就发送即将下载的第二post请求，下载完毕之后同时发送第一、第二post请求去获得下一段视并上报客户端本身的信息。
在每次下载完毕，客户端可以根据MPD文件去检测是否下载完视频的最后的一个段，如果下载完毕则停止下载，否则去判断缓冲区是否达到上限，没有达到的话继续下载填充缓冲区。
在一些实施例中，在未下载完成目标媒体文件的最后一个段的情况下，还包括：检测所述目标缓冲区是否被播放行为消耗完毕，若所述目标缓冲区被消耗完毕，则确定播放卡顿，向所述边缘侧服务器发送卡顿信息，所述卡顿信息中具有卡顿的时间戳；以及
继续获取目标媒体文件段，并在回复播放后向所述边缘侧服务器发送恢复信息，所述恢复信息具有恢复的时间戳。
播放视频是消耗目标缓冲区的行为，本示例中每消耗一段目标缓冲区客户端执行缓冲区检测，根据MPD文件如果播放完毕最后一个视频段则结束播放，如果不是最后一个视频段则检测缓冲区是否消耗完毕，如果没有消耗完毕，则继续去下载视频，进而去播放视频。如果缓冲区消耗完毕，则播放卡顿，同时向MEC上的服务和网络辅助服务器发送卡顿信息，该信息包括卡顿的时间戳等信息。同时去下载视频段重新填充缓冲区，一旦恢复播放也向服务器发送信息表示重新恢复播放，该信息包括时间戳等信息。
在一些实施例中，所述边缘侧服务器包括视频代理子服务器，网络辅助子服务器和本地视频源子服务器；
所述视频代理子服务器，被配置为获取所述请求信息；
所述网络辅助子服务器，被配置为基于所述请求信息向所述客户端发送视频质量参考信息；
所述本地视频源子服务器，被配置为基于所述请求信息实现向所述客户端发送目标媒体文件段。
在一些实施例中，在MEC上部署有服务和网络辅助的相关服务模块，主要由无线信息服务模块，辅助决策服务模块，缓存预取服务模块，指标采集服务模块，其中：
无线信息服务模块，主要负责对DASH客户端提供无线侧信息，包括无线链路状况，当前无线环境下空口资源的竞争情况，比如当前基站下有多少用户在使用流量业务，还包括MEC到骨干网络的网络情况，比如当前MEC到远端视频服务器的相关时延、带宽等。DASH客户端可以采用HTTP GET协议获取该部分数据，作为DASH客户端进行决策的辅助信息使用。DASH客户端可以把该信息作为其自适应算法的部分输入去感知无线侧的快速波动以弥补客户端对无线网络感知的迟钝。
辅助决策服务模块，该模块可以由MEC服务器上的决策器结合DASH客户端的指标信息和相关决策算法，比如强化学习或者深度强化学习算法等，进行辅助决策。服务提供商的相关控制策略也可以部署该模块，通过部署的相关控制策略，服务提供商可以根据用户的分级去分配不同的服务资源。也可以部署相关的带宽分配策略以保证用户的公平性。该服务模块实际是对客户端驱动的一种补充，实际上也可以由服务端完全控制码率的调整，这样客户端侧就不需要进行码率的选择，但这是比较极端的选择，实际生产部署场景完全由服务器做决策会给服务器带来太大的压力。
缓存预取服务模块，该模块负责管理视频段的缓存和从远端服务器预取视频。缓存上主要是负责在有限的磁盘空间去部署相应的缓存策略以提高目标文件命中率。预取是在客户端请求某视频资源的时候对不在缓存内的视频事先从远端视频服务器缓存到MEC处以减少时延。同时在预取上可以部署相关的预取策略以保证用户的QoE。
指标采集服务模块，主要负责收集来自DASH客户端的视频相关的度量信息，比如客户端的平均带宽，当前buffer等级，最初播放时延，HTTP请求等信息。这些信息主要是为了辅助决策服务，便于统计客户端的状态作为算法的输入。同时统计用户QoE指标有利于检测调试故障，管理流传输性能，允许网络运营商和服务提供商提供基于QoE感知的网络适应和服务提供。
如图3所示，边缘侧服务器包括视频代理子服务器(视频代理服务器)，网络辅助子服务器(网络辅助服务)和本地视频源子服务器(本地Tomcat视频服务器)。其中视频代理子服务器和网络辅助子服务器可以采用Jetty实现，本地视频源子服务器采用tomcat实现。视频代理子服务器和网络辅助子服务器并不是互相独立的，两个子服务器之间有必要的联系，比如视频代理获得的信息可以为网络辅助所用。网络辅助服务的一些结果也可以作为视频代理服务的参考信息。
具体的说，边缘侧服务器的视频代理子服务器：该子服务器是实际客户端播放视频时候的网址和端口，基于所述请求信息功能实现回复客户端的请求。反向代理即客户端请求的地址是代理的地址和端口。
在一些实施例中，所述视频代理子服务器，还被配置为在基于所述请求信息确定目标媒体文件段不存在于本地缓存中的情况下，将所述请求信息发送至所述远端服务器，以从所述远端服务器获取相应的资源后再发送给所述客户端。也即该代理子服务器还根据客户端的请求，从后端的视频服务器上获取资源，然后再把视频等资源返回给客户端。在这个过程中，视频代理子服务器可以获得来自客户端的请求等信息，比如统计其请求的视频段数从而得知其播放过程。此外，代理服务需要通过判断MEC上视频缓存的情况，如果当前视频不在缓存区，那么将从把客户端的请求分发到远端视频服务器后获取资源再返回给客户端。如果本地视频源子服务器有缓存，那么直接从本地视频源子服务器获取资源再返回客户端。
此外视频代理子服务器可以通过控制返回给客户端的流量速度来控制用户的下行带宽，还可以对后端服务器(远端服务器)返回的内容进行修改以实现内容的过滤等功能。该功能实现主要是重写了Jetty的rewriteTarget、onResponseContent、newWriteListener等方法。其中rewriteTarget负责选择后端的视频服务器，需要把客户端请求的url中信息替换为相应的后端服务器的地址。
边缘侧服务器的网络辅助子服务器：该子服务器对应客户端的四个与MEC交互的流程，并做出相应的决策。具体的监听服务可以通过Servlet去实现，在该服务中会出现js跨域访问的问题，需要在每个Servlet返回的response的header添加相应的字段。
边缘侧服务器的本地tomcat视频子服务器：该服务主要负责处理客户端请求的内容，包括html文件，js文件，MPD文件，视频文件等，同时负责缓存内容的存放。该服务工作在8088端口。
在一些实施例中，所述网络辅助子服务器，还被配置为基于各时间戳确定播放相关事件，并基于所述播放相关事件确定视频质量参考信息，所述播放相关事件包括开始下载，结束下载，开始卡顿以及开始重新播放。
具体网络辅助子服务器的监听流程包括：
开始下载：该监听对应于前端的每一段开始下载时候，通过获取前端传递的时间戳准确知道其开始下载的时间，结合其下载完毕的时间可以计算客户端的带宽水平和网络状况。
结束下载：该监听对应于前端的每一段下载结束的时候，获取前端交互的当前带宽和缓冲区信息，同时可以获得下载结束的时间戳。然后基于客户端传来的信息，进行服务和网络辅助操作。比如可以进行预取操作，通过检测客户端缓冲区的状态是处于低级状态还是缓冲区满的状态，来决定预取的段数。或者通过检测客户端缓冲区状态可以采取相应的资源控制策略去保证用户的QoE。还可以结合MEC上无线侧信息和客户端侧信息采取一些自适应的算法去辅助客户端做出决策。同时可以和客户端交互无线侧信息辅助客户端决策。
开始卡顿：负责监听客户端的卡顿情况，记录卡顿的时间戳，结合重新开始播放的时间戳可以计算出客户端的卡顿时长。通过检测卡顿状态可以通过采取相应的带宽控制策略或者负载均衡策略去实现客户端的重新的播放。
开始重新播放：负责监听客户端重新回到播放状态。主要配合检测卡顿的监听。
综上，本公开的视频传输方法基于5G边缘计算在边缘侧进行动态码率自适应视频的传输，不需要单独的网元进行信息传输，不会增加网络的复杂性和信令开销。本公开的方法基于云边端协同的思想，在边缘侧获取端、云侧的网络等状态信息，针对相关的协议、流程等进行了定义，细化了在5G边缘侧进行服务和网络辅助的DASH的方法。利用本公开的方法还可以基于5G边缘计算平台上的无线网络信息服务(RNIS)，根据当前用户端侧的无线信道质量动态调整用户视频码率，提高用户的观看质量。
本发明实施例还提供一种终端设备，所述终端设备包括处理器和存储器，所述存储器中安装有客户端程序，所述客户端程序被处理器调用时实现本公开各实施例所述的动态码率自适应网络视频传输方法。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。
Claims (8)
1.一种动态码率自适应网络视频传输方法，其特征在于，应用于用户的客户端、由边缘侧服务器和远端服务器组成的网络架构，其中所述边缘侧服务器设置在靠近用户的一侧，通过骨干网络与所述远端服务器实现通信，具备存储能力，用以为所述客户端提供视频服务，所述视频传输方法包括：
向所述边缘侧服务器发送请求信息，所述请求信息中携带有目标缓冲区的长度信息、时间戳以及客户端感知的网络信息；
接收所述边缘侧服务器发送的视频质量参考信息和目标媒体文件段；
基于所述视频质量参考信息配置播放参数，以及，在基于所述媒体文件填充所述目标缓冲区的长度到达指定阈值的情况下，开始执行播放。
2.如权利要求1所述的动态码率自适应网络视频传输方法，其特征在于，在向所述边缘侧服务器发送请求信息之前，所述视频传输方法，还包括：向所述边缘侧服务器发送第一请求信息，以请求所述边缘侧服务器的MPD文件，并基于所述MPD文件的媒体信息请求指定码率的目标媒体文件段；以及
在所述客户端无法确认其网络信息的情况下，根据所述MPD文件请求最低码流的目标媒体文件段。
3.如权利要求1所述的动态码率自适应网络视频传输方法，其特征在于，在执行播放后，所述客户端基于所述MPD文件检测是否下载完成目标媒体文件的最后一个段；
在未下载完成目标媒体文件的最后一个段的情况下，判断所述目标缓冲区是否填充到达上限，在未到达上限的情况下，继续执行下载。
4.如权利要求3所述的动态码率自适应网络视频传输方法，其特征在于，在未下载完成目标媒体文件的最后一个段的情况下，还包括：检测所述目标缓冲区是否被播放行为消耗完毕，若所述目标缓冲区被消耗完毕，则确定播放卡顿，向所述边缘侧服务器发送卡顿信息，所述卡顿信息中具有卡顿的时间戳；以及
继续获取目标媒体文件段，并在回复播放后向所述边缘侧服务器发送恢复信息，所述恢复信息具有恢复的时间戳。
5.如权利要求4所述的动态码率自适应网络视频传输方法，其特征在于，所述边缘侧服务器包括视频代理子服务器，网络辅助子服务器和本地视频源子服务器；
所述视频代理子服务器，被配置为获取所述请求信息；
所述网络辅助子服务器，被配置为基于所述请求信息向所述客户端发送视频质量参考信息；
所述本地视频源子服务器，被配置为基于所述请求信息实现向所述客户端发送目标媒体文件段。
6.如权利要求5所述的动态码率自适应网络视频传输方法，其特征在于，所述视频代理子服务器，还被配置为在基于所述请求信息确定目标媒体文件段不存在于本地缓存中的情况下，将所述请求信息发送至所述远端服务器，以从所述远端服务器获取相应的资源后再发送给所述客户端。
7.如权利要求5所述的动态码率自适应网络视频传输方法，其特征在于，所述网络辅助子服务器，还被配置为基于各时间戳确定播放相关事件，并基于所述播放相关事件确定视频质量参考信息，所述播放相关事件包括开始下载，结束下载，开始卡顿以及开始重新播放。
8.一种终端设备，其特征在于，所述终端设备包括处理器和存储器，所述存储器中安装有客户端程序，所述客户端程序被处理器调用时实现如权利要求1-7任一项所述的动态码率自适应网络视频传输方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111347058.XA CN116132746A (zh) | 2021-11-15 | 2021-11-15 | 一种动态码率自适应网络视频传输方法及终端设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111347058.XA CN116132746A (zh) | 2021-11-15 | 2021-11-15 | 一种动态码率自适应网络视频传输方法及终端设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN116132746A true CN116132746A (zh) | 2023-05-16 |
Family
ID=86310484
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111347058.XA Pending CN116132746A (zh) | 2021-11-15 | 2021-11-15 | 一种动态码率自适应网络视频传输方法及终端设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116132746A (zh) |
-
2021
- 2021-11-15 CN CN202111347058.XA patent/CN116132746A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110536179B (zh) | 一种内容分发系统和方法 | |
| CN108141443B (zh) | 用户设备、媒体流传输网络辅助节点和媒体流传输方法 | |
| US11924650B2 (en) | System, method and service product for content delivery | |
| US9326132B2 (en) | Method for retrieving content by a wireless communication device having first and second radio access interfaces, wireless communication device and communication system | |
| Liu et al. | Rate adaptation for dynamic adaptive streaming over HTTP in content distribution network | |
| AU2013296976B2 (en) | Methods for quality-aware adaptive streaming over hypertext transfer protocol | |
| CN104040992B (zh) | 移动网络中具有改善的效率的媒体流 | |
| US9615113B2 (en) | Video content delivery over wireless access networks with quality of service (QOS) guarantees | |
| RU2571732C2 (ru) | Управляющее устройство и способ управления передачей потока видеоданных по сети на сетевое пользовательское устройство | |
| US20130086279A1 (en) | Systems and methods for media service delivery | |
| KR101982290B1 (ko) | 적응적 스트리밍 서비스의 체감 품질 향상을 위한 콘텐츠 특성 기반 스트리밍 시스템 및 방법 | |
| CN106993014B (zh) | 缓存内容的调整方法、装置及系统 | |
| WO2005002156A1 (en) | Method and apparatus for dynamic bandwidth adaptation | |
| KR101718127B1 (ko) | 상황 인지 스트리밍 서비스를 위한 콘텐츠 패키징 시스템 및 스트리밍 방법 | |
| Sieber et al. | The cost of aggressive HTTP adaptive streaming: Quantifying YouTube's redundant traffic | |
| US9131251B2 (en) | Use of a receive-window size advertised by a client to a content server to change a video stream bitrate streamed by the content server | |
| CN113316005A (zh) | 一种调整视频码率的方法和通信系统 | |
| Feng-Hui et al. | QoE issues of OTT services over 5G network | |
| Nam et al. | A mobile video traffic analysis: Badly designed video clients can waste network bandwidth | |
| CN116132746A (zh) | 一种动态码率自适应网络视频传输方法及终端设备 | |
| CN113726759A (zh) | 一种码率自适应方法、装置、设备及可读存储介质 | |
| Abdelsalam et al. | Evaluation of DASH algorithms on dynamic satellite-enhanced hybrid networks | |
| KR101937449B1 (ko) | 동영상 서비스 장치 및 동영상 서비스 방법 | |
| ur Rahman et al. | QoE optimization for HTTP adaptive streaming: Performance evaluation of MEC-assisted and client-based methods | |
| Papadogiannopoulos et al. | Perceptual quality assessment of HTTP adaptive video streaming |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |