CN113411643A - 一种视频质量优化方法、系统、电子设备及存储介质 - Google Patents

一种视频质量优化方法、系统、电子设备及存储介质 Download PDF

Info

Publication number
CN113411643A
CN113411643A CN202110580655.0A CN202110580655A CN113411643A CN 113411643 A CN113411643 A CN 113411643A CN 202110580655 A CN202110580655 A CN 202110580655A CN 113411643 A CN113411643 A CN 113411643A
Authority
CN
China
Prior art keywords
video
user
code rate
image quality
video image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110580655.0A
Other languages
English (en)
Other versions
CN113411643B (zh
Inventor
曹敏
杨洋
杨君刚
陶波
林强
焦玲玲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National University of Defense Technology
Original Assignee
National University of Defense Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National University of Defense Technology filed Critical National University of Defense Technology
Priority to CN202110580655.0A priority Critical patent/CN113411643B/zh
Publication of CN113411643A publication Critical patent/CN113411643A/zh
Application granted granted Critical
Publication of CN113411643B publication Critical patent/CN113411643B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/004Diagnosis, testing or measuring for television systems or their details for digital television systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23106Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion involving caching operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23406Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving management of server-side video buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请实施例公开了一种视频质量优化方法、系统、电子设备及存储介质,所述方法包括:获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响大小;根据宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;根据用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据用户当前请求的最佳视频画质码率调整当前播放视频画质。本申请实施例在调整视频画质码率的过程中,考虑了用户的观看体验,可以更好地满足用户需求。

Description

一种视频质量优化方法、系统、电子设备及存储介质
技术领域
本申请涉及视频网络技术领域,具体涉及一种视频质量优化方法、系统、电子设备及存储介质。
背景技术
随着移动互联网技术的发展,人们通过移动终端使用流媒体业务已经变得越来越普及,工作、生活的快节奏让人们对随时随地的流媒体访问需求变得日益迫切,移动端相对传统PC端,在碎片化时间更能满足用户需求,提供更多选择。最新的研究表明,视频业务已经占据移动数据总量的66%,在国内更是达到了69.3%。由此可见,移动视频在当代互联网中扮演着重要角色,考虑到视频业务在网络中容易受到网络状态以及缓冲队列大小等因素的影响从而导致视频出现降质,而移动终端用户总是期望得到更加清晰、流畅的视频画面。因此,对移动视频服务质量的保障研究也变得日益重要。
目前,针对移动视频业务采用基于超文本传送协议HTTP(HyperText TransferProtocol)的动态自适应流媒体传输技术的DASH标准,已经变得越来越普遍,考虑到终端开发与研究的便捷性,基于DASH技术的研究方案通常部署于用户终端。在目前的研究工作中,主要通过测量获得网络可用带宽、回放缓冲区大小等参数指标,例如,不同码率对应的视频切片大小不同,视频码率和测量得到的网络带宽决定了切片的下载时间,同步影响到用户终端缓冲区大小的变化,如果请求切片码率过大,切片的下载时间超过缓冲区当前视频播放时间,即缓冲区轻载从而导致视频卡顿,因此,现有的视频优化方法就是通过构建优化的目标函数来动态调整视频流码率,以达到期望的视频画质和流畅度,从而尽力满足用户需求。
但是,现有的视频质量优化方法过于强调码率的带宽自适应特性,会导致在代表不同视频质量(清晰度)的码率之间频繁切换,从而影响用户的观看体验。
发明内容
由于现有方法存在上述问题,本申请实施例提供一种视频质量优化方法、系统、电子设备及存储介质。
具体的,本申请实施例提供了以下技术方案:
第一方面,本申请实施例提供了一种视频质量优化方法,包括:
获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响;
根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;
根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质。
可选的,根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率,包括:
将所述带宽预测参数、视频缓存状态参数和用户主观评价值参数输入至状态值模型中,得到所述用户当前请求的视频画质码率;
其中,所述状态值模型为:
Figure BDA0003085988210000021
其中,ak表示系统k阶段执行动作,uk表示k阶段系统状态,uk={bk,ok,ek,ptk,tk,vk}六元组形式,每个参数分别代表预测带宽、视频缓存、用户主观评价值、播放截止时间、数据包实际到达时间和视频流码率,
Figure BDA0003085988210000031
表示在执行动作ak的条件下,系统状态从uk转移到uk+1的转移概率;0<γ<1表示衰减系数;R(uk,ak)表示奖励函数,R(uk,ak)=w1R1+w2R2+w3R3,其中R1表示视频流畅度奖励、R2表示视频缓存占用奖励、R3表示视频回放截止时间奖励,w1-3表示参数分配权重。
可选的,根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,包括:
判断所述用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时间;
若是,则根据所述用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,并根据所述最佳视频画质码率调整视频质量;否则,根据所述用户当前请求的视频画质码率调整视频质量。
可选的,根据所述用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,包括:
获取缓冲区当前视频切片的缓存数据和用户当前请求的视频画质的客观评价值参数;所述客观评价值参数用于综合描述用户当前请求的视频自身的各个质量属性;
根据所述缓冲区当前视频切片的缓存数据和用户当前请求的视频画质的客观评价值参数,确定用户当前请求的最佳视频画质码率。
可选的,所述根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质,包括:
根据所述用户当前请求的最佳视频画质码率,向上级服务器拉流,获取与所述用户当前请求的最佳视频画质码率对应的视频缓存。
可选的,所述客观评价值参数包括:用户当前请求的视频画质码率、帧率和分辨率。
第二方面,本申请实施例提供了一种视频质量优化系统,包括:
获取模块,用于获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响;
马尔科夫决策过程MDP视频流选择模块,用于根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;
差异化视频流模块,用于根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质。
可选的,所述差异化视频流模块,具体用于:
判断所述用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时间;
若是,则根据所述用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,并根据所述最佳视频画质码率调整视频质量;否则,根据所述用户当前请求的视频画质码率调整视频质量。
第三方面,本发明实施例还提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面所述的视频质量优化方法。
第四方面,本发明实施例还提供了一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如第一方面所述的视频质量优化方法
由上面技术方案可知,本申请实施例获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数,从而根据带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率,进而根据用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,以使根据用户当前请求的最佳视频画质码率调整当前播放视频画质。由此可知,本申请实施例在基于网络带宽参数和缓存参数调整视频画质码率的基础上,新增了用户主观评价值参数,使得可以从用户体验角度对视频画质码率进行调整,既能简化部署、增强可扩展性,又能在码率自适应过程中解决用户主观评价问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些图获得其他的附图。
图1是本申请实施例提供的视频质量优化方法的流程图之一;
图2是本申请实施例提供的视频质量优化方法的流程图之二;
图3是本申请实施例提供的视频质量优化方法的流程图之三;
图4是本申请实施例提供的视频质量优化系统的结构示意图之一;
图5是本申请实施例提供的视频质量优化系统的结构示意图之二;
图6是本申请实施例的电子设备的结构示意图。
具体实施方式
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些图获得其他的附图。
图1示出了本申请实施例提供的视频质量优化方法的流程图之一,图2是本申请实施例提供的视频质量优化方法的流程图之二,图3是本申请实施例提供的视频质量优化方法的流程图之三。下面结合图1至图3对本申请实施例提供的视频质量优化方法进行详细解释和说明,如图1所示,本申请实施例提供的一种视频质量优化方法,包括:
步骤101:获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响;
在本步骤中,首先获取当前网络带宽预测参数、视频缓存状态参数和用户主观评价值参数。其中,用户主观评价参数用于描述由于网络原因造成的视频卡顿等对用户观看视频体验的影响。
步骤102:根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;
在本步骤中,将获取的带宽预测参数、视频缓存状态参数和用户主观评价值参数共同作为马尔科夫决策过程MDP(Markov Decision Process)的奖励函数项,并带入状态值模型中,从而得到用户当前请求的视频画质码率。
步骤103:根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质。
在本步骤中,判断用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时。若是,则根据用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,并根据最佳视频画质码率调整视频质量;否则,根据用户当前请求的视频画质码率调整视频质量。
由上面技术方案可知,本申请实施例获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数,从而根据带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率,进而根据用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,以使根据用户当前请求的最佳视频画质码率调整当前播放视频画质。由此可知,本申请实施例在基于网络带宽参数和缓存参数调整视频画质码率的基础上,新增了用户主观评价值参数,使得可以从用户体验角度对视频画质码率进行调整,既能简化部署、增强可扩展性,又能在码率自适应过程中解决用户主观评价问题。
基于上述实施例的内容,在本实施例中,根据所述宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率,包括:
将所述带宽预测参数、视频缓存状态参数和用户主观评价值参数输入至状态值模型中,得到所述用户当前请求的视频画质码率;
其中,所述状态值模型为:
Figure BDA0003085988210000071
其中,ak表示系统k阶段执行动作,uk表示k阶段系统状态,uk={bk,ok,ek,ptk,tk,vk}六元组形式,每个参数分别代表预测带宽、视频缓存、用户主观评价值、播放截止时间、数据包实际到达时间和视频流码率,
Figure BDA0003085988210000072
表示在执行动作ak的条件下,系统状态从uk转移到uk+1的转移概率;0<γ<1表示衰减系数;R(uk,ak)表示奖励函数,R(uk,ak)=w1R1+w2R2+w3R3,其中R1表示视频流畅度奖励、R2表示视频缓存占用奖励、R3表示视频回放截止时间奖励,w1-3表示参数分配权重。
在本实施例中,将获取的带宽预测参数、视频缓存状态参数和用户主观评价值参数共同作为马尔科夫决策过程MDP(Markov Decision Process)的奖励函数项,通过求解状态值函数的最优解,即π*=argmaxV(uk,ak),即可得到用户当前请求的视频画质码率。
基于上述实施例的内容,在本实施例中,根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,包括:
判断所述用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时间;
若是,则根据所述用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,并根据所述最佳视频画质码率调整视频质量;否则,根据所述用户当前请求的视频画质码率调整视频质量。
在本实施例中,需要说明的是,不同码率对应的视频切片大小不同,视频码率和测量得到的网络带宽决定了切片的下载时间,同步影响到用户终端缓冲区大小的变化,如果请求切片码率过大,切片的下载时间超过缓冲区当前视频播放时间,即缓冲区轻载从而导致视频卡顿。因此,需要判断用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时间。若用户当前请求的视频画质码率对应的下一视频切片的下载时长超过缓冲区当前视频切片的播放时间,则获取缓冲区当前视频切片的缓存数据和用户当前请求的视频画质的客观评价值参数;客观评价值参数用于综合描述用户当前请求的视频自身的各个质量,进而根据缓冲区当前视频切片的缓存数据和用户当前请求的视频画质的客观评价值参数,确定用户当前请求的最佳视频画质码率。若用户当前请求的视频画质码率对应的下一视频切片的下载时长不超过缓冲区当前视频切片的播放时间,则表明可以根据用户当前请求的视频画质码率进行视频画质的调整。
基于上述实施例的内容,在本实施例中,所述根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质,包括:
根据所述用户当前请求的最佳视频画质码率,向上级服务器拉流,获取与所述用户当前请求的最佳视频画质码率对应的视频缓存。
在本实施例中,需要说明的是,为减轻服务器工作负担,近端内容分发网络CDN(Content Delivery Network)视频服务器是不包括所有视频画质等级的视频缓存,因此,需要根据用户当前请求的最佳视频画质码率,向上级服务器拉流获取视频缓存,当缓存资源与请求资源不同时,服务器重新拉流。
基于上述实施例的内容,在本实施例中,所述客观评价值参数包括:用户当前请求的视频画质码率、帧率和分辨率。
下面通过具体实施例对本申请进行具体说明。
第一实施例:
在本实施例中,如图2所示,本申请实施例提供的视频质量优化方法的流程图之二,用户端首先判断当前切片是否为起始流切片,若是,则首先对用户端网速进行预测,然后根据用户端的预测网速判断当前网速对用户观看体验的影响,即计算经验值(Experience)指标,将预测网速和经验值指标代入媒体展示描述MPD(Media PresentationDescription)解析器进行处理,并将处理后的结果以及读取当前缓冲区的缓存参数通过MDP决策过程得到用户端当前请求的视频画质码率。若当前切片不是起始流切片,则进一步判断当前视频播放是否卡顿,后续处理过程同上,此处不再赘述。具体的,用户端的视频画质码率自适应算法Habra(Hybrid adaptive bitrate algorithm)如下:
Figure BDA0003085988210000091
Figure BDA0003085988210000101
Figure BDA0003085988210000111
第二实施例:
在本实施例中,如图3所示,本申请实施例提供的视频质量优化方法的流程图之三,在服务器端,首先输入用户端当前请求的视频画质码率,判断用户端当前请求的视频画质码率是否命中当前流缓存,若是,则输出命中视频流码率,即用户当前请求的最佳视频画质码率。否则,获取缓冲区当前视频切片的缓存数据,并计算客观评价参数感知值P指标(Perception),将缓存数据和P指标代入MPD解析器进行处理,确定用户当前请求的最佳视频画质码率,从而向上级服务器拉流获取相应的视频资源。具体的,服务器端的视频画质码率Habra算法如下:
Figure BDA0003085988210000112
Figure BDA0003085988210000121
第三实施例:
在本实施例中,如图5所示,本申请实施例提供的视频质量优化系统的结构示意图之二,用户端包括:带宽预测模块、MDP决策视频流模块、经验值模块、网络接口模块、视频缓存模块和DASH逻辑单元;
其中,所述带宽预测模块用于获取带宽预测参数,并将所述带宽预测参数发送至MDP决策视频流模块;
所述经验值模块用于接收用户主观评价结果,并将所述用户主观评价结果发送至MDP决策视频流模块;
所述视频缓存模块,用于获取用户端本地视频缓存状态参数,并将所述视频缓存状态参数发送至MDP决策视频流模块;
所述MDP决策视频流模块用于根据带宽预测参、用户主观评价结果和视频缓存状态参数,得到用户端请求的视频画质码率,并将所述用户端请求的视频画质码率通过网络接口模块发送至服务器端;
其中,服务器端包括:感知值模块、差异化视频流模块、缓存获取模块和DASH逻辑单元;
所述感知值模块用于接收客观评价结果,并将所述客观评价结果发送至差异化视频流模块;
所述差异化视频流模块用于接收用户端请求的视频画质码率和客观评价结果,并进行处理得到用户端请求的最佳视频码率,并将其放松之缓存获取模块;
所述缓存获取模块基于用户端请求的最佳视频码率向上级服务器拉流获取视频缓存,当缓存资源与请求资源不同时,服务器重新拉流。
由此可知,本申请实施例具有以下有益效果:
(1)能有效降低用户端播放视频的卡顿次数和卡顿时间,从而提高用户的观看体验;
(2)提高近端CDN服务器缓存命中率,减少网络资源损耗,节省服务器存储资源;
(3)核心算法下沉到用户端,易于部署,具有可扩展性。
基于相同的发明构思,本发明另一实施例提供了一种视频质量优化系统,如图4所示,所述系统包括:
获取模块1,用于获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响;
马尔科夫决策过程MDP视频流选择模块2,用于根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;
差异化视频流模块3,用于根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质。
在本实施例中,首先获取当前网络带宽预测参数、视频缓存状态参数和用户主观评价值参数。其中,用户主观评价参数用于描述由于网络原因造成的视频卡顿等对用户观看视频体验的影响。
在本实施例中,将获取的带宽预测参数、视频缓存状态参数和用户主观评价值参数共同作为马尔科夫决策过程MDP(Markov Decision Process)的奖励函数项,并带入状态值模型中,从而得到用户当前请求的视频画质码率。
在本实施例中,判断用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时。若是,则根据用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,并根据最佳视频画质码率调整视频质量;否则,根据用户当前请求的视频画质码率调整视频质量。
由上面技术方案可知,本申请实施例获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数,从而根据带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率,进而根据用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,以使根据用户当前请求的最佳视频画质码率调整当前播放视频画质。由此可知,本申请实施例在基于网络带宽参数和缓存参数调整视频画质码率的基础上,新增了用户主观评价值参数,使得可以从用户体验角度对视频画质码率进行调整,既能简化部署、增强可扩展性,又能在码率自适应过程中解决用户主观评价问题。
基于上述实施例的内容,在本实施例中,所述差异化视频流模块,具体用于:
判断所述用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时间;
若是,则根据所述用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,并根据所述最佳视频画质码率调整视频质量;否则,根据所述用户当前请求的视频画质码率调整视频质量。
本实施例所述的视频质量优化系统可以用于执行上述方法实施例,其原理和技术效果类似,此处不再赘述。
基于相同的发明构思,本发明又一实施例提供了一种电子设备,参见图6所述电子设备的结构示意图,具体包括如下内容:处理器601、存储器602、通信接口603和通信总线604;
其中,所述处理器601、存储器602、通信接口603通过所述通信总线604完成相互间的通信;所述通信接口603用于实现各设备之间的信息传输;
所述处理器601用于调用所述存储器602中的计算机程序,所述处理器执行所述计算机程序时实现上述一种视频质量优化方法的全部步骤,例如:获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响;根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质。
基于相同的发明构思,本发明又一实施例提供了一种非暂态计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述一种视频质量优化方法的全部步骤,例如:获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响;根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质。
此外,上述的存储器中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本发明实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的视频质量优化方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种视频质量优化方法,其特征在于,包括:
获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响;
根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;
根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质。
2.根据权利要求1所述的视频质量优化方法,其特征在于,根据所述宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的最优视频画质码率,包括:
将所述带宽预测参数、视频缓存状态参数和用户主观评价值参数输入至状态值模型中,得到所述用户当前请求的视频画质码率;
其中,所述状态值模型为:
Figure FDA0003085988200000011
其中,ak表示系统k阶段执行动作,uk表示k阶段系统状态,uk={bk,ok,ek,ptk,tk,vk}六元组形式,每个参数分别代表预测带宽、视频缓存、用户主观评价值、播放截止时间、数据包实际到达时间和视频流码率,
Figure FDA0003085988200000012
表示在执行动作ak的条件下,系统状态从uk转移到uk+1的转移概率;0<γ<1表示衰减系数;R(uk,ak)表示奖励函数,R(uk,ak)=w1R1+w2R2+w3R3,其中R1表示视频流畅度奖励、R2表示视频缓存占用奖励、R3表示视频回放截止时间奖励,w1-3表示参数分配权重。
3.根据权利要求1所述的视频质量优化方法,其特征在于,根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,包括:
判断所述用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时间;
若是,则根据所述用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,并根据所述最佳视频画质码率调整视频质量;否则,根据所述用户当前请求的视频画质码率调整视频质量。
4.根据权利要求3所述的视频质量优化方法,其特征在于,根据所述用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,包括:
获取缓冲区当前视频切片的缓存数据和用户当前请求的视频画质的客观评价值参数;所述客观评价值参数用于综合描述用户当前请求的视频自身的各个质量属性;
根据所述缓冲区当前视频切片的缓存数据和用户当前请求的视频画质的客观评价值参数,确定用户当前请求的最佳视频画质码率。
5.根据权利要求1所述的视频质量优化方法,其特征在于,所述根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质,包括:
根据所述用户当前请求的最佳视频画质码率,向上级服务器拉流,获取与所述用户当前请求的最佳视频画质码率对应的视频缓存。
6.根据所述权利要求4所述的视频质量优化方法,其特征在于,所述客观评价值参数包括:用户当前请求的视频画质码率、帧率和分辨率。
7.一种视频质量优化系统,其特征在于,包括:
获取模块,用于获取网络带宽预测参数、视频缓存状态参数和用户主观评价值参数;所述用户主观评价值参数用于表明网络原因造成的视频卡顿对用户观看体验的影响;
马尔科夫决策过程MDP视频流选择模块,用于根据所述带宽预测参数、视频缓存状态参数和用户主观评价值参数,确定用户当前请求的视频画质码率;
差异化视频流模块,用于根据所述用户当前请求的视频画质码率,确定用户当前请求的最佳视频画质码率,并根据所述用户当前请求的最佳视频画质码率调整当前播放视频画质。
8.根据权利要求7所述的视频质量优化系统,其特征在于,所述差异化视频流模块,具体用于:
判断所述用户当前请求的视频画质码率对应的下一视频切片的下载时长是否超过缓冲区当前视频切片的播放时间;
若是,则根据所述用户当前请求的视频画质码率,进行自适应调整,得到在不超过缓冲区当前视频切片的播放时间前提下的最佳视频画质码率,并根据所述最佳视频画质码率调整视频质量;否则,根据所述用户当前请求的视频画质码率调整视频质量。
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-6任一项所述视频质量优化方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-6任一项所述视频质量优化方法的步骤。
CN202110580655.0A 2021-05-26 2021-05-26 一种视频质量优化方法、系统、电子设备及存储介质 Active CN113411643B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110580655.0A CN113411643B (zh) 2021-05-26 2021-05-26 一种视频质量优化方法、系统、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110580655.0A CN113411643B (zh) 2021-05-26 2021-05-26 一种视频质量优化方法、系统、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN113411643A true CN113411643A (zh) 2021-09-17
CN113411643B CN113411643B (zh) 2022-11-11

Family

ID=77675346

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110580655.0A Active CN113411643B (zh) 2021-05-26 2021-05-26 一种视频质量优化方法、系统、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN113411643B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114040227A (zh) * 2021-10-22 2022-02-11 游密科技(深圳)有限公司 音视频播放控制方法、装置、电子设备及存储介质
CN114040230A (zh) * 2021-11-08 2022-02-11 北京达佳互联信息技术有限公司 视频码率确定方法、装置、电子设备及其存储介质
CN115002520A (zh) * 2022-04-14 2022-09-02 百果园技术(新加坡)有限公司 一种视频流数据处理方法、装置、设备及存储介质
CN117750140A (zh) * 2023-12-27 2024-03-22 北京大麦星云科技有限公司 基于机顶盒的视频点播交互方法及系统

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103338393A (zh) * 2013-06-13 2013-10-02 西安交通大学 一种hspa系统下用户体验驱动的视频码率选择方法
CN105828069A (zh) * 2016-04-06 2016-08-03 上海交通大学 一种基于主观质量评估的编码器自适应调整方法
CN106375790A (zh) * 2016-09-23 2017-02-01 西安交通大学 一种QoE驱动的多频道HAS码率自适应调度方法
CN106993237A (zh) * 2017-04-13 2017-07-28 中北大学 基于mpeg‑dash协议的动态自适应码率选择方法
CN107135411A (zh) * 2016-02-26 2017-09-05 掌赢信息科技(上海)有限公司 一种调整视频码率的方法及电子设备
CN107770633A (zh) * 2017-09-14 2018-03-06 华为技术有限公司 码率自适应算法优化系统、方法及终端
CN108551586A (zh) * 2018-03-14 2018-09-18 上海交通大学 多用户360度视频流服务器端码率自适应分配方法及系统
CN108769754A (zh) * 2018-05-14 2018-11-06 中国科学院计算技术研究所 一种基于视频回放终端的视频回放方法和系统
CN108833995A (zh) * 2018-06-08 2018-11-16 西安交通大学 一种无线网络环境中自适应流媒体的传输方法
CN110072130A (zh) * 2019-04-11 2019-07-30 西安交通大学 一种基于http/2的has视频切片推送方法
CN110149560A (zh) * 2019-06-05 2019-08-20 亦非云互联网技术(上海)有限公司 基于hls协议的播放器优化方法及系统、存储介质及终端
CN111490983A (zh) * 2020-04-03 2020-08-04 武汉理工大学 一种基于视频感知质量的自适应流媒体码率选择系统

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103338393A (zh) * 2013-06-13 2013-10-02 西安交通大学 一种hspa系统下用户体验驱动的视频码率选择方法
CN107135411A (zh) * 2016-02-26 2017-09-05 掌赢信息科技(上海)有限公司 一种调整视频码率的方法及电子设备
CN105828069A (zh) * 2016-04-06 2016-08-03 上海交通大学 一种基于主观质量评估的编码器自适应调整方法
CN106375790A (zh) * 2016-09-23 2017-02-01 西安交通大学 一种QoE驱动的多频道HAS码率自适应调度方法
CN106993237A (zh) * 2017-04-13 2017-07-28 中北大学 基于mpeg‑dash协议的动态自适应码率选择方法
CN107770633A (zh) * 2017-09-14 2018-03-06 华为技术有限公司 码率自适应算法优化系统、方法及终端
CN108551586A (zh) * 2018-03-14 2018-09-18 上海交通大学 多用户360度视频流服务器端码率自适应分配方法及系统
CN108769754A (zh) * 2018-05-14 2018-11-06 中国科学院计算技术研究所 一种基于视频回放终端的视频回放方法和系统
CN108833995A (zh) * 2018-06-08 2018-11-16 西安交通大学 一种无线网络环境中自适应流媒体的传输方法
CN110072130A (zh) * 2019-04-11 2019-07-30 西安交通大学 一种基于http/2的has视频切片推送方法
CN110149560A (zh) * 2019-06-05 2019-08-20 亦非云互联网技术(上海)有限公司 基于hls协议的播放器优化方法及系统、存储介质及终端
CN111490983A (zh) * 2020-04-03 2020-08-04 武汉理工大学 一种基于视频感知质量的自适应流媒体码率选择系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114040227A (zh) * 2021-10-22 2022-02-11 游密科技(深圳)有限公司 音视频播放控制方法、装置、电子设备及存储介质
CN114040230A (zh) * 2021-11-08 2022-02-11 北京达佳互联信息技术有限公司 视频码率确定方法、装置、电子设备及其存储介质
CN114040230B (zh) * 2021-11-08 2024-03-29 北京达佳互联信息技术有限公司 视频码率确定方法、装置、电子设备及其存储介质
CN115002520A (zh) * 2022-04-14 2022-09-02 百果园技术(新加坡)有限公司 一种视频流数据处理方法、装置、设备及存储介质
CN115002520B (zh) * 2022-04-14 2024-04-02 百果园技术(新加坡)有限公司 一种视频流数据处理方法、装置、设备及存储介质
CN117750140A (zh) * 2023-12-27 2024-03-22 北京大麦星云科技有限公司 基于机顶盒的视频点播交互方法及系统

Also Published As

Publication number Publication date
CN113411643B (zh) 2022-11-11

Similar Documents

Publication Publication Date Title
CN113411643B (zh) 一种视频质量优化方法、系统、电子设备及存储介质
CN108271048B (zh) 一种兼顾吞吐量和视频缓冲的码率自适应调整装置和方法
US9167007B2 (en) Stream complexity mapping
US10110650B2 (en) Client side stream switching
US9503491B2 (en) Playback stall avoidance in adaptive media streaming
CN111135569A (zh) 云游戏处理方法、装置、存储介质与电子设备
EP3200423A1 (en) Client side stream switching
CN105451099B (zh) 视频码率调整方法和装置
US10368136B1 (en) Resource management for video playback and chat
EP2903219B1 (en) Method, player and terminal for selecting code stream segmentations based on stream media
CN107135411B (zh) 一种调整视频码率的方法及电子设备
CN106688239A (zh) 视频下载方法、装置及系统
EP3627791A1 (en) Data buffering method, network device, and storage medium
CN111225209A (zh) 视频数据推流方法、装置、终端及存储介质
Azumi et al. A QoE-aware quality-level switching algorithm for adaptive video streaming
CN109769125B (zh) 流媒体码率的动态调整方法、媒体服务器及转码服务器
KR101795537B1 (ko) 네트워크 환경 적응형 클라우드 스트리밍 서비스 제공시스템 및 그 방법
EP3211912A1 (en) Information processing apparatus
CN114268830B (zh) 云导播同步方法、装置、设备及存储介质
EP4104451B1 (en) Low latency content delivery
US20100121901A1 (en) Moving-picture processing device and moving-picture processing method
WO2021167531A1 (en) Methods and systems for bandwidth estimation
JP7318123B2 (ja) 適応的バッファを使用してビデオコンテンツをストリーミングするための方法、システム、および媒体
WO2022064015A1 (en) Adaptive bit rate streaming with two delivery rate estimates
CN116347117A (zh) 视频数据缓存方法、装置、设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant