CN106604026A - 一种移动流媒体用户体验质量QoE评估方法 - Google Patents

一种移动流媒体用户体验质量QoE评估方法 Download PDF

Info

Publication number
CN106604026A
CN106604026A CN201611165090.5A CN201611165090A CN106604026A CN 106604026 A CN106604026 A CN 106604026A CN 201611165090 A CN201611165090 A CN 201611165090A CN 106604026 A CN106604026 A CN 106604026A
Authority
CN
China
Prior art keywords
user
video
qoe
fragment
upsi
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611165090.5A
Other languages
English (en)
Other versions
CN106604026B (zh
Inventor
熊丽荣
金鑫
王玲燕
尤日晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Technology ZJUT
Original Assignee
Zhejiang University of Technology ZJUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Technology ZJUT filed Critical Zhejiang University of Technology ZJUT
Priority to CN201611165090.5A priority Critical patent/CN106604026B/zh
Publication of CN106604026A publication Critical patent/CN106604026A/zh
Application granted granted Critical
Publication of CN106604026B publication Critical patent/CN106604026B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/004Diagnosis, testing or measuring for television systems or their details for digital television systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

移动流媒体用户体验质量QoE评估方法,首先设计移动流媒体QoE影响因素映射方法,即使用码率状态,码率切换幅度,码率切换次数映射为移动流媒体服务质量评价;考虑用户体验,加入设备抖动情况和用户观看位置的影响因素;然后设计移动流媒体QoE评价方法,即利用QoE影响因素的映射方法计算视频播放全程每个片段的QoE评分;再利用基于HAS(HTTP Adaptive Streaming)的系列位置效应量化方法反映用户心理效应,计算视频播放全程每个片段的影响权重系数;最后将每个片段的QoE评分与每个片段的权重系数作向量内积求得最终的用户QoE评分。

Description

一种移动流媒体用户体验质量QoE评估方法
技术领域
本发明属于移动多媒体视频领域,尤其涉及一种综合考虑服务质量、环境因素和用户心理的移动流媒体用户体验质量QoE评估方法。
现有技术
由于对HTTP移动流媒体的巨大需求,网络提供商和服务提供商迫切需要评估已服务的体验质量和采取措施来满足他们的客户,使他们在激烈的竞争中获胜。HAS(HTTPAdapt Streaming)能够实现流畅播发和视频质量的平衡,因此为用户提供了更好的QoE体验。
QoE是一个端到端的概念,描述了用户与服务或应用程序交互的主观感受。在ITU-T E804中最早将QoE的影响因素划分为两大类:客观因素和主观因素。其中客观因素包括服务参数,应用参数,传输参数等,主观因素包括用户心情,体验,用户所处环境等。QoE评价是主观与客观相结合且十分复杂的,因此大致可以将QoE影响因素分为四个类别:(1)网络层面,比如网络带宽、延迟、丢包率等;(2)服务质量层面,比如码率和切换次数;(3)上下文层面,比如物理位置,社会环境等;(4)心理层面,比如预期的视频质量,用户类型、记忆效应等。
传统的QoE评价基本是从上述的网络层面,即QoS来进行评估的,比如当所播放的视频码率大于实际网络的TCP吞吐量时,缓存区内的数据量会逐渐减少,当数据量减小到一定程度的时候就有可能出现视频顿卡的现象,而吐吞量直接受带宽、延迟、丢包率等影响,从而间接的利用网络参数对QoE进行评分。
基于网络层面的QoE方法缺少对用户感受的考虑,只是从视频重缓存、初始缓存时间等考虑视频质量体验。在网络层面的QoE的基础上发展出的服务质量QoE评估方法从视频比特率以及视频码率切换事件角度来评价用户体验质量,比如利用当前视频质量等级评价每个分片的QoE估值,再利用视频码率切换的次数作为对整体的QoE评分的负评价影响系数。采用服务质量QoE评估极大地提升了准确性,但是随着多样化的用户群体以及移动流媒体的普及,仅根据服务参数评估QoE的方法忽略了用户心理因素及设备状态等对用户的实际体验质量的影响。
有关用户主观感受以及设备上下文的QoE评价研究主要体现在:(1)研究者通过大量实验调查表明出现频繁码率切换和再缓存的视频内容,其用户参与率比正常的视频低很多。但是视频的内容在一定程度上也影响了参与率,即使该视频实际体验不佳但是用户感兴趣,那么他还是会参与观看。(2)研究者通过实验发现不同移动设备在不同的无线网络条件下,视频播放器会丢弃大量成功交付但是不适应设备的视频内容,从而大量的浪费了网络资源,从而体现了设备匹配的重要性。(3)研究者通过大量实验发现,用户使用设备的环境对观看体验也存在较大的影响。例如用户使用移动设备观看视频的位置,距离屏幕越远,对视频清晰度的要求越低;在设备抖动的时候会严重影响用户观看视频的体验等。基于用户心理学的研究体现在:(1)利用心理学的韦伯-费希纳定理研究了视频流业务QoE与丢包之间的关系,但是该定理建立在理想假设基础上,也缺少对服务质量层面相关参数的探讨,有一定的局限性。(2)通过对自适应视频业务的QoE评估特征进行了研究,发现起始片段码率高的视频样本,都获得了较高的MOS评分,而那些起始片段码率低的测试样本,尽管其后码率逐渐上升,视频质量越来越好,但MOS得分却没有前者高。这说明,在短时长的自适应视频流业务中,起始片段的第一印象很大程度上提升了观看者对整个视频的观感。在研究中也发现,末尾片段码率越高,其实验样本获得的MOS评分也相对比末尾码率低的样本高,由此推断视频片段码率等级的分布对用户体验有十分重大的影响。但是现有的移动流媒体用户QoE评价方法缺少同时考虑用户主观感受以及用户和设备所处的环境因素,也很少从用户心理的角度考虑QoE的评价。
发明内容
针对现有移动流媒体QoE存在的局限性,本发明将移动端流媒体QoE影响因素分为客观感知影响参数和心理效应影响参数,使用设备状态,用户观看位置与流媒体服务质量相结合,再根据系列位置效应对视频片段的影响权重系数,综合的评估用户质量体验情况,能提供准确有效,符合实际用户体验的QoE评估结果。
本发明的技术方案共分二个步骤:第一步,、移动流媒体用户QoE影响因素映射方法,即使用码率状态,码率切换幅度,码率切换次数映射为移动流媒体服务质量评价;同时考虑用户体验,加入设备抖动情况和用户观看位置的影响因素。第二步,移动流媒体用户QoE评价方法,即利用QoE影响因素的映射方法计算视频播放全程每个片段的QoE评分;再利用基于HAS(HTTP Adaptive Streaming)的系列位置效应量化方法,计算视频播放全程每个片段的影响权重系数;最后将每个片段的QoE评分与每个片段的权重系数作向量内积求得最终的用户QoE评分。
移动流媒体用户QoE评估方法,具体步骤如下:
步骤1.移动流媒体用户QoE影响因素映射方法;
S1.1:对于流媒体业务过程中的视频质量等级,视频质量切换等级差,本发明采用的映射算法分别如下:
视频质量等级η表示每个媒体片段等级与最高的视频质量等级的比值,如公式(1),主要评价每个片段质量等级。其中Qi表示第i片段的视频质量等级,N表示MPD中最高的质量等级。
视频质量切换等级差υ表示每个媒体分片在发生质量等级切换时上下切换幅度,如公式(2),主要评价视频质量等级的大幅度跳变而造成的感官体验影响。其中Qi-1表示上一片段的视频质量等级。
S1.2:对于流媒体业务过程中的设备稳定性、用户观看距离,本发明首先采用移动设备传感器分别测量设备稳定性、用户观看距离,再采用相应的映射算法分别如下:
用户观看距离测量方法:首先根据相关研究大量调研和精确测量,得出几种用户占比最大的观看位置下移动设备与水平面夹角的角度,通过大量实验表明这些角度能代表大多数用户在不同位置的观看角度。例如以下分别表示用户的四种不同观看位置以及设备摆放的角度(15°、40°、60°、75°),由此用这些有限的位置组合来匹配用户当前所处的观看距离。最后使用加速度传感器进行了大量的实验,得到了四种观看状态下的三轴加速度特征,分别为:
(1)Lap-case(X:1.2,Y:0,Z:8.5,单位m/s2)
(2)Table-case(X:6,Y:0,Z:4.8,单位m/s2)
(3)Hand-case(X:7.3,Y:0,Z:4.2,单位m/s2)
(4)Table-moving(X:9.1,Y:0,Z:1.8,单位m/s2)
对应的观看距离分别为0.32m,0.22m,0.12m,0.60m。使用这些特殊状态的观看距离来匹配用户实际观看距离。当加速度传感器输出的实时三轴加速度符合上述的某种特征值(误差±0.5)则判断为相应的观看位置。
设备稳定性测量方法:采用基于加速度传感器的设备抖动状态检测方法,并加入用户主观感受评分阈值,从用户的角度更为准确的判断设备状态。该方法首先定义了一个存有n秒数据的滑动窗口;定义一个计数器cd,一旦设备在滑动窗口内发生至少2s连续的方向变化则判断的一次抖动,cd=cd+1;为了避免轻微抖动都自适应检测的影响,只有当方向变化值超过阀值TG的时候计数器才会增加,定义如果在一个滑动窗口时间n秒内没加检测到抖动则将计数器cd重置,同时设置了每秒4次的传感器采样率。具体如下算法1。MOS评分定义如式3:
MOS=a0+aampl*x1+adur*x2+aspeed*x3 (3)
其中x1表示设备在抖动时的振幅,x2表示当前设备抖动的持续时间,x3表示抖动时播放的速度。MOS模型参数a0=3.7,aampl=-2.5723,adur=-0.0494,aspeed=-2.412。设定阀值为3.5,当MOS≥3.5时表示用户主观体验良好,MOS<3.5时表示用户主观体验较差。一旦抖动计数器和MOS同时超过阀值则判定当前用户为较差的观看体验,不适合观看当前较高质量的视频。
算法1设备抖动状态检测
S1.3:定义当前视频片段时刻设备的抖动情况θ和当前视频片段时刻用户的观看位置σ。
公式如下(4)、(5)。其中θ和σ的值来自于上述设备抖动状态测量方法和用户观看距离检测算法的输出值,stable表示设备处于稳定状态,instable表示设备处于抖动状态,感官体验较差;In hand表示当前观看距离为0.12m,On table facing up表示当前观看距离为0.22m,On lap表示当前观看距离为0.32m,On当前观看距离为0.60m。
步骤2.移动流媒体用户QoE评价方法;
S2.1:根据上述映射方式,设定每个视频片断的QoE评估得分如下公式(6):其中η表示视频质量等级,υ表示视频质量切换等级差,θ表示设备的抖动情况,σ表示用户的观看位置,a,b,c,d,e为相应的调和系数。
S2.2:采用基于HAS的系列位置效应量化方法,将近因效应和首因效应的影响程度与视频播放时间建立映射关系,获得整个视频中每个片段相对于整体所占权重ωi,并根据视频的长度,动态的调整近因效应υ和首因效应ρ的影响强度。
定义1:影响强度函数f(t)。定义如下:
式(7)中近因效应因子θ,表示首因效应影响程度;近因效应因子δ,表示近因效应影响程度。t表示当前时刻,T表示整个视频业务结束时刻;
定义2:第i片段视频的影响强度fi。假设第i片段的播放时间为ti-1到ti,那么该片段的持续时间为ΔT=ti-ti-1。那么第i片段视频的影响强度可以表示为:
式(8)中ρ=θΔT为离散后的首因因子,υ=δΔT为离散后的近因因子,K表示总的视频片段数;
定义3:第i片段的权重ωi。归一化后,便可以得到第i片段的权重ωi,公式如下:
定义4:首因因子ρ和近因因子υ,表示首因效应和近因效应的影响强弱,随着视频时间的增长,首因效应逐渐减弱,而近因效应逐渐增强;
要获得ωi,必须求得首因因子ρ和近因因子υ。首先定义首因效应影响起始m个片段的权重比例为a,近因效应影响末尾n个片段权重比例为b。当播放的自适应流足够长的时候,即K≥30时,获得如下计算公式:
由式(10)可以转化出式(11),从而求得首因因子ρ和近因因子υ。
由附图1的实验可以得出结论随着首权重比例的减少,尾权重比例的增加,首因效应逐渐减弱,而近因效应逐渐增强。由此可以确定a,b与视频长度之前的相关性,从而动态的根据视频长度改变a,b的取值,从而改变首因效应和近因效应的权重大小。根据德国心理学家艾宾浩斯(H.Ebbinghaus)的记忆遗忘曲线公式y=1-0.56x^0.06,在K≥136后对首因的印象已经相对较弱,而近因的影响逐渐增强,占据主导地位。从而拟合出a,b随视频长度变化的一次线性函数如公式(12)。由附图2可知,使用该方式能根据视频长度动态的改变首因效应和近因效应的影响程度。
由此计算得每个视频片段的权重系数为W=(ω123,...,ωN)。
S2.3:整个自适应流媒体服务的整体体验质量评价估算公式(13)如下。其中si表示第i片段的QoE评分,ωi表示第i片段的影响权重系数,Sn(N)表示整个视频播放过程中片段发生质量等级切换的总次数,ψ为调和参数。
本发明描述了一种综合考虑服务质量、环境因素和用户心理的移动流媒体用户体验质量QoE评估方法。使用服务质量因素中的码率等级、码率切换结合用户体验中的设备状态、观看位置来综合评价每个视频片段的用户QoE评分,再通过系列位置效应量化方法为视频播放全程每个片段计算影响权重系数,进行向量内积获得整体QoE评分。
本发明的优点如下:
(1)思路新颖。本发明将基于HAS的系列位置效应与QoE评价相结合,从用户主观的体验出发进行QoE评估。
(2)实现简单。本发明所述的移动流媒体用户QoE评估方法,采用客户端的服务质量数据以及基于传感器采用用户设备上下文数据作为评价因素,数据获取简便,实现起来比较简单。
(3)QoE评分准确性高。所获得的QoE评分与用户的主观感受较接近,对视频业务评价更加准确。
附图说明
图1为本发明的首因效应和近因效应权重比例a,b递增对比图。
图2为本发明的不同视频长度的首因、近因效应权重变化图。
图3为本发明的用户QoE与各影响因素映射图。
图4为本发明的系统示意图。
具体实施方式
本发明针对移动端流媒体,分别从用户主观与客观的角度出发,设计一种移动流媒体用户QoE评价方法,将设备状态,用户观看位置与流媒体服务质量相结合,根据系列位置效应对视频片段的影响权重系数,综合的评估用户质量体验情况。具体的用户QoE与各影响因素映射如下附图3所示。
移动流媒体用户QoE评估方法,具体步骤如下:
步骤1.移动流媒体用户QoE影响因素映射方法;
S1.1:对于流媒体业务过程中的视频质量等级,视频质量切换等级差,本发明采用的映射算法分别如下:
视频质量等级η表示每个媒体片段等级与最高的视频质量等级的比值,如公式(1),主要评价每个片段质量等级。其中Qi表示第i片段的视频质量等级,N表示MPD中最高的质量等级。
视频质量切换等级差υ表示每个媒体分片在发生质量等级切换时上下切换幅度,如公式(2),主要评价视频质量等级的大幅度跳变而造成的感官体验影响。其中Qi-1表示上一片段的视频质量等级。
S1.2:对于流媒体业务过程中的设备稳定性、用户观看距离,本发明首先采用移动设备传感器分别测量设备稳定性、用户观看距离,再采用相应的映射算法分别如下:
用户观看距离测量方法:首先根据相关研究大量调研和精确测量,得出几种用户占比最大的观看位置下移动设备与水平面夹角的角度,通过大量实验表明这些角度能代表大多数用户在不同位置的观看角度。例如以下分别表示用户的四种不同观看位置以及设备摆放的角度(15°、40°、60°、75°),由此用这些有限的位置组合来匹配用户当前所处的观看距离。最后使用加速度传感器进行了大量的实验,得到了四种观看状态下的三轴加速度特征,分别为:
(5)Lap-case(X:1.2,Y:0,Z:8.5,单位m/s2)
(6)Table-case(X:6,Y:0,Z:4.8,单位m/s2)
(7)Hand-case(X:7.3,Y:0,Z:4.2,单位m/s2)
(8)Table-moving(X:9.1,Y:0,Z:1.8,单位m/s2)
对应的观看距离分别为0.32m,0.22m,0.12m,0.60m。使用这些特殊状态的观看距离来匹配用户实际观看距离。当加速度传感器输出的实时三轴加速度符合上述的某种特征值(误差±0.5)则判断为相应的观看位置。
设备稳定性测量方法:采用基于加速度传感器的设备抖动状态检测方法,并加入用户主观感受评分阈值,从用户的角度更为准确的判断设备状态。该方法首先定义了一个存有n秒数据的滑动窗口;定义一个计数器cd,一旦设备在滑动窗口内发生至少2s连续的方向变化则判断的一次抖动,cd=cd+1;为了避免轻微抖动都自适应检测的影响,只有当方向变化值超过阀值TG的时候计数器才会增加,定义如果在一个滑动窗口时间n秒内没加检测到抖动则将计数器cd重置,同时设置了每秒4次的传感器采样率。具体如下算法1。MOS评分定义如式3:
MOS=a0+aampl*x1+adur*x2+aspeed*x3 (3)
其中x1表示设备在抖动时的振幅,x2表示当前设备抖动的持续时间,x3表示抖动时播放的速度。MOS模型参数a0=3.7,aampl=-2.5723,adur=-0.0494,aspeed=-2.412。设定阀值为3.5,当MOS≥3.5时表示用户主观体验良好,MOS<3.5时表示用户主观体验较差。一旦抖动计数器和MOS同时超过阀值则判定当前用户为较差的观看体验,不适合观看当前较高质量的视频。
算法1设备震动状态检测
S1.3:定义当前视频片段时刻设备的抖动情况θ和当前视频片段时刻用户的观看位置σ。
公式如下(4)、(5)。其中θ和σ的值来自于上述基于加速度传感器检测设备稳定算法和距离检测算法的输出值,stable表示设备处于稳定状态,instable表示设备处于抖动状态,感官体验较差;In hand表示当前观看距离为0.12m,Ontable facing up表示当前观看距离为0.22m,On lap表示当前观看距离为0.32m,On当前观看距离为0.60m。
步骤2.移动流媒体用户QoE评价方法;
S2.1:根据上述映射方式,设定每个分段的QoE评估得分如下公式(6):其中η表示视频质量等级,υ表示视频质量切换等级差,θ表示设备的抖动情况,σ表示用户的观看位置,a,b,c,d,e为相应的调和系数。
S2.2:采用基于HAS的系列位置效应量化方法,将近因效应和首因效应的影响程度与视频播放时间建立映射关系,获得整个视频中每个片段相对于整体所占权重ωi,并根据视频的长度,动态的调整近因效应υ和首因效应ρ的影响强度。
定义1:影响强度函数f(t)。定义如下:
式(7)中近因效应因子θ,表示首因效应影响程度;近因效应因子δ,表示近因效应影响程度。t表示当前时刻,T表示整个视频业务结束时刻。
定义2:第i片段视频的影响强度fi。假设第i片段的播放时间为ti-1到ti,那么该片段的持续时间为ΔT=ti-ti-1。那么第i片段视频的影响强度可以表示为:
式(8)中ρ=θΔT为离散后的首因因子,υ=δΔT为离散后的近因因子,K表示总的视频片段数。
定义3:第i片段的权重ωi。归一化后,便可以得到第i片段的权重ωi,公式如下:
定义4:首因因子ρ和近因因子υ,表示首因效应和近因效应的影响强弱,随着视频时间的增长,首因效应逐渐减弱,而近因效应逐渐增强。
要获得ωi,必须求得首因因子ρ和近因因子υ。首先定义首因效应影响起始m个片段的权重比例为a,近因效应影响末尾n个片段权重比例为b。当播放的自适应流足够长的时候,即K≥30时,获得如下计算公式:
由式(10)可以转化出式(11),从而求得首因因子ρ和近因因子υ。
由附图1的实验可以得出结论随着首权重比例的减少,尾权重比例的增加,首因效应逐渐减弱,而近因效应逐渐增强。由此可以确定a,b与视频长度之前的相关性,从而动态的根据视频长度改变a,b的取值,从而改变首因效应和近因效应的权重大小。根据德国心理学家艾宾浩斯(H.Ebbinghaus)的记忆遗忘曲线公式y=1-0.56x^0.06,在K≥136后对首因的印象已经相对较弱,而近因的影响逐渐增强,占据主导地位。从而拟合出a,b随视频长度变化的一次线性函数如公式(12)。由附图2可知,使用该方式能根据视频长度动态的改变首因效应和近因效应的影响程度。
由此计算得每个视频片段的权重系数为W=(ω123,...,ωN)。
S2.3:整个自适应流媒体服务的整体体验质量评价估算公式(13)如下。其中si表示第i片段的QoE评分,ωi表示第i片段的影响权重系数,Sn(N)表示整个视频播放过程中片段发生质量等级切换的总次数,ψ为调和参数。
本说明书实施例所述的内容仅仅是对发明构思的实现形式的列举,本发明的保护范围不应当被视为仅限于实施例所陈述的具体形式,本发明的保护范围也及于本领域技术人员根据本发明构思所能够想到的等同技术手段。

Claims (1)

1.移动流媒体用户QoE评估方法,具体步骤如下:
步骤1.移动流媒体用户QoE影响因素映射方法;
S1.1:对于流媒体业务过程中的视频质量等级,视频质量切换等级差,采用的映射算法分别如下:
视频质量等级η表示每个媒体片段等级与最高的视频质量等级的比值,如公式(1),主要评价每个片段质量等级。其中Qi表示第i片段的视频质量等级,N表示MPD中最高的质量等级。
η = Q i N - - - ( 1 )
视频质量切换等级差υ表示每个媒体分片在发生质量等级切换时上下切换幅度,公式(2)评价视频质量等级的大幅度跳变而造成的感官体验影响;其中Qi-1表示上一片段的视频质量等级。
υ = | Q i - Q i - 1 | N - - - ( 2 )
S1.2:对于流媒体业务过程中的设备稳定性、用户观看距离,首先采用移动设备传感器分别测量设备稳定性、用户观看距离,再采用相应的映射算法分别如下:
用户观看距离测量方法:首先根据相关研究大量调研和精确测量,得出几种用户占比最大的观看位置下移动设备与水平面夹角的角度,通过大量实验表明这些角度能代表大多数用户在不同位置的观看角度;以下分别表示用户的四种不同观看位置以及设备摆放的角度15°、40°、60°、75°,由此用这些有限的位置组合来匹配用户当前所处的观看距离;最后使用加速度传感器进行了大量的实验,得到了四种观看状态下的三轴加速度特征,分别为:
(1)Lap-case(X:1.2,Y:0,Z:8.5,单位m/s2)
(2)Table-case(X:6,Y:0,Z:4.8,单位m/s2)
(3)Hand-case(X:7.3,Y:0,Z:4.2,单位m/s2)
(4)Table-moving(X:9.1,Y:0,Z:1.8,单位m/s2)
对应的观看距离分别为0.32m,0.22m,0.12m,0.60m;使用这些特殊状态的观看距离来匹配用户实际观看距离。当加速度传感器输出的实时三轴加速度符合上述的某种特征值,误差±0.5,则判断为相应的观看位置;
设备稳定性测量方法:采用基于加速度传感器的设备抖动状态检测方法,并加入用户主观感受评分阈值,从用户的角度更为准确的判断设备状态;首先定义了一个存有n秒数据的滑动窗口;定义一个计数器cd,一旦设备在滑动窗口内发生至少2s连续的方向变化则判断的一次抖动,cd=cd+1;为了避免轻微抖动都自适应检测的影响,只有当方向变化值超过阀值TG的时候计数器才会增加,定义如果在一个滑动窗口时间n秒内没加检测到抖动则将计数器cd重置,同时设置了每秒4次的传感器采样率。具体如下算法1。MOS评分定义如式3:
MOS=a0+aampl*x1+adur*x2+aspeed*x3 (3)
其中x1表示设备在抖动时的振幅,x2表示当前设备抖动的持续时间,x3表示抖动时播放的速度;MOS模型参数a0=3.7,aampl=-2.5723,adur=-0.0494,aspeed=-2.412;设定阀值为3.5,当MOS≥3.5时表示用户主观体验良好,MOS<3.5时表示用户主观体验较差;一旦抖动计数器和MOS同时超过阀值则判定当前用户为较差的观看体验,不适合观看当前较高质量的视频;
算法1 设备震动状态检测
S1.3:定义当前视频片段时刻设备的抖动情况θ和当前视频片段时刻用户的观看位置σ;
公式如下(4)、(5)。其中θ和σ的值来自于上述基于加速度传感器检测设备稳定算法和距离检测算法的输出值,stable表示设备处于稳定状态,instable表示设备处于抖动状态,感官体验较差;In hand表示当前观看距离为0.12m,On table facing up表示当前观看距离为0.22m,On lap表示当前观看距离为0.32m,On当前观看距离为0.60m。
θ = 0 s t a b l e 1 i n s t a b l e - - - ( 4 )
σ = 0.12 H a n d - c a s e 0.22 T a b l e - c a s e 0.32 L a p - c a s e 0.60 T a b l e - m o v i n g - - - ( 5 )
步骤2.移动流媒体用户QoE评价方法;
S2.1:根据上述映射方式,设定每个分段的QoE评估得分如下公式(6):其中η表示视频质量等级,υ表示视频质量切换等级差,θ表示设备的抖动情况,σ表示用户的观看位置,a,b,c,d,e为相应的调和系数。
QoE seg i = a * η + b * υ + c * θ + d * σ + e - - - ( 6 )
S2.2:采用基于HAS的系列位置效应量化方法,将近因效应和首因效应的影响程度与视频播放时间建立映射关系,获得整个视频中每个片段相对于整体所占权重ωi,并根据视频的长度,动态的调整近因效应υ和首因效应ρ的影响强度;
定义1:影响强度函数f(t),定义如下:
f ( t ) = 1 1 + θ 2 t 2 + 1 1 + δ 2 ( t - T ) 2 , 0 ≤ t ≤ T - - - ( 7 )
式(7)中近因效应因子θ,表示首因效应影响程度;近因效应因子δ,表示近因效应影响程度;t表示当前时刻,T表示整个视频业务结束时刻;
定义2:第i片段视频的影响强度fi。假设第i片段的播放时间为ti-1到ti,那么该片段的持续时间为ΔT=ti-ti-1。那么第i片段视频的影响强度可以表示为:
f i = ∫ t i - 1 t i 1 1 + θ 2 t 2 + 1 1 + δ 2 ( T - t ) 2 d t = ∫ ( i - 1 ) Δ T i Δ T 1 1 + θ 2 t 2 + 1 1 + δ 2 ( T - t ) 2 d t = Δ T υ arctan υ 1 + υ 2 ( K - i ) ( K - i + 1 ) + Δ T ρ arctan ρ 1 + ρ 2 i ( i - 1 ) , 1 ≤ i ≤ K - - - ( 8 )
式(8)中ρ=θΔT为离散后的首因因子,υ=δΔT为离散后的近因因子,K表示总的视频片段数;
定义3:第i片段的权重ωi。归一化后,便可以得到第i片段的权重ωi,公式如下:
ω i = f i Σ 1 K f i = a r c t a n υ 1 + υ 2 ( K - i ) ( K - i + 1 ) + a r c t a n ρ 1 + ρ 2 i ( i - 1 ) a r c t a n ( ρ K ) + a r c t a n ( υ K ) - - - ( 9 )
定义4:首因因子ρ和近因因子υ,表示首因效应和近因效应的影响强弱,随着视频时间的增长,首因效应逐渐减弱,而近因效应逐渐增强;
要获得ωi,必须求得首因因子ρ和近因因子υ。首先定义首因效应影响起始m个片段的权重比例为a,近因效应影响末尾n个片段权重比例为b;当播放的自适应流足够长的时候,即K≥30时,获得如下计算公式:
a = Σ 1 m ω i = arctan ( ρ m ) + arctan ( υ m 1 + υ 2 K ( K - m ) ) arctan ( ρ K ) + arctan ( υ K ) = 1 π arctan ( ρ m ) b = Σ N - n + 1 N ω i = arctan ( υ n ) + arctan ( ρ n 1 + ρ 2 K ( K - n ) ) arctan ( ρ K ) + arctan ( υ K ) = 1 π arctan ( υ n ) - - - ( 10 )
ρ = 1 m tan ( π a ) , 0 ≤ a ≤ 0.5 υ = 1 n tan ( π b ) , 0 ≤ b ≤ 0.5 - - - ( 11 )
由式(10)可以转化出式(11),从而求得首因因子ρ和近因因子υ;
拟合出a,b随视频长度变化的一次线性函数如公式(12)
a = - 0.0034 K + 0.406 10 ≤ K ≤ 136 0.1 K > 136 , b = 0.5 - a - - - ( 12 )
由此计算得每个视频片段的权重系数为W=(ω123,...,ωN);
S2.3:整个自适应流媒体服务的整体体验质量评价估算公式(13)如下。其中si表示第i片段的QoE评分,ωi表示第i片段的影响权重系数,Sn(N)表示整个视频播放过程中片段发生质量等级切换的总次数,ψ为调和参数。
Q O E = Σ i = 0 n s i × ω i + ψ * S n ( N ) - - - ( 13 )
CN201611165090.5A 2016-12-16 2016-12-16 一种移动流媒体用户体验质量QoE评估方法 Active CN106604026B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611165090.5A CN106604026B (zh) 2016-12-16 2016-12-16 一种移动流媒体用户体验质量QoE评估方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611165090.5A CN106604026B (zh) 2016-12-16 2016-12-16 一种移动流媒体用户体验质量QoE评估方法

Publications (2)

Publication Number Publication Date
CN106604026A true CN106604026A (zh) 2017-04-26
CN106604026B CN106604026B (zh) 2018-08-21

Family

ID=58801833

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611165090.5A Active CN106604026B (zh) 2016-12-16 2016-12-16 一种移动流媒体用户体验质量QoE评估方法

Country Status (1)

Country Link
CN (1) CN106604026B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108965949A (zh) * 2018-07-27 2018-12-07 清华大学 一种视频业务中满足用户个性化体验的码率自适应方法
CN109218814A (zh) * 2018-09-28 2019-01-15 西安交通大学 一种云计算环境下QoE驱动的HAS直播频道调度方法
CN109257633A (zh) * 2018-09-28 2019-01-22 西安交通大学 一种环境感知的HTTP自适应流媒体QoE优化方法
CN109905382A (zh) * 2019-02-15 2019-06-18 南京邮电大学 Iptv视频流业务用户体验质量主客观综合评估方法
CN110392253A (zh) * 2019-06-25 2019-10-29 北京奇艺世纪科技有限公司 视频的质量评估方法、装置、设备及存储介质
CN110874441A (zh) * 2020-01-19 2020-03-10 中国传媒大学 结合记忆遗忘和记忆增强的用户兴趣分析方法及系统
CN111083125A (zh) * 2019-12-02 2020-04-28 上海交通大学 神经网络优化的无参考自适应流媒体质量评价方法及系统
CN112101788A (zh) * 2020-09-15 2020-12-18 福州大学 基于长期记忆的视频QoE评价系统及方法
CN113395602A (zh) * 2021-06-25 2021-09-14 合肥工业大学 针对自适应点云视频流媒体中用户体验质量QoE的建模方法
CN114071240A (zh) * 2021-09-18 2022-02-18 北方工业大学 一种基于自适应程度的移动视频QoE评估方法
CN114449343A (zh) * 2022-01-28 2022-05-06 北京百度网讯科技有限公司 一种视频处理方法、装置、设备及存储介质
CN115331156A (zh) * 2022-10-17 2022-11-11 成都西交智汇大数据科技有限公司 二氧化碳制取实验评分方法、装置、设备及可读存储介质
US11503304B2 (en) 2016-12-12 2022-11-15 Netflix, Inc. Source-consistent techniques for predicting absolute perceptual video quality
CN116170171A (zh) * 2022-11-30 2023-05-26 华能信息技术有限公司 一种视频会议系统的网络安全管理方法
CN117939189A (zh) * 2024-03-21 2024-04-26 中国信息通信研究院 一种面向不良视频加密流量数据的质量属性评价方法和系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101771492A (zh) * 2008-12-29 2010-07-07 华为技术有限公司 调整流媒体码率的方法和装置
CN102143388A (zh) * 2011-04-22 2011-08-03 赛特斯网络科技(南京)有限责任公司 Iptv用户体验质量评估装置及评估方法
CN102611676A (zh) * 2011-01-24 2012-07-25 华为技术有限公司 一种保证QoE的方法及装置
WO2012159684A1 (en) * 2011-05-20 2012-11-29 Telefonaktiebolaget L M Ericsson (Publ) Methods and devices for content distribution
CN103582029A (zh) * 2012-07-24 2014-02-12 华为技术有限公司 策略控制方法及设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101771492A (zh) * 2008-12-29 2010-07-07 华为技术有限公司 调整流媒体码率的方法和装置
CN102611676A (zh) * 2011-01-24 2012-07-25 华为技术有限公司 一种保证QoE的方法及装置
CN102143388A (zh) * 2011-04-22 2011-08-03 赛特斯网络科技(南京)有限责任公司 Iptv用户体验质量评估装置及评估方法
WO2012159684A1 (en) * 2011-05-20 2012-11-29 Telefonaktiebolaget L M Ericsson (Publ) Methods and devices for content distribution
CN103582029A (zh) * 2012-07-24 2014-02-12 华为技术有限公司 策略控制方法及设备

Non-Patent Citations (9)

* Cited by examiner, † Cited by third party
Title
CHENGHAO LIU等: "rate adaptation for adaptive http streaming", 《IEEE》 *
DUC HOANG等: "rethinking energy performance trade-off in mobile web page loading", 《IEEE》 *
MARKUS FIEDLER等: "the memory effect and its implications on web qoe modeling", 《IEEE》 *
MAXIM CLAEYS等: "design and evaluation of self-learning http adaptive video streaming client", 《IEEE》 *
SHIPENG YU等: ""modeling for short form http adaptive streaming considering memory effect"", 《INTERNATIONAL CONFERENCE》 *
STEFAN WILK 等: "the influence of camera shakes,harmful occlusions and camera misalignment on the perceived quality in user", 《IEEE》 *
STEFAN WILK等: "Video composition by the crowd:a system to compose user-generated videos in near real-time", 《PROCEEDINGS OF THE 6TH ACM MULTIMEDIA SYSTEMS CONFERENCE》 *
YUN SHEN 等: "a method of qoe evaluation for adaptive strenming based on bitrate distribution", 《IEEE》 *
熊丽蓉等: "基于Q_learning的HTTP自适应流码率控制方法研究", 《通信学报》 *

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11503304B2 (en) 2016-12-12 2022-11-15 Netflix, Inc. Source-consistent techniques for predicting absolute perceptual video quality
US11758148B2 (en) * 2016-12-12 2023-09-12 Netflix, Inc. Device-consistent techniques for predicting absolute perceptual video quality
CN108965949B (zh) * 2018-07-27 2020-06-16 清华大学 一种视频业务中满足用户个性化体验的码率自适应方法
CN108965949A (zh) * 2018-07-27 2018-12-07 清华大学 一种视频业务中满足用户个性化体验的码率自适应方法
CN109218814A (zh) * 2018-09-28 2019-01-15 西安交通大学 一种云计算环境下QoE驱动的HAS直播频道调度方法
CN109257633A (zh) * 2018-09-28 2019-01-22 西安交通大学 一种环境感知的HTTP自适应流媒体QoE优化方法
CN109257633B (zh) * 2018-09-28 2020-07-28 西安交通大学 一种环境感知的HTTP自适应流媒体QoE优化方法
CN109905382A (zh) * 2019-02-15 2019-06-18 南京邮电大学 Iptv视频流业务用户体验质量主客观综合评估方法
CN110392253A (zh) * 2019-06-25 2019-10-29 北京奇艺世纪科技有限公司 视频的质量评估方法、装置、设备及存储介质
CN111083125A (zh) * 2019-12-02 2020-04-28 上海交通大学 神经网络优化的无参考自适应流媒体质量评价方法及系统
CN110874441A (zh) * 2020-01-19 2020-03-10 中国传媒大学 结合记忆遗忘和记忆增强的用户兴趣分析方法及系统
CN110874441B (zh) * 2020-01-19 2020-05-19 中国传媒大学 结合记忆遗忘和记忆增强的用户兴趣分析方法及系统
CN112101788A (zh) * 2020-09-15 2020-12-18 福州大学 基于长期记忆的视频QoE评价系统及方法
CN113395602B (zh) * 2021-06-25 2022-03-22 合肥工业大学 针对自适应点云视频流媒体中用户体验质量QoE的建模方法
CN113395602A (zh) * 2021-06-25 2021-09-14 合肥工业大学 针对自适应点云视频流媒体中用户体验质量QoE的建模方法
CN114071240A (zh) * 2021-09-18 2022-02-18 北方工业大学 一种基于自适应程度的移动视频QoE评估方法
CN114071240B (zh) * 2021-09-18 2023-05-26 北方工业大学 一种基于自适应程度的移动视频QoE评估方法
CN114449343A (zh) * 2022-01-28 2022-05-06 北京百度网讯科技有限公司 一种视频处理方法、装置、设备及存储介质
CN115331156A (zh) * 2022-10-17 2022-11-11 成都西交智汇大数据科技有限公司 二氧化碳制取实验评分方法、装置、设备及可读存储介质
CN116170171A (zh) * 2022-11-30 2023-05-26 华能信息技术有限公司 一种视频会议系统的网络安全管理方法
CN116170171B (zh) * 2022-11-30 2024-03-01 华能信息技术有限公司 一种视频会议系统的网络安全管理方法
CN117939189A (zh) * 2024-03-21 2024-04-26 中国信息通信研究院 一种面向不良视频加密流量数据的质量属性评价方法和系统
CN117939189B (zh) * 2024-03-21 2024-06-11 中国信息通信研究院 一种面向不良视频加密流量数据的质量属性评价方法和系统

Also Published As

Publication number Publication date
CN106604026B (zh) 2018-08-21

Similar Documents

Publication Publication Date Title
CN106604026A (zh) 一种移动流媒体用户体验质量QoE评估方法
CN102143388B (zh) Iptv用户体验质量评估装置及评估方法
US20220030048A1 (en) Method and scoring node for estimating a user's quality of experience for a delivered service
CN105653683B (zh) 一种个性化推荐方法及装置
CN104021162B (zh) 一种为多媒体资源打分的方法及装置
CN104796443B (zh) 一种移动流媒体用户体验质量QoE修正方法和服务器
CN102902981B (zh) 基于慢特征分析的暴力视频检测方法
CN103841412A (zh) 一种网络视频用户体验质量测量方法和装置
CN109831705A (zh) 一种针对HTTP视频流业务的主观QoE评估方法
Cohen Stream sampling for frequency cap statistics
CN109794060A (zh) 一种游戏数据处理的系统及方法、电子设备、存储介质
CN104965896B (zh) 基于二次函数表示用户偏好的推荐方法及系统
Tran et al. A cumulative quality model for HTTP adaptive streaming
Wang et al. Internet multimedia traffic classification from QoS perspective using semi-supervised dictionary learning models
CN103428523A (zh) 评估视频质量的方法和装置
CN110855669A (zh) 基于神经网络适用于加密流量的视频QoE指标预测方法
Feng et al. Timely and accurate bitrate switching in HTTP adaptive streaming with date-driven I-frame prediction
CN106779204A (zh) 一种个性化路径推荐的方法及装置
Nathan et al. Corked bats, juiced balls, and humidors: The physics of cheating in baseball
KR102342879B1 (ko) 골프 코칭 시스템 및 방법
Obadinma et al. Class-wise Calibration: A Case Study on COVID-19 Hate Speech.
Zhang et al. Predicting popularity of messages in twitter using a feature-weighted model
CN104320296B (zh) 一种网络质量的评估检测方法及其装置
CN108549729A (zh) 基于覆盖约简的个性化用户协同过滤推荐方法
Li et al. CAST: An Intricate-Scene Aware Adaptive Bitrate Approach for Video Streaming via Parallel Training

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant