CN105991364A - 一种用户感知评估方法及装置 - Google Patents

Abstract

本发明公开了一种用户感知评估方法及装置，包括获取用户上网产生的数据；从获得的数据中识别出终端信息和视频业务信息；根据识别出的终端信息确定视频指标评估标准，根据识别出的终端信息和视频业务信息计算视频指标；利用计算出的视频指标和确定的视频指标评估标准，获取视频感知评估结果。本发明提供的技术方案根据用户终端类型、观看视频内容差异、结合实际视频网络指标来演进新的视频指标，从而来评估用户视频感知效果，由于充分体现了用户差异、视频内容差异，更加精确地感知到了系统的整体性能，从而更好地体现了视频业务的感知效果。

Description

一种用户感知评估方法及装置

技术领域

本发明涉及移动互联网技术，尤指一种用户感知评估方法及装置。

背景技术

全球的移动互联网业务发展迅速，很多地区已经步入4G网络时代，同时，随着使用高速移动互联网用户的激增，使用业务也出现了变化。2G时代，用户主要使用语音电话；而3G/4G时代以来网络中传输的大量流量都是视频流量，随着越来越多用户喜欢使用移动互联网来观看视频内容，用户的要求也越来越高，这样以来，对运营商的网络质量、内容提供商的系统质量等提出了更高要求。

以用户体验为中心的用户感知评估方法成为互联网的热门技术，这种以终端用户的实际感知结果为评价核心的方法，更能体现客户的满意程度。用户的体验质量(QOE，Quality of Experience)是用户端到端的概念，是指用户对业务的主观体验，是从用户的角度感觉到的系统的整体性能。

对3G/4G时代的网络核心流量如视频业务，使用用户感知评估方法进行业务质量评估，可以更准确反映运营商网络质量、从而发现网络问题等。现有的用户视频感知评价技术仅仅是从接入性能、视频下载速率等方面，使用建立时延指标、下载速率指标等进行评估。其中，建立时延指标是视频业务的TCP链接建立的时长，下载速率指标是业务单位时间内的下载流量。

现有的用户视频感知评价方法中，没有考虑实际用户视频内容差异性,不同内容、不同视频格式对网络质量要求的差异性,用户终端的差异等因素。也就是说，现有的用户感知评估方法指示通过通用指标如建立时延指标、下载速率指标来进行感知评价，很难精确感知到系统的整体性能，也不能精确体现视频业务的感知效果。

发明内容

为了解决上述技术问题，本发明提供一种用户感知评估方法及装置，能够更加精确地感知到系统的整体性能，从而更好地体现视频业务的感知效果。

为了达到本发明目的，本发明提供了一种用户感知评估方法，包括：

获取用户上网产生的数据；

从获得的数据中识别出终端信息和视频业务信息；

根据识别出的终端信息确定视频指标评估标准，根据识别出的终端信息和视频业务信息计算视频指标；

利用计算出的视频指标和确定的视频指标评估标准，获取视频感知评估结果。

可选地，所述识别出的终端信息和视频业务信息计算视频指标之后，所述获取视频感知评估结果之前，该方法还包括：对所述视频指标进行加权调整。

可选地，所述对视频指标进行加权调整包括：根据所述数据中的视频内容特性进行加权调整。

可选地，所述视频业务信息包括视频业务流信息和视频参数。

可选地，所述从获得的数据中识别出视频业务信息包括：

根据所述获得的用户上网产生的数据识别出视频业务的数据流，从而获取所述视频业务流信息；

获取视频业务的常用指标；再深入分析视频数据，保存视频文件头部内容，从视频文件头部内容中解码出所述视频参数；其中，所述视频参数至少包括视频编码率、和/或视频格式、和/或视频时长、和/或视频帧率。

可选地，所述确定视频指标评估标准包括：根据所述识别出的终端的具体型号，选择该型号对应的预先设置的视频指标评估标准。

可选地，所述视频指标评估标准为针对各项视频指标进行等级评判的评估标准。

可选地，所述视频指标评估标准为视频流畅性评级标准。

可选地，所述计算视频指标包括：结合所述识别出的终端类型、视频内容、视频参数，对网络视频指标进行演进计算获取所述视频指标。

可选地，所述视频指标至少包括视频实际帧率、和/或播放效率、和/或播放延期率。

可选地，所述获取视频感知评估结果包括：

将所述计算出的视频指标在所述确定出的视频指标评估标准中进行查询，获取该视频指标的评价等级作为用户对该项视频属性的真实感知评估结果；对各项视频属性指标都进行评估，获取视频的各项属性指标的评价等级分别作为用户对视频各项属性的真实感知评估结果。

本发明还提供了一种用户感知评估装置，至少包括获取模块、识别模块、确定模块、计算模块、评估模块；其中，

获取模块，用于获取用户上网产生的数据；

识别模块，用于从获得的数据中识别出终端信息和视频业务信息；

确定模块，用于根据识别出的终端信息确定视频指标评估标准；

计算模块，用于根据识别出的终端信息和视频业务信息计算视频指标；

评估模块，用于利用计算出的视频指标和确定的视频指标评估标准，获取视频感知评估结果。

可选地，该装置还包括加权模块，用于对所述计算模块输出的视频指标进行加权调整。

可选地，所述视频业务信息包括视频业务流信息和视频参数。

可选地，所述识别模块具体用于：根据所述获得的用户上网产生的数据识别出视频业务的数据流，从而获取所述视频业务流信息；

获取视频业务的常用指标；再深入分析视频数据，保存视频文件头部内容，从视频文件头部内容中解码出所述视频参数；其中，所述视频参数至少包括视频编码率、和/或视频格式、和/或视频时长、和/或视频帧率。

可选地，所述计算模块具体用于：结合所述识别出的终端类型、视频内容、视频参数，对网络视频指标进行演进计算获取所述视频指标。

可选地，所述视频指标至少包括视频实际帧率、和/或播放效率、和/或播放延期率。

可选地，所述评估模块具体用于：根据计算出的各项视频指标和确定的各项视频指标评估标准，获取视频的各项属性指标的评价等级作为用户对视频各项属性的真实感知评估结果。

与现有技术相比，本申请技术方案包括获取用户上网产生的数据；从获得的数据中识别出终端信息和视频业务信息；根据识别出的终端信息确定视频指标评估标准，根据识别出的终端信息和视频业务信息计算视频指标；利用计算出的视频指标和确定的视频指标评估标准，获取视频感知评估结果。本发明提供的技术方案根据用户终端类型、观看视频内容差异、结合实际视频网络指标来演进新的视频指标，从而来评估用户视频感知效果，由于充分体现了用户差异、视频内容差异，更加精确地感知到了系统的整体性能，从而更好地体现了视频业务的感知效果。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1为本发明用户感知评估方法的流程图；

图2为本发明用户感知评估装置的组成结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，下文中将结合附图对本发明的实施例进行详细说明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。

图1为本发明用户感知评估方法的流程图，如图1所示，包括：

步骤100：获取用户上网产生的数据。

本步骤的具体实现属于本领域技术人员的公知技术，具体实现方法并不用于限定本发明的保护范围，这里不再赘述。

步骤101：从获得的数据中识别出终端信息和视频业务信息。

本步骤中，可以从获得的用户上网产生的数据携带的特征信息中识别出用户所使用终端的类型，并可以使用终端类型查询终端类型库从而得出更加详细的终端信息，比如苹果手机、手机型号、该型号手机屏幕大小等。比如，HTTP协议的UA字段会携带终端类型信息，从而识别出终端类型。具体实现属于本领域技术人员的惯用技术手段，并不用于限定本发明的保护范围，这里不再赘述。

本步骤中，视频业务信息包括视频业务流信息和视频参数。其中，

根据获得的用户上网产生的数据中的IP地址、主机名、特征词、ULR分类等信息，可以识别出视频业务的数据流，从而获取视频业务流信息如视频具体业务主题，比如优酷视频、优酷足球视频、少儿动画等；

获取视频业务的常用指标如下载速率，下载大小等，然后，再深入分析视频数据，保存视频文件头部内容，从视频文件头部内容中解码出视频详细参数，包括但不限于视频编码率、和/或视频格式、和/或视频时长、和/或视频帧率等视频参数。

本步骤中如何获取终端信息和视频业务信息对于本领域技术人员来讲，是容易实现的，具体可以采用现有公知技术实现，并不用于限定本发明的保护范围，这里不再赘述。这里强调的是，本发明提供的用户感知评估方法中，会获取更加详细的视频参数，以便更加精确地感知到系统的整体性能，从而更好地体现视频业务的感知效果。

步骤102：根据识别出的终端信息确定视频指标评估标准，根据识别出的终端信息和视频业务信息计算视频指标。

本步骤中的确定视频指标评估标准，可以根据手机的具体型号，选择合适该型号的视频指标评估标准。比如，针对视频流畅性指标的评价，预先设置视频流畅性指标评级标准，根据终端是手机和电脑，给出不同的流畅评级标准。假设：手机观看视频时，正常帧率为12帧/秒就可以观看流畅，12帧/秒是手机流畅标准；手机观看激烈画面如足球比赛等时要求帧率为24帧/秒才比较清晰，24帧/秒是手机激烈画面流畅标准；40帧/秒是手机观看视频最高感知效果，大于这个帧率对视频流畅性感知影响不大。电脑观看视频时，帧率为24帧/秒是流畅标准，这也是普通电影的帧率，24帧/秒是电脑流畅标准；电脑观看激烈画面如足球比赛等时要求30帧/秒才比较清晰，30帧/秒是电脑激烈画面流畅标准；60帧/秒是电脑观看视频最高感知效果，大于这个帧率对视频流畅性感知影响不大。这个评价标准还可以更加细化为各种类型终端的评价标准，比如分别针对3寸三星手机评价标准、4寸IPhone手机评价标准、42寸彩电的评价标准(现在很多网络视频电视机尺寸都很大，对视频质量要求更高)等。

需要说明的是，视频指标评估标准也可以以视频的其他特性为评级标准，也可以根据终端类型区分不同评级标准，对于本领域技术人员来讲，结合本发明的提供的技术方案是容易想到的，本发明方法并不限制于上述举例的视频流畅性评级标准。

本步骤中的计算视频指标包括：结合识别出的终端类型、视频内容、视频参数等信息，对网络视频指标如视频编码率、视频实际下载速率、视频额定帧率、下载时长、视频时长等进行演进计算获取新的视频指标，如视频实际帧率、和/或播放效率、和/或播放延期率等视频指标。具体地，

视频编码率基本等于额定要求的播放速率A，在播放速率A下有视频额定帧率B。假设视频实际下载速率是C，那么，视频实际帧率D＝(C/A)×B。如果视频实际帧率D大于视频额定帧率B，那么，必须调整视频实际帧率D使其等于视频额定帧率B。也就是说：

本步骤中的视频实际帧率＝(视频实际下载速率/视频编码率)×视频额定帧率；假如，视频实际帧率>视频额定帧率,那么将视频实际帧率调整为等于视频额定帧率。

举个例子，假设用户使用电脑观看视频，预先设置的视频流畅性指标评估标准为电脑观看视频流畅性指标评估标准，其中，帧率为24帧/秒是流畅标准。假设电脑观看某个视频，要求视频编码率为1152kpbs，视频额定帧率是30帧/秒，视频实际下载速率是700kpbs，那么，根据上述视频实际帧率的计算公式，视频实际帧率是(700/1152)×30＝18.2帧/秒。计算出的视频实际帧率与电脑视频流畅评级标准相比，小于24帧/秒，因此，可以认为该视频观看属于不流畅。

本步骤中的播放效率可以根据视频编码率计算得到。在计算出的播放效率小于1时，说明视频会存在延迟。具体地，

播放效率＝视频实际下载速率/视频编码率；比如：某视频额定播放速率为1152kpbs，视频实际下载速率为700kbps，则播放效率700/11152＝60.7％，小于1，说明视频会延迟卡顿。

本步骤中的播放延期率可以根据视频的时长计算得到。播放延期率为正数，说明视频会存在延迟。具体地，

播放延期率＝(下载时长-视频时长)/视频时长；比如：某视频时长是1800s，实际下载时长是2000s，播放延期率(2000-1800)/1800＝+11.1％，是正数，说明视频会延迟卡顿。

步骤103：利用计算出的视频指标和确定的视频指标评估标准，获取视频感知评估结果。

本步骤中，将计算出的视频指标在确定的视频指标评估标准中进行查询，获取该视频指标的评价等级；获得的该视频指标的评价等级就是用户对该项视频属性的真实感知评估结果；对各项视频属性指标都进行评估，获取视频的各项属性指标的评价等级，即用户对视频各项属性的真实感知评估结果。

举个例子，比如：用户使用手机终端观看普通视频，根据步骤101、步骤102计算得到用户实际帧率为18.2帧/秒。假设选择手机视频流畅性指标评估标准，范围在12帧/秒-24帧/秒之间属于流畅等级；那么，步骤103得出的视频的流畅性感知评估结果是流畅。再如：根据播放延期率，根据步骤101、步骤102计算得到的播放延期率是+11.1％；假设选择延期率指标评估标准，播放延期率是正数、数值越大延迟越严重；那么，视频时间性感知评估结果是存在延迟。相同方法，可以获取视频各项属性的评估等级，即视频各项属性的真实感知评估结果。

进一步地，还可以使用加权打分的方法将各项指标等级转换为分数，对各项指标分配不同权重，综合各项指标获取一个整体的视频感知评估分数，即对应视频整体评估结果。其中，权重的选取属于本领域技术人员按照实际应用情况容易获知的，并不用于限定本发明的保护范围，这里不再赘述。

使用相同方法，可以类似获取视频各项属性指标的评估结果。例如，视频的音效属性指标，可以根据用户特性(例如终端音频设备特性)选择合适的音效指标评价标准，再结合视频文件中音效参数、实际音效数据，获取实际音效指标，根据实际音效指标和音效评估标准，获取用户对视频音效属性的真实感知评估结果。

进一步地，步骤102之后，步骤103之前，本发明方法还包括：如根据视频内容、格式信息等，对视频指标进行加权调整。具体地，

调整后的视频实际帧率＝调整前的视频实际帧率×加权系数；

假如识别出的视频主题是足球比赛视频，那么由于足球比赛画面激烈，帧率要求更高才能不出现马赛克等情况，因此，可以进一步使用加权系数为0.8对实际帧率进行调整。假如识别出的视频主题是动画片，那么动画片本身对画面连续性要求低，可以进一步使用加权系数为1.4对实际帧率进行调整。根据这个方法，比如：观看某动画片，假设实际帧率是18.2帧/秒，进行加权调整后，调整后的实际帧率是25.48帧/秒，属于流畅等级；再如：电脑终端观看某足球比赛，实际帧率是18.2帧/秒，进行加权调整后，调整后的实际帧率是14.56帧/秒，则属于不流畅等级。

需要说明的是，本发明方法并不限于根据视频内容特性进行加权系数调整，也可以根据视频内容其他特性如视频格式，高清视频和普清视频等进行调整，其具体实现对于本领域技术人员来讲，在本发明提供的技术方案的基础上是容易实现的，并不用于限定本发明的保护范围，这里不再赘述。

上面关于根据终端类型、视频内容、视频参数优化视频感知评估的方法只是举例，实际运用中不限于这几种分配方式，总的思路是根据用户终端类型、观看视频内容差异、结合实际视频网络指标来演进新的视频指标，从而来评估用户视频感知效果。这样的方法因为充分体现了用户差异、视频内容差异，更加精确地感知到了系统的整体性能，从而更好地体现了视频业务的感知效果。

图2为本发明用户感知评估装置的组成结构示意图，如图2所示，至少包括获取模块、识别模块、确定模块、计算模块、评估模块；其中，

获取模块，用于获取用户上网产生的数据。

识别模块，用于从获得的数据中识别出终端信息和视频业务信息。

确定模块，用于根据识别出的终端信息确定视频指标评估标准。

计算模块，用于根据识别出的终端信息和视频业务信息计算视频指标。

评估模块，用于利用计算出的视频指标和确定的视频指标评估标准，获取视频感知评估结果。

本发明装置还包括加权模块，用于对视频指标进行加权调整。

其中，视频业务信息包括视频业务流信息和视频参数。识别模块具体用于：根据获得的用户上网产生的数据识别出视频业务的数据流，从而获取视频业务流信息；

获取视频业务的常用指标；再深入分析视频数据，保存视频文件头部内容，从视频文件头部内容中解码出所视频参数；其中，视频参数包括视频编码率、和/或视频格式、和/或视频时长、和/或视频帧率等。

计算模块具体用于：结合识别出的终端类型、视频内容、视频参数，对网络视频指标进行演进计算获取视频指标。

其中，视频指标包括视频实际帧率、和/或播放效率、和/或播放延期率等。

评估模块具体用于：根据计算出的各项视频指标和确定的各项视频指标评估标准，获取视频的各项属性指标的评价等级，即用户对视频各项属性的真实感知评估结果。

评估模块还用于，使用加权打分的方法将各项指标等级转换为分数，对各项指标分配不同权重，综合各项指标获取一个整体的视频感知评估分数，即对应视频整体评估结果。

以上所述，仅为本发明的较佳实例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (18)

1.一种用户感知评估方法，其特征在于，包括：

获取用户上网产生的数据；

从获得的数据中识别出终端信息和视频业务信息；

根据识别出的终端信息确定视频指标评估标准，根据识别出的终端信息和视频业务信息计算视频指标；

利用计算出的视频指标和确定的视频指标评估标准，获取视频感知评估结果。

2.根据权利要求1所述的用户感知评估方法，其特征在于，所述识别出的终端信息和视频业务信息计算视频指标之后，所述获取视频感知评估结果之前，该方法还包括：对所述视频指标进行加权调整。

3.根据权利要求2所述的用户感知评估方法，其特征在于，所述对视频指标进行加权调整包括：根据所述数据中的视频内容特性进行加权调整。

4.根据权利要求1或2所述的用户感知评估方法，其特征在于，所述视频业务信息包括视频业务流信息和视频参数。

5.根据权利要求4所述的用户感知评估方法，其特征在于，所述从获得的数据中识别出视频业务信息包括：

根据所述获得的用户上网产生的数据识别出视频业务的数据流，从而获取所述视频业务流信息；

获取视频业务的常用指标；再深入分析视频数据，保存视频文件头部内容，从视频文件头部内容中解码出所述视频参数；其中，所述视频参数至少包括视频编码率、和/或视频格式、和/或视频时长、和/或视频帧率。

6.根据权利要求1或2所述的用户感知评估方法，其特征在于，所述确定视频指标评估标准包括：根据所述识别出的终端的具体型号，选择该型号对应的预先设置的视频指标评估标准。

7.根据权利要求6所述的用户感知评估方法，其特征在于，所述视频指标评估标准为针对各项视频指标进行等级评判的评估标准。

8.根据权利要求7所述的用户感知评估方法，其特征在于，所述视频指标评估标准为视频流畅性评级标准。

9.根据权利要求1或2所述的用户感知评估方法，其特征在于，所述计算视频指标包括：结合所述识别出的终端类型、视频内容、视频参数，对网络视频指标进行演进计算获取所述视频指标。

10.根据权利要求9所述的用户感知评估方法，其特征在于，所述视频指标至少包括视频实际帧率、和/或播放效率、和/或播放延期率。

11.根据权利要求1或2所述的用户感知评估方法，其特征在于，所述获取视频感知评估结果包括：

将所述计算出的视频指标在所述确定出的视频指标评估标准中进行查询，获取该视频指标的评价等级作为用户对该项视频属性的真实感知评估结果；对各项视频属性指标都进行评估，获取视频的各项属性指标的评价等级分别作为用户对视频各项属性的真实感知评估结果。

12.一种用户感知评估装置，其特征在于，至少包括获取模块、识别模块、确定模块、计算模块、评估模块；其中，

获取模块，用于获取用户上网产生的数据；

识别模块，用于从获得的数据中识别出终端信息和视频业务信息；

确定模块，用于根据识别出的终端信息确定视频指标评估标准；

计算模块，用于根据识别出的终端信息和视频业务信息计算视频指标；

评估模块，用于利用计算出的视频指标和确定的视频指标评估标准，获取视频感知评估结果。

13.根据权利要求12所述的用户感知评估装置，其特征在于，该装置还包括加权模块，用于对所述计算模块输出的视频指标进行加权调整。

14.根据权利要求12或13所述的用户感知评估装置，其特征在于，所述视频业务信息包括视频业务流信息和视频参数。

15.根据权利要求14所述的用户感知评估装置，其特征在于，所述识别模块具体用于：根据所述获得的用户上网产生的数据识别出视频业务的数据流，从而获取所述视频业务流信息；

获取视频业务的常用指标；再深入分析视频数据，保存视频文件头部内容，从视频文件头部内容中解码出所述视频参数；其中，所述视频参数至少包括视频编码率、和/或视频格式、和/或视频时长、和/或视频帧率。

16.根据权利要求12或13所述的用户感知评估装置，其特征在于，所述计算模块具体用于：结合所述识别出的终端类型、视频内容、视频参数，对网络视频指标进行演进计算获取所述视频指标。

17.根据权利要求16所述的用户感知评估装置，其特征在于，所述视频指标至少包括视频实际帧率、和/或播放效率、和/或播放延期率。

18.根据权利要求12或13所述的用户感知评估装置，其特征在于，所述评估模块具体用于：根据计算出的各项视频指标和确定的各项视频指标评估标准，获取视频的各项属性指标的评价等级作为用户对视频各项属性的真实感知评估结果。