CN114285760A

CN114285760A - 一种网页访问质量评估方法及装置

Info

Publication number: CN114285760A
Application number: CN202010986504.0A
Authority: CN
Inventors: 史浩; 徐金春; 蔡圣明
Original assignee: Huawei Technologies Co Ltd
Current assignee: Huawei Technologies Co Ltd
Priority date: 2020-09-18
Filing date: 2020-09-18
Publication date: 2022-04-05

Abstract

本申请提供一种网页访问质量评估方法及装置，涉及通信技术领域以及人工智能AI技术领域，用以解决现有技术中无法通过DPI方式解析加密的报文以得到KPI参数进行网页访问质量的评估，网页访问质量的运维效率不高且不够灵活的问题。该方法包括：第一网络设备获取第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的关键性能指标KPI参数，KPI参数包括至少一个下行数据流中每个下行数据流的字节数和获取每个下行数据流的起始时间；第一网络设备根据KPI参数得到目标网站的关键质量指标KQI参数，KQI参数包括所述网页加载过程对应的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个。

Description

一种网页访问质量评估方法及装置

技术领域

本申请涉及通信技术领域以及人工智能AI技术领域，尤其涉及一种网页访问质量评估方法及装置。

背景技术

随着互联网的发展，越来越多的网络服务丰富着用户的生活和工作，用户可以通过浏览器或者应用软件(Application，APP)访问网络资源。因此，运营商和应用软件厂商越来越关注用户的上网质量以及用户体验的评估，以便能更好地改进网页访问质量，提升用户的上网体验。

现有的网站访问体验评估可以通过抓包采集的方法来实现，具体可以通过深度包检测(Deep Packet Inspection，DPI)技术采集应用层的报文内容进行检测，计算得到多个关键性能指标(Key Performance Indicator，KPI)。例如，通过采集超文本传输安全协议(Hyper Text Transfer Protocol over SecureSocket Layer，HTTP)报文，得到访问发起总数、页面成功响应总次数、每次页面响应时延之和、页面显示时延、页面响应时延等指标参数。然后根据采集到的各种KPI指标综合计算KQI指标，根据得到的KQI指标在网页访问业务中所占的重要程度的不同对其进行加权求和，从而推理出用户访问网页的体验质量(Quality of Experience，QoE)评分。

由于当前的主流网站应用层大都采用HTTPS或者快速用户数据报文(Quick UserDatagram Protocol Internet Connection，QUIC)的加密协议，无法通过DPI方式解析加密的报文，因此上述方案不适用使用HTTPS或QUIC等加密协议的用户体验质量的评估。

发明内容

本申请提供一种网页访问质量评估方法及装置，解决了现有技术中无法通过DPI方式解析加密的报文以得到KPI参数、进行应用侧服务质量的评估，网页访问质量的运维效率不高且不够灵活的问题。

为达到上述目的，本申请采用如下技术方案：

第一方面，提供一种网页访问质量评估方法，该方法包括：第一网络设备获取用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的关键性能指标KPI参数，所述KPI参数包括至少一个下行数据流中每个下行数据流的总字节数和获取每个下行数据流的起始时间；第一网络设备根据所述KPI参数确定目标网站的关键质量指标KQI参数，所述KQI参数包括网页加载过程对应的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个。

上述技术方案中，网络设备可以获取接入的用户设备访问目标网站的至少一个下行数据流，得到下行数据流对应的KPI参数，通过对所述KPI参数进行网页访问质量的评估，得到所述用户设备访问目标网站的下行数据流所对应的关键质量指标KQI参数。由于网络设备获取的是流级的KPI参数信息，并不需要解析获取用户设备访问网站的报文数据，因此，可以对应用加密数据报文的网站进行网页服务质量的评估，提高网页评估的灵活性和智能程度。

在一种可能的设计方式中，第一网络设备根据所述KPI参数得到目标网站的关键质量指标KQI参数，具体包括：第一网络设备根据所述KPI参数通过网页质量评估模型进行网页访问质量评估，得到网页加载过程对应的KQI参数，网页质量评估模型是根据多个网页加载过程分别对应的KPI参数和KQI参数通过人工智能AI算法进行模型训练得到的。

上述可能的实现方式中，第一网络设备可以通过人工智能AI算法根据KPI参数得到对应的KQI参数，从而通过AI算法进行目标网站的网页质量评估，提高网页评估的灵活性和智能程度。

在一种可能的设计方式中，第一网络设备根据所述KPI参数得到目标网站的关键质量指标KQI参数之前，该方法还包括：第一网络设备接收来自第二网络设备的监控指令，监控指令包括网站列表和KPI参数类型，监控指令用于指示第一网络设备收集用户设备访问网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数；第一网络设备根据监控指令，收集用户设备访问多个网站的多个网页加载过程的下行数据流的KPI参数，并且收集多个网页加载过程分别对应的KQI参数；第一网络设备向第二网络设备发送多个网页加载过程分别对应的KPI参数和所述KQI参数。

上述可能的实现方式中，第一网络设备可以根据第二网络设备下发的监控指令进行训练参数的收集，将收集的多个网页加载过程对应的KPI参数和KQI参数上报给第二网络设备，由第二网络设备进行参数训练得到网页质量评估模型，从而可以根据该模型进行实时的网页访问质量评估，提高网页访问质量的运维效率。

在一种可能的设计方式中，KPI参数还包括：第一用户设备的用户名或者第一用户设备访问目标网站的网页加载过程中每个下行数据流的持续时长。

上述可能的实现方式中，第一用户设备采集的KPI参数还可以包括用户名和每个下行数据流的持续时长，从而可以根据用户名生成不同用户设备的统计信息，根据下行数据流的持续时长结合下行数据流的字节数进行参数训练等，实现实时的网页访问质量评估，提高网页评估的灵活性和智能程度，提高网页访问质量的运维效率。

在一种可能的设计方式中，该方法还包括：第一网络设备根据所述KQI参数得到所述KQI参数对应的用户体验评分，用户体验评分用于指示用户设备访问目标网站的体验质量。

上述可能的实现方式中，第一网络设备还可以根据所述KQI参数得到对应的用户体验评分，从而更加直观的反应当前网页服务质量，丰富网页评估结果的灵活性。

在一种可能的设计方式中，用户体验评分Q满足：Q＝αlog(x)+γ，或者，满足Q＝αe^-βx+γ，其中，x表示所述KQI参数，α、β和γ表示预设参数。

在一种可能的设计方式中，该方法还包括：第一网络设备根据第一用户设备访问目标网站的下行数据流的日志信息以及网页加载过程对应的所述KQI参数得到目标网站的运维日志信息，运维日志信息包括目标网站的网站质量参数和统计维度信息，网站质量参数包括所述KQI参数或者根据所述KQI参数确定的用户体验评分，统计维度信息包括第一用户设备的用户名、目标网站的标识、浏览时间、第一用户设备的所属运营商、第一用户设备的地理位置、第一用户设备的上网套餐或者第一用户设备的设备类型中的至少一项。

上述可能的实现方式中，第一网络设备还可以进一步得到包括不同统计维度的运维日志信息，从而可以直观反应用户设备访问网站的统计信息，以提高运维人员的网站运维效率。

在一种可能的设计方式中，方法还包括：第一网络设备向第二网络设备发送运维日志信息，运维日志信息用于第二网络设备根据下述至少一项得到目标网站的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

上述可能的实现方式中，第一网络设备向第二网络设备发送运维日志信息，从而第二网络设备可以分析得到不同的统计维度的质差用户，并有针对性的对质差用户进行网页服务质量的维护及提升，提高网站运维效率和灵活性。

在一种可能的设计方式中，第一网络设备为交换机、路由器或者接入点AP设备。

第二方面，提供一种网页访问质量评估方法，应用于第二网络设备，该方法包括：第二网络设备根据多个网页加载过程分别对应的关键性能指标KPI参数和关键质量指标KQI参数得到网页质量评估模型，其中，每个网页加载过程对应的KPI参数包括所述网页加载过程中每个下行数据流的字节数和每个下行数据流的起始时间；所述KQI参数包括网页加载过程的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个；第二网络设备向第一网络设备发送网页质量评估模型，其中，网页质量评估模型用于第一网络设备根据获取的第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的KPI参数得到目标网站的KQI参数。

上述技术方案中，第二网络设备可以根据网页加载过程对应的KPI参数和KQI参数进行参数训练得到网页质量评估模型，从而可以实现根据KPI参数进行网页访问质量的评估，实时估算出用户设备访问目标网站的下行数据流所对应的KQI参数。由于网络设备获取的是流级的KPI参数信息，并不需要解析获取用户设备访问网站的报文数据，因此，可以对应用加密数据报文的网站进行网页服务质量的评估，提高网页评估的灵活性和智能程度。

在一种可能的设计方式中，第二网络设备得到网页质量评估模型之前，该方法还包括：第二网络设备向第一网络设备发送监控指令，监控指令包括网站列表和KPI参数类型，监控指令用于指示第一网络设备收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数；第二网络设备接收来自第一网络设备的多个网页加载过程分别对应的KPI参数和KQI参数。

上述可能的实现方式中，第二网络设备可以通过向第一网络设备发送监控指令，以使得第一网络设备监控网络列表中多个网站的下行数据流并收集KQI参数和KQI参数，从而第二网络设备可以根据KPI参数和KQI参数进行参数训练得到网页质量评估模型，实现实时的网页服务质量评估，提高网页评估的灵活性和智能程度。

在一种可能的设计方式中，该方法还包括：第二网络设备接收来自第一网络设备的运维日志信息，运维日志信息包括网站质量参数和统计维度信息，网站质量参数包括第一用户设备访问目标网站的网页加载过程对应的KQI参数或者根据所述KQI参数确定的用户体验评分，统计维度信息包括第一用户设备的用户名、目标网站的标识、浏览时间、第一用户设备的所属运营商、第一用户设备的地理位置、第一用户设备的上网套餐或者第一用户设备的设备类型中的至少一项。

上述可能的实现方式中，进一步的，第二网络设备可以通过第一网络设备上报的运维日志信息，得到不同统计维度的运维数据，从而可以直观反应用户设备访问网站的统计信息，第二网络设备可以分析得到不同的统计维度的质差用户，并有针对性的对质差用户进行网页服务质量的维护及提升，提高网站运维效率和灵活性。

在一种可能的设计方式中，该方法还包括：第二网络设备根据运维日志信息，得到基于下述至少一项的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

上述可能的实现方式中，第二网络设备可以分析得到上述不同的统计维度的质差用户，提供给网站运维人员、运营商等，从而有针对性的对质差用户进行网页服务质量的维护及提升，提高网站运维效率和灵活性。

在一种可能的设计方式中，第二网络设备根据多个网页加载过程分别对应的关键性能指标KPI参数和关键质量指标KQI参数得到网页质量评估模型，具体包括：第二网络设备根据用户设备在时长T内访问目标网站的一次网页加载过程中的n条下行数据流的总字节数B，计算时长T中每一个子时间单元t(i)内加载字节数b(i)占总字节数B的比例s(i)＝b(i)/B，其中，t(i)＝T/N，N表示时长T内子时间单元t(i)的个数，i表示子时间单元的序号，b(i)表示子时间单元t(i)内加载的字节数；根据每一个子时间单元t(i)内加载字节数b(i)占总字节数B的比例s(1)～s(N)以及网页加载过程对应的KQI参数进行模型训练，得到网页质量评估模型。

上述可能的实现方式中，第二网络设备可以通过网页加载过程对应的KPI参数提取出多个特征参数，结合网页加载过程对应的KQI参数进行参数训练，生成网页质量评估模型，从而提高网页服务质量评估的灵活性和智能程度。

第三方面，提供一种通信装置，该装置包括：采集模块，用于获取第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的关键性能指标KPI参数，KPI参数包括至少一个下行数据流中每个下行数据流的字节数和获取每个下行数据流的起始时间；处理模块，用于根据KPI参数得到目标网站的关键质量指标KQI参数，KQI参数包括网页加载过程对应的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个。

在一种可能的设计方式中，处理模块具体用于：根据KPI参数通过网页质量评估模型进行网页访问质量评估，得到目标网站的KQI参数，网页质量评估模型是根据多个网页加载过程分别对应的KPI参数和KQI参数通过人工智能AI算法进行模型训练得到的。

在一种可能的设计方式中，该装置还包括接收模块和发送模块：接收模块，用于接收来自第二网络设备的监控指令，监控指令包括网站列表和KPI参数类型，监控指令用于指示第一网络设备收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数；采集模块，还用于根据监控指令，收集用户设备访问多个网站的多个网页加载过程的下行数据流的KQI参数，并且收集多个网页加载过程分别对应的KQI参数；发送模块，用于向第二网络设备发送多个网页加载过程分别对应的KPI参数和KQI参数。

在一种可能的设计方式中，处理模块还用于：根据KQI参数得到KQI参数对应的用户体验评分，用户体验评分用于指示用户设备访问目标网站的体验质量。

在一种可能的设计方式中，处理模块还用于：根据第一用户设备访问目标网站的下行数据流的日志信息以及网页加载过程对应的KQI参数得到目标网站的运维日志信息，运维日志信息包括目标网站的网站质量参数和统计维度信息，网站质量参数包括KQI参数或者根据KQI参数确定的用户体验评分，统计维度信息包括第一用户设备的用户名、目标网站的标识、浏览时间、第一用户设备的所属运营商、第一用户设备的地理位置、第一用户设备的上网套餐或者第一用户设备的设备类型中的至少一项。

在一种可能的设计方式中，发送模块还具体用于：向第二网络设备发送运维日志信息，运维日志信息用于第二网络设备根据下述至少一项得到目标网站的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

在一种可能的设计方式中，该装置为交换机、路由器或者接入点AP设备。

第四方面，提供一种通信装置，该装置包括：模型训练模块，用于根据多个网页加载过程分别对应的关键性能指标KPI参数和关键质量指标KQI参数得到网页质量评估模型，其中，每个网页加载过程对应的KPI参数包括网页加载过程中每个下行数据流的字节数和每个下行数据流的起始时间；KQI参数包括网页加载过程的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个；发送模块，用于向第一网络设备发送网页质量评估模型，其中，网页质量评估模型用于第一网络设备根据获取的第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的KPI参数得到目标网站的KQI参数。

在一种可能的设计方式中，发送模块还用于：向第一网络设备发送监控指令，监控指令包括网站列表和KPI参数类型，监控指令用于指示第一网络设备收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数；装置还包括接收模块，用于接收来自第一网络设备的多个网页加载过程分别对应的KPI参数和KQI参数。

在一种可能的设计方式中，接收模块具体还用于：接收来自第一网络设备的运维日志信息，运维日志信息包括网站质量参数和统计维度信息，网站质量参数包括第一用户设备访问目标网站的网页加载过程对应的KQI参数或者根据KQI参数确定的用户体验评分，统计维度信息包括第一用户设备的用户名、目标网站的标识、浏览时间、第一用户设备的所属运营商、第一用户设备的地理位置、第一用户设备的上网套餐或者第一用户设备的设备类型中的至少一项。

在一种可能的设计方式中，该装置还包括处理模块，用于根据运维日志信息，得到基于下述至少一项的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

在一种可能的设计方式中，模型训练模块具体用于：根据用户设备在时长T内访问目标网站的一次网页加载过程中的n条下行数据流的总字节数B，计算时长T中每一个子时间单元t(i)内加载字节数b(i)占总字节数B的比例s(i)＝b(i)/B，其中，t(i)＝T/N，N表示时长T内子时间单元t(i)的个数，i表示子时间单元的序号，b(i)表示子时间单元t(i)内加载的字节数；根据每一个子时间单元t(i)内加载字节数b(i)占总字节数B的比例s(1)～s(N)以及网页加载过程对应的KQI参数进行模型训练，得到网页质量评估模型。

第五方面，提供一种电子设备，该电子设备包括：处理器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述指令，以实现如上述第一方面或者上述第二方面中任一项所述的方法。

第六方面，提供一种计算机可读存储介质，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如上述第一方面或者上述第二方面中任一项所述的方法。

第七方面，提供一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行如上述第一方面或者上述第二方面中任一项所述的方法。

第八方面，提供一种通信系统，所述通信系统包括如上述第三方面中任意一项所述的通信装置，以及包括如上述第四方面中任意一项所述的通信装置。

可以理解地，上述提供的任一种网页访问质量评估装置、电子设备、计算机可读存储介质、计算机程序产品或者通信系统，均可以通过上文所提供的对应的方法来实现，因此，其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果，此处不再赘述。

附图说明

图1为本申请实施例提供的一种通信网络的架构示意图；

图2为本申请实施例提供的一种网页访问质量评估方法的流程示意图；

图3为本申请实施例提供的另一种网页访问质量评估方法的流程示意图；

图4为本申请实施例提供的另一种网页访问质量评估方法的流程示意图；

图5为本申请实施例提供的一种网页访问质量评估装置的结构示意图；

图6为本申请实施例提供的另一种网页访问质量评估装置的结构示意图；

图7为本申请实施例提供的一种电子设备的结构示意图；

图8为本申请实施例提供的一种芯片系统的结构示意图。

具体实施方式

以下，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中，除非另有说明，“多个”的含义是两个或两个以上。

需要说明的是本申请中“示例性的”或者“例如”等词用于表示作例子例证或说明。本申请中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其他实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

首先，对本申请实施例涉及的技术名词进行简单介绍。

应用软件(Application)：是用户可以使用的各种程序设计语言，以及用各种程序设计语言编制的应用程序的集合，分为应用软件包和用户程序。应用软件包是利用计算机解决某类问题而设计的程序的集合，多供用户使用。应用软件是为满足用户不同领域、不同问题的应用需求而提供的软件。可以用于拓宽计算机系统的应用领域，放大硬件的功能。浏览器也可以作为一种应用软件。

网站(Website)：是在互联网上拥有域名或地址并提供一定内容或者网络服务的主机，是存储文件的空间，以服务器为载体。运营商或者内容提供商可以通过网站服务器来发布资讯，或者通过网站提供相关的网络服务。用户可通过浏览器或者应用软件等访问网站，获取需要的资讯或者享受网络服务。

网站网页：是构成网站的基本元素，是承载各种网站应用的平台，用户可以通过浏览器或者应用软件来进行网页的访问和阅读。也就是说，网站就是由多个网页组成的，如果一个网站仅包括域名和虚拟主机，而没有制作任何网页的话，用户仍无法访问该网站。

例如，网页具体可以是一个包含HTML标签的纯文本文件，可以存放在世界某个角落的某一台计算机中，是万维网中的一“页”，是超文本标记语言格式(标准通用标记语言的一个应用，文件扩展名为.html或.htm)。

接下来，对本申请实施例的实施环境和应用场景进行简单介绍。

本申请实施例提供一种网页访问质量评估方法，该方法可以应用于如图1所示的通信网络100，该通信网络100可以包括分析器101和网络设备102。

网络设备102具体可以为路由器、交换机或者接入点(Access Point，AP)设备，至少一个用户设备可以通过网络设备102接入网络，通过浏览器或者通过应用程序访问至少一个网站服务器，进行网页浏览体验或者获取资源、服务等。用户设备可以通过网络设备102向网站服务器发送访问请求消息，然后，网站服务器接收到该访问请求消息之后，通过网络设备102向用户设备下发网页加载数据，即下行数据流。从而用户设备的浏览器或者应用程序可以根据下行数据流完成网页内容的加载，实现网页访问。

其中，用户设备可以是手机、平板电脑、桌面型、膝上型、手持计算机、笔记本电脑、车载设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本，以及蜂窝电话、个人数字助理(personal digital assistant，PDA)、智能摄像头、增强现实(augmented reality，AR)\虚拟现实(virtual reality，VR)设备等，本公开实施例对该电子设备的具体形态不作特殊限制。

在本申请的实施例中，网络设备102还可以用于收集不同的用户设备进行网页浏览生成的流日志信息，根据流日志信息中包括的关键性能指标(Key PerformanceIndicator，KPI)参数推理网页浏览业务的关键质量指标(Key Quality Indicator，KQI)，从而实现网页浏览业务体验的评估，即实现了通过网络侧获取的特征参数进行评估，得到应用侧的用户体验质量参数。具体过程将在下文进行详细介绍，此处不再赘述。

分析器一般是指园区网络分析器(CampusInsignt)，具体可以为云服务器，或者路由器、交换机等的后台服务器。分析器用于对该通信网络内的路由器、交换机或者接入点设备进行参数配置、管理、故障排查等服务。

另外，在本申请的实施例中，分析器可以用于收集网络设备上报的关于目标网站质量评估信息的运维日志，从而能够基于网页访问质量评估信息，精准获取访问网页的质差用户，并帮助运营商或者网站管理者进行质差用户的回访以及服务优化推荐等。分析器还可以用于收集用户设备访问目标网站的流日志信息，并且根据流日志信息结合用户设备访问目标网站的用户体验参数等信息进行参数训练得到网页质量评估模型，将网页质量评估模型下发到网络设备，用于对不同用户进行不同网站的上网体验进行网页访问质量的评估。具体过程将在下文进行详细介绍，此处不再赘述。

其中，质差用户表示网页访问体验不够好的用户设备，例如，打开网页较慢，网页内容加载不全，白屏时间较长等体验。相应的，可以根据网页质量评分低于预设的阈值，或者网页关键质量指标参数低于预设阈值去进行质差用户的筛选和定位。

进一步的，用户设备可以通过无线接入或者有线接入的方式接入通信网络。如图1所示的，例如，无线侧的用户设备1可以通过分组数据服务节点(Packet Data ServingNode，PDSN)或者网关GPRS支持节点(Gateway GPRS Support Node，GGSN)等设备接入公用移动通信基站(base station，BS)，从而接入通信网络。其中，GGSN或者PDSN是连接移动网络和网际互连协议(Internet Protocol，IP)骨干网络的网关设备，可以为移动用户设备提供分组数据接入服务，BS是移动设备接入互联网的接口设备。

有线侧的用户设备2可以通过数字用户线路接入复用器(Digital SubscriberLine Access Multiplexer，DSLAM)和宽带接入服务器(Broadband Remote AccessServer，BRAS)接入通信网络。其中，DSLAM用于从多个用户数字用户线路接收信号，并用复用技术把信号承载在一条高速骨干线路上，BRAS用于连接接入网和骨干网，提供基本的接入手段和宽带接入网的管理功能。

另外，用户设备3还可以直接通过AP设备接入通信网络，并访问目标网站。本申请的实施例对用户设备接入网络的方式不作具体限定。

结合上述图1所示的通信网络，本申请实施例提供一种网页访问质量评估方法，应用于第一网络设备，该第一网络设备可以为路由器、交换机或者接入点设备。通过该方法，第一网络设备可以通过采集用户设备访问目标网站的下行数据流，具体可以为用户设备访问目标网络的网页加载过程中的关键性能指标(Key Performance Indicator，KPI)参数，并根据KPI参数进行网页关键质量指标(Key Quality Indicator，KQI)评估，得到反映网页访问质量的KQI参数。从而不需要对下行数据流进行解码获取数据包来评估网页访问质量。

下面将详细介绍本申请的实施方法，如图2所示，该方法可以包括：

S201：第一网络设备获取用户设备访问目标网站的下行数据流对应的KPI参数。

其中，用户设备可以为第一用户设备。用户设备可以通过第一网络设备访问目标网站，也可以通过其他网络设备访问该目标网站。

下行数据流可以为该用户设备访问该目标网站时，目标网站的网页加载过程中的至少一个下行数据流，具体可以为某一个用户设备进行一次网页加载操作所对应的下行数据流，可以是一个数据流，也可以是多个数据流。

在一种实施方式中，第一网络设备获取下行数据流对应的KPI参数，具体实现方式可以为第一网络设备获取访问目标网站的网页加载过程中至少一个下行数据流中每个下行数据流的日志信息，根据下行数据流的日志信息得到对应的KPI参数。

其中，下行数据流的日志信息用于指示下行数据流的属性信息和指标信息，例如源IP地址、目的IP地址、用户名(UserName)以及相应的KPI参数等。其中，流日志信息包括的KPI参数可以包括下行数据流的字节数(FlowBytes)，和获取下行数据流的起始时间(FlowStart)。

其中，下行数据流的字节数表示第一用户设备访问目标网站的一个网页加载过程对应的数据量大小，单位一般为字节(Byte，B)、兆字节(MB)、或者千兆字节GB等。例如，总字节数可以为1M。下行数据流的起始时间具体是指该用户设备与目标网络设备进行初始接入的起始时间，例如进行传输控制协议(Transmission Control Protocol，TCP)三次握手协议的起始时间。

在一种实施方式中，KPI参数还可以包括第一用户设备访问目标网站的网页加载过程中每个下行数据流的持续时长(FlowDelay)。其中，下行数据流的持续时长与总字节数相结合，可以反映多种网站访问情况，例如，网页的平均下载速度，或者每一条下行数据流的加载进度等等。

S202：第一网络设备根据KPI参数确定目标网站的关键质量指标KQI参数。

反映网页访问质量的KQI参数可以包括所述网页加载过程对应的首屏(Above theFold，ATF)加载时长、网页加载时长(Page Load Time，PLT)、网页渲染速度或者网页字节加载速度中的至少一个。其中，网页渲染速度又称为速度指数(Speed Index，SI)，网页字节加载速度又称为字节指数(Byte Index，BI)。

其中，首屏加载时长ATF是指用户设备的浏览器显示目标网站的第一屏页面所消耗的时间，通常来说浏览器显示的目标网站的第一屏页面为该目标网站的首页或者该目标网站的开屏广告页面。

示例性的，以用户设备的显示屏为800×600像素尺寸为标准，从开始加载该目标网站的第一屏页面到浏览器的页面渲染显示高度达到800像素且此区域有内容显示所耗费的时间。

网页加载时长PLT是指用户设备访问目标网站进行的一次网页加载过程中所消耗的时间。

网页渲染速度SI是指页面渲染速度，即单位时间内的浏览器的显示屏像素点的加载字节，是衡量页面性能的指标。SI可以用于反映网页内容渲染所消耗的时间，SI的值越高越好，表示网页加载速度越快，网页内容渲染所消耗的时间越短。

网页字节加载速度BI可以用于描述一次网页加载过程中字节加载完成的速度，具体可以通过单位时间内完成加载的字节数相对于该网页加载过程总字节数的百分比来计算。BI也是衡量页面性能的指标，可以用于反映网页内容渲染所消耗的时间，BI的值越高表示网页加载速度越快，网页内容渲染所消耗的时间越短。

示例性的，BI可以满足如下公式：

其中，T表示从网页开始加载的起始时刻到整个页面加载结束的时间段，x_B(t)表示时间段T内的每一个时间单元内加载的字节数分别占该整个页面加载的总字节数的比例。

在一种实施方式中，第一网络设备可以根据KPI参数以及KPI参数与KQI参数的预设对应关系或者预设规则得到对应的KQI参数。

或者，第一网络设备还可以根据KPI参数通过网页质量评估模型进行网页访问质量评估，得到该目标网站对应的KQI参数。其中，网页质量评估模型可以是根据多个KPI参数和KPI参数对应的多个KQI参数通过人工智能(Artificial Intelligence，AI)算法进行模型训练得到的，网页质量评估模型可以是离线预训练好的，也可以是第二网络设备根据第一网络设备收集的下行数据流的日志信息以及对应的用户设备访问网站的网页加载过程对应的KQI参数，提取特征参数进行模型训练得到的。

上述本申请的实施方式，通过路由器、交换机或者AP等网络设备收集当前的用户设备访问目标网站的下行数据流对应的KPI参数，网络设备可以根据KPI参数得到评估当前目标网站的KQI参数指标。其中，所述KPI参数包括下行数据流的字节数和获取下行数据流的起始时间，不需要解析应用层的加密数据报文，网络设备通过抓取用户设备进行网页访问过程中的加密流数据，即可得到对应的流级KPI参数，从而根据上述的流级KPI参数进行网页访问质量的评估，实现较为准确地反映网页访问的实际体验情况，有针对性去提升用户体验。

在一种实施方式中，上述的步骤S202之前，第一网络设备还可以接收第二网络设备下发的网页质量评估模型，从而第一网络设备执行步骤S202，具体可以根据KPI参数通过网页质量评估模型进行网页访问质量评估的计算，得到对应的KQI参数。下面将详细介绍第二网络设备进行网页质量评估模型的训练以及参数收集和网页访问质量评估的具体过程。

结合上述图1所示的通信网络，本申请实施例还提供另一种网页访问质量评估方法，应用于第一网络设备和第二网络设备，该第一网络设备可以为路由器、交换机或者接入点设备，第二网络设备可以为分析器，具体可以为云服务器或者所述路由器或者交换机的后台服务器。

如图3所示，上述的步骤S201-S202之前，该方法可以包括：

S301：第二网络设备向第一网络设备发送监控指令。

所述监控指令用于指示第一网络设备向第二网络设备上报多个用户设备访问至少一个网站的下行数据流的日志信息。

具体的，第二网络设备可以通过预先配置的命令下发接口向第一网络设备发送监控命令，或者第二网络设备可以通过通用接口向第一网络设备发送监控命令，本申请实施例对发送监控命令的接口不作具体限定。第一网络设备与第二网络设备可以根据实时通信状态进行交互确定接口配置，也可以通过预先配置确定下发命令的接口。

其中，监控指令可以包括网站列表，即需要第一网络设备进行监控并采集用户访问该网站的网站列表。由于运营商或者网站运营企业会优先关注热门网站的用户访问体验，因此可以配置一个待采集的网站列表。该网站列表可以包括至少一个网站的名称、访问地址等信息。其中，上述的目标网站可以是网站列表中的其中一个网站。

因此，所述监控指令用于指示第一网络设备收集用户设备访问网站列表中多个网站的下行数据流的KPI参数，以及收集多个网页加载过程对应的KQI参数。

另外，该监控指令还可以包括待上传的下行数据流的KPI参数对应的KPI参数类型，其中，多个网站的下行数据流的日志信息可以包括所述KPI参数类型所对应的KPI参数，如，下行数据流的字节数和下行数据流的起始时间。

除上述实施例所述的内容，KPI参数还可以包括访问目标网站的第一用户设备的用户名、第一用户设备的IP地址或者第一用户设备访问目标网站的网页加载过程中每个下行数据流的持续时长等信息。

另外，该监控指令还可以包括待上传的下行数据流的日志信息的包采样率，用于指示第一网络设备进行流日志收集的采样频率。由于不同的设备采集和存储数据的能力不同，因此不同设备对于数据包的采样率有不同的要求。

S302：第一网络设备接收监控指令，根据监控指令收集用户设备访问多个网站的多个网页加载过程的下行数据流的KPI参数，并且收集多个网页加载过程分别对应的KQI参数。

第一网络设备根据监控指令收集KPI参数，或者流日志信息。具体的，可以为第一网络设备根据网站列表，收集至少一个用户设备访问该网站列表中包括的任一个网站的下行数据流的日志信息。然后，第一网络设备根据监控命令中包括的KPI参数类型，提取流日志信息中的KPI参数类型对应的KPI参数。考虑到网络设备的数据处理能力限制，上述的KPI参数均不需要复杂计算即可以提取。

同时，第一网络设备还需要收集用户设备访问至少一个网站的多个网页加载过程对应的KQI参数，KQI参数具体可以包括上述的首屏加载时长AFT、网页加载时长PLT、网页渲染速度SI或者网页字节加载速度BI中的至少一个。具体的，KQI参数可以为第一网络设备通过用户设备的浏览器计算并收集的。

S303：第一网络设备向第二网络设备发送多个网页加载过程分别对应的KPI参数和KQI参数。

在一种实施方式中，第一网络设备可以通过流日志上报接口上报包含相关KPI的流日志信息以及KPI参数对应的KQI参数。或者，第一网络设备可以通过通用接口向第二网络设备上报包含相关KPI的流日志信息以及KPI参数对应的KQI参数，本申请实施例对上述参数的接口不作具体限定。第一网络设备与第二网络设备可以根据实时通信状态进行交互确定接口配置，也可以通过预先配置确定上报参数的接口。

S304：第二网络设备接收多个KPI参数和多个KQI参数，进行模型训练得到网页质量评估模型。

第二网络设备接收多个网页加载过程的每个下行数据流的KPI参数，每个网页加载过程可以包括至少一个下行数据流，可以将每个网页加载过程所包括的下行数据流对应的KPI参数作为一组KPI参数。例如，第一网络设备采集了100个网页加载过程，则每个网页加载过程分别对应一组KPI参数和一组KQI参数，第二网络设备可以接收100组KPI参数和100组KQI参数。则第二网络设备可以根据这100组KPI参数和100组KQI参数进行模型训练，得到网页质量评估模型。

在一种实施方式中，根据KPI参数与KQI参数进行模型训练之前，可以先对KPI参数进行处理，得到KPI参数对应的特征参数，根据特征参数进行进一步的模型训练。

具体的，第二网络设备可以得到用户设备在时长T内，访问目标网站的一次网页加载过程中的n条下行数据流的总字节数B，并计算时长T中每一个子时间单元t(i)内加载字节数b(i)占所述总字节数B的比例，然后根据每一个子时间单元t(i)内加载字节数b(i)占总字节数B的比例以及网页加载过程对应的KQI参数进行模型训练，得到网页访问质量预测模型。

示例性的，计算特征参数的过程可以参考如下：

假设网络设备采集到用户设备访问网页的一次网页加载过程中的n条下行数据流，对于每一条数据流，网络设备均会上报上述的KPI参数，如每条下行数据流的字节数为FlowBytes和下行数据流的起始时间为FlowStart。

(1)首先，可以计算得到：该网页加载过程的总字节数

其中，j为下行数据流的索引号，j的取值为0～n。FlowBytes(j)表示用户设备访问网页的该网页加载过程中的第j条下行数据流的字节数。

(2)然后，假设开启一个时长为T的时间窗口，并将该时长T分为N个子时间单元。

其中，t(i)＝T/N，N表示所述时长T内子时间单元t(i)的个数，i表示子时间单元的序号。

(3)计算每一个子时间单元内加载的字节数占所述总字节数B的比例s(i)，N个s(i)即可以作为模型训练的特征参数。

其中，

b(i)表示t(i)时长内加载的字节数。

(4)根据每一个子时间单元t(i)内加载字节数b(i)占总字节数B的比例s(i)以及所述比例对应的KQI参数进行模型训练，得到网页质量评估模型。

示例性的，T＝10秒，将T共切分100个子窗口，即以t(i)为100毫秒的粒度为一个子窗口，计算在每个子窗口t(i)下网页字节加载完成的百分比s(i)，即可以得到100个s(i)，i的取值为1～100。

这样就产生了一个100维的特征参数，结合第二网络设备收集的用户设备提供的KQI标签数据，利用机器学习算法或者深度学习算法，可以进行模型训练得到从KPI参数到KQI参数的网页质量评估模型。

S305：第二网络设备向第一网络设备发送网页质量评估模型。

第二网络设备可以将训练得到的网页质量评估模型发送给第一网络设备，用于第一网络设备继续执行上述的步骤S201-S202，即根据实时采集到的用户设备访问目标网站的KPI参数进行网页访问质量评估，得到该目标网站对应的KQI参数。

上述本申请的实施方式，第二网络设备如分析器可以通过向第一网络设备下发监控命令，用于指示第一网络设备上报收集到的用户设备访问多个网站的下行数据流的流日志，从而可以根据流日志信息中包括大量的KPI参数，结合用户设备的所述下行数据流对应的KQI参数进行模型训练，生成能够用于网页访问质量评估的AI模型，从而较为准确地实现实时网站访问的使用体验的评估，便于分析器进行故障排查或者运维服务，提升用户的上网体验。

在一种实施方式中，第一网络设备执行步骤S202得到评估当前目标网站访问质量的KQI参数之后，该方法还可以包括：第一网络设备根据KQI参数得到KQI参数对应的用户体验评分。其中，用户体验评分用于指示目标网站的体验质量。

具体的，该用户体验评分可以为平均主观意见分(Mean Opinion Score，MOS)参数。例如，该MOS参数的分值范围可以预先设置为0分～5分。MOS参数的分值越高，表示当前该目标网站的服务质量越好，MOS参数的分值越低，则表示当前该目标网站的服务质量越差。

第一网络设备根据KQI参数得到对应的用户体验评分的具体方式，可以通过KQI参数和MOS参数的映射关系得到对应的MOS参数，或者，也可以根据一定转换算法根据KQI参数得到对应的MOS参数，例如，通过下述的拟合算法得到MOS参数。

示例性的，可以通过如下的对数算法或者指数算法的公式得到用户体验评分Q，用户体验评分Q满足：

Q＝αlog(x)+γ，或者，

用户体验评分Q满足：Q＝αe^-βx+γ。

其中，x表示上述的KQI参数，具体可以为首屏加载时长AFT、网页加载时长PLT、网页渲染速度SI或者网页字节加载速度BI中的任意一个。α、β和γ表示预设参数，其具体的取值可以由很多的组合。在实际的设计中，α、β和γ的取值可以由技术人员预先根据经验进行配置，或者预先根据映射算法计算得到。本申请对预设参数的取值不做具体限定。

上述本申请的实施方式，第一网络设备可以通过KQI参数进一步得到用户体验评分参数，从而更为直观地得到对目标网站的质量体验评估。例如，第一网络设备可以根据用户体验评分参数进行可视化展示，帮助运营商精准回访质差用户，从而进一步提高用户的上网体验。

在一种实施方式中，第一网络设备采集的下行数据流的日志信息还可以包括用户设备的用户名、目标网站的标识、浏览时间、用户设备的所属运营商、用户设备的地理位置、用户设备的上网套餐或者用户设备的设备类型等信息。因此，第一网络设备可以根据下行数据流的日志信息提取得到目标网站的统计维度信息。

进一步的，第一网络设备可以根据当前的下行数据流的日志信息以及日志信息对应的KQI参数得到当前目标网站的运维日志信息。运维日志信息可以包括所述目标网站的网站质量参数和统计维度信息。

其中，网站质量参数可以包括上述的KQI参数，和/或者根据KQI参数确定的用户体验评分。其统计维度信息可以包括用户名、目标网站的标识、浏览时间、用户设备的所属运营商、用户设备的地理位置、用户设备的上网套餐或者用户设备的设备类型中的至少一项。

示例性的，如下表1，第一网络设备得到的当前目标网站的运维日志信息可以包括如下内容。

表1运维日志信息参数列表

参数名称	参数解释	参数范围
			UserName	用户名	不限
PageName	目标网站标识	不限
			KQI	SI、BI、ATF、PLT等	[0，min(10，KQI))
MOS	用户体验评分	[0，5]
			DATE	用户浏览时间	格式可以为：YYYY-MM-DD-HH:MM:SS
ISP	用户设备的所属运营商	不限
			Location	用户设备的地理位置	不限
PackageType	用户设备的上网套餐	不限
			TerminalType	用户设备的设备类型	不限

其中，min(10，KQI)表示10秒和KQI参数中的最小取值。YYYY-MM-DD-HH：MM：SS中的YYYY表示年份数值，MM表示月份数值，DD日期数值，HH时刻数值，MM表示分钟数值，SS表示秒钟数值。

用户名用于标识访问目标网站的用户设备，用于体现不同的用户设备访问同一目标网站的不同服务质量评分。目标网站标识用于标识用户所浏览的网站，用于体现不同的目标网站对应的不同服务质量评分。用户浏览时间用于标识当前网络运维日志或者当前的网页访问质量评分的时间段，用于体现在不同的时间段访问目标网站所对应的网站服务质量评分的不同。

用户设备的设备类型用于标识该用户设备的类型，用于体现不同的设备类型在进行上网打开目标网站的不同服务体验。用户设备的所属运营商用于标识用户设备进行网络通信所使用的运营商，用于体现不同的运营商所支持的网页访问质量的体验不同。用户设备的上网套餐用于表示该用户设备上网所使用的上网套餐，用于体现不同的上网套餐使得用户设备访问网页的服务质量的体验不同。

从而可以根据上述不同的统计维度，对网页访问质量进行评估，并可以从不同的维度对质差用户进行分析和改善，提高用户体验质量。

在一种实施方式中，如图4所示，第一网络设备执行步骤S202得到评估当前目标网站访问质量的KQI参数之后，该方法还可以包括：

S401：第一网络设备向第二网络设备发送运维日志信息。

其中，第一网络设备可以根据实时对用户访问网站进行网页访问质量评估，并将得到评估的结果以运维日志发送给第二网络设备。也可以根据第二网络设备的请求上报命令进行运维日志的上报。

另外，需要说明的是，第一网络设备对用户设备访问目标网站的网页访问质量评估可以是根据预先设定的周期定期进行的，也可以是根据第二网络设备的指令进行网页访问质量评估的。例如，第一网络设备与第二网络设备预先协商好每隔1小时，上报一次当前的网页访问质量评估结果，或者运维日志信息。或者，也可以是第一网络设备在接收到第二网络设备的网页访问质量评估指令后，进行网页访问质量评估的计算，并将当前的网页访问质量评估结果或者运维日志信息上报给第二网络设备。

S402：第二网络设备接收运维日志信息，并根据运维日志信息获取网页访问质量的统计维度信息。

该运维日志信息用于第二网络设备确定根据下述至少一项得到的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

也就是说，第二网络设备可以根据运维日志信息，得到不同统计维度下的网页访问质量的统计信息。示例性的，可以包括以下几个方面：

1、第二网络设备可以得到不同的用户设备访问同一目标网站的不同服务质量评分以及等级指标，从而重点关注或者改善服务质量评分不高的质差用户设备，并想办法提高网站访问的服务质量。

2、第二网络设备还可以得到同一用户设备访问不同目标网站对应的不同服务质量评分，从而网站运营商可以根据不同网站的表现对网站提供的服务质量进行排名，指导网站进行自身服务优化。

3、第二网络设备还可以得到在不同的时间段访问目标网站所对应的网站服务质量评分的不同，得到以时间段为网站服务质量等级的统计信息，从而重点关注或者改善服务质量评分不高的时间段进行网页访问的服务体验。

4、第二网络设备还可以得到不同的设备类型在进行上网打开目标网站的不同服务体验，根据设备类型进行网站服务质量的等级排名，从而推荐给用户或者用于设备厂商改善问题。

5、第二网络设备还可以得到不同的运营商所支持的网页访问质量的体验不同。分析其可以基于不同运营商提供的服务，对运营商打分，从而推荐给用户以协助用户选择合适的运营商。

6、第二网络设备还可以得到不同的上网套餐使得用户设备访问网页的网页访问质量的体验不同。运营商可以根据用户设备访问某一网站的运维日志，识别出用户体验劣化，进而发现质差用户，进行回访，推荐合适的上网套餐，提升用户体验。

7、第二网络设备还可以得到不同的服务小区使得用户设备访问网页的网页访问质量的体验不同。运营商可以根据某一区域的用户访问情况进行群障定位，识别质差小区，从而进行网页访问质量的改善以提升用户体验。

上述本申请的实施方式，通过网络设备对不同用户设备访问不同网站的下行数据流的KQI参数，进一步得到不同用户设备访问不同网站的运维日志，从而可以根据不同的统计维度信息，进行质差用户的回访和改善，以对用户的网页访问质量进行提升和改进。本申请的实施方式由于是基于获取下行数据流的流级KPI参数，通过提取加密流量的相关KPI参数，不受限于传统的DPI方法无法对HTTPs和QUIC等加密协议分析的限制，同时也能兼容HTTP业务的分析和评估。同时，网络设备与分析器之间交互灵活，配置丰富，易于在多种不同的网络设备上实现。

另外，根据本申请实施方式评估得到的网页访问质量的KQI参数是基于用户的实时的网页访问体验的，并没有人工主管因素的影响，可能较为客观反映网站的访问体验。根据分析器收集的运维日志还能提前预测和感知质差用户，实现了主动上报质差用户的功能，大大提升了运维工作的效率。

需要说明的是，本申请的上述实施方式不仅可以用于用户设备通过浏览器访问目标网站的实施场景，与可以应用于其他类型的应用和实施场景。例如，可以应用于对用户设备使用视频应用类、在线协同办公类、远程桌面类等等应用的网页访问质量的评估，其中，视频应用可以包括视频直播、视频点播或者视频会议等应用。本申请对上述实施方式的网络应用不作具体限定。

另外，本申请还提供一种网页访问质量评估装置，如图5所示，该装置500可以包括采集模块501和处理模块502。

其中，采集模块501可以用于获取第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的关键性能指标KPI参数，KPI参数包括至少一个下行数据流中每个下行数据流的字节数和获取每个下行数据流的起始时间。

处理模块502可以用于根据KPI参数得到目标网站的关键质量指标KQI参数，KQI参数包括网页加载过程对应的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个。

在一种可能的设计方式中，处理模块502具体可以用于：根据KPI参数通过网页质量评估模型进行网页访问质量评估，得到目标网站的KQI参数，网页质量评估模型是根据多个网页加载过程分别对应的KPI参数和KQI参数通过人工智能AI算法进行模型训练得到的。

在一种可能的设计方式中，该装置500还包括接收模块503和发送模块504。

其中，接收模块503可以用于接收来自第二网络设备的监控指令，监控指令包括网站列表和KPI参数类型，监控指令用于指示第一网络设备收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数。

采集模块501还可以用于根据监控指令，收集用户设备访问多个网站的多个网页加载过程的下行数据流的KPI参数，并且收集多个网页加载过程分别对应的KQI参数。

发送模块504可以用于向第二网络设备发送多个网页加载过程分别对应的KPI参数和KQI参数。

在一种可能的设计方式中，处理模块502还可以用于：根据KQI参数得到KQI参数对应的用户体验评分，用户体验评分用于指示用户设备访问目标网站的体验质量。

在一种可能的设计方式中，处理模块502还可以用于：根据第一用户设备访问目标网站的下行数据流的日志信息以及网页加载过程对应的KQI参数得到目标网站的运维日志信息，运维日志信息包括目标网站的网站质量参数和统计维度信息，网站质量参数包括KQI参数或者根据KQI参数确定的用户体验评分，统计维度信息包括第一用户设备的用户名、目标网站的标识、浏览时间、第一用户设备的所属运营商、第一用户设备的地理位置、第一用户设备的上网套餐或者第一用户设备的设备类型中的至少一项。

在一种可能的设计方式中，发送模块504还具体用于：向第二网络设备发送运维日志信息，运维日志信息用于第二网络设备根据下述至少一项得到目标网站的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

在一种可能的设计方式中，该装置500可以为交换机、路由器或者接入点AP设备。

相对应的，本申请实施例还提供一种网页访问质量评估装置，如图6所示，该装置600可以包括模型训练模块601和发送模块602。

其中，模型训练模块601可以用于根据多个网页加载过程分别对应的关键性能指标KPI参数和关键质量指标KQI参数得到网页质量评估模型，其中，每个网页加载过程对应的KPI参数包括网页加载过程中每个下行数据流的字节数和每个下行数据流的起始时间；KQI参数包括网页加载过程的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个。

发送模块602可以用于向第一网络设备发送网页质量评估模型，其中，网页质量评估模型用于第一网络设备根据获取的第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的KPI参数得到目标网站的KQI参数。

在一种可能的设计方式中，发送模块602还可以用于：向第一网络设备发送监控指令，监控指令包括网站列表和KPI参数类型，监控指令用于指示第一网络设备收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数。

则该装置600还可以包括接收模块603，用于接收来自第一网络设备的多个网页加载过程分别对应的KPI参数和KQI参数。

在一种可能的设计方式中，接收模块603具体还用于：接收来自第一网络设备的运维日志信息，运维日志信息包括网站质量参数和统计维度信息，网站质量参数包括第一用户设备访问目标网站的网页加载过程对应的KQI参数或者根据KQI参数确定的用户体验评分，统计维度信息包括第一用户设备的用户名、目标网站的标识、浏览时间、第一用户设备的所属运营商、第一用户设备的地理位置、第一用户设备的上网套餐或者第一用户设备的设备类型中的至少一项。

在一种可能的设计方式中，该装置600还可以包括处理模块604，用于根据运维日志信息，得到基于下述至少一项的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

在一种可能的设计方式中，第一网络设备具体可以为交换机、路由器或者接入点AP设备。

在一种可能的设计方式中，模型训练模块601具体可以用于：根据用户设备在时长T内访问目标网站的一次网页加载过程中的n条下行数据流的总字节数B，计算时长T中每一个子时间单元t(i)内加载字节数b(i)占总字节数B的比例s(i)＝b(i)/B，其中，t(i)＝T/N，N表示时长T内子时间单元t(i)的个数，i表示子时间单元的序号，b(i)表示子时间单元t(i)内加载的字节数；根据每一个子时间单元t(i)内加载字节数b(i)占总字节数B的比例s(1)～s(N)以及网页加载过程对应的KQI参数进行模型训练，得到网页质量评估模型。

可以理解的，当上述装置是电子设备时，上述发送模块可以是发送器，可以包括天线和射频电路等，处理模块可以是处理器，例如基带芯片等。当上述装置是具有上述第一网络设备或者第二网络设备功能的部件时，发送模块可以是射频单元，处理模块可以是处理器。当上述装置是芯片系统时，发送模块可以是芯片系统的输出接口、处理模块可以是芯片系统的处理器，例如：中央处理单元(central processing unit，CPU)等。

需要说明的是，上述的装置500中具体的执行过程和实施例可以参照上述方法实施例中第一网络设备执行的步骤和相关的描述，上述的装置600中具体的执行过程和实施例可以参照上述方法实施例中第二网络设备执行的步骤和相关的描述，所解决的技术问题和带来的技术效果也可以参照前述实施例所述的内容，此处不再一一赘述。

在本实施例中，该装置可以采用集成的方式划分各个功能模块的形式来呈现。这里的“模块”可以指特定电路、执行一个或多个软件或固件程序的处理器和存储器、集成逻辑电路、和/或其他可以提供上述功能的器件。在一个简单的实施例中，本领域的技术人员可以想到上述通信装置可以采用如图7所示的形式。

图7为本申请实施例示出的一种示例性的电子设备700的结构示意图，该电子设备700可以为上述实施方式中的第一网络设备或者第二网络设备，用于执行上述实施方式中的方法。如图7所示，该电子设备700可以包括至少一个处理器701，通信线路702以及存储器703。

处理器701可以是一个通用中央处理器(central processing unit，CPU)，微处理器，特定应用集成电路(application-specific integrated circuit，ASIC)，或一个或多个集成电路。

通信线路702可包括一条通路，在上述组件之间传送信息，该通信线路例如可以是总线。

存储器703可以是只读存储器(read-only memory，ROM)或可存储静态信息和指令的其他类型的静态存储设备，随机存取存储器(random access memory，RAM)或者可存储信息和指令的其他类型的动态存储设备，也可以是电可擦可编程只读存储器(electricallyerasable programmable read-only memory，EEPROM)、只读光盘(compact disc read-only memory，CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。存储器可以是独立存在，通过通信线路702与处理器相连接。存储器也可以和处理器集成在一起。本申请实施例提供的存储器通常为非易失性存储器。其中，存储器703用于存储执行本申请实施例的方案所涉及的计算机程序指令，并由处理器701来控制执行。处理器701用于执行存储器703中存储的计算机程序指令，从而实现本申请实施例提供的方法。

可选的，本申请实施例中的计算机程序指令也可以称之为应用程序代码，本申请实施例对此不作具体限定。

在具体实现中，作为一种实施例，处理器701可以包括一个或多个CPU，例如图7中的CPU0和CPU1。

在具体实现中，作为一种实施例，电子设备700可以包括多个处理器，例如图7中的处理器701和处理器707。这些处理器可以是单核(single-CPU)处理器，也可以是多核(multi-CPU)处理器。这里的处理器可以指一个或多个设备、电路、和/或用于处理数据(例如计算机程序指令)的处理核。

在具体实现中，作为一种实施例，电子设备700还可以包括通信接口704。电子设备可以通过通信接口704收发数据，或者与其他设备或通信网络通信，该通信接口704例如可以为以太网接口，无线接入网接口(radio access network，RAN)，无线局域网接口(wireless local area networks，WLAN)或者USB接口等。

在具体实现中，作为一种实施例，电子设备700还可以包括输出设备705和输入设备706。输出设备705和处理器701通信，可以以多种方式来显示信息。例如，输出设备705可以是液晶显示器(liquid crystal display，LCD)，发光二级管(light emitting diode，LED)显示设备，阴极射线管(cathode ray tube，CRT)显示设备，或投影仪(projector)等。输入设备706和处理器701通信，可以以多种方式接收用户的输入。例如，输入设备706可以是鼠标、键盘、触摸屏设备或传感设备等。

在具体实现中，电子设备700可以是台式机、便携式电脑、网络服务器、掌上电脑(personal digital assistant，PDA)、移动手机、平板电脑、无线终端设备、嵌入式设备、智能摄像头或有图7中类似结构的设备。本申请实施例不限定电子设备700的类型。

在一些实施例中，图7中的处理器701可以通过调用存储器703中存储的计算机程序指令，使得电子设备700执行上述方法实施例中的方法。

示例性的，图5或者图6中的各处理模块的功能/实现过程可以通过图7中的处理器701调用存储器703中存储的计算机程序指令来实现。例如，图5中的处理模块502的功能/实现过程可以通过图7中的处理器701调用存储器703中存储的计算机执行指令来实现。图6中的处理模块604的功能/实现过程可以通过图7中的处理器701调用存储器703中存储的计算机执行指令来实现。

在示例性实施例中，还提供了一种包括指令的计算机可读存储介质，上述指令可由电子设备700的处理器701执行以完成上述实施例的方法。因此其所能获得的技术效果可参考上述方法实施例，在此不再赘述。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件程序实现时，可以全部或部分地以计算机程序产品的形式来实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时，全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。

图8为本申请实施例提供的一种芯片的结构示意图。芯片800包括一个或多个处理器801以及接口电路802。可选的，所述芯片80还可以包含总线803。

其中，处理器801可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器801中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器801可以是通用处理器、数字通信器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

接口电路802用于数据、指令或者信息的发送或者接收。处理器801可以利用接口电路802接收的数据、指令或者其它信息，进行加工，可以将加工完成信息通过接口电路802发送出去。

可选的，芯片800还包括存储器，存储器可以包括只读存储器和随机存取存储器，并向处理器提供操作指令和数据。存储器的一部分还可以包括非易失性随机存取存储器(Non-Volatile Random Access Memory，NVRAM)。

可选的，存储器存储了可执行软件模块或者数据结构，处理器可以通过调用存储器存储的操作指令(该操作指令可存储在操作系统中)，执行相应的操作。

可选的，芯片800可以使用在本申请实施例涉及的通信装置(包括第一网络设备和第二网络设备)中。可选的，接口电路802可用于输出处理器801的执行结果。关于本申请的一个或多个实施例提供的通信方法可参考前述各个实施例，这里不再赘述。

需要说明的，处理器801、接口电路802各自对应的功能既可以通过硬件设计实现，也可以通过软件设计来实现，还可以通过软硬件结合的方式来实现，这里不作限制。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。

最后应说明的是：以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何在本申请揭露的技术范围内的变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。

Claims

1.一种网页访问质量评估方法，其特征在于，应用于第一网络设备，所述方法包括：

第一网络设备获取第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的关键性能指标KPI参数，所述KPI参数包括所述至少一个下行数据流中每个下行数据流的字节数和获取所述每个下行数据流的起始时间；

所述第一网络设备根据所述KPI参数得到所述目标网站的关键质量指标KQI参数，所述KQI参数包括所述网页加载过程对应的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个。

2.根据权利要求1所述的方法，其特征在于，所述第一网络设备根据所述KPI参数得到所述目标网站的关键质量指标KQI参数，具体包括：

所述第一网络设备根据所述KPI参数通过网页质量评估模型进行网页访问质量评估，得到所述网页加载过程对应的KQI参数，所述网页质量评估模型是根据多个网页加载过程分别对应的KPI参数和KQI参数通过人工智能AI算法进行模型训练得到的。

3.根据权利要求2所述的方法，其特征在于，所述第一网络设备根据所述KPI参数得到所述目标网站的关键质量指标KQI参数之前，所述方法还包括：

所述第一网络设备接收来自第二网络设备的监控指令，所述监控指令包括网站列表和KPI参数类型，所述监控指令用于指示所述第一网络设备收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数；

所述第一网络设备根据所述监控指令，收集用户设备访问所述多个网站的多个网页加载过程的下行数据流的KPI参数，并且收集所述多个网页加载过程分别对应的KQI参数；

所述第一网络设备向所述第二网络设备发送所述多个网页加载过程分别对应的KPI参数和所述KQI参数。

4.根据权利要求1-3任一项所述的方法，其特征在于，所述KPI参数还包括：所述第一用户设备的用户名或者所述第一用户设备访问目标网站的网页加载过程中每个下行数据流的持续时长。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：

所述第一网络设备根据所述KQI参数得到所述KQI参数对应的用户体验评分，所述用户体验评分用于指示所述用户设备访问所述目标网站的体验质量。

6.根据权利要求1-5任一项所述的方法，其特征在于，所述方法还包括：

所述第一网络设备根据所述第一用户设备访问所述目标网站的下行数据流的日志信息以及所述网页加载过程对应的所述KQI参数得到所述目标网站的运维日志信息，所述运维日志信息包括所述目标网站的网站质量参数和统计维度信息，所述网站质量参数包括所述KQI参数或者根据所述KQI参数确定的用户体验评分；

所述统计维度信息包括所述第一用户设备的用户名、所述目标网站的标识、浏览时间、所述第一用户设备的所属运营商、所述第一用户设备的地理位置、所述第一用户设备的上网套餐或者所述第一用户设备的设备类型中的至少一项。

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

所述第一网络设备向第二网络设备发送所述运维日志信息，所述运维日志信息用于所述第二网络设备根据下述至少一项得到所述目标网站的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

8.根据权利要求1-7任一项所述的方法，其特征在于，所述第一网络设备为交换机、路由器或者接入点AP设备。

9.一种网页访问质量评估方法，其特征在于，应用于第二网络设备，所述方法包括：

所述第二网络设备根据多个网页加载过程分别对应的关键性能指标KPI参数和关键质量指标KQI参数得到网页质量评估模型，其中，每个网页加载过程对应的KPI参数包括所述网页加载过程中每个下行数据流的字节数和所述每个下行数据流的起始时间；所述KQI参数包括所述网页加载过程的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个；

所述第二网络设备向第一网络设备发送网页质量评估模型，其中，所述网页质量评估模型用于所述第一网络设备根据获取的第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的KPI参数得到所述目标网站的KQI参数。

10.根据权利要求9所述的方法，其特征在于，所述第二网络设备得到网页质量评估模型之前，所述方法还包括：

所述第二网络设备向所述第一网络设备发送监控指令，所述监控指令包括网站列表和KPI参数类型，所述监控指令用于指示所述第一网络设备收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数；

所述第二网络设备接收来自所述第一网络设备的多个网页加载过程分别对应的KPI参数和KQI参数。

11.根据权利要求9或10所述的方法，其特征在于，所述KPI参数还包括：所述第一用户设备的用户名或者所述第一用户设备访问目标网站的网页加载过程中每个下行数据流的持续时长。

12.根据权利要求9-11任一项所述的方法，其特征在于，所述方法还包括：

所述第二网络设备接收来自所述第一网络设备的运维日志信息，所述运维日志信息包括网站质量参数和统计维度信息，所述网站质量参数包括所述第一用户设备访问目标网站的网页加载过程对应的KQI参数或者根据所述KQI参数确定的用户体验评分，所述统计维度信息包括所述第一用户设备的用户名、所述目标网站的标识、浏览时间、所述第一用户设备的所属运营商、所述第一用户设备的地理位置、所述第一用户设备的上网套餐或者所述第一用户设备的设备类型中的至少一项。

13.根据权利要求12所述的方法，其特征在于，所述方法还包括：

所述第二网络设备根据所述运维日志信息，得到基于下述至少一项的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

14.根据权利要求9-13任一项所述的方法，其特征在于，所述第一网络设备为交换机、路由器或者接入点AP设备。

15.根据权利要求9-14任一项所述的方法，其特征在于，所述第二网络设备根据多个网页加载过程分别对应的关键性能指标KPI参数和关键质量指标KQI参数得到网页质量评估模型，具体包括：

所述第二网络设备根据用户设备在时长T内访问目标网站的一次网页加载过程中的n条下行数据流的总字节数B，计算时长T中每一个子时间单元t(i)内加载字节数b(i)占所述总字节数B的比例s(i)＝b(i)/B，其中，t(i)＝T/N，N表示所述时长T内子时间单元t(i)的个数，所述i表示所述子时间单元的序号，所述b(i)表示所述子时间单元t(i)内加载的字节数；

根据每一个子时间单元t(i)内加载字节数b(i)占所述总字节数B的比例s(1)～s(N)以及所述网页加载过程对应的所述KQI参数进行模型训练，得到所述网页质量评估模型。

16.一种通信装置，其特征在于，所述装置包括：

采集模块，用于获取第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的关键性能指标KPI参数，所述KPI参数包括所述至少一个下行数据流中每个下行数据流的字节数和获取所述每个下行数据流的起始时间；

处理模块，用于根据所述KPI参数得到所述目标网站的关键质量指标KQI参数，所述KQI参数包括所述网页加载过程对应的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个。

17.根据权利要求16所述的装置，其特征在于，所述处理模块具体用于：

根据所述KPI参数通过网页质量评估模型进行网页访问质量评估，得到所述目标网站的KQI参数，所述网页质量评估模型是根据多个网页加载过程分别对应的KPI参数和KQI参数通过人工智能AI算法进行模型训练得到的。

18.根据权利要求17所述的装置，其特征在于，所述装置还包括接收模块和发送模块：

所述接收模块，用于接收来自第二网络设备的监控指令，所述监控指令包括网站列表和KPI参数类型，所述监控指令用于指示所述装置收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数；

所述采集模块，还用于根据所述监控指令，收集用户设备访问所述多个网站的多个网页加载过程的下行数据流的KPI参数，并且收集所述多个网页加载过程分别对应的KQI参数；

所述发送模块，用于向所述第二网络设备发送所述多个网页加载过程分别对应的KPI参数和所述KQI参数。

19.根据权利要求16-18任一项所述的装置，其特征在于，所述KPI参数还包括：所述第一用户设备的用户名或者所述第一用户设备访问目标网站的网页加载过程中每个下行数据流的持续时长。

20.根据权利要求16-19任一项所述的装置，其特征在于，所述处理模块还用于：

根据所述KQI参数得到所述KQI参数对应的用户体验评分，所述用户体验评分用于指示所述用户设备访问所述目标网站的体验质量。

21.根据权利要求16-20任一项所述的装置，其特征在于，所述处理模块还用于：

根据所述第一用户设备访问所述目标网站的下行数据流的日志信息以及所述网页加载过程对应的所述KQI参数得到所述目标网站的运维日志信息，所述运维日志信息包括所述目标网站的网站质量参数和统计维度信息，所述网站质量参数包括所述KQI参数或者根据所述KQI参数确定的用户体验评分，

22.根据权利要求21所述的装置，其特征在于，发送模块还具体用于：

向第二网络设备发送所述运维日志信息，所述运维日志信息用于所述第二网络设备根据下述至少一项得到所述目标网站的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

23.根据权利要求16-22任一项所述的装置，其特征在于，所述装置为交换机、路由器或者接入点AP设备。

24.一种通信装置，其特征在于，所述装置包括：

模型训练模块，用于根据多个网页加载过程分别对应的关键性能指标KPI参数和关键质量指标KQI参数得到网页质量评估模型，其中，每个网页加载过程对应的所述KPI参数包括所述网页加载过程中每个下行数据流的字节数和所述每个下行数据流的起始时间；所述KQI参数包括所述网页加载过程的首屏加载时长、网页加载时长、网页渲染速度或者网页字节加载速度中的至少一个；

发送模块，用于向第一网络设备发送网页质量评估模型，其中，所述网页质量评估模型用于所述第一网络设备根据获取的第一用户设备访问目标网站的网页加载过程中至少一个下行数据流对应的KPI参数得到所述目标网站的KQI参数。

25.根据权利要求24所述的装置，其特征在于，所述发送模块还用于：

向所述第一网络设备发送监控指令，所述监控指令包括网站列表和KPI参数类型，所述监控指令用于指示所述第一网络设备收集用户设备访问所述网站列表中多个网站的KQI参数和所述KPI参数类型对应的KPI参数；

所述装置还包括接收模块，用于接收来自所述第一网络设备的多个网页加载过程分别对应的KPI参数和KQI参数。

26.根据权利要求24或25所述的装置，其特征在于，所述KPI参数还包括：所述第一用户设备的用户名或者所述第一用户设备访问目标网站的网页加载过程中每个下行数据流的持续时长。

27.根据权利要求24-26任一项所述的装置，其特征在于，接收模块具体还用于：

接收来自所述第一网络设备的运维日志信息，所述运维日志信息包括网站质量参数和统计维度信息，所述网站质量参数包括第一用户设备访问目标网站的网页加载过程对应的KQI参数或者根据所述KQI参数确定的用户体验评分，所述统计维度信息包括所述第一用户设备的用户名、所述目标网站的标识、浏览时间、所述第一用户设备的所属运营商、所述第一用户设备的地理位置、所述第一用户设备的上网套餐或者所述第一用户设备的设备类型中的至少一项。

28.根据权利要求27所述的装置，其特征在于，所述装置还包括处理模块，用于根据所述运维日志信息，得到基于下述至少一项的网页访问质量的统计维度信息：用户设备、目标网站、运营商、服务小区、时间段、设备类型或者上网套餐。

29.根据权利要求24-28任一项所述的装置，其特征在于，所述第一网络设备为交换机、路由器或者接入点AP设备。

30.根据权利要求24-29任一项所述的装置，其特征在于，所述模型训练模块具体用于：

根据用户设备在时长T内访问目标网站的一次网页加载过程中的n条下行数据流的总字节数B，计算时长T中每一个子时间单元t(i)内加载字节数b(i)占所述总字节数B的比例s(i)＝b(i)/B，其中，t(i)＝T/N，N表示所述时长T内子时间单元t(i)的个数，所述i表示所述子时间单元的序号，所述b(i)表示所述子时间单元t(i)内加载的字节数；

31.一种电子设备，其特征在于，所述电子设备包括：

处理器；

用于存储所述处理器可执行指令的存储器；

其中，所述处理器被配置为执行所述指令，以实现如权利要求1至8或者9至15中任一项所述的方法。

32.一种计算机可读存储介质，其特征在于，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1至8或者9至15中任一项所述的方法。

33.一种通信系统，其特征在于，所述通信系统包括如权利要求16至23中任意一项所述的通信装置，以及包括权利要求24至30中任意一项所述的通信装置。