CN113098708A - 一种公网质量评估方法、装置、电子设备及存储介质 - Google Patents

Abstract

本申请提出一种公网质量评估的方法、装置、电子设备及存储介质，涉及通信技术领域，具体技术方案为：获取目标网络上的至少一个被测节点；在触发被测对象上部署的第一测试服务器及基准对象上部署的第二测试服务器同时向至少一个被测节点发送测试请求后，在被测对象本端收集基于该第一测试服务器反馈的第一测试结果及接收该第二测试服务器反馈的第二测试结果；基于该第一测试结果和相应的测试请求参数，计算出该被测对象的第一网络质量参数；通过比较该第一网络质量参数和基于该第二测试结果得到的第二网络质量参数，得到公网质量评估结果。采用本申请，可以有针对性地对公网进行持续性的监测，并得到客观、量化的公网覆盖质量分析和评估。

Description

一种公网质量评估方法、装置、电子设备及存储介质

技术领域

本申请涉及通信技术领域，尤其涉及一种公网质量评估方法、装置、电子设备及存储介质。

背景技术

国际互联网(以下简称公网)是一个全球化，多主体，动态变化的复杂网络，其结构，质量和运行状况堪称目前最复杂的通信网络。在实际应用中，常利用因特网包测试器(Packet Internet Groper，ping)对某一稳定网络节点进行测试，测试是否连通，并根据网络延迟(Roud Trip Time，RTT)确定当前公网质量。但是，由于网络流量的动态变化、公网的复杂性和不同的基础设施，不停变化的网络时延(即：一个报文或分组从一个网络的一端传送到另一个端所需要的时间)，不稳定的节点以及基础设施的巨大差异都会导致测试结果不能客观地反映公网质量。

如何科学、量化地评估公网的整体综合质量，特别是在市场驱动下，如何有针对性地在某些热点地区持续性地监测，并对某一公网产品的质量进行综合的量化评估，作为进一步对该公网产品进行优化的基础，是本领域亟待解决的关键问题之一。

发明内容

本申请实施例提供一种公网质量评估方法、装置、电子设备及存储介质，以解决相关技术存在的问题，技术方案如下：

第一方面，本申请实施例提供了一种公网质量评估的方法，包括：

获取目标网络上的至少一个被测节点；

在触发被测对象上部署的第一测试服务器及基准对象上部署的第二测试服务器同时向至少一个被测节点发送测试请求后，在被测对象本端收集基于该第一测试服务器反馈的第一测试结果及接收该第二测试服务器反馈的第二测试结果；

基于该第一测试结果和相应的测试请求参数，计算出该被测对象的第一网络质量参数；

通过比较该第一网络质量参数和基于该第二测试结果得到的第二网络质量参数，得到公网质量评估结果。

第二方面，本申请实施例提供了一种公网质量评估的装置，该装置包括：

节点模块，用于获取目标网络上的至少一个被测节点；

测试模块，用于在触发被测对象上部署的第一测试服务器及基准对象上部署的第二测试服务器同时向该至少一个被测节点发送测试请求后，在被测对象本端收集基于该第一测试服务器反馈的第一测试结果及接收该第二测试服务器反馈的第二测试结果；

计算模块，用于基于该第一测试结果和相应的测试请求参数，计算出该被测对象的第一网络质量参数；

评估模块，用于通过比较该第一网络质量参数和基于该第二测试结果得到的第二网络质量参数，得到公网质量评估结果。

第三方面，本申请实施例提供了一种公网质量评估电子设备，该电子设备包括：存储器和处理器。其中，该存储器和该处理器通过内部连接通路互相通信，该存储器用于存储指令，该处理器用于执行该存储器存储的指令，并且当该处理器执行该存储器存储的指令时，使得该处理器执行上述各方面任一种实施方式中的方法。

第四方面，本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质存储计算机程序，当计算机程序在计算机上运行时，上述各方面任一种实施方式中的方法被执行。

上述技术方案中的优点或有益效果至少包括：可以对某公网的覆盖质量——比如某公网在某一特定区域的覆盖质量进行持续性的监测，并实时对观测结果进行客观、量化的分析和评估，得到公网覆盖质量的晴雨表，并得到该公网产品与其竞品的多角度直观分析评估结果，该结果可以用于更好地改进该公网覆盖质量。

上述概述仅仅是为了说明书的目的，并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外，通过参考附图和以下的详细描述，本申请进一步的方面、实施方式和特征将会是容易明白的。

附图说明

在附图中，除非另外规定，否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解，这些附图仅描绘了根据本申请公开的一些实施方式，而不应将其视为是对本申请范围的限制。

图1是根据本申请一实施例的公网质量评估方法的流程示意图；

图2是根据本申请一实施例的公网质量参数示意图；

图3是根据本申请另一实施例的公网质量评估方法流程示意图；

图4是根据本申请又一实施例的公网质量评估方法流程示意图；

图5是根据本申请一实施例的公网质量评估方法示意图；

图6是根据本申请一实施例的公网质量评估方法中测试步骤示意图；

图7是根据本申请一实施例的公网质量评估方法中评估结果展示示意图；

图8是根据本申请一实施例的公网质量测试、评估优化循环示意图；

图9是根据本申请一实施例的公网质量评估装置的结构框图；

图10是根据本申请一实施例的公网质量评估装置中节点模块的结构框图；

图11是根据本申请另一实施例的公网质量评估装置的结构框图；

图12是根据本申请一实施例的公网质量评估电子设备的结构框图。

具体实施方式

在下文中，仅简单地描述了某些示例性实施例。正如本领域技术人员可认识到的那样，在不脱离本申请的精神或范围的情况下，可通过各种不同方式修改所描述的实施例。因此，附图和描述被认为本质上是示例性的而非限制性的。

本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合，例如，包括A、B、C中的至少一种，可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。本文中术语“第一”、“第二”表示指代多个类似的技术用语并对其进行区分，并不是限定顺序的意思，或者限定只有两个的意思，例如，第一特征和第二特征，是指代有两类/两个特征，第一特征可以为一个或多个，第二特征也可以为一个或多个。

另外，为了更好的说明本申请，在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解，没有某些具体细节，本申请同样可以实施。在一些实例中，对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述，以便于凸显本申请的主旨。

因特网包探索器(Packet Internet Groper，ping)是一种测试网络连接量的常用网络诊断工具，其目的是为了测试两台网络主机之间的网络是否连通，并根据网络延迟(Roud Trip Time，RTT)确定当前公网质量。比如，一台测试服务器(可以是网络主机或网络节点)通过ping命令发送一份因特网控制报文协议(Internet Control ManagementProtocol，ICMP)，具体可以是回显请求报文给另一台网络主机(可以称为：被测节点)，并等待返回ICMP回显应答，如果测试服务器在一定时间内收到应答，则认为目的主机可达(即测试服务器与被测节点之间的网络是连通的)。

需要说明的是，本实施例中所说的网络节点指每一个拥有自己唯一网络地址的设备，具体可以是工作站、客户、网络用户或个人计算机，还可以是服务器、打印机和其他够通过网络实现互联的设备。

图1示出根据本申请一实施例的公网质量评估方法的流程图，如图1所示，该公网质量评估方法可以包括：

S101、获取目标网络上的至少一个被测节点。

一示例中，被测节点可以是一个，也可以是多个；目标网络是基于公网质量评估需求而选出的相对应网段，比如，想要获得被测对象在新加坡地区的网络覆盖质量，就从新加坡获取一个有代表性的网络单位作为目标网络，具体地该网络单位可以为新加坡的某一个自治系统(AS，Autonomous System)。一个自治系统是一个有权自主地决定在本系统中应采用何种路由协议的小型网络单位。这个网络单位可以是一个简单的网络也可以是一个由一个或多个普通的网络管理员来控制的网络群体，它是一个单独的可管理的网络单元，有固定的分配IP个数。

一示例中，因为目标网络中包括多个节点，因此从中选择出一个或多个被测节点(也叫代表节点)，这些被测节点可以很好地反映被测对象对目标网络的覆盖质量；获得多个被测节点后，分别提取这些被测节点的协议地址(IP地址)，用于之后的公网质量测试和评估。

S102、在触发被测对象上部署的第一测试服务器及基准对象上部署的第二测试服务器同时向至少一个被测节点发送测试请求后，在被测对象本端收集基于该第一测试服务器反馈的第一测试结果及接收该第二测试服务器反馈的第二测试结果；

一示例中，需要在被测对象和基准对象上都部署测试服务器，用于对节点进行主动测试。被测对象是要被评估的公网产品，比如A公司的公有云，基准对象是用于和被测对象进行性能比对的公网产品，优选被测产品的竞品，比如选择竞争对手B公司的公有云作为基准对象，需要补充说明的是，基准对象可以选择一个或多个。在每个被测对象和基准对象上都部署至少一个测试服务器(Measure Server)。

一示例中，分别部署在被测对象的第一测试服务器和部署在基准对象上的第二测试服务器同时向一至多个被测节点发送测试请求，前述多个测试服务器均采用相同软硬件和网络接口配置，并保证时钟同步，以此保证“相同”的测试请求可以“同时”发送；可以通过预先设置确定测试请求的发送频率，比如设置在某固定时间段内(如当地时间上午8:30～9:30和半夜1:00～2:00)，每隔固定时间(如5分钟)便同时发送一次测试请求，这样可以在某一时间段内对对象进行持续性的监测；同时向多个测试节点发送的测试请求中包括但不限于扫描请求和/或连通测试请求，其中，扫描请求主要采用Nmap、Zmap、Masscan等网络扫描工具，获得被测节点对应的存活主机、开放端口，进而发现其运行的服务、操作系统等信息，为下一步的工作奠定基础；连通测试请求即是上文中介绍的通过ping的方法测试节点的连通性，获得延时、丢包率等信息。分别将反馈的第一测试结果、第二测试结果和对应的测试请求参数一起保存，其中，测试请求参数包括测试的时间间隔、开始和截止时间等，如果数据量较大，可以考虑抽样保存，但大多数情况下选择将数据全部保存。

S103、基于该第一测试结果和相应的测试请求参数，计算出该被测对象的第一网络质量参数。

一示例中，将第一测试结果中的各项参数进行概率统计计算，获得不同统计角度的、可用于评估公网质量的第一网络质量参数，比如，可以对多个延时数据进行统计运算，包括但不限于计算出某一节点延时数据的最大值、最小值、上四分位数、中位数、下四分卫数、95分位值、平均数和标准差(如图2所示)为了便于横向比对，对第二测试结果也采取与第一测试结果相同的数据处理方法。

S104、通过比较该第一网络质量参数和基于该第二测试结果得到的第二网络质量参数，得到公网质量评估结果。

一示例中，将上一步骤中得到的第一网络质量参数，与基于相同计算方法得到的第二网络质量参数进行比对，即，将经过处理的被测对象的测试结果数据与基准对象的测试结果数据进行比较，最终得到被测对象的综合评估结果。

一示例中，还可以根据第二测试结果中的延时数据得到延时标准，再与第一质量网络参数进行比对。具体步骤包括：选出基准对象的最小延时平均数和最小延时标准差，作为延时标准，用数学形式表示该标准为：S(D，V，T，μ，σ)，其中D为区域，V为运营商，T为延时标准迭代周期，μ为已测得的最小延时平均数，σ为已测得的最小延时标准差。举例：标准S(缅甸，Ooredoo,2019.11.10-2019.11.17,43.618,3)，代表缅甸运营商Ooredoo在2019.11.10-2019.11.17的优化目标为平均延时达到43.618ms，延时标准差达到3。将被测对象的平均延时和上述延时标准进行比对，并引入一定的误差，比如，如果被测对象的平均延时数值优于延时标准5％以上，才承认被测对象在延时方面的表现优异。

采用本申请的示例，先基于测试目标获取至少一个被测节点，然后通过分别部署在被测对象和基准对象上的多个测试服务器同时向多个被测节点发送周期性测试请求，并记录反馈结果和相关参数；分别处理被测对象和基准对象的反馈结果，并进行横向比较，最终得到被测对象的评估结果；其中，基于测试目标选取被测节点，可以保证测试结果能够更有针对性地反映公网的局部质量(比如某一热点地区的公网质量)；选取多个被测节点，是因为如果只对一个节点进行测试，可能会遇到防火墙阻隔等原因，导致测试结果出现问题，无法反映公网的真实情况；同样，选取在一段时间内周期性发送测试请求，其目的也是要剔除偶发异常状况导致测试结果出现偏差；同时对多个被测节点主动发送测试请求，不需要在公网的具体使用终端上进行埋点测试，不会产生由于埋点错误或埋点混乱导致数据采集错误的问题，也不会由于埋点导致用户的反感，并且主动测试可以基于实际需求，在任何时刻发起测试，使得测试过程更为灵活；对反馈的测试结果进行统计分析，得到从不同角度反映公网质量的参数；将被测对象和基准对象的同类参数进行横向比较，可以较为客观地得到被测对象公网质量的优劣，也可以直接得到被测对象是否需要被优化，哪里里需要被优化的证据。

一示例中，如图3所示，该公网质量评估方法还可以包括：

S105、对该公网质量评估结果以可视化的形式进行渲染处理，得到可视化的图表；其中，该可视化的形式至少包括：彩色表格的形式；

根据该可视化的图表中以不同颜色标记的该第一网络质量参数和该第二网络质量参数，展示该被测对象相对于该基准对象的网络质量优劣，以针对该网络质量优劣的评估来决策是否需要优化该被测对象。

一示例中，比较被测对象和基准对象的平均值和方差，并基于比较结果用不同的颜色展示相关参数。具体地，如果被测对象的平均值或方差中有一个优于基准对象(或优于基准对象的值5％以上)，则表示其相对标准优于基准对象；如果被测对象的95分位值优于基准对象，则表示其绝对标准优于基准对象。在表格中，将差于相对标准且差于绝对标准的值显示为第一颜色，将差于相对标准但优于绝对标准的值显示为第二颜色，将优于相对标准但差于绝对标准的值显示为第三颜色。

进一步地，可以与上述延时标准进行比较，并在被测对象的延时差于该标准时用警示颜色展示，可以比较直观的看到给定时间周期内被测对象和基准对象覆盖质量的比较结果，明确接下来是否需要对被测对象进行优化。

图4示出根据本申请另一实施例的公网质量评估方法的流程图。如图4所示，在一种可能的实现方式中，获取目标网络上的至少一个被测节点可以具体包括：

S201、基于目标地区得到该目标网络及相关节点的稳定性评测结果，将该稳定性评测结果写入可用测试节点列表。

一示例中，根据目标地区得到目标网络，比如，想要知道公网产品在新加坡的覆盖质量，那么新加坡就是目标地区；获取能代表新加坡地区网络覆盖质量的目标网络，该目标网络中包括多个节点，即是该目标网络的相关节点。通过至少一个测试服务器向该网段内的节点进行周期性的ping操作，基于ping的反馈统计得到每个节点稳定性的评测结果，将该结果写入可用测试节点列表。

一示例中，根据目标地区得到目标网络具体包括，根据提前准备好的网络协议地址和自治系统的对照地址库(IP-AS地址库)，确定目标地区的所有AS系统。从中选出一个最能代表目标地区的AS系统作为目标网络；确定目标网络之后，对其包括所有节点的IP地址进行预处理，特别是如果该AS系统中有原生的广播网段，其中包括非C类IP段，就把所有非C类IP段划分多个C类IP段，便于后面的IP选择和数据整理和比较。

一示例中，在将目标网络进行C段划分之后，对每个C段中的节点进行ping操作并记录ping的结果。具体地，用多台Measure Server对目标网络内的所有IP地址进行周期性的ping操作，得到操作结果，并将结果记入可用测试节点列表；具体地，该列表中的字段包括：所属自治系统(Autonomous System，AS)，IP前缀列表(IP-Prefix)，IP地址，ping总次数，可ping通次数，IP稳定分值，其中，IP稳定分值通过公式(1)计算。

IP稳定分值＝可ping通次数/总次数×100％ (1)

S202、每隔预设的时间更新该可用测试节点列表。

一示例中，持续周期性地进行ping操作，更新该可用测试节点列表。

S203、从该可用测试节点列表中获取至少一个被测节点。

一示例中，根据可用测试节点列表中的IP稳定分值获得被测节点，具体地，针对目标网络中的每一个C段，如果其中有不止一个节点的稳定分值大于50％，选取稳定分值最高的一个或几个节点作为被测节点；如果表中所有节点的稳定分值小于50％，则认为此C段无法监控。按照上述方法，从目标网络中获取一个或多个被测节点。

采用本申请的示例，可以根据实际评估需求，得到对应网段的稳定被测节点，保证ping的结果可以最大程度反映被测对象的实际网络情况；选取多个被测节点，可以在测试过程中及时发现因为偶然事件导致的测试值异常的情况；定期更新可用测试节点列表，可以减少被测节点被屏蔽或被限速的风险。

应用示例：

如图5所示，本申请保护的技术方案中，在被测对象和基准对象上部署数量相等的测试服务器，同时对目标网络中的多个被测节点发送测试请求，并分别分析测试结果，以比对、评估被测对象的公网覆盖质量。具体地，应用本申请实施例一处理流程包括如下内容：

一、测试相关步骤

总体来说，本申请公开的方法可以从需求出发，进行具体的测试，最终得到有针对性的测试数据。在具体测试的过程中，还可以生成定制化的周期性测试任务，通过测试任务获取被测对象覆盖质量的相关数据并进行结果输出和保存，对下一步中的处理、展示等工作做好准备。

测试步骤中的关键步骤如图6所示，包括测试前的准备步骤，测试步骤和测试后的数据处理步骤，其中，测试前的准备步骤包括测试服务器(Measure Server)的选择和配置、远程节点网络地址集合(Remote Node IP地址集合)、测试工具及脚本选择、测试方法及参数确定，测试后的数据处理步骤包括测试结果输出和测试例保存。

具体地，测试服务器的选择和配置过程中，用户需要根据实际情况限定MeasureServer的硬件配置，该配置需要保证在测试过程中Measure Server的性能不会遇到瓶颈。具体地，配置可以选择二十核心的服务器CPU两个，不低于128G的内存，不低于300G的多个硬盘，至少两个千兆级别网卡和至少两块企业版远程管理卡。

在测试过程中，涉及到的多台Measure Server均采用相同软硬件和网络接口配置，比如选择相同的最大传输单元(MTU，Maximum Transmission Unit)；除此之外，多台Measure Server还必须保证时间上的同步，具体可以采用网络时间同步化协议(NTP，Network Time Protocol)或通过手动调整时钟来保证。

Remote Node IP地址集合步骤主要完成对被测节点及其测试地址的获取，该被测节点需要稳定，且能最大程度代表目标网络。在获取节点测试地址之前，需要准备好网络协议地址和自治系统的对照地址库(IP-AS地址库)，该地址库中可包括：自治系统编号(ASNo)、国家、运营商、地区、IP网段及掩码、地理位置。如果没有现成的上述对照地址库，可以从网上获得相关的数据源，经过简单处理、拼接，产生该IP-AS地址库。

得到IP-AS地址库之后，根据想要评测的区域确定相应的AS系统，比如想知道被测对象在新加坡的网络覆盖情况，就基于已有的IP-AS地址库，获取一个有代表性的属于新加坡的网络单位作为目标网络，具体地该网络单位可以为新加坡的某一个自治系统。确定目标网络之后，对其包括所有节点的IP地址进行预处理，特别是如果该AS系统中有原生的广播网段，其中包括非C类IP段，就把所有非C类IP段划分多个C类IP段，便于后面的IP选择和数据整理和比较。由于该网段内，有些地址并未使用，也考虑到由于防火墙阻隔因特网控制报文协议(ICMP，Internet Control Message Protocol)或网络地址转换(NAT，NetworkAddress Translation)，因此需要预先将这些不通或不能很好反映节点网络连通状况的节点及其相应地址筛选出来。因此，在目标网络确定之后，按C段把目标网络的地址进行划分，比如同一个AS系统下的123.123.123.1到123.123.123.254就是一个C段，一个C段中有255个IP地址，将其中的所有IP地址提取出来，然后用多个Measure Server依次对每个C段内的全部IP地址进行扫描和ping测试，将测试结果记入可用测试节点列表，该列表中的记录信息包括：所属自治系统(Autonomous System，AS)，IP前缀列表(IP-Prefix)，IP地址，ping总次数，可ping通次数，IP稳定分值，其中，IP稳定分值通过公式(1)计算。

周期性地进行ping操作，更新该可用测试节点列表。

在选择测试地址时，基于可用测试节点列表中的记录信息筛选，具体地，如果目标网络的每个C段中对应的列表中有不止一个稳定分值大于50％的节点，选取该C段内稳定分值最高的一个或几个节点作为被测节点；如果某一C段内所有节点的IP稳定分值小于50％，则认为此C段无法监控。基于此方法，选出目标网络内的被测节点。进一步地，还可以计算目标网络的监控完整度，具体地，通过公式(2)计算，其中，总网段数量为C网段的数量。

IP网段监控完整度＝可监控C网段/总网段数量 (2)

测试工具及脚本选择步骤中，选择使用的具体测试工具，其中，初始扫描工具可以选择zmap，Ping测试工具可以选择somkeping。

测试方法及参数确定步骤中限定了测试过程中的各项参数，比如限定了ping操作后获得的反馈信息中需要包括延迟、丢包率和网络抖动；ping的参数可以包括：报文数量(比如10个Ping)、报文大小、报文间隔(Packet interval)、发包间隔、开始和截止时间等等；另外，该单元中还可以限定其余测试参数，比如路由追踪参数(Traceroute)等等。

测试步骤即是在多台Measure Server同时启动、运行相同测试脚本进行扫描和/或ping测试，并记录相应的测试结果数据。

测试之后，测试结果输出步骤即是限定了测试结果的初始数据(Raw Data)的输出和保存格式，比如选择以json(JavaScript Object Notation)格式输出和保存。选择json是因为它一种轻量级的数据交换格式，使得人们很容易的进行阅读和编写，同时也方便了机器进行解析和生成。由于测试结果的数据量比较大，可以选择将所有数据全量保存，也可以选择抽样保存Raw Data，可以通过API方式调用Raw Data，便于不同用途的数据处理。

测试例保存是限定了测试过程中的所有数据全部以测试例的形式保存，测试例中的全部参数以json结构保存，并可以API方式调用，便于后期重复使用。每个测试例中都至少包括以下内容：源(节点地址)，目的IP地址集合(测试地址集合)，Measure Server基本软硬件配置，测试方法和相应的参数，测试脚本代码，测试开始结束时间。

二、评估相关步骤

评估步骤包括评估标准制定和评估过程，以及评估结果展示。

评估标准是非常重要的。由于公网的自身特性，测试系统不可能做到非常高的准确精度，如何有针对性的进行评价，得出简单粗暴但直接可用的准确结论，而非只是呈现一堆数据没有结论是评估步骤要解决的核心问题。

以评估新加坡地区的公网质量为例，经过整理测试步骤中得到的相关数据，得到数据表格如图7所示，该表格中包括区域、国家、目标AS、名称、测试结果的各项统计值。其中，区域、国家代表被测的目标网络所属区域和国家，也是被测节点所属区域和国家，目标AS表示目标网络对应的AS，名称是被测对象和基准对象的名称，比如公网A、B、C，后面分别是被测对象和基准对象对应的测试结果的各项概率统计值，包括最大值、最小值、上四分位数、中位数、下四分卫数、95分位值、平均数和标准差等等。按照评估标准比较测试结果的多项概率统计值，可以得到质量评估结果，具体地，可以基于平均值和方差建立相对标准，基于95分值建立绝对标准，对于延迟数据，如果被测对象的平均值或方差中有一个比基准对象高出5％以上，则表示其相对标准差于基准对象；如果被测对象的95分位值大于基准对象，则表示其绝对标准差于竞争对手。进一步地，可以基于根据实际需求，灵活设定该步骤中统计计算的具体方法，并对计算后的结果进行比较，制定相应的评估标准，最终得到有针对性的公网质量的评估结果。

得到评估结果之后，可以通过不同的表格颜色，对评估结果进行多样化展示，在判断被测对象的相对标准和绝对标准都差于基准对象时，用一种警示的颜色填充被测对象的数据行。整个评估过程希望是可视化过程和系统自动评估二者的结合，一方面可以根据预先内置的评估标准由系统自动给出评判，一方面可以通过人工进行更精准的评估和标记。在评估规则制定的前期，需要自动评判和人工评判相结合，以纠正可能存在的误判，随着评估规则的不断更新完善，后期可以完全依赖系统的自动判断。通过可视化进行评估结果展示，可以比较直观的看到给定时间周期内被测对象和基准对象公网覆盖质量的比较。

综上所述，本示例公开了一种公网质量评估方法，主要包括测试步骤和评估步骤，在实际应用场景中，如图8所示，测试步骤可以基于多种实际需求灵活启动，比如基于被动优化需求启动(售后驱动)、基于主动优化需求启动(时长驱动)、基于临时需求启动(销售驱动)，经过测试、评估之后，基于评估得到的结果，可以对被测对象进行有针对性的优化，优化之后再进行下一轮的测试、评估，周期性循环往复，最终实现被测公网质量的长期监控和优化。

图9示出根据本发明一实施例的公网质量评估装置90的结构框图。如图9所示，该装置可以包括：

节点模块91，用于获取目标网络上的至少一个被测节点；

测试模块92，用于在触发被测对象上部署的第一测试服务器及基准对象上部署的第二测试服务器同时向至少一个被测节点发送测试请求后，在被测对象本端收集基于该第一测试服务器反馈的第一测试结果及接收该第二测试服务器反馈的第二测试结果；

计算模块93，用于基于该第一测试结果和相应的测试请求参数，计算出该被测对象的第一网络质量参数；

评估模块94，用于通过比较该第一网络质量参数和基于该第二测试结果得到的第二网络质量参数，得到公网质量评估结果。

其中，该计算模块93，用于：

利用概率统计策略得到该被测对象的第一网络质量参数，该概率统计策略包括求95分位值、平均数和标准差。

图10示出根据本发明一实施例的公网质量评估装置中节点模块91的结构框图。如图10所示，该模块可以包括：

列表生成单元911，用于基于目标地区得到该目标网络及相关节点的稳定性评测结果，将该稳定性评测结果写入可用测试节点列表；

列表更新单元912，用于每隔预设的时间更新该可用测试节点列表；

节点选择单元913，用于根据该可用测试节点列表获取该至少一个被测节点。

其中，该列表生成单元911，用于：

确定该目标地区的所有的自治系统，从该自治系统中选取有代表性的自治系统，作为该目标网络；

检测该目标网络的相关节点的网络连通性，得到连通性检测结果；

基于该连通性检测结果得到该目标网络内节点的稳定性评测结果，将所述稳定性评测结果写入可用测试节点列表。

图11示出根据本发明另一实施例的公网质量评估装置的结构框图。如图11所示，该装置还可以包括展示模块95，用于：

对该公网质量评估结果以可视化的形式进行渲染处理，得到可视化的图表；其中，该可视化的形式至少包括：彩色表格的形式；

根据该可视化的图表中以不同颜色标记的该第一网络质量参数和该第二网络质量参数，展示该被测对象相对于该基准对象的网络质量优劣，以针对该网络质量优劣的评估来决策是否需要优化该被测对象。

本发明实施例各装置中的各模块的功能可以参见上述方法中的对应描述，在此不再赘述。

图12示出根据本发明一实施例的公网质量评估电子设备的结构框图。如图12所示，该公网质量评估电子设备包括：存储器1210和处理器1220，存储器1210内存储有可在处理器1220上运行的计算机程序。处理器1220执行该计算机程序时实现上述实施例中的公网质量评估方法。存储器1210和处理器1220的数量可以为一个或多个。

该公网质量评估电子设备还包括：

通信接口1230，用于与外界设备进行通信，进行数据交互传输。

如果存储器1210、处理器1220和通信接口1230独立实现，则存储器1210、处理器1220和通信接口1230可以通过总线相互连接并完成相互间的通信。该总线可以是工业标准体系结构(Industry Standard Architecture，ISA)总线、外部设备互连(PeripheralComponent Interconnect，PCI)总线或扩展工业标准体系结构(Extended IndustryStandard Architecture，EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示，图12中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

可选的，在具体实现上，如果存储器1210、处理器1220及通信接口1230集成在一块芯片上，则存储器1210、处理器1220及通信接口1230可以通过内部接口完成相互间的通信。

本发明实施例提供了一种计算机可读存储介质，其存储有计算机程序，该程序被处理器执行时实现本申请实施例中提供的方法。

本申请实施例还提供了一种芯片，该芯片包括，包括处理器，用于从存储器中调用并运行存储器中存储的指令，使得安装有芯片的通信设备执行本申请实施例提供的方法。

本申请实施例还提供了一种芯片，包括：输入接口、输出接口、处理器和存储器，输入接口、输出接口、处理器以及存储器之间通过内部连接通路相连，处理器用于执行存储器中的代码，当代码被执行时，处理器用于执行申请实施例提供的方法。

应理解的是，上述处理器可以是中央处理器(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(digital signal processing，DSP)、专用集成电路(application specific integrated circuit，ASIC)、现场可编程门阵列(fieldprogrammablegate array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者是任何常规的处理器等。值得说明的是，处理器可以是支持进阶精简指令集机器(advanced RISC machines，ARM)架构的处理器。

进一步地，可选的，上述存储器可以包括只读存储器和随机存取存储器，还可以包括非易失性随机存取存储器。该存储器可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以包括只读存储器(read-onlymemory，ROM)、可编程只读存储器(programmable ROM，PROM)、可擦除可编程只读存储器(erasable PROM，EPROM)、电可擦除可编程只读存储器(electrically EPROM，EEPROM)或闪存。易失性存储器可以包括随机存取存储器(random access memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用。例如，静态随机存取存储器(static RAM，SRAM)、动态随机存取存储器(dynamic random access memory，DRAM)、同步动态随机存取存储器(synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(double data date SDRAM，DDR SDRAM)、增强型同步动态随机存取存储器(enhancedSDRAM，ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(direct rambus RAM，DR RAM)。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时，全部或部分地产生按照本申请的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包括于本申请的至少一个实施例或示例中。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分。并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。

应理解的是，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。上述实施例方法的全部或部分步骤是可以通过程序来指令相关的硬件完成，该程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。上述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读存储介质中。该存储介质可以是只读存储器，磁盘或光盘等。

以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到其各种变化或替换，这些都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (12)

1.一种公网质量评估的方法，所述方法包括：

获取目标网络上的至少一个被测节点；

在触发被测对象上部署的第一测试服务器及基准对象上部署的第二测试服务器同时向所述至少一个被测节点发送测试请求后，在被测对象本端收集基于所述第一测试服务器反馈的第一测试结果及接收所述第二测试服务器反馈的第二测试结果；

基于所述第一测试结果和相应的测试请求参数，计算出所述被测对象的第一网络质量参数；

通过比较所述第一网络质量参数和基于所述第二测试结果得到的第二网络质量参数，得到公网质量评估结果。

2.根据权利要求1所述的方法，其中，所述获取目标网络上的至少一个被测节点包括：

基于目标地区得到所述目标网络及相关节点的稳定性评测结果，将所述稳定性评测结果写入可用测试节点列表；

每隔预设的时间更新所述可用测试节点列表；

根据所述可用测试节点列表获取所述至少一个被测节点。

3.根据权利要求2所述的方法，其中，所述基于目标地区得到所述目标网络以及相关节点的稳定性评测结果，将所述稳定性评测结果写入可用测试节点列表，包括：

确定所述目标地区的所有的自治系统，从所述自治系统中选取有代表性的自治系统，作为所述目标网络；

检测所述目标网络的相关节点的网络连通性，得到连通性检测结果；

基于所述连通性检测结果得到所述目标网络内节点的稳定性评测结果，将所述稳定性评测结果写入可用测试节点列表。

4.根据权利要求1所述的方法，其中，所述基于所述第一测试结果和相应的测试请求参数，计算出所述被测对象的第一网络质量参数，包括：

利用概率统计策略得到所述被测对象的第一网络质量参数，所述概率统计策略包括求95分位值、平均数和标准差。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

对所述公网质量评估结果以可视化的形式进行渲染处理，得到可视化的图表；其中，所述可视化的形式至少包括：彩色表格的形式；

根据所述可视化的图表中以不同颜色标记的所述第一网络质量参数和所述第二网络质量参数，展示所述被测对象相对于所述基准对象的网络质量优劣，以针对所述网络质量优劣的评估来决策是否需要优化所述被测对象。

6.一种公网质量评估的装置，所述装置包括：

节点模块，用于获取目标网络上的至少一个被测节点；

测试模块，用于在触发被测对象上部署的第一测试服务器及基准对象上部署的第二测试服务器同时向所述至少一个被测节点发送测试请求后，在被测对象本端收集基于所述第一测试服务器反馈的第一测试结果及接收所述第二测试服务器反馈的第二测试结果；

计算模块，用于基于所述第一测试结果和相应的测试请求参数，计算出所述被测对象的第一网络质量参数；

评估模块，用于通过比较所述第一网络质量参数和基于所述第二测试结果得到的第二网络质量参数，得到公网质量评估结果。

7.根据权利要求6所述的装置，其中，所述节点模块包括：

列表生成单元，用于基于目标地区得到所述目标网络及相关节点的稳定性评测结果，将所述稳定性评测结果写入可用测试节点列表；

列表更新单元，用于每隔预设的时间更新所述可用测试节点列表；

节点选择单元，用于根据所述可用测试节点列表获取所述至少一个被测节点。

8.根据权利要求7所述的装置，其中，所述列表生成单元，用于：

确定所述目标地区的所有的自治系统，从所述自治系统中选取有代表性的自治系统，作为所述目标网络；

检测所述目标网络的相关节点的网络连通性，得到连通性检测结果；

基于所述连通性检测结果得到所述目标网络内节点的稳定性评测结果，将所述稳定性评测结果写入可用测试节点列表。

9.根据权利要求6所述的装置，其中，所述计算模块，用于：

利用概率统计策略得到所述被测对象的第一网络质量参数，所述概率统计策略包括求95分位值、平均数和标准差。

10.根据权利要求6所述的装置，还包括展示模块，用于：

对所述公网质量评估结果以可视化的形式进行渲染处理，得到可视化的图表；其中，所述可视化的形式至少包括：彩色表格的形式；

根据所述可视化的图表中以不同颜色标记的所述第一网络质量参数和所述第二网络质量参数，展示所述被测对象相对于所述基准对象的网络质量优劣，以针对所述网络质量优劣的评估来决策是否需要优化所述被测对象。

11.一种公网质量评估的电子设备，其特征在于，包括：处理器和存储器，所述存储器中存储指令，所述指令由处理器加载并执行，以实现如权利要求1-5任一项所述的方法。

12.一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-5中任一项所述的方法。

Images