CN108632104A - 一种网络质量评估工具的指标权重验证方法及装置 - Google Patents

Abstract

本发明公开了一种网络质量评估工具的指标权重验证方法及装置，涉及通信技术领域，其方法包括：将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

Description

一种网络质量评估工具的指标权重验证方法及装置

技术领域

本发明涉及通信技术领域，特别涉及一种网络质量评估工具的指标权重验证方法及装置。

背景技术

网络质量评估是监控网络资源状态，保证网络运行安全的一种重要工具。随着通讯网络的发展，如何让网络质量评估更真实地反映网络的实际运行状态，如何让网络质量评估更具弹性以适应不同的网络类型，成为了一个新的技术领域。

当前的网络质量评估工具通常利用网络不同维度的关键指标(Key Indication)，根据专家给出的确定算法，计算出一个网络的评价结果。这种不可定制的确定算法，使得实际网络只要缺少算法中任一关键指标的基础数据，评估工具计算出的评价结果都不能正确反映网络的真实状态。这种工具算法的不可定制性，也阻碍了运营商将新维度的关键指标利用到网络质量评估工具中。

现有网络质量评估主要采用固定算法是由于一旦开放算法定制后，缺乏一种指标权重的验证算法来保证定制算法的正确性。指标权重的验证算法是网络质量评估工具能否正确反映网络状态的关键技术。

一般的网络质量评估工具算法都由专家给出，只能依靠用户服务人员的反馈和用户的实际使用感受去验证算法的有效性。这种验证方式反馈慢，可操作性差，人为因素干扰大。

发明内容

根据本发明实施例提供的方案解决的技术问题是固定算法的网络质量评估工具所缺乏的网络适应性和对新维度关键指标的兼容性。

根据本发明实施例提供的一种网络质量评估工具的指标权重验证方法，包括：

将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；

接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；

根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

优选地，所述第一网络质量评估算法是指指标权重调整后的网络质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。

优选地，所述将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的验证节点包括：

当网络质量评估工具所用网络质量评估算法的指标权重需要验证时，接收部署该网络质量评估工具的网络节点发送包含网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法的指标权重验证请求；

将所接收的包含网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法的指标权重验证请求发送给指标权重验证云中的所有验证节点。

优选地，所述接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据其得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布包括：

指标权重验证云中的每个验证节点收到所述指标权重验证请求后，根据其是否拥有所述网络质量评估算法所需要的关键指标原始数据和其当前的负载状况决定是否参与所述网络质量评估算法的验证；

接收并统计每个决定参与所述网络质量评估算法验证的验证节点利用所述指标权重验证请求中的第一网络质量评估算法算出的第一网络质量评估值，以及利用第二网络质量评估算法算出第二网络质量评估值；

根据每个验证节点发送的第一网络质量评估值和第二网络质量评估值，得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布。

优选地，所述根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估包括：

利用所述网络质量评估值的均值与预置的均值门限值，对第一网络质量评估算法是否可用进行第一评估；

若所述网络质量评估值的均值低于预置的均值门限值，则确定第一评估结果可接受，并利用所述网络质量评估值的标准差与预置的标准差门限值，对第一网络质量评估算法是否可用进行第二评估；

若所述网络质量评估值的标准差低于预置的标准差门限值，则确定第二评估结果可接受，并对第一网络质量评估值服从的分布是否符合正态分布进行第三评估；

若第一网络质量评估值服从的分布符合正态分布，则确定第三评估结果可接受。

优选地，所述对第一网络质量评估算法是否可用进行评估，还包括：

在确定第三评估结果可接受后，向存储节点发送查询所述参与验证的验证节点的网络质量评估值的历史均值的查询请求；

根据存储节点返回网络质量评估值的历史均值和预置的历史均值门限值，判断所述第一网络质量评估算法的评估结果是否为评估可接受；

若网络质量评估值的历史均值低于预置的历史均值门限值，则判断所述第一网络质量评估算法的评估结果为评估可接受。

优选地，根据所述评估结果，对调整后的指标权重进行验证包括：

若评估结果为评估可接受时，则调整后的指标权重验证成功；

若评估结果为评估不可接受时，则调整后的指标权重验证失败。

根据本发明实施例提供的一种网络质量评估工具的指标权重验证装置，包括：

发送模块，用于将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；

获取模块，用于接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；

评估模块，用于根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

优选地，所述第一网络质量评估算法是指指标权重调整后的网络质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。

根据本发明实施例提供的一种网络质量评估工具的控制节点，所述控制节点包括处理器和存储器，其中，所述存储器用于存储可执行程序代码；所述处理器通过读取所述存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行以下步骤：

将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；

接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；

根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

根据本发明实施例提供的方案，利用网络运营商网络上的网络质量评估工具组成的网络质量评估算法验证云，，验证了指标权重调整后算法的正确性，同时保证了网络质量评估工具算法定制后的有效性。

附图说明

图1是本发明实施例提供的一种网络质量评估工具的指标权重验证方法的流程图；

图2是本发明实施例提供的一种网络质量评估工具的指标权重验证装置的结构框图；

图3是本发明实施例提供的指标权重验证云的结构框图；

图4是本发明实施例提供的指标权重验证流程图。

具体实施方式

以下结合附图对本发明的优选实施例进行详细说明，应当理解，以下所说明的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

本发明实施例将已部署在EMS(Element Management System，网元管理系统)中的网络质量评估工具组成一个算法指标权重验证云，云中的网络质量评估工具可以利用其存储的网络基础数据为云中的某一网络质量评估工具提供权重定制后的网络质量评估算法的验证，将这一验证方法称为网络质量评估指标的权重云验证。

图3是本发明实施例提供的指标权重验证云的结构框图，需要设置以下节点，如图3所示，包括：一个指标权重验证的控制节点、一个或多个指标权重验证的存储节点以及多个部署有网络质量评估工具的EMS作为验证节点。

所述控制节点，用来控制整个验证的过程，包括验证请求的分发，验证数据的统计和验证结果的判定。

所述存储节点，用来存储历次验证的过程数据和网络质量评估工具的历次评估结果，用于对权重修改后的评估值提供参照。

将尽可能多的部署网络质量评估工具的EMS作为验证节点，纳入到指标权重验证云中统一调度，用其中存储的网络基础数据作为验证的基础。

本发明实施例提供的一种网络质量评估工具的控制节点，所述控制节点包括处理器和存储器，其中，所述存储器用于存储可执行程序代码；所述处理器通过读取所述存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行以下步骤：

将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；

接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；

根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

实施例一：

图1是本发明实施例提供的一种网络质量评估工具的指标权重验证方法的流程图，如图1所示，包括：

步骤S101：将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；

步骤S102：接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；

步骤S103：根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

其中，所述第一网络质量评估算法是指指标权重调整后的网络质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。

其中，所述将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的验证节点包括：当网络质量评估工具所用网络质量评估算法的指标权重需要验证时，接收部署该网络质量评估工具的网络节点发送的包含网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法的指标权重验证请求；将所接收的所述包含网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法的指标权重验证请求发送给指标权重验证云中的所有验证节点。

其中，所述接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据其得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布包括：指标权重验证云中的每个验证节点收到所述指标权重验证请求后，根据其是否拥有所述网络质量评估算法所需要的关键指标原始数据和其当前的负载状况决定是否参与所述网络质量评估算法的验证；接收并统计每个决定参与所述网络质量评估算法验证的验证节点利用所述指标权重验证请求中的第一网络质量评估算法算出的第一网络质量评估值，以及利用第二网络质量评估算法算出第二网络质量评估值；根据每个验证节点的第一网络质量评估值和第二网络质量评估值，得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布。

其中，所述根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估包括：利用所述网络质量评估值的均值与预置的均值门限值，对第一网络质量评估算法是否可用进行第一评估；若所述网络质量评估值的均值低于预置的均值门限值，则确定第一评估结果可接受，并利用所述网络质量评估值的标准差与预置的标准差门限值，对第一网络质量评估算法是否可用进行第二评估；若所述网络质量评估值的标准差低于预置的标准差门限值，则确定第二评估结果可接受，并对第一网络质量评估值服从的分布是否符合正态分布进行第三评估；若第一网络质量评估值服从的分布符合正态分布，则确定第三评估结果可接受。具体地说，所述对第一网络质量评估算法是否可用进行评估，还包括：在确定第三评估结果可接受后，向存储节点发送查询所述参与验证的验证节点的网络质量评估值的历史均值的查询请求；根据存储节点返回网络质量评估值的历史均值和预置的历史均值门限值，判断所述第一网络质量评估算法的评估结果是否为评估可接受；若网络质量评估值的历史均值低于预置的历史均值门限值，则判断所述第一网络质量评估算法的评估结果为评估可接受。

其中，所述根据评估结果，对调整后的指标权重进行验证包括：若评估结果为评估可接受时，则调整后的指标权重验证成功；若评估结果为评估不可接受时，则调整后的指标权重验证失败。

实施例二

图2是本发明实施例提供的一种网络质量评估工具的指标权重验证装置的结构框图，如图2所示，包括：发送模块201，用于将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；获取模块202，用于接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；评估模块203，用于根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

其中，所述第一网络质量评估算法是指指标权重调整后的网络质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。

其中，所述发送模块201、获取模块202以及评估模块203均设置在控制节点内。

实施例三

图4是本发明实施例提供的指标权重验证流程图，如图4所示，包括：采用一般的网络质量评估工具算法：【100*(1-R1*10)*W1+100*(1-R2*10)*W2+100*(1-R3*10)*W3】/(W1+W2+W3)，其中，R1代表小区可用率低于95％的小区数与小区总数的比值，R2代表小区接通率低于95％的小区数与小区总数的比值，R3代表小区掉话率高于5％的小区数与小区总数的比值。W1、W2、W3分代表指标R1、R2、R3的权重，这里初始设置为3、3、4。

如果需要定制网络质量评估工具指标公式，将初始权重W1、W2、W3调整为5、3、4，并有20个节点参与验证，具体包括：

步骤S401：需验证指标权重的验证节点将验证请求发送给控制节点；

一个网络质量评估工具需要验证修改后的指标权重是否正常，需要把包含指标权重调整后的网络质量评估算法(指标权重W1、W2、W3为5、3、4)和指标权重调整前的网络质量评估算法(指标权重W1、W2、W3为3、3、4)的验证请求发送给控制节点。

步骤S402：控制节点将验证请求发送给其控制的所有验证节点；

控制节点收到验证请求后，将指标权重调整后的网络质量评估算法和指标权重调整前的网络质量评估算法发送给所有其控制的验证节点。

步骤S403：验证节点根据权重修改前后的指标公式分别计算评估值并发送给控制节点；

验证节点收到控制节点发送的指标权重调整前后的网络质量评估算法后，根据是否拥有指标权重调整前后的网络质量评估算法所需要的关键指标的原始数据和该验证节点当前的负载状况决定是否参与此次评估验证。

验证节点依据指标权重调整后的网络质量评估算法和指标权重调整前的网络质量评估算法，利用自身存储的关键指标的原始数据计算出权重调整前后两个不同的网络质量评估值，并发送给控制节点。

步骤S404：控制节点汇总验证节点的评估值，计算出评估值的均值、标准差和分布；

控制节点收集到足够的验证节点发送的权重调整前后两个不同的网络质量评估值，统计出整个验证云内网络质量指标权重调整前后的算法计算出的网络质量评估值，并得到所述网络质量评估值的均值、标准差和服从的分布。

步骤S405：验证结果均值是否可接受；

如果前后两次评估值均值的偏差大于1.67％的门限，则进入步骤S411，认为该次权重的调整不正确，调整的错误结果将会被控制节点发送给存储节点储存；如果偏差小于1.67％的门限，则进入步骤S406。

算法的指标权重修改后，如果修改正确，那么依据该指标权重修改后的算法所计算出的验证云中所有参与验证的验证节点网络质量评估值的均值和该指标权重修改前的算法所计算出的所有参与验证的验证节点网络质量评估值的均值的偏差不大于变更权重/(变更后总权重×10)。也就是一个正确的指标权重修改不可能显著提升或降低验证云全网的质量评估值。

步骤S406：验证结果分布是否服从正态分布；

如果后一次评估值的分布不符合正态分布，则进入步骤S411，认为该次权重的调整不正确，调整的错误结果将会被控制节点发送给存储节点储存。如果服从正态分布，则进入步骤S407。

算法的指标权重修改后，如果修改正确，那么依据该指标权重修改后的算法所计算出的验证云中所有参与验证的验证节点网络质量评估值的分布和该指标权重修改前的算法所计算出的验证云中所有参与验证的验证节点网络质量评估值的分布都应该服从正态分布，且两个正态分布标准差的差值不应该大于1/参与验证的验证节点数量。也就是一个正确的指标权重修改不可能显著改变验证云全网的质量评估值的分布。

步骤S407：验证结果标准差是否可接受；

如果前后两次评估值分布的标准差大于5％的门限，则进入步骤S411，认为该次权重的调整不正确，调整的错误结果将会被控制节点发送给存储节点储存。如果偏差小于5％的门限，则进入步骤S408。

算法的指标权重修改后，如果修改正确，那么依据该指标权重修改后的算法所计算出的验证节点自身的评估值与历史评估均值的差值大于变更权重/(变更后总权重×10)的比例不大于变更权重/(变更后总权重×5)。也就是一个正确的指标权重修改不可能依靠单一关键指标权重的修改大幅改变其网络质量的评估值。

步骤S408：控制节点查询存储节点获取验证节点的历史评估值；

控制节点从存储节点查询出参与验证的验证节点的网络质量评估值的历史均值，计算偏离历史均值1.67％的计算节点的比例是否大于3.33％。

步骤S409：与历史结果是否有较大偏差；

如果偏离历史均值的比例小于可接受的3.33％的门限，就认为此次权重调整的网络质量评估算法是正确的，进入步骤S410；否则评估算法便不可被系统接受，进入步骤S411，且调整的任何结果将会被控制节点发送给云验证的存储节点存储。

步骤S410：指标权重调整正确；

步骤S411：指标权重调整失败。

根据本发明实施例提供的方案，利用运营商网络上的网络质量评估工具组成的网络质量评估算法验证云，验证了指标权重调整后的算法的正确性。保证了网络质量评估工具的指标权重可修改的实现。

尽管上文对本发明进行了详细说明，但是本发明不限于此，本技术领域技术人员可以根据本发明的原理进行各种修改。因此，凡按照本发明原理所作的修改，都应当理解为落入本发明的保护范围。

Claims (10)

1.一种网络质量评估工具的指标权重验证方法，包括：

将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；

接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；

根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

2.根据权利要求1所述的方法，所述第一网络质量评估算法是指指标权重调整后的网络质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。

3.根据权利要求1或2所述的方法，所述将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的验证节点包括：

当网络质量评估工具所用网络质量评估算法的指标权重需要验证时，接收部署该网络质量评估工具的网络节点发送的包含网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法的指标权重验证请求；

将所接收的包含网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法的指标权重验证请求发送给指标权重验证云中的所有验证节点。

4.根据权利要求3所述的方法，所述接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据其得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布包括：

指标权重验证云中的每个验证节点收到所述指标权重验证请求后，根据其是否拥有所述网络质量评估算法所需要的关键指标原始数据和其当前的负载状况决定是否参与所述网络质量评估算法的验证；

接收并统计每个决定参与所述网络质量评估算法验证的验证节点利用所述指标权重验证请求中的第一网络质量评估算法算出的第一网络质量评估值，以及利用第二网络质量评估算法算出第二网络质量评估值；

根据每个验证节点的第一网络质量评估值和第二网络质量评估值，得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布。

5.根据权利要求4所述的方法，所述根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估包括：

利用所述网络质量评估值的均值与预置的均值门限值，对第一网络质量评估算法是否可用进行第一评估；

若所述网络质量评估值的均值低于预置的均值门限值，则确定第一评估结果可接受，并利用所述网络质量评估值的标准差与预置的标准差门限值，对第一网络质量评估算法是否可用进行第二评估；

若所述网络质量评估值的标准差低于预置的标准差门限值，则确定第二评估结果可接受，并对第一网络质量评估值服从的分布是否符合正态分布进行第三评估；

若第一网络质量评估值服从的分布符合正态分布，则确定第三评估结果可接受。

6.根据权利要求5所述的方法，所述对第一网络质量评估算法是否可用进行评估，还包括：

在确定第三评估结果可接受后，向存储节点发送查询所述参与验证的验证节点的网络质量评估值的历史均值的查询请求；

根据存储节点返回网络质量评估值的历史均值和预置的历史均值门限值，判断所述第一网络质量评估算法的评估结果是否为评估可接受；

若网络质量评估值的历史均值低于预置的历史均值门限值，则判断所述第一网络质量评估算法的评估结果为评估可接受。

7.根据权利要求6所述的方法，根据所述评估结果，对调整后的指标权重进行验证包括：

若评估结果为评估可接受时，则调整后的指标权重验证成功；

若评估结果为评估不可接受时，则调整后的指标权重验证失败。

8.一种网络质量评估工具的指标权重验证装置，包括：

发送模块，用于将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；

获取模块，用于接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；

评估模块，用于根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

9.根据权利要求8所述的装置，所述第一网络质量评估算法是指指标权重调整后的网络质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。

10.一种网络质量评估工具的控制节点，所述控制节点包括处理器和存储器，其中，所述存储器用于存储可执行程序代码；所述处理器通过读取所述存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行以下步骤：

将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；

接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；

根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。