CN108632104B - 一种网络质量评估工具的指标权重验证方法及装置 - Google Patents

一种网络质量评估工具的指标权重验证方法及装置 Download PDF

Info

Publication number
CN108632104B
CN108632104B CN201710164314.9A CN201710164314A CN108632104B CN 108632104 B CN108632104 B CN 108632104B CN 201710164314 A CN201710164314 A CN 201710164314A CN 108632104 B CN108632104 B CN 108632104B
Authority
CN
China
Prior art keywords
network quality
quality evaluation
verification
value
algorithm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710164314.9A
Other languages
English (en)
Other versions
CN108632104A (zh
Inventor
王臻
牛涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Zhongxing Software Co Ltd
Original Assignee
Shanghai Zhongxing Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Zhongxing Software Co Ltd filed Critical Shanghai Zhongxing Software Co Ltd
Priority to CN201710164314.9A priority Critical patent/CN108632104B/zh
Priority to PCT/CN2017/106815 priority patent/WO2018171177A1/zh
Publication of CN108632104A publication Critical patent/CN108632104A/zh
Application granted granted Critical
Publication of CN108632104B publication Critical patent/CN108632104B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/50—Testing arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种网络质量评估工具的指标权重验证方法及装置，涉及通信技术领域，其方法包括：将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证。

Description

一种网络质量评估工具的指标权重验证方法及装置
技术领域
本发明涉及通信技术领域，特别涉及一种网络质量评估工具的指 标权重验证方法及装置。
背景技术
网络质量评估是监控网络资源状态，保证网络运行安全的一种重 要工具。随着通讯网络的发展，如何让网络质量评估更真实地反映网 络的实际运行状态，如何让网络质量评估更具弹性以适应不同的网络 类型，成为了一个新的技术领域。
当前的网络质量评估工具通常利用网络不同维度的关键指标 (KeyIndication)，根据专家给出的确定算法，计算出一个网络的评价 结果。这种不可定制的确定算法，使得实际网络只要缺少算法中任一 关键指标的基础数据，评估工具计算出的评价结果都不能正确反映网 络的真实状态。这种工具算法的不可定制性，也阻碍了运营商将新维 度的关键指标利用到网络质量评估工具中。
现有网络质量评估主要采用固定算法是由于一旦开放算法定制 后，缺乏一种指标权重的验证算法来保证定制算法的正确性。指标权 重的验证算法是网络质量评估工具能否正确反映网络状态的关键技 术。
一般的网络质量评估工具算法都由专家给出，只能依靠用户服务 人员的反馈和用户的实际使用感受去验证算法的有效性。这种验证方 式反馈慢，可操作性差，人为因素干扰大。
发明内容
根据本发明实施例提供的方案解决的技术问题是固定算法的网 络质量评估工具所缺乏的网络适应性和对新维度关键指标的兼容性。
根据本发明实施例提供的一种网络质量评估工具的指标权重验 证方法，包括：
将网络质量评估工具所用的第一网络质量评估算法和第二网络 质量评估算法发送给指标权重验证云中的所有验证节点；
接收并统计每个参与验证的验证节点利用第一网络质量评估算 法和第二网络质量评估算法分别算出的第一网络质量评估值和第二 网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质 量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及 服从的分布；
根据所述指标权重验证云的网络质量评估值的均值、标准差以及 服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评 估结果，对调整后的指标权重进行验证。
优选地，所述第一网络质量评估算法是指指标权重调整后的网络 质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网 络质量评估算法；所述第一网络质量评估值是指指标权重调整后的网 络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络 质量评估值。
优选地，所述将网络质量评估工具所用的第一网络质量评估算法 和第二网络质量评估算法发送给指标权重验证云中的验证节点包括：
当网络质量评估工具所用网络质量评估算法的指标权重需要验 证时，接收部署该网络质量评估工具的网络节点发送包含网络质量评 估工具所用的第一网络质量评估算法和第二网络质量评估算法的指 标权重验证请求；
将所接收的包含网络质量评估工具所用的第一网络质量评估算 法和第二网络质量评估算法的指标权重验证请求发送给指标权重验 证云中的所有验证节点。
优选地，所述接收并统计每个参与验证的验证节点利用第一网络 质量评估算法和第二网络质量评估算法分别算出的第一网络质量评 估值和第二网络质量评估值，并根据其得到指标权重验证云的网络质 量评估值的均值、标准差以及服从的分布包括：
指标权重验证云中的每个验证节点收到所述指标权重验证请求 后，根据其是否拥有所述网络质量评估算法所需要的关键指标原始数 据和其当前的负载状况决定是否参与所述网络质量评估算法的验证；
接收并统计每个决定参与所述网络质量评估算法验证的验证节 点利用所述指标权重验证请求中的第一网络质量评估算法算出的第 一网络质量评估值，以及利用第二网络质量评估算法算出第二网络质 量评估值；
根据每个验证节点发送的第一网络质量评估值和第二网络质量 评估值，得到指标权重验证云的网络质量评估值的均值、标准差以及 服从的分布。
优选地，所述根据所述指标权重验证云的网络质量评估值的均 值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行 评估包括：
利用所述网络质量评估值的均值与预置的均值门限值，对第一网 络质量评估算法是否可用进行第一评估；
若所述网络质量评估值的均值低于预置的均值门限值，则确定第 一评估结果可接受，并利用所述网络质量评估值的标准差与预置的标 准差门限值，对第一网络质量评估算法是否可用进行第二评估；
若所述网络质量评估值的标准差低于预置的标准差门限值，则确 定第二评估结果可接受，并对第一网络质量评估值服从的分布是否符 合正态分布进行第三评估；
若第一网络质量评估值服从的分布符合正态分布，则确定第三评 估结果可接受。
优选地，所述对第一网络质量评估算法是否可用进行评估，还包 括：
在确定第三评估结果可接受后，向存储节点发送查询所述参与验 证的验证节点的网络质量评估值的历史均值的查询请求；
根据存储节点返回网络质量评估值的历史均值和预置的历史均 值门限值，判断所述第一网络质量评估算法的评估结果是否为评估可 接受；
若网络质量评估值的历史均值低于预置的历史均值门限值，则判 断所述第一网络质量评估算法的评估结果为评估可接受。
优选地，根据所述评估结果，对调整后的指标权重进行验证包括：
若评估结果为评估可接受时，则调整后的指标权重验证成功；
若评估结果为评估不可接受时，则调整后的指标权重验证失败。
根据本发明实施例提供的一种网络质量评估工具的指标权重验 证装置，包括：
发送模块，用于将网络质量评估工具所用的第一网络质量评估算 法和第二网络质量评估算法发送给指标权重验证云中的所有验证节 点；
获取模块，用于接收并统计每个参与验证的验证节点利用第一网 络质量评估算法和第二网络质量评估算法分别算出的第一网络质量 评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所 述第二网络质量评估值得到指标权重验证云的网络质量评估值的均 值、标准差以及服从的分布；
评估模块，用于根据所述指标权重验证云的网络质量评估值的均 值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行 评估，并根据评估结果，对调整后的指标权重进行验证。
优选地，所述第一网络质量评估算法是指指标权重调整后的网络 质量评估算法；所述第二网络质量评估算法是指指标权重调整前的络质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。
根据本发明实施例提供的一种网络质量评估工具的控制节点，所 述控制节点包括处理器和存储器，其中，所述存储器用于存储可执行 程序代码；所述处理器通过读取所述存储器中存储的可执行程序代码 来运行与可执行程序代码对应的程序，用于执行以下步骤：
将网络质量评估工具所用的第一网络质量评估算法和第二网络 质量评估算法发送给指标权重验证云中的所有验证节点；
接收并统计每个参与验证的验证节点利用第一网络质量评估算 法和第二网络质量评估算法分别算出的第一网络质量评估值和第二 网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质 量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及 服从的分布；
根据所述指标权重验证云的网络质量评估值的均值、标准差以及 服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评 估结果，对调整后的指标权重进行验证。
根据本发明实施例提供的方案，利用网络运营商网络上的网络质 量评估工具组成的网络质量评估算法验证云，验证了指标权重调整后 算法的正确性，同时保证了网络质量评估工具算法定制后的有效性。
附图说明
图1是本发明实施例提供的一种网络质量评估工具的指标权重 验证方法的流程图；
图2是本发明实施例提供的一种网络质量评估工具的指标权重 验证装置的结构框图；
图3是本发明实施例提供的指标权重验证云的结构框图；
图4是本发明实施例提供的指标权重验证流程图。
具体实施方式
以下结合附图对本发明的优选实施例进行详细说明，应当理解， 以下所说明的优选实施例仅用于说明和解释本发明，并不用于限定本 发明。
本发明实施例将已部署在EMS(Element Management System， 网元管理系统)中的网络质量评估工具组成一个算法指标权重验证 云，云中的网络质量评估工具可以利用其存储的网络基础数据为云中 的某一网络质量评估工具提供权重定制后的网络质量评估算法的验 证，将这一验证方法称为网络质量评估指标的权重云验证。
图3是本发明实施例提供的指标权重验证云的结构框图，需要设 置以下节点，如图3所示，包括：一个指标权重验证的控制节点、一 个或多个指标权重验证的存储节点以及多个部署有网络质量评估工 具的EMS作为验证节点。
所述控制节点，用来控制整个验证的过程，包括验证请求的分发， 验证数据的统计和验证结果的判定。
所述存储节点，用来存储历次验证的过程数据和网络质量评估工 具的历次评估结果，用于对权重修改后的评估值提供参照。
将尽可能多的部署网络质量评估工具的EMS作为验证节点，纳 入到指标权重验证云中统一调度，用其中存储的网络基础数据作为验 证的基础。
本发明实施例提供的一种网络质量评估工具的控制节点，所述控 制节点包括处理器和存储器，其中，所述存储器用于存储可执行程序 代码；所述处理器通过读取所述存储器中存储的可执行程序代码来运 行与可执行程序代码对应的程序，用于执行以下步骤：
将网络质量评估工具所用的第一网络质量评估算法和第二网络 质量评估算法发送给指标权重验证云中的所有验证节点；
接收并统计每个参与验证的验证节点利用第一网络质量评估算 法和第二网络质量评估算法分别算出的第一网络质量评估值和第二 网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质 量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及 服从的分布；
根据所述指标权重验证云的网络质量评估值的均值、标准差以及 服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评 估结果，对调整后的指标权重进行验证。
实施例一：
图1是本发明实施例提供的一种网络质量评估工具的指标权重 验证方法的流程图，如图1所示，包括：
步骤S101：将网络质量评估工具所用的第一网络质量评估算法 和第二网络质量评估算法发送给指标权重验证云中的所有验证节点；
步骤S102：接收并统计每个参与验证的验证节点利用第一网络 质量评估算法和第二网络质量评估算法分别算出的第一网络质量评 估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述 第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、 标准差以及服从的分布；
步骤S103：根据所述指标权重验证云的网络质量评估值的均值、 标准差以及服从的分布，对第一网络质量评估算法是否可用进行评 估，并根据评估结果，对调整后的指标权重进行验证。
其中，所述第一网络质量评估算法是指指标权重调整后的网络质 量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络 质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络 质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质 量评估值。
其中，所述将网络质量评估工具所用的第一网络质量评估算法和 第二网络质量评估算法发送给指标权重验证云中的验证节点包括：当 网络质量评估工具所用网络质量评估算法的指标权重需要验证时，接 收部署该网络质量评估工具的网络节点发送的包含网络质量评估工 具所用的第一网络质量评估算法和第二网络质量评估算法的指标权 重验证请求；将所接收的所述包含网络质量评估工具所用的第一网络 质量评估算法和第二网络质量评估算法的指标权重验证请求发送给 指标权重验证云中的所有验证节点。
其中，所述接收并统计每个参与验证的验证节点利用第一网络质 量评估算法和第二网络质量评估算法分别算出的第一网络质量评估 值和第二网络质量评估值，并根据其得到指标权重验证云的网络质量 评估值的均值、标准差以及服从的分布包括：指标权重验证云中的每 个验证节点收到所述指标权重验证请求后，根据其是否拥有所述网络 质量评估算法所需要的关键指标原始数据和其当前的负载状况决定 是否参与所述网络质量评估算法的验证；接收并统计每个决定参与所 述网络质量评估算法验证的验证节点利用所述指标权重验证请求中 的第一网络质量评估算法算出的第一网络质量评估值，以及利用第二 网络质量评估算法算出第二网络质量评估值；根据每个验证节点的第 一网络质量评估值和第二网络质量评估值，得到指标权重验证云的网 络质量评估值的均值、标准差以及服从的分布。
其中，所述根据所述指标权重验证云的网络质量评估值的均值、 标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估 包括：利用所述网络质量评估值的均值与预置的均值门限值，对第一 网络质量评估算法是否可用进行第一评估；若所述网络质量评估值的 均值低于预置的均值门限值，则确定第一评估结果可接受，并利用所 述网络质量评估值的标准差与预置的标准差门限值，对第一网络质量 评估算法是否可用进行第二评估；若所述网络质量评估值的标准差低 于预置的标准差门限值，则确定第二评估结果可接受，并对第一网络 质量评估值服从的分布是否符合正态分布进行第三评估；若第一网络 质量评估值服从的分布符合正态分布，则确定第三评估结果可接受。 具体地说，所述对第一网络质量评估算法是否可用进行评估，还包括： 在确定第三评估结果可接受后，向存储节点发送查询所述参与验证的 验证节点的网络质量评估值的历史均值的查询请求；根据存储节点返 回网络质量评估值的历史均值和预置的历史均值门限值，判断所述第 一网络质量评估算法的评估结果是否为评估可接受；若网络质量评估 值的历史均值低于预置的历史均值门限值，则判断所述第一网络质量 评估算法的评估结果为评估可接受。
其中，所述根据评估结果，对调整后的指标权重进行验证包括： 若评估结果为评估可接受时，则调整后的指标权重验证成功；若评估 结果为评估不可接受时，则调整后的指标权重验证失败。
实施例二
图2是本发明实施例提供的一种网络质量评估工具的指标权重 验证装置的结构框图，如图2所示，包括：发送模块201，用于将网 络质量评估工具所用的第一网络质量评估算法和第二网络质量评估 算法发送给指标权重验证云中的所有验证节点；获取模块202，用于 接收并统计每个参与验证的验证节点利用第一网络质量评估算法和 第二网络质量评估算法分别算出的第一网络质量评估值和第二网络 质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评 估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从 的分布；评估模块203，用于根据所述指标权重验证云的网络质量评 估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否 可用进行评估，并根据评估结果，对调整后的指标权重进行验证。
其中，所述第一网络质量评估算法是指指标权重调整后的网络质 量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络 质量评估算法；所述第一网络质量评估值是指指标权重调整后的网络 质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质 量评估值。
其中，所述发送模块201、获取模块202以及评估模块203均设 置在控制节点内。
实施例三
图4是本发明实施例提供的指标权重验证流程图，如图4所示， 包括：采用一般的网络质量评估工具算法：【100*(1-R1*10)* W1+100*(1-R2*10)*W2+100*(1-R3*10)*W3】/(W1+W2+W3)， 其中，R1代表小区可用率低于95％的小区数与小区总数的比值，R2 代表小区接通率低于95％的小区数与小区总数的比值，R3代表小区 掉话率高于5％的小区数与小区总数的比值。W1、W2、W3分代表 指标R1、R2、R3的权重，这里初始设置为3、3、4。
如果需要定制网络质量评估工具指标公式，将初始权重W1、W2、 W3调整为5、3、4，并有20个节点参与验证，具体包括：
步骤S401：需验证指标权重的验证节点将验证请求发送给控制 节点；
一个网络质量评估工具需要验证修改后的指标权重是否正常，需 要把包含指标权重调整后的网络质量评估算法(指标权重W1、W2、 W3为5、3、4)和指标权重调整前的网络质量评估算法(指标权重 W1、W2、W3为3、3、4)的验证请求发送给控制节点。
步骤S402：控制节点将验证请求发送给其控制的所有验证节点；
控制节点收到验证请求后，将指标权重调整后的网络质量评估算 法和指标权重调整前的网络质量评估算法发送给所有其控制的验证 节点。
步骤S403：验证节点根据权重修改前后的指标公式分别计算评 估值并发送给控制节点；
验证节点收到控制节点发送的指标权重调整前后的网络质量评 估算法后，根据是否拥有指标权重调整前后的网络质量评估算法所需 要的关键指标的原始数据和该验证节点当前的负载状况决定是否参 与此次评估验证。
验证节点依据指标权重调整后的网络质量评估算法和指标权重 调整前的网络质量评估算法，利用自身存储的关键指标的原始数据计 算出权重调整前后两个不同的网络质量评估值，并发送给控制节点。
步骤S404：控制节点汇总验证节点的评估值，计算出评估值的 均值、标准差和分布；
控制节点收集到足够的验证节点发送的权重调整前后两个不同 的网络质量评估值，统计出整个验证云内网络质量指标权重调整前后 的算法计算出的网络质量评估值，并得到所述网络质量评估值的均 值、标准差和服从的分布。
步骤S405：验证结果均值是否可接受；
如果前后两次评估值均值的偏差大于1.67％的门限，则进入步骤 S411，认为该次权重的调整不正确，调整的错误结果将会被控制节点 发送给存储节点储存；如果偏差小于1.67％的门限，则进入步骤S406。
算法的指标权重修改后，如果修改正确，那么依据该指标权重修 改后的算法所计算出的验证云中所有参与验证的验证节点网络质量 评估值的均值和该指标权重修改前的算法所计算出的所有参与验证 的验证节点网络质量评估值的均值的偏差不大于变更权重/(变更 后总权重×10)。也就是一个正确的指标权重修改不可能显著提升或 降低验证云全网的质量评估值。
步骤S406：验证结果分布是否服从正态分布；
如果后一次评估值的分布不符合正态分布，则进入步骤S411， 认为该次权重的调整不正确，调整的错误结果将会被控制节点发送给 存储节点储存。如果服从正态分布，则进入步骤S407。
算法的指标权重修改后，如果修改正确，那么依据该指标权重修 改后的算法所计算出的验证云中所有参与验证的验证节点网络质量 评估值的分布和该指标权重修改前的算法所计算出的验证云中所有 参与验证的验证节点网络质量评估值的分布都应该服从正态分布，且 两个正态分布标准差的差值不应该大于1/参与验证的验证节点数 量。也就是一个正确的指标权重修改不可能显著改变验证云全网的质 量评估值的分布。
步骤S407：验证结果标准差是否可接受；
如果前后两次评估值分布的标准差大于5％的门限，则进入步骤 S411，认为该次权重的调整不正确，调整的错误结果将会被控制节点 发送给存储节点储存。如果偏差小于5％的门限，则进入步骤S408。
算法的指标权重修改后，如果修改正确，那么依据该指标权重修 改后的算法所计算出的验证节点自身的评估值与历史评估均值的差 值大于变更权重/(变更后总权重×10)的比例不大于变更权重/ (变更后总权重×5)。也就是一个正确的指标权重修改不可能依靠单 一关键指标权重的修改大幅改变其网络质量的评估值。
步骤S408：控制节点查询存储节点获取验证节点的历史评估值；
控制节点从存储节点查询出参与验证的验证节点的网络质量评 估值的历史均值，计算偏离历史均值1.67％的计算节点的比例是否大 于3.33％。
步骤S409：与历史结果是否有较大偏差；
如果偏离历史均值的比例小于可接受的3.33％的门限，就认为此 次权重调整的网络质量评估算法是正确的，进入步骤S410；否则评 估算法便不可被系统接受，进入步骤S411，且调整的任何结果将会 被控制节点发送给云验证的存储节点存储。
步骤S410：指标权重调整正确；
步骤S411：指标权重调整失败。
根据本发明实施例提供的方案，利用运营商网络上的网络质量评 估工具组成的网络质量评估算法验证云，验证了指标权重调整后的算 法的正确性。保证了网络质量评估工具的指标权重可修改的实现。
尽管上文对本发明进行了详细说明，但是本发明不限于此，本技 术领域技术人员可以根据本发明的原理进行各种修改。因此，凡按照 本发明原理所作的修改，都应当理解为落入本发明的保护范围。

Claims (8)

1.一种网络质量评估工具的指标权重验证方法，包括：
将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点，其中，所述第一网络质量评估算法是指指标权重调整后的网络质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络质量评估算法；
接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；
根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证，其包括：
利用所述网络质量评估值的均值的偏差与预置的均值门限值，对第一网络质量评估算法是否可用进行第一评估；
若所述网络质量评估值的均值的偏差低于预置的均值门限值，则确定第一评估结果可接受，并对第一网络质量评估值的分布是否符合正态分布进行第三评估；
若第一网络质量评估值服从的分布符合正态分布，则确定第三评估结果可接受，并利用所述网络质量评估值分布的标准差与预置的标准差门限值，对第一网络质量评估算法是否可用进行第二评估；
若所述网络质量评估值分布的标准差低于预置的标准差门限值，则确定第二评估结果可接受，并向存储节点发送查询所述参与验证的验证节点的网络质量评估值的历史均值的查询请求；
根据存储节点返回网络质量评估值的历史均值，计算偏离历史均值的计算节点的比例，并根据所述偏离历史均值的计算节点的比例和预置的历史均值门限值，判断所述第一网络质量评估算法的评估结果是否为评估可接受；
若所述偏离历史均值的计算节点的比例低于预置的历史均值门限值，则判断所述第一网络质量评估算法的评估结果为评估可接受。
2.根据权利要求1所述的方法，所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。
3.根据权利要求1或2所述的方法，所述将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的验证节点包括：
当网络质量评估工具所用网络质量评估算法的指标权重需要验证时，接收部署该网络质量评估工具的网络节点发送的包含网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法的指标权重验证请求；
将所接收的包含网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法的指标权重验证请求发送给指标权重验证云中的所有验证节点。
4.根据权利要求3所述的方法，所述接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据其得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布包括：
指标权重验证云中的每个验证节点收到所述指标权重验证请求后，根据其是否拥有所述网络质量评估算法所需要的关键指标原始数据和其当前的负载状况决定是否参与所述网络质量评估算法的验证；
接收并统计每个决定参与所述网络质量评估算法验证的验证节点利用所述指标权重验证请求中的第一网络质量评估算法算出的第一网络质量评估值，以及利用第二网络质量评估算法算出第二网络质量评估值；
根据每个验证节点的第一网络质量评估值和第二网络质量评估值，得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布。
5.根据权利要求1所述的方法，根据所述评估结果，对调整后的指标权重进行验证包括：
若评估结果为评估可接受时，则调整后的指标权重验证成功；
若评估结果为评估不可接受时，则调整后的指标权重验证失败。
6.一种网络质量评估工具的指标权重验证装置，包括：
发送模块，用于将网络质量评估工具所用的第一网络质量评估算法和第二网络质量评估算法发送给指标权重验证云中的所有验证节点，其中，所述第一网络质量评估算法是指指标权重调整后的网络质量评估算法；所述第二网络质量评估算法是指指标权重调整前的网络质量评估算法；
获取模块，用于接收并统计每个参与验证的验证节点利用第一网络质量评估算法和第二网络质量评估算法分别算出的第一网络质量评估值和第二网络质量评估值，并根据所述第一网络质量评估值和所述第二网络质量评估值得到指标权重验证云的网络质量评估值的均值、标准差以及服从的分布；
评估模块，用于根据所述指标权重验证云的网络质量评估值的均值、标准差以及服从的分布，对第一网络质量评估算法是否可用进行评估，并根据评估结果，对调整后的指标权重进行验证，其包括：
利用所述网络质量评估值的均值的偏差与预置的均值门限值，对第一网络质量评估算法是否可用进行第一评估；
若所述网络质量评估值的均值的偏差低于预置的均值门限值，则确定第一评估结果可接受，并对第一网络质量评估值的分布是否符合正态分布进行第三评估；
若第一网络质量评估值服从的分布符合正态分布，则确定第三评估结果可接受，并利用所述网络质量评估值分布的标准差与预置的标准差门限值，对第一网络质量评估算法是否可用进行第二评估；
若所述网络质量评估值分布的标准差低于预置的标准差门限值，则确定第二评估结果可接受，并向存储节点发送查询所述参与验证的验证节点的网络质量评估值的历史均值的查询请求；
根据存储节点返回网络质量评估值的历史均值，计算偏离历史均值的计算节点的比例，并根据所述偏离历史均值的计算节点的比例和预置的历史均值门限值，判断所述第一网络质量评估算法的评估结果是否为评估可接受；
若所述偏离历史均值的计算节点的比例低于预置的历史均值门限值，则判断所述第一网络质量评估算法的评估结果为评估可接受。
7.根据权利要求6所述的装置，所述第一网络质量评估值是指指标权重调整后的网络质量评估值；所述第二网络质量评估值是指指标权重调整前的网络质量评估值。
8.一种网络质量评估工具的控制节点，所述控制节点包括处理器和存储器，其中，所述存储器用于存储可执行程序代码；所述处理器执行时实现如权利要求1至5中任一项所述的网络质量评估工具的指标权重验证方法的步骤。
CN201710164314.9A 2017-03-20 2017-03-20 一种网络质量评估工具的指标权重验证方法及装置 Active CN108632104B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710164314.9A CN108632104B (zh) 2017-03-20 2017-03-20 一种网络质量评估工具的指标权重验证方法及装置
PCT/CN2017/106815 WO2018171177A1 (zh) 2017-03-20 2017-10-19 一种网络质量评估工具的指标权重验证方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710164314.9A CN108632104B (zh) 2017-03-20 2017-03-20 一种网络质量评估工具的指标权重验证方法及装置

Publications (2)

Publication Number Publication Date
CN108632104A CN108632104A (zh) 2018-10-09
CN108632104B true CN108632104B (zh) 2021-04-30

Family

ID=63584046

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710164314.9A Active CN108632104B (zh) 2017-03-20 2017-03-20 一种网络质量评估工具的指标权重验证方法及装置

Country Status (2)

Country Link
CN (1) CN108632104B (zh)
WO (1) WO2018171177A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109412892B (zh) * 2018-10-23 2022-03-01 株洲中车时代电气股份有限公司 一种网络通信质量评估系统及方法
CN109710552B (zh) * 2018-12-29 2021-01-15 深圳市联影医疗数据服务有限公司 总线传输质量评估方法、系统和计算机存储介质
CN112671793B (zh) * 2020-12-30 2022-10-14 北京八分量信息科技有限公司 区块链中确定证实节点的方法、装置及相关产品

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102056195A (zh) * 2011-01-21 2011-05-11 大唐移动通信设备有限公司 一种业务质量的确定方法和无线接入网络设备
CN102571406A (zh) * 2010-12-30 2012-07-11 中国移动通信集团河北有限公司 数据业务节点质量分析方法、装置及数据业务短板分析系统
US8560670B2 (en) * 2008-01-31 2013-10-15 Centurylink Intellectual Property Llc System and method for characterizing communication network capacity in a geographic area
CN104022899A (zh) * 2014-05-28 2014-09-03 中国科学院信息工程研究所 一种网络管理系统的三维评估方法及系统
CN104915205A (zh) * 2015-06-08 2015-09-16 北京航空航天大学 一种适用于在线数据密集型应用的请求多副本任务执行方法
CN105139095A (zh) * 2015-09-23 2015-12-09 河海大学 基于属性区间模型的配电网运行状态评估方法
CN106296019A (zh) * 2016-08-17 2017-01-04 云南电网有限责任公司电力科学研究院 区域电能质量综合评估方法及系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9405830B2 (en) * 2007-02-28 2016-08-02 Aol Inc. Personalization techniques using image clouds
US8737190B2 (en) * 2008-11-21 2014-05-27 Samsung Electronics Co., Ltd. Method and system for communication of different modulation formats from a wireless station in a wireless system
CN101951617B (zh) * 2010-08-17 2015-05-20 工业和信息化部通信计量中心 基于层次分析法的移动网络通信质量评价方法
CN102137425A (zh) * 2011-02-24 2011-07-27 华为技术有限公司 链路质量评估方法和装置
CN102904773B (zh) * 2012-09-27 2015-06-17 北京邮电大学 一种网络业务质量的测量方法和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8560670B2 (en) * 2008-01-31 2013-10-15 Centurylink Intellectual Property Llc System and method for characterizing communication network capacity in a geographic area
CN102571406A (zh) * 2010-12-30 2012-07-11 中国移动通信集团河北有限公司 数据业务节点质量分析方法、装置及数据业务短板分析系统
CN102056195A (zh) * 2011-01-21 2011-05-11 大唐移动通信设备有限公司 一种业务质量的确定方法和无线接入网络设备
CN104022899A (zh) * 2014-05-28 2014-09-03 中国科学院信息工程研究所 一种网络管理系统的三维评估方法及系统
CN104915205A (zh) * 2015-06-08 2015-09-16 北京航空航天大学 一种适用于在线数据密集型应用的请求多副本任务执行方法
CN105139095A (zh) * 2015-09-23 2015-12-09 河海大学 基于属性区间模型的配电网运行状态评估方法
CN106296019A (zh) * 2016-08-17 2017-01-04 云南电网有限责任公司电力科学研究院 区域电能质量综合评估方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"改进的加权复杂网络节点重要度评估方法";王甲生等;《计算机工程》;20121031;全文 *

Also Published As

Publication number Publication date
CN108632104A (zh) 2018-10-09
WO2018171177A1 (zh) 2018-09-27

Similar Documents

Publication Publication Date Title
CN108293005B (zh) 用于共享状态相关信息的方法和设备
CN108632104B (zh) 一种网络质量评估工具的指标权重验证方法及装置
KR101882113B1 (ko) 축전지 평가 장치, 축전 시스템 및 축전지 평가 방법
CN102077530B (zh) 检查无线业务及减缓分组删除以避免无线饱和的方法和设备
CN112073991B (zh) 一种接入网的业务处理方法及设备
CN117595462B (zh) 一种二次储能电池组的自适应充放电控制系统及其控制方法
CN107506910A (zh) 评估换电站服务能力的方法
CN117155790B (zh) 电池管理系统的数据传输方法、系统、设备及存储介质
CN112711845B (zh) 基于通信网可靠性的虚拟电厂响应资源调度方法及装置
CN112834818B (zh) 电量确定方法、装置、存储介质和电子设备
CN114880106A (zh) 一种算力匹配方法、装置和管理平台
CN109193594B (zh) 确定电力安全保护等级的方法、装置、服务器和存储介质
CN113438116B (zh) 一种电力通讯数据管理系统及方法
CN114143822B (zh) 流量管理方法、运营管理平台、充电桩及存储介质
CN110677544B (zh) Pcrf位置脚本更新方法、装置、设备及存储介质
Cai et al. A new grouping protocol for smart grids
CN102256271A (zh) 扩容指示信息的获取方法及装置
WO2015070588A1 (zh) 用于电信网管系统的性能数据采集方法及服务器
KR20130022889A (ko) 무선망 과부하 제어 장치 및 방법
CN103442406A (zh) 一种接入控制方法及装置
Ploennigs et al. Diagnosis and consulting for control network performance engineering of CSMA-based networks
KR101964050B1 (ko) 폴링 제어 장치, 방법 및 컴퓨터 프로그램
CN117575291A (zh) 基于边缘参数熵的联邦学习的数据协同管理方法
CN115941469A (zh) 多节点可配置的电缆信息在线监测系统
CN116819331A (zh) 电池失效确定方法、装置、存储介质及结构

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant