CN116390147A - 一种无线网络质量的评估方法、装置和电子设备 - Google Patents

一种无线网络质量的评估方法、装置和电子设备 Download PDF

Info

Publication number
CN116390147A
CN116390147A CN202310402984.5A CN202310402984A CN116390147A CN 116390147 A CN116390147 A CN 116390147A CN 202310402984 A CN202310402984 A CN 202310402984A CN 116390147 A CN116390147 A CN 116390147A
Authority
CN
China
Prior art keywords
test
evaluation
geographic
wireless network
index value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310402984.5A
Other languages
English (en)
Other versions
CN116390147B (zh
Inventor
黄伟华
李嘉
翁晓伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Knowyou Information Technologies (shanghai) Co ltd
Original Assignee
Knowyou Information Technologies (shanghai) Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Knowyou Information Technologies (shanghai) Co ltd filed Critical Knowyou Information Technologies (shanghai) Co ltd
Priority to CN202310402984.5A priority Critical patent/CN116390147B/zh
Publication of CN116390147A publication Critical patent/CN116390147A/zh
Application granted granted Critical
Publication of CN116390147B publication Critical patent/CN116390147B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W24/00—Supervisory, monitoring or testing arrangements
    • H04W24/08—Testing, supervising or monitoring using real traffic
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Remote Sensing (AREA)
  • Monitoring And Testing Of Transmission In General (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本申请提供了一种无线网络质量的评估方法、系统及电子设备，涉及信息技术领域，包括获取测试记录和评估信息，所述测试记录包括若干条无线网络质量的测试信息，所述无线网络质量的测试信息包括测试区域指标值和测试区域坐标；所述评估信息包括评估区域坐标；基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录，消除客观因素干扰，得到目标测试记录；将所述目标测试记录输入网络指标评估模型，消除主观因素干扰，得到评估区域的无线网络质量的指标评估结果，提高评估的准确率和效率。

Description

一种无线网络质量的评估方法、装置和电子设备
技术领域
本发明涉及信息技术领域，尤其涉及一种无线网络质量的评估方法、装置和电子设备。
背景技术
随着越来越多的用户开始使用无线网络，为了充分掌握无线网络运行整体状况，排查网络运行中存在的问题及隐患，需要对无线网络质量、网络运行数据分析、网络运行状况等进行评估，为网络进一步优化及下一步的网络建设提供参考。
目前，在评估无线网络质量时，需要从海量的众测数据中提取并计算出能够真正反映无线网络质量的指标。其中，基于地理位置的无线网络质量的平均指标值评估是一个重要环节，由于客观因素或主观因素干扰，使得其平均指标值的评估准确率和评估效率较低。
为解决上述问题，兹提出一种无线网络质量的评估方法、装置和电子设备。
发明内容
本说明书提供一种无线网络质量的评估方法、装置和电子设备，通过对测试记录进行数据清洗和数据修正，剔除消除测试设备异常、不规范的测试操作等因素造成的极端值、离群值；将所述目标测试记录输入网络指标评估模型，消除人为主观非常规测试手段所带来的影响，得到评估区域的无线网络质量的指标评估结果，提高评估的准确率和效率。
本申请提供的一种无线网络质量的评估方法采用如下的技术方案，包括：
获取测试记录和评估信息，所述测试记录包括若干条无线网络质量的测试信息，所述无线网络质量的测试信息包括测试区域指标值和测试区域坐标；所述评估信息包括评估区域坐标；
基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录；
将所述目标测试记录输入平均指标值评估模型，得到评估区域的无线网络质量的指标评估结果。
可选的，所述基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录，包括：
删除所述测试记录中符合预设过滤条件的测试信息；
将剩余的测试信息作为目标测试信息，汇总所述目标测试信息，作为目标测试记录。
可选的，所述评估区域坐标包括目标经度范围和目标纬度范围；
所述删除所述测试记录中符合预设过滤条件的测试信息，包括：
识别异常的测试区域指标值，删除所述异常的测试区域指标值对应的测试信息；
在所述测试记录中查找地理位置异常值，删除地理位置异常值对应的测试信息，其中，所述地理位置异常值包括处于所述目标经度范围之外的测试区域坐标，和/或处于所述目标纬度范围之外的测试区域坐标；
识别偏离指标值，剔除所述偏离指标值对应的测试信息。
可选的，所述评估区域坐标包括目标经度范围和目标纬度范围；
可选的，所述将所述目标测试记录输入平均指标值评估模型，得到评估区域的无线网络质量的指标评估结果，包括：
按照时间维度和地理维度对所述目标测试记录中的目标测试信息进行栅格化，划分为若干初始小栅格，根据初始小栅格中的目标测试信息的个数，确定每一初始小栅格的初始测试区域指标值；
按照预设时间跨度对初始小栅格进行集合，划分时间大栅格，根据所述时间大栅格中的初始测试区域指标值，确定每一所述时间大栅格的第一测试区域指标值；
根据所述第一测试区域指标值，得到所述无线网络质量的指标评估结果。
可选的，所述根据所述第一测试区域指标值，得到所述无线网络质量的指标评估结果，包括：
按照预设地理跨度对所述时间大栅格进行集合，划分地理大栅格，根据所述第一测试区域指标值确定每一所述地理大栅格的第二测试区域指标值；
基于所述地理大栅格中的所述第一测试区域指标值的个数，通过权重设定模型确定所述地理大栅格的指标权重；
根据每一所述地理大栅格对应的指标权重和第二测试区域指标值，得到所述无线网络质量的指标评估结果。
可选的，所述权重设定模型为减速递增模型。
可选的，所述按照预设地理跨度对所述时间大栅格进行集合，划分地理大栅格，根据所述第一测试区域指标值确定每一所述地理大栅格的第二测试区域指标值，包括：
按照所述预设地理跨度划分所述地理大栅格；
识别所述地理大栅格中的时间大栅格的第一测试区域指标值，确定每一所述地理大栅格的第二测试区域指标值，其中：
如果地理大栅格中有一个第一测试区域指标值，则将该第一测试区域指标值作为地理大栅格的第二测试区域指标值。
如果地理大栅格中有多个第一测试区域指标值，将所述多个第一测试区域指标值的算数平均值作为地理大栅格的第二测试区域指标值。
可选的，所述测试区域指标值包括测试区域的无线网络速率。
本申请提供的一种无线网络质量的评估装置采用如下的技术方案，包括：
获取模块，用于获取测试记录和评估信息，所述测试记录包括若干条无线网络质量的测试信息，所述无线网络质量的测试信息包括测试区域指标值和测试区域坐标；所述评估信息包括评估区域坐标；
预处理模块，用于基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录；
评估模块，用于将所述目标测试记录输入平均指标值评估模型，得到评估区域的无线网络质量的指标评估结果。
可选的，所述预处理模块，包括：
过滤子模块，用于删除所述测试记录中符合预设过滤条件的测试信息，将剩余的测试信息作为目标测试信息，汇总所述目标测试信息，作为目标测试记录。
可选的，所述过滤子模块，包括：
第一过滤单元，用于识别异常的测试区域指标值，删除所述异常的测试区域指标值对应的测试信息；
第二过滤单元，用于基于所述评估区域坐标和所述测试区域坐标，剔除地理位置异常的测试信息；
第三过滤单元，用于识别偏离指标值，剔除所述偏离指标值对应的测试信息。
可选的，所述评估区域坐标包括目标经度范围和目标纬度范围；
所述第二过滤单元，包括：
第一识别子单元，用于在所述测试记录中查找地理位置异常值；
第一删除子单元，用于删除地理位置异常值对应的测试信息，其中，所述地理位置异常值包括处于所述目标经度范围之外的测试区域坐标，和/或处于所述目标纬度范围之外的测试区域坐标。
可选的，所述评估模块，包括：
初始小栅格生成子模块，用于按照时间维度和地理维度对所述目标测试记录中的目标测试信息进行栅格化，划分为若干初始小栅格，根据初始小栅格中的目标测试信息的个数，确定每一初始小栅格的初始测试区域指标值；
时间大栅格生成子模块，用于按照预设时间跨度对初始小栅格进行集合，划分时间大栅格，根据所述时间大栅格中的初始测试区域指标值，确定每一所述时间大栅格的第一测试区域指标值；
评估子模块，用于根据所述第一测试区域指标值，得到所述无线网络质量的指标评估结果。
可选的，所述评估子模块，包括：
地理大栅格生成单元，用于按照预设地理跨度对所述时间大栅格进行集合，划分地理大栅格，根据所述第一测试区域指标值确定每一所述地理大栅格的第二测试区域指标值；
权重确定单元，用于基于所述地理大栅格中的所述第一测试区域指标值的个数，通过权重设定模型确定所述地理大栅格的指标权重；
评估单元，用于根据每一所述地理大栅格对应的指标权重和第二测试区域指标值，得到所述无线网络质量的指标评估结果。
可选的，所述权重设定模型为减速递增模型。
可选的，所述地理大栅格生成单元，包括：
第一划分子单元，用于按照所述预设地理跨度划分所述地理大栅格；
识别子单元，用于识别所述地理大栅格中的时间大栅格的第一测试区域指标值，确定每一所述地理大栅格的第二测试区域指标值；其中，如果所述地理大栅格中有一个第一测试区域指标值，则将该所述第一测试区域指标值作为所述地理大栅格的第二测试区域指标值；如果所述地理大栅格中有多个第一测试区域指标值，将所述多个第一测试区域指标值的算数平均值作为所述地理大栅格的第二测试区域指标值。
可选的，所述测试区域指标值包括测试区域的无线网络速率。
本说明书还提供一种电子设备，其中，该电子设备包括：
处理器；以及，
存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行上述任一项方法。
本说明书还提供一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现上述任一项方法。
本申请中，通过获取测试记录和评估信息，所述评估信息包括评估区域坐标；基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录，消除客观因素干扰，得到目标测试记录；将所述目标测试记录输入网络指标评估模型，消除主管因素干扰，得到评估区域的无线网络质量的指标评估结果，提高评估的准确率和效率。
附图说明
图1为本说明书实施例提供的一种无线网络质量的评估方法的原理示意图；
图2为本说明书实施例提供的步骤S3的原理示意图；
图3为本说明书实施例提供的一种无线网络质量的评估方法装置的结构示意图；
图4为本说明书实施例提供的一种电子设备的结构示意图；
图5为本说明书实施例提供的一种计算机可读介质的原理示意图。
具体实施方式
以下描述用于揭露本发明以使本领域技术人员能够实现本发明。以下描述中的优选实施例只作为举例，本领域技术人员可以想到其他显而易见的变型。在以下描述中界定的本发明的基本原理可以应用于其他实施方案、变形方案、改进方案、等同方案以及没有背离本发明的精神和范围的其他技术方案。
现在将参考附图更全面地描述本发明的示例性实施例。然而，示例性实施例能够以多种形式实施，且不应被理解为本发明仅限于在此阐述的实施例。相反，提供这些示例性实施例能够使得本发明更加全面和完整，更加便于将发明构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的元件、组件或部分，因而将省略对它们的重复描述。
在符合本发明的技术构思的前提下，在某个特定的实施例中描述的特征、结构、特性或其他细节不排除可以以合适的方式结合在一个或更多其他的实施例中。
在对于具体实施例的描述中，本发明描述的特征、结构、特性或其他细节是为了使本领域的技术人员对实施例进行充分理解。但是，并不排除本领域技术人员可以实践本发明的技术方案而没有特定特征、结构、特性或其他细节的一个或更多。
附图中所示的流程图仅是示例性说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解，而有的操作/步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。
附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
术语“和/或”或者“及/或”包括相关联的列出项目中的任一个或多者的所有组合。
图1为本说明书实施例提供的一种无线网络质量的评估方法的原理示意图，该方法包括：
S1获取测试记录和评估信息，所述测试记录包括若干条无线网络质量的测试信息，所述无线网络质量的测试信息包括测试区域指标值和测试区域坐标；所述评估信息包括评估区域坐标；
S2基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录；
S3将所述目标测试记录输入平均指标值评估模型，得到评估区域的无线网络质量的指标评估结果。
随着5G网络建设的大力推广，众测数据成为业内评价无线网络质量指标的一个重要来源。众测数据是指由大众用户通过手机或其他设备进行测量和收集的数据，这些数据可以提供有关网络覆盖指标、网络上下行速率指标和其它网络性能指标等方面的信息，帮助相关部门评估无线网络质量。同时众测数据可体现用户的真实感知，在无线网络的建设和运维过程中，尤其是在5G网络的建设和运维过程中，众测数据显得越来越重要。
在进行无线网络质量指标的评估时，需要从海量的众测数据中提取并计算出能够真正反映无线网络质量的各项指标。其中，基于地理位置的平均指标值统计(比如，基于地理位置的平均速率统计)是其中较为重要的环节，基于客观因素或主观因素所带来的统计误差，评估结果的准确性有待提升。
基于此，为了提高无线网络质量的指标评估效果，以及为了提高指标评估的泛用性，使其可适用于涉及到基于地理位置的连续型无线网络质量的平均指标值统计的所有场景，提出了一种无线网络质量的评估方法，具体包括：
S1获取测试记录和评估信息；
在本说明书的一个实施例中，从众测数据中获取测试记录，测试记录分条显示，即所述测试记录包括若干条无线网络质量的测试信息，其中，无线网络质量的测试信息包括测试时间、测试区域指标值和测试区域坐标；测试区域坐标包括测试区域经度lon和测试区域纬度lat；所述评估信息包括评估时间段和评估区域坐标。
由于终端异常、服务器故障、软件异常等造成的数据错误或偏差，使得获取的测试记录存在客观误差，为了使得其评估结果更加准确，需要对该客观因素造成的误差进行剔除，S2基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录；
首先S21删除测试记录中符合预设过滤条件的测试信息，消除明显不合常理的异常值、空值、极端值、非常规值等，其主要包括：
S211识别异常的测试区域指标值，删除所述异常的测试区域指标值对应的测试信息，其中，异常的测试区域指标值包括：0值、负值、非数字值、空值。
S212基于所述评估区域坐标和所述测试区域坐标，剔除地理位置异常的测试信息；具体的，所述评估区域坐标包括目标经度范围和目标纬度范围，在测试记录中查找地理位置异常值，将地理位置异常值对应的测试信息记录删除；其中，地理位置异常值包括处于目标经度范围之外的测试区域坐标，和/或处于目标纬度范围之外的测试区域坐标，即，地理位置异常值为非评估区域的地理位置。
比如，评估区域为上海市，上海的经度范围(目标经度范围)是东经120°52′-东经122°12′，上海的纬度范围(目标纬度范围)是北纬30°40′-31°53′，
因此，如果测试区域坐标的经度位于目标经度范围之外，或者测试区域坐标的纬度位于目标纬度范围之外，则认定该测试区域坐标为非评估区域的地理位置，删除该测试区域坐标对应的测试信息。
在本说明书的一个实施例中，按照实际需求，还可以对所述测试记录进行标准化、归一化、数据归约等处理，以使得测试信息的格式统一，提高后续修正和评估速度。
S213识别偏离指标值，剔除所述偏离指标值对应的测试信息；
所述偏离指标值包括极端指标值和非常规指标值。
具体的，S2131识别极端指标值，剔除所述极端指标值对应的测试信息；
通常情况下，评估区域内的整体测试区域指标值呈正态分布，根据正态分布3σ原则，将在[μ-3σ，μ+3σ]范围之外的测试区域指标值认定为极端指标值。μ为测试信息中测试区域指标值的算数平均值，σ为测试信息中测试区域指标值的标准差。
在本说明书的一个实施例中，如果需要对全国各地运营商的无线网络质量进行平均速率值评估，获取全国范围内的测试信息作为测试记录，则将全国数据的μ±3σ范围之外的数据认定为极端指标值，将其对应的测试信息删除。其中，μ为全国范围内的测试区域指标值的算数平均值，σ为全国范围内的测试区域指标值的标准差。
S2132识别非常规指标值，剔除所述非常规指标值对应的测试信息；
根据业务经验或者行业标准确定常规指标值范围，将非常规指标值剔除，在本说明书的一个实施例中，以全国各地运营商无线网络测试速率排名的场景为例，则将5G下行速率值中大于3000Mbps或小于10Mbps认定为非常规指标值范围，删除5G下行速率值中大于3000Mbps或小于10Mbps对应的测试信息。
基于上述操作，尽可能消除客观因素造成的影响，即，消除测试设备异常、不规范的测试操作等因素造成的极端值、离群值，以提高评估结果的准确度。
S22将剩余的测试信息作为目标测试信息，汇总所述目标测试信息，作为目标测试记录。
在本说明书的一个实施例中，在剔除异常的测试区域指标值对应的测试信息、剔除地理位置异常的测试信息、剔除极端指标值对应的测试信息、剔除非常规指标值对应的测试信息之后，将剩余的测试信息作为目标测试信息。
由于在固定地点的重复测试、不规范的测试操作、伪造数据记录等造成的冗余或者无效测试记录等情况，容易造成主观误差，尤其是在某些特定地理位置较优的地点或者在某个固定时间进行反复测试，极易导致评估结果出现误差，为了消除人为的非常规手段所带来的影响，得到准确率较高的评估结果，如图2所示，S3将所述目标测试记录输入平均指标值评估模型，得到评估区域的无线网络质量的指标评估结果；
S31按照时间维度和地理维度对所述目标测试记录中的目标测试信息进行栅格化，划分为若干初始小栅格，根据初始小栅格中的目标测试信息的个数，确定每一初始小栅格的初始测试区域指标值；
具体的，S311首先按照时间维度和地理维度构建若干初始小栅格；
在本说明书的一个实施例中，S311-1基于评估区域坐标，按照第一地理维度，构建地理栅格，具体的，所述第一地理维度为50m*50m的正方形。
设定地理栅格的编号为“gridx-gridy”形式拼接的地理位置字符串，其中，“gridx”为地理栅格的横坐标,“gridy”为地理栅格的纵坐标，具体的：
gridx＝INT((lon-lonmin)/预设比值)；
gridy＝INT((lat-latmin)/预设比值)；
其中，目标经度范围中最小的经度坐标为最小经度值lonmin，目标经度范围中最大的经度坐标为最大经度值lonmax；目标维度范围中最小的纬度坐标为最小纬度值latmin，目标维度范围中最大的纬度坐标为最大纬度值latmax。
lon为目标测试信息的测试区域坐标的经度，lat为目标测试信息的测试区域坐标的纬度。INT()为向下取整函数。其中，预设比值按照实际地理位置的长度距离与经纬度的近似转换进行设置。
在本说明书的一个实施例中，对全国各地运营商的无线网络质量进行平均速率值评估，由于中国最西端的经度约为73.5°，中国最南端的纬度约为3.5°，考虑到中国范围内，其长度与经纬度之间的近似转换为1米≈0.00001经度(纬度)，由于一个地理栅格的边长为50米，按照上述的近似转换，其相当于0.0005经度(纬度)，因此，将预设比值设定为0.0005，则地理栅格的横坐标与纵坐标分别为：
gridx＝INT((lon-73.5)/0.0005)；
gridy＝INT((lat-3.5)/0.0005)。
如果某一目标测试信息中的测试区域坐标为(116.4°E,39.9°N)，则其对应的地理栅格的横坐标gridx＝INT((116.4-73.5)/0.0005)＝85800；其对应的地理栅格的纵坐标gridy＝INT((39.9-3.5)/0.0005)＝72800。该地理栅格的编号为“85800-72800”。
S311-2基于评估时间段T，按照第一时间维度ut构建时间栅格线，按照时间栅格线对地理栅格进行拆分，得到初始小栅格，所述初始小栅格包括时间栅格线的编号和地理栅格的编号，每个地理栅格包括
Figure BDA0004180400320000141
个初始小栅格。
其中，评估时间段T与第一时间维度ut的时间单位相同。在本说明书的一个实施例中，评估时间段为m个小时，设定所述第一时间维度为1个小时，即，按照间隔1个小时构建时间栅格线，则每个地理栅格包括m个初始小栅格。
设定时间栅格线的编号为“yyyyMMddHH”形式的日期字符串，其中，“yyyy”代表四位数的年份，“MM”代表两位数的月份，“dd”代表两位数的日期，“HH”代表24小时制的小时数，例如，某一目标测试信息的测试时间为2022年1月9日15时，其对应的时间栅格线的编号为“2022010915”。不难理解，时间栅格线的编号为“2022010915”与“2022010916”之间对应的是：2022年1月9日15时-2022年1月9日15时59分59秒之间的目标测试信息。
根据目标测试信息中的测试时间和测试区域坐标，确定目标测试信息对应的初始小栅格，初始小栅格的编号的格式为“时间栅格线的编号-地理栅格的编号”，即“yyyyMMddHH-gridx-gridy”。
在本说明书的一个实施例中，初始小栅格的编号可以表示为“2022010915-85800-72800”。
在本说明书的一个实施例中，根据地理栅格和时间栅格构建三维栅格，其中，三维栅格的x轴为地理栅格的横坐标，三维栅格的y轴为地理栅格的纵坐标，依照预设时间维度构建三维栅格的z轴，则由此生成若干初始小栅格。
其次，对初始小栅格进行栅格归一化处理，具体的，根据初始小栅格中的目标测试信息的个数，确定每一初始小栅格的初始测试区域指标值；
对于没有目标测试信息的初始小栅格，其初始小栅格的初始测试区域指标值为空值，该初始小栅格不参与后续的评估；
如果初始小栅格中有一个目标测试信息，将该目标测试信息的测试区域指标值作为初始小栅格的初始测试区域指标值。
如果初始小栅格中有多个目标测试信息，提取每一目标测试信息中的测试区域指标值，将多条测试区域指标值的算数平均值作为初始小栅格的初始测试区域指标值。
S32按照预设时间跨度t对初始小栅格进行集合，划分时间大栅格，根据所述时间大栅格中的初始测试区域指标值，确定每一所述时间大栅格的第一测试区域指标值；
首先，按照预设时间跨度t划分时间大栅格，每一地理栅格至多包括一个时间大栅格。具体的，基于第一时间维度ut的时间单位，将预设时间跨度t换算为t′，t′与第一时间维度ut的时间单位相同；在本说明书的一个实施例中，按照评估周期确定时间大栅格的预设时间跨度t，评估周期按需设置，比如，以月份作为评估周期，则设定时间大栅格中的日期字符串为“yyyyMM”形式，则时间大栅格的编号的格式为“时间大栅格中的日期字符串-地理栅格的编号”，即“yyyyMM-gridx-gridy”，其中，时间大栅格的横坐标为gridx，纵坐标为gridy。在本说明书的一个实施例中，编号为“2022010915-85800-72800”的初始小栅格，其对应的时间大栅格的编号为“202201-85800-72800”。
其中，时间大栅格中的日期字符串依照具体情况设置，可以按日、按周、按月、按年跨度等。在本说明书的一个实施例中，如果是按周跨度，其日期字符串为“yyyyWW”形式，WW指的是两位数的周编号。时间大栅格包括若干初始小栅格。在本说明书的一实施例中，评估时间段T与预设时间跨度t相同，则每一时间大栅格即为一个地理栅格。
其次，对时间大栅格进行栅格归一化处理，识别时间大栅格中的初始小栅格的初始测试区域指标值，根据时间大栅格中的初始测试区域指标值的个数，确定每一时间大栅格的第一测试区域指标值；
如果时间大栅格中有一个初始测试区域指标值，则将该初始测试区域指标值作为时间大栅格的第一测试区域指标值。
如果时间大栅格中有多个初始测试区域指标值，将所述多个初始测试区域指标值的算数平均值作为时间大栅格的第一测试区域指标值。
本发明基于预设时间跨度，将初始小栅格中集合为时间大栅格，初始小栅格和时间大栅格在地理维度上并未发生变化。每一地理栅格包括至多一个时间大栅格，每一时间大栅格中包括0个或1个第一测试区域指标值。
本发明通过划分时间大栅格，确定每一时间大栅格的第一测试区域指标值，可以有效降低“定点高频测试”所造成的影响。其中“定点高频测试”指的是人为主观上为了提高网络质量的平均指标值，在某个时间段内选取网络质量较好的地点/位置反复进行测试，获取同一地点的大量数据的情况。
S33根据所述第一测试区域指标值，得到所述无线网络质量的指标评估结果；
具体的，S331按照预设地理跨度对所述时间大栅格进行集合，划分地理大栅格，根据所述第一测试区域指标值确定每一所述地理大栅格的第二测试区域指标值；
首先，按照预设地理跨度划分地理大栅格；
在本说明书的一个实施例中，设定地理大栅格为5000m×5000m的正方形，即，每个地理大栅格包括10000(100×100)个地理栅格。由于每一地理栅格至多包括一个时间大栅格，因此，也可以理解为，每一地理大栅格至多包括10000(100×100)个时间大栅格。
设定地理大栅格的编号为“时间大栅格中的日期字符串-biggridx-biggridy”，其中，biggridx为地理大栅格的横坐标，biggridy为地理大栅格的纵坐标，具体的：
biggridx＝INT(gridx/100)；
biggridy＝INT(gridy/100)；
其中，gridx为时间大栅格的横坐标，gridy为时间大栅格的纵坐标，INT()为向下取整函数。
在本说明书的一个实施例中，编号为“202201-85800-72800”的时间大栅格，其对应的地理大栅格的编号为“202201-858-728”。
在本说明书的一个实施例中，按照预设排列顺序，为每一地理大栅格分配序号i，具体的，先按照纬度再按照经度进行序号分配，或者先按照经度再经过纬度进行序号分配。
按照上述步骤对所述时间大栅格的数据进行栅格化，然后，识别地理大栅格中的时间大栅格的第一测试区域指标值，根据时间大栅格中的第一测试区域指标值的个数n，确定每一地理大栅格的第二测试区域指标值speedi；
如果地理大栅格中有一个第一测试区域指标值，则将该第一测试区域指标值作为地理大栅格的第二测试区域指标值。
如果地理大栅格中有多个第一测试区域指标值，将所述多个第一测试区域指标值的算数平均值作为地理大栅格的第二测试区域指标值。
通过划分地理大栅格，确定每一地理大栅格的第二测试区域指标值，可以有效降低"固定路线反复测试"所造成的影响。其中，“固定路线反复测试”指的是人为主观上为了提高网络质量指标平均值，在某个时间段内选取网络质量较好的测试路线反复进行测试，获取该时间段内的大量数据。
如前所述，初始小栅格的编号为：yyyyMMddHH-gridx-gridy：
在本说明书的实施例中，评估时间段T与预设时间跨度t相同时，每一时间大栅格即为一个地理栅格，此时，时间大栅格的编号与地理栅格的编号相同，时间大栅格(地理栅格)的编号为：yyyyMM-gridx-gridy：
地理大栅格的编号为：yyyyMM-biggridx-biggridy。
初始小栅格在时间维度上汇聚成时间大栅格；时间大栅格在空间维度上汇聚成地理大栅格(0-10000个)；
地理大栅格的编号保留了时间大栅格中的日期字符串，即保留了对应内容的时间信息，但是，只有指定评估周期时，与该时间信息对应的数据才会参与对应评估周期的指标评估，比如要进行2022年1月的全国指标统计，那么只会对“yyyyMM＝202201”的地理大栅格中的数据进行统计和评估。
S332基于所述地理大栅格中的所述第一测试区域指标值的个数ni，通过权重设定模型确定所述地理大栅格的指标权重wi；
在本说明书中，如果将指标权重设定为地理大栅格内的时间大栅格数量，则评估结果就和时间大栅格的第一测试区域指标值呈线性关系，相当于未设定地理大栅格。此时，如果某一地理大栅格的目标测试信息过多，该地理大栅格对评估结果的影响力就会过大，根本无法消除"固定路线反复测试"的影响。
如果将指标权重设定为1，则评估结果相当于取所有地理大栅格的算术平均值。此时，如果某一地理大栅格的目标测试信息过少，该地理大栅格对评估结果的影响力就会过大，通过测试少量的偏远优质区域，可以很容易地提高评估结果。
因此，所述权重设定模型优选为减速递增模型。即，将该指标权重设定为一个自变量为n的减速递增函数，在本说明书的一个实施例中，指标权重为wi＝log2(ni+1)。
S333根据每一所述地理大栅格对应的指标权重wi和第二测试区域指标值speedi，得到所述无线网络质量的指标评估结果speedx。
speedx为加权计算后的平均指标值，即评估结果。
具体的，
Figure BDA0004180400320000191
其中，speedi为第i个地理大栅格的指标值；ni为第i个地理大栅格中的第一测试区域指标值的个数，i∈N+，且i∈(0，10000]，即，有效的时间大栅格数量。
比如，如果某一地理大栅格的编号为“202201-858-728”，其包含了100个第一测试区域指标值，即该地理大栅格包含100个有效的时间大栅格，该地理大栅格的指标权重为log2(100+1)≈6.658。
本发明采用了多种栅格归一化组合的处理方式，消除了"定点高频测试"和"固定路线反复测试"所带来的影响。传统的基于地理位置的无线网络质量指标评估中，只能消除固定地点的反复测试行为的影响；而本发明中的栅格的设定维度更加丰富，且需要经过两层栅格归一化运算，同时消除"定点高频测试"和"固定路线反复测试"两种行为所带来的影响。
所述测试区域指标值包括测试区域的无线网络速率。其中，网络测试速率包括但不限于：5G下行速率、5G上行速率、4G下行速率、4G上行速率。
在本说明书的一个实施例中，在步骤S3之后，还可以基于多个评估区域的平均指标值，按照指标类型从高到低进行排名，以得到更为直观的结果。
图3本说明书实施例提供的一种无线网络质量的评估装置的结构示意图，该装置包括：
获取模块301，用于获取测试记录和评估信息，所述测试记录包括若干条无线网络质量的测试信息，所述无线网络质量的测试信息包括测试区域指标值和测试区域坐标；所述评估信息包括评估区域坐标；
预处理模块302，用于基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录；
评估模块303，用于将所述目标测试记录输入网络指标评估模型，得到评估区域的无线网络质量的指标评估结果。
可选的，所述测试记录包括若干条测试信息；
所述预处理模块302，包括：
过滤子模块，用于删除所述测试记录中符合预设过滤条件的测试信息，将剩余的测试信息作为目标测试信息，汇总所述目标测试信息，作为目标测试记录。
可选的，所述过滤子模块，包括：
第一过滤单元，用于识别异常的测试区域指标值，删除所述异常的测试区域指标值对应的测试信息；
第二过滤单元，用于基于所述评估区域坐标和所述测试区域坐标，剔除地理位置异常的测试信息；
第三过滤单元，用于识别偏离指标值，剔除所述偏离指标值对应的测试信息。
可选的，所述评估区域坐标包括目标经度范围和目标纬度范围；
所述第二过滤单元，包括：
第一识别子单元，用于在所述测试记录中查找地理位置异常值；
第一删除子单元，用于删除地理位置异常值对应的测试信息，其中，所述地理位置异常值包括处于所述目标经度范围之外的测试区域坐标，和/或处于所述目标纬度范围之外的测试区域坐标。
可选的，所述评估模块303，包括：
初始小栅格生成子模块，用于按照时间维度和地理维度对所述目标测试记录中的目标测试信息进行栅格化，划分为若干初始小栅格，根据初始小栅格中的目标测试信息的个数，确定每一初始小栅格的初始测试区域指标值；
时间大栅格生成子模块，用于按照预设时间跨度对初始小栅格进行集合，划分时间大栅格，根据所述时间大栅格中的初始测试区域指标值，确定每一所述时间大栅格的第一测试区域指标值；
评估子模块，用于根据所述第一测试区域指标值，得到所述无线网络质量的指标评估结果。
可选的，所述评估子模块，包括：
地理大栅格生成单元，用于按照预设地理跨度对所述时间大栅格进行集合，划分地理大栅格，根据所述第一测试区域指标值确定每一所述地理大栅格的第二测试区域指标值；
权重确定单元，用于基于所述地理大栅格中的所述第一测试区域指标值的个数，通过权重设定模型确定所述地理大栅格的指标权重；
评估单元，用于根据每一所述地理大栅格对应的指标权重和第二测试区域指标值，得到所述无线网络质量的指标评估结果。
可选的，所述权重设定模型为减速递增模型。
可选的，所述地理大栅格生成单元，包括：
第一划分子单元，用于按照所述预设地理跨度划分所述地理大栅格；
识别子单元，用于识别所述地理大栅格中的时间大栅格的第一测试区域指标值，确定每一所述地理大栅格的第二测试区域指标值；其中，如果所述地理大栅格中有一个第一测试区域指标值，则将该所述第一测试区域指标值作为所述地理大栅格的第二测试区域指标值；如果所述地理大栅格中有多个第一测试区域指标值，将所述多个第一测试区域指标值的算数平均值作为所述地理大栅格的第二测试区域指标值。
本发明实施例的装置的功能已经在上述的方法实施例中进行了描述，故本实施例的描述中未详尽之处，可以参见前述实施例中的相关说明，在此不做赘述。
本领域内的技术人员应明白，本发明的实施例可提供为方法、装置、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、装置(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种无线网络质量的评估方法，其特征在于，包括：
获取测试记录和评估信息，所述测试记录包括若干条无线网络质量的测试信息，所述无线网络质量的测试信息包括测试区域指标值和测试区域坐标；所述评估信息包括评估区域坐标；
基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录；
将所述目标测试记录输入平均指标值评估模型，得到评估区域的无线网络质量的指标评估结果。
2.如权利要求1所述的一种无线网络质量的评估方法，其特征在于，所述评估区域坐标包括目标经度范围和目标纬度范围；
所述基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录，包括：
识别异常的测试区域指标值，删除所述异常的测试区域指标值对应的测试信息；
在所述测试记录中查找地理位置异常值，删除地理位置异常值对应的测试信息，其中，所述地理位置异常值包括处于所述目标经度范围之外的测试区域坐标，和/或处于所述目标纬度范围之外的测试区域坐标；
识别偏离指标值，剔除所述偏离指标值对应的测试信息，所述偏离指标值包括极端的测试区域指标值和非常规的测试区域指标值；
将剩余的测试信息作为目标测试信息，汇总所述目标测试信息，作为所述目标测试记录。
3.如权利要求2所述的一种无线网络质量的评估方法，其特征在于，所述将目标测试记录输入平均指标值评估模型，得到评估区域的无线网络质量的指标评估结果，包括：
按照时间维度和地理维度对所述目标测试记录中的目标测试信息进行栅格化，划分为若干初始小栅格，根据初始小栅格中的目标测试信息的个数，确定每一初始小栅格的初始测试区域指标值；
按照预设时间跨度对初始小栅格进行集合，划分时间大栅格，根据所述时间大栅格中的初始测试区域指标值，确定每一所述时间大栅格的第一测试区域指标值；
根据所述第一测试区域指标值，得到所述无线网络质量的指标评估结果。
4.如权利要求3所述的一种无线网络质量的评估方法，其特征在于，所述根据所述第一测试区域指标值，得到所述无线网络质量的指标评估结果，包括：
按照预设地理跨度对所述时间大栅格进行集合，划分地理大栅格，根据所述第一测试区域指标值确定每一所述地理大栅格的第二测试区域指标值；
基于所述地理大栅格中的所述第一测试区域指标值的个数，通过权重设定模型确定所述地理大栅格的指标权重；
根据每一所述地理大栅格对应的指标权重和第二测试区域指标值，得到所述无线网络质量的指标评估结果。
5.如权利要求4所述的一种无线网络质量的评估方法，其特征在于，所述权重设定模型为减速递增模型。
6.如权利要求5所述的一种无线网络质量的评估方法，其特征在于，所述按照预设地理跨度对所述时间大栅格进行集合，划分地理大栅格，根据所述第一测试区域指标值确定每一所述地理大栅格的第二测试区域指标值，包括：
按照所述预设地理跨度划分所述地理大栅格；
识别所述地理大栅格中的时间大栅格的第一测试区域指标值，确定每一所述地理大栅格的第二测试区域指标值；其中，如果所述地理大栅格中有一个第一测试区域指标值，则将所述第一测试区域指标值作为所述地理大栅格的第二测试区域指标值；如果所述地理大栅格中有多个第一测试区域指标值，将所述多个第一测试区域指标值的算数平均值作为所述地理大栅格的第二测试区域指标值。
7.如权利要求1所述的一种无线网络质量的评估方法，其特征在于，所述测试区域指标值包括测试区域的无线网络速率。
8.一种无线网络质量的评估装置，其特征在于，包括：
获取模块，用于获取测试记录和评估信息，所述测试记录包括若干条无线网络质量的测试信息，所述无线网络质量的测试信息包括测试区域指标值和测试区域坐标；所述评估信息包括评估区域坐标；
预处理模块，用于基于所述评估区域坐标、所述测试区域坐标和所述测试区域指标值确定需过滤的测试信息，对所述测试记录进行数据清洗和数据修正，得到目标测试记录；
评估模块，用于将所述目标测试记录输入平均指标值评估模型，得到评估区域的无线网络质量的指标评估结果。
9.一种电子设备，其中，该电子设备包括：
处理器；以及，
存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行根据权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现权利要求1-7中任一项所述的方法。
CN202310402984.5A 2023-04-14 2023-04-14 一种无线网络质量的评估方法、装置和电子设备 Active CN116390147B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310402984.5A CN116390147B (zh) 2023-04-14 2023-04-14 一种无线网络质量的评估方法、装置和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310402984.5A CN116390147B (zh) 2023-04-14 2023-04-14 一种无线网络质量的评估方法、装置和电子设备

Publications (2)

Publication Number Publication Date
CN116390147A true CN116390147A (zh) 2023-07-04
CN116390147B CN116390147B (zh) 2024-02-06

Family

ID=86973091

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310402984.5A Active CN116390147B (zh) 2023-04-14 2023-04-14 一种无线网络质量的评估方法、装置和电子设备

Country Status (1)

Country Link
CN (1) CN116390147B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111107556A (zh) * 2019-12-06 2020-05-05 中国联合网络通信集团有限公司 一种移动通信网络的信号覆盖质量评估方法和装置
CN111491308A (zh) * 2020-04-26 2020-08-04 中国信息通信研究院 移动宽带网络信号质量分析方法、装置和系统
CN114066184A (zh) * 2021-11-02 2022-02-18 中国联合网络通信集团有限公司 一种区域覆盖的评估方法、装置和电子设备
CN114422949A (zh) * 2021-12-29 2022-04-29 中国电信股份有限公司 网络质量评估方法、装置、设备及存储介质
CN115250429A (zh) * 2021-04-28 2022-10-28 中国移动通信集团四川有限公司 一种移动网络服务质量的评估方法、装置及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111107556A (zh) * 2019-12-06 2020-05-05 中国联合网络通信集团有限公司 一种移动通信网络的信号覆盖质量评估方法和装置
CN111491308A (zh) * 2020-04-26 2020-08-04 中国信息通信研究院 移动宽带网络信号质量分析方法、装置和系统
CN115250429A (zh) * 2021-04-28 2022-10-28 中国移动通信集团四川有限公司 一种移动网络服务质量的评估方法、装置及电子设备
CN114066184A (zh) * 2021-11-02 2022-02-18 中国联合网络通信集团有限公司 一种区域覆盖的评估方法、装置和电子设备
CN114422949A (zh) * 2021-12-29 2022-04-29 中国电信股份有限公司 网络质量评估方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN116390147B (zh) 2024-02-06

Similar Documents

Publication Publication Date Title
WO2021217865A1 (zh) 告警根因的定位方法、装置、计算机设备和存储介质
CN105556554A (zh) 多个设备相关性
US8429266B2 (en) System for measuring audience of media on at least one internet communication network
CN106940718B (zh) 一种获取候鸟迁徙路径描述的方法、装置及服务器
CN116011317B (zh) 一种基于多方法融合的小尺度近实时大气污染溯源方法
CN114742460B (zh) 一种确定待管控企业的方法、装置、电子设备及存储介质
CN104113872A (zh) 一种数据业务监控方法及系统
CN108681487B (zh) 传感器算法参数调优的分布式系统和调优方法
CN108345662B (zh) 一种考虑用户分布区域差异的签到微博数据加权统计方法
CN115271373A (zh) 城市群弹性开发边界划定方法及系统
WO2022021420A1 (zh) 一种根因定位方法及装置、电子设备
CN111294841A (zh) 一种无线网络问题的处理方法、装置及存储介质
CN114511233A (zh) 水质异常成因分析方法、装置及计算机设备
CN110069692B (zh) 一种面向开源信息采集的资源更新时间预测方法及系统
CN109088793B (zh) 用于检测网络故障的方法和装置
CN112686773B (zh) 一种基于融合业务拓扑的电力计量全链路关键业务异常定位模型构建方法
CN110716998A (zh) 一种精细尺度人口数据空间化方法
CN116390147B (zh) 一种无线网络质量的评估方法、装置和电子设备
KOk Cluster sampling for immunization coverage
CN107291767B (zh) 任务执行时间的优化处理方法和装置
CN111382908B (zh) 一种考虑大震时间相关性的地震随机事件集模拟方法
CN110705132B (zh) 一种基于多源异质数据的制导控制系统性能融合评估方法
CN115759885B (zh) 一种基于分布式物资供应下的物资抽检方法和装置
CN116684452A (zh) 一种基于aigc大模型的知识中台构建方法及系统
Nakamori et al. Interactive design of urban level air quality monitoring network

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant