CN101895426A

CN101895426A - 一种网络资源评估中的数据采集方法及系统

Info

Publication number: CN101895426A
Application number: CN2010102335514A
Authority: CN
Inventors: 付毅; 王雪怀; 张磊
Original assignee: ZTE Corp
Current assignee: ZTE Corp
Priority date: 2010-07-20
Filing date: 2010-07-20
Publication date: 2010-11-24
Anticipated expiration: 2030-07-20
Also published as: EP2518939A1; BR112012021223A2; EP2518939A4; BR112012021223B1; RU2012146822A; WO2012009901A1; EP2518939B1; MX2012009526A; CN101895426B; RU2532714C2

Abstract

本发明公开了一种网络资源评估中的数据采集方法，包括：网络资源评估系统查询数据时，读取已配置的规则文件，依据规则文件中已设置的待查询数据的查询规则设置查询命令，并将查询命令下发到网管；网管根据收到的查询命令通过自身与查询命令对应接口查询数据，并将查询结果返回给网络资源评估系统。本发明还同时公开了一种网络资源评估中的数据采集系统，运用该方法和系统能高效获取网络资源评估中所需的数据，且能在获取数据的同时减小对网络的运行及管理造成的影响，还能降低网络资源评估系统的开发难度。

Description

一种网络资源评估中的数据采集方法及系统

技术领域

本发明涉及通信领域中的网络资源评估技术，尤其涉及一种网络资源评估中的数据采集方法及系统。

背景技术

随着通信技术的快速发展，通信网络的规模和容量越来越大，网络资源的种类也越来越多，对网络的维护难度也随之增加。现有的网络资源评估方法大多为：利用网管获取数据，然后通过人工等方式对获取的数据进行评估检查和统计分析。这种网络资源评估方法工作量大，统计时容易出错且效率较低。因此，构建自动化、智能化的网络资源评估系统对现有网络资源状况进行检查是一项非常迫切的工作。

目前，网络资源评估的内容主要集中在网络资源动态运行状态数据、静态的数据分析、以及对网络隐患的分析等，检查范围包括：当前的网络健康情况以及某一历史周期内的网络资源状况等。

通常，对现有网络资源状况进行评估检查时，需要保证两个目标：(1)网络资源评估系统应能对网络资源状况进行及时、全面而准确的评估和分析；(2)网络资源评估系统应具有较高的工作效率，并尽可能减小对网络资源造成影响。要保障这两个目标的实现，设计合理的数据采集方式是完成这项工作的关键。

现有的网络资源评估系统所采用的数据采集方式主要有如下两种：

1)网络资源评估系统直接接入网元设备，通过网元设备侧的接口获取网元设备的运行数据；

2)评估检查功能集成于网管中，通过网管下发命令至网元设备来获取网元设备的运行数据。

上述第一种方式中，由于网络资源评估系统直接与网元设备进行交互，容易对网元设备的运行造成影响，从而影响现有网络的运行及管理；此外，由于网元设备之间存在差异性，网络资源评估系统需要对不同网元设备不同版本的接口分别进行配置，增大了开发的工作量和难度。

所述第二种方式中，虽然网络资源评估系统的开发难度相对第一种方式有所降低，但对网络资源评估的范围限于单个网管管理的范围，获取的资源信息不够全面；另外，网络资源评估系统可移植性较差，局限于某种类型的网管，对于不同类型的网管只能重新配置不同的网络资源评估系统。

发明内容

有鉴于此，本发明的主要目的在于提供一种网络资源评估中的数据采集方法及系统，能高效、全面获取网络资源评估中所需的数据，且能在获取数据的同时减小对网络的运行及管理造成的影响，还能降低网络资源评估系统的开发难度。

为达到上述目的，本发明的技术方案是这样实现的：

本发明提供了一种网络资源评估中的数据采集方法，该方法包括：

网络资源评估系统查询数据时，读取已配置的规则文件，依据所述规则文件中已设置的待查询数据的查询规则，设置查询命令，并将所述查询命令下发到网管；

所述网管根据收到的所述查询命令，通过自身与所述查询命令对应接口查询数据，并将查询结果返回给所述网络资源评估系统。

其中，所述网络资源评估系统查询数据时，读取已配置的规则文件的过程为：

查询数据时，网络资源评估系统中的评估检查单元将待查询数据的数据类型和数据所属网管的信息通知网络资源评估系统中的数据采集单元；

所述数据采集单元收到通知后，读取数据所属网管对应的网络资源评估系统中设置的网管适配器中配置的规则文件。

其中，所述查询规则包括：

数据是否需从网元设备查询、数据是否必须从网元设备查询、数据可否使用上载比较接口查询和数据在网管数据库和网元设备中存储的内容是否一致。

其中，所述依据查询规则设置查询命令为：

判断待查询数据是否需从网元设备查询，如果是，则继续判断待查询数据是否必须从所述网元设备查询；如果否，则设置从网管数据库查询数据的查询命令；

在判断待查询数据是否必须从网元设备查询时，如果是，则继续判断待查询数据可否使用上载比较接口查询；如果否，则通知网管判断待查询数据在网管数据库和网元设备中存储的内容是否一致，如果一致，则设置从网管数据库查询数据的查询命令；如果不一致，则继续判断待查询数据可否使用上载比较接口查询；

在所述判断待查询数据可否使用上载比较接口查询时，如果可以，则设置通过上载比较接口查询数据的查询命令；如果不可以，则设置通过查询设备命令接口从网元设备查询数据的查询命令；

其中，所述网管自身与查询命令对应的接口包括：上载比较接口、查询设备命令接口和网管数据库查库接口；

相应的，所述网管根据查询命令查询数据为：

如果查询命令为通过上载比较接口查询数据，则通知上载比较接口执行数据查询操作；

如果查询命令为通过查询设备命令接口从网元设备查询数据，则通知查询设备命令接口执行数据查询操作；

如果查询命令为从网管数据库查询数据，则通知网管数据库查库接口执行数据查询操作。

该方法进一步包括：

网络资源评估系统对收到的查询数据进行分析，并存储分析结果；还根据分析结果生成评估报表。

本发明还提供了一种网络资源评估中的数据采集系统，该系统包括：网络资源评估系统和网管；其中，

所述网络资源评估系统，用于查询数据时，读取已配置的规则文件，依据所述规则文件中已设置的待查询数据的查询规则，设置查询命令，并将所述查询命令下发到网管，并接收网管返回的查询结果；

所述网管，用于根据网络资源评估系统下发的查询命令通过自身与所述查询命令对应接口查询数据，并将查询结果返回给所述网络资源评估系统。

其中，所述网络资源评估系统进一步包括：评估检查单元、数据采集单元和与各网管对应的网管适配器；其中，

所述评估检查单元，用于查询数据时，将待查询数据的数据类型和数据所属网管的信息通知数据采集单元，并接收数据采集单元上传的网管返回的查询结果；

所述数据采集单元，用于收到评估检查单元所发的通知后，读取数据所属网管对应的网管适配器中配置的规则文件，依据规则文件中已设置的待查询数据的查询规则设置查询命令，并将查询命令下发到网管；将网管适配器转发的网管返回的查询结果上传给评估检查单元；

所述网管适配器，用于存储已配置的规则文件，并执行数据采集单元与网管间的通信；

相应的，所述网管，进一步用于根据数据采集单元下发的查询命令通过自身与查询命令对应接口查询数据，并将查询结果经网管适配器和数据采集单元返回给评估检查单元。

其中，所述评估检查单元，还用于收到数据采集单元上传的查询结果后，分析查询结果；

所述网络资源评估系统还包括评估数据库和评估结果生成单元；其中，

所述评估数据库，用于存储评估检查单元对查询结果的分析结果；

所述评估结果生成单元，用于根据评估数据库中存储的分析结果生成评估报表。

其中，所述网管自身与查询命令对应的接口包括：上载比较接口、查询设备命令接口和网管数据库查库接口。

本发明提供的网络资源评估中的数据采集方法及系统，网络资源评估系统查询数据时，读取已配置的规则文件，依据规则文件中已设置的待查询数据的查询规则设置查询命令，并将查询命令下发到网管；网管根据收到的查询命令通过自身与查询命令对应接口查询数据，并将查询结果返回给网络资源评估系统。本发明中，为了提高数据采集效率，设置了相应的数据查询规则于规则文件中，查询数据时，依据查询规则设置对应的查询命令，并通知网管通过相应的接口执行数据查询操作，因此，可提高网络资源评估系统采集数据的效率。

此外，本发明的网络资源评估系统是独立于网管设置的，对于不同的网管，只需配置对应的网管适配器即可，网络资源评估系统的开发难度低，适用性强，可获取不同类型网管所管理的网元设备的数据；同时，本发明的网络资源评估系统通过网管实现网元设备数据的采集，也就是说，网络资源评估系统不直接与网元设备相连，不会对现有网络的运行及管理造成影响，也不需为网元设备配置与网络资源评估系统进行通信的接口，与现有技术相比，开发的工作量小、实现方法简单。

附图说明

图1为本发明网络资源评估中的数据采集方法实现流程示意图；

图2为本发明依据规则文件中已设置的查询规则设置查询命令的方法实现流程示意图；

图3为本发明多网管环境下网络资源评估系统的部署结构示意图；

图4为本发明网络资源评估中的数据采集系统的结构示意图。

具体实施方式

本发明的基本思想是：网络资源评估系统查询数据时，读取已配置的规则文件，依据规则文件中已设置的待查询数据的查询规则设置查询命令，并将查询命令下发到网管；网管根据收到的查询命令通过自身与查询命令对应接口查询数据，并将查询结果返回给网络资源评估系统。

进一步地，网络资源评估系统可对收到的数据进行分析，并存储分析结果；还可根据分析结果生成评估报表。

本发明在网络资源评估系统内配置数据采集时所需的评估检查单元和数据采集单元，并配置与各网管对应的网管适配器，网络资源评估系统通过各网管适配器与对应的网管进行通信。

下面结合附图及具体实施例对本发明作进一步详细说明。

图1为本发明网络资源评估中的数据采集方法实现流程示意图，如图1所示，该方法的实现流程如下：

步骤101：网络资源评估系统查询数据时，读取已配置的规则文件；

具体为：要查询数据时，网络资源评估系统中的评估检查单元可将待查询数据的数据类型和数据所属网管等信息通知数据采集单元，例如：将待查询的定时源配置数量、时钟配置自振等级、单板寄存器值和单板信息等类型数据，以及数据所属网管等信息通知数据采集单元，数据采集单元收到通知后，读取相应网管适配器中已配置的规则文件，所述网管适配器与数据所属的网管对应。

其中，所述规则文件在配置网管适配器时已设置，包括已设置的各类型数据的查询规则，并存储于网管适配器中，所述查询规则见本步骤后续相关描述。

本发明中，为了实现高效的数据采集方法，设置有如下数据采集原则：

第一，鉴于从网管数据库查询数据的效率高于从网元设备查询数据的效率，应尽量避免从网元设备查询数据，即：对于网管数据库和网元设备均保存的数据，应利用网管中的同步模块接口功能判断两者保存的数据是否一致，只有当两者保存的数据不一致时，才从网元设备查询数据；否则，从网管数据库查询数据。

第二，对于必须从网元设备查询的数据，一次批量从同一个网元设备查询数据的效率高于分多次从同一个网元设备查询数据的效率。现有大部分网管均提供了上载比较接口，因此，可通过上载包的方式从网元设备查询批量数据。

基于上述数据采集原则，本发明所述规则文件可为各类型数据设置查询规则，用于数据采集单元下发查询命令的依据，具体包括：

(1)该类型数据是否需从网元设备查询；

(2)该类型数据是否必须从网元设备查询；其中，所述必须从网元设备查询的数据只在网元设备侧有存储、或对数据的实时性要求较高；

(3)该类型数据可否使用上载比较接口查询；这里，对于可以进行离线配置的网管，均可使用上载比较接口查询数据；

(4)该类型数据在网管数据库和网元设备中存储的内容是否一致。

步骤102：网络资源评估系统依据规则文件中已设置的待查询数据的查询规则设置查询命令，并将查询命令下发到网管；

具体为：网络资源评估系统中的数据采集单元依据所读取的规则文件中已设置的，与待查询数据对应的查询规则设置查询命令，并通过与网管对应的网管适配器将查询命令下发到网管。

这里，数据采集单元针对步骤101中所述的查询规则最终将会设置三种查询命令，分别为：从网管数据库查询、通过上载比较接口查询和通过查询设备命令接口从网元设备查询。

下面对该步骤所述的依据规则文件中已设置的待查询数据的查询规则设置查询命令的过程进行详细描述，如图2所示，该流程具体如下：

步骤101A：判断待查询数据是否需从网元设备查询，如果是，则执行步骤101B；如果否，则执行步骤101E3；

这里，所述判断的依据为：规则文件中已设置的与待查询数据对应的查询规则。

步骤101B：判断待查询数据是否必须从网元设备查询，如果是，则执行步骤101C；如果否，则执行步骤101D；

步骤101C：判断待查询数据可否使用上载比较接口查询，如果可以，则执行步骤101E1；如果不可以，则执行步骤101E2；

步骤101D：通知网管判断待查询数据在网管数据库和网元设备中存储的内容是否一致，如果一致，则执行步骤101E3；如果不一致，则执行步骤101C；

本步骤具体为：数据采集单元经网管适配器通知网管中已有的同步模块接口判断待查询数据在网管数据库和网元设备中存储的内容是否一致，并将判断结果经网管适配器返回给数据采集单元，数据采集单元确定判断结果为一致时，执行步骤101E3；确定判断结果不一致时，执行步骤101C。

其中，所述同步模块接口为现有网管中的已有接口，其执行的判断操作为已有技术，不再详述。

步骤101E1：设置通过上载比较接口查询数据的查询命令，结束当前处理流程；

步骤101E2：设置通过查询设备命令接口从网元设备查询数据的查询命令，结束当前处理流程；

步骤101E3：设置从网管数据库查询数据的查询命令。

步骤103：网管根据收到的查询命令通过自身与查询命令对应接口查询数据，并将查询结果返回给网络资源评估系统；

具体为：数据采集单元下发的查询命令由网管中已有的命令分发接口接收，命令分发接口根据查询命令的不同类型通知对应的接口执行数据查询操作，例如：如果查询命令为通过上载比较接口查询数据，则通知上载比较接口执行数据查询操作；如果查询命令为通过查询设备命令接口从网元设备查询数据，则通知查询设备命令接口执行数据查询操作；如果查询命令为从网管数据库查询数据，则通知网管数据库查库接口执行数据查询操作。

各接口执行查询操作后，将查询结果通过命令分发接口和网络资源评估系统中与网管对应的网管适配器上传到数据采集单元，经数据采集单元最后转发给评估检查单元。

其中，所述网管中各接口为现有网管中的已有组成部分，各接口执行的数据查询操作为现有技术，此处不再详述。

进一步地，网络资源评估系统可对收到的查询数据进行分析，并存储分析结果；还可根据分析结果生成评估报表；

具体的，可在网络资源评估系统中设置评估数据库和评估结果生成单元，评估检查单元收到网管上传的查询结果后，可对查询结果进行分析，并将分析结果存入评估数据库；评估结果生成单元还可根据评估数据库中的分析结果生成评估报表。

图2为本发明多网管环境下网络资源评估系统的部署结构示意图，如图2所示，所述网络资源评估系统独立于任一网管，且不与任一网元设备直接交互。

图3为本发明网络资源评估中的数据采集系统的结构示意图，如图3所示，该系统包括：网络资源评估系统和网管，在实际应用时，数据采集系统中有多个网管，每个网管的组成结构是相同的，图3中只给出一个网管的结构示意图。

所述网络资源评估系统，用于查询数据时，读取已配置的规则文件，依据规则文件中已设置的待查询数据的查询规则设置查询命令，并将查询命令下发到网管，并接收网管返回的查询结果；

所述网管，用于根据网络资源评估系统下发的查询命令通过自身与查询命令对应接口查询数据，并将查询结果返回给网络资源评估系统。

所述网络资源评估系统进一步包括：评估检查单元、数据采集单元和与各网管对应的网管适配器；其中，

所述评估检查单元，还用于收到数据采集单元上传的查询结果后，分析查询结果。

所述网络资源评估系统还包括评估数据库，用于存储评估检查单元对查询结果的分析结果。

所述网络资源评估系统还包括评估结果生成单元，用于根据评估数据库中存储的分析结果生成评估报表。

本发明中，所述网管中包括三种用于查新数据的接口，分别为：上载比较接口、查询设备命令接口和网管数据库查库接口，该三个接口均为现有网管中已有的接口，用于依据网络资源评估系统下发的查询命令执行相应的数据查询操作，具体的：网管中已有的命令分发接口接收网络资源评估系统下发的查询命令，命令分发接口根据查询命令的不同类型通知上述三个接口执行数据查询操作。

所述网管还包括同步模块接口，用于判断待查询数据在网管数据库和网元设备中存储的内容是否一致，为现有技术。

以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims

1.一种网络资源评估中的数据采集方法，其特征在于，该方法包括：

2.根据权利要求1所述的网络资源评估中的数据采集方法，其特征在于，所述网络资源评估系统查询数据时，读取已配置的规则文件的过程为：

3.根据权利要求1或2所述的网络资源评估中的数据采集方法，其特征在于，所述查询规则包括：

4.根据权利要求3所述的网络资源评估中的数据采集方法，其特征在于，所述依据查询规则设置查询命令为：

在所述判断待查询数据可否使用上载比较接口查询时，如果可以，则设置通过上载比较接口查询数据的查询命令；如果不可以，则设置通过查询设备命令接口从网元设备查询数据的查询命令。

5.根据权利要求4所述的网络资源评估中的数据采集方法，其特征在于，所述网管自身与查询命令对应的接口包括：上载比较接口、查询设备命令接口和网管数据库查库接口；

相应的，所述网管根据查询命令查询数据为：

6.根据权利要求1或2所述的网络资源评估中的数据采集方法，其特征在于，该方法进一步包括：

7.一种网络资源评估中的数据采集系统，其特征在于，该系统包括：网络资源评估系统和网管；其中，

8.根据权利要求7所述的网络资源评估中的数据采集系统，其特征在于，所述网络资源评估系统进一步包括：评估检查单元、数据采集单元和与各网管对应的网管适配器；其中，

9.根据权利要求7或8所述的网络资源评估中的数据采集系统，其特征在于，所述评估检查单元，还用于收到数据采集单元上传的查询结果后，分析查询结果；

10.根据权利要求7或8所述的网络资源评估中的数据采集系统，其特征在于，所述网管自身与查询命令对应的接口包括：上载比较接口、查询设备命令接口和网管数据库查库接口。