WO2012159404A1

WO2012159404A1 - 提高网管自动发现业务效率的方法及装置

Info

Publication number: WO2012159404A1
Application number: PCT/CN2011/080586
Authority: WO
Inventors: 夏振宇; 刘晓艳
Original assignee: 中兴通讯股份有限公司
Priority date: 2011-05-23
Filing date: 2011-10-09
Publication date: 2012-11-29
Also published as: CN102799582B; CN102799582A

Abstract

提供了一种提高网管自动发现业务效率的方法，包括以下步骤：分析自动发现业务中与入库操作INSERTINTO语句和更新操作UPDATE语句有关的数据表，列出各数据表之间存在的依赖关系；为INSERTINTO语句涉及到的数据表设置第一BCP入库类和第一入库接口；将使用UPDATE语句更新的字段从与其它数据表存在依赖关系的源表中分离出来，形成一个新表，并为新表设置第二BCP入库类和第二入库接口；将设置好入库类集成到自动发现业务代码，调用入库接口，以代替INSERTINTO语句和UPDATE语句对数据库的操作。还提供了一种提高网管自动发现业务效率的装置。所提供的方法或装置，可提升网管自动发现业务的效率。

Description

提高网管自动发现业务效率的方法及装置技术领域

本发明涉及通信技术领域，尤其涉及一种提高网管自动发现业务效率的方法及装置。背景技术

随着通信技术的迅猛发展，光网络中管理的业务数量越来越多，数据量日趋庞大，对网管的要求也不断提升。在对业务的自动发现方面，不仅要求网管具有对各种不同速率业务的发现能力，还要求具有业务的增量发现能力，甚至提出了对错误配置的业务应该具有容错能力。这样一来，直接导致网管的业务数据量增大。数据量一增大，效率自然成了一个重要的问题。因此，怎样提升网管自动发现业务的效率成了目前亟待解决的问题。发明内容

本发明的主要目的在于提供一种提高网管自动发现业务效率的方法及装置，旨在提高网管自动发现业务的效率。

为了实现发明目的，本发明提供一种提高网管自动发现业务效率的方法，包括以下步驟：

分析自动发现业务中与入库操作 INSERT INTO 语句和更新操作 UPDATE语句有关的数据表，列出各数据表之间存在的依赖关系；

为 INSERT INTO语句涉及到的数据表设置第一批量通信程序 BCP入库类和第一入库接口；

将使用 UPDATE语句更新的字段从与其它数据表存在依赖关系的源表中分离出来，形成一个新表，并为所述新表设置第二批量通信程序 BCP入库类和第二入库接口；

将设置好的第一 BCP入库类和第二 BCP入库类集成到自动发现业务代码，调用第一入库接口和第二入库接口，以替代 INSERT INTO 语句和 UPDATE语句对数据库的操作。

优选地，所述将使用 UPDATE语句更新的字段从与其它数据表存在依赖关系的源表中分离出来，形成一个新表，并为所述新表设置第二 BCP入库类和第二入库接口包括：

分析 UPDATE语句，把需要更新的字段从源表中删除，选择一个主键作为新表的外键使用；

将移出的字段连同选择的外键形成一个新表，设置好新表的属性。优选地，所述为 INSERT INTO语句涉及到的数据表设置第一 BCP入库类和第一入库接口包括：

调用低层应用程序编程接口 API对 INSERT INTO语句中使用的字段进行封装，并设置好入库接口函数。

优选地，所述分析自动发现业务中与入库操作 INSERT INTO语句和更新操作 UPDATE语句有关的数据表包括：

判断 INSERT INTO语句和更新操作 UPDATE语句是否造成效率瓶颈 , 若否，则结束流程。

优选地，上述与入库操作 INSERT INTO语句有关的数据表包括路径信息表；与 UPDATE语句有关的数据表包括时隙交叉表。

本发明还提供一种提高网管自动发现业务效率的装置，包括：分析单元，用于分析自动发现业务中与入库操作 INSERT INTO语句和更新操作 UPDATE语句有关的数据表，列出各数据表之间存在的依赖关系；第一设置单元，用于为 INSERT INTO语句涉及到的数据表设置第一 BCP入库类和第一入库接口；第二设置单元，用于将使用 UPDATE语句更新的字段从与其它数据表存在依赖关系的源表中分离出来，形成一个新表，并为所述新表设置第二 BCP入库类和第二入库接口；

执行单元，用于将设置好的第一 BCP入库类和第二 BCP入库类集成到自动发现业务代码，调用第一入库接口和第二入库接口，以替代 INSERT INTO语句和 UPDATE语句对数据库的操作。

优选地，所述第二设置单元包括：

UPDATE语句分析模块，用于分析 UPDATE语句，把需要更新的字段从源表中删除，选择一个主键作为新表的外键使用；

新表成形模块，用于将移出的字段连同选择的外键形成一个新表，设置好新表的属性。

优选地，所述第一设置单元具体用于：

优选地，所述分析单元包括：

判断模块，判断 INSERT INTO语句和更新操作 UPDATE语句是否造成效率瓶颈，若否，则结束流程。

本发明所提供的提高网管自动发现业务效率的方法或装置，对 INSERT INTO语句进行替换，利用 BCP入库方式来代替 INSERT INTO, 解决了 INSERT INTO 带来的效率上的损失；对于 UPDATE语句首先分析表格关系，分离出那些需要更新的字段形成新表，利用外键来关联新表与与其它数据表存在依赖关系的源表之间的关系，然后采用 BCP入库的方式将更新数据转换为插入数据，解决了 UPDATE语句带来的效率瓶颈问题，大大提升了网管自动发现业务的效率；并且，本发明消除了数据表的冗余数据和传递依赖，使得表格之间满足第三范式的要求，也使得表格之间的关系更为明确。附图说明

图 1 为本发明一实施方式中提高网管自动发现业务效率的方法的流程图；

图 2为本发明中路径信息表、时隙交叉表以及新表的结构示意图；图 3 为本发明一实施装置方式中提高网管自动发现业务效率的装置的结构示意图；

图 4为本发明一实施例中提高网管自动发现业务效率的装置的工作流程图。具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

图 1 示出了本发明的一个实施方式中提高网管自动发现业务效率的方法流程。该流程包括以下步驟：

步驟 S10, 分析自动发现业务中与入库操作 INSERT INTO语句和更新操作 UPDATE语句有关的数据表，列出各数据表之间存在的依赖关系；例如，参照图 2, 用来存储路径信息的路径信息表 SubnetworkConnection需要大量的使用 INSERT INTO语句来插入路径信息；存储交叉信息的时隙交叉表 CrossConnection 的所属路径字段 Trai_Value 依赖于路径信息表的 Name_value 字段，而时隙交叉表 CrossConnection 的这个字段需要采用 UPDATE语句进行更新。大数据量时，这个与路径信息表存在依赖关系的 UPDATE语句执行时，就会带来效率问题。

步驟 S20,为 INSERT INTO语句涉及到的数据表设置第一 BCP入库类和第一入库接口；使用 INSERT INTO语句往数据库里面插入数据的时候存在两个效率瓶颈，第一就是对语句的解析所作的开销，数据库需要理解这条 SQL ( Structured Query Language, 结构化查询语言）语句的目的和分析其中所携带的数据和约束；第二就是不能进行批量操作。如果一条条的往数据库里面插入数据，而且每次都要解析语句、分析数据和约束，这个速度可想而知，开销自然很大，效率问题突出。本发明采用 BCP ( Batch Communications Program,批量通信程序 )入库方式，利用内存的緩存机制，把需要入库的数据首先放到数据库里面緩存起来，然后再将数据成批的写入数据库，这样就大大提高了入库效率。现代关系型数据库产品大都提供了氐层 API ( Application Programming Interface, 应用程序编程接口 )供操作数据库，可以封装这些底层操作，实现 BCP入库方式。跟具体的数据库产品结合起来，为路径信息表 SubnetworkConnection抽象出专门的类，例如 CBcpSnc, 调用数据库产品低层 API提供的内存緩存批量入库的函数，对 INSERT INTO语句中使用的字段进行封装，设计好入库接口。 BCP入库方式会在内存分配一块数据緩沖空间，每提交一条记录，緩沖区就增加一条相应的数据，直到緩沖区满了才一次性批量的把内存数据写入磁盘，以提高入库速度，而且也无解析 SQL语句带来的负荷。

例如语句：

"INSERT INTO SubnetworkConnection( id, value ) Values ( ... ) " 可以为类 CBcpSnc设置入库各字段的函数接口 Set_Id()、 Set_Value()来对内存緩沖区进行操作。这些接口可根据具体的表格和具体的字段来设置。

对于其他的表格只要涉及到 INSERT INTO语句，都可以为表格设计专门的 BCP入库类，用来提高入库的速度。这样就可以大大提高自动发现业务的效率。

步驟 S30, 将使用 UPDATE语句更新的字段从与其它数据表存在依赖关系的源表中分离出来，形成一个新表，并为所述新表设置第二 BCP入库类和第二入库接口；例如自动发现业务发现完成一条业务后都需要更新时隙交叉表 CrossConnection表，用来表示交叉所属的路径。 SQL语句如下： UPDATE CrossConnection

SET Trail_if=l, Trail_Name=，SNC，， Trail_Value='SNC{ 12-2412-231-1 }' WHERE CrossId=1233

这条更新语句对三个字段进行更新操作，那么，可以将这三个字段从时隙交叉表 CrossConnection 中移出，形成一个新表 CroConnTrailRela, 新表与源表之间用主键 Crossld联系起来， Crossld作为新表 CroConnTrailRela 的外键使用。第二入库接口的设置可参照第一入库接口的设置方法，例如，对于新表 CroConnTrailRela 可以设置为 Set_Id()、 SetCrossId()、 Set_TrailName()、 Set_TrailValue()作为入库接口。本发明将从时隙交叉表中分离出来的字段形成新表 CroConnTrailRela, 采用外键 Crossld来关联时隙交叉，这样就把对 TraiLvalue的更新转换为对新表 CroConnTrailRela的插入操作，速度大大提高。同时也使得表格之间的关系明确，消除了数据表的冗余数据和传递依赖。

步驟 S40,将设置好的第一 BCP入库类和第二 BCP入库类集成到自动发现业务代码，调用第一入库接口和第二入库接口，以替代 INSERT INTO 语句和 UPDATE语句对数据库的操作。

本发明利用 BCP入库方式替代 INSERT INTO语句，大大提高了入库效率 ,解决了 INSERT INTO语句带来的瓶颈效应；而针对 UPDATE语句带来的效率问题，将 UPDATE语句转换为 BCP入库方式更新数据，从一个非常耗时的操作转换为一个高速的数据库操作，大大提高了网管自动发现业务的效率。本发明还提供了一种提高网管自动发现业务效率的装置，用以实现上述方法。参照图 3, 该装置包括：分析单元 10,用于分析自动发现业务中与入库操作 INSERT INTO语句和更新操作 UPDATE语句有关的数据表，列出各数据表之间存在的依赖关系；例如，参照图 2,用来存储路径信息的路径信息表 SubnetworkConnection 需要大量的使用 INSERT INTO语句来插入路径信息；存储交叉信息的时隙交叉表 CrossConnection 的所属路径字段 Trai_Value 依赖于路径表的 Name_value 字段，而时隙交叉表 CrossConnection 的这个字段需要采用 UPDATE 语句进行更新。分析单元 10 用于分析路径信息表 SubnetworkConnection和时隙交叉表 CrossConnection之间存在的依赖关系。

第一设置单元 20,用于为 INSERT INTO语句涉及到的数据表设置第一 BCP入库类和第一入库接口；第二设置单元 20可调用低层 API对 INSERT INTO语句中使用的字段进行封装，并设计好入库接口。具体可参照前述方法中步驟 S20的设置方法。

第二设置单元 30, 用于将使用 UPDATE语句更新的字段从与其它数据表存在依赖关系的源表中分离出来，形成一个新表，并为所述新表设置第二 BCP入库类和第二入库接口；在一实施例中，第二设置单元 30包括：

UPDATE语句分析模块 31 , 用于分析 UPDATE语句， 4巴需要更新的字段从源表中删除，选择一个主键作为新表的外键使用；

新表成形模块 32, 用于将移出的字段连同选择的外键形成一个新表，设置好新表的属性。 UPDATE语句分析模块 31和新表成形模块 32的具体用途可参照下述实施例：例如自动发现业务发现完成一条业务后都需要更新时隙交叉表 CrossConnection , 用来表示交叉所属的路径。 SQL语句如下：

UPDATE CrossConnection

这条更新语句对三个字段进行更新操作，那么，可以将这三个字段从时隙交叉表 CrossConnection 中移出，形成一个新表 CroConnTrailRda, 新表与源表之间用主键 Crossld联系起来， Crossld作为新表 CroConnTrailRela 的外键使用。第二入库接口的设置可参照第一入库接口的设置方法，例如，对于新表 CroConnTrailRela 可以设置为 Set_Id()、 SetCrossId()、 Set_TrailName()、 Set_TrailValue()作为入库接口。

执行单元 40, 用于将设置好的第一 BCP入库类和第二 BCP入库类集成到自动发现业务代码，调用第一入库接口和第二入库接口，以替代 INSERT INTO语句和 UPDATE语句对数据库的操作。执行单元 40可将第一 BCP入库类和第二 BCP入库类集成到程序，以替代 INSERT INTO语句和 UPDATE语句对数据库的操作，从而提高自动发现业务的效率。

在一实施例中，第一设置单元 20具体用于：

分析单元 10包括：

判断模块 11 , 判断 INSERT INTO语句和更新操作 UPDATE语句是否造成效率瓶颈，若否，则结束流程。

图 4是本发明提高网管自动发现业务效率的装置的详细工作流程图。该流程包括：

步驟 S101 , 判断程序中的 INSERT INTO语句和 UPDATE语句是否形成效率瓶颈；如果是，则执行步驟 S102; 如果否，则执行步驟 S103;

步驟 S102, 为 INSERT INTO语句涉及到的表设置第一 BCP入库类，调用数据库提供的底层 API写好对应的第一入库接口；

步驟 S103, 结束流程，不作处理；

步驟 S104, 分析 UPDATE语句，把需要更新的字段从源表中删除，选择一个主键作为新表的外键使用；

步驟 S105, 把移出的字段连同选择的外键形成一个新表，设置好新表的属性；

步驟 S106, 为新表设计第二 BCP入库类，设置对应的第二入库接口；步驟 S107, 将设置好的第一 BCP入库类和第二 BCP入库类集成到程序 , 以替代 INSERT INTO语句和 UPDATE语句对数据库的操作。以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。工业实用性

本发明解决了 UPDATE语句带来的效率瓶颈问题，大大提升了网管自动发现业务的效率；消除了数据表的冗余数据和传递依赖，使得表格之间满足第三范式的要求，也使得表格之间的关系更为明确。

Claims

权利要求书

1、一种提高网管自动发现业务效率的方法，其中，该方法包括：分析自动发现业务中与入库操作 INSERT INTO 语句和更新操作

UPDATE语句有关的数据表，列出各数据表之间存在的依赖关系；

将设置好的第一 BCP入库类和第二 BCP入库类集成到自动发现业务代码，调用第一入库接口和第二入库接口，以替代 INSERT INTO 语句和

UPDATE语句对数据库的操作。

2、如权利要求 1所述的方法，其中，所述将使用 UPDATE语句更新的字段从与其它数据表存在依赖关系的源表中分离出来，形成一个新表，并为所述新表设置第二 BCP入库类和第二入库接口包括：

将移出的字段连同选择的外键形成一个新表，设置好新表的属性。

3、如权利要求 1或 2所述的方法，其中，所述为 INSERT INTO语句涉及到的数据表设置第一 BCP入库类和第一入库接口包括：

4、如权利要求 3所述的方法，其中，所述分析自动发现业务中与入库操作 INSERT INTO语句和更新操作 UPDATE语句有关的数据表包括：判断 INSERT INTO语句和更新操作 UPDATE语句是否造成效率瓶颈 , 若未造成效率瓶颈，则结束流程。

5、如权利要求 4所述的方法，其中，与入库操作 INSERT INTO语句有关的数据表包括路径信息表；与 UPDATE语句有关的数据表包括时隙交叉表。

6、一种提高网管自动发现业务效率的装置，该装置包括：

分析单元，用于分析自动发现业务中与入库操作 INSERT INTO语句和更新操作 UPDATE语句有关的数据表，列出各数据表之间存在的依赖关系；第一设置单元，用于为 INSERT INTO语句涉及到的数据表设置第一 BCP入库类和第一入库接口；

第二设置单元，用于将使用 UPDATE语句更新的字段从与其它数据表存在依赖关系的源表中分离出来，形成一个新表，并为所述新表设置第二 BCP入库类和第二入库接口；

7、如权利要求 6所述的装置，其中，所述第二设置单元包括：

8、如权利要求 6或 7所述的装置，其中，所述第一设置单元具体用于：调用低层应用程序编程接口 API对 INSERT INTO语句中使用的字段进行封装，并设置好入库接口函数。

9、如权利要求 8所述的装置，其中，所述分析单元包括：

判断模块，判断 INSERT INTO语句和更新操作 UPDATE语句是否造成效率瓶颈，若未造成效率瓶颈，则结束流程。

10、如权利要求 9所述的装置，其中，与入库操作 INSERT INTO语句有关的数据表包括路径信息表；与 UPDATE语句有关的数据表包括时隙交叉表。