CN112256665A - 一种网管数据库的迁移方法及装置 - Google Patents

一种网管数据库的迁移方法及装置 Download PDF

Info

Publication number
CN112256665A
CN112256665A CN201910665232.1A CN201910665232A CN112256665A CN 112256665 A CN112256665 A CN 112256665A CN 201910665232 A CN201910665232 A CN 201910665232A CN 112256665 A CN112256665 A CN 112256665A
Authority
CN
China
Prior art keywords
network management
management system
network
database
databases
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910665232.1A
Other languages
English (en)
Inventor
邱柏卫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201910665232.1A priority Critical patent/CN112256665A/zh
Priority to PCT/CN2020/093223 priority patent/WO2021012786A1/zh
Publication of CN112256665A publication Critical patent/CN112256665A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/214—Database migration support
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公一种网管数据库的迁移方法，包括：网管系统根据需要管理的网元的数量创建N个数据库，所述N个数据库中每个数据库可管理的网元的数量为M；当所述N个数据库中任一数据库所管理的网元的数量超过M时，所述网管系统新建X个数据库；所述网管系统将需要管理的网元均匀分配在所有数据库。本发明解决5G数据库容量增加后不能及时扩容和迁移，导致系统延迟甚至不可用的问题。

Description

一种网管数据库的迁移方法及装置
技术领域
本发明涉及通信领域，特别涉及一种网管数据库的迁移方法及装置。
背景技术
在通讯网管中，网管数据库存储了大量的当前数据和历史信息，且网管系统运行周期长，数据库空间容量增长速度快，需要人工关注数据库容量，如果未能及时对数据库容量进行扩充，则可能造成重要数据丢失。
5G配置数据随着用户量的增长而增长，但目前所有的配置数据都存储在一个数据库中，支持的网元数量是有上限的。当数据库存储数据量超过上限后，会导致系统操作响应延迟，甚至功能不可用，需要升级或拆分网管来管理更多的用户数据。
发明内容
为解决上述问题，本发明提供一种网管数据库的迁移方法，包括：
网管系统根据需要管理的网元的数量创建N个数据库，所述N个数据库中每个数据库可管理的网元的数量为M；当所述N个数据库中任一数据库所管理的网元的数量超过M时，所述网管系统新建X个数据库；
所述网管系统将需要管理的网元均匀分配在所有数据库中；
M、N、X均为大于0的整数。
进一步的，所述网管系统在将需要管理的网元均匀分配在所有数据库中之前，将网元按照设置的规则分组，并将不同分组的网元分配在各个数据库中。
进一步的，所述规则包括以下至少一种：网管系统将网元按照不同网元类型分组、网管系统将网元按照不同子网ID分组或者网管系统将网元按照ID区间分组。
进一步的，所述网管系统根据网管系统在指定时间内新建数据库的次数，提示用户选择网管系统规模，所述网管系统规模为网管系统需要管理的网元数量。
进一步的，所述网管系统为所述新建的X个数据库分别建立微服务进程，所述微服务进程用于查询、修改、删除或新建所述网管系统中所有数据库的数据。
进一步的，所述网管系统接收到不同分组的数据查询请求时，向对应分组的数据库微服务进程发送查询信息，所述微服务进程分别查询对应数据库的数据，分别保留查询结果并将查询结果信息返回至网管系统，所述网管系统合并查询结果信息。
进一步的，所述网管系统接收到不同分组的数据修改、删除或新建请求时，向对应分组的数据库微服务进程发送修改、删除或新建信息，所述微服务进程分别修改、删除或新建对应数据库的数据并分别将操作结果信息返回至网管系统，所述网管系统合并操作结果信息。
进一步的，所述网管系统为所有数据库设置告警值，当任一数据库管理的网元的数量达到所述告警值时，所述网管系统向用户发送提示消息，所述提示消息用于提示用户迁移该数据库中的网元至新数据库。
本发明还提供一种网络设备，包括：处理器、存储器及通信总线；
所述通信总线用于实现处理器和存储器之间的连接通信；
所述处理器用于执行存储器中存储的业务处理程序，以实现所述网管数据库迁移的方法的步骤。
本发明还提供一种存储介质，所述存储介质中存储有第一业务处理程序、第二业务处理程序以及第三业务处理程序中的至少一个，所述第一业务处理程序、第二业务处理程序、第三业务处理程序可被一个或者多个处理器执行，以实现所述的网管数据库迁移的方法的步骤。
附图说明
图1为本发明提供的一种网管数据库的智能迁移方法流程图。
图2为本发明提供的一种多数据库查询方法示意图。
图3为本发明提供的一种多数据库查询方法流程图。
图4为本发明提供的一种网络设备结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，下面通过具体实施方式结合附图对本发明实施例作进一步详细说明。应当理解，此处所描述的具体实施例手段以说明本发明，并不用于限定本发明。
如图1所示，步骤S101:网管系统根据需要管理的网元数量创建N个数据库，所述N个数据库中每个数据库可管理网元数量为M。
具体的，网管系统中，其可管理的网元数总量为用户选择，网管系统在用户安装时，提示用户选择安装规模。本实施例中，每个数据库节点可以管理10000网元。如表1所示。
规模 网管系统最大管理网元数
规模一 10000
规模二 20000
规模三 50000
表1网管规模定义
具体的，根据上述网管系统规模，根据用户选择的规模，创建数据库节点。再本实施例中，用户选择的网元规模是表1中的规模二，系统最大管理20000网元，则在安装时网管系统自动创建2个数据库节点，每个数据库节点最大管理10000网元。
进一步的，所述网管系统根据网管系统中网元增量的历史数据创建N个数据库，网管系统根据网元增量历史数据，提示用户选择相应的网元管理规模，及网管系统最大管理网元数。具体而言，网管系统检测指定时间内，如近一个月、近三个月、近半年内，网管系统新建数据库次数或者在指定时间内网元增加的速度，提示用户选择性网管系统规模，即网管系统最大管理网元数。
例如，近一个月内的网管规模设置为规模一，网管系统最大管理网元数为10000网元。网管系统检测近一个月内自动新建数据库节点2个，则提示用户选择网管规模设置二，网管系统最大管理网元数为20000网元。
S102：当所述N个数据库中任一数据库所管理的网元数量超过M时，所述网管系统新建X个数据库。
具体的，系统运行一段时间，网管系统中所管理的网元数量上升，当数据库节点存储的网元数超过上限，则按照用户配置的规则自动进行网元数据迁移。本实施例中，当任意一个数据库管理的网元数量超过10000时，网管系统新建1个数据库。
S103:所述网管系统将需要管理的网元数量均匀分配在所有数据库中。
具体的，网管系统按照负载均衡策略进行配置数据智能迁移到新建的数据库中，保证每个数据库中存储的网元数据大致均衡或完全相等，使系统性能达到最优。
进一步的，网管系统按照用户配置的分组策略对网元数据进行分组，根据分组将不同类型的网元分配于不同的网管数据库节点中，便于进行管理，使性能达到最优。
具体的，网管系统将网元按照不同网元类型分组、网管系统将网元按照不同子网ID分组、网管系统将网元按照ID区间分组。如表2所示。
Figure BDA0002139202390000041
表2网元分组定义
具体的，如果网元数量很大，可以对分组信息进行组合，例如相同网元类型的网元按照子网号分别存储到不同的数据库节点。如表3所示。
Figure BDA0002139202390000042
Figure BDA0002139202390000051
表3网元组合分组定义
具体的，迁移成功后，删除源数据库节点中已迁移的配置数据,使负载达到均衡。
进一步的，所述网管系统为所述新建的X个数据库分别建立微服务进程，所述微服务进程用于查询、修改、删除或新建所述网管系统中所有数据库的数据。如图2所示。
具体的，网管系统接收到查询请求，分别查询网元类型字段为SDR、GMB、MEC的网元，网管系统向对应SDR、GMB、MEC分组的数据库微服务进程发送查询信息，所述微服务进程分别查询对应数据库的数据，分别保留SDR、GMB、MEC的网元查询结果并将查询结果信息返回至网管系统，所述网管系统合并查询结果信息。
具体的，网管系统接到数据修改请求，分别修改网元ID区间(1000-1500、1500-2000、2000-2500)的网元，网管系统向对应网元ID区间(1000-1500、1500-2000、2000-2500)的数据库微服务进程发送修改信息，所述微服务进程分别修改对应网元ID区间(1000-1500、1500-2000、2000-2500)数据库的数据并分别将操作结果信息返回至网管系统，所述网管系统合并操作结果信息。
本发明还提供一种网络设备，如图4所示。
本发明实施例提供一种网络设备，包括：处理器401、存储器402和总线403，处理器401与存储器402通过总线403连接。
存储器402用于存储计算机执行指令。
处理器401用于执行该计算机执行指令，以实现执行如上述图1至图3所示的数据库的智能迁移方法。
其中，本发明实施例中的处理器401可以是一个中央处理器(英文全称：centralprocessing unit，英文缩写：CPU)，还可以为其他通用处理器、数字信号处理器(英文全称：digital signal processing，英文缩写：DSP)、专用集成电路(英文全称：applicationspecific integrated circuit，英文缩写：ASIC)、现场可编程门阵列(英文全称：field-programmable gate array，英文缩写：FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
另外，该处理器401还可以为专用处理器，该专用处理器可以包括基带处理芯片、射频处理芯片等中的至少一个。进一步地，该专用处理器还可以包括具有其他专用处理功能的芯片。
存储器402可以包括易失性存储器(英文：volatile memory)，例如随机存取存储器(英文全称：random-access memory，英文缩写：RAM)；存储器402也可以包括非易失性存储器(英文：non-volatile memory)，例如只读存储器(英文全称：read-only memory，英文缩写：ROM)，快闪存储器(英文：flash memory)，硬盘(英文全称：hard disk drive，英文缩写：HDD)或固态硬盘(英文全称：solid-state drive，英文缩写：SSD)；另外，存储器402还可以包括上述种类的存储器的组合。
总线403可以包括数据总线、电源总线、控制总线和信号状态总线等。本实施例中为了清楚说明，在图4中将各种总线都示意为总线403。
在具体实现过程中，上述如图1至图3所示的方法流程中的各步骤均可以通过硬件形式的处理器401执行存储器402中存储的软件形式的计算机执行指令实现。为避免重复，此处不再赘述。
由于本发明实施例提供的网络设备可用于执行上述方法流程，因此其所能获得的技术效果可参考上述方法实施例，此处不再赘述。
本实施例提供一种存储介质，该存储介质中可以存储有一个或多个可供一个或多个处理器读取、编译并执行的计算机程序，在本实施例中，存储介质存储有第一业务处理程序、第二业务处理程序以及第三业务处理程序中的至少一种，所述处理程序用于实现本发明所述的网管数据库迁移的方法。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的装置，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

Claims (10)

1.一种网管数据库的迁移方法，包括：
网管系统根据需要管理的网元的数量创建N个数据库，所述N个数据库中每个数据库可管理的网元的数量为M；当所述N个数据库中任一数据库所管理的网元的数量超过M时，所述网管系统新建X个数据库；
所述网管系统将需要管理的网元均匀分配在所有数据库中；
M、N、X均为大于0的整数。
2.根据权利要求1所述的方法，其特征在于，所述网管系统在将需要管理的网元均匀分配在所有数据库中之前，将网元按照设置的规则分组，并将不同分组的网元分配在各个数据库中。
3.根据权利要求2所述的方法，其特征在于，所述规则包括以下至少一种：网管系统将网元按照不同网元类型分组、网管系统将网元按照不同子网ID分组或者网管系统将网元按照ID区间分组。
4.根据权利要求1所述的方法，其特征在于，所述网管系统根据网管系统在指定时间内新建数据库的次数，提示用户选择网管系统规模，所述网管系统规模为网管系统需要管理的网元数量。
5.根据权利要求4所的方法，还包括：所述网管系统为所述新建的X个数据库分别建立微服务进程，所述微服务进程用于查询、修改、删除或新建所述网管系统中所有数据库的数据。
6.根据权利要求5所述的方法，其特征在于，所述网管系统接收到不同分组的数据查询请求时，向对应分组的数据库微服务进程发送查询信息，所述微服务进程分别查询对应数据库的数据，分别保留查询结果并将查询结果信息返回至网管系统，所述网管系统合并查询结果信息。
7.根据权利要求5所述的方法，其特征在于，所述网管系统接收到不同分组的数据修改、删除或新建请求时，向对应分组的数据库微服务进程发送修改、删除或新建信息，所述微服务进程分别修改、删除或新建对应数据库的数据并分别将操作结果信息返回至网管系统，所述网管系统合并操作结果信息。
8.根据权利要求1所述的方法，还包括：所述网管系统为所有数据库设置告警值，当任一数据库管理的网元的数量达到所述告警值时，所述网管系统向用户发送提示消息，所述提示消息用于提示用户迁移该数据库中的网元至新数据库。
9.一种网络设备，包括：
处理器、存储器及通信总线，所述通信总线用于实现处理器和存储器之间的连接通信；
所述处理器用于执行存储器中存储的业务处理程序，以实现如权利要求1～8任意一项所述网管数据库迁移的方法的步骤。
10.一种存储介质，其特征在于，所述存储介质中存储有第一业务处理程序、第二业务处理程序以及第三业务处理程序中的至少一个，所述第一业务处理程序、第二业务处理程序、第三业务处理程序可被一个或者多个处理器执行，以实现如权利要求1～8任意一项所述的网管数据库迁移的方法的步骤。
CN201910665232.1A 2019-07-22 2019-07-22 一种网管数据库的迁移方法及装置 Pending CN112256665A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910665232.1A CN112256665A (zh) 2019-07-22 2019-07-22 一种网管数据库的迁移方法及装置
PCT/CN2020/093223 WO2021012786A1 (zh) 2019-07-22 2020-05-29 一种网管数据库的迁移方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910665232.1A CN112256665A (zh) 2019-07-22 2019-07-22 一种网管数据库的迁移方法及装置

Publications (1)

Publication Number Publication Date
CN112256665A true CN112256665A (zh) 2021-01-22

Family

ID=74193277

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910665232.1A Pending CN112256665A (zh) 2019-07-22 2019-07-22 一种网管数据库的迁移方法及装置

Country Status (2)

Country Link
CN (1) CN112256665A (zh)
WO (1) WO2021012786A1 (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103051478A (zh) * 2012-12-24 2013-04-17 中兴通讯股份有限公司 一种大容量电信网管系统及其设置和应用方法
CN107357896A (zh) * 2017-07-13 2017-11-17 北京小度信息科技有限公司 数据库集群的扩容方法、装置、系统和数据库集群系统
CN108874528A (zh) * 2017-05-09 2018-11-23 北京京东尚科信息技术有限公司 分布式任务存储系统和分布式任务存储/读取方法
CN109032766A (zh) * 2018-06-14 2018-12-18 阿里巴巴集团控股有限公司 一种事务处理方法、装置及电子设备
CN109918442A (zh) * 2019-01-24 2019-06-21 中国联合网络通信集团有限公司 一种数据的处理方法及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101207520B (zh) * 2007-12-14 2011-02-09 上海华为技术有限公司 一种实现分布式网络管理的方法及系统
CN104363122B (zh) * 2014-11-14 2018-09-28 瑞斯康达科技发展股份有限公司 一种网元的预配置方法和系统
CN105656660A (zh) * 2014-12-02 2016-06-08 中兴通讯股份有限公司 任务管理、调度方法及装置、系统
CN106789166B (zh) * 2016-11-28 2020-12-25 金华市智甄通信设备有限公司 一种网元批量配置的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103051478A (zh) * 2012-12-24 2013-04-17 中兴通讯股份有限公司 一种大容量电信网管系统及其设置和应用方法
CN108874528A (zh) * 2017-05-09 2018-11-23 北京京东尚科信息技术有限公司 分布式任务存储系统和分布式任务存储/读取方法
CN107357896A (zh) * 2017-07-13 2017-11-17 北京小度信息科技有限公司 数据库集群的扩容方法、装置、系统和数据库集群系统
CN109032766A (zh) * 2018-06-14 2018-12-18 阿里巴巴集团控股有限公司 一种事务处理方法、装置及电子设备
CN109918442A (zh) * 2019-01-24 2019-06-21 中国联合网络通信集团有限公司 一种数据的处理方法及装置

Also Published As

Publication number Publication date
WO2021012786A1 (zh) 2021-01-28

Similar Documents

Publication Publication Date Title
CN110555012A (zh) 数据迁移方法及装置
CN108804237A (zh) 数据实时统计方法、装置、存储介质和电子设备
CN109947668B (zh) 存储数据的方法和装置
CN110019125B (zh) 数据库管理的方法和装置
CN111367984B (zh) 高时效的数据加载入数据湖的方法及系统
CN110727738B (zh) 基于数据分片的全局路由系统、电子设备及存储介质
CN107622091A (zh) 一种数据库查询方法和装置
US9594801B2 (en) Systems and methods for allocating work for various types of services among nodes in a distributed computing system
US20160179795A1 (en) System and method for developing and implementing a migration plan for migrating a file system
WO2021003677A1 (zh) 一种分布式系统中的业务升级方法、装置及分布式系统
CN110781184A (zh) 数据表的构建方法、装置、设备及存储介质
CN106302640A (zh) 数据请求处理方法及装置
CN105490843A (zh) 一种信息处理方法及系统
CN107391622B (zh) 一种数据访问方法及设备
CN111694505B (zh) 数据存储管理方法、装置和计算机可读存储介质
CN103455433A (zh) 内存管理方法及系统
CN111914285B (zh) 一种基于差分隐私的地理分布式图计算方法及系统
CN107491700B (zh) 一种数据访问方法及设备
CN114442952A (zh) 冷数据的迁移方法、装置、存储介质及电子装置
CN108646987B (zh) 一种文件卷的管理方法、装置、存储介质及终端
CN105988995A (zh) 一种基于HFile批量加载数据的方法
CN112732711B (zh) 一种数据存储方法、装置及电子设备
CN112256665A (zh) 一种网管数据库的迁移方法及装置
CN117130979A (zh) 一种业务资源的迁移方法、装置及电子设备
CN116303343A (zh) 数据分片方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination