CN100589102C - 一种网管历史数据的多表格处理方法 - Google Patents
一种网管历史数据的多表格处理方法 Download PDFInfo
- Publication number
- CN100589102C CN100589102C CN200710098152A CN200710098152A CN100589102C CN 100589102 C CN100589102 C CN 100589102C CN 200710098152 A CN200710098152 A CN 200710098152A CN 200710098152 A CN200710098152 A CN 200710098152A CN 100589102 C CN100589102 C CN 100589102C
- Authority
- CN
- China
- Prior art keywords
- data
- state
- historical data
- forms
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003672 processing method Methods 0.000 title abstract 2
- 238000000034 method Methods 0.000 claims description 22
- 238000003780 insertion Methods 0.000 claims description 3
- 230000037431 insertion Effects 0.000 claims description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
一种网管历史数据的多表格处理方法，包括：在数据库中创建至少3个数据结构相同的表格并设置其使用顺序，设定单个表格的最大数据条数；在所有表格中搜索状态为正在使用的表格，并使用该表格记录历史数据；当检测所有表格记录的数据条数之和达到所有表格的数据总条数的值时，清空状态为正在使用的表格的后一个表格的历史数据；当检测数据库的状态为正在使用的表格中历史数据条数达到设定的单个表格的最大数据条数时，使后一个表格记录历史数据，设定该后一个表格为正在使用、设定前一个状态为正在使用的表格为未使用。应用本发明，解决了在删除大批量历史数据耗费时间长、效率低并影响网管系统正常运行的问题，提高了网管系统的效率和可靠性。
Description
技术领域
本发明涉及网络管理系统的一种网管历史数据的多表格处理方法。
背景技术
目前，网络管理系统管理的通讯设备数量庞大，为了监控所有设备并保留设备在各个时刻的运行状态值，网管需要保存大量的设备状态历史数据，包括历史性能和历史告警。当网管保存在数据库中的历史数据达到一定数量后，需要将最老的一批数据从数据库转储到其他存储介质，同时将已转储的历史数据从数据库中删除。目前的商用数据库在删除数据库表格中的数据时要同步记录被删除数据的日志，如果被删除的数据数量很多，则整个删除过程耗时长、效率低，并且删除过程中不允许对数据库表格进行其他操作，导致网管所有涉及该数据库表格的操作都被阻塞并出现异常，网管系统的效率和可靠性大大降低。
发明内容
本发明所要解决的技术问题是提供一种网络管理系统的网管历史数据的多表格处理方法，解决了当前在删除大批量历史数据耗费时间长、效率低并影响网管系统正常运行的问题，删除过程中数据库不用记录被删除数据的日志，效率高、耗时短，同时该方法保留了传统单个表格存储历史数据方法中数据查询和插入操作的高效率，从而提高了网管系统的效率和可靠性。
为了解决上述技术问题，本发明提供了一种网管历史数据的多表格处理方法，应用于网络管理系统，包括以下步骤：
a、在数据库中创建至少3个数据结构相同的表格，设置各表格的使用顺序，设定单个表格的最大数据条数，设定数据库中所有表格的数据总条数的值是上限阀值G；
b、在所述数据库的所有表格中搜索状态为正在使用的表格，并使用该表格记录历史数据；
c、当检测所述数据库的所有表格记录的数据条数之和达到所述上限阀值G×t％的值时，其中70≤t≤100，清空状态为正在使用的表格的后一个表格的历史数据；
d、当检测所述数据库的状态为正在使用的表格中历史数据条数达到设定的所述单个表格的最大数据条数时，使后一个表格记录历史数据，同时将该后一个表格的状态设为正在使用、将前一个状态为正在使用的表格的状态设为未使用。
进一步地，上述方法还可包括，所述步骤a中，所述各表格为空，所有所述表格的状态都设为未使用。
进一步地，上述方法还可包括，所述步骤b中，如果所述所有表格的状态都为未使用，则依据预先设置的所述各表格的使用顺序，选取第一个表格记录历史数据，同时设定该第一个表格的状态为正在使用。
进一步地，上述方法还可包括，当所述网络管理系统重新启动时，选择上一次退出时状态为正在使用的表格作为当前使用表格记录历史数据。
进一步地，上述方法还可包括，采用所述数据库的操作命令为清空一个表truncate，来清空所述表格的历史数据，所述表格清空时间为秒级。
进一步地，上述方法还可包括，所述上限阀值G是所述数据库中所有表格的个数乘以所述单个表格的最大数据条数得到的值。
进一步地，上述方法还可包括，对所述单个表格进行数据查询和数据插入。
与现有技术相比，由于在网络管理系统中应用本发明一种网管历史数据的多表格处理方法，解决了当前在删除大批量历史数据耗费时间长、效率低并影响网管系统正常运行的问题，删除过程中数据库不用记录被删除数据的日志，效率高、耗时短，同时该方法保留了传统单个表格存储历史数据方法中数据查询和插入操作的高效率，从而提高了网管系统的效率和可靠性
附图说明
图1是本发明实施例的一种网管历史数据的多表格处理方法中表格切换使用的实现步骤的示意图。
具体实施方式
下面结合附图和具体实施方式对本发明作详细说明。
在网络管理系统中，包括对单个表格进行数据查询和数据插入。
第一实施例：
图1描述了本发明实施例的一种网管历史数据的多表格处理方法中表格切换使用的实现步骤，具体步骤如下：
步骤1、在数据库中创建n个数据结构相同的表格，所述n是大于2的整数，本发明实施例中假设n＝6，设置该6个表格的使用顺序，设定单个表格的最大数据条数；
所述6个表格为空，该6个表格的状态都设为未使用。
步骤2、第一次启动时，依照所述6个表格的使用顺序，第一个表格记录历史数据，并将第一个表格的状态设为正在使用；
当重新启动时，选择上一次退出时状态为正在使用的表格作为当前使用表格记录历史数据。
步骤3、检测第一个表格记录的历史数据条数增加到设定的单个表格最大数据条数时，切换到第二个表格记录历史数据，同时将第一个表格的状态设为未使用，第二个表格的状态设为正在使用；
同理可推，第一到第六个表格依次记录历史数据，并在切换的同时设定前后两个表格的状态。
步骤4、当使用第六个表格记录历史数据时，如果历史数据条数达到单个表格的最大数据条数时，清空第一个表格的历史数据，切换到第一个表格记录历史数据，将第一个表格的状态设为正在使用，第六个表格的状态设为未使用，返回步骤3。
清空表格的历史数据时，可以采用数据库的“清空一个表(truncate)”操作命令清空表格的历史数据；清空表格的过程耗时极短，时间为秒级。
试验数据显示清空一个包含2千万条数据的表格的时间约为10秒中，而传统方法在一个表中删除2千万条数据的时间约为30分钟。
第二实施例：
在数据库中创建n个数据结构相同的表格，所述n是大于2的整数，设置各表格的使用顺序，设定单个表格的最大数据条数，设定数据库中n个表格的数据总条数的值是上限阀值G，上限阀值G是大于0的整数。
上限阀值G＝n×单个表格的最大数据条数。
步骤a、在数据库的所有表格中搜索状态为正在使用的表格，并使用该表格记录历史数据；
如果所有表格的状态都为未使用，则选取第一个表格记录历史数据，同时设定第一个表格的状态为正在使用。
步骤b、当检测所述数据库的所有表格记录的数据条数之和达到所述上限阀值G×t％的值时，清空状态为正在使用的表格的后一个表格的历史数据；
其中70≤t≤100。
步骤c、当检测状态为正在使用的表格中的历史数据条数达到设定的单表格的最大数据条数时，使后一个表格记录历史数据，同时将该后一个表格的状态设为正在使用，将前一个状态为正在使用的表格的状态设为未使用。
以上所述仅为本发明的示意实施例，应当知道这可以有许多变型，这种变型不被认为是脱离本发明的示意实施例的精神和范围，并且所有这样的本领域普通技术人员显而易见的变型被包含在所附权利要求的范围之内。
Claims (7)
1、一种网管历史数据的多表格处理方法，应用于网络管理系统，包括以下步骤：
a、在数据库中创建至少3个数据结构相同的表格，设置各表格的使用顺序，设定单个表格的最大数据条数，设定数据库中所有表格的数据总条数的值是上限阀值G；
b、在所述数据库的所有表格中搜索状态为正在使用的表格，并使用该表格记录历史数据；
c、当检测所述数据库的所有表格记录的数据条数之和达到所述上限阀值G×t％的值时，其中70≤t≤100，清空状态为正在使用的表格的后一个表格的历史数据；
d、当检测所述数据库的状态为正在使用的表格中历史数据条数达到设定的所述单个表格的最大数据条数时，使后一个表格记录历史数据，同时将该后一个表格的状态设为正在使用、将前一个状态为正在使用的表格的状态设为未使用。
2、如权利要求1所述的方法，其特征在于，所述步骤a中，所述各表格为空，所有所述表格的状态都设为未使用。
3、如权利要求1所述的方法，其特征在于，所述步骤b中，如果所述所有表格的状态都为未使用，则依据预先设置的所述各表格的使用顺序，选取第一个表格记录历史数据，同时设定该第一个表格的状态为正在使用。
4、如权利要求1、2或3所述的方法，其特征在于，当所述网络管理系统重新启动时，选择上一次退出时状态为正在使用的表格作为当前使用表格记录历史数据。
5、如权利要求1、2或3所述的方法，其特征在于，采用所述数据库的清空一个表的操作命令来清空所述表格的历史数据，所述表格清空时间为秒级。
6、如权利要求1、2或3所述的方法，其特征在于，所述上限阀值G是所述数据库中所有表格的个数乘以所述单个表格的最大数据条数得到的值。
7、如权利要求1、2或3所述的方法，其特征在于，还包括对所述单个表格进行数据查询和数据插入。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200710098152A CN100589102C (zh) | 2007-04-17 | 2007-04-17 | 一种网管历史数据的多表格处理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200710098152A CN100589102C (zh) | 2007-04-17 | 2007-04-17 | 一种网管历史数据的多表格处理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101145156A CN101145156A (zh) | 2008-03-19 |
| CN100589102C true CN100589102C (zh) | 2010-02-10 |
Family
ID=39207684
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN200710098152A Expired - Fee Related CN100589102C (zh) | 2007-04-17 | 2007-04-17 | 一种网管历史数据的多表格处理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN100589102C (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103714137B (zh) * | 2013-12-19 | 2017-11-21 | 大唐移动通信设备有限公司 | 一种数据文件的删除方法和系统 |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102541916A (zh) * | 2010-12-29 | 2012-07-04 | 沈阳中科博微自动化技术有限公司 | 半导体设备历史数据的记录管理方法 |
| CN103838762B (zh) * | 2012-11-26 | 2017-09-29 | 中国银联股份有限公司 | 基于数据表轮换的不间断数据处理装置及方法 |
-
2007
- 2007-04-17 CN CN200710098152A patent/CN100589102C/zh not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103714137B (zh) * | 2013-12-19 | 2017-11-21 | 大唐移动通信设备有限公司 | 一种数据文件的删除方法和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101145156A (zh) | 2008-03-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103370691B (zh) | 管理缓冲器溢出状况 | |
| CN103747147B (zh) | 更新通讯录的方法和设备 | |
| CN111339103B (zh) | 一种基于全量分片和增量日志解析的数据交换方法及系统 | |
| CN102566928A (zh) | 自动管理移动终端桌面应用程序图标的系统及方法 | |
| CN103092848A (zh) | 一种图片存储与检索方法 | |
| CN104584524A (zh) | 聚合中介系统中的数据 | |
| CN100589102C (zh) | 一种网管历史数据的多表格处理方法 | |
| CN101114946A (zh) | 在电信网管系统中性能对象数据的采集方法 | |
| CN105447168A (zh) | Mp4格式的碎片文件恢复与重组的方法 | |
| CN103064908A (zh) | 一种通过内存快速去重名单的方法 | |
| CN101645802B (zh) | 内容控制方法及装置 | |
| CN104348905B (zh) | 一种离线推送消息的方法及装置 | |
| CN103593447A (zh) | 用于数据库表的数据处理方法和装置 | |
| WO2015067115A1 (zh) | 实时系统数据的去重方法和装置 | |
| CN108646987A (zh) | 一种文件卷的管理方法、装置、存储介质及终端 | |
| EP4174675A1 (en) | On-board data storage method and system | |
| CN109445714A (zh) | 一种回收站清理方法及装置 | |
| CN108959614A (zh) | 一种快照管理方法、系统、装置、设备及可读存储介质 | |
| CN103092768A (zh) | 一种应用系统中数据处理的方法及装置 | |
| CN102479211A (zh) | 基于数据库的海量数据处理系统及方法 | |
| KR20160091471A (ko) | 환형큐 기반의 인-메모리 데이터베이스 시스템에서의 데이터 처리방법 | |
| CN106599113B (zh) | 用于网管系统海量性能数据的数据库读写方法 | |
| CN102760132A (zh) | 一种数据流频繁项挖掘方法和装置 | |
| CN101819603A (zh) | 基于嵌入式系统的信息记录的检索方法和装置 | |
| CN116541403A (zh) | 一种实时捕获数据库数据变更的方法、系统、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20171025 Address after: 510000 unit 2414-2416, building, No. five, No. 371, Tianhe District, Guangdong, China Patentee after: Guangdong Gaohang Intellectual Property Operation Co., Ltd. Address before: 518057 Nanshan District high tech Industrial Park, Guangdong, South Road, science and technology, ZTE building, legal department Patentee before: ZTE Corporation |
|
| CB03 | Change of inventor or designer information |
Inventor after: Zhang Binfeng Inventor before: Wan Chuanyan |
|
| CB03 | Change of inventor or designer information | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20171101 Address after: 030300, Shanxi, Taiyuan, Loufan County, Loufan City South Street, South District Lane Patentee after: Zhang Binfeng Address before: 510000 unit 2414-2416, building, No. five, No. 371, Tianhe District, Guangdong, China Patentee before: Guangdong Gaohang Intellectual Property Operation Co., Ltd. |
|
| TR01 | Transfer of patent right | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20100210 Termination date: 20180417 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |