CN104133876A - 一种基于事务的增量式管理集群配置文件方法 - Google Patents
一种基于事务的增量式管理集群配置文件方法 Download PDFInfo
- Publication number
- CN104133876A CN104133876A CN201410357809.XA CN201410357809A CN104133876A CN 104133876 A CN104133876 A CN 104133876A CN 201410357809 A CN201410357809 A CN 201410357809A CN 104133876 A CN104133876 A CN 104133876A
- Authority
- CN
- China
- Prior art keywords
- configuration file
- transaction
- affairs
- module
- affair
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 29
- 238000012217 deletion Methods 0.000 claims description 3
- 230000037430 deletion Effects 0.000 claims description 3
- 238000012986 modification Methods 0.000 claims description 3
- 230000004048 modification Effects 0.000 claims description 3
- 230000001502 supplementing effect Effects 0.000 claims description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/178—Techniques for file synchronisation in file systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明提供一种基于事务的增量式管理集群配置文件方法，包括配置文件管理接口层、配置文件事务处理模块以及配置文件读写模块三部分组成的配置文件管理模块，该方法的配置文件管理接口层负责接受外部对配置文件的操作接口，将外部请求转发给配置文件事务处理模块，配置文件事务处理模块，将外部请求转换为事务记录到事务日志中，并执行外部请求将对配置文件的读写交给配置文件读写模块来完成。本发明的一种基于事务的增量式管理集群配置文件方法通过引入增量式管理集群配置文件方法，各计算机可以根据自己的需求进行按需更新配置文件，实现集群配置文件的增量同步，大大减少同步配置文件过程中对网络资源的占用，达到高效地利用网络带宽的目的。
Description
技术领域
本发明涉及一种集群配置文件的方法，具体地说是一种基于事务的增量式管理集群配置文件方法。
背景技术
集群配置文件是用户配置的内容的载体，它记录着用户配置的信息，以及运行过程中资源流转的信息。
由于集群环境是由多台计算机组成，若手工配置每台计算机效率低下，且容易出错。于是便出现了两种配置文件的管理方式：第一种是共享配置文件方式，这种方式是将配置文件置于共享区域，需要获取配置文件信息，可从该共享区域获取，需要修改配置文件也可访问该共享区域，但是该方式也存在不可避免的缺点，即虽可共享配置文件，但多台计算机同时写配置文件时，容易将配置文件破坏，并且集群对该共享区域的依赖很强，若该共享区域不畅通，会导致整个集群崩溃；第二种方式是将一份儿配置文件发放到每台计算机上，各计算机对配置文件的访问只需在本机进行即可，然后将配置文件，同步给其他计算机，相同的，这种方式虽然可以解决多台计算机同时访问的问题，但随着集群资源的增加配置文件也随之变大，在同步过程中会占用大量网络资源。
基于此，发明创造一种在同步配置文件过程中使用增量同步配置文件的方法，以此来减少同步过程中对网络资源的占用。
发明内容
本发明的技术任务是针对现有技术的不足，提供一种实现集群配置文件的增量同步、减少同步配置文件过程中对网络资源的占用的基于事务的增量式管理集群配置文件方法。
本发明解决其技术问题所采用的技术方案是：
一种基于事务的增量式管理集群配置文件方法，包括配置文件管理接口层、配置文件事务处理模块以及配置文件读写模块三部分组成的配置文件管理模块，该方法是按以下步骤进行的：
1）配置文件管理接口层接收外部对配置文件的操作接口，将外部请求转发给配置文件事务处理模块；
2）在配置文件事务处理模块中，将外部对配置文件的“增加、修改、删除、查询” 等操作请求被转换成“待处理事务“存入“待处理事务Buffer”中，并唤醒事务处理线程来“待处理事务”；
3）事务处理线程从“待处理事务Buffer”中取得一个“待处理事务”，将其解析后把操作结果返回给请求者并保存到事务处理日志中，已备其他计算机增量修改配置文件使用；
4）其他计算机请求增量配置文件信息时，配置文件事务处理模块根据请求计算机提供的配置文件版本号提供其需要的事务处理日志信息；
5）请求增量配置文件信息计算机得到事务处理日志信息后，按事务处理日志信息逐条执行并交给配置文件读写模块来完成。
上述事务包括版本号、事务操作事件、事务操作目标以及事务操作参数；版本号由“年月日时分秒”和“4字节流水号”组成，事务操作事件包括 “增加”、“修改”、“删除”，事务操作目标就是xml中的节点路径，事务操作参数则是对事务操作事件的补充。
在操作步骤2）过程中，事务处理线程把从“待处理事务Buffer”中取得一个“待处理事务”解析后，根据事务操作事件对事务操作目标进行相应的操作，再把操作结果返回给请求者并保存到事务处理日志中。
本发明的一种基于事务的增量式管理集群配置文件方法与现有技术相比，所产生的有益效果是：
本发明通过引入增量式管理集群配置文件方法，各计算机可以根据自己的需求进行按需更新配置文件，从而可以实现集群配置文件的增量同步，大大减少同步配置文件过程中对网络资源的占用，最终达到可以更高效地利用网络带宽的目的。
附图说明
附图1为本发明的配置文件管理模块结构框图。
附图2为本发明的配置文件事务处理模块内部结构框图。
具体实施方式
下面结合附图1、2对本发明的一种基于事务的增量式管理集群配置文件方法作以下详细地说明。
如附图1、2所示，本发明的一种基于事务的增量式管理集群配置文件方法，包括配置文件管理接口层、配置文件事务处理模块以及配置文件读写模块三部分组成的配置文件管理模块，该方法是按以下步骤进行的：
1）配置文件管理接口层接收外部对配置文件的操作接口，将外部请求转发给配置文件事务处理模块；
2）在配置文件事务处理模块中，将外部对配置文件的“增加、修改、删除、查询” 等操作请求被转换成“待处理事务“存入“待处理事务Buffer”中，并唤醒事务处理线程来“待处理事务”；
3）事务处理线程从“待处理事务Buffer”中取得一个“待处理事务”，将其解析后把操作结果返回给请求者并保存到事务处理日志中，已备其他计算机增量修改配置文件使用；
4）其他计算机请求增量配置文件信息时，配置文件事务处理模块根据请求计算机提供的配置文件版本号提供其需要的事务处理日志信息；
5）请求增量配置文件信息计算机得到事务处理日志信息后，按事务处理日志信息逐条执行并交给配置文件读写模块来完成。
上述事务包括版本号、事务操作事件、事务操作目标以及事务操作参数；版本号由“年月日时分秒”和“4字节流水号”组成，事务操作事件包括 “增加”、“修改”、“删除”，事务操作目标就是xml中的节点路径，事务操作参数则是对事务操作事件的补充。
在操作步骤2）过程中，事务处理线程把从“待处理事务Buffer”中取得一个“待处理事务”解析后，根据事务操作事件对事务操作目标进行相应的操作，再把操作结果返回给请求者并保存到事务处理日志中。
Claims (3)
1.一种基于事务的增量式管理集群配置文件方法，包括配置文件管理接口层、配置文件事务处理模块以及配置文件读写模块三部分组成的配置文件管理模块，其特征在于，该方法是按以下步骤进行的：
1）配置文件管理接口层接收外部对配置文件的操作接口，将外部请求转发给配置文件事务处理模块；
2）在配置文件事务处理模块中，将外部对配置文件的“增加、修改、删除、查询” 等操作请求被转换成“待处理事务“存入“待处理事务Buffer”中，并唤醒事务处理线程来“待处理事务”；
3）事务处理线程从“待处理事务Buffer”中取得一个“待处理事务”，将其解析后把操作结果返回给请求者并保存到事务处理日志中，已备其他计算机增量修改配置文件使用；
4）其他计算机请求增量配置文件信息时，配置文件事务处理模块根据请求计算机提供的配置文件版本号提供其需要的事务处理日志信息；
5）请求增量配置文件信息计算机得到事务处理日志信息后，按事务处理日志信息逐条执行并交给配置文件读写模块来完成。
2.根据权利要求1所述的一种基于事务的增量式管理集群配置文件方法，其特征在于，上述事务包括版本号、事务操作事件、事务操作目标以及事务操作参数；版本号由“年月日时分秒”和“4字节流水号”组成，事务操作事件包括 “增加”、“修改”、“删除”，事务操作目标就是xml中的节点路径，事务操作参数则是对事务操作事件的补充。
3.根据权利要求2所述的一种基于事务的增量式管理集群配置文件方法，其特征在于，在操作步骤2）过程中，事务处理线程把从“待处理事务Buffer”中取得一个“待处理事务”解析后，根据事务操作事件对事务操作目标进行相应的操作，再把操作结果返回给请求者并保存到事务处理日志中。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410357809.XA CN104133876A (zh) | 2014-07-25 | 2014-07-25 | 一种基于事务的增量式管理集群配置文件方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410357809.XA CN104133876A (zh) | 2014-07-25 | 2014-07-25 | 一种基于事务的增量式管理集群配置文件方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104133876A true CN104133876A (zh) | 2014-11-05 |
Family
ID=51806554
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410357809.XA Pending CN104133876A (zh) | 2014-07-25 | 2014-07-25 | 一种基于事务的增量式管理集群配置文件方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104133876A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108322319A (zh) * | 2017-01-18 | 2018-07-24 | 贵州白山云科技有限公司 | 一种基于增量日志的日志管理方法及管理装置 |
| CN109446170A (zh) * | 2018-09-13 | 2019-03-08 | 北京米文动力科技有限公司 | 一种配置文件数据同步方法及设备 |
| WO2019196239A1 (zh) * | 2018-04-09 | 2019-10-17 | 平安科技（深圳）有限公司 | 一种线程接口的管理方法、终端设备及计算机可读存储介质 |
-
2014
- 2014-07-25 CN CN201410357809.XA patent/CN104133876A/zh active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108322319A (zh) * | 2017-01-18 | 2018-07-24 | 贵州白山云科技有限公司 | 一种基于增量日志的日志管理方法及管理装置 |
| WO2019196239A1 (zh) * | 2018-04-09 | 2019-10-17 | 平安科技（深圳）有限公司 | 一种线程接口的管理方法、终端设备及计算机可读存储介质 |
| CN109446170A (zh) * | 2018-09-13 | 2019-03-08 | 北京米文动力科技有限公司 | 一种配置文件数据同步方法及设备 |
| CN109446170B (zh) * | 2018-09-13 | 2024-01-19 | 北京米文动力科技有限公司 | 一种配置文件数据同步方法及设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11379428B2 (en) | Synchronization of client machines with a content management system repository | |
| US10152558B2 (en) | Graph operations | |
| US11061925B2 (en) | Multi-task scheduling method and system, application server and computer-readable storage medium | |
| US9110697B2 (en) | Sending tasks between virtual machines based on expiration times | |
| CN106776783B (zh) | 非结构化数据存储管理方法和系统 | |
| CN103379159B (zh) | 一种分布式Web站点数据同步的方法 | |
| JP6521402B2 (ja) | ＫｅｙＶａｌｕｅデータベースのデータテーブルを更新するための方法およびテーブルデータを更新するための装置 | |
| CN103617176A (zh) | 一种实现多源异构数据资源自动同步的方法 | |
| CN104462269A (zh) | 一种异构数据库数据交换方法及系统 | |
| CN108984639B (zh) | 服务器集群的数据处理方法和装置 | |
| CN103646073A (zh) | 一种基于HBase表的条件查询优化方法 | |
| CN108121782A (zh) | 查询请求的分配方法、数据库中间件系统以及电子设备 | |
| CN108536778A (zh) | 一种数据应用共享平台及方法 | |
| CN103699638A (zh) | 一种基于配置参数实现跨数据库类型同步数据的方法 | |
| US20160088077A1 (en) | Seamless binary object and metadata sync | |
| CN105069151A (zh) | HBase二级索引构建装置和方法 | |
| CN104933173A (zh) | 一种用于异构多数据源的数据处理方法、装置和服务器 | |
| CN102479198B (zh) | 一种数据分页方法、装置及系统 | |
| WO2016101799A1 (zh) | 一种基于分布式系统的业务分配方法及装置 | |
| CN112507020A (zh) | 数据同步方法、装置、计算机设备及存储介质 | |
| CN104133876A (zh) | 一种基于事务的增量式管理集群配置文件方法 | |
| JP7366664B2 (ja) | オフラインブリーフケース同期 | |
| CN105335450B (zh) | 数据存储处理方法及装置 | |
| CN110069565B (zh) | 一种分布式数据库数据批量处理的方法及装置 | |
| CN110347654B (zh) | 一种上线集群特性的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20141105 |