CN109391487A - 一种配置更新方法和系统 - Google Patents
一种配置更新方法和系统 Download PDFInfo
- Publication number
- CN109391487A CN109391487A CN201710667450.XA CN201710667450A CN109391487A CN 109391487 A CN109391487 A CN 109391487A CN 201710667450 A CN201710667450 A CN 201710667450A CN 109391487 A CN109391487 A CN 109391487A
- Authority
- CN
- China
- Prior art keywords
- configuration information
- configuration
- cloud storage
- local cache
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
- H04L41/0813—Configuration setting characterised by the conditions triggering a change of settings
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Abstract
本发明提供了一种配置更新方法和系统。涉及云存储领域；解决了现有的静态配置系统存在效率及可靠性低下的问题。该方法包括：使用分布式云存储系统存储配置信息，所述分布式云存储系统包含多个节点，所述分布式云存储系统中的任一节点接受用户接入，根据接收到的配置管理指令更新本地的配置信息，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作；将更新后的配置信息同步至整个所述分布式云存储系统。本发明提供的技术方案适用于配置信息实时更新，实现了分布式的配置信息管理。
Description
技术领域
本发明涉及云存储领域，尤其涉及一种配置更新方法和系统。
背景技术
在云存储系统中，有一些配置信息是用户根据当前应用需求等因素自行配置的，如果用户需要可以随时修改配置信息，这些配置信息会作用于整个云存储系统，影响云存储系统的服务行为。如，启用某个特殊的服务或设置一些参数等。这些配置信息数据量比较大，更新频繁，且对实时性具有较高要求，用户对配置信息的更新需要在较短时间内生效。
目前的简单静态配置系统无法有效地满足用户实时更新配置信息并接入应用的需求，具体来说具有如下缺陷：
1、配置信息无法动态更新，不适合配置频繁更改的场景；
2、配置信息集中存放在一个设备或实体上，一旦该设备或实体发生故障，容易造成配置信息全部丢失；同时也会限制读写配置信息任务线程的并发访问量，不适合大规模网络配置的场景。
综上，现有的静态配置系统存在效率及可靠性低下的问题。
发明内容
本发明旨在解决上面描述的问题。
根据本发明的第一方面，提供了一种配置更新方法，使用分布式云存储系统存储配置信息，所述分布式云存储系统包含多个节点，该方法包括：
所述分布式云存储系统中的任一节点接受用户接入，根据接收到的配置管理指令更新本地的配置信息，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作；
将更新后的配置信息同步至整个所述分布式云存储系统。
优选的，该方法还包括：
服务系统在需要读取配置信息时，读取本地缓存中的配置信息。
优选的，该方法还包括：
所述服务系统在本地缓存中的配置信息超过预置的第一时限的情况下，生成异步更新任务，更新本地缓存中缓存的配置信息。
优选的，该方法还包括：
所述服务系统在本地缓存中的配置信息超过所述第一时限的时间超过预置的第二时限的情况下，判定发生配置信息更新异常，所述第二时限大于更新配置信息所需时间。
优选的，所述服务系统在更新配置信息时，选择所述分布式存储系统中的任一节点进行接入，获取最新的配置信息。
优选的，所述服务系统选择性能较好或距离较近的节点进行接入及最新的配置信息的获取。
根据本发明的另一方面，提供了一种配置更新系统，包含由多个节点构成的分布式云存储子系统；
所述分布式云存储子系统中的任一节点，用于存储配置信息，接受用户接入，根据接收到的配置管理指令更新本地的配置信息，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作，将更新后的配置信息同步至整个所述分布式云存储系统。
优选的，该系统还包括：
服务子系统，用于在需要读取配置信息时，读取本地缓存中的配置信息。
优选的，所述服务子系统，还用于在本地缓存中的配置信息超过预置的第一时限的情况下，生成异步更新任务，更新本地缓存中缓存的配置信息。
优选的，所述服务子系统，具体用于在更新配置信息时，选择所述分布式存储系统中的任一节点进行接入，获取最新的配置信息。
本发明提供了一种配置更新方法和系统，使用分布式云存储系统存储配置信息，分布式云存储系统中的任一节点接受用户接入，根据接收到的配置管理指令更新本地的配置信息，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作；将更新后的配置信息同步至整个所述分布式云存储系统。服务系统在需要读取配置信息时，优选使用本地缓存中的配置信息，并周期性的对配置信息进行异步更新，使读取执行配置信息与更新配置信息两个流程相互独立，保证了服务的时效性。实现了分布式的配置信息管理，解决了现有的静态配置系统存在效率及可靠性低下的问题。使用分布式云存储系统存储配置信息，可靠性高，吞吐量大，用户修改配置更加方便；此外使用异步方式更新服务系统本地缓存的配置信息，去掉先获取最新配置信息过程造成的延时，提高了服务效率。
参照附图来阅读对于示例性实施例的以下描述，本发明的其他特性特征和优点将变得清晰。
附图说明
并入到说明书中并且构成说明书的一部分的附图示出了本发明的实施例，并且与描述一起用于解释本发明的原理。在这些附图中，类似的附图标记用于表示类似的要素。下面描述中的附图是本发明的一些实施例，而不是全部实施例。对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，可以根据这些附图获得其他的附图。
图1示例性地示出了本发明的实施例一提供的一种配置更新方法的流程；
图2示例性地示出了本发明的实施例二提供的一种配置更新系统的架构。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。
目前的简单静态配置系统无法有效地满足用户实时更新配置信息并接入应用的需求，具体来说具有如下缺陷：
1、配置信息无法动态更新，不适合配置频繁更改的场景；
2、配置信息集中存放在一个设备或实体上，一旦该设备或实体发生故障，容易造成配置信息全部丢失；同时也会限制读写配置信息任务线程的并发访问量，不适合大规模网络配置的场景。
此外，在服务系统一侧，目前的技术方案是同步更新缓存，当本地缓存的配置信息失效时，需要同步的去配置中心获取最新配置，由于这个过程通常比较耗时，导致服务系统服务延迟。
为了解决上述问题，本发明的实施例提供了一种配置更新方法和系统。将配置信息存储在分布式存储系统中，分布式云存储系统包含多个节点，分布式存储系统支持数据冗余备份，具有高可靠性和高可用性，同时由于信息分散存放在许多不同的节点上，可以支持高并发的访问，不存在单节点带来的性能和网络带宽限制。
由于配置信息存放在分布式云存储系统中，用户可以方便的更新配置。本发明的实施例中，所有的配置信息都是以键值(key value)的形式存放，key为配置信息内容的名字，value为相应内容的值。用户通过访问分布式云存储系统中的任一节点，改变某个key对应的value。
首先结合附图，对本发明的实施例一进行说明。
本发明实施例提供了一种配置更新方法，通过分布式云存储系统存储配置系统，接受用户及服务系统的接入，使用该方法完成配置信息更新下发的流程如图1所示，包括：
步骤101、分布式云存储系统中的任一节点接受用户接入，根据接收到的配置管理指令更新本地的配置信息；
本发明实施例中，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作。具体的，可对配置管理指令类型及操作权限根据实际应用需要进行进一步配置。本发明实施例对此不作限定，能够实现管理配置信息的操作指令，均在本发明的保护范围之内。
本步骤中，分布式云存储系统中的任一节点均能接受有管理权限的用户接入，并根据用户输入的配置管理指令，首先更新本地的配置信息。
步骤102、节点将更新后的配置信息同步至整个所述分布式云存储系统；
本步骤中，节点在根据用户操作更新完本地的配置信息后，再将更新后的配置信息同步至整个分布式云存储系统。
步骤103、所述服务系统在更新配置信息时，选择所述分布式存储系统中的任一节点进行接入，获取最新的配置信息；
优选的，所述服务系统选择性能较好或距离较近的节点进行接入及最新的配置信息的获取。
更新周期的长度设置可根据当前业务需要及服务系统、分布式云存储系统的负载及网络传输性能情况进行调整。为了防止服务系统在读取本地缓存的配置信息发现过期后再向配置中心请求最新的配置信息导致的服务延迟，本发明实施例中，服务系统更新本地缓存中的配置信息与服务系统读取执行本地缓存中的配置信息是两个相互独立的过程。即更新不以本地缓存中的配置信息过期为直接触发条件。
如果服务系统本地多个进程均需获取同一个配置信息，并且这个配置在本地的缓存已经过期，那么只需要一个建立异步获取任务进行配置信息获取就可以了，不需要每个进程都开启一个异步获取任务。为了防止这种情况发生，各个进程之间共享一个异步获取任务的集合(可以通过共享内存实现)，每个异步获取任务由该任务所要获取的配置信息的名字标识，在每个进程准备创建新的异步获取任务时，需要先查看对应的异步获取任务是否已经存在，如果存在，说明其他进程已经创建了获取该配置的异步获取任务，就不需要再创建了。
步骤104、服务系统在需要读取配置信息时，读取本地缓存中的配置信息；
本步骤中，服务系统在需要读取配置信息执行相应配置时，首先读取本地缓存中的配置信息。
步骤105、所述服务系统在本地缓存中的配置信息超过预置的第一时限的情况下，生成异步更新任务，更新本地缓存中缓存的配置信息；
本发明实施例中，读取本地缓存中的配置信息与向分布式云存储系统获取配置信息的更新是两个相互独立的过程。即，服务系统默认当前本地缓存中的配置信息即是可直接使用的配置信息。
这样，在进行配置信息更新的同时，服务系统亦可使用当前本地缓存的配置信息进行配置，提供服务，保证了服务的即时连续性。
本发明实施例中，可设置一第一时限，该第一时限用于表明配置信息的有效性。在读取配置信息，发现配置信息存在的时间超过所述第一时限时，认为有必要对配置信息进行一次更新，生成异步更新任务，更新本地缓存中缓存的配置信息。以获取新的配置信息的时间为起点，继续检测新的配置信息的有效性。
步骤106、所述服务系统在本地缓存中的配置信息超过所述第一时限的时间超过预置的第二时限的情况下，判定发生配置信息更新异常；
本步骤中，仍然可对本地缓存的配置信息设置一更新过期时间第二时限，所述第二时限大于更新配置信息所需时间，该第二时限可用于发现更新过程异常。在配置信息过期的时间超过该第二时限时，就说明至少一个更新配置信息的周期没有正常更新配置信息，发生了异常。可在日志中记录异常/错误信息，提示可能是异步获取最新配置失败；亦可将异常/错误信息上报至控制台，或通过邮件、短信等手段向相关设备、人员发出告警。
下面结合附图，对本发明的实施例二进行说明。
本发明实施例提供了一种配置更新系统，如图2所示，包含由多个节点构成的分布式云存储子系统；
所述分布式云存储子系统中的任一节点，用于存储配置信息，接受用户接入，根据接收到的配置管理指令更新本地的配置信息，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作，将更新后的配置信息同步至整个所述分布式云存储系统。
优选的，该系统还包括：
服务子系统，用于在需要读取配置信息时，读取本地缓存中的配置信息。
优选的，所述服务子系统，还用于周期性的更新本地缓存中缓存的配置信息，所述服务子系统更新本地缓存中缓存的配置信息的周期小于所述本地缓存中的配置信息的过期时间。
优选的，所述服务子系统，具体用于在更新配置信息时，选择所述分布式存储系统中的任一节点进行接入，获取最新的配置信息。
本发明的实施例提供了一种配置更新方法和系统，使用分布式云存储系统存储配置信息，分布式云存储系统中的任一节点接受用户接入，根据接收到的配置管理指令更新本地的配置信息，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作；将更新后的配置信息同步至整个所述分布式云存储系统。服务系统在需要读取配置信息时，优选使用本地缓存中的配置信息，并周期性的对配置信息进行异步更新，使读取执行配置信息与更新配置信息两个流程相互独立，保证了服务的时效性。实现了分布式的配置信息管理，解决了现有的静态配置系统存在效率及可靠性低下的问题。使用分布式云存储系统存储配置信息，可靠性高，吞吐量大，用户修改配置更加方便；此外使用异步方式更新服务系统本地缓存的配置信息，去掉先获取最新配置信息过程造成的延时，提高了服务效率。
上面描述的内容可以单独地或者以各种方式组合起来实施，而这些变型方式都在本发明的保护范围之内。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制。尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种配置更新方法，其特征在于，使用分布式云存储系统存储配置信息，所述分布式云存储系统包含多个节点，该方法包括：
所述分布式云存储系统中的任一节点接受用户接入，根据接收到的配置管理指令更新本地的配置信息，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作；
将更新后的配置信息同步至整个所述分布式云存储系统。
2.根据权利要求1所述的配置更新方法，其特征在于，该方法还包括：
服务系统在需要读取配置信息时，读取本地缓存中的配置信息。
3.根据权利要求2所述的配置更新方法，其特征在于，该方法还包括：
所述服务系统在本地缓存中的配置信息超过预置的第一时限的情况下，生成异步更新任务，更新本地缓存中缓存的配置信息。
4.根据权利要求3所述的配置更新方法，其特征在于，该方法还包括：
所述服务系统在本地缓存中的配置信息超过所述第一时限的时间超过预置的第二时限的情况下，判定发生配置信息更新异常，所述第二时限大于更新配置信息所需时间。
5.根据权利要求3所述的配置更新方法，其特征在于，
所述服务系统在更新配置信息时，选择所述分布式存储系统中的任一节点进行接入，获取最新的配置信息。
6.根据权利要求5所述的配置更新方法，其特征在于，
所述服务系统选择性能较好或距离较近的节点进行接入及最新的配置信息的获取。
7.一种配置更新系统，其特征在于，包含由多个节点构成的分布式云存储子系统；
所述分布式云存储子系统中的任一节点，用于存储配置信息，接受用户接入，根据接收到的配置管理指令更新本地的配置信息，所述配置管理指令指示进行添加配置信息或修改配置信息或删除配置信息的操作，将更新后的配置信息同步至整个所述分布式云存储系统。
8.根据权利要求7所述的配置更新系统，其特征在于，该系统还包括：
服务子系统，用于在需要读取配置信息时，读取本地缓存中的配置信息。
9.根据权利要求8所述的配置更新系统，其特征在于，
所述服务子系统，还用于在本地缓存中的配置信息超过预置的第一时限的情况下，生成异步更新任务，更新本地缓存中缓存的配置信息。
10.根据权利要求9所述的配置更新系统，其特征在于，
所述服务子系统，具体用于在更新配置信息时，选择所述分布式存储系统中的任一节点进行接入，获取最新的配置信息。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710667450.XA CN109391487A (zh) | 2017-08-07 | 2017-08-07 | 一种配置更新方法和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710667450.XA CN109391487A (zh) | 2017-08-07 | 2017-08-07 | 一种配置更新方法和系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109391487A true CN109391487A (zh) | 2019-02-26 |
Family
ID=65413690
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710667450.XA Pending CN109391487A (zh) | 2017-08-07 | 2017-08-07 | 一种配置更新方法和系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109391487A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110580181A (zh) * | 2019-07-12 | 2019-12-17 | 平安普惠企业管理有限公司 | 基于云分布式配置管理方法、电子装置及计算机设备 |
| CN110912977A (zh) * | 2019-11-15 | 2020-03-24 | 北京浪潮数据技术有限公司 | 一种配置文件的更新方法、装置、设备及存储介质 |
| CN111224826A (zh) * | 2020-01-07 | 2020-06-02 | 深圳市网心科技有限公司 | 基于分布式系统的配置更新方法、设备、系统及介质 |
| CN111414424A (zh) * | 2020-03-23 | 2020-07-14 | 北京思特奇信息技术股份有限公司 | 一种配置数据自动同步redis的方法、系统、介质及设备 |
| WO2022221882A1 (en) * | 2021-04-16 | 2022-10-20 | Thomson Reuters Enterprise Centre Gmbh | Systems and methods for local and cloud-based tax determination operations |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103152390A (zh) * | 2013-02-04 | 2013-06-12 | 华为技术有限公司 | 分布式存储系统的节点配置方法、装置、节点及系统 |
| CN104243515A (zh) * | 2013-06-13 | 2014-12-24 | 中兴通讯股份有限公司 | 一种配置信息处理方法及装置 |
| CN104424333A (zh) * | 2013-09-11 | 2015-03-18 | 北大方正集团有限公司 | 表格数据加载方法及系统 |
-
2017
- 2017-08-07 CN CN201710667450.XA patent/CN109391487A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103152390A (zh) * | 2013-02-04 | 2013-06-12 | 华为技术有限公司 | 分布式存储系统的节点配置方法、装置、节点及系统 |
| CN104243515A (zh) * | 2013-06-13 | 2014-12-24 | 中兴通讯股份有限公司 | 一种配置信息处理方法及装置 |
| CN104424333A (zh) * | 2013-09-11 | 2015-03-18 | 北大方正集团有限公司 | 表格数据加载方法及系统 |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110580181A (zh) * | 2019-07-12 | 2019-12-17 | 平安普惠企业管理有限公司 | 基于云分布式配置管理方法、电子装置及计算机设备 |
| CN110912977A (zh) * | 2019-11-15 | 2020-03-24 | 北京浪潮数据技术有限公司 | 一种配置文件的更新方法、装置、设备及存储介质 |
| CN111224826A (zh) * | 2020-01-07 | 2020-06-02 | 深圳市网心科技有限公司 | 基于分布式系统的配置更新方法、设备、系统及介质 |
| CN111224826B (zh) * | 2020-01-07 | 2023-04-28 | 深圳市网心科技有限公司 | 基于分布式系统的配置更新方法、设备、系统及介质 |
| CN111414424A (zh) * | 2020-03-23 | 2020-07-14 | 北京思特奇信息技术股份有限公司 | 一种配置数据自动同步redis的方法、系统、介质及设备 |
| CN111414424B (zh) * | 2020-03-23 | 2023-08-04 | 北京思特奇信息技术股份有限公司 | 一种配置数据自动同步redis的方法、系统、介质及设备 |
| WO2022221882A1 (en) * | 2021-04-16 | 2022-10-20 | Thomson Reuters Enterprise Centre Gmbh | Systems and methods for local and cloud-based tax determination operations |
| US20220335536A1 (en) * | 2021-04-16 | 2022-10-20 | Thomson Reuters Enterprise Centre Gmbh | Systems and methods for local and cloud-based tax determination operations |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11586673B2 (en) | Data writing and reading method and apparatus, and cloud storage system | |
| CN109391487A (zh) | 一种配置更新方法和系统 | |
| US10637916B2 (en) | Method and device for storage resource allocation for video cloud storage | |
| CN104935654B (zh) | 一种服务器集群系统中的缓存方法、写入点客户端和读客户端 | |
| CN109597567B (zh) | 一种数据处理方法和装置 | |
| US11157457B2 (en) | File management in thin provisioning storage environments | |
| CN109842651B (zh) | 一种业务不间断的负载均衡方法和系统 | |
| US20110153570A1 (en) | Data replication and recovery method in asymmetric clustered distributed file system | |
| CN107888666B (zh) | 一种跨地域数据存储系统以及数据同步方法和装置 | |
| US9390156B2 (en) | Distributed directory environment using clustered LDAP servers | |
| US20130031221A1 (en) | Distributed data storage system and method | |
| CN106326239A (zh) | 分布式文件系统及其文件元信息管理方法 | |
| CN113268472B (zh) | 一种分布式数据存储系统及方法 | |
| CN112199419A (zh) | 一种分布式时序数据库、存储方法、设备及存储介质 | |
| US8086733B2 (en) | Method and program for supporting setting of access management information | |
| CN103501319A (zh) | 一种低延迟的面向小文件的分布式存储系统 | |
| CN105278882A (zh) | 一种分布式文件系统的磁盘管理方法 | |
| CN110633046A (zh) | 一种分布式系统的存储方法、装置、存储设备及存储介质 | |
| CN110244901A (zh) | 任务分配方法及装置、分布式存储系统 | |
| CN111225003B (zh) | 一种nfs节点配置方法和装置 | |
| CN105760391A (zh) | 数据动态重分布的方法、数据节点、名字节点及系统 | |
| CN113079098A (zh) | 路由更新的方法、装置、设备和计算机可读介质 | |
| CN110298031B (zh) | 一种词典服务系统及模型版本一致性配送方法 | |
| CN111381766B (zh) | 一种磁盘动态加载的方法和云存储系统 | |
| CN109992447B (zh) | 数据复制方法、装置及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190226 |