CN113157604A - 基于分布式系统的数据获取方法、装置及相关产品 - Google Patents

Abstract

本发明实施例提供一种基于分布式系统的数据获取方法、装置及相关产品，该方法包括：接收终端设备发送的目标业务处理请求，目标业务为与全局控制信息相关的业务；确定接收到目标业务处理请求的当前系统时间；若确定当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息；若确定当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息，数据更新时段位于业务低峰时段；根据全局控制信息对目标业务进行处理。所以能够支持对全局控制信息读取性能的大量扩展，提高分布式系统的性能。能够最大限度地满足可用性要求。

Description

基于分布式系统的数据获取方法、装置及相关产品

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种基于分布式系统的数据获取方法、装置及相关产品。

背景技术

由于分布式架构能够解决集中式架构的种种问题，所以被广泛应用于互联网以及各行各业的信息化系统建设中。但分布式系统只能满足“一致性(英文为：Consistency)”、“可用性(英文为：Availability)”、“分区容错性(英文为：Partition Tolerance)”三个特性中的两个，由于在大规模的分布式架构环境下网络故障是常态，所以只能在可用性和一致性两者间做出选择。

而对于大型互联网面客系统而言，提供连续可靠高效的服务尤为重要，往往采用可用容错模型(简称：AP模型)并承诺保证数据的最终一致性。但在分布式系统中总是存在一些要求强一致的数据，其为全局控制信息。全局控制信息具备轻量、更新频度低、读取频度高、一致性要求严格的特点。

在现有技术中，为保障一致性，全局控制信息一般存储于分布式缓存中，分布式缓存位于独立的服务器中。分布式系统的各个应用服务节点服务器在每次读取全局控制信息时，均需要与该独立的服务器建立网络连接。

所以现有技术中存储全局控制信息的服务器会形成单点，并不满足分布式系统的可用性要求，常见的网络抖动现象，网络连接延时现象均会降低整体性能。此外由于独立的服务器的计算能力及网络承受能力有限，应用服务节点服务器按照服务需求均从其读取数据，会对分布式系统的性能造成瓶颈。

发明内容

本发明实施例提供一种基于分布式系统的数据获取方法、装置及相关产品，用以解决现有技术中每次获取全局控制信息均要访问分布式缓存，导致分布式缓存自身故障及网络拌动均会直接影响分布式系统的整体可用性(即分布式缓存部件是分布式系统的单点)，且分布式缓存的性能瓶颈直接制约了分布式系统的性能及可扩展能力技术问题。

第一方面，本发明实施例提供一种基于分布式系统的数据获取方法，所述方法应用于分布式系统中的每个应用服务节点服务器，所述分布式系统中的应用服务节点服务器划分为多个集群，每个集群分别与分布式系统中对应的集群配置库设备通信连接，每个集群还与分布式系统中的主用远端存储设备或备用远端存储设备通信连接，所述方法包括：

接收终端设备发送的目标业务处理请求，所述目标业务为与全局控制信息相关的业务；

确定接收到所述目标业务处理请求的当前系统时间；

若确定所述当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息；

若确定所述当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息，所述数据更新时段位于业务低峰时段；

根据所述全局控制信息对目标业务进行处理。

第二方面，本发明实施例提供一种基于分布式系统的数据获取装置，所述装置应用于分布式系统中的每个应用服务节点服务器中，所述分布式系统中的应用服务节点服务器划分为多个集群，每个集群分别与分布式系统中对应的集群配置库设备通信连接，每个集群还与分布式系统中的主用远端存储设备或备用远端存储设备通信连接，所述装置包括：

接收模块，用于接收终端设备发送的目标业务处理请求，所述目标业务为与全局控制信息相关的业务；

确定模块，用于确定接收到所述目标业务处理请求的当前系统时间；

读取模块，用于若确定所述当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息；

所述读取模块，还用于若确定所述当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息；

处理模块，用于根据所述全局控制信息对目标业务进行处理。

第三方面，本发明实施例提供一种应用服务节点服务器，包括：至少一个处理器，存储器及收发器；

所述处理器、所述存储器与所述收发器通过电路互联；

所述存储器存储计算机执行指令；所述收发器，用于与终端设备、集群配置库设备、主用远端存储设备或备用远端存储设备之间收发数据；

所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如第一方面所述的方法。

第四方面，本发明实施例提供一种应用服务节点服务器，包括：至少一个处理器及存储器；

所述存储器存储计算机执行指令；

所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如第一方面所述的方法。

第五方面，本发明实施例提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如第一方面所述的方法。

第六方面，本发明实施例提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现第一方面所述的方法。

本发明实施例提供的基于分布式系统的数据获取方法、装置及相关产品，通过接收终端设备发送的目标业务处理请求，目标业务为与全局控制信息相关的业务；确定接收到目标业务处理请求的当前系统时间；若确定当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息；若确定当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息，数据更新时段位于业务低峰时段；根据全局控制信息对目标业务进行处理。由于只有在数据更新时段，应用服务节点服务器才从主用远端存储设备或备用远端存储设备读取全局控制信息。并且全局控制信息更新时段在业务低峰时段，所以能够支持对全局控制信息读取性能的大量扩展，提高分布式系统的性能。即使发生网络抖动现象，网络连接延时现象也不会降低整体性能。并且本方案中只有在数据更新时段，才从远端存储设备读取全局控制信息，大部分时间均从本地缓存中读取全局控制信息，能够最大限度地满足可用性要求。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是可以实现本发明实施例的基于分布式系统的数据获取方法的一种网络架构图；

图2是本发明一实施例提供的基于分布式系统的数据获取方法的流程示意图；

图3是本发明另一实施例提供的基于分布式系统的数据获取方法的流程示意图；

图4是本发明另一实施例提供的基于分布式系统的数据获取方法中步骤209的流程示意图；

图5是本发明一实施例提供的基于分布式系统的数据获取装置的结构示意图；

图6是用来实现本发明实施例的基于分布式系统的数据获取方法的应用服务节点服务器的第一框图；

图7是用来实现本发明实施例的基于分布式系统的数据获取方法的应用服务节点服务器的第二框图。

通过上述附图，已示出本公开明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围，而是通过参考特定实施例为本领域技术人员说明本公开的概念。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

首先对本发明实施例所涉及的名词进行解释：

分布式系统：分布式系统是一种其组件位于不同的联网计算机上的系统，然后通过互相传递消息来进行通信和协调。为了达到共同的目标，这些组件会相互作用，即涉及多个系统或进程协作才能提供一个完整功能的系统就是“分布式系统”。它用更廉价的机器处理海量的服务请求和数据，解决性能、可用性和可扩展性问题，由于通信异常/网络分区不可避免，强一致与可用性难以同时保证。

一致性/强一致性：系统在一致状态下执行更新操作后，数据的多个副本仍能保持一致。即客户端的每次读操作，不论访问哪个节点，要么获得最新的数据，要么读取失败。

可用性：系统服务一直处于可用的状态，终端设备的请求总能在有限的时间内返回结果。有限的时间对于不同的系统要求不同，取决于用户的期望；响应结果不一定是最新数据，但必须是正常可理解的，不能是系统错误。

分区容错性：节点之间发生网络异常产生“网络分区”后，分布式系统仍然是可用。

最终一致性：系统中所有的数据副本在经过一段时间的同步后，最终能够达到一个一致的状态。

AP模型：又称为：可用容错模型。用户通过终端设备访问分布式系统的时候，总能得到响应数据，不会出现响应错误，但当出现分区故障时，相同的读操作，访问不同的节点，得到响应数据可能不一样。

为了清楚理解本申请的技术方案，首先对现有技术的方案进行详细介绍。

现有技术中，分布式系统在存储数据时，根据数据类型不同，分布策略也不同。如业务类数据由于量大按一定规则进行分片存储，配置类、参数类数据由于量小则冗余存储在所有应用服务节点服务器上。而全局控制信息具备轻量、更新频度低、读取频度高、一致性要求严格的特点，对于全局控制信息存储在分布式缓存中，如Redis缓存、memcached缓存。所以存储全局控制信息的服务器会形成单点，并不满足分布式系统的可用性要求。此外由于独立的服务器的计算能力及网络承受能力有限，应用服务节点服务器按照服务需求均从其读取数据，会对分布式系统的性能造成瓶颈。并且常见的网络抖动现象，网络连接延时现象均会降低整体性能。

所以在面对现有技术的技术问题时，发明人通过创造性的研究后发现，由于全局控制信息具备轻量、更新频度低、读取频度高、一致性要求严格的特点，可首先将存储全局控制信息的设备不再形成单点，而既包括主用远端存储设备又包括备用远端存储设备。默认配置在启动及数据更新时段，从主用远端存储设备获取全局控制信息，在主用远端存储设备发生异常时，从备用远端存储设备获取全局控制信息。为了减少应用服务节点与远端存储设备通信连接的次数，可将全局控制信息按照策略存储在应用服务节点的本地缓存和远端存储设备中。在读取全局控制信息时，在应用服务启动及数据更新时段从主用远端存储设备或备用远端存储设备读取全局控制信息，在纯数据读取时段，从本地缓存中读取全局控制信息。并且为了准确确定每个全局控制信息是否需要更新，及当前读取数据的时间是否处于数据更新时段，可将配置信息存储在集群配置库集群中。为了使分布式系统整体满足可用性要求并为了更加节省资源，将应用服务节点服务器划分为多个集群，为每个集群分配配置信息，即每个集群分别与集群配置库设备通信连接。由于只有在启动及数据更新时段，应用服务节点服务器才从对应的远端存储设备读取全局控制信息。并且全局控制信息更新时段在业务低峰时段，所以能够支持对全局控制信息读取性能的大量扩展，提高分布式系统的性能。即使发生网络抖动现象，网络连接延时现象也不会降低整体性能。并且本方案中只有在数据更新时段，才从远端存储设备读取全局控制信息，大部分时间均从本地缓存中读取全局控制信息，能够最大限度地满足可用性要求。

所以发明人基于上述的创造性发现，提出了本发明实施例的技术方案。下面对本发明实施例提供的基于分布式系统的数据获取方法的应用场景和网络架构进行介绍。

本发明实施例提供的基于分布式系统的数据获取方法可应用在采用分布式架构的各种各行各业的数据处理系统中。如银行技术领域的数据处理系统中。在银行技术领域的数据处理系统中，会计日期是银行进行准确帐务核算的单位与基础要素，每一笔金融性交易均需读取会计日期(即交易发生银行的核算日期)，并在交易处理过程中按会计日期记帐。而包括会计日期在内的全局控制信息数据具有以下特点：(1)该数据访问的频度很高，对数据读取的性能要求高；(2)该数据是业务逻辑的关键信息，无此信息则后续处理失败，对数据的可用性要求高；(3)该数据更新的频度低，但要求更新实施后立即同步到各个节点，对数据的一致性要求高。所以会计日期满足全局控制信息的上述全部特点，可采用本发明实施例提供的基于分布式系统的数据获取方法来获取会计日期。

本发明实施例提供的基于分布式系统的数据获取方法的网络架构为分布式系统架构。如图1所示，在分布式系统中包括：多个应用服务节点服务器，在图1中分别为：A1-AN，B1-BN，C1-CN。还包括：多个集群配置库设备1、主用远端存储设备2及备用远端存储设备3。其中，多个应用服务节点服务器划分为多个集群，在图1中包括三个集群，分别为AN、BN、CN。每个集群分别与对应的集群配置库设备1通信连接，每个集群还与主用远端存储设备2或备用远端存储设备3通信连接。

其中，主用远端存储设备及备用远端存储设备为具备持久化存储能力、吞吐量(简称：TPS)可满足数据更新时段要求、对单一数据读写有基本一致性保证的设备。

下面以具体地实施例对本发明的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本发明的实施例进行描述。

实施例一

图2是本发明一实施例提供的基于分布式系统的数据获取方法的流程示意图，如图2所示，本实施例提供的基于分布式系统的数据获取方法的执行主体为基于分布式系统的数据获取装置，该基于分布式系统的数据获取装置位于分布式系统中的每个应用服务节点服务器中，分布式系统中的应用服务节点服务器划分为多个集群，每个集群分别与分布式系统中对应的集群配置库设备通信连接，每个集群还与分布式系统中的主用远端存储设备或备用远端存储设备通信连接，则本实施例提供的基于分布式系统的数据获取方法包括以下步骤：

步骤101，接收终端设备发送的目标业务处理请求，目标业务为与全局控制信息相关的业务。

本实施例中，分布式系统包括多个应用服务节点服务器，所以可按照预先配置的业务处理策略，由某个应用服务节点服务器接收终端设备发送的业务处理请求。该应用服务节点服务器可对业务处理请求的业务类型进行解析，若确定业务类型是与某全局控制信息相关的业务，则确定该业务处理请求为目标业务处理请求。

本实施例中，可预先存储有目标业务类型与全局控制信息的标识信息的映射关系，则在确定出目标业务类型后，可根据该映射关系确定出对应的全局控制信息的标识信息，进而确定出该目标业务处理请求需要的全局控制信息。

其中，全局控制信息为具备轻量、更新频度低、读取频度高、一致性要求严格的特点的信息。

步骤102，确定接收到目标业务处理请求的当前系统时间。

本实施例中，在接收到目标业务处理请求后，采集分布式系统的时间，将分布式系统改的时间确定为当前系统时间。

步骤103，若确定当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息。

步骤104，若确定当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息。

其中，数据更新时段位于业务低峰时段。如业务低峰时段为午夜时段，则数据更新时段也位于午夜时段。

本实施例中，在每个应用服务节点服务器的本地缓存中预先存储了全局控制信息更新计划信息及数据更新时段读取数据时长。在全局控制信息更新计划信息中包括全局控制信息的标识信息及对应的更新时间，所以根据全局控制信息更新计划信息及数据更新时段读取数据时长可确定对于本次目标业务处理请求，当前系统时间是否处于全局控制信息对应的数据更新时段。若确定不处于全局控制信息对应的数据更新时段，则确定处于全局控制信息对应的纯数据读取时段，则从该应用服务节点服务器对应的本地缓存通过全局控制信息的标识信息读取全局控制信息。若确定处于全局控制信息对应的数据更新时段，则从本次缓存中确定使用的远端存储设备的标识信息，根据使用的远端存储设备的标识信息确定需要访问的远端存储设备，进而从使用的远端存储设备读取全局控制信息。

其中，使用的远端存储设备的标识信息为主用远端存储设备的标识信息或备用远端存储设备的标识信息。

步骤105，根据全局控制信息对目标业务进行处理。

本实施例中，根据全局控制信息对目标业务进行处理，并根据目标业务处理后的结果，向终端设备发送响应信息。

本实施例提供的基于分布式系统的数据获取方法，通过接收终端设备发送的目标业务处理请求，目标业务为与全局控制信息相关的业务；确定接收到目标业务处理请求的当前系统时间；若确定当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息；若确定当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息，数据更新时段位于业务低峰时段；根据全局控制信息对目标业务进行处理。由于只有在数据更新时段，应用服务节点服务器才从主用远端存储设备或备用远端存储设备读取全局控制信息。并且全局控制信息更新时段在业务低峰时段，所以能够支持对全局控制信息读取性能的大量扩展，提高分布式系统的性能。即使发生网络抖动现象，网络连接延时现象也不会降低整体性能。并且本方案中只有在数据更新时段，才从远端存储设备读取全局控制信息，大部分时间均从本地缓存中读取全局控制信息，能够最大限度地满足可用性要求。

实施例二

图3是本发明另一实施例提供的基于分布式系统的数据获取方法的流程示意图，如图3所示，本实施例提供的基于分布式系统的数据获取方法在实施例一提供的基于分布式系统的数据获取方法的基础上，对步骤104的进一步细化，并且还包括了其他步骤，则本实施例提供的基于分布式系统的数据获取方法包括以下步骤：

步骤201，若监测到启动应用服务，则从对应的集群配置库设备中读取全局控制信息的配置信息到本地缓存中，配置信息包括：使用的远端存储设备的标识信息。

本实施例中，每个集群与对应的集群配置库设备通信连接。集群内的所有应用服务节点服务器共享集群配置库设备中的配置信息。在集群配置库设备中预先配置并存储有与本集群相关的配置信息。

其中，在集群配置库设备中预先配置及存储的与本集群相关的配置信息包括：使用的远端存储设备的标识信息，可采用REMOTE_FLAG表示。在集群配置库设备配置在使用的远端存储设备的标识信息时，若主用远端存储设备为正常状态，则使用的远端存储设备的标识信息默认为主用远端存储设备的标识信息。若主用远端存储设备为异常状态，则使用的远端存储设备的标识信息为备用远端存储设备的标识信息。使用的远端存储设备的标识信息可以为使用的远端存储设备的IP地址，或其他表示唯一在使用的远端存储设备的信息。

本实施例中，在集群配置库设备中预先配置及存储的全局控制信息的配置信息还包括：全局控制信息更新计划信息。其中，全局控制信息更新计划信息可采用UPD_PLAN表示，全局控制信息更新计划信息表示即全局控制信息将在什么时间被更新。这里的时间指的是分布式系统的时钟时间。若全局控制信息没有更新计划，则对应的更新计划信息可配置为空。

本实施例中，在集群配置库设备配置全局控制信息更新计划信息时，如表1所示，在更新计划信息中包括全局控制信息的标识信息及对应的更新时间。如在表1中，“GLB_XXXX”为全局控制信息的标识信息，“2020/07/0623:30”为对应的更新时间。则表1中的全局控制信息的更新计划信息表示取值为GLB_XXXX的全局控制信息将在2020/08/06 23:30被更新。

其中，全局控制信息更新计划信息可采用键值对(英文为：KEY/VALUE)结构的对象存储，如可以为MAP的形式，可便于判断全局控制信息是否存在更新计划信息。

表1：全局控制信息更新计划信息示意表

GLB_INFO	更新时间
		GLB_XXXX	2020/07/06 23:30

本实施例中，在集群配置库设备中预先配置及存储的全局控制信息的配置信息还包括：数据更新时段读取数据时长。其中，数据更新时段读取数据时长采用SPAN表示。计算全局控制信息的更新计划信息中的更新时间与对应的数据更新时段读取数据时长的差，可确定各应用服务节点服务器从远端存储设备读取全局控制信息的开始时间，可表示为“UPD_PLAN的更新时间－SPAN”。其中，SPAN的取值大于等于系统时钟同步周期误差即可。

具体地，本实施例中，在执行步骤201时，监测是否启动服务应用，若监测到启动了应用服务，则与对应的集群配置库设备进行通信连接，从对应的集群配置库设备中读取全局控制信息的配置信息到本地缓存中。则在本地缓存中存储的配置信息包括：使用的远端存储设备的标识信息(REMOTE_FLAG)。还包括：全局控制信息更新计划信息(UPD_PLAN)及数据更新时段读取数据时长(SPAN)。

步骤202，根据使用的远端存储设备的标识信息从对应的远端存储设备加载全局控制信息到本地缓存中。

本实施例中，应用服务节点服务器根据使用的远端存储设备的标识信息确定需要与其进行通信连接的远端存储设备是主用远端存储设备还是备用远端存储设备。若使用的远端存储设备的标识信息为主用远端存储设备的标识信息，则与主用远端存储设备进行通信连接，从主用远端存储设备加载全局控制信息到本地缓存中。若使用的远端存储设备的标识信息为备用远端存储设备的标识信息，则与备用远端存储设备进行通信连接，并从备用远端存储设备加载全局控制信息到本地缓存中。

步骤203，接收终端设备发送的目标业务处理请求，目标业务为与全局控制信息相关的业务。

本实施例中，步骤203的实现方式与实施例一中的步骤101的实现方式类似，在此不再一一赘述。

步骤204，若确定目标业务处理请求对应的全局控制信息存在对应的更新计划信息，则确定接收到目标业务处理请求的当前系统时间。

本实施例中，判断目标业务处理请求对应的全局控制信息是否存在对应的更新计划信息，若否，则说明该全局控制信息不需要进行更新，则从应用服务节点服务器对应的本地缓存中读取全局控制信息。若是，在需要确定接收到目标业务处理请求的当前系统时间，并获取本地缓存中的全局控制信息的更新计划信息及数据更新时段读取数据时长。进而确定当前系统时间处于数据更新时段还是纯数据读取时段，以确定是从应用服务节点服务器对应的本地缓存中还是从主用远端存储设备或备用远端存储设备读取全局控制信息。

步骤205，计算目标业务对应的全局控制信息的更新时间与数据更新时段读取数据时长的差值。

本实施例中，计算目标业务对应的全局控制信息的更新时间与数据更新时段读取数据时长的差值可表示为：UPD_PLAN的更新时间－SPAN。

其中，全局控制信息的更新时间与数据更新时段读取数据时长的差值表示应用服务节点服务器从对应的远端存储设备读取全局控制信息的开始时间。

步骤206，判断当前系统时间是否大于或等于差值，若是，则执行步骤207，否则执行步骤208。

步骤207，确定当前系统时间处于数据更新时段。

步骤208，确定当前系统时间处于纯数据读取时段。

本实施例中，判断当前系统时间是否大于或等于差值，若确定当前系统时间大于或等于差值，则确定当前系统时间处于数据更新时段，说明应用服务节点服务器在当前系统时间开始可以从对应的远端存储设备读取全局控制信息，若确定当前系统时间小于差值，则确定当前系统时间处于纯数据读取时段，说明应用服务节点服务器在当前系统时间从应用服务节点服务器对应的本地缓存中读取全局控制信息。

需要说明的是，执行完步骤207后，执行步骤209。执行步骤208后执行步骤210。

步骤209，若确定当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息。

其中，数据更新时段位于业务低峰时段。

作为一种可选实施方式，本实施例中，步骤209包括以下步骤：

步骤2091，若确定当前系统时间处于数据更新时段，则获取使用的远端存储设备的标识信息。

步骤2092，若确定使用的远端存储设备的标识信息为主用远端存储设备标识信息，则从主用远端存储设备读取全局控制信息。

步骤2093，若确定使用的远端存储设备的标识信息为备用远端存储设备标识信息，则从备用远端存储设备读取全局控制信息。

本实施例中，从本地缓存中获取使用的远端存储设备的标识信息，判断使用的远端存储设备的标识信息是主用远端存储设备的标识信息还是备用远端存储设备的标识信息。若确定为主用远端存储设备标识信息，则从主用远端存储设备读取全局控制信息。若确定为备用远端存储设备标识信息，则从备用远端存储设备读取全局控制信息。

步骤210，若确定当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息。

需要说明的是，执行完步骤209之后，执行步骤211。

步骤211，判断本次读取的全局控制信息的取值相较于上次读取的全局控制信息的取值是否发生更新，若是，则还执行步骤212，否则结束。

步骤212，对本地缓存中的全局控制信息的取值进行更新，并再次接收终端设备发送的目标业务处理请求后，从本地缓存中读取取值更新后的全局控制信息。

具体地，本实施例中，上次读取的全局控制信息的取值可以为从对应的远端存储设备读取的，也可从本地缓存中读取的。在本次从对应的远端存储设备或备用远端存储设备读取全局控制信息后，将本次读取的全局控制信息的取值与上次读取的全局控制信息的取值进行对比，判断是否发生更新，若发生了更新，则说明本次读取的全局控制信息的取值是对应的远端存储设备更新后的取值，则对本地缓存中的全局控制信息的取值进行更新，并再次接收终端设备发送的目标业务处理请求后，从本地缓存中读取取值更新后的全局控制信息。若未发生更新，则继续从对应的远端存储设备读取全局控制信息，直到全局控制信息的取值相较于上次读取的全局控制信息的取值发生更新为止。

需要说明的是，若主用远端存储设备或备用远端存储设备准时按照全局控制信息的更新计划信息的更新时间进行全局控制信息的更新，则需要从主用远端存储设备或备用远端存储设备读取全局控制信息的时间趋于SPAN，一般在分钟级别，所以有效减少了从主用远端存储设备或备用远端存储设备读取全局控制信息的时间。

本实施例提供的基于分布式系统的数据获取方法，可由用户触发集群配置库设备对全局控制信息更新计划信息进行更新，以使主用远端存储设备或备用远端存储设备准时按照全局控制信息的更新计划信息的更新时间进行全局控制信息。

所以本实施例中，在集群配置库设备对全局控制信息更新计划信息进行更新后，应用服务节点服务器接收集群配置库设备发送的更新后的全局控制信息更新计划信息；对本地缓存中对应的全局控制信息更新计划信息进行更新，以使主用远端存储设备及备用远端存储设备对存储的全局控制信息进行更新。

具体地，本实施例中，集群配置库设备对全局控制信息更新计划信息进行更新后，可主动将更新后的全局控制信息更新计划信息发送给应用服务节点服务器，应用服务节点服务器对本地缓存中对应的全局控制信息更新计划信息进行更新。

其中，更新后的全局控制信息更新计划信息为对更新计划信息中的更新时间进行了更新。如更新后的全局控制信息更新计划信息可表示为表2。

表2：更新后的全局控制信息更新计划信息示意表

GLB_INFO	更新时间
		GLB_YYYY	2020/07/15 23:30

本实施例中，全局控制信息更新计划信息及更新后的全局控制信息更新计划信息中的更新时间位于业务低峰时段。

本实施例中，全局控制信息更新计划信息及更新后的全局控制信息更新计划信息中的更新时间位于业务低峰时段，则主用远端存储设备和备用远端存储设备会在业务低峰时段进行全局控制信息取值的更新，能够支持对全局控制信息读取性能的大量扩展，提高分布式系统的性能。

作为一种可选实施方式，本实施例中，在步骤209中，从主用远端存储设备或备用远端存储设备读取全局控制信息之后，若确定从主用远端存储设备或备用远端存储设备读取全局控制信息失败，则从本地缓存中读取全局控制信息。

本实施例中，由于远端存储存在故障的概率，当故障时读取全局控制信息失败，为避免目标业务由于缺失关键的全局控制信息而导致后续处理失败，当读取失败时使用本地缓存中的全局控制信息继续后续处理，以最大限度保障分布式系统的整体可用性。

实施例三

图5是本发明一实施例提供的基于分布式系统的数据获取装置的结构示意图，如图5所示，本实施例提供的基于分布式系统的数据获取装置位于分布式系统中的每个应用服务节点服务器中。分布式系统中的应用服务节点服务器划分为多个集群，每个集群分别与分布式系统中对应的集群配置库设备通信连接，每个集群还与分布式系统中的主用远端存储设备或备用远端存储设备通信连接。则本实施例提供的基于分布式系统的数据获取装置30包括：接收模块31，确定模块32，读取模块33，处理模块34。

其中，接收模块31，用于接收终端设备发送的目标业务处理请求，目标业务为与全局控制信息相关的业务。确定模块32，用于确定接收到目标业务处理请求的当前系统时间。读取模块33，用于若确定当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息。读取模块33，还用于若确定当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息。处理模块34，用于根据全局控制信息对目标业务进行处理。

可选地，本实施例提供的基于分布式系统的数据获取装置30还包括：加载模块。

其中，读取模块33，还用于若监测到启动应用服务，则从对应的集群配置库设备中读取全局控制信息的配置信息到本地缓存中，配置信息包括：使用的远端存储设备的标识信息。加载模块，用于根据使用的远端存储设备的标识信息从对应的远端存储设备加载全局控制信息到本地缓存中。

可选地，配置信息还包括：全局控制信息更新计划信息及数据更新时段读取数据时长；更新计划信息中包括全局控制信息的标识信息及对应的更新时间。

可选地，本实施例提供的基于分布式系统的数据获取装置30还包括：计算模块和判断模块。

其中，计算模块，用于计算目标业务对应的全局控制信息的更新时间与数据更新时段读取数据时长的差值。判断模块，用于判断当前系统时间是否大于或等于差值。确定模块32，还用于若确定当前系统时间大于或等于差值，则确定当前系统时间处于数据更新时段；若确定当前系统时间小于差值，则确定当前系统时间处于纯数据读取时段。

可选地，读取模块33，在若确定当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息时，具体用于：

若确定当前系统时间处于数据更新时段，则获取使用的远端存储设备的标识信息；若确定使用的远端存储设备的标识信息为主用远端存储设备标识信息，则从主用远端存储设备读取全局控制信息；若确定使用的远端存储设备的标识信息为备用远端存储设备标识信息，则从备用远端存储设备读取全局控制信息。

可选地，本实施例提供的基于分布式系统的数据获取装置30还包括：更新模块。

其中，判断模块，还用于判断本次读取的全局控制信息的取值相较于上次读取的全局控制信息的取值是否发生更新。更新模块，用于若确定发生更新，则对本地缓存中的全局控制信息的取值进行更新，再次接收终端设备发送的目标业务处理请求后，从本地缓存中读取取值更新后的全局控制信息。

可选地，接收模块31，还用于接收集群配置库设备发送的更新后的全局控制信息更新计划信息。更新模块，还用于对本地缓存中对应的全局控制信息更新计划信息进行更新，以使主用远端存储设备及备用远端存储设备对存储的全局控制信息进行更新；全局控制信息更新计划信息及更新后的全局控制信息更新计划信息中的更新时间位于业务低峰时段。

可选地，读取模块33，还用于若确定从主用远端存储设备或备用远端存储设备读取全局控制信息失败，则从本地缓存中读取全局控制信息。

本实施例提供的应答报文正确性判别装置可以执行图2-图4所示方法实施例的技术方案，其实现原理和技术效果与图2-图4所示方法实施例类似，在此不再一一赘述。

实施例四

图6是用来实现本发明实施例的基于分布式系统的数据获取方法的应用服务节点服务器的第一框图，如图6所示，本实施例提供的应用服务节点服务器40包括：存储器41，至少一个处理器42及收发器43。

所述处理器42、所述存储器41与所述收发器43通过电路互联；

所述存储器41存储计算机执行指令；所述收发器43，用于与终端设备、集群配置库设备、主用远端存储设备或备用远端存储设备之间收发数据。

至少一个处理器42执行存储器41存储的计算机执行指令，使得至少一个处理器42执行上述实施例一或实施例二中的方法。

实施例五

图7是用来实现本发明实施例的基于分布式系统的数据获取方法的应用服务节点服务器的第二框图，如图7所示，应用服务节点服务器500可以包括以下一个或多个组件：处理组件502，存储器504，电源组件506，多媒体组件508，音频组件510，输入/输出(I/O)接口512，传感器组件514，以及通信组件516。

处理组件502通常控制应用服务节点服务器500的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件502可以包括一个或多个处理器520来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件502可以包括一个或多个模块，便于处理组件502和其他组件之间的交互。例如，处理组件502可以包括多媒体模块，以方便多媒体组件508和处理组件502之间的交互。

存储器504被配置为存储各种类型的数据以支持在应用服务节点服务器500的操作。这些数据的示例包括用于在应用服务节点服务器500上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电源组件506为应用服务节点服务器500的各种组件提供电力。电源组件506可以包括电源管理系统，一个或多个电源，及其他与为应用服务节点服务器500生成、管理和分配电力相关联的组件。

多媒体组件508包括在应用服务节点服务器500和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件508包括一个前置摄像头和/或后置摄像头。当应用服务节点服务器500处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件510被配置为输出和/或输入音频信号。例如，音频组件510包括一个麦克风(MIC)，当应用服务节点服务器500处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中，音频组件510还包括一个扬声器，用于输出音频信号。

I/O接口512为处理组件502和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件514包括一个或多个传感器，用于为应用服务节点服务器500提供各个方面的状态评估。例如，传感器组件514可以检测到应用服务节点服务器500的打开/关闭状态，组件的相对定位，例如组件为应用服务节点服务器500的显示器和小键盘，传感器组件514还可以检测应用服务节点服务器500或应用服务节点服务器500一个组件的位置改变，用户与应用服务节点服务器500接触的存在或不存在，应用服务节点服务器500方位或加速/减速和应用服务节点服务器500的温度变化。传感器组件514可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件514还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件516被配置为便于应用服务节点服务器500和其他设备之间有线或无线方式的通信。应用服务节点服务器500可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件516经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，通信组件516还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，应用服务节点服务器500可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器504，上述指令可由应用服务节点服务器500的处理器520执行以完成上述方法。例如，非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

一种非临时性计算机可读存储介质，当该存储介质中的指令由应用服务节点服务器的处理器执行时，使得应用服务节点服务器能够执行上述实施例一或实施例二提供的方法。

在示例性实施例中，还提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行上述实施例一或实施例二提供的方法。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本发明旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求书指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求书来限制。

Claims (12)

1.一种基于分布式系统的数据获取方法，其特征在于，所述方法应用于分布式系统中的每个应用服务节点服务器，所述分布式系统中的应用服务节点服务器划分为多个集群，每个集群分别与分布式系统中对应的集群配置库设备通信连接，每个集群还与分布式系统中的主用远端存储设备或备用远端存储设备通信连接，所述方法包括：

接收终端设备发送的目标业务处理请求，所述目标业务为与全局控制信息相关的业务；

确定接收到所述目标业务处理请求的当前系统时间；

若确定所述当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息；

若确定所述当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息，所述数据更新时段位于业务低峰时段；

根据所述全局控制信息对目标业务进行处理。

2.根据权利要求1所述的方法，其特征在于，所述接收终端设备发送的目标业务处理请求之前，还包括：

若监测到启动应用服务，则从对应的集群配置库设备中读取全局控制信息的配置信息到本地缓存中，所述配置信息包括：使用的远端存储设备的标识信息；

根据所述使用的远端存储设备的标识信息从对应的远端存储设备加载所述全局控制信息到本地缓存中。

3.根据权利要求2所述的方法，其特征在于，所述配置信息还包括：全局控制信息更新计划信息及数据更新时段读取数据时长；所述更新计划信息中包括全局控制信息的标识信息及对应的更新时间；

所述确定接收到所述目标业务处理请求的当前系统时间之后，还包括：

计算目标业务对应的全局控制信息的更新时间与数据更新时段读取数据时长的差值；

判断当前系统时间是否大于或等于所述差值；

若确定当前系统时间大于或等于所述差值，则确定所述当前系统时间处于所述数据更新时段；

若确定当前系统时间小于所述差值，则确定所述当前系统时间处于纯数据读取时段。

4.根据权利要求2所述的方法，其特征在于，所述若确定所述当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息，包括：

若确定所述当前系统时间处于数据更新时段，则获取使用的远端存储设备的标识信息；

若确定使用的远端存储设备的标识信息为主用远端存储设备标识信息，则从主用远端存储设备读取全局控制信息；

若确定使用的远端存储设备的标识信息为备用远端存储设备标识信息，则从备用远端存储设备读取全局控制信息。

5.根据权利要求4所述的方法，其特征在于，所述若确定所述当前系统时间处于数据更新时段，从主用远端存储设备或备用远端存储设备读取全局控制信息之后，还包括：

判断本次读取的全局控制信息的取值相较于上次读取的全局控制信息的取值是否发生更新；

若确定发生更新，则对本地缓存中的全局控制信息的取值进行更新，并再次接收终端设备发送的目标业务处理请求后，从本地缓存中读取取值更新后的全局控制信息。

6.根据权利要求3所述的方法，其特征在于，还包括：

接收集群配置库设备发送的更新后的全局控制信息更新计划信息；

对本地缓存中对应的全局控制信息更新计划信息进行更新，以使主用远端存储设备及备用远端存储设备对存储的全局控制信息进行更新；

所述全局控制信息更新计划信息及所述更新后的全局控制信息更新计划信息中的更新时间位于业务低峰时段。

7.根据权利要求1-6任一项所述的方法，其特征在于，还包括：

若确定从主用远端存储设备或备用远端存储设备读取全局控制信息失败，则从本地缓存中读取全局控制信息。

8.一种基于分布式系统的数据获取装置，其特征在于，所述装置位于分布式系统中的每个应用服务节点服务器中，所述分布式系统中的应用服务节点服务器划分为多个集群，每个集群分别与分布式系统中对应的集群配置库设备通信连接，每个集群还与分布式系统中的主用远端存储设备或备用远端存储设备通信连接，所述装置包括：

接收模块，用于接收终端设备发送的目标业务处理请求，所述目标业务为与全局控制信息相关的业务；

确定模块，用于确定接收到所述目标业务处理请求的当前系统时间；

读取模块，用于若确定所述当前系统时间处于纯数据读取时段，则从应用服务节点服务器对应的本地缓存中读取全局控制信息；

所述读取模块，还用于若确定所述当前系统时间处于数据更新时段，则从主用远端存储设备或备用远端存储设备读取全局控制信息；

处理模块，用于根据所述全局控制信息对目标业务进行处理。

9.一种应用服务节点服务器，其特征在于，包括：至少一个处理器，存储器及收发器；

所述处理器、所述存储器与所述收发器通过电路互联；

所述存储器存储计算机执行指令；所述收发器，用于与终端设备、集群配置库设备、主用远端存储设备或备用远端存储设备之间收发数据；

所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如权利要求1-7任一项所述的方法。

10.一种分布式系统，其特征在于，包括：多个应用服务节点服务器、多个集群配置库设备、主用远端存储设备及备用远端存储设备；

多个应用服务节点服务器划分为多个集群，每个集群分别与对应的集群配置库设备通信连接，每个集群还与主用远端存储设备或备用远端存储设备通信连接。

11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如权利要求1-7任一项所述的方法。

12.一种计算机程序产品，包括计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1-7任一项所述的方法。

Images