CN110287266A - 一种分布式系统及数据处理方法 - Google Patents

Abstract

本发明实施例涉及计算机技术领域，尤其涉及一种分布式系统及数据处理方法，用以解决存款核心系统中数据库节点容量有限，扩容存在上限的问题。所述分布式系统包括N个节点，其中每个节点中包含一个数据库，任两个节点之间的数据库结构和参数相同，N≥2；将所述N个节点中的任一节点作为第一类节点，所述第一类节点用于：接收第一指令；解析所述第一指令，确定所述第一指令涉及的标识信息；当所述第一指令涉及的标识信息还包括第二标识信息时，对所述第一指令进行处理，并根据所述第一指令生成第二指令，所述第二标识信息位于第二类节点的数据库中；将所述第二指令向所述第二类节点发送，以使所述第二类节点对所述第二指令进行处理。

Description

一种分布式系统及数据处理方法

技术领域

本发明涉及金融科技(Fintech)中的计算机技术领域，尤其涉及一种分布式系统及数据处理方法。

背景技术

随着金融科技，尤其是互联网科技金融的不断发展，越来越多的技术(如分布式、区块链Blockchain、人工智能等)应用在金融领域，但金融业也对技术提出了更高的要求，如针对存款核心系统的数据处理。

现有的银行存款核心系统，都是基于IOE(IBM、Oracle、EMC三家供应商的合称，其中IBM是服务器提供商，Oracle是数据库软件提供商，EMC则是存储设备提供商)的昂贵软硬件的单节点模型，账户数据、交易流水等都集中存储在一个数据库节点中。虽然应用层(application)可以做横向扩展，但因为数据库只有一个节点，性能和容量有限，在数据量日益增长的情况下，只能对数据库软硬件做升级。从长远来看，无法满足用户量和交易量增长的要求。

发明内容

本申请提供一种分布式系统及数据处理方法，用以解决存款核心系统中数据库节点容量有限，扩容存在上限的问题。

本发明实施例提供一种分布式系统，包括N个节点，其中每个节点中包含一个数据库，任两个节点之间的数据库结构和参数相同，N≥2；

将所述N个节点中的任一节点作为第一类节点，所述第一类节点用于：

接收第一指令；

解析所述第一指令，确定所述第一指令涉及的标识信息；

当所述第一指令涉及的标识信息还包括第二标识信息时，对所述第一指令进行处理，并根据所述第一指令生成第二指令，所述第二标识信息位于第二类节点的数据库中；

将所述第二指令向所述第二类节点发送，以使所述第二类节点对所述第二指令进行处理。

一种可选的实施例中，所述第一类节点为第一对象节点；所述第一对象节点用于：

接收消息中间件发送的所述第一指令，所述第一指令中包含第一标识信息，所述第一标识信息位于所述第一对象节点的数据库中。

一种可选的实施例中，所述第一指令为报文类指令；

所述第一对象节点具体用于：

解析所述第一报文，确定所述第一报文的M个子流程；

依次判断所述M个子流程对应的标识信息；

针对对应的标识信息位于所述第一对象节点的数据库中的子流程，对所述子流程进行处理；

针对对应的标识信息位于第二类节点的数据库中的子流程，根据所述子流程生成第二报文并向所述第二类节点发送。

一种可选的实施例中，所述第二类节点为第二对象节点；所述第一类节点具体用于：

在预定时间段内，向所述第二对象节点发送所述第二指令。

一种可选的实施例中，所述第一类节点为第二对象节点，所述第二类节点为第一对象节点，所述第一指令为第一文件下载指令；

所述第二对象节点具体用于：

接收外围系统发送的所述第一文件下载指令；

根据所述第一文件下载指令，从文件传输模块中下载总文件；

按照所述总文件涉及的L个第一对象节点，将所述总文件进行分割，得到L份文件分片，其中一份文件分片与一个第一对象节点相对应；

将所述L份文件上传至所述文件传输模块；

生成L个第二文件下载指令，其中每一个第二文件下载指令与一个第一对象节点相对应；

针对所述L个第二文件下载指令中的任一个第二文件下载指令，将所述第二文件下载指令向对应的第一对象节点发送；

所述第一对象节点用于：

根据所述第二文件下载指令从所述文件传输模块中下载文件分片，并对所述文件分片进行处理。

一种可选的实施例中，所述第一对象节点还用于：将已处理的文件分片上传至所述文件传输模块，并向所述第二对象节点发送文件分片下载消息；

所述第二对象节点还用于：根据文件分片下载消息从所述文件传输模块中下载已处理的文件分片；将L个已处理的文件分片进行合并，并上传至所述文件传输模块；向所述外围系统发送文件处理完成消息。

一种可选的实施例中，所述第一类节点，还用于：

接收开户指令；

根据所述开户指令，生成标识信息，并在数据库中记录所述标识信息与所述第一类节点的关系。

一种可选的实施例中，所述第一类节点，还用于：

按照设定时间间隔，收集所述第一类节点中未上传的操作数据；

将所述未上传的操作数据上传至文件传输模块中，以使所述未上传的操作数据被下载并保存至总数据库中。

一种分布式系统的数据处理方法，包括：

第一类节点接收第一指令，所述第一类节点为N个节点中的任一节点，包含一个数据库，所述N个节点中的任两个节点之间的数据库结构和参数相同；

所述第一类节点解析所述第一指令，确定所述第一指令涉及的标识信息；

当所述第一指令涉及的标识信息还包括第二标识信息时，所述第一类节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，所述第二标识信息位于第二类节点的数据库中；

所述第一类节点将所述第二指令向所述第二类节点发送，以使所述第二类节点对所述第二指令进行处理。

一种可选的实施例中，所述第一类节点为第一对象节点；所述第一类节点接收第一指令，包括：

所述第一对象节点接收消息中间件发送的所述第一指令，所述第一指令中包含第一标识信息，所述第一标识信息位于所述第一对象节点中。

一种可选的实施例中，所述第一指令为报文类指令；

所述第一类节点解析所述第一指令，确定所述第一指令涉及的标识信息，包括：

所述第一对象节点解析所述第一报文，确定所述第一报文的M个子流程；

所述第一对象节点依次判断所述M个子流程对应的标识信息；

当所述第一指令涉及的标识信息还包括第二标识信息时，所述第一类节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，包括：

针对对应的标识信息位于所述第一对象节点的数据库中的子流程，所述第一对象节点对所述子流程进行处理；

针对对应的标识信息位于第二类节点的数据库中的子流程，所述第一对象节点根据所述子流程生成第二报文并向所述第二类节点发送。

一种可选的实施例中，所述第二类节点为第二对象节点；所述第一类节点将所述第二指令向所述第二类节点发送，包括：

所述第一类节点在预定时间段内，向所述第二对象节点发送所述第二指令。

一种可选的实施例中，所述第一类节点为第二对象节点，所述第二类节点为第一对象节点，所述第一指令为第一文件下载指令；

所述第一类节点接收第一指令，包括：

所述第二对象节点接收外围系统发送的所述第一文件下载指令；

所述第一类节点解析所述第一指令，确定所述第一指令涉及的标识信息，包括：

所述第二对象节点根据所述第一文件下载指令，从文件传输模块中下载总文件；

所述第二对象节点按照所述总文件涉及的L个第一对象节点，将所述总文件进行分割，得到L份文件分片，其中一份文件分片与一个第一对象节点相对应；

所述第二对象节点将所述L份文件上传至所述文件传输模块；

所述当所述第一指令涉及的标识信息还包括第二标识信息时，第一类节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，包括：

所述第二对象节点生成L个第二文件下载指令，其中每一个第二文件下载指令与一个第一对象节点相对应；

所述第一类节点将所述第二指令向所述第二类节点发送，包括：

针对所述L个第二文件下载指令中的任一个第二文件下载指令，所述第二对象节点将所述第二文件下载指令向对应的第一对象节点发送，以使所述第一对象节点根据所述第二文件下载指令从所述文件传输模块中下载文件分片，并对所述文件分片进行处理。

一种可选的实施例中，所述第二对象节点将所述第二文件下载指令向对应的第一对象节点发送之后，还包括：

所述第二对象节点接收第一对象节点发送的文件分片下载消息；

所述第二对象节点根据文件分片下载消息从所述文件传输模块中下载已处理的文件分片；

所述第二对象节点将L个已处理的文件分片进行合并，并上传至所述文件传输模块；

所述第二对象节点向所述外围系统发送文件处理完成消息。

一种可选的实施例中，所述第一类节点接收第一指令之前，还包括：

所述第一类节点接收开户指令；

所述第一类节点根据所述开户指令，生成标识信息，并在数据库中记录所述标识信息与所述第一类节点的关系。

一种可选的实施例中，还包括：

所述第一类节点按照设定时间间隔，收集所述第一类节点中未上传的操作数据；

所述第一类节点将所述未上传的操作数据上传至文件传输模块中，以使所述未上传的操作数据被下载并保存至总数据库中。

本发明实施例还提供一种电子设备，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如上所述的方法。

本发明实施例还提供一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令用于使所述计算机执行如上所述的方法。

本发明实施例的分布式系统中包括N个节点，其中每个节点中包含一个数据库，且任意两个节点之间的数据库结构和参数相同。N个节点中的每个节点的作用相同，为了便于描述，将任一节点作为第一类节点。第一类节点用于：接收第一指令；解析第一指令，确定第一指令涉及的标识信息；当第一指令涉及的标识信息包括第二标识信息时，对第一指令进行处理，并根据第一指令生成第二指令，第二标识信息位于第二类节点的数据库中；将第二指令向第二类节点发送，以使第二类节点对第二指令进行处理。本发明实施例中，由于节点的数据库结构和参数均相同，因此，当存款核心系统的数据库容量不足时，可以直接利用已存在的节点中的数据库，克隆出新的数据库，再将新的数据库加入新的节点中，增加节点的数量，从而达到扩容的目的。此外，针对跨节点的第一指令，第一类节点可以对第一指令进行处理，并根据第一指令涉及的标识信息，向其他节点发送指令，从而实现跨节点的指令处理。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种可能的系统构架的结构示意图；

图2为本发明实施例提供的一种分布式系统结构示意图；

图3为本发明实施例提供的一种分布式系统的数据处理方法的流程图；

图4为本发明具体实施例提供的存款核心系统的结构示意图；

图5为本发明实施例提供的一种分布式系统的数据处理装置的结构示意图；

图6为本发明实施例提供的电子设备的结构示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅仅是本发明一部份实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

如图1所示，本发明实施例所适用的一种系统，包括外围系统101和存款核心系统102。其中，外围系统101可以为安装于终端上的客户端，也可以为安装于服务器上的操作系统，终端可以是手机、平板电脑或者是专用的手持设备等具有无线通信功能的电子设备，也可以是个人计算机(personal computer，简称PC)，笔记本电脑，服务器等有线接入方式连接上网的设备。终端可以是一个独立的设备，也可以是多个终端所形成的终端集群。优选地，终端可以采用云计算技术进行信息处理。

存款核心系统102可以是安装于计算机等网络设备上的操作系统，可以是一个独立的设备，也可以是多个服务器所形成的服务器集群。存款核心系统102中包括N个账户节点103，N个账户节点103可以分别安装于N个服务器上，也可以安装于少于N个服务器上，即存在两个或多个账户节点103安装于同一个服务器上的情况。优选地，N个账户节点可以采用云计算技术进行信息处理。

外围系统101可以远程调用存款核心系统102，也可以通过INTERNET网络与存款核心系统102进行通信，也可以通过全球移动通信系统(Global System for MobileCommunications，简称GSM)、长期演进(long term evolution，简称LTE)系统等移动通信系统与存款核心系统102进行通信。

为了便于理解，下面对本发明实施例中可能涉及的名词进行定义和解释。

消息中间件：负责消息传输的基础架构系统，比如：ESB,Dubbo,RocketMQ,Kafka,Solace等，适用于需要可靠的数据传送的分布式环境。采用消息中间件机制的系统中，不同的对象之间通过传递消息来激活对方的事件，完成相应的操作。发送者将消息发送给消息服务器，消息服务器将消息存放在若干队列中，在合适的时候再将消息转发给接收者。消息中间件能在不同平台之间通信，它常被用来屏蔽掉各种平台及协议之间的特性，实现应用程序之间的协同，其优点在于能够在客户和服务器之间提供同步和异步的连接，并且在任何时刻都可以将消息进行传送或者存储转发。

路由服务系统：一种基础架构系统，用于维护卡号、账号、客户号等与节点号的关系。分布式服务架构是集群组网，这意味着集群中存在某个服务的多实例部署，路由服务系统可以从服务列表中选择合适的服务提供者进行调用。分布式服务框架要能够满足用户灵活的路由需求。

Spring：一种开源的、基于Java程序语言的应用程序框架。

AOP：面向切面的编程技术，用于定义拦截器。

冲正：交易因为异常而失败后，被迫将之前的操作全部回滚的行为。

冲账：交易成功后，外围系统主动发起的回滚交易。

为了解决上述问题，基于上述架构，本发明实施例提供了一种分布式系统，如图2所示，本发明实施例提供的存款核心系统的数据处理架构包括N个节点，其中每个节点中包含一个数据库，任两个节点之间的数据库结构和参数相同，N≥2，因此，每个节点均能实现同样的功能。

下面通过对分布式系统的数据处理方法进行介绍，详细描述分布式系统中每个节点的作用和功能。为了便于描述，将N个节点中的任一节点作为第一类节点。

本发明实施例提供的分布式系统的数据处理方法如图3所示，包括以下步骤：

步骤301、第一类节点接收第一指令。

步骤302、所述第一类节点解析所述第一指令，确定所述第一指令涉及的标识信息。

步骤303、当所述第一指令涉及的标识信息还包括第二标识信息时，所述第一类节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，所述第二标识信息位于第二类节点的数据库中。

步骤304、所述第一类节点将所述第二指令向所述第二类节点发送，以使所述第二类节点对所述第二指令进行处理。

本发明实施例的分布式系统中包括N个节点，其中每个节点中包含一个数据库，且任意两个节点之间的数据库结构和参数相同。N个节点中的每个节点的作用相同，为了便于描述，将任一节点作为第一类节点。第一类节点用于：接收第一指令；解析第一指令，确定第一指令涉及的标识信息；当第一指令涉及的标识信息包括第二标识信息时，对第一指令进行处理，并根据第一指令生成第二指令，第二标识信息位于第二类节点的数据库中；将第二指令向第二类节点发送，以使第二类节点对第二指令进行处理。本发明实施例中，由于节点的数据库结构和参数均相同，因此，当存款核心系统的数据库容量不足时，可以直接利用已存在的节点中的数据库，克隆出新的数据库，再将新的数据库加入新的节点中，增加节点的数量，从而达到扩容的目的。此外，针对跨节点的第一指令，第一类节点可以对第一指令进行处理，并根据第一指令涉及的标识信息，向其他节点发送指令，从而实现跨节点的指令处理。

下面的描述中，为了便于理解，以存款核心系统设置为分布式系统为例进行介绍，因此，对应上述表述，账户节点为上述节点，第一账户节点为第一类节点，第二账户节点为第二类节点，账户信息为标识信息，客户账户节点为第一对象节点，内部账户节点为第二对象节点。

本发明实施例中，利用存款核心系统处理数据之前，需要首先在存款核心系统中开户。所述第一账户节点接收第一指令之前，还包括：

所述第一账户节点接收开户指令；

所述第一账户节点根据所述开户指令，生成账户信息，并在数据库中记录所述账户信息与所述第一账户节点的关系。

具体来说，在存款核心系统中的账户包括客户账户和内部账户。不同类型的账户开户方式有所区别。

针对开客户账户：由于客户账户节点的数量不止一个，因此，需要通过消息中间件负责指令的转发。所述第一账户节点为第一客户账户节点；所述第一账户节点接收第一指令，包括：

所述第一客户账户节点接收消息中间件发送的所述第一指令，所述第一指令中包含第一账户信息，所述第一账户信息位于所述第一客户账户节点中。

具体实施过程中，外围系统先从路由服务系统获得存款核心系统中的一个客户账户节点的标识，再将开户指令通过消息中间件发往该客户账户节点。客户账户节点接收到开户指令后，对开户指令进行验证，通过后针对该客户生成客户账户信息，并将客户账户信息与客户账户节点的对应关系存储于当前节点的数据库中，同时将具体的账户信息项外围系统发送。开户成功后，可以由客户账户节点将卡号、账号等客户账户信息与客户账户节点的关系写入路由服务系统，也可以由外围系统写入。

针对开内部账户：由于存款核心系统中的内部账户信息较少，因此只设置一个内部账户节点，故外围系统可以直接将开户报文向内部账户节点发送。开户成功后，内部账户节点将内部账户信息同步到各个客户账户节点，以便后续支持客户账户与内部账户之间的交易。

本发明实施例中，存款核心系统需要处理的指令可以按照数据量的大小，分为报文类指令和文件类指令。报文类指令包括转账报文、查询报文、维护报文等，一般只涉及一到两个账户节点。文件类指令除了报文外，一般还包括数据量较大的文件，会涉及到分布在多个账户节点上的客户账户，例如公司发工资的场景。下面分别就两种指令进行介绍。

第一指令为报文类指令时，所述第一账户节点解析所述第一指令，确定所述第一指令涉及的账户信息，包括：

所述第一客户账户节点解析所述第一报文，确定所述第一报文的M个子流程；

所述第一客户账户节点依次判断所述M个子流程对应的账户信息；

当所述第一指令涉及的账户信息还包括第二账户信息时，所述第一账户节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，包括：

针对对应的账户信息位于所述第一客户账户节点的数据库中的子流程，所述第一客户账户节点对所述子流程进行处理；

针对对应的账户信息位于第二账户节点的数据库中的子流程，所述第一客户账户节点根据所述子流程生成第二报文并向所述第二账户节点发送。

具体实施过程中，报文类指令可能会涉及到两个账户，例如转账报文，就涉及借记账户和贷记账户。若两个账户位于同一个节点中，则报文类指令直接向该节点发送，由该节点直接处理。若两个账户位于不同节点中，则可以从两个账户节点中任选一个接收该报文类指令。接收到第一报文的第一账户节点解析第一报文，确定第一报文的M个子流程，其中每个子流程对应一个账户，对应的账户可以位于第一账户节点，也可以位于第二账户节点。第一账户节点对第一账户节点的子流程进行处理，并根据第二账户节点的子流程生成第二报文向第二账户节点发送。这里，处理的顺序为按照子流程的顺序执行。全部子流程处理完成后，由第一账户节点向外围系统反馈处理结果。这样，外围系统无需关注报文的跨节点，只需将报文发往存款核心系统即可，节省了外围系统的工作量和人力成本。

特殊地，若第二账户节点为内部账户节点，为了降低内部账户节点的压力，所述第二账户节点为内部账户节点；所述第一账户节点将所述第二指令向所述第二账户节点发送，包括：

所述第一账户节点在预定时间段内，向所述内部账户节点发送所述第二指令。

具体实施过程中，第一账户节点可以判断第一指令的类型，若需要实时处理，则第一账户节点处理完成后，立刻将第二指令向内部账户节点发送，以使内部账户节点可以立刻处理该第二指令并反馈。若第一指令的类型为可以掩饰处理，则第一账户节点处理完对应的子流程后，并生成第二指令后，不立刻发送第二指令，可以在一段时间之后将第二指令发送给内部账户节点，或者第一账户节点需要内部账户节点处理的多个第二指令进行缓存，在预定的时间段内，批量性地将第二指令发送至内部账户节点。一般来说，为降低内部账户节点的压力，本发明实施例中使用延时内部处理的模式。

此外，对于只涉及一个账户节点的指令，例如查询报文、维护报文，或者内部账户与内部账户之间的转账，本发明实施例中直接将第一指令发送至对应的账户节点，在账户节点内完成指令的处理。

若第一指令为文件类指令，由于文件中数据量较大，则需要将第一指令涉及的文件上传至文件传输模块中，再将总文件进行分割，分割可以由内部账户节点执行。此时，第一账户节点为内部账户节点，所述第二账户节点为客户账户节点。所述第一账户节点接收第一指令，包括：

所述内部账户节点接收外围系统发送的所述第一文件下载指令；

所述第一账户节点解析所述第一指令，确定所述第一指令涉及的账户信息，包括：

所述内部账户节点根据所述第一文件下载指令，从文件传输模块中下载总文件；

所述内部账户节点按照所述总文件涉及的L个客户账户节点，将所述总文件进行分割，得到L份文件分片，其中一份文件分片与一个客户账户节点相对应；

所述内部账户节点将所述L份文件上传至所述文件传输模块；

所述当所述第一指令涉及的账户信息还包括第二账户信息时，第一账户节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，包括：

所述内部账户节点生成L个第二文件下载指令，其中每一个第二文件下载指令与一个客户账户节点相对应；

所述第一账户节点将所述第二指令向所述第二账户节点发送，包括：

针对所述L个第二文件下载指令中的任一个第二文件下载指令，所述内部账户节点将所述第二文件下载指令向对应的客户账户节点发送，以使所述客户账户节点根据所述第二文件下载指令从所述文件传输模块中下载文件分片，并对所述文件分片进行处理。

具体实施过程中，外围系统将总文件上传至文件传输模块中，并向内部账户节点发送第一文件下载指令，以使内部账户节点从文件传输模块中下载总文件。内部账户节点根据文件中涉及的账户标识，查询对应的节点标识，并根据节点标识分割总文件，即将同一个账户节点中的账户对应的数据作为一个文件分片。内部账户节点可以分别将分割得到的文件分片向客户账户节点发送，也可以将分割得到的文件分片重新上传至文件传输模块中，并向对应的客户账户节点发送第二文件下载指令，以使客户账户节点可以根据第二文件下载指令从文件传输模块中下载对应的文件分片。通过将文件上传至文件传输模块，账户节点之间无需直接传输大规模的数据，从而缓解了节点之间的传输压力。

此外，总文件还可以由外围系统直接分割。具体地，外围系统根据卡号或账号从路由服务系统中查询到对应的账户节点的标识。根据节点号的不同将总文件分割为若干不同的文件分片。将文件分片上传到文件传输模块中，再通过消息中间件发送报文通知各个客户账户节点。各个客户账户节点接到通知后，下载文件分片进行处理。

文件处理完成后，仍通过文件传输模块传递文件。所述内部账户节点将所述第二文件下载指令向对应的客户账户节点发送之后，还包括：

所述内部账户节点接收客户账户节点发送的文件分片下载消息；

所述内部账户节点根据文件分片下载消息从所述文件传输模块中下载已处理的文件分片；

所述内部账户节点将L个已处理的文件分片进行合并，并上传至所述文件传输模块；

所述内部账户节点向所述外围系统发送文件处理完成消息。

具体实施过程中，客户账户节点将文件分片处理完成后，将已处理的文件分片上传至文件传输模块中，并向内部账户节点发送文件分片下载消息。内部账户节点根据文件分片下载消息，从文件传输模块中下载已处理的文件分片，将所有文件分片合并后再上传，最后发送消息通知外围系统。

进一步地，本发明实施例还包括：

所述第一账户节点按照设定时间间隔，收集所述第一账户节点中未上传的操作数据；

所述第一账户节点将所述未上传的操作数据上传至文件传输模块中，以使所述未上传的操作数据被下载并保存至总数据库中。

具体实施过程中，客户账户节点中的数据操作流水需要同步到内部账户节点中，且客户账户节点中的数据操作流水以及内部账户节点中的数据操作流水需要同步至小总账系统的总数据库中。

在每个客户账户节点中，创建第一定时任务(比如每2分钟一次)。第一定时任务收集未同步的操作数据，例如延时内部账户交易流水，生成文件，上传到文件传输系统，并向内部账户节点发送通知。内部账户节点收到通知后，下载操作数据并解析后，更新内部账户余额，并将操作数据存储至内部账户的数据库中。

并且，在每个客户账户节点中，还创建第二定时任务(比如每3分钟一次)。第二定时任务收集未同步的客户账户的会计流水和/或延时内部账户的会计流水(账务流水、日终计提流水、总分流水等)，生成文件，上传到文件传输系统，并通知小总账子系统。小总账子系统收到通知后，下载文件并解析后，将会计流水追加至小总账系统的数据库中。

此外，在内部账户节点内中，创建第三定时任务(比如每4分钟一次)。第三定时任务收集未同步的实时内部账户的会计流水(账务流水、总分流水等)，生成文件，上传到文件传输系统，通知小总账子系统。小总账子系统收到通知后，下载文件并解析后，将会计流水追加至小总账系统的数据库中。

为了更清楚地理解本发明，下面以具体实施例对上述流程进行详细描述，一种具体的实时例中，存款核心系统的结构可以如图4所示，包括一个内部账户节点和N个客户账户节点。其中，客户账户节点用于支持与客户账户相关的数据与交易。内部账户节点用于支持与内部账户相关的数据与交易。为了便于管理，节省资源，内部账户节点中还包括小总账子系统，用于处理管理型的、统计型的任务。

由于内部账户节点中包括内部账户的数据库以及小总账子系统的数据库，因此，内部账户的数据库与小总账子系统的数据库也可以分开布置，即包括内部账户节点和小总账节点。此外，相较于数据量巨大的客户账户，内部账户的数据量很少，因此，本发明实施例中只设置一个内部账户节点，而内部账户节点的数量也可以根据实际情况进行相应的增加。

以上结构中，每个账户节点的数据库结构和参数相同，但存储的账户和交易数据不同。小总账的数据库因为只涉及到数据统计和汇总，可以使用不同的结构和参数。

从功能上，存款核心系统又可以分为以下子系统：

1、联机交易子系统：负责处理与客户账户相关的联机交易，比如开户、转账、查询、维护等。

2、批处理子系统：负责处理与客户账户相关的批量任务，比如文件型交易、将交易流水同步至ADM批处理子系统、将会计流水同步至小总账子系统、日终任务等。

3、ADM联机交易子系统：负责处理与内部账户相关的联机交易，比如开户、转账、查询、维护等。

4、ADM批处理子系统：负责处理来自客户账户节点的同步数据，生成内部账户交易流水、会计流水，以及文件型交易、日终任务等。

5、小总账子系统：负责汇总会计流水，登记及核对会计账务，并将科目发生额余额数据上报大总账系统。

6、控制台子系统：负责各批处理子系统的任务监控、任务重拉、以及联机交易子系统的调账等。

此外，存款核心系统中还包括消息中间件、路由服务系统、文件传输系统等辅助单元。

需要了解的是，上述系统仅为本发明实施例中的一种，每个账户节点中的具体结构以及辅助系统可以依据具体需要进行设置，本发明实施例中仅为举例，不做限制。

本发明实施例还提供了一种分布式系统的数据处理装置，如图5所示，包括：

收发单元501，用于接收第一指令；

解析单元502，用于解析所述第一指令，确定所述第一指令涉及的账户信息；

处理单元503，用于当所述第一指令涉及的账户信息还包括第二账户信息时，所述第一账户节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，所述第二账户信息位于第二账户节点的数据库中；

所述收发单元501，还用于将所述第二指令向所述第二账户节点发送，以使所述第二账户节点对所述第二指令进行处理。

可选的，所述收发单元501，还用于接收消息中间件发送的所述第一指令，所述第一指令中包含第一账户信息，所述第一账户信息位于所述第一客户账户节点中。

可选的，所述第一指令为报文类指令；

所述解析单元502，具体用于解析所述第一报文，确定所述第一报文的M个子流程；依次判断所述M个子流程对应的账户信息；

所述处理单元503，具体用于针对对应的账户信息位于所述第一客户账户节点的数据库中的子流程，所述第一客户账户节点对所述子流程进行处理；针对对应的账户信息位于第二账户节点的数据库中的子流程，所述第一客户账户节点根据所述子流程生成第二报文并向所述第二账户节点发送。

可选的，所述收发单元501，具体用于在预定时间段内，向所述内部账户节点发送所述第二指令。

可选的，所述第一指令为第一文件下载指令；

所述收发单元501，具体用于接收外围系统发送的所述第一文件下载指令；

所述解析单元502，具体用于根据所述第一文件下载指令，从文件传输模块中下载总文件；按照所述总文件涉及的L个客户账户节点，将所述总文件进行分割，得到L份文件分片，其中一份文件分片与一个客户账户节点相对应；将所述L份文件上传至所述文件传输模块；

所述处理单元503，具体用于生成L个第二文件下载指令，其中每一个第二文件下载指令与一个客户账户节点相对应；

所述收发单元501，具体用于针对所述L个第二文件下载指令中的任一个第二文件下载指令，将所述第二文件下载指令向对应的客户账户节点发送，以使所述客户账户节点根据所述第二文件下载指令从所述文件传输模块中下载文件分片，并对所述文件分片进行处理。

可选的，所述收发单元501，具体用于接收客户账户节点发送的文件分片下载消息；根据文件分片下载消息从所述文件传输模块中下载已处理的文件分片；将L个已处理的文件分片进行合并，并上传至所述文件传输模块；向所述外围系统发送文件处理完成消息。

可选的，所述收发单元501，用于接收开户指令；

所述处理单元503，用于根据所述开户指令，生成账户信息，并在数据库中记录所述账户信息与所述第一账户节点的关系。

可选的，还包括同步单元504，用于：

按照设定时间间隔，收集所述第一账户节点中未上传的操作数据；将所述未上传的操作数据上传至文件传输模块中，以使所述未上传的操作数据被下载并保存至总数据库中。

基于相同的原理，本发明还提供一种电子设备，如图6所示，包括：

包括处理器601、存储器602、收发机603、总线接口604，其中处理器601、存储器602与收发机603之间通过总线接口604连接；

所述处理器601，用于读取所述存储器602中的程序，执行下列方法：

接收第一指令；

解析所述第一指令，确定所述第一指令涉及的账户信息；

当所述第一指令涉及的账户信息还包括第二账户信息时，对所述第一指令进行处理，并根据所述第一指令生成第二指令，所述第二账户信息位于第二账户节点的数据库中；

将所述第二指令向所述第二账户节点发送，以使所述第二账户节点对所述第二指令进行处理。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包括这些改动和变型在内。

Claims (18)

1.一种分布式系统，其特征在于，所述分布式系统包括N个节点，其中每个节点中包含一个数据库，任两个节点之间的数据库结构和参数相同，N≥2；

将所述N个节点中的任一节点作为第一类节点，所述第一类节点用于：

接收第一指令；

解析所述第一指令，确定所述第一指令涉及的标识信息；

当所述第一指令涉及的标识信息还包括第二标识信息时，对所述第一指令进行处理，并根据所述第一指令生成第二指令，所述第二标识信息位于第二类节点的数据库中；

将所述第二指令向所述第二类节点发送，以使所述第二类节点对所述第二指令进行处理。

2.如权利要求1所述的系统，其特征在于，所述第一类节点为第一对象节点；所述第一对象节点用于：

接收消息中间件发送的所述第一指令，所述第一指令中包含第一标识信息，所述第一标识信息位于所述第一对象节点的数据库中。

3.如权利要求2所述的系统，其特征在于，所述第一指令为报文类指令；

所述第一对象节点具体用于：

解析所述第一报文，确定所述第一报文的M个子流程；

依次判断所述M个子流程对应的标识信息；

针对对应的标识信息位于所述第一对象节点的数据库中的子流程，对所述子流程进行处理；

针对对应的标识信息位于第二类节点的数据库中的子流程，根据所述子流程生成第二报文并向所述第二类节点发送。

4.如权利要求3所述的系统，其特征在于，所述第二类节点为第二对象节点；所述第一类节点具体用于：

在预定时间段内，向所述第二对象节点发送所述第二指令。

5.如权利要求1所述的系统，其特征在于，所述第一类节点为第二对象节点，所述第二类节点为第一对象节点，所述第一指令为第一文件下载指令；

所述第二对象节点具体用于：

接收外围系统发送的所述第一文件下载指令；

根据所述第一文件下载指令，从文件传输模块中下载总文件；

按照所述总文件涉及的L个第一对象节点，将所述总文件进行分割，得到L份文件分片，其中一份文件分片与一个第一对象节点相对应；

将所述L份文件上传至所述文件传输模块；

生成L个第二文件下载指令，其中每一个第二文件下载指令与一个第一对象节点相对应；

针对所述L个第二文件下载指令中的任一个第二文件下载指令，将所述第二文件下载指令向对应的第一对象节点发送；

所述第一对象节点用于：

根据所述第二文件下载指令从所述文件传输模块中下载文件分片，并对所述文件分片进行处理。

6.如权利要求5所述的系统，其特征在于，所述第一对象节点还用于：将已处理的文件分片上传至所述文件传输模块，并向所述第二对象节点发送文件分片下载消息；

所述第二对象节点还用于：根据文件分片下载消息从所述文件传输模块中下载已处理的文件分片；将L个已处理的文件分片进行合并，并上传至所述文件传输模块；向所述外围系统发送文件处理完成消息。

7.如权利要求1至6任一项所述的系统，其特征在于，所述第一类节点，还用于：

接收开户指令；

根据所述开户指令，生成标识信息，并在数据库中记录所述标识信息与所述第一类节点的关系。

8.如权利要求1至6任一项所述的系统，其特征在于，所述第一类节点，还用于：

按照设定时间间隔，收集所述第一类节点中未上传的操作数据；

将所述未上传的操作数据上传至文件传输模块中，以使所述未上传的操作数据被下载并保存至总数据库中。

9.一种分布式系统的数据处理方法，其特征在于，包括：

第一类节点接收第一指令，所述第一类节点为N个节点中的任一节点，包含一个数据库，所述N个节点中的任两个节点之间的数据库结构和参数相同；

所述第一类节点解析所述第一指令，确定所述第一指令涉及的标识信息；

当所述第一指令涉及的标识信息还包括第二标识信息时，所述第一类节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，所述第二标识信息位于第二类节点的数据库中；

所述第一类节点将所述第二指令向所述第二类节点发送，以使所述第二类节点对所述第二指令进行处理。

10.如权利要求9所述的方法，其特征在于，所述第一类节点为第一对象节点；所述第一类节点接收第一指令，包括：

所述第一对象节点接收消息中间件发送的所述第一指令，所述第一指令中包含第一标识信息，所述第一标识信息位于所述第一对象节点中。

11.如权利要求10所述的方法，其特征在于，所述第一指令为报文类指令；

所述第一类节点解析所述第一指令，确定所述第一指令涉及的标识信息，包括：

所述第一对象节点解析所述第一报文，确定所述第一报文的M个子流程；

所述第一对象节点依次判断所述M个子流程对应的标识信息；

当所述第一指令涉及的标识信息还包括第二标识信息时，所述第一类节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，包括：

针对对应的标识信息位于所述第一对象节点的数据库中的子流程，所述第一对象节点对所述子流程进行处理；

针对对应的标识信息位于第二类节点的数据库中的子流程，所述第一对象节点根据所述子流程生成第二报文并向所述第二类节点发送。

12.如权利要求11所述的方法，其特征在于，所述第二类节点为第二对象节点；所述第一类节点将所述第二指令向所述第二类节点发送，包括：

所述第一类节点在预定时间段内，向所述第二对象节点发送所述第二指令。

13.如权利要求9所述的方法，其特征在于，所述第一类节点为第二对象节点，所述第二类节点为第一对象节点，所述第一指令为第一文件下载指令；

所述第一类节点接收第一指令，包括：

所述第二对象节点接收外围系统发送的所述第一文件下载指令；

所述第一类节点解析所述第一指令，确定所述第一指令涉及的标识信息，包括：

所述第二对象节点根据所述第一文件下载指令，从文件传输模块中下载总文件；

所述第二对象节点按照所述总文件涉及的L个第一对象节点，将所述总文件进行分割，得到L份文件分片，其中一份文件分片与一个第一对象节点相对应；

所述第二对象节点将所述L份文件上传至所述文件传输模块；

所述当所述第一指令涉及的标识信息还包括第二标识信息时，第一类节点对所述第一指令进行处理，并根据所述第一指令生成第二指令，包括：

所述第二对象节点生成L个第二文件下载指令，其中每一个第二文件下载指令与一个第一对象节点相对应；

所述第一类节点将所述第二指令向所述第二类节点发送，包括：

针对所述L个第二文件下载指令中的任一个第二文件下载指令，所述第二对象节点将所述第二文件下载指令向对应的第一对象节点发送，以使所述第一对象节点根据所述第二文件下载指令从所述文件传输模块中下载文件分片，并对所述文件分片进行处理。

14.如权利要求13所述的方法，其特征在于，所述第二对象节点将所述第二文件下载指令向对应的第一对象节点发送之后，还包括：

所述第二对象节点接收第一对象节点发送的文件分片下载消息；

所述第二对象节点根据文件分片下载消息从所述文件传输模块中下载已处理的文件分片；

所述第二对象节点将L个已处理的文件分片进行合并，并上传至所述文件传输模块；

所述第二对象节点向所述外围系统发送文件处理完成消息。

15.如权利要求9至14任一项所述的方法，其特征在于，所述第一类节点接收第一指令之前，还包括：

所述第一类节点接收开户指令；

所述第一类节点根据所述开户指令，生成标识信息，并在数据库中记录所述标识信息与所述第一类节点的关系。

16.如权利要求9至14任一项所述的方法，其特征在于，还包括：

所述第一类节点按照设定时间间隔，收集所述第一类节点中未上传的操作数据；

所述第一类节点将所述未上传的操作数据上传至文件传输模块中，以使所述未上传的操作数据被下载并保存至总数据库中。

17.一种电子设备，其特征在于，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求9-16任一所述的方法。

18.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令用于使所述计算机执行权利要求9-16任一所述的方法。