CN102841927B - 多数据库之间数据交互的方法装置及分布式数据交互系统 - Google Patents

Abstract

本发明提供一种多数据库之间数据交互的方法，包括：接收源数据库发送的数据业务操作请求；从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据；根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。本发明通过对源数据格式的转换及利用业务相关规则生成对所述相应格式的数据的操作指令，打破企业信息化中各独立数据库之间的信息壁垒，实现企业内多数据库数据、信息流的互联互通，相互协作。

Description

多数据库之间数据交互的方法装置及分布式数据交互系统

技术领域

本发明涉及计算机软件领域，尤其涉及一种多数据库之间数据交互的方法、装置，以及分布式数据交互系统。

背景技术

近年来，信息技术突飞猛进、日新月异，已成为各行各业发展的支撑技术，并渗透到生活、工作、管理、电子商务和学习等各个方面。在信息化建设取得可喜成就的同时，越来越多的企业开始出现了更多的忧虑。由于企业信息的异构、管理的多样化，造成了企业内运用各自独立，无法实现信息的有效互通，反而加大了信息管理的复杂性。

在过去的信息化建设中，要实现信息的互联互通，需要多家厂家，更多的程序编写人员，针对企业的不同运用，进行大量的二次开发。传统的解决方案存在着严重的缺点。

1、只要有新的需求，就需要企业花费大量的人力、物力，联合多个软件厂家进行二次开发，成本耗用很高。

2、在二次开发中，将耗用成倍的时间进行互相之间的协议对接，改造周期长。

3、二次开发后的功能只能满足本企业单方面的需求，无法复用。如果未来有业务变更，还需要投入大量成本进行再次开发。

4、必须与专门的厂商协调才能进行改造，如果该厂商业务变更或售后支持无法满足，企业改造计划将无法实施。

发明内容

本发明主要解决的技术问题是提供一种多数据库之间数据交互的方法、装置，以及分布式数据交互系统，在不通过二次开发的情况下，通过对源数据格式的转换及利用业务相关规则生成对所述相应格式的数据的操作指令，打破企业信息化中各独立数据库之间的信息壁垒，实现企业内多数据库数据、信息流的互联互通，相互协作。

为解决上述问题，本发明采用的一种技术方案是：提供一种多数据库之间数据交互的方法，包括：

接收源数据库发送的数据业务操作请求；

从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据；

根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。

其中，所述接收源数据库发送的数据业务操作请求之前还包括：

判断是否设置数据更新周期；

若判定没有设置所述数据更新周期，则执行所述接收源数据库发送的数据业务操作请求；

若判定有设置所述数据更新周期，则判断是否到所述数据更新周期；若否，则执行所述接收源数据库发送的数据业务操作请求；若是，则继续判断是否到所述数据更新周期。

其中，所述根据数据格式转换规则将所述数据源转换成相应格式的数据包括：接收转换规则库发送的数据转换字典；以及，解析所述数据源中数据的数据内容结构，并将解析后的数据格式匹配成与所述数据转换字典格式一致的数据；

所述利用业务相关规则生成对所述相应格式的数据的操作指令包括：从数据规则库和业务信息库中获取业务相关规则；以及，利用所述业务相关规则生成对所述相应格式的数据的操作指令。

其中，所述数据业务操作请求包括添加数据操作请求、删除数据操作请求、修改数据操作请求、查询数据操作请求和更新数据操作请求。

为解决上述问题，本发明采用的另一种技术方案是：提供一种多数据库之间数据交互的装置，包括：

业务操作接收模块，用于接收源数据库发送的数据业务操作请求；

数据格式转换模块，用于从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据；

操作指令生成模块，用于根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。

其中，还包括：

判断模块，用于判断是否设置数据更新周期；

第一判定模块，用于在判定没有设置所述数据更新周期的情况下触发所述业务操作接收模块接收源数据库发送的数据业务操作请求；

第二判定模块，用于在判定有设置所述数据更新周期的情况下判断是否到所述数据更新周期，并在所述数据更新周期达到后触发所述业务操作接收模块接收源数据库发送的数据业务操作请求。

其中，所述数据格式转换模块包括：接收单元，用于接收转换公式规则库发送的数据转换字典；以及解析单元，用于解析所述数据源中数据的数据内容结构，并将解析后的数据格式匹配成与所述数据转换字典格式一致的数据；

所述操作指令生成模块包括：获取单元，用于从数据规则库和业务信息库中获取业务相关规则；以及生成单元，用于利用所述业务相关规则生成对所述相应格式的数据的操作指令。

其中，所述数据业务操作请求包括添加数据操作请求、删除数据操作请求、修改数据操作请求、查询数据操作请求和更新数据操作请求。

为解决上述问题，本发明采用的另一种技术方案是：提供一种分布式数据交互系统，包括：

业务管理子系统、数据交互装置、源数据库和目的数据库；所述业务管理子系统与所述数据交互装置连接，所述源数据库、目的数据库均与所述数据交互装置连接；

所述业务管理子系统包括转换规则库、数据规则库、业务信息库以及数据连接库，所述转换规则库和数据规则库之间、数据规则库和业务信息库之间、业务信息库和数据连接库之间、以及数据连接库和转换规则库之间均通过通讯握手协议连接；

所述数据交互装置包括：业务操作接收模块，用于接收源数据库发送的数据业务操作请求；数据格式转换模块，用于从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据；以及，操作指令生成模块，用于根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。

本发明的有益效果是：本发明在不通过二次开发的情况下，通过对源数据格式的转换及利用业务相关规则生成对所述相应格式的数据的操作指令，打破企业信息化中各独立数据库之间的信息壁垒，实现企业内多数据库数据、信息流的互联互通，相互协作。进一步的，本发明所提出的技术方案也可用于多个独立系统（例如OA、客户关系管理、考勤等）之间，打破上述多独立系统之间的信息壁垒，实现多独立系统之间数据、信息流的互联互通。

附图说明

图1是本发明一实施方式中多数据库之间数据交互的方法流程图；

图2是本发明一实施方式中多数据库之间数据交互的装置功能模块图；

图3是本发明另一实施方式中多数据库之间数据交互的方法流程图；

图4是本发明另一实施方式中多数据库之间数据交互的装置功能模块图；

图5是本发明一实施方式中数据格式转换的流程图；

图6是本发明一实施方式中分布式数据交互系统的系统图；

图7是本发明一实施方式中分布式数据交互系统的系统图。

具体实施方式

为详细说明本发明的技术内容、构造特征、所实现目的及效果，以下结合实施方式并配合附图详予说明。

在当前的信息化运用系统软件中，信息的存储与使用，都依赖于数据库，计算机软件的界面仅仅属于软件系统的表现层。要实现信息的互联互通，就必须要解决不同数据库、系统之间数据的相互联通，相互握手，最终才能通过网络、端口等通讯手段传递到不同的数据库、系统运用中。

请参阅图1及图2，本实施方式提供一种多数据库之间数据交互的方法，包括：

101、接收源数据库发送的数据业务操作请求。

102、从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据。

103根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。

上述中，多数据库之间数据交互的方法通过对源数据格式的转换及利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至目的数据库，从而将数据存储格式、操作指令均与目的数据库匹配，达到当对源数据库中数据进行操作的同时，对与源数据库相关的目的数据库中相关的数据也进行了相应的操作，即实现了两个不同数据库之间复杂的数据同步更新等操作，打破各独立数据库之间的信息壁垒，实现多数据库数据、信息流的互联互通，相互协作。

进一步的，本技术方案也可用于多个独立系统（例如OA、客户关系管理、考勤等）之间，打破上述多独立系统之间的信息壁垒，实现多独立系统之间数据、信息流的互联互通。

例如：一个新员工加入企业，在人事系统录入资料的同时，企业的其他系统识别出加入了一个新的员工，则通过上述提出的技术方案，根据财务系统中员工工资信息的规则协议要求，获取人事系统中所需要的数据，并经过数据格式转换、操作指令生成等，将人事系统中所需要的数据同步更新到财务系统中。当然，也可以同时同步到其他的OA等系统内。

在上述的某些实施方式中，所述数据业务操作请求包括添加数据操作请求、删除数据操作请求、修改数据操作请求、查询数据操作请求和更新数据操作请求。

相应地，本实施方式还提供一种多数据库之间数据交互的装置，包括：

业务操作接收模块，用于接收源数据库发送的数据业务操作请求。

数据格式转换模块，用于从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据。

以及，操作指令生成模块，用于根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。

在上述的某些实施方式中，所述数据业务操作请求包括添加数据操作请求、删除数据操作请求、修改数据操作请求、查询数据操作请求和更新数据操作请求。在上述具体的实施方式中，本技术方案是通过创建接口与数据库进行通讯连接、数据交互的。

请参阅图3及图4，本发明还提供另一种实施方式，包括：

1001、判断是否设置数据更新周期；若判定没有设置所述数据更新周期，则执行101；若判定有设置所述数据更新周期，则执行1002。

1002、判断是否到所述数据更新周期；若否，则执行101；若是，则执行1002继续判断是否到所述数据更新周期。

101、接收源数据库发送的数据业务操作请求。

102、从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据。

103根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。

上述实施方式的有益效果如前文所述，在此不再赘述。进一步的，通过上述实施方式，本发明能够实现实时数据同步和定时数据同步。当本技术方案没有设置数据更新周期时，只要源数据库出现数据变更的时候，目的数据就会进行同步更新。如果本发明设置了数据更新周期，则在更新周期达到的同时判断源数据库是否有数据变更，并在判定源数据库有数据变更后进行同步更新。

此实施方式当然是考虑到不同用户的需求。例如：在企业内部有考勤系统和财务系统需要同步数据，财务系统需要在每月月初的早上得到考勤系统内每个员工考勤的月度统计来计算员工工资。按照传统的方式，企业需要人事人员在考勤系统中手工进行考勤月报表的生成和统计、打印，将数据人工交付财务人员。财务人员接收报表后，需要逐一进行手工录入。传统的流程，需要耗费1-5天的工作时间，效率低下，有违了企业信息化建设的初衷。

而通过数据同步系统，将考勤系统数据库的考勤数据设置好与财务系统的转换规则后，将之设置为每月1日凌晨5点执行同步汇总业务即可实现自动化的业务处理，而避免了传统人工操作的繁杂、效率低下、易错等弊端。

设置好业务后，到每月的1日凌晨5点，同步系统会开始执行该业务，通过中间件，将考勤数据进行抓取和汇总，生成每个人的月度数据，逐一自动转存到财务软件的数据库中。到了上班后，财务人员打开财务软件即可看到所有考勤汇总数据。整个流程的时间，只在数分钟内完成。

相应地，本实施方式还提供一种多数据库之间数据交互的装置，包括：

判断模块，用于判断是否设置数据更新周期。

第一判定模块，用于在判定没有设置所述数据更新周期的情况下触发所述业务操作接收模块接收源数据库发送的数据业务操作请求。

第二判定模块，用于在判定有设置所述数据更新周期的情况下判断是否到所述数据更新周期，并在所述数据更新周期达到后触发所述业务操作接收模块接收源数据库发送的数据业务操作请求。

业务操作接收模块，用于接收源数据库发送的数据业务操作请求。

数据格式转换模块，用于从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据。

以及，操作指令生成模块，用于根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。

在上述如图5所示的某些实施方式中，所述根据数据格式转换规则将所述数据源转换成相应格式的数据包括：接收转换规则库发送的数据转换字典；以及，解析所述数据源中数据的数据内容结构，并将解析后的数据格式匹配成与所述数据转换字典格式一致的数据。相应地，所述数据格式转换模块包括：接收单元，用于接收转换公式规则库发送的数据转换字典；以及解析单元，用于解析所述数据源中数据的数据内容结构，并将解析后的数据格式匹配成与所述数据转换字典格式一致的数据。

例如，SQL Server中的int字段类型，在DB2中需要转换为INTEGER类型，在Oracle中则需要转换为Number类型存储。那么利用本技术方案，则解析所述数据源中数据的数据内容结构，并将解析后的数据格式匹配成与所述数据转换字典格式一致的数据，从而可以实现上述数据格式的转换。

所述利用业务相关规则生成对所述相应格式的数据的操作指令包括：从数据规则库和业务信息库中获取业务相关规则；以及，利用所述业务相关规则生成对所述相应格式的数据的操作指令。相应地，所述操作指令生成模块包括：获取单元，用于从数据规则库和业务信息库中获取业务相关规则；以及生成单元，用于利用所述业务相关规则生成对所述相应格式的数据的操作指令。

在上述的某些实施方式中，所述数据业务操作请求包括添加数据操作请求、删除数据操作请求、修改数据操作请求、查询数据操作请求和更新数据操作请求。在上述具体的实施方式中，本技术方案是通过创建接口与数据库进行通讯连接、数据交互的。

在本发明中，图6、图7及下述中的数据交互装置即为上述的多数据库之间数据交互的装置。请参阅图6，本实施方式提供一种分布式数据交互系统，包括：

业务管理子系统、数据交互装置、源数据库和目的数据库；所述业务管理子系统与所述数据交互装置连接，所述源数据库、目的数据库均与所述数据交互装置连接。

所述业务管理子系统包括转换规则库、数据规则库、业务信息库以及数据连接库，所述转换规则库和数据规则库之间、数据规则库和业务信息库之间、业务信息库和数据连接库之间、以及数据连接库和转换规则库之间均通过通讯握手协议连接。

所述数据交互装置包括：业务操作接收模块，用于接收源数据库发送的数据业务操作请求；数据格式转换模块，用于从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据；以及，操作指令生成模块，用于根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。

上述方案通过源数据格式的转换及利用业务相关规则生成对所述相应格式的数据的操作指令，打破企业信息化中各独立数据库之间的信息壁垒，实现企业内多数据库数据、信息流的互联互通，相互协作。进一步的，本发明所提出的技术方案也可用于多个独立系统（例如OA、客户关系管理、考勤等）之间，打破上述多独立系统之间的信息壁垒，实现多独立系统之间数据、信息流的互联互通。

在上述某些具体的实施方式中，所述数据交互装置还包括：

判断模块，用于判断是否设置数据交互周期。

第一判定模块，用于在判定没有设置所述数据交互周期的情况下触发所述业务操作接收模块接收源数据库发送的数据业务操作请求。

第二判定模块，用于在判定有设置所述数据交互周期的情况下判断是否到所述数据交互周期，并在所述数据交互周期达到后触发所述业务操作接收模块接收源数据库发送的数据业务操作请求。

在上述某些具体的实施方式中，所述数据格式转换模块包括：接收单元，用于接收转换公式规则库发送的数据转换字典；以及解析单元，用于解析所述数据源中数据的数据内容结构，并将解析后的数据格式匹配成与所述数据转换字典格式一致的数据。所述操作指令生成模块包括：获取单元，用于从数据规则库和业务信息库中获取业务相关规则；以及生成单元，用于利用所述业务相关规则生成对所述相应格式的数据的操作指令。

在上述的某些实施方式中，所述数据业务操作请求包括添加数据操作请求、删除数据操作请求、修改数据操作请求、查询数据操作请求和更新数据操作请求。在上述具体的实施方式中，本技术方案是通过创建接口与数据库进行通讯连接、数据交互的。

请参阅图7，本技术方案不仅仅可以实现系统中两个数据库之间数据、信息流的互联互通，相互协作，还可以实现多个独立数据库之间的数据、信息流的互联互通，相互协作。

综上所述，本发明在不通过二次开发的情况下，通过对源数据格式的转换及利用业务相关规则生成对所述相应格式的数据的操作指令，打破企业信息化中各独立数据库之间的信息壁垒，实现企业内多数据库数据、信息流的互联互通，相互协作。进一步的，本发明所提出的技术方案也可用于多个独立系统（例如OA、客户关系管理、考勤等）之间，打破上述多独立系统之间的信息壁垒，实现多独立系统之间数据、信息流的互联互通。

以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (7)

1.一种多数据库之间数据交互的方法，其特征在于，包括：

接收源数据库发送的数据业务操作请求；

从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据；

根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库；

所述根据数据格式转换规则将所述数据源转换成相应格式的数据包括：接收转换规则库发送的数据转换字典；以及，解析所述数据源中数据的数据内容结构，并将解析后的数据格式匹配成与所述数据转换字典格式一致的数据；

所述利用业务相关规则生成对所述相应格式的数据的操作指令包括：从数据规则库和业务信息库中获取业务相关规则；以及，利用所述业务相关规则生成对所述相应格式的数据的操作指令。

2.根据权利要求1所述的多数据库之间数据交互的方法，其特征在于，所述接收源数据库发送的数据业务操作请求之前还包括：

判断是否设置数据更新周期；

若判定没有设置所述数据更新周期，则执行所述接收源数据库发送的数据业务操作请求；

若判定有设置所述数据更新周期，则判断是否到所述数据更新周期；若否，则执行所述接收源数据库发送的数据业务操作请求；若是，则继续判断是否到所述数据更新周期。

3.根据权利要求1至2任一项所述的多数据库之间数据交互的方法，其特征在于，所述数据业务操作请求包括添加数据操作请求、删除数据操作请求、修改数据操作请求、查询数据操作请求和更新数据操作请求。

4.一种多数据库之间数据交互的装置，其特征在于，包括：

业务操作接收模块，用于接收源数据库发送的数据业务操作请求；

数据格式转换模块，用于从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据；

操作指令生成模块，用于根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库；

所述数据格式转换模块包括：接收单元，用于接收转换公式规则库发送的数据转换字典；以及解析单元，用于解析所述数据源中数据的数据内容结构，并将解析后的数据格式匹配成与所述数据转换字典格式一致的数据；

所述操作指令生成模块包括：获取单元，用于从数据规则库和业务信息库中获取业务相关规则；以及生成单元，用于利用所述业务相关规则生成对所述相应格式的数据的操作指令。

5.根据权利要求4所述的多数据库之间数据交互的装置，其特征在于，还包括：

判断模块，用于判断是否设置数据更新周期；

第一判定模块，用于在判定没有设置所述数据更新周期的情况下触发所述业务操作接收模块接收源数据库发送的数据业务操作请求；

第二判定模块，用于在判定有设置所述数据更新周期的情况下判断是否到所述数据更新周期，并在所述数据更新周期达到后触发所述业务操作接收模块接收源数据库发送的数据业务操作请求。

6.根据权利要求4至5任一项所述的多数据库之间数据交互的装置，其特征在于，所述数据业务操作请求包括添加数据操作请求、删除数据操作请求、修改数据操作请求、查询数据操作请求和更新数据操作请求。

7.一种分布式数据交互系统，其特征在于，包括：

业务管理子系统、数据交互装置、源数据库和目的数据库；所述业务管理子系统与所述数据交互装置连接，所述源数据库、目的数据库均与所述数据交互装置连接；

所述业务管理子系统包括转换规则库、数据规则库、业务信息库以及数据连接库，所述转换规则库和数据规则库之间、数据规则库和业务信息库之间、业务信息库和数据连接库之间、以及数据连接库和转换规则库之间均通过通讯握手协议连接；

所述数据交互装置包括：业务操作接收模块，用于接收源数据库发送的数据业务操作请求；数据格式转换模块，用于从目的数据库中获取数据源，并根据数据格式转换规则将所述数据源转换成相应格式的数据；以及，操作指令生成模块，用于根据数据业务操作请求，利用业务相关规则生成对所述相应格式的数据的操作指令，并将所述操作指令发送至所述目的数据库。