CN105574209A - 一种基于规则定制的多系统间数据交换装置及方法 - Google Patents
一种基于规则定制的多系统间数据交换装置及方法 Download PDFInfo
- Publication number
- CN105574209A CN105574209A CN201610072046.3A CN201610072046A CN105574209A CN 105574209 A CN105574209 A CN 105574209A CN 201610072046 A CN201610072046 A CN 201610072046A CN 105574209 A CN105574209 A CN 105574209A
- Authority
- CN
- China
- Prior art keywords
- data
- rule
- exchange
- exchanges
- exchanges data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及数据交换技术领域，特别涉及一种基于规则定制的多系统间数据交换装置，所述基于规则定制的多系统间数据交换装置包括应用服务器和网络支撑平台，应用服务器和网络支撑平台通过网络与系统与应用软件服务平台相互连接，系统与应用软件服务平台与交换数据中心网络连接，交换数据中心设有对外数据接口，并且与企业应用集成平台通过网络连接，交换数据中心内设有若干个适配器，每个适配器均通过数据交换应用服务与相应的数据库连接，满足多系统间的数据交换处理要求，并提供针对此交换规则进行解析与处理的规则引擎，实现通过设定的交换规则进行相应的数据转换、处理、同步与交互的方法和系统。
Description
技术领域
本发明涉及数据交换技术领域，具体涉及一种基于规则定制的多系统间数据交换装置及方法。
背景技术
随着铁路信息化的不断推进，各部门信息化建设取得了巨大的成绩。但由于之前缺少统一的建设规划，导致各个业务系统的互通性与互操作性很不好。大量的信息难为其他系统所用，造成了资源的浪费。因此，实现铁路信息资源的共享和综合利用对于铁路信息化建设有着重大意义。以铁路车辆部门为例，目前已经建成的业务系统，光是全路统一的就有HMIS、KMIS、THDS、TCDS等等，加上各铁路局、各车辆段自行研发的系统，可以说五花八门，随着时间的推移，必然对数据集成的要求会越来越高。
现有业务集成的方式大都采用点对点集成方式，时间越久，该模式的缺点为业务集成的方式大都采用点对点集成方式，时间越久，该模式的缺点也越来越明显；集成接口越来越复杂，不同的开发技术增加了开发及维护接口的复杂性；集成接口的改动麻烦，集成接口都是通过硬编码形式，当集成需求变更时，很难能够快速的对需求变更进行响应；集成架构越来越混乱，点对点连接越来越多，形成了网状，难于进行集成的扩展和规划。
发明内容
本发明的目的在于针对现有技术的缺陷和不足，提供一种基于规则定制的多系统间数据交换装置及方法，满足多系统间的数据交换处理要求，并提供针对此交换规则进行解析与处理的规则引擎，实现通过设定的交换规则进行相应的数据转换、处理、同步与交互的方法和系统，能有效解决技术背景中的问题。
为实现上述目的，本发明采用的技术方案是：
本发明所述的一种基于规则定制的多系统间数据交换装置，所述基于规则定制的多系统间数据交换装置包括应用服务器和网络支撑平台，应用服务器和网络支撑平台通过网络与系统与应用软件服务平台相互连接，系统与应用软件服务平台与交换数据中心网络连接，交换数据中心设有对外数据接口，并且与企业应用集成平台通过网络连接，交换数据中心内设有若干个适配器，每个适配器均通过数据交换应用服务与相应的数据库连接。
在上述技术方案基础上优选，所述该装置配置信息包括：规则编号、源数据库实例名、数据更新时间标识、目的数据库实例名、全表传输标识、交换的先后顺序、数据检索语句。
在上述技术方案基础上优选，所述该装置数据交换规则包含规则定义、规则解析、规则执行三部分。
在上述技术方案基础上优选，所述系统与应用软件服务平台包括操作系统、数据库、应用支撑软件。
在上述技术方案基础上优选，所述企业应用集成平台包括办公管理、业务管理、数据管理、ERP。
另外本发明还设计了一种基于规则定制的多系统间数据交换方法，包括如下步骤：
（1）创建数据库对象：创建对象信息，对需要交换的数据库进行访问连接配置，授权能够访问的业务数据库，支持不同数据库适配器的配置，主要包括业界流行的ORACE、SQLSERVER数据库；
（2）定义数据交换对象：在数据库适配器基础上，进行各数据交换对象的信息配置，标识交换数据表从源数据到目的数据的交换变化规则；
（3）配置数据交换规则：针对数据交换的具体要求，配置交换数据的基本转换与处理规则，通过配置该交换规则进行数据字段信息的抽取语转换处理；
（4）设置数据交换时间戳：数据交换时间戳在数据交换表中进行配置，配置时间戳字段，系统自动记录每次抽取的最后时间戳，并记录下次需要抽取的时间戳，通过该时间戳进行增量数据的自动抽取；
（5）定义数据交换间隔：定义数据交换处理的时间间隔，以秒为最小时间单位进行设置，根据具体的数据交换要求进行配置，或通过手动编辑配置文件来进行自定义；
（6）处理数据交换规则：数据交换应用服务程序自动加载数据交换配置信息，结合时间戳信息，组合各项交换规则，并加以解析与转换，将配置的数据交换规则解析为目标数据库能够识别的语句，通过数据交换服务程序加以执行，进行数据的数据的抽取、转换与传输。
在上述技术方案基础上优选，步骤（2）中的配置信息包括：规则编号、源数据库实例名、数据更新时间标识、目的数据库实例名、全表传输标识、交换的先后顺序、数据检索语句。
在上述技术方案基础上优选，所述步骤（3）中的数据交换规则包含规则定义、规则解析、规则执行三部分。
在上述技术方案基础上优选，所述步骤（6）中的数据交换的规则处理过程包括如下步骤：
步骤一：获取数据交换规则：根据数据交换对象信息，提取配置的数据交换规则，并根据规则进行数据交换信息的组合；
步骤二：解析交换规则：对提取并组合后的数据交换信息进行可执行语句的生成与转换处理，将整理后的各种配置的交换规则集合解析为符合SQL规范的、目的数据库能够识别的可执行语句；
步骤三：验证交换规则：对解析后得到的语句进行正确性验证，验证通过的则提交给执行元件进行执行；
步骤四：执行数据转换与处理：执行验证通过后的数据交换语句，通过数据交换服务程序进行数据对象的填充、转换与处理，完成数据交换。
采用上述结构后，本发明有益效果为：本发明用于跨数据库、多数据库之间的数据交换，包括应用服务器和网络支撑平台，应用服务器和网络支撑平台通过网络与系统与应用软件服务平台相互连接，系统与应用软件服务平台与交换数据中心网络连接，交换数据中心设有对外数据接口，并且与企业应用集成平台通过网络连接，交换数据中心内设有若干个适配器，每个适配器均通过数据交换应用服务与相应的数据库连接，具有高效、易用、可扩展的数据交换规则；安全、可靠的数据交换应用；支持多数据库之间数据交换；支持文件传输；可保证数据安全等优点。
附图说明
图1是本发明的总体构架结构图；
图2是本发明的流程图。
具体实施方式
下面结合附图对本发明作进一步的说明。
实施例：如图1、图2所示，本发明所述的一种基于规则定制的多系统间数据交换装置，所述基于规则定制的多系统间数据交换装置包括应用服务器和网络支撑平台，应用服务器和网络支撑平台通过网络与系统与应用软件服务平台相互连接，系统与应用软件服务平台与交换数据中心网络连接，交换数据中心设有对外数据接口，并且与企业应用集成平台通过网络连接，交换数据中心内设有若干个适配器，每个适配器均通过数据交换应用服务与相应的数据库连接。
在上述是实施例上优选，所述该装置配置信息包括：规则编号、源数据库实例名、数据更新时间标识、目的数据库实例名、全表传输标识、交换的先后顺序、数据检索语句。
在上述是实施例上优选，所述该装置数据交换规则包含规则定义、规则解析、规则执行三部分。
在上述是实施例上优选，所述系统与应用软件服务平台包括操作系统、数据库、应用支撑软件。
在上述是实施例上优选，所述企业应用集成平台包括办公管理、业务管理、数据管理、ERP。
另外本发明还设计了一种基于规则定制的多系统间数据交换方法，包括如下步骤：
（1）创建数据库对象：创建对象信息，对需要交换的数据库进行访问连接配置，授权能够访问的业务数据库，支持不同数据库适配器的配置，主要包括业界流行的ORACE、SQLSERVER数据库；
（2）定义数据交换对象：在数据库适配器基础上，进行各数据交换对象的信息配置，标识交换数据表从源数据到目的数据的交换变化规则；
（3）配置数据交换规则：针对数据交换的具体要求，配置交换数据的基本转换与处理规则，通过配置该交换规则进行数据字段信息的抽取语转换处理；
（4）设置数据交换时间戳：数据交换时间戳在数据交换表中进行配置，配置时间戳字段，系统自动记录每次抽取的最后时间戳，并记录下次需要抽取的时间戳，通过该时间戳进行增量数据的自动抽取；
（5）定义数据交换间隔：定义数据交换处理的时间间隔，以秒为最小时间单位进行设置，根据具体的数据交换要求进行配置，或通过手动编辑配置文件来进行自定义；
（6）处理数据交换规则：数据交换应用服务程序自动加载数据交换配置信息，结合时间戳信息，组合各项交换规则，并加以解析与转换，将配置的数据交换规则解析为目标数据库能够识别的语句，通过数据交换服务程序加以执行，进行数据的数据的抽取、转换与传输。
在上述是实施例上优选，步骤（2）中的配置信息包括：规则编号、源数据库实例名、数据更新时间标识、目的数据库实例名、全表传输标识、交换的先后顺序、数据检索语句。
在上述是实施例上优选，所述步骤（3）中的数据交换规则包含规则定义、规则解析、规则执行三部分。
在上述是实施例上优选，所述步骤（6）中的数据交换的规则处理过程包括如下步骤：
步骤一：获取数据交换规则：根据数据交换对象信息，提取配置的数据交换规则，并根据规则进行数据交换信息的组合；
步骤二：解析交换规则：对提取并组合后的数据交换信息进行可执行语句的生成与转换处理，将整理后的各种配置的交换规则集合解析为符合SQL规范的、目的数据库能够识别的可执行语句；
步骤三：验证交换规则：对解析后得到的语句进行正确性验证，验证通过的则提交给执行元件进行执行；
步骤四：执行数据转换与处理：执行验证通过后的数据交换语句，通过数据交换服务程序进行数据对象的填充、转换与处理，完成数据交换。
本发明通过引入时间戳策略来进行数据交换的配置、交换规则的配置、转换规则的配置、传输规则的配置以及系统配置,为应用集成提供了良好的灵活性和扩展能力。在系统建设过程中通过简单配置,就可以实现各应用系统之间的数据交换、数据共享和数据同步,快速构建数据交换应用。所有的数据交换整合过程可以在配置表中完成,不需要用户编写代码,既快速又简单方便。
本发明在进行应用系统建设时,安全管理始终是重要的一环,它贯穿了系统建设的全过程。各业务系统数据通过交换数据中心以及数据交换服务程序进行数据的传输,各业务系统与数据交换服务程序相对独立的,可以最大限度地保护原有业务系统的安全。在系统各个层面上的数据访问、数据转换和数据传输,都由数据交换程序统一处理,既可以防止不相关的数据在数据交换服务程序上的传输,造成系统负担,影响系统效率和安全,又能保证目标只接收自己关心的数据,保证数据的安全与可靠。
本发明在数据交换服务程序中可以预先定义一系列的“数据交换规则”集，一次数据交换由控制两个或多个端点间进行数据交换的规则集组成；支持多个系统数据间的数据交换。支持物理文件以及文件类型的字段数据的配置与传输。
本发明数据安全性分为个方面的内容：一是如何保证数据交换中心本身的数据安全性；二是如何保证数据在传输过程中的安全性，对本系统支持数据加密机制，保障传输过程中数据安全；提供权限控制机制，保证管理与维护的安全性。对于第一条而言，更多的依附于所部署应用服务器的安全访问机制，并附以系统提供用户、权限体系与数据访问控制。
基于上述，本发明的优点在于：本发明用于跨数据库、多数据库之间的数据交换，包括应用服务器和网络支撑平台，应用服务器和网络支撑平台通过网络与系统与应用软件服务平台相互连接，系统与应用软件服务平台与交换数据中心网络连接，交换数据中心设有对外数据接口，并且与企业应用集成平台通过网络连接，交换数据中心内设有若干个适配器，每个适配器均通过数据交换应用服务与相应的数据库连接，具有高效、易用、可扩展的数据交换规则；安全、可靠的数据交换应用；支持多数据库之间数据交换；支持文件传输；可保证数据安全等优点。
以上所述仅是本发明的较佳实施方式，故凡依本发明专利申请范围所述的构造、特征及原理所做的等效变化或修饰，均包括于本发明专利申请范围内。
Claims (9)
1.一种基于规则定制的多系统间数据交换装置，其特征在于：所述基于规则定制的多系统间数据交换装置包括应用服务器和网络支撑平台，应用服务器和网络支撑平台通过网络与系统与应用软件服务平台相互连接，系统与应用软件服务平台与交换数据中心网络连接，交换数据中心设有对外数据接口，并且与企业应用集成平台通过网络连接，交换数据中心内设有若干个适配器，每个适配器均通过数据交换应用服务与相应的数据库连接。
2.根据权利要求1所述的一种基于规则定制的多系统间数据交换装置，其特征在于：所述该装置配置信息包括：规则编号、源数据库实例名、数据更新时间标识、目的数据库实例名、全表传输标识、交换的先后顺序、数据检索语句。
3.根据权利要求1所述的一种基于规则定制的多系统间数据交换装置，其特征在于：所述该装置数据交换规则包含规则定义、规则解析、规则执行三部分。
4.根据权利要求1所述的一种基于规则定制的多系统间数据交换装置，其特征在于：所述系统与应用软件服务平台包括操作系统、数据库、应用支撑软件。
5.根据权利要求1所述的一种基于规则定制的多系统间数据交换装置，其特征在于：所述企业应用集成平台包括办公管理、业务管理、数据管理、ERP。
6.一种基于规则定制的多系统间数据交换方法，其特征在于，包括如下步骤：
（1）创建数据库对象：创建对象信息，对需要交换的数据库进行访问连接配置，授权能够访问的业务数据库，支持不同数据库适配器的配置，主要包括业界流行的ORACE、SQLSERVER数据库；
（2）定义数据交换对象：在数据库适配器基础上，进行各数据交换对象的信息配置，标识交换数据表从源数据到目的数据的交换变化规则；
（3）配置数据交换规则：针对数据交换的具体要求，配置交换数据的基本转换与处理规则，通过配置该交换规则进行数据字段信息的抽取语转换处理；
（4）设置数据交换时间戳：数据交换时间戳在数据交换表中进行配置，配置时间戳字段，系统自动记录每次抽取的最后时间戳，并记录下次需要抽取的时间戳，通过该时间戳进行增量数据的自动抽取；
（5）定义数据交换间隔：定义数据交换处理的时间间隔，以秒为最小时间单位进行设置，根据具体的数据交换要求进行配置，或通过手动编辑配置文件来进行自定义；
（6）处理数据交换规则：数据交换应用服务程序自动加载数据交换配置信息，结合时间戳信息，组合各项交换规则，并加以解析与转换，将配置的数据交换规则解析为目标数据库能够识别的语句，通过数据交换服务程序加以执行，进行数据的数据的抽取、转换与传输。
7.根据权利要求6所述的一种基于规则定制的多系统间数据交换方法，其特征在于，步骤（2）中的配置信息包括：规则编号、源数据库实例名、数据更新时间标识、目的数据库实例名、全表传输标识、交换的先后顺序、数据检索语句。
8.根据权利要求6所述的一种基于规则定制的多系统间数据交换方法，其特征在于，所述步骤（3）中的数据交换规则包含规则定义、规则解析、规则执行三部分。
9.根据权利要求6所述的一种基于规则定制的多系统间数据交换方法，其特征在于，所述步骤（6）中的数据交换的规则处理过程包括如下步骤：
步骤一：获取数据交换规则：根据数据交换对象信息，提取配置的数据交换规则，并根据规则进行数据交换信息的组合；
步骤二：解析交换规则：对提取并组合后的数据交换信息进行可执行语句的生成与转换处理，将整理后的各种配置的交换规则集合解析为符合SQL规范的、目的数据库能够识别的可执行语句；
步骤三：验证交换规则：对解析后得到的语句进行正确性验证，验证通过的则提交给执行元件进行执行；
步骤四：执行数据转换与处理：执行验证通过后的数据交换语句，通过数据交换服务程序进行数据对象的填充、转换与处理，完成数据交换。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610072046.3A CN105574209A (zh) | 2016-02-02 | 2016-02-02 | 一种基于规则定制的多系统间数据交换装置及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610072046.3A CN105574209A (zh) | 2016-02-02 | 2016-02-02 | 一种基于规则定制的多系统间数据交换装置及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN105574209A true CN105574209A (zh) | 2016-05-11 |
Family
ID=55884340
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610072046.3A Withdrawn CN105574209A (zh) | 2016-02-02 | 2016-02-02 | 一种基于规则定制的多系统间数据交换装置及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105574209A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108040011A (zh) * | 2017-12-13 | 2018-05-15 | 中国兵器装备集团自动化研究所 | 一种基于龙芯架构的软件定义网络交换装置及数据交换方法 |
| CN109145043A (zh) * | 2018-07-18 | 2019-01-04 | 上海汉得信息技术股份有限公司 | 一种多平台数据对接方法及设备 |
| CN115914379A (zh) * | 2022-11-11 | 2023-04-04 | 国网冀北电力有限公司 | 一种数据交换平台及数据交换系统 |
-
2016
- 2016-02-02 CN CN201610072046.3A patent/CN105574209A/zh not_active Withdrawn
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108040011A (zh) * | 2017-12-13 | 2018-05-15 | 中国兵器装备集团自动化研究所 | 一种基于龙芯架构的软件定义网络交换装置及数据交换方法 |
| CN108040011B (zh) * | 2017-12-13 | 2020-07-07 | 中国兵器装备集团自动化研究所 | 一种基于龙芯架构的软件定义网络交换装置及数据交换方法 |
| CN109145043A (zh) * | 2018-07-18 | 2019-01-04 | 上海汉得信息技术股份有限公司 | 一种多平台数据对接方法及设备 |
| CN115914379A (zh) * | 2022-11-11 | 2023-04-04 | 国网冀北电力有限公司 | 一种数据交换平台及数据交换系统 |
| CN115914379B (zh) * | 2022-11-11 | 2024-06-28 | 国网冀北电力有限公司 | 一种数据交换装置及数据交换系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104318402A (zh) | 基于电网gis平台的一体化规划设计信息系统 | |
| Boroun et al. | An efficient heuristic method for joint optimization of train scheduling and stop planning on double-track railway systems | |
| CN113420039B (zh) | 一种调控云平台的模型管理方法、系统、设备及介质 | |
| CN103605705A (zh) | 一种变电站scd配置文件的管理系统 | |
| CN102902767A (zh) | 一种表格快速搭建的方法及系统 | |
| CN102937800B (zh) | Icd集成管理工具 | |
| CN102034152A (zh) | 基于soa架构的异构软件系统数据的集成整合方法与系统 | |
| CN105574209A (zh) | 一种基于规则定制的多系统间数据交换装置及方法 | |
| CN112270422A (zh) | 一种基于知识服务的电务维护辅助系统及方法 | |
| CN108108460A (zh) | 一种标准化作业流程智能管理系统架构及系统 | |
| CN102799555B (zh) | 电力信息系统中可配置数据交互工具的设计方法及其系统 | |
| Fernando et al. | Hybrid framework for master data management | |
| CN105704184A (zh) | 一种基于层级框架的电网组织解析系统及解析方法 | |
| CN102915368A (zh) | 一种基于云计算的知识服务装置 | |
| US20150154567A1 (en) | Facility management system using perspective definition metadata and method therefor | |
| CN106021294A (zh) | 城轨线网接入数据接口处理方法 | |
| CN104573075A (zh) | 一种实现对研发应用代码管理的方法及系统 | |
| CN101751618A (zh) | 一种实现轨道交通建设管理协同应用平台的方法、装置和系统 | |
| CN106791932A (zh) | 分布式转码系统、方法及其装置 | |
| CN103218389A (zh) | 一种数据处理服务系统 | |
| Gu et al. | Research on Data Exchange Schema for Railway Infrastructure | |
| Lambert et al. | Method and applications of IEC common information model standard for distribution operations: A path towards smart grids development | |
| CN201607765U (zh) | 因公出国境管理系统 | |
| CN103473281A (zh) | 数字影音图书馆系统 | |
| Parkhomenko | Complex requirements analysis for the high-level design of Embedded Systems |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20160511 |
|
| WW01 | Invention patent application withdrawn after publication |