CN102567330A - 异构数据库集成系统 - Google Patents

异构数据库集成系统 Download PDF

Info

Publication number
CN102567330A
CN102567330A CN2010105894939A CN201010589493A CN102567330A CN 102567330 A CN102567330 A CN 102567330A CN 2010105894939 A CN2010105894939 A CN 2010105894939A CN 201010589493 A CN201010589493 A CN 201010589493A CN 102567330 A CN102567330 A CN 102567330A
Authority
CN
China
Prior art keywords
data
database
converting
base set
set apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010105894939A
Other languages
English (en)
Inventor
陆莉莉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanda University
Original Assignee
Sanda University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanda University filed Critical Sanda University
Priority to CN2010105894939A priority Critical patent/CN102567330A/zh
Publication of CN102567330A publication Critical patent/CN102567330A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明揭示了一种异构数据库集成系统，包括：一组底层数据库，一组底层数据库根据不同的数据结构构建；数据库集成装置，连接到一组底层数据库，数据库集成装置与底层数据库中的每一个进行数据交换，数据库集成装置与一个底层数据库进行数据交换时，使用与该底层数据库相符的数据结构，数据库集成装置将从底层数据库获取的数据进行数据格式转换，形成统一数据格式的数据；上层数据库，连接到数据库集成装置，从数据库集成装置中获取具有统一数据格式的数据，上层数据库中的数据与一组底层数据库中的数据在内容上同步；访问界面，连接到上层数据库，访问界面仅访问上层数据库，获取具有统一数据格式的数据。

Description

异构数据库集成系统
 
技术领域
本发明涉及数据库技术，尤其涉及一种异构数据库集成系统。
 
背景技术
自计算机诞生以来，人类积累了丰富的数据资源。计算机网络的普及，使得数据资源的共享成为一个热门话题。然而，由于时间和空间上的差异，人们使用的数据源各不相同，各信息系统的数据类型、数据访问方式等也都千差万别。这就导致各数据源、系统之间不能高效地进行数据交换与共享，成为“信息孤岛”。数据共享问题由此产生，异构数据共享问题也受到越来越多人的重视。异构数据不仅指不同的数据库系统之间的异构，如Oracle和SQL Server数据库，还包括不同结构数据之间的异构，如结构化的数据库数据和半结构化的数据。
数据共享是一个复杂的系统，对于数字化和信息化刚起步不久的我国来说，数据共享的难题突出表现在以下几个方面：
1）缺乏管理和调控，数据共享程度较低。随着我国行政体制改革的推进，一些独立的部门被撤消，而相应行业组织的职能转换远未到位，造成行业科技数据共享工作缺乏国家层面的管理与调控。我国科技数据资源有的仅限于一个部门、一个单位、甚至一个课题组或科学家个人使用。很多科技数据低水平重复采集，共享程度较低。
2）科技数据资源开发缺乏标准与规范。许多数据储存于资料堆、档案柜，甚至流散在个人手中，已建成的相当一部分数据库没有标准可循，而有些领域的基础共性技术面缺乏标准与规范，数据加工能力较低。现有大部分数据库的数据结构没有引入元数据概念，给数据共享带来极大困难。
于缺乏数据共享会形成很多“信息孤岛”，“信息孤岛”带来的不利影响主要包括:
1）数据的一致性无法保证。同一个数据在不同部门的应用系统中却是不一致的，正确性难以进行判断。另一方面，信息无法得到及时的共享和反馈。信息是具有时效性的，一些有用的信息超过了一定的时期，就变成了无用的信息。
2）“信息孤岛”对日常管理和业务运行会产生非常不利的影响，如果不及时解决“信息孤岛”问题，会导致更多的新的“信息孤岛”的出现。造成数据共享程度的停滞不前。
 
发明内容
本发明旨在提出一种用于集成异构数据库的异构数据库集成系统，将具有不同数据结构的数据库整合起来。
根据本发明，提出一种异构数据库集成系统，包括：一组底层数据库、数据库集成装置、上层数据库和访问界面。
一组底层数据库根据不同的数据结构构建，形成异构数据库。数据库集成装置连接到一组底层数据库，数据库集成装置与底层数据库中的每一个进行数据交换，数据库集成装置与一个底层数据库进行数据交换时，使用与该底层数据库相符的数据结构，数据库集成装置将从底层数据库获取的数据进行数据格式转换，形成统一数据格式的数据。上层数据库连接到数据库集成装置，从数据库集成装置中获取具有统一数据格式的数据，上层数据库中的数据与一组底层数据库中的数据在内容上同步。访问界面连接到上层数据库，访问界面仅访问上层数据库并获取具有统一数据格式的数据。
一组底层数据库根据Oracle数据结构或者SQL数据结构构建。或者，一组底层数据库包括结构化数据库或者半结构化数据库。
数据库集成装置将从底层数据库获取的数据进行数据格式转换形成统一的数据格式的数据包括形成符合HTTP、XML或SOAP协议的数据。
数据库集成装置包括数据转换工具和数据传输工具，数据转换工具将符合指定的第一数据格式的数据转换成符合指定的第二数据格式的数据，数据传输工具用于将数据在一组底层数据库和数据库集成装置之间，以及数据库集成装置和上层数据库之间传输。数据转换工具包括：Oracle-HTTP转换工具、Oracle-XML转换工具、Oracle-SOAP转换工具、SQL-HTTP转换工具、SQL-XML转换工具和SQL-SOAP转换工具。数据转换工具可以是中间件。中间件包括：Oracle-HTTP转换中间件、Oracle-XML转换中间件、Oracle-SOAP转换中间件、SQL-HTTP转换中间件、SQL-XML转换中间件和SQL-SOAP转换中间件。
数据库集成装置包括数据库网关，数据库网关实现数据的格式转换和数据传输，数据库网关支持Oracle数据结构、SQL数据结构以及符合HTTP、XML或SOAP协议的数据结构并且在上述数据结构之间进行格式转换，数据库网关实现一组底层数据库和数据库集成装置之间，以及数据库集成装置和上层数据库之间的数据传输。
本发明的异构数据库集成系统通过数据库集成装置将各个异构数据库的数据进行整合，将各个异构数据库所采用的不同的数据结构转换为统一的数据结构并保存在上层数据库中，上层数据库中的数据内容与底层数据库保持同步。外界的访问仅限于上层数据库，这样，对于使用者来说，可以以同样的数据格式访问到所有异构数据库中的数据内容，而不会感受到由于异构数据库而带来的不便。
 
附图说明
图1揭示了根据本发明的第一实施例的异构数据库集成系统的结构图。
图2揭示了根据本发明的第二实施例的异构数据库集成系统的结构图。
 
具体实施方式
图1揭示了根据本发明的第一实施例的异构数据库集成系统的结构图。参考图1所示，该异构数据库集成系统包括：一组底层数据库10、数据库集成装置11、上层数据库12和访问界面13。
一组底层数据库10根据不同的数据结构构建，形成异构数据库。在一个实施例中，例如图1所示的实施例，一组底层数据库10中包括根据Oracle数据结构构建的数据库，例如图1中的底层数据库101，或者根据SQL数据结构构建的数据库，例如图1中的底层数据库102。在另外的实施例中，一组底层数据库也可以是结构化数据库或者半结构化数据库。
数据库集成装置11连接到一组底层数据库10，数据库集成装置11与底层数据库10中的每一个进行数据交换，数据库集成装置11与一个底层数据库10进行数据交换时，使用与该底层数据库10相符的数据结构。例如在图1所示的实施例中，数据库集成装置11在与底层数据库101进行数据交换时使用Oracle数据结构，在与底层数据库102进行数据交换时使用SQL数据结构。数据库集成装置11将从底层数据库10获取的数据进行数据格式转换，形成统一数据格式的数据。在一个实施例中，来自底层数据库10的数据被转换成统一的符合HTTP协议的数据，或者统一的符合XML协议的数据，或者统一的符合SOAP协议的数据。参考图1所示的实施例，数据库集成装置11包括数据转换工具110和数据传输工具111，数据转换工具110将符合指定的第一数据格式的数据转换成符合指定的第二数据格式的数据，而数据传输工具111用于将数据在一组底层数据库10和数据库集成装置11之间，以及数据库集成装置11和上层数据库12之间传输。数据转换工具110可以包括如下的几种：Oracle-HTTP转换工具、Oracle-XML转换工具、Oracle-SOAP转换工具、SQL-HTTP转换工具、SQL-XML转换工具和SQL-SOAP转换工具。根据底层数据库10的数据格式和需要转换成的统一的数据格式的要求，可以选择不同的数据转换工具110。在一个实施例中，数据转换工具110是中间件。类似的，这些中间件包括：Oracle-HTTP转换中间件、Oracle-XML转换中间件、Oracle-SOAP转换中间件、SQL-HTTP转换中间件、SQL-XML转换中间件和SQL-SOAP转换中间件。
上层数据库12连接到数据库集成装置11，从数据库集成装置11中获取具有统一数据格式的数据，包括符合HTTP协议、符合XML协议、或者符合SOAP协议的数据。上层数据库12中的数据与一组底层数据库10中的数据在内容上同步。可以这样理解，来自底层的异构数据库的数据被数据库集成装置11实时地进行整合，同步地形成统一格式的数据并保存在上层数据库12中，这样，由于异构数据库的数据格式上的差异而带来的不便被消除。
访问界面13连接到上层数据库12，访问界面13仅访问上层数据库12并获取具有统一数据格式的数据。访问界面13访问上层数据库12仅需要使用一种数据格式，而在数据内容上上层数据库是与底层数据库一致的。
图2揭示了根据本发明的第二实施例的异构数据库集成系统的结构图。参考图2所示，该异构数据库集成系统包括：一组底层数据库20、数据库集成装置21、上层数据库22和访问界面23。
一组底层数据库20根据不同的数据结构构建，形成异构数据库。在一个实施例中，例如图2所示的实施例，一组底层数据库20中包括根据Oracle数据结构构建的数据库，例如图2中的底层数据库201，或者根据SQL数据结构构建的数据库，例如图2中的底层数据库202。在另外的实施例中，一组底层数据库也可以是结构化数据库或者半结构化数据库。
数据库集成装置21连接到一组底层数据库20，数据库集成装置21与底层数据库20中的每一个进行数据交换，数据库集成装置21与一个底层数据库20进行数据交换时，使用与该底层数据库20相符的数据结构。例如在图2所示的实施例中，数据库集成装置21在与底层数据库201进行数据交换时使用Oracle数据结构，在与底层数据库202进行数据交换时使用SQL数据结构。数据库集成装置21将从底层数据库20获取的数据进行数据格式转换，形成统一数据格式的数据。在一个实施例中，来自底层数据库20的数据被转换成统一的符合HTTP协议的数据，或者统一的符合XML协议的数据，或者统一的符合SOAP协议的数据。参考图2所示的实施例，数据库集成装置21包括数据库网关210，数据库网关210实现数据的格式转换和数据传输，数据库网关210支持Oracle数据结构、SQL数据结构以及符合HTTP、XML或SOAP协议的数据结构并且在上述数据结构之间进行格式转换，数据库网关210还实现一组底层数据库20和数据库集成装置21之间，以及数据库集成装置21和上层数据库22之间的数据传输。由于数据库网关210支持Oracle数据结构、SQL数据结构以及符合HTTP、XML或SOAP协议的数据结构并能实现相互转换，因此数据库网关210能够实现Oracle-HTTP转换、Oracle-XML转换、Oracle-SOAP转换、SQL-HTTP工具、SQL-XML转换和SQL-SOAP转换。来自底层的异构数据库的数据被数据库集成装置21实时地进行整合，同步地形成统一格式的数据并保存在上层数据库22中，这样，由于异构数据库的数据格式上的差异而带来的不便被消除。
访问界面23连接到上层数据库22，访问界面23仅访问上层数据库22并获取具有统一数据格式的数据。访问界面23访问上层数据库22仅需要使用一种数据格式，而在数据内容上上层数据库是与底层数据库一致的。
本发明的异构数据库集成系统通过数据库集成装置将各个异构数据库的数据进行整合，将各个异构数据库所采用的不同的数据结构转换为统一的数据结构并保存在上层数据库中，上层数据库中的数据内容与底层数据库保持同步。外界的访问仅限于上层数据库，这样，对于使用者来说，可以以同样的数据格式访问到所有异构数据库中的数据内容，而不会感受到由于异构数据库而带来的不便。

Claims (9)

1.一种异构数据库集成系统，其特征在于，包括：
一组底层数据库，所述一组底层数据库根据不同的数据结构构建；
数据库集成装置，连接到所述一组底层数据库，所述数据库集成装置与底层数据库中的每一个进行数据交换，数据库集成装置与一个底层数据库进行数据交换时，使用与该底层数据库相符的数据结构，数据库集成装置将从底层数据库获取的数据进行数据格式转换，形成统一数据格式的数据；
上层数据库，连接到所述数据库集成装置，从所述数据库集成装置中获取具有统一数据格式的数据，所述上层数据库中的数据与一组底层数据库中的数据在内容上同步；
访问界面，连接到所述上层数据库，所述访问界面仅访问所述上层数据库，获取具有统一数据格式的数据。
2.如权利要求1所述的异构数据库集成系统，其特征在于，
所述一组底层数据库根据Oracle数据结构或者SQL数据结构构建。
3.如权利要求1所述的异构数据库集成系统，其特征在于，
所述一组底层数据库包括结构化数据库或者半结构化数据库。
4.如权利要求1所述的异构数据库集成系统，其特征在于，
所述数据库集成装置将从底层数据库获取的数据进行数据格式转换形成统一的数据格式的数据包括形成符合HTTP、XML或SOAP协议的数据。
5.如权利要求1所述的异构数据库集成系统，其特征在于，
所述数据库集成装置包括数据转换工具和数据传输工具，所述数据转换工具将符合指定的第一数据格式的数据转换成符合指定的第二数据格式的数据，所述数据传输工具用于将数据在一组底层数据库和数据库集成装置之间，以及数据库集成装置和上层数据库之间传输。
6.如权利要求5所述的异构数据库集成系统，其特征在于，
所述数据转换工具包括：Oracle-HTTP转换工具、Oracle-XML转换工具、Oracle-SOAP转换工具、SQL-HTTP转换工具、SQL-XML转换工具和SQL-SOAP转换工具。
7.如权利要求5所述的异构数据库集成系统，其特征在于，
所述数据转换工具为中间件。
8.如权利要求7所述的异构数据库集成系统，其特征在于，
所述中间件包括：Oracle-HTTP转换中间件、Oracle-XML转换中间件、Oracle-SOAP转换中间件、SQL-HTTP转换中间件、SQL-XML转换中间件和SQL-SOAP转换中间件。
9.如权利要求1所述的异构数据库集成系统，其特征在于，
所述数据库集成装置包括数据库网关，数据库网关实现数据的格式转换和数据传输，数据库网关支持Oracle数据结构、SQL数据结构以及符合HTTP、XML或SOAP协议的数据结构并且在上述数据结构之间进行格式转换，数据库网关实现一组底层数据库和数据库集成装置之间，以及数据库集成装置和上层数据库之间的数据传输。
CN2010105894939A 2010-12-15 2010-12-15 异构数据库集成系统 Pending CN102567330A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2010105894939A CN102567330A (zh) 2010-12-15 2010-12-15 异构数据库集成系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2010105894939A CN102567330A (zh) 2010-12-15 2010-12-15 异构数据库集成系统

Publications (1)

Publication Number Publication Date
CN102567330A true CN102567330A (zh) 2012-07-11

Family

ID=46412771

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010105894939A Pending CN102567330A (zh) 2010-12-15 2010-12-15 异构数据库集成系统

Country Status (1)

Country Link
CN (1) CN102567330A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103020112A (zh) * 2012-11-06 2013-04-03 深圳中兴网信科技有限公司 异构数据库同步系统和异构数据库同步方法
CN103051729A (zh) * 2013-01-14 2013-04-17 南京轨道交通系统工程有限公司 一种异构数据同步实现方法
CN103337115A (zh) * 2013-06-30 2013-10-02 佛山市广华合志科技有限公司 一种基于pos销售系统的价格采集系统
CN103442029A (zh) * 2013-07-29 2013-12-11 广东电网公司电力科学研究院 异构实时历史数据库同步方法和系统
CN104376037A (zh) * 2013-07-18 2015-02-25 Ims保健公司 用于对数据进行建模的系统及方法
CN105426525A (zh) * 2015-12-09 2016-03-23 浪潮通用软件有限公司 一种基于数据存储的异构数据整合方法和装置
CN105488229A (zh) * 2016-01-20 2016-04-13 航天科工智慧产业发展有限公司 一种异构数据环境下的数据交换与集成方法
CN106570095A (zh) * 2016-10-31 2017-04-19 凯美瑞德（苏州）信息科技股份有限公司 一种xml数据的操作方法及设备
CN107239499A (zh) * 2017-05-03 2017-10-10 成都国腾实业集团有限公司 基于多维异构数据源集成与整合模型的分析方法及系统
CN107526790A (zh) * 2017-08-15 2017-12-29 王成 一种基于实现数据统一标准的数据库语言技术的实现方式
TWI663862B (zh) * 2017-08-31 2019-06-21 金儀國際科技股份有限公司 多樣式健身設備相容之通用資料系統

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103020112A (zh) * 2012-11-06 2013-04-03 深圳中兴网信科技有限公司 异构数据库同步系统和异构数据库同步方法
CN103051729A (zh) * 2013-01-14 2013-04-17 南京轨道交通系统工程有限公司 一种异构数据同步实现方法
CN103337115A (zh) * 2013-06-30 2013-10-02 佛山市广华合志科技有限公司 一种基于pos销售系统的价格采集系统
CN103337115B (zh) * 2013-06-30 2016-03-02 佛山市广华合志科技有限公司 一种基于pos销售系统的价格采集系统
CN104376037A (zh) * 2013-07-18 2015-02-25 Ims保健公司 用于对数据进行建模的系统及方法
CN103442029A (zh) * 2013-07-29 2013-12-11 广东电网公司电力科学研究院 异构实时历史数据库同步方法和系统
CN105426525A (zh) * 2015-12-09 2016-03-23 浪潮通用软件有限公司 一种基于数据存储的异构数据整合方法和装置
CN105488229A (zh) * 2016-01-20 2016-04-13 航天科工智慧产业发展有限公司 一种异构数据环境下的数据交换与集成方法
CN106570095A (zh) * 2016-10-31 2017-04-19 凯美瑞德（苏州）信息科技股份有限公司 一种xml数据的操作方法及设备
CN106570095B (zh) * 2016-10-31 2020-01-07 凯美瑞德（苏州）信息科技股份有限公司 一种xml数据的操作方法及设备
CN107239499A (zh) * 2017-05-03 2017-10-10 成都国腾实业集团有限公司 基于多维异构数据源集成与整合模型的分析方法及系统
CN107526790A (zh) * 2017-08-15 2017-12-29 王成 一种基于实现数据统一标准的数据库语言技术的实现方式
TWI663862B (zh) * 2017-08-31 2019-06-21 金儀國際科技股份有限公司 多樣式健身設備相容之通用資料系統

Similar Documents

Publication Publication Date Title
CN102567330A (zh) 异构数据库集成系统
CN100531055C (zh) 数据同步系统及其方法
CN101950300B (zh) 一种分布式搜索引擎系统及其实现方法
CN101546325B (zh) 基于soa的网格异构数据集成方法
CN102567378A (zh) 基于异构数据的信息检索系统
CN108234612B (zh) 多终端模式的高分资源动态分配与按需服务发布系统
CN102521246A (zh) 一种云数据仓库系统
CN206249316U (zh) 一种基于云端的医院数据中心平台系统
CN107895046B (zh) 一种异构数据集成平台
CN104809650A (zh) 一种异构感知数据的动态适配接入方法
CN103207920A (zh) 一种元数据并行采集系统
CN102567334A (zh) 基于异构数据的办公自动化系统
CN101232505A (zh) 基于mvc架构的ria分层框架的接口模型
CN107656951A (zh) 一种同步异构数据库系统中实时数据的方法
CN103838781A (zh) 数据库访问方法及系统
CN103064916A (zh) EminDI 数据整合引擎及报表生成方法
CN103092982B (zh) 基于多视图业务模型的信息服务系统
CN102411502A (zh) 一种组件式传感节点及其构造方法
Li et al. Database conversion based on relationship schema mapping
CN103092591A (zh) 一种基于XML和Web Service的数据集成中间件的方法
CN102096853B (zh) 基于soa的服装企业协同流程集成方法
He et al. Design and Implementation of Intelligent Load-Balancing Heterogeneous Data Source Middleware Based on ActiveMQ and XML
Chi et al. Research and implementation of the sustainable development information sharing web service system of china
CN102902736A (zh) 基于最小依赖的细粒度科研数据融合系统
Li et al. Heterogeneous system integration based on service component

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120711