CN113407612A - 一种虚拟分布式数据库访问系统与方法 - Google Patents

一种虚拟分布式数据库访问系统与方法 Download PDF

Info

Publication number
CN113407612A
CN113407612A CN202110946107.5A CN202110946107A CN113407612A CN 113407612 A CN113407612 A CN 113407612A CN 202110946107 A CN202110946107 A CN 202110946107A CN 113407612 A CN113407612 A CN 113407612A
Authority
CN
China
Prior art keywords
database
query
virtual
instruction
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110946107.5A
Other languages
English (en)
Inventor
梅雪明
石悌君
张玉磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Liangjie Data Technology Co ltd
Original Assignee
Jiangsu Liangjie Data Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Liangjie Data Technology Co ltd filed Critical Jiangsu Liangjie Data Technology Co ltd
Priority to CN202110946107.5A priority Critical patent/CN113407612A/zh
Publication of CN113407612A publication Critical patent/CN113407612A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/256—Integrating or interfacing systems involving database management systems in federated or virtual databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种虚拟分布式数据库访问系统及方法，属于数据查询技术领域。系统包括虚拟数据库，虚拟数据库包括数据映射模块、数据缓存模块、指令解释及控制模块和通信模块，通信模块与数据库通信连接。方法进行两部分操作：S1：系统管理员配置：S1.1：系统管理员在虚拟数据库上配置源数据库信息；S1.2：系统管理员指定源数据库别名alias，S1.3：将步骤S1.1和步骤S1.2中的信息存储到虚拟数据库的数据映射模块。S2：用户查询，用户查询包括单数据库查询和数据库关联信息查询。本发明通过建立唯一的虚拟数据库作为用户访问入口，使用户可以方便地访问到所有分布的独立数据库。

Description

一种虚拟分布式数据库访问系统与方法
技术领域
本发明涉及一种虚拟分布式数据库访问系统与方法，属于数据查询技术领域。
背景技术
在信息化建设过程中，政府或企业先后构建起多个信息系统。由于开发的时间、需求以及开发商的不同，以至于在企业内部，每个部门都建立了自己独立的信息系统，每个系统都使用独立的数据库，导致数据分散，用户很难进行统一的数据查询。为了满足用户统一查询数据的需求，当前也有一些解决方案，例如：
1、ETL工具，如OracleGoldenGate，主要是围绕Oracle的同步工具，通过运行在源端的Extract进程抓取数据库的DML、DDL操作，通过运行在目标端的Replicate去重新构造DML或DDL操作并应用到目标端数据库上，其对源系统和目标系统侵入性比较强，且对数据存储要求高，需要进行数据拷贝，机器浪费资源；
2、数据库自身提供的跨数据库访问功能，如Oracle的DBLink；该方法要求用户在查询时能知道所有目标数据库的用户名密码等信息，使用不方便，安全性也受到影响；
3、服务接口方式，一般通过对数据进行WebService接口封装后提供相应的服务，接口开发和对接成本较大。
因此，如何建立唯一的虚拟数据库作为用户访问入口，能够使用户安全便捷的访问所有分布的独立数据库成为了数据库推广应用的重中之重。
发明内容
本发明的目的在于，克服现有技术中存在的问题，提供一种虚拟分布式数据库访问系统，通过建立唯一的虚拟数据库作为用户访问入口，用户可以方便地访问到所有分布的独立数据库。
本发明的一种虚拟分布式数据库访问系统，包括虚拟数据库，所述虚拟数据库包括数据映射模块、数据缓存模块、指令解释及控制模块和通信模块，所述通信模块与数据库通信连接。
本发明的一种虚拟分布式数据库访问方法，采用虚拟分布式数据库访问系统，进行两部分操作：
S1：系统管理员配置；
S2：用户查询，所述用户查询包括单数据库查询和数据库关联信息查询。
进一步的，所述系统管理员配置具体包括如下子步骤：
S1.1：系统管理员在虚拟数据库上配置源数据库信息；
S1.2：系统管理员指定源数据库别名alias，虚拟数据库的源数据库别名不重复，设置虚拟数据库中的表名=源数据库别名+源数据库表名；
S1.3：将步骤S1.1和步骤S1.2中的信息存储到虚拟数据库的数据映射模块。
进一步的，所述步骤S2包括如下子步骤：
S2.1：用户查询时以虚拟数据库和虚拟数据库的表名编写查询命令；
S2.2：进行单数据库查询或数据库关联信息查询；
S2.3：查询流程结束。
进一步的，所述单数据库查询具体包括如下步骤：
A201、指令解释及控制模块收到用户的查询指令，根据指令分析只涉及单个数据库；
A202、指令解释及控制模块从数据映射模块查询数据库信息，并将查询指令转化为SELECT * FROM TABLE1；
A203、指令解释及控制模块将A202中处理过的数据库信息交给通信模块处理；
A204、通信模块和数据库建立连接并执行查询指令；
A205、通信模块将步骤A204的查询结果返回到指令解释及控制模块。
进一步的，所述数据库关联信息查询具体包括如下步骤：
B201、指令解释及控制模块收到用户的查询指令，根据用户的查询指令分析涉及相关联的若干个数据库的操作；
B202、指令解释及控制模块从数据映射模块查询数据库信息，并将查询指令转化相应数据库的SELECT * FROM TABLE1；
B203、指令解释及控制模块将B202中处理过的数据库信息交给通信模块处理；
B204、通信模块分别与相关联的数据库建立连接并执行查询指令；
B205、通信模块将步骤B204的查询结果返回到指令解释及控制模块；
B206、指令解释及控制模块收到B205的查询结果后，将数据交给数据缓存模块；数据缓存模块建立临时数据库缓存所有数据；
B207、指令解释及控制模块在缓存完毕所有源数据库查询的返回结果后，向数据缓存模块执行查询指令；数据缓存模块在临时数据库中执行查询指令并向指令解释和控制模块返回结果。
进一步的，所述数据库信息包括IP地址、端口号、用户名和密码信息。
本发明的有益效果是：（1）数据不需要重复存储，节约存储空间。
（2）用户操作简单，无需单独对独立的源数据库进行操作，简化了操作步骤。
（3）源数据库的用户名、密码只在初始化时进行一次配置，降低了安全风险，有利于保护用户的私人信息。
附图说明
图1为本发明中虚拟分布式数据库访问系统的结构图；
图2为本发明中单数据库查询的流程图；
图3为本发明中数据库关联信息查询的流程图。
具体实施方式
现在结合附图对本发明作进一步详细的说明。这些附图均为简化的示意图，仅以示意方式说明本发明的基本结构，因此其仅显示与本发明有关的构成。
如图1所示，本发明的一种虚拟分布式数据库访问系统，包括虚拟数据库，所述虚拟数据库包括数据映射模块、数据缓存模块、指令解释及控制模块和通信模块，所述通信模块与数据库通信连接。
本发明的一种虚拟分布式数据库访问方法，采用虚拟分布式数据库访问系统，进行两部分操作：
S1：系统管理员配置；
系统管理员配置具体包括如下子步骤：
S1.1：系统管理员在虚拟数据库上配置源数据库信息；
S1.2：系统管理员指定源数据库别名alias，虚拟数据库的源数据库别名不重复，设置虚拟数据库中的表名=源数据库别名+源数据库表名；
S1.3：将步骤S1.1和步骤S1.2中的信息存储到虚拟数据库的数据映射模块。
S2：用户查询，用户查询包括单数据库查询和数据库关联信息查询，步骤S2包括如下子步骤：
S2.1：用户查询时以虚拟数据库和虚拟数据库的表名编写查询命令；
S2.2：进行单数据库查询或数据库关联信息查询；
S2.3：查询流程结束。
如图2所示，根据指令分析只涉及数据库A的操作，在虚拟数据库中使用SQL语句SELECT*FROMA_TABLE1；单数据库查询具体包括如下步骤：
A201、指令解释及控制模块收到用户的查询指令，根据指令分析只涉及单个数据库；
A202、指令解释及控制模块从数据映射模块查询数据库信息，包括数据库A的IP地址、端口号、用户名和密码信息并将查询指令转化为SELECT * FROM TABLE1；
A203、指令解释及控制模块将A202中处理过的数据库信息交给通信模块处理；
A204、通信模块和数据库建立连接并执行查询指令；
A205、通信模块将步骤A204的查询结果返回到指令解释及控制模块。
如图3所示，查询数据库A的表1和数据库B表1中id字段相同的记录，可以在虚拟数据库中使用下面SQL语句查询SELECT * FROM A_TABLE1 a,B_TABLE1 b WHERE a.id=b.id；
数据库关联信息查询具体包括如下步骤：
B201、指令解释及控制模块收到用户的查询指令，根据用户的查询指令分析涉及相关联的若干个数据库的操作；
B202、指令解释及控制模块从数据映射模块查询数据库信息，并将查询指令转化相应数据库的SELECT * FROM TABLE1；
指令解释及控制模块从映射模块查询数据库A和B的IP地址、端口号、用户名、密码信息，并将查询命令转化为两条操作，分别为数据A的SELECT * FROM TABLE1和数据库B的SELECT * FROM TABLE1；
B203、指令解释及控制模块将B202中处理过的数据库信息交给通信模块处理；
B204、通信模块分别与相关联的数据库建立连接并执行查询指令即通信模块分别与数据库A和数据库B建立连接并执行查询命令；
B205、通信模块将步骤B204的查询结果返回到指令解释及控制模块；
B206、指令解释及控制模块收到B205的查询结果后，将数据交给数据缓存模块；数据缓存模块建立临时数据库缓存所有数据；
B207、指令解释及控制模块在缓存完毕所有源数据库查询的返回结果后，向数据缓存模块执行查询指令；数据缓存模块在临时数据库中执行查询指令并向指令解释和控制模块返回结果。
以上述依据本发明的理想实施例为启示，通过上述的说明内容，相关工作人员完全可以在不偏离本项发明技术思想的范围内，进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容，必须要根据权利要求范围来确定其技术性范围。

Claims (7)

1.一种虚拟分布式数据库访问系统，包括虚拟数据库，其特征在于：所述虚拟数据库包括数据映射模块、数据缓存模块、指令解释及控制模块和通信模块，所述通信模块与数据库通信连接。
2.一种虚拟分布式数据库访问方法，其特征在于，采用权利要求1所述的虚拟分布式数据库访问系统，进行两部分操作：
S1：系统管理员配置；
S2：用户查询，所述用户查询包括单数据库查询和数据库关联信息查询。
3.根据权利要求2所述的虚拟分布式数据库访问方法，其特征在于，所述系统管理员配置具体包括如下子步骤：
S1.1：系统管理员在虚拟数据库上配置源数据库信息；
S1.2：系统管理员指定源数据库别名alias，虚拟数据库的源数据库别名不重复，设置虚拟数据库中的表名=源数据库别名+源数据库表名；
S1.3：将步骤S1.1和步骤S1.2中的信息存储到虚拟数据库的数据映射模块。
4.根据权利要求2所述的虚拟分布式数据库访问方法，其特征在于：所述步骤S2包括如下子步骤：
S2.1：用户查询时以虚拟数据库和虚拟数据库的表名编写查询命令；
S2.2：进行单数据库查询或数据库关联信息查询；
S2.3：查询流程结束。
5.根据权利要求4所述的虚拟分布式数据库访问方法，其特征在于：所述单数据库查询具体包括如下步骤：
A201、指令解释及控制模块收到用户的查询指令，根据指令分析只涉及单个数据库；
A202、指令解释及控制模块从数据映射模块查询数据库信息，并将查询指令转化为SELECT * FROM TABLE1；
A203、指令解释及控制模块将A202中处理过的数据库信息交给通信模块处理；
A204、通信模块和数据库建立连接并执行查询指令；
A205、通信模块将步骤A204的查询结果返回到指令解释及控制模块。
6.根据权利要求4所述的虚拟分布式数据库访问方法，其特征在于：所述数据库关联信息查询具体包括如下步骤：
B201、指令解释及控制模块收到用户的查询指令，根据用户的查询指令分析涉及相关联的若干个数据库的操作；
B202、指令解释及控制模块从数据映射模块查询数据库信息，并将查询指令转化相应数据库的SELECT * FROM TABLE1；
B203、指令解释及控制模块将B202中处理过的数据库信息交给通信模块处理；
B204、通信模块分别与相关联的数据库建立连接并执行查询指令；
B205、通信模块将步骤B204的查询结果返回到指令解释及控制模块；
B206、指令解释及控制模块收到B205的查询结果后，将数据交给数据缓存模块；数据缓存模块建立临时数据库缓存所有数据；
B207、指令解释及控制模块在缓存完毕所有源数据库查询的返回结果后，向数据缓存模块执行查询指令；数据缓存模块在临时数据库中执行查询指令并向指令解释和控制模块返回结果。
7.根据权利要求5或6所述的虚拟分布式数据库访问方法，其特征在于：所述数据库信息包括IP地址、端口号、用户名和密码信息。
CN202110946107.5A 2021-08-18 2021-08-18 一种虚拟分布式数据库访问系统与方法 Pending CN113407612A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110946107.5A CN113407612A (zh) 2021-08-18 2021-08-18 一种虚拟分布式数据库访问系统与方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110946107.5A CN113407612A (zh) 2021-08-18 2021-08-18 一种虚拟分布式数据库访问系统与方法

Publications (1)

Publication Number Publication Date
CN113407612A true CN113407612A (zh) 2021-09-17

Family

ID=77688813

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110946107.5A Pending CN113407612A (zh) 2021-08-18 2021-08-18 一种虚拟分布式数据库访问系统与方法

Country Status (1)

Country Link
CN (1) CN113407612A (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101187937A (zh) * 2007-10-30 2008-05-28 北京航空航天大学 网格环境下模式复用的异构数据库访问和集成方法
CN108108456A (zh) * 2017-12-28 2018-06-01 重庆邮电大学 一种基于元数据的信息资源分布式查询方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101187937A (zh) * 2007-10-30 2008-05-28 北京航空航天大学 网格环境下模式复用的异构数据库访问和集成方法
CN108108456A (zh) * 2017-12-28 2018-06-01 重庆邮电大学 一种基于元数据的信息资源分布式查询方法

Similar Documents

Publication Publication Date Title
US11392586B2 (en) Data protection method and device and storage medium
US9852206B2 (en) Computer relational database method and system having role based access control
CN110196861B (zh) 一种数据脱敏方法和装置
US7191170B2 (en) Predicate indexing of data stored in a computer with application to indexing cached data
US6738775B2 (en) Database communication system and method for communicating with a database
US9300692B2 (en) System and method for implementing data migration while preserving security policies of a source filer
US9336407B2 (en) Dynamic data masking system and method
US11461322B1 (en) Transparent database table partitioning using proxy-based query rewriting
US11971876B2 (en) Object resolution among account-level namespaces for database platforms
CN114756577A (zh) 多源异构数据的处理方法、计算机设备及存储介质
US9311314B2 (en) System and method for migrating data from a source file system to a destination file system with use of attribute manipulation
US9304997B2 (en) Asynchronously migrating a file system
WO2024060956A1 (zh) 一种混合数据库管理方法、装置、混合数据库及电子设备
US20150066846A1 (en) System and method for asynchronous replication of a network-based file system
CN113407612A (zh) 一种虚拟分布式数据库访问系统与方法
US11971863B2 (en) Techniques for using an in-memory only file system as an interface for managing computer systems and user space file systems
CN112039869B (zh) 一种网络访问关系的建立方法、装置、存储介质及设备
US11366785B1 (en) Method and system for transparent database command replacement
US11354312B2 (en) Access-plan-based querying for federated database-management systems
CN112817997A (zh) 一种分布式计算引擎使用动态用户访问s3对象存储的方法及装置
US9020985B2 (en) System and method for managing directories for a database system having an in-memory database
WO2015031540A1 (en) Asynchronous file system migration
CN114816579B (zh) 一种基于工业互联网平台的SaaS化工业APP接入方法
US20240232259A1 (en) Just-in-time materialization of cloned users in computing environments within a database system
Kuhn et al. Architecture overview

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210917

RJ01 Rejection of invention patent application after publication