CN101187937A - 网格环境下模式复用的异构数据库访问和集成方法 - Google Patents
网格环境下模式复用的异构数据库访问和集成方法 Download PDFInfo
- Publication number
- CN101187937A CN101187937A CNA2007101765570A CN200710176557A CN101187937A CN 101187937 A CN101187937 A CN 101187937A CN A2007101765570 A CNA2007101765570 A CN A2007101765570A CN 200710176557 A CN200710176557 A CN 200710176557A CN 101187937 A CN101187937 A CN 101187937A
- Authority
- CN
- China
- Prior art keywords
- virtual
- data base
- database
- resource
- access
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明为网格环境下模式复用的异构数据库访问和集成方法,它首先用模式复用的虚拟数据库描述各种数据库资源,提供异构数据库资源的全局统一视图;然后用资源注册方式,资源提供者确定其数据库模式与虚拟数据库模式之间的映射关系,通过查询映射方法将基于虚拟数据库的查询请求转换为基于真实数据库资源的查询请求,利用虚拟数据库服务为资源使用者提供访问异构数据库的一致接口;最后在包含异构数据库资源的网格环境下,实现从数据库资源注册到使用的全过程,通过网格应用服务结果完成异构数据库资源的整合过程,使网格应用服务的开发者能够利用虚拟数据库服务的接口获取来自异构数据库资源的整合信息。本发明具有好的实用性,资源提供者只需使用客户端程序即可自动完成大部分的注册工作;资源使用者不需要关心真实数据库资源的地理分布、数据库模式、语义信息等就可以通过虚拟数据库服务的一致接口获取所需的异构数据库资源。
Description
技术领域
本发明涉及网格技术领域,特别是涉及网格环境下异构数据库的访问和集成技术。
背景技术
根据现代远程教育公共资源的考古、人文、美术、地质、农业、生物、医药、航空航天等领域的12个大学数字博物馆,中国教育科研网格计划的大学数字博物馆网格(UniversityDigital Museum Grid,简称UDMGrid),将分散在中国8个城市的海量数字博物馆资源整合起来,实现多种资源的互连互通与有机共享,消除标本信息“孤岛”现象。并以数字、文字、图像、视频、音频、动画、三维模型等形式,通过网格门户为各种不同类型的用户提供“一站式”标本信息类型的网格服务。由于这些海量数字博物馆标本信息属于多种不同的学科或领域,各个大学数字博物馆的标本信息主要存储在各自的数据库中,例如SQL Server、Oracle、DB2等。所以,如何确定网格环境下异构数据库的访问和集成方法(Database Access andIntegration,简称DAI),为用户如何提供异构数据库资源的全局统一视图和一致访问接口,是UDMGrid面临的关键问题。
广义的异构数据库集成可以将分散、异构的数据以统一、一致的形式表现出来,为用户屏蔽各种数据在来源和结构等方面的差异,它主要包括:异构数据库的访问与狭义的集成。其中,异构数据库访问主要针对不同数据库之间的互连互通、数据交换与数据共享等问题;狭义的集成则侧重于屏蔽不同数据库系统在语义方面的异构性,研究如何向用户提供统一的模式和访问接口等问题。在异构数据库集成的数据仓库方法中,SQL Server提供的数据导入导出和数据传输服务,可以将不同数据库系统的数据复制到相同的数据库中,消除平台和系统层的异构性,但它不能消除语义层的异构性。异构数据库集成的虚拟集中方法涉及有全局统一模式的多数据库系统和无全局统一模式的联邦式数据库系统。全局统一模式一般采用属性等价的方法,并结合XML Schema和本体(Ontology)技术,在异构数据库集成的方面具有较好的效果。联邦式数据库系统没有全局统一模式,但支持异构数据库之间的松散耦合关系,数据库可以通过输入输出模式进行数据访问。
随着网格技术及其应用的不断发展,网格环境下异构数据库的访问和集成已经成为网格研究的重要组成部分。全球网格论坛(Global Grid Forum,简称GGF,)的数据库访问和集成服务工作组(Database Access and Integration Services Working Group,简称DAIS-WG)正致力于网格数据库服务的标准建设,其中包括异构数据库系统的一致访问规范、网格框架中数据库系统的协同机制等方面。目前该工作组已经提出了网格环境下数据库服务接口的部分规范,其中涉及关系数据库、XML数据库和索引文件等。英国e-Science网格计划的开放网格服务体系框架数据访问和集成(Open Grid ServicesArchitecture Data Access and Integration,简称OGSA-DAI)是支持数据库访问和集成的网格中间件,能够支持多种数据库资源的查询、更新、传输和交付,为数据库资源生成配置文件(例如:数据库的类型、JDBC驱动名、URL、用户名和口令等),并根据配置文件自动部署GDSF服务,为用户提供数据库的查询和访问服务。但是OGSA-DAI目前主要侧重于数据库访问服务,其数据库资源注册不包括其它数据库模式信息。中科院计算机网络信息中心提出了一种基于网格服务的数据库元数据管理框架,在网格服务(Grid Service)的基础之上,使用轻量级目录访问协议(Lightweight DirectoryAccess Protocol,简称LDAP)存储各数据库的元数据,使用JDBC(Java DataBase Connectivity)实现异构环境下数据库的统一访问接口,以网格服务方式提供元数据的访问功能。
上述异构数据库访问与集成方面的研究工作,对大学数字博物馆网格建设有一定的启发和借鉴作用,但也存在一些需要进一步探索的问题:(1)由于UDMGrid的异构数据库资源来自各个大学数字博物馆,数据复制方法可能会产生数字标本的版权保护等问题,也可能产生网格存储资源的浪费。(2)由于为UDMGrid的数据库资源涉及许多不同的学科和领域,基于数据库元数据方法的网格应用经常要求数据库资源的专业知识。(3)DAIS-WG和OGSA-DAI的研究工作侧重于多种数据库的访问,难以支持标本信息类型相差较大的异构数据库集成工作,并且难以描述UDMGrid数据库资源的全局模式。
发明内容
根据网格环境下访问和集成异构数据库资源的实际需求和关键问题,本发明的目的在于:为网格环境的资源使用者提供异构数据库资源的全局统一视图和一致访问接口,整合网格节点的异构数据库资源。
为完成本发明的目的,本发明提出了一种网格环境下模式复用的异构数据库访问和集成方法(Database Access and Integration in Grid,简称Grid-DAI),该方法首先提出了一种模式复用的虚拟数据库构建策略,根据异构数据库资源的学科或领域类型、网格资源的各种本体,利用模式复用的虚拟数据库描述各种数据库资源,通过虚拟数据库模式为资源使用者提供异构数据库资源的全局统一视图。然后采用资源注册的方式,资源提供者确定其数据库模式与虚拟数据库模式之间的映射关系,并且通过查询映射方法,将基于虚拟数据库的查询请求转换为基于真实数据库资源的查询请求,利用虚拟数据库服务为资源使用者提供访问异构数据库的一致接口。最后在包含异构数据库资源的网格环境下,实现了从数据库资源注册到使用的全过程,通过网格应用服务结果完成异构数据库资源的整合过程,使网格应用服务的开发者能够利用虚拟数据库服务的接口获取来自异构数据库资源的整合信息。
本发明的优点是:在网格系统的异构数据库整合过程中,本发明提供了灵活的虚拟数据库机制,无论是对网格系统构建者,还是对资源提供者,或是对资源使用者,都具有好的实用性。资源提供者只需要使用客户端程序即可自动完成大部分的注册工作;资源使用者通过虚拟数据库查询服务即可获得异构数据库资源的全局统一视图,不需要关心真实数据库资源的地理分布、数据库模式、语义信息等,并且可以通过虚拟数据库服务的一致接口获取其所需要的异构数据库资源。
附图说明
图1是本发明的Grid-DAI构建过程图;
图2是虚拟数据库的树林结构图;
图3是虚拟数据库管理器图;
图4是虚拟查询语句转换算法图;
图5是Grid-DAI总体结构图;
图6是异构数据库资源的访问过程图;
图7是虚拟数据库的创建与维护图;
图8是航空航天数字博物馆后台数据库注册结果图;
图9是“一站式”标本信息服务结果图。
具体实施方式
如图1所示,Grid-DAI的构建过程是:根据异构数据库资源的学科或领域类型、网格资源的各种本体,利用模式复用的虚拟数据库描述各种数据库资源,通过虚拟数据库模式生成异构数据库资源的全局统一视图;采用资源注册的方式,资源提供者确定其数据库模式与虚拟数据库模式之间的映射关系,图1中虚线箭头表示资源注册过程;通过查询映射方法,将基于虚拟数据库的查询请求转换为基于真实数据库资源的查询请求,并利用虚拟数据库服务提供访问异构数据库的一致接口。最后在包含异构数据库资源的网格环境下,实现从数据库资源注册到使用的全过程,通过网格应用服务结果完成异构数据库资源的整合过程。
异构数据库资源来自不同的网格节点,隶属于多种不同的学科或领域。为了将这些异构数据库整合成按学科领域划分的虚拟数据库,同时避免虚拟数据库之间的相对孤立性,本发明提出了一种模式复用的虚拟数据库构建策略。其中的模式复用,主要是在虚拟数据库的构建过程中,依据异构数据库资源隶属的学科或领域之间的内在联系、网格资源的全局本体与局部本体,借鉴面向对象设计方法的继承特性,利用树状结构表现虚拟数据库之间的继承关系,从而减少虚拟数据库构建的重复性工作,并保留虚拟数据库之间的内在联系,也体现了学科或领域之间的内在联系。如图2所示,在大学数字博物馆网格UDMGrid的虚拟数据库树林中,“人文与社会学科”可以继承“博物馆”的虚拟数据库模式,“考古”与“艺术”又可以继承“人文与社会学科”的虚拟数据库模式,这种继承关系使子虚拟数据库能够复用父虚拟数据库的模式。
虚拟数据库可以包含一个或多个虚拟表,虚拟表可以包含一个或多个虚拟字段,虚拟数据库、虚拟表和虚拟字段的概念分别类似于关系数据库理论中的数据库(Database)、表(Table)和字段(Column)的概念。具体而言,本发明的模式复用的虚拟数据库构建策略主要包括:(1)在创建子节点虚拟数据库的虚拟表时,既可以继承父节点虚拟数据库的虚拟表,也可以不继承任何虚拟表而创建自身的新虚拟表,并且这种继承关系具有递推性,可以一直上溯到根节点的虚拟数据库。(2)在创建子节点虚拟表的虚拟字段时,如果子节点的虚拟表继承了父节点的虚拟表,称前者为子虚拟表,称后者为父虚拟表。子虚拟表自动具有父虚拟表的所有虚拟字段,其中包括父虚拟表自身创建的虚拟字段和继承祖父的虚拟字段,并且子虚拟表也可以创建其自身的虚拟字段。(3)根据异构数据库资源的学科或领域类型,相近或者相同学科的虚拟数据库位于同一棵子树内,相差较远学科的虚拟数据库位于不同的子树中。
以上述方式构建的模式复用型虚拟数据库,能够表现异构数据库资源的全局统一视图。如图3所示,以UDMGrid中所构建的虚拟数据库模式为例:虚拟数据库“博物馆”拥有一个名为“标本”的虚拟表,“标本”虚拟表有“名称”、“类型”、“时间”、“说明”、“图片路径”、“二进制图片”等虚拟字段。虚拟数据库“工程与技术学科”是“博物馆”的子虚拟数据库,虚拟数据库“航空航天”是“工程与技术学科”的子虚拟数据库,并有两个虚拟表“飞机”和“发动机”,都继承了祖父的虚拟表“标本”。同时,虚拟表“飞机”和“发动机”不但继承了“名称”、“类型”等虚拟字段,而且“飞机”创建了“产地”、“速度”和“用途”等自身虚拟字段,“发动机”创建了“推力”、“转速”等自身虚拟字段。
模式复用的虚拟数据库构建策略支持两种继承关系:其一是虚拟数据库之间的继承关系,这是一种比较“弱”的继承关系,这种继承关系使得子虚拟数据库的虚拟表可以继承父虚拟数据库的所有虚拟表中的某个虚拟表,如果子虚拟数据库的所有虚拟表都没有继承父虚拟数据库中的虚拟表,则这种继承关系没有产生作用;其二是虚拟表之间的继承关系,这是一种比较“强”的继承关系,这种继承关系会使子虚拟表自动拥有父虚拟表的所有虚拟字段,也正是这种继承关系,使得父虚拟数据库的模式能够被子虚拟数据库所复用,并且这种复用的方式具有较大的灵活度。其中,第一种继承关系是第二种继承关系的基础,第二种继承关系是第一种继承关系的体现。该策略具有的继承特性,有利于网格环境下异构数据库资源的注册与映射。数据库资源提供者在注册数据库资源时,可以选择一个与自身最相近的虚拟数据库,设定其资源与该虚拟数据库之间的映射关系。例如:UDMGrid在注册航空航天数字博物馆数据库资源时,如果选择“航空航天”虚拟数据库,在设定航空航天数据库与子虚拟表“飞机”、“发动机”之间的映射关系后,由于“飞机”和“发动机”继承了“博物馆”的“标本”虚拟表,这使航空航天数据库与父虚拟表“标本”之间自动建立了同样的映射关系,从而减少了数字博物馆资源注册的重复性工作。所以网格应用服务在查询虚拟数据库时,无论是查询“博物馆”还是查询“航空航天”的“数据”,都能根据这些映射关系而获得来自航空航天数字博物馆后台数据库的真实数据。
在模式复用的虚拟数据库构建策略基础上,数据库资源提供者注册其所持有的数据库资源时,需要设定三方面的信息:本地数据库访问参数、本地数据库模式、本地数据库与虚拟数据库之间的映射信息。具体而言,主要包括:(1)外部网络访问本地数据库所需要的参数。如果本地数据库可直接为外网访问,这些参数则包括数据库的类型、服务器IP、端口号、数据库名称、只读用户与口令等。如果外网不能直接访问本地数据库,可以使用一个部署在Web Services容器中的Web服务,作为本地数据库访问的代理服务,提供者只需提供该Web服务的地址和访问参数。(2)本地数据库表和视图的模式信息。在资源提供者设置上述的访问参数之后,客户端软件能够自动注册本地数据库表和视图的模式信息。(3)本地数据库模式和虚拟数据库模式之间的映射关系信息。主要指本地数据库中某一个字段到虚拟数据库中某一个虚拟字段之间的映射关系,其映射关系可以定义为:映射关系信息(MappingInformation)是映射规则(MappingRule)集合的子集,一条映射规则包括字段映射(ColumnMapping)子集和表间关系(TableRelation)子集,并且字段映射子集的所有元素必须针对同一虚拟表(VirtualTable)。该定义也可以表示为:
MappingInformation={mr|mr∈MappingRules}
MappingRules={<CMs,TRs>|CMs ColumnMappings,TRsTable Relations,
cm1,cm2,cm1∈CMs,cm2∈CMs→
cm1.virtualColumn.virtualTable=cm2.virtualColumn.virtualTable}
ColumnMappings={<column,virtualColumn>|
column∈Columns,virtualColumn∈VirtualColumns}
Table Re lations={<(column1,column2),relation>|
column1,column2∈Columns,relation∈Relations}
Relations={″=″,″<″,″>″,″<>″,″>=″,″<=″,″LIKE″}
其中:MappingRule为映射规则的集合;ColumnMapping为字段映射的集合;TableRelation为表间关系的集合;Columns为本地数据库中字段的集合;VirtualColumns为虚拟数据库中虚拟字段的集合;Relations为逻辑关系的集合。
在虚拟数据库的查询映射之前,资源使用者首先要确定与网格应用相关的一个或多个虚拟数据库。由于父虚拟数据库能够自动具有子虚拟数据库中所设定的部分映射关系,所以网格应用开发者可以选择虚拟数据库树林中的任何一个虚拟数据库节点进行访问。如果资源使用者期望获得比较“专业”的数据,则可以选择虚拟数据库中靠近下层的虚拟数据库进行访问,如果资源使用者期望获得更广泛的数据,则可以选择虚拟数据库中靠近上层的虚拟数据库,这样可以获得来自更多真实数据库中的数据,但也是损失了一部分数据的“精度”。例如,如果UDMGrid的资源使用者访问“博物馆”虚拟数据库中的“标本”虚拟表时,就肯定不能获取到“推力”这一虚拟字段所对应的数据,因为“推力”是“航空航天”虚拟数据库中“发动机”虚拟表所特有的;另一方面,如果资源使用者访问“发动机”虚拟表,则可以顺利获得“推力”所对应的数据,但不能获得“考古”虚拟数据库中的“出土地”虚拟字段对应的数据。所以,在虚拟数据库的选择过程中,“精度”和“广度”是一对矛盾,资源使用者可以根据具体应用的需求特点选择合适的虚拟数据库,从而在“精度”和“广度”之间获得平衡点。模式复用的虚拟数据库构建策略,为资源使用者提供了选择虚拟数据库的灵活性,同时也没有增加系统构建者和资源提供者在初始化工作过程中的负担。
根据模式复用的虚拟数据库构建策略,在数据库资源注册与虚拟数据库选择的基础上,本发明给出了虚拟数据库查询映射算法,主要包括:(1)虚拟查询语句的转换。根据数据库资源注册确定的映射关系,将资源使用者对虚拟数据库的查询语句(即虚拟查询语句),转换为多个真实数据库的真实查询语句。(2)数据库查询结果的整合。将来自各真实数据库的查询响应整合为一个结果集,该结果集的元数据结构能够匹配所访问的虚拟数据库模式。请见图4,映射算法具体步骤如下:
(1)使用正则表达式分析虚拟查询语句,提取其虚拟字段、虚拟表、查询条件与排序规则;
(2)根据虚拟表名获取到该虚拟表的所有虚拟字段与映射规则(MappingRule);
(3)判断虚拟查询语句中出现的虚拟字段是否为虚拟表虚拟字段的子集,否则抛出异常,返回空的真实查询语句列表;
(4)遍历映射规则列表,针对每一条映射规则,执行步骤(5)~(10);
(5)获取该映射规则的字段映射(ColumnMapping)列表和表间关系(TableRelation)列表;
(6)对于虚拟查询语句中的每一个虚拟字段,根据字段映射列表,找出其对应的真实字段,生成转换后真实查询语句的SELECT部分;
(7)根据表间关系列表,生成联表检索条件,生成真实查询语句中FROM部分和WHERE部分(部分内容);
(8)根据虚拟语句的查询条件和字段映射列表,生成真实查询语句中WHERE部分的后续内容;
(9)根据虚拟查询语句中的排序规则,生成真实查询语句的排序规则;
(10)合成真实查询语句,并将此语句加入到返回值中;
(11)待所有映射规则均已处理完毕后,返回真实查询语句列表。
根据本发明模式复用的虚拟数据库构建策略,以及数据库资源注册、虚拟数据库选择和虚拟数据库查询映射等方式,可设计实现网格环境下异构数据库的访问和集成方法。如图5所示,Grid-DAI总体结构主要包括七个部分:(1)虚拟数据库管理器(VDB Management),在应用系统构建过程中,领域专家或系统构建者使用其来维护虚拟数据库的模式(VDBSchema);(2)数据库资源注册服务与客户端(ResInit Service,ResInit Client),数据库资源提供者在向应用系统注册其数据库资源时,使用该客户端自动注册其持有的数据库模式,并设定其数据库资源与虚拟数据库之间的映射关系;(3)数据库访问代理(Access Agent),为Grid-DAI中其它模块(如资源监测服务,查询与响应转换服务等)提供数据库访问服务,该代理可以支持对各数据库资源的并行访问;(4)虚拟数据库查询服务(VDB SGR),网格应用服务(GAS)或其它客户端,通过虚拟数据库查询服务,获取应用系统中的虚拟数据库模式信息;(5)虚拟数据库服务(VDBS),网格应用服务或其它客户端通过访问虚拟数据库服务获得来自各异构数据库中的信息,为了尽量避免虚拟数据库集中处理应用查询请求而降低系统效率,可以在网格系统中部署多个虚拟数据库服务以分流查询请求;(6)查询与响应转换服务(Req/Res TranServ),将资源使用者对虚拟数据库的访问请求转换为对真实数据库的访问请求,并将来自多个真实数据库的响应,整合为针对一个虚拟数据库的响应;(7)资源监测服务(ResMonitor),定期通过数据库访问代理监测已注册数据库资源的状态;(8)元数据目录,用来存储虚拟数据库模式、数据库资源元数据和数据库资源到虚拟数据库之间的映射信息。其中,数据库资源注册服务、虚拟数据库查询服务、虚拟数据库服务等部署在网格服务容器中,分别被数据库资源注册客户端、网格应用服务(Grid Application Service,简称GAS)或其它客户端调用。
如图6所示,利用本发明的Grid-DAI,UDMGrid的网格应用服务访问异构数据库资源的过程为:(1)网格应用服务向Grid-DAI的虚拟数据库提交访问请求;(2)虚拟数据库服务将查询请求递交给查询映射服务;(3)查询映射服务访问数据库元数据目录,结合虚拟数据库模式,将对虚拟数据库的访问请求通过前文给出的虚拟数据库查询映射算法转换为对相应真实数据库的访问请求;(4)查询映射服务通过访问代理,顺次或并行访问真实的异构数据库资源;(5)查询映射服务将依次得到的查询响应合并成一个结果,返回给虚拟数据库服务;(6)虚拟数据库服务将整合后的查询响应返回给网格应用服务;(7)虚拟数据库服务将查询响应返回给网格应用服务,完成一次访问过程,使网格应用服务的开发者能够利用虚拟数据库服务的接口获取来自异构数据库资源的整合信息。
为了验证Grid-DAI在异构数据库资源整合方面的正确性和实用性,在中国教育科研网格环境下,以大学数字博物馆网格UDMGrid为典型应用示范,首先由系统构建者和领域专家创建UDMGrid数据库资源的全局模式,然后由数据库资源提供者在UDMGrid注册其提供的数据库资源,最后由网格应用服务的开发者使用虚拟数据库服务提供的接口获取来自异构数据库资源的整合信息。图7是虚拟数据库的构建过程,根据领域专家的建议构建了“博物馆”、“航空航天”、“考古”等虚拟数据库。图8描述了航空航天数字博物馆数据库资源的注册过程,将资源数据库的“Model”等表映射为“飞机”和“发动机”等虚拟表。所以,UDMGrid利用“博物馆”虚拟数据库开发的“一站式”标本信息服务,能够支持用户通过UDMGrid门户获得来自多个异构数字博物馆资源的标本信息。例如,用户输入标本名称“马”,设定查询范围为已注册数字博物馆资源,在提交任务之后获得的信息服务结果如图9所示。左上角为来自中山大学生物数字博物馆中的“斑马”,右上角为来自中国农业大学昆虫数字博物馆的石雕“马上蝇”,左下角为来自航空航天数字博物馆的“野马”战斗机,右下角为来自山东大学考古数字博物馆的西汉时期文物“车马器”。本次服务从清华大学美术数字博物馆、西安建筑科技大学建筑数字博物馆、航空航天数字博物馆等12个数字博物馆的异构数据库中,共获得878条数据库标本信息、1249条Web标本信息,用时5分22秒。
在网格系统的异构数据库整合过程中,本发明提供了灵活的虚拟数据库机制,无论是对网格系统构建者,还是对资源提供者,或是对资源使用者,都具有好的实用性。资源提供者只需要使用客户端程序即可自动完成大部分的注册工作;资源使用者通过虚拟数据库查询服务即可获得异构数据库资源的全局统一视图,不需要关心真实数据库资源的地理分布、数据库模式、语义信息等,并且可以通过虚拟数据库服务的一致接口获取其所需要的异构数据库资源。
比较内容 | OGSA-DAI | Grid-DAI |
侧重点 | 数据访问 | 数据集成 |
资源全局模式 | 无 | 可定制,灵活 |
资源注册 | 系统构建者完成,对资源的描述粗糙 | 资源所有者完成,对资源的描述精准 |
资源使用 | 必须通过其它途径去了解资源的模式和语义信息等 | 直接访问虚拟数据库,不需要分别去熟悉各种资源 |
查询效率 | 高效,且支持分布式查询评估等 | 一般,简单的数据库连接池技术 |
推广程度 | 使用广泛,用户众多,软件相对成熟 | 目前还只有UDMGrid使用,还不够成熟,有待于推广 |
表1
如表1所示,与OGSA-DAI、OGSA-DQP比较,Grid-DAI主要针对的是数据库资源的统一视图问题,更侧重于对异构数据库的集成;OGSA-DAI和OGSA-DQP虽然提供了统一访问接口并支持分布式查询评估,但并不提供数据库资源的全局视图。
以上所述仅为本发明的一些基本说明,依据本发明的技术方案所做的任何等效变换,均应属于本发明的保护范围。
Claims (10)
1.一种网格环境下模式复用的异构数据库访问和集成方法,其特征在于包括以下步骤:
步骤1)根据异构数据库资源的学科或领域类型、网格资源的各种本体,利用模式复用的虚拟数据库描述各种数据库资源,通过虚拟数据库模式为资源使用者提供异构数据库资源的全局统一视图;
步骤2)采用资源注册的方式,资源提供者确定其数据库模式与虚拟数据库模式之间的映射关系,并且通过查询映射方法,将基于虚拟数据库的查询请求转换为基于真实数据库资源的查询请求,利用虚拟数据库服务为资源使用者提供访问数据库的一致接口;
步骤3)通过网格应用服务结果完成异构数据库资源的整合过程,使网格应用服务的开发者能够利用虚拟数据库服务的接口获取来自异构数据库资源的整合信息。
2.如权利要求1所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
所述步骤1)中的模式复用,是指在虚拟数据库的构建过程中,依据异构数据库资源隶属的学科或领域之间的内在联系、网格资源的全局本体与局部本体,借鉴面向对象设计方法的继承特性,利用树状结构表现虚拟数据库之间的继承关系,并保留虚拟数据库之间的内在联系,从而减少虚拟数据库构建的重复性工作,也体现了异构数据库资源的学科或领域之间的内在联系。
3.如权利要求2所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
在虚拟数据库树林中,虚拟数据库包含一个或多个虚拟表,虚拟表包含一个或多个虚拟字段,虚拟数据库、虚拟表和虚拟字段的概念分别类似于关系数据库理论中的数据库、表和字段的概念,这种继承关系使子虚拟数据库能够复用父虚拟数据库的模式。
4.如权利要求3所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
在创建子节点虚拟数据库的虚拟表时,既可以继承父节点虚拟数据库的虚拟表,也可以不继承任何虚拟表而创建自身的新虚拟表,并且这种继承关系具有递推性,可以一直上溯到根节点的虚拟数据库;
在创建子节点虚拟表的虚拟字段时,如果子节点的虚拟表继承了父节点的虚拟表,称前者为子虚拟表,称后者为父虚拟表,子虚拟表自动具有父虚拟表的所有虚拟字段,其中包括父虚拟表自身创建的虚拟字段和继承祖父的虚拟字段,并且子虚拟表也可以创建其自身的虚拟字段;
根据异构数据库资源的学科或领域类型,相近或者相同学科的虚拟数据库位于同一棵子树内,相差较远学科的虚拟数据库位于不同的子树中。
5.如权利要求1所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
在所述步骤2)中,数据库资源提供者注册其所持有的数据库资源时,需要设定三方面的信息:本地数据库访问参数、本地数据库模式、本地数据库与虚拟数据库之间的映射关系信息。
6.如权利要求5所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
所述本地数据库访问参数是指外部网络访问本地数据库所需要的参数,如果本地数据库可直接为外网访问,这些参数则包括数据库的类型、服务器IP、端口号、数据库名称、只读用户与口令等;如果外网不能直接访问本地数据库,则使用部署在Web Services容器中的Web服务作为本地数据库访问的代理服务,提供者只需提供该Web服务的地址和访问参数。
7.如权利要求5所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
所述本地数据库模式是指本地数据库表和视图的模式信息。
8.如权利要求5所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
所述本地数据库模式和虚拟数据库模式之间的映射关系信息是指本地数据库中某一个字段到虚拟数据库中某一个虚拟字段之间的映射关系,其映射关系可以定义为:映射关系信息是映射规则集合的子集,一条映射规则包括字段映射子集和表间关系子集,并且字段映射子集的所有元素必须针对同一虚拟表。
9.如权利要求1所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
在所述步骤2)中,虚拟数据库的查询映射方法具体包括以下步骤:
使用正则表达式分析虚拟查询语句,提取其虚拟字段、虚拟表、查询条件与排序规则;
根据虚拟表名获取到该虚拟表的所有虚拟字段与映射规则;
判断虚拟查询语句中出现的虚拟字段是否为虚拟表虚拟字段的子集,否则抛出异常,返回空的真实查询语句列表;
遍历映射规则列表,针对每一条映射规则,执行以下步骤,待所有映射规则均已处理完毕后,返回真实查询语句列表;
获取该映射规则的字段映射列表和表间关系列表;
对于虚拟查询语句中的每一个虚拟字段,根据字段映射列表,找出其对应的真实字段,生成转换后真实查询语句的SELECT部分;
根据表间关系列表,生成联表检索条件,生成真实查询语句中FROM部分和WHERE部分;
根据虚拟语句的查询条件和字段映射列表,生成真实查询语句中WHERE部分的后续内容;
根据虚拟查询语句中的排序规则,生成真实查询语句的排序规则;
合成真实查询语句,并将此语句加入到返回值中。
10.如权利要求1所述的网格环境下模式复用的异构数据库访问和集成方法,其特征在于:
在所述步骤3)中,通过网格应用服务结果完成异构数据库资源的整合过程包括以下步骤:
3.1)网格应用服务向Grid-DAI的虚拟数据库提交访问请求;
3.2)虚拟数据库服务将查询请求递交给查询映射服务;
3.3)查询映射服务访问数据库元数据目录,结合虚拟数据库模式,将对虚拟数据库的访问请求转换为对相应真实数据库的访问请求;
3.4)查询映射服务通过访问代理,顺次或并行访问真实的异构数据库资源;
3.5)查询映射服务将整合后的查询响应返回给虚拟数据库服务;
3.6)虚拟数据库服务将整合后的查询响应返回给网格应用服务;
3.7)通过网格应用服务结果完成异构数据库资源的整合过程,使网格应用服务的开发者能够利用虚拟数据库服务的接口获取来自异构数据库资源的整合信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA2007101765570A CN101187937A (zh) | 2007-10-30 | 2007-10-30 | 网格环境下模式复用的异构数据库访问和集成方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNA2007101765570A CN101187937A (zh) | 2007-10-30 | 2007-10-30 | 网格环境下模式复用的异构数据库访问和集成方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101187937A true CN101187937A (zh) | 2008-05-28 |
Family
ID=39480331
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2007101765570A Pending CN101187937A (zh) | 2007-10-30 | 2007-10-30 | 网格环境下模式复用的异构数据库访问和集成方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101187937A (zh) |
Cited By (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102084357A (zh) * | 2008-07-01 | 2011-06-01 | 富士通株式会社 | 检索装置以及检索方法 |
CN102163195A (zh) * | 2010-02-22 | 2011-08-24 | 北京东方通科技股份有限公司 | 一种基于分布式、异构数据库统一视图的查询优化方法 |
CN102323946A (zh) * | 2011-09-05 | 2012-01-18 | 天津神舟通用数据技术有限公司 | 并行数据库中算子复用的实现方法 |
CN102385628A (zh) * | 2011-11-14 | 2012-03-21 | 北京锐安科技有限公司 | 一种基于jdbc的数据分布式处理方法 |
CN102594798A (zh) * | 2011-12-31 | 2012-07-18 | 苏州阔地网络科技有限公司 | 一种连接数据库的代理方法及系统 |
CN102630087A (zh) * | 2012-02-24 | 2012-08-08 | 中兴通讯股份有限公司 | 异构处理方法及装置 |
CN101291337B (zh) * | 2008-05-30 | 2012-11-07 | 同济大学 | 一种网格资源管理系统及管理方法 |
CN103049521A (zh) * | 2012-12-19 | 2013-04-17 | 广东电子工业研究院有限公司 | 一种支持多属性复合条件查询的虚拟表索引机制及方法 |
CN103605698A (zh) * | 2013-11-06 | 2014-02-26 | 广东电子工业研究院有限公司 | 一种用于分布异构数据资源整合的云数据库系统 |
CN103617175A (zh) * | 2013-11-04 | 2014-03-05 | 广东电子工业研究院有限公司 | 一种用于大规模分布异构数据的虚拟化方法 |
CN103678634A (zh) * | 2013-12-19 | 2014-03-26 | 北京锐安科技有限公司 | 一种提高J-Hi开源开发平台中数据查询速度的方法 |
CN104133889A (zh) * | 2014-07-30 | 2014-11-05 | 国云科技股份有限公司 | 一种数据库虚拟化微内核数据源注册与封装方法 |
CN104346377A (zh) * | 2013-07-31 | 2015-02-11 | 克拉玛依红有软件有限责任公司 | 一种基于唯一标识的数据集成和交换方法 |
CN104364781A (zh) * | 2012-05-25 | 2015-02-18 | 克雷姆森海科斯康有限公司 | 用于计算类别比例的系统和方法 |
CN104572895A (zh) * | 2014-12-24 | 2015-04-29 | 天津南大通用数据技术股份有限公司 | MPP数据库与Hadoop集群数据互通方法、工具及实现方法 |
CN104573086A (zh) * | 2015-01-28 | 2015-04-29 | 浪潮集团有限公司 | 一种数据库访问构件及一种数据库访问构件的生成方法 |
CN104750776A (zh) * | 2013-12-30 | 2015-07-01 | Sap欧洲公司 | 使用元数据访问数据库平台中的信息内容 |
CN104866598A (zh) * | 2015-06-01 | 2015-08-26 | 北京理工大学 | 基于可配置模板的异构数据库集成方法 |
CN104991921A (zh) * | 2015-06-26 | 2015-10-21 | 北京奇虎科技有限公司 | 一种数据查询方法、客户端和服务器 |
CN105721271A (zh) * | 2014-12-22 | 2016-06-29 | 绿重通讯公司 | 无线和电力线通信网状网络 |
CN106202444A (zh) * | 2016-07-14 | 2016-12-07 | 浪潮软件股份有限公司 | 一种数据库运维监控的实现方法 |
CN106339454A (zh) * | 2016-08-25 | 2017-01-18 | 北京云知声信息技术有限公司 | 查询命令转化方法及装置 |
WO2017161956A1 (zh) * | 2016-03-22 | 2017-09-28 | 北京京东尚科信息技术有限公司 | 一种数据库扩展系统、设备和用于扩展数据库的方法 |
CN107301190A (zh) * | 2016-04-15 | 2017-10-27 | 中国移动通信集团湖北有限公司 | 一种控制数据访问的方法及装置 |
CN107368588A (zh) * | 2017-07-24 | 2017-11-21 | 人教数字出版有限公司 | 一种异构资源同构化方法及装置 |
CN107506369A (zh) * | 2017-07-06 | 2017-12-22 | 联动优势科技有限公司 | 一种数据访问方法及设备 |
CN107577590A (zh) * | 2016-07-04 | 2018-01-12 | 北京奇虎科技有限公司 | 基于数据库服务实时调用虚拟接口的方法及装置 |
CN107577815A (zh) * | 2017-09-29 | 2018-01-12 | 北京酷我科技有限公司 | 一种数据库查询数据优化算法 |
CN107943945A (zh) * | 2017-11-24 | 2018-04-20 | 清华大学 | 一种大数据分析开发平台中异构算子管理方法 |
CN108197149A (zh) * | 2017-12-05 | 2018-06-22 | 上海宝信软件股份有限公司 | 数据库云的实现方法和系统 |
CN108629035A (zh) * | 2018-05-10 | 2018-10-09 | 福建星瑞格软件有限公司 | 一种基于jdbc代理的异构数据库应用迁移方法 |
CN109213820A (zh) * | 2018-08-30 | 2019-01-15 | 成都索贝数码科技股份有限公司 | 一种实现多种类型的数据库融合使用的方法 |
CN109271409A (zh) * | 2018-11-08 | 2019-01-25 | 成都索贝数码科技股份有限公司 | 一种基于容器资源分配的数据库分片执行方法 |
CN109791492A (zh) * | 2016-09-23 | 2019-05-21 | 华为技术有限公司 | 流水线相关树查询优化器和调度器 |
CN109962957A (zh) * | 2017-12-26 | 2019-07-02 | 珠海全志科技股份有限公司 | 一种多区域多活服务的数据同步方法和装置 |
CN110046287A (zh) * | 2019-03-19 | 2019-07-23 | 厦门市美亚柏科信息股份有限公司 | 一种与数据库类型无关的数据查询方法、装置及存储介质 |
CN110069492A (zh) * | 2017-12-04 | 2019-07-30 | 复旦大学 | 民机技术出版物与培训数据集成方法 |
CN110442629A (zh) * | 2019-08-02 | 2019-11-12 | 珠海得分金融科技有限公司 | 大数据多中心异构动态数据转换方法 |
CN111367983A (zh) * | 2020-03-10 | 2020-07-03 | 中国联合网络通信集团有限公司 | 数据库访问方法、系统、设备和存储介质 |
TWI706259B (zh) * | 2014-06-18 | 2020-10-01 | 香港商阿里巴巴集團服務有限公司 | 資料的查詢方法及查詢裝置 |
CN111782652A (zh) * | 2020-06-30 | 2020-10-16 | 平安国际智慧城市科技股份有限公司 | 数据调用方法、装置、计算机设备和存储介质 |
CN111897863A (zh) * | 2020-07-31 | 2020-11-06 | 珠海市新德汇信息技术有限公司 | 多源异构数据融合汇聚方法 |
CN112363998A (zh) * | 2020-11-12 | 2021-02-12 | 浙江非线数联科技有限公司 | 一种基于数据标准的数据应用构架及实现方法 |
CN113225570A (zh) * | 2021-03-31 | 2021-08-06 | 深圳市鹰硕技术有限公司 | 基于全局虚拟数据视图的播放处理方法及相关设备 |
CN113377800A (zh) * | 2021-06-08 | 2021-09-10 | 国网电子商务有限公司 | 一种数据安全共享方法及装置 |
CN113407612A (zh) * | 2021-08-18 | 2021-09-17 | 江苏量界数据科技有限公司 | 一种虚拟分布式数据库访问系统与方法 |
-
2007
- 2007-10-30 CN CNA2007101765570A patent/CN101187937A/zh active Pending
Cited By (71)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101291337B (zh) * | 2008-05-30 | 2012-11-07 | 同济大学 | 一种网格资源管理系统及管理方法 |
CN102084357B (zh) * | 2008-07-01 | 2014-06-04 | 富士通株式会社 | 检索装置以及检索方法 |
CN102084357A (zh) * | 2008-07-01 | 2011-06-01 | 富士通株式会社 | 检索装置以及检索方法 |
CN102163195B (zh) * | 2010-02-22 | 2013-04-24 | 北京东方通科技股份有限公司 | 一种基于分布式、异构数据库统一视图的查询优化方法 |
CN102163195A (zh) * | 2010-02-22 | 2011-08-24 | 北京东方通科技股份有限公司 | 一种基于分布式、异构数据库统一视图的查询优化方法 |
CN102323946A (zh) * | 2011-09-05 | 2012-01-18 | 天津神舟通用数据技术有限公司 | 并行数据库中算子复用的实现方法 |
CN102385628A (zh) * | 2011-11-14 | 2012-03-21 | 北京锐安科技有限公司 | 一种基于jdbc的数据分布式处理方法 |
CN102594798A (zh) * | 2011-12-31 | 2012-07-18 | 苏州阔地网络科技有限公司 | 一种连接数据库的代理方法及系统 |
WO2013123743A1 (zh) * | 2012-02-24 | 2013-08-29 | 中兴通讯股份有限公司 | 异构处理方法及装置 |
CN102630087A (zh) * | 2012-02-24 | 2012-08-08 | 中兴通讯股份有限公司 | 异构处理方法及装置 |
CN104364781B (zh) * | 2012-05-25 | 2017-07-14 | 克雷姆森海科斯康有限公司 | 用于计算类别比例的系统和方法 |
CN104364781A (zh) * | 2012-05-25 | 2015-02-18 | 克雷姆森海科斯康有限公司 | 用于计算类别比例的系统和方法 |
US9483544B2 (en) | 2012-05-25 | 2016-11-01 | Crimson Hexagon, Inc. | Systems and methods for calculating category proportions |
CN103049521A (zh) * | 2012-12-19 | 2013-04-17 | 广东电子工业研究院有限公司 | 一种支持多属性复合条件查询的虚拟表索引机制及方法 |
CN103049521B (zh) * | 2012-12-19 | 2015-11-11 | 广东电子工业研究院有限公司 | 可实现多属性复合条件查询的虚拟表索引系统及方法 |
CN104346377B (zh) * | 2013-07-31 | 2017-08-08 | 克拉玛依红有软件有限责任公司 | 一种基于唯一标识的数据集成和交换方法 |
CN104346377A (zh) * | 2013-07-31 | 2015-02-11 | 克拉玛依红有软件有限责任公司 | 一种基于唯一标识的数据集成和交换方法 |
CN103617175A (zh) * | 2013-11-04 | 2014-03-05 | 广东电子工业研究院有限公司 | 一种用于大规模分布异构数据的虚拟化方法 |
WO2015062182A1 (zh) * | 2013-11-04 | 2015-05-07 | 广东电子工业研究院有限公司 | 大规模分布异构数据的虚拟化方法 |
CN103605698A (zh) * | 2013-11-06 | 2014-02-26 | 广东电子工业研究院有限公司 | 一种用于分布异构数据资源整合的云数据库系统 |
CN103678634A (zh) * | 2013-12-19 | 2014-03-26 | 北京锐安科技有限公司 | 一种提高J-Hi开源开发平台中数据查询速度的方法 |
CN104750776B (zh) * | 2013-12-30 | 2019-08-30 | Sap欧洲公司 | 使用元数据访问数据库平台中的信息内容 |
CN104750776A (zh) * | 2013-12-30 | 2015-07-01 | Sap欧洲公司 | 使用元数据访问数据库平台中的信息内容 |
TWI706259B (zh) * | 2014-06-18 | 2020-10-01 | 香港商阿里巴巴集團服務有限公司 | 資料的查詢方法及查詢裝置 |
CN104133889B (zh) * | 2014-07-30 | 2017-04-19 | 国云科技股份有限公司 | 一种数据库虚拟化微内核数据源注册与封装方法 |
CN104133889A (zh) * | 2014-07-30 | 2014-11-05 | 国云科技股份有限公司 | 一种数据库虚拟化微内核数据源注册与封装方法 |
CN105721271A (zh) * | 2014-12-22 | 2016-06-29 | 绿重通讯公司 | 无线和电力线通信网状网络 |
CN104572895A (zh) * | 2014-12-24 | 2015-04-29 | 天津南大通用数据技术股份有限公司 | MPP数据库与Hadoop集群数据互通方法、工具及实现方法 |
CN104572895B (zh) * | 2014-12-24 | 2018-02-23 | 天津南大通用数据技术股份有限公司 | MPP数据库与Hadoop集群数据互通方法、工具及实现方法 |
CN104573086A (zh) * | 2015-01-28 | 2015-04-29 | 浪潮集团有限公司 | 一种数据库访问构件及一种数据库访问构件的生成方法 |
CN104866598A (zh) * | 2015-06-01 | 2015-08-26 | 北京理工大学 | 基于可配置模板的异构数据库集成方法 |
CN104866598B (zh) * | 2015-06-01 | 2018-05-08 | 北京理工大学 | 基于可配置模板的异构数据库集成方法 |
CN104991921B (zh) * | 2015-06-26 | 2019-02-15 | 北京奇虎科技有限公司 | 一种数据查询方法、客户端和服务器 |
CN104991921A (zh) * | 2015-06-26 | 2015-10-21 | 北京奇虎科技有限公司 | 一种数据查询方法、客户端和服务器 |
US11243921B2 (en) | 2016-03-22 | 2022-02-08 | Beijing Jingdong Shangke Information Technology Co., Ltd. | Database expansion system, equipment, and method of expanding database |
CN107220259A (zh) * | 2016-03-22 | 2017-09-29 | 北京京东尚科信息技术有限公司 | 一种数据库扩展系统、设备和用于扩展数据库的方法 |
WO2017161956A1 (zh) * | 2016-03-22 | 2017-09-28 | 北京京东尚科信息技术有限公司 | 一种数据库扩展系统、设备和用于扩展数据库的方法 |
CN107301190A (zh) * | 2016-04-15 | 2017-10-27 | 中国移动通信集团湖北有限公司 | 一种控制数据访问的方法及装置 |
CN107577590B (zh) * | 2016-07-04 | 2023-12-05 | 北京奇虎科技有限公司 | 基于数据库服务实时调用虚拟接口的方法及装置 |
CN107577590A (zh) * | 2016-07-04 | 2018-01-12 | 北京奇虎科技有限公司 | 基于数据库服务实时调用虚拟接口的方法及装置 |
CN106202444A (zh) * | 2016-07-14 | 2016-12-07 | 浪潮软件股份有限公司 | 一种数据库运维监控的实现方法 |
CN106339454A (zh) * | 2016-08-25 | 2017-01-18 | 北京云知声信息技术有限公司 | 查询命令转化方法及装置 |
CN109791492A (zh) * | 2016-09-23 | 2019-05-21 | 华为技术有限公司 | 流水线相关树查询优化器和调度器 |
CN107506369A (zh) * | 2017-07-06 | 2017-12-22 | 联动优势科技有限公司 | 一种数据访问方法及设备 |
CN107368588A (zh) * | 2017-07-24 | 2017-11-21 | 人教数字出版有限公司 | 一种异构资源同构化方法及装置 |
CN107368588B (zh) * | 2017-07-24 | 2020-09-01 | 人教数字出版有限公司 | 一种异构资源同构化方法及装置 |
CN107577815A (zh) * | 2017-09-29 | 2018-01-12 | 北京酷我科技有限公司 | 一种数据库查询数据优化算法 |
CN107943945A (zh) * | 2017-11-24 | 2018-04-20 | 清华大学 | 一种大数据分析开发平台中异构算子管理方法 |
CN110069492A (zh) * | 2017-12-04 | 2019-07-30 | 复旦大学 | 民机技术出版物与培训数据集成方法 |
CN108197149A (zh) * | 2017-12-05 | 2018-06-22 | 上海宝信软件股份有限公司 | 数据库云的实现方法和系统 |
CN109962957A (zh) * | 2017-12-26 | 2019-07-02 | 珠海全志科技股份有限公司 | 一种多区域多活服务的数据同步方法和装置 |
CN109962957B (zh) * | 2017-12-26 | 2022-04-05 | 珠海全志科技股份有限公司 | 一种多区域多活服务的数据同步方法和装置 |
CN108629035A (zh) * | 2018-05-10 | 2018-10-09 | 福建星瑞格软件有限公司 | 一种基于jdbc代理的异构数据库应用迁移方法 |
CN108629035B (zh) * | 2018-05-10 | 2022-05-27 | 福建星瑞格软件有限公司 | 一种基于jdbc代理的异构数据库应用迁移方法 |
CN109213820B (zh) * | 2018-08-30 | 2021-10-22 | 成都索贝数码科技股份有限公司 | 一种实现多种类型的数据库融合使用的方法 |
CN109213820A (zh) * | 2018-08-30 | 2019-01-15 | 成都索贝数码科技股份有限公司 | 一种实现多种类型的数据库融合使用的方法 |
CN109271409B (zh) * | 2018-11-08 | 2021-11-02 | 成都索贝数码科技股份有限公司 | 一种基于容器资源分配的数据库分片执行方法 |
CN109271409A (zh) * | 2018-11-08 | 2019-01-25 | 成都索贝数码科技股份有限公司 | 一种基于容器资源分配的数据库分片执行方法 |
CN110046287A (zh) * | 2019-03-19 | 2019-07-23 | 厦门市美亚柏科信息股份有限公司 | 一种与数据库类型无关的数据查询方法、装置及存储介质 |
CN110442629B (zh) * | 2019-08-02 | 2022-11-25 | 珠海得分金融科技有限公司 | 大数据多中心异构动态数据转换方法 |
CN110442629A (zh) * | 2019-08-02 | 2019-11-12 | 珠海得分金融科技有限公司 | 大数据多中心异构动态数据转换方法 |
CN111367983B (zh) * | 2020-03-10 | 2023-08-15 | 中国联合网络通信集团有限公司 | 数据库访问方法、系统、设备和存储介质 |
CN111367983A (zh) * | 2020-03-10 | 2020-07-03 | 中国联合网络通信集团有限公司 | 数据库访问方法、系统、设备和存储介质 |
CN111782652B (zh) * | 2020-06-30 | 2024-04-02 | 深圳赛安特技术服务有限公司 | 数据调用方法、装置、计算机设备和存储介质 |
CN111782652A (zh) * | 2020-06-30 | 2020-10-16 | 平安国际智慧城市科技股份有限公司 | 数据调用方法、装置、计算机设备和存储介质 |
CN111897863A (zh) * | 2020-07-31 | 2020-11-06 | 珠海市新德汇信息技术有限公司 | 多源异构数据融合汇聚方法 |
CN112363998A (zh) * | 2020-11-12 | 2021-02-12 | 浙江非线数联科技有限公司 | 一种基于数据标准的数据应用构架及实现方法 |
CN113225570B (zh) * | 2021-03-31 | 2022-09-13 | 深圳市鹰硕技术有限公司 | 基于全局虚拟数据视图的播放处理方法及相关设备 |
CN113225570A (zh) * | 2021-03-31 | 2021-08-06 | 深圳市鹰硕技术有限公司 | 基于全局虚拟数据视图的播放处理方法及相关设备 |
CN113377800A (zh) * | 2021-06-08 | 2021-09-10 | 国网电子商务有限公司 | 一种数据安全共享方法及装置 |
CN113407612A (zh) * | 2021-08-18 | 2021-09-17 | 江苏量界数据科技有限公司 | 一种虚拟分布式数据库访问系统与方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101187937A (zh) | 网格环境下模式复用的异构数据库访问和集成方法 | |
CN100573528C (zh) | 数字博物馆网格及其构造方法 | |
CN101360123B (zh) | 一种网络系统及其管理方法 | |
WO2014182852A1 (en) | System for managing graph queries on relationships among entities using graph index | |
CN108073710B (zh) | 基于动态网络图挖掘的Github开源代码库推荐系统 | |
US10417263B2 (en) | Method and apparatus for implementing a set of integrated data systems | |
CN104200402A (zh) | 一种电网多个数据源的源数据发布方法及系统 | |
CN101873335A (zh) | 一种跨域语义Web服务的分布式搜索方法 | |
CN110447025A (zh) | 在物联网中启用语义混搭 | |
JP2006513474A (ja) | リレーショナルolapエンジンのための多次元計算を記述する方法、システム、およびプログラム | |
CN101546325A (zh) | 基于soa的网格异构数据集成方法 | |
CN110298189A (zh) | 数据库权限管理方法及设备 | |
CN111079131A (zh) | 一种跨公司业务的权限授权与控制方法及系统 | |
Qiao et al. | Building thesaurus-based knowledge graph based on schema layer | |
Bai et al. | GEOSS component and service registry: Design, implementation and lessons learned | |
CN102073644B (zh) | 一种查询数据库的方法、服务器及系统 | |
Harth et al. | Database techniques for linked data management | |
Nicklas et al. | A schema-based approach to enable data integration on the fly | |
US11372943B2 (en) | Custom types controller for search engine support | |
Kokolaki et al. | Facetize: An interactive tool for cleaning and transforming datasets for facilitating exploratory search | |
Monger et al. | Temporal data management in NoSQL databases | |
CN103262022B (zh) | 用于执行数据驱动的协调的计算机系统和方法 | |
Liu et al. | The advanced data service architecture for modern enterprise information system | |
Silva et al. | Logical big data integration and near real-time data analytics | |
Quasthoff et al. | Design pattern for object triple mapping |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20080528 |