CN112487075B - 一种集成关系型和非关系型数据库数据转换算子的方法 - Google Patents
一种集成关系型和非关系型数据库数据转换算子的方法 Download PDFInfo
- Publication number
- CN112487075B CN112487075B CN202011592182.8A CN202011592182A CN112487075B CN 112487075 B CN112487075 B CN 112487075B CN 202011592182 A CN202011592182 A CN 202011592182A CN 112487075 B CN112487075 B CN 112487075B
- Authority
- CN
- China
- Prior art keywords
- database
- operator
- data
- relational
- operators
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/957—Browsing optimisation, e.g. caching or content distillation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明属于关系型和非关系型数据库之间数据相互转换技术领域,具体涉及一种集成关系型和非关系型数据库数据转换算子的方法,直接将web请求转换为算子运行的Request‑Body请求体,根据请求体的类别等字段运行相应转换算子,分门别类、统一规划、统一转发由算子决定数据库连接的执行和释放,大大减少了后端冗余代码,极大提高了开发效率。
Description
技术领域
本发明属于关系型和非关系型数据库之间数据相互转换技术领域,具体涉及一种集成关系型和非关系型数据库数据转换算子的方法。
背景技术
随着Web 2.0的发展,业务处理流程逐渐丰富多变,作为数据下沉方向的数据库显得颇为重要。为符合不同的业务处理逻辑,往往需要不同类别的数据库,比如传统的关系型数据库oracle、mysql、postgres以存储海量数据的hive库和缓存性redis数据库,相应的同项目中管理这些数据库显得颇为繁琐复杂,对数据进行夸库操作存在很大问题,请求方式、处理引擎多变,处理业务逻辑错中复杂,效率低下。
通常业务中涉及数据之间转换需要处理以下几个关键点:数据输入的库类型、库名、库表、库密码、库用户,目标库类型、库名、库表、库密码、库用户、库字段相关信息,任务的唯一标识ID。业务代码中处理这些请求需要每次都分门别类连接各自不同的库、关闭连接,会造成大量臃肿的处理逻辑和重复性工作。既然这些前期准备工作和后续调用库进行任务规划逻辑如此相似,那么就可以认为他们处理的业务就是一个任务单元,但目前技术中要很好地处理这种业务单元进行数据在算子中转换的流程还没有一个统一和简便的办法。
发明内容
针对现有设备存在的缺陷和问题,本发明提供一种,有效的解决了现有设备中存在的业务代码中处理请求过程中需要每次都分门别类连接各自不同的库、关闭连接,会造成大量臃肿的处理逻辑和重复性工作。
本发明解决其技术问题所采用的方案是: 一种集成关系型和非关系型数据库数据转换的算子,包括如下步骤:
步骤1:数据连接初始化;
确定配置文件的数据库类型,根据数据库基础信息初始化配置文件的配置参数,提供配置文件获取连接的配置类
步骤2:构建数据库链接池和数据库连接工厂;
然后根据配置类构建与配置文件对应的数据库链接池和数据库连接工厂,在数据库连接工厂初始化的构造函数里导入各自对应的配置类,便于上层服务根据数据源类型获取对应的数据库连接;
步骤3:创建统一请求体;
根据web请求参数,提取数据转换中表到表、表到文件、文件到表的共同特性,并根据共同特性提炼出统一的请求体;请求体包含input对象、output对象、请求体唯一标识和任务ID;
步骤4:转换算子执行请求体;
通过请求体的任务ID获取数据库之间的数据转换算子的类型,并由类型区分要执行的转换算子,算子执行之前根据input拿到数据库链接池和数据库连接工厂,向算子传入执行的sql,并将结果输出到output对象中指定的位置;
步骤5:提供REST接口服务;
REST接口是针对第三方调用的服务,第三方用户按照REST接口规范在web页面拖拽组件、填写参数组装请求体的input对象、output对象所需要的参数,包含来源数据库、目标数据库、数据库参数、数据提取条件、任务ID等,第三方用户发送请求,调用步骤4。
进一步的,在步骤5中调用接口后,后端系统根据输入和输出元信息,验证必要条件是否成立,验证输入源数据库是否健康,数据源是否包含输入表,验证输出库是否健康,验证输出库表或者输出位置是否存在。
进一步的,在步骤4中执行算子之前,根据请求体的类型为请求体分配不同的算子,算子的类型包括相同库转换、异构库转换、库到文件实体转换。
进一步的,步骤1中所述配置类包括数据库连接单次释放和数据库连接缓冲池,配置类根据查询和转换的数据不同保持长连接或者短链接,并匹配各自执行算子。
进一步的,在步骤4中,算子执行过程包括数据文件下沉或者临时文件下沉,需要在input和output对象中指定位置,然后根据数据下沉的位置选择执行下沉的逻辑,所述数据下沉的位置包括oracle表、txt文件和HDFS集群。
进一步的,步骤4中,算子执行的前提是同任务同时间只能执行一次,算子执行期间的状态会保留在内存中,步骤4中发起的请求,步骤3中会返回算子的运行状态,提供给用户相应的操作规范。
进一步的,步骤4中的output对象会标注提取数据的范围、提取数据的说明、提取字段的数据类型和提取字段的名称,根据提取字段的条件说明和对应源数据库的数据格式,经过统一类型转换,生成输出数据库的类型、字段长度和字段说明。
进一步的,步骤4中用户组装请求体数据源后,用户能够通过web交互页面看到算子到算子之间建立连接、算子执行成功标志、算子执行进度和算子执行失败详情提示;算子执行完毕之后,用户可以看到本次算子执行耗时、算子重新调度、算子调用者、算子执行数据预览,方便用户复核执行计划与预期是否一致。
进一步的,步骤1中,数据库类型为oracle、mysql、postgre和hive中的任一种。
本发明的有益效果:本发明提供了一种集成关系型和非关系型数据库数据转换的算子,直接将web请求转换为算子运行Request-Body请求体,根据请求体的类别等字段运行相应转换算子,分门别类、统一规划、统一转发由算子决定数据库连接的执行和释放,大大减少了后端冗余代码,极大提高了开发效率。
本发明创建Request-Body请求体后,自由的且由代码分门别类的执行各自的算子,执行task任务的结果会封装在Response-Body结果中,运行中的状态、执行时长、执行效果、报错信息统一返回固定格式,给客户提供直观的处理意见。
附图说明
图1 是本发明的系统架构图。
图2 是统一数据库初始化工厂流程图。
图3 是本发明执行统一请求体流程图。
图4 是本发明提供服务接口方法流程图。
具体实施方式
下面结合附图和实施例对本发明进一步说明。
实施例1: 随着Web 2.0的发展,业务处理流程逐渐丰富多变,作为数据下沉方向的数据库显得颇为重要。为符合不同的业务处理逻辑,往往需要不同类别的数据库,处理过程复杂,效率低下等问题。本实施例实现了一种集成关系型和非关系型数据库数据转换的算子。
本实施例在具体实施时包括如下步骤:
步骤1:数据连接初始化
确定配置文件的数据库类型,根据数据库基础信息初始化配置文件的配置参数,提供配置文件获取连接的配置类;所述配置类包括数据库连接单次释放和数据库连接缓冲池,配置类根据查询和转换的数据不同保持长连接或者短链接,并匹配各自执行算子,数据库类型可以为oracle、mysql、postgre和hive中的任一种。
步骤2:构建数据库链接池和数据库连接工厂
然后根据配置类构建与配置文件对应的数据库链接池和数据库连接工厂,在数据库连接工厂初始化的构造函数里导入各自对应的配置类,便于上层服务根据数据源类型获取对应的数据库连接;
步骤3:创建统一请求体
根据web请求参数,提取数据转换表到表、表到文件、文件到表的共同特性,并根据共同特性提炼出统一的请求体,具体的代码如下:
{
"input": [{
"databaseName": "middle",
"id": "1",
"tableName": "oracle_520000_201910101857131606",
"type": "datasource"
}],
"output": {
"databaseName": "",
"directory": "/tmp/extract/extractHive2Oracle",
"fieldList": [{
"comment": "传输层协议",
"fieldName": "TRANS_PROTOCOL",
"fieldType": "VARCHAR2"
}],
"ip": "10.1.1.1",
"passWord": "jdk",
"sid": "jdk",
"tableName": "extractHive2Oracle",
"userName": "jdks"
},
"procedureId": "1",
"Id": "9f8f64ca-ae0e-41e8-a833-0af2afd6a501",
"uuid": "0"
}
请求体包含input对象、output对象、请求体唯一标识和任务ID。
步骤4:转换算子执行请求体
通过请求体的任务id获取数据库之间的数据转换算子的类型,并由类型区分要执行的转换算子,算子执行之前,根据请求体的类型为请求体分配不同的算子,算子的类型包括相同库转换、异构库转换、库到文件实体转换,根据input拿到数据库链接池和数据库连接工厂,向算子传入执行的sql,并将结果输出到output对象中指定的位置,算子执行过程中涉及到的数据文件下沉或者临时文件下沉,需要在input和output对象中指定位置,涉及到但不限于oracle表、txt文件、HDFS集群。
本实施例中算子执行的前提是同任务同时间只能执行一次,算子执行期间的状态会保留在内存中,步骤4中发起的请求,步骤3中会返回算子的运行状态,提供给用户相应的操作规范。
本步骤中的output对象会标注提取数据的范围、提取数据的说明、提取字段的数据类型和提取字段的名称,根据提取字段的条件说明和对应源数据库的数据格式,经过统一类型转换,生成输出数据库的类型、字段长度和字段说明,用户通过web交互页面拖拽请求数据源后,能够看到算子到算子之间建立连接、算子执行成功标志、算子执行进度和算子执行失败详情提示;算子执行完毕之后,用户可以看到本次算子执行耗时、算子重新调度、算子调用者、算子执行数据预览,方便用户复核执行计划与预期是否一致。
步骤5:提供REST接口服务
REST接口是针对第三方调用的服务,第三方用户按照REST接口规范在web页面拖拽组件、填写参数组装请求体的input对象、output对象所需要的参数,包含来源数据库、目标数据库、数据库参数、数据提取条件、任务ID等,第三方用户发送请求,调用步骤4。
调用接口后,后端系统根据输入和输出元信息,验证必要条件是否成立,验证输入源数据库是否健康,数据源是否包含输入表,验证输出库是否健康,验证输出库表或这输出位置是否存在。
如图1所示本实施例的系统架构图,涉及到前端、web后端、大数据集群平台、数据库相关技术,展示层为web交互平台,控制层为请求体提供数据接受,服务层处理业务、条件拆分、条件组装,为算子调用请求体筹备条件,关系型数据库之间转换、HIVE库之间转换、关系型到HIVE之间转换为算子。
如图2所示,系统启动,根据系统配置,hive库会初始化两种数据库连接工厂并注入数据库的connection参数,一种是单次使用连接适用于短连接执行单次任务,一种是数据库连接池执行大批量数据写入写出、预执行计划。图中connection properties为数据库的数据源参数,指的是权力要求书中的配置类,jdbc pool、hive pool为权力要求书所指的数据库连接池,Durid为连接数据库的规范。这3个共同构建出数据库FACTORY,就是指的工厂。
图3所示,执行统一请求体流程。从web平台页面填写的参数提取出统一Request-Body请求体,服务转发层代码根据需求转发到各个算子服务节点执行算子task任务,任务有自己相应的connection数据源参数,任务执行期间会实时记录该任务状态到数据库,写入执行动态成功或者失败,执行结果会实时写入Output请求参数设定的库表或者HDFS路径下的文件夹。
如图4所示,提供REST接口服务实施方式,用户可在web页面拖拽数据源模块,然后编辑请求体的相关参数,包括源库、源表、源IP地址、源用户密码,目标库、目标表或者路径、目标库用户密码。控制层、服务转发层根据具体请求体转发请求到相应的服务器共算子任务执行。算子任务执行前提是传入配置的数据源,调用数据库执行工厂,获得数据库执行引擎,执行SQL规则计划,获得结果输出到请求体配置的下沉位置,惊醒结果存储。最后返回任务执行的运行中的状态、执行时长、执行效果、报错信息统一返回固定格式,给客户提供直观的处理意见。
由此,本发明提供了一种集成关系型和非关系型数据库数据转换的算子,直接将web请求转换为算子运行的Request-Body请求体,根据请求体的类别等字段执行相应转换算子。算子调用数据库的工厂,注入数据库连接参数,分门别类、统一规划、统一转发由算子决定数据库的运行和停止,大大减少了后端冗余代码,极大提高了开发效率,充分利用数据库中的数据资源,能够高效实现大量的数据库操作。
Claims (9)
1.一种集成关系型和非关系型数据库数据转换算子的方法,其特征在于:包括如下步骤:
步骤1:数据连接初始化;
确定配置文件的数据库类型,根据数据库基础信息初始化配置文件的配置参数,提供配置文件获取连接的配置类;
步骤2:构建数据库链接池和数据库连接工厂;
然后根据配置类构建与配置文件对应的数据库链接池和数据库连接工厂,在数据库连接工厂初始化的构造函数里导入各自对应的配置类,便于上层服务根据数据源类型获取对应的数据库连接;
步骤3:创建统一请求体;
根据web请求参数,提取数据转换中表到表、表到文件、文件到表的共同特性,并根据共同特性提炼出统一的请求体;请求体包含input对象、output对象、请求体唯一标识和任务ID;
步骤4:转换算子执行请求体;
通过请求体的任务ID获取数据库之间的数据转换算子的类型,并由类型区分要执行的转换算子,算子执行之前根据input拿到数据库链接池和数据库连接工厂,向算子传入执行的sql,并将结果输出到output对象中指定的位置;
步骤5:提供REST接口服务;
REST接口是针对第三方调用的服务,第三方用户按照REST接口规范在web页面拖拽组件、填写参数组装请求体的input对象、output对象所需要的参数,包含来源数据库、目标数据库、数据库参数、数据提取条件、任务ID,第三方用户发送请求,调用步骤4。
2.根据权利要求1所述的集成关系型和非关系型数据库数据转换算子的方法,其特征在于:在步骤5中调用接口后,后端系统根据输入和输出元信息,验证必要条件是否成立,验证输入源数据库是否健康,数据源是否包含输入表,验证输出库是否健康,验证输出库表或者输出位置是否存在。
3.根据权利要求1所述的集成关系型和非关系型数据库数据转换算子的方法,其特征在于:在步骤4中执行算子之前,根据请求体的类型为请求体分配不同的算子,算子的类型包括相同库转换、异构库转换、库到文件实体转换。
4.根据权利要求1所述的集成关系型和非关系型数据库数据转换算子的方法,其特征在于:步骤1中所述配置类包括数据库连接单次释放和数据库连接缓冲池,配置类根据查询和转换的数据不同保持长连接或者短链接,并匹配各自执行算子。
5.根据权利要求1所述的集成关系型和非关系型数据库数据转换算子的方法,其特征在于:在步骤4中,算子执行过程包括数据文件下沉或者临时文件下沉,需要在input和output对象中指定位置,然后根据数据下沉的位置选择执行下沉的逻辑,所述数据下沉的位置包括oracle表、txt文件和HDFS集群。
6.根据权利要求1所述的集成关系型和非关系型数据库数据转换算子的方法,其特征在于:步骤4中,算子执行的前提是同任务同时间只能执行一次,算子执行期间的状态会保留在内存中,步骤4中发起的请求,步骤3中会返回算子的运行状态,提供给用户相应的操作规范。
7.根据权利要求1所述的集成关系型和非关系型数据库数据转换算子的方法,其特征在于:步骤4中的output对象会标注提取数据的范围、提取数据的说明、提取字段的数据类型和提取字段的名称,根据提取字段的条件说明和对应源数据库的数据格式,经过统一类型转换,生成输出数据库的类型、字段长度和字段说明。
8.根据权利要求1所述的集成关系型和非关系型数据库数据转换算子的方法,其特征在于:步骤4中用户组装请求体数据源后,用户能够通过web交互页面看到算子到算子之间建立连接、算子执行成功标志、算子执行进度和算子执行失败详情提示;算子执行完毕之后,用户可以看到本次算子执行耗时、算子重新调度、算子调用者、算子执行数据预览,方便用户复核执行计划与预期是否一致。
9.根据权利要求1所述的集成关系型和非关系型数据库数据转换算子的方法,其特征在于:步骤1中,数据库类型为oracle、mysql、postgre和hive中的任一种。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011592182.8A CN112487075B (zh) | 2020-12-29 | 2020-12-29 | 一种集成关系型和非关系型数据库数据转换算子的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011592182.8A CN112487075B (zh) | 2020-12-29 | 2020-12-29 | 一种集成关系型和非关系型数据库数据转换算子的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112487075A CN112487075A (zh) | 2021-03-12 |
CN112487075B true CN112487075B (zh) | 2021-08-31 |
Family
ID=74915815
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011592182.8A Active CN112487075B (zh) | 2020-12-29 | 2020-12-29 | 一种集成关系型和非关系型数据库数据转换算子的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112487075B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113254519B (zh) * | 2021-05-28 | 2021-10-08 | 北京奇岱松科技有限公司 | 多源异构数据库的访问方法、装置、设备和存储介质 |
CN115660049B (zh) * | 2022-11-02 | 2023-07-25 | 北京百度网讯科技有限公司 | 模型处理方法、装置、电子设备以及存储介质 |
CN117971934B (zh) * | 2023-10-24 | 2024-08-16 | 武汉大学人民医院(湖北省人民医院) | 一种同一数据库的并行使用方法及装置 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1567301A (zh) * | 2003-06-23 | 2005-01-19 | 华为技术有限公司 | 访问数据库的方法及装置 |
US7315863B2 (en) * | 2001-09-20 | 2008-01-01 | Oracle International Corp | Method and apparatus for automatic notification of database events |
CN103092993A (zh) * | 2013-02-18 | 2013-05-08 | 五八同城信息技术有限公司 | 数据导出方法及装置 |
CN103631868A (zh) * | 2013-11-04 | 2014-03-12 | 中国电子科技集团公司第十五研究所 | 一种兼容关系数据库的数据管理系统 |
CN103699638A (zh) * | 2013-12-23 | 2014-04-02 | 国云科技股份有限公司 | 一种基于配置参数实现跨数据库类型同步数据的方法 |
CN105808776A (zh) * | 2016-03-29 | 2016-07-27 | 中国建设银行股份有限公司 | 一种分布式数据库的数据管理系统及方法 |
CN105868411A (zh) * | 2016-04-27 | 2016-08-17 | 国网上海市电力公司 | 一种非关系型与关系型数据库一体化数据查询方法与系统 |
CN105930354A (zh) * | 2016-04-08 | 2016-09-07 | 四川师范大学 | 存储模型转换方法和装置 |
CN106528898A (zh) * | 2017-01-04 | 2017-03-22 | 泰康保险集团股份有限公司 | 将非关系型数据库数据转换到关系型数据库的方法及装置 |
CN109002474A (zh) * | 2018-06-15 | 2018-12-14 | 北京信安世纪科技股份有限公司 | 一种数据迁移方法及装置 |
CN109478266A (zh) * | 2016-06-07 | 2019-03-15 | 甲骨文国际公司 | 对于数据库供应的资源分配 |
CN109635016A (zh) * | 2018-10-16 | 2019-04-16 | 深圳壹账通智能科技有限公司 | 数据转换方法、装置、设备及计算机可读存储介质 |
CN109669980A (zh) * | 2018-12-21 | 2019-04-23 | 成都四方伟业软件股份有限公司 | 数据跨库访问方法及装置 |
CN111177246A (zh) * | 2019-12-27 | 2020-05-19 | 腾讯云计算(北京)有限责任公司 | 一种业务数据的处理方法及装置 |
CN112579626A (zh) * | 2020-09-28 | 2021-03-30 | 京信数据科技有限公司 | 多源异构sql查询引擎的构建方法及装置 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102508706B (zh) * | 2011-11-18 | 2013-08-07 | 北京航空航天大学 | 一种多源数据集成平台及其构建方法 |
CN103514274A (zh) * | 2013-09-17 | 2014-01-15 | 宁波东冠科技有限公司 | 非关系型数据库HBase的数据迁移方法 |
CN107038207B (zh) * | 2017-02-20 | 2021-03-19 | 创新先进技术有限公司 | 一种数据查询方法、数据处理方法及装置 |
US11176173B2 (en) * | 2018-07-10 | 2021-11-16 | Comptel Oy | Arrangement for enriching data stream in a communications network and related method |
CN110825388B (zh) * | 2019-11-15 | 2021-08-31 | 中科大数据研究院 | 一种将sql语句直接转换为对应rest接口的方法 |
-
2020
- 2020-12-29 CN CN202011592182.8A patent/CN112487075B/zh active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7315863B2 (en) * | 2001-09-20 | 2008-01-01 | Oracle International Corp | Method and apparatus for automatic notification of database events |
CN1567301A (zh) * | 2003-06-23 | 2005-01-19 | 华为技术有限公司 | 访问数据库的方法及装置 |
CN103092993A (zh) * | 2013-02-18 | 2013-05-08 | 五八同城信息技术有限公司 | 数据导出方法及装置 |
CN103631868A (zh) * | 2013-11-04 | 2014-03-12 | 中国电子科技集团公司第十五研究所 | 一种兼容关系数据库的数据管理系统 |
CN103699638A (zh) * | 2013-12-23 | 2014-04-02 | 国云科技股份有限公司 | 一种基于配置参数实现跨数据库类型同步数据的方法 |
CN105808776A (zh) * | 2016-03-29 | 2016-07-27 | 中国建设银行股份有限公司 | 一种分布式数据库的数据管理系统及方法 |
CN105930354A (zh) * | 2016-04-08 | 2016-09-07 | 四川师范大学 | 存储模型转换方法和装置 |
CN105868411A (zh) * | 2016-04-27 | 2016-08-17 | 国网上海市电力公司 | 一种非关系型与关系型数据库一体化数据查询方法与系统 |
CN109478266A (zh) * | 2016-06-07 | 2019-03-15 | 甲骨文国际公司 | 对于数据库供应的资源分配 |
CN106528898A (zh) * | 2017-01-04 | 2017-03-22 | 泰康保险集团股份有限公司 | 将非关系型数据库数据转换到关系型数据库的方法及装置 |
CN109002474A (zh) * | 2018-06-15 | 2018-12-14 | 北京信安世纪科技股份有限公司 | 一种数据迁移方法及装置 |
CN109635016A (zh) * | 2018-10-16 | 2019-04-16 | 深圳壹账通智能科技有限公司 | 数据转换方法、装置、设备及计算机可读存储介质 |
CN109669980A (zh) * | 2018-12-21 | 2019-04-23 | 成都四方伟业软件股份有限公司 | 数据跨库访问方法及装置 |
CN111177246A (zh) * | 2019-12-27 | 2020-05-19 | 腾讯云计算(北京)有限责任公司 | 一种业务数据的处理方法及装置 |
CN112579626A (zh) * | 2020-09-28 | 2021-03-30 | 京信数据科技有限公司 | 多源异构sql查询引擎的构建方法及装置 |
Non-Patent Citations (5)
Title |
---|
Scalable micro-service based approach to FHIR server with golang and No-SQL;F. S. Shoumik 等;《2017 20th International Conference of Computer and Information Technology (ICCIT)》;20180208;第1-6页 * |
SQL与NoSQL数据库间的数据查询转换方法研究;张冰冰;《电子科技》;20170815;第30卷(第8期);第109-228页 * |
基于rest风格的云数据库接口的设计与实现;廖晶晶;《四川师范大学》;20141115(第11期);第I138-273页 * |
网络大数据:现状与展望;王元卓 等;《计算机学报》;20130615;第36卷(第6期);第1125-1138页 * |
非关系型数据库统一存储与访问接口研究;胡波;《四川师范大学》;20170215(第2期);第I138-2194页 * |
Also Published As
Publication number | Publication date |
---|---|
CN112487075A (zh) | 2021-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112487075B (zh) | 一种集成关系型和非关系型数据库数据转换算子的方法 | |
KR101925165B1 (ko) | 외부 데이터 소스로부터의 데이터를 이용한 데이터베이스 쿼리 응답의 강화 기법 | |
US8069184B2 (en) | Systems and methods to implement extensibility of tenant content in a provider-tenant environment | |
WO2016123920A1 (zh) | 支持多类型数据库操作的集成接口的实现方法及系统 | |
WO2016123921A1 (zh) | 基于Http协议的多数据源的数据处理方法及系统 | |
EP1594051A2 (en) | Extraction, transformation and loading designer module of a computerized financial system | |
US8630969B2 (en) | Systems and methods for implementing business rules designed with cloud computing | |
US20030051070A1 (en) | Method of and system for controlling task-oriented systems utilizing an application programming interface | |
CN104239572A (zh) | 基于分布式缓存实现元数据分析的系统及方法 | |
US20080162490A1 (en) | Methods and systems for automatic registration during deployment of a tenant | |
US20140330780A1 (en) | Universal delta data load | |
US20140250040A1 (en) | Correlating data from multiple business processes to a business process scenario | |
CN106055325B (zh) | 一种支撑多系统同时运行的服务构建方法 | |
KR100529661B1 (ko) | 오브젝트 통합 관리 시스템 | |
CN110717073B (zh) | 云流程平台中结合业务数据实现流程查询处理的系统及其方法 | |
CN110955674A (zh) | 基于java服务的异步导出方法及组件 | |
FR2931274A1 (fr) | Procede de gestion de donnees pour atelier oriente service collaboratif | |
US20140114916A1 (en) | Code generation and implementation method, system, and storage medium for delivering bidirectional data aggregation and updates | |
US8621085B2 (en) | Methods, systems, and computer program products for managing and utilizing connections between an application server and an enterprise information system based on a daytona architecture | |
US11093492B1 (en) | System and method of fetching data from an external program | |
CN112905617B (zh) | 数据写入方法、服务器及计算机可读存储介质 | |
US11449497B1 (en) | Method and system for implementing dynamic stored procedures | |
CN111984648A (zh) | 一种微服务架构下数据初始化方法及系统 | |
CN114356302B (zh) | 一种基于Gremlin语言的持久层优化方法 | |
CN117009327B (zh) | 一种数据处理方法、装置及计算机设备、介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |