CN108804613A - 一种多源数据库实时融合系统及其融合方法 - Google Patents
一种多源数据库实时融合系统及其融合方法 Download PDFInfo
- Publication number
- CN108804613A CN108804613A CN201810539282.0A CN201810539282A CN108804613A CN 108804613 A CN108804613 A CN 108804613A CN 201810539282 A CN201810539282 A CN 201810539282A CN 108804613 A CN108804613 A CN 108804613A
- Authority
- CN
- China
- Prior art keywords
- rule
- data
- module
- database
- real time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种多源数据库实时融合系统及其融合方法,属于数据库管理技术领域。包括源数据库、规则定义模块、规则执行模块、运行监控模块以及大数据中心,源数据库采用Oracle,并利用Oracle内置的LogMiner进行内存日志进行挖掘,规则定义模块包括源数据库配置信息、目标数据库配置信息、规则转换插件以及规则定义结果,规则执行模块包括规则解析组件、消息队列以及规则执行组件,运行监控模块,采用图形统计消息队列中的消息个数,大数据中心采用分布式文件系统HDFS进行历史数据的存储。解决了数据库融合实时性和可定制性低的问题,利用本方案可以在不影响业务运行的情况下,按照数据中心需求定制化地将生产数据实时融合,具备实时性和可定制性。
Description
技术领域
本发明涉及一种多源数据库实时融合系统及其融合方法,属于数据库管理技术领域。
背景技术
目前,在信息化建设的过程中,很多企业的部门根据自身业务和功能需要,构建了企业大数据中心。现有技术中采用的业务数据库大多是oracle,而数据同步大多采用两种方式:一是人工定期拷贝,采用人工的方法定期从业务数据库备份数据,自行脱敏处理,在导入数据中心时进行格式转换,这种方法效率低,数据同步不及时,并且格式处理人工工作量很大,容易出错;二是采用OGG的方法同步数据,OGG作为一个主要用于数据复制的商业产品,可以捕捉Oracle的redo日志变更信息,并生成ogg消息并通过传输进程发送出去。但是,由于传统的数据库大多数关系型数据库,随着数据量的暴增,关系型数据库的局限性体现出来,即查询速度慢、结构不灵活,冗余多、浪费存储空间等,因此在大数据中心的构建上需要采用分布式的NOSQL数据库,而OGG在与多种NOSQL数据库的数据融合上缺乏适用性,同时传统的数据同步工具主要针对可实施操作的非计算机专业用户,因此功能上缺少复杂的数据转换的灵活性,进而导致ogg在规则的定制性上缺少灵活性,无法参考外部动态需求进行定制化开发,因此急需一种相应的数据融合工具。
针对上述已有技术状况,本发明申请人做了大量反复而有益的探索,最终产品取得了有效的成果,并且形成了下面将要介绍的技术方案。
发明内容
针对上述的不足,本发明提供了一种多源数据库实时融合系统及其融合方法,可以在不影响业务运行的情况下,按照数据中心需求定制化地将生产数据实时融合到分布式环境的数据资源池中,具备实时性和可定制性。
本发明是通过以下技术方案实现的:一种多源数据库实时融合系统,包括源数据库、规则定义模块、规则执行模块、运行监控模块以及大数据中心,所述的源数据库采用Oracle,并利用Oracle内置的LogMiner对Oracle的内存日志进行挖掘,所述的规则定义模块包括源数据库配置信息、目标数据库配置信息、规则转换插件以及规则定义结果,所述的源数据库配置信息和目标数据库配置信息均包括ip地址、端口、用户名、密码、表格名称,所述的规则转换插件采用组件统一的编程接口编写,用于数据格式转化、字段对应以及数据脱敏的需求功能。
所述的规则执行模块包括规则解析组件、消息队列以及规则执行组件,用于针对规则定义模块制定的规则执行数据同步,所述的规则解析组件,用于解析规则定义结果,读取源数据库配置信息进行连接、调用Oracle内置的LogMiner接口完成源数据库的日志挖掘,并将变更信息实时发送,所述的消息队列用于暂存源数据库传输的数据变更信息,以及对待出队列的信息进行变换,每个消息队列对应一个数据变换规则,所述的规则执行组件,用于在规则解析组件完成规则解析后加载规则转换插件。
所述的运行监控模块采用图形统计消息队列中的消息个数,并监控规则解析组件和规则执行组件中线程的运行状态。
所述的大数据中心采用分布式文件系统HDFS进行历史数据的存储,规则定义模块参照数据建模方式进行编制。
进一步地,所述的运行监控模块采用的统计图形包括但不限于柱状图、饼状图、折线图。
进一步地,所述的源数据库配置信息和目标数据库配置信息均以表为单位进行数据同步。
进一步地,所述的规则定义结果采用XML配置文件。
进一步地,所述的一种多源数据库实时融合系统的融合方法,包括以下步骤:
首先,利用规则定义模块编制数据同步的规则,并部署在数据库服务器上,数据同步规则包括数据来源、数据目的地、中间字段的隐藏以及数据格式转换标准,最终的规则定义结果生成一个XML配置文件,该XML文件中记录了源数据库配置信息中的ip地址、访问借口和访问方式,以及目标数据库配置信息中的ip地址、访问借口和访问方式,并以规则转换插件的方式定义表数据的变换规则,包括格式转化、字段对应和数据脱敏。
其次,规则执行模块中的规则解析组件在装置运行时通过加载XML配置文件完成解析预定义的规则,同时利用源数据库端的数据操作均会体现在内存变化中的特点,进一步加载XML文件制定的格式转化插件调用Oracle的内存挖掘工具LogMiner挖掘Oracle内存日志信息,从而进行数据变更的捕获,并以SQL语句的形式通过网络连接实时发送到对应的消息队列中,消息队列中的消息传输至规则执行组件,进而规则执行组件启动一个线程读取相应消息队列中的数据,通过规则转换插件对每条消息进行处理后,进一步同步发送至大数据中心,达到数据库实时融合。
最后,运行监控模块对规则执行模块的运行实时监控,采用可视化的方式展示预定义的转换规则,监控规则解析组件的运行状态、规则执行组件的运行状态,监控每个消息队列的消息数目,根据消息传输速度分析软硬件资源的调整,可跟踪消息的运行过程,从而分析消息有无丢失。
本发明的有益效果:
1.该方案可以在不影响业务运行的情况下,按照数据中心需求定制化地将生产数据实时融合到分布式环境的数据资源池中,具备实时性和可定制性;
2.可以通过编程的方式进行可定制化变换;
3.在指明变化规则的地方,采用的是XML记录规则变换插件,实现手段采用了编写插件的方式完成,因此可以在插件的编写过程中根据需求定义多样化的规则,甚至是动态的需求规则。
4.在规则执行组件中可以根据大数据中心的数据存储方式不同,按需调用数据导入的接口,并可以根据性能需求实现批量录入;
5.提供了数据实时同步融合功能,主要是使用LogMiner进行Oracle的日志挖掘,有效利用Oracle的数据变更会首先在内存日志中体现出来的特性,且该方案触发性的挖掘和定时挖掘不同,在出发点和捕获点之间时间延误很少,因此可以做到实时的进行Oracle数据变更捕获,并且消息在整个装置中的停留时间只是存在于队列中排队等候处理的时间,装置可通过提升规则执行模块运行机器的硬件性能来减少这个等待时间,从而有效达到实时的效果,提高了效率。
6.数据转换规则以插件的方式编写,且在XML规则文件中指明用到的插件,有效生成了规则定义的规范。
7.消息在第三方平台执行变更处理,对oracle数据库压力小,不会影响原有业务。
附图说明
图1为本发明的整体结构原理示意图。
图中,源数据库1、规则定义模块2、源数据库配置信息21、目标数据库配置信息22、规则转换插件23、规则定义结果24、规则执行模块3、规则解析组件31、消息队列32、规则执行组件33、运行监控模块4、大数据中心5。
具体实施方式
如图1所示,一种多源数据库实时融合系统,包括源数据库1、规则定义模块2、规则执行模块3、运行监控模块4和大数据中心5,所述的源数据库1采用Oracle,用于在定义数据同步规则时指明源数据库的访问信息,并利用Oracle内置的LogMiner对Oracle的内存日志进行挖掘,从而将数据变更信息解析提取。
所述的规则定义模块2包括源数据库配置信息21、目标数据库配置信息22、规则转换插件23以及规则定义结果24,所述的源数据库配置信息21和目标数据库配置信息22均包括ip地址、端口、用户名、密码、表格名称,且均以表为单位进行数据同步,所述的规则转换插件23采用组件统一的编程接口编写,用于数据格式转化、字段对应以及数据脱敏的需求功能,所述的规则定义结果24采用XML配置文件。
所述的规则执行模块3包括规则解析组件31、消息队列32以及规则执行组件33,用于针对规则定义模块2制定的规则执行数据同步,所述的规则解析组件31,用于解析XML配置文件、读取源数据库配置信息21进行连接、调用Oracle内置的LogMiner接口完成源数据库1的日志挖掘,并将变更信息实时发送,所述的消息队列32,用于暂存源数据库1传输的数据变更信息,以及对待出队列的信息进行变换,每个消息队列32对应一个数据变换规则,所述的规则执行组件33,用于在规则解析组件31完成规则解析后加载规则转换插件23。
所述的运行监控模块4采用柱状图、饼状图或折线图统计消息队列32中的消息个数,并监控规则解析组件31和规则执行组件33中线程的运行状态。
所述的大数据中心5采用分布式文件系统HDFS进行历史数据的存储,规则定义模块2参照数据建模方式进行编制。
一种多源数据库实时融合系统的融合方法,包括以下步骤:
首先,利用规则定义模块2编制数据同步的规则,并部署在数据库服务器上,数据同步规则包括数据来源、数据目的地、中间字段的隐藏以及数据格式转换标准,最终的规则定义结果24生成一个XML配置文件,该XML文件中记录了源数据库配置信息21中的ip地址、访问借口和访问方式,以及目标数据库配置信息22中的ip地址、访问借口和访问方式,并以规则转换插件23的方式定义表数据的变换规则,包括格式转化、字段对应和数据脱敏。
其次,规则执行模块3中的规则解析组件31在装置运行时通过加载XML配置文件完成解析预定义的规则,同时利用源数据库1端的数据操作均会体现在内存变化中的特点,进一步加载XML文件制定的格式转化插件调用Oracle的内存挖掘工具LogMiner挖掘Oracle内存日志信息,从而进行数据变更的捕获,并以SQL语句的形式通过网络连接实时发送到对应的消息队列32中,消息队列32中的消息传输至规则执行组件33,进而规则执行组件33启动一个线程读取相应消息队列32中的数据,通过规则转换插件23对每条消息进行处理后,进一步同步发送至大数据中心5,达到数据库实时融合。
最后,运行监控模块4对规则执行模块3的运行实时监控,采用可视化的方式展示预定义的转换规则,监控规则解析组件31的运行状态、规则执行组件33的运行状态,监控每个消息队列32的消息数目,根据消息传输速度分析软硬件资源的调整,可跟踪消息的运行过程,从而分析消息有无丢失。
对于本领域的普通技术人员而言,根据本发明的教导,在不脱离本发明的原理与精神的情况下,对实施方式所进行的改变、修改、替换和变型仍落入本发明的保护范围之内。
Claims (5)
1.一种多源数据库实时融合系统,包括源数据库(1)和大数据中心(5),所述的源数据库(1)采用Oracle,并利用Oracle内置的LogMiner对Oracle的内存日志进行挖掘,其特征在于:还包括规则定义模块(2)、规则执行模块(3)以及运行监控模块(4),所述的规则定义模块(2)包括源数据库配置信息(21)、目标数据库配置信息(22)、规则转换插件(23)以及规则定义结果(24),所述的源数据库配置信息(21)和目标数据库配置信息(22)均包括ip地址、端口、用户名、密码、表格名称,所述的规则转换插件(23)采用组件统一的编程接口编写,用于数据格式转化、字段对应以及数据脱敏的需求功能;
所述的规则执行模块(3)包括规则解析组件(31)、消息队列(32)以及规则执行组件(33),用于针对规则定义模块(2)制定的规则执行数据同步,所述的规则解析组件(31),用于解析规则定义结果(24),读取源数据库配置信息(21)进行连接、调用Oracle内置的LogMiner接口完成源数据库(1)的日志挖掘,并将变更信息实时发送,所述的消息队列(32)用于暂存源数据库(1)传输的数据变更信息,以及对待出队列的信息进行变换,每个消息队列(32)对应一个数据变换规则,所述的规则执行组件(33),用于在规则解析组件(31)完成规则解析后加载规则转换插件(23);
所述的运行监控模块(4)采用图形统计消息队列(32)中的消息个数,并监控规则解析组件(31)和规则执行组件(33)中线程的运行状态;
所述的大数据中心(5)采用分布式文件系统HDFS进行历史数据的存储,规则定义模块(2)参照数据建模方式进行编制。
2.如权利要求1所述的一种多源数据库实时融合系统,其特征是,所述的运行监控模块(4)采用的统计图形包括但不限于柱状图、饼状图、折线图。
3.如权利要求1所述的一种多源数据库实时融合系统,其特征是,所述的源数据库配置信息(21)和目标数据库配置信息(22)均以表为单位进行数据同步。
4.如权利要求1所述的一种多源数据库实时融合系统,其特征是,所述的规则定义结果(24)采用XML配置文件。
5.如权利要求1-4任一所述的一种多源数据库实时融合系统的融合方法,其特征是,包括以下步骤:
首先,利用规则定义模块(2)编制数据同步的规则,并部署在数据库服务器上,数据同步规则包括数据来源、数据目的地、中间字段的隐藏以及数据格式转换标准,最终的规则定义结果(24)生成一个XML配置文件,该XML文件中记录了源数据库配置信息(21)中的ip地址、访问借口和访问方式,以及目标数据库配置信息(22)中的ip地址、访问借口和访问方式,并以规则转换插件(23)的方式定义表数据的变换规则,包括格式转化、字段对应和数据脱敏;
其次,规则执行模块(3)中的规则解析组件(31)在装置运行时通过加载XML配置文件完成解析预定义的规则,同时利用源数据库(1)端的数据操作均会体现在内存变化中的特点,进一步加载XML文件制定的格式转化插件调用Oracle的内存挖掘工具LogMiner挖掘Oracle内存日志信息,从而进行数据变更的捕获,并以SQL语句的形式通过网络连接实时发送到对应的消息队列(32)中,消息队列(32)中的消息传输至规则执行组件(33),进而规则执行组件(33)启动一个线程读取相应消息队列(32)中的数据,通过规则转换插件(23)对每条消息进行处理后,进一步同步发送至大数据中心(5),达到数据库实时融合;
最后,运行监控模块(4)对规则执行模块(3)的运行实时监控,采用可视化的方式展示预定义的转换规则,监控规则解析组件(31)的运行状态、规则执行组件(33)的运行状态,监控每个消息队列(32)的消息数目,根据消息传输速度分析软硬件资源的调整,可跟踪消息的运行过程,从而分析消息有无丢失。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810539282.0A CN108804613A (zh) | 2018-05-30 | 2018-05-30 | 一种多源数据库实时融合系统及其融合方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810539282.0A CN108804613A (zh) | 2018-05-30 | 2018-05-30 | 一种多源数据库实时融合系统及其融合方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108804613A true CN108804613A (zh) | 2018-11-13 |
Family
ID=64089479
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810539282.0A Pending CN108804613A (zh) | 2018-05-30 | 2018-05-30 | 一种多源数据库实时融合系统及其融合方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108804613A (zh) |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109614819A (zh) * | 2018-12-03 | 2019-04-12 | 北京安华金和科技有限公司 | 一种利用插件提高数据库安全的方法 |
CN109871364A (zh) * | 2019-02-26 | 2019-06-11 | 北京控制工程研究所 | 一种数据融合与关联处理方法 |
CN109960629A (zh) * | 2019-03-14 | 2019-07-02 | 银清科技(北京)有限公司 | 对支付系统业务量实时监控的方法和装置 |
CN109960705A (zh) * | 2019-01-14 | 2019-07-02 | 积成电子股份有限公司 | 电网自动化系统多源数据接入及展示方法 |
CN110008751A (zh) * | 2019-04-11 | 2019-07-12 | 中国联合网络通信集团有限公司 | 一种数据脱敏方法和系统 |
CN110569142A (zh) * | 2019-08-29 | 2019-12-13 | 天津大学 | 一种oracle数据增量同步系统及方法 |
CN111125065A (zh) * | 2019-12-24 | 2020-05-08 | 阳光人寿保险股份有限公司 | 可视化数据同步方法、系统、终端和计算机可读存储介质 |
CN111695000A (zh) * | 2020-06-16 | 2020-09-22 | 山东蓝海领航大数据发展有限公司 | 一种多源大数据加载方法及系统 |
CN111723137A (zh) * | 2020-05-14 | 2020-09-29 | 中国电力科学研究院有限公司 | 面向电网智能调控平台的数据库融合、扩展、修改方法以及相应计算机设备 |
CN112463868A (zh) * | 2020-12-04 | 2021-03-09 | 车智互联(北京)科技有限公司 | 数据处理方法、数据处理系统及计算设备 |
CN112507013A (zh) * | 2021-02-07 | 2021-03-16 | 北京工业大数据创新中心有限公司 | 一种工业设备数据的存储方法及装置 |
CN113535687A (zh) * | 2021-07-29 | 2021-10-22 | 北京互金新融科技有限公司 | 数据变量管理方法、装置、计算机可读存储介质及处理器 |
CN114064643A (zh) * | 2021-11-11 | 2022-02-18 | 南京熊猫电子股份有限公司 | 一种基于Oracle的任务式的数据转换系统 |
CN116954571A (zh) * | 2023-09-21 | 2023-10-27 | 深圳凡泰极客科技有限责任公司 | 小程序插件的开发处理方法及装置、计算机可读存储介质 |
CN114064643B (zh) * | 2021-11-11 | 2024-07-09 | 南京熊猫电子股份有限公司 | 一种基于Oracle的任务式的数据转换系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104506496A (zh) * | 2014-12-10 | 2015-04-08 | 山大地纬软件股份有限公司 | 基于Oracle Streams技术的准实时数据增量分发中间件及方法 |
CN105069142A (zh) * | 2015-08-18 | 2015-11-18 | 山大地纬软件股份有限公司 | 数据增量抽取转换与分发系统及方法 |
CN106682036A (zh) * | 2015-11-11 | 2017-05-17 | 上海汽车集团股份有限公司 | 一种数据交换系统及其交换方法 |
CN106771883A (zh) * | 2017-01-22 | 2017-05-31 | 中国电力科学研究院 | 一种基于云的多源信息配电故障定位方法及系统 |
CN107066499A (zh) * | 2016-12-30 | 2017-08-18 | 江苏瑞中数据股份有限公司 | 面向异构存储多源数据管理及可视化系统的数据查询方法 |
CN107169069A (zh) * | 2017-05-08 | 2017-09-15 | 山大地纬软件股份有限公司 | 分布式分级抽取多应用方法和数据抽取应用器 |
CN107992519A (zh) * | 2017-10-31 | 2018-05-04 | 中国电力科学研究院有限公司 | 一种面向智能电网大数据的多源异构数据校验系统及方法 |
-
2018
- 2018-05-30 CN CN201810539282.0A patent/CN108804613A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104506496A (zh) * | 2014-12-10 | 2015-04-08 | 山大地纬软件股份有限公司 | 基于Oracle Streams技术的准实时数据增量分发中间件及方法 |
CN105069142A (zh) * | 2015-08-18 | 2015-11-18 | 山大地纬软件股份有限公司 | 数据增量抽取转换与分发系统及方法 |
CN106682036A (zh) * | 2015-11-11 | 2017-05-17 | 上海汽车集团股份有限公司 | 一种数据交换系统及其交换方法 |
CN107066499A (zh) * | 2016-12-30 | 2017-08-18 | 江苏瑞中数据股份有限公司 | 面向异构存储多源数据管理及可视化系统的数据查询方法 |
CN106771883A (zh) * | 2017-01-22 | 2017-05-31 | 中国电力科学研究院 | 一种基于云的多源信息配电故障定位方法及系统 |
CN107169069A (zh) * | 2017-05-08 | 2017-09-15 | 山大地纬软件股份有限公司 | 分布式分级抽取多应用方法和数据抽取应用器 |
CN107992519A (zh) * | 2017-10-31 | 2018-05-04 | 中国电力科学研究院有限公司 | 一种面向智能电网大数据的多源异构数据校验系统及方法 |
Non-Patent Citations (1)
Title |
---|
于亚秀等: ""基于多源异构数据库融合创新决策支持服务"", 《图书馆学研究》 * |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109614819A (zh) * | 2018-12-03 | 2019-04-12 | 北京安华金和科技有限公司 | 一种利用插件提高数据库安全的方法 |
CN109614819B (zh) * | 2018-12-03 | 2023-04-11 | 北京安华金和科技有限公司 | 一种利用插件提高数据库安全的方法 |
CN109960705B (zh) * | 2019-01-14 | 2021-01-26 | 积成电子股份有限公司 | 电网自动化系统多源数据接入及展示方法 |
CN109960705A (zh) * | 2019-01-14 | 2019-07-02 | 积成电子股份有限公司 | 电网自动化系统多源数据接入及展示方法 |
CN109871364A (zh) * | 2019-02-26 | 2019-06-11 | 北京控制工程研究所 | 一种数据融合与关联处理方法 |
CN109960629A (zh) * | 2019-03-14 | 2019-07-02 | 银清科技(北京)有限公司 | 对支付系统业务量实时监控的方法和装置 |
CN109960629B (zh) * | 2019-03-14 | 2023-06-16 | 银清科技有限公司 | 对支付系统业务量实时监控的方法和装置 |
CN110008751A (zh) * | 2019-04-11 | 2019-07-12 | 中国联合网络通信集团有限公司 | 一种数据脱敏方法和系统 |
CN110569142A (zh) * | 2019-08-29 | 2019-12-13 | 天津大学 | 一种oracle数据增量同步系统及方法 |
CN111125065A (zh) * | 2019-12-24 | 2020-05-08 | 阳光人寿保险股份有限公司 | 可视化数据同步方法、系统、终端和计算机可读存储介质 |
CN111125065B (zh) * | 2019-12-24 | 2023-09-12 | 阳光人寿保险股份有限公司 | 可视化数据同步方法、系统、终端和计算机可读存储介质 |
CN111723137A (zh) * | 2020-05-14 | 2020-09-29 | 中国电力科学研究院有限公司 | 面向电网智能调控平台的数据库融合、扩展、修改方法以及相应计算机设备 |
CN111723137B (zh) * | 2020-05-14 | 2022-11-25 | 中国电力科学研究院有限公司 | 面向电网智能调控平台的数据库融合、扩展、修改方法以及相应计算机设备 |
CN111695000A (zh) * | 2020-06-16 | 2020-09-22 | 山东蓝海领航大数据发展有限公司 | 一种多源大数据加载方法及系统 |
CN112463868A (zh) * | 2020-12-04 | 2021-03-09 | 车智互联(北京)科技有限公司 | 数据处理方法、数据处理系统及计算设备 |
CN112507013A (zh) * | 2021-02-07 | 2021-03-16 | 北京工业大数据创新中心有限公司 | 一种工业设备数据的存储方法及装置 |
CN113535687A (zh) * | 2021-07-29 | 2021-10-22 | 北京互金新融科技有限公司 | 数据变量管理方法、装置、计算机可读存储介质及处理器 |
CN113535687B (zh) * | 2021-07-29 | 2024-01-26 | 北京互金新融科技有限公司 | 数据变量管理方法、装置、计算机可读存储介质及处理器 |
CN114064643A (zh) * | 2021-11-11 | 2022-02-18 | 南京熊猫电子股份有限公司 | 一种基于Oracle的任务式的数据转换系统 |
CN114064643B (zh) * | 2021-11-11 | 2024-07-09 | 南京熊猫电子股份有限公司 | 一种基于Oracle的任务式的数据转换系统 |
CN116954571A (zh) * | 2023-09-21 | 2023-10-27 | 深圳凡泰极客科技有限责任公司 | 小程序插件的开发处理方法及装置、计算机可读存储介质 |
CN116954571B (zh) * | 2023-09-21 | 2023-12-22 | 深圳凡泰极客科技有限责任公司 | 小程序插件的开发处理方法及装置、计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108804613A (zh) | 一种多源数据库实时融合系统及其融合方法 | |
US11238036B2 (en) | System performance logging of complex remote query processor query operations | |
CN109460349B (zh) | 一种基于日志的测试用例生成方法和装置 | |
CN102542007B (zh) | 关系型数据库之间的同步方法及系统 | |
CN108280023B (zh) | 任务执行方法、装置和服务器 | |
US8453136B1 (en) | Change tracking and incremental synchronization of EDA design and technology data | |
CN107103064B (zh) | 数据统计方法及装置 | |
US20070074158A1 (en) | Method and system for creating reusable software components through a uniform interface | |
JP2010531481A (ja) | 表形式データストリームプロトコルによる表値パラメータの転送 | |
CN112347071B (zh) | 一种配电网云平台数据融合方法及配电网云平台 | |
CN101980207B (zh) | 一种数据库访问的实现方法和系统 | |
CN107665216A (zh) | 一种数据库访问方法及中间件 | |
CN104317957B (zh) | 一种报表处理的开放平台、系统及报表处理方法 | |
CN104156300A (zh) | 日志管理系统和日志管理方法 | |
CN105786912A (zh) | 数据采集转换方法及装置 | |
CN111061732A (zh) | 一种基于大数据处理的报表生成方法 | |
CN114218218A (zh) | 基于数据仓库的数据处理方法、装置、设备及存储介质 | |
CN113282599A (zh) | 数据同步方法及系统 | |
CN110532058B (zh) | 容器集群服务的管理方法、装置、设备及可读存储介质 | |
CN111464658A (zh) | 一种基于区块链的茶叶可信追溯系统及其使用方法 | |
CN102567517A (zh) | 发布数据库数据的装置和方法 | |
CN110334001A (zh) | 一种批量自动生成回声测试的方法和装置 | |
CN112035466A (zh) | 一种区块链查询外置索引开发框架 | |
CN110928938B (zh) | 一种接口中间件系统 | |
CN113486019A (zh) | 自动触发对远程多数据库数据实时批量同步方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181113 |