CN104506496A - 基于Oracle Streams技术的准实时数据增量分发中间件及方法 - Google Patents
基于Oracle Streams技术的准实时数据增量分发中间件及方法 Download PDFInfo
- Publication number
- CN104506496A CN104506496A CN201410757034.5A CN201410757034A CN104506496A CN 104506496 A CN104506496 A CN 104506496A CN 201410757034 A CN201410757034 A CN 201410757034A CN 104506496 A CN104506496 A CN 104506496A
- Authority
- CN
- China
- Prior art keywords
- data
- module
- message
- processing
- tcp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明公开了基于Oracle Streams技术的准实时数据增量分发中间件及方法,数据源模块,用于捕获操作信息生成捕获消息队列,并传递至应用消息队列,对应用消息队列中的消息进行解析,然后传输至TCP服务器上的消息接收与处理模块;消息接收与处理模块,用于接收TCP消息,将消息解析成服务器可识别的异步处理消息,根据设定转换清洗规则,对数据进一步进行处理后传送至数据潭模块;数据潭模块,用于接收处理后的数据更新,并将数据同步至多个异构的目标数据库。基于Oracle Streams技术的数据增量分发中间件,确保分布式环境下数据更新的实效性,同时有效地降低了数据同步对生产库造成的额外负载,保证了生产库性能。
Description
技术领域
本发明涉及一种准实时数据增量分发中间件,特别涉及一种基于Oracle Streams数据复制技术的数据增量分发中间件及方法。
背景技术
随着多种信息系统在各行业内的广泛应用,企业中的业务信息急速增长,数据量规模巨大到无法通过目前主流软件工具,在合理时间内达到撷取、管理、处理、整理成为帮助企业经营决策的资讯。为了实现商业智能,大量企业选择构建企业级的大数据分析平台,大数据分析平台往往会涉及到许多不同的业务系统,涵盖多种结构数据源。为保障大数据分析平台顺利构建,需配套建设大数据抽取项目,以保证系统数据可以实现安全、快速抽取,满足大数据分析业务需求。目前针对大数据分析平台的数据增量抽取需求,相继产生了大量的数据增量抽取解决方案。
在专利【CN 102129478A】中,数据库同步方法和系统通过实时捕捉系统数据的变化信息及对应的事物信息,将其保存到中间数据库中,根据中间数据库变化的信息确定需要同步的数据,最终实现数据的同步处理。虽然该数据库同步方法和系统可以实现数据同步,但是数据库同步方法和系统不能够在同步过程中介入数据的清洗与转换,因此无法实现在同步时进行“脏数据”的清理。
在专利【CN 103220328A】中,异构实时历史数据库同步方法和系统通过客户端与服务端建立实时数据通道和批量数据通道的方式,最终实现在分布式系统中的数据同步分发。此方法和系统仅涉及通信领域的数据同步功能,并不能完全满足多数分析平台的数据增量抽取需求。
在专利【CN 102355389A】中,一种应用于物联网系统的硬件中间件为物联网系统提供了一种更加灵活的组网方式,实现一种无处不在的连接。采用中间件解决方案为构建大数据分析平台的数据增量抽取需求提供了一种解决问题的思路。
在专利【CN 102609463B】中,一种基于准实时平台的数据集群管理系统实现了准实时平台海量数据的集中存储与共享。准实时系统是采用网络传输的方式进行数据采集与传递,把数据集中存储的解决方案,并未实现数据的增量分发与同步。
发明内容
为解决现有技术存在的不足,本发明公开了一种基于Oracle Streams(Oracle Streams是 Oracle提供的一种受管理的信息流)技术的数据增量分发中间件及方法,基于Oracle Streams的重做日志,为源数据更新生成捕获消息队列和应用消息队列;数据增量分发中间件通过捕获LCR(Logical Change Record)消息、解析消息,并通过TCP协议转发到TCP服务器;TCP服务器用于接收并重新解析消息,对解析出的数据进行增量分发操作,以形成备份数据库,解决容灾问题,也可以进行数据的ETL(抽取,清洗,转换,加载)等操作,以构建数据仓库为企业提供BI服务。
为实现上述目的,本发明的具体方案如下:
基于Oracle Streams技术的准实时数据增量分发中间件,包括数据源模块、消息接收与处理模块及数据潭模块;
所述数据源模块,用于捕获操作信息生成捕获消息队列,经过消息传递为应用消息队列,对应用消息队列中的消息进行处理后再对消息进行解析,封装及分发,然后传输至消息接收与处理模块;
所述消息接收与处理模块,用于接收TCP消息,将消息解析成服务器可识别的异步处理消息,根据设定转换清洗规则,对数据进一步进行处理后传送至数据潭模块;
所述数据潭模块,用于接收处理后的数据更新的多个异构的目标数据库。
所述数据源模块,包括捕获进程模块、应用进程模块及DML处理函数模块;
所述捕获进程模块,通过捕获重做日志的方式实时捕获数据的更新,捕获任何插入、删除、更新操作,生成捕获消息队列,捕获消息队列经过消息传递至应用消息队列;
所述应用进程模块,用于对应用消息队列中的消息进行提取并传送至DML处理函数模块;
所述DML处理函数模块,用于对应用进程模块处理后的消息进行解析、封装及分发。
所述消息接收与处理模块,包括TCP消息接收解析模块及异步消息处理模块;
所述TCP消息接收解析模块,用于接收DML处理函数模块输出的TCP消息,将消息解析成服务器可识别的异步处理消息传输至异步消息处理模块;
所述异步消息处理模块根据其设定转换清洗规则对数据进行处理过滤掉错误的或者不一致的“脏数据”;
所述异步消息处理模块包括空值处理模块、规范数据格式模块、拆分数据模块、数据正确验证模块及数据清洗模块;
所述空值处理模块,用于捕获字段空值,进行加载或替换为其他含义数据,并可根据字段空值实现分流加载到不同目标库;
所述数据规范格式模块,对于数据源中时间、数值、字符等数据,进行字段格式约束定义,可自定义加载格式;
所述拆分数据模块,用于依据业务需求对字段进行分解;
所述数据验证模块,用于数据正确性验证;
所述数据清洗模块,用于针对“脏数据”进行清洗,获得干净数据。
一种基于Oracle Streams技术的准实时数据增量分发方法,包括以下步骤:
1)步骤201,用户在数据源模块配置Oracle Streams(一种受管理的信息流),捕获进程模块挖掘重做日志,捕获用户的所有插入,删除,更新的DML操作,产生捕获消息队列;
2)步骤202,消息从捕获消息队列传播至应用消息队列,应用进程模块从应用消息队列中提取消息,并将消息交由DML处理函数模块处理,DML处理函数模块是由Java程序生成的存储过程实现,用来解析LCR消息并将其封装成TCP消息发送至TCP服务器;
3)步骤203,消息接收与处理模块,通过TCP消息接收解析模块接收来自DML处理函数模块发送的TCP消息,将消息解析成服务器可以识别的异步消息,并将消息交由异步消息处理模块处理;
4)步骤204,异步消息处理模块,创建大量处理线程,然后将数据的处理交由多个线程并发处理,有效地提高了数据处理效率;异步消息处理模块通过空值处理模块,规范数据格式模块,拆分数据模块,数据正确验证模块,数据清洗模块,共同完成数据的转换清洗规则,在所有的处理线程中这些模块都将会串行方式执行,保证最终得到“干净”的数据;数据处理完成后,异步消息处理模块将数据发送至数据潭模块;
5)步骤205,通过数据潭模块,将处理后的“干净”数据同步至多个异构目标数据库中,方便企业数据分析。
所述步骤201中,Oracle Streams的配置可以在同一数据库服务器上进行,也可以在不同的数据库服务器之间进行。
所述步骤201和202中,数据源模块可以分布到不同地点,不同的服务器上,通过发送TCP消息的方式,将数据传送至服务器进行处理,因此不会对生产库产生压力。
所述步骤203中,基于Oracle Streams技术的准实时数据增量分发中间件,利用TCP建立从数据源到TCP服务器的网络连接传输数据,采用可靠的网络连接方式,保证了数据更新的准实时性,并且避免了数据更新消息的丢失。
所述步骤203中,基于Oracle Streams技术的准实时数据增量分发中间件不仅可以进行本地数据同步,而且可以实现异地数据同步。
所述步骤204中,数据处理是通过多线程方式批量处理,提高了数据的处理的速度,同时保证数据正确合理,极大地方便了企业进行数据分析。
所述步骤205中,数据增量分发中间件支持将数据同步至各种异构的数据库中。
本发明的有益效果:
本发明提供了异构数据库之间的数据冗灾和数据仓库解决方案,具体为分布式环境下多个数据库数据共享的解决方案。基于Oracle Streams技术,通过捕获重做日志的方式实时捕获数据的更新,并增量分发到各目标数据库,实现了数据共享。
实现了数据清洗、转换等功能,保证数据的正确性和一致性。针对异构数据源,可以按照预定的转换清洗规则进行转换、清洗等操作,从而保证数据的正确性和一致性。
确保分布式环境下数据更新的实效性。TCP服务器采用异步多线程的方式批量处理数据,有效地提高了数据处理的效率,实现了准实时的数据共享。
缓解了生产库的工作负载。基于Oracle Streams技术的数据增量分发中间件,只需对日志进行处理,无需直接对数据库进行扫描,有效地降低了数据同步对生产库造成的额外负载,保证了生产库性能。
附图说明
图1为本发明的基于Oracle Streams技术的数据增量分发中间件技术及系统的架构图;
图2为本发明的基于Oracle Streams技术的数据增量分发中间件技术及系统的流程图。
具体实施方式:
下面结合附图对本发明进行详细说明:
一种基于Oracle Streams技术的准实时数据增量分发中间件,如图1所示,由数据源模块101(包括捕获进程模块1011,应用进程模块1012,DML处理函数模块1013)、消息接收与处理模块102(包括TCP消息接收解析模块1021、异步消息处理模块1022)以及数据潭模块103三部分组成;
所述的数据源模块101,主要负责挖掘日志,捕获数据更新操作,生成消息队列,解析LCR消息,重新封装数据更新消息,转发消息;数据源模块101的功能通过1011模块(捕获进程模块)、1012模块(应用进程模块),以及1013模块(DML处理函数模块)共同完成;捕获进程模块1011主要负责挖掘日志,捕获数据更新操作(包括所有的插入,删除,更新等DML操作),生成捕获消息队列;应用进程模块1012主要负责从应用消息队列读取LCR消息,将消息交由DML处理函数模块1013处理;DML处理函数模块1013主要负责解析LCR消息,将LCR消息封装成TCP消息,转发消息。数据源模块101将TCP消息发送至TCP服 务器集中处理,有效降低了生产数据库的工作负荷。
所述的消息接收与处理模块102,主要负责接收TCP,解析TCP消息,处理更新消息,针对数据更新进行数据的转换和清洗,分发处理后的消息;消息接收与处理模块102的功能通过1021模块(TCP消息接收解析模块),1022模块(异步消息处理模块)共同完成;TCP消息接收解析模块1021主要负责接收TCP消息,将TCP消息解析成服务器可识别的异步处理消息;异步消息处理模块1022主要负责根据设定的数据转换清洗规则,对数据进行转换、清洗等操作,将错误的或者不一致的“脏数据”过滤掉,并转发处理后的数据。
所述异步消息处理模块采用异步多线程的方式处理数据,有效地提高了数据处理的效率;在异步消息处理模块中,用户可以介入任何期望的数据转换与清洗规则,以便得到用户期望的数据信息。
所述的数据潭模块103,主要负责将处理后的“干净”数据同步至多个异构的数据库中,实现了数据共享,方便企业进行数据分析。
数据更新消息的格式是有捕获的LCR消息解析而来的,因此数据增量分发中间件可以完全掌控数据更新消息的格式形式,以便于将最终处理后的数据同步至多个的异构数据库中。
一种基于Oracle Streams技术的准实时数据增量分发方法,如图2所示,它包括以下步骤:
步骤201,用户在生产数据库配置并创建Oracle Streams用于实时捕获数据更新,产生消息队列,将消息从捕获消息队列传播至应用消息队列;
步骤202,消息传播至应用消息队列,应用进程将消息交由DML处理函数模块1013处理,该模块将消息解析并封装成TCP消息,并发送至TCP服务器;
步骤203,TCP服务器通过1021模块(TCP消息接收解析模块)接收TCP消息,并将其解析成服务器可以识别的异步处理消息,同时将消息发送至1022模块(异步消息处理模块)处理;
步骤204,异步消息处理模块1022,根据预先定义的数据转换和清洗规则,批量处理数据更新;
步骤205,数据潭模块103接收处理过的“干净”数据,并将数据同步至多个异构数据库中,便于企业数据分析。
上述虽然结合附图对本发明的具体实施方式进行了描述,但并非对本发明保护范围的限制,所属领域技术人员应该明白,在本发明的技术方案的基础上,本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。
Claims (8)
1.基于Oracle Streams技术的准实时数据增量分发中间件,其特征是,包括数据源模块、消息接收与处理模块及数据潭模块;
所述数据源模块,用于捕获操作信息生成捕获消息队列,经过消息传递为应用消息队列,对应用消息队列中的消息进行处理后再对消息进行解析,封装及分发,然后传输至消息接收与处理模块;
所述消息接收与处理模块,用于接收TCP消息,将消息解析成服务器可识别的异步处理消息,根据设定转换清洗规则,对数据进一步进行处理后传送至数据潭模块;
所述数据潭模块,用于接收处理后的数据更新,并将数据同步至多个异构的目标数据库。
2.如权利要求1所述的基于Oracle Streams技术的准实时数据增量分发中间件,其特征是,所述数据源模块,包括捕获进程模块、应用进程模块及DML处理函数模块;
所述捕获进程模块,通过捕获重做日志的方式实时捕获数据的更新,捕获任何插入、删除、更新操作,生成捕获消息队列,捕获消息队列经过消息传递至应用消息队列;
所述应用进程模块,用于对应用消息队列中的消息进行提取并传送至DML处理函数模块;
所述DML处理函数模块,用于对应用进程模块处理后的消息进行解析、封装及分发。
3.如权利要求1所述的基于Oracle Streams技术的准实时数据增量分发中间件,其特征是,所述消息接收与处理模块,包括TCP消息接收解析模块及异步消息处理模块;
所述TCP消息接收解析模块,用于接收DML处理函数模块输出的TCP消息,将消息解析成服务器可识别的异步处理消息传输至异步消息处理模块;
所述异步消息处理模块根据其设定转换清洗规则对数据进行处理过滤掉错误的或者不一致的“脏数据”。
4.如权利要求3所述的基于Oracle Streams技术的准实时数据增量分发中间件,其特征是,所述异步消息处理模块包括空值处理模块、规范数据格式模块、拆分数据模块、数据正确验证模块及数据清洗模块;
所述空值处理模块,用于捕获字段空值,进行加载或替换为其他含义数据,并可根据字段空值实现分流加载到不同目标库;
所述数据规范格式模块,对于数据源中时间、数值及字符数据,进行字段格式约束定义,可自定义加载格式;
所述拆分数据模块,用于依据业务需求对字段进行分解;
所述数据验证模块,用于数据正确性验证;
所述数据清洗模块,用于针对“脏数据”进行清洗,获得干净数据。
5.应用如权利要求1至4任一所述的基于Oracle Streams技术的准实时数据增量分发中间件的方法,包括以下步骤:
1)步骤201,用户在数据源模块配置Oracle Streams,捕获进程模块挖掘重做日志,捕获用户的所有插入,删除,更新的DML操作,产生捕获消息队列;
2)步骤202,消息从捕获消息队列传播至应用消息队列,应用进程模块从应用消息队列中提取消息,并将消息交由DML处理函数模块处理,DML处理函数模块是由Java程序生成的存储过程实现,用来解析LCR消息并将其封装成TCP消息发送至TCP服务器;
3)步骤203,消息接收与处理模块,通过TCP消息接收解析模块接收来自DML处理函数模块发送的TCP消息,将消息解析成服务器可以识别的异步消息,并将消息交由异步消息处理模块处理;
4)步骤204,异步消息处理模块,创建大量处理线程,然后将数据的处理交由多个线程并发处理,有效地提高了数据处理效率;异步消息处理模块通过空值处理模块,规范数据格式模块,拆分数据模块,数据正确验证模块,数据清洗模块,共同完成数据的转换清洗规则,在所有的处理线程中这些模块都将会串行方式执行,保证最终得到“干净”的数据;数据处理完成后,异步消息处理模块将数据发送至数据潭模块;
5)步骤205,通过数据潭模块,将处理后的“干净”数据同步至多个异构目标数据库中,方便企业数据分析。
6.如权利要求5所述的方法,其特征是,所述步骤201中,Oracle Streams的配置在同一数据库服务器上进行,或者在不同的数据库服务器之间进行。
7.如权利要求5所述的方法,其特征是,所述步骤201和202中,数据源模块分布到不同地点,不同的服务器上,通过发送TCP消息的方式,将数据传送至服务器进行处理。
8.如权利要求5所述的方法,其特征是,所述步骤203中,利用TCP建立从数据源到TCP服务器的网络连接传输数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410757034.5A CN104506496B (zh) | 2014-12-10 | 2014-12-10 | 基于Oracle Streams技术的准实时数据增量分发的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410757034.5A CN104506496B (zh) | 2014-12-10 | 2014-12-10 | 基于Oracle Streams技术的准实时数据增量分发的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104506496A true CN104506496A (zh) | 2015-04-08 |
CN104506496B CN104506496B (zh) | 2017-09-29 |
Family
ID=52948211
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410757034.5A Active CN104506496B (zh) | 2014-12-10 | 2014-12-10 | 基于Oracle Streams技术的准实时数据增量分发的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104506496B (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105069142A (zh) * | 2015-08-18 | 2015-11-18 | 山大地纬软件股份有限公司 | 数据增量抽取转换与分发系统及方法 |
CN106649756A (zh) * | 2016-12-26 | 2017-05-10 | 北京奇虎科技有限公司 | 日志同步方法及装置 |
CN108681590A (zh) * | 2018-05-15 | 2018-10-19 | 普信恒业科技发展(北京)有限公司 | 增量数据处理方法及装置、计算机设备、计算机存储介质 |
CN108804613A (zh) * | 2018-05-30 | 2018-11-13 | 国网山东省电力公司经济技术研究院 | 一种多源数据库实时融合系统及其融合方法 |
CN109558417A (zh) * | 2018-11-28 | 2019-04-02 | 亚信科技(南京)有限公司 | 一种数据处理方法和平台 |
CN109783534A (zh) * | 2018-12-25 | 2019-05-21 | 浙江口碑网络技术有限公司 | 统计数据的处理方法及装置,评价数据的处理方法及装置 |
CN110555028A (zh) * | 2019-08-22 | 2019-12-10 | 上海数禾信息科技有限公司 | 数据展示方法以及装置 |
CN110569142A (zh) * | 2019-08-29 | 2019-12-13 | 天津大学 | 一种oracle数据增量同步系统及方法 |
CN110651265A (zh) * | 2017-03-28 | 2020-01-03 | 英国天然气控股有限公司 | 数据复制系统 |
CN110659263A (zh) * | 2019-09-24 | 2020-01-07 | 浪潮软件集团有限公司 | 一种异构数据库数据交换方法 |
CN113407633A (zh) * | 2018-09-13 | 2021-09-17 | 华东交通大学 | 一种分布式数据源异构同步的方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108536743A (zh) * | 2018-03-09 | 2018-09-14 | 中国电子科技集团公司第二十八研究所 | 一种指控系统数据库数据同步系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020194181A1 (en) * | 2001-03-26 | 2002-12-19 | Wachtel David C. | Method and apparatus for intelligent data assimilation |
CN101227520A (zh) * | 2008-02-01 | 2008-07-23 | 中兴通讯股份有限公司 | 一种电信话务模型报表的生成方法及系统 |
US20090006794A1 (en) * | 2007-06-27 | 2009-01-01 | Hitachi, Ltd. | Asynchronous remote copy system and control method for the same |
CN102193979A (zh) * | 2011-03-25 | 2011-09-21 | 北京世纪互联工程技术服务有限公司 | 图形数据库非联机事务中查询数据的控制方法 |
CN103593422A (zh) * | 2013-11-01 | 2014-02-19 | 国云科技股份有限公司 | 一种异构数据库的虚拟访问管理方法 |
-
2014
- 2014-12-10 CN CN201410757034.5A patent/CN104506496B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020194181A1 (en) * | 2001-03-26 | 2002-12-19 | Wachtel David C. | Method and apparatus for intelligent data assimilation |
US20090006794A1 (en) * | 2007-06-27 | 2009-01-01 | Hitachi, Ltd. | Asynchronous remote copy system and control method for the same |
CN101227520A (zh) * | 2008-02-01 | 2008-07-23 | 中兴通讯股份有限公司 | 一种电信话务模型报表的生成方法及系统 |
CN102193979A (zh) * | 2011-03-25 | 2011-09-21 | 北京世纪互联工程技术服务有限公司 | 图形数据库非联机事务中查询数据的控制方法 |
CN103593422A (zh) * | 2013-11-01 | 2014-02-19 | 国云科技股份有限公司 | 一种异构数据库的虚拟访问管理方法 |
Non-Patent Citations (2)
Title |
---|
成雅: ""基于Oracle Streams的数据库实时备份技术研究"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
成雅等: ""基于Oracle Streams的数据库实时备份技术研究"", 《软件》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105069142B (zh) * | 2015-08-18 | 2019-04-05 | 山大地纬软件股份有限公司 | 数据增量抽取转换与分发系统及方法 |
CN105069142A (zh) * | 2015-08-18 | 2015-11-18 | 山大地纬软件股份有限公司 | 数据增量抽取转换与分发系统及方法 |
CN106649756A (zh) * | 2016-12-26 | 2017-05-10 | 北京奇虎科技有限公司 | 日志同步方法及装置 |
CN110651265A (zh) * | 2017-03-28 | 2020-01-03 | 英国天然气控股有限公司 | 数据复制系统 |
CN108681590A (zh) * | 2018-05-15 | 2018-10-19 | 普信恒业科技发展(北京)有限公司 | 增量数据处理方法及装置、计算机设备、计算机存储介质 |
CN108804613A (zh) * | 2018-05-30 | 2018-11-13 | 国网山东省电力公司经济技术研究院 | 一种多源数据库实时融合系统及其融合方法 |
CN113407633A (zh) * | 2018-09-13 | 2021-09-17 | 华东交通大学 | 一种分布式数据源异构同步的方法 |
CN109558417A (zh) * | 2018-11-28 | 2019-04-02 | 亚信科技(南京)有限公司 | 一种数据处理方法和平台 |
CN109558417B (zh) * | 2018-11-28 | 2023-08-08 | 亚信科技(南京)有限公司 | 一种数据处理方法和系统 |
CN109783534A (zh) * | 2018-12-25 | 2019-05-21 | 浙江口碑网络技术有限公司 | 统计数据的处理方法及装置,评价数据的处理方法及装置 |
CN110555028A (zh) * | 2019-08-22 | 2019-12-10 | 上海数禾信息科技有限公司 | 数据展示方法以及装置 |
CN110569142A (zh) * | 2019-08-29 | 2019-12-13 | 天津大学 | 一种oracle数据增量同步系统及方法 |
CN110659263A (zh) * | 2019-09-24 | 2020-01-07 | 浪潮软件集团有限公司 | 一种异构数据库数据交换方法 |
Also Published As
Publication number | Publication date |
---|---|
CN104506496B (zh) | 2017-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104506496A (zh) | 基于Oracle Streams技术的准实时数据增量分发中间件及方法 | |
CN106250543B (zh) | 一种自动化数据查询同步存储方法 | |
CN102546796B (zh) | 业务服务器数据更新处理系统及方法 | |
CN105429858A (zh) | 一种多机器人间实时消息传递方法 | |
CN107169069B (zh) | 分布式分级抽取多应用方法和数据抽取应用器 | |
CN105069142A (zh) | 数据增量抽取转换与分发系统及方法 | |
CN112100265A (zh) | 面向大数据架构与区块链的多源数据处理方法及装置 | |
CN101197694A (zh) | 一种通讯系统日志集中统计、处理系统及其方法 | |
CN109325008A (zh) | 面向消息中间件的跨域数据同步方法与系统 | |
CN104484187A (zh) | 一种信息集成方法和系统 | |
CN104933465A (zh) | 酒店管理平台的数据对接方法和系统 | |
CN104158844A (zh) | 远程实时监测系统 | |
CN105338107A (zh) | 一种据点运营同步管理系统及方法 | |
CN109857808B (zh) | 基于中立数据结构的纵向数据同步系统及方法 | |
CN103024094B (zh) | 一种安全可靠的dns区文件信息下发更新方法及系统 | |
CN103440302B (zh) | 实时数据交换的方法和系统 | |
CN104378419A (zh) | 一种数据高速推送的方法及系统 | |
CN105320711A (zh) | 巨量数据存取方法以及使用该方法的系统 | |
CN113342826A (zh) | 一种对不同数据采集引擎的数据操作进行统一管理的方法、存储介质及系统 | |
CN108011870A (zh) | 一种软件远程在线升级信息自动识别管理方法 | |
CN113553374A (zh) | 一种去中心化分布式大数据区块链信息存储系统 | |
CN102594889B (zh) | 一种基于数据召测的数据同步与分析系统 | |
CN112822171A (zh) | 一种基于物联网协议的前置采集系统及方法 | |
CN112351106A (zh) | 一种含事件网格的服务网格平台及其通信方法 | |
CN111049898A (zh) | 一种实现计算集群资源跨域架构的方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |