CN106503104A - 一种内外网隔离模式下Oracle数据库数据复制方法 - Google Patents

一种内外网隔离模式下Oracle数据库数据复制方法 Download PDF

Info

Publication number
CN106503104A
CN106503104A CN201610903531.0A CN201610903531A CN106503104A CN 106503104 A CN106503104 A CN 106503104A CN 201610903531 A CN201610903531 A CN 201610903531A CN 106503104 A CN106503104 A CN 106503104A
Authority
CN
China
Prior art keywords
file
data
intranet
file server
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610903531.0A
Other languages
English (en)
Inventor
王海群
杨培强
程林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shandong Inspur Business System Co Ltd
Original Assignee
Shandong Inspur Business System Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shandong Inspur Business System Co Ltd filed Critical Shandong Inspur Business System Co Ltd
Priority to CN201610903531.0A priority Critical patent/CN106503104A/zh
Publication of CN106503104A publication Critical patent/CN106503104A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种内外网隔离模式下Oracle数据库数据复制方法，属于计算机软件数据库应用领域，本发明将内网Oracle数据库数据在内网文件服务器转换为数据文件，然后复制到网闸文件服务器，再复制到外网文件服务器，最后将数据文件导入外网Oracle数据库。解决了内外网数据库不能直连情况下的数据复制问题。

Description

一种内外网隔离模式下Oracle数据库数据复制方法
技术领域
本发明涉及计算机软件数据库应用技术，尤其涉及一种内外网隔离模式下Oracle数据库数据复制方法。
背景技术
在内外网隔离，只能通过网闸文件服务器进行数据交互的环境下，此时不能通过Oracle的DBLink方式进行直连，也不能通过OGG等工具方式进行数据复制。如何将内网Oracle数据复制到外网Oracle数据库是目前急需解决的问题。
发明内容
为了解决该问题，本发明提出了一种内外网隔离模式下Oracle数据库数据复制方法。本发明同数据文件方式，通过网闸文件服务器进行数据交互，实现内外网Oracle数据库之间的数据复制。
本发明采用将内网Oracle数据库数据在内网文件服务器转换为数据文件，然后复制到网闸文件服务器，再复制到外网文件服务器，最后将数据文件导入外网Oracle数据库。
第一部分：
在内网文件服务器上，首先进行文件初始化，数据库过程记录初始化等工作；然后连接内网数据库执行P_INF_SQLULDR_SQLLDR过程，产生SQLULDR、SQLLDR批处理文件；
最后，执行SQLULDR批处理文件，进行SQLULDR导出数据，产生数据文件和ctl控制文件。
第二部分：
在网闸文件服务器上，定时轮询执行；
A、将内网数据文件，从内网文件服务器传输到外网文件服务器；
B、将所有导入完成的外网标志文件传输到内网服务器。
第三部分：
在外网文件服务器上，定时轮询执行，判断是否传输完成；
然后进行SQL*Loader导入，最后写入所有导入完成到标志文件。
第四部分：
在内网文件服务器上，判断标志文件是否为所有导入完成，修改内网数据库服务器的数据库过程记录。
本发明的有益效果是
在内外网隔离的情景下，不能通过直连方式进行数据交互，只能通过网闸文件服务器进行文件交互，实现了内外网Oracle数据库之间的数据复制。
附图说明
图1是本发明的工作示意图
图2是本发明的流程示意图。
具体实施方式
下面对本发明的内容进行更加详细的阐述：
第1步：在内网文件服务器上，对上次执行的过程文件进行初始化处理，移动SQLULoader产生的过程文件到备份文件夹，压缩为rar/zip并只保留最近几天的压缩备份文件，之前的压缩备份文件删除。
第2步：在内网文件服务器上，连接内网数据库执行P_INF_INIT过程，确认当前初始化操作是首次执行还是增量执行，查询XT_INF_BATCH_REC表，记录XT_INF_LOG表。
第3步：在内网文件服务器上，连接内网数据库执行P_INF_SQLULDR_SQLLDR过程，产生SQLULDR、SQLLDR批处理文件。
第4步：在内网文件服务器上，执行SQLULDR批处理文件，进行SQLULDR导出数据，产生数据文件和ctl控制文件（此处进行并发导出）。
第5步：在网闸文件服务器上，定时轮询执行，连接到内网文件服务器的工作目录下，查询标志文件，如果符合导出数据完成阶段，则将所有SQLLDR批处理文件、数据文件、ctl控制文件，scp传输到外网文件服务器的工作传输目录下，并且修改外网的标志文件为传输完成。
第6步：在外网文件服务器上，定时轮询执行，首先将上次正确完成的SQL*Loader过程文件都移动到备份文件夹，压缩为rar/zip并保留最近几天的压缩文件；然后查看外网的标志文件是否为传输完成，是则将工作传输目录下的所有SQLLDR批处理文件、数据文件、ctl控制文件移动到工作目录，否则继续等待。
第7步：在外网文件服务器上，连接外网数据库，根据数据文件和ctl控制文件进行SQL*Loader导入，将数据导入INF接口文件（此处进行并发导入）。
第8步：在外网文件服务器上，连接外网数据库，执行P_INF_PRE_BATCH，对INF接口文件进行预处理，比如非空字段等。
第9步：在外网文件服务器上，连接外网数据库，执行P_INF_BATCH，将INF接口文件数据合并到目标业务表中。修改XT_INF_LOG文件记录日志，修改外网标志文件为所有导入完成。
第10步：在网闸文件服务器上，定时轮询执行，连接到外网文件服务器的工作目录下，查询标志文件是否为所有导入完成，是则将内网文件服务器的标志文件改为所有导入完成。
第11步：在内网文件服务器上，根据内网文件服务器的标志文件是否为所有导入完成，修改内网数据库服务器的XT_INF_BATCH_REC表，XT_INF_LOG表为相应过程完成标志。

Claims (3)

1.一种内外网隔离模式下Oracle数据库数据复制方法，其特征在于，将内网Oracle数据库数据在内网文件服务器转换为数据文件，然后复制到网闸文件服务器，再复制到外网文件服务器，最后将数据文件导入外网Oracle数据库。
2.根据权利要求1所述的方法，其特征在于， 主要包括四个部分，
第一部分：
在内网文件服务器上，首先进行文件初始化，数据库过程记录初始化工作；然后连接内网数据库执行P_INF_SQLULDR_SQLLDR过程，产生SQLULDR、SQLLDR批处理文件；
最后，执行SQLULDR批处理文件，进行SQLULDR导出数据，产生数据文件和ctl控制文件；
第二部分：
在网闸文件服务器上，定时轮询执行；
A、将内网数据文件，从内网文件服务器传输到外网文件服务器；
B、将所有导入完成的外网标志文件传输到内网服务器；
第三部分：
在外网文件服务器上，定时轮询执行，判断是否传输完成；
然后进行SQL*Loader导入，最后写入所有导入完成到标志文件；
第四部分：
在内网文件服务器上，判断标志文件是否为所有导入完成，修改内网数据库服务器的数据库过程记录。
3.根据权利要求2所述的方法，其特征在于，主要使用Linux/Windows服务器软件、Oracle数据库软件和一个共享软件sqluldr2完成。
CN201610903531.0A 2016-10-17 2016-10-17 一种内外网隔离模式下Oracle数据库数据复制方法 Pending CN106503104A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610903531.0A CN106503104A (zh) 2016-10-17 2016-10-17 一种内外网隔离模式下Oracle数据库数据复制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610903531.0A CN106503104A (zh) 2016-10-17 2016-10-17 一种内外网隔离模式下Oracle数据库数据复制方法

Publications (1)

Publication Number Publication Date
CN106503104A true CN106503104A (zh) 2017-03-15

Family

ID=58295352

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610903531.0A Pending CN106503104A (zh) 2016-10-17 2016-10-17 一种内外网隔离模式下Oracle数据库数据复制方法

Country Status (1)

Country Link
CN (1) CN106503104A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106960037A (zh) * 2017-03-22 2017-07-18 河海大学 一种跨内外网的分布式索引资源整合与共享方法
CN108733823A (zh) * 2018-05-22 2018-11-02 浪潮软件股份有限公司 一种对oracle数据库内外网数据双向同步的系统及方法
CN108984725A (zh) * 2018-07-11 2018-12-11 浪潮软件股份有限公司 一种跨网闸数据同步方法
CN109325072A (zh) * 2018-07-12 2019-02-12 浪潮软件集团有限公司 一种基于CMSP实现跨网闸Oracle数据库同步的方法及装置
CN109460439A (zh) * 2018-11-14 2019-03-12 泰康保险集团股份有限公司 一种数据处理方法、装置、介质和电子设备
CN110069566A (zh) * 2017-12-01 2019-07-30 北京京穗蓝盾信息安全技术有限公司 一种单向导入系统中异构数据库同步方法
CN110413690A (zh) * 2019-07-03 2019-11-05 杭州数梦工场科技有限公司 数据库的数据同步方法、服务器、电子设备、存储介质
CN111049728A (zh) * 2019-11-22 2020-04-21 赵伟 一种基于企业微信的移动综合办公系统
CN111858749A (zh) * 2020-06-15 2020-10-30 武汉旷视金智科技有限公司 底库同步方法、装置和电子系统
CN112069255A (zh) * 2020-08-22 2020-12-11 苏州浪潮智能科技有限公司 一种内外网数据库数据的同步方法和装置
CN113704213A (zh) * 2021-08-20 2021-11-26 辽宁振兴银行股份有限公司 一种基于sqlldr2和ogg数据同步的实现方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101620624A (zh) * 2009-08-13 2010-01-06 公安部第一研究所 一种物理隔离条件下不同数据库间数据同步的方法
CN101645876A (zh) * 2008-08-04 2010-02-10 中国测绘科学研究院 一种自动网络切换方法及其系统
CN102970328A (zh) * 2012-10-25 2013-03-13 国家电网公司 电力行业典型生产系统数据在线迁移方法
CN104298756A (zh) * 2014-10-22 2015-01-21 浪潮软件集团有限公司 一种基于内外网的数据库之间数据的交换方法
CN105007308A (zh) * 2015-06-24 2015-10-28 国家电网公司 一种数据库隔离装置环境下的文件传输方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101645876A (zh) * 2008-08-04 2010-02-10 中国测绘科学研究院 一种自动网络切换方法及其系统
CN101620624A (zh) * 2009-08-13 2010-01-06 公安部第一研究所 一种物理隔离条件下不同数据库间数据同步的方法
CN102970328A (zh) * 2012-10-25 2013-03-13 国家电网公司 电力行业典型生产系统数据在线迁移方法
CN104298756A (zh) * 2014-10-22 2015-01-21 浪潮软件集团有限公司 一种基于内外网的数据库之间数据的交换方法
CN105007308A (zh) * 2015-06-24 2015-10-28 国家电网公司 一种数据库隔离装置环境下的文件传输方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106960037A (zh) * 2017-03-22 2017-07-18 河海大学 一种跨内外网的分布式索引资源整合与共享方法
CN106960037B (zh) * 2017-03-22 2019-09-10 河海大学 一种跨内外网的分布式索引资源整合与共享方法
CN110069566A (zh) * 2017-12-01 2019-07-30 北京京穗蓝盾信息安全技术有限公司 一种单向导入系统中异构数据库同步方法
CN108733823A (zh) * 2018-05-22 2018-11-02 浪潮软件股份有限公司 一种对oracle数据库内外网数据双向同步的系统及方法
CN108984725A (zh) * 2018-07-11 2018-12-11 浪潮软件股份有限公司 一种跨网闸数据同步方法
CN109325072A (zh) * 2018-07-12 2019-02-12 浪潮软件集团有限公司 一种基于CMSP实现跨网闸Oracle数据库同步的方法及装置
CN109460439A (zh) * 2018-11-14 2019-03-12 泰康保险集团股份有限公司 一种数据处理方法、装置、介质和电子设备
CN110413690A (zh) * 2019-07-03 2019-11-05 杭州数梦工场科技有限公司 数据库的数据同步方法、服务器、电子设备、存储介质
CN111049728A (zh) * 2019-11-22 2020-04-21 赵伟 一种基于企业微信的移动综合办公系统
CN111858749A (zh) * 2020-06-15 2020-10-30 武汉旷视金智科技有限公司 底库同步方法、装置和电子系统
CN112069255A (zh) * 2020-08-22 2020-12-11 苏州浪潮智能科技有限公司 一种内外网数据库数据的同步方法和装置
CN113704213A (zh) * 2021-08-20 2021-11-26 辽宁振兴银行股份有限公司 一种基于sqlldr2和ogg数据同步的实现方法

Similar Documents

Publication Publication Date Title
CN106503104A (zh) 一种内外网隔离模式下Oracle数据库数据复制方法
CN102480494B (zh) 一种文件更新的方法、装置及系统
CN103731483B (zh) 一种基于云计算的虚拟文件系统
CN103984573B (zh) 应用程序的安装方法及装置
CN107527143A (zh) 基于bim模型的施工现场数据推送、管理方法及管理系统
CN102541740B (zh) 一种基于Android的手机便签自动化测试方法
CN108614690A (zh) 基于面向构件与云端的软件开发方法、系统及存储介质
CN101620624B (zh) 一种物理隔离条件下不同数据库间数据同步的方法
WO2012083679A1 (zh) 一种数据迁移方法、数据迁移装置及数据迁移系统
CN103235725A (zh) 一种基于linux的Oracle数据库在云计算中的快速部署方法
CN111752925B (zh) 一种可视化数据管理方法
CN104239122B (zh) 一种虚拟机迁移方法和装置
CN104572201A (zh) 一种基于三维模型的航天器总装信息变更系统及变更方法
CN106648589A (zh) 一种svn源代码的在线管理和共享查看的系统及方法
CN102231163B (zh) 将指定文件优先同步更新的系统及方法
WO2020258674A1 (zh) 脚本文件校验方法、装置、服务器及存储介质
CN104253706A (zh) 一种数据库管理平台的监控方法和装置
CN108763419A (zh) 一种迁移处理的方法、装置及计算机存储介质
CN109711812A (zh) 一种基于rpa财务机器人的分布式光伏基础信息上报的方法
CN104538058A (zh) 半自动烧录装置及烧录方法
CN105912740A (zh) 一种基于云计算的cae分布式协同工作方法
CN105335186A (zh) 数据下载管理方法及系统
CN111181935A (zh) 在ad域安全组中批量添加与定时删除域用户的方法
CN101488148A (zh) 一种从多个数据库中进行数据整理归集的方法
CN104063294B (zh) 一种Linux系统备份和恢复方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170315

RJ01 Rejection of invention patent application after publication