CN107679232A - 一种sap hana源数据库与其他数据库的同步方法 - Google Patents

一种sap hana源数据库与其他数据库的同步方法 Download PDF

Info

Publication number
CN107679232A
CN107679232A CN201711001067.7A CN201711001067A CN107679232A CN 107679232 A CN107679232 A CN 107679232A CN 201711001067 A CN201711001067 A CN 201711001067A CN 107679232 A CN107679232 A CN 107679232A
Authority
CN
China
Prior art keywords
data
conversion
memory space
databases
target database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711001067.7A
Other languages
English (en)
Inventor
刘海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anhui Ma Gang Automated Information Technology Co Ltd
Original Assignee
Anhui Ma Gang Automated Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anhui Ma Gang Automated Information Technology Co Ltd filed Critical Anhui Ma Gang Automated Information Technology Co Ltd
Priority to CN201711001067.7A priority Critical patent/CN107679232A/zh
Publication of CN107679232A publication Critical patent/CN107679232A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Abstract

本发明适用于计算机技术领域,提供了一种SAP源数据库与其他数据库的同步方法,该方法包括如下步骤:从SAP HANA源数据库中提取数据,对提取的数据进行前置转换;将前置转换后的数据存储在动态建立的存储空间1;判断目标数据库与SAP HANA源数据库的结构是否相同,若判断结果为是,将存储空间1内存储的数据经后置转换后写入目标数据库,若判断结果为否,则将存储空间1内的数据进行中间转换,将中间转换后的数据存储至动态建立的存储空间2,将存储空间2内的数据进行后置转换,将经后置转换后的数据写入目标数据库,以实现从HANA数据库到其他数据库的数据传输。

Description

一种SAP HANA源数据库与其他数据库的同步方法
技术领域
本发明属于计算机技术领域,提供了一种SAP HANA源数据库与其他数据库的同步方法。
背景技术
SAP HANA数据库是由SAP公司开发的软硬件结合在一起的一套内存数据库,它使用内存作为数据库,采用列式存储(更适合数据压缩和计算),所有的数据库相关的操作都在内存中直接执行,因此执行速度非常快,通常是通用数据库的几倍到几百倍。
但与其他通用型数据库的区别很大,无法实现将SAP HANA数据库中的数据共享至其他数据库中。
发明内容
本发明实施例提供一种SAP HANA源数据库与其他数据库的同步方法,旨在实现源数据库中与其他数据库的数据传输。
本发明是这样实现的,一种SAP HANA源数据库与其他数据库的同步方法,所述方法包括如下步骤:
S1、从SAP HANA源数据库中提取数据,对提取的数据进行前置转换;
S2、将前置转换后的数据存储在动态建立的存储空间1,所述存储空间1的结构与SAP HANA源数据库的结构相同,且所述存储空间1的容量与提取数据的数据量相匹配;
S3、判断目标数据库与SAP HANA源数据库的结构是否相同,若判断结果为是,则执行步骤S4,若判断结果为否,则执行步骤S5;
S4、将存储空间1内存储的数据经后置转换后写入目标数据库;
S5、将存储空间1内的数据进行中间转换,将中间转换后的数据存储至动态建立的存储空间2,将存储空间2内的数据进行后置转换,将经后置转换后的数据写入目标数据库,所述存储空间2的结构与目标数据库的结构相同,且存储空间2的容量与存储空间1的容量相同;
前置转换是指对同一数据单位的简单转换,主要包括:字符串转换、简单计算、去除空格字符串;
中间转换包括多个数据单位的字段合并、字段计算或者是逻辑判断的操作;
后置转换为针对前置转换或中间转换的结果进行数据记录进行增加、删除和修改,或者基于指定关键字段对数据记录进行增加、删除和修改。
进一步的,判断目标数据库与SAP HANA源数据库的结构是否相同具体包括如下步骤:
S31、判断SAP HANA源数据库及目标数据库的字段类型、字段数量及字段标识是否均相同;
S32、若判断结果为是,则判断目标数据库的结构与SAP HANA源数据库的结构相同,否则,判断目标数据库的结构与SAP HANA源数据库的结构不同。
若目标数据库与SAP HANA源数据库结构相同,则从源数据库中抽取出来的数据经前置转换存储至动态建立的存储空间传,经后置转传输至目标数据库,若目标数据库与SAPHANA源数据库结构不相同,则从源数据库中抽取出来的数据依次经前置转换、中间转换及后置转换后传送至目标数据库,以实现SAP HANA源数据库到其他数据库间的数据传输。
附图说明
图1是本发明实施例提供的数据库间的同步方法的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
图1为本发明实施例提供的数据库间的同步方法的流程图,该方法包括如下步骤:
S1、从SAP HANA源数据库中提取数据,对提取的数据进行前置转换;
SAP源数据库支持JAVA的访问,并提供了驱动程序ngdbc.jar,该驱动支持JDBC4.0标准,属于类型4的驱动(使用SAP HANA特定的网络协议来建立数据库连接,JDBC驱动类为“com.sap.db.jdbc.Driver”。
在本发明实施例中,前置转换是指对同一数据单位的简单转换,主要包括:字符串转换、简单计算(简单计算是指数学的加、减、乘、除等简单的数字计算)、去除空格字符串,如字符前面加前缀、在字符的后面加后缀,字符串的替换及除去字符串空格。
S2、将前置转换后的数据存储在动态建立的存储空间1,存储空间1的结构与源数据库的结构相同,存储空间1的容量与提取数据的数据量相匹配;
S3、判断目标数据库与SAP HANA源数据库的结构是否相同;
本发明主要是对数据库表中的数据进行同步,表结构一般有字段数量、字段类型和字段名称组成,基于字段数量、字段类型和字段名称来判断目标数据库与SAP HANA源数据库结构是否相同,若目标数据库与SAP HANA源数据库结构相同,则字段数量、字段类型及字段名称均相同。
S4、若判断结构为是,即目标数据库与SAP HANA源数据库的结构相同,则将存储空间1内的数据经后置转换后将写入目标数据库;
S5、判断结果为否,即目标数据库与SAP HANA源数据库的结构不同,则将存储空间1中的数据进行中间转换,将中间转换后的数据存储在动态建立的存储空间2,将存储空间2内的数据进行后置转换,将后置转换后的数据写入目标数据库,该存储空间2的结构与目标数据库的结构相同,存储空间2的大小与存储空间1的大小相同,
在本发明实施例中,中间转换包括多个数据单位的字段合并、字段计算或者是逻辑判断的操作;后置转换为针对前置转换或中间转换的结果进行数据记录进行增加、删除和修改,或者基于指定关键字段对数据记录进行增加、删除和修改。
若目标数据库与SAP HANA源数据库结构相同,则从源数据库中抽取出来的数据经前置转换存储至动态建立的存储空间传,经后置转传输至目标数据库,若目标数据库与SAPHANA源数据库结构不相同,则从源数据库中抽取出来的数据依次经前置转换、中间转换及后置转换后传送至目标数据库,以实现SAP HANA源数据库到其他数据库间的数据传输。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (2)

1.一种SAP HANA源数据库与其他数据库的同步方法,其特征在于,所述方法包括如下步骤:
S1、从SAP HANA源数据库中提取数据,对提取的数据进行前置转换;
S2、将前置转换后的数据存储在动态建立的存储空间1,所述存储空间1的结构与SAPHANA源数据库的结构相同,且所述存储空间1的容量与提取数据的数据量相匹配;
S3、判断目标数据库与SAP HANA源数据库的结构是否相同,若判断结果为是,则执行步骤S4,若判断结果为否,则执行步骤S5;
S4、将存储空间1内存储的数据经后置转换后写入目标数据库;
S5、将存储空间1内的数据进行中间转换,将中间转换后的数据存储至动态建立的存储空间2,将存储空间2内的数据进行后置转换,将经后置转换后的数据写入目标数据库,所述存储空间2的结构与目标数据库的结构相同,且存储空间2的容量与存储空间1的容量相同;
前置转换是指对同一数据单位的简单转换,主要包括:字符串转换、简单计算、去除空格字符串;
中间转换包括多个数据单位的字段合并、字段计算或者是逻辑判断的操作;
后置转换为针对前置转换或中间转换的结果进行数据记录进行增加、删除和修改,或者基于指定关键字段对数据记录进行增加、删除和修改。
2.如权利要求1所述的SAP HANA源数据库与其他数据库的同步方法,其特征在于,判断目标数据库与SAP HANA源数据库的结构是否相同具体包括如下步骤:
S31、判断SAP HANA源数据库及目标数据库的字段类型、字段数量及字段标识是否均相同;
S32、若判断结果为是,则判断目标数据库的结构与SAP HANA源数据库的结构相同,否则,判断目标数据库的结构与SAP HANA源数据库的结构不同。
CN201711001067.7A 2017-10-24 2017-10-24 一种sap hana源数据库与其他数据库的同步方法 Pending CN107679232A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711001067.7A CN107679232A (zh) 2017-10-24 2017-10-24 一种sap hana源数据库与其他数据库的同步方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711001067.7A CN107679232A (zh) 2017-10-24 2017-10-24 一种sap hana源数据库与其他数据库的同步方法

Publications (1)

Publication Number Publication Date
CN107679232A true CN107679232A (zh) 2018-02-09

Family

ID=61141027

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711001067.7A Pending CN107679232A (zh) 2017-10-24 2017-10-24 一种sap hana源数据库与其他数据库的同步方法

Country Status (1)

Country Link
CN (1) CN107679232A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111444283A (zh) * 2020-05-18 2020-07-24 江苏电力信息技术有限公司 一种sap hana引用sap bw4计算的方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090319486A1 (en) * 2008-06-23 2009-12-24 Kickfire, Inc. Methods and systems for real-time continuous updates
CN101697169A (zh) * 2009-10-23 2010-04-21 中兴通讯股份有限公司 源数据库和目的数据库之间数据同步的方法、装置及系统
US20100332549A1 (en) * 2009-06-26 2010-12-30 Microsoft Corporation Recipes for rebuilding files
CN101944114A (zh) * 2010-09-16 2011-01-12 深圳天源迪科信息技术股份有限公司 内存数据库和物理数据库间的数据同步方法
CN102495910A (zh) * 2011-12-28 2012-06-13 畅捷通信息技术股份有限公司 实现异构系统数据定时同步的装置和方法
CN102915377A (zh) * 2012-11-14 2013-02-06 深圳市宏电技术股份有限公司 数据库转换或同步方法及系统
CN104317921A (zh) * 2014-10-29 2015-01-28 北京思特奇信息技术股份有限公司 一种跨数据库数据同步系统及方法
CN106708972A (zh) * 2016-12-06 2017-05-24 江苏电力信息技术有限公司 一种基于hana数据库利用slt组件对abap程序优化的方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090319486A1 (en) * 2008-06-23 2009-12-24 Kickfire, Inc. Methods and systems for real-time continuous updates
US20100332549A1 (en) * 2009-06-26 2010-12-30 Microsoft Corporation Recipes for rebuilding files
CN101697169A (zh) * 2009-10-23 2010-04-21 中兴通讯股份有限公司 源数据库和目的数据库之间数据同步的方法、装置及系统
CN101944114A (zh) * 2010-09-16 2011-01-12 深圳天源迪科信息技术股份有限公司 内存数据库和物理数据库间的数据同步方法
CN102495910A (zh) * 2011-12-28 2012-06-13 畅捷通信息技术股份有限公司 实现异构系统数据定时同步的装置和方法
CN102915377A (zh) * 2012-11-14 2013-02-06 深圳市宏电技术股份有限公司 数据库转换或同步方法及系统
CN104317921A (zh) * 2014-10-29 2015-01-28 北京思特奇信息技术股份有限公司 一种跨数据库数据同步系统及方法
CN106708972A (zh) * 2016-12-06 2017-05-24 江苏电力信息技术有限公司 一种基于hana数据库利用slt组件对abap程序优化的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111444283A (zh) * 2020-05-18 2020-07-24 江苏电力信息技术有限公司 一种sap hana引用sap bw4计算的方法

Similar Documents

Publication Publication Date Title
EP3602351B1 (en) Apparatus and method for distributed query processing utilizing dynamically generated in-memory term maps
CN103970722B (zh) 一种文本内容去重的方法
US9607063B1 (en) NoSQL relational database (RDB) data movement
CN103440288A (zh) 一种大数据存储方法及装置
US10002142B2 (en) Method and apparatus for generating schema of non-relational database
US20140244654A1 (en) Data migration
US20140122455A1 (en) Systems and Methods for Intelligent Parallel Searching
RU2013155626A (ru) Рекомендательная система для пополнения данных
CN111639143A (zh) 数据仓库的数据血缘关系展示方法及装置、电子设备
CN105808609A (zh) 一种信息点数据冗余的判别方法和设备
CA2802458C (en) Synchronizing endpoint data stores having disparate schemas
CN106708996A (zh) 用于对关系数据库进行全文搜索的方法及系统
CN104731896A (zh) 一种数据处理方法及系统
US10685031B2 (en) Dynamic hash partitioning for large-scale database management systems
CN111061740B (zh) 一种数据同步方法、设备和存储介质
CN105426373A (zh) 一种数据库同步方法与设备
CN104102881A (zh) 一种基于内核对象链接关系的内存取证方法
CN115858488A (zh) 基于数据治理的平行迁移方法、装置及可读介质
CN104778252A (zh) 索引的存储方法和装置
CN111984745B (zh) 数据库字段动态扩展方法、装置、设备及存储介质
CN107679232A (zh) 一种sap hana源数据库与其他数据库的同步方法
CN106611012A (zh) 一种大数据环境下异构数据实时检索方法
CN111666278B (zh) 数据存储、检索方法、电子设备及存储介质
CN110221778A (zh) 酒店数据的处理方法、系统、存储介质以及电子设备
CN111026736A (zh) 数据血缘管理方法及装置、数据血缘解析方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180209

RJ01 Rejection of invention patent application after publication