CN112860793A - 一种异源数据库间实现元数据同步的方法 - Google Patents

一种异源数据库间实现元数据同步的方法 Download PDF

Info

Publication number
CN112860793A
CN112860793A CN202110146947.3A CN202110146947A CN112860793A CN 112860793 A CN112860793 A CN 112860793A CN 202110146947 A CN202110146947 A CN 202110146947A CN 112860793 A CN112860793 A CN 112860793A
Authority
CN
China
Prior art keywords
type
attribute
length
key
metadata
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110146947.3A
Other languages
English (en)
Inventor
张明
李朝铭
张晖
高传集
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Cloud Information Technology Co Ltd
Original Assignee
Inspur Cloud Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Cloud Information Technology Co Ltd filed Critical Inspur Cloud Information Technology Co Ltd
Priority to CN202110146947.3A priority Critical patent/CN112860793A/zh
Publication of CN112860793A publication Critical patent/CN112860793A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2282—Tablespace storage structures; Management thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开一种异源数据库间实现元数据同步的方法，涉及数据同步技术领域，包括：定义源数据库中元数据的基本类型；针对基本类型的存储格式和数据属性，定义与基本类型相对应的扩展属性及其约束条件；基于基本类型和扩展属性的约束信息，对源数据库的元数据进行映射；使用json作为元数据的负载格式，分别定义源数据库中表元数据和字段元数据的基本属性，并将字段元数据使用数组方式作为表元数据的子属性，进而通过扩展属性实现源数据库与目标数据之间元数据的有效传递，以最大程度的降低隔离源数据库与目标数据库中元数据类型转换的成本，同时，降低后期维护成本。

Description

一种异源数据库间实现元数据同步的方法
技术领域
本发明涉及数据同步技术领域，具体的说是一种异源数据库间实现元数据同步的方法。
背景技术
大数据时代数据爆炸式增长的背景下，数据分布呈现出多源性、异构性。为了适应不同场景下数据处理、数据汇聚、数据同步等的个性要求，如何有效的将数据从异源端有效的、完整的进行同步传输就变的极为重要。但是，由于各种数据库数据元信息(包括数据类型、属性、约束)的差异，不同数据库间进行同步适配变得极为艰难。
发明内容
本发明针对目前技术发展的需求和不足之处，提供一种异源数据库间实现元数据同步的方法。
本发明的一种异源数据库间实现元数据同步的方法，解决上述技术问题采用的技术方案如下：
一种异源数据库间实现元数据同步的方法，包括如下步骤：
定义源数据库中元数据的基本类型；
针对基本类型的存储格式和数据属性，定义与基本类型相对应的扩展属性及其约束条件；
基于基本类型和扩展属性的约束信息，对源数据库的元数据进行映射；
使用json作为元数据的负载格式，分别定义源数据库中表元数据和字段元数据的基本属性，并将字段元数据使用数组方式作为表元数据的子属性，进而通过扩展属性实现源数据库与目标数据之间元数据的有效传递。
进一步的，定义的基本类型包括STRING、BIG_DECIMAL、INT、FLOAT、BINARY、TIME、TIMESTAMP、CLOB、BLOB、ARRAY、BIT、OTHER十二种，其中，
STRING表示字符类型，可以进行属性扩展；
BIG_DECIMAL表示高精度数值，可以进行属性扩展；
INT表示整形，可以进行属性扩展；
FLOAT表示浮点型，可以进行属性扩展；
BINARY表示二进制，可以进行属性扩展；
TIME表示时间，可以进行属性扩展；
TIMESTAMP表示时间戳类型，可以进行属性扩展；
CLOB表示一种保存文件所使用的类型，可以进行属性扩展；
BLOB表示一个可以存储二进制文件的容器，在数据库中常用来存储二进制文件的字段类型，可以进行属性扩展；
ARRAY表示数组类型，由基本类型决定，可以进行属性扩展；
BIT表示位域，可以进行属性扩展；
OTHER表示其他负荷类型，可以进行属性扩展。
更进一步的，基本类型STRING的扩展属性包括键is_variable、length、is_unicode、max_length，is_variable表示是否可变长，length表示容量，is_unicode表示是否为unicode编码，max_length表示最大长度，其中，length为可选的扩展属性，其余三项为必选的扩展属性；
基本类型BIG_DECIMAL的扩展属性包括键precision、scale，precision表示精度或字段长度，scale表示范围，两个键均为必选的扩展属性；
基本类型INT的扩展属性包括键is_signed、width，is_signed表示是否有符号，width表示位宽，两个键均为必选的扩展属性；
基本类型FLOAT的扩展属性包括键width、M、D，width表示位宽、IEEE754、64双精度、32单精度，M表示数值总位数，D表示小数位位数，其中width为必选的扩展属性，M、D为可选的扩展属性；
基本类型BINARY的扩展属性包括键length、max_length，length表示容量，max_length表示最大长度，其中，length为可选的扩展属性，max_length为必选的扩展属性；
基本类型TIME和TIMESTAMP的扩展属性分别包括键with_timezone，with_timezone表示是否带有时区，with_timezone为必选的扩展属性；
基本类型CLOB的扩展属性包括键max_length，max_length表示最大长度，max_length为必选的扩展属性；
基本类型BLOB的扩展属性包括键max_length，max_length表示最大长度，max_length为必选的扩展属性；
基本类型ARRAY的扩展属性包括键base_type、length，base_type表示基础类型，length表示长度，其中，base_type为必选的扩展属性，length为可选的扩展属性；
基本类型BIT的扩展属性包括键length，length表示长度，length为可选的扩展属性；
基本类型OTHER的扩展属性包括键data_type、define_sql，data_type表示原数据库类型名，define_sql表示类型定义，用来存储自定义类型规则，其中，data_type为必选的扩展属性，define_sql为可选的扩展属性。
更进一步的，定义的基本类型还包括BOOLEAN、DATE、INTERVAL、ROWID四种，
其中，
BOOLEAN表示布尔，且不能进行属性扩展；
DATE表示日期，且不能进行属性扩展；
INTERVAL表示时间间隔类型，且不能进行属性扩展；
ROWID表示数据库内部类型，主要用于表示逻辑记录ID，且不能进行属性扩展。
更进一步的，定义字段元数据的基本属性，包括键、值、具体描述，其中，键包括name、type、is_nullable、is_key、default_value、comment、character_set、collation、extension九种，
针对键name，其值为string，具体描述为字段名；
针对键type，其值为object，具体描述为类型族信息与约束；
针对键is_nullable，其值为bool，具体描述为是否可空；
针对键is_key，其值为bool，具体描述为是否主键；
针对键default_value，其值为string，具体描述为默认值；
针对键comment，其值为string，具体描述为注释；
针对键character_set，其值为string，具体描述为字符集；
针对键collation，其值为string，具体描述为排序规则；
针对键extension，其值为object，具体描述为扩展属性。
优选的，定义字段元数据的基本属性，还包括是否必选，其中，
键name、type、is_nullable、is_key是字段元数据必选的基本属性；
键default_value、comment、character_set、collation、extension是字段元数据可选的基本属性。
更进一步的，定义表元数据的基本属性，包括键、值、具体描述，其中，键包括db_type、schema、table、comment、character_set、collation、extension七种，
针对键db_type，其值为num，具体描述为数据库类型；
针对键Schema，其值为string，具体描述为模式名；
针对键Table，其值为string，具体描述为表名；
针对键Comment，其值为string，具体描述为注释；
针对键character_set，其值为string，具体描述为字符集；
针对键collation，其值为string，具体描述为排序规则；
针对键extension，其值为object，具体描述为扩展属性。
优选的，定义表元数据的基本属性，还包括是否必选，其中，
键db_type、schema、table是表元数据必选的基本属性；
键comment、character_set、collation、extension是表元数据可选的基本属性。
本发明的一种异源数据库间实现元数据同步的方法，与现有技术相比具有的有益效果是：
本发明提前定义规则，即元数据的基本类型、元数据的基本类型、与基本类型相对应的扩展属性及扩展属性的约束条件，对源数据库的元数据进行映射，进而通过使用json作为元数据的负载格式，基于表元数据和字段元数据的基本属性，实现源数据库与目标数据之间元数据的有效传递，以最大程度的降低隔离源数据库与目标数据库中元数据类型转换的成本，同时，降低后期维护成本。
附图说明
附图1是本发明的方法流程框图。
具体实施方式
为使本发明的技术方案、解决的技术问题和技术效果更加清楚明白，以下结合具体实施例，对本发明的技术方案进行清楚、完整的描述。
实施例一：
结合附图1，本实施例提出一种异源数据库间实现元数据同步的方法，包括如下步骤：
(一)定义源数据库中元数据的基本类型。
本步骤中，定义的基本类型包括STRING、BIG_DECIMAL、INT、FLOAT、BINARY、TIME、TIMESTAMP、CLOB、BLOB、ARRAY、BIT、OTHER十二种，其中，
STRING表示字符类型，可以进行属性扩展；
BIG_DECIMAL表示高精度数值，可以进行属性扩展；
INT表示整形，可以进行属性扩展；
FLOAT表示浮点型，可以进行属性扩展；
BINARY表示二进制，可以进行属性扩展；
TIME表示时间，可以进行属性扩展；
TIMESTAMP表示时间戳类型，可以进行属性扩展；
CLOB表示一种保存文件所使用的类型，可以进行属性扩展；
BLOB表示一个可以存储二进制文件的容器，在数据库中常用来存储二进制文件的字段类型，可以进行属性扩展；
ARRAY表示数组类型，由基本类型决定，可以进行属性扩展；
BIT表示位域，可以进行属性扩展；
OTHER表示其他负荷类型，可以进行属性扩展。
定义的基本类型还包括BOOLEAN、DATE、INTERVAL、ROWID四种，其中，
BOOLEAN表示布尔，且不能进行属性扩展；
DATE表示日期，且不能进行属性扩展；
INTERVAL表示时间间隔类型，且不能进行属性扩展；
ROWID表示数据库内部类型，主要用于表示逻辑记录ID，且不能进行属性扩展。
(二)针对基本类型的存储格式和数据属性，定义与基本类型相对应的扩展属性及其约束条件。
本步骤中，针对STRING、BIG_DECIMAL、INT、FLOAT、BINARY、TIME、TIMESTAMP、CLOB、BLOB、ARRAY、BIT、OTHER这十二种基本类型，定义的扩展属性及其约束条件具体如下：
基本类型STRING的扩展属性包括键is_variable、length、is_unicode、max_length，is_variable表示是否可变长，length表示容量，is_unicode表示是否为unicode编码，max_length表示最大长度，其中，length为可选的扩展属性，其余三项为必选的扩展属性；
基本类型BIG_DECIMAL的扩展属性包括键precision、scale，precision表示精度或字段长度，scale表示范围，两个键均为必选的扩展属性；
基本类型INT的扩展属性包括键is_signed、width，is_signed表示是否有符号，width表示位宽，两个键均为必选的扩展属性；
基本类型FLOAT的扩展属性包括键width、M、D，width表示位宽、IEEE754、64双精度、32单精度，M表示数值总位数，D表示小数位位数，其中width为必选的扩展属性，M、D为可选的扩展属性；
基本类型BINARY的扩展属性包括键length、max_length，length表示容量，max_length表示最大长度，其中，length为可选的扩展属性，max_length为必选的扩展属性；
基本类型TIME和TIMESTAMP的扩展属性分别包括键with_timezone，with_timezone表示是否带有时区，with_timezone为必选的扩展属性；
基本类型CLOB的扩展属性包括键max_length，max_length表示最大长度，max_length为必选的扩展属性；
基本类型BLOB的扩展属性包括键max_length，max_length表示最大长度，max_length为必选的扩展属性；
基本类型ARRAY的扩展属性包括键base_type、length，base_type表示基础类型，length表示长度，其中，base_type为必选的扩展属性，length为可选的扩展属性；
基本类型BIT的扩展属性包括键length，length表示长度，length为可选的扩展属性；
基本类型OTHER的扩展属性包括键data_type、define_sql，data_type表示原数据库类型名，define_sql表示类型定义，用来存储自定义类型规则，其中，data_type为必选的扩展属性，define_sql为可选的扩展属性。
(三)基于基本类型和扩展属性的约束信息，对源数据库的元数据进行映射；
(四)使用json作为元数据的负载格式，分别定义源数据库中表元数据和字段元数据的基本属性，并将字段元数据使用数组方式作为表元数据的子属性，进而通过扩展属性实现源数据库与目标数据之间元数据的有效传递。
本步骤中，定义字段元数据的基本属性，包括键、值、具体描述，其中，键包括name、type、is_nullable、is_key、default_value、comment、character_set、collation、extension九种，
针对键name，其值为string，具体描述为字段名；
针对键type，其值为object，具体描述为类型族信息与约束；
针对键is_nullable，其值为bool，具体描述为是否可空；
针对键is_key，其值为bool，具体描述为是否主键；
针对键default_value，其值为string，具体描述为默认值；
针对键comment，其值为string，具体描述为注释；
针对键character_set，其值为string，具体描述为字符集；
针对键collation，其值为string，具体描述为排序规则；
针对键extension，其值为object，具体描述为扩展属性。
针对上述九种键，字段元数据的基本属性还包括是否必选，其中，
键name、type、is_nullable、is_key是字段元数据必选的基本属性；
键default_value、comment、character_set、collation、extension是字段元数据可选的基本属性。
本步骤中，定义表元数据的基本属性，包括键、值、具体描述，其中，键包括db_type、schema、table、comment、character_set、collation、extension七种，
针对键db_type，其值为num，具体描述为数据库类型；
针对键Schema，其值为string，具体描述为模式名；
针对键Table，其值为string，具体描述为表名；
针对键Comment，其值为string，具体描述为注释；
针对键character_set，其值为string，具体描述为字符集；
针对键collation，其值为string，具体描述为排序规则；
针对键extension，其值为object，具体描述为扩展属性。
针对上述七种键，表元数据的基本属性还包括是否必选，其中，
键db_type、schema、table是表元数据必选的基本属性；
键comment、character_set、collation、extension是表元数据可选的基本属性。
针对上述(一)、(二)、(三)、(四)，可以知道，本实施例通过提前定义规则，即元数据的基本类型、元数据的基本类型、与基本类型相对应的扩展属性及扩展属性的约束条件，对源数据库的元数据进行映射，进而通过使用json作为元数据的负载格式，基于表元数据和字段元数据的基本属性，实现源数据库与目标数据之间元数据的有效传递，以最大程度的降低隔离源数据库与目标数据库中元数据类型转换的成本。
综上可知，采用本发明的一种异源数据库间实现元数据同步的方法，可以实现源数据库与目标数据之间元数据的有效传递，降低隔离源数据库与目标数据库中元数据类型转换的成本，同时，降低后期维护成本。
以上应用具体个例对本发明的原理及实施方式进行了详细阐述，这些实施例只是用于帮助理解本发明的核心技术内容。基于本发明的上述具体实施例，本技术领域的技术人员在不脱离本发明原理的前提下，对本发明所作出的任何改进和修饰，皆应落入本发明的专利保护范围。

Claims (8)

1.一种异源数据库间实现元数据同步的方法，其特征在于,包括如下步骤：
定义源数据库中元数据的基本类型；
针对基本类型的存储格式和数据属性，定义与基本类型相对应的扩展属性及其约束条件；
基于基本类型和扩展属性的约束信息，对源数据库的元数据进行映射；
使用json作为元数据的负载格式，分别定义源数据库中表元数据和字段元数据的基本属性，并将字段元数据使用数组方式作为表元数据的子属性，进而通过扩展属性实现源数据库与目标数据之间元数据的有效传递。
2.根据权利要求1所述的一种异源数据库间实现元数据同步的方法，其特征在于，定义的基本类型包括STRING、BIG_DECIMAL、INT、FLOAT、BINARY、TIME、TIMESTAMP、CLOB、BLOB、ARRAY、BIT、OTHER十二种，其中，
STRING表示字符类型，可以进行属性扩展；
BIG_DECIMAL表示高精度数值，可以进行属性扩展；
INT表示整形，可以进行属性扩展；
FLOAT表示浮点型，可以进行属性扩展；
BINARY表示二进制，可以进行属性扩展；
TIME表示时间，可以进行属性扩展；
TIMESTAMP表示时间戳类型，可以进行属性扩展；
CLOB表示一种保存文件所使用的类型，可以进行属性扩展；
BLOB表示一个可以存储二进制文件的容器，在数据库中常用来存储二进制文件的字段类型，可以进行属性扩展；
ARRAY表示数组类型，由基本类型决定，可以进行属性扩展；
BIT表示位域，可以进行属性扩展；
OTHER表示其他负荷类型，可以进行属性扩展。
3.根据权利要求2所述的一种异源数据库间实现元数据同步的方法，其特征在于，基本类型STRING的扩展属性包括键is_variable、length、is_unicode、max_length，is_variable表示是否可变长，length表示容量，is_unicode表示是否为unicode编码，max_length表示最大长度，其中，length为可选的扩展属性，其余三项为必选的扩展属性；
基本类型BIG_DECIMAL的扩展属性包括键precision、scale，precision表示精度或字段长度，scale表示范围，两个键均为必选的扩展属性；
基本类型INT的扩展属性包括键is_signed、width，is_signed表示是否有符号，width表示位宽，两个键均为必选的扩展属性；
基本类型FLOAT的扩展属性包括键width、M、D，width表示位宽、IEEE754、64双精度、32单精度，M表示数值总位数，D表示小数位位数，其中width为必选的扩展属性，M、D为可选的扩展属性；
基本类型BINARY的扩展属性包括键length、max_length，length表示容量，max_length表示最大长度，其中，length为可选的扩展属性，max_length为必选的扩展属性；
基本类型TIME和TIMESTAMP的扩展属性分别包括键with_timezone，with_timezone表示是否带有时区，with_timezone为必选的扩展属性；
基本类型CLOB的扩展属性包括键max_length，max_length表示最大长度，max_length为必选的扩展属性；
基本类型BLOB的扩展属性包括键max_length，max_length表示最大长度，max_length为必选的扩展属性；
基本类型ARRAY的扩展属性包括键base_type、length，base_type表示基础类型，length表示长度，其中，base_type为必选的扩展属性，length为可选的扩展属性；
基本类型BIT的扩展属性包括键length，length表示长度，length为可选的扩展属性；
基本类型OTHER的扩展属性包括键data_type、define_sql，data_type表示原数据库类型名，define_sql表示类型定义，用来存储自定义类型规则，其中，data_type为必选的扩展属性，define_sql为可选的扩展属性。
4.根据权利要求3所述的一种异源数据库间实现元数据同步的方法，其特征在于，定义的基本类型还包括BOOLEAN、DATE、INTERVAL、ROWID四种，其中，
BOOLEAN表示布尔，且不能进行属性扩展；
DATE表示日期，且不能进行属性扩展；
INTERVAL表示时间间隔类型，且不能进行属性扩展；
ROWID表示数据库内部类型，主要用于表示逻辑记录ID，且不能进行属性扩展。
5.根据权利要求4所述的一种异源数据库间实现元数据同步的方法，其特征在于，定义字段元数据的基本属性，包括键、值、具体描述，其中，键包括name、type、is_nullable、is_key、default_value、comment、character_set、collation、extension九种，
针对键name，其值为string，具体描述为字段名；
针对键type，其值为object，具体描述为类型族信息与约束；
针对键is_nullable，其值为bool，具体描述为是否可空；
针对键is_key，其值为bool，具体描述为是否主键；
针对键default_value，其值为string，具体描述为默认值；
针对键comment，其值为string，具体描述为注释；
针对键character_set，其值为string，具体描述为字符集；
针对键collation，其值为string，具体描述为排序规则；
针对键extension，其值为object，具体描述为扩展属性。
6.根据权利要求5所述的一种异源数据库间实现元数据同步的方法，其特征在于，定义字段元数据的基本属性，还包括是否必选，其中，
键name、type、is_nullable、is_key是字段元数据必选的基本属性；
键default_value、comment、character_set、collation、extension是字段元数据可选的基本属性。
7.根据权利要求5所述的一种异源数据库间实现元数据同步的方法，其特征在于，定义表元数据的基本属性，包括键、值、具体描述，其中，键包括db_type、schema、table、comment、character_set、collation、extension七种，
针对键db_type，其值为num，具体描述为数据库类型；
针对键Schema，其值为string，具体描述为模式名；
针对键Table，其值为string，具体描述为表名；
针对键Comment，其值为string，具体描述为注释；
针对键character_set，其值为string，具体描述为字符集；
针对键collation，其值为string，具体描述为排序规则；
针对键extension，其值为object，具体描述为扩展属性。
8.根据权利要求7所述的一种异源数据库间实现元数据同步的方法，其特征在于，定义表元数据的基本属性，还包括是否必选，其中，
键db_type、schema、table是表元数据必选的基本属性；
键comment、character_set、collation、extension是表元数据可选的基本属性。
CN202110146947.3A 2021-02-03 2021-02-03 一种异源数据库间实现元数据同步的方法 Pending CN112860793A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110146947.3A CN112860793A (zh) 2021-02-03 2021-02-03 一种异源数据库间实现元数据同步的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110146947.3A CN112860793A (zh) 2021-02-03 2021-02-03 一种异源数据库间实现元数据同步的方法

Publications (1)

Publication Number Publication Date
CN112860793A true CN112860793A (zh) 2021-05-28

Family

ID=75986473

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110146947.3A Pending CN112860793A (zh) 2021-02-03 2021-02-03 一种异源数据库间实现元数据同步的方法

Country Status (1)

Country Link
CN (1) CN112860793A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116467372A (zh) * 2023-02-21 2023-07-21 中国人民解放军海军工程大学 一种数据库自动转换方法、装置、电子设备及存储介质
CN116775771A (zh) * 2023-08-23 2023-09-19 北京逐风科技有限公司 数据同步方法、设备、系统及介质
CN118170851A (zh) * 2024-05-11 2024-06-11 浪潮云信息技术股份公司 异构数据库数据字段同步方法及系统

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010037228A1 (en) * 2000-05-05 2001-11-01 Iaf Consulting, Inc. System and method for using metadata to flexibly analyze data
CN101572622A (zh) * 2009-03-02 2009-11-04 南京联创科技股份有限公司 动态扩充资源元数据的实现方法
CN103095823A (zh) * 2013-01-09 2013-05-08 大唐软件技术股份有限公司 一种物联网系统中对象的描述方法及对象信息交互系统
US20150363484A1 (en) * 2014-12-15 2015-12-17 Invensys Systems, Inc. Storing and identifying metadata through extended properties in a historization system
CN107045495A (zh) * 2017-02-06 2017-08-15 浪潮通用软件有限公司 一种基于描述的xml增量抽取方法
CN107122428A (zh) * 2017-04-12 2017-09-01 南京南瑞集团公司 一种数据库异构数据复制格式转换方法
CN109299332A (zh) * 2018-11-02 2019-02-01 芜湖智久机器人有限公司 一种将类和数据库映射的方法、装置及存储介质
CN109614446A (zh) * 2018-11-23 2019-04-12 金色熊猫有限公司 数据同步方法、装置、电子设备及存储介质
CN109885581A (zh) * 2019-03-14 2019-06-14 苏州达家迎信息技术有限公司 数据库的同步方法、装置、设备及存储介质
CN109947739A (zh) * 2018-05-31 2019-06-28 新华三大数据技术有限公司 数据源管理方法及装置
CN110489409A (zh) * 2018-09-14 2019-11-22 北京数聚鑫云信息技术有限公司 一种动态扩展数据字段的方法及装置
CN110609826A (zh) * 2019-09-20 2019-12-24 四川长虹电器股份有限公司 一种数据抽取的方法
CN111625520A (zh) * 2020-06-08 2020-09-04 成都信息工程大学 一种通用的异构数据库字段类型的映射方法及系统
CN112148788A (zh) * 2020-08-25 2020-12-29 珠海市卓轩科技有限公司 异构数据源的数据同步方法及系统

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010037228A1 (en) * 2000-05-05 2001-11-01 Iaf Consulting, Inc. System and method for using metadata to flexibly analyze data
CN101572622A (zh) * 2009-03-02 2009-11-04 南京联创科技股份有限公司 动态扩充资源元数据的实现方法
CN103095823A (zh) * 2013-01-09 2013-05-08 大唐软件技术股份有限公司 一种物联网系统中对象的描述方法及对象信息交互系统
US20150363484A1 (en) * 2014-12-15 2015-12-17 Invensys Systems, Inc. Storing and identifying metadata through extended properties in a historization system
CN107045495A (zh) * 2017-02-06 2017-08-15 浪潮通用软件有限公司 一种基于描述的xml增量抽取方法
CN107122428A (zh) * 2017-04-12 2017-09-01 南京南瑞集团公司 一种数据库异构数据复制格式转换方法
CN109947739A (zh) * 2018-05-31 2019-06-28 新华三大数据技术有限公司 数据源管理方法及装置
CN110489409A (zh) * 2018-09-14 2019-11-22 北京数聚鑫云信息技术有限公司 一种动态扩展数据字段的方法及装置
CN109299332A (zh) * 2018-11-02 2019-02-01 芜湖智久机器人有限公司 一种将类和数据库映射的方法、装置及存储介质
CN109614446A (zh) * 2018-11-23 2019-04-12 金色熊猫有限公司 数据同步方法、装置、电子设备及存储介质
CN109885581A (zh) * 2019-03-14 2019-06-14 苏州达家迎信息技术有限公司 数据库的同步方法、装置、设备及存储介质
CN110609826A (zh) * 2019-09-20 2019-12-24 四川长虹电器股份有限公司 一种数据抽取的方法
CN111625520A (zh) * 2020-06-08 2020-09-04 成都信息工程大学 一种通用的异构数据库字段类型的映射方法及系统
CN112148788A (zh) * 2020-08-25 2020-12-29 珠海市卓轩科技有限公司 异构数据源的数据同步方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王洪荣等: "异构数据库间数据交换工具的设计与实现", 《北京林业大学学报》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116467372A (zh) * 2023-02-21 2023-07-21 中国人民解放军海军工程大学 一种数据库自动转换方法、装置、电子设备及存储介质
CN116775771A (zh) * 2023-08-23 2023-09-19 北京逐风科技有限公司 数据同步方法、设备、系统及介质
CN116775771B (zh) * 2023-08-23 2024-01-26 北京逐风科技有限公司 数据同步方法、设备、系统及介质
CN118170851A (zh) * 2024-05-11 2024-06-11 浪潮云信息技术股份公司 异构数据库数据字段同步方法及系统

Similar Documents

Publication Publication Date Title
CN112860793A (zh) 一种异源数据库间实现元数据同步的方法
CN103761318B (zh) 一种关系型异构数据库数据同步的方法及系统
US6513041B2 (en) Value-instance-connectivity computer-implemented database
US10223422B2 (en) Pruning disk blocks in a relational database management system
US6571233B2 (en) Optimization of SQL queries using filtering predicates
US8108431B1 (en) Two-dimensional data storage system
US20080059412A1 (en) Value-instance connectivity computer-implemented database
ZA200100187B (en) Value-instance-connectivity computer-implemented database.
US20100082545A1 (en) Compression of sorted value indexes using common prefixes
US20140095502A1 (en) Clustering a table in a relational database management system
US20050216518A1 (en) Database management system with persistent, user-accessible bitmap values
US7676487B2 (en) Method and system for formatting and indexing data
CN104504030B (zh) 一种面向电力调度自动化海量报文的索引方法
CN102890678A (zh) 一种基于格雷编码的分布式数据布局方法及查询方法
CN111930817A (zh) 一种基于大数据的分布式非结构化数据库关联查询方法
US7386841B2 (en) Technique for determining a target data type in a heterogeneous multi-level environment
US6466942B1 (en) Using indexes to retrieve stored information
CN114860727A (zh) 拉链表更新方法及装置
CN107291832A (zh) 一种基于列表存储结构的数据存储方法
US7730471B2 (en) Method and system for processing COBOL language record description entries that specify data items that include a varying length characteristic and computer readable storage medium for storing instructions for performing the method
Pajankar et al. Visualizing data with pandas and matplotlib
CN116090413A (zh) 一种基于序列化的通用rdf数据压缩方法
CN113407538A (zh) 一种多源异构关系型数据库数据的增量采集方法
CN118170851B (zh) 异构数据库数据字段同步方法及系统
CN111813777B (zh) Olap自动创建并写入mq数据的方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210528