CN112163025A - 数据库数据导出方法、装置、计算机设备及存储介质 - Google Patents
数据库数据导出方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN112163025A CN112163025A CN202010988959.6A CN202010988959A CN112163025A CN 112163025 A CN112163025 A CN 112163025A CN 202010988959 A CN202010988959 A CN 202010988959A CN 112163025 A CN112163025 A CN 112163025A
- Authority
- CN
- China
- Prior art keywords
- target
- database
- query language
- structured query
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000006243 chemical reaction Methods 0.000 claims description 60
- 230000006870 function Effects 0.000 claims description 15
- 238000009795 derivation Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 3
- 230000008569 process Effects 0.000 abstract description 6
- 238000012163 sequencing technique Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000002452 interceptive effect Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000011981 development test Methods 0.000 description 2
- 230000005012 migration Effects 0.000 description 2
- 238000013508 migration Methods 0.000 description 2
- 101000695861 Arabidopsis thaliana Brefeldin A-inhibited guanine nucleotide-exchange protein 5 Proteins 0.000 description 1
- 241000568436 Namea Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
- G06F16/2445—Data retrieval commands; View definitions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据库数据导出方法、装置、计算机设备及存储介质，该方法包括：连接至目标数据库；将目标数据库中的目标数据写入蟒蛇元组；根据蟒蛇元组生成结构化查询语言语句；根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。本申请实施例提供的数据库数据导出方案，能够在连接到目标数据库后，使用蟒蛇Python元组保存目标数据库中的目标数据，然后根据蟒蛇元组中存储的数据生成结构化查询语言语句，将结构化查询语言语句写入创建的目标文件，在结构化查询语言语句的导出过程中，以蟒蛇元组作为中间媒介，实现自动化的将数据库中的目标数据导出为结构化查询语言语句，提高结构化查询语言语句的导出效率。
Description
技术领域
本发明实施例涉及数据库数据处理技术，尤其涉及一种数据库数据导出方法、装置、计算机设备及存储介质。
背景技术
在金融领域的软件开发过程中，为了敏捷开发和迭代部署需要，需要将一个开发测试环境中Oracle数据库里的表的数据发布到另一个开发测试环境。
在使用Oracle数据库自带的工具进行数据导出时，需要繁复的配置和操作才可转换出结构化查询语言(Structured Query Language，SQL)语句，结构化查询语言语句导出效率低。
发明内容
本发明提供一种数据库数据导出方法、装置、计算机设备及存储介质，以实现提高Oracle数据库的SQL语句的导出效率。
第一方面，本发明实施例提供了一种数据库数据导出方法，包括：
连接至目标数据库；
将目标数据库中的目标数据写入蟒蛇元组；
根据蟒蛇元组生成结构化查询语言语句；
根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。
第二方面，本发明实施例还提供了一种数据库数据导出装置，包括：
连接模块，用于连接至目标数据库；
元组写入模块，用于将目标数据库中的目标数据写入蟒蛇元组；
查询语句生成模块，用于根据蟒蛇元组生成结构化查询语言语句；
目标文件写入模块，用于根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。
第三方面，本发明实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行程序时实现如本申请实施例所示的数据库数据导出方法。
第四方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，计算机可执行指令在由计算机处理器执行时用于执行如本申请实施例所示的数据库数据导出方法。
本申请实施例提供的数据库数据导出方案，能够连接至目标数据库；将目标数据库中的目标数据写入蟒蛇元组；根据蟒蛇元组生成结构化查询语言语句；根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。相对于目前导出结构化查询语言语句效率较低，本申请实施例提供的数据库数据导出方案，能够在连接到目标数据库后，使用蟒蛇(Python)元组保存目标数据库中的目标数据，然后根据蟒蛇元组中存储的数据生成结构化查询语言语句，将结构化查询语言语句写入创建的目标文件，在结构化查询语言语句的导出过程中，以蟒蛇元组作为中间媒介，实现自动化的将数据库中的目标数据导出为结构化查询语言语句，提高结构化查询语言语句的导出效率。
附图说明
图1是本发明实施例一中的数据库数据导出方法的流程图；
图2是本发明实施例二中的一个数据库数据导出装置的结构示意图；
图3是本发明实施例二中的另一个数据库数据导出装置的结构示意图；
图4是本发明实施例三中的计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
本文使用的术语结构化查询语言(Structured Query Language，SQL)，是一种数据库查询和程序设计语言，用于存取数据以及查询、更新和管理关系数据库系统。
本文使用的术语蟒蛇(Python)是一种面向对象的解释型计算机程序设计语言。是一个结合了解释性、编译性、互动性和面向对象的脚本语言。
本文使用的术语蟒蛇元组(Python元组)是Python中使用的元组，用于表示适合存储在程序运行时变化的数据集，列表是可以修改的。
本文使用的术语Oracle:全称是Oracle Database，又名Oracle RDBMS，或简称Oracle，是一款关系数据库管理系统。
本文使用的术语UTF8(8位元，Universal Character Set/UnicodeTransformation Format)是针对Unicode的一种可变长度字符编码。它可以用来表示Unicode标准中的任何字符，而且其编码中的第一个字节仍与ASCII相容，使得原来处理ASCII字符的软件无须或只进行少部份修改后，便可继续使用。
本文使用的术语GBK(Chinese Internal Code Specification)，是在GB2312-80标准基础上的内码扩展规范，使用了双字节编码方案，其编码范围从8140至FEFE(剔除xx7F)，共23940个码位，共收录了21003个汉字，完全兼容GB2312-80标准，支持国际标准ISO/IEC10646-1和国家标准GB13000-1中的全部中日韩汉字，并包含了BIG5编码中的所有汉字。
实施例一
图1为本发明实施例一提供的数据库数据导出方法的流程图，本实施例可适用于将Oracle数据库中的数据导出为SQL语句的情况，该方法可以由用于进行数据迁移的计算机设备来执行，具体包括如下步骤：
步骤110、连接至目标数据库。
目标数据库为存储有目标数据的数据库，目标数据库为Oracle数据库。本申请用于将目标数据库中的目标数据进行导出。
在一种实现方式中，步骤110可通过下述方式实施：接收用户输入的数据库地址，目标数据表格标识以及身份标识；根据数据库地址连接目标数据库。
在发生数据导出需求时，为用户提供录入数据库地址输入的界面，用户在该界面中输入数据库地址目标数据表格标识以及身份标识。根据数据库地址可访问到目标数据库。使用身份标识访问目标数据库，目标数据库根据身份标识对用户身份进行验证后，建立与计算机设备的连接。
步骤120、将目标数据库中的目标数据写入蟒蛇元组。
在连接到目标数据库后，从目标数据库获取目标数据，并将目标数据写入Python元组(蟒蛇元组)。可以获取目标数据库中全部数据表，然后依次将获取的数据表中每一条记录写入一个Python元组。
在上述实现方式中，步骤120可通过下述方式实施：根据目标数据表格标识查找目标表格；将目标表格中的目标记录依次写入至蟒蛇元组，目标记录包括目标记录中字段信息和字段内容。
目标数据表格标识用于表示用户指定的数据表。当用户在步骤110中输入了目标数据表格标识时，根据目标数据表格标识查找目标数据表格。然后，依次获取目标数据表格中的每条记录，将当前读取的记录作为目标记录。其中，记录标识目标数据表格中的一行，一行包括多个字段，将目标表格中的每一行的数据全部写入Python元组。Python元组中每个元素对应目标表格中一行中的一个字段。除了通过Python元组记录目标数据表格中的每个字段内容，还可以通过Python元组记录目标数据表格中每个字段的字段信息。字段信息指字段标识，例如“名称”、“数值”、“地址”等，字段内容指字段内的实际数值。例如字段信息为“名称”，该字段信息对应的字段内容为“nameA”。
步骤130、根据蟒蛇元组生成结构化查询语言语句。
对于任意一个Python元组，提取Python元组中的每个元素，将元素进行拼接得到结构化查询语言SQL语句。
可选的，步骤130可通过下述方式实施：
步骤3.1、根据结构化查询语言语法对多个字段信息进行排序。
由于结构化查询语言SQL具有固定的语法，因此可以根据语法对字段信息进行排序，得到符合结构化查询语言语法的字段序列。
步骤3.2、根据排序结果，依次获取字段信息对应的字段内容。
然后获取Python元组中与字段信息对应的字段内容，将字段内容按照上述步骤3.1的排序顺序进行排序。
步骤3.3、对字段内容进行拼接，得到结构化查询语言语句。
将Python元组中存储的字段内容进行拼接，得到结构化查询语言语句。
进一步的，在步骤3.3之前，还包括：
根据字段信息和预设格式转化规则，对字段信息对应的字段内容进行格式转换，预设转换规则用于表示需要转换的数据类型、数据转换使用的转换函数以及转换后的目标数据格式。
可以通过交互式界面为用户提供预设格式转化规则的配置功能。用户可以对需要进行特殊格式转换的字段类型、转换使用的转换函数以及转换后的目标数据格式进行配置。对于用户未进行配置的字段，可按照预设的默认方式进行处理。默认方式可以为将字段内容直接写入到Python元组。用户可以通过交互界面根据需求快速且灵活的配置需要转换字段，提高易用性。
示例性的，可以对日期数据类型数据和时间戳类型数据进行配置预设格式转化规则。如表1所示，表1包括数据类型、转换标志、转换规则、转换格式以及数据长度五个字段。其中，
数据类型表示字段内容的字段类型，例如date表示日期数据类型数据、timestamp表示时间戳类型数据、varchar表示字符型数据、number表示数字类数据。
转换标志表示是否需要进行转换。若转换标志为是，则表示字段需要进行转换。若转换标志为否，则表示字段不需要进行转换。
转换规则用于表示转换使用的转换函数。例如对于日期数据类型数据，使用to_date转换函数进行转换。to_date转换函数用于将日期转换为目标日期格式。目标日期格式可以为“yyyy-mm-dd hh24:mi”，该目标日期格式表示以“年-月-日小时(24小时制)：分钟”表示日期数据类型数据。又例如，对于时间戳类型数据，使用to_timestamp转换函数进行转换。to_timestamp转换函数用于将时间戳转换目标时间戳格式。目标时间戳格式可以为“yyyy-mm-dd hh24:mi：ss”，该目标时间戳格式表示以“年-月-日小时(24小时制)：分钟：秒”表示时间戳类型数据。
转换格式表示目标转换格式。例如目标日期格式为“年-月-日小时(24小时制)：分钟”，目标时间戳格式为“yyyy-mm-dd hh24:mi：ss”。
数据长度用于表示python导出时的数据长度。示例性的，对于日期数据类型数据数据，配置其长度为19bit。
表1
步骤140、根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。
可通过预设交互界面获取预设文件格式以及每个单个文件可包含的总记录数量，又称预设数量。可选的，将预设文件格式以及预设数量作为全局变量，进而当用户修改了预设文件格式或预设数量时，能够及时作用于数据导出，避免分别对不同的转换过程进行修改。
其中，预设文件格式可以为UTF8或GBK。预设数量可以根据使用需求确定，示例性的可以为50000。
可选的，句写入目标文件，可通过下述方式实施：
步骤4.1、判断写入到目标文件中的结构化查询语言语句是否符合分批条件。
步骤4.2、若符合分批条件，则生成新的目标文件；
步骤4.3、将结构化查询语言语句写入新的目标文件，直至读取全部目标数据。
在将结构化查询语言语句写入到建立的目标文件中时，可以判断是否达到了分批条件。如果达到分批条件，则执行步骤4.2。若未达到分批条件，则执行步骤4.3。
示例性的，判断写入到目标文件中的结构化查询语言语句的数量是否大于预设数量；若大于预设数量则判定符合分批条件；若小于等于预设数量则判定不符合分批条件。
当用户设置了全局变量预设数量时，可以根据目标文件中已存在的结构化查询语言语句的数量是否大于预设数量确定是否达到分批条件。若目标文件中的结构化查询语言语句的数量大于预设数量，则判定符合分批条件。若目标文件中的结构化查询语言语句的数量小于等于预设数量，则判定不符合分批条件。
示例性的，还可以设置为以数据表为单位进行分批。此时判断是否完成对目标数据库中目标表格中所有行的转化。如果是，则确定达到分批条件，建立新的目标文件，当获取到新的目标表格中的结构化查询语言语句时，将其存储到新建的目标文件中。否则，继续向已建立的目标文件中写入结构化查询语言语句。
上述实施方式可以通过预设数量或者以表格为单位确定是否分批，进而实现自动化的生成目标文件，有效控制目标文件中的结构化查询语言语句的数量。
进一步的，在步骤110、连接至目标数据库之前，还包括：
配置预设文件格式为UTF8或GBK；
配置预设数量；
所述预设文件格式配置和预设数量为全局变量；
配置预设格式转化规则。
可以在执行步骤110之前，通过交互界面提示用户输入全局变量预设文件格式和预设数量。
本申请实施例提供的数据库数据导出方法，能够连接至目标数据库；将目标数据库中的目标数据写入蟒蛇元组；根据蟒蛇元组生成结构化查询语言语句；根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。相对于目前导出结构化查询语言语句效率较低，本申请实施例提供的数据库数据导出方法，能够在连接到目标数据库后，使用蟒蛇(Python)元组保存目标数据库中的目标数据，然后根据蟒蛇元组中存储的数据生成结构化查询语言语句，将结构化查询语言语句写入创建的目标文件，在结构化查询语言语句的导出过程中，以蟒蛇元组作为中间媒介，实现自动化的将数据库中的目标数据导出为结构化查询语言语句，提高结构化查询语言语句的导出效率。本申请实施例提供的数据库数据导出方法，基于Python技术，使用Python元组作为中间媒介，通过预设格式转化规则，自动实现从目标数据库导出目标表格的目标数据为SQL语句。只需要很少的配置，即可实现可复用的灵活的导出数据，是一种低成本的Oracle数据库数据导出为SQL语句解决方案，可以大大减少人工操作的量。本同步方案导出时程序独立部署，无需在导出数据库端部署，耦合少，不仅适用于Oracle数据库的导出，也可以适用于其他数据库的导出。
实施例二
图2为本申请实施例二提供的数据库数据导出装置的结构示意图，该装置将Oracle数据库中的数据导出为SQL语句的情况，该装置可以应用于进行数据迁移的计算机设备，包括：连接模块210、元组写入模块220、查询语句生成模块230以及目标文件写入模块240。
连接模块210，用于连接至目标数据库；
元组写入模块220，用于将目标数据库中的目标数据写入蟒蛇元组；
查询语句生成模块230，用于根据蟒蛇元组生成结构化查询语言语句；
目标文件写入模块240，用于根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。
在上述实施例的基础上，连接模块210用于：
接收用户输入的数据库地址，目标数据表格标识以及身份标识；
根据数据库地址连接目标数据库；
相应的，将目标数据库中的目标数据写入蟒蛇元组，包括：
根据目标数据表格标识查找目标表格；
将目标表格中的目标记录依次写入至蟒蛇元组，目标记录包括目标记录中字段信息和字段内容。
在上述实施例的基础上，查询语句生成模块230用于：
根据结构化查询语言语法对多个字段信息进行排序；
根据排序结果，依次获取字段信息对应的字段内容；
对字段内容进行拼接，得到结构化查询语言语句。
如图3所示，在上述实施例的基础上，还包括格式转换模块250，格式转换模块250用于：
根据字段信息和预设格式转化规则，对字段信息对应的字段内容进行格式转换，预设转换规则用于表示需要转换的数据类型、数据转换使用的转换函数以及转换后的目标数据格式。
在上述实施例的基础上，目标文件写入模块240用于：
判断写入到目标文件中的结构化查询语言语句是否符合分批条件；
若符合分批条件，则生成新的目标文件；
将结构化查询语言语句写入新的目标文件，直至读取全部目标数据。
在上述实施例的基础上，目标文件写入模块240用于：
判断写入到目标文件中的结构化查询语言语句的数量是否大于预设数量；
若大于预设数量则判定符合分批条件；
若小于等于预设数量则判定不符合分批条件。
在上述实施例的基础上，还包括配置模块260，配置模块260用于
配置预设文件格式为UTF8或GBK；
配置预设数量；
所述预设文件格式配置和预设数量为全局变量；
配置预设格式转化规则。
本申请实施例提供的数据库数据导出装置，连接模块210能够连接至目标数据库；元组写入模块220将目标数据库中的目标数据写入蟒蛇元组；查询语句生成模块230根据蟒蛇元组生成结构化查询语言语句；目标文件写入模块240根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。相对于目前导出结构化查询语言语句效率较低，本申请实施例提供的数据库数据导出装置，能够在连接到目标数据库后，使用蟒蛇(Python)元组保存目标数据库中的目标数据，然后根据蟒蛇元组中存储的数据生成结构化查询语言语句，将结构化查询语言语句写入创建的目标文件，在结构化查询语言语句的导出过程中，以蟒蛇元组作为中间媒介，实现自动化的将数据库中的目标数据导出为结构化查询语言语句，提高结构化查询语言语句的导出效率。本申请实施例提供的数据库数据导出方法，基于Python技术，使用Python元组作为中间媒介，通过预设格式转化规则，自动实现从目标数据库导出目标表格的目标数据为SQL语句。只需要很少的配置，即可实现可复用的灵活的导出数据，是一种低成本的Oracle数据库数据导出为SQL语句解决方案，可以大大减少人工操作的量。本同步方案导出时程序独立部署，无需在导出数据库端部署，耦合少，不仅适用于Oracle数据库的导出，也可以适用于其他数据库的导出。
本发明实施例所提供的数据库数据导出装置可执行本发明任意实施例所提供的数据库数据导出方法，具备执行方法相应的功能模块和有益效果。
实施例三
图4为本发明实施例三提供的一种计算机设备的结构示意图，如图4所示，该计算机设备包括处理器30、存储器31、输入装置32和输出装置33；计算机设备中处理器30的数量可以是一个或多个，图4中以一个处理器30为例；计算机设备中的处理器30、存储器31、输入装置32和输出装置33可以通过总线或其他方式连接，图4中以通过总线连接为例。
存储器31作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的数据库数据导出方法对应的程序指令/模块(例如，连接模块210、元组写入模块220、查询语句生成模块230以及目标文件写入模块240)。处理器30通过运行存储在存储器31中的软件程序、指令以及模块，从而执行计算机设备的各种功能应用以及数据处理，即实现上述的数据库数据导出方法。
存储器31可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器31可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器31可进一步包括相对于处理器30远程设置的存储器，这些远程存储器可以通过网络连接至计算机设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置32可用于接收输入的数字或字符信息，以及产生与计算机设备的用户设置以及功能控制有关的键信号输入。输出装置33可包括显示屏等显示设备。
实施例四
本发明实施例四还提供一种包含计算机可执行指令的存储介质，计算机可执行指令在由计算机处理器执行时用于执行一种数据库数据导出方法，该方法包括：
连接至目标数据库；
将目标数据库中的目标数据写入蟒蛇元组；
根据蟒蛇元组生成结构化查询语言语句；
根据预设文件格式创建目标文件，将结构化查询语言语句写入目标文件。
进一步的，连接至目标数据库，包括：
接收用户输入的数据库地址，目标数据表格标识以及身份标识；
根据数据库地址连接目标数据库；
相应的，将目标数据库中的目标数据写入蟒蛇元组，包括：
根据目标数据表格标识查找目标表格；
将目标表格中的目标记录依次写入至蟒蛇元组，目标记录包括目标记录中字段信息和字段内容。
进一步的，根据蟒蛇元组生成结构化查询语言语句，包括：
根据结构化查询语言语法对多个字段信息进行排序；
根据排序结果，依次获取字段信息对应的字段内容；
对字段内容进行拼接，得到结构化查询语言语句。
进一步的，在对字段内容进行拼接，得到结构化查询语言语句之前，还包括：
根据字段信息和预设格式转化规则，对字段信息对应的字段内容进行格式转换，预设转换规则用于表示需要转换的数据类型、数据转换使用的转换函数以及转换后的目标数据格式。
进一步的，将结构化查询语言语句写入目标文件，包括：
判断写入到目标文件中的结构化查询语言语句是否符合分批条件；
若符合分批条件，则生成新的目标文件；
将结构化查询语言语句写入新的目标文件，直至读取全部目标数据。
进一步的，判断写入到目标文件中的结构化查询语言语句是否符合分批条件，包括：
判断写入到目标文件中的结构化查询语言语句的数量是否大于预设数量；
若大于预设数量则判定符合分批条件；
若小于等于预设数量则判定不符合分批条件。
进一步的，在连接至目标数据库之前，还包括：
配置预设文件格式为UTF8或GBK；
配置预设数量；
所述预设文件格式配置和预设数量为全局变量；
配置预设格式转化规则。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上的方法操作,还可以执行本发明任意实施例所提供的数据库数据导出方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是，上述搜索装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
Claims (16)
1.一种数据库数据导出方法，其特征在于，包括：
连接至目标数据库；
将所述目标数据库中的目标数据写入蟒蛇元组；
根据所述蟒蛇元组生成结构化查询语言语句；
根据预设文件格式创建目标文件，将所述结构化查询语言语句写入所述目标文件。
2.根据权利要求1所述的方法，其特征在于，所述连接至目标数据库，包括：
接收用户输入的数据库地址，目标数据表格标识以及身份标识；
根据所述数据库地址连接所述目标数据库；
相应的，所述将所述目标数据库中的目标数据写入蟒蛇元组，包括：
根据所述目标数据表格标识查找目标表格；
将所述目标表格中的目标记录依次写入至蟒蛇元组，所述目标记录包括目标记录中字段信息和字段内容。
3.根据权利要求2所述的方法，其特征在于，所述根据所述蟒蛇元组生成结构化查询语言语句，包括：
根据结构化查询语言语法对多个字段信息进行排序；
根据排序结果，依次获取所述字段信息对应的字段内容；
对所述字段内容进行拼接，得到结构化查询语言语句。
4.根据权利要求3所述的方法，其特征在于，在对所述字段内容进行拼接，得到结构化查询语言语句之前，还包括：
根据所述字段信息和预设格式转化规则，对所述字段信息对应的字段内容进行格式转换，所述预设转换规则用于表示需要转换的数据类型、数据转换使用的转换函数以及转换后的目标数据格式。
5.根据权利要求4所述的方法，其特征在于，所述将所述结构化查询语言语句写入所述目标文件，包括：
判断写入到所述目标文件中的结构化查询语言语句是否符合分批条件；
若符合分批条件，则生成新的目标文件；
将所述结构化查询语言语句写入所述新的目标文件，直至读取全部目标数据。
6.根据权利要求5所述的方法，其特征在于，所述判断写入到所述目标文件中的结构化查询语言语句是否符合分批条件，包括：
判断写入到所述目标文件中的结构化查询语言语句的数量是否大于预设数量；
若大于预设数量则判定符合分批条件；
若小于等于预设数量则判定不符合分批条件。
7.根据权利要求6所述的方法，其特征在于，在连接至目标数据库之前，还包括：
配置所述预设文件格式为UTF8或GBK；
配置所述预设数量；
所述预设文件格式配置和所述预设数量为全局变量；
配置所述预设格式转化规则。
8.一种数据库数据导出装置，其特征在于，包括：
连接模块，用于连接至目标数据库；
元组写入模块，用于将所述目标数据库中的目标数据写入蟒蛇元组；
查询语句生成模块，用于根据所述蟒蛇元组生成结构化查询语言语句；
目标文件写入模块，用于根据预设文件格式创建目标文件，将所述结构化查询语言语句写入所述目标文件。
9.根据权利要求8所述的装置，其特征在于，所述连接模块用于：
接收用户输入的数据库地址，目标数据表格标识以及身份标识；
根据所述数据库地址连接所述目标数据库；
相应的，所述将所述目标数据库中的目标数据写入蟒蛇元组，包括：
根据所述目标数据表格标识查找目标表格；
将所述目标表格中的目标记录依次写入至蟒蛇元组，所述目标记录包括目标记录中字段信息和字段内容。
10.根据权利要求9所述的装置，其特征在于，所述查询语句生成模块用于：
根据结构化查询语言语法对多个字段信息进行排序；
根据排序结果，依次获取所述字段信息对应的字段内容；
对所述字段内容进行拼接，得到结构化查询语言语句。
11.根据权利要求10所述的装置，其特征在于，还包括格式转换模块，用于：
根据所述字段信息和预设格式转化规则，对所述字段信息对应的字段内容进行格式转换，所述预设转换规则用于表示需要转换的数据类型、数据转换使用的转换函数以及转换后的目标数据格式。
12.根据权利要求11所述的装置，其特征在于，所述目标文件写入模块用于：
判断写入到所述目标文件中的结构化查询语言语句是否符合分批条件；
若符合分批条件，则生成新的目标文件；
将所述结构化查询语言语句写入所述新的目标文件，直至读取全部目标数据。
13.根据权利要求12所述的装置，其特征在于，所述目标文件写入模块用于：
判断写入到所述目标文件中的结构化查询语言语句的数量是否大于预设数量；
若大于预设数量则判定符合分批条件；
若小于等于预设数量则判定不符合分批条件。
14.根据权利要求13所述的装置，其特征在于，还包括配置模块，用于：
配置所述预设文件格式为UTF8或GBK；
配置所述预设数量；
所述预设文件格式配置和所述预设数量为全局变量；
配置所述预设格式转化规则。
15.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-7中任一所述的数据库数据导出方法。
16.一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一所述的数据库数据导出方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010988959.6A CN112163025A (zh) | 2020-09-18 | 2020-09-18 | 数据库数据导出方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010988959.6A CN112163025A (zh) | 2020-09-18 | 2020-09-18 | 数据库数据导出方法、装置、计算机设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112163025A true CN112163025A (zh) | 2021-01-01 |
Family
ID=73862460
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010988959.6A Pending CN112163025A (zh) | 2020-09-18 | 2020-09-18 | 数据库数据导出方法、装置、计算机设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112163025A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112965982A (zh) * | 2021-03-16 | 2021-06-15 | 中国平安财产保险股份有限公司 | 表格处理方法、装置、设备及存储介质 |
| CN113360482A (zh) * | 2021-08-10 | 2021-09-07 | 深圳市中科鼎创科技股份有限公司 | 基于sql数据库的在线迁移方法 |
| CN114547085A (zh) * | 2022-03-22 | 2022-05-27 | 中国铁塔股份有限公司 | 一种数据处理方法、装置、电子设备及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140063027A1 (en) * | 2012-09-04 | 2014-03-06 | Massimo J. Becker | Remote gpu programming and execution method |
| CN104881469A (zh) * | 2015-05-27 | 2015-09-02 | 北京京东尚科信息技术有限公司 | 一种数据导出方法和装置 |
| US20190034540A1 (en) * | 2017-07-28 | 2019-01-31 | Insight Engines, Inc. | Natural language search with semantic mapping and classification |
| CN110502532A (zh) * | 2019-08-26 | 2019-11-26 | 上海达梦数据库有限公司 | 远程数据库对象的优化方法、装置、设备和存储介质 |
| CN111459954A (zh) * | 2020-03-04 | 2020-07-28 | 深圳壹账通智能科技有限公司 | 分布式数据同步方法、装置、设备及介质 |
-
2020
- 2020-09-18 CN CN202010988959.6A patent/CN112163025A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140063027A1 (en) * | 2012-09-04 | 2014-03-06 | Massimo J. Becker | Remote gpu programming and execution method |
| CN104881469A (zh) * | 2015-05-27 | 2015-09-02 | 北京京东尚科信息技术有限公司 | 一种数据导出方法和装置 |
| US20190034540A1 (en) * | 2017-07-28 | 2019-01-31 | Insight Engines, Inc. | Natural language search with semantic mapping and classification |
| CN110502532A (zh) * | 2019-08-26 | 2019-11-26 | 上海达梦数据库有限公司 | 远程数据库对象的优化方法、装置、设备和存储介质 |
| CN111459954A (zh) * | 2020-03-04 | 2020-07-28 | 深圳壹账通智能科技有限公司 | 分布式数据同步方法、装置、设备及介质 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112965982A (zh) * | 2021-03-16 | 2021-06-15 | 中国平安财产保险股份有限公司 | 表格处理方法、装置、设备及存储介质 |
| CN112965982B (zh) * | 2021-03-16 | 2023-03-21 | 中国平安财产保险股份有限公司 | 表格处理方法、装置、设备及存储介质 |
| CN113360482A (zh) * | 2021-08-10 | 2021-09-07 | 深圳市中科鼎创科技股份有限公司 | 基于sql数据库的在线迁移方法 |
| CN114547085A (zh) * | 2022-03-22 | 2022-05-27 | 中国铁塔股份有限公司 | 一种数据处理方法、装置、电子设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112163025A (zh) | 数据库数据导出方法、装置、计算机设备及存储介质 | |
| CN112506946A (zh) | 业务数据查询方法、装置、设备及存储介质 | |
| US9223817B2 (en) | Virtual repository management | |
| US5442779A (en) | System and method for enabling an interpreted programming language to be executed in a database management system environment | |
| CN107038222B (zh) | 数据库缓存实现方法及其系统 | |
| CN105868204A (zh) | 一种转换Oracle脚本语言SQL的方法及装置 | |
| CN108446313B (zh) | 一种数据格式转换方法和装置 | |
| CN111221785A (zh) | 一种多源异构数据的语义数据湖构建方法 | |
| CN111813744A (zh) | 文件的搜索方法、装置、设备及存储介质 | |
| CN112912870A (zh) | 租户标识符的转换 | |
| CN117194389A (zh) | 基于sql的数据库兼容方法和装置、电子设备和存储介质 | |
| CN113626464A (zh) | 基于ClickHouse数据库内存数据的查询支持方法及系统 | |
| CN113468209A (zh) | 一种电网监控系统高速内存数据库访问方法 | |
| CN110704635B (zh) | 一种知识图谱中三元组数据的转换方法及装置 | |
| CN113297251A (zh) | 多源数据检索方法、装置、设备及存储介质 | |
| US20230153455A1 (en) | Query-based database redaction | |
| CN111125216A (zh) | 数据导入Phoenix的方法及装置 | |
| CN116955393A (zh) | 一种数据处理方法、装置、电子设备及存储介质 | |
| US11941032B2 (en) | Key name generation method and apparatus and non-transitory computer-readable storage medium | |
| CN116010345A (zh) | 一种实现流批一体数据湖的表服务方案的方法、装置及设备 | |
| WO2021259290A1 (zh) | 存储过程转换方法、装置、设备和存储介质 | |
| CN110222105B (zh) | 数据汇总处理方法及装置 | |
| CN113868138A (zh) | 测试数据的获取方法、系统、设备及存储介质 | |
| CN113703777A (zh) | 基于数据库表的代码生成方法、装置、存储介质和设备 | |
| CN112463551B (zh) | 一种可配置的告警标准化方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |