CN111400387A - 导入导出数据的转换方法、装置、终端设备及存储介质 - Google Patents
导入导出数据的转换方法、装置、终端设备及存储介质 Download PDFInfo
- Publication number
- CN111400387A CN111400387A CN202010192657.8A CN202010192657A CN111400387A CN 111400387 A CN111400387 A CN 111400387A CN 202010192657 A CN202010192657 A CN 202010192657A CN 111400387 A CN111400387 A CN 111400387A
- Authority
- CN
- China
- Prior art keywords
- data
- information
- template
- column
- import
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种导入导出数据的转换方法，包括：获取导入的n个数据表，将所述数据表转换为EXCEL模板；解析所述EXCEL模板，得到隐藏工作表和模板配置信息；根据模板配置信息，按模板配置表的顺序循环读取隐藏工作表的导入表数据；验证导入表数据对应的列数据的合法性，若不合法，则记录错误信息；将列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成列数据对应的结构化查询文件；当未检测到存在错误信息时，读取并保存结构化查询文件至数据库。本发明还公开了一种导入导出数据的转换装置、终端设备及存储介质，能通过配置模板实现EXCEL模板与数据表间的数据转换，易于操作，保证数据的完整性与合法性。
Description
技术领域
本发明涉及数据处理技术领域，尤其涉及导入导出数据的转换方法、装置、终端设备及存储介质。
背景技术
通过技术人员编写程序并使用第三方的软件office或者wps作为模板承载数据导入或者导出数据到系统中,在一般的软件管理平台中,用户使用导入数据方便快速系统初始化，或者通过导出数据信息来了解业务。
目前，需要技术人员使用专业技能通过编码方式把模板中的数据人为转换保存数据到对应的数据表中,并且需要技术人员充分了解具体业务，根据业务补齐表中其他需要用到的表字段。目前的缺点是需要大量的代码开发，导入导出错误提醒的方式多样化做不到统一，人工排除难，投入资源大，且不能保证数据的完整与合法性，导入导出的类型单一，如用户不能通过个性化选择多数据合并为单一SHEET还是多个SHEET,也做不到对某一列进行更深层次的校验，如列的必填、唯一、是否需要默认值、值来源的合法性等规则，通用的模板没有提供列的选择(下拉框)可供用户快速地填充数据问题，也不能解决表中有层级的导入，如表A的A1字段与A2字段是上下级的树形机构关系。
发明内容
本发明实施例提供导入导出数据的转换方法、装置、终端设备及存储介质，能有效通过配置模板实现EXCEL模板与数据表间的数据转换，能有效降低导入导出数据的计算复杂度，从而大大降低计算机的硬件条件，易于操作，且保证数据的完整性与合法性。
本发明一实施例提供一种导入导出数据的转换方法，包括：
获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1；
解析所述EXCEL模板，得到隐藏工作表和模板配置信息；其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息；
根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息；
将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件；
当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库。
作为上述方案的改进，所述获取导入的n个数据表，将所述数据表转换为EXCEL模板，具体包括：
当导入一个数据表时，响应于第一配置的指令，将所述数据表生成对应的一个工作表；
当导入多个数据表时，响应于第二配置的指令，按照数据表的顺序将数据表的列信息依次排序，合并成一个工作表；
当导入多个数据表时，响应于第三配置的指令，按照数据表的顺序依次生成对应的多个工作表。
作为上述方案的改进，所述获取导入的n个数据表，将所述数据表转换为EXCEL模板，还包括：
将所述数据表的合并信息、表信息、列信息、以及所述数据表与所述EXCEL模板列的对应关系，生成工作表的模板配置信息；
对所述工作表进行命名并隐藏，得到隐藏工作表和EXCEL模板。
作为上述方案的改进，所述解析所述EXCEL模板，得到隐藏工作表和模板配置信息，具体包括：
获取EXCEL模板；
解析所述EXCEL模板，得到隐藏工作表的名称；
根据所述隐藏工作表的名称，查询所述EXCEL模板的模板配置信息。
作为上述方案的改进，所述根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据，具体包括：
根据所述模板配置信息，判断所述隐藏工作表是否为合并工作表；若否，则根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
若是，则通过所述模板配置信息，筛选所述隐藏工作表的对应表及列信息，并根据所述模板配置信息中的对应关系，按照配置过程中数据表的顺序对所述隐藏工作表分组排序，从而根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据。
作为上述方案的改进，所述验证所述导入表数据对应的列数据的合法性，还包括：
通过验证所述列数据的列类型、列长度、列的预设必填数据及列的唯一性，来验证所述导入表数据对应的列数据的合法性；
若合法，则认为不存在错误信息。
作为上述方案的改进，在所述根据所述字段信息和所述字典编码，生成所述列数据对应的结构化查询文件之后，还包括：
判断所述导入表数据是否处理完毕；若否，则重新根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；若是，则检测是否存在错误信息；
当检测存在所述错误信息时，结束导入导出数据的转换；
当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至所述数据库。
本发明另一实施例对应提供了一种导入导出数据的转换装置，包括：
数据表导入模块，用于获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1；
EXCEL模板解析模块，用于解析所述EXCEL模板，得到隐藏工作表和模板配置信息；其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息；
数据读取模块，用于根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
合法性验证模块，用于验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息；
层级关系生成模块，用于将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件；
数据保存模块，用于当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库。
与现有技术相比，本发明实施例公开的导入导出数据的转换方法及装置，通过获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1；解析所述EXCEL模板，得到隐藏工作表和模板配置信息，其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息，根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据，验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息，将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件，当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库，这样能根据模板信息不需要技术人员投入人力开发，只需要业务人员按照需求配置模板信息，即可能有效通过配置模板实现EXCEL模板与数据表间的数据转换，实现支持单SHEET页与多SHEET页有关联地导入导出，能有效降低导入导出数据的计算复杂度，从而大大降低计算机的硬件条件，易于操作，且能够实现导入有层级关系的数据并在数据表中建立层级关系，以及保证数据的完整性与合法性。
本发明另一实施例提供了导入导出数据的转换终端设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现上述发明实施例所述的导入导出数据的转换方法。
本发明另一实施例提供了一种存储介质，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行上述发明实施例所述的导入导出数据的转换方法。
附图说明
图1是本发明实施例一提供的一种导入导出数据的转换方法的流程示意图；
图2是本发明实施例一提供的导入导出数据的转换方法的一具体流程示意图；
图3是本发明实施例二提供的一种导入导出数据的转换装置的结构示意图；
图4是本发明实施例三提供的一种导入导出数据的转换终端设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一
参见图1是本发明实施例一提供的一种导入导出数据的转换方法的流程示意图，所述方法包括步骤S101至S106。
S101、获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1。
在一种优选的实施例中，步骤S101具体为：
当导入一个数据表时，响应于第一配置的指令，将所述数据表生成对应的一个工作表；
当导入多个数据表时，响应于第二配置的指令，按照数据表的顺序将数据表的列信息依次排序，合并成一个工作表；
当导入多个数据表时，响应于第三配置的指令，按照数据表的顺序依次生成对应的多个工作表。
进一步，优选的，将所述数据表的合并信息、表信息、列信息、以及所述数据表与所述EXCEL模板列的对应关系，生成工作表的模板配置信息；
对所述工作表进行命名并隐藏，得到隐藏工作表和EXCEL模板。
需要说明的是，通过配置一个或者多个数据表需要导入的列信息构成一个模板，数据表的排列顺序就是模板对应的工作表的顺序，通过一个页面配置是否合并工作表的开关控制。当配置多个数据表时，可转换成多表多工作表及多表一工作表。本实施例中，若转换成多表多工作表，响应于第三配置的指令，工作表的顺序就是配置数据表时的顺序。若转换成一表一工作表，响应于第一配置的指令，将数据表直接生成对应的工作表。若转换成多表一工作表，响应于第二配置的指令，按照配置时数据表的顺序把先配置的数据表的列全部放在前面，依次排序，最后的数据表的列放到最后面，以此类推，导入时只考虑数据表顺序而不需要考虑列顺序。进一步，将配置过程中的模板配置信息存入数据库，并且给该模板信息命名，EXCEL模板把该名称当成是第一个sheet名并隐藏，供读取解析EXCEL使用。从而，可通过对EXCEL模板的隐藏工作表处理，在该工作表的页保存数据表与EXCEL模板的列对应关系以及模板的一些配置信息，以便可以编写通用代码解析保存到对应的表中。
S102、解析所述EXCEL模板，得到隐藏工作表和模板配置信息；其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息。
在一种优选的实施例中，步骤S102具体为：
获取EXCEL模板；
解析所述EXCEL模板，得到隐藏工作表的名称；
根据所述隐藏工作表的名称，查询所述EXCEL模板的模板配置信息。
示例性的，参见图2，是本发明实施例一提供的导入导出数据的转换方法的一具体流程示意图，开始后，解析EXCEL模板信息获取第一个隐藏工作表的名称，进而按照隐藏工作表名称查询模板配置信息，其中，模板配置信息包括是否合并、涉及表、列信息等。
S103、根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据。
请参见图2，示例性的，按模板配置表的顺序循环使用POI读取对应工作表的数据，其中，数据表的名称即工作表的名称。
在一种优选的实施例中，请参见图2，步骤S103具体为：
根据所述模板配置信息，判断所述隐藏工作表是否为合并工作表；若否，则根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
若是，则通过所述模板配置信息，筛选所述隐藏工作表的对应表及列信息，并根据所述模板配置信息中的对应关系，按照配置过程中数据表的顺序对所述隐藏工作表分组排序，从而根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据。
需要说明的是，通过模板配置信息的数据来源进行解析，若是多个数据表信息合并在一个工作表导入的，需要拆分对应的数据表进行导入；若是多个工作表对应多个数据表，需要使用模板中的数据表与所述EXCEL模板列的对应关系进行多个数据表的导入。其中，工作表的名称即为表名。进一步，导出数据时也会按照模板信息检测，若是多个表多工作表导出，则分别查询多表并对照工作表页信息导出；若是单个表一个工作表导出，则正常导出第一张数据表，其他的数据表表使用一个关联字段关联导出。
S104、验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息。
在一种优选的实施例中，请参见图2，步骤S104具体为：
通过验证所述列数据的列类型、列长度、列的预设必填数据及列的唯一性，来验证所述导入表数据对应的列数据的合法性；
若合法，则认为不存在错误信息。
本实施例中，通过模板配置信息对导入的数据进行必填、数据来源、唯一、字段长度信息的解析，以验证导入数据的合法性。
S105、将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件。
需要说明的是，引用表是该字段来源于哪个表，数据库保存什么字段、页面显示什么字段信息，如用户表中存在“关联人员”字段，可以配置引用表该字段来源于“人员表”，数据库保存人员表的“主键”字段值，页面显示人员表“姓名”字段。从而，EXCEL模板在导入用户表的“关联人员”字段时，只需要填入人员姓名，系统通过引用表配置，保存的时候按人员姓名在数据库中查询人员表主键，把用户表的关联人员值替换成人员表的主键保存。请参见图2，转换列数据中配置了引用表的字段，因此得到字段信息，用于该字段信息来源于哪张表及数据库保存的信息。
另外，列配置字典，在系统中建立两张表存储字典信息，如表sys_ctrl_dict_type，该表存字典的描述信息，有三个字段id(主键),name(字典名称)，remark(字典描述)；建立sys_ctrl_dictionary表存字典的子项与sys_ctrl_dict_type做关联，该表至少需要四个字段id(主键),name(字典值),code(字典编码)，dataId(依赖字典描述表sys_ctrl_dict_type的主键)。因此，若列配置了字典，在EXCEL模板中填入对应模板的字典值，则通过字典值保存对应的字典编码。请参见图2，转换列数据中配置字典值，通过模板中的字典值替换成对应的字典编码，从而获取该数据的一个来源信息。
S106、当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库。
在一种优选的实施例中，在步骤S105后具体为：
判断所述导入表数据是否处理完毕；若否，则重新根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；若是，则检测是否存在错误信息；
当检测存在所述错误信息时，结束导入导出数据的转换；
当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至所述数据库。
具体的，请参见图2，在完成引用表字段及字典值的转换后，将一个表的列数据转换成插入SQL，并保存至结构化查询文件。在判断到所述导入表数据处理完毕，并不存在错误信息时，读取结构化查询文件并执行保存数据到数据库，实现能够导入有层级关系的数据并在数据表中建立层级关系。在判断到所述导入表数据处理完毕，但存在错误信息时，结束该数据转换。在判断到所述导入表数据未处理完毕时，则重新根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据。
本发明实施例提供的导入导出数据的转换方法，通过获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1；解析所述EXCEL模板，得到隐藏工作表和模板配置信息，其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息，根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据，验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息，将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件，当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库，这样能根据模板信息不需要技术人员投入人力开发，只需要业务人员按照需求配置模板信息，即可能有效通过配置模板实现EXCEL模板与数据表间的数据转换，实现支持单SHEET页与多SHEET页有关联地导入导出，能有效降低导入导出数据的计算复杂度，从而大大降低计算机的硬件条件，易于操作，且能够实现导入有层级关系的数据并在数据表中建立层级关系，以及保证数据的完整性与合法性。
实施例二
参见图3，是本发明实施例二提供的一种导入导出数据的转换装置的结构示意图，包括：
数据表导入模块201，用于获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1；
EXCEL模板解析模块202，用于解析所述EXCEL模板，得到隐藏工作表和模板配置信息；其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息；
数据读取模块203，用于根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
合法性验证模块204，用于验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息；
层级关系生成模块205，用于将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件；
数据保存模块206，用于当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库。
优选的，所述数据表导入模块201包括：
一表一工作表生成单元，用于当导入一个数据表时，响应于第一配置的指令，将所述数据表生成对应的一个工作表；
多表一工作表单元，用于当导入多个数据表时，响应于第二配置的指令，按照数据表的顺序将数据表的列信息依次排序，合并成一个工作表；
多表多工作表单元，用于当导入多个数据表时，响应于第三配置的指令，按照数据表的顺序依次生成对应的多个工作表。
优选的，所述数据表导入模块201包括：
模板配置信息生成单元，用于将所述数据表的合并信息、表信息、列信息、以及所述数据表与所述EXCEL模板列的对应关系，生成工作表的模板配置信息；
命名单元，用于对所述工作表进行命名并隐藏，得到隐藏工作表和EXCEL模板。
优选的，所述EXCEL模板解析模块202包括：
EXCEL模板获取单元，用于获取EXCEL模板；
隐藏工作表的名称获取单元，用于解析所述EXCEL模板，得到隐藏工作表的名称；
模板配置信息查询单元，用于根据所述隐藏工作表的名称，查询所述EXCEL模板的模板配置信息。
优选的，所述数据读取模块203包括：
未合并工作表单元，用于根据所述模板配置信息，判断所述隐藏工作表是否为合并工作表；若否，则根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
合并工作表单元，用于若是，则通过所述模板配置信息，筛选所述隐藏工作表的对应表及列信息，并根据所述模板配置信息中的对应关系，按照配置过程中数据表的顺序对所述隐藏工作表分组排序，从而根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据。
优选的，所述合法性验证模块204包括：
验证单元，用于通过验证所述列数据的列类型、列长度、列的预设必填数据及列的唯一性，来验证所述导入表数据对应的列数据的合法性；
合法单元，用于若合法，则认为不存在错误信息。
优选的，所述层级关系生成模块205包括：
处理完成判断单元，用于判断所述导入表数据是否处理完毕；若否，则重新根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；若是，则检测是否存在错误信息；
存在错误信息单元，用于当检测存在所述错误信息时，结束导入导出数据的转换；
不存在错误信息单元，用于当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至所述数据库。
本发明实施例提供的导入导出数据的转换装置，通过获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1；解析所述EXCEL模板，得到隐藏工作表和模板配置信息，其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息，根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据，验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息，将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件，当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库，这样能根据模板信息不需要技术人员投入人力开发，只需要业务人员按照需求配置模板信息，即可能有效通过配置模板实现EXCEL模板与数据表间的数据转换，实现支持单SHEET页与多SHEET页有关联地导入导出，能有效降低导入导出数据的计算复杂度，从而大大降低计算机的硬件条件，易于操作，且能够实现导入有层级关系的数据并在数据表中建立层级关系，以及保证数据的完整性与合法性。
实施例三
参见图4，是本发明实施例三提供的一种导入导出数据的转换终端设备的结构示意图。该实施例的导入导出数据的转换终端设备包括：处理器301、存储器302以及存储在所述存储器302中并可在所述处理器301上运行的计算机程序，例如导入导出数据的转换程序。所述处理器301执行所述计算机程序时实现上述各个导入导出数据的转换方法实施例中的步骤。或者，所述处理器301执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能。
示例性的，所述计算机程序可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器中，并由所述处理器执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在所述导入导出数据的转换终端设备中的执行过程。
所述导入导出数据的转换终端设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述导入导出数据的转换终端设备可包括，但不仅限于，处理器、存储器。本领域技术人员可以理解，所述示意图仅仅是导入导出数据的转换终端设备的示例，并不构成对导入导出数据的转换终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述导入导出数据的转换终端设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述导入导出数据的转换终端设备的控制中心，利用各种接口和线路连接整个导入导出数据的转换终端设备的各个部分。
所述存储器可用于存储所述计算机程序和/或模块，所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现所述导入导出数据的转换终端设备的各种功能。所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(SecureDigital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
其中，所述导入导出数据的转换终端设备集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
需说明的是，以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外，本发明提供的装置实施例附图中，模块之间的连接关系表示它们之间具有通信连接，具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。
Claims (10)
1.一种导入导出数据的转换方法，其特征在于，包括：
获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1；
解析所述EXCEL模板，得到隐藏工作表和模板配置信息；其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息；
根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息；
将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件；
当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库。
2.如权利要求1所述的导入导出数据的转换方法，其特征在于，所述获取导入的n个数据表，将所述数据表转换为EXCEL模板，具体包括：
当导入一个数据表时，响应于第一配置的指令，将所述数据表生成对应的一个工作表；
当导入多个数据表时，响应于第二配置的指令，按照数据表的顺序将数据表的列信息依次排序，合并成一个工作表；
当导入多个数据表时，响应于第三配置的指令，按照数据表的顺序依次生成对应的多个工作表。
3.如权利要求2所述的导入导出数据的转换方法，其特征在于，所述获取导入的n个数据表，将所述数据表转换为EXCEL模板，还包括：
将所述数据表的合并信息、表信息、列信息、以及所述数据表与所述EXCEL模板列的对应关系，生成工作表的模板配置信息；
对所述工作表进行命名并隐藏，得到隐藏工作表和EXCEL模板。
4.如权利要求3所述的导入导出数据的转换方法，其特征在于，所述解析所述EXCEL模板，得到隐藏工作表和模板配置信息，具体包括：
获取EXCEL模板；
解析所述EXCEL模板，得到隐藏工作表的名称；
根据所述隐藏工作表的名称，查询所述EXCEL模板的模板配置信息。
5.如权利要求4所述的导入导出数据的转换方法，其特征在于，所述根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据，具体包括：
根据所述模板配置信息，判断所述隐藏工作表是否为合并工作表；若否，则根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
若是，则通过所述模板配置信息，筛选所述隐藏工作表的对应表及列信息，并根据所述模板配置信息中的对应关系，按照配置过程中数据表的顺序对所述隐藏工作表分组排序，从而根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据。
6.如权利要求5所述的导入导出数据的转换方法，其特征在于，所述验证所述导入表数据对应的列数据的合法性，还包括：
通过验证所述列数据的列类型、列长度、列的预设必填数据及列的唯一性，来验证所述导入表数据对应的列数据的合法性；
若合法，则认为不存在错误信息。
7.如权利要求6所述的导入导出数据的转换方法，其特征在于，在所述根据所述字段信息和所述字典编码，生成所述列数据对应的结构化查询文件之后，还包括：
判断所述导入表数据是否处理完毕；若否，则重新根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；若是，则检测是否存在错误信息；
当检测存在所述错误信息时，结束导入导出数据的转换；
当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至所述数据库。
8.一种导入导出数据的转换装置，其特征在于，包括：
数据表导入模块，用于获取导入的n个数据表，将所述数据表转换为EXCEL模板；其中，n≥1；
EXCEL模板解析模块，用于解析所述EXCEL模板，得到隐藏工作表和模板配置信息；其中，所述模板配置信息包括所述隐藏工作表的合并信息、表信息及列信息；
数据读取模块，用于根据所述模板配置信息，按模板配置表的顺序循环读取所述隐藏工作表的导入表数据；
合法性验证模块，用于验证所述导入表数据对应的列数据的合法性，若不合法，则记录错误信息；
层级关系生成模块，用于将所述列数据中关联预设的引用表的字段转换成字段信息，及将关联预设字典的字典值转换成字典编码，并生成所述列数据对应的结构化查询文件；
数据保存模块，用于当未检测到存在所述错误信息时，读取并保存所述结构化查询文件至数据库。
9.一种导入导出数据的转换终端设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至7中任意一项所述的导入导出数据的转换方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如权利要求1至7中任意一项所述的导入导出数据的转换方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010192657.8A CN111400387B (zh) | 2020-03-18 | 2020-03-18 | 导入导出数据的转换方法、装置、终端设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010192657.8A CN111400387B (zh) | 2020-03-18 | 2020-03-18 | 导入导出数据的转换方法、装置、终端设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111400387A true CN111400387A (zh) | 2020-07-10 |
| CN111400387B CN111400387B (zh) | 2023-03-14 |
Family
ID=71432612
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010192657.8A Active CN111400387B (zh) | 2020-03-18 | 2020-03-18 | 导入导出数据的转换方法、装置、终端设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111400387B (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111984238A (zh) * | 2020-09-22 | 2020-11-24 | 吴政静 | 一种跨平台桥接数据信息处理的软件 |
| CN112100987A (zh) * | 2020-09-27 | 2020-12-18 | 中国建设银行股份有限公司 | 一种多源数据字典的转码方法及装置 |
| CN112861508A (zh) * | 2021-01-12 | 2021-05-28 | 中国石油天然气集团有限公司 | 一种针对测井离散数据的规范方法及系统 |
| CN112965740A (zh) * | 2021-02-08 | 2021-06-15 | 中国工商银行股份有限公司 | 一种资产信息的导出方法及装置 |
| CN113065315A (zh) * | 2021-03-25 | 2021-07-02 | 珠海市一微半导体有限公司 | 一种用于描述寄存器的文件的转换控制方法 |
| CN113836208A (zh) * | 2021-08-16 | 2021-12-24 | 深圳希施玛数据科技有限公司 | 一种数据处理方法、装置及终端设备 |
| CN114756511A (zh) * | 2022-03-07 | 2022-07-15 | 中银金融科技有限公司 | 将数据库中数据导出成文本文件的方法及装置 |
| CN116720490A (zh) * | 2023-08-11 | 2023-09-08 | 北京久其金建科技有限公司 | 数据导入方法及装置 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109471890A (zh) * | 2018-10-16 | 2019-03-15 | 深圳壹账通智能科技有限公司 | 报表文件的生成方法、终端设备及介质 |
-
2020
- 2020-03-18 CN CN202010192657.8A patent/CN111400387B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109471890A (zh) * | 2018-10-16 | 2019-03-15 | 深圳壹账通智能科技有限公司 | 报表文件的生成方法、终端设备及介质 |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111984238A (zh) * | 2020-09-22 | 2020-11-24 | 吴政静 | 一种跨平台桥接数据信息处理的软件 |
| CN112100987A (zh) * | 2020-09-27 | 2020-12-18 | 中国建设银行股份有限公司 | 一种多源数据字典的转码方法及装置 |
| CN112861508A (zh) * | 2021-01-12 | 2021-05-28 | 中国石油天然气集团有限公司 | 一种针对测井离散数据的规范方法及系统 |
| CN112965740A (zh) * | 2021-02-08 | 2021-06-15 | 中国工商银行股份有限公司 | 一种资产信息的导出方法及装置 |
| CN112965740B (zh) * | 2021-02-08 | 2024-02-09 | 中国工商银行股份有限公司 | 一种资产信息的导出方法及装置 |
| CN113065315A (zh) * | 2021-03-25 | 2021-07-02 | 珠海市一微半导体有限公司 | 一种用于描述寄存器的文件的转换控制方法 |
| CN113836208A (zh) * | 2021-08-16 | 2021-12-24 | 深圳希施玛数据科技有限公司 | 一种数据处理方法、装置及终端设备 |
| CN114756511A (zh) * | 2022-03-07 | 2022-07-15 | 中银金融科技有限公司 | 将数据库中数据导出成文本文件的方法及装置 |
| CN116720490A (zh) * | 2023-08-11 | 2023-09-08 | 北京久其金建科技有限公司 | 数据导入方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111400387B (zh) | 2023-03-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111400387B (zh) | 导入导出数据的转换方法、装置、终端设备及存储介质 | |
| CN108334609B (zh) | Oracle中实现JSON格式数据存取的方法、装置、设备及存储介质 | |
| CN109766529B (zh) | 一种报表的生成方法及设备 | |
| CN107451112B (zh) | 表格工具数据检查方法、装置、终端设备及存储介质 | |
| CN114357943A (zh) | 一种通用高效Excel读取处理方法、工具、介质及设备 | |
| CN114490762B (zh) | 用于决策引擎的数据源取数方法、装置、介质和设备 | |
| CN109542398B (zh) | 一种业务系统生成方法、装置及计算机可读存储介质 | |
| CN110955714A (zh) | 一种将非结构化文本转化为结构化文本的方法及装置 | |
| CN114527975A (zh) | 基于ElementUI封装可配置化table组件 | |
| CN110633258A (zh) | 日志插入方法、装置、计算机装置及存储介质 | |
| CN113407565A (zh) | 跨库数据查询方法、装置和设备 | |
| CN117493309A (zh) | 一种标准模型生成方法、装置、设备及存储介质 | |
| CN112733510A (zh) | 一种财务凭证生成方法、装置、设备及计算机可读存储介质 | |
| CN110704635B (zh) | 一种知识图谱中三元组数据的转换方法及装置 | |
| CN110569243B (zh) | 一种数据查询方法、数据查询插件和数据查询服务器 | |
| CN109324838B (zh) | 单片机程序的执行方法、执行装置及终端 | |
| CN115757174A (zh) | 一种数据库的差异检测方法及装置 | |
| CN116151162A (zh) | 寄存器代码和文档的自动化设计方法、装置、设备及介质 | |
| CN116775599A (zh) | 数据迁移方法、装置、电子设备、存储介质 | |
| CN115935917A (zh) | 一种可视化图表的数据处理方法、装置、设备及存储介质 | |
| US8108828B2 (en) | System for generating optimized computer data field conversion routines | |
| CN114281331A (zh) | 一种用于访问数据库的前后端代码文件的生成方法及装置 | |
| CN114116773A (zh) | 一种结构化查询语言sql文本审核方法及装置 | |
| CN106815106B (zh) | 主机接口测试方法、装置、测试终端及系统 | |
| CN111324614A (zh) | 一种表的配置方法、装置、终端设备以及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |