CN108345682A - 基于多租户可配置的导入导出平台及方法 - Google Patents

Abstract

本发明公开了一种基于多租户可配置的导入导出平台及方法，所述平台包括：导入模板配置模块：用于根据需导入的数据列表配置导入元数据模板，并将导入元数据模板保存到数据库中；数据导入模块：用于根据配置的导入元数据模板通过数据流的方式创建出excel模板，用户通过excel模板填写要导入的数据后，用于将excel模板上传导入；导出模板配置模块：用于根据需导出的数据列表配置导出元数据模板，并将导出元数据模板保存到数据库中；数据导出模块：用于根据配置的导出元数据模板从数据库读取需要导出的数据上传到NFS文件服务器并返回一个下载地址的链接供用户下载。本发明可确保各用户间数据的隔离性，灵活性高，方便扩展，能够有效降低维护成本。

Description

基于多租户可配置的导入导出平台及方法

技术领域

本发明涉及数据导入导出技术领域，具体涉及一种基于多租户可配置的导入导出平台及方法。

背景技术

随着大数据的不断发展，目前各行业的数据有专门的系统存储和显示，大部分系统中都会有导入导出，也都会遇到类似的问题就是客户想导入或者导出的只是部分字段或者是导入或者导出列表外的其他字段，不同院校之间可能会存在不同的业务，每个院校间业务对象的属性都会有所不同，这是一个很常见的问题。例如：院校与院校之间对函授站的叫法不同，有些院校是教学点，有些院校叫函授站，正常导入导出的时候租户下显示名称是固定的导致导出来的文件里面，字段名称无法更改，还需要手动更改，但是如果用采用多租户可配置的方案在导入导出中可以通过配置修改字段名称，从而达到自定义名称显示问题就解决了。由于院校间业务的差异，还有很多场景，比如会存在自定义字段的场景，某些院校想在函授站下增加一个属性函授站负责人 ，正常遇到这种业务会找到开发人员修改代码来添加字段处理，目前已有方案如下：

定制字段：根据客户的需求在数据表上增加相应的定制字段来保存扩展数据。例如，根据客户A的需求，在客户表中增加来源Remark（标识）和TelPhone（电话）两个字段 。跟客户B的需求在客户表中增加workdate（工作日期）和workyear（工作年限）两个字段。这种方式的缺点就是随着客户的增多，客户表的字段数据将会变的非常多，一个客户定制的字段对于另外一个客户来说是毫无意义的，严重破坏了数据表的结构。但是其不需要处理复杂的数据延伸的追踪。

预定义字段：在用户可能有扩展需求的表中预设一定数量的字段。当用户提出扩展需求时，使用其中的一个或者多个字段来保存扩展数据。其缺点是无法事先确定预定义字段的数量。

发明内容

本发明的目的在于提供一种基于多租户可配置的导入导出平台及方法，解决正常导入导出的时候租户下显示名称是固定的，导致导出来的文件里面，字段名称无法更改，需要手动更改的问题。

为解决上述的技术问题，本发明采用以下技术方案：

一种基于多租户可配置的导入导出平台，所述平台包括：

导入模板配置模块：用于根据需导入的数据列表配置导入元数据模板，并将导入元数据模板保存到数据库中；

数据导入模块：用于根据配置的导入元数据模板通过数据流的方式创建出excel模板，用户通过excel模板填写要导入的数据后，用于将excel模板上传导入；

导出模板配置模块：用于根据需导出的数据列表配置导出元数据模板，并将导出元数据模板保存到数据库中；

数据导出模块：用于根据配置的导出元数据模板从数据库读取需要导出的数据，并以数据流的方式生成excel文件，将excel文件上传到NFS文件服务器并返回一个下载地址的链接供用户下载。

作为优选，所述导入元数据模板包括导入元数据模板名称和导入元数据模板内容，所述导入元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、验证规则、限制输入的最大长度、数据显示顺序、是否可空和示例说明；

所述导出元数据模板包括导出元数据模板名称和导出元数据模板内容，所述导出元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、数据显示类型、数据显示顺序；所述数据显示类型包括数字、日期、时间、文本。

作为优选，所述平台还包括：

扩展数据配置模块：用于配置扩展数据元数据模板，并将扩展数据元数据模板分别与导入元数据模板和导出元数据模板相关联。

作为优选，所述扩展数据元数据模板包括对应的导入元数据模板名称或导出元数据模板名称、扩展字段英文名、扩展字段中文显示名称、扩展字段类型、验证规则、限制输入的最大长度；

所述扩展字段英文名与保存在数据库中的扩展字段表相对应，所述扩展字段表用于保存扩展字段英文名；

所述扩展字段表与保存在数据库中的扩展数据表相对应，所述扩展数据表用于保存扩展字段英文名所对应的数据内容。

一种基于多租户可配置的导入导出方法，所述方法包括导入方法和导出方法，所述导入方法包括以下步骤：

S11：导入模板配置模块根据需导入的数据列表配置导入元数据模板，并将导入元数据模板保存到数据库中；

S12：数据导入模块根据配置的导入元数据模板通过数据流的方式创建出excel模板，用户通过excel模板填写要导入的数据后通过数据导入模块将excel模板上传导入；

所述导出方法包括以下步骤：

S21：导出模板配置模块根据需导出的数据列表配置导出元数据模板，并将导出元数据模板保存到数据库中；

S22：数据导出模块根据配置的导出元数据模板从数据库读取需要导出的数据，并以数据流的方式生成excel文件，将excel文件上传到NFS文件服务器并返回一个下载地址的链接供用户下载。

作为优选，所述导入元数据模板包括导入元数据模板名称和导入元数据模板内容，所述导入元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、验证规则、限制输入的最大长度、数据显示顺序、是否可空和示例说明。

作为优选，所述导出元数据模板包括导出元数据模板名称和导出元数据模板内容，所述导出元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、数据显示类型、数据显示顺序；所述数据显示类型包括数字、日期、时间、文本。

作为优选，所述S22步骤中数据导出模块根据配置的导出元数据模板从数据库读取需要导出的数据的具体方法是：根据导出元数据模板中配置的对应的数据库表名、对应的数据库字段名从数据库中读取出需要导出的数据，根据读取出来的数据根据对应的数据库字段名在导出元数据模板中找到显示在表头的中文名、数据显示类型和数据显示顺序，并以数据流的方式生成excel文件。

作为优选，所述导入方法中在S11和S12步骤之间还包括以下步骤：

S110：扩展数据配置模块配置扩展数据元数据模板，并将扩展数据元数据模板与导入元数据模板相关联；

所述导出方法中在S21和S22步骤之间还包括以下步骤：

S210：扩展数据配置模块配置扩展数据元数据模板，并将扩展数据元数据模板与导出元数据模板相关联。

作为优选，所述扩展数据元数据模板包括对应的导入元数据模板名称或导出元数据模板名称、扩展字段英文名、扩展字段中文显示名称、扩展字段类型、验证规则、限制输入的最大长度；

所述扩展字段英文名与保存在数据库中的扩展字段表相对应，所述扩展字段表用于保存扩展字段英文名；

所述扩展字段表与保存在数据库中的扩展数据表相对应，所述扩展数据表用于保存扩展字段英文名所对应的数据内容。

与现有技术相比，本发明的有益效果是：

本发明的导入导出平台及方法采用可配置的元数据，针对每个租户可定制一套默认的导入导出模板，当用户有个性化字段需求时，可自定义字段添加到导入模板或者是导出模板里面。非常灵活的解决了多用户的环境下共用相同的系统或程序组件，可确保各用户间数据的隔离性，灵活性高，方便扩展，能够有效降低维护成本。

附图说明

图1为本发明的导入数据的流程图。

图2为本发明的导出数据的流程图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

针对本发明的平台的一个实施例，一种基于多租户可配置的导入导出平台，所述平台包括：

导入模板配置模块：用于根据需导入的数据列表配置导入元数据模板，并将导入元数据模板保存到数据库中；

数据导入模块：用于根据配置的导入元数据模板通过数据流的方式创建出excel模板，用户通过excel模板填写要导入的数据后，用于将excel模板上传导入；

导出模板配置模块：用于根据需导出的数据列表配置导出元数据模板，并将导出元数据模板保存到数据库中；

数据导出模块：用于根据配置的导出元数据模板从数据库读取需要导出的数据，并以数据流的方式生成excel文件，将excel文件上传到NFS文件服务器并返回一个下载地址的链接供用户下载。

导入模板：导入模板可配置配，配置客户需要导入的数据字段，里面的字段除了必填（必填字段会标红）的其他都是可选字段，所有的字段都配有默认的示例说明，方便的提供用户填写，里面的所有验证规则（验证规则包括：邮箱、数字、自然数、数字字母、汉/数/字母、手机、网址、固定电话、日期、时间、数字0.0-100.0、数字字母两位、金额、正整数、密码、汉/数/字母_()、正数/小数(保留一位)、汉字数字字母符号等）全部可以通过配置灵活修改，字段可扩展，示例说明可配置，字段名称可配置非常灵活。自动匹配数据库中已存在的值做数据组装与业务处理，匹配不上的会在excel第一列给出消息提示。

导出模板有一套默认的配置，即对应的数据列表，导出模板跟对应的数据列表使用相同的一套元数据，所以当数据列表发生变化的时候导出模板会自动跟随变化，灵活应对页面的变化导出，示例说明可配置，字段名称可配置非常灵活。

进一步地，针对本发明的平台的另一个实施例，所述导入元数据模板包括导入元数据模板名称和导入元数据模板内容，所述导入元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、验证规则、限制输入的最大长度、数据显示顺序、是否可空和示例说明；

所述导出元数据模板包括导出元数据模板名称和导出元数据模板内容，所述导出元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、数据显示类型、数据显示顺序；所述数据显示类型包括数字、日期、时间、文本。

进一步地，针对本发明的平台的另一个实施例，所述平台还包括：

扩展数据配置模块：用于配置扩展数据元数据模板，并将扩展数据元数据模板分别与导入元数据模板和导出元数据模板相关联。

进一步地，针对本发明的平台的另一个实施例，所述扩展数据元数据模板包括对应的导入元数据模板名称或导出元数据模板名称、扩展字段英文名、扩展字段中文显示名称、扩展字段类型、验证规则、限制输入的最大长度；

所述扩展字段英文名与保存在数据库中的扩展字段表相对应，所述扩展字段表用于保存扩展字段英文名；

所述扩展字段表与保存在数据库中的扩展数据表相对应，所述扩展数据表用于保存扩展字段英文名所对应的数据内容。

参见图1、2，针对本发明的方法的一个实施例，一种基于多租户可配置的导入导出方法，所述方法包括导入方法和导出方法，所述导入方法包括以下步骤：

S11：导入模板配置模块根据需导入的数据列表配置导入元数据模板，并将导入元数据模板保存到数据库中；

S12：数据导入模块根据配置的导入元数据模板通过数据流的方式创建出excel模板，用户通过excel模板填写要导入的数据后通过数据导入模块将excel模板上传导入；

所述导出方法包括以下步骤：

S21：导出模板配置模块根据需导出的数据列表配置导出元数据模板，并将导出元数据模板保存到数据库中；

S22：数据导出模块根据配置的导出元数据模板从数据库读取需要导出的数据，并以数据流的方式生成excel文件，将excel文件上传到NFS文件服务器并返回一个下载地址的链接供用户下载。

例如：需要导入学生成绩表，学生成绩表包括：姓名、科目和成绩，其导入流程如下：

1、配置一个元数据studentscoreimport；

2、配置元数据内容（要导入的字段）：student（对应的数据库表名）、 studentname（对应的数据库字段名）、姓名（显示在表头的中文名）、汉字（验证规则）、100（限制输入的最大长度）、1（数据显示顺序）、否（是否可空）、学生姓名@例如张三（示例说明）等；科目，成绩依次类推 配置规则相同 不做重复描述了；

3、根据配置的元数据通过数据流的方式可以创建出一个excel模板；

4、用户通过这个模板可以填写要导入的数据 ；例如 张三 语文 100

5、将填写好的模板上传，根据元数据配置的验证规则可以进行数据校验，校验成功后将数据保存 ，导入成功。

例如，需要导出学生成绩表，需导出的学生成绩表包括：姓名、科目、成绩、录入时间，其导出流程如下：

1、配置一个元数据studentscoreexport；

2、配置要导出的内容：

student（对应的数据库表名）、score（对应的数据库字段名）、成绩（显示在表头的中文名）、分数显示（数据显示类型）、3（数据显示顺序）等；

student（对应的数据库表名）、inputtime（对应的数据库字段名）、录入时间（显示在表头的中文名）、日期显示（数据显示类型）、4（数据显示顺序）等；

姓名、科目依次类推，配置规则相同不做重复描述了；

3、根据元数据的配置映射的数据库表和字段读取出来要导出的数据；

4、根据读取出来的数据可以根据数据表的字段名称在元数据中找到对应的中文显示名称，还有数据显示类型和数据显示顺序以数据流的方式生成excel文件；

5、将导出的字段上传到NFS文件服务器并且返回一个下载地址的连接，导入成功。

进一步地，针对本发明的方法的另一个实施例，所述导入元数据模板包括导入元数据模板名称和导入元数据模板内容，所述导入元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、验证规则、限制输入的最大长度、数据显示顺序、是否可空和示例说明。

进一步地，针对本发明的方法的另一个实施例，所述导出元数据模板包括导出元数据模板名称和导出元数据模板内容，所述导出元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、数据显示类型、数据显示顺序；所述数据显示类型包括数字、日期、时间、文本。

进一步地，针对本发明的方法的另一个实施例，所述S22步骤中数据导出模块根据配置的导出元数据模板从数据库读取需要导出的数据的具体方法是：根据导出元数据模板中配置的对应的数据库表名、对应的数据库字段名从数据库中读取出需要导出的数据，根据读取出来的数据根据对应的数据库字段名在导出元数据模板中找到显示在表头的中文名、数据显示类型和数据显示顺序，并以数据流的方式生成excel文件。

进一步地，针对本发明的方法的另一个实施例，所述导入方法中在S11和S12步骤之间还包括以下步骤：

S110：扩展数据配置模块配置扩展数据元数据模板，并将扩展数据元数据模板与导入元数据模板相关联；

所述导出方法中在S21和S22步骤之间还包括以下步骤：

S210：扩展数据配置模块配置扩展数据元数据模板，并将扩展数据元数据模板与导出元数据模板相关联。

进一步地，针对本发明的方法的另一个实施例，所述扩展数据元数据模板包括对应的导入元数据模板名称或导出元数据模板名称、扩展字段英文名、扩展字段中文显示名称、扩展字段类型、验证规则、限制输入的最大长度；

所述扩展字段英文名与保存在数据库中的扩展字段表相对应，所述扩展字段表用于保存扩展字段英文名；

所述扩展字段表与保存在数据库中的扩展数据表相对应，所述扩展数据表用于保存扩展字段英文名所对应的数据内容。

例如：需导入扩展字段：作业成绩

1、根据上述方式创建原有元数据基础上再配置一个扩展字段元数据，类型为扩展字段；

2、配置扩展字段为：studentscoreimport（元数据名称）、zyscore（扩展字段英文名称）、作业成绩（扩展字段中文显示名称）、列表字段（扩展字段类型）、数字（验证类型）、10（限制输入的最大长度）、否（是否可空）等；

3、导入数据（张三、语文、100（成绩）、120（作业成绩））；这条数据有一个唯一标识，例如1，扩展数据存储位：1 zyscore 120；

针对需要导出扩展字段：作业成绩

1、根据上述方式创建原有元数据基础上再配置一个扩展字段，类型为扩展字段；

2、跟导入的配置方式一样，根据每条数据的位移标识加上扩展字段的英文名称，组装扩展数据的值；

3、生成导出文件，返回下载地址。

根据各个院校的需求不同可实现自定义字段导出，通过元数据就可以配置这个业务对象的属性单独给这个院校自定义字段，这样就实现了院校的个性化导出自定义字段的需求，并且在导入导出中也可以选择性的是否加入这个自定义字段，非常灵活的解决了多用户的环境下共用相同的系统或程序组件，有可确保各用户间数据的隔离性，其主要特点：灵活度高、易于扩展、可配置、自定义字段。

具体实现方案：将扩展数据的保存和原数据表分离，另外用一个统一的扩展数据表来保存。扩展数据表将数据表的横向扩展列转换为纵向的数据集（在数据库中创建一个扩展表，存储Id、元数据编码、显示名称、是否显示等来存储某个元数据的扩展字段，在加一个表来存储扩展字段的值，存储：元数据所属表名、字段名、值、类型、具体某行数据的主键id，这样读取列表导出的时候就可以根据每一行的的数据id去找纵向数据对应的列值了），将每一条原始数据记录的一个扩展字段，都保存成一条扩展数据行。将数据表中的数据记录与配置元数据表中的配置记录关联，构成扩展数据记录。可以提供无限数量的自定义扩展字段。从而可以实现用户的可配置自定义字段的场景，这种方案不仅仅用于界面上字段定制也可以用于导入导出的定制，使导入导出能满足不同需求的租户，例如文档开头部分提到的教学点的案例，如果页面上需要显示教学点的联系方式，而其他租户不需要，就可以在扩展便利添加一个联系方式的扩展字段。在扩展字段值的存储表里面将存储相应的值和当前数据对象的主键id，当查询的时候就可以根据当前数据的主键id找出对应的联系方式的值了。

在本说明书中所谈到的“一个实施例”、“另一个实施例”、 “实施例”、“优选实施例”等，指的是结合该实施例描述的具体特征、结构或者特点包括在本申请概括性描述的至少一个实施例中。在说明书中多个地方出现同种表述不是一定指的是同一个实施例。进一步来说，结合任一实施例描述一个具体特征、结构或者特点时，所要主张的是结合其他实施例来实现这种特征、结构或者特点也落在本发明的范围内。

尽管这里参照本发明的多个解释性实施例对本发明进行了描述，但是，应该理解，本领域技术人员可以设计出很多其他的修改和实施方式，这些修改和实施方式将落在本申请公开的原则范围和精神之内。更具体地说，在本申请公开、附图和权利要求的范围内，可以对主题组合布局的组成部件和/或布局进行多种变型和改进。除了对组成部件和/或布局进行的变形和改进外，对于本领域技术人员来说，其他的用途也将是明显的。

Claims (10)

1.一种基于多租户可配置的导入导出平台，其特征在于：所述平台包括：

导入模板配置模块：用于根据需导入的数据列表配置导入元数据模板，并将导入元数据模板保存到数据库中；

数据导入模块：用于根据配置的导入元数据模板通过数据流的方式创建出excel模板，用户通过excel模板填写要导入的数据后，用于将excel模板上传导入；

导出模板配置模块：用于根据需导出的数据列表配置导出元数据模板，并将导出元数据模板保存到数据库中；

数据导出模块：用于根据配置的导出元数据模板从数据库读取需要导出的数据，并以数据流的方式生成excel文件，将excel文件上传到NFS文件服务器并返回一个下载地址的链接供用户下载。

2.根据权利要求1所述的基于多租户可配置的导入导出平台，其特征在于：所述导入元数据模板包括导入元数据模板名称和导入元数据模板内容，所述导入元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、验证规则、限制输入的最大长度、数据显示顺序、是否可空和示例说明；

所述导出元数据模板包括导出元数据模板名称和导出元数据模板内容，所述导出元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、数据显示类型、数据显示顺序；所述数据显示类型包括数字、日期、时间、文本。

3.根据权利要求1或2所述的基于多租户可配置的导入导出平台，其特征在于：所述平台还包括：

扩展数据配置模块：用于配置扩展数据元数据模板，并将扩展数据元数据模板分别与导入元数据模板和导出元数据模板相关联。

4.根据权利要求3所述的基于多租户可配置的导入导出平台，其特征在于：所述扩展数据元数据模板包括对应的导入元数据模板名称或导出元数据模板名称、扩展字段英文名、扩展字段中文显示名称、扩展字段类型、验证规则、限制输入的最大长度；

所述扩展字段英文名与保存在数据库中的扩展字段表相对应，所述扩展字段表用于保存扩展字段英文名；

所述扩展字段表与保存在数据库中的扩展数据表相对应，所述扩展数据表用于保存扩展字段英文名所对应的数据内容。

5.一种基于多租户可配置的导入导出方法，其特征在于：所述方法包括导入方法和导出方法，

所述导入方法包括以下步骤：

S11：导入模板配置模块根据需导入的数据列表配置导入元数据模板，并将导入元数据模板保存到数据库中；

S12：数据导入模块根据配置的导入元数据模板通过数据流的方式创建出excel模板，用户通过excel模板填写要导入的数据后通过数据导入模块将excel模板上传导入；

所述导出方法包括以下步骤：

S21：导出模板配置模块根据需导出的数据列表配置导出元数据模板，并将导出元数据模板保存到数据库中；

S22：数据导出模块根据配置的导出元数据模板从数据库读取需要导出的数据，并以数据流的方式生成excel文件，将excel文件上传到NFS文件服务器并返回一个下载地址的链接供用户下载。

6.根据权利要求5所述的基于多租户可配置的导入导出方法，其特征在于：所述导入元数据模板包括导入元数据模板名称和导入元数据模板内容，所述导入元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、验证规则、限制输入的最大长度、数据显示顺序、是否可空和示例说明。

7.根据权利要求5所述的基于多租户可配置的导入导出方法，其特征在于：所述导出元数据模板包括导出元数据模板名称和导出元数据模板内容，所述导出元数据模板内容包括对应的数据库表名、对应的数据库字段名、显示在表头的中文名、数据显示类型、数据显示顺序；所述数据显示类型包括数字、日期、时间、文本。

8.根据权利要求7所述的基于多租户可配置的导入导出方法，其特征在于：所述S22步骤中数据导出模块根据配置的导出元数据模板从数据库读取需要导出的数据的具体方法是：根据导出元数据模板中配置的对应的数据库表名、对应的数据库字段名从数据库中读取出需要导出的数据，根据读取出来的数据根据对应的数据库字段名在导出元数据模板中找到显示在表头的中文名、数据显示类型和数据显示顺序，并以数据流的方式生成excel文件。

9.根据权利要求5～8任意一项所述的基于多租户可配置的导入导出方法，其特征在于：所述导入方法中在S11和S12步骤之间还包括以下步骤：

S110：扩展数据配置模块配置扩展数据元数据模板，并将扩展数据元数据模板与导入元数据模板相关联；

所述导出方法中在S21和S22步骤之间还包括以下步骤：

S210：扩展数据配置模块配置扩展数据元数据模板，并将扩展数据元数据模板与导出元数据模板相关联。

10.根据权利要求9所述的基于多租户可配置的导入导出方法，其特征在于：所述扩展数据元数据模板包括对应的导入元数据模板名称或导出元数据模板名称、扩展字段英文名、扩展字段中文显示名称、扩展字段类型、验证规则、限制输入的最大长度；

所述扩展字段英文名与保存在数据库中的扩展字段表相对应，所述扩展字段表用于保存扩展字段英文名；

所述扩展字段表与保存在数据库中的扩展数据表相对应，所述扩展数据表用于保存扩展字段英文名所对应的数据内容。