CN104021219B - 一种数据模板的生成方法及装置 - Google Patents

一种数据模板的生成方法及装置 Download PDF

Info

Publication number
CN104021219B
CN104021219B CN201410284268.2A CN201410284268A CN104021219B CN 104021219 B CN104021219 B CN 104021219B CN 201410284268 A CN201410284268 A CN 201410284268A CN 104021219 B CN104021219 B CN 104021219B
Authority
CN
China
Prior art keywords
data
imported
template
target matrix
field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201410284268.2A
Other languages
English (en)
Other versions
CN104021219A (zh
Inventor
林星
谢东伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Sea'o Iot Technology Co Ltd
Original Assignee
Guangdong Sea'o Iot Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Sea'o Iot Technology Co Ltd filed Critical Guangdong Sea'o Iot Technology Co Ltd
Priority to CN201410284268.2A priority Critical patent/CN104021219B/zh
Publication of CN104021219A publication Critical patent/CN104021219A/zh
Application granted granted Critical
Publication of CN104021219B publication Critical patent/CN104021219B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例公开了一种数据模板生成方法及装置,确定数据库中的字段发生改变的目标数据表,且以所述目标数据表中的字段为依据,生成数据模板,所述数据模板中的字段与所述目标数据表中的字段具有对应关系,确定待导入数据集合,并建立所述待导入数据集合与所述数据模板之间的对应关系,需要说明的是,目标数据表与数据模板之间具有对应关系,进一步地,数据模板与所述待导入数据集合之间具有对应关系,从而通过数据模板将待导入数据集合与目标数据表进行关联,换句话说,依据该数据模板,可以实现将待导入数据集合导入至字段改变的目标数据表。

Description

一种数据模板的生成方法及装置
技术领域
本发明涉及数据库技术领域,更具体地说,涉及一种数据模板的生成方法及装置。
背景技术
在计算机应用领域,需要使用数据库保存大量的业务数据。具体地,数据库中建立有数据表,将待保存数据以一定的数据结构形式保存在所述数据表中。目前,保存数据的方式为,将待保存数据填入数据模板中,以导入的方式,将数据模板中的待保存数据直接导入至数据表中进行保存。
然而,数据模板的格式固定,若数据表中的字段发生变化,该数据模板无法实现数据导入功能,灵活性较差。
发明内容
有鉴于此,本发明提供一种数据模板的生成方法及装置,以解决现有的数据保存方式中数据模板的格式固定,当数据表中的字段内容发生变化时,该数据模板无法实现数据导入功能,灵活性较差的技术问题。本发明提供的技术方案如下:
一种数据模板的生成方法,包括:
确定数据库中的目标数据表,所述目标数据表为字段发生改变的数据表;
以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,其中,该数据模板中每个字段均具有与所述目标数据表中字段的对应关系,且所述对应关系为一对一关系;
确定待导入数据集合,所述待导入数据集合为待导入至所述目标数据表中的集合;
建立所述待导入数据集合与所述数据模板之间的对应关系,以实现通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联。
上述方法,优选地,所述以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,包括:
获取所述目标数据表中的全部字段;
以所述全部字段为依据,生成所述目标数据表对应的数据模板;
当接收到字段处理指令时,在所述数据模板中,对所述字段处理指令对应的字段进行删除和/或更改。
上述方法,优选地,还包括:
当所述待导入数据集合中包含待变换数据时,获得变换表,并建立所述数据模板与所述变换表之间的对应关系;其中,所述待变换数据为导入时需要进行变换的数据,所述变换表包含所述待变换数据、所述待变换数据需要变换为的目标数据。
上述方法,优选地,还包括:
当所述待导入数据集合中包含第一待验证数据时,在所述数据模板中,将所述第一待验证数据对应的第一验证字段设置为第一目标键;其中,所述第一目标键用于导入前验证所述目标数据表中是否已经包含与所述第一待验证数据相同的第一数据,若是,用所述第一待验证数据对应的待导入数据记录更新所述第一数据对应的数据记录;
当所述待导入数据中包含第二待验证数据时,在所述数据模板中,将所述第二待验证数据对应的第二验证字段设置为第二目标键;其中,所述第二目标键用于导入前验证所述目标数据表中是否已经包含与所述第二待验证数据相同的第二数据,若是,并不将所述第二待验证数据对应的待导入数据记录导入至所述目标数据表。
上述方法,优选地,还包括:
依据所述数据模板,将所述待导入数据导入至所述目标数据表;
其中,所述依据所述数据模板,将所述待导入数据导入至所述目标数据表,包括:
获取所述待导入数据集合及所述数据模板;
在所述待导入数据集合中,为所述数据模板中的各个字段确定各自对应的待导入数据子集;
将所述各个待导入数据子集导入至所述目标数据表时,依据所述数据模板对应的变换表将所述依据待变换数据变换为相应的目标数据,并利用所述数据模板中的第一目标键对所述第一待验证数据进行验证,并利用所述数据模板中的第二目标键对所述第二待验证数据进行验证。
本申请还提供了一种数据模板的生成装置,包括:
数据表确定单元,用于确定数据库中的目标数据表,所述目标数据表为字段发生改变的数据表;
数据模板生成单元,用于以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,其中,该数据模板中每个字段均具有与所述目标数据表中字段的对应关系,且所述对应关系为一对一关系;
导入数据确定单元,用于确定待导入数据集合,所述待导入数据集合为待导入至所述目标数据表中的集合;
对应关系建立单元,用于建立所述待导入数据集合与所述数据模板之间的对应关系,以实现通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联。
上述装置,优选的,所述数据模板生成单元包括:
字段获取子单元,用于获取所述目标数据表中的全部字段;
模板生成子单元,用于以所述全部字段为依据,生成所述目标数据表对应的数据模板;
字段修改子单元,用于当接收到字段处理指令时,在所述数据模板中,对所述字段处理指令对应的字段进行删除和/或更改。
上述装置,优选的,还包括:
变化映射获取单元,用于当所述待导入数据集合中包含待变换数据时,获得变换表,并建立所述数据模板与所述变换表之间的对应关系;其中,所述待变换数据为导入时需要进行变换的数据,所述变换表包含所述待变换数据、所述待变换数据需要变换为的目标数据。
上述装置,优选的,还包括:
第一验证单元,用于当所述待导入数据集合中包含第一待验证数据时,在所述数据模板中,将所述第一待验证数据对应的第一验证字段设置为第一目标键;其中,所述第一目标键用于导入前验证所述目标数据表中是否已经包含与所述第一待验证数据相同的第一数据,若是,用所述第一待验证数据对应的待导入数据记录更新所述第一数据对应的数据记录;
第二验证单元,用于当所述待导入数据中包含第二待验证数据时,在所述数据模板中,将所述第二待验证数据对应的第二验证字段设置为第二目标键;其中,所述第二目标键用于导入前验证所述目标数据表中是否已经包含与所述第二待验证数据相同的第二数据,若是,并不将所述第二待验证数据对应的待导入数据记录导入至所述目标数据表。
上述装置,优选的,还包括:
数据导入单元,用于依据所述数据模板,将所述待导入数据导入至所述目标数据表;
其中,所述数据导入单元包括:
数据获取子单元,用于获取所述待导入数据集合及所述数据模板;
子集确定子单元,用于在所述待导入数据集合中,为所述数据模板中的各个字段确定各自对应的待导入数据子集;
子集导入子单元,用于将所述各个待导入数据子集导入至所述目标数据表时,依据所述数据模板对应的变换表将所述依据待变换数据变换为相应的目标数据,并利用所述数据模板中的第一目标键对所述第一待验证数据进行验证,并利用所述数据模板中的第二目标键对所述第二待验证数据进行验证。
从上述的技术方案可以看出,本发明具有下述有益效果:
本发明提供的数据模板生成方法及装置,确定数据库中的字段发生改变的目标数据表,且以所述目标数据表中的字段为依据,生成数据模板,所述数据模板中的字段与所述目标数据表中的字段具有对应关系,确定待导入数据集合,并建立所述待导入数据集合与所述数据模板之间的对应关系,需要说明的是,目标数据表与数据模板之间具有对应关系,进一步地,数据模板与所述待导入数据集合之间具有对应关系,从而通过数据模板将待导入数据集合与目标数据表进行关联,换句话说,依据该数据模板,可以实现将待导入数据集合导入至字段改变的目标数据表。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例公开的一种数据模板的生成方法的流程图;
图2为本发明实施例公开的一种数据模板的生成方法又一实施例的流程图;
图3为本发明实施例公开的一种数据模板的生成方法一个应用实施例的流程图;
图4为本发明实施例公开的一种数据模板的生成方法一个应用结果图;
图5为本发明实施例公开的一种数据模板的生成装置的结构示意图;
图6为本发明实施例公开的一种数据模板的生成装置又一实施例的结构示意图;
图7为本发明实施例公开的一种数据模板的生成装置一个应用实施例的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其示出了本发明实施例公开的一种数据模板的生成方法,该方法具体包括:
步骤101:确定数据库中的目标数据表,所述目标数据表为字段发生改变的数据表。
其中,数据库中的数据表包含有多个字段,目标数据表是字段发生改变的数据表,所述改变包括增加、更改和/或删除。不同的字段表示不同类型的数据,例如,字段name用来表示姓名,字段age用来存储年龄。现有技术中,数据表中的字段是固定的,因此,存储的数据类型也是固定的。
步骤102:以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,其中,该数据模板中每个字段均具有与所述目标数据表中字段的对应关系,且所述对应关系为一对一关系。
其中,数据模板可以认为是一张数据表,所述目标数据表中的字段是生成数据模板的依据,可见,数据模板不是固定的,而是依据变化了的目标数据表而生成的。需要说明的是,数据模板中的每个字段需要与目标数据表中的字段对应,所述对应关系是一对一的。
例如,所述数据模板中包含有3个字段name、age及id_card,所述目标数据表中包含有5个字段id、name、age、id_card及job,所述数据模板中的name、age及id_card都要对应所述目标数据表中的字段,对应的形式是一对一的,如name对name、age对age、id_card对id_card。
步骤103:确定待导入数据集合,所述待导入数据集合为待导入至所述目标数据表中的集合。
其中,所述待导入数据集合的存储形式并不限定,可选的,为Excel表格。所述待导入数据集合中包含至少一种类型的待导入数据,不同类型的待导入数据分别与数据模板中的不同字段对应。例如,年龄类型的待导入数据对应数据模板中的age字段,姓名类型的待导入数据对应数据模板中的name字段。
步骤104:建立所述待导入数据集合与所述数据模板之间的对应关系,以实现通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联。
其中,建立对应关系的方式,可以是将待导入数据集合的标识与所述数据模板的标识建立对应关系。需要说明的是,数据模板是依据目标数据表自定义生成的,目标数据表与数据模板之间具有对应关系,且所述数据模板与所述待导入数据集合之间具有对应关系,因此,可以通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联。
由以上的技术方案可知,本发明实施例提供的数据模板生成方法,确定数据库中的目标数据表,且以所述目标数据表中的字段为依据,生成数据模板,所述数据模板中的字段与所述目标数据表中的字段具有对应关系,确定待导入数据集合,并建立所述待导入数据集合与所述数据模板之间的对应关系,从而实现了通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联,因此,数据模板为将待导入数据集合导入至字段改变的目标数据表提供了导入依据。
需要说明的是,上述方法实施例中,数据模板中的字段可以是完全与所述目标数据表中字段相同,也可以与所述数据模板中的字段不同。所述不同可以包括内容不同、个数不同、内容与个数都不同。内容不同指的是对应的两个字段的标识不同。例如,数据模板中包含字段name、目标数据表中包含字段xingming,两者不同,但需要说明的是,name与xingming是对应的。
数据模板中的字段与目标数据表中的字段不同,出现这种状况,可能是由于生成数据模板的方式(上述步骤102)不同,可选的,上述步骤102的具体可以通过下述方式实现:
获取所述目标数据表中的全部字段;
以所述全部字段为依据,生成所述目标数据表对应的数据模板;
当接收到字段处理指令时,在所述数据模板中,对所述字段处理指令对应的字段进行删除和/或更改。
其中,当在所述目标数据表中获取到全部字段后,以所述全部字段为依据生成数据模板,也就是说,该数据模板中包含所述全部字段,将所述数据模板展示给用户,当接收到用户的字段处理指令时,对该指令对应的字段进行处理,所述处理包括删除和/或更改。其中,所述更改指的是更改字段标识。例如,将字段name更改为字段xingming。
字段处理指令是由用户生成的,也就是说,用户可以依据待导入数据集合中包含的待导入数据,删除和/或更改所述数据模板中的字段。例如,待导入数据集合存储在Excel表格中,该表格中包含3个列头,为xingming、age及id_card,分别对应不同类型的待导入数据,所述数据模板中包含5个字段,分别为id、name、age、id_card及job,因而,可以将数据模板中的字段进行删除及更改,删除的是字段id及字段job,更改的是将name更改为xingming。
需要说明的是,用户依据所述待导入数据集合中包含的待导入数据,对数据模板中的字段进行处理,可以使数据模板与待导入数据集合完全一致对应,进而依据所述数据模板对待导入数据集合执行导入时,可以更方便地为每一种类型的待导入数据找到对应的字段,该字段与目标数据表中的字段具有对应关系,则可以完成将待导入数据导入至目标数据表的相应字段下。
例如,执行导入时,可以方便地将待导入数据集合中类型为xingming的待导入数据直接与数据模板中的xingming字段对应,xingming字段与目标数据表中的name字段对应,进而,可实现将待导入数据集合中类型为xingming的待导入数据导入至name字段下。
当然,步骤102除了上述实现方式外,还可以是依据用户的生成指令,生成数据模板。其中,所述生成指令中包含有字段的个数及各个字段的标识,需要说明的是,所述生成指令是用户依据待导入数据集合中包含的待导入数据的类型生成的。例如,所述待导入数据的类型包括xingming、age及id_card,则用户生成相应的生成指令,该指令中包含字段个数为3个,分别为xingming、age及id_card。
需要说明的是,数据库系统为了处理数据的方便性,数据表常常将一些数据存储为代码。因此,待导入数据集合中可能包含有待变换数据,待变换数据为导入时需要转换存储的数据。对待导入数据进行转换后存储,具体应用一般是将待变换数据变换为数字代码。例如,job类型的待导入数据对应的待导入数据包括“财务经理”、“营销经理”、“行政职员”及“营销职员”,则可以依据预先存在的对应关系,导入所述“财务经理”、“营销经理”、“行政职员”及“营销职员”至数据表进行保存时,分别存储为01、02、03及04。
在上述场景中,需要对数据模板进行配置,以实现导入待导入数据时,将待变换数据转换存储为对应的转换后的数据,因此,在上述方法实施例的基础上,还可以包括:
当所述待导入数据集合中包含待变换数据时,获得变换表,并建立所述数据模板与所述变换表之间的对应关系;其中,所述待变换数据为导入时需要进行变换的数据,所述变换表包含所述待变换数据、所述待变换数据需要变换为的目标数据。
其中,所述待变换数据指的是,导入时将待导入数据转变为其他数据进行存储。具体地,转变为的数据为目标数据,目标数据的形式包括但不限定于数字代码。变换表的获取方式,可以是在数据库预先建立的数据表中确定变换表,还可以是根据用户的输入指令生成变换表。需要说明的是,变换表中包含待变换数据与目标数据之间的转换关系。
例如,待变换数据为“财务经理”、“营销经理”、“行政职员”及“营销职员”,变换表中包含所述各个待变换数据,且包含将各个待变换数据变为的目标数据,分别为01、02、03及04。
需要说明的是,变换表中还可以包含有默认值,用于当依据所述变换表对待变换数据进行变换时,在该变换表中未查找到对应的转换为的目标数据,则将该待变换数据变换为所述默认值。例如,变换表设置默认值为00,当待变换数据包括“财务职员”,但变换表中未包含“财务职员”对应的目标数据,导入时,将“财务职员”存储为默认值00。
可选地,在上述方法实施例的基础上,还可以包括对数据模板中的字段设置检验规则的过程,用以在依据数据模板进行数据导入时,对该字段对应的待导入数据进行验证,并依据验证结果执行不同的导入操作。具体为:
当所述待导入数据集合中包含第一待验证数据时,在所述数据模板中,将所述第一待验证数据对应的第一验证字段设置为第一目标键;其中,所述第一目标键用于导入前验证所述目标数据表中是否已经包含与所述第一待验证数据相同的第一数据,若是,用所述第一待验证数据对应的待导入数据记录更新所述第一数据对应的数据记录。
其中,待导入数据集合中包含有多条待导入数据记录,一条待导入数据记录可以指的是Excel表格的一行。所述第一待验证数据对应的待导入数据记录指的是,待导入数据集合中,与第一待验证数据同在一行中的待导入数据。
例如,所述待导入数据集合中包含有3种类型数据,分别为name、age及id_card,一条待导入数据记录包括name类型对应的“万玲”、age对应的“25”及id_card对应的“11111111”。
另外,在所述数据模板中,包含所述第一待验证数据对应的字段,该字段也就是第一验证字段,为该字段设置第一目标键。例如,在待导入数据集合中,第一待验证数据的类型为name,在数据模板中,该第一待验证数据对应的字段为name,则将name字段设置为第一目标键。
例如,第一待验证数据“万玲”为name类型对应的数据,表明设置的第一目标键用于验证目标数据表中name字段对应的数据中是否有“万玲”,若存在,则用“万玲”对应的待导入数据记录“万玲”、“25”、“行政职员”更新数据库中存在的数据记录。
当所述待导入数据中包含第二待验证数据时,在所述数据模板中,将所述第二待验证数据对应的第二验证字段设置为第二目标键;其中,所述第二目标键用于导入前验证所述目标数据表中是否已经包含与所述第二待验证数据相同的第二数据,若是,并不将所述第二待验证数据对应的待导入数据记录导入至所述目标数据表。
其中,所述第二目标键与所述第一目标键的区别是,当验证结果为是时,第二目标键并不执行将待导入数据记录导入至目标数据表,而第一目标键用待导入数据记录更新数据表中已经存在的记录。
需要说明的是,所述第二目标键对应的字段可以是一个,也可以是多个。
由以上的技术方案可知,本发明实施例可以实现对数据模板设置对应的数据检验规则,在依据该数据模板对待导入数据集合执行导入动作时,实现对待导入数据中数据的验证,并提供了两种不同的验证方式。
参见图2,其示出了本发明实施例提供的一种数据模板的生成方法的流程,该流程中包括依据目标数据表中的字段生成数据模板的过程,并包括对所述数据模板设置变换表,还包括对所述数据模板中的字段设置第一目标键及第二目标键,具体如下:
步骤201:确定数据库中的目标数据表,所述目标数据表为字段发生改变的数据表;
步骤202:以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,其中,该数据模板中每个字段均具有与所述目标数据表中字段的对应关系,且所述对应关系为一对一关系;
步骤203:确定待导入数据集合,所述待导入数据集合为待导入至所述目标数据表中的集合;
步骤204:建立所述待导入数据集合与所述数据模板之间的对应关系,以实现通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联
步骤205:当所述待导入数据集合中包含待变换数据时,获得变换表,并建立所述数据模板与所述变换表之间的对应关系;其中,所述待变换数据为导入时需要进行变换的数据,所述变换表包含所述待变换数据、所述待变换数据需要变换为的目标数据;
步骤206:当所述待导入数据集合中包含第一待验证数据时,在所述数据模板中,将所述第一待验证数据对应的第一验证字段设置为第一目标键;其中,所述第一目标键用于导入前验证所述目标数据表中是否已经包含与所述第一待验证数据相同的第一数据,若是,用所述第一待验证数据对应的待导入数据记录更新所述第一数据对应的数据记录;
步骤207:当所述待导入数据中包含第二待验证数据时,在所述数据模板中,将所述第二待验证数据对应的第二验证字段设置为第二目标键;其中,所述第二目标键用于导入前验证所述目标数据表中是否已经包含与所述第二待验证数据相同的第二数据,若是,并不将所述第二待验证数据对应的待导入数据记录导入至所述目标数据表。
需要说明的是,本图中的各个步骤请参见上个方法实施例中的说明,在此不做赘述。
参见图3,其示出了本申请提供的数据模板的生成方法的一个应用实施例的流程,即在上述方法实施例的基础上,还包括:依据所述数据模板,将所述待导入数据导入至所述目标数据表,具体包括:
步骤301:获取所述待导入数据集合及所述数据模板。
步骤302:在所述待导入数据集合中,为所述数据模板中的各个字段确定各自对应的待导入数据子集。
其中,所述数据模板中包含有多个字段,各个字段与目标数据表中的字段对应,需要依据所述数据模板中的各个字段,确定每个字段对应的待导入数据子集。例如,数据模板中包含3个字段,分别为name、age及id_card,确定字段name对应的待导入数据子集为“万玲”、“苏安超”及“林炜洁”,确定字段age对应的待导入数据子集为“25”、“45”及“31”,确定字段id_card对应的待导入数据子集为“11111111”、“22222222”及“333333333”。
步骤303:将所述各个待导入数据子集导入至所述目标数据表时,依据所述数据模板对应的变换表将所述依据待变换数据变换为相应的目标数据,并利用所述数据模板中的第一目标键对所述第一待验证数据进行验证,并利用所述数据模板中的第二目标键对所述第二待验证数据进行验证。
其中,方法实施例中的步骤205已经为数据模板中字段设置相对应的转换表,则依据所述转换表对待变换数据转换为目标数据后进行存储。具体地,在所述变换表中获取所述待变换数据对应的目标数据,将该待变换数据变换为目标数据后存储至目标数据表。需要说明的是,变换表中还可以包含有默认值,用于当在该变换表中未查找到对应的转换为的目标数据时,将该待变换数据变换为所述默认值。当然,变换表中还可以并不设置默认值,当未查找到对应的转换为的目标数据时,进行报警,且不将该条待导入数据记录导入至目标数据表。
方法实施例中的步骤206已经为数据模板设置第一目标键,则依据所述第一目标键对所述第一待验证数据进行验证。具体的,确定所述第一验证字段对应的待导入数据子集,判断所述目标数据表中是否存在与所述待导入数据子集中的数据相同的数据,若是,则用该第一待验证数据对应的待导入数据记录更新所述目标数据表中的数据记录。当然,当不存在时,直接将所述第一待验证数据对应的待导入数据记录导入至所述目标数据表中。
方法实施例中的步骤207已经为数据模板设置第二目标键,则依据所述数据模板中的第二目标键对所述第二待验证数据进行验证。具体地,确定所述第一验证字段对应的待导入数据子集,判断所述目标数据表中是否存在与所述待导入数据子集中的数据相同的数据,若是,则并不执行将所述第二待验证数据对应的待导入数据记录导入所述目标数据表。
由以上的技术方案可知,当数据库中的目标数据表字段发生改变后,可以依据改变后的字段生成数据模板,且可以为所述数据模板配置对应的变换表,且可以为所述数据模板配置数据验证规则,并利用所述配置后的数据模板,将待导入数据导入至数据库的目标数据表中。
对应上述方法实施例,本申请提供了一种数据模板生成装置,参见图5,具体包括:数据表确定单元401、数据模板生成单元402、导入数据确定单元403及对应关系建立单元404。其中:
数据表确定单元401,用于确定数据库中的目标数据表,所述目标数据表为字段发生改变的数据表。
其中,数据库中的数据表包含有多个字段,目标数据表是字段发生改变的数据表,所述改变包括增加、更改和/或删除。不同的字段表示不同类型的数据,例如,字段name用来表示姓名,字段age用来存储年龄。现有技术中,数据表中的字段是固定的,因此,存储的数据类型也是固定的。
数据模板生成单元402,用于以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,其中,该数据模板中每个字段均具有与所述目标数据表中字段的对应关系,且所述对应关系为一对一关系。
其中,数据模板可以认为是一张数据表,所述目标数据表中的字段是生成数据模板的依据,可见,数据模板不是固定的,而是依据变化了的目标数据表而生成的。需要说明的是,数据模板中的每个字段需要与目标数据表中的字段对应,所述对应关系是一对一的。
例如,所述数据模板中包含有3个字段name、age及id_card,所述目标数据表中包含有5个字段id、name、age、id_card及job,所述数据模板中的name、age及id_card都要对应所述目标数据表中的字段,对应的形式是一对一的,如name对name、age对age、id_card对id_card。
导入数据确定单元403,用于确定待导入数据集合,所述待导入数据集合为待导入至所述目标数据表中的集合。
其中,所述待导入数据集合的存储形式并不限定,可选的,为Excel表格。所述待导入数据集合中包含至少一种类型的待导入数据,不同类型的待导入数据分别与数据模板中的不同字段对应。例如,年龄类型的待导入数据对应数据模板中的age字段,姓名类型的待导入数据对应数据模板中的name字段。
对应关系建立单元404,用于建立所述待导入数据集合与所述数据模板之间的对应关系,以实现通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联。
其中,对应关系建立单元404建立对应关系的方式,可以是将待导入数据集合的标识与所述数据模板的标识建立对应关系。需要说明的是,数据模板是依据目标数据表自定义生成的,目标数据表与数据模板之间具有对应关系,且所述数据模板与所述待导入数据集合之间具有对应关系,因此,可以通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联。
由以上的技术方案可知,本发明实施例提供的数据模板生成装置,确定数据库中的目标数据表,且以所述目标数据表中的字段为依据,生成数据模板,所述数据模板中的字段与所述目标数据表中的字段具有对应关系,确定待导入数据集合,并建立所述待导入数据集合与所述数据模板之间的对应关系,从而实现了通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联,因此,数据模板为将待导入数据集合导入至字段改变的目标数据表提供了导入依据。
可选地,上述装置实施例中的数据模板生成单元402具体包括下述子单元:
字段获取子单元,用于获取所述目标数据表中的全部字段;
模板生成子单元,用于以所述全部字段为依据,生成所述目标数据表对应的数据模板;
字段修改子单元,用于当接收到字段处理指令时,在所述数据模板中,对所述字段处理指令对应的字段进行删除和/或更改。
对应上述方法实施例,本申请提供了一种数据模板生成装置,参见图6,具体包括:数据表确定单元501、数据模板生成单元502、导入数据确定单元503、对应关系建立单元504、变化映射获取单元505、第一验证单元506及第二验证单元507。其中:
数据表确定单元501,用于确定数据库中的目标数据表,所述目标数据表为字段发生改变的数据表;
数据模板生成单元502,用于以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,其中,该数据模板中每个字段均具有与所述目标数据表中字段的对应关系,且所述对应关系为一对一关系;
导入数据确定单元503,用于确定待导入数据集合,所述待导入数据集合为待导入至所述目标数据表中的集合;
对应关系建立单元504,用于建立所述待导入数据集合与所述数据模板之间的对应关系,以实现通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联。
变化映射获取单元505,用于当所述待导入数据集合中包含待变换数据时,获得变换表,并建立所述数据模板与所述变换表之间的对应关系;其中,所述待变换数据为导入时需要进行变换的数据,所述变换表包含所述待变换数据、所述待变换数据需要变换为的目标数据。
第一验证单元506,用于当所述待导入数据集合中包含第一待验证数据时,在所述数据模板中,将所述第一待验证数据对应的第一验证字段设置为第一目标键;其中,所述第一目标键用于导入前验证所述目标数据表中是否已经包含与所述第一待验证数据相同的第一数据,若是,用所述第一待验证数据对应的待导入数据记录更新所述第一数据对应的数据记录;
第二验证单元507,用于当所述待导入数据中包含第二待验证数据时,在所述数据模板中,将所述第二待验证数据对应的第二验证字段设置为第二目标键;其中,所述第二目标键用于导入前验证所述目标数据表中是否已经包含与所述第二待验证数据相同的第二数据,若是,并不将所述第二待验证数据对应的待导入数据记录导入至所述目标数据表。
需要说明的是,关于该装置实施例的说明,请参见上述方法实施例,在此不做赘述。
本申请还提供了一种装置,用以生成数据模板并应用该数据模板实现数据导入功能,具体地,参见图7,该装置除了包括上述各个单元外,还包括数据导入单601用于依据所述数据模板,将所述待导入数据导入至所述目标数据表;其中,所述数据导入单元601包括:
数据获取子单元6011,用于获取所述待导入数据集合及所述数据模板;
子集确定子单元6012,用于在所述待导入数据集合中,为所述数据模板中的各个字段确定各自对应的待导入数据子集;
子集导入子单元6013,用于将所述各个待导入数据子集导入至所述目标数据表时,依据所述数据模板对应的变换表将所述依据待变换数据变换为相应的目标数据,并利用所述数据模板中的第一目标键对所述第一待验证数据进行验证,并利用所述数据模板中的第二目标键对所述第二待验证数据进行验证。
需要说明的是,关于该装置实施例的说明,请参见上述方法实施例,在此不做赘述。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明实施例的精神或范围的情况下,在其它实施例中实现。因此,本发明实施例将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (6)

1.一种数据模板的生成方法,其特征在于,包括:
确定数据库中的目标数据表,所述目标数据表为字段发生改变的数据表;
以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,其中,该数据模板中每个字段均具有与所述目标数据表中字段的对应关系,且所述对应关系为一对一关系;
确定待导入数据集合,所述待导入数据集合为待导入至所述目标数据表中的集合;
建立所述待导入数据集合与所述数据模板之间的对应关系,以实现通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联;
当所述待导入数据集合中包含第一待验证数据时,在所述数据模板中,将所述第一待验证数据对应的第一验证字段设置为第一目标键;其中,所述第一目标键用于导入前验证所述目标数据表中是否已经包含与所述第一待验证数据相同的第一数据,若是,用所述第一待验证数据对应的待导入数据记录更新所述第一数据对应的数据记录;
当所述待导入数据中包含第二待验证数据时,在所述数据模板中,将所述第二待验证数据对应的第二验证字段设置为第二目标键;其中,所述第二目标键用于导入前验证所述目标数据表中是否已经包含与所述第二待验证数据相同的第二数据,若是,并不将所述第二待验证数据对应的待导入数据记录导入至所述目标数据表;
当所述待导入数据集合中包含待变换数据时,获得变换表,并建立所述数据模板与所述变换表之间的对应关系;其中,所述待变换数据为导入时需要进行变换的数据,所述变换表包含所述待变换数据、所述待变换数据需要变换为的目标数据。
2.根据权利要求1所述的方法,其特征在于,所述以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,包括:
获取所述目标数据表中的全部字段;
以所述全部字段为依据,生成所述目标数据表对应的数据模板;
当接收到字段处理指令时,在所述数据模板中,对所述字段处理指令对应的字段进行删除和/或更改。
3.根据权利要求1所述的方法,其特征在于,还包括:
依据所述数据模板,将所述待导入数据导入至所述目标数据表;
其中,所述依据所述数据模板,将所述待导入数据导入至所述目标数据表,包括:
获取所述待导入数据集合及所述数据模板;
在所述待导入数据集合中,为所述数据模板中的各个字段确定各自对应的待导入数据子集;
将所述各个待导入数据子集导入至所述目标数据表时,依据所述数据模板对应的变换表将所述依据待变换数据变换为相应的目标数据,并利用所述数据模板中的第一目标键对所述第一待验证数据进行验证,并利用所述数据模板中的第二目标键对所述第二待验证数据进行验证。
4.一种数据模板的生成装置,其特征在于,包括:
数据表确定单元,用于确定数据库中的目标数据表,所述目标数据表为字段发生改变的数据表;
数据模板生成单元,用于以所述目标数据表中的字段为依据,生成所述目标数据表对应的数据模板,其中,该数据模板中每个字段均具有与所述目标数据表中字段的对应关系,且所述对应关系为一对一关系;
导入数据确定单元,用于确定待导入数据集合,所述待导入数据集合为待导入至所述目标数据表中的集合;
对应关系建立单元,用于建立所述待导入数据集合与所述数据模板之间的对应关系,以实现通过所述数据模板将所述待导入数据集合与所述目标数据表进行关联;
第一验证单元,用于当所述待导入数据集合中包含第一待验证数据时,在所述数据模板中,将所述第一待验证数据对应的第一验证字段设置为第一目标键;其中,所述第一目标键用于导入前验证所述目标数据表中是否已经包含与所述第一待验证数据相同的第一数据,若是,用所述第一待验证数据对应的待导入数据记录更新所述第一数据对应的数据记录;
第二验证单元,用于当所述待导入数据中包含第二待验证数据时,在所述数据模板中,将所述第二待验证数据对应的第二验证字段设置为第二目标键;其中,所述第二目标键用于导入前验证所述目标数据表中是否已经包含与所述第二待验证数据相同的第二数据,若是,并不将所述第二待验证数据对应的待导入数据记录导入至所述目标数据表;
变化映射获取单元,用于当所述待导入数据集合中包含待变换数据时,获得变换表,并建立所述数据模板与所述变换表之间的对应关系;其中,所述待变换数据为导入时需要进行变换的数据,所述变换表包含所述待变换数据、所述待变换数据需要变换为的目标数据。
5.根据权利要求4所述的装置,其特征在于,所述数据模板生成单元包括:
字段获取子单元,用于获取所述目标数据表中的全部字段;
模板生成子单元,用于以所述全部字段为依据,生成所述目标数据表对应的数据模板;
字段修改子单元,用于当接收到字段处理指令时,在所述数据模板中,对所述字段处理指令对应的字段进行删除和/或更改。
6.根据权利要求4所述的装置,其特征在于,还包括:
数据导入单元,用于依据所述数据模板,将所述待导入数据导入至所述目标数据表;
其中,所述数据导入单元包括:
数据获取子单元,用于获取所述待导入数据集合及所述数据模板;
子集确定子单元,用于在所述待导入数据集合中,为所述数据模板中的各个字段确定各自对应的待导入数据子集;
子集导入子单元,用于将所述各个待导入数据子集导入至所述目标数据表时,依据所述数据模板对应的变换表将所述依据待变换数据变换为相应的目标数据,并利用所述数据模板中的第一目标键对所述第一待验证数据进行验证,并利用所述数据模板中的第二目标键对所述第二待验证数据进行验证。
CN201410284268.2A 2014-06-23 2014-06-23 一种数据模板的生成方法及装置 Expired - Fee Related CN104021219B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410284268.2A CN104021219B (zh) 2014-06-23 2014-06-23 一种数据模板的生成方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410284268.2A CN104021219B (zh) 2014-06-23 2014-06-23 一种数据模板的生成方法及装置

Publications (2)

Publication Number Publication Date
CN104021219A CN104021219A (zh) 2014-09-03
CN104021219B true CN104021219B (zh) 2017-07-21

Family

ID=51437973

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410284268.2A Expired - Fee Related CN104021219B (zh) 2014-06-23 2014-06-23 一种数据模板的生成方法及装置

Country Status (1)

Country Link
CN (1) CN104021219B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104317974B (zh) * 2014-11-21 2017-07-11 武汉理工大学 一种可重构的erp系统中多源数据导入方法
CN105808375A (zh) * 2014-12-31 2016-07-27 航天信息软件技术有限公司 导入数据的方法和装置
CN106897434A (zh) * 2017-02-27 2017-06-27 济南浪潮高新科技投资发展有限公司 一种数据导入方法、装置及系统
CN107403371B (zh) * 2017-04-13 2020-06-09 阿里巴巴集团控股有限公司 一种数据生成方法和装置
CN108959230B (zh) * 2018-07-24 2021-11-26 郑州云海信息技术有限公司 一种生成报表模板的方法和装置
CN112559813B (zh) * 2021-01-29 2022-04-29 广州技象科技有限公司 基于指令关联推送的物联网网关数据处理方法及装置
CN113590648A (zh) * 2021-07-30 2021-11-02 高途教育科技集团有限公司 一种数据查询方法、装置、设备和可读存储介质
CN113672567B (zh) * 2021-10-22 2023-07-07 南京数睿数据科技有限公司 文件构建方法、装置、电子设备和计算机可读介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981427A (ja) * 1995-09-18 1997-03-28 Nippon Telegr & Teleph Corp <Ntt> 更新差分データ抽出プログラム作成方法およびそのための装置
CN101141525A (zh) * 2007-10-10 2008-03-12 中兴通讯股份有限公司 一种信息管理系统以及信息管理方法
CN101183356A (zh) * 2007-12-14 2008-05-21 华为技术有限公司 Excel报表的实现方法及Excel报表系统
CN101504672A (zh) * 2009-03-23 2009-08-12 金蝶软件(中国)有限公司 一种动态配置实体数据表的方法和系统
CN103020089A (zh) * 2011-09-27 2013-04-03 深圳市金蝶友商电子商务服务有限公司 一种将excel文件中的数据导入数据库的方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4256416B2 (ja) * 2006-09-29 2009-04-22 株式会社東芝 データ構造変換システム及びプログラム
CN101355448B (zh) * 2008-09-03 2012-01-11 中兴通讯股份有限公司 上载比较方法和装置
CN103544323B (zh) * 2013-11-08 2017-01-04 中国农业银行股份有限公司 一种数据更新方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981427A (ja) * 1995-09-18 1997-03-28 Nippon Telegr & Teleph Corp <Ntt> 更新差分データ抽出プログラム作成方法およびそのための装置
CN101141525A (zh) * 2007-10-10 2008-03-12 中兴通讯股份有限公司 一种信息管理系统以及信息管理方法
CN101183356A (zh) * 2007-12-14 2008-05-21 华为技术有限公司 Excel报表的实现方法及Excel报表系统
CN101504672A (zh) * 2009-03-23 2009-08-12 金蝶软件(中国)有限公司 一种动态配置实体数据表的方法和系统
CN103020089A (zh) * 2011-09-27 2013-04-03 深圳市金蝶友商电子商务服务有限公司 一种将excel文件中的数据导入数据库的方法及装置

Also Published As

Publication number Publication date
CN104021219A (zh) 2014-09-03

Similar Documents

Publication Publication Date Title
CN104021219B (zh) 一种数据模板的生成方法及装置
US20190158296A1 (en) Redactable document signatures
US20220027515A1 (en) Decentralized Token Table Generation
EP4236198A2 (en) Secure provision of undetermined data from an undetermined source into the locking script of a blockchain transaction
US10635655B2 (en) Device, method and program for securely reducing an amount of records in a database
KR102301257B1 (ko) 블록체인 부분 원장
CN107426165B (zh) 一种支持密钥更新的双向安全云存储数据完整性检测方法
CN105630847B (zh) 数据存储方法、数据查询方法、装置及系统
CN104915262B (zh) 一种基于excel数据结构的校验系统及其方法
CN107665233A (zh) 数据库数据处理方法、装置、计算机设备和存储介质
CN103995908A (zh) 一种数据导入方法及装置
CN105900093B (zh) 一种KeyValue数据库的数据表的更新方法与表数据更新装置
CN108228730A (zh) 数据导入方法、装置、计算机设备及可读存储介质
CN103714086A (zh) 用于生成非关系数据库的模式的方法和设备
CN107885705B (zh) 一种高效可扩展的安全的文档相似性计算方法和装置
CN112052954B (zh) 梯度提升树建模方法、装置以及终端
CN104268291A (zh) 一种数据一致性处理方法和系统
CN104660551A (zh) 一种基于webservice的数据库访问装置及方法
CN105912601A (zh) 能量管理系统分布式实时内存数据库的分区存储方法
CN106815366A (zh) 一种批量生成数据的方法及系统
CN107832151A (zh) 一种cpu资源分配方法、装置及设备
CN109241357A (zh) 链式结构模型及其构建方法、系统和终端设备
CN111143399B (zh) 数据处理方法、装置、存储介质和计算机设备
CN105550353A (zh) 基于正则表达式的表单录入方法及系统
CN105389404A (zh) 一种向数据库关联表导入数据的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: 523062 Guangdong province Dongguan City Wanjiang Jane Shazhou community Dragon dock office building five layer

Applicant after: DONGGUAN ICCO COMPUTER INTELLIGENT TECHNOLOGY CO., LTD.

Address before: 523062 Guangdong province Dongguan City Wanjiang Jane Shazhou community Dragon dock office building five layer

Applicant before: Dongguan Xi'ao Computer Intelligent Technology Co., Ltd.

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: DONGGUAN XI'AO COMPUTER INTELLIGENT TECHNOLOGY CO., LTD. TO: GUANGDONG SEA-O INTERNET OF THINGS TECHNOLOGY CO., LTD.

GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170721

Termination date: 20210623

CF01 Termination of patent right due to non-payment of annual fee