CN105447200A

CN105447200A - 一种数据处理方法及数据处理装置

Info

Publication number: CN105447200A
Application number: CN201511022228.1A
Authority: CN
Inventors: 唐静; 王承炜
Original assignee: Kingdee Software China Co Ltd
Current assignee: Kingdee Software China Co Ltd
Priority date: 2015-12-30
Filing date: 2015-12-30
Publication date: 2016-03-30

Abstract

本发明公开了一种数据处理方法，包括：获取数据项，根据数据项创建中间表以及实体表，根据数据项查询数据库，确定数据库中的源数据表，将源数据表的数据导入实体表；根据数据项生成数据接口文件，显示数据接口文件，根据数据接口文件调用应用程序，以使得应用程序从实体表中获取数据，可以提高基于中间表的数据处理效率。本发明还提供一种可以实现上述方法的数据处理装置。

Description

一种数据处理方法及数据处理装置

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据处理方法及数据处理装置。

背景技术

在实际业务处理中，业务数据是多样化的，可能是数据库的基础数据，也可能是将基础数据加工后得到的数据。中间表是指在数据处理过程中，对数据库的基础表进行集成或数据处理加工，生成的数据表。

目前，业务处理系统可以直接调用中间表的中间数据，而不必访问基础表，或再对基础数据进行加工，因此利用中间表处理业务可以缩短业务处理时间，提高业务处理效率。

但是，对客户端来说中间表是不透明的，当中间表的基础数据改变时，用户无法即时发现中间表的修改，如果继续按照原中间表执行应用程序，将会无法读取数据或出错，因此基于中间表的数据处理效率受到很大影响。

发明内容

本申请提供了一种数据处理方法以及数据处理装置，能够提高基于中间表的数据处理效率。

第一方面提供一种数据处理方法，包括：

获取数据项，根据所述数据项创建中间表以及实体表，所述实体表与所述中间表对应；

根据所述数据项查询数据库，确定所述数据库中的源数据表，将所述源数据表的数据导入所述实体表，并存储在本地；

根据所述数据项生成数据接口文件，显示所述数据接口文件，根据所述数据接口文件调用应用程序，以使得所述应用程序从所述实体表中获取数据。

结合第一方面，在第一方面的第一种实现方式中，在所述根据所述数据项创建中间表以及实体表包括：

选取所述中间表中至少一个数据项作为待删除数据项，将所述待删除数据项标记为删除状态，并在所述实体表中保留所述待删除数据项对应的数据项。

结合第一方面，在第一方面的第二种实现方式中，在所述根据所述数据项创建中间表以及实体表之后，所述方法还包括：

获取目标数据项；

判断所述实体表是否包含与所述目标数据项的名称相同的数据项，若否，则在所述实体表中添加所述目标数据项，若是，则不允许将所述目标数据项添加到所述实体表。

结合第一方面，或第一方面的以上任意一种实现方式，在第一方面的第三种实现方式中，在所述将源数据表的数据导入所述实体表之前，所述方法还包括：

获取所述实体表与所述源数据表中的同名数据项；

若所述同名数据项的数据项格式不同，则根据所述源数据表的数据项格式，对所述实体表的数据项格式进行修改。

结合第一方面，或第一方面的第一种实现方式，或第一方面的第二种实现方式，所述根据所述数据项生成数据接口文件包括：

根据所述中间表的有效数据项，生成数据接口文件，所述有效数据项是指除标记为删除状态的数据项之外的其他数据项。

第二方面提供一种数据处理装置，包括：

获取模块，用于获取数据项；

创建模块，用于根据所述数据项创建中间表以及实体表，所述实体表与所述中间表对应；

导入数据模块，用于根据所述数据项查询数据库，确定所述数据库中的源数据表，将所述源数据表的数据导入所述实体表，并存储在本地；

生成模块，用于根据所述数据项生成数据接口文件；

显示模块，用于显示所述数据接口文件；

执行模块，用于根据所述数据接口文件调用应用程序，以使得所述应用程序从所述实体表中获取数据。

结合第二方面，在第二方面的第一种实现方式中，所述装置还包括：

删除模块，用于选取所述中间表中至少一个数据项作为待删除数据项，将所述待删除数据项标记为删除状态，并在所述实体表中保留所述待删除数据项对应的数据项。

结合第二方面，在第二方面的第二种实现方式中，所述获取模块还用于获取目标数据项；

所述装置还包括：

判断模块，用于判断所述实体表是否包含与所述目标数据项的名称相同的数据项，若否，则触发添加模块执行在所述实体表中添加所述目标数据项的步骤，若是，则触发处理模块执行不允许将所述目标数据项添加到所述实体表的步骤；

添加模块，用于在所述实体表中添加所述目标数据项；

处理模块，用于不允许将将所述目标数据项添加到所述实体表。

结合第二方面，或第二方面的第一种实现方式，或第二方面的第二种实现方式，在第二方面的第三种实现方式中，所述获取模块，用于获取所述实体表与所述源数据表中的同名数据项；

所述装置还包括：

修改模块，用于若所述同名数据项的数据项格式不同，则根据所述源数据表的数据项格式，对所述实体表的数据项格式进行修改。

结合第二方面，或第二方面的第一种实现方式，或第二方面的第二种实现方式，在第二方面的第四种实现方式中，所述生成模块具体用于根据所述中间表的有效数据项，生成数据接口文件，所述有效数据项是指除标记为删除状态的数据项之外的其他数据项。

本申请提供的技术方案中，数据处理装置可以获取数据项，根据数据项创建中间表以及实体表，根据数据项查询数据库，确定数据库中的源数据表，将源数据表的数据导入实体表，并存储在本地；数据处理装置还可以根据数据项生成数据接口文件，显示数据接口文件，根据所述数据接口文件调用应用程序，以使得所述应用程序从所述实体表中获取数据，数据接口文件向用户展示中间表的数据项，当中间表改变时，数据接口文件可以随之更新，用户可以及时发现中间表的变化，执行应用程序获取数据，从而提高了基于中间表的数据处理效率。

附图说明

图1为本发明实施例中数据处理方法的一个流程示意图；

图2为本发明实施例中数据处理装置的一个结构示意图；

图3为本发明实施例中数据处理装置的另一个结构示意图。

具体实施方式

为提高基于中间表的数据处理效率，本申请提供了一种数据处理方法，请参阅图1，上述方法包括：

S101、获取数据项；

本实施例中，数据处理装置设有中间表编辑界面，中间表编辑界面包括数据项。中间表编辑界面为可视化界面，用户可以在可视化界面中选取数据项，并对所选数据项的格式进行设置，数据处理装置可以获取设置完成的数据项，并根据数据项创建中间表。

其中，数据项也可称为字段，数据项的格式包括数据类型、长度或精度等。数据类型包括：整形(int)，长整形(long)，字符型(char)，字符串型(varchar)；数据项的长度可以是8bits，16bits，还可以是其他二进制长度；数据项的精度可以是小数位后一位，或小数位后两位，还可以是其他精度，具体此处不作限定。

可选的，中间表编辑界面还可以包括中间表样式，数据处理装置还可以选取中间表样式，根据数据项和中间表样式创建中间表。

S102、根据数据项创建中间表以及实体表，实体表与中间表对应；

数据处理装置获取上述数据项之后，可以根据数据项创建中间表以及实体表，实体表的数据项与中间表的数据项相同。

S103、根据数据项查询数据库，确定数据库中的源数据表，将源数据表的数据导入实体表，并存储在本地；

其中，源数据表是指在业务数据的数据来源中与业务相关的数据表，存储在服务器的数据库中。数据处理装置创建中间表以及实体表之后，可以根据中间表的数据项查询数据库，确定数据库中的源数据表，依据数据与数据项的对应关系，将源数据表的数据导入实体表，并存储于数据处理装置。若中间表包括新数据项，那么根据新数据项的计算规则，将新数据项的关联数据项进行计算，生成新数据项对应的数据。关联数据项是指与新数据项关联的数据项。其中，源数据表数量可以是一个或多个。

S104、根据数据项生成数据接口文件，显示数据接口文件；

数据处理装置获取数据项之后，可以选取全部或部分数据项作为输出数据项，根据选取的数据项生成数据接口文件，并显示该数据接口文件。其中，数据接口文件的格式可以是Excel、可扩展标记语言(ExtensibleMarkupLanguage，简称XML)等。

S105、根据数据接口文件调用应用程序，以使得应用程序从实体表中获取数据。

数据处理装置生成数据接口文件之后，可以按照预设规则调用应用程序，以使得应用程序可以根据数据接口文件限定的数据项，从实体表中获取数据。或是，用户查阅数据接口文件，根据数据接口文件执行应用程序，根据数据接口文件限定的数据项从实体表中获取数据。

需要说明的是，步骤S102至步骤S103为创建中间表以及实体表，将数据导入实体表的过程，步骤S104为生成数据接口文件的过程，上述两个过程并无固定先后顺序，在实际应用中，还可以先执行S104，再执行S102至S103，此处不作限定。

本实施例中，数据处理装置可以获取数据项，根据数据项创建中间表以及实体表，根据数据项查询数据库，确定数据库中的源数据表，将源数据表的数据导入实体表，并根据数据项生成数据接口文件，显示数据接口文件，根据数据接口文件调用应用程序，以使得应用程序从实体表中获取数据，数据接口文件向用户展示中间表的数据项，当中间表改变时，数据接口文件可以随之更新，用户可以及时发现中间表的变化，执行应用程序获取数据，从而提高了基于中间表的数据处理效率。

其次，在现有技术中，中间表的基础数据存储在服务器的数据库中，当网络断开连接时，数据处理装置无法使用中间表。本发明中数据处理装置存储有数据，当数据处理装置与服务器之间的网络断开连接时，数据处理装置仍然可以调用中间表，与现有技术相比，提高了业务处理系统的鲁棒性。

可选的，在本发明的一些实施例中，在将源数据表的数据导入实体表之前，上述方法还包括：获取实体表与源数据表中的同名数据项；若同名数据项的数据项格式不同，则根据源数据表的数据项格式，对实体表的数据项格式进行修改。

本实施例中，数据处理装置创建中间表对应的实体表，以及确定中间表对应的源数据表之后，由于在编辑中间表时，数据库的数据对于用户来说是不可见的，因此实体表的数据项与源数据表中同名数据项的数据格式可能不同，数据处理装置可以根据源数据表的数据项格式，对实体表的数据项格式进行修改，使得源数据表与实体表的数据项格式保持一致，并使得上述两表中的数据也能保持一致。

在实际应用中，业务流程会变化，因此需要对已创建的中间表以及实体表进行修改，以适应业务流程的变化，具体可以通过删除或增加中间表以及实体表的数据项以及数据列来实现：

一、删除数据项：

在图1所示实施例的基础上，在根据数据项创建中间表以及实体表之后，在将源数据表的数据导入实体表之前，上述方法还包括：选取中间表中至少一个数据项作为待删除数据项，将待删除数据项标记为删除状态，并在实体表中保留与待删除数据项对应的数据项。

本实施例中，数据处理装置可以选取中间表中至少一个数据项作为待删除数据项，将待删除数据项标记为删除状态，并在实体表中保留将待删除数数据项。调用中间表对应的实体表时，实体表中与标记为删除状态的数据项对应的数据项不可调用。

可以理解的是，当标记为删除状态的数据项要恢复时，数据处理装置可以取消删除状态，实体表中与该数据项对应的数据项可以被调用。

可选的，在根据数据项创建中间表以及实体表之后，上述方法还包括：选取中间表中至少一个数据项，删除选取的数据项，并删除实体表中与上述数据项对应的数据项。

本实施例中，数据处理装置可以将该数据项从中间表以及实体表中删除。

二、增加数据项：

在图1所示实施例的基础上，在根据数据项创建中间表以及实体表之后，在将源数据表的数据导入实体表之前，上述方法还包括：

获取目标数据项；

判断实体表是否包含与目标数据项的名称相同的数据项，若否，则在实体表中添加目标数据项，若是，则不允许将目标数据项添加到实体表。

本实施例中，在创建实体表之后，用户可以在可视化界面再选取数据项作为待添加数据项，由于数据库中的一张数据表不允许存在两个相同数据项，如果上述实体表包含与待添加数据项同名的数据项，那么表明实体表中已存在该待添加数据项，再添加同名数据项将会出错，数据处理装置执行不允许添加待添加数据项的步骤；

如果上述实体表不包含与待添加数据项同名的数据项，那么表明实体表中不存在同名数据项，那么可以将待添加数据项添加到上述实体表中。

可选的，在图1所示实施例的基础上，根据数据项生成数据接口文件具体可以通过以下方式实现：根据中间表的有效数据项，生成数据接口文件。

本实施例中，有效数据项是指除标记为删除状态的数据项之外的其他数据项，无效数据项是指标记为删除状态的数据项。数据处理装置创建中间表之后，若中间表包含标记为删除状态的数据项，数据处理装置可以不选取中间表的无效数据项，选取有效数据项生成数据接口文件。

可选的，在根据数据项创建中间表以及实体表之后，上述方法还包括：根据中间表创建元数据。

本实施例中，由于业务调用数据可以从中间表对应的实体表中调取，业务数据的存储信息发生了变化，数据处理装置可以根据中间表创建元数据，便于用户调用数据。

进一步的，在根据中间表创建元数据之后，上述方法还包括：获取中间表的待添加数据项；将上述待添加数据项添加到中间表，并根据上述待添加数据项，修改元数据。

本实施例中，当中间表增加了数据项时，数据处理装置可以修改元数据，以保持中间表与元数据中数据的一致性。

进一步的，在根据中间表创建元数据之后，上述方法还包括：选取中间表的待删除数据项，删除待删除数据项，并根据待删除数据项修改元数据。

本实施例中，当中间表删除了数据项时，数据处理装置可以修改元数据，以保持中间表与元数据中数据的一致性。

为便于理解，下面以一个具体应用场景对本发明提供的数据处理方法进行详细说明：

数据项以“商品”，“单价”，“月销售量”，“月销售额”为例，根据上述数据项创建中间表以及实体表，如下表所示：

商品	单价	月销售量	月销售额

可选的，数据处理装置可以将选取“月销售额”为待删除数据项，在中间表中将“月销售额”标记为删除状态，在实体表中保留。

可选的，数据处理装置还可以获取新数据项，以“进货人”为例，判断在上述实体表中是否存在“进货人”，由上述实体表可以确定上述实体表不存在“进货人”，可以在中间表以及实体表中添加“进货人”，如果新数据项为“单价”，数据处理装置可以确定上表存在“单价”，不允许在上述实体表中添加“单价”。

根据上述数据项查询数据库，确定源数据表，源数据表以表1，表2为例，请参阅下表：

商品编号	商品名称	商品类型	单价
				1	速冻水饺	食品	35
2	女裙	服装	200
				3	男外套	服装	200
4	钢笔	文具	20

表1

商品编号	商品名称	月销量
			1	速冻水饺	500
2	女裙	300
			3	男外套	200
4	钢笔	200

表2

将表1，表2的数据导入实体表，由于月销量额为新增数据项，则根据新增数据项的计算规则，获取新增数据项对应的数据列。导入数据的实体表如下所示：

商品名称	单价	月销售量	月销售额
				速冻水饺	35	500	17500
女裙	200	300	60000
				男外套	200	200	40000
钢笔	20	200	4000

可选的，如果实体表和表1中存在同名数据项，例如“商品名称”，实体表中“商品名称”定义长度为20字节，表1中“商品名称”长度为10字节，那么数据处理装置可以根据表1的数据项长度，将实体表中的“商品名称”的数据项长度修改为10字节。

可选的，数据处理装置还可以根据“商品名称”，“单价”，“月销售量”，“月销售额”等数据项，生成并显示数据接口文件，数据接口文件可以随中间表的更新而更新，因此用户可以根据数据接口文件执行应用程序，从实体表获取数据，从而提高数据处理效率。

基于上述数据处理方法，本发明提供一种数据处理装置200，请参阅图2，数据处理装置200包括：

获取模块201，用于获取数据项；

创建模块202，用于根据数据项创建中间表以及实体表；

导入数据模块203，用于根据数据项查询数据库，确定数据库中的源数据表，将源数据表的数据导入实体表；

生成模块204，用于根据数据项生成数据接口文件；

显示模块205，用于显示数据接口文件；

执行模块206，用于根据数据接口文件调用应用程序，以使得应用程序从实体表中获取数据。

可选的，数据处理装置200还包括：

删除模块301，用于在根据数据项创建实体表之后，选取中间表中至少一个数据项作为待删除数据项，将待删除数据项标记为删除状态，并在实体表中保留待删除数据项对应的数据项。

可选的，在本发明的一些实施例中，获取模块201，还用于在根据数据项创建实体表之后，获取目标数据项；

数据处理装置200还包括：

判断模块302，用于判断实体表是否包含与目标数据项的名称相同的数据项，若否，则触发添加模块303执行在实体表中添加目标数据项的步骤，若是，则触发处理模块304执行不允许将目标数据项添加到实体表的步骤；

添加模块303，用于在实体表中添加目标数据项；

处理模块304，用于不允许将将目标数据项添加到实体表。

可选的，在本发明的一些实施例中，获取模块201，用于获取实体表与源数据表中的同名数据项；

数据处理装置200还包括：

修改模块305，用于若同名数据项的数据项格式不同，则根据源数据表的数据项格式，对实体表的数据项格式进行修改。

可选的，生成模块204具体用于根据中间表的有效数据项，生成数据接口文件，有效数据项是指除标记为删除状态的数据项之外的其他数据项。

可选的，创建模块，还用于根据中间表创建元数据。

可选的，数据处理装置200还包括：

元数据修改模块，用于增加中间表的数据项，根据增加的数据项，修改元数据；或，

上述元数据修改模块，还用于删除中间表的数据项，根据删除的数据项，修改元数据。

为便于理解，下面以一个具体应用场景对本发明提供的数据处理装置中各模块之间的交互进行详细说明：

获取模块201获取数据项，数据项以“商品”，“单价”，“月销售量”，“月销售额”为例，创建模块202根据上述数据项创建中间表以及实体表，中间表以及实体表如下所示：

商品	单价	月销售量	月销售额

可选的，在创建中间表以及实体表之后，删除模块301可以将选取“月销售额”为待删除数据项，在中间表中将“月销售额”标记为删除状态，在实体表中保留。

可选的，获取模块201还可以获取新数据项，以“进货人”为例，判断模块302判断在上述实体表中是否存在“进货人”，判断模块302可以确定上述实体表不存在“进货人”，添加模块303可以在中间表以及实体表中添加“进货人”，如果新数据项为“单价”，判断模块302可以确定上表存在“单价”，处理模块304不允许在上述实体表中添加“单价”。

导入数据模块203根据“商品”，“单价”，“月销售量”，“月销售额”等数据项查询数据库，确定源数据表，源数据表以表1，表2为例，表1和表2如下所示：

表1

表2

导入数据模块203将表1，表2的数据导入实体表，并存储在本地。由于月销量额为新增数据项，则根据新增数据项的计算规则，获取新增数据项对应的数据列。导入数据的实体表如下所示：

可选的，如果实体表和表1中存在同名数据项，例如“商品名称”，实体表中“商品名称”定义长度为20字节，表1中“商品名称”长度为10字节，那么修改模块305可以根据表1的数据项长度，将实体表中的“商品名称”的数据项长度修改为10字节。

可选的，生成模块204可以根据“商品名称”，“单价”，“月销售量”，“月销售额”等数据项，生成数据接口文件，显示模块205显示数据接口文件，执行模块206可以根据数据接口文件调用应用程序，以使得应用程序从实体表中获取数据。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims

1.一种数据处理方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，在所述根据所述数据项创建中间表以及实体表之后，所述方法还包括：

3.根据权利要求1所述的方法，其特征在于，在所述根据所述数据项创建中间表以及实体表之后，所述方法还包括：

获取目标数据项；

4.根据权利要求1至3中任一项所述的方法，其特征在于，在所述将源数据表的数据导入所述实体表之前，所述方法还包括：

获取所述实体表与所述源数据表中的同名数据项；

5.根据权利要求1至3中任一项所述的方法，其特征在于，所述根据所述数据项生成数据接口文件包括：

6.一种数据处理装置，其特征在于，包括：

获取模块，用于获取数据项；

生成模块，用于根据所述数据项生成数据接口文件；

显示模块，用于显示所述数据接口文件；

7.根据权利要求6所述的装置，其特征在于，所述装置还包括：

8.根据权利要求6所述的装置，其特征在于，所述获取模块还用于获取目标数据项；

所述装置还包括：

添加模块，用于在所述实体表中添加所述目标数据项；

9.根据权利要求6至8中任一项所述的装置，其特征在于，

所述获取模块，用于获取所述实体表与所述源数据表中的同名数据项；

所述装置还包括：

10.根据权利要求6至8中任一项所述的装置，其特征在于，所述生成模块具体用于根据所述中间表的有效数据项，生成数据接口文件，所述有效数据项是指除标记为删除状态的数据项之外的其他数据项。