CN107908631A - 数据处理方法、装置、存储介质和计算机设备 - Google Patents

Abstract

本发明涉及一种数据处理方法、装置、存储介质和计算机设备，所述方法包括：获取携带数据库标识和数据表参数的数据同步请求；调用所述数据库标识关联的接口，连接所述数据库标识对应的数据库；按照所述数据库中所述数据表参数相应的数据表的表结构生成建表语句；获取与所述数据同步请求指定的数据同步方式匹配的脚本模板；采用所述数据表参数替换所述脚步模板中相应的模板参数生成目标脚本；通过所述目标脚本，将所述数据同步请求指定的数据同步至根据所述建表语句建立的同步表中。本申请提供的方案提高了数据处理效率。

Description

数据处理方法、装置、存储介质和计算机设备

技术领域

本发明涉及计算机技术领域，特别是涉及一种数据处理方法、装置、存储介质和计算机设备。

背景技术

随着计算机技术的发展，各行各业的数据量越来越大，对用于存储数据的数据库的存储容量与性能要求越来越高。在对业务相关数据进行处理与分析时，会涉及到不同业务数据库中的数据，若直接在业务数据库中实时进行数据处理与分析，会对业务数据库造成很大压力，导致数据无法处理或出错的问题。

传统的处理方式是通过开发人员人工开发代码实现将需要处理的数据同步到存储容量大的数据仓库进行处理，在处理完成之后再推送回业务数据库。然而传统的这种方式需要消耗大量的人力物力，而且引入了大量的工作量，导致数据处理效率低的问题。

发明内容

基于此，有必要针对传统的数据同步方式导致的数据处理效率低的问题，提供一种数据处理方法、装置、存储介质和计算机设备。

一种数据处理方法，所述方法包括：

获取携带数据库标识和数据表参数的数据同步请求；

调用所述数据库标识关联的接口，连接所述数据库标识对应的数据库；

按照所述数据库中所述数据表参数相应的数据表的表结构生成建表语句；

获取与所述数据同步请求指定的数据同步方式匹配的脚本模板；

采用所述数据表参数替换所述脚步模板中相应的模板参数生成目标脚本；

通过所述目标脚本，将所述数据同步请求指定的数据同步至根据所述建表语句建立的同步表中。

在一个实施例中，所述获取与所述数据同步请求指定的数据同步方式匹配的脚本模板之前，所述方法还包括：

检测所述数据表中的参数字段及所述参数字段所对应的字段类型；

当检测到所述参数字段和/或所述字段类型发生变化时，将所述数据表相应的数据表标识发送至管理员标识所对应的终端；

当未检测到所述参数字段和/或所述字段类型发生变化时，执行所述获取与所述数据同步请求指定的数据同步方式匹配的脚本模板的步骤。

在一个实施例中，所述方法还包括：

确定与预设的业务量评估指标相应的评估方式，并确定所述同步表中与预设的业务量评估指标相应的参数字段；

根据确定的所述评估方式和确定的所述参数字段，按业务类型评估所述预设的业务量评估指标对应的评估值；

根据按业务类型评估的所述评估值生成业务量报表。

在一个实施例中，所述根据按业务类型评估的所述评估值生成业务量报表，包括：

当预设的业务量评估指标的数量多于一个时，将各所述预设的业务量评估指标对应的、且按业务类型评估的所述评估值作为统计列表的项目值，按业务类型排列生成各所述预设的业务量评估指标相应的统计列表；

根据各所述业务量评估指标之间的从属关系生成指标目录树；所述指标目录树包括分级排列的业务量评估指标；

将各所述业务量评估指标相应的统计列表，关联至所述目录树中相应的业务量评估指标，生成业务量报表。

在一个实施例中，所述方法还包括：

确定所述业务量报表中的业务量评估指标所属的业务类型；

获取与所述业务类型关联的用户标识；

根据所述用户标识推送所述业务量报表。

一种数据处理装置，所述装置包括：

第一获取模块，用于获取携带数据库标识和数据表参数的数据同步请求；

调用模块，用于调用所述数据库标识关联的接口，连接所述数据库标识对应的数据库；

第一生成模块，用于按照所述数据库中所述数据表参数相应的数据表的表结构生成建表语句；

第二获取模块，用于获取与所述数据同步请求指定的数据同步方式匹配的脚本模板；

第二生成模块，用于采用所述数据表参数替换所述脚步模板中相应的模板参数生成目标脚本；

同步模块，用于通过所述目标脚本，将所述数据同步请求指定的数据同步至根据所述建表语句建立的同步表中。

在一个实施例中，所述装置还包括：

检测模块，用于检测所述数据表中的参数字段及所述参数字段所对应的字段类型；当检测到所述参数字段和/或所述字段类型发生变化时，将所述数据表相应的数据表标识发送至管理员标识所对应的终端；当未检测到所述参数字段和/或所述字段类型发生变化时，执行所述获取与所述数据同步请求指定的数据同步方式匹配的脚本模板的步骤。

在一个实施例中，所述装置还包括：

评估模块，用于确定与预设的业务量评估指标相应的评估方式，并确定所述同步表中与预设的业务量评估指标相应的参数字段；根据确定的所述评估方式和确定的所述参数字段，按业务类型评估所述预设的业务量评估指标对应的评估值；根据按业务类型评估的所述评估值生成业务量报表。

一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机可读指令，所述计算机可读指令被处理器执行时，使得所述处理器执行以下步骤：

获取携带数据库标识和数据表参数的数据同步请求；

调用所述数据库标识关联的接口，连接所述数据库标识对应的数据库；

按照所述数据库中所述数据表参数相应的数据表的表结构生成建表语句；

获取与所述数据同步请求指定的数据同步方式匹配的脚本模板；

采用所述数据表参数替换所述脚步模板中相应的模板参数生成目标脚本；

通过所述目标脚本，将所述数据同步请求指定的数据同步至根据所述建表语句建立的同步表中。

一种计算机设备，包括存储器和处理器，所述存储器中储存有计算机可读指令，所述计算机可读指令被所述处理器执行时，使得所述处理器执行以下步骤：

获取携带数据库标识和数据表参数的数据同步请求；

调用所述数据库标识关联的接口，连接所述数据库标识对应的数据库；

按照所述数据库中所述数据表参数相应的数据表的表结构生成建表语句；

获取与所述数据同步请求指定的数据同步方式匹配的脚本模板；

采用所述数据表参数替换所述脚步模板中相应的模板参数生成目标脚本；

通过所述目标脚本，将所述数据同步请求指定的数据同步至根据所述建表语句建立的同步表中。

上述数据处理方法、装置、存储介质和计算机设备，在获取到数据同步请求后，即可自动按照数据同步请求携带的数据库标识相应的数据库中，与数据同步请求携带的数据表参数相应的数据表的表结构，生成建表语句建立的同步表。再自动采用该数据表参数，替换数据同步请求指定的数据同步方式匹配的脚步模板中相应的模板参数，生成目标脚本，即可通过目标脚本，将数据同步请求指定的数据同步至同步表中，进而在同步表中进行数据处理，从而避免了人工操作引入的工作量，提高了数据处理效率。

附图说明

图1为一个实施例中数据处理方法的应用环境图；

图2为一个实施例中计算机设备的内部结构示意图；

图3为一个实施例中数据处理方法的流程示意图；

图4为一个实施例中业务量报表的示意图；

图5为另一个实施例中数据处理方法的流程示意图；

图6为一个实施例中数据处理装置的结构框图；

图7为另一个实施例中数据处理装置的结构框图；

图8为又一个实施例中数据处理装置的结构框图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

图1为一个实施例中数据处理方法的应用环境图。参照图1，该数据处理方法应用于数据处理系统。数据处理系统包括业务服务器110和数据处理服务器120。业务服务器110和数据处理服务器120之间可通过网络连接。数据处理服务器120获取携带数据库标识和数据表参数的数据同步请求，调用数据库标识关联的接口连接数据库标识对应的数据库，该数据库在业务服务器110上。数据处理服务器120再按照该数据库中数据表参数相应的数据表的表结构生成建表语句，并获取与数据同步请求指定的数据同步方式匹配的脚本模板，采用数据表参数替换脚步模板中相应的模板参数生成目标脚本，通过目标脚本，将数据同步请求指定的数据同步至根据建表语句建立的同步表中，以进行后续的数据处理。

图2为一个实施例中计算机设备的内部结构示意图。该计算机设备可以是图1中数据处理服务器120。如图2所示，该计算机设备包括通过系统总线连接的处理器、非易失性存储介质、内存储器和网络接口。其中，该计算机设备的非易失性存储介质可存储操作系统和计算机可执行指令，该计算机可执行指令被执行时，可使得处理器执行一种数据处理方法。该计算机设备的处理器用于提供计算和控制能力，支撑整个计算机设备的运行。该内存储器中可储存有计算机可执行指令，该计算机可执行指令被处理器执行时，该计算机可执行指令用于实现以下各实施例所提供的一种数据处理方法。该计算机设备还可通过网络与用户终端和/或坐席终端连接，接收用户终端和/或坐席终端发送的语音数据。本领域技术人员可以理解，图2中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的终端的限定，具体的终端可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

如图3所示，在一个实施例中，提供了一种数据处理方法。本实施例主要以该方法应用于上述图1中的数据处理服务器120来举例说明。参照图3，该数据处理方法具体包括如下步骤：

S302，获取携带数据库标识和数据表参数的数据同步请求。

其中，数据库标识用于唯一标识一个数据库，可以是包括数字、字母和符号中的至少一种字符的字符串。在本实施例中，数据库是与业务相关的业务数据库。业务数据库比如养老险契约数据库或者养老险保全数据库等。数据表参数是数据库中存储的数据表的参数。数据表参数比如数据表表名或者数据库连接串等。

数据同步请求是用于进行数据同步的请求。在本实施例中，数据同步请求是用于请求将业务服务器中业务数据库的数据同步到数据处理服务器中的数据仓库的请求。数据仓库比如Hadoop Hive等。Hadoop是一个由Apache软件基金会(Apache SoftwareFoundation，简称为ASF)所开发的分布式系统基础架构。

在一个实施例中，用户终端可以提供配置界面，获取用户在选定数据库标识和数据表参数之后发起的数据同步请求。终端在获取发起的数据同步请求后，将用户选定的数据库标识和数据表参数携带在数据同步请求中发送至数据处理服务器，以使得数据处理服务器获取携带数据库标识和数据表参数的数据同步请求。

在一个实施例中，用户也可在通过终端提供的配置界面发起数据同步请求时，同时配置数据同步开始时间。用户终端在获取用户发起的数据同步请求后，将用户选定的数据库标识、数据表参数以及数据同步开始时间携带在数据同步请求中发送至数据处理服务器，以使得数据处理服务器获取携带数据库标识和数据表参数的数据同步请求，并在时间达到数据同步开始时间时开始数据同步。

其中，数据同步开始时间可以是一次性的时间，比如2017年6月16日0点0分0秒。数据同步开始时间也可以是周期性的时间，比如每个自然日的0点0分0秒，或者每周第一个自然日的0点0分0秒等。

在一个实施例中，数据同步请求可携带多个数据库标识，每个数据库标识对应各自的数据表参数。每个数据库标识对应的数据表参数，可以是相同的数据表参数，也可以不同数据表参数。

S304，调用数据库标识关联的接口，连接数据库标识对应的数据库。

具体地，数据处理服务器针对不同业务类型设置了与数据库对应的可调用的接口，为不同的业务类型分配了对应相同或不同数量的接口调用资源，并通过数据库标识建立了与相应接口的关联关系。数据处理服务器可在确定了数据库标识后，调用与该数据库标识关联的接口，与该数据库标识对应的数据库建立连接。

其中，不同的业务类型对应的数据库可以是不同类型的数据库，比如养老险契约数据库为ORCLE数据库，养老险保全数据库为MYSQL数据库等。数据处理服务器与不同类型的数据库连接所调用的接口不同。

S306，按照数据库中数据表参数相应的数据表的表结构生成建表语句。

其中，数据表是数据库中存储数据的位置，是一种结构化的文件。表结构用于定义一个数据表的字段、类型、主键、外键和索引等。建表语句是用于建立数据表的语句。

具体地，数据处理服务器按照数据同步请求中携带的数据表参数确定需要进行同步的数据表，读取该数据表的表结构，按照该表结构生成建表语句。

S308，获取与数据同步请求指定的数据同步方式匹配的脚本模板。

其中，数据同步方式包括全表同步方式、增量同步方式以及分区同步方式等。全表同步方式是将数据表中的数据全部进行同步。增量同步方式是同步发生变化的数据。数据表中存储的数据会相应记录该数据最近一次更新的时间。数据处理服务器可在进行数据同步时将数据表中数据相应记录的时间与上次进行同步的时间比较，若数据表中数据相应记录的时间晚于上次进行同步的时间，则判定该数据为发生变化的数据。分区同步方式是仅同步数据表中部分区域的数据。比如数据表中指定字段的数据等。

具体地，开发人员可事先按照数据同步方式，相应配置进行数据同步的脚本模板，并将配置的脚本模板对应于相应的数据同步方式存储在数据处理服务器中。数据处理服务器在获取到数据同步请求后，确定该数据同步请求所指定的数据同步方式，再查找与该数据同步方式对应存储的脚本模板。

S310，采用数据表参数替换脚步模板中相应的模板参数生成目标脚本。

具体地，脚本模板中的模板参数，用于标记该模板参数所在位置处应当添加的参数。数据处理服务器将脚步模板中的模板参数，替换为数据同步请求中携带的相应的数据表参数，生成目标脚本。

比如，模板参数“数据表表名”，那么“数据表表名”在脚步模板中所在位置处的字符应为实际需要进行数据同步的数据表的真实表名。假设实际需要进行数据同步的数据表的真实表名为“Table A”，那么，数据处理服务器将脚步模板中的“数据表表名”替换为“Table A”。

S312，通过目标脚本，将数据同步请求指定的数据同步至根据建表语句建立的同步表中。

其中，数据同步请求指定的数据，是根据数据同步请求指定的数据同步方式确定的数据。全表同步方式对应的需同步的数据是数据表中所有的数据。增量同步方式对应的需同步的数据，是数据表中在前一次同步时间到当前时间的时间间隔内发生变化的数据。分区同步方式对应的需同步的数据是数据同步请求指定的字段的数据。

具体地，数据处理服务器可先执行建表语句在数据处理服务器的数据仓库中建立同步表，再运行目标脚本将数据同步请求指定的数据同步至根据建表语句建立的同步表中。

上述数据处理方法，在获取到数据同步请求后，即可自动按照数据同步请求携带的数据库标识相应的数据库中，与数据同步请求携带的数据表参数相应的数据表的表结构，生成建表语句建立的同步表。再自动采用该数据表参数，替换数据同步请求指定的数据同步方式匹配的脚步模板中相应的模板参数，生成目标脚本，即可通过目标脚本，将数据同步请求指定的数据同步至同步表中，进而在同步表中进行数据处理，从而避免了人工操作引入的工作量，提高了数据处理效率。

在一个实施例中，在步骤S308之前，该数据处理方法还包括：检测数据表中的参数字段及参数字段所对应的字段类型；当检测到参数字段和/或字段类型发生变化时，将数据表相应的数据表标识发送至管理员标识所对应的终端；当未检测到参数字段和/或字段类型发生变化时，执行获取与数据同步请求指定的数据同步方式匹配的脚本模板的步骤。

其中，参数字段是数据表中某一列或者某一行数据的标识。比如，某一列数据为养老险保单的保单号，那么这一列数据对应的参数字段为保单号。字段类型是参数字段下存储的数据的数据类型，如整型或者浮点型等。比如，保单号的字段类型为整型。数据表标识用于唯一标识一个数据表，管理员标识用于唯一标识一个管理员。数据表标识和管理员标识均可以是包括数字、字母和符号中的至少一种字符的字符串。管理员是对脚本模板进行维护的开发人员，可在得知数据表中的参数字段及参数字段所对应的字段类型发生变化时，对脚本模板进行相应调整。

具体地，数据处理服务器可定时获取当前数据表中的参数字段及参数字段所对应的字段类型，将当前获取的参数字段及参数字段所对应的字段类型，与在先存储的参数字段及参数字段所对应的字段类型比较。当检测到参数字段和/或字段类型发生变化时，数据处理服务器可将数据表相应的数据表标识发送至管理员标识所对应的终端，以使管理员通过其所对应的终端相应调整脚本模板。当未检测到参数字段和/或字段类型发生变化时，数据处理服务器可获取与数据同步请求指定的数据同步方式匹配的脚本模板。

在本实施例中，通过自动检测数据表中的参数字段及参数字段所对应的字段类型的变化情况，在数据表中的参数字段及参数字段所对应的字段类型发生变化时，及时将发生变化的数据表对应的数据表标识发送给管理员标识所对应的终端，以通知管理员对脚本模板进行相应调整，从而保证脚本模板的有效性，在在数据表中的参数字段及参数字段所对应的字段类型未发生变化时，才获取与数据同步请求指定的数据同步方式匹配的脚本模板，保证获取的是有效的脚本模板。

在一个实施例中，该数据处理方法还包括：确定与预设的业务量评估指标相应的评估方式，并确定同步表中与预设的业务量评估指标相应的参数字段；根据确定的评估方式和确定的参数字段，按业务类型评估预设的业务量评估指标对应的评估值；根据按业务类型评估的评估值生成业务量报表。

其中，业务量评估指标反映评估某个时间范围内属于某个业务类型的业务的数量。业务量评估指标所属的业务类型比如养老险契约业务或者养老险保全业务等。业务量评估指标可以按照所属业务类型进行分类。比如属于养老险契约的理赔结案的数量或者属于养老险保全的理赔结案的数量等。业务量评估指标也可以按照统计时间范围进行分类，具体可以是按照每个自然日或者每个自然月等进行统计，比如当日属于养老险契约的理赔结案的数量等。业务量评估指标还可以按照所属地理区域进行分类。比如地理区域为北京的、且属于养老险契约的理赔结案的数量等。

评估方式与业务量评估指标相对应，是按照对应的业务量评估指标所反映的业务类型和评估时间范围进行评估。比如，业务量评估指标为当日属于养老险契约的理赔结案的数量时，反映按照每个自然日评估当日属于养老险契约的理赔结案的数量，对应的评估方式为统计理赔结案的处理时间包括于统计日期的理赔结案的数量。比如，理赔结案的处理时间为2017年6月19日9:24，那么该时间记录包括于统计日期2017年6月19日。

与业务量评估指标相应的参数字段，是与业务量评估指标所反映的业务类型和评估时间范围匹配的参数字段。比如，业务量评估指标为当日属于养老险契约的理赔结案的数量时，与业务量评估指标相应的参数字段为业务类型字段(养老险契约)、案件类型字段(理赔结案)以及时间字段。

具体地，数据处理服务器可预先对业务量评估过程设置对应的业务量评估指标。在完成将数据同步请求指定的数据同步之后，获取预设的业务量评估指标，根据该业务量评估指标所反映的业务类型与评估时间范围确定与预设的业务量评估指标对应的评估方式，再确定同步表中与预设的业务量评估指标相应的参数字段，根据确定的评估方式和确定的参数字段，按业务类型评估预设的业务量评估指标对应的评估值，根据按业务类型评估的评估值生成业务量报表。

在本实施例中，在完成数据同步之后，自动对进行业务量评估，得到与业务量评估指标对应的评估值，再根据这些评估值生成业务量报表，通过该业务量报表以可视形式展示业务情况，使得业务数据处理的效率得到极大提升，给后续业务数据分析与业务工作开展带来极大的便利。

在一个实施例中，根据按业务类型评估的评估值生成业务量报表，包括：当预设的业务量评估指标的数量多于一个时，将各预设的业务量评估指标对应的、且按业务类型评估的评估值作为统计列表的项目值，按业务类型排列生成各预设的业务量评估指标相应的统计列表；根据各业务量评估指标之间的从属关系生成指标目录树；指标目录树包括分级排列的业务量评估指标；将各业务量评估指标相应的统计列表，关联至目录树中相应的业务量评估指标，生成业务量报表。

其中，统计列表是用于记录业务量评估结果的列表。业务量评估指标之间的从属关系，是业务量评估指标所属的业务类型或者案件类型之间的从属关系。比如，“养老险当日新增投保案件量”从属于“养老险当日新增案件量”。指标目录树包括的业务量评估指标是分级按层次排列的。各业务量评估指标所属业务类型为第一级字段，比如“养老险契约”和“养老险保全”，各业务量评估指标所属案件类型为第二级字段，比如“新增案件”和“结案案件”。

具体地，数据处理服务器可在将各预设的业务量评估指标对应的、且按业务类型评估的评估值作为统计列表的项目值，按业务类型排列生成各预设的业务量评估指标相应的统计列表会后，根据各业务量评估指标之间的从属关系生成指标目录树，将各业务量评估指标相应的统计列表，关联至目录树中相应的业务量评估指标，生成业务量报表。

在本实施例中，通过指标目录树的形式生成业务量报表，便于各业务部门快速定位意图查看的业务量评估指标相应的统计列表。

图4示出了一个实施例中业务量报表的示意图。参考图4，该示意图包括指标目录树410。当用户选中“养老险契约，结案案件”该目录项后，在业务量报表的统计列表展示区域展示“养老险契约结案案件评估指标”对应的统计列表。

在一个实施例中，该数据处理方法还包括：确定业务量报表中的业务量评估指标所属的业务类型；获取与业务类型关联的用户标识；根据用户标识推送业务量报表。

具体地，数据处理服务器可通过邮件将业务量报表发送至用户标识所对应的终端。数据处理服务器也可通过短信或者社交公众号等方式将业务量报表发送通知，发送至用户标识所对应的终端。

在本实施例中，自动将业务量报表推送至相关用户，使得相关用户能够及时了解相关的业务状况，以快速开展下一步工作。

如图5所示，在一个具体的实施例中，该数据处理方法具体包括以下步骤：

S502，获取携带数据库标识和数据表参数的数据同步请求。

S504，调用数据库标识关联的接口，连接数据库标识对应的数据库。

S506，按照数据库中数据表参数相应的数据表的表结构生成建表语句。

S508，检测数据表中的参数字段及参数字段所对应的字段类型是否发生变化；若是，则跳转到步骤S510；若否，则跳转到步骤S512。

S510，将数据表相应的数据表标识发送至管理员标识所对应的终端。

S512，获取与数据同步请求指定的数据同步方式匹配的脚本模板；采用数据表参数替换脚步模板中相应的模板参数生成目标脚本。

S514，通过目标脚本，将数据同步请求指定的数据同步至根据建表语句建立的同步表中。

S516，确定与预设的业务量评估指标相应的评估方式，并确定同步表中与预设的业务量评估指标相应的参数字段；根据确定的评估方式和确定的参数字段，按业务类型评估预设的业务量评估指标对应的评估值。

S518，判断预设的业务量评估指标的数量是否多于一个；若是，则跳转到步骤S520；若否，则跳转到步骤S522。

S520，将各预设的业务量评估指标对应的、且按业务类型评估的评估值作为统计列表的项目值，按业务类型排列生成各预设的业务量评估指标相应的统计列表；根据各业务量评估指标之间的从属关系生成指标目录树；指标目录树包括分级排列的业务量评估指标；将各业务量评估指标相应的统计列表，关联至目录树中相应的业务量评估指标，生成业务量报表。

S522，根据按业务类型评估的评估值生成业务量报表。

S524，确定业务量报表中的业务量评估指标所属的业务类型；获取与业务类型关联的用户标识；根据用户标识推送业务量报表。

在本实施例中，在获取到数据同步请求后，即可自动按照数据同步请求携带的数据库标识相应的数据库中，与数据同步请求携带的数据表参数相应的数据表的表结构，生成建表语句建立的同步表。再自动采用该数据表参数，替换数据同步请求指定的数据同步方式匹配的脚步模板中相应的模板参数，生成目标脚本，即可通过目标脚本，将数据同步请求指定的数据同步至同步表中，进而在同步表中进行数据处理，从而避免了人工操作引入的工作量，提高了数据处理效率。

如图6所示，在一个实施例中，提供了一种数据处理装置600，该装置包括：第一获取模块601、调用模块602、第一生成模块603、第二获取模块604、第二生成模块605和同步模块606。

第一获取模块601，用于获取携带数据库标识和数据表参数的数据同步请求。

调用模块602，用于调用数据库标识关联的接口，连接数据库标识对应的数据库。

第一生成模块603，用于按照数据库中数据表参数相应的数据表的表结构生成建表语句。

第二获取模块604，用于获取与数据同步请求指定的数据同步方式匹配的脚本模板。

第二生成模块605，用于采用数据表参数替换脚步模板中相应的模板参数生成目标脚本。

同步模块606，用于通过目标脚本，将数据同步请求指定的数据同步至根据建表语句建立的同步表中。

上述数据处理装置600，在获取到数据同步请求后，即可自动按照数据同步请求携带的数据库标识相应的数据库中，与数据同步请求携带的数据表参数相应的数据表的表结构，生成建表语句建立的同步表。再自动采用该数据表参数，替换数据同步请求指定的数据同步方式匹配的脚步模板中相应的模板参数，生成目标脚本，即可通过目标脚本，将数据同步请求指定的数据同步至同步表中，进而在同步表中进行数据处理，从而避免了人工操作引入的工作量，提高了数据处理效率。

如图7所示，在一个实施例中，数据处理装置600还包括：检测模块607。

检测模块607，用于检测数据表中的参数字段及参数字段所对应的字段类型；当检测到参数字段和/或字段类型发生变化时，将数据表相应的数据表标识发送至管理员标识所对应的终端；当未检测到参数字段和/或字段类型发生变化时，执行获取与数据同步请求指定的数据同步方式匹配的脚本模板的步骤。

在本实施例中，通过自动检测数据表中的参数字段及参数字段所对应的字段类型的变化情况，在数据表中的参数字段及参数字段所对应的字段类型发生变化时，及时将发生变化的数据表对应的数据表标识发送给管理员标识所对应的终端，以通知管理员对脚本模板进行相应调整，从而保证脚本模板的有效性，在在数据表中的参数字段及参数字段所对应的字段类型未发生变化时，才获取与数据同步请求指定的数据同步方式匹配的脚本模板，保证获取的是有效的脚本模板。

如图8所示，在一个实施例中，数据处理装置600还包括：评估模块608。

评估模块608，用于确定与预设的业务量评估指标相应的评估方式，并确定同步表中与预设的业务量评估指标相应的参数字段；根据确定的评估方式和确定的参数字段，按业务类型评估预设的业务量评估指标对应的评估值；根据按业务类型评估的评估值生成业务量报表。

在本实施例中，在完成数据同步之后，自动对进行业务量评估，得到与业务量评估指标对应的评估值，再根据这些评估值生成业务量报表，通过该业务量报表以可视形式展示业务情况，使得业务数据处理的效率得到极大提升，给后续业务数据分析与业务工作开展带来极大的便利。

在一个实施例中，评估模块608还用于当预设的业务量评估指标的数量多于一个时，将各预设的业务量评估指标对应的、且按业务类型评估的评估值作为统计列表的项目值，按业务类型排列生成各预设的业务量评估指标相应的统计列表；根据各业务量评估指标之间的从属关系生成指标目录树；指标目录树包括分级排列的业务量评估指标；将各业务量评估指标相应的统计列表，关联至目录树中相应的业务量评估指标，生成业务量报表。

在本实施例中，通过指标目录树的形式生成业务量报表，便于各业务部门快速定位意图查看的业务量评估指标相应的统计列表。

在一个实施例中，评估模块608还用于确定业务量报表中的业务量评估指标所属的业务类型；获取与业务类型关联的用户标识；根据用户标识推送业务量报表。

在本实施例中，自动将业务量报表推送至相关用户，使得相关用户能够及时了解相关的业务状况，以快速开展下一步工作。

在一个实施例中，提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机可执行指令，计算机可执行指令被处理器执行时，使得处理器执行以下步骤：获取携带数据库标识和数据表参数的数据同步请求；调用数据库标识关联的接口，连接数据库标识对应的数据库；按照数据库中数据表参数相应的数据表的表结构生成建表语句；获取与数据同步请求指定的数据同步方式匹配的脚本模板；采用数据表参数替换脚步模板中相应的模板参数生成目标脚本；通过目标脚本，将数据同步请求指定的数据同步至根据建表语句建立的同步表中。

在一个实施例中，计算机可执行指令使得处理器执行获取与数据同步请求指定的数据同步方式匹配的脚本模板之前，还执行以下步骤：检测数据表中的参数字段及参数字段所对应的字段类型；当检测到参数字段和/或字段类型发生变化时，将数据表相应的数据表标识发送至管理员标识所对应的终端；当未检测到参数字段和/或字段类型发生变化时，执行获取与数据同步请求指定的数据同步方式匹配的脚本模板的步骤。

在一个实施例中，计算机可执行指令还使得处理器执行以下步骤：确定与预设的业务量评估指标相应的评估方式，并确定同步表中与预设的业务量评估指标相应的参数字段；根据确定的评估方式和确定的参数字段，按业务类型评估预设的业务量评估指标对应的评估值；根据按业务类型评估的评估值生成业务量报表。

在一个实施例中，根据按业务类型评估的评估值生成业务量报表，包括：当预设的业务量评估指标的数量多于一个时，将各预设的业务量评估指标对应的、且按业务类型评估的评估值作为统计列表的项目值，按业务类型排列生成各预设的业务量评估指标相应的统计列表；根据各业务量评估指标之间的从属关系生成指标目录树；指标目录树包括分级排列的业务量评估指标；将各业务量评估指标相应的统计列表，关联至目录树中相应的业务量评估指标，生成业务量报表。

在一个实施例中，计算机可执行指令还使得处理器执行以下步骤：确定业务量报表中的业务量评估指标所属的业务类型；获取与业务类型关联的用户标识；根据用户标识推送业务量报表。

上述存储介质，在获取到数据同步请求后，即可自动按照数据同步请求携带的数据库标识相应的数据库中，与数据同步请求携带的数据表参数相应的数据表的表结构，生成建表语句建立的同步表。再自动采用该数据表参数，替换数据同步请求指定的数据同步方式匹配的脚步模板中相应的模板参数，生成目标脚本，即可通过目标脚本，将数据同步请求指定的数据同步至同步表中，进而在同步表中进行数据处理，从而避免了人工操作引入的工作量，提高了数据处理效率。

在一个实施例中，提供了一种计算机设备，包括存储器和处理器，存储器中储存有计算机可执行指令，计算机可执行指令被处理器执行时，使得处理器执行以下步骤：获取携带数据库标识和数据表参数的数据同步请求；调用数据库标识关联的接口，连接数据库标识对应的数据库；按照数据库中数据表参数相应的数据表的表结构生成建表语句；获取与数据同步请求指定的数据同步方式匹配的脚本模板；采用数据表参数替换脚步模板中相应的模板参数生成目标脚本；通过目标脚本，将数据同步请求指定的数据同步至根据建表语句建立的同步表中。

在一个实施例中，计算机可执行指令使得处理器执行获取与数据同步请求指定的数据同步方式匹配的脚本模板之前，还执行以下步骤：检测数据表中的参数字段及参数字段所对应的字段类型；当检测到参数字段和/或字段类型发生变化时，将数据表相应的数据表标识发送至管理员标识所对应的终端；当未检测到参数字段和/或字段类型发生变化时，执行获取与数据同步请求指定的数据同步方式匹配的脚本模板的步骤。

在一个实施例中，计算机可执行指令还使得处理器执行以下步骤：确定与预设的业务量评估指标相应的评估方式，并确定同步表中与预设的业务量评估指标相应的参数字段；根据确定的评估方式和确定的参数字段，按业务类型评估预设的业务量评估指标对应的评估值；根据按业务类型评估的评估值生成业务量报表。

在一个实施例中，根据按业务类型评估的评估值生成业务量报表，包括：当预设的业务量评估指标的数量多于一个时，将各预设的业务量评估指标对应的、且按业务类型评估的评估值作为统计列表的项目值，按业务类型排列生成各预设的业务量评估指标相应的统计列表；根据各业务量评估指标之间的从属关系生成指标目录树；指标目录树包括分级排列的业务量评估指标；将各业务量评估指标相应的统计列表，关联至目录树中相应的业务量评估指标，生成业务量报表。

在一个实施例中，计算机可执行指令还使得处理器执行以下步骤：确定业务量报表中的业务量评估指标所属的业务类型；获取与业务类型关联的用户标识；根据用户标识推送业务量报表。

上述计算机设备，在获取到数据同步请求后，即可自动按照数据同步请求携带的数据库标识相应的数据库中，与数据同步请求携带的数据表参数相应的数据表的表结构，生成建表语句建立的同步表。再自动采用该数据表参数，替换数据同步请求指定的数据同步方式匹配的脚步模板中相应的模板参数，生成目标脚本，即可通过目标脚本，将数据同步请求指定的数据同步至同步表中，进而在同步表中进行数据处理，从而避免了人工操作引入的工作量，提高了数据处理效率。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种数据处理方法，所述方法包括：

获取携带数据库标识和数据表参数的数据同步请求；

调用所述数据库标识关联的接口，连接所述数据库标识对应的数据库；

按照所述数据库中所述数据表参数相应的数据表的表结构生成建表语句；

获取与所述数据同步请求指定的数据同步方式匹配的脚本模板；

采用所述数据表参数替换所述脚步模板中相应的模板参数生成目标脚本；

通过所述目标脚本，将所述数据同步请求指定的数据同步至根据所述建表语句建立的同步表中。

2.根据权利要求1所述的方法，其特征在于，所述获取与所述数据同步请求指定的数据同步方式匹配的脚本模板之前，所述方法还包括：

检测所述数据表中的参数字段及所述参数字段所对应的字段类型；

当检测到所述参数字段和/或所述字段类型发生变化时，将所述数据表相应的数据表标识发送至管理员标识所对应的终端；

当未检测到所述参数字段和/或所述字段类型发生变化时，执行所述获取与所述数据同步请求指定的数据同步方式匹配的脚本模板的步骤。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

确定与预设的业务量评估指标相应的评估方式，并确定所述同步表中与预设的业务量评估指标相应的参数字段；

根据确定的所述评估方式和确定的所述参数字段，按业务类型评估所述预设的业务量评估指标对应的评估值；

根据按业务类型评估的所述评估值生成业务量报表。

4.根据权利要求3所述的方法，其特征在于，所述根据按业务类型评估的所述评估值生成业务量报表，包括：

当预设的业务量评估指标的数量多于一个时，将各所述预设的业务量评估指标对应的、且按业务类型评估的所述评估值作为统计列表的项目值，按业务类型排列生成各所述预设的业务量评估指标相应的统计列表；

根据各所述业务量评估指标之间的从属关系生成指标目录树；所述指标目录树包括分级排列的业务量评估指标；

将各所述业务量评估指标相应的统计列表，关联至所述目录树中相应的业务量评估指标，生成业务量报表。

5.根据权利要求3或4所述的方法，其特征在于，所述方法还包括：

确定所述业务量报表中的业务量评估指标所属的业务类型；

获取与所述业务类型关联的用户标识；

根据所述用户标识推送所述业务量报表。

6.一种数据处理装置，所述装置包括：

第一获取模块，用于获取携带数据库标识和数据表参数的数据同步请求；

调用模块，用于调用所述数据库标识关联的接口，连接所述数据库标识对应的数据库；

第一生成模块，用于按照所述数据库中所述数据表参数相应的数据表的表结构生成建表语句；

第二获取模块，用于获取与所述数据同步请求指定的数据同步方式匹配的脚本模板；

第二生成模块，用于采用所述数据表参数替换所述脚步模板中相应的模板参数生成目标脚本；

同步模块，用于通过所述目标脚本，将所述数据同步请求指定的数据同步至根据所述建表语句建立的同步表中。

7.根据权利要求6所述的装置，其特征在于，所述装置还包括：

检测模块，用于检测所述数据表中的参数字段及所述参数字段所对应的字段类型；当检测到所述参数字段和/或所述字段类型发生变化时，将所述数据表相应的数据表标识发送至管理员标识所对应的终端；当未检测到所述参数字段和/或所述字段类型发生变化时，执行所述获取与所述数据同步请求指定的数据同步方式匹配的脚本模板的步骤。

8.根据权利要求6所述的装置，其特征在于，所述装置还包括：

评估模块，用于确定与预设的业务量评估指标相应的评估方式，并确定所述同步表中与预设的业务量评估指标相应的参数字段；根据确定的所述评估方式和确定的所述参数字段，按业务类型评估所述预设的业务量评估指标对应的评估值；根据按业务类型评估的所述评估值生成业务量报表。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机可读指令，所述计算机可读指令被处理器执行时，使得所述处理器执行如权利要求1至4中任一项所述的方法的步骤。

10.一种计算机设备，包括存储器和处理器，所述存储器中储存有计算机可读指令，所述计算机可读指令被所述处理器执行时，使得所述处理器执行如权利要求1至4中任一项所述的方法的步骤。