CN111176767B - 表数据处理方法、装置、计算机设备和存储介质 - Google Patents

Abstract

本申请涉及一种表数据处理方法、装置、计算机设备和存储介质。所述方法包括：展示表数据处理任务的任务配置页面；确定基于任务配置页面中数据获取组件所配置的数据源信息；当发生拖拽操作时，在任务配置页面展示拖拽操作所指向的数据处理组件；当发生组件连接操作时，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；当发生点击操作时，获取对点击操作所指向的数据处理组件配置的配置参数；将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果。采用本方法能够提升表数据处理效率。

Description

表数据处理方法、装置、计算机设备和存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种表数据处理方法、装置、计算机设备和存储介质。

背景技术

随着大数据时代的到来，出现了ETL(Extract-Transform-Load，数据仓库技术)技术，ETL是指将数据从来源端经过抽取、清洗转换之后加载至数据仓库的过程，其目的是将分散、零乱、标准不统一的数据整合到一起，为企业的决策提供分析依据。ETL是BI(商业智能)项目重要的一个环节，

但是，通常ETL是个极为复杂的过程，开发人员往往需要根据需求编写各种复杂的SQL语句，用于从来源端筛选出目标数据，并将目标数据整合在一起，这样不仅耗费大量时间，而且降低了数据整合的效率。

发明内容

基于此，有必要针对上述技术问题，提供一种能够提升数据处理效率的表数据处理方法、装置、计算机设备和存储介质。

一种表数据处理方法，所述方法包括：

展示表数据处理任务的任务配置页面；

确定基于所述任务配置页面中数据获取组件所配置的数据源信息；

当发生拖拽操作时，在所述任务配置页面展示所述拖拽操作所指向的数据处理组件；

当发生组件连接操作时，将所述组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

当发生点击操作时，获取对所述点击操作所指向的数据处理组件配置的配置参数；

将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果。

在其中一个实施例中，所述展示表数据处理任务的任务配置页面包括：

获取多条历史任务配置信息；

根据对所述多条历史任务配置信息的选择指令，从所述多条历史任务配置信息中筛选出目标任务配置信息；

在任务配置页面中展示所述目标任务配置信息。

在其中一个实施例中，所述当发生组件连接操作时，将所述组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息包括：

判断所述组件连接操作所指向的数据处理组件是否为待连接状态；

若为待连接状态，将所述组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

基于所述组件连接信息将所述连接操作所指向的数据处理组件的组件状态从待连接状态变更为待配置状态。

在其中一个实施例中，所述当发生点击操作时，获取对所述点击操作所指向的数据处理组件配置的处理逻辑信息包括：

当所述点击操作所指向的数据处理组件的组件状态为待配置状态时，展示与所指向的数据处理组件对应的参数配置页面；

获取在所述参数配置页面选定的配置参数；

所述将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果之后还包括：

当所述处理结果符合预设条件时，将所述点击操作所指向的数据处理组件的组件状态从待配置状态变更为完成状态。

在其中一个实施例中，所述当发生组件连接操作时，将所述组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息包括：

当发生连接操作时，确定所述连接操作指向的源处理组件和至少一个目标处理组件；

分别将所述源处理组件与所述目标处理组件进行连接，得到表数据处理任务链；

获取所述表数据处理任务链的组件连接信息。

在其中一个实施例中，所述获取所述表数据处理任务链的组件连接信息包括：

获取相邻两个数据处理组件中的源处理组件的组件标识；

所述将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果包括：

根据所述源处理组件的组件标识确定对应的源处理结果；

将基于配置参数以及组件连接信息生成的表数据处理语句发送至所述源处理结果，存储所述源处理结果返回的目标处理结果。

在其中一个实施例中，所述方法还包括：

当获取到所述数据源返回的处理结果时，根据所述处理结果预测相匹配的表数据处理语句；

基于预测得到的所述表数据处理语句，确定任务配置页面中的数据处理组件的优化信息；

根据所述优化信息对所述数据处理组件进行优化。

一种表数据处理装置，所述装置包括：

数据源获取模块，用于展示表数据处理任务的任务配置页面；确定基于所述任务配置页面中数据获取组件所配置的数据源信息；

配置模块，用于当发生拖拽操作时，在所述任务配置页面展示所述拖拽操作所指向的数据处理组件；当发生组件连接操作时，将所述组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；当发生点击操作时，获取对所述点击操作所指向的数据处理组件配置的配置参数；

处理结果获取模块，用于将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果。

一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

展示表数据处理任务的任务配置页面；

确定基于所述任务配置页面中数据获取组件所配置的数据源信息；

当发生拖拽操作时，在所述任务配置页面展示所述拖拽操作所指向的数据处理组件；

当发生组件连接操作时，将所述组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

当发生点击操作时，获取对所述点击操作所指向的数据处理组件配置的配置参数；

将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：

展示表数据处理任务的任务配置页面；

确定基于所述任务配置页面中数据获取组件所配置的数据源信息；

当发生拖拽操作时，在所述任务配置页面展示所述拖拽操作所指向的数据处理组件；

当发生组件连接操作时，将所述组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

当发生点击操作时，获取对所述点击操作所指向的数据处理组件配置的配置参数；

将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果。

上述表数据处理方法、装置、计算机设备和存储介质，基于一个可视化的任务配置页面，使得用户仅仅需要进行简单的配置操作，即可实现复杂的表数据处理过程，从而即使是不会编程的普通业务人员也能进行完整的配置操作，并且对于有编程基础的业内人员来说，由于已经将处理逻辑封装成数据处理组件，则可以大大的节约编写重复代码的所耗费的时间，提升了表数据处理效率。

附图说明

图1为一个实施例中表数据处理方法的应用场景图；

图2为一个实施例中表数据处理方法的流程示意图；

图3为一个实施例中任务配置页面的示意图；

图4为一个实施例中数据源配置页面示意图；

图5为一个实施例中连接操作所指向的数据处理组件或数据获取组件示意图；

图6为一个实施例中时间过滤器的参数配置页面示意图；

图7为一个实施例中表数据处理任务链示意图；

图8为一个实施例中组件状态变更方法步骤的流程示意图；

图9为一个实施例中表数据处理任务的流程示意图；

图10为一个实施例中表数据处理装置的结构框图；

图11为一个实施例中计算机设备的内部结构图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

本申请提供的表数据处理方法，可以应用于如图1所示的应用环境中。其中，终端102通过网络与服务器104进行通信。其中，终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备，服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。终端102中运行有表数据处理平台，基于表数据数据处理平台可以对表数据处理任务进行可视化配置，之后根据配置信息生成表数据处理语句，并将表数据处理语句发送至服务器104。服务器104中具有数据库。服务器104根据接收到的表数据处理语句从数据库中筛选出对应的目标数据，并将筛选出的目标数据发送至终端102进行展示。其中表数据处理平台可以为应用程序、网页或小程序等。

在一个实施例中，如图2所示，提供了一种表数据处理方法，以该方法应用于图1中的终端为例进行说明，包括以下步骤：

S202，展示表数据处理任务的任务配置页面。

其中，表数据处理任务是指对数据库中的至少一张表内数据进行抽取、清洗以及转换的过程。

具体地，终端上可通过网页应用显示任务配置页面，当需要对至少一张表数据表内的数据进行抽取、清洗及转换时，用户可以通过输入预设网址、点击表数据处理应用的应用标识等多种方式打开任务配置页面。图3为一个实施例中任务配置页面的示意图，如图3所示，任务配置页面包括操作区和选择区。其中，选择区中具有数据获取组件所对应的控件图标和多种数据处理组件所对应的控件图标。数据获取组件为对数据源进行配置的控件。基于数据获取组件，用户可以获知预存储于数据库中的数据表的表信息。数据源为需要进行数据抽取、清洗以及转换的数据表。数据处理组件是指对表数据的具体处理过程进行相应配置的控件。数据处理组件具有多种类型，具体包括但不限于列过滤器、行过滤器、表连接器、字段聚合器、转换器、合并器、排序器、表计算器和字段函数器。用户可以通过拖拽的方式将选择区内的多个组件拖拽至操作区，以便后续用户可以对操作区内的组件进行相应配置。

在一个实施例中，用户可以对选择区进行隐藏，从而在任务配置页面中只展示操作区。

S204，确定基于任务配置页面中数据获取组件所配置的数据源信息。

具体地，当用户打开任务配置页面后，表数据处理平台自动在任务配置页面中的操作区内生成数据获取组件。表数据处理平台监控用户的点击操作，当用户点击数据获取组件时，表数据处理平台从缓存空间中提取出预存储的数据源配置页面，并根据预设的数据库标识从数据库中获取全部数据表的表信息，之后将数据表的表信息嵌入数据源配置页面中，从而用户可以从数据源配置页面中获知数据表的表信息。其中，表信息包括数据表标识以及数据表简介等信息。进一步地，用户可以从数据源配置页面中的多个数据表中选择所需的数据表，此时，表数据处理平台将用户选择的数据表作为数据源存储于缓存中。

图4为一个实施例中数据源配置页面示意图。如图4所示，用户可以直接在搜索框中输入所需数据源的表信息，也可以在表信息列表中选择所需数据源。

在另一个实施例中，用户可以在数据源配置页面中设置数据获取组件的组件名称，之后表数据处理平台将数据获取组件的组件名称以及用户选择的数据源的表信息对应存储。

S206，当发生拖拽操作时，在任务配置页面展示拖拽操作所指向的数据处理组件。

具体地，当需要对数据源中的数据进行处理时，用户可以通过拖拽的方式将数据处理组件从选择区拖拽至操作区。此时表数据处理平台在操作区内对应展示拖拽操作所指向的数据处理组件。比如，当用户判定需要抽取数据源中的某几列数据时，用户可以将列过滤器拖拽至操作区。

在另一个实施例中，用户可以同时拖拽多个数据处理组件至操作区。

在另一个实施例中，当操作区内无法再放置数据处理组件时，表数据处理平台自动将操作区内的数据处理组件按预设百分比缩小，以便空置出的区域可以放置更多的数据处理组件。

S208，当发生组件连接操作时，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息。

具体地，当操作区内显示有数据获取组件以及数据处理组件时，用户可以用线条将数据获取组件或数据处理组件相连接。图5为一个实施例中连接操作所指向的数据处理组件或数据获取组件示意图，如图5所示，数据处理组件或数据获取组件的两侧分别具有一个连接点，用户只需点击对应连接点即可将数据获取组件或数据处理组件进行连接，比如，当需要抽取数据源中的某几列数据时，用户可以点击图5中的数据处理组件尾部的方块点以及列过滤器首部的圆点，由表数据处理平台根据用户的点击操作生成一条连接线，通过连接线将数据处理组件与列过滤相连接，以便数据获取组件能够将数据源信息发送至列过滤器。

进一步地，表数据处理平台获取操作区中相连接的相邻数据处理组件或数据获组件的组件标识，并根据相邻数据处理组件中相连的连接点类型确定相邻数据处理组件或数据获组件的前后顺序，之后将相邻组件标识以及前后顺序对应存储。比如，在上述举例中，表数据处理平台根据组件连接操作确定是将数据处理组件尾部的方块连接点与列过滤器首部的圆形连接点相连接，此时表数据处理平台根据方块连接点的连接点类型以及圆形连接点的连接类型，确定数据获取组件为前序组件，列过滤器组件为后序组件。与此同时，表数据处理平台将数据获取组件的组件标识以及列过滤器的组件标识按照先后顺序存储于连接数组中。

容易理解地，当用户继续向操作区内拖拽数据处理组件，如继续向操作区拖拽行过滤器，并将行过滤器中的圆形连接点与列过滤器中的方块连接点相连接时，表数据处理平台提取行过滤器的组件标识，并将行过滤器标识存储于连接数组中的列过滤器的组件标识之后。为了描述方便，下述将相连接的相邻两个组件中的前序组件称为源处理组件，后序组件称为目标处理组件。

S210，当发生点击操作时，获取对点击操作所指向的数据处理组件配置的配置参数。

具体地，当用户将操作区内的数据处理组件或数据获取组件相连接后，用户可以通过点击的方式为数据处理组件配置相应的信息。更具体地，表数据处理平台监视用户的点击操作，当捕获用户对数据处理组件的点击操作时，表数据处理平台获取被点击的数据处理组件的组件类型，并从预存储的多种不同参数配置页面模板中选取与被点击组件的组件类型相对应的目标参数配置页面模板。其中，参数配置页面模板为根据需要对同种数据处理组件进行何种配置这一需求而设计的，具有固定格式的页面。不同种类的数据处理组件具有不同种参数配置页面模板。

进一步地，当源处理组件为数据获取组件，目标处理组件为数据处理组件时，表数据处理平台从缓存中读取数据源标识，并将数据源标识发送至服务器，由服务器根据数据源标识查找对应的数据表，并将查找到的数据表中的字段标识、字段名称、字段注释以及字段类型等信息返回至表数据处理平台。表数据处理平台整理接收到的字段信息，将整理后的字段信息对应嵌入于目标参数配置页面模板，并将目标参数配置页面模板以弹窗或页面跳转等形式向用户展现。例如，如图6所示，当源处理组件为数据获取组件，目标处理组件为时间过滤器时，表数据处理平台从服务器返回的字段信息中筛选出时间字段，并将筛选出的时间字段嵌入目标参数配置页面模板中的时间字段选择的下拉框中，从而得到时间过滤器的参数配置页面。图6为一个实施例中时间过滤器的参数配置页面示意图。

进一步地，用户可以对展示的目标配置页面进行字段配置，比如在上述举例中，用户可以在时间过滤器的参数配置页面中选择需要进行筛选的时间字段和时间区间，并点击确认按键用以确定已选择的配置参数。与此同时，表数据处理平台获取用户在参数配置页面中已确定的配置参数，并将已确定的配置参数存储于缓存中。

S212，将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果。

具体地，表数据处理平台从缓存中提取出数据源的表信息、组件连接信息以及配置参数，并根据表信息以及配置参数生成相应的表数据处理语句，如生成相应的SQL(Structured Query Language，结构化查询语句)语句，之后将表数据处理语句发送至服务器，由服务器对应执行表数据处理语句。例如，在上述举例中，若表数据处理平台基于组件连接信息确定相邻两个组件中，源处理组件为数据获取组件，目标处理组件为时间过滤器时，表数据处理平台从缓存中读取数据源的表信息“表名：时间”，以及为时间过滤器所配置的配置参数“时间字段：2015年；时间区间：10月至11月”，之后根据表名和配置参数生成对应的SQL语句。

进一步地，当服务器接收到表数据处理平台发送的表数据处理语句时，服务器对应执行表数据处理语句，得到处理结果，并将处理结果发送至表数据处理平台，由表数据处理平台将处理结果以及目标处理组件的组件标识对应缓存。

在另一个实施例中，服务器还可以在数据库中新增一个中间结果数据表，以便能够将处理结果缓存于中间结果数据表中。

进一步地，将正在执行的表数据处理语句中的配置参数所指向的目标处理组件称为当前目标处理组件。当获取到与当前目标处理组件对应的处理结果时，表数据处理平台从连接数组中查看，在当前目标处理组件的组件标识之后是否还存在其它组件标识，若存在，表数据处理平台从连接数组中获取位于当前目标处理组件的组件标识之后的，且与当前目标处理组件的组件标识相邻的一个处理组件标识，并将与当前目标处理组件所对应的处理结果作为数据源，之后，将当前目标处理组件作为源处理组件，将获取得到的处理组件作为目标处理组件，重复执行上述表数据处理步骤，直至遍历完连接组件中的全部组件标识，并将与最后顺序的目标处理组件对应的处理结果作为表数据任务的最终处理结果。

例如，操作区中存在数据获取组件、列过滤器以及时间过滤器。当用户将数据获取组件与列过滤器相连时，表数据处理平台根据在数据获取组件中确定的数据源信息、在列过滤器参数配置页面中确定的配置参数生成对应的表数据处理语句，并接收服务器返回的执行表数据处理语句的处理结果。表数据处理平台基于连接数组判断列过滤器是否与时间过滤器相连，当时间过滤器与列过滤器相连接时，表数据处理平台从与列过滤器对应的处理结果中筛选出时间字段信息，并将筛选出的时间字段信息嵌入与时间过滤器对应的参数配置页面模板中，从而得到时间过滤器的参数配置页面。之后，表数据处理平台监控用户对时间过滤器的参数配置页面的操作过程，当表数据处理平台确定用户已经完成参数配置时，表数据处理平台根据处理结果以及配置参数生成对应的表数据处理语句，并基于表数据处理语句对与列过滤器对应的处理结果进行数据处理，从而得到与时间过滤器对应的处理结果。

上述表数据处理方法，通过展示表数据处理的任务配置页面，可以将一个抽象的表数据处理配置过程变得可视化；通过对数据获取组件进行配置，可以得到数据源信息；通过简单的拖拽、连接以及点击操作，可以确定配置参数以及组件连接信息，从而可以基于数据源信息、配置参数及组件连接信息生成表数据处理语句对数据表中的数据进行处理。本申请基于一个可视化的任务配置页面，使得用户仅仅需要进行简单的配置操作，即可实现复杂的表数据处理过程，从而即使是不会编程的普通业务人员也能进行完整的配置操作，并且对于有编程基础的业内人员来说，由于已经将处理逻辑封装成数据处理组件，因此可以大大的节约编写重复代码的所耗费的时间，提升了表数据处理效率。

在另一个实施例中，任务配置页面中包括多条历史任务配置信息；展示表数据处理任务的任务配置页面包括：获取多条历史任务配置信息；根据对多条历史任务配置信息的选择指令，从多条历史任务配置信息中筛选出目标任务配置信息；在任务配置页面中展示目标任务配置信息。

其中，任务配置信息为用户在任务配置页面中，为一个表数据处理任务所配置的数据获取组件以及数据处理组件的组件信息。例如，当表数据处理任务为对“抽取企业关税表中的2015年的关税数据”时，用户可以在任务配置页面中设置一个数据获取组件用于确定数据源为企业关税表、一个列过滤器用于从关税表中筛选出关税数据以及一个时间过滤器用于从关税数据中抽取2015年的数据。此时，将表数据获取组件的组件标识以及数据源信息、数据处理组件的组件标识以及对应的配置参数统称为任务配置信息。

具体地，当用户打开任务配置页面时，表数据处理平台从缓存中提取出历史表数据处理任务的历史任务配置信息，并将历史任务配置信息以列表的方式展示于任务配置页面。当需要重复执行历史表数据处理任务时，用户可以在列表中选择对应的历史任务配置信息，之后，表数据处理平台根据用户的选择操作，将对应的历史任务配置信息转换成表数据处理任务链，并将表数据处理任务链展示于任务配置页面。其中，表数据处理任务链为如图7所示的一串首尾相连接的数据处理组件或数据获取组件。图7为一个实施例中表数据处理任务链示意图。

进一步地，用户对显示的表数据处理任务链中的数据处理组件或数据获取组件进行修改，从而表数据处理平台可以基于修改后的表数据处理任务链中的任务配置信息生成对应的表数据处理语句，并基于表数据处理语句得到表数据处理结果。

在另一个实施例中，用户可以选择多条历史任务配置信息，从而表数据处理平台可以同时执行多个表数据处理任务。

本实施例中，通过将多条历史任务配置信息进行可视化展示，使得当需要重复执行历史表数据处理任务时，可以基于历史任务配置信息快速生成表数据处理任务链，从而无需再次重复进行数据处理组件或数据获取组件的配置操作，进而大大减少了用户的工作量。

在另一个实施例中，如图8所示，提供了一种组件状态变更方法。当发生组件连接操作时，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息包括：

S302，判断组件连接操作所指向的数据处理组件是否为待连接状态；

S304，若为待连接状态，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

S306，基于组件连接信息将连接操作所指向的数据处理组件的组件状态从待连接状态变更为待配置状态。

其中，数据处理组件的组件状态包括待连接状态、待配置状态。待连接状态是指当前数据处理组件还未被连接；待配置状态是指用户还未对当前处理处理组件进行参数配置。

具体地，当表数据处理平台捕获到用户的组件连接操作时，表数据处理平台根据用户的组件连接操作确定待连接的源处理组件以及目标处理组件。之后，表数据处理平台判断确定的目标处理组件是否为待连接状态，若目标处理组件为待连接状态，表数据处理平台将目标处理组件与源处理组件相连接，并将目标处理组件的组件状态从待连接状态变更为待配置状态。若目标处理组件不为待连接状态，表数据处理平台生成对应的提示信息，基于提示信息向用户提示目标处理组件已被连接。

本实施例中，由于在执行组件连接操作之前执行了组件状态的确认步骤，因此可以减少目标处理组件被重复连接的概率，从而减少了一个目标处理组件具有两个及两个以上对应的源处理组件的概率。

在另一个实施例中，当发生点击操作时，获取对点击操作所指向的数据处理组件配置的配置参数包括：当点击操作所指向的数据处理组件的组件状态为待配置状态时，展示与所指向的数据处理组件对应的参数配置页面；获取在参数配置页面选定的配置参数；将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储所述数据源返回的处理结果之后还包括：当处理结果符合预设条件时，将点击操作所指向的数据处理组件的组件状态从待配置状态变更为完成状态。

其中，数据处理组件的组件状态包括完成状态。

具体地，当需要对目标处理组件进行参数配置时，表数据处理平台判断点击操作所指向的目标处理组件的组件状态是否为待配置状。若为待配置状态，表数据处理平台展示对应的参数配置页面，并获取基于参数配置页面确定的配置参数，之后根据数据源信息、配置参数及组件连接信息生成表数据处理语句，并接收数据源返回对表数据处理语句进行处理的处理结果。

进一步地，表数据处理平台中具有预存储的如“处理结果是否包含在参数配置页面中所选择的字段信息”的匹配条件。表数据处理平台从处理结果中随机筛选出预设数量的子处理结果，并将子处理结果分别与预存储的匹配条件进行匹配，当匹配程度小于阈值时，可以认为基于参数配置页面中的配置参数不可能完成表数据处理任务，此时表处理平台保持目标处理组件的组件状态不变。若匹配程度大于阈值时，可以认为基于参数配置页面中的配置参数有可能完成表数据处理任务，此时表处理平台将目标处理组件的组件状态由待配置状态变更为完成状态。

在另一个实施例中，表数据处理平台从处理结果中随机筛选出预设数量的子处理结果，并将子处理结果以数据表的形式展示于参数配置页面的空白处。用户可以基于可视化的子处理结果，对应修改在参数配置页面中设置的配置参数，直至返回的子处理结果符合用户预期，此时，用户点击参数配置页面中的确认按键，从而表数据处理平台将目标处理组件的组件状态变更为完成状态。

通过可视化处理结果，使得用户在对单个目标处理组件进行参数配置之后，能立即得知处理结果，并根据处理结果对配置参数进行及时修正，从而大大提升了配置效率。

本实施例中，通过在显示参数配置页面之前，判断对应的目标处理组件是否为待配置状态，可以减少重复配置目标处理组件的概率。

在另一个实施例中，当发生组件连接操作时，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息包括：当发生连接操作时，确定连接操作指向的源处理组件和至少一个目标处理组件；分别将源处理组件与目标处理组件进行连接，得到表数据处理任务链；获取表数据处理任务链的组件连接信息。

具体地，当用户点击数据获取组件或数据处理组件的连接点，将组件进行连接时，表数据处理平台确定在预设时间段内被点击的连接点的标识和类型，并将连接点的类型为预设类型的连接点作为源处理组件中的连接点，将被点击的其余连接点作为目标处理组件中的连接点，之后利用连接线将源处理组件中的连接点与目标处理组件中的连接点进行连接，得到表数据处理任务链。其中，预设时间段为根据用户点击连接点所需时间而确定的一个时间区间，比如预设而时间段可以为2秒。表数据处理组件获取表数据处理任务链中的组件的连接顺序，并将连接顺序存储于连接数组内。

例如，当用户在预设时间段内点击了数据获取组件尾部的方块连接点、列过滤器首部的圆形连接点以及时间过滤器首部的圆形连接点时，表数据处理组件根据连接点类型将数据获取组件与列过滤器相连接，以及将数据获取组件与时间过滤器相连接。

本实施例中，通过判断连接点的类型，可以确定连接操作所指向的源处理组件和目标处理组件；通过将源处理组件与目标处理组件相连接，可以得到组件连接信息，从而后续可以根据组件连接信息生成对应的表数据处理语句。

在另一个实施例中，获取表数据处理任务链的组件连接信息包括：获取相邻两个数据处理组件中的源处理组件的组件标识；将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果包括：根据源处理组件的组件标识确定对应的源处理结果；将基于配置参数以及组件连接信息生成的表数据处理语句发送至源处理结果，存储源处理结果返回的目标处理结果。

其中，表数据处理任务链包括相邻两个数据处理组件；相邻两个数据处理组件包括源处理组件和目标处理组件。

具体地，如图9所示，由于每对一个目标处理组件进行参数配置之后，表数据处理平台均会针对配置后的参数进行表数据处理，因此表数据处理平台中具有处理结果与目标处理组件的组件标识之间的对应关系。图9为一个实施例中表数据处理任务的流程示意图。

进一步地，当表数据处理平台基于连接信息确定源处理组件以及目标处理组件时，表数据处理平台获取源处理组件的组件标识，并根据元处理组件的组件标识确定对应的处理结果。与此同时，表数据处理平台根据目标处理组件的配置参数生成对应的表数据处理语句，并根据表数据处理语句从与源处理组件对应的处理结果中筛选出目标数据。

本实施例中，通过获取源处理组件的组件标识，可以确定对应的处理结果，通过从处理结果中进一步筛选出目标数据，使得筛选后的目标数据能更接近最终的处理结果，从而在经过一次次筛选之后，表数据处理平台能够得到最终的处理结果。

在另一个实施例中，表数据处理方法还包括：当获取到数据源返回的处理结果时，根据处理结果预测相匹配的表数据处理语句；基于预测得到的表数据处理语句，确定任务配置页面中的数据处理组件的优化信息；根据优化信息对数据处理组件进行优化。

具体地，当表数据处理平台接收到处理结果时，表数据处理平台预测可能得到此处理结果的表数据处理语句，并根据预测得到的表数据处理语句估计生成该表数据处理语句所需要的数据处理组件的组件类型。之后，表数据处理平台将预估得到的数据处理组件的组件类型与操作区内的表数据处理任务链进行对比，在表数据处理任务链中的组件类型多于预估得到的组件类型时，可以认为多出的表数据处理组件为多余组件，此时表数据处理平台根据多余组件的组件标识生成提示信息，用以提示用户可以对应删减表数据处理任务链中的部分数据处理组件。

本实施例中，由于表数据处理组件的组件类型是根据处理结果反推得到的，因此，有理由认为仅仅基于预估得到的组件类型就能实现相同的表数据处理，故在当表数据处理任务链中的组件类型多于预估得到的数据处理组件的类型时，可以认为表数据处理任务链中具有多余的数据处理组件，从而可以以提示信息的方式提示用户对应删除多余组件，进而使得表数据处理任务链更为简洁。

应该理解的是，虽然图2、8的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2、8中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

在一个实施例中，如图10所示，提供了一种表数据处理装置1000，包括：数据源获取模块1002、配置模块1004和处理结果获取模块1006，其中：

数据源获取模块1002，用于展示表数据处理任务的任务配置页面；确定基于任务配置页面中数据获取组件所配置的数据源信息。

配置模块1004，用于当发生拖拽操作时，在任务配置页面展示拖拽操作所指向的数据处理组件；当发生组件连接操作时，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；当发生点击操作时，获取对点击操作所指向的数据处理组件配置的配置参数。

处理结果获取模块1006，用于将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果。

在一个实施例中，数据源获取模块1002还用于获取多条历史任务配置信息；根据对多条历史任务配置信息的选择指令，从多条历史任务配置信息中筛选出目标任务配置信息；在任务配置页面中展示目标任务配置信息。

在一个实施例中，配置模块1004还包括连接模块1041，用于判断连接操作所指向的数据处理组件是否为待连接状态；若为待连接状态，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；基于组件连接信息将连接操作所指向的数据处理组件的组件状态从待连接状态变更为待配置状态。

在一个实施例中，配置模块1004还包括点击模块1042，用于当点击操作所指向的数据处理组件的组件状态为待配置状态时，展示与所指向的数据处理组件对应的参数配置页面；获取在参数配置页面选定的配置参数；当处理结果符合预设条件时，将点击操作所指向的数据处理组件的组件状态从待配置状态变更为完成状态。

在一个实施例中，连接模块1041还用于当发生连接操作时，确定连接操作指向的源处理组件和至少一个目标处理组件；分别将源处理组件与目标处理组件进行连接，得到表数据处理任务链；获取表数据处理任务链的组件连接信息。

在一个实施例中，连接模块1041还用于获取相邻两个数据处理组件中的源处理组件的组件标识；根据源处理组件的组件标识确定对应的源处理结果；

将基于配置参数以及组件连接信息生成的表数据处理语句发送至源处理结果，存储源处理结果返回的目标处理结果。

在一个实施例中，表数据处理装置1000还包括优化模块1008，用于当获取到数据源返回的处理结果时，根据处理结果预测相匹配的表数据处理语句信息；基于预测得到的表数据处理语句，确定任务配置页面中的数据处理组件的优化信息；根据优化信息对数据处理组件进行优化。

关于表数据处理装置的具体限定可以参见上文中对于表数据处理方法的限定，在此不再赘述。上述表数据处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图11所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种表数据处理方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。

本领域技术人员可以理解，图11中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现以下步骤：

展示表数据处理任务的任务配置页面；

确定基于任务配置页面中数据获取组件所配置的数据源信息；

当发生拖拽操作时，在任务配置页面展示拖拽操作所指向的数据处理组件；

当发生组件连接操作时，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

当发生点击操作时，获取对点击操作所指向的数据处理组件配置的配置参数；

将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果。

在一个实施例中，任务配置页面中包括多条历史任务配置信息；处理器执行计算机程序时还实现以下步骤：

获取多条历史任务配置信息；

根据对多条历史任务配置信息的选择指令，从多条历史任务配置信息中筛选出目标任务配置信息；

在任务配置页面中展示目标任务配置信息。

在一个实施例中，数据处理组件的组件状态包括待连接状态和待配置状态；处理器执行计算机程序时还实现以下步骤：

判断组件连接操作所指向的数据处理组件是否为待连接状态；

若为待连接状态，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

基于组件连接信息将连接操作所指向的数据处理组件的组件状态从待连接状态变更为待配置状态。

在一个实施例中，数据处理组件的组件状态包括待配置状态和完成状态；处理器执行计算机程序时还实现以下步骤：

当点击操作所指向的数据处理组件的组件状态为待配置状态时，展示与所指向的数据处理组件对应的参数配置页面；

获取在参数配置页面选定的配置参数；

将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果之后还包括：

当处理结果符合预设条件时，将点击操作所指向的数据处理组件的组件状态从待配置状态变更为完成状态。

在一个实施例中，连接操作所指向的数据处理组件包括源处理组件和目标处理组件；处理器执行计算机程序时还实现以下步骤：

当发生连接操作时，确定连接操作指向的源处理组件和至少一个目标处理组件；

分别将源处理组件与目标处理组件进行连接，得到表数据处理任务链；

获取表数据处理任务链的组件连接信息。

在一个实施例中，表数据处理任务链包括相邻两个数据处理组件；相邻两个数据处理组件包括源处理组件和目标处理组件；处理器执行计算机程序时还实现以下步骤：

获取相邻两个数据处理组件中的源处理组件的组件标识；

将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果包括：

根据源处理组件的组件标识确定对应的源处理结果；

将基于配置参数以及组件连接信息生成的表数据处理语句发送至源处理结果，存储源处理结果返回的目标处理结果。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

当获取到数据源返回的处理结果时，根据处理结果预测相匹配的表数据处理语句信息；

基于预测得到的表数据处理语句，确定任务配置页面中的数据处理组件的优化信息；

根据优化信息对数据处理组件进行优化。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：

展示表数据处理任务的任务配置页面；

确定基于任务配置页面中数据获取组件所配置的数据源信息；

当发生拖拽操作时，在任务配置页面展示拖拽操作所指向的数据处理组件；

当发生组件连接操作时，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

当发生点击操作时，获取对点击操作所指向的数据处理组件配置的配置参数；

将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果。

在一个实施例中，任务处理页面中包括多条历史任务配置信息；计算机程序被处理器执行时还实现以下步骤：

获取多条历史任务配置信息；

根据对多条历史任务配置信息的选择指令，从多条历史任务配置信息中筛选出目标任务配置信息；

在任务配置页面中展示目标任务配置信息。

在一个实施例中，数据处理组件的组件状态包括待连接状态和待配置状态；计算机程序被处理器执行时还实现以下步骤：

判断组件连接操作所指向的数据处理组件是否为待连接状态；

若为待连接状态，将组件连接操作所指向的数据获取组件或数据处理组件进行连接，得到组件连接信息；

基于组件连接信息将连接操作所指向的数据处理组件的组件状态从待连接状态变更为待配置状态。

在一个实施例中，数据处理组件的组件状态包括待配置状态和完成状态；计算机程序被处理器执行时还实现以下步骤：

当点击操作所指向的数据处理组件的组件状态为待配置状态时，展示与所指向的数据处理组件对应的参数配置页面；

获取在参数配置页面选定的配置参数；

将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果之后还包括：

当处理结果符合预设条件时，将点击操作所指向的数据处理组件的组件状态从待配置状态变更为完成状态。

在一个实施例中，连接操作所指向的数据处理组件包括源处理组件和目标处理组件；计算机程序被处理器执行时还实现以下步骤：

当发生连接操作时，确定连接操作指向的源处理组件和至少一个目标处理组件；

分别将源处理组件与目标处理组件进行连接，得到表数据处理任务链；

获取表数据处理任务链的组件连接信息。

在一个实施例中，表数据处理任务链包括相邻两个数据处理组件；相邻两个数据处理组件包括源处理组件和目标处理组件；计算机程序被处理器执行时还实现以下步骤：

获取相邻两个数据处理组件中的源处理组件的组件标识；

将基于数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至数据源，存储数据源返回的处理结果包括：

根据源处理组件的组件标识确定对应的源处理结果；

将基于配置参数以及组件连接信息生成的表数据处理语句发送至源处理结果，存储源处理结果返回的目标处理结果。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

当获取到数据源返回的处理结果时，根据处理结果预测相匹配的表数据处理语句信息；

基于预测得到的表数据处理语句，确定任务配置页面中的数据处理组件的优化信息；

根据优化信息对数据处理组件进行优化。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种表数据处理方法，其特征在于，包括：

展示表数据处理任务的任务配置页面；

确定基于所述任务配置页面中数据获取组件所配置的数据源信息；

当发生拖拽操作时，在所述任务配置页面展示所述拖拽操作所指向的数据处理组件；所述数据获取组件和所述数据处理组件的两侧分别具有一个连接点、且两侧的连接点的连接类型不同；

当发生组件连接操作时，确定被点击的连接点的连接类型，通过所述被点击的连接点的连接类型，确定连接操作所指向的源处理组件和目标处理组件，并将源处理组件与目标处理组件相连接，以得到组件连接信息；所述源处理组件为所述目标处理组件的前序组件；

当发生点击操作时，获取对所述点击操作所指向的数据处理组件配置的配置参数；

将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果。

2.根据权利要求1所述的方法，其特征在于，所述任务配置页面中包括多条历史任务配置信息；所述展示表数据处理任务的任务配置页面包括：

获取多条历史任务配置信息；

根据对所述多条历史任务配置信息的选择指令，从所述多条历史任务配置信息中筛选出目标任务配置信息；

在任务配置页面中展示所述目标任务配置信息。

3.根据权利要求1所述的方法，其特征在于，所述数据处理组件的组件状态包括待连接状态和待配置状态；所述确定被点击的连接点的连接类型，通过所述被点击的连接点的连接类型，确定连接操作所指向的源处理组件和目标处理组件，并将源处理组件与目标处理组件相连接，以得到组件连接信息，包括：

判断所述组件连接操作所指向的数据处理组件是否为待连接状态；

若为待连接状态，将当发生组件连接操作时，确定被点击的连接点的连接类型，通过所述被点击的连接点的连接类型，确定连接操作所指向的数据处理组件中的源处理组件和目标处理组件，并将所述源处理组件与所述目标处理组件相连接，得到组件连接信息；

基于所述组件连接信息将所述组件连接操作所指向的源处理组件和目标处理组件的组件状态从待连接状态变更为待配置状态。

4.根据权利要求1所述的方法，其特征在于，所述数据处理组件的组件状态包括待配置状态和完成状态；所述当发生点击操作时，获取对所述点击操作所指向的数据处理组件配置的配置参数包括：

当所述点击操作所指向的数据处理组件的组件状态为待配置状态时，展示与所指向的数据处理组件对应的参数配置页面；

获取在所述参数配置页面选定的配置参数；

所述将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果之后还包括：

当所述处理结果符合预设条件时，将所述点击操作所指向的数据处理组件的组件状态从待配置状态变更为完成状态。

5.根据权利要求1所述的方法，其特征在于，所述组件连接操作所指向的数据处理组件包括源处理组件和目标处理组件；所述当发生组件连接操作时，确定被点击的连接点的连接类型，通过所述被点击的连接点的连接类型，确定连接操作所指向的源处理组件和目标处理组件，并将源处理组件与目标处理组件相连接，以得到组件连接信息，包括：

当发生连接操作时，确定被点击的连接点的连接类型，通过所述被点击的连接点的连接类型，确定所述连接操作指向的源处理组件和至少一个目标处理组件；

分别将所述源处理组件与所述目标处理组件进行连接，得到表数据处理任务链；

获取所述表数据处理任务链的组件连接信息。

6.根据权利要求5所述的方法，其特征在于，所述表数据处理任务链包括相邻两个数据处理组件；所述相邻两个数据处理组件包括源处理组件和目标处理组件；所述获取所述表数据处理任务链的组件连接信息包括：

获取相邻两个数据处理组件中的源处理组件的组件标识；

所述将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果包括：

根据所述源处理组件的组件标识确定对应的源处理结果；

将基于配置参数以及组件连接信息生成的表数据处理语句发送至所述源处理结果，存储所述源处理结果返回的目标处理结果。

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

当获取到所述数据源返回的处理结果时，根据所述处理结果预测相匹配的表数据处理语句；

基于预测得到的所述表数据处理语句，确定任务配置页面中的数据处理组件的优化信息；

根据所述优化信息对所述数据处理组件进行优化。

8.一种表数据处理装置，其特征在于，所述装置包括：

数据源获取模块，用于展示表数据处理任务的任务配置页面；确定基于所述任务配置页面中数据获取组件所配置的数据源信息；

配置模块，用于当发生拖拽操作时，在所述任务配置页面展示所述拖拽操作所指向的数据处理组件；所述数据获取组件和所述数据处理组件的两侧分别具有一个连接点、且两侧的连接点的连接类型不同；当发生组件连接操作时，确定被点击的连接点的连接类型，通过所述被点击的连接点的连接类型，确定连接操作所指向的源处理组件和目标处理组件，并将源处理组件与目标处理组件相连接，以得到组件连接信息；所述源处理组件为所述目标处理组件的前序组件；

当发生点击操作时，获取对所述点击操作所指向的数据处理组件配置的配置参数；

处理结果获取模块，用于将基于所述数据源信息、配置参数及组件连接信息生成的表数据处理语句，发送至所述数据源，存储所述数据源返回的处理结果。

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。