CN105550325A - 一种数据管理方法和装置 - Google Patents

Abstract

本发明公开了一种数据管理方法和装置。其中所述方法包括：接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件；从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中；接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。该技术方案具有广泛适用性，可以满足用户的不同需求而不需多次开发代码，节约了人力和其他资源；并且以图表的方式对计算结果数据进行展示也更为直观，效果非常好。

Description

一种数据管理方法和装置

技术领域

本发明涉及计算机技术领域，具体涉及一种数据管理方法和装置。

背景技术

企业、公司尤其是互联网公司，日常业务往往会产生大量的电子数据，对这些数据进行管理是一项非常浩大而又需要规范化设计的任务。例如，有些数据是无用数据需要丢弃，有些数据需要按生成时间进行入库等等。

现有技术中，对数据的管理通常仅包含规范化的存储方式而不包含对数据的统计计算处理。而在许多情况下，用户希望对数据进行统计计算并将结果加以展示。现有技术中，数据的统计计算往往由数据的提供者完成，而如果希望对其进行展示，则还需要技术人员手动将数据绘制成对应的图表，这在数据量较小的情况下还比较方便，但在大数据的环境下就很难实现。这时往往又需要前端开发人员开发代码来将数据批量生成图表。但这又带来很多问题，例如，某部门需要提供业务报表，希望以柱状图的方式进行展现，但该部门缺乏技术精湛的前端开发人员，制作图表就会非常困难。又例如，某公司单独设置部门进行图表的生成，该部门的技术人员需要根据业务部门的每一个需求开发一次代码，这在业务部门需求量大的情况下大大加重了前端开发人员的压力。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的数据管理方法和装置。

依据本发明的一个方面，提供了一种数据管理方法，包括：

接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件；

从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中；

接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。

可选地，该方法进一步包括：

指定一个或多个存储服务器，使得业务方将各类业务数据存储到该一个或多个存储服务器上；

所述根据该源数据文件路径获取相应源数据文件包括：根据该源数据文件路径从所述一个或多个存储服务器获取相应源数据文件。

可选地，该方法进一步包括：提供配置页面的地址，当用户访问该地址时，提供该配置页面；

所述接收用户输入的源数据文件路径包括：通过所述配置页面获取用户提交的源数据文件路径。

可选地，该方法进一步包括：通过所述配置页面获取用户提交的输出路径；对所述源数据文件中的数据进行解析处理，得到符合指定格式的数据并保存到所述输出路径上；

所述根据该选择的统计模板对源数据文件中的数据进行统计计算为：根据该选择的统计模板对所述输出路径上的符合指定格式的数据进行统计计算。

可选地，所述从统计模板库中选择一个统计模板包括：

确定符合指定格式的数据的属性信息，根据该属性信息查询模板属性列表确定对应的统计模板标识，根据所确定的统计模板标识从统计模板库中选择相应的统计模板；

其中模板属性列表中对应保存了数据的属性信息和对应的统计模板标识。

可选地，该方法进一步包括：

在配置页面上展示数据解析样例；

或者，

在配置页面上提供样例数据输入框，通过该输入框接收用户输入的样例数据并进行解析后，将解析结果数据展示给用户。

可选地，该方法进一步包括：通过所述配置页面获取用户输入的数据解析方法信息；

所述对所述源数据文件中的数据进行解析处理包括：根据用户输入的数据解析方法信息对所述源数据文件中的数据进行解析处理。

可选地，该方法进一步包括：

通过所述配置页面获取用户输入的源数据文件完整性标识；

所述根据该源数据文件路径获取相应源数据文件包括：根据该源数据文件路径找到相应源数据文件，根据源数据文件完整性标识判断该源数据文件是否完整，是则获取该源数据文件，否则等到该源数据文件完整时再获取该源数据文件。

可选地，该方法进一步包括：

通过所述配置页面获取用户提交的任务执行时间信息；

在所述任务执行时间信息对应的一个或多个时间点，执行所述根据该源数据文件路径获取相应源数据文件的步骤，以及从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中的步骤。

可选地，该方法进一步包括：

通过所述配置页面获取用户输入的查看权限信息并保存到权限管理数据库中；查看权限信息包括：用户标识和该用户有权限查看的数据信息；

当接收到用户输入的数据查询请求时，通过查询权限管理数据库判断该用户是否有权限进行查询，当判断为有权限时执行所述根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表的步骤。

依据本发明的另一方面，提供了一种数据管理装置，包括：

源数据获取单元，适于接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件；

统计计算单元，适于从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中；

图表生成单元，适于接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。

可选地，所述源数据获取单元，进一步适于指定一个或多个存储服务器，使得业务方将各类业务数据存储到该一个或多个存储服务器上；根据该源数据文件路径从所述一个或多个存储服务器获取相应源数据文件。

可选地，该装置进一步包括：

配置页面提供单元，适于提供配置页面的地址，当用户访问该地址时，提供该配置页面；

所述源数据获取单元，适于通过所述配置页面获取用户提交的源数据文件路径。

可选地，该装置进一步包括：

数据解析单元，适于通过所述配置页面获取用户提交的输出路径；对所述源数据文件中的数据进行解析处理，得到符合指定格式的数据并保存到所述输出路径上；

所述统计计算单元，适于根据该选择的统计模板对所述输出路径上的符合指定格式的数据进行统计计算。

可选地，所述统计计算单元，适于确定符合指定格式的数据的属性信息，根据该属性信息查询模板属性列表确定对应的统计模板标识，根据所确定的统计模板标识从统计模板库中选择相应的统计模板；其中模板属性列表中对应保存了数据的属性信息和对应的统计模板标识。

可选地，该装置进一步包括：样例展示单元，适于在配置页面上展示数据解析样例；或者，在配置页面上提供样例数据输入框，通过该输入框接收用户输入的样例数据并进行解析后，将解析结果数据展示给用户。

可选地，所述数据解析单元，适于通过所述配置页面获取用户输入的数据解析方法信息；根据用户输入的数据解析方法信息对所述源数据文件中的数据进行解析处理。

可选地，所述源数据获取单元，进一步适于通过所述配置页面获取用户输入的源数据文件完整性标识；根据该源数据文件路径找到相应源数据文件，根据源数据文件完整性标识判断该源数据文件是否完整，是则获取该源数据文件，否则等到该源数据文件完整时再获取该源数据文件。

可选地，该装置进一步包括：调度单元，适于通过所述配置页面获取用户提交的任务执行时间信息；在所述任务执行时间信息对应的一个或多个时间点，调度所述源数据获取单元执行所述根据该源数据文件路径获取相应源数据文件的步骤，以及调度所述统计计算单元执行从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中的步骤。

可选地，该装置进一步包括：权限管理单元，适于通过所述配置页面获取用户输入的查看权限信息并保存到权限管理数据库中；查看权限信息包括：用户标识和该用户有权限查看的数据信息；

所述图表生成单元，适于在接收到用户输入的数据查询请求时，通过查询权限管理数据库判断该用户是否有权限进行查询，当判断为有权限时执行所述根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表的步骤。

由上述可知，本发明的技术方案，不仅可以对用户提供的数据进行统计计算，并且不需要用户耗费时间和资源上传源数据文件，仅需提供源数据文件的路径即可获取到所需文件；还可以对源数据文件中的数据依据统计模板库中的模板进行统计计算得到计算结果数据并对应保存到计算结果数据库中，在接收到用户输入的数据查询请求时还能根据查询到的计算结果数据生成图表并展示。该技术方案具有广泛适用性，可以满足用户的不同需求而不需多次开发代码，节约了人力和其他资源；并且以图表的方式对计算结果数据进行展示也更为直观，效果非常好。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1示出了根据本发明一个实施例的一种数据管理方法的流程图；

图2示出了根据本发明一个实施例的一种数据管理装置的结构示意图；以及

图3示出了根据本发明一个实施例的又一种数据管理装置的结构示意图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

图1示出了根据本发明一个实施例的一种数据管理方法的流程图，如图1所示，该方法包括：

步骤S110，接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件。

例如，用户的源数据文件保存在业务数据库中，具体如MySQL数据库、Oracle数据库等，用户上传源数据文件可能比较麻烦，因此在本实施例中只需用户输入源数据文件路径就可以根据该源数据文件路径获取相应源数据文件，减少了用户的操作和资源占用。

步骤S120，从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中。

步骤S130，接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。

可见，图1所示的方法，不仅可以对用户提供的数据进行统计计算，并且不需要用户耗费时间和资源上传源数据文件，仅需提供源数据文件的路径即可获取到所需文件；还可以对源数据文件中的数据依据统计模板库中的模板进行统计计算得到计算结果数据并对应保存到计算结果数据库中，在接收到用户输入的数据查询请求时还能根据查询到的计算结果数据生成图表并展示。该技术方案具有广泛适用性，可以满足用户的不同需求而不需多次开发代码，节约了人力和其他资源；并且以图表的方式对计算结果数据进行展示也更为直观，效果非常好。

在本发明的一个实施例中，图1所示的方法进一步包括：指定一个或多个存储服务器，使得业务方将各类业务数据存储到该一个或多个存储服务器上；根据该源数据文件路径获取相应源数据文件包括：根据该源数据文件路径从一个或多个存储服务器获取相应源数据文件。

例如，公司管理者可以要求各业务部门使用规范化的数据库管理系统，有序地在指定存储服务器上存储源数据文件，便于统一管理。例如，用户将日后需要进行数据查询对应的源数据文件先上传并保存到指定存储服务器，在输入源数据文件路径时，只需要提供指定存储服务器中存储的文件名或文件路径，即可确定本次图表生成所需的源数据文件。这样免去了用户需要从自己的数据库或数据存储目录下找出需要提供的源数据文件路径的麻烦，同样为用户提供了便利。

在本发明的一个实施例中，图1所示的方法进一步包括：提供配置页面的地址，当用户访问该地址时，提供该配置页面；接收用户输入的源数据文件路径包括：通过配置页面获取用户提交的源数据文件路径。

用户可以通过浏览器访问配置页面，或通过启动定制应用程序APP等方式访问配置页面，具体地，可以在用户通过浏览器访问配置页面的网址时提供该配置页面，或者为用户提供封装有访问该网址的webview组件的APP，当启动该APP时即发起对该配置页面地址的访问，此时提供该配置页面。

在本发明的一个实施例中，上述方法进一步包括：通过配置页面获取用户提交的输出路径；对源数据文件中的数据进行解析处理，得到符合指定格式的数据并保存到输出路径上；根据该选择的统计模板对源数据文件中的数据进行统计计算为：根据该选择的统计模板对输出路径上的符合指定格式的数据进行统计计算。

用户输入的源数据文件路径下的源数据文件格式可能有很多种，如weblog日志、JSON(JavaScriptObjectNotation，JavaScript对象表示法)文件、xml文件等等，为便于后期的图表制作，可以将这些文件中的数据进行解析处理，得到符合指定格式的数据，如键值对key/value结构的数据。这也就需要配置解析策略，对不同文件格式的源数据文件依据相应的解析策略，对其中的文件进行解析处理得到符合格式的数据并保存到输出路径上，此时统计计算的对象就是解析处理后的数据。另外，也可以根据源数据文件的IP地址信息解析出对应的服务器提供商和地理位置信息，可以很容易在后续步骤中对某省某地的业务进行统计计算。其中输出路径也可以对应到一个专门的数据库，这样可以规范化地管理解析处理得到的符合指定格式的数据，也便于用户查看。

在本发明的一个实施例中，上述方法中，从统计模板库中选择一个统计模板包括：确定符合指定格式的数据的属性信息，根据该属性信息查询模板属性列表确定对应的统计模板标识，根据所确定的统计模板标识从统计模板库中选择相应的统计模板；其中模板属性列表中对应保存了数据的属性信息和对应的统计模板标识。

数据属性信息可以是业务类型信息，如应用APP下载量、新增用户量、用户留存量等等，也可以是数据类型信息，如字符串型、整型、浮点型等等。这些都可以根据用户的实际需求，建立不同的统计模板并保存到统计模板库中。例如，用户希望对源数据文件中的某几项数据进行求和，将这几项数据以及求和结果以柱状图进行展示，则可以根据解析后得到的符合制定格式的数据的属性信息选择出符合要求的求和模板进行统计计算。

在本发明的一个实施例中，上述方法进一步包括：在配置页面上展示数据解析样例；或者，在配置页面上提供样例数据输入框，通过该输入框接收用户输入的样例数据并进行解析后，将解析结果数据展示给用户。

在本实施例中为用户提供了解析样例的示范。例如，公司某部门采取了前述实施例中的方法来进行数据管理，新员工小王入职后，部门同事可以通过让他观看数据解析样例或在输入框输入的样例后得到解析结果数据向他进行展示，还能简单直观地使用户能够知道数据解析有没有错误。

在本发明的一个实施例中，上述方法进一步包括：通过配置页面获取用户输入的数据解析方法信息；对源数据文件中的数据进行解析处理包括：根据用户输入的数据解析方法信息对源数据文件中的数据进行解析处理。

可以为用户提供默认的数据解析方法，例如xml文件的格式是已知的，因此可以很容易从用户输入的源数据文件路径下的xml文件中解析出各节点中的数据。但也可能出现默认的数据解析方法不能正确对用户输入的源数据文件路径下的源数据文件中的数据进行解析的情况，此时可以在配置界面上接收用户输入的数据解析方法信息，实现定制化的数据解析处理。

在本发明的一个实施例中，上述方法进一步包括：通过配置页面获取用户输入的源数据文件完整性标识；根据该源数据文件路径获取相应源数据文件包括：根据该源数据文件路径找到相应源数据文件，根据源数据文件完整性标识判断该源数据文件是否完整，是则获取该源数据文件，否则等到该源数据文件完整时再获取该源数据文件。

在有些情况下，用户输入的源数据文件路径中的源数据文件可能还是不完整的，例如，用户希望查看今日13:00-15:00时段的应用APP在渠道B的下载量统计信息，但用户14:00-15:30要去开会，这样就只能在15:30开完会后才能输入源数据文件的路径，否则该路径下的文件并不是用户所希望进行统计计算的。因此，在本实施例中，可以通过输入源数据文件完整性标识，如时间标识等来确定要获取的源数据文件。这样，用户可以在开会前就输入源数据文件路径和源数据文件完整性标识，而只有在15:00到达时才会根据该源数据文件路径找到相应源数据文件，方便了用户。

在本发明的一个实施例中，上述方法进一步包括：通过配置页面获取用户提交的任务执行时间信息；在任务执行时间信息对应的一个或多个时间点，执行根据该源数据文件路径获取相应源数据文件的步骤，以及从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中的步骤。

在本实施例中，用户可以设定时间点或时间周期，如每个工作日8:00或每隔24小时执行获取源数据文件并进行统计计算的任务。这样进一步减少了用户的操作并方便了用户。例如，部门主管可以要求部门员工进行如上述的设置，这样部门主管在需要查看部门业绩时，可以根据查看到的计算结果数据生成的图表轻易判断出该部门员工是否按时完成了任务。

在本发明的一个实施例中，上述方法进一步包括：通过配置页面获取用户输入的查看权限信息并保存到权限管理数据库中；查看权限信息包括：用户标识和该用户有权限查看的数据信息；当接收到用户输入的数据查询请求时，通过查询权限管理数据库判断该用户是否有权限进行查询，当判断为有权限时执行根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表的步骤。

源数据文件的提供方一般毫无疑义地具有数据信息的查看权限，但更多情况下，需要将数据信息提供给不同的用户进行查看。因此，需要设置权限来避免没有权限的用户查看到其具有的数据信息查看权限外的数据信息。例如，业务部门A的主管不能查看业务部门B的相关数据信息。因此，可以通过配置页面获取用户输入的查看权限信息并保存到权限管理数据库，在接收到用户输入的数据查询请求时先对用户进行是否有查询权限的判断，只有当用户有权限时再根据数据查询请求获取相应的计算结果数据并生成图标。具体实施中，可以建立用户管理系统，对每个用户的查看权限信息在用户信息中进行配置，这样也可以根据用户的设定，在特定时间或特定时间周期到达时主动向用户发送具有查看权限的计算结果数据生成的图表。

图2示出了根据本发明一个实施例的一种数据管理装置的结构示意图，如图2所示，数据管理装置200包括：

源数据获取单元210，适于接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件。

例如，用户的源数据文件保存在业务数据库中，具体如MySQL数据库、Oracle数据库等，用户上传源数据文件可能比较麻烦，因此在本实施例中只需用户输入源数据文件路径就可以根据该源数据文件路径获取相应源数据文件，减少了用户的操作和资源占用。

统计计算单元220，适于从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中。

图表生成单元230，适于接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。

可见，图2所示的装置，通过各单元的互相配合，不仅可以对用户提供的数据进行统计计算，并且不需要用户耗费时间和资源上传源数据文件，仅需提供源数据文件的路径即可获取到所需文件；还可以对源数据文件中的数据依据统计模板库中的模板进行统计计算得到计算结果数据并对应保存到计算结果数据库中，在接收到用户输入的数据查询请求时还能根据查询到的计算结果数据生成图表并展示。该技术方案具有广泛适用性，可以满足用户的不同需求而不需多次开发代码，节约了人力和其他资源；并且以图表的方式对计算结果数据进行展示也更为直观，效果非常好。

在本发明的一个实施例中，图2所示的装置中，源数据获取单元210，进一步适于指定一个或多个存储服务器，使得业务方将各类业务数据存储到该一个或多个存储服务器上；根据该源数据文件路径从一个或多个存储服务器获取相应源数据文件。

图3示出了根据本发明一个实施例的又一种数据管理装置的结构示意图如图3所示，数据管理装置300包括：源数据获取单元310，统计计算单元320和图表生成单元330，上述各装置的功能和连接方式与图2中装置对应相同，在此不再赘述。该装置还包括：配置页面提供单元340，适于提供配置页面的地址，当用户访问该地址时，提供该配置页面；源数据获取单元310，具体适于通过配置页面获取用户提交的源数据文件路径。

在本发明的一个实施例中，图3所示的装置进一步包括：数据解析单元350，适于通过配置页面获取用户提交的输出路径；对源数据文件中的数据进行解析处理，得到符合指定格式的数据并保存到输出路径上；统计计算单元320，适于根据该选择的统计模板对输出路径上的符合指定格式的数据进行统计计算。

在本发明的一个实施例中，上述装置中，统计计算单元320，适于确定符合指定格式的数据的属性信息，根据该属性信息查询模板属性列表确定对应的统计模板标识，根据所确定的统计模板标识从统计模板库中选择相应的统计模板；其中模板属性列表中对应保存了数据的属性信息和对应的统计模板标识。

在本发明的一个实施例中，上述装置进一步包括：样例展示单元360，适于在配置页面上展示数据解析样例；或者，在配置页面上提供样例数据输入框，通过该输入框接收用户输入的样例数据并进行解析后，将解析结果数据展示给用户。

在本发明的一个实施例中，上述装置中，数据解析单元350，适于通过配置页面获取用户输入的数据解析方法信息；根据用户输入的数据解析方法信息对源数据文件中的数据进行解析处理。

在本发明的一个实施例中，图3所示的装置中，源数据获取单元310，进一步适于通过配置页面获取用户输入的源数据文件完整性标识；根据该源数据文件路径找到相应源数据文件，根据源数据文件完整性标识判断该源数据文件是否完整，是则获取该源数据文件，否则等到该源数据文件完整时再获取该源数据文件。

在本发明的一个实施例中，图3所示的装置进一步包括：调度单元370，适于通过配置页面获取用户提交的任务执行时间信息；在任务执行时间信息对应的一个或多个时间点，调度源数据获取单元执行根据该源数据文件路径获取相应源数据文件的步骤，以及调度统计计算单元执行从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中的步骤。

在本发明的一个实施例中，图3所示的装置进一步包括：权限管理单元380，适于通过配置页面获取用户输入的查看权限信息并保存到权限管理数据库中；查看权限信息包括：用户标识和该用户有权限查看的数据信息；

图表生成单元330，适于在接收到用户输入的数据查询请求时，通过查询权限管理数据库判断该用户是否有权限进行查询，当判断为有权限时执行根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表的步骤。

需要说明的是，上述各装置实施例的具体实施方式与前述对应方法实施例中的具体实施方式相同，在此不再赘述。

综上所述，本发明的技术方案，不仅可以对用户提供的数据进行统计计算，并且不需要用户耗费时间和资源上传源数据文件，仅需提供源数据文件的路径即可获取到所需文件；还可以对源数据文件中的数据依据统计模板库中的模板进行统计计算得到计算结果数据并对应保存到计算结果数据库中，在接收到用户输入的数据查询请求时还能根据查询到的计算结果数据生成图表并展示。该技术方案具有广泛适用性，可以满足用户的不同需求而不需多次开发代码，节约了人力和其他资源；并且以图表的方式对计算结果数据进行展示也更为直观，效果非常好。

需要说明的是：

在此提供的算法和显示不与任何特定计算机、虚拟装置或者其它设备固有相关。各种通用装置也可以与基于在此的示教一起使用。根据上面的描述，构造这类装置所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的数据管理装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

本发明公开了A1、一种数据管理方法，其中，该方法包括：

接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件；

从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中；

接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。

A2、如A1所述的方法，其中，该方法进一步包括：

指定一个或多个存储服务器，使得业务方将各类业务数据存储到该一个或多个存储服务器上；

所述根据该源数据文件路径获取相应源数据文件包括：根据该源数据文件路径从所述一个或多个存储服务器获取相应源数据文件。

A3、如A1所述的方法，其中，

该方法进一步包括：提供配置页面的地址，当用户访问该地址时，提供该配置页面；

所述接收用户输入的源数据文件路径包括：通过所述配置页面获取用户提交的源数据文件路径。

A4、如A3所述的方法，其中，

该方法进一步包括：通过所述配置页面获取用户提交的输出路径；对所述源数据文件中的数据进行解析处理，得到符合指定格式的数据并保存到所述输出路径上；

所述根据该选择的统计模板对源数据文件中的数据进行统计计算为：根据该选择的统计模板对所述输出路径上的符合指定格式的数据进行统计计算。

A5、如A4所述的方法，其中，所述从统计模板库中选择一个统计模板包括：

确定符合指定格式的数据的属性信息，根据该属性信息查询模板属性列表确定对应的统计模板标识，根据所确定的统计模板标识从统计模板库中选择相应的统计模板；

其中模板属性列表中对应保存了数据的属性信息和对应的统计模板标识。

A6、如A4所述的方法，其中，该方法进一步包括：

在配置页面上展示数据解析样例；

或者，

在配置页面上提供样例数据输入框，通过该输入框接收用户输入的样例数据并进行解析后，将解析结果数据展示给用户。

A7、如A4所述的方法，其中，

该方法进一步包括：通过所述配置页面获取用户输入的数据解析方法信息；

所述对所述源数据文件中的数据进行解析处理包括：根据用户输入的数据解析方法信息对所述源数据文件中的数据进行解析处理。

A8、如A3所述的方法，其中，该方法进一步包括：

通过所述配置页面获取用户输入的源数据文件完整性标识；

所述根据该源数据文件路径获取相应源数据文件包括：根据该源数据文件路径找到相应源数据文件，根据源数据文件完整性标识判断该源数据文件是否完整，是则获取该源数据文件，否则等到该源数据文件完整时再获取该源数据文件。

A9、如A3所述的方法，其中，该方法进一步包括：

通过所述配置页面获取用户提交的任务执行时间信息；

在所述任务执行时间信息对应的一个或多个时间点，执行所述根据该源数据文件路径获取相应源数据文件的步骤，以及从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中的步骤。

A10、如A3所述的方法，其中，该方法进一步包括：

通过所述配置页面获取用户输入的查看权限信息并保存到权限管理数据库中；查看权限信息包括：用户标识和该用户有权限查看的数据信息；

当接收到用户输入的数据查询请求时，通过查询权限管理数据库判断该用户是否有权限进行查询，当判断为有权限时执行所述根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表的步骤。

本发明还公开了B11、一种数据管理装置，其中，该装置包括：

源数据获取单元，适于接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件；

统计计算单元，适于从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中；

图表生成单元，适于接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。

B12、如B11所述的装置，其中，

所述源数据获取单元，进一步适于指定一个或多个存储服务器，使得业务方将各类业务数据存储到该一个或多个存储服务器上；根据该源数据文件路径从所述一个或多个存储服务器获取相应源数据文件。

B13、如B11所述的装置，其中，该装置进一步包括：

配置页面提供单元，适于提供配置页面的地址，当用户访问该地址时，提供该配置页面；

所述源数据获取单元，适于通过所述配置页面获取用户提交的源数据文件路径。

B14、如B13所述的装置，其中，该装置进一步包括：

数据解析单元，适于通过所述配置页面获取用户提交的输出路径；对所述源数据文件中的数据进行解析处理，得到符合指定格式的数据并保存到所述输出路径上；

所述统计计算单元，适于根据该选择的统计模板对所述输出路径上的符合指定格式的数据进行统计计算。

B15、如B14所述的装置，其中，

所述统计计算单元，适于确定符合指定格式的数据的属性信息，根据该属性信息查询模板属性列表确定对应的统计模板标识，根据所确定的统计模板标识从统计模板库中选择相应的统计模板；其中模板属性列表中对应保存了数据的属性信息和对应的统计模板标识。

B16、如B14所述的装置，其中，该装置进一步包括：

样例展示单元，适于在配置页面上展示数据解析样例；或者，在配置页面上提供样例数据输入框，通过该输入框接收用户输入的样例数据并进行解析后，将解析结果数据展示给用户。

B17、如B14所述的装置，其中，

所述数据解析单元，适于通过所述配置页面获取用户输入的数据解析方法信息；根据用户输入的数据解析方法信息对所述源数据文件中的数据进行解析处理。

B18、如B13所述的装置，其中，

所述源数据获取单元，进一步适于通过所述配置页面获取用户输入的源数据文件完整性标识；根据该源数据文件路径找到相应源数据文件，根据源数据文件完整性标识判断该源数据文件是否完整，是则获取该源数据文件，否则等到该源数据文件完整时再获取该源数据文件。

B19、如B13所述的装置，其中，该装置进一步包括：

调度单元，适于通过所述配置页面获取用户提交的任务执行时间信息；在所述任务执行时间信息对应的一个或多个时间点，调度所述源数据获取单元执行所述根据该源数据文件路径获取相应源数据文件的步骤，以及调度所述统计计算单元执行从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中的步骤。

B20、如B13所述的装置，其中，该装置进一步包括：

权限管理单元，适于通过所述配置页面获取用户输入的查看权限信息并保存到权限管理数据库中；查看权限信息包括：用户标识和该用户有权限查看的数据信息；

所述图表生成单元，适于在接收到用户输入的数据查询请求时，通过查询权限管理数据库判断该用户是否有权限进行查询，当判断为有权限时执行所述根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表的步骤。

Claims (10)

1.一种数据管理方法，其中，该方法包括：

接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件；

从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中；

接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。

2.如权利要求1所述的方法，其中，该方法进一步包括：

指定一个或多个存储服务器，使得业务方将各类业务数据存储到该一个或多个存储服务器上；

所述根据该源数据文件路径获取相应源数据文件包括：根据该源数据文件路径从所述一个或多个存储服务器获取相应源数据文件。

3.如权利要求1所述的方法，其中，

该方法进一步包括：提供配置页面的地址，当用户访问该地址时，提供该配置页面；

所述接收用户输入的源数据文件路径包括：通过所述配置页面获取用户提交的源数据文件路径。

4.如权利要求3所述的方法，其中，

该方法进一步包括：通过所述配置页面获取用户提交的输出路径；对所述源数据文件中的数据进行解析处理，得到符合指定格式的数据并保存到所述输出路径上；

所述根据该选择的统计模板对源数据文件中的数据进行统计计算为：根据该选择的统计模板对所述输出路径上的符合指定格式的数据进行统计计算。

5.如权利要求4所述的方法，其中，所述从统计模板库中选择一个统计模板包括：

确定符合指定格式的数据的属性信息，根据该属性信息查询模板属性列表确定对应的统计模板标识，根据所确定的统计模板标识从统计模板库中选择相应的统计模板；

其中模板属性列表中对应保存了数据的属性信息和对应的统计模板标识。

6.一种数据管理装置，其中，该装置包括：

源数据获取单元，适于接收用户输入的源数据文件路径，根据该源数据文件路径获取相应源数据文件；

统计计算单元，适于从统计模板库中选择一个统计模板，根据该选择的统计模板对源数据文件中的数据进行统计计算，得到计算结果数据并保存到计算结果数据库中；

图表生成单元，适于接收用户输入的数据查询请求，根据该数据查询请求从计算结果数据库中获取相应的计算结果数据，根据获取的计算结果数据生成相应的图表。

7.如权利要求6所述的装置，其中，

所述源数据获取单元，进一步适于指定一个或多个存储服务器，使得业务方将各类业务数据存储到该一个或多个存储服务器上；根据该源数据文件路径从所述一个或多个存储服务器获取相应源数据文件。

8.如权利要求6所述的装置，其中，该装置进一步包括：

配置页面提供单元，适于提供配置页面的地址，当用户访问该地址时，提供该配置页面；

所述源数据获取单元，适于通过所述配置页面获取用户提交的源数据文件路径。

9.如权利要求8所述的装置，其中，该装置进一步包括：

数据解析单元，适于通过所述配置页面获取用户提交的输出路径；对所述源数据文件中的数据进行解析处理，得到符合指定格式的数据并保存到所述输出路径上；

所述统计计算单元，适于根据该选择的统计模板对所述输出路径上的符合指定格式的数据进行统计计算。

10.如权利要求9所述的装置，其中，

所述统计计算单元，适于确定符合指定格式的数据的属性信息，根据该属性信息查询模板属性列表确定对应的统计模板标识，根据所确定的统计模板标识从统计模板库中选择相应的统计模板；其中模板属性列表中对应保存了数据的属性信息和对应的统计模板标识。