CN110716961B - 一种数据处理方法及装置 - Google Patents

Abstract

本申请提出一种数据处理方法及装置，该方法包括：在第一清算时刻之后接收目标产品的申购赎回消息，所述申购赎回消息包含所述目标产品的产品标志；所述第一清算时间为目标产品当天销售截止的时刻；从数据库中获取目标交易数据，所述目标交易数据为所述产品标识在第一清算时刻至第二清算时刻的区间内的交易数据，所述第二清算时刻为上一次清算所述目标产品的交易数据的时刻；在获取到所述目标产品的交易数据后，对所述目标交易数据进行清算，得到所述目标产品的清算结果。实施本申请，可以提高清算效率，节省清算时间。

Description

一种数据处理方法及装置

技术领域

本发明涉及计算机领域，尤其涉及一种数据处理方法及装置。

背景技术

随着经济的发展与进步，人们的生活水平提升，越来越多的人通过货币基金、债券或者股票的形式对自己的财产进行管理，因此，相关的基金类产品的种类在日益增加，对于产品产生的交易数据也大大增加，如何对交易数据高效的清算就是一个亟需解决的问题。

开放式基金登记过户(transfer agent，TA)系统是基金交易的重要组成部分，用于登记用户的账户内基金产品份额，也对用户产生的交易数据进行清算和登记。

传统TA系统与销售商之间采用文件交互的方式来处理业务数据，由于文件必须是全量传输的，所以销售商需要在代销该TA系统的所有产品全部都截止交易后，才可以发送所有产品的业务数据文件给TA系统进行清算，因此，清算只能在日终进行。

采用传统TA系统的做法，清算时间长，清算效率低。

发明内容

本申请实施例提供一种数据处理方法及装置，可以提高清算效率，节省清算时间。

第一方面，本申请实施例提供一种数据处理方法，包括：

在第一清算时刻之后接收目标产品的申购赎回消息，所述申购赎回消息包含所述目标产品的产品标志；所述第一清算时间为目标产品当天销售截止的时刻；

从数据库中获取目标交易数据，所述目标交易数据为所述产品标识在第一清算时刻至第二清算时刻的区间内的交易数据，所述第二清算时刻为上一次清算所述目标产品的交易数据的时刻；

在获取到所述目标产品的交易数据后，对所述目标交易数据进行清算，得到所述目标产品的清算结果。

在一种可能的实现方式中，所述从数据库中获取目标交易数据，包括：

解析所述申购赎回消息获得所述目标产品标识，依据所述目标产品标识获得所述第一清算时刻和所述第二清算时刻；

获取目标产品标识对应的数据分库的集合，所述目标产品标识对应的数据分库的集合包括第一数据分库和第二数据分库；

使用所述目标产品标识查询所述第一数据分库和所述第二分库得到第一查询结果和第二查询结果，将所述第一查询结果和所述第二查询结果对应的交易数据作为所述目标交易数据。

在一种可能的实现方式中，所述从所述第一数据分库和所述第二分库中获取第一查询结果和第二查询结果，包括：

根据所述第一清算时刻、所述第二清算时刻以及目标产品标识生成数据库查询指令；

向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据；

接收所述第一数据分库返回的交易数据作为第一查询结果，接收所述第二数据分库返回的交易数据作为第二查询结果。

在一种可能的实现方式中，所述方法还包括：

判断在预设时间阈值内是否获取到所述第一查询结果和第二查询结果；

在预设时间阈值内未获取到所述第一查询结果和所述第二查询结果的情况下，向所述第一数据分库和所述第二数据分库发送分表查询指令，所述分表查询指令用于指示对所述第一数据分库中的第一数据表和所述第二数据分库中的第二数据表进行拆分后查询，分别得到M个和N个拆分后的数据表，所述M、N为大于0的整数；

所述向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据，包括：

向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回分别从所述M个和所述N个拆分后的数据表中获取所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据。

在一种可能的实现方式中，所述接收所述第一数据分库返回的交易数据作为第一查询结果，接收所述第二数据分库返回的交易数据作为第二查询结果，包括：

接收所述第一数据分库返回的第一文件作为第一查询结果，接收所述第二数据分库返回的第二文件作为第二查询结果，其中，所述第一文件和所述第二文件分别为一个或多个第一文件分片和一个或多个第二文件分片，所述一个或多个第一文件分片和所述一个或多个第二文件分片的标识为其自身的哈希值。

在一种可能的实现方式中，所述当获取到所述数据时，对所述目标产品的数据进行清算，得到清算结果，包括：

获取所述目标产品标识；

对所述目标产品标识取哈希值后再取模，得到所述目标产品清算模板存储的数据库标识，

从所述数据库标识对应的数据库中获取所述目标产品对应的清算模板；

利用所述清算模板对所述目标产品的交易数据进行清算。

在一种可能的实现方式中，所述方法还包括：

当对所述目标产品交易数据清算出现错误时，生成用于提示所述清算错误的提示信息，所述提示信息包含所述清算错误对应错误编号的错误日志；

将所述提示信息发送给所述目标产品对应的业务人员。

在一种可能的实现方式中，所述方法还包括：

在获取到所述一个或多个第一文件分片后，读取所述第一文件分片中的数字签名；

采用密码算法对所述数字签名进行验签，得到所述第一文件分片的哈希值，作为第一哈希值；

计算所述第一文件分片的哈希值，得到第二哈希值；

判断所述第一哈希值和所述第二哈希值是否一致；

在所述第一哈希值和所述第二哈希值一致的情况下，执行所述对所述目标交易数据进行清算，得到所述目标产品的清算结果的步骤；

在所述文件标识和所述哈希值不一致的情况下，重新从数据分库中获取目标交易数据。

第二方面，本申请实施例提供了一种数据处理装置，包括：

接收单元，用于在第一清算时刻之后接收目标产品的申购赎回消息，所述申购赎回消息包含所述目标产品的产品标志；所述第一清算时间为目标产品当天销售截止的时刻；

获取单元，用于从数据库中获取目标交易数据，所述目标交易数据为所述产品标识在第一清算时刻至第二清算时刻的区间内的交易数据，所述第二清算时刻为上一次清算所述目标产品的交易数据的时刻；

清算单元，用于在获取到所述目标产品的交易数据后，对所述目标交易数据进行清算，得到所述目标产品的清算结果。

在一种可能的实现方式中，所述获取单元，具体用于：

解析所述申购赎回消息获得所述目标产品标识，依据所述目标产品标识获得所述第一清算时刻和所述第二清算时刻；

获取目标产品标识对应的数据分库的集合，所述目标产品标识对应的数据分库的集合包括第一数据分库和第二数据分库；

使用所述目标产品标识查询所述第一数据分库和所述第二分库得到第一查询结果和第二查询结果，将所述第一查询结果和所述第二查询结果对应的交易数据作为所述目标交易数据。

在一种可能的实现方式中，所述获取单元，具体用于：

根据所述第一清算时刻、所述第二清算时刻以及目标产品标识生成数据库查询指令；

向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据；

接收所述第一数据分库返回的交易数据作为第一查询结果，接收所述第二数据分库返回的交易数据作为第二查询结果。

在一种可能的实现方式中，所述获取单元，还用于：

判断在预设时间阈值内是否获取到所述第一查询结果和第二查询结果；

在预设时间阈值内未获取到所述第一查询结果和所述第二查询结果的情况下，向所述第一数据分库和所述第二数据分库发送分表查询指令，所述分表查询指令用于指示对所述第一数据分库中的第一数据表和所述第二数据分库中的第二数据表进行拆分后查询，分别得到M个和N个拆分后的数据表，所述M、N为大于0的整数；

所述获取单元具体用于：向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回分别从所述M个和所述N个拆分后的数据表中获取所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据。

在一种可能的实现方式中，所述获取单元，具体用于：

接收所述第一数据分库返回的第一文件作为第一查询结果，接收所述第二数据分库返回的第二文件作为第二查询结果，其中，所述第一文件和所述第二文件分别为一个或多个第一文件分片和一个或多个第二文件分片，所述一个或多个第一文件分片和所述一个或多个第二文件分片的标识为其自身的哈希值。

在一种可能的实现方式中，所述清算单元，具体用于：

获取所述目标产品标识；

对所述目标产品标识取哈希值后再取模，得到所述目标产品清算模板存储的数据库标识，

从所述数据库标识对应的数据库中获取所述目标产品对应的清算模板；

利用所述清算模板对所述目标产品的交易数据进行清算。

在一种可能的实现方式中，所述数据处理装置，还包括：

生成单元，用于当对所述目标产品交易数据清算出现错误时，生成用于提示所述清算错误的提示信息，所述提示信息包含所述清算错误对应错误编号的错误日志；

发送单元，用于将所述提示信息发送给所述目标产品对应的业务人员。

在一种可能的实现方式中，所述获取单元，还用于：

在获取到所述一个或多个第一文件分片后，读取所述第一文件分片中的数字签名；

采用SM2算法对所述数字签名进行验签，得到所述第一文件分片的哈希值；

判断所述第一文件分片的标识和所述哈希值是否一致；

在所述文件标识和所述哈希值一致的情况下，执行所述对所述目标交易数据进行清算，得到所述目标产品的清算结果的步骤；

在所述文件标识和所述哈希值不一致的情况下，重新从数据分库中获取目标交易数据。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器、收发器和存储器，该处理器、收发器和存储器相互连接。该存储器用于存储支持该终端设备执行上述第一方面和/或第一方面任一种可能的实现方式提供的方法的计算机程序，该计算机程序包括程序指令，该收发器用于接收和发送数据，该处理器被配置用于调用上述程序指令，执行上述第一方面和/或第一方面任一种可能的实施方式所提供的方法。

第四方面，本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序包括程序指令，该程序指令当被处理器执行时使该处理器执行上述第一方面和/或第一方面任一种可能的实施方式所提供的方法。

本申请实施例中，通过在第一清算时刻后对从数据库中获取到目标产品的交易数据后，对目标产品的交易数据进行清算，实现了在日中对目标产品进行清算，使得清算时间更为灵活，同时，对于目标产品的大量交易数据，通过采取分库的形式进行存储，解决了一个数据库存储容量、处理能力有限的问题。通过对数据库中的数据表进行分表查询，以及在文件传输的过程中分片传输的方式，使得实现了快速查询目标产品的交易数据，达到了提升清算效率，节约清算时间的效果。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请提出的一种数据处理方法的流程图；

图2是本申请提出的另一种数据处理方法的流程图；

图3是本申请提出的一种数据处理装置的结构示意图；

图4是本申请提出的一种电子设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。

请参阅图1，图1是本申请实施例提供的数据处理方法的一流程示意图。如图1所示，该信息处理方法包括：

101、在第一清算时刻之后接收目标产品的申购赎回消息。

本申请实施例中，数据处理装置可以是服务器，也可以是分布式服务器集群等电子设备，能够进行数据清算处理的设备。

在一种可能的实现方式中，上述目标产品可以不限于包括基金产品、债券、股票，为了描述方便，下面将统一以基金产品为例进行说明。第一清算时刻为目标产品当天销售截止的时刻，可以理解的是，不同的基金产品当天销售截止的时间不同，本申请实施例可以在当天目标产品销售截止之后，以一个产品为基准开始进行清算，不需要等到所有产品都销售截止之后开始清算。

基金产品销售商在将当日该产品的申请赎回消息在该产品当天销售截止后发送至TA系统，TA系统根据该产品的产品标识，从数据库中获取有关该产品的所有交易数据，进行清算。其中，销售商可以以文件的形式将申请赎回的数据传输。

其中，一个或多个销售商发送的目标产品申购赎回消息包括目标产品的产品标识，该产品标识可以是目标产品的名称、编号等，这里不做限定；包括目标产品的当天的申购赎回的数据。一个基金产品销售商在产生了交易数据后，将交易数据存储在数据库中，该数据库存储了该销售商销售的至少一个基金产品的交易数据，其中，上述目标产品的申购赎回消息还可以包括第二清算时刻，第二清算时刻为该目标产品上一次清算交易数据的时刻。

102、从数据库中获取目标交易数据。

在一种可能的实现方式中，数据库可以是一个数据库，也可以是多个数据分库，为了提高系统的稳定性和扩展性，这里采取了分库的思路，将每一个销售商的数据存储在一个数据分库中，而TA系统在查询的时候，需连接每一个数据库进行分别查询目标产品的交易数据，并对查询到的交易数据进行清算。其中，每个数据分库中存储目标产品的交易数据，每天根据当天的销售情况对数据库中的数据进行更新。可以理解的是，每一个数据分库中存储的是该销售商销售的至少一个基金产品的数据。

在从一个或多个数据分库中获取目标交易产品时，首先确定存储上述目标基金产品对应的数据分库的集合，这个集合可以是服务器之前存储的数据分库的标识，根据目标基金产品的产品标识就可以查找到对应的一个或多个数据分库的标识。

在查找到一个或多个数据分库的情况下，分别连接查找到的第一数据分库和第二数据分库，这里以两个数据分库代指多个数据分库，并根据目标基金产品的产品标识确定目标产品销售截止时刻，从上述的第一数据分库和上述的第二数据分库中分别获取到第一查询结果和第二查询结果，第一查询结果和第二查询结果为分别存储在不同数据分库中同一目标基金产品的交易数据。

该目标交易数据是目标产品的交易数据是根据目标产品的产品标识确定的第一清算时刻和第二清算时刻区间内的交易数据，第二清算时刻可以是目标产品上一次清算交易数据的时刻，若是每日清算的基金产品，第二清算时刻也可以是第一清算时刻前24小时对应的时刻，例如：第一清算时刻为今天的18：00，则第二清算时刻可以是昨天的18:00点。

进一步地，在获取第一查询结果和第二查询结果的过程中，若在获取每一个数据分库的查询结果的时间大于或等于预设时间阈值时，则对数据分库中的数据表进行分表处理，将原有的一个数据表拆分为多个数据表，对数据库进行分表处理能够提高查询效率，节约查询时间。

进一步地，在获取到一个或多个查询结果后，将查询结果以文件的形式导出，并进行传输，为了提升传输效率，可以将文件分片之后再进行传输，并且可以将文件内容的哈希值作为文件的唯一标识。

可选地，可以对文件的内容进行数字签名，即用文件或者文件分片的哈希值进行数字签名，在TA系统接收到该文件或者文件分片时，先验签，得到文件或者文件分片的哈希值，再根据接收到的文件内容，计算出接收到的文件内容的哈希值，比较数字签名中的哈希值和文件内容求出的哈希值是否一致，在一致的情况下，确定文件内容传输无误，则开始对文件的内容进行清算，在不一致的情况下，则重新获取目标产品的交易数据，其中数字签名的算法可以是椭圆曲线公钥密码算法(SM2)密码算法，也可以是其他的密码算法。

103、在获取到上述目标产品的交易数据后，对上述目标交易数据进行清算，得到上述目标产品的清算结果。

在一种可能的实现方式中，在获取到目标产品的交易数据之后，则可以对该目标交易数据进行清算。其中，目标产品的交易数据包含目标产品的产品标识，根据目标产品的产品标识，可查询到存储清算该目标产品的清算模板的数据库标识，从数据库标识对应的数据库中查询到该目标产品的清算模板，并对该目标产品开始清算。

其中，存储基金产品的清算模板通过对目标产品的产品标识取哈希值再取模，得到存储目标基金产品清算模板存储的redis集群的主机号，Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，在获取到存储在redis集群的主机号之后，可以确定存储的数据库以及存储的位置，从而查询到存储的目标产品的产品标识，并且每在新增一个基金产品时，可以计算基金产品的产品标识哈希值再取模，确定redis集群的主机号，再将路由到改集群主机号对应的主机上，实现清算模板的分片存储。

在一种可能的实现方式中，当一个基金产品的交易数据正在清算中，同时也获取到了另一个基金产品的交易数据，可并行清算两个或多个基金产品的交易数据。

进一步地，在清算的过程中若出现清算错误的时候，生成用于提示清算错误的提示信息，该提示信息包含上述清算错误对应错误编号的错误日志，并将提示信息发送至对应的业务人员。还可以以声、光等方式提示业务人员，发生清算错误，请求业务人员处理。

本申请实施例中，通过在第一清算时刻后对从数据库中获取到目标产品的交易数据后，对目标产品的交易数据进行清算，实现了在日中对目标产品进行清算，使得清算时间更为灵活，同时，对于目标产品的大量交易数据，通过采取分库的形式进行存储，解决了一个数据库存储容量、处理能力有限的问题。通过对数据库中的数据表进行分表查询，以及在文件传输的过程中分片传输的方式，使得实现了快速查询目标产品的交易数据，达到了提升清算效率，节约清算时间的效果。

请参阅图2，图2是本申请实施例提供的数据处理方法的另一流程示意图。如图2所示，该数据处理方法包括：

201、在第一清算时刻之后接收目标产品的申购赎回消息。

其中，步骤201的具体实现过程可参见上述图1所对应实施例中对步骤101的描述，这里将不再继续进行赘述。

202、解析上述申购赎回消息获得上述目标产品的标识，依据上述目标产品标识获得第一清算时刻和第二清算时刻。

在获取到一个或多个销售商发送的目标产品申购赎回消息时，解析该消息的报文，得到该消息中的信息，其中，信息包括目标产品的产品标识，该产品标识可以是目标产品的名称、编号等，这里不做限定；包括目标产品的当天的申购赎回的数据，一个基金产品销售商在产生了交易数据后，将交易数据存储在数据库中，该数据库存储了该销售商销售的至少一个基金产品的交易数据，其中，上述目标产品的申购赎回消息还可以包括第二清算时刻，第二清算时刻为该目标产品上一次清算交易数据的时刻，也可以不包含第二清算时刻，则可根据目标产品的产品标识进行查询上一次清算该目标产品的记录，得到第二清算时刻。

203、获取目标产品标识对应的数据分库的集合。

其中，目标产品的交易数据被分别存储在不同的数据分库中，例如：一个销售商的数据存储在一个数据分库中，则目标产品的交易数据被分别存储在不同销售商的数据分库中，每个数据分库中的交易数据包含目标产品的产品标识，则可根据目标产品的产品标识查询到包含目标产品标识的数据分库的集合，该集合为一个或多个数据分库的标识。

204、使用上述目标产品标识查询第一数据分库和第二分库得到第一查询结果和第二查询结果，将上述第一查询结果和上述第二查询结果对应的交易数据作为上述目标交易数据。

在查询到数据分库集合后，根据输入的数据库查询参数，即第一清算时刻、第二清算时刻以及目标产品的产品标识，生成查询语句，分别向上述每一个数据分库发送查询指令，该查询指令包括根据查询参数生成的查询语句，可以是结构化查询语言(StructuredQuery Language，SQL)的查询语句，这里不做限定。

在一种可能的实现方式中，这里可以是连接第一数据分库进行查询，在得到第一查询结果后，连接第二数据分库进行查询，得到第二查询结果；也可以是同时连接多个数据分库进行查询，即读的操作，得到多个查询结果。

在代码的实现过程中，可以使用多个sqlsessionfactory，调用注入的不同的mapper的切换数据库实现mybatis跨库查询。在本申请实施例中，使用mybatis框架，可自动选择已经查询到的数据分库进行切换查询。

可选地，判断在预设时间阈值内是否获取到上述第一查询结果和第二查询结果；在预设时间阈值内未获取到上述第一查询结果和上述第二查询结果的情况下，确定当前数据分库响应速度过慢，则向上述第一数据分库和上述第二数据分库发送分表查询指令，该分表查询指令用于指示对上述第一数据分库中的第一数据表和上述第二数据分库中的第二数据表进行拆分后查询，分别得到M个和N个拆分后的数据表，上述M、N为大于0的整数。

其中，可以水平分表，也可以垂直分表，本申请实施例以水平分表为例进行讲解。依次从数据中取出前Q行数据形成一个新的表，其中Q是大于0的整数。例如：可以依次从第一数据分库的第一数据表中的前20万条数据创建一个新的数据表。则在接收到查询指令后，原有的对一张表进行查询而现在对多张表分别进行查询，得到的结果为第一数据分库中包含目标产品标识的交易数据。

具体地，每一个数据分库在将查询到的包含目标产品标识的交易数据后，以文件的形式导出，则TA系统接收到包含第一数据分库标识的文件作为第一查询结果，接收到包含第二数据分库标识的文件作为第二查询结果。

进一步地，在传输文件的过程中，若文件过大，则将传输的文件进行分片，可以按照固定分片大小对文件进行分片，例如分片后的文件可以是2M，1M，512KB，或者按照固定分片数量对文件进行分片，这里不做限定。计算每一个小文件的哈希值，作为小文件的文件标识，在接收到每一个分片文件后，计算分片文件的哈希值与文件的标识比较，可通过比较哈希值的方式确定传输的内容是否正确。

可选地，可以对文件的内容进行数字签名，即用文件或者文件分片的哈希值进行数字签名，在TA系统接收到该文件或者文件分片时，先验签，得到文件或者文件分片的哈希值，再根据接收到的文件内容，计算出接收到的文件内容的哈希值，比较数字签名中的哈希值和文件内容求出的哈希值是否一致，在一致的情况下，确定文件内容传输无误，则开始对文件的内容进行清算，在不一致的情况下，则重新获取目标产品的交易数据，其中数字签名的算法可以是椭圆曲线公钥密码算法(SM2)密码算法，也可以是其他的密码算法，这里不做限定。

205、在获取到上述目标产品的交易数据后，对上述目标交易数据进行清算，得到上述目标产品的清算结果。

其中，步骤205的具体实现过程可参见上述图1所对应实施例中对步骤103的描述，这里将不再继续进行赘述。

本申请实施例中，通过在第一清算时刻后对从数据库中获取到目标产品的交易数据后，对目标产品的交易数据进行清算，实现了在日中对目标产品进行清算，使得清算时间更为灵活，同时，对于目标产品的大量交易数据，通过采取分库的形式进行存储，解决了一个数据库存储容量、处理能力有限的问题。通过对数据库中的数据表进行分表查询，以及在文件传输的过程中分片传输的方式，使得实现了快速查询目标产品的交易数据，达到了提升清算效率，节约清算时间的效果。

请参阅图3，图3是本申请提出的一种测试装置的结构示意图。如图3所示，该数据处理装置3000包括：

接收单元301，用于在第一清算时刻之后接收目标产品的申购赎回消息，上述申购赎回消息包含上述目标产品的产品标志；上述第一清算时间为目标产品当天销售截止的时刻；

获取单元302，用于从数据库中获取目标交易数据，上述目标交易数据为上述产品标识在第一清算时刻至第二清算时刻的区间内的交易数据，上述第二清算时刻为上一次清算上述目标产品的交易数据的时刻；

清算单元303，用于在获取到上述目标产品的交易数据后，对上述目标交易数据进行清算，得到上述目标产品的清算结果。

在一种可能的实现方式中，上述获取单元302，具体用于：

解析上述申购赎回消息获得上述目标产品标识，依据上述目标产品标识获得上述第一清算时刻和上述第二清算时刻；

获取目标产品标识对应的数据分库的集合，上述目标产品标识对应的数据分库的集合包括第一数据分库和第二数据分库；

使用上述目标产品标识查询上述第一数据分库和上述第二分库得到第一查询结果和第二查询结果，将上述第一查询结果和上述第二查询结果对应的交易数据作为上述目标交易数据。

在一种可能的实现方式中，上述获取单元302，具体用于：

根据上述第一清算时刻、上述第二清算时刻以及目标产品标识生成数据库查询指令；

向上述第一数据分库和上述第二数据分库分别发送上述数据库查询指令，上述数据库查询指令用于指示返回上述第一清算时刻和上述第二清算时刻之间的时间段内，上述目标产品标识对应的交易数据；

接收上述第一数据分库返回的交易数据作为第一查询结果，接收上述第二数据分库返回的交易数据作为第二查询结果。

在一种可能的实现方式中，上述获取单元302，还用于：

判断在预设时间阈值内是否获取到上述第一查询结果和第二查询结果；

在预设时间阈值内未获取到上述第一查询结果和上述第二查询结果的情况下，向上述第一数据分库和上述第二数据分库发送分表查询指令，上述分表查询指令用于指示对上述第一数据分库中的第一数据表和上述第二数据分库中的第二数据表进行拆分后查询，分别得到M个和N个拆分后的数据表，上述M、N为大于0的整数；

上述获取单元具体用于：向上述第一数据分库和上述第二数据分库分别发送上述数据库查询指令，上述数据库查询指令用于指示返回分别从上述M个和上述N个拆分后的数据表中获取上述第一清算时刻和上述第二清算时刻之间的时间段内，上述目标产品标识对应的交易数据。

在一种可能的实现方式中，上述获取单元302，具体用于：

接收上述第一数据分库返回的第一文件作为第一查询结果，接收上述第二数据分库返回的第二文件作为第二查询结果，其中，上述第一文件和上述第二文件分别为一个或多个第一文件分片和一个或多个第二文件分片，上述一个或多个第一文件分片和上述一个或多个第二文件分片的标识为其自身的哈希值。

在一种可能的实现方式中，上述清算单元303，具体用于：

获取上述目标产品标识；

对上述目标产品标识取哈希值后再取模，得到上述目标产品清算模板存储的数据库标识，

从上述数据库标识对应的数据库中获取上述目标产品对应的清算模板；

利用上述清算模板对上述目标产品的交易数据进行清算。

在一种可能的实现方式中，上述数据处理装置3000，还包括：

生成单元304，用于当对上述目标产品交易数据清算出现错误时，生成用于提示上述清算错误的提示信息，上述提示信息包含上述清算错误对应错误编号的错误日志；

发送单元305，用于将上述提示信息发送给上述目标产品对应的业务人员。

在一种可能的实现方式中，上述获取单元，还用于：

在获取到上述一个或多个第一文件分片后，读取上述第一文件分片中的数字签名；

采用SM2算法对上述数字签名进行验签，得到上述第一文件分片的哈希值；

判断上述第一文件分片的标识和上述哈希值是否一致；

在上述文件标识和上述哈希值一致的情况下，执行上述对上述目标交易数据进行清算，得到上述目标产品的清算结果的步骤；

在上述文件标识和上述哈希值不一致的情况下，重新从数据分库中获取目标交易数据。

可以理解的是，图3所示的数据传输装置的具体实现方式还可参考图1和图2所示的方法，这里不再一一详述。

本申请实施例提出的装置，通过在第一清算时刻后对从数据库中获取到目标产品的交易数据后，对目标产品的交易数据进行清算，实现了在日中对目标产品进行清算，使得清算时间更为灵活，同时，对于目标产品的大量交易数据，通过采取分库的形式进行存储，解决了一个数据库存储容量、处理能力有限的问题。通过对数据库中的数据表进行分表查询，以及在文件传输的过程中分片传输的方式，使得实现了快速查询目标产品的交易数据，达到了提升清算效率，节约清算时间的效果。

请参阅图4，图4是本发明实施例提供的一电子设备的结构示意图。如图4所示，该电子设备包括：一个或多个处理器401、收发器402、存储器403。上述处理器401收发器402以及存储器403通过总线404连接。收发器402用于接收和发送数据。存储器403用于存储计算机程序，该计算机程序包括程序指令，处理器401用于执行存储器403存储的程序指令，其中，处理器401被配置用于调用程序指令执行以下步骤：

上述处理器401控制收发器402在第一清算时刻之后接收目标产品的申购赎回消息，上述申购赎回消息包含上述目标产品的产品标志；上述第一清算时间为目标产品当天销售截止的时刻；

从数据库中获取目标交易数据，上述目标交易数据为上述产品标识在第一清算时刻至第二清算时刻的区间内的交易数据，上述第二清算时刻为上一次清算上述目标产品的交易数据的时刻；

在获取到上述目标产品的交易数据后，对上述目标交易数据进行清算，得到上述目标产品的清算结果。

在一种可能的实现方式中，上述处理器401从数据库中获取目标交易数据，包括：

解析上述申购赎回消息获得上述目标产品标识，依据上述目标产品标识获得上述第一清算时刻和上述第二清算时刻；

获取目标产品标识对应的数据分库的集合，上述目标产品标识对应的数据分库的集合包括第一数据分库和第二数据分库；

使用上述目标产品标识查询上述第一数据分库和上述第二分库得到第一查询结果和第二查询结果，将上述第一查询结果和上述第二查询结果对应的交易数据作为上述目标交易数据。

在一种可能的实现方式中，上述处理器401从上述第一数据分库和上述第二分库中获取第一查询结果和第二查询结果，包括：

根据上述第一清算时刻、上述第二清算时刻以及目标产品标识生成数据库查询指令；

向上述第一数据分库和上述第二数据分库分别发送上述数据库查询指令，上述数据库查询指令用于指示返回上述第一清算时刻和上述第二清算时刻之间的时间段内，上述目标产品标识对应的交易数据；

上述处理器401控制收发器402接收上述第一数据分库返回的交易数据作为第一查询结果，接收上述第二数据分库返回的交易数据作为第二查询结果。

在一种可能的实现方式中，上述处理器401还被配置用于调用程序指令执行以下步骤：

判断在预设时间阈值内是否获取到上述第一查询结果和第二查询结果；

上述处理器401控制收发器402在预设时间阈值内未获取到上述第一查询结果和上述第二查询结果的情况下，向上述第一数据分库和上述第二数据分库发送分表查询指令，上述分表查询指令用于指示对上述第一数据分库中的第一数据表和上述第二数据分库中的第二数据表进行拆分后查询，分别得到M个和N个拆分后的数据表，上述M、N为大于0的整数；

上述向上述第一数据分库和上述第二数据分库分别发送上述数据库查询指令，上述数据库查询指令用于指示返回上述第一清算时刻和上述第二清算时刻之间的时间段内，上述目标产品标识对应的交易数据，包括：

上述处理器401控制收发器402向上述第一数据分库和上述第二数据分库分别发送上述数据库查询指令，上述数据库查询指令用于指示返回分别从上述M个和上述N个拆分后的数据表中获取上述第一清算时刻和上述第二清算时刻之间的时间段内，上述目标产品标识对应的交易数据。

在一种可能的实现方式中，上述处理器401控制收发器402接收上述第一数据分库返回的交易数据作为第一查询结果，接收上述第二数据分库返回的交易数据作为第二查询结果，包括：

接收上述第一数据分库返回的第一文件作为第一查询结果，接收上述第二数据分库返回的第二文件作为第二查询结果，其中，上述第一文件和上述第二文件分别为一个或多个第一文件分片和一个或多个第二文件分片，上述一个或多个第一文件分片和上述一个或多个第二文件分片的标识为其自身的哈希值。

在一种可能的实现方式中，上述处理器401当获取到上述数据时，对上述目标产品的数据进行清算，得到清算结果，包括：

获取上述目标产品标识；

对上述目标产品标识取哈希值后再取模，得到上述目标产品清算模板存储的数据库标识，

从上述数据库标识对应的数据库中获取上述目标产品对应的清算模板；

利用上述清算模板对上述目标产品的交易数据进行清算。

在一种可能的实现方式中，上述处理器401被配置用于调用程序指令执行以下步骤：

当对上述目标产品交易数据清算出现错误时，生成用于提示上述清算错误的提示信息，上述提示信息包含上述清算错误对应错误编号的错误日志；

将上述提示信息发送给上述目标产品对应的业务人员。

应当理解，在一些可行的实施方式中，上述处理器401可以是中央处理单元(central processing unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(digital signal processor，DSP)、专用集成电路(application specific integratedcircuit，ASIC)、现成可编程门阵列(field-programmable gate array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

该存储器403可以包括只读存储器和随机存取存储器，并向处理器401提供指令和数据。存储器403的一部分还可以包括非易失性随机存取存储器。例如，存储器403还可以存储设备类型的信息。

具体实现中，上述信息处理装置可通过其内置的各个功能模块执行如上述图1以及图2中各个步骤所提供的实现方式，具体可参见上述各个步骤所提供的实现方式，在此不再赘述。

本申请实施例中，电子设备通过在第一清算时刻后对从数据库中获取到目标产品的交易数据后，对目标产品的交易数据进行清算，实现了在日中对目标产品进行清算，使得清算时间更为灵活，同时，对于目标产品的大量交易数据，通过采取分库的形式进行存储，解决了一个数据库存储容量、处理能力有限的问题。通过对数据库中的数据表进行分表查询，以及在文件传输的过程中分片传输的方式，使得实现了快速查询目标产品的交易数据，达到了提升清算效率，节约清算时间的效果。

上述计算机可读存储介质可以是前述任一实施例提供的任务处理装置或者上述信息处理装置的内部存储单元，例如信息处理装置的硬盘或内存。该计算机可读存储介质也可以是该信息处理装置的外部存储设备，例如该信息处理装置上配备的插接式硬盘，智能存储卡(smart media card,SMC)，安全数字(secure digital,SD)卡，闪存卡(flashcard)等。上述计算机可读存储介质还可以包括磁碟、光盘、只读存储记忆体(read-onlymemory，ROM)或随机存储记忆体(randomaccessmemory，RAM)等。进一步地，该计算机可读存储介质还可以既包括该信息处理装置的内部存储单元也包括外部存储设备。该计算机可读存储介质用于存储该计算机程序以及该信息处理装置所需的其他程序和数据。该计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。

本发明的权利要求书和说明书及附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本发明的至少一个实施例中。在说明书中的各个位置展示该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

以上所揭露的仅为本发明较佳实施例而已，当然不能以此来限定本发明之权利范围，因此依本发明权利要求所作的等同变化，仍属本发明所涵盖的范围。

Claims (7)

1.一种数据处理方法，其特征在于，包括：

在第一清算时刻之后接收目标产品的申购赎回消息，所述申购赎回消息包含所述目标产品的目标产品标识；所述第一清算时刻为目标产品当天销售截止的时刻；

解析所述申购赎回消息获得所述目标产品标识，依据所述目标产品标识获得所述第一清算时刻和第二清算时刻，所述第二清算时刻为上一次清算所述目标产品的交易数据的时刻；

获取所述目标产品标识对应的数据分库的集合，所述目标产品标识对应的数据分库的集合包括第一数据分库和第二数据分库；

根据所述第一清算时刻、所述第二清算时刻以及目标产品标识生成数据库查询指令；

向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据；

接收所述第一数据分库返回的交易数据作为第一查询结果，接收所述第二数据分库返回的交易数据作为第二查询结果，将所述第一查询结果和所述第二查询结果对应的交易数据作为目标交易数据；

判断在预设时间阈值内是否获取到所述第一查询结果和所述第二查询结果；

在预设时间阈值内未获取到所述第一查询结果和所述第二查询结果的情况下，向所述第一数据分库和所述第二数据分库发送分表查询指令，所述分表查询指令用于指示对所述第一数据分库中的第一数据表和所述第二数据分库中的第二数据表进行拆分后查询，分别得到M个和N个拆分后的数据表，M、N为大于0的整数；

向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回分别从所述M个和所述N个拆分后的数据表中获取所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据；

在获取到所述目标产品的交易数据后，对所述目标交易数据进行清算，得到所述目标产品的清算结果。

2.根据权利要求1所述的方法，其特征在于，所述接收所述第一数据分库返回的交易数据作为第一查询结果，接收所述第二数据分库返回的交易数据作为第二查询结果，包括：

接收所述第一数据分库返回的第一文件作为第一查询结果，接收所述第二数据分库返回的第二文件作为第二查询结果，其中，所述第一文件和所述第二文件分别为一个或多个第一文件分片和一个或多个第二文件分片，所述一个或多个第一文件分片和所述一个或多个第二文件分片的标识为其自身的哈希值。

3.根据权利要求1所述的方法，其特征在于，所述在获取到所述目标产品的交易数据后，对所述目标交易数据进行清算，得到所述目标产品的清算结果，包括：

获取所述目标产品标识；

对所述目标产品标识取哈希值后再取模，得到所述目标产品清算模板存储的数据库标识，

从所述数据库标识对应的数据库中获取所述目标产品对应的清算模板；

利用所述清算模板对所述目标产品的交易数据进行清算。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

当对所述目标产品交易数据清算出现错误时，生成用于提示清算错误的提示信息，所述提示信息包含所述清算错误对应错误编号的错误日志；

将所述提示信息发送给所述目标产品对应的业务人员。

5.一种数据处理装置，其特征在于，包括：

接收单元，用于在第一清算时刻之后接收目标产品的申购赎回消息，所述申购赎回消息包含所述目标产品的目标产品标识；所述第一清算时刻为目标产品当天销售截止的时刻；

获取单元，用于解析所述申购赎回消息获得所述目标产品标识，依据所述目标产品标识获得所述第一清算时刻和第二清算时刻，所述第二清算时刻为上一次清算所述目标产品的交易数据的时刻；

获取所述目标产品标识对应的数据分库的集合，所述目标产品标识对应的数据分库的集合包括第一数据分库和第二数据分库；

根据所述第一清算时刻、所述第二清算时刻以及目标产品标识生成数据库查询指令；

向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据；

接收所述第一数据分库返回的交易数据作为第一查询结果，接收所述第二数据分库返回的交易数据作为第二查询结果，将所述第一查询结果和所述第二查询结果对应的交易数据作为目标交易数据；

判断在预设时间阈值内是否获取到所述第一查询结果和所述第二查询结果；

在预设时间阈值内未获取到所述第一查询结果和所述第二查询结果的情况下，向所述第一数据分库和所述第二数据分库发送分表查询指令，所述分表查询指令用于指示对所述第一数据分库中的第一数据表和所述第二数据分库中的第二数据表进行拆分后查询，分别得到M个和N个拆分后的数据表，M、N为大于0的整数；

向所述第一数据分库和所述第二数据分库分别发送所述数据库查询指令，所述数据库查询指令用于指示返回分别从所述M个和所述N个拆分后的数据表中获取所述第一清算时刻和所述第二清算时刻之间的时间段内，所述目标产品标识对应的交易数据；

清算单元，用于在获取到所述目标产品的交易数据后，对所述目标交易数据进行清算，得到所述目标产品的清算结果。

6.一种电子设备，其特征在于，包括处理器、存储器和总线；所述处理器和所述存储器通过所述总线相互连接；其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如权利要求1至4任一项所述的方法。

7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时，使所述处理器执行如权利要求1至4任一项所述的方法。