CN112668303A - 数据处理方法、装置、设备及存储介质 - Google Patents

Abstract

本发明涉及研发管理领域，公开了一种数据处理方法、装置、设备及存储介质。本方法包括：获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

Description

数据处理方法、装置、设备及存储介质

技术领域

本发明涉及大数据领域，尤其涉及一种数据处理方法、装置、设备及存储介质。

背景技术

随着公司业务的扩展，各种理财产品的诞生给人们带来了资产管理的遍历以及资产上的收益。对于各种产品对应的资产管理流程复杂，且不同的业务场景涉及到的核算处理规则众多。

目前采用针对不同业务场景下的核算处理规则开发不同的核算处理逻辑，基于前端对不同交易场景的判断，分别调用与该业务场景对应的核算处理逻辑，以达到面对不同业务场景可以得到准确的核算结果的目的。然而，面对目前不断增加的理财产品业务，需要开发的核算处理逻辑的数量也随之增加。各种现有业务交易费用核算，大多通过人工统计核算完成，工作繁杂且出错率高。对于核算后的数据如果不一致，也不能够采用邮件监控的方式进行监控报警。无法将数据做成报表，通过可视化界面的方式直观形式提供给相关人员从多维度统计分析数据。

发明内容

本发明的主要目的是解决无法根据不同的对接渠道的核算方式进行不同的处理，数据处理效率低下的技术问题。

本发明第一方面提供了一种数据处理方法，包括：

接收结算文件获取请求，调用预置第三方收付接口，获取结算文件，其中，所述结算文件包括收付款交易数据，所述交易数据包括所有交易订单对应的结算手续费；

对所述结算文件进行解析，得到所述结算文件中交易数据的待核算交易要素；

根据所述待核算交易要素，确定所述所有交易订单对应的结算计费方式；

基于所述结算计费方式，对所述所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

将预置交易流水表中的所述交易订单对应的结算手续费与所述目标核算数据进行比对，判断所述交易订单对应的结算手续费与所述目标核算数据是否一致；

若所述交易订单对应的结算手续费与所述目标核算数据一致，则所述交易订单核算成功，并将核算结果同步至数据平台。

可选地，在本发明第一方面的第一种实现方式中，所述接收结算文件获取请求，调用预置第三方收付接口，获取结算文件包括：

获取索引文件获取请求，所述索引文件获取请求中携带第一回源信息和索引文件标识；

获取与所述索引文件标识对应的索引文件；

将所述第一回源信息添加至所述索引文件中，得到目标索引文件；

接收基于所述目标索引文件的结算文件获取请求，根据所述结算文件获取请求获取结算文件。

可选地，在本发明第一方面的第二种实现方式中，在所述接收结算文件获取请求，调用预置第三方收付接口，获取结算文件之前，还包括：

监控业务系统的收付款交易事件；

当有收付款交易事件发生且收付款交易成功后，将所述收付款交易事件对应的收付款交易数据记录到预置交易流水表。

可选地，在本发明第一方面的第三种实现方式中，所述对所述结算文件进行解析，得到所述结算文件中交易数据的待核算交易要素包括：

读取待执行任务列表中的解析任务，其中，所述解析任务中配置有待解析结算文件的解析规则；

确定待解析结算文件的文档类型，并依据所述结算文件的文档类型，为所述结算文件匹配读取工具；

采用与所述结算文件匹配的读取工具对所述结算文件进行逐行读取处理，得到所述结算文件中的多行文本内容；

将所述结算文件的解析规则输入预置脚本执行器，对所述多行文本内容进行解析处理，得到所述结算文件中交易数据的待核算交易要素，其中，所述待核算交易要素包括交易金额、交易渠道及交易银行。

可选地，在本发明第一方面的第四种实现方式中，所述对所述基于所述结算计费方式，对所述所有交易订单对应的核算基础数据进行核算，得到目标核算数据包括：

确定所述结算文件中每一笔交易订单对应的核算基础数据；

根据所述核算基础数据确定至少一个核算场景以及对应的核算规则；

基于所述核算规则和所述核算基础数据，确定该核算场景的目标核算数据。

可选地，在本发明第一方面的第五种实现方式中，在所述将核算结果同步至数据平台之后，还包括：

若所述交易订单对应的结算手续费与所述目标核算数据不一致，则向预设邮箱发送核算失败的提醒信息。

本发明第二方面提供了一种数据处理装置，包括：

获取模块，用于接收结算文件获取请求，调用预置第三方收付接口，获取结算文件，其中，所述结算文件包括收付款交易数据，所述交易数据包括所有交易订单对应的结算手续费；

解析模块，用于对所述结算文件进行解析，得到所述结算文件中交易数据的待核算交易要素；

确定模块，用于根据所述待核算交易要素，确定所述所有交易订单对应的结算计费方式；

核算模块，用于基于所述结算计费方式，对所述所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

判断模块，用于将预置交易流水表中的所述交易订单对应的结算手续费与所述目标核算数据进行比对，判断所述交易订单对应的结算手续费与所述目标核算数据是否一致；

同步模块，用于若所述交易订单对应的结算手续费与所述目标核算数据一致，则所述交易订单核算成功，并将核算结果同步至数据平台。

可选地，在本发明第二方面的第一种实现方式中，所述获取模块具体用于：

获取索引文件获取请求，所述索引文件获取请求中携带第一回源信息和索引文件标识；

获取与所述索引文件标识对应的索引文件；

将所述第一回源信息添加至所述索引文件中，得到目标索引文件；

接收基于所述目标索引文件的结算文件获取请求，根据所述结算文件获取请求获取结算文件。

可选地，在本发明第二方面的第二种实现方式中，所述数据处理装置，还包括：

监控模块，用于监控业务系统的收付款交易事件；

记录模块，用于当有收付款交易事件发生且收付款交易成功后，将所述收付款交易事件对应的收付款交易数据记录到预置交易流水表。

可选地，在本发明第二方面的第三种实现方式中，所述解析模块包括：

读取单元，用于读取待执行任务列表中的解析任务，其中，所述解析任务中配置有待解析结算文件的解析规则；

匹配单元，用于确定待解析结算文件的文档类型，并依据所述结算文件的文档类型，为所述结算文件匹配读取工具；

读取单元，用于采用与所述结算文件匹配的读取工具对所述结算文件进行逐行读取处理，得到所述结算文件中的多行文本内容；

解析单元，用于将所述结算文件的解析规则输入预置脚本执行器，对所述多行文本内容进行解析处理，得到所述结算文件中交易数据的待核算交易要素，其中，所述待核算交易要素包括交易金额、交易渠道及交易银行。

可选地，在本发明第二方面的第四种实现方式中，所述核算模块具体用于：

确定所述结算文件中每一笔交易订单对应的核算基础数据；

根据所述核算基础数据确定至少一个核算场景以及对应的核算规则；

基于所述核算规则和所述核算基础数据，确定该核算场景的目标核算数据。

可选地，在本发明第二方面的第五种实现方式中，所述数据处理装置还包括：

发送模块，用于当所述交易订单对应的结算手续费与所述目标核算数据不一致时，向预设邮箱发送核算失败的提醒信息。

本发明第三方面提供了一种数据处理设备，包括：存储器和至少一个处理器，所述存储器中存储有指令，所述存储器和所述至少一个处理器通过线路互连；

所述至少一个处理器调用所述存储器中的所述指令，以使得所述数据处理设备执行上述的数据处理方法。

本发明的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述的数据处理方法。

本发明提供的技术方案中，通过获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

附图说明

图1为本发明数据处理方法的第一个实施例示意图；

图2为本发明数据处理方法的第二个实施例示意图；

图3为本发明数据处理方法的第三个实施例示意图；

图4为本发明数据处理方法的第四个实施例示意图；

图5为本发明数据处理方法的第五个实施例示意图；

图6为本发明数据处理装置的第一个实施例示意图；

图7为本发明数据处理装置的第二个实施例示意图；

图8为本发明数据处理设备的一个实施例示意图。

具体实施方式

本发明实施例提供了一种数据处理方法、装置、设备及存储介质，本发明的技术方案中，首先获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”或“具有”及其任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

为便于理解，下面对本发明实施例的具体流程进行描述，请参阅图1，本发明实施例中数据处理方法的第一个实施例包括：

101、接收结算文件获取请求，调用预置第三方收付接口，获取结算文件，其中，结算文件包括收付款交易数据，交易数据包括所有交易订单对应的结算手续费；

本实施例中，核算服务器实时或定时地从各个第三方支付系统中获取各业务系统对应的包括收付款交易信息的结算文件，该结算文件为第三方支付系统针对各业务系统的收付款事件而进行记录的文件。比如，第三方支付公司平安付在D+1日提供D日的结算文件，内容包括交易数据的交易号、交易对方银行、交易开始时间、交易类型、交易结算时间、交易金额、商家订单号、手续费、结算时间、结算状态、结算金额等信息。平安付通过https请求，通知业务方，可以获取结算文件的文件名；业务方保存通知记录(https请求)，并根据通知记录到平安付文件服务器，获取结算文件。

第三方支付是指具备一定实力和信誉保障的独立机构，通过与银联或网联对接而促成交易双方进行交易的网络支付模式。在第三方支付模式，买方选购商品后，使用第三方平台提供的账户进行货款支付(支付给第三方)，并由第三方通知卖家货款到账、要求发货；买方收到货物，检验货物，并且进行确认后，再通知第三方付款；第三方再将款项转至卖家账户。

102、对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；

本实施例中，对结算文件进行解析就是把文件的内容读取出来存储到数据库表中，拿到了数据就可以对数据进行计算等逻辑达到计算结算费用然后对比费用是否正确，提供报表等目的。

本实施例中，待核算交易要素是指需要进行核算处理的交易数据以及对应数据类型，包括交易渠道，交易银行，交易金额等在内的第三方支付后台系统接收到的用户在进行业务操作过程中产生的实时的业务交易数据，需要对实时的业务交易数据进行核算以对用户进行相应业务操作后账户数据进行确定。待核算交易要素包括结算金额、结算价格以及交易面额等。因此根据银行后台系统接收到的用户进行业务交易时产生的业务交易数据可以准确判断出该交易数据的来源业务场景。业务场景的准确确定可以提高根据业务场景的不同实现对核算要素的准确转换，提高对待核算交易要素核算的准确性。

103、根据待核算交易要素，确定所有交易订单对应的结算计费方式；

本实施例中，不同的场景下获取到的待核算交易要素是不同的。比如，根据结算文件中的商家订单号，关联交易表对应的交易记录，根据交易表中的交易金额，按照交易渠道和交易银行的不同，对应的结算计费方式也是不同的，所以要根据待核算交易要素，确定交易订单对应的结算及非方式，计算出需要结算的手续费。

104、基于结算计费方式，对所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

本实施例中，目标核算数据是指在当前交易场景下需要根据待核算交易数据获取到的核算结果，目标核算数据可以直接被第三方支付系统系统所用。可选的，目标核算数据包括用户账户余额以及应缴税额等数据，银行可以直接根据账户余额以及应缴税额等数据进行会计核算操作，便于银行的内部运行。示例性的，当核算基础数据为价差收益时，则目标核算数据价差收益待转销项税＝[税率/(1+税率)}*价差收益。

105、将预置交易流水表中的交易订单对应的结算手续费与目标核算数据进行比对，判断交易订单对应的结算手续费与目标核算数据是否一致；

本实施例中，核算服务器实时或定时地从各个第三方支付系统中获取各业务系统对应的包括收付款交易信息的结算文件，该结算文件为第三方支付系统针对各业务系统的收付款事件而进行记录的文件。然后，将所述交易流水表中对应的收付款交易信息与结算文件中的收付款交易信息进行比对，具体地，可以将交易流水表中对应的收付款交易信息与对账文件中的收付款交易信息逐条数据进行比对，以判断两者是否一致。

本实施例中，核算服务器中预先生成交易流水表，以用于记录收付款交易信息。当有收付款交易事件发生且收付款交易成功时，例如某一客户的车险续保事件采用实时转账的方式进行付款，并且付款成功时，由核算服务器将收付款交易事件对应的收付款交易信息记录到该交易流水表中。

其中，在交易流水表中记录每一项收付款交易事件对应的收付款交易信息，即记录每一项收款交易或者付款交易的详细信息。具体地，收付款交易信息包括用于区分业务类型(例如首期或者续期等)的交易码、用于区分交易银行(例如支付宝、工行、银联或快钱等)的交易行代码、以及用于区分交易渠道的交易渠道标识，例如交易渠道例如为实时付款或手机交费等；进一步地，收付款交易信息还可以包括银行进账日期、交易金额、业务收据号及保单号。

106、当交易订单对应的结算手续费与目标核算数据一致时，交易订单核算成功，并将核算结果同步至数据平台；

本实施例中，如果有一业务系统对应的结算文件中的收付款交易数据对应的手续费与交易流水表中对应的收付款交易数据对应的结算手续费比对一致，则说明该结算数据处理成功，可以对核算成功的收付款交易数据返回给该业务系统，该业务系统将该一致的收付款交易信息至同步给大数据平台进行报表展示，做成报表，提供给相关人员从多维度统计分析数据，通过可视化界面的直观形式进行展示。

107、当交易订单对应的结算手续费与所述目标核算数据不一致时，向预设邮箱发送核算失败的提醒信息。

本实施例中，如果有一业务系统对应的结算文件中的结算的手续费与交易流水表中对应的收付款交易信息(某一笔交易订单对应的手续费)比对不一致，则说明该收付款交易信息核算失败，可以对核算失败的收付款交易信息进行标识，以与其他收付款交易信息进行区分，然后直接向财务系统或者预定的终端(邮箱)发送核算失败的提醒信息。

具体地，可以将对账失败的结算文件中的收付款交易信息与交易流水表中对应的收付款交易信息一同发送给财务系统或者预定的终端(邮箱)，以供相关人员进行参考或者再次进行核算。

本发明实施例中，通过获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

请参阅图2，本发明实施例中数据处理方法的第二个实施例包括：

201、监控业务系统的收付款交易事件；

本实施例中，由一服务器对各业务系统的收付款交易事件进行监控，优选地由一核算服务器对各业务系统的收付款交易事件进行监控，以对各业务系统的收付款交易事件进行收集。

其中，业务系统优选地包括车险业务系统和/或寿险业务系统，各项业务中每一业务可以对应一业务系统，例如车险业务对应车险系统，寿险业务对应寿险系统等，也可以多种业务对应一个业务系统，这些业务系统可以运行在一个服务器中，也可以运行在不同的服务器中。收付款交易事件包括收款交易或付款交易。例如某一客户的车险续保事件采用实时转账的方式或者网上银行缴费的方式进行付款。

202、当有收付款交易事件发生且收付款交易成功后，将收付款交易事件对应的收付款交易数据记录到预置交易流水表；

本实施例中，核算服务器中预先生成交易流水表，以用于记录收付款交易信息。当有收付款交易事件发生且收付款交易成功时，例如某一客户的车险续保事件采用实时转账的方式进行付款，并且付款成功时，由核算服务器将收付款交易事件对应的收付款交易信息记录到该交易流水表中。

其中，在交易流水表中记录每一项收付款交易事件对应的收付款交易信息，即记录每一项收款交易或者付款交易的详细信息。具体地，收付款交易信息包括用于区分业务类型(例如首期或者续期等)的交易码、用于区分交易银行(例如支付宝、工行、银联或快钱等)的交易行代码、以及用于区分交易渠道的交易渠道标识，例如交易渠道例如为实时付款或手机交费等；进一步地，收付款交易信息还可以包括银行进账日期、交易金额、业务收据号及保单号。

203、接收结算文件获取请求，调用预置第三方收付接口，获取结算文件；

204、对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；

205、根据待核算交易要素，确定所有交易订单对应的结算计费方式；

206、基于结算计费方式，对所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

207、将预置交易流水表中的交易订单对应的结算手续费与目标核算数据进行比对，判断交易订单对应的结算手续费与目标核算数据是否一致；

208、当交易订单对应的结算手续费与所述目标核算数据一致时，则交易订单核算成功，并将核算结果同步至数据平台；

209、当交易订单对应的结算手续费与目标核算数据不一致时，向预设邮箱发送核算失败的提醒信息。

本实施例中步骤2030-209与第一实施例中的步骤101-107类似，此处不再赘述。

本发明实施例中，通过获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

请参阅图3，本发明实施例中数据处理方法的第三个实施例包括：

301、获取索引文件获取请求，索引文件获取请求中携带第一回源信息和索引文件标识；

本实施例中，结算文件获取装置获取索引文件获取请求，其中，索引文件获取请求中可以携带第一回源信息和索引文件标识之外，还可以携带其他的信息，具体内容在此处不作限定。该第一回源信息可以是索引文件的相关路径信息等，该第一回源信息可以用于指示存储索引文件的源站，该源站可以是存储索引文件的服务器。该索引文件标识可以是索引文件的名称或编号等，该索引文件标识用于唯一标识索引文件，可以由数字、字母和/或文字组成等，具体内容在此处不作限定。

索引文件获取请求的获取方式可以包括：方式一，接收客户端发送的索引文件获取请求，其中，该客户端可以是在接收到用户输入的点播指令时，根据点播指令生成索引文件获取请求，该点播指令用于指示客户端获取结算文件，并播放获取到的结算文件，该客户端可以是集成在手机或电脑等终端上。方式二，从存储索引文件获取请求的样本库中获取，该样本库中可以存储多个不同的索引文件获取请求，技术人员可以将预先模拟的索引文件获取请求存储至该样本库中，该样本库可以是设置在服务器上，也可以是设置在终端上等。方式三，向其他服务器发送获取请求，并接收其他服务器基于该获取请求返回的索引文件获取请求，其中，其他服务器可以存储有客户端发送的或技术人员上传的索引文件获取请求。可以理解的是，还可以通过其他的获取方式获取索引文件获取请求，具体内容在此处不作限定。

302、获取与索引文件标识对应的索引文件；

本实施例中，在获取到携带索引文件标识和的第一回源信息索引文件获取请求后，结算文件获取装置可以从索引文件获取请求中提取出索引文件标识，并获取与索引文件标识对应的索引文件。其中，索引文件的获取方式可以是从结算文件获取装置的本地缓存中获取，或者是，从与第一回源信息对应的第一源站中获取等，该第一回源信息可以是索引文件的相关路径信息等，该第一源站可以是存储索引文件的服务器。

在某些实施方式中，获取与索引文件标识对应的索引文件的步骤可以包括：从与第一回源信息对应的第一源站中，获取与索引文件标识对应的索引文件。

具体地，结算文件获取装置在获取到携带索引文件标识和第一回源信息等的索引文件获取请求后，可以从索引文件获取请求中提取出索引文件标识和第一回源信息等，然后可以查询本地缓存，判断本地缓存中是否存在与索引文件标识对应的索引文件。当本地缓存中不存在与索引文件标识对应的索引文件时，可以确定与第一回源信息对应的第一源站，并从第一源站中获取与索引文件标识对应的索引文件。

需要说明的是，本地缓存中可以预先存储索引文件和/目标索引文件，该目标索引文件为对索引文件进行改写后，得到改写后的索引文件。在获取与索引文件标识对应的索引文件的过程中，结算文件获取装置可以查询本地缓存中是否存储有索引文件，当本地缓存中不存在索引文件时，可以从第一回源信息对应的第一源站中获取索引文件；当本地缓存中存在索引文件时，可以从本地缓存中获取索引文件。或者是，结算文件获取装置可以查询本地缓存中是否存储有目标索引文件，当本地缓存中不存在目标索引文件时，需要获取索引文件，并执行将第一回源信息添加至索引文件中，得到目标索引文件；获取基于目标索引文件的结算文件获取请求，根据结算文件获取请求获取结算文件的步骤；当本地缓存中存在目标索引文件时，可以从本地缓存中获取目标索引文件，并执行获取基于目标索引文件的结算文件获取请求，根据结算文件获取请求获取结算文件的步骤。

303、将第一回源信息添加至索引文件中，得到目标索引文件；

本实施例中，在得到索引文件后，可以从索引文件获取请求中提取出第一回源信息，将第一回源信息添加至索引文件中(即改写索引文件)，得到目标索引文件，该目标索引文件即为改写后的索引文件，其中，将第一回源信息添加至索引文件中的添加方式可以根据实际需要进行灵活设置，具体内容在此处不作限定。将第一回源信息添加至索引文件的目的在于，使得基于目标索引文件的结算文件获取请求中，可以携带用于指示存储结算文件的源站的回源信息。

在某些实施方式中，获取索引文件获取请求的步骤可以包括：接收客户端发送的索引文件获取请求。将第一回源信息添加至索引文件中，得到目标索引文件的步骤之前，结算文件获取方法还包括：从索引文件获取请求中提取出客户端的客户端标识，当客户端标识在预设的白名单中时，确定客户端为免流客户端，并执行将第一回源信息添加至索引文件中，得到目标索引文件的步骤。

304、获取基于目标索引文件的结算文件获取请求，根据结算文件获取请求获取结算文件；

本实施例中，在得到目标索引文件后，结算文件获取装置可以进一步获取结算文件，首先需要获取结算文件获取请求，当需要获取的结算文件包括多个媒体分片文件时，可以分别请求各个媒体分片文件。其中，结算文件获取请求可以是基于目标索引文件生成的，该结算文件获取请求中可以携带第二回源信息和结算文件标识等信息，还可以携带其他的信息，具体内容在此处不作限定。该第二回源信息可以是结算文件的相关路径信息等，该第二回源信息可以用于指示存储结算文件的源站，该源站可以是存储结算文件的服务器。该结算文件标识可以是结算文件的名称或编号等，该结算文件标识用于唯一标识索引文件，可以由数字、字母和/或文字组成等，具体内容在此处不作限定。

结算文件获取请求的获取方式可以包括：方式一，接收客户端发送的结算文件获取请求，其中，该客户端可以是在接收到目标索引文件后时，根据目标索引文件生成结算文件获取请求。方式二，从存储结算文件获取请求的数据库中获取，该数据库中可以存储多个不同的结算文件获取请求，该结算文件获取请求可以是根据目标索引文件生成的，技术人员可以将预先模拟的结算文件获取请求存储至该数据库中，该数据库可以是设置在服务器上，也可以是设置在终端上等。方式三，向其他服务器发送获取请求，并接收其他服务器基于该获取请求返回的结算文件获取请求，其中，其他服务器可以存储有客户端发送的或技术人员上传的结算文件获取请求，该结算文件获取请求可以是根据目标索引文件生成的。可以理解的是，还可以通过其他的获取方式获取索引文件获取请求，具体内容在此处不作限定。

在得到结算文件获取请求后，结算文件获取装置可以根据结算文件获取请求获取结算文件，还可以将结算文件存储至本地缓存。当后续再接收到结算文件获取请求时，可以直接从本地缓存中获取到结算文件，而无需到源站访问。

305、接收结算文件获取请求，调用预置第三方收付接口，获取结算文件；

306、对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；

307、根据待核算交易要素，确定所有交易订单对应的结算计费方式；

308、基于结算计费方式，对所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

309、将预置交易流水表中的交易订单对应的结算手续费与目标核算数据进行比对，判断交易订单对应的结算手续费与目标核算数据是否一致；

310、当交易订单对应的结算手续费与所述目标核算数据一致时，则交易订单核算成功，并将核算结果同步至数据平台；

311、当交易订单对应的结算手续费与目标核算数据不一致时，向预设邮箱发送核算失败的提醒信息。

本实施例中步骤305-311与第一实施例中的步骤101-107类似，此处不再赘述。

本发明实施例中，通过获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

请参阅图4，本发明实施例中数据处理方法的第四个实施例包括：

401、接收结算文件获取请求，调用预置第三方收付接口，获取结算文件；

402、读取待执行任务列表中的解析任务，其中，解析任务中配置有待解析结算文件的解析规则；

本实施例中，待执行任务列表用于记载待处理的解析任务，其中，解析任务中配置有待解析文件的解析规则，此时，通过解析任务中配置好的该待解析文件对应的解析规则对该待解析文件执行解析处理，以实现自动解析多种格式的解析文件的技术效果。

也即，待执行任务列表用于实现自动监控待处理的解析任务，以便在待执行任务列表中出现待处理的解析任务。此外，每个解析任务中均配置有待解析文件的解析规则，不同存储地址的待解析文件均可以得到待执行任务列表的监控处理，且不同格式的待解析文件也均可以使用其匹配的解析规则进行解析处理。

403、确定待解析结算文件的文档类型，并依据结算文件的文档类型，为结算文件匹配读取工具；

本实施例中，从所述待解析文件的解析规则中确定所述待解析文件的读取工具，其中，所述读取工具与所述待解析文件的文档类型相匹配；检测所述待解析文件的文档类型，并依据所检测到的文档类型为所述待解析文件匹配读取工具。

需要说明的是：待解析文件的文档类型可以为多种，例如：txt、csv、xml等；此时，不同文档类型的待解析文件匹配有不同类型的读取工具。例如，txt读取工具对文档类型为txt格式的待解析文件进行读取处理。

404、采用与结算文件匹配的读取工具对结算文件进行逐行读取处理，得到结算文件中的多行文本内容；

本实施例中，采用所述待解析文件(也即，结算文件)匹配的读取工具对所述待解析文件进行逐行读取处理包括：从待解析文件的解析规则中确定待解析文件中的解析起始段落，并从解析起始段落开始进行逐行读取处理。

405、将结算文件的解析规则输入预置脚本执行器，对多行文本内容进行解析处理，得到结算文件中交易数据的待核算交易要素，其中，待核算交易要素包括交易金额、交易渠道及交易银行；

本实施例中，依据所述待解析文件的解析规则生成解析脚本，并将所述解析脚本输入至所述脚本执行器中；将所述多行文本内容输入至上述被输入解析脚本的脚本执行器中，以获取用于数据库字段赋值的多个数组数据。

本实施例提供的数据解析的方法中，所述待解析文件的解析规则至少包括：多个数据分隔符，以及所述数据分割符后的文本内容的赋值规则。比如，在将第三方支付系统提供的交易流水数据解析出来存入数据库的情景下，本实施例所提供的数据解析的方法，将第三方支付系统提供的交易流水数据按分割字符组成一个数组，并作为脚本执行器的输入项。此时，脚本执行器按照配置的规则，给数据库表的字段赋值，并返回。

406、对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；

407、根据待核算交易要素，确定所有交易订单对应的结算计费方式；

408、基于结算计费方式，对所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

409、将预置交易流水表中的交易订单对应的结算手续费与目标核算数据进行比对，判断交易订单对应的结算手续费与目标核算数据是否一致；

410、当交易订单对应的结算手续费与所述目标核算数据一致时，则交易订单核算成功，并将核算结果同步至数据平台；

411、当交易订单对应的结算手续费与目标核算数据不一致时，向预设邮箱发送核算失败的提醒信息。

本实施例中步骤401、406-411与第一实施例中的步骤101、103-107类似，此处不再赘述。

本发明实施例中，通过获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

请参阅图5，本发明实施例中数据处理方法的第五个实施例包括：

501、接收结算文件获取请求，调用预置第三方收付接口，获取结算文件；

502、对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；

503、根据待核算交易要素，确定所有交易订单对应的结算计费方式；

504、确定结算文件中每一笔交易订单对应的核算基础数据；

本实施例中，根据确定的交易场景确定对应的要素转换参数配置信息，要素转换参数配置信息中包括该交易场景下得到目标核算数据需要确定的核算基础数据类型以及转换规则、转换参数信息。根据转换规则、转换参数以及原始交易数据确定相应的核算基础数据。

505、根据核算基础数据确定至少一个核算场景以及对应的核算规则；

本实施例中，核算场景是指根据需求的目标核算数据的不同确定的不同的核算场景，在不同的核算场景下，需要进行不同的操作以获取不同的目标核算数据，获取目标核算数据对应的不同的操作为核算规则。

具体的，通常一个交易场景下需要获取的目标核算数据为多个，则对应不同的核算场景和核算规则。而一个交易场景下对应的核算基础数据的获取是固定的，因此根据核算基础数据中的具体数据类型对所需确定的核算场景进行确定，可以提高核算场景确定的准确性，避免了发生确定的核算场景的目标核算数据无对应的核算基础数据的现象。根据确定的核算基础数据对核算场景以及核算规则进行可配置性的操作，提高目标核算数据确定的效率，避免对无关数据的计算。比如，当确定的核算基础数据中包括资产成本，价差收益，利息调整，待转销项税等时，则根据对应的核算场景包括增值税核算场景和账户余额核算场景，以及核算场景对应的结算计费方式，结算计费方式中包括该核算场景下所需确定的目标核算数据类型以及对应的计算方式。

506、基于核算规则和核算基础数据，确定该核算场景的目标核算数据；

本实施例中，当根据待核算交易数据确定的核算基础数据中至少包括资产成本数据、价差收益数据、利息调整数据以及代转销项税数据时，则根据核算基础数据中资产成本数据确定存在的核算场景包括账户余额核算场景，根据核算基础数据中的价差收益数据确定存在的核算场景包括增值税核算场景。根据具体的核算基础数据内容对核算场景进行确定，提高了核算场景的确定的准确性，由于在同一交易场景下对应了多个核算场景，直接根据核算基础数据对核算场景进行确定，避免对核算场景的遗漏，进而导致目标核算数据的遗漏，造成核算失误。

507、将预置交易流水表中的交易订单对应的结算手续费与目标核算数据进行比对，判断交易订单对应的结算手续费与目标核算数据是否一致；

508、当交易订单对应的结算手续费与所述目标核算数据一致时，则交易订单核算成功，并将核算结果同步至数据平台；

509、当交易订单对应的结算手续费与目标核算数据不一致时，向预设邮箱发送核算失败的提醒信息。

本实施例中步骤501-503、505-507与第一实施例中的101-103、105-107类似，此处不再赘述。

在本发明实施例中，通过获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

上面对本发明实施例中数据处理方法进行了描述，下面对本发明实施例中数据处理装置进行描述，请参阅图6，本发明实施例中数据处理装置的第一个实施例包括：

获取模块601，用于接收结算文件获取请求，调用预置第三方收付接口，获取结算文件，其中，所述结算文件包括收付款交易数据，所述交易数据包括所有交易订单对应的结算手续费；

解析模块602，用于对所述结算文件进行解析，得到所述结算文件中交易数据的待核算交易要素；

确定模块603，用于根据所述待核算交易要素，确定所述所有交易订单对应的结算计费方式；

核算模块604，用于基于所述结算计费方式，对所述所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

判断模块605，用于将预置交易流水表中的所述交易订单对应的结算手续费与所述目标核算数据进行比对，判断所述交易订单对应的结算手续费与所述目标核算数据是否一致；

同步模块606，用于若所述交易订单对应的结算手续费与所述目标核算数据一致，则所述交易订单核算成功，并将核算结果同步至数据平台。

本发明实施例中，通过获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

请参阅图7，本发明实施例中数据处理装置的第二个实施例，该数据处理装置具体包括：

获取模块601，用于接收结算文件获取请求，调用预置第三方收付接口，获取结算文件，其中，所述结算文件包括收付款交易数据，所述交易数据包括所有交易订单对应的结算手续费；

解析模块602，用于对所述结算文件进行解析，得到所述结算文件中交易数据的待核算交易要素；

确定模块603，用于根据所述待核算交易要素，确定所述所有交易订单对应的结算计费方式；

核算模块604，用于基于所述结算计费方式，对所述所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

判断模块605，用于将预置交易流水表中的所述交易订单对应的结算手续费与所述目标核算数据进行比对，判断所述交易订单对应的结算手续费与所述目标核算数据是否一致；

同步模块606，用于若所述交易订单对应的结算手续费与所述目标核算数据一致，则所述交易订单核算成功，并将核算结果同步至数据平台。

本实施例中，所述获取模块601具体用于：

获取索引文件获取请求，所述索引文件获取请求中携带第一回源信息和索引文件标识；

获取与所述索引文件标识对应的索引文件；

将所述第一回源信息添加至所述索引文件中，得到目标索引文件；

接收基于所述目标索引文件的结算文件获取请求，根据所述结算文件获取请求获取结算文件。

本实施例中，所述数据处理装置，还包括：

监控模块607，用于监控业务系统的收付款交易事件；

记录模块608，用于当有收付款交易事件发生且收付款交易成功后，将所述收付款交易事件对应的收付款交易数据记录到预置交易流水表。

本实施例中，所述解析模块602包括：

读取单元6021，用于读取待执行任务列表中的解析任务，其中，所述解析任务中配置有待解析结算文件的解析规则；

匹配单元6022，用于确定待解析结算文件的文档类型，并依据所述结算文件的文档类型，为所述结算文件匹配读取工具；

读取单元6023，用于采用与所述结算文件匹配的读取工具对所述结算文件进行逐行读取处理，得到所述结算文件中的多行文本内容；

解析单元6024，用于将所述结算文件的解析规则输入预置脚本执行器，对所述多行文本内容进行解析处理，得到所述结算文件中交易数据的待核算交易要素，其中，所述待核算交易要素包括交易金额、交易渠道及交易银行。

本实施例中，所述核算模块604具体用于：

确定所述结算文件中每一笔交易订单对应的核算基础数据；

根据所述核算基础数据确定至少一个核算场景以及对应的核算规则；

基于所述核算规则和所述核算基础数据，确定该核算场景的目标核算数据。

本实施例中，所述数据处理装置还包括：

发送模块609，用于当所述交易订单对应的结算手续费与所述目标核算数据不一致时，向预设邮箱发送核算失败的提醒信息。

本发明实施例中，通过获取各业务系统对应的包括收付款交易数据的结算文件；对结算文件进行解析，得到结算文件中交易数据的待核算交易要素；根据待核算交易要素，确定所有交易订单对应的结算计费方式；基于结算计费方式，对所有交易订单进行核算，得到目标核算数据；将交易订单对应的结算手续费与目标核算数据进行比对，若一致，则交易订单核算成功，并将核算结果同步至数据平台。提高了结算费用的核算效率，解决了结算数据处理效率低下的技术问题。

上面图6和图7从模块化功能实体的角度对本发明实施例中的数据处理装置进行详细描述，下面从硬件处理的角度对本发明实施例中数据处理设备进行详细描述。

图8是本发明实施例提供的一种数据处理设备的结构示意图，该数据处理设备800可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器(centralprocessing units，CPU)810(例如，一个或一个以上处理器)和存储器820，一个或一个以上存储应用程序833或数据832的存储介质830(例如一个或一个以上海量存储设备)。其中，存储器820和存储介质830可以是短暂存储或持久存储。存储在存储介质830的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对数据处理设备800中的一系列指令操作。更进一步地，处理器810可以设置为与存储介质830通信，在数据处理设备800上执行存储介质830中的一系列指令操作，以实现上述各方法实施例提供的数据处理方法的步骤。

数据处理设备800还可以包括一个或一个以上电源840，一个或一个以上有线或无线网络接口850，一个或一个以上输入输出接口860，和/或，一个或一个以上操作系统831，例如Windows Serve，Mac OS X，Unix，Linux，FreeBSD等等。本领域技术人员可以理解，图8示出的数据处理设备结构并不构成对本申请提供的数据处理设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

本发明还提供一种计算机可读存储介质，该计算机可读存储介质可以为非易失性计算机可读存储介质，该计算机可读存储介质也可以为易失性计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在计算机上运行时，使得计算机执行上述数据处理方法的步骤。

本发明所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain)，本质上是一个去中心化的数据库，是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一批次网络交易的信息，用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。

所述领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种数据处理方法，其特征在于，所述数据处理方法包括：

接收结算文件获取请求，调用预置第三方收付接口，获取结算文件，其中，所述结算文件包括收付款交易数据，所述交易数据包括所有交易订单对应的结算手续费；

对所述结算文件进行解析，得到所述结算文件中交易数据的待核算交易要素；

根据所述待核算交易要素，确定所述所有交易订单对应的结算计费方式；

基于所述结算计费方式，对所述所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

将预置交易流水表中的所述交易订单对应的结算手续费与所述目标核算数据进行比对，判断所述交易订单对应的结算手续费与所述目标核算数据是否一致；

若所述交易订单对应的结算手续费与所述目标核算数据一致，则所述交易订单核算成功，并将核算结果同步至数据平台。

2.根据权利要求1所述的数据处理方法，其特征在于，所述接收结算文件获取请求，调用预置第三方收付接口，获取结算文件包括：

获取索引文件获取请求，所述索引文件获取请求中携带第一回源信息和索引文件标识；

获取与所述索引文件标识对应的索引文件；

将所述第一回源信息添加至所述索引文件中，得到目标索引文件；

接收基于所述目标索引文件的结算文件获取请求，根据所述结算文件获取请求获取结算文件。

3.根据权利要求1或2所述的数据处理方法，其特征在于，在所述接收结算文件获取请求，调用预置第三方收付接口，获取结算文件之前，还包括：

监控业务系统的收付款交易事件；

当有收付款交易事件发生且收付款交易成功后，将所述收付款交易事件对应的收付款交易数据记录到预置交易流水表。

4.根据权利要求1所述的数据处理方法，其特征在于，所述对所述结算文件进行解析，得到所述结算文件中交易数据的待核算交易要素包括：

读取待执行任务列表中的解析任务，其中，所述解析任务中配置有待解析结算文件的解析规则；

确定待解析结算文件的文档类型，并依据所述结算文件的文档类型，为所述结算文件匹配读取工具；

采用与所述结算文件匹配的读取工具对所述结算文件进行逐行读取处理，得到所述结算文件中的多行文本内容；

将所述结算文件的解析规则输入预置脚本执行器，对所述多行文本内容进行解析处理，得到所述结算文件中交易数据的待核算交易要素，其中，所述待核算交易要素包括交易金额、交易渠道及交易银行。

5.根据权利要求1所述的数据处理方法，其特征在于，所述对所述基于所述结算计费方式，对所述所有交易订单对应的核算基础数据进行核算，得到目标核算数据包括：

确定所述结算文件中每一笔交易订单对应的核算基础数据；

根据所述核算基础数据确定至少一个核算场景以及对应的核算规则；

基于所述核算规则和所述核算基础数据，确定该核算场景的目标核算数据。

6.根据权利要求1-5所述的任一项数据处理方法，其特征在于，在所述将核算结果同步至数据平台之后，还包括：

若所述交易订单对应的结算手续费与所述目标核算数据不一致，则向预设邮箱发送核算失败的提醒信息。

7.一种数据处理装置，其特征在于，所述数据处理装置包括：

获取模块，用于接收结算文件获取请求，调用预置第三方收付接口，获取结算文件，其中，所述结算文件包括收付款交易数据，所述交易数据包括所有交易订单对应的结算手续费；

解析模块，用于对所述结算文件进行解析，得到所述结算文件中交易数据的待核算交易要素；

确定模块，用于根据所述待核算交易要素，确定所述所有交易订单对应的结算计费方式；

核算模块，用于基于所述结算计费方式，对所述所有交易订单对应的核算基础数据进行核算，得到目标核算数据；

判断模块，用于将预置交易流水表中的所述交易订单对应的结算手续费与所述目标核算数据进行比对，判断所述交易订单对应的结算手续费与所述目标核算数据是否一致；

同步模块，用于若所述交易订单对应的结算手续费与所述目标核算数据一致，则所述交易订单核算成功，并将核算结果同步至数据平台。

8.根据权利要求7所述的数据处理装置，其特征在于，所述数据处理装置还包括：

监控模块，用于监控业务系统的收付款交易事件；

记录模块，用于当有收付款交易事件发生且收付款交易成功后，将所述收付款交易事件对应的收付款交易数据记录到预置交易流水表。

9.一种数据处理设备，其特征在于，所述数据处理设备包括：存储器和至少一个处理器，所述存储器中存储有指令，所述存储器和所述至少一个处理器通过线路互连；

所述至少一个处理器调用所述存储器中的所述指令，以使得所述数据处理设备执行如权利要求1-6中任一项所述的数据处理方法的步骤。

10.一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-6中任一项所述的数据处理方法的步骤。

Images