CN114240593A - 数据对账方法、装置、设备、介质和程序产品 - Google Patents

Abstract

本公开提供了一种数据对账方法，可以应用于大数据技术领域和人工智能技术领域。该数据对账方法包括：预处理获取的渠道清算数据；界定经预处理的渠道清算数据的对账清算数据；以及根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账。本公开还提供了一种数据对账装置、设备、存储介质和程序产品。

Description

数据对账方法、装置、设备、介质和程序产品

技术领域

本公开涉及计算机技术领域，具体地涉及一种数据对账方法、装置、设备、介质和程序产品。

背景技术

大型信息化交易系统随着时间的推移和业务量的增长，交易量越来越大，交易流水达到亿万及水平，日均交易流水对账对时间和空间均存在极高要求，而且由于各方日切时间不同造成的数据差异量较大，使得业务要求对于单边账的处理有更高的要求，如达到更准确的结果、更高效的差异比对的处理方式，然而常规的对账方案由于普遍采用一些固定化的处理方式使得其越来越无法更好地满足业务的需要。

发明内容

为解决现有技术中所存在的技术问题至少之一，本公开提供了提高数据对账准确率、实现异常精准定位的数据对账方法、装置、设备、介质和程序产品。

根据本公开的第一个方面提供了一种数据对账方法，其中，包括：预处理获取的渠道清算数据；界定经预处理的渠道清算数据的对账清算数据；以及根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账。

根据本公开的实施例，在预处理获取的渠道清算数据之前，还包括：按照渠道对应的渠道任务编号匹配数据配置信息；根据数据配置信息获取对应渠道的渠道清算数据。

根据本公开的实施例，在预处理获取的渠道清算数据中，包括：对渠道清算数据按渠道配置渠道单元号；根据渠道单元号将渠道清算数据与本地流水数据进行初始比对，确定对账开始时间。

根据本公开的实施例，在根据渠道单元号将渠道清算数据与本地流水数据进行初始比对中，包括：按照正反交易规则基于渠道单元号将渠道清算数据与本地流水数据进行初始比对，生成初始化数据；其中，初始化数据包括对账开始时间。

根据本公开的实施例，在界定经预处理的渠道清算数据的对账清算数据中，包括：按照历史清算存疑数据界定参与清算数据；以及按照历史流水存疑数据界定参与流水数据；根据参与清算数据和参与流水数据确定对账清算数据和对账流水数据。

根据本公开的实施例，在根据参与清算数据和参与流水数据确定对账清算数据和对账流水数据中，还包括：对参与清算数据增加第一标记字段，生成对账清算数据；对参与流水数据增加第二标记字段，生成对账流水数据。

根据本公开的实施例，在生成对账清算数据中，包括：将增加第一标记字段的参与清算数据与增加第二标记字段的参与流水数据执行数据比对；根据数据比对的比对结果对增加第一标记字段的参与清算数据增加第一对账核对字段，生成对账清算数据。

根据本公开的实施例，在生成对账流水数据中，包括：根据数据比对的比对结果对增加第二标记字段的参与流水数据增加第二对账核对字段，生成对账流水数据。

根据本公开的实施例，在根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账之前，还包括：提取渠道清算数据中的第一参数；按照预设关键字生成规则处理第一参数生成第一关键字。

根据本公开的实施例，在根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账之前，还包括：提取本地流水数据中的第二参数；按照预设关键字生成规则处理第二参数生成第二关键字。

根据本公开的实施例，在根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账中，包括：将第一关键字和第二关键字作为对账匹配元素，根据对账开始时间对对对账清算数据和对账流水数据执行差异比对；通过第三对账核对字段对差异比对的比对结果进行标记。

根据本公开的实施例，该方法还包括：对经过对账的对账结果进行统计，生成数据统计集。

本公开的第二方面提供了一种一种数据对账装置，其中，包括预处理模块、数据界定模块和数据对账模块。预处理模块用于预处理获取的渠道清算数据；数据界定模块用于界定经预处理的渠道清算数据的对账清算数据；数据对账模块用于根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账。

本公开的第三方面提供了一种电子设备，包括：一个或多个处理器；存储器，用于存储一个或多个程序，其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得一个或多个处理器执行上述数据对账方法。

本公开的第四方面还提供了一种计算机可读存储介质，其上存储有可执行指令，该指令被处理器执行时使处理器执行上述数据对账方法。

本公开的第五方面还提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述数据对账方法。

附图说明

通过以下参照附图对本公开实施例的描述，本公开的上述内容以及其他目的、特征和优点将更为清楚，在附图中：

图1示意性示出了根据本公开实施例的数据对账方法、装置、设备、介质和程序产品的应用场景图；

图2示意性示出了根据本公开实施例的数据对账方法的流程图；

图3示意性示出了根据本公开实施例的数据对账方法中对账处理过程的应用场景图；

图4示意性示出了根据本公开实施例的数据对账方法中统计展示过程的应用场景图；

图5示意性示出了根据本公开实施例的数据对账装置的结构框图；以及

图6示意性示出了根据本公开实施例的适于实现数据对账方法的电子设备的方框图。

具体实施方式

以下，将参照附图来描述本公开的实施例。但是应该理解，这些描述只是示例性的，而并非要限制本公开的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细节以提供对本公开实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本公开的概念。

在此使用的术语仅仅是为了描述具体实施例，而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在，但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。

在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义，除非另外定义。应注意，这里使用的术语应解释为具有与本说明书的上下文相一致的含义，而不应以理想化或过于刻板的方式来解释。

在使用类似于“A、B和C等中至少一个”这样的表述的情况下，一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如，“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。

日终交易流水与上下游文件进行对账，在分发规则、存储位置、推送方式、推送时间、文件格式、关键信息上存在各种差异，如何进行安全高效准确的双方交易比对，对于上下游各方存在重要意义。

常规的对账方案所采用的固定化的处理方式有原始的清算文件入表进行数据库数据比对，通过SQL方式将统计数据和差异数据进行汇总。再有就是将交易流水导出为文件，通过操作系统比对工具处理流水文件与清算文件，然后进行差异化总结。还有就是当规模达到一定水平后进行分库分表的数据拆分，拆分后再进行文件形式或流水形式的拆分比对，最后进行结果合并。也有基于分布式缓存的标准文件化对账，这种方式速度快效率高，但是对于硬件与环境的配置有较高要求。

现有技术中的上述对账方案在对比时通常采用流水号比对，由于长款和短款无法清晰定位具体差异的原因，对于结果只出具文件或流水的汇总金额和笔数，缺乏其余场景维度的结果集，无法定位对账结果异常下的深层次原因；另外，对于异常明细，也缺乏较为自由的人工维护功能、无法通过自动与支付中心和结算中心进行后处理；不同渠道不同来源的清算文件，依赖手工重新开发，不能配置即生效，非常不方便。

为解决现有技术中所存在的技术问题至少之一，本公开提供了提高数据对账准确率、实现异常精准定位的数据对账方法、装置、设备、介质和程序产品。

需要说明的是，本公开的上述数据对账方法和装置可用于大数据技术领域和人工智能技术领域，也可用于金融领域以及金融领域之外的任意领域，本公开数据对账方法和装置的应用领域不做限定。

在本公开的技术方案中，所涉及的包括用户个人信息等数据的收集、存储、使用、加工、传输、提供、公开和应用等处理，均符合相关法律法规的规定，采取了必要保密措施，且不违背公序良俗。其中，在获取或采集用户个人信息之前，均获取了用户的授权或同意。

本公开的实施例提供了一种数据对账方法，其中，包括：预处理获取的渠道清算数据；界定经预处理的渠道清算数据的对账清算数据；以及根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账，其中，对账流水数据为本地流水数据的界定数据。

图1示意性示出了根据本公开实施例的数据对账方法、装置、设备、介质和程序产品的应用场景图。

如图1所示，根据该实施例的应用场景100可以包括终端设备101、102、103、网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用，例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。

终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

服务器105可以是提供各种服务的服务器，例如对用户利用终端设备101、102、103所浏览的网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的用户请求等数据进行分析等处理，并将处理结果(例如根据用户请求获取或生成的网页、信息、或数据等)反馈给终端设备。

需要说明的是，本公开实施例所提供的数据对账方法一般可以由服务器105执行。相应地，本公开实施例所提供的数据对账装置一般可以设置于服务器105中。本公开实施例所提供的数据对账方法也可以由不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群执行。相应地，本公开实施例所提供的数据对账装置也可以设置于不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群中。

应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。

以下将基于图1描述的场景，通过图2～图6对公开实施例的数据对账方法进行详细描述。

图2示意性示出了根据本公开实施例的数据对账方法的流程图。

如图2所示，该实施例的数据对账方法包括操作S201～操作S203。

在操作S201，预处理获取的渠道清算数据；

在操作S202，界定经预处理的渠道清算数据的对账清算数据；

在操作S203，根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账，其中，对账流水数据为本地流水数据的界定数据。

在本公开的实施例中，渠道清算数据为通过渠道所传输至本地的清算用的数据，为本公开实施例中与本地流水数据进行对账处理的主要处理对象。渠道可以理解为与本地服务器之间具有数据通讯关系的不同种类的应用服务，例如终端设备上的各个具有不同业务交易的应用软件(如app)所提供的应用服务。例如，对于某一日中，用户通过某付宝等应用软件所进行业务交易的数据，经过汇总之后可以在该日的下一日定时作为清算数据以数据文件的形式传输至本地，作为本公开实施例的上述渠道清算数据。其中，该某付宝等不同应用软件所对应的就是不同渠道。

对于所获取到本地的渠道清算数据而言，由于渠道清算数据原始渠道的数据格式以及数据规则等与本地交易流水的数据格式以及数据规则等配置信息因不同获取渠道而具有相应的差异，需要对该渠道清算数据执行预处理，以使得该渠道清算数据能够满足与本地交易流水的数据格式等配置信息接近或相同，也可以实现对数据的筛选，从而有利于加快数据处理速度，提高数据精准度。

对于渠道清算数据而言，在进行对账处理过程中，主要仍是针对其中的某个或多个数据项的数据进行对账，并非是针对所有数据执行对账处理，以此来缩小需要对账处理的数据量，加快数据对账处理速度，提高数据精准度。因此，对于需要进行对账的渠道清算数据，进行数据范围的界定，将这些需要进行对账处理的渠道清算数据的具体数据内容确定下来，形成对账清算数据。该对账清算数据为需要进行对账处理的渠道清算数据的部分清算数据，其定义了渠道清算数据的对账数据范围。

第一关键字为对账清算数据在对账处理过程中对应的匹配参数，该匹配参数可以包括多种匹配元素，该匹配元素用于在对账处理过程中执行该对账清算数据中的数据字段和字段对应的数据内容，将其与对应的对账流水数据执行差异比对等对账处理过程。类似地，第二关键字为对账流水数据在对账处理过程中对应的匹配参数，该匹配参数可以包括多种匹配元素，该匹配元素用于在对账处理过程中，执行该对账流水数据中的数据字段和该字段对应的数据内容，将其与对应的对账清算数据执行差异比对等对账处理过程。借此，可以实现对账处理过程中即按照第一关键字和第二关键字的不同匹配元素对对账结果进行分类汇总，且极大地精简了对账数据量，使得数据对账更具有针对性，且显著提高了数据对账处理速度和对账精确性。

其中，对账流水数据为本地流水数据的界定数据。其中，该本地流水数据为本地业务交易所产生的流水数据。例如，对于一业务交易，若通过渠道对应的业务应用软件执行，则用户在执行并完成该业务交易的过程中，会在渠道中产生渠道清算数据，同时还会在本地产生相应的本地流水数据。例如，对于某付宝的应用软件，用户若通过该某付宝的应用软件作为业务交易渠道执行类似支付交易的业务内容，其中该支付交易基于与该某付宝所绑定的银行A的所实现的，因此在银行A的本地中，以及某付宝的渠道中都会产生相应的业务交易数据，某付宝的渠道中产生的业务交易数据可以作为渠道清算数据，而对应该支付交易的业务内容，在银行A的本地也会产生业务交易数据可以作为本地交易流水数据。

因此，本公开实施例的上述数据对账方法提供了一种本地交易流水和渠道清算数据的日终对账方式，能够基于第一关键字和第二关键字所分别匹配的不同匹配元素，来实现对不同数据类型、不同通讯类型以及不同推送模式的渠道清算数据的渠道清算数据与本地交易流水之间的准确、快速且有效的对账处理，在确保对账处理速度的同时兼顾了对账数据的精确性。

在此基础上，从而能够清晰定位数据对账差异的原因，丰富对账结果场景维度，有利于直接定位对账异常数据的深层次原因。另外，对于异常明细，也能够提供一个较为自由的维护功能，避免了人力重新开发以应对不同渠道来源的清算数据，配置生效更快更便捷，对账处理更快也更准确。

如图2所示，根据本公开的实施例，在操作S201预处理获取的渠道清算数据之前，还包括：

按照渠道对应的渠道任务编号匹配数据配置信息；

根据数据配置信息获取对应渠道的渠道清算数据。

渠道任务编号为对应渠道进行清算数据获取的任务配置代码，用于标识对该渠道进行清算数据汇总打包并进行传输的任务信息，按照该渠道任务编号可以确定对对应的渠道执行数据配置和数据获取。在本公开的实施例中，数据配置信息为按照渠道配置的渠道任务编号所对应的执行清算数据获取的配置信息。

具体地，通过参数组的配置参数作为按照渠道配置的渠道任务编号对应的渠道清算数据的获取配置信息，该数据配置信息可以为通讯模式参数、用户名密码或密钥证书、渠道清算文件本地副本存放路径、渠道清算文件本地副本文件名、远程原始渠道清算文件路径、远程原始渠道清算文件文件名等。其中该通讯模式参数可以包括例如FTP/SFTP/HTTP/HTTPS等数据协议以及通讯模式相应的IP、端口或URL。利用该数据配置信息可以支持本地文件服务器存放清算数据，同时也能够支持远程清算文件数据的存放与拉取以及备份等。另外，该数据配置信息还可以配置参数为渠道任务编号、文件获取时间、文件获取频率等，并依赖此配置信息灵活自主的获取清算数据文件。而且，该数据配置信息还可以配置参数为告警信息参数，包含告警阈值、告警频率、告警方式、通知人信息，进行短信与微信、邮件、监控接口等监控告警信息，以便于实时监控文件异常。

通过上述数据配置信息可以获取对应渠道的渠道清算数据，具体可以依据上述的配置参数所定义的参数信息对渠道清算数据执行调取，然后对该渠道清算数据进行打包传输，以渠道清算文件的数据包形式传输至本地。其中，还可以进一步配置数据监控信息，提供数据监控、无数据告警与异常数据告警等监控功能，以及数据管理信息支持自动或手动拉取数据，实现定时为主、手动为辅的数据调取，从而提高数据获取过程的灵活性。

通过上述的数据配置信息可以精准地获取对应日终渠道清算数据的数据内容，并且可以加快数据的获取进度，同时能够对该数据获取过程中的异常情况进行确认。

如图2所示，根据本公开的实施例，在操作S201预处理获取的渠道清算数据中，包括：

对渠道清算数据按渠道配置渠道单元号；

根据渠道单元号将渠道清算数据与本地流水数据进行初始比对，确定对账开始时间。

渠道单元号可以作为对应渠道的唯一标示符，相当于该渠道的身份标识。将对应渠道所获取的渠道清算数据配置渠道单元号，可以对该渠道清算数据的对应渠道进行标识。其中，每个渠道单元号可以对应一个或多个渠道任务编号下的渠道清算数据。因此，可以加强对渠道清算数据的处理精准度，防止数据处理过程中出现混乱。

进一步地，借助于该渠道单元号可以将对应渠道的渠道清算数据与本地流水数据进行初始比对，从而确定本公开实施例的数据对账方法的对账开始时间。其中，该对账开始时间为该数据对账方案的对账起始的时间点，可以由本地执行日志进行检测记录。

通过该对账开始时间的确认，能够防止数据对账过程中受到其他本地事务的影响数据对账处理进程，造成数据对账异常终止，且无法接续处理对账，从而加强数据处理过程的稳定性。

如图2所示，根据本公开的实施例，根据在根据渠道单元号将渠道清算数据与本地流水数据进行初始比对中，包括：

按照正反交易规则基于渠道单元号将渠道清算数据与本地流水数据进行初始比对，生成初始化数据；

其中，初始化数据包括对账开始时间。

正反交易规则为对应一业务内容的正交易和反交易的处理规则，例如对应于购物的业务内容，可以出现支付交易和退款交易的对应处理，则支付交易可以理解为正交易，而退款交易可以理解为支付交易的反交易。因此，可以按照该正反交易规则基于渠道单元号将渠道清算数据与本地流水数据进行初步比对，生成包含日对账批次号、渠道单元号、对账开始标记锁定标识、清算文件日期、对账开始时间等字段的初始化数据。

其中，本地流水数据为与该渠道清算数据对应的本地交易流水数据。通过该正反交易规则的初步比对，可以对该渠道清算数据完成预处理操作，使得渠道清算数据能够更好的符合本地数据的处理规则或配置。进一步地，通过该初始化数据可以对本公开实施例的数据对账过程的对账开始时间进行确定，从而防止数据对账过程中的数据异常。

如图2所示，根据本公开的实施例，在操作S202界定经预处理的渠道清算数据的对账清算数据中，包括：

按照历史清算存疑数据界定参与清算数据；以及

按照历史流水存疑数据界定参与流水数据；

根据参与清算数据和参与流水数据确定对账清算数据和对账流水数据。

历史清算存疑数据为该渠道清算数据的对应的历史对账处理过程中所确定的异常清算数据内容。历史流水存疑数据为该本地交易流水数据的对应的历史对账处理过程中所确定的异常流水数据内容。例如，对应于1月1日的渠道清算数据，一般可以在该日的下一日(1月2日)进行定时获取并与本地交易流水执行对账处理，其中，该获取的渠道清算数据的数据执行日期为1月1日，与其对应该本地交易流水的数据执行日期也为1月1日。但是，相应地，相对于1月1日而言之前一日的12月31日，其所获取对应渠道的历史渠道清算数据的数据执行日期为12月30日，对应的历史本地流水数据的数据执行日期为12月30日，二者的对账处理日则为1月1日。那么历史渠道清算数据与历史本地流水数据的在1月1日中的对账处理结果中关于二者经对账所确认的异常数据可以分别作为历史清算存疑数据和历史流水存疑数据。

因此，通过历史清算存疑数据可以重点确定经预处理之后的渠道清算数据之中必须进行此次对账处理的异常数据项，该数据项及其对应数据内容作为参与清算数据，用于作为最终执行对账处理过程中的对账处理对象。相应地，通过历史流水存疑数据可以重点确定本地流水数据之中必须进行此次对账处理的异常数据项，该数据项及其对应数据内容作为参与流水数据，用于作为最终执行对账处理过程中的对账参比对象。

因此，基于该参与清算数据和参与流水数据可以确定最终需要进行对账处理的清算异常数据项和流水异常数据项。进一步地，基于该参与清算数据对其进行形式的处理，可以构成对账清算数据，从而确定了后续对账处理过程中所需的渠道清算数据的数据界定范围和内容。同时，基于该参与流水数据对其进行形式的处理，可以构成对账流水数据，从而确定了后续对账处理过程中所需的本地流水数据的数据界定范围和内容。

因此，通过上述数据界定过程，实现了对渠道清算数据和本地交易流水数据中的数据筛选，从而筛除一些不必要进行对账的数据内容，加快数据处理速度，节省数据处理资源，提高数据对账准确性和高效性。

如图2所示，根据本公开的实施例，在根据参与清算数据和参与流水数据确定对账清算数据和对账流水数据中，还包括：

对参与清算数据增加第一标记字段，生成对账清算数据；

对参与流水数据增加第二标记字段，生成对账流水数据。

对于渠道清算数据而言，可以存放于对应本地清算数据表中，每个本地清算数据表中均包括多行数据，所有行数据可以组成该渠道清算数据。其中，对于根据历史清算存疑数据所确定的参与清算数据，可以对应每行的参与清算数据的数据项进行字段标记，形成具有第一标记字段的参与清算数据项，当完成该字段标记过程，则可以构成该本地清算数据表中可以用于对账处理对账清算数据。其中，第一标记字段为用于标记参与对账的清算数据数据项的标识，从而实现对不参与标记、参与后内部消除标记的区分。

相应地，对于本地流水数据而言，可以存放于对应本地流水数据表中，每个本地流水数据表中均包括多行数据，所有行数据可以组成该本地流水数据。其中，对于根据历史流水存疑数据所确定的参与流水数据，可以对应每行的参与流水数据的数据项进行字段标记，形成具有第二标记字段的参与流水数据项，当完成该字段标记过程，则可以构成该本地流水数据表中可以用于对账处理对账流水数据。其中，第二标记字段为用于标记参与对账的流水数据数据项的标识，从而实现对不参与标记、参与后内部消除标记的区分。

通过上述第一标记字段和第二标记字段可以分别对参与清算数据和参与流水数据作进一步的界定，从而进一步提高对账清算数据和对账流水数据的精确性，提高后续对账处理过程的处理精度，加快数据对账效率。

如图2所示，根据本公开的实施例，在生成对账清算数据中，包括：

将增加第一标记字段的参与清算数据与增加第二标记字段的参与流水数据执行数据比对；

根据数据比对的比对结果对增加第一标记字段的参与清算数据增加第一对账核对字段，生成对账清算数据。

根据增加了第一标记字段的参与清算数据和增加了第二标记字段的参与流水数据执行数据比对，从而能够确定二者数据比对结果。该数据对比结果可以是对标记的参与清算数据和参与流水数据两个数据表之间的比对结果，主要是将标记的数据项进行分别比对，从而能够确定二者所标记的相同的数据项和不同的数据项。

进一步地，可以根据数据比对结果中不同的比对数据项，对增加第一标记字段的参与清算数据增加第一核对结果字段，标记这些比对数据项的各自状态，具体将这些数据项的对应字段进行预处理，使得该数据项的状态标记为开始。其中，第一核对结果字段为参与清算数据与参与流水数据之间的核对结果的对应清算数据字段，用以表示这些核对结果所对应的清算数据内容。

借此，可以进一步实现对对账清算数据的数据标记，标记这些数据的开始状态，从而有利于进一步地数据对账的准确和稳定处理。

如图2所示，根据本公开的实施例，在生成对账流水数据中，包括：

根据数据比对的比对结果对增加第二标记字段的参与流水数据增加第二对账核对字段，生成对账流水数据。

根据增加了第一标记字段的参与清算数据和增加了第二标记字段的参与流水数据执行数据比对，从而能够确定二者数据比对结果。该数据对比结果可以是对标记的参与清算数据和参与流水数据两个数据表之间的比对结果，主要是将标记的数据项进行分别比对，从而能够确定二者所标记的相同的数据项和不同的数据项。

进一步地，可以根据数据比对结果中不同的比对数据项，对增加第二标记字段的参与流水数据增加第二核对结果字段，标记这些比对数据项的各自状态，具体将这些数据项的对应字段进行预处理，使得该数据项的状态标记为开始。其中，第二核对结果字段为参与清算数据与参与流水数据之间的核对结果的对应流水数据字段，用以表示这些核对结果所对应的流水数据内容。

借此，可以对应于上述对账清算数据的第一核对结果字段，进一步实现对对账流水数据的数据标记，标记这些数据的开始状态，从而有利于进一步地数据对账的准确和稳定处理。

根据本公开的实施例，在操作S203中根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账之前，还包括：

提取渠道清算数据中的第一参数；

按照预设关键字生成规则处理第一参数生成第一关键字。

提取渠道清算数据中的渠道全局流水号、交易金额、参与标识、正反交易标识等作为第一参数，该第一参数为该渠道清算数据中按照每条渠道清算数据项及其数据内容的标识参数。

预设关键字生成规则为定义第一参数与第一关键字的对应关系的参数规则，可以用于根据第一参数的具体数据标识参数，对应生成相应的第一关键字。其中，可以将渠道全局流水号、交易金额、参与标识、正反交易标识等第一参数进行统一处理，生成一个第一关键字，也可以将这些第一参数中各个标识参数分别进行处理，生成多个第一关键字。

因此，可以通过第一关键字确定相应的渠道清算数据中的各个数据项的参数内容，使得在对账过程中第一关键字可以更好地实现对账清算数据与对账流水数据之间的精确对账。

根据本公开的实施例，在操作S203根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账之前，还包括：

提取本地流水数据中的第二参数；

按照预设关键字生成规则处理第二参数生成第二关键字。

提取本地交易流水数据中的本地全局流水号、交易金额、参与标识、正反交易标识等作为第二参数，该第二参数为该本地交易流水数据中按照每条本地流水数据项及其数据内容的标识参数。

预设关键字生成规则为定义第二参数与第二关键字的对应关系的参数规则，可以用于根据第二参数的具体数据标识参数，对应生成相应的第二关键字。其中，可以将渠道全局流水号、交易金额、参与标识、正反交易标识等第二参数进行统一处理，生成一个第二关键字，也可以将这些第二参数中各个标识参数分别进行处理，生成多个第二关键字。

因此，可以通过第二关键字确定相应的本地流水数据中的各个数据项的参数内容，使得在对账过程中第二关键字可以更好地实现对账清算数据与对账流水数据之间的精确对账。

图3示意性示出了根据本公开实施例的数据对账方法中对账处理过程的应用场景图。

如图2和图3所示，根据本公开的实施例，在操作S203根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账中，包括：

将第一关键字和第二关键字作为对账匹配元素，根据对账开始时间对对账清算数据和对账流水数据执行差异比对；

通过第三对账核对字段对差异比对的比对结果进行标记。

如图3所示，在对账处理300中，将前述所形成对账清算数据304作为对账处理的数据对象，对账流水数据303作为对账处理的参比对象，将两者进行差异比对，实现对账处理。其中，对账匹配元素为进行差异比对的过程中对应参与比对的每个数据项的比对匹配配置参数，具体可以通过第一关键字301对对账清算数据的比对匹配配置参数进行体现，通过第二关键字302对对账流水数据的比对匹配配置参数进行体现。此外，关于具体的差异比对的对账过程，具体可以依赖两组匹配配置参数实现，即基础配置信息和高级配置信息。

其中，基础配置信息主要包括基础数据源配置、渠道清算文件路径、渠道清算文件名、结果存放路径、结果文件名、差异结果文件名、结果表名、差异明细表名以及对账方式自动选择开关等。高级配置信息主要包括是否分库分表对账开关、多任务对账开启标识、分总/分分/总总核对方式、源流水分库分表数据源配置、分分是否重组本地交易流水标识、重组流水规则单元、是否拆分文件标识、文件拆分规则、分库分表数据源配置、数据库对账开关、数据库对账库表信息、本地文件对账开关、本地文件存放路径、本地交易流水文件名，缓存对账开关、缓存类型信息以及缓存地址信息等。

可见，借此通过第一关键字和第二关键字作为对账匹配元素，可以在对账处理过程中就基本实现针对不同金额、不同笔数以及不同日期等匹配元素的对账数据分类，且能够按照金额和对账前后固定日期等内容出具差异明细，使得对账数据结果更为精细，能够准确提供差异明细结果的交易时间、交易金额等关键信息，进一步辅助定位数据异常结果和异常原因。

进一步地，通过上述基础配置信息和高级配置信息，可以对对账处理的差异比对方式进行确定，具体地，在对账处理过程中，若对账方式自动选择开关为开且其他标记开关打开数大于一时，根据交易量大小和数据库是否分库分表架构、是否存在广阔可用的分布式缓存，并可以按照此顺序选择对账方式，否则可以关闭开关选择固定配置的某一比对方式。例如，如果非分库分表的数据模式且数据量小于等于百万条，则默认选择数据库比对方式；如果非分库分表的数据模式且数据量在百万以上，同时没有相应的缓存环境，则可以选择服务器的文件比对方式；有缓存则可以选择缓存比对方式，缓存比对方式的对账模式特点是效率更高更为灵活；如果是分库分表的数据模式，则可以通过选择配置核对方式确定比对单元，按照统一对比方式进行差异比对。

因此，能够针对交易流水与不同数据类型的渠道清算数据核对，针对不同通讯类型和不同推送模式的渠道清算数据来源，接收文件并根据交易量和硬件环境切换选择最快速度的对账方式，实现了在对账处理过程中对对账方式的自由适配，从而能够确保匹配的对账方式与对账数据实现更快更准确的处理过程。

如图3所示，对比标记305，执行差异比对还可以将对账开始时间加入考虑，即当前对账处理的执行时间满足前述所确定的对账开始时间时，则执行差异比对。其中，该执行时间应当晚于对账开始时间。此外，还可以进一步考虑对账数据时间作为基础数据作为上述当前对账处理过程的考虑因素。其中，对账数据时间为对账清算数据和/或对账流水数据中每个数据项的生成时间，与该数据项对应的业务办理的时间相匹配。例如，用户在1月1日办理一业务交易，在办理当日的时间内，在渠道对应的渠道数据项生成日期可以作为该渠道数据项的对账数据时间，在本地对应的本地数据项生成日期可以作为该本地数据项的对账数据时间，两者一般日期一致。因此，在上述第一关键字和第二关键字作为对账匹配元素的基础上，进一步引入对账数据时间以及对账开始时间等时间元素，能够进一步满足业务多场景多维度的对账分析，从而可以更好地关联外围系统，对结果进行精确后处理，充分满足结算人员对对账结果的使用需求等。而且，精细化的对账处理，还能够进一步提高对账效率，平衡对账处理速度和对账处理精度。

第三对账核对字段为对经过对账清算数据和对账流水数据之间的差异比对所形成的比对结果中各个数据项的状态标识，用于对比对结果的每个数据项进行差异化标记，从而有利于后续的标记分类汇总，便于直接输出汇总分类结果，定位异常数据。例如，该第三对账核对字段可以包括：相同统一关键字且同一日期的标记为当日相等、不同日期的标记为流水日相等或文件日相等、渠道清算文件当日日切时间差内发生的本地交易流水未匹配到的标记为本地存疑、当日时间差外标记为当日本地短款、原本地交易流水存疑仍未匹配到的标记为上一日本地短款、渠道清算文件在当日日切时间差内未匹配到的标记为渠道存疑、当日时间差外标记为当日渠道长款以及原渠道存疑仍未匹配到的标记为上一日渠道长款等数据字段。

借此，可以在对账过程中即进行分类操作，实现对对账处理的比对结果的进一步精细化分类标记，从而使得比对结果可以直接输出分类，加快对账处理速度，还能够保证数据精度，便于定位异常等数据项，如图3所示标记后笔数与金额数据306等。

图4示意性示出了根据本公开实施例的数据对账方法中统计展示过程的应用场景图。

如图2-图4所示，根据本公开的实施例，该方法还包括：

对经过对账的对账结果进行统计，生成数据统计集。

如图4所示，在统计展示400中，主要对上述经过对账处理并标记分类的对账数据进行汇总401，并执行结果展示和后处理。其中，整体汇总411可以提供如文件笔数与金额汇总、交易笔数与金额汇总、当日对平笔数与金额汇总以及总对平笔数与金额汇总等对账结果数据；差异汇总412则可以提供如上一日差异对平笔数、当日金额差异数据、本地存疑金额、本地存疑笔数、当日短款笔数、当日短款金额、当日长款金额、当日长款笔数、渠道存疑金额、渠道存疑笔数、上一日长款笔数、上一日长款金额、上一日短款笔数、上一日长款金额、对账开始/结束标记锁定标识以及对账结束时间等对账结果数据。

进一步地，将以上统计后的各数据内容置于结果展示数据表，生成数据统计集402并在对应的结果页面展示。其中，该数据统计集402包括差异明细，差异明细存置于差异明细数据表中，且包含明细的原属性信息、统一关键字、标记结果字段、补充人工处理时间、人工处理操作员、人工处理方式、人工处理结果以及流水记账标记等明细数据。将该数据统计集的差异明细推送到明细处理页403对其进行处理，同时将其他展示数据推送至汇总展示页404对其进行处理，以备数据展示。

经过处理并自动推送405之后完成后处理过程，提供处理入口页面用于单条和分页批量的数据操作入口，支持按照各字段筛选、处理数据；并可以按照配置进行自动或手动处理存疑及长款的支付中心消息推送，或手动处理结果后支付中心消息推送用于处理订单、账务中心进行账务补记账或结算中心处理结算记录，如支付中心和结算中心406。

因此，能够满足业务多场景及多维度的分析，且可以关联外围系统，对结果进行后处理，能充分满足清结算人员对对账展示的使用需求，同时满足运营人员对交易和订单的使用需求，而且还可以满足数据运营人员的统计分析需求。

可见，基于本公开实施例的上述数据对账方法，能够自动高效且可配置的进行交易流水与上下游渠道文件进行差异比对，可以支持各种数据来源、各种数据规模、各种硬件配置以及海量数据对账的高效对账的处理过程，对账方法具有更高的普适性，并能够出具详尽的结果展示和自动进行结果后处理，结果展示更为详尽，分类更为细致准确，且整个对账处理过程速度更快，处理精度更高，能够充分实现对异常的定位和分析。

基于上述数据对账方法，本公开还提供了一种数据对账装置。以下将结合图5对该装置进行详细描述。

图5示意性示出了根据本公开实施例的数据对账装置的结构框图。

如图5所示，该实施例的数据对账装置500包括预处理模块510、数据界定模块520和数据对账模块530。

预处理模块510用于预处理获取的渠道清算数据。在一实施例中，预处理模块510可以用于执行前文描述的操作S201，在此不再赘述。

数据界定模块520用于界定经预处理的渠道清算数据的对账清算数据。在一实施例中，数据界定模块520可以用于执行前文描述的操作S202，在此不再赘述。

数据对账模块530用于根据基于渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对对账清算数据和对账流水数据执行对账。在一实施例中，数据对账模块530可以用于执行前文描述的操作S203，在此不再赘述。

根据本公开的实施例，预处理模块510、数据界定模块520和数据对账模块530中的任意多个模块可以合并在一个模块中实现，或者其中的任意一个模块可以被拆分成多个模块。或者，这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合，并在一个模块中实现。根据本公开的实施例，预处理模块510、数据界定模块520和数据对账模块530中的至少一个可以至少被部分地实现为硬件电路，例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现，或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者，预处理模块510、数据界定模块520和数据对账模块530中的至少一个可以至少被部分地实现为计算机程序模块，当该计算机程序模块被运行时，可以执行相应的功能。

图6示意性示出了根据本公开实施例的适于实现数据对账方法的电子设备的方框图。

如图6所示，根据本公开实施例的电子设备600包括处理器601，其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。处理器601例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如，专用集成电路(ASIC))等等。处理器601还可以包括用于缓存用途的板载存储器。处理器601可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。

在RAM 603中，存储有电子设备600操作所需的各种程序和数据。处理器601、ROM602以及RAM 603通过总线604彼此相连。处理器601通过执行ROM 602和/或RAM 603中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意，所述程序也可以存储在除ROM 602和RAM 603以外的一个或多个存储器中。处理器601也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。

根据本公开的实施例，电子设备600还可以包括输入/输出(I/O)接口605，输入/输出(I/O)接口605也连接至总线604。电子设备600还可以包括连接至I/O接口605的以下部件中的一项或多项：包括键盘、鼠标等的输入部分606；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607；包括硬盘等的存储部分608；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器610上，以便于从其上读出的计算机程序根据需要被安装入存储部分608。

本公开还提供了一种计算机可读存储介质，该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的；也可以是单独存在，而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序，当上述一个或者多个程序被执行时，实现根据本公开实施例的方法。

根据本公开的实施例，计算机可读存储介质可以是非易失性的计算机可读存储介质，例如可以包括但不限于：便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。例如，根据本公开的实施例，计算机可读存储介质可以包括上文描述的ROM 602和/或RAM 603和/或ROM 602和RAM 603以外的一个或多个存储器。

本公开的实施例还包括一种计算机程序产品，其包括计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。当计算机程序产品在计算机系统中运行时，该程序代码用于使计算机系统实现本公开实施例所提供的物品推荐方法。

在该计算机程序被处理器601执行时执行本公开实施例的系统/装置中限定的上述功能。根据本公开的实施例，上文描述的系统、装置、模块、单元等可以通过计算机程序模块来实现。

在一种实施例中，该计算机程序可以依托于光存储器件、磁存储器件等有形存储介质。在另一种实施例中，该计算机程序也可以在网络介质上以信号的形式进行传输、分发，并通过通信部分609被下载和安装，和/或从可拆卸介质611被安装。该计算机程序包含的程序代码可以用任何适当的网络介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。

在这样的实施例中，该计算机程序可以通过通信部分609从网络上被下载和安装，和/或从可拆卸介质611被安装。在该计算机程序被处理器601执行时，执行本公开实施例的系统中限定的上述功能。根据本公开的实施例，上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。

根据本公开的实施例，可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例提供的计算机程序的程序代码，具体地，可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。程序设计语言包括但不限于诸如Java，C++，python，“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

本领域技术人员可以理解，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合，即使这样的组合或结合没有明确记载于本公开中。特别地，在不脱离本公开精神和教导的情况下，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。

以上对本公开的实施例进行了描述。但是，这些实施例仅仅是为了说明的目的，而并非为了限制本公开的范围。尽管在以上分别描述了各实施例，但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围，本领域技术人员可以做出多种替代和修改，这些替代和修改都应落在本公开的范围之内。

Claims (16)

1.一种数据对账方法，其中，包括：

预处理获取的渠道清算数据；

界定经所述预处理的渠道清算数据的对账清算数据；以及

根据基于所述渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对所述对账清算数据和对账流水数据执行对账。

2.根据权利要求1所述的方法，其中，在所述预处理获取的渠道清算数据之前，还包括：

按照渠道对应的渠道任务编号匹配数据配置信息；

根据数据配置信息获取对应渠道的渠道清算数据。

3.根据权利要求1所述的方法，其中，在所述预处理获取的渠道清算数据中，包括：

对所述渠道清算数据按渠道配置渠道单元号；

根据所述渠道单元号将所述渠道清算数据与所述本地流水数据进行初始比对，确定对账开始时间。

4.根据权利要求3所述的方法，其中，在所述根据所述渠道单元号将所述渠道清算数据与所述本地流水数据进行初始比对中，包括：

按照正反交易规则基于所述渠道单元号将所述将所述渠道清算数据与所述本地流水数据进行初始比对，生成初始化数据；

其中，所述初始化数据包括对账开始时间。

5.根据权利要求1所述的方法，其中，在所述界定经所述预处理的渠道清算数据的对账清算数据中，包括：

按照历史清算存疑数据界定所述参与清算数据；以及

按照历史流水存疑数据界定所述参与流水数据；

根据所述参与清算数据和参与流水数据确定所述对账清算数据和对账流水数据。

6.根据权利要求5所述的方法，其中，在所述根据所述参与清算数据和参与流水数据确定所述对账清算数据和对账流水数据中，还包括：

对所述参与清算数据增加第一标记字段，生成所述对账清算数据；

对所述参与流水数据增加第二标记字段，生成所述对账流水数据。

7.根据权利要求6所述的方法，其中，在所述生成所述对账清算数据中，包括：

将所述增加第一标记字段的所述参与清算数据与所述增加第二标记字段的所述参与流水数据执行数据比对；

根据所述数据比对的比对结果对所述增加第一标记字段的所述参与清算数据增加第一对账核对字段，生成所述对账清算数据。

8.根据权利要求6所述的方法，其中，在所述生成所述对账流水数据中，包括：

根据所述数据比对的比对结果对所述增加第二标记字段的所述参与流水数据增加第二对账核对字段，生成所述对账流水数据。

9.根据权利要求1所述的方法，其中，在所述根据基于所述渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对所述对账清算数据和对账流水数据执行对账之前，还包括：

提取所述渠道清算数据中的第一参数；

按照预设关键字生成规则处理所述第一参数生成所述第一关键字。

10.根据权利要求1所述的方法，其中，在所述根据基于所述渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对所述对账清算数据和对账流水数据执行对账之前，还包括：

提取所述本地流水数据中的第二参数；

按照预设关键字生成规则处理所述第二参数生成所述第二关键字。

11.根据权利要求3所述的方法，其中，在所述根据基于所述渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对所述对账清算数据和对账流水数据执行对账中，包括：

将所述第一关键字和第二关键字作为对账匹配元素，根据对账开始时间对所述对所述对账清算数据和对账流水数据执行差异比对；

通过第三对账核对字段对所述差异比对的比对结果进行标记。

12.根据权利要求1所述的方法，其中，还包括：

对经过所述对账的对账结果进行统计，生成数据统计集。

13.一种数据对账装置，其中，包括：

预处理模块，用于预处理获取的渠道清算数据；

数据界定模块，用于界定经所述预处理的渠道清算数据的对账清算数据；以及

数据对账模块，用于根据基于所述渠道清算数据确定的第一关键字和基于本地流水数据确定的第二关键字，对所述对账清算数据和对账流水数据执行对账。

14.一种电子设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器执行根据权利要求1～12中任一项所述的方法。

15.一种计算机可读存储介质，其上存储有可执行指令，该指令被处理器执行时使处理器执行根据权利要求1～12中任一项所述的方法。

16.一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现根据权利要求1～12中任一项所述的方法。

Images