CN110245116A - 对账数据处理方法、装置、设备及计算机可读存储介质 - Google Patents

对账数据处理方法、装置、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN110245116A
CN110245116A CN201910494505.0A CN201910494505A CN110245116A CN 110245116 A CN110245116 A CN 110245116A CN 201910494505 A CN201910494505 A CN 201910494505A CN 110245116 A CN110245116 A CN 110245116A
Authority
CN
China
Prior art keywords
reconciliation
data
format
file
data processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910494505.0A
Other languages
English (en)
Inventor
曹威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
WeBank Co Ltd
Original Assignee
WeBank Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by WeBank Co Ltd filed Critical WeBank Co Ltd
Priority to CN201910494505.0A priority Critical patent/CN110245116A/zh
Publication of CN110245116A publication Critical patent/CN110245116A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/16File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G06F16/164File meta data generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/12Accounting
    • G06Q40/125Finance or payroll

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Technology Law (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及金融科技(Fintech)技术领域,本发明公开了一种对账数据处理方法,该方法包括:在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;查询预设配置表,获取所述机构标识对应的对账配置信息;根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。本发明还公开了一种对账数据处理装置、设备和计算机可读存储介质。本发明中对账文件读取时,不需要用户进行手动地导入对账数据,或者单独地开发解析代码解析对账文件,根据机构接入时设置的对账配置信息解析对账文件,实现了对账文件中元素数据的自动读取。

Description

对账数据处理方法、装置、设备及计算机可读存储介质
技术领域
本发明涉及金融科技(Fintech)技术领域,尤其涉及对账数据处理方法、装置、设备及计算机可读存储介质。
背景技术
随着互联网技术,尤其是互联网金融科技(Fintech)的飞速发展,越来越多的技术(大数据、分布式、区块链Blockchain、人工智能等)应用在金融领域,金融数据也呈几何级增长。
目前存在很多聚合支付,或者与多家合作机构直连交易等情况,这时候就会涉及到与多个合作机构之间的对账。若新增一家机构,要处理该新增机构的账本数据就需要人工导入该机构的账本数据,或者单独针对这个机构去开发解析对账文件的代码,前者采用人工导入的方式,数据处理效率低;后者开发者的工作量大。
发明内容
本发明的主要目的在于提出一种对账数据处理方法、装置、设备及计算机可读存储介质,旨在解决当前对账文件处理时,人力资源浪费严重,代码接入效率低的技术问题。
为实现上述目的,本发明提供一种对账数据处理方法,所述对账数据处理方法包括如下步骤:
在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;
查询预设配置表,获取所述机构标识对应的对账配置信息;
根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。
可选地,所述在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件的步骤之前,包括:
在接收到机构接入请求时,获取所述机构接入请求中的机构标识,及所述机构标识对应的对账文件;
确定所述对账文件的文件属性和内容格式,其中,所述内容格式包括元素分隔符、关键元素和所述关键元素对应的元素位置;
将所述文件属性和所述内容格式作为所述对账文件对应的对账配置信息,并将所述对账配置信息输入到所述预设配置表中,以更新所述预设配置表。
可选地,所述根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中的步骤,包括:
获取与所述对账配置信息中文件属性匹配的文件解析模板,将所述对账配置信息中内容格式输入到所述文件解析模板中,得到文件解析指令;
按所述文件解析指令解析所述对账文件,得到所述对账文件中各关键元素对应的元素数据;
获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式;
若所述元素数据的数据格式符合所述预设标准格式,则将所述元素数据导入到对账元素数据库中。
可选地,所述获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式的步骤,包括:
获取所述元素数据的预设标准格式,其中,所述预设标准格式中包含标准字符长度;
若所述元素数据的元素字符长度不等于所述标准字符长度,则判定所述元素数据的数据格式不符合所述预设标准格式;
若所述元素数据的元素字符长度等于所述标准字符长度,则判定所述元素数据的数据格式符合所述预设标准格式。
可选地,所述获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式的步骤之后,包括:
若所述元素数据的数据格式不符合所述预设标准格式,则获取所述预设标准格式对应的标准字符长度、填充方向和填充字符;
根据所述标准字符长度、所述填充方向和所述填充字符,对所述元素数据添加零,或在所述元素数据的后面用空格或其他字符填充补足,使得所述元素数据的数据格式符合所述预设标准格式,并将符合所述预设标准格式的所述元素数据导入到所述对账元素数据库中。
可选地,所述对账数据处理方法,还包括:
在接收到对账请求时,获取所述对账请求对应的机构标识和对账日期;
从所述对账元素数据库中采集所述机构标识和所述对账日期对应的元素数据,采集所述机构标识和所述对账日期对应的基础数据;
将所述元素数据和所述基础数据输入至大数据处理平台,并设置所述元素数据和所述基础数据之间的数据比对键;
根据所述数据比对键比对所述元素数据和所述基础数据,得到比对结果并输出。
可选地,所述根据所述数据比对键比对所述元素数据和所述基础数据,得到比对结果并输出的步骤,包括:
将所述元素数据和所述基础数据按所述数据比对键进行关联,判断所述元素数据和所述基础数据之间是否存在差异数据;
若所述元素数据和所述基础数据之间存在差异数据,则将所述差异数据输出。
此外,为实现上述目的,本发明还提供一种对账数据处理装置,所述对账数据处理装置包括:
第一接收模块,用于在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;
信息查询模块,用于查询预设配置表,获取所述机构标识对应的对账配置信息;
数据导入模块,根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。
可选地,所述对账数据处理装置,包括:
机构接入模块,用于在接收到机构接入请求时,获取所述机构接入请求中的机构标识,及所述机构标识对应的对账文件;
信息确定模块,用于确定所述对账文件的文件属性和内容格式,其中,所述内容格式包括元素分隔符、关键元素和所述关键元素对应的元素位置;
配置更新模块,用于将所述文件属性和所述内容格式作为所述对账文件对应的对账配置信息,并将所述对账配置信息输入到所述预设配置表中,以更新所述预设配置表。
可选地,所述数据导入模块,还包括:
指令确定子模块,用于获取与所述对账配置信息中文件属性匹配的文件解析模板,将所述对账配置信息中内容格式输入到所述文件解析模板中,得到文件解析指令;
文件解析子模块,用于按所述文件解析指令解析所述对账文件,得到所述对账文件中各关键元素对应的元素数据;
格式判断子模块,用于获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式;
数据导入子模块,用于若所述元素数据的数据格式符合所述预设标准格式,则将所述元素数据导入到对账元素数据库中。
可选地,所述格式判断子模块,包括:
格式获取单元,用于获取所述元素数据的预设标准格式,其中,所述预设标准格式中包含标准字符长度;
第一判定单元,用于若所述元素数据的元素字符长度不等于所述标准字符长度,则判定所述元素数据的数据格式不符合所述预设标准格式;
第二判定单元,用于若所述元素数据的元素字符长度等于所述标准字符长度,则判定所述元素数据的数据格式符合所述预设标准格式。
可选地,所述对账数据处理装置还包括:
信息获取模块,用于若所述元素数据的数据格式不符合所述预设标准格式,则获取所述预设标准格式对应的标准字符长度、填充方向和填充字符;
调整导入模块,用于根据所述标准字符长度、所述填充方向和所述填充字符,对所述元素数据添加零,或在所述元素数据的后面用空格或其他字符填充补足,使得所述元素数据的数据格式符合所述预设标准格式,并将符合所述预设标准格式的所述元素数据导入到所述对账元素数据库中。
可选地,所述对账数据处理装置,还包括:
第二接收模块,用于在接收到对账请求时,获取所述对账请求对应的机构标识和对账日期;
数据采集模块,用于从所述对账元素数据库中采集所述机构标识和所述对账日期对应的元素数据,采集所述机构标识和所述对账日期对应的基础数据;
输入设置模块,用于将所述元素数据和所述基础数据输入至大数据处理平台,并设置所述元素数据和所述基础数据之间的数据比对键;
数据比对模块,用于根据所述数据比对键比对所述元素数据和所述基础数据,得到比对结果并输出。
可选地,所述数据比对模块,还包括:
数据拼接单元,用于将所述元素数据和所述基础数据按所述数据比对键进行关联,判断所述元素数据和所述基础数据之间是否存在差异数据;
比对输出单元,用于若所述元素数据和所述基础数据之间存在差异数据,则将所述差异数据输出。
此外,为实现上述目的,本发明还提供一种对账数据处理设备,所述对账数据处理设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的对账数据处理程序,所述对账数据处理程序被所述处理器执行时实现如上所述的对账数据处理方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有对账数据处理程序,所述对账数据处理程序被处理器执行时实现如上所述的对账数据处理方法的步骤。
本发明提供一种对账数据处理方法、装置、设备及计算机可读存储介质,本发明实施例中对账数据处理设备在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;通过查询预设配置表,获取所述机构标识对应的对账配置信息;根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。本实施例中不需要用户进行手动地导入对账数据,或者单独地开发解析代码解析对账文件,减少了开发人员的工作量,减少了人力资源的浪费,对账数据处理设备根据机构接入时设置的对账配置信息解析对账文件,实现了对账文件中元素数据的自动读取,提高了代码接入效率,也提高了对账效率。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图;
图2为本发明对账数据处理方法第一实施例的流程示意图;
图3为本发明对账数据处理方法第一实施例的具体场景示意图;
图4为本发明对账数据处理方法第二实施例的流程示意图;
图5为本发明对账数据处理方法第三实施例的流程示意图;
图6为本发明对账数据处理装置一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图。
本发明实施例对账数据处理设备可以是PC机或服务器设备,其上运行有Java虚拟机。
如图1所示,该对账数据处理设备可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的设备结构并不构成对设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及对账数据处理程序。
在图1所示的设备中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的对账数据处理对应的计算机程序,并执行下述对账数据处理方法中的操作。
基于上述硬件结构,提出本发明对账数据处理方法实施例;本发明对账数据处理方法的第一实施例包括:
在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;
查询预设配置表,获取所述机构标识对应的对账配置信息;
根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。
本实施例中对账数据处理方法应用于对账数据处理设备,对账数据处理设备是对账数据处理对应的计算机程序的硬件载体,对账数据处理设备与不同的金融机构(包括银行机构、保险机构或证券机构等)的数据平台通信连接,对账数据处理设备与金融机构的数据平台可以实现数据传输。
比如在金融领域中,对账数据处理设备可以访问自身业务数据库,查询金融数据库表,如账务信息表,开户信息表,金融交易信息表等,对账数据处理设备还可以对接第三方金融机构,将第三方金融机构的数据进行处理并保存到对账元素数据库(对账元素数据库是预先设置的用于存储第三方金融机构对账文件中元素数据的数据库),对账数据处理设备将自身数据平台中的基础数据与第三方金融机构的元素数据进行比对,以完成对账。
在本实施例中,对账数据处理设备预先接入金融机构,具体地,包括:
步骤a1,在接收到机构接入请求时,获取所述机构接入请求中的机构标识,及所述机构标识对应的对账文件;
步骤a2,确定所述对账文件的文件属性和内容格式,其中,所述内容格式包括元素分隔符、关键元素和所述关键元素对应的元素位置;
步骤a3,将所述文件属性和所述内容格式作为所述对账文件对应的对账配置信息,并将所述对账配置信息输入到所述预设配置表中,以更新所述预设配置表。
本实施例对账数据处理设备中预设配置表,预设配置表包含有不同金融机构的对账配置信息,对账数据处理设备可以按照对账配置信息解析金融机构的对账文件,每次新接入一个金融机构,开发人员将该金融机构对应对账文件的对账配置信息输入到预设配置表,以使对账数据处理设备根据预设配置表中的对账配置信息解析对账文件,具体地,
对账数据处理设备在接收到机构接入请求时,对账数据处理设备获取机构接入请求中的机构标识(机构标识可以是机构名称或者机构编号等;用于唯一识别金融机构的标识信息),及机构标识对应的对账文件。
对账数据处理设备确定对账文件的文件属性和内容格式,文件属性包括但不仅限于文件创建日期、文件大小、文件类型;内容格式包括但不仅限于元素分隔符、关键元素和各关键元素的位置,对账数据处理设备将文件属性和内容格式作为机构标识对应的对账配置信息,对账数据处理设备将对账配置信息输入到预设配置表(预设配置表是指保存金融机构对账配置信息的数据表)中,以更新预设配置表。
本实施例中,对账数据处理设备获取预设配置表中对账文件对应的对账配置信息,并按照对账配置信息解析对账文件,在新增金融机构时,不需要开发人员单独针对这个金融机构去开发解析这个金融机构对账文件的代码;通过设置该金融机构对应的对账配置信息,并根据对账配置信息对金融机构的对账文件进行解析,获取到金融机构对账相关的元素数据并入库;具体地:
参照图2,图2为本发明对账数据处理方法第一实施例的流程示意图,所述方法包括:
步骤S10,在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;
对账数据处理设备接收对账文件读取请求,对账文件读取请求的触发方式不作具体限定,即对账文件读取请求可以是用户主动触发的,例如,用户在终端上输出“xxx机构”触发金融数据读取请求,终端将“xxx机构”金融数据读取请求发送到对账数据处理设备,触发对账文件读取请求;此外,收对账文件读取请求还可以是对账数据处理设备自动触发的,例如,对账数据处理设置每月初自动读取对账文件,则对账数据处理设备在月初的时候自动触发对账文件读取请求。
对账数据处理设备在接收对到账文件读取请求时,对账数据处理设备获取对账文件读取请求对应的机构标识,和该机构标识对应的对账文件。
步骤S20,查询预设配置表,获取所述机构标识对应的对账配置信息。
对账数据处理设备在得到对账文件之后,对账数据处理设备查询预设配置表,获取预设配置表中机构标识对应的对账配置信息。
步骤S30,根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。
本实施例中对账数据处理设备按照对账配置信息解析对账文件,读取对账文件中的元素数据,即,对账数据处理设备将金融机构的对账配置信息输入到文件解析模板,得到文件解析指令,并执行文件解析指令得到对账文件中的元素数据,对账数据处理设备将元素数据导入到对账元素数据库。
如图3所示,金融机构1的对账配置信息包括:订单0、商品名称1、金额2、订单状态3、购买用户姓名5、购买用户ID6和分隔符|;对账数据处理设备根据对账配置信息,将对账文件中的元素数据导入到对账元素数据库中。
本实施例中,对账数据处理设备在第一次接入机构时设置机构的对账配置信息,就能够实现读取分析机构的对账文件,实现了新增机构零开发接入对账功能;节省了分析获取对账文件的时间,提升接入机构的效率,降低接入合作机构的成本,实现了对账文件的自动读取,提高了代码接入效率,也提高了对账效率。
进一步地,参照图4,基于本发明对账数据处理方法第一实施例,提出本发明对账数据处理方法第二实施例。
在本实施例是第一实施例中步骤S30的细化,本实施例中对账数据处理设备根据金融机构的对账配置信息,解析金融机构的对账文件,具体地,包括:
步骤S31,获取与所述对账配置信息中文件属性匹配的文件解析模板,将所述对账配置信息中内容格式输入到所述文件解析模板中,得到文件解析指令。
本实施例中,对账数据处理设备根据对账文件的属性选择文件解析模板,例如,对账数据处理设备根据文件类型选择文件解析模板,即,txt类型的账本文件对应文件解析模板1,xlsx类型的账本文件对应文件解析模板2;对账数据处理设备将对账配置信息中内容格式输入到文件解析模板中,得到文件解析指令。
步骤S32,按所述文件解析指令解析所述对账文件,得到所述对账文件中各关键元素对应的元素数据。
对账数据处理设备按文件解析指令解析对账文件,即,文件解析指令先根据对账配置信息中的元素分隔符,将对账文件中的各个记录进行划分,形成元素字段,对账数据处理设备根据对账配置信息中的关键元素与位置关系,确定各关键元素对应的元素数据。
步骤S33,获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式。
对账数据处理设备获取对账元素数据库中预设设置的各个关键元素对应元素数据的预设标准格式,对账数据处理设备获取元素数据的预设标准格式,并判断元素数据的数据格式是否符合预设标准格式,本实施例中以预设标准格式中的字符长度为例进行说明,具体地:
步骤c1,获取所述元素数据的预设标准格式,其中,所述预设标准格式中包含标准字符长度;
步骤c2,若所述元素数据的元素字符长度不等于所述标准字符长度,则判定所述元素数据的数据格式不符合所述预设标准格式;
步骤c3,若所述元素数据的元素字符长度等于所述标准字符长度,则判定所述元素数据的数据格式符合所述预设标准格式。
步骤S34,若所述元素数据的数据格式符合所述预设标准格式,则将所述元素数据导入到对账元素数据库中。
若元素数据的数据格式符合预设标准格式,对账数据处理设备将元素数据导入到对账元素数据库中,以实现账本数据的自动读取。
步骤S35,若所述元素数据的数据格式不符合所述预设标准格式,则获取所述预设标准格式对应的标准字符长度、填充方向和填充字符;
若元素数据的数据格式不符合预设标准格式,对账数据处理设备获取预设标准格式中对应的标准字符长度、填充方向和填充字符;以根据预设标准格式对应的标准字符长度、填充方向和填充字符调整元素数据。
步骤S36,根据所述标准字符长度、所述填充方向和所述填充字符,对所述元素数据添加零,或在所述元素数据的后面用空格或其他字符填充补足,使得所述元素数据的数据格式符合所述预设标准格式,并将符合所述预设标准格式的所述元素数据导入到所述对账元素数据库中。
对账数据处理设备根据标准字符长度、填充方向和填充字符,对元素数据添加零,或在元素数据的后面用空格或其他字符填充补足,使得元素数据的数据格式符合预设标准格式,对账数据处理设备将调整得到的符合预设标准格式的元素数据导入到对账元素数据库中。
本实施例中,对账数据处理设备可以根据预设标准格式自动调整元素数据的格式,并将符合预设标准格式的元素数据导入到对账元素数据库中,使得对账元素数据库中的数据统一规范。
进一步地,参照图5,基于本发明对账数据处理方法上述实施例,提出本发明对账数据处理方法第三实施例。
在本实施例是第一实施例中步骤S30之后的步骤,本实施例中对账文件中的元素数据导入到对账元素数据库中之后,对账数据处理设备可以将自身业务系统中的基础数据与对账元素数据库中的元素数据进行比对,完成对账操作,具体地,包括:
步骤S40,在接收到对账请求时,获取所述对账请求对应的机构标识和对账日期。
对账数据处理设备接收到对账请求时,对账数据处理设备获取对账请求对应的机构标识和对账日期,对账请求的触发方式不作具体限定,即,对账请求可以是用户主动触发的,例如,用户在账数据处理设备设置需要对账的机构标识和对账日期,并触发对账请求;此外,对账请求还可以是自动触发的,例如,对账数据处理设备每天自动触发对账请求。
步骤S50,从所述对账元素数据库中采集所述机构标识和所述对账日期对应的元素数据,采集所述机构标识和所述对账日期对应的基础数据。
对账数据处理设备从对账元素数据库中采集机构标识和对账日期对应的元素数据,对账数据处理设备采集机构标识和对账日期对应的基础数据(基础数据是指对自身记录的业务数据),对账数据处理设备通过数据收集器采集元素数据和基础数据。数据收集器如scribe,scribe是facebook开源的数据收集系统。
步骤S60,将所述元素数据和所述基础数据输入至大数据处理平台,并设置所述元素数据和所述基础数据之间的数据比对键。
对账数据处理设备将元素数据和基础数据输入至大数据处理平台(大数据处理平台可以是hive、或者Spark数据仓库工具),并设置元素数据和基础数据之间的数据比对键,本实施例中的数据比对键可以设置一个或者多个。
应理解,通过hive、Spark数据仓库工具等大数据处理平台存储数据实现对账,hive是Hadoop集群的数据仓库工具,相当于数据收集器将数据收集到大数据Hadoop集群中,大数据Hadoop集群中的数据库可选有主机和备机,在主机故障的情况下由备机提供服务,实现了分布式架构下的数据存储。
步骤S70,根据所述数据比对键比对所述元素数据和所述基础数据,得到比对结果并输出。
在本实施例中,得到比对结果并输出之后,可选将输出结果上链存储至区块链中,防止比对结果被篡改。
对账数据处理设备根据数据比对键比对元素数据和基础数据,得到比对结果并输出,具体地,对账数据处理设备收集到了基础数据和元素数据后,使用Hadoop的数据仓库工具hive,对两边数据进行对账,对账时使用两边数据的唯一主键连接,比如设置订单号作为关联条件,关联到对应数据后,对比订单状态、订单金额等信息。此外,还可以使用Spark数据仓库工具对两边数据进行对账,对账时使用两边数据的唯一主键连接,比如设置订单号作为关联条件,关联到对应数据后,对比订单状态、订单金额等信息。
本实施例中使用大数据处理平台对账效率更高,并且与应用系统分离,不会影响应用系统的正常运行。
参照图6,本发明实施例提出了一种对账数据处理装置,所述对账数据处理装置包括:
第一接收模块,用于在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;
信息查询模块,用于查询预设配置表,获取所述机构标识对应的对账配置信息;
数据导入模块,根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。
在一实施例中,所述对账数据处理装置,包括:
机构接入模块,用于在接收到机构接入请求时,获取所述机构接入请求中的机构标识,及所述机构标识对应的对账文件;
信息确定模块,用于确定所述对账文件的文件属性和内容格式,其中,所述内容格式包括元素分隔符、关键元素和所述关键元素对应的元素位置;
配置更新模块,用于将所述文件属性和所述内容格式作为所述对账文件对应的对账配置信息,并将所述对账配置信息输入到所述预设配置表中,以更新所述预设配置表。
在一实施例中,所述数据导入模块,还包括:
指令确定子模块,用于获取与所述对账配置信息中文件属性匹配的文件解析模板,将所述对账配置信息中内容格式输入到所述文件解析模板中,得到文件解析指令;
文件解析子模块,用于按所述文件解析指令解析所述对账文件,得到所述对账文件中各关键元素对应的元素数据;
格式判断子模块,用于获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式;
数据导入子模块,用于若所述元素数据的数据格式符合所述预设标准格式,则将所述元素数据导入到对账元素数据库中。
在一实施例中,所述格式判断子模块,包括:
格式获取单元,用于获取所述元素数据的预设标准格式,其中,所述预设标准格式中包含标准字符长度;
第一判定单元,用于若所述元素数据的元素字符长度不等于所述标准字符长度,则判定所述元素数据的数据格式不符合所述预设标准格式;
第二判定单元,用于若所述元素数据的元素字符长度等于所述标准字符长度,则判定所述元素数据的数据格式符合所述预设标准格式。
在一实施例中,所述对账数据处理装置还包括:
信息获取模块,用于若所述元素数据的数据格式不符合所述预设标准格式,则获取所述预设标准格式对应的标准字符长度、填充方向和填充字符;
调整导入模块,用于根据所述标准字符长度、所述填充方向和所述填充字符,对所述元素数据添加零,或在所述元素数据的后面用空格或其他字符填充补足,使得所述元素数据的数据格式符合所述预设标准格式,并将符合所述预设标准格式的所述元素数据导入到所述对账元素数据库中。
在一实施例中,所述对账数据处理装置,还包括:
第二接收模块,用于在接收到对账请求时,获取所述对账请求对应的机构标识和对账日期;
数据采集模块,用于从所述对账元素数据库中采集所述机构标识和所述对账日期对应的元素数据,采集所述机构标识和所述对账日期对应的基础数据;
输入设置模块,用于将所述元素数据和所述基础数据输入至大数据处理平台,并设置所述元素数据和所述基础数据之间的数据比对键;
数据比对模块,用于根据所述数据比对键比对所述元素数据和所述基础数据,得到比对结果并输出。
在一实施例中,所述数据比对模块,还包括:
数据拼接单元,用于将所述元素数据和所述基础数据按所述数据比对键进行关联,判断所述元素数据和所述基础数据之间是否存在差异数据;
比对输出单元,用于若所述元素数据和所述基础数据之间存在差异数据,则将所述差异数据输出。
本发明实施例,还提供一种计算机可读存储介质。
本发明计算机可读存储介质上存储有对账数据处理程序,所述对账数据处理程序被处理器执行时实现如上所述的对账数据处理方法的步骤。
其中,在所述处理器上运行的对账数据处理程序被执行时所实现的方法可参照本发明对账数据处理方法各个实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (16)

1.一种对账数据处理方法,其特征在于,所述对账数据处理方法包括如下步骤:
在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;
查询预设配置表,获取所述机构标识对应的对账配置信息;
根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。
2.如权利要求1所述的对账数据处理方法,其特征在于,所述在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件的步骤之前,包括:
在接收到机构接入请求时,获取所述机构接入请求中的机构标识,及所述机构标识对应的对账文件;
确定所述对账文件的文件属性和内容格式,其中,所述内容格式包括元素分隔符、关键元素和所述关键元素对应的元素位置;
将所述文件属性和所述内容格式作为所述对账文件对应的对账配置信息,并将所述对账配置信息输入到所述预设配置表中,以更新所述预设配置表。
3.如权利要求2所述的对账数据处理方法,其特征在于,所述根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中的步骤,包括:
获取与所述对账配置信息中文件属性匹配的文件解析模板,将所述对账配置信息中内容格式输入到所述文件解析模板中,得到文件解析指令;
按所述文件解析指令解析所述对账文件,得到所述对账文件中各关键元素对应的元素数据;
获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式;
若所述元素数据的数据格式符合所述预设标准格式,则将所述元素数据导入到对账元素数据库中。
4.如权利要求3所述的对账数据处理方法,其特征在于,所述获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式的步骤,包括:
获取所述元素数据的预设标准格式,其中,所述预设标准格式中包含标准字符长度;
若所述元素数据的元素字符长度不等于所述标准字符长度,则判定所述元素数据的数据格式不符合所述预设标准格式;
若所述元素数据的元素字符长度等于所述标准字符长度,则判定所述元素数据的数据格式符合所述预设标准格式。
5.如权利要求3所述的对账数据处理方法,其特征在于,所述获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式的步骤之后,包括:
若所述元素数据的数据格式不符合所述预设标准格式,则获取所述预设标准格式对应的标准字符长度、填充方向和填充字符;
根据所述标准字符长度、所述填充方向和所述填充字符,对所述元素数据添加零,或在所述元素数据的后面用空格或其他字符填充补足,使得所述元素数据的数据格式符合所述预设标准格式,并将符合所述预设标准格式的所述元素数据导入到所述对账元素数据库中。
6.如权利要求1-5任一项所述的对账数据处理方法,其特征在于,所述对账数据处理方法,还包括:
在接收到对账请求时,获取所述对账请求对应的机构标识和对账日期;
从所述对账元素数据库中采集所述机构标识和所述对账日期对应的元素数据,采集所述机构标识和所述对账日期对应的基础数据;
将所述元素数据和所述基础数据输入至大数据处理平台,并设置所述元素数据和所述基础数据之间的数据比对键;
根据所述数据比对键比对所述元素数据和所述基础数据,得到比对结果并输出。
7.如权利要求6所述的对账数据处理方法,其特征在于,所述根据所述数据比对键比对所述元素数据和所述基础数据,得到比对结果并输出的步骤,包括:
将所述元素数据和所述基础数据按所述数据比对键进行关联,判断所述元素数据和所述基础数据之间是否存在差异数据;
若所述元素数据和所述基础数据之间存在差异数据,则将所述差异数据输出。
8.一种对账数据处理装置,其特征在于,所述对账数据处理装置包括:
第一接收模块,用于在接收到对账文件读取请求时,获取所述对账文件读取请求中的机构标识,及所述机构标识对应的对账文件;
信息查询模块,用于查询预设配置表,获取所述机构标识对应的对账配置信息;
数据导入模块,根据所述对账配置信息解析所述对账文件,读取所述对账文件中的元素数据,并将所述元素数据导入到对账元素数据库中。
9.如权利要求8所述的对账数据处理装置,其特征在于,所述对账数据处理装置,包括:
机构接入模块,用于在接收到机构接入请求时,获取所述机构接入请求中的机构标识,及所述机构标识对应的对账文件;
信息确定模块,用于确定所述对账文件的文件属性和内容格式,其中,所述内容格式包括元素分隔符、关键元素和所述关键元素对应的元素位置;
配置更新模块,用于将所述文件属性和所述内容格式作为所述对账文件对应的对账配置信息,并将所述对账配置信息输入到所述预设配置表中,以更新所述预设配置表。
10.如权利要求9所述的对账数据处理装置,其特征在于,所述数据导入模块,还包括:
指令确定子模块,用于获取与所述对账配置信息中文件属性匹配的文件解析模板,将所述对账配置信息中内容格式输入到所述文件解析模板中,得到文件解析指令;
文件解析子模块,用于按所述文件解析指令解析所述对账文件,得到所述对账文件中各关键元素对应的元素数据;
格式判断子模块,用于获取所述元素数据的预设标准格式,判断所述元素数据的数据格式是否符合所述预设标准格式;
数据导入子模块,用于若所述元素数据的数据格式符合所述预设标准格式,则将所述元素数据导入到对账元素数据库中。
11.如权利要求10所述的对账数据处理装置,其特征在于,所述格式判断子模块,包括:
格式获取单元,用于获取所述元素数据的预设标准格式,其中,所述预设标准格式中包含标准字符长度;
第一判定单元,用于若所述元素数据的元素字符长度不等于所述标准字符长度,则判定所述元素数据的数据格式不符合所述预设标准格式;
第二判定单元,用于若所述元素数据的元素字符长度等于所述标准字符长度,则判定所述元素数据的数据格式符合所述预设标准格式。
12.如权利要求10所述的对账数据处理装置,其特征在于,所述对账数据处理装置还包括:
信息获取模块,用于若所述元素数据的数据格式不符合所述预设标准格式,则获取所述预设标准格式对应的标准字符长度、填充方向和填充字符;
调整导入模块,用于根据所述标准字符长度、所述填充方向和所述填充字符,对所述元素数据添加零,或在所述元素数据的后面用空格或其他字符填充补足,使得所述元素数据的数据格式符合所述预设标准格式,并将符合所述预设标准格式的所述元素数据导入到所述对账元素数据库中。
13.如权利要求8-12任一项所述的对账数据处理装置,其特征在于,所述对账数据处理装置,还包括:
第二接收模块,用于在接收到对账请求时,获取所述对账请求对应的机构标识和对账日期;
数据采集模块,用于从所述对账元素数据库中采集所述机构标识和所述对账日期对应的元素数据,采集所述机构标识和所述对账日期对应的基础数据;
输入设置模块,用于将所述元素数据和所述基础数据输入至大数据处理平台,并设置所述元素数据和所述基础数据之间的数据比对键;
数据比对模块,用于根据所述数据比对键比对所述元素数据和所述基础数据,得到比对结果并输出。
14.如权利要求13所述的对账数据处理装置,其特征在于,所述数据比对模块,还包括:
数据拼接单元,用于将所述元素数据和所述基础数据按所述数据比对键进行关联,判断所述元素数据和所述基础数据之间是否存在差异数据;
比对输出单元,用于若所述元素数据和所述基础数据之间存在差异数据,则将所述差异数据输出。
15.一种对账数据处理设备,其特征在于,所述对账数据处理设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的对账数据处理程序,所述对账数据处理程序被所述处理器执行时实现如权利要求1至7中任一项所述的对账数据处理方法的步骤。
16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有对账数据处理程序,所述对账数据处理程序被处理器执行时实现如权利要求1至7中任一项所述的对账数据处理方法的步骤。
CN201910494505.0A 2019-06-06 2019-06-06 对账数据处理方法、装置、设备及计算机可读存储介质 Pending CN110245116A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910494505.0A CN110245116A (zh) 2019-06-06 2019-06-06 对账数据处理方法、装置、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910494505.0A CN110245116A (zh) 2019-06-06 2019-06-06 对账数据处理方法、装置、设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN110245116A true CN110245116A (zh) 2019-09-17

Family

ID=67886369

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910494505.0A Pending CN110245116A (zh) 2019-06-06 2019-06-06 对账数据处理方法、装置、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110245116A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110751550A (zh) * 2019-10-12 2020-02-04 上海陆家嘴国际金融资产交易市场股份有限公司 对账方法、装置、计算机设备和存储介质
CN111352907A (zh) * 2020-03-30 2020-06-30 见知数据科技(上海)有限公司 流水文件解析方法、装置、计算机设备和存储介质
CN112465618A (zh) * 2020-12-22 2021-03-09 航天信息股份有限公司企业服务分公司 一种针对银行对账单的通用导入方法及系统
CN112581277A (zh) * 2020-12-24 2021-03-30 中国银联股份有限公司 一种数据处理方法及装置
CN113591446A (zh) * 2021-06-29 2021-11-02 四川新网银行股份有限公司 一种配置化对账文件生成装置
CN113626510A (zh) * 2021-08-11 2021-11-09 中国银行股份有限公司 交易核对方法、装置、电子设备及存储介质
CN115545690A (zh) * 2022-11-28 2022-12-30 云账户技术(天津)有限公司 对账文件的处理方法、装置、电子设备及可读存储介质
CN116012185A (zh) * 2023-03-24 2023-04-25 北京沐融信息科技股份有限公司 对账的方法、装置、电子设备及计算机可读存储介质

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110751550A (zh) * 2019-10-12 2020-02-04 上海陆家嘴国际金融资产交易市场股份有限公司 对账方法、装置、计算机设备和存储介质
CN111352907A (zh) * 2020-03-30 2020-06-30 见知数据科技(上海)有限公司 流水文件解析方法、装置、计算机设备和存储介质
CN112465618A (zh) * 2020-12-22 2021-03-09 航天信息股份有限公司企业服务分公司 一种针对银行对账单的通用导入方法及系统
CN112581277A (zh) * 2020-12-24 2021-03-30 中国银联股份有限公司 一种数据处理方法及装置
CN113591446A (zh) * 2021-06-29 2021-11-02 四川新网银行股份有限公司 一种配置化对账文件生成装置
CN113591446B (zh) * 2021-06-29 2023-11-03 四川新网银行股份有限公司 一种配置化对账文件生成装置
CN113626510A (zh) * 2021-08-11 2021-11-09 中国银行股份有限公司 交易核对方法、装置、电子设备及存储介质
CN113626510B (zh) * 2021-08-11 2024-02-13 中国银行股份有限公司 交易核对方法、装置、电子设备及存储介质
CN115545690A (zh) * 2022-11-28 2022-12-30 云账户技术(天津)有限公司 对账文件的处理方法、装置、电子设备及可读存储介质
CN116012185A (zh) * 2023-03-24 2023-04-25 北京沐融信息科技股份有限公司 对账的方法、装置、电子设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN110245116A (zh) 对账数据处理方法、装置、设备及计算机可读存储介质
CN111414407A (zh) 数据库的数据查询方法、装置、计算机设备及存储介质
CN109818937A (zh) 针对安卓权限的控制方法、装置、及存储介质、电子装置
EA007778B1 (ru) Генератор прикладных программ
CN104850546A (zh) 移动媒介信息的展示方法和系统
CN110022354A (zh) 基于http协议的移动应用集成方法、装置、计算机设备及存储介质
US20140089397A1 (en) Method, server, and client for pushing and displaying splash screen
CN110557284A (zh) 基于客户端网关的数据聚合方法及装置
CN111382252B (zh) 基于用户请求的问题类别确定方法、装置、设备及介质
CN108564462A (zh) 征信数据的获取方法、终端设备及介质
CN112822286B (zh) 消息的推送方法及装置
CN109634916A (zh) 文件存储及下载方法、装置及存储介质
CN113392158A (zh) 业务数据处理方法、装置及数据中台
CN112017007A (zh) 用户行为数据的处理方法及装置、计算机设备、存储介质
CN110019916A (zh) 基于用户画像的事件处理方法、装置、设备和存储介质
KR20180050786A (ko) 태그 서칭 기반의 자동 질의 응답 시스템 및 방법
CN113190267B (zh) 界面布局的动态配置方法与系统
CN110362630A (zh) 数据管理方法、装置、设备与计算机可读存储介质
CN110336791A (zh) 一种断点数据传输方法、装置、设备及计算机存储介质
CN113055348B (zh) 一种跨平台数据请求方法、装置及电子设备
CN106294417A (zh) 一种数据排序方法、装置及电子设备
CN112260933A (zh) 通信的方法、装置、电子设备及介质
CN112511574B (zh) 电子名片处理方法、设备、系统及存储介质
CN112287403A (zh) 基于区块链的电子卷宗管理方法、装置、电子设备及介质
CN109992614B (zh) 数据获取方法、装置和服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination