CN113360461B - 一种推送逾期数据到催收系统进行解析的方法及存储介质 - Google Patents

一种推送逾期数据到催收系统进行解析的方法及存储介质 Download PDF

Info

Publication number
CN113360461B
CN113360461B CN202110717009.4A CN202110717009A CN113360461B CN 113360461 B CN113360461 B CN 113360461B CN 202110717009 A CN202110717009 A CN 202110717009A CN 113360461 B CN113360461 B CN 113360461B
Authority
CN
China
Prior art keywords
data
overdue
storing
file
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110717009.4A
Other languages
English (en)
Other versions
CN113360461A (zh
Inventor
杨驰
李耀
彭磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Zhongbang Bank Co Ltd
Original Assignee
Wuhan Zhongbang Bank Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Zhongbang Bank Co Ltd filed Critical Wuhan Zhongbang Bank Co Ltd
Priority to CN202110717009.4A priority Critical patent/CN113360461B/zh
Publication of CN113360461A publication Critical patent/CN113360461A/zh
Application granted granted Critical
Publication of CN113360461B publication Critical patent/CN113360461B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/03—Credit; Loans; Processing thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Accounting & Taxation (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Finance (AREA)
  • Human Computer Interaction (AREA)
  • Development Economics (AREA)
  • Technology Law (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种推送逾期数据到催收系统进行解析的方法及存储介质，属于信息技术领域，解决现有技术中的催收系统对逾期数据进行解析存在时效性有延误性的问题。本发明在催收系统的数据库创建包括逾期数据的业务表；将逾期数据拼接成字符串；拼接后，将拼接的字符串以txt格式保存于以当日日期命名的文件夹内，并推送至指定的文件目录，推送完成后再在日期命名的文件夹内新建后缀为OK的文件；定时任务检查，若检查的文件夹内没有后缀为OK的文件，等待下一次定时任务执行，若有，则开始对该文件进行解析，解析后，得到当日的全量逾期数据写入数据库。

Description

一种推送逾期数据到催收系统进行解析的方法及存储介质
技术领域
一种推送逾期数据到催收系统进行解析的方法及存储介质，用于解析逾期数据，属于信息技术领域。
背景技术
传统催收系统在晚间批处理中，核心核算等业务系统各产品渠道逾期信息整理解析耗时不一致，且不同业务系统的逾期数据推送时间难以统一，催收系统作为下游系统，难以保证每日解析任务的完成时间，如果部分业务系统完成推送已经开始催收工作，另一部分业务系统刚刚完成推送开始解析，会对催收系统性能产生一定影响，导致操作卡顿。现有技术中，为了便于业务人员进行催收，通常将逾期数据导出推送格式为excel的报表，当报表包含字段过多，大量数据会导致文件过大，上传至催收系统后会极大影响催收系统解析时效性，易造成业务延误。
发明内容
针对上述研究的问题，本发明的目的在于提供一种推送逾期数据到催收系统进行解析的方法，部署于8核16G的linux服务器中，解决现有技术中的催收系统对逾期数据进行解析存在时效性有延误性的问题。
为了达到上述目的，本发明采用如下技术方案：
一种推送逾期数据到催收系统进行解析的方法，包括：
步骤1:在催收系统的数据库创建一张用于存储解析处理后催收系统每日使用的数据的业务表，其中，业务表包括催收系统生成的ID字段和逾期数据，逾期数据包括借据信息、贷款逾期信息、客户信息和第三方联系人信息，借据信息包括借据号和交易流水号，贷款逾期信息包括逾期日期和逾期金额，客户信息包括客户姓名和客户联系方式，第三方联系人信息包括关联人姓名和关联人联系方式，ID字段用来保存各借据在催收系统内的所有操作；
步骤2：银行的数据中心按逾期数据从各业务系统抽取所需要的数据，并将逾期数据中有数据的字段以&&拼接成字符串，无数据的字段以&&&&拼接成字符串，一条借据信息为一行字符串，即每条借据信息对应的字段以&&按给定的顺序进行拼接，其中，数据中心是指银行存放数据和提供数据的系统；
步骤3：数据中心拼接完成后，将拼接的字符串以txt格式保存于以当日日期命名的文件夹内，并推送至指定的文件目录，推送完成后再在日期命名的文件夹内新建后缀为OK的文件表明数据已推送完成；
步骤4：催收系统中的定时任务检查文件目录是否包含当日日期的文件夹，若包含，再检查文件夹内是否有后缀为OK的文件，未查询到等待下一次定时任务执行，若查询到存在后缀为OK的文件则开始对该文件进行解析，解析后，得到当日的全量逾期数据写入数据库。
进一步，所述步骤4中，对后缀为OK的文件的解析的具体步骤为：
基于readline方法，循环读取后缀为OK的文件中的每一行数据并保存为字符串；
新建两个List集合，分别命名为List1，List2，用来存储后续步骤中需要保存的数据；
通过查找字符串中的间隔符号&&分割字符串，分割后以借据号为维度保存至List1集合中；
读取数据库中业务表中已存在的全量逾期的借据号并保存至List2集合中；
再次创建两个List集合，分别命名为UpdateList和InsertList，对List1进行循环遍历并与List2中的借据号对比，若借据号在List2中已存在则保存至UpdateList，若借据号在List2中不存在则保存至InsertList，遍历完成后，通过UpdateList和InsertList对业务表完成数据的新增与更新，新增和更新后，将当日的全量逾期数据并入数据库。
进一步，特定格式分割字符串具体是指以&&分割字符串，分割后的字段根据顺序不同代表不同信息。
进一步，通过两个UpdateList和InsertList对业务表完成数据的新增与更新，新增和更新后，将当日的全量逾期数据写入数据库具体为：
循环遍历InsertLIst，使用inster语句，将InsertList的每一条逾期数据写入数据库中的业务表，循环遍历UpdateList，使用update语句，将UpdateList中的每一条逾期数据更新数据库中的业务表。
一种逾期数据解析方法的存储介质，其特征在于：存储上述所述的解析方法的linux服务器。
本发明同现有技术相比，其有益效果表现在：
一、本发明中的解析方法可极大的减少逾期数据的文件大小，即生成的逾期数据文件较小，并且提高催收系统的解析效率，同时减少了人工处理的工作量，未启用此方法前，每日全量数据逾5万条，导出excel的业务的大小可达30MB，解析耗时超过2小时，通过此方法文件大小可缩小至10MB以内，解析耗时不超过40分钟；
二、本发明在各业务系统跑批完后由数据中心统一整理并进行推送数据给催收系统，不仅能统一逾期数据推送时间，并且根据本发明中的数据处理方式，生成的逾期数据只需要采用TXT格式，每日从完成推送到解析结束只需要不到一小时时间，解析任务时长及稳定性都得到了保证，极大的提升了逾期数据解析的效率。
附图说明
图1为本发明中解析任务的过程示意图。
具体实施方式
下面将结合附图及具体实施方式对本发明作进一步的描述。
一种推送逾期数据到催收系统进行解析的方法，包括：
步骤1:在催收系统的数据库创建一张用于存储解析处理后催收系统每日使用的数据的业务表，其中，业务表包括催收系统生成的ID字段和逾期数据，逾期数据包括借据信息、贷款逾期信息、客户信息和第三方联系人信息，借据信息包括借据号和交易流水号，贷款逾期信息包括逾期日期和逾期金额，客户信息包括客户姓名和客户联系方式，第三方联系人信息包括关联人姓名和关联人联系方式，ID字段用来保存各借据在催收系统内的所有操作；
步骤2：银行的数据中心按逾期数据从各业务系统抽取所需要的数据，并将逾期数据中有数据的字段以&&拼接成字符串，无数据的字段以&&&&拼接成字符串，一条借据信息为一行字符串，即每条借据信息对应的字段以&&按给定的顺序进行拼接，其中，数据中心是指银行存放数据和提供数据的系统；按逾期数据从各业务系统抽取所需要的数据如图1所示。拼接样例如：借据号&&交易流水号&&客户姓名&&客户联系方式&&逾期日期&&逾期金额&&关联人&&&&关联人家庭住址(为空)&&关联人联系方式；具体为：1234567890&&KH1234567&&张三&&134********&&HT123456789&&0&&421123********1234&&ZYD&&10000.00&&12&&20210420&&20210420&&20220420&&19&&6312********091&&1&&800.00&&12.00&&0.00&&821.00&&20210519&&20210519&&800.00&&12.00&&0.00&&812.00&&李四&&&&187********。
步骤3：数据中心拼接完成后，将拼接的字符串以txt格式保存于以当日日期命名的文件夹内，并推送至指定的文件目录，如data文件目录或NAS文件目录，推送完成后再在日期命名的文件夹内新建后缀为OK的文件表明数据已推送完成；
步骤4：催收系统中的定时任务检查文件目录是否包含当日日期的文件夹，若包含，再检查文件夹内是否有后缀为OK的文件，未查询到等待下一次定时任务执行，若查询到存在后缀为OK的文件则开始对该文件进行解析，解析后，得到当日的全量逾期数据写入数据库。
对后缀为OK的文件的解析的具体步骤为：
基于readline方法(为现有的)，循环读取后缀为OK的文件中的每一行数据并保存为字符串；
新建两个List集合，分别命名为List1，List2；
通过特定格式分割字符串，分割后，以借据号为维度保存为List1；特定格式分割字符串具体是指以&&分割字符串，分割后的字段根据顺序不同代表不同信息。例如：借据号&&交易流水号&&客户姓名&&客户联系方式&&逾期日期&&逾期金额&&关联人&&&&关联人家庭住址(为空)&&关联人联系方式，分割后对应的是借据号、交易流水号、客户姓名、客户联系方式、逾期日期、逾期金额、关联人、关联人家庭住址(为空)、关联人联系方式。
读取数据库中业务表中已存在的全量逾期的借据号并保存为List2；
再次创建两个List集合，分别命名为UpdateList和InsertList，对List1进行循环遍历并与List2中的借据号对比，若借据号在List2中已存在则保存至UpdateList，若借据号在List2中不存在则保存至InsertList，遍历完成后，通过UpdateList和InsertList对业务表完成数据的新增与更新，新增和更新后，将当日的全量逾期数据并入数据库。
通过两个UpdateList和InsertList对业务表完成数据的新增与更新，新增和更新后，将当日的全量逾期数据写入数据库具体为：
循环遍历InsertLIst，使用inster语句，将InsertList的每一条逾期数据写入数据库中的业务表，循环遍历UpdateList，使用update语句，将UpdateList中的每一条逾期数据更新数据库中的业务表，inster语句：如“insert into“业务表名称”values(借据号,交易流水号,客户姓名,客户联系方式,逾期日期,逾期金额)”，update语句：如“update“业务表名称”set逾期金额＝新逾期金额”。
以上仅是本发明众多具体应用范围中的代表性实施例，对本发明的保护范围不构成任何限制。凡采用变换或是等效替换而形成的技术方案，均落在本发明权利保护范围之内。
数据中心抽取数据的示例表：
Figure BDA0003135215120000041
Figure BDA0003135215120000051
Figure BDA0003135215120000061

Claims (4)

1.一种推送逾期数据到催收系统进行解析的方法，其特征在于，包括：
步骤1:在催收系统的数据库创建一张用于存储解析处理后催收系统每日使用的数据的业务表，其中，业务表包括催收系统生成的ID字段和逾期数据，逾期数据包括借据信息、贷款逾期信息、客户信息和第三方联系人信息，借据信息包括借据号和交易流水号，贷款逾期信息包括逾期日期和逾期金额，客户信息包括客户姓名和客户联系方式，第三方联系人信息包括关联人姓名和关联人联系方式，ID字段用来保存各借据在催收系统内的所有操作；
步骤2：银行的数据中心按逾期数据从各业务系统抽取所需要的数据，并将逾期数据中有数据的字段以&&拼接成字符串，无数据的字段以&&&&拼接成字符串，一条借据信息为一行字符串，即每条借据信息对应的字段以&&按给定的顺序进行拼接，其中，数据中心是指银行存放数据和提供数据的系统；
步骤3：数据中心拼接完成后，将拼接的字符串以txt格式保存于以当日日期命名的文件夹内，并推送至指定的文件目录，推送完成后再在日期命名的文件夹内新建后缀为OK的文件表明数据已推送完成；
步骤4：催收系统中的定时任务检查文件目录是否包含当日日期的文件夹，若包含，再检查文件夹内是否有后缀为OK的文件，未查询到等待下一次定时任务执行，若查询到存在后缀为OK的文件则开始对该文件进行解析，解析后，得到当日的全量逾期数据写入数据库；
所述步骤4中，对后缀为OK的文件的解析的具体步骤为：
基于readline方法，循环读取后缀为OK的文件中的每一行数据并保存为字符串；
新建两个List集合，分别命名为List1，List2，用来存储后续步骤中需要保存的数据；
通过查找字符串中的间隔符号&&分割字符串，分割后以借据号为维度保存至List1集合中；
读取数据库中业务表中已存在的全量逾期的借据号并保存至List2集合中；
再次创建两个List集合，分别命名为UpdateList和InsertList，对List1进行循环遍历并与List2中的借据号对比，若借据号在List2中已存在则保存至UpdateList，若借据号在List2中不存在则保存至InsertList，遍历完成后，通过UpdateList和InsertList对业务表完成数据的新增与更新，新增和更新后，将当日的全量逾期数据并入数据库。
2.根据权利要求1所述的一种推送逾期数据到催收系统进行解析的方法，其特征在于，特定格式分割字符串具体是指以&&分割字符串，分割后的字段根据顺序不同代表不同信息。
3.根据权利要求2所述的一种推送逾期数据到催收系统进行解析的方法，其特征在于，通过两个UpdateList和InsertList对业务表完成数据的新增与更新，新增和更新后，将当日的全量逾期数据写入数据库具体为：
循环遍历InsertLIst，使用inster语句，将InsertList的每一条逾期数据写入数据库中的业务表，循环遍历UpdateList，使用update语句，将UpdateList中的每一条逾期数据更新数据库中的业务表。
4.一种逾期数据解析方法的存储介质，其特征在于：存储权利要求1-3之一 所述的解析方法的linux服务器。
CN202110717009.4A 2021-06-28 2021-06-28 一种推送逾期数据到催收系统进行解析的方法及存储介质 Active CN113360461B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110717009.4A CN113360461B (zh) 2021-06-28 2021-06-28 一种推送逾期数据到催收系统进行解析的方法及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110717009.4A CN113360461B (zh) 2021-06-28 2021-06-28 一种推送逾期数据到催收系统进行解析的方法及存储介质

Publications (2)

Publication Number Publication Date
CN113360461A CN113360461A (zh) 2021-09-07
CN113360461B true CN113360461B (zh) 2022-08-12

Family

ID=77536744

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110717009.4A Active CN113360461B (zh) 2021-06-28 2021-06-28 一种推送逾期数据到催收系统进行解析的方法及存储介质

Country Status (1)

Country Link
CN (1) CN113360461B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101119568A (zh) * 2007-07-20 2008-02-06 南京联创科技股份有限公司 计费帐务系统模块间接口配置化方法和引擎
CN109685639A (zh) * 2018-08-21 2019-04-26 深圳壹账通智能科技有限公司 贷款审核方法、装置、设备及计算机可读存储介质
JP2019176434A (ja) * 2018-03-29 2019-10-10 株式会社リコー 情報処理システムおよび情報処理方法
CN110716948A (zh) * 2019-12-12 2020-01-21 四川新网银行股份有限公司 一种基于数据定期处理的双锁控制方法及介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101119568A (zh) * 2007-07-20 2008-02-06 南京联创科技股份有限公司 计费帐务系统模块间接口配置化方法和引擎
JP2019176434A (ja) * 2018-03-29 2019-10-10 株式会社リコー 情報処理システムおよび情報処理方法
CN109685639A (zh) * 2018-08-21 2019-04-26 深圳壹账通智能科技有限公司 贷款审核方法、装置、设备及计算机可读存储介质
CN110716948A (zh) * 2019-12-12 2020-01-21 四川新网银行股份有限公司 一种基于数据定期处理的双锁控制方法及介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
为逾期贷款催收支招;王小荣;《中国邮政》;20091209(第12期);全文 *
基于企业信息机的图书催还短消息系统;叶升阳;《图书馆杂志》;20061115(第11期);全文 *

Also Published As

Publication number Publication date
CN113360461A (zh) 2021-09-07

Similar Documents

Publication Publication Date Title
CN110879813B (zh) 一种基于二进制日志解析的MySQL数据库增量同步实现方法
CN100495400C (zh) 一种全文检索系统的索引在线更新方法
CN111382279B (zh) 审单方法和装置
CN104298760A (zh) 一种应用于数据仓库的数据处理方法和数据处理装置
CN103678392A (zh) 一种数据增量合并的方法及其装置
WO2019161645A1 (zh) 基于Shell的数据表提取方法、终端、设备及存储介质
CN113254457B (zh) 一种对账方法、系统及计算机可读存储介质
CN105808653A (zh) 一种基于用户标签系统的数据处理方法及装置
CN105787058A (zh) 一种用户标签系统及基于用户标签系统的数据推送系统
CN103064908B (zh) 一种通过内存快速去重名单的方法
CN110502317B (zh) 一种事务管理的方法和装置
CN109615172A (zh) 一种处理考核数据的方法及终端
CN114297173A (zh) 一种面向大规模海量数据的知识图谱构建方法和系统
CN111309868A (zh) 一种知识图谱构建、检索方法及装置
CN116361367A (zh) 一种高效发布招聘信息的内容识别系统及方法
CN109918623A (zh) 一种政策更新自动对比管理系统
CN113360461B (zh) 一种推送逾期数据到催收系统进行解析的方法及存储介质
CN109740130B (zh) 用于生成文件的方法和装置
CN1423217A (zh) 专利费用管理系统及方法
CN114722045A (zh) 时间序列数据的存储方法及装置
CN114020719A (zh) 一种应用于异构数据库的证照数据迁移方法
CN113807857A (zh) 一种资金交易异常的存款账户识别方法及装置
CN109408533A (zh) 数据处理及检索方法、数据库、检索引擎及系统
CN111680985A (zh) 基于系统码和设备编码实现自动归属安装分项工程的方法
CN112164433A (zh) 一种医院后台数据的处理方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant