CN112468532A - 征信数据报送方法、装置、系统、设备及计算机存储介质 - Google Patents

征信数据报送方法、装置、系统、设备及计算机存储介质 Download PDF

Info

Publication number
CN112468532A
CN112468532A CN202011083304.0A CN202011083304A CN112468532A CN 112468532 A CN112468532 A CN 112468532A CN 202011083304 A CN202011083304 A CN 202011083304A CN 112468532 A CN112468532 A CN 112468532A
Authority
CN
China
Prior art keywords
data
credit
report
file
credit investigation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011083304.0A
Other languages
English (en)
Other versions
CN112468532B (zh
Inventor
诸园园
李志海
范庆祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suning Financial Technology Nanjing Co Ltd
Original Assignee
Suning Financial Technology Nanjing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suning Financial Technology Nanjing Co Ltd filed Critical Suning Financial Technology Nanjing Co Ltd
Priority to CN202011083304.0A priority Critical patent/CN112468532B/zh
Publication of CN112468532A publication Critical patent/CN112468532A/zh
Priority to CA3134107A priority patent/CA3134107A1/en
Application granted granted Critical
Publication of CN112468532B publication Critical patent/CN112468532B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/565Conversion or adaptation of application format or content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/04Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • H04L63/0435Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload wherein the sending and receiving network entities apply symmetric encryption, i.e. same key used for encryption and decryption
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)

Abstract

本发明公开了一种征信数据报送方法、装置、系统、设备及计算机可读存储介质,属于数据处理技术领域。所述方法包括:对征信主体信息数据进行数据预处理,生成报送数据文件,所述数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;对所述报送数据文件进行深度处理,生成上报密文;上传所述上报密文,并根据上报反馈结果分析情况生成征信报告。本发明根据征信报送规范统一对数据进行预处理、深度处理及上报,提供的统一的数据处理流程和标准接口,保障了数据质量,提高了征信数据报送效率,提高了用户体验和客户满意度。

Description

征信数据报送方法、装置、系统、设备及计算机存储介质
技术领域
本发明涉及数据处理技术领域,特别涉及征信数据报送方法、装置、系统、设备及计算机可读存储介质。
背景技术
根据国家《金融业发展和改革“十二五”规划》中指出,明确将征信作为“金融法律制度和基础设施建设”的一部分,同时随着巴塞尔协议3的实施要求和商业银行信贷风险管理技术和水平的进一步提高,征信中心对征信系统所拥有的银行业信贷数据样本需求将日益增强。金融机构特别是中小金融机构提高信用风险管理技术和应用系统的需要,将信贷数据接入征信系统为其提出了更高要求。金融机构为了满足征信系统的上报数据要求以及解决复杂的业务逻辑接口,建设专业的征信报送系统尤为重要。
征信报送系统(以下简称报送系统)是金融机构接入个人、企业征信数据库系统的重要枢纽,提供较为简单的接口与各金融机构业务系统对接,报送系统主要负责按个人、企业征信系统的报文规范组织生成报文文件及解析个人、企业征信系统的反馈文件;也可作为金融机构的独立系统单独运行,为一些没有自身独立业务系统的金融机构提供系统支持,同时报送系统可根据实际需求,为各金融机构量身定制其他个性化功能。二代征信数据报送:遵循人民银行二代征信数据报送接口规范要求,对银行机构的个人和企业信贷、抵质押、融资融券、不良资产处置、信用证、担保等业务信息以规范的报文形式上报至人民银行二代征信系统。
目前,由于金融机构内部业务系统数目众多,因而经常会出多系统间数据不一致,数据质量不高,数据缺失严重,故增加了金融机构征信数据上报的难度,和所耗费的成本,浪费了系统资源;同时,由于客户对所查征信报告存在异议,出现投诉状况,也往往降低了金融企业的客户满意度。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种征信数据报送方法、装置、系统、设备及计算机可读存储介质,根据征信报送规范统一对数据进行预处理、深度处理及上报,提供的统一的数据处理流程和标准接口,保障了数据质量,提高了征信数据报送效率,提高了用户体验和客户满意度。
所述技术方案如下:
一方面,提供了一种征信数据报送方法,所述方法包括:
对征信主体信息数据进行数据预处理,生成报送数据文件,所述数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;
对所述报送数据文件进行深度处理,生成上报密文;
上传所述上报密文,并根据上报反馈结果分析情况生成征信报告。
优选地,对征信主体信息数据进行数据预处理,生成报送数据文件,包括:
S1、业务数据抽取:从各个业务系统中抽取征信主体信息数据;
S2、基础数据校验:对抽取的征信主体信息数据进行包括完整性和异常情况的初步校验;
S3、基础数据整合:对初步校验后的数据进行合并整理,对缺失或异常数据进行修复;
S4、报送数据处理:根据报送要求对基础数据整合后的数据加工处理生成报送数据;
S5、报送数据预校验:根据知识库校验规则对所述报送数据进行预校验,如有异常则退回S4步骤重新处理,并重复进入本步骤;
S6、报送数据文件生成:根据所述深度处理数据要求生成相应的报送数据文件。
优选地,所述征信主体信息数据包括:信息主体基本信息、借贷交易信息、担保交易信息、授信协议信息、财务报表信息。
优选地,对所述报送数据文件进行深度处理,生成上报密文,包括:
报送数据文件入库:把所述报送数据文件加载传送;
报送数据文件入库校验:对加载的数据文件格式、编码进行校验,如有异常则退回所述S6步骤并循环执行至本步骤;
报文校验和加密:结合所述知识库进行数据逻辑校验,并进行加压加密操作生成上报加密格式的上报密文,如有异常,则退回至所述S4步骤并循环执行至本步骤。
优选地,所述加压加密操作包括:
对txt或csv格式的报送数据文件加压得到对应扩展名为txt.zip或csv.zip的压缩文件;
对扩展名为txt.zip或csv.zip的压缩文件加密得到enc格式的上报密文。
优选地,上传所述上报密文,并根据上报反馈结果分析情况生成征信报告,包括:
上传所述上报密文;
定期获取上报反馈结果,并对上报反馈结果进行分析,获取上报反馈结果分析情况,如有异常,则退回至所述S4步骤并循环执行至本步骤。
另一方面,提供了一种征信数据报送装置,包括:
数据预处理模块,用于:对征信主体信息数据进行数据预处理,生成报送数据文件,所述数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;
上报密文生成模块,用于:对所述报送数据文件进行深度处理,生成上报密文;
密文报送模块,用于:上传所述上报密文,并根据上报反馈结果分析情况生成征信报告。
优选地,所述数据预处理模块,用于:
S1、业务数据抽取:从各个业务系统中抽取征信主体信息数据;
S2、基础数据校验:对抽取的征信主体信息数据进行包括完整性和异常情况的初步校验;
S3、基础数据整合:对初步校验后的数据进行合并整理,对缺失或异常数据进行修复;
S4、报送数据处理:根据报送要求对基础数据整合后的数据加工处理生成报送数据;
S5、报送数据预校验:根据知识库校验规则对所述报送数据进行预校验,如有异常则退回S4步骤重新处理,并重复进入本步骤;
S6、报送数据文件生成:根据所述深度处理数据要求生成相应的报送数据文件。
优选地,所述征信主体信息数据包括:信息主体基本信息、借贷交易信息、担保交易信息、授信协议信息、财务报表信息。
优选地,所述上报密文生成模块,用于:
报送数据文件入库:把所述报送数据文件加载传送;
报送数据文件入库校验:对加载的数据文件格式、编码进行校验,如有异常则退回所述S6步骤并循环执行至本步骤;
报文校验和加密:结合所述知识库进行数据逻辑校验,并进行加压加密操作生成上报加密格式的上报密文,如有异常,则退回至所述S4步骤并循环执行至本步骤。
优选地,所述加压加密操作包括:
对txt或csv格式的报送数据文件加压得到对应扩展名为txt.zip或csv.zip的压缩文件;
对扩展名为txt.zip或csv.zip的压缩文件加密得到enc格式的上报密文。
优选地,所述密文报送模块,用于:
上传所述上报密文;
定期获取上报反馈结果,并对上报反馈结果进行分析,获取上报反馈结果分析情况,如有异常,则退回至所述S4步骤并循环执行至本步骤。
又一方面,提供了一种征信数据报送系统,包括数据预处理系统、深度处理系统和征信上报系统,所述数据预处理系统用于:对征信主体信息数据进行数据预处理,生成报送数据文件,所述数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;所述深度处理系统,用于:对所述报送数据文件进行深度处理,生成上报密文;所述征信上报系统,用于:上传所述上报密文,并根据上报反馈结果分析情况生成征信报告。
优选地,所述数据预处理系统,用于:
S1、业务数据抽取:从各个业务系统中抽取征信主体信息数据;
S2、基础数据校验:对抽取的征信主体信息数据进行包括完整性和异常情况的初步校验;
S3、基础数据整合:对初步校验后的数据进行合并整理,对缺失或异常数据进行修复;
S4、报送数据处理:根据报送要求对基础数据整合后的数据加工处理生成报送数据;
S5、报送数据预校验:根据知识库校验规则对所述报送数据进行预校验,如有异常则退回S4步骤重新处理,并重复进入本步骤;
S6、报送数据文件生成:根据所述深度处理数据要求生成相应的报送数据文件。
优选地,所述征信主体信息数据包括:信息主体基本信息、借贷交易信息、担保交易信息、授信协议信息、财务报表信息。
优选地,所述深度处理系统,用于:
报送数据文件入库:把所述报送数据文件加载传送;
报送数据文件入库校验:对加载的数据文件格式、编码进行校验,如有异常则退回所述S6步骤并循环执行至本步骤;
报文校验和加密:结合所述知识库进行数据逻辑校验,并进行加压加密操作生成上报加密格式的上报密文,如有异常,则退回至所述S4步骤并循环执行至本步骤。
优选地,所述加压加密操作包括:
对txt或csv格式的报送数据文件加压得到对应扩展名为txt.zip或csv.zip的压缩文件;
对扩展名为txt.zip或csv.zip的压缩文件加密得到enc格式的上报密文。
优选地,所述征信上报系统,用于:
上传所述上报密文;
定期获取上报反馈结果,并对上报反馈结果进行分析,获取上报反馈结果分析情况,如有异常,则退回至所述S4步骤并循环执行至本步骤。
又一方面,提供了一种征信数据报送设备,包括:
处理器;
存储器,用于存储有所述处理器的可执行指令;
其中,所述处理器配置为经由所述可执行指令来执行上述方案任一项所述的征信数据报送方法的步骤。
又一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如上述方案任一项所述的征信数据报送方法。
本发明实施例提供的技术方案带来的有益效果是:
通过统一数据接入格式和报文输出结果格式,统一进行逻辑运算和数据处理,避免了各机构反复调研需求和独立开发,故降低了征信报送机构耗费的成本,提升了报送征信数据的准确性和及时性,提高了报送数据质量,提高了用户体验和客户满意度,大大减少客户投诉等情况的发生。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的征信数据报送方法流程图;
图2是本发明实施例提供的征信数据报送装置结构示意图;
图3是本发明实施例提供的征信数据报送系统结构示意图;
图4是本发明实施例提供的征信数据报送设备结构示意图;
图5是本发明优选实施例提供的征信数据报送方法、装置、系统、设备及计算机可读存储介质的整体技术框架图;
图6是图5中数据预处理框图;
图7是图5中数据深度处理框图;
图8是图5的征信数据报送流程图;
图9是现有技术中征信数据报送走向示意图;
图10是本发明优选实施例提供的征信数据报送走向示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。需要说明的是,在本发明的描述中,“多个”的含义是两个以上,除非另有明确具体的限定。
下面结合具体实施例及附图,对本发明实施例提供的高可用负载均衡方法、系统及计算机可读存储介质详细说明。
基于目前征信数据报送技术现状,发明人通过进一步研究人民银行下发征信报送规范、各金融机构不同上报现状以及报送实践中各个环节,发现主要存在以下几个问题:各金融机构对规范人民银行下发征信报送规范理解存在偏差;各金融机构参照规范从数据接入到数据上报独立开发,工作量大,口径千差万别,上报的数据质量层次不齐;开发人更多精力在代码编写上,没有更多精力放在治理源头数据质量上;数据上报质量问题经常引发客户投诉。
由此,为解决上述问题,本发明实施例提出了一种征信数据报送方案,统一了数据接入格式和报文输出结果格式,统一进行逻辑运算和数据处理,避免了各机构反复调研需求和独立开发,故降低了征信报送机构耗费的成本,提升了报送征信数据的准确性和及时性,提高了报送数据质量,提高了用户体验和客户满意度,大大减少客户投诉等情况的发生。因此本发明实施例提供的征信数据报送方法、装置、系统、设备及计算机可读存储介质,适用于涉及征信数据报送的各种金融机构业务系统或数据平台等应用场景。
下面结合具体实施例及附图,对本发明实施例提供的征信数据报送方法、装置、系统、设备及计算机可读存储介质详细说明。
图1是本发明实施例提供的征信数据报送方法流程图。如图1所示,本发明实施例提供的征信数据报送方法,包括以下步骤:
101、对征信主体信息数据进行数据预处理,生成报送数据文件,数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成。
优选地,上述101步骤进一步包括以下子步骤:
S1、业务数据抽取:从各个业务系统中抽取征信主体信息数据;
S2、基础数据校验:对抽取的征信主体信息数据进行包括完整性和异常情况的初步校验;
S3、基础数据整合:对初步校验后的数据进行合并整理,对缺失或异常数据进行修复;
S4、报送数据处理:根据报送要求对基础数据整合后的数据加工处理生成报送数据;
S5、报送数据预校验:根据知识库校验规则对所述报送数据进行预校验,如有异常则退回S4步骤重新处理,并重复进入本步骤;
S6、报送数据文件生成:根据所述深度处理数据要求生成相应的报送数据文件。
优选地,这里征信主体信息数据包括:信息主体基本信息、借贷交易信息、担保交易信息、授信协议信息、财务报表信息。
值得注意的是,步骤101的过程,除了上述步骤所述的方式之外,在不脱离本发明构思的情况下,还可以通过其他方式实现该过程,本发明实施例对具体的方式不加以限定。
102、对报送数据文件进行深度处理,生成上报密文。
优选地,上述102步骤进一步包括以下子步骤:
S7、报送数据文件入库:把所述报送数据文件加载传送;
S8、报送数据文件入库校验:对加载的数据文件格式、编码进行校验,如有异常则退回S6步骤并循环执行至本步骤;
S9、报文校验和加密:结合所述知识库进行数据逻辑校验,并进行加压加密操作生成上报加密格式的上报密文,如有异常,则退回至S4步骤并循环执行至本步骤。
优选地,这里加压加密操作包括:对txt或csv格式的报送数据文件加压得到对应扩展名为txt.zip或csv.zip的压缩文件;对扩展名为txt.zip或csv.zip的压缩文件加密得到enc格式的上报密文。
值得注意的是,步骤102的过程,除了上述步骤所述的方式之外,在不脱离本发明构思的情况下,还可以通过其他方式实现该过程,本发明实施例对具体的方式不加以限定。
103、上传上报密文,并根据上报反馈结果分析情况生成征信报告。
S10、上传所述上报密文;
S11、定期获取上报反馈结果,并对上报反馈结果进行分析,获取上报反馈结果分析情况,如有异常,则退回至S4步骤并循环执行至本步骤。
值得注意的是,步骤102的过程,除了上述步骤所述的方式之外,在不脱离本发明构思的情况下,还可以通过其他方式实现该过程,本发明实施例对具体的方式不加以限定。
图2是本发明实施例提供的征信数据报送装置结构示意图。如图2所示,本发明实施例提供的征信数据报送装置包括数据预处理模块21、上报密文生成模块22和密文报送模块。
其中,数据预处理模块21,用于:对征信主体信息数据进行数据预处理,生成报送数据文件,数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;上报密文生成模块22,用于:对报送数据文件进行深度处理,生成上报密文;密文报送模块23,用于:上传上报密文,并根据上报反馈结果分析情况生成征信报告。
本发明实施例还提供了一种征信数据报送系统。图3是本发明实施例提供的征信数据报送系统结构示意图。如图3所示,本发明实施例提供的征信数据报送系统包括数据预处理系统31、深度处理系统32和征信上报系统33,数据预处理系统31用于:对征信主体信息数据进行数据预处理,生成报送数据文件,数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;深度处理系统32,用于:对报送数据文件进行深度处理,生成上报密文;征信上报系统33,用于:上传上报密文,并根据上报反馈结果分析情况生成征信报告。
本发明实施例还提供了一种征信数据报送设备。图4是本发明实施例提供的征信数据报送设备结构示意图,本发明实施例提供的征信数据报送设备包括处理器41;存储器42,用于存储有处理器41的可执行指令;其中,处理器41配置为经由可执行指令来执行上述任一方案所述的征信数据报送方法的步骤。
本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现如上述任一方案所述的征信数据报送方法。
下面结合一优选实施例,对本发明实施例提供的征信数据报送方法、装置、系统、设备及计算机可读存储介质进一步说明。
图5是本发明优选实施例提供的征信数据报送方法、装置、系统、设备及计算机可读存储介质的整体技术框架图。图6是图5中数据预处理框图。图7是图5中数据深度处理框图。图8是图5的征信数据报送流程图。图9现有技术中征信数据报送走向示意图。图10是该优选实施例提供的征信数据报送走向示意图。
如图5和图6所示,数据预处理过程主要是进行数据抽取与转换和数据开发,具体技术实现过程如下:
数据报送机构需要根据信用数据报送的范围、内容、时点、格式、形态、校验规则以及错误更正机制等方面的具体要求和征信产品查询的条件从机构内部业务系统中提取相关数据,并将其作为或加工转换成征信系统所需的数据项。主要包含信息主体基本信息、借贷交易信息、担保交易信息、授信协议信息、财务报表信息等。
根据人行二代征信系统对上报业务种类的要求,建立对应实体关系,并根据数据项规范要求,对实体进行细化,细化成数据仓库中具体的表,同时建立规范的表结构,主要包括:贷款人概况信息表,贷款合同信息表,贷款合同金额表,贷款借据表,贷款还款信息表,欠息信息表,贴现信息表,抵押质押信息表,担保信息表等等。
其中核心逻辑通过贷款人从人行申请到的贷款卡编码将贷款人信息与之贷款的合同信息、借据信息、还款信息、欠息信息进行关联并编写HiveSQL加工存储到大数据平台中,通过数据验证和不断调优来提升数据可靠性,从而开发出符合人行征信报送规范的数据。
如图5和图7所示,数据深度处理过程主要进行数据文件处理,具体技术实现过程如下:
为提高信用数据报送质量,在数据上报文件生成后,需先对其进行格式校验。同时,为便于数据上报文件和数据反馈文件的网络传输,降低文件传输过程中占用的网络带宽及文件上传、下载消耗的时间,在数据上报文件传输前,需对其进行加压处理。另外,为了确保数据文件在网络传输过程的中的安全性,还需要对加压后数据文件进行加密处理,加密处理后得到enc格式的数据上报文件。同理,在下载enc格式的反馈文件后,需对其进行解密、解压处理得到反馈文件。
在预处理过程中,文件名的前缀始终不变,如对文件名分别为A.txt和B.csv的两个数据上报文件,加压后得到的文件名分别为A.txt.zip和B.csv.zip,再加密后得到的文件名分别为A.enc和B.enc。
具体地,格式校验过程、加压处理过程和加密处理过程通过以下方式实现:
1、格式校验功能:
信用数据报送业务数据上报文件的格式校验,参见《人民银行征信系统数据采集规范》中对文件格式、文件名、文件头、信息记录、信息段和数据项相关的格式校验规则。
2、加压解压功能及算法:
对txt或csv格式的数据上报文件加压得到对应扩展名为txt.zip或csv.zip的压缩文件,处理主要分为两步:
(1)基于LZ77算法通过“滑动窗口”的方法对数据上报文件进行压缩处理;
(2)对得到的数据文件的结果再使用Huffman编码的方法进行压缩。
相应地,对扩展名为txt.zip或csv.zip的压缩文件进行解压处理也分为两步:
(1)使用Huffman编码的方法对数据上报文件进行解压处理;
(2)对得到的数据文件再基于LZ77算法进行解压处理,从而得到最终的解压文件。
加压解压处理可以基于gzip压缩工具来实现。
3、加密解密功能及算法:
对扩展名为txt.zip或csv.zip的压缩文件加密得到enc格式的加密文件,处理过程主要分为两步:
(1)使用对称密钥对加压后数据上报文件的内容进行加密,得到加密后内容;
(2)将固定长度的10位字符信息“#.+压缩文件加密前扩展名+#”(如“#.txt.zip#”、“#.csv.zip#”)附到第一步得到的内容末尾生成enc格式的加密文件。
相应地,对enc格式反馈文件的解密处理也分为两步:
(1)从enc格式反馈文件中解析出文件流末尾最后10位内容(如“#.txt.zip#”、“#.csv.zip#”)和剩余文件流信息;
(2)使用已向征信中心申请的对称秘钥对第一步中解析出的剩余文件流信息进行解密,得到压缩数据文件,且压缩文件的扩展名与第一步的到的文件流末尾10位内容中格式匹配。(如文件流末尾10位为“#.txt.zip#”,则压缩文件扩展名为“txt.zip”;文件流末尾10位为“#.csv.zip#”,则压缩文件扩展名为“csv.zip”)。
如图8所示,该实施例中,征信数据报送流程如下:
1.预处理系统:
1.1业务数据抽取:从各个业务系统中抽取借贷交易信息,客户信息等数据;
1.2基础数据校验:对抽取过来的借贷交易信息,客户信息等进行初步校验,检查其是否完整,数据值是否异常的等;
1.3基础数据整合:对基础数据进行合并、整理,缺失或者异常数据进行修复;
1.4报送数据处理:参照报送规范,在整合后数据之上加工处理成报送数据;
1.5报送数据预校验:根据知识库中的校验规则对报送数据进行预校验,提前发现存在问题,如有异常则退回至1.4报送数据处理;
1.6报送数据文件生成:按征信数据深度处理系统要求提供相应的报送数据文件;
2.深度处理系统:
2.1报送数据文件入库:把需要上报的数据文件加载到深度处理系统中;
2.2报送数据文件入库校验:对加载的数据文件格式,编码等进行校验,如有异常则退回至1.6报送数据文件生成;
2.3生成报文:按时间序列生成上报格式(enc)的报文;
2.4报文校验:生成报文过程中需要结合知识库进行数据逻辑校验,符合要求的生产相应的报文,如有异常则退回至1.4报送数据处理;
2.5生成上报密文:生成上报文件,如交易信息,客户信息,特殊交易等加密报文;
3.征信上报系统:
3.1征信密文上报:把生成的加密报文加载到征信上报系统;
3.2获取反馈结果:加载到征信上报系统数据定期反馈报送结果;
3.3反馈结果分析:对反馈的结果进行分析,如有异常则退回至1.4报送数据处理;
3.4生成征信报告:生成征信报告,客户可查询。
如图9和图10所示,经过比较现有技术与本发明实施例改进后的征信数据报送方案,得出的结论如下表所示:
Figure BDA0002719473760000141
上述所有可选技术方案,可以采用任意结合形成本发明的可选实施例,在此不再一一赘述。
综上所述,本发明实施例提供的征信数据报送方法、装置、系统、设备及计算机可读存储介质,相比现有技术,具有以下有益效果:
通过统一数据接入格式和报文输出结果格式,统一进行逻辑运算和数据处理,避免了各机构反复调研需求和独立开发,故降低了征信报送机构耗费的成本,提升了报送征信数据的准确性和及时性,提高了报送数据质量,提高了用户体验和客户满意度,大大减少客户投诉等情况的发生。
需要说明的是:上述实施例提供的征信数据报送装置、系统在触发征信数据报送业务时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置、系统的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的征信数据报送装置、系统与征信数据报送方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
本申请实施例中是参照根据本申请实施例中实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请实施例中的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请实施例中范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种征信数据报送方法,其特征在于,所述方法包括:
对征信主体信息数据进行数据预处理,生成报送数据文件,所述数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;
对所述报送数据文件进行深度处理,生成上报密文;
上传所述上报密文,并根据上报反馈结果分析情况生成征信报告。
2.根据权利要求1所述的方法,其特征在于,对征信主体信息数据进行数据预处理,生成报送数据文件,包括:
S1、业务数据抽取:从各个业务系统中抽取征信主体信息数据;
S2、基础数据校验:对抽取的征信主体信息数据进行包括完整性和异常情况的初步校验;
S3、基础数据整合:对初步校验后的数据进行合并整理,对缺失或异常数据进行修复;
S4、报送数据处理:根据报送要求对基础数据整合后的数据加工处理生成报送数据;
S5、报送数据预校验:根据知识库校验规则对所述报送数据进行预校验,如有异常则退回S4步骤重新处理,并重复进入本步骤;
S6、报送数据文件生成:根据所述深度处理数据要求生成相应的报送数据文件。
3.根据权利要求2所述的方法,其特征在于,所述征信主体信息数据包括:信息主体基本信息、借贷交易信息、担保交易信息、授信协议信息、财务报表信息。
4.根据权利要求2或3所述的方法,其特征在于,对所述报送数据文件进行深度处理,生成上报密文,包括:
报送数据文件入库:把所述报送数据文件加载传送;
报送数据文件入库校验:对加载的数据文件格式、编码进行校验,如有异常则退回所述S6步骤并循环执行至本步骤;
报文校验和加密:结合所述知识库进行数据逻辑校验,并进行加压加密操作生成上报加密格式的上报密文,如有异常,则退回至所述S4步骤并循环执行至本步骤。
5.根据权利要求4所述的方法,其特征在于,所述加压加密操作包括:
对txt或csv格式的报送数据文件加压得到对应扩展名为txt.zip或csv.zip的压缩文件;
对扩展名为txt.zip或csv.zip的压缩文件加密得到enc格式的上报密文。
6.根据权利要求4所述的方法,其特征在于,上传所述上报密文,并根据上报反馈结果分析情况生成征信报告,包括:
上传所述上报密文;
定期获取上报反馈结果,并对上报反馈结果进行分析,获取上报反馈结果分析情况,如有异常,则退回至所述S4步骤并循环执行至本步骤。
7.一种征信数据报送装置,其特征在于,包括:
数据预处理模块,用于:对征信主体信息数据进行数据预处理,生成报送数据文件,所述数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;
上报密文生成模块,用于:对所述报送数据文件进行深度处理,生成上报密文;
密文报送模块,用于:上传所述上报密文,并根据上报反馈结果分析情况生成征信报告。
8.一种征信数据报送系统,其特征在于,包括数据预处理系统、深度处理系统和征信上报系统,所述数据预处理系统用于:对征信主体信息数据进行数据预处理,生成报送数据文件,所述数据预处理至少包括业务数据抽取、基础数据校验、基础数据整合、报送数据处理、报送数据预校验、报送数据文件生成;所述深度处理系统,用于:对所述报送数据文件进行深度处理,生成上报密文;所述征信上报系统,用于:上传所述上报密文,并根据上报反馈结果分析情况生成征信报告。
9.一种征信数据报送设备,其特征在于,包括:
处理器;
存储器,用于存储有所述处理器的可执行指令;
其中,所述处理器配置为经由所述可执行指令来执行权利要求1至6中任一项所述的征信数据报送方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至6任一所述的征信数据报送方法。
CN202011083304.0A 2020-10-12 2020-10-12 征信数据报送方法、装置、系统、设备及计算机存储介质 Active CN112468532B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011083304.0A CN112468532B (zh) 2020-10-12 2020-10-12 征信数据报送方法、装置、系统、设备及计算机存储介质
CA3134107A CA3134107A1 (en) 2020-10-12 2021-10-12 A credit investigation data reporting method, apparutus, system, device and computer storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011083304.0A CN112468532B (zh) 2020-10-12 2020-10-12 征信数据报送方法、装置、系统、设备及计算机存储介质

Publications (2)

Publication Number Publication Date
CN112468532A true CN112468532A (zh) 2021-03-09
CN112468532B CN112468532B (zh) 2023-06-23

Family

ID=74833042

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011083304.0A Active CN112468532B (zh) 2020-10-12 2020-10-12 征信数据报送方法、装置、系统、设备及计算机存储介质

Country Status (2)

Country Link
CN (1) CN112468532B (zh)
CA (1) CA3134107A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113298410A (zh) * 2021-06-10 2021-08-24 路献峰 一种通过系统进行风险控制的方法及其系统
CN114022031A (zh) * 2021-11-23 2022-02-08 中国工商银行股份有限公司 数据处理方法、装置、电子设备、介质和计算机程序产品
CN114328413A (zh) * 2021-12-30 2022-04-12 中国民航信息网络股份有限公司 数据处理方法及装置、存储介质及电子设备
CN114666321A (zh) * 2022-03-21 2022-06-24 中国建设银行股份有限公司 一种监管报送数据处理方法、装置、设备、介质及产品
CN115689731A (zh) * 2023-01-04 2023-02-03 北京信加科技有限公司 基于Flink大数据技术的征信报数方法、装置、设备及介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110503544A (zh) * 2019-07-05 2019-11-26 招联消费金融有限公司 征信数据报送方法、装置、系统、计算机设备和存储介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110503544A (zh) * 2019-07-05 2019-11-26 招联消费金融有限公司 征信数据报送方法、装置、系统、计算机设备和存储介质

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113298410A (zh) * 2021-06-10 2021-08-24 路献峰 一种通过系统进行风险控制的方法及其系统
CN113298410B (zh) * 2021-06-10 2024-01-12 路献峰 一种通过系统进行风险控制的方法及其系统
CN114022031A (zh) * 2021-11-23 2022-02-08 中国工商银行股份有限公司 数据处理方法、装置、电子设备、介质和计算机程序产品
CN114328413A (zh) * 2021-12-30 2022-04-12 中国民航信息网络股份有限公司 数据处理方法及装置、存储介质及电子设备
CN114666321A (zh) * 2022-03-21 2022-06-24 中国建设银行股份有限公司 一种监管报送数据处理方法、装置、设备、介质及产品
CN114666321B (zh) * 2022-03-21 2024-04-26 中国建设银行股份有限公司 一种监管报送数据处理方法、装置、设备、介质及产品
CN115689731A (zh) * 2023-01-04 2023-02-03 北京信加科技有限公司 基于Flink大数据技术的征信报数方法、装置、设备及介质

Also Published As

Publication number Publication date
CA3134107A1 (en) 2022-04-12
CN112468532B (zh) 2023-06-23

Similar Documents

Publication Publication Date Title
CN112468532B (zh) 征信数据报送方法、装置、系统、设备及计算机存储介质
CN110602114A (zh) 基于区块链的身份验证方法及装置、存储介质、电子设备
CN113657471A (zh) 多分类梯度提升树的构建方法、装置及电子设备
CN113408668A (zh) 基于联邦学习系统的决策树构建方法、装置及电子设备
CN112767113A (zh) 基于区块链的对账数据处理方法、装置、系统
CN111708673A (zh) 一种日志数据压缩方法、装置、设备和存储介质
CN112437060A (zh) 一种数据传输方法、装置、计算机设备及存储介质
CN110781134A (zh) 数据处理方法及装置、计算机存储介质、电子设备
CN112799943B (zh) 业务系统自动化测试方法及装置
CN111711512A (zh) 报文发送方法及装置
CN112035401A (zh) 模型数据处理方法、装置、电子设备及可读介质
CN111639916A (zh) 一种基于区块链技术及深度学习的在线审计方法、系统和可读存储介质
CN115829307A (zh) 智能卡自动化生产方法、装置及可读存储介质
CN115292731A (zh) 文本批阅信息的加密存储方法及相关设备
CN113742302A (zh) 服务请求的处理方法及装置
CN111984631A (zh) 生产数据迁移方法、装置、计算机设备及存储介质
CN107483210B (zh) 一种数据验证方法及系统
CN111046093A (zh) 一种电力交易平台服务端、客户端及出清案例的交换方法
US11507445B2 (en) Systems and methods for data quality management
CN111882294B (zh) 一种流程审批的方法和装置
CN117076546B (zh) 数据处理方法、终端设备及计算机可读存储介质
CN112416901A (zh) 数据库迁移的方法及装置
CN116956325A (zh) 自动化验证的机构户对账方法、装置、设备及存储介质
CN115033620A (zh) 自动化统计争议产能报表的方法、装置、系统及存储介质
CN114742017A (zh) 一种产品防伪码的生成方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant