CN113568973A - 基于区块链和联邦学习的金融征信数据共享方法及装置 - Google Patents

基于区块链和联邦学习的金融征信数据共享方法及装置 Download PDF

Info

Publication number
CN113568973A
CN113568973A CN202110822504.1A CN202110822504A CN113568973A CN 113568973 A CN113568973 A CN 113568973A CN 202110822504 A CN202110822504 A CN 202110822504A CN 113568973 A CN113568973 A CN 113568973A
Authority
CN
China
Prior art keywords
data
credit
federal learning
training
learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110822504.1A
Other languages
English (en)
Other versions
CN113568973B (zh
Inventor
谭林
王云丽
杨征
尹海波
杜雅子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Tianhe Guoyun Technology Co Ltd
Original Assignee
Hunan Tianhe Guoyun Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan Tianhe Guoyun Technology Co Ltd filed Critical Hunan Tianhe Guoyun Technology Co Ltd
Priority to CN202110822504.1A priority Critical patent/CN113568973B/zh
Publication of CN113568973A publication Critical patent/CN113568973A/zh
Application granted granted Critical
Publication of CN113568973B publication Critical patent/CN113568973B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G06F16/2365—Ensuring data consistency and integrity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/602—Providing cryptographic facilities or services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/03—Credit; Loans; Processing thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Finance (AREA)
  • General Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Strategic Management (AREA)
  • Technology Law (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Computing Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • General Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Health & Medical Sciences (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)

Abstract

本发明提供一种基于区块链和联邦学习的金融征信数据共享方法及装置，该方法包括对信用数据进行采集和特征分析，并进行联邦学习，以训练出评价模型；选取多个时刻进行数据截断，通过评价模型对截断的数据进行迭代训练和比对，核验信用数据增量，生成增量数据集；利用增量数据集融合在线学习和联邦学习，更新信用特征，实现监管背景下的用户信用画像动态更新。与相关技术相比，本发明提供一种基于区块链和联邦学习的金融征信数据共享方法及装置，其实现金融征信数据的确权存证和交易存证，达到持续动态的个人和企业信用分析评价与更新。

Description

基于区块链和联邦学习的金融征信数据共享方法及装置
技术领域
本发明涉及区块链技术领域，尤其涉及一种基于区块链和联邦学习的金融征信数据共享方法及装置。
背景技术
当前，随着中国市场经济的进一步发展，我国已处于互联网消费金融时代，新的社会消费观念推动企业和个人的金融征信业务不断扩大，信用将成为一类重要的资产。面对多种需要授信的企业实体或者个人类型，如何全面的刻画和评价其信用特征，以及如何做到合理的风险识别与评价成为金融机构的一个核心研究问题。在这一背景下，互联网大数据成为金融授信的重要补充，以中国人民银行为代表的传统征信机构，以百度、阿里、腾讯为代表的互联网公司和经授权的第三方征信机构之间的数据共享与流通、数据保护与使用成为金融征信过程中的核心问题。
现有征信机构获得的信用数据局限于自有的交易数据，信用记录仅反映了个人和企业的某些特定方面的状况。较为综合的企业和个人信用数据往往分散在多个机构当中，例如银行、法院、电信公司、即时通讯工具运营商、互联网金融公司等，机构之间征信数据不共享，形成“信息孤岛”局面，难以构建全方位的个人信用画像。此外，现有的征信数据收集方式会导致某些个人征信记录空白，这对建设诚信社会带来了阻力。
信用数据作为个人和企业特有的数字化资产，不同于其他行业数据，具有私密性、指向性的特点。信用数据与具体真实身份绑定，直接关系到企业和个人利益，因而安全要求更为严格，传统方式进行的共享流通成本较高，且存在数据修改和信息泄露的风险。第三方征信机构的参与，增加了用户征信数据的泄露和恶意利用风险，且对于数据的泄露无法监控和溯源。
现有的征信信息修改机制不够严谨，行为人提出征信异议后，经过商业银行审核便能修改记录，存在征信数据篡改的风险。同时，征信机构核实征信记录的真实性能力有限，导致信用数据和信息存在错漏的潜在状况。由于我国尚未建成覆盖全社会的个人征信体系，且缺乏数据保护机制，第三方征信机构一般不愿意共享数据，征信数据共享成本高、征信信息提取困难，单一信用数据的质量存在缺陷可能，数据之间的交易无法记录和保障。
采用单纯区块链进行信用数据存证和交易的方式，面临计算节点劫持、女巫攻击、重放攻击等潜在风险。同时，信用数据具有数据资产的特性，在金融交易中需要政府或持牌机构进行强监管。区块链的分布式记账优势是保证信用数据无法篡改存证的优势，但去中心化的特点难以满足现有金融资产交易强监管的要求，在金融征信过程中，个人和企业的信用等级是一个动态变化的过程，需要持续的数据共享和交互。在这个持续交互的过程中，往往只需要对用户新的增量信息进行评价，汇总结果。分布式的计算需要引入金融征信当中，但分布式计算存在数据泄露的风险。
因此，有必要提供一种新型的基于区块链和联邦学习的金融征信数据共享方法及装置，以克服上述缺陷。
发明内容
本发明的目的在于提供一种新型的基于区块链和联邦学习的金融征信数据共享方法及装置，其实现金融征信数据的确权存证和交易存证，达到持续动态的个人和企业信用分析评价与更新。
为了达到上述目的，本发明提供一种基于区块链和联邦学习的金融征信数据共享方法，包括：
对信用数据进行采集和特征分析，并进行联邦学习，以训练出评价模型；
选取多个时刻进行数据截断，通过评价模型对截断的数据进行迭代训练和比对，核验信用数据增量，生成增量数据集；
利用增量数据集融合在线学习和联邦学习，更新信用特征，实现监管背景下的用户信用画像动态更新。
本发明还提供一种基于区块链和联邦学习的金融征信数据共享装置，该装置包括征信服务用户终端、征信数据采集模块和中心监管服务端；
征信服务用户终端主要面向用户提供征信服务，建立自主的征信评价模型，以及与征信数据的采集层开展数据的流通和共享；
征信数据采集模块主要将信用数字资产进行数据流化，提供在线学习机制，融合联邦学习计算方法，实现持续的用户信用特征更新；
中心监管服务端包括基础数据服务器、信用数字资产链和交易存证链，其中基础数据服务器结合数字资产链，对信用数据采集层的数据进行内容对比和资产确权，发放用于激励的通证；以及提供智能合约的访问和更新，能够对持续更新的信用特征核验、存证并上链记录交易过程。
本发明的一方面还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述基于区块链和联邦学习的金融征信数据共享方法的步骤。
本发明的另一方面还提供一种计算机终端，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述基于区块链和联邦学习的金融征信数据共享方法的步骤。
与相关技术相比较，本发明将信用数据作为需要被强监管的数字资产，面向信用数据交互共享场景，利用区块链技术，以智能合约和通证为主，构建用于信用数字资产监管的半中心化机制，实现信用数据的共享存证与交易监管双重目标；针对用户征信动态和持续评价的要求，依据互联网大数据的采集特点，提出采用在线学习和联邦学习结合的方法，对信用数据进行持续的增量分析提取，以动态刻画用户的信用行为特征，降低征信后的借贷风险，持续监测、分析和评价用户信用程度。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图，其中：
图1为本发明的基于区块链和联邦学习的金融征信数据共享方法的流程图；
图2为本发明的基于区块链和联邦学习的金融征信数据共享方法的时序图；
图3为本发明的基于区块链和联邦学习的金融征信数据共享装置的架构图。
具体实施方式
下面将对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
请参阅图1和图2，本发明提供一种基于区块链和联邦学习的金融征信数据共享方法，包括信用数据的特征提取、特征筛选、真实性验证、通证发放、信用数字资产确权、联邦学习、在线学习机制、用户特征更新与交易过程存证等主要环节。
下面将对图1中内容进行具体实施步骤的详细描述，如下：
对信用数据进行采集和特征分析，并进行联邦学习，以训练出评价模型。
步骤1：对信用数据进行采集和特征分析，持牌的征信服务中心对数据进行筛选和特征分析。
信用数据通过数据采集端进行汇总和采集，并进行初步的特征统计，加盖时间戳和采集机构的哈希ID。持牌的征信服务中心做(增值)服务时，将对接入的信用数据进行数据和特征筛选，这一过程将提出异常数据，并对数据的特征根据其建立的分析模型进行特征降维，存储对应的特征信息。
步骤2：持牌征信机构和信用数据采集机构的数字资产存证。
持牌征信(增值)机构进行数据筛选和特征筛选的同时由智能合约进行对比核验，智能合约同步向征信监管中心上传数据特征描述信息，征信监管中心通过数据真实性验证，根据数据量和特征状况分发Token。此外，持牌机构的哈希ID、各数据提供机构的哈希ID、数据特征和Token将被打包存证到信用数据资产链上。
步骤3：进行联邦学习，初始化交易存证链。
在征信业务体系中，(增值)服务商建立用于评价个人或企业信用特征的评价模型。对经过步骤2存证的信用数据开展联邦学习，以训练特征模型。首先，模型将分发于信用数据采集层上，参与训练的各个设备终端。其次，采用加密方法(如：同态加密)，对经由训练的特征参数进行加密后进行权重、梯度和损失的调整，将调整后的参数返回到终端设备。继续训练与交互，直至模型收敛或训练结束。训练结束后获得的联邦模型即为评价用户的初始模型，将该模型连同参与训练信用数据资产Token一同上链存储，以对交易存证。由此联邦模型分析和预测的用户信用特征与使用的Token一一对应，该区块采用智能合约对原有交易链上或征信监督机构的存底进行内容对比，对比后的交易信息上链存证。
选取多个时刻进行数据截断，通过评价模型对截断的数据进行迭代训练和比对，核验信用数据增量，生成增量数据集。
步骤4：T时刻数据截断，核验信用数据增量，更新信用数字资产确权信息。
经过初始化的数字资产链确立了数据采集层内各个机构数据的权属信息；初始化后的交易链则形成了(增值)服务公司针对用户最初的信用评价，所有初始化的链内信息均固定在某一时刻的信息截断处，即：在时刻T前的数据形成机构的资产权证，以及针对个人或企业的征信内容。经过一段时间后，采用T时刻截断方法，固定信用采集层内的数据，提取新增数据特征，同前一时刻特征进行对比，当新增数据特征和前一时刻特征存在差异时，(增值)服务中心才对其进行增量数据集的提取描述的生成，经过智能合约的验证，核实数据的真实性，发放新的Token，对新增的信用数字资产上链存证。
步骤5：增量数据的联邦学习，持续的用户特征信息更新和上链。
在步骤4验证后，将增量的数据特征进行上一次获得的联邦模型的参数初始化，在线学习为算法提供了预训练。持牌的征信(增值)服务中心将初始化参数共享到数据层的设备中，信用数据采集层开始实施联邦学习，对经步骤3获得的联邦模型进行训练和交互，直至达到参数收敛。该步骤获得了更新的联邦模型，经监管中心的特征比对后，进行交易过程的上链存证，实现持续的用户特征信息更新和上链。
步骤6：对某一时刻的数据进行截断，对采集层的数据进行增量核验，并生成增量数据集。
采用在线学习机制，将数据采集端的信用数据视为流数据。在某一时刻T后，进行数据截断，将截断获得的数据集与原有T时刻前的数据进行特征比较，并利用资产链进行资产的一致性判断。当判断增量数据存在时，打包为用于联邦学习训练的增量数据集特征。数据的增量特征计算如下：
x∈R{f1,f2,……,fn}
其中，x是每个截断时刻T内的变量数据，R为特征空间集。
那么，数据增量为：
xT1∈RT1,xT0∈RT0,且存在xT1≠xT0，
Figure BDA0003172288040000064
RT0≠RT1
其中，T0,T1,……,Tn为顺序的时间序列，xT0,xT1,……,xTn为按照时间顺序产生的截断时刻范围内的数据。增量验证即通过智能合约进行数据特征的验证，包括：特征分布的相似度对比、数据范围分布对比和数据量对比。在增量数据集提取的过程中一般保留特征具有一定重合的数据为特征数据，以提高数据的泛化程度。同时，按照增量数据在初始数据中的比例，进行特征权重的求解，计算的梯度内加入权重：
Figure BDA0003172288040000061
Figure BDA0003172288040000062
σT0为t0训练时的学习率，wT1为修正后的权重，
Figure BDA0003172288040000063
为T0时刻的梯度，w为T0时刻的权重。
利用增量数据集融合在线学习和联邦学习，更新信用特征，实现监管背景下的用户信用画像动态更新。
步骤7：利用信用的增量数据集，融合在线学习和联邦学习，更新信用特征。
增量数据集的数据特征经过智能合约上传到监管中心，监管中心进行真实性验证后，分发Token，并且在资产链中进行存证和更新。融合在线学习和联邦学习算法，对由步骤6获得的增量数据集进行联邦学习，训练模型采用前一T时刻所获得的联邦模型，训练的过程以同态加密传输模型的参数、梯度和损失，最终实现模型的率定和特征参数的更新。
在线学习的训练过程一般采用Forward-Backward Splitting(FOBOS)和Follow-the-regularized-Leader(FTRL)方法进行训练。其中，FTRL综合考虑了FOBOS和RDA的优点，兼具FOBOS的精确性和RDA优良的稀疏性，是本发明采用的与训练方法。
其中，模型权重的更新方法为：
Figure BDA0003172288040000071
其中，σs为学习率，w引用wT，wT是对应于增量的权重修正值。
当w∈Rd时，设连续的梯度向量g1:t∈Rd，权重的更新可重写为：
Figure BDA0003172288040000072
因此，在t轮时更新
Figure BDA0003172288040000073
那么wt+1则可写为：
Figure BDA0003172288040000074
采用在线学习通常将增量数据集进行切片后，逐次训练求解最佳权重。获得的权重将作为联邦学习的初始化参数引入模型。
步骤8：金融征信数据共享框架的持续学习，实现监管背景下的用户信用画像动态更新。
数据共享框架中包含两条链：用于资产确权的信用数字资产链、用于描述信用特征的交易存证链，两条链相互交替的进行信息区块的更新，并由受监管的智能合约进行控制。整个算法框架在初始化训练完成后，将持续进入到增量的在线学习环节，在步骤7之后，迭代循环执行步骤5到步骤7，以实现用户信用画像的动态更新。
与相关技术相比，首先将信用数据定义为数字资产，建立针对这种数字资产共享和交易的半中心化监督机制，以智能合约和Token为主，结合区块链实现存证与溯源。融合在线学习和联邦学习方法，实现信用数据的增量学习，持续和动态的更新征信用户的征信评价。
本方案的有益效果包括：
(1)本发明面向征信过程中信用数据的共享和流转问题，设计了一系列完整的交互步骤，在信用数据资产确权、交易过程存证两个方面采用在线学习和联邦学习，持续动态的更新联邦模型和用户信用特征，满足金融征信的动态要求。
(2)采用半中心化机制用于征信过程，该过程通过智能合约和分发通证Token的模式，提供了征信监管中心针对各个信用数据采集机构，数据确权和存证的新方法。利用区块链进行有条件的存证，而将存证的条件判断交予征信监管中心的智能合约实现，有效避免了数据权属混乱、多方数据不一致、上链存证无监管的问题；同时，中心提供了Token的分发，这为数字资产的定价提供了基础证明；该半中心化的模式，使得分布式记账和资产属性被同步确立，提升了信用数据的共享效率。
(3)提出了面向互联网大数据征信的数据交互方法，融合在线学习和联邦学习机制，实现流数据的增量学习，并持续动态的更新了用于信用评价的联邦模型，实现了用户信用的动态评价。在线学习的优点是小批量、持续训练、增量学习。联邦学习的特点是利用终端用户实现“数据不出域”、“数据可用不可见”的模型训练。本发明专利结合两者各自的特点，设计实现了联邦模型的动态持续更新，这种方法可以有效避免信用数据来源单一、信用评价更新不及时、信用描述样本不全面的缺陷，达到信用动态评价的要求。
请参阅图3，本发明还提供一种基于区块链和联邦学习的金融征信数据共享装置，该装置包括征信服务用户终端、征信数据采集模块和中心监管服务端；用于实现金融征信数据的确权存证和交易存证，达到持续动态的个人和企业信用分析评价与更新。
征信服务用户终端，主要功能是面向用户提供征信服务，建立自主的征信评价模型，与征信数据的采集层开展数据的流通和共享，同时，受监管层的监督，对自身的数字资产进行确权存证。
征信数据采集模块，主要由多个涉及用户信用数据的机构组成，在数据共享和流通阶段，首先，进行数字资产的确权，受监管层的监管，通过监管层的核验后获得资产通证。其次，用于资源调度，具有多设备终端接入的特点。采用互联网大数据的分析思路，将信用数字资产进行数据流化，提供在线学习机制，融合联邦学习计算方法，实现持续的用户信用特征更新。
中心监管服务端，包括基础数据服务器、信用数字资产链和交易存证链，主要由征信监管中心负责，包含基础数据服务器的构建，其中基础数据服务器结合数字资产链，对信用数据采集层的数据进行内容对比和资产确权，发放用于激励的通证(Token)；此外，还提供智能合约的访问和更新，能够对持续更新的信用特征核验、存证并上链记录交易过程。该中心监管服务端监管了两条区块链：信用数字资产链、交易存证链，信用数字资产链上存证了参与信用体系搭建的各方所辖信用数据的资产状况，提供了数据资产的归属确权。
本发明另一方面还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述基于区块链和联邦学习的金融征信数据共享方法的步骤。
作为本发明另一方面的延伸还提供一种计算机终端，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述基于区块链和联邦学习的金融征信数据共享方法的步骤。
所述处理器执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能。示例性的，所述计算机程序可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器中，并由所述处理器执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序在终端设备中的执行过程。
所述计算机终端可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。可包括但不仅限于，处理器、存储器。可以包括更多或更少的部件，或者组合某些部件，或者不同的部件，例如还可以包括输入输出设备、网络接入设备、总线等。
所述处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器可以是内部存储单元，例如硬盘或内存。所述存储器也可以是外部存储设备，例如插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(SecureDigital,SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器还可以既包括内部存储单元也包括外部存储设备。所述存储器用于存储所述计算机程序以及其他程序和数据。所述存储器还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中，应该理解到，所揭露的装置/终端设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/终端设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其它相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于区块链和联邦学习的金融征信数据共享方法，其特征在于，包括:
对信用数据进行采集和特征分析，并进行联邦学习，以训练出评价模型；
选取多个时刻进行数据截断，通过评价模型对截断的数据进行迭代训练和比对，核验信用数据增量，生成增量数据集；
利用增量数据集融合在线学习和联邦学习，更新信用特征，实现监管背景下的用户信用画像动态更新。
2.根据权利要求1所述的基于区块链和联邦学习的金融征信数据共享方法，其特征在于，所述进行联邦学习，以训练出评价模型包括：
建立用于评价个人或企业信用特征的初始模型，初始模型将分发于信用数据采集层上，参与训练的各个设备终端；
采用加密方法对经由训练的特征参数进行加密后进行权重、梯度和损失的调整，将调整后的参数返回到初始模型，继续训练与交互，直至初始模型收敛或训练结束；
训练结束后获得评价模型，将该模型连同参与训练信用数据资产Token一同上链存储，以对交易存证。
3.根据权利要求2所述的基于区块链和联邦学习的金融征信数据共享方法，其特征在于，所述选取多个时刻进行数据截断，通过评价模型对截断的数据进行迭代训练和比对，核验信用数据增量，并生成增量数据集包括：
在T时刻进行数据截断，核验信用数据增量，更新信用数字资产确权信息；
对增量数据进行联邦学习，将增量数据特征作为上一次训练得到的评价模型的初始参数进行训练，直至参数收敛获得更新的评价模型，并进行特征比对后实现持续将用户特征信息更新和上链；
对T时刻后的某一时刻的数据进行截断，对数据进行增量核验，并生成增量数据集。
4.根据权利要求3所述的基于区块链和联邦学习的金融征信数据共享方法，其特征在于，所述在T时刻进行数据截断，核验信用数据增量，更新信用数字资产确权信息包括：
采用T时刻截断方法，固定信用采集数据，提取新增数据特征，同前一时刻特征进行对比，当新增数据特征和前一时刻特征存在差异时，对其进行增量数据集的提取描述的生成，经过智能合约的验证，核实数据的真实性，发放新的Token，对新增的信用数字资产上链存证。
5.根据权利要求4所述的基于区块链和联邦学习的金融征信数据共享方法，其特征在于，所述对T时刻后的某一时刻的数据进行截断，对数据进行增量核验，并生成增量数据集包括：
采用在线学习机制，将数据采集的信用数据视为流数据，在某一时刻T后，进行数据截断；
将截断获得的数据与原有的T时刻前的数据进行特征比较，并利用资产链进行资产的一致性判断；
当判断增量数据存在时，进行数据增量特征计算和验证，并打包为用于联邦学习训练的增量数据集特征。
6.根据权利要求5所述的基于区块链和联邦学习的金融征信数据共享方法，其特征在于，所述的数据增量特征计算如下：
x∈R{f1,f2,……fn}
其中，x是每个截断时刻T内的变量数据，R为特征空间集；
则数据增量为：
xT1∈RT1,xT0∈RT0,且存在xT1≠RT1，
Figure FDA0003172288030000021
RT0≠RT1；
其中，T0，T1，……，Tn为顺序的时间序列，xT0，xT1，……，xTn为按照时间顺序产生的截断时刻范围的数据；
按照增量数据在初始数据中的比例，进行特征权重的求解，计算的梯度内加入权重：
Figure FDA0003172288030000022
σT0为t0训练时的学习率，wT1为修正后的权重，
Figure FDA0003172288030000031
为T0时刻的梯度，w为T0时刻的权重。
7.根据权利要求6所述的基于区块链和联邦学习的金融征信数据共享方法，其特征在于，所述融合在线学习和联邦学习算法包括
对获得的增量数据集进行联邦学习，训练模型采用前一T时刻所获得的评价模型，训练的过程以同态加密传输模型的参数、梯度和损失，最终实现模型的率定和特征参数的更新；
在线学习的训练过程采用Forward-BackwardSplitting和Follow-the-regularized-Leader的方法进行训练；
其中，模型权重的更新方法为：
Figure FDA0003172288030000032
其中，σs为学习率，w引用wT，wT是对应于增量的权重修正值；
当w∈Rd时，设连续的梯度向量g1:t∈Rd，权重的更新可重写为：
Figure FDA0003172288030000033
则在t轮时更新：
Figure FDA0003172288030000034
那么wt+1则可写为：
Figure FDA0003172288030000035
获得的权重将作为联邦学习的初始化参数引入模型。
8.一种应用如权利要求1-7任一所述的基于区块链和联邦学习的金融征信数据共享方法的装置，其特征在于，该装置包括征信服务用户终端、征信数据采集模块和中心监管服务端；
征信服务用户终端主要面向用户提供征信服务，建立自主的征信评价模型，以及与征信数据的采集层开展数据的流通和共享；
征信数据采集模块主要将信用数字资产进行数据流化，提供在线学习机制，融合联邦学习计算方法，实现持续的用户信用特征更新；
中心监管服务端包括基础数据服务器、信用数字资产链和交易存证链，其中基础数据服务器结合数字资产链，对信用数据采集层的数据进行内容对比和资产确权，发放用于激励的通证；以及提供智能合约的访问和更新，能够对持续更新的信用特征核验、存证并上链记录交易过程。
9.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述基于区块链和联邦学习的金融征信数据共享方法的步骤。
10.一种计算机终端，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述基于区块链和联邦学习的金融征信数据共享方法的步骤。
CN202110822504.1A 2021-07-21 2021-07-21 基于区块链和联邦学习的金融征信数据共享方法及装置 Active CN113568973B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110822504.1A CN113568973B (zh) 2021-07-21 2021-07-21 基于区块链和联邦学习的金融征信数据共享方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110822504.1A CN113568973B (zh) 2021-07-21 2021-07-21 基于区块链和联邦学习的金融征信数据共享方法及装置

Publications (2)

Publication Number Publication Date
CN113568973A true CN113568973A (zh) 2021-10-29
CN113568973B CN113568973B (zh) 2023-11-24

Family

ID=78165911

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110822504.1A Active CN113568973B (zh) 2021-07-21 2021-07-21 基于区块链和联邦学习的金融征信数据共享方法及装置

Country Status (1)

Country Link
CN (1) CN113568973B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113888322A (zh) * 2021-11-08 2022-01-04 国网电子商务有限公司 一种信用评价方法、系统、存储介质及电子设备
CN114389824A (zh) * 2022-03-24 2022-04-22 湖南天河国云科技有限公司 基于区块链的可信计算信任链的验证更新方法及装置
CN117521151A (zh) * 2024-01-05 2024-02-06 齐鲁工业大学(山东省科学院) 一种基于区块链的去中心化联邦学习数据共享方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111340277A (zh) * 2020-02-19 2020-06-26 东南大学 雾无线接入网中基于联邦学习的流行度预测模型及预测方法
US20200280447A1 (en) * 2017-04-27 2020-09-03 Factom, Inc. Blockchain Recordation of Device Usage
CN111666460A (zh) * 2020-05-27 2020-09-15 中国平安财产保险股份有限公司 基于隐私保护的用户画像生成方法、装置及存储介质
CN111698322A (zh) * 2020-06-11 2020-09-22 福州数据技术研究院有限公司 一种基于区块链和联邦学习的医疗数据安全共享方法
CN112181666A (zh) * 2020-10-26 2021-01-05 华侨大学 一种基于边缘智能的设备评估和联邦学习重要性聚合方法、系统、设备和可读存储介质
US20210042628A1 (en) * 2019-08-09 2021-02-11 International Business Machines Corporation Building a federated learning framework
CN112714050A (zh) * 2020-12-22 2021-04-27 齐鲁工业大学 一种基于区块链和联邦学习的数据共享与隐私保护方法
US20210174020A1 (en) * 2018-05-07 2021-06-10 Google Llc Recipient based text prediction for electronic messaging

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200280447A1 (en) * 2017-04-27 2020-09-03 Factom, Inc. Blockchain Recordation of Device Usage
US20210174020A1 (en) * 2018-05-07 2021-06-10 Google Llc Recipient based text prediction for electronic messaging
US20210042628A1 (en) * 2019-08-09 2021-02-11 International Business Machines Corporation Building a federated learning framework
CN111340277A (zh) * 2020-02-19 2020-06-26 东南大学 雾无线接入网中基于联邦学习的流行度预测模型及预测方法
CN111666460A (zh) * 2020-05-27 2020-09-15 中国平安财产保险股份有限公司 基于隐私保护的用户画像生成方法、装置及存储介质
CN111698322A (zh) * 2020-06-11 2020-09-22 福州数据技术研究院有限公司 一种基于区块链和联邦学习的医疗数据安全共享方法
CN112181666A (zh) * 2020-10-26 2021-01-05 华侨大学 一种基于边缘智能的设备评估和联邦学习重要性聚合方法、系统、设备和可读存储介质
CN112714050A (zh) * 2020-12-22 2021-04-27 齐鲁工业大学 一种基于区块链和联邦学习的数据共享与隐私保护方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
XIDI QU 等: "Proof of Federated Learning: A Novel Energy-Recycling Consensus Algorithm", 《IEEE TRANSACTIONS ON PARALLEL AND DISTRIBUTED SYSTEMS》, vol. 32, no. 8, pages 2074 - 2085, XP011842501, DOI: 10.1109/TPDS.2021.3056773 *
YANG ZHAO 等: "Privacy-Preserving Blockchain-Based Federated Learning for IoT Devices", 《IEEE INTERNET OF THINGS JOURNAL》, vol. 8, no. 3, pages 1817 - 1829, XP011832858, DOI: 10.1109/JIOT.2020.3017377 *
冯成: "多源异构数据融合关键技术研究", 《中国博士学位论文全文数据库 信息科技辑》, no. 02, pages 138 - 4 *
郭正凯: "一种新型混合推荐模型的设计与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》, no. 08, pages 138 - 1325 *
阳文斯: "基于联邦学习的信用卡欺诈检测系统研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》, no. 07, pages 140 - 70 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113888322A (zh) * 2021-11-08 2022-01-04 国网电子商务有限公司 一种信用评价方法、系统、存储介质及电子设备
CN113888322B (zh) * 2021-11-08 2022-04-08 国网电子商务有限公司 一种信用评价方法、系统、存储介质及电子设备
CN114389824A (zh) * 2022-03-24 2022-04-22 湖南天河国云科技有限公司 基于区块链的可信计算信任链的验证更新方法及装置
CN114389824B (zh) * 2022-03-24 2022-07-12 湖南天河国云科技有限公司 基于区块链的可信计算信任链的验证更新方法及装置
CN117521151A (zh) * 2024-01-05 2024-02-06 齐鲁工业大学(山东省科学院) 一种基于区块链的去中心化联邦学习数据共享方法
CN117521151B (zh) * 2024-01-05 2024-04-09 齐鲁工业大学(山东省科学院) 一种基于区块链的去中心化联邦学习数据共享方法

Also Published As

Publication number Publication date
CN113568973B (zh) 2023-11-24

Similar Documents

Publication Publication Date Title
Ma et al. The privacy protection mechanism of Hyperledger Fabric and its application in supply chain finance
AU2022279378B2 (en) Secure permissioning of access to user accounts, including secure distribution of aggregated user account data
Ocheja et al. Managing lifelong learning records through blockchain
CN111401558B (zh) 数据处理模型训练方法、数据处理方法、装置、电子设备
TWI764037B (zh) 跨區塊鏈的交互方法及系統、電腦設備及儲存媒體
US11397744B2 (en) Systems and methods for data storage and processing
US11620403B2 (en) Systems and methods for secure data aggregation and computation
Xu et al. The blockchain as a software connector
CN113568973B (zh) 基于区块链和联邦学习的金融征信数据共享方法及装置
CN111681091B (zh) 基于时间域信息的金融风险预测方法、装置及存储介质
CN111738844A (zh) 基于区块链的资源分配系统、方法以及装置
CN112749827A (zh) 金融信息处理方法、装置、电子设备及存储介质
Luo et al. Overview of intelligent online banking system based on HERCULES architecture
CN113779617A (zh) 基于状态通道的联邦学习任务可信监管与调度方法及装置
CN112287401A (zh) 一种基于区块链的智慧医疗共享平台
Zheng Applications research of blockchain technology in accounting system
CN115080858A (zh) 多方协作场景下的数据推荐方法及装置
CN114971841A (zh) 风险管理方法、风险模型训练方法、装置、设备和介质
CN112308238A (zh) 解析模型的训练方法、装置、电子设备及存储介质
CN111222173A (zh) 一种基于区块链技术的分布式交易记录方法
Gai et al. Financial automation audit method based on blockchain technology
CN114626934A (zh) 基于区块链的多层级风控系统及管控方法
Yuan Legal model construction approach of big data transaction management in the digital information perspective
KR20210090519A (ko) 사물인터넷에서 서비스 수준 협약 기반 공유경제 서비스 제공시스템 및 제공방법
Badhani et al. Blockchain-based Financial Enterprises Credit Value Information System Using Federated AI

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant