CN109583782A - 支持多数据源的汽车金融风控模型 - Google Patents

支持多数据源的汽车金融风控模型 Download PDF

Info

Publication number
CN109583782A
CN109583782A CN201811493302.1A CN201811493302A CN109583782A CN 109583782 A CN109583782 A CN 109583782A CN 201811493302 A CN201811493302 A CN 201811493302A CN 109583782 A CN109583782 A CN 109583782A
Authority
CN
China
Prior art keywords
data
weight
model
dimension
company
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811493302.1A
Other languages
English (en)
Other versions
CN109583782B (zh
Inventor
施铭铮
刘占辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen Pencil Head Information Technology Co Ltd
Original Assignee
Xiamen Pencil Head Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen Pencil Head Information Technology Co Ltd filed Critical Xiamen Pencil Head Information Technology Co Ltd
Priority to CN201811493302.1A priority Critical patent/CN109583782B/zh
Publication of CN109583782A publication Critical patent/CN109583782A/zh
Application granted granted Critical
Publication of CN109583782B publication Critical patent/CN109583782B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0635Risk analysis of enterprise or organisation activities
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/03Credit; Loans; Processing thereof

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Finance (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Educational Administration (AREA)
  • Technology Law (AREA)
  • Game Theory and Decision Science (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)

Abstract

本发明公开了支持多数据源的汽车金融风控模型,所述支持多数据源的汽车金融风控模型的实现步骤如下:数据分类,模型训练,数据合并;所述模型训练包括以下步骤:数量确定、权重确定、偏置值设置、初始权重设置、Lw计算、权重标准化和循环,所述数据合并包括以下步骤:公共字段并入、单字段模型训练、单字段合并并入和结果模型训练,该支持多数据源的汽车金融风控模型设计合理,使能够包涵多家汽车融资租赁公司订单数据的平台成为可能。

Description

支持多数据源的汽车金融风控模型
技术领域
本发明是支持多数据源的汽车金融风控模型,属于汽车金融风控技术领域。
背景技术
现有的汽车金融风控模型只能分析一家公司的订单数据,不同的汽车融资租赁公司由于用的是不同的订单管理系统或者是由于业态不同,它们的订单数据都各不相同,其中有些基础字段是一致的,还有很多字段是相似但互不相同的,比如说贷前的订单申请流程可能包括客户申请、进件审批、担保审批、征信审核、车辆评估和通过审核并放款等,虽然描述的是同一个订单申请的过程,但在数据库的字段表示出来时却很可能是完全不一样的,也就是说两家公司的订单申请过程的数据是没办法直接合并的。
在汽车金融风控领域,订单数据是非常宝贵的,完全可以说对风控模型准确性起决定性作用的是输入风控模型的数据(订单)的数量和质量,而不是算法,所以尽量的合并不同公司的数据提高数据量是至关重要的,而现有的算法是做不到这一点的。
所以,发明一种能够收录来自不同汽车融资租赁公司的订单数据并且能够把不同公司的订单数据合并成一份数据的模型具有非常重要的意义,为此,本发明提出一种支持多数据源的汽车金融风控模型。
发明内容
针对现有技术存在的不足,本发明目的是提供支持多数据源的汽车金融风控模型,以解决上述背景技术中提出的问题,本发明设计合理,使能够包涵多家汽车融资租赁公司订单数据的平台成为可能。
为实现上述目的,本发明提供如下技术方案:支持多数据源的汽车金融风控模型,所述支持多数据源的汽车金融风控模型的实现步骤如下:
步骤一:数据分类;首先,把汽车金融风控模型分类成5个维度,即贷前数据、贷中数据、反欺诈数据、背景调查数据和历史消费还款数据,每个公司的字段会先分别归类到这5个维度中,每个维度的数据会继续细分,每个维度的数据分类确定后,对原始数据进行切割,首先对表进行横向切割(即按行切割),把不同公司的数据分开到不同的表中,接着再进行纵向切割(即按列切割),把同一公司不同类型的数据切割到相对较小的表中,数据切割完毕之后将会分别放入模型进行训练,每个维度数据的分类如下:
①:贷前数据;第一个维度是贷前数据,贷前数据包含公共数据、订单申请流程数据和订单申请结果数据:
(a):贷前数据有较多的共有字段,因为贷前包含很多申请人的基础资料,提取贷前每个公司都共有的公共字段,另外,对汽车融资租赁公司的性质进行分类,对平台中的每一个公司按四个方面:车辆类型、车辆用途、渠道模式和租赁类型进行定性,并把这四个方面作为四个共有字段;
(b):订单申请流程数据为贷前工单数据;
(c):订单申请的结果即申请是通过还是拒绝,订单申请的结果是贷前数据的目标列,这里的目标列指的是机器学习中监督学习的目标列;
②:贷中数据;第二个维度是贷中数据,贷中数据又分为还款数据(这是时间序列数据)、车载GPS数据(时间序列数据)和贷中工单数据,贷中数据的目标列是还款数据,表示一个订单是正常还款还是已经逾期或坏账;
③:反欺诈数据;第三个维度是反欺诈数据,对于反欺诈,模型的侧重点是搭建人际关系网络,所以可以反映人与人之间关系的数据,比如通话记录,在模型中都被归类为反欺诈数据,对于反欺诈数据的训练是一个无监督学习的过程,所以在反欺诈数据中没有目标列;
④:背景调查数据;第四个维度是背景调查数据,背景调查数据分为不良信用记录、司法案例记录、网贷记录和多平台借贷记录等,用第二个维度的目标列,即还款数据,作为这个维度的目标列;
⑤:历史消费还款数据;第五个维度是历史消费还款数据,这个维度的数据主要来自与银联的消费和还款数据,同样的用第二个维度的目标列作为这个维度的目标列;
步骤二:模型训练;对步骤一中的5个维度分别做模型训练,第一、二、四、五个维度都是监督学习,只有第三个维度是无监督学习,对于反欺诈数据而言,以通话记录数据为例,对一个城市的几千万的通话记录进行数据挖掘,并建立人际关系网络,在这个关系网络中,每个人是一个点,如果两个人有通话记录,那么两个人代表的两个点之间就有一条连线,而每一条连线都是有权重的,权重越高代表两个人联系越紧密,连线的权重是和通话的频率和通话的时间(包括通话的时长和时间点)相关的,然后给人际关系网络中的每个人即每个节点赋上权重值,直观的说,一个有几百个联系人的节点应该会比一个只有几个联系人的节点的权重要高,算法的目标是计算出人际关系网络中每一个节点的最后权重,第三个维度的无监督学习的具体步骤如下:
①:数量确定;首先,确定人际关系网络节点的数量,假设有一千万(即107)个节点,那么建一个107X107的矩阵L,并给矩阵中的每个元素设初始值为0;
②:权重确定;确定节点连线的权重,连线的权重将会保存在对应的矩阵元素中,这里要说明的是A联系B(记为A→B)和B联系A(记为B→A)是不一样的,并会被保存在各自的矩阵元素中,这里有一个规则是对于每一个节点,进入该节点的连线的权重之和必须等于1,比如说节点A收到来自节点B,C和D的通话次数分别是7次,2次和1次,那么进入节点A的连线的权重可被设为B→A:0.7,C→A:0.2,D→A:0.1,其中0.7+0.2+0.1=1;
③:偏置值设置;权重确定完成后,矩阵L中还有大量的零值元素,对所有的零值元素设置一个很小的偏置值;
④:初始权重设置;由于目标是确定人际关系网络中节点的最后权重,但是一开始节点的权重是未知的,因此给所有节点设置一个初始权重,最直接的方法是先给每个节点设置相同的权重,这里同样需要遵守的一个规则就是所有节点的权重之和等于1,这样对于107个节点,给每个节点设置的权重值为10-7,最后得到一个1X107的向量w;
⑤:Lw计算;计算Lw并得到一个新的权重向量,把新的权重向量再次赋值给w,记为w=Lw,其中Lw是矩阵L和向量w的内积;
⑥:权重标准化;对新的权重向量w进行标准化,即让权重向量w中的元素之和等于1,把标准化后的权重向量赋值给w,记为w=w/sum(w);
⑦:循环;循环⑤和⑥直到收敛,所述收敛指的是两次迭代计算得到的权重向量w之差低于一个预设的阈值;
步骤三:数据合并;不同公司的数据可分为公共字段和独有字段,独有字段比公共字段要多很多,不同公司的独有字段的字段名称和含义都是各不相同的,公共字段能够直接合并,独有字段不能直接合并,否则会导致无法建模的,将不同公司的公共字段和独有字段分别建表,然后建一张总表,记为z,数据合并的步骤如下:
①:公共字段并入;将不同公司的公共字段表直接并入表z;
②:单字段模型训练;对不同公司的独有字段表进行模型训练;
③:单字段合并并入;将不同公司的同一类型的独有字段表的模型训练结果字段合并放入表z的同一个字段,最后的结果将是包含所有公共字段和所有分类数据输出字段的表z;
④:结果模型训练;将表z会被放入模型进行训练得到输出字段,总表z输入模型训练后得到的结果不一定是最后的结果,这个总表可能是上一层模型的一个子表,根据实际的建模需求,数据很可能被分为多层,比如3,4,或5层等,这里只描述了一个两层的结构以简化讨论且不失一般性。
一实施例中:所述步骤二中的无监督学习算法是对谷歌的PageRank算法的修改和简化。
一实施例中:所述步骤二中对于矩阵运算Lw可以很方便的进行并行计算,方法是对L和w进行切割,并分成许多子矩阵块(向量也可看作是矩阵),这些子矩阵块可以分配到集群的各个计算机中进行计算,计算的子结果再合并成最后的结果。
一实施例中:所述步骤一的(c)中,对订单申请的审批带有人为的主观或经验因素,现在把一个汽车融资租赁公司的所有订单放在一起考虑,如果这个公司最后所有审批通过的订单的逾期和坏账率较高的话,这反映了订单审批人员的决策质量较低,而各个公司订单审批人员的决策质量也会被迭代计算并作为模型的权重,最后反映到风控报告中,订单审批人员的决策的质量反映在数据里面,而当所有公司的数据合并后,决策质量的高低就可以被比较出来,决策质量较高的公司就可以起到被其他公司学习和借鉴的作用。
采用上述技术方案后,一方面,使能够包涵多家汽车融资租赁公司订单数据的平台成为可能,能够汇聚多家公司的订单数据成为一个较大的数据仓库,有效的提高风控模型的数据(订单)的数量和质量;
另一方面,对于中小型公司,比如订单量只有几千个到上万个的公司,它们的订单量是不足够自己独立建一个准确的风控模型的,而有了这个平台以后,它们的订单就可以合并,合并后的数据量就足够搭建一个准确率较高的模型;
此外,对于那些刚成立的大型汽车融资租赁公司来说,因为刚成立的公司的订单量是从零开始的,如果它们要自己搭建一个风控模型的话,因为没有历史数据,模型的准确率将会是很低的,这个被称为风控模型的冷启动问题,如果刚成立的公司使用此支持多数据源的汽车金融风控模型的话就不会存在冷启动问题。
附图说明
图1为本发明支持多数据源的汽车金融风控模型的实现步骤流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本发明提供支持多数据源的汽车金融风控模型,所述支持多数据源的汽车金融风控模型的实现步骤如下:
步骤一:数据分类;首先,把汽车金融风控模型分类成5个维度,即贷前数据、贷中数据、反欺诈数据、背景调查数据和历史消费还款数据,每个公司的字段会先分别归类到这5个维度中,每个维度的数据会继续细分,每个维度的数据分类确定后,对原始数据进行切割,首先对表进行横向切割(即按行切割),把不同公司的数据分开到不同的表中,接着再进行纵向切割(即按列切割),把同一公司不同类型的数据切割到相对较小的表中,数据切割完毕之后将会分别放入模型进行训练,每个维度数据的分类如下:
①:贷前数据;第一个维度是贷前数据,贷前数据包含公共数据、订单申请流程数据和订单申请结果数据:
(a):贷前数据有较多的共有字段,因为贷前包含很多申请人的基础资料,提取贷前每个公司都共有的公共字段,另外,对汽车融资租赁公司的性质进行分类,对平台中的每一个公司按四个方面:车辆类型、车辆用途、渠道模式和租赁类型进行定性,并把这四个方面作为四个共有字段;
(b):订单申请流程数据为贷前工单数据;
(c):订单申请的结果即申请是通过还是拒绝,订单申请的结果是贷前数据的目标列,这里的目标列指的是机器学习中监督学习的目标列;
②:贷中数据;第二个维度是贷中数据,贷中数据又分为还款数据(这是时间序列数据)、车载GPS数据(时间序列数据)和贷中工单数据,贷中数据的目标列是还款数据,表示一个订单是正常还款还是已经逾期或坏账;
③:反欺诈数据;第三个维度是反欺诈数据,对于反欺诈,模型的侧重点是搭建人际关系网络,所以可以反映人与人之间关系的数据,比如通话记录,在模型中都被归类为反欺诈数据,对于反欺诈数据的训练是一个无监督学习的过程,所以在反欺诈数据中没有目标列;
④:背景调查数据;第四个维度是背景调查数据,背景调查数据分为不良信用记录、司法案例记录、网贷记录和多平台借贷记录等,用第二个维度的目标列,即还款数据,作为这个维度的目标列;
⑤:历史消费还款数据;第五个维度是历史消费还款数据,这个维度的数据主要来自与银联的消费和还款数据,同样的用第二个维度的目标列作为这个维度的目标列;
步骤二:模型训练;对步骤一中的5个维度分别做模型训练,第一、二、四、五个维度都是监督学习,只有第三个维度是无监督学习,对于反欺诈数据而言,以通话记录数据为例,对一个城市的几千万的通话记录进行数据挖掘,并建立人际关系网络,在这个关系网络中,每个人是一个点,如果两个人有通话记录,那么两个人代表的两个点之间就有一条连线,而每一条连线都是有权重的,权重越高代表两个人联系越紧密,连线的权重是和通话的频率和通话的时间(包括通话的时长和时间点)相关的,然后给人际关系网络中的每个人即每个节点赋上权重值,直观的说,一个有几百个联系人的节点应该会比一个只有几个联系人的节点的权重要高,算法的目标是计算出人际关系网络中每一个节点的最后权重,第三个维度的无监督学习的具体步骤如下:
①:数量确定;首先,确定人际关系网络节点的数量,假设有一千万(即107)个节点,那么建一个107X107的矩阵L,并给矩阵中的每个元素设初始值为0;
②:权重确定;确定节点连线的权重,连线的权重将会保存在对应的矩阵元素中,这里要说明的是A联系B(记为A→B)和B联系A(记为B→A)是不一样的,并会被保存在各自的矩阵元素中,这里有一个规则是对于每一个节点,进入该节点的连线的权重之和必须等于1,比如说节点A收到来自节点B,C和D的通话次数分别是7次,2次和1次,那么进入节点A的连线的权重可被设为B→A:0.7,C→A:0.2,D→A:0.1,其中0.7+0.2+0.1=1;
③:偏置值设置;权重确定完成后,矩阵L中还有大量的零值元素,对所有的零值元素设置一个很小的偏置值;
④:初始权重设置;由于目标是确定人际关系网络中节点的最后权重,但是一开始节点的权重是未知的,因此给所有节点设置一个初始权重,最直接的方法是先给每个节点设置相同的权重,这里同样需要遵守的一个规则就是所有节点的权重之和等于1,这样对于107个节点,给每个节点设置的权重值为10-7,最后得到一个1X107的向量w;
⑤:Lw计算;计算Lw并得到一个新的权重向量,把新的权重向量再次赋值给w,记为w=Lw,其中Lw是矩阵L和向量w的内积;
⑥:权重标准化;对新的权重向量w进行标准化,即让权重向量w中的元素之和等于1,把标准化后的权重向量赋值给w,记为w=w/sum(w);
⑦:循环;循环⑤和⑥直到收敛,所述收敛指的是两次迭代计算得到的权重向量w之差低于一个预设的阈值;
步骤三:数据合并;不同公司的数据可分为公共字段和独有字段,独有字段比公共字段要多很多,不同公司的独有字段的字段名称和含义都是各不相同的,公共字段能够直接合并,独有字段不能直接合并,否则会导致无法建模的,将不同公司的公共字段和独有字段分别建表,然后建一张总表,记为z,数据合并的步骤如下:
①:公共字段并入;将不同公司的公共字段表直接并入表z;
②:单字段模型训练;对不同公司的独有字段表进行模型训练;
③:单字段合并并入;将不同公司的同一类型的独有字段表的模型训练结果字段合并放入表z的同一个字段,最后的结果将是包含所有公共字段和所有分类数据输出字段的表z;
④:结果模型训练;将表z会被放入模型进行训练得到输出字段,总表z输入模型训练后得到的结果不一定是最后的结果,这个总表可能是上一层模型的一个子表,根据实际的建模需求,数据很可能被分为多层,比如3,4,或5层等,这里只描述了一个两层的结构以简化讨论且不失一般性。
本实施例中,所述步骤二中的无监督学习算法是对谷歌的PageRank算法的修改和简化。
进一步的,所述步骤二中对于矩阵运算Lw可以很方便的进行并行计算,方法是对L和w进行切割,并分成许多子矩阵块(向量也可看作是矩阵),这些子矩阵块可以分配到集群的各个计算机中进行计算,计算的子结果再合并成最后的结果。
通过以上结构,在此支持多数据源的汽车金融风控模型应用后,一方面,使能够包涵多家汽车融资租赁公司订单数据的平台成为可能,能够汇聚多家公司的订单数据成为一个较大的数据仓库,有效的提高风控模型的数据(订单)的数量和质量,另一方面,对于中小型公司,比如订单量只有几千个到上万个的公司,它们的订单量是不足够自己独立建一个准确的风控模型的,而有了这个平台以后,它们的订单就可以合并,合并后的数据量就足够搭建一个准确率较高的模型。
优选的,本实施例还具有以下配置,所述步骤一的(c)中,对订单申请的审批带有人为的主观或经验因素,现在把一个汽车融资租赁公司的所有订单放在一起考虑,如果这个公司最后所有审批通过的订单的逾期和坏账率较高的话,这反映了订单审批人员的决策质量较低,而各个公司订单审批人员的决策质量也会被迭代计算并作为模型的权重,最后反映到风控报告中,订单审批人员的决策的质量反映在数据里面,而当所有公司的数据合并后,决策质量的高低就可以被比较出来,决策质量较高的公司就可以起到被其他公司学习和借鉴的作用。
此外,对于那些刚成立的大型汽车融资租赁公司来说,因为刚成立的公司的订单量是从零开始的,如果它们要自己搭建一个风控模型的话,因为没有历史数据,模型的准确率将会是很低的,这个被称为风控模型的冷启动问题,如果刚成立的公司使用此支持多数据源的汽车金融风控模型的话就不会存在冷启动问题。
此外,应当理解,虽然本说明书按照实施方式加以描述,但并非每个实施方式仅包含一个独立的技术方案,说明书的这种叙述方式仅仅是为清楚起见,本领域技术人员应当将说明书作为一个整体,各实施例中的技术方案也可以经适当组合,形成本领域技术人员可以理解的其他实施方式。

Claims (4)

1.支持多数据源的汽车金融风控模型,其特征在于,所述支持多数据源的汽车金融风控模型的实现步骤如下:
步骤一:数据分类;首先,把汽车金融风控模型分类成5个维度,即贷前数据、贷中数据、反欺诈数据、背景调查数据和历史消费还款数据,每个公司的字段会先分别归类到这5个维度中,每个维度的数据会继续细分,每个维度的数据分类确定后,对原始数据进行切割,首先对表进行横向切割(即按行切割),把不同公司的数据分开到不同的表中,接着再进行纵向切割(即按列切割),把同一公司不同类型的数据切割到相对较小的表中,数据切割完毕之后将会分别放入模型进行训练,每个维度数据的分类如下:
①:贷前数据;第一个维度是贷前数据,贷前数据包含公共数据、订单申请流程数据和订单申请结果数据:
(a):贷前数据有较多的共有字段,因为贷前包含很多申请人的基础资料,提取贷前每个公司都共有的公共字段,另外,对汽车融资租赁公司的性质进行分类,对平台中的每一个公司按四个方面:车辆类型、车辆用途、渠道模式和租赁类型进行定性,并把这四个方面作为四个共有字段;
(b):订单申请流程数据为贷前工单数据;
(c):订单申请的结果即申请是通过还是拒绝,订单申请的结果是贷前数据的目标列,这里的目标列指的是机器学习中监督学习的目标列;
②:贷中数据;第二个维度是贷中数据,贷中数据又分为还款数据(这是时间序列数据)、车载GPS数据(时间序列数据)和贷中工单数据,贷中数据的目标列是还款数据,表示一个订单是正常还款还是已经逾期或坏账;
③:反欺诈数据;第三个维度是反欺诈数据,对于反欺诈,模型的侧重点是搭建人际关系网络,所以可以反映人与人之间关系的数据,比如通话记录,在模型中都被归类为反欺诈数据,对于反欺诈数据的训练是一个无监督学习的过程,所以在反欺诈数据中没有目标列;
④:背景调查数据;第四个维度是背景调查数据,背景调查数据分为不良信用记录、司法案例记录、网贷记录和多平台借贷记录等,用第二个维度的目标列,即还款数据,作为这个维度的目标列;
⑤:历史消费还款数据;第五个维度是历史消费还款数据,这个维度的数据主要来自与银联的消费和还款数据,同样的用第二个维度的目标列作为这个维度的目标列;
步骤二:模型训练;对步骤一中的5个维度分别做模型训练,第一、二、四、五个维度都是监督学习,只有第三个维度是无监督学习,对于反欺诈数据而言,以通话记录数据为例,对一个城市的几千万的通话记录进行数据挖掘,并建立人际关系网络,在这个关系网络中,每个人是一个点,如果两个人有通话记录,那么两个人代表的两个点之间就有一条连线,而每一条连线都是有权重的,权重越高代表两个人联系越紧密,连线的权重是和通话的频率和通话的时间(包括通话的时长和时间点)相关的,然后给人际关系网络中的每个人即每个节点赋上权重值,直观的说,一个有几百个联系人的节点应该会比一个只有几个联系人的节点的权重要高,算法的目标是计算出人际关系网络中每一个节点的最后权重,第三个维度的无监督学习的具体步骤如下:
①:数量确定;首先,确定人际关系网络节点的数量,假设有一千万(即107)个节点,那么建一个107X107的矩阵L,并给矩阵中的每个元素设初始值为0;
②:权重确定;确定节点连线的权重,连线的权重将会保存在对应的矩阵元素中,这里要说明的是A联系B(记为A→B)和B联系A(记为B→A)是不一样的,并会被保存在各自的矩阵元素中,这里有一个规则是对于每一个节点,进入该节点的连线的权重之和必须等于1,比如说节点A收到来自节点B,C和D的通话次数分别是7次,2次和1次,那么进入节点A的连线的权重可被设为B→A:0.7,C→A:0.2,D→A:0.1,其中0.7+0.2+0.1=1;
③:偏置值设置;权重确定完成后,矩阵L中还有大量的零值元素,对所有的零值元素设置一个很小的偏置值;
④:初始权重设置;由于目标是确定人际关系网络中节点的最后权重,但是一开始节点的权重是未知的,因此给所有节点设置一个初始权重,最直接的方法是先给每个节点设置相同的权重,这里同样需要遵守的一个规则就是所有节点的权重之和等于1,这样对于107个节点,给每个节点设置的权重值为10-7,最后得到一个1X107的向量w;
⑤:Lw计算;计算Lw并得到一个新的权重向量,把新的权重向量再次赋值给w,记为w=Lw,其中Lw是矩阵L和向量w的内积;
⑥:权重标准化;对新的权重向量w进行标准化,即让权重向量w中的元素之和等于1,把标准化后的权重向量赋值给w,记为w=w/sum(w);
⑦:循环;循环⑤和⑥直到收敛,所述收敛指的是两次迭代计算得到的权重向量w之差低于一个预设的阈值;
步骤三:数据合并;不同公司的数据可分为公共字段和独有字段,独有字段比公共字段要多很多,不同公司的独有字段的字段名称和含义都是各不相同的,公共字段能够直接合并,独有字段不能直接合并,否则会导致无法建模的,将不同公司的公共字段和独有字段分别建表,然后建一张总表,记为z,数据合并的步骤如下:
①:公共字段并入;将不同公司的公共字段表直接并入表z;
②:单字段模型训练;对不同公司的独有字段表进行模型训练;
③:单字段合并并入;将不同公司的同一类型的独有字段表的模型训练结果字段合并放入表z的同一个字段,最后的结果将是包含所有公共字段和所有分类数据输出字段的表z;
④:结果模型训练;将表z会被放入模型进行训练得到输出字段,总表z输入模型训练后得到的结果不一定是最后的结果,这个总表可能是上一层模型的一个子表,根据实际的建模需求,数据很可能被分为多层,比如3,4,或5层等,这里只描述了一个两层的结构以简化讨论且不失一般性。
2.根据权利要求1所述的支持多数据源的汽车金融风控模型,其特征在于:所述步骤二中的无监督学习算法是对谷歌的PageRank算法的修改和简化。
3.根据权利要求1所述的支持多数据源的汽车金融风控模型,其特征在于:所述步骤二中对于矩阵运算Lw可以很方便的进行并行计算,方法是对L和w进行切割,并分成许多子矩阵块(向量也可看作是矩阵),这些子矩阵块可以分配到集群的各个计算机中进行计算,计算的子结果再合并成最后的结果。
4.根据权利要求1所述的支持多数据源的汽车金融风控模型,其特征在于:所述步骤一的(c)中,对订单申请的审批带有人为的主观或经验因素,现在把一个汽车融资租赁公司的所有订单放在一起考虑,如果这个公司最后所有审批通过的订单的逾期和坏账率较高的话,这反映了订单审批人员的决策质量较低,而各个公司订单审批人员的决策质量也会被迭代计算并作为模型的权重,最后反映到风控报告中,订单审批人员的决策的质量反映在数据里面,而当所有公司的数据合并后,决策质量的高低就可以被比较出来,决策质量较高的公司就可以起到被其他公司学习和借鉴的作用。
CN201811493302.1A 2018-12-07 2018-12-07 支持多数据源的汽车金融风控方法 Active CN109583782B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811493302.1A CN109583782B (zh) 2018-12-07 2018-12-07 支持多数据源的汽车金融风控方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811493302.1A CN109583782B (zh) 2018-12-07 2018-12-07 支持多数据源的汽车金融风控方法

Publications (2)

Publication Number Publication Date
CN109583782A true CN109583782A (zh) 2019-04-05
CN109583782B CN109583782B (zh) 2021-07-06

Family

ID=65929075

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811493302.1A Active CN109583782B (zh) 2018-12-07 2018-12-07 支持多数据源的汽车金融风控方法

Country Status (1)

Country Link
CN (1) CN109583782B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110348722A (zh) * 2019-07-01 2019-10-18 百维金科(上海)信息科技有限公司 一种基于XGBoost的互联网金融风控模型
CN110675252A (zh) * 2019-09-29 2020-01-10 北京市商汤科技开发有限公司 风险评估方法、装置、电子设备及存储介质
CN110738565A (zh) * 2019-10-11 2020-01-31 中山市银鹿金科信息科技有限公司 基于数据集合的房产金融人工智能复合风控模型
CN114385707A (zh) * 2021-12-20 2022-04-22 上海浦东发展银行股份有限公司 基于rfm和dfs算法的智能特征自动衍生方法
CN117332003A (zh) * 2023-11-17 2024-01-02 上海中汇亿达金融信息技术有限公司 SaaS模式下的数据交互方法、数据引擎系统及应用

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120004949A1 (en) * 1999-10-28 2012-01-05 Citibank, N.A. Method and system for using a bayesian belief network to ensure data integrity
CN106875270A (zh) * 2017-01-19 2017-06-20 上海冰鉴信息科技有限公司 一种构建及验证信用评分方程的方法和系统设计
CN108038700A (zh) * 2017-12-22 2018-05-15 上海前隆信息科技有限公司 一种反欺诈数据分析方法与系统
CN108564460A (zh) * 2018-01-12 2018-09-21 阳光财产保险股份有限公司 互联网信贷场景下的实时欺诈检测方法及装置
CN108876193A (zh) * 2018-07-13 2018-11-23 四川享宇金信金融服务外包有限公司 一种基于信用分的风控模型构建方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120004949A1 (en) * 1999-10-28 2012-01-05 Citibank, N.A. Method and system for using a bayesian belief network to ensure data integrity
CN106875270A (zh) * 2017-01-19 2017-06-20 上海冰鉴信息科技有限公司 一种构建及验证信用评分方程的方法和系统设计
CN108038700A (zh) * 2017-12-22 2018-05-15 上海前隆信息科技有限公司 一种反欺诈数据分析方法与系统
CN108564460A (zh) * 2018-01-12 2018-09-21 阳光财产保险股份有限公司 互联网信贷场景下的实时欺诈检测方法及装置
CN108876193A (zh) * 2018-07-13 2018-11-23 四川享宇金信金融服务外包有限公司 一种基于信用分的风控模型构建方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110348722A (zh) * 2019-07-01 2019-10-18 百维金科(上海)信息科技有限公司 一种基于XGBoost的互联网金融风控模型
CN110675252A (zh) * 2019-09-29 2020-01-10 北京市商汤科技开发有限公司 风险评估方法、装置、电子设备及存储介质
CN110738565A (zh) * 2019-10-11 2020-01-31 中山市银鹿金科信息科技有限公司 基于数据集合的房产金融人工智能复合风控模型
CN114385707A (zh) * 2021-12-20 2022-04-22 上海浦东发展银行股份有限公司 基于rfm和dfs算法的智能特征自动衍生方法
CN117332003A (zh) * 2023-11-17 2024-01-02 上海中汇亿达金融信息技术有限公司 SaaS模式下的数据交互方法、数据引擎系统及应用
CN117332003B (zh) * 2023-11-17 2024-07-16 上海中汇亿达金融信息技术有限公司 SaaS模式下的数据交互方法、数据引擎系统及应用

Also Published As

Publication number Publication date
CN109583782B (zh) 2021-07-06

Similar Documents

Publication Publication Date Title
CN109583782A (zh) 支持多数据源的汽车金融风控模型
Chu et al. Social network community analysis based large-scale group decision making approach with incomplete fuzzy preference relations
CN111309824A (zh) 实体关系图谱显示方法及系统
Adebayo FairML: ToolBox for diagnosing bias in predictive modeling
WO2021164382A1 (zh) 针对用户分类模型进行特征处理的方法及装置
CN110675243A (zh) 一种融合机器学习的信贷预测逾期方法及系统
CN111177473B (zh) 人员关系分析方法、装置和可读存储介质
CN110956273A (zh) 融合多种机器学习模型的征信评分方法及系统
CN112734559B (zh) 企业信用风险评价方法、装置及电子设备
Masyutin Credit scoring based on social network data
US20060212341A1 (en) System and method for profiling jurors
Wu et al. [Retracted] Research on Evaluation Model of Hospital Informatization Level Based on Decision Tree Algorithm
Eddy et al. Credit scoring models: Techniques and issues
CN112200684A (zh) 一种检测医保欺诈的方法、系统及存储介质
CN113537370A (zh) 一种基于云计算的财务数据处理方法及系统
Zhu et al. Loan default prediction based on convolutional neural network and LightGBM
CN117575773A (zh) 业务数据的确定方法、装置、计算机设备、存储介质
Yu et al. An effective multi-part dedicated flow-line reconfiguration model considering the optimal selection of machining process path and machines
CN113610575B (zh) 一种产品销量的预测方法及预测系统
CN114170000A (zh) 信用卡用户风险类别识别方法、装置、计算机设备和介质
CN114897607A (zh) 产品资源的数据处理方法及装置、电子设备、存储介质
Prignano et al. Infrastructures connecting people: A mechanistic model for terrestrial transportation networks
CN111737319A (zh) 用户集群的预测方法、装置、计算机设备和存储介质
Shousong et al. Notice of Violation of IEEE Publication Principles: Research on Urban Land Price Assessment Based on Artificial Neural Network Model
Su et al. Point-of-Interest recommendation based on spatial clustering in LBSN

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant