CN113935820A - 逾期概率计算方法、装置、电子设备及计算机存储介质 - Google Patents
逾期概率计算方法、装置、电子设备及计算机存储介质 Download PDFInfo
- Publication number
- CN113935820A CN113935820A CN202111073758.4A CN202111073758A CN113935820A CN 113935820 A CN113935820 A CN 113935820A CN 202111073758 A CN202111073758 A CN 202111073758A CN 113935820 A CN113935820 A CN 113935820A
- Authority
- CN
- China
- Prior art keywords
- node
- user
- nodes
- type
- calculating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/03—Credit; Loans; Processing thereof
Landscapes
- Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Engineering & Computer Science (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Abstract
本发明涉及一种逾期概率计算方法、装置、电子设备及计算机存储介质,其中方法包括:根据申请贷款的用户的历史行为数据构建原始图谱;根据原始图谱中与预设非ID节点连接的ID节点构建单部图谱;根据单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数,根据原始图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点的第二关联参数;根据单部谱图确定用于传播逾期风险的中介节点,并计算用户ID节点到中介节点的中介距离;根据第一关联参数,第二关联参数以及中介距离计算得到用户的逾期概率,从而准确计算出用户的逾期概率。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种逾期概率计算方法、装置、电子设备及计算机存储介质。
背景技术
在互联网贷款申请业务中,贷款平台对贷款申请人资质与信用的审定往往基于其自身学历、收入、行业等特征,而对于能够伪造相关材料的专业骗贷的申请人,贷款平台甄别的难度较大。
近年来,随着计算机计算的发展,知识图谱可以展示申请人使用的设备指纹与网络IP,对于申请人是否存在骗贷行为的判定,往往依赖于经验在图谱系统中搜索,或基于关系型数据库做浅层表格关联,从而导致贷款平台无法对在贷前审查阶段实时准确预测出申请人的逾期概率进而防止骗贷发生。
发明内容
为解决上述技术问题,本发明提供了一种逾期概率计算方法、装置、电子设备及计算机存储介质,具体方案如下:
第一方面,提供一种逾期概率计算方法,所述方法包括:
根据申请贷款的用户的历史行为数据构建原始图谱;
根据所述原始图谱中与预设非ID节点连接的ID节点构建单部图谱;
根据所述单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数,其中所述第一类ID节点为无逾期或者在第一逾期时间内还款的用户的ID,所述第二类ID节点为在第二逾期时间内未还款的用户的ID;
根据所述原始图谱分别计算所述第一类ID节点以及所述第二类ID节点与所述用户ID节点的第二关联参数;
根据所述单部谱图确定用于传播逾期风险的中介节点,并计算所述用户ID节点到所述中介节点的中介距离;
根据所述第一关联参数,所述第二关联参数以及所述中介距离计算得到用户的逾期概率。
在一个较佳的实施方式中,所述根据所述原始图谱中与预设非ID节点连接的ID节点构建单部图谱包括:
确定每一所述ID节点的邻居节点以及非邻居节点,其中,所述邻居节点与所述ID节点连接有相同的非ID节点,所述非邻居节点为与所述ID节点没有连接相同的非ID节点;
每一所述ID节点与所述非邻居节点之间的边权重为0;
每一所述ID节点与所述邻居节点之间的边权重通过以下方法计算:
确定所述ID节点与所述非ID节点之间的第一连接途径以及所述邻居节点与相同的所述非ID节点之间的第二连接途径;
根据所述第一连接途径与所述第二连接途径之间的时间覆盖度,所述非ID节点的度的对数,以及,所述ID节点与所述邻居节点共同连接的所述非ID节点的数量,计算得到所述ID节点与所述邻居节点之间的边权重;
根据每一所述ID节点以及对应的所述边权重构建所述单部图谱。
在一个较佳的实施方式中,根据单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数包括:
将重置系数θ作为重启随机游走概率;
以相同的ID节点到单部图谱与不同ID节点之间的边权重作为行,以不同的ID节点到相同的ID节点之间的边权重作为行得到邻接矩阵;
以每一所述ID节点的所述邻居节点中所述第一类ID节点数量的对数作为初始化向量,将所述初始向量归一化得到个性化向量;
对所述用户ID节点做个性化page rank计算所述第一类ID节点到所述用户ID节点以及所述用户ID节点的所述邻居节点的第一RP值;
同样的,计算得到所述第二类ID节点到所述用户ID节点以及所述用户ID节点的所述邻居节点的第二RP值;
将所述第一RP值以及所述第二RP值作为第一关联参数。
在一个较佳的实施方式中,所述根据原始图谱分别计算所述第一类ID节点以及第所述二类ID节点与所述用户ID节点的第二关联参数包括:
根据所述第一类ID节点的风险/信用传播系数以及与所述第一类ID节点所连接的非ID节点所连接的ID节点数量得到所述第一类ID节点到所述用户ID节点以及所述用户ID节点的所述邻居节点的第一风险/信用传播值;
根据所述第二类ID节点的风险/信用传播系数以及所述第二类ID节点所连接的非ID节点所连接的ID节点数量得到所述第二类ID节点到所述用户ID节点以及所述邻居节点的第二风险/信用传播值;
将所述第一风险/信用传播值以及所述第二风险/信用传播值作为第二关联参数。
在一个较佳的实施方式中,所述根据单部谱图确定用于传播逾期风险的中介节点包括:
以相同的ID节点的邻居节点数,所述邻居节点对应用户的贷款用户比例以及逾期用户比例为行,以不同ID节点的邻居节点数,或贷款用户比例,或逾期用户比例为列,构建原始矩阵;
对所述原始矩阵零均值化处理以及协方差计算得到协方差矩阵;
计算所述协方差矩阵的特征值以及特征向量;
将所述协方差矩阵的特征向量单位化得到单位化特征向量;
取前k大的特征值对应的所述单位化特征向量;
将k个特征值与对应的所述单位化特征向量的乘积之和作为相应的ID节点的中介指数;
将所述中介指数从高到低排列,并取前l个所述中介指数对应的所述ID节点作为中介节点。
在一个较佳的实施方式中,所述计算用户ID节点到所述中介节点的中介距离包括:
从所述用户ID节点以及所述中介节点分别出发逐层遍历;
将首次相遇时的已遍历层数之和作为所述用户ID节点到所述中介节点的中介距离。
在一个较佳的实施方式中,所述根据所述第一关联参数,所述第二关联参数以及所述中介距离计算得到所述用户的逾期概率包括:
将所述第一关联参数,所述第二关联参数以及所述中介距离输入至逻辑回归训练模型中,计算得到所述用户的逾期概率。
第二方面,提供一种逾期概率计算装置,所述装置包括:
第一构建模块,用于根据申请贷款的用户的历史行为数据构建原始图谱;
第二构建模块,用于根据所述原始图谱中与预设非ID节点连接的ID节点构建单部图谱;
第一关联参数计算模块,用于根据所述单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数,其中所述第一类ID节点为无逾期或者在第一逾期时间内还款的用户的ID,所述第二类ID节点为在第二逾期时间内未还款的用户的ID;
第二关联参数计算模块,用于根据所述原始图谱分别计算所述第一类ID节点以及所述第二类ID节点与所述用户ID节点的第二关联参数;
中介距离计算模块,用于根据所述单部谱图确定用于传播逾期风险的中介节点,并计算所述用户ID节点到所述中介节点的中介距离;
逾期概率计算模块,用于根据所述第一关联参数,所述第二关联参数以及所述中介距离计算得到用户的逾期概率。
第三方面,提供一种电子设备,其特征在于,包括:
一个或多个处理器;以及
与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行如前所述的方法。
第四方面,提供一种计算机存储介质,其特征在于,其上存储有计算机程序,其中,该程序被处理器执行时实现如前所述的方法。
本发明中基于用户的历史行为数据根据原始图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点的第一关联参数,根据所述单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第二关联参数,根据单部谱图确定用于传播逾期风险的中介节点,并计算用户ID节点到中介节点的中介距离,由于第一类ID节点以及第二类ID节点的信用情况是已知的,将当前申请贷款的用户ID与第一类ID节点以及第二类ID节点的关联性量化,将用户ID与中介节点的关联性量化,从而能通过第一关联参数,第二关联参数以及中介距离准确计算用户的逾期概率,使得贷款审批的结果更加准确。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例中的逾期概率计算方法的示意图;
图2为本发明实施例中的逾期概率计算方法的流程图;
图3为本发明实施例中的ID节点与非ID节点的关系图;
图4为本发明实施例中的逾期概率计算装置的示意图;
图5为本发明实施例中电子设备的架构图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了解决现有技术中的贷款平台无法对在贷前审查阶段实时准确预测出申请人的逾期概率的问题,本发明如图1所示,先根据申请贷款的用户的历史行为数据构建原始图谱,在原始图谱的基础上,一方面计算用户与第一类用户以及第二类用户的第二关联参数,另一方面构建单部图谱,在单部图谱的基础上,计算用户与第一类用户以及第二类用户的第一关联参数,并且确定用户对应的ID节点到中介节点的距离,根据第一关联参数,第二关联参数,以及中介距离计算逾期概率,从而提高了逾期概率的计算的准确性,下面将结合附图对本发明中一种逾期概率计算方法、装置、电子设备及计算机存储介质进一步阐述。
实施例一
如图2所示,一种逾期概率计算方法,该方法包括:
S21、根据申请贷款的用户的历史行为数据构建原始图谱。
在本步骤中,贷款平台对应的服务器可以从数据源中获取用户的历史行为数据,如在特定设备或网络中登录,参加营销活动记录等,并从历史行为数据中抽取实体、实体属性数据以及关系数据,对实体属性数据进行筛选与处理,并利用处理过的实体属性数据以及关系数据构建原始图谱,原始图谱包括ID节点以及非ID节点,ID节点即为当前用户以及其他用户的身份信息,非ID节点为网络节点或者设备节点等。
S22、根据原始图谱中与预设非ID节点连接的ID节点构建单部图谱。
在本步骤中,预设非ID节点为连接两个或两个以上的ID节点的非ID节点,也即是,在进行构建单部图谱时,需要将与预设非ID节点连接的ID节点进行连接。
S23、根据单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数,其中第一类ID节点为无逾期或者在第一逾期时间内还款的用户的ID,第二类ID节点为在第二逾期时间内未还款的用户的ID。
S24、根据原始图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点的第二关联参数。
在以上步骤中,第一类ID节点对应的用户没有发生过逾期,或者,在第一逾期时间内还款,第一逾期时间可以设置为3天,当然也可以设置为其他时间,因此。第二类ID节点对应的第一类用户具有相对较好的信用,而第二类节点对应的第二类用户在第二逾期时间内未还款,通常,第二逾期时间大于第一逾期时间,因此,第二类ID节点对应的用户信用相对较差,根据第一关联参数、第二关联参数可以量化了当前用户与第一类用户以及第二类用户的关联性,从而为准确计算出当前用户的逾期概率提供了依据。
S25、根据单部谱图确定用于传播逾期风险的中介节点,并计算用户ID节点到中介节点的中介距离。
在本步骤中,根据单部图可以确定传播逾期风险的中介节点,通过中介距离的计算,量化了当前用户与该中介节点的关联性。
S26、根据第一关联参数,第二关联参数以及中介距离计算得到用户的逾期概率。
在本发明中,基于用户的历史行为数据根据原始图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点的第一关联参数,根据所述单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第二关联参数,根据单部谱图确定用于传播逾期风险的中介节点,并计算用户ID节点到中介节点的中介距离,由于第一类ID节点以及第二类ID节点的信用情况是已知的,将当前申请贷款的用户ID与第一类ID节点以及第二类ID节点的关联性量化,将用户ID与中介节点的关联性量化,从而能通过第一关联参数,第二关联参数以及中介距离准确计算用户的逾期概率,不仅为贷款平台的申请贷款时评估风险提供可靠的依据,使得贷款审批的结果更加准确,也提高了贷款平台的贷款审批的效率。
在一个较佳的实施方式中,S22、根据原始图谱中与预设非ID节点连接的ID节点构建单部图谱包括:
确定每一ID节点的邻居节点以及非邻居节点,其中,邻居节点与ID节点连接有相同的非ID节点,非邻居节点为与ID节点没有连接相同的非ID节点;
每一ID节点与非邻居节点之间的边权重为0;
每一ID节点与邻居节点之间的边权重通过以下方法计算:
确定ID节点与非ID节点之间的第一连接途径以及邻居节点与相同的非ID节点之间的第二连接途径;
根据第一连接途径与第二连接途径之间的时间覆盖度,非ID节点的度的对数,以及,ID节点与邻居节点共同连接的非ID节点的数量,计算得到ID节点与邻居节点之间的边权重;
根据每一ID节点以及对应的边权重构建单部图谱。
在本步骤中,对于单部图谱中某一ID节点,其他所有的ID节点分为两类,一类是邻居节点,也即是,ID节点与邻居节点连接有相同的非ID节点,另一类是非邻居节点,非邻居节点为与ID节点没有连接相同的非ID节点,而后,需要计算出ID节点与其他所有的ID节点的边权重。
对于ID节点与邻居节点之间的边权重的计算,参考图3,具体过程如下:
p为一个非ID节点,如IP或设备,而u,v为两个均与p相连的身份证节点,比如,id1,id2,那么,u与p之间具有的第一连接途径,v与p之间的第二连接途径,对于图谱中的每一对身份证节点u,v,每有一个共同使用的连接途径,也即是,每连接有相同的个非ID节点,两者之间的边权重增加第一连接途径与第二连接途径的时间覆盖度除以该连接途径的度的对数log|Γ(p)|,因此u与v之间的边权重为:
其中,p为u与v共同连接的非ID节点,Γ(u)∩(v)表示,u与v共同连接的非ID节点的集合,该集合中的数量为ID节点与邻居节点共同连接的非ID节点的数量,timeoverlap(u-p,v-p)为时间覆盖度,log|Γ(p)|表示p的度,也即是,p所连接的ID节点的数量。
时间覆盖度为u-p和v-p两条关系的时间向量的余弦相似度,其中时间向量以月为单位,当u-v在某月有登录操作时,在当月增加一个线性衰减核,特定时刻的时间向量值为:
其中T为用户所有登录、营销过的月份,Decay为一个衰减系数,表示一个月的登录产生的活跃影响完全消失的月份,可设置为2或3个月,t’表示实际登录的某一月份,ti表示一段时间内的实际月份,比如,在1-4月份内,用户只在2月份,3月份登录过,那么T为2月份,3月份,t’可以取2或3,ti可以为1,2,3,4,由此计算出上述的时间向量值为一个4维向量,同样的,再采用上述公式计算出v-p的时间向量值,对两个向量做余弦相似度得到上述时间覆盖度。
在一个较佳的实施方式中,根据单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数包括:
将重置系数θ作为重启随机游走概率;
以相同的ID节点到单部图谱与不同ID节点之间的边权重作为行,以不同的ID节点到相同的ID节点之间的边权重作为行得到邻接矩阵;
以每一ID节点的邻居节点中第一类ID节点数量的对数作为初始化向量,将初始向量归一化得到个性化向量;
对用户ID节点做个性化page rank计算第一类ID节点到用户ID节点以及用户ID节点的邻居节点的第一RP值;
同样的,计算得到第二类ID节点到用户ID节点以及用户ID节点的邻居节点的第二RP值;
将第一RP值以及第二RP值作为第一关联参数。
以上,采用个性化page rank计算得到第一关联参数,对于个性化page rank。目前现有技术中个性化PageRank算法表示为:
ri=(1-c)Mri-1+cv
其中v为用户的偏好向量(或个性化向量),|v|=1,v也被称为个性化PageRank向量(PPV),它反映了图中每个结点针对给定偏好向量的重要性,c为重启随机游走概率,通常情况下c为0.15,M为归一化后的邻接矩阵,ri-1为前一次迭代得到的PR值,ri为当前迭代得到的PR值。
在本发明中,将重置系数θ即为上述公式中的c。
进一步地,在邻接矩阵的计算过程中,以相同的ID节点到单部图谱与不同ID节点之间的边权重作为行,以不同的ID节点到相同的ID节点之间的边权重作为行得到邻接矩阵,将该邻接矩阵归一化后得到上述公式中的M,假设ID节点的数量为m,M为一个m*m的矩阵。
进一步地,以每一ID节点的邻居节点中第一类ID节点数量的对数作为初始化向量,将初始向量归一化得到个性化向量,那么个性化向量为一个m维的列向量。
在上述公式中的参数都确定之后,针对用户ID做个性化page rank计算直至结果收敛,得到第一类ID节点到用户ID节点的RP值,进一步地,为了使得更加反映出当前用户与第一类用户以及第二类用户的关联性,还要进一步计算第一类ID节点到所有邻居节点的PR值,并进一步计算邻居节点的平均PR值,以及加权平均PR值,将这些作为第一PR值。
进一步地,以每一ID节点的邻居节点中第二类ID节点数量的对数作为初始化向量,将初始向量归一化得到个性化向量,那么个性化向量为一个m维的列向量。
在上述公式中的参数都确定之后,针对用户ID做个性化page rank计算直至结果收敛,得到第二类ID节点到用户ID节点的RP值,进一步地,为了使得第二关联参数更加反映出当前用户与第一类用户以及第二类用户的关联性,还要进一步计算第二类ID节点到所有邻居节点的PR值,并进一步计算邻居节点的平均PR值,以及加权平均PR值,将这些作为第二PR值。
在一个较佳的实施方式中,根据原始图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点的第二关联参数包括:
根据第一类ID节点的风险/信用传播系数以及与第一类ID节点所连接的非ID节点所连接的ID节点数量得到第一类ID节点到用户ID节点以及用户ID节点的邻居节点的第一风险/信用传播值;
根据第二类ID节点的风险/信用传播系数以及第二类ID节点所连接的非ID节点所连接的ID节点数量得到第二类ID节点到用户ID节点以及邻居节点的第二风险/信用传播值;
将第一风险/信用传播值以及第二风险/信用传播值作为第二关联参数。
上述步骤是基于广度优先搜索实现的,从第一类ID节点或第二类ID节点出发,单条传播途径将具备风险/信用系数0.99是一个时间衰减系数,Npath是指与第一类ID节点或第二类ID节点连接的预设非ID节点的数量,其中是观察时刻与ID节点-非ID节点一条关系时间的间隔天数,最近出现的关系会有更显著的影响。
从第一类ID节点出发,传播到用户ID节点的风险/信用系数为其中path表示,用户ID节点所连接的所有预设非ID节点数量,Nnodes表示与第一类ID节点连接的每一个预设非ID节点所连接的ID节点的数量,再用同样的方法计算出第一类ID节点传播到用户的每一邻居节点的邻居风险/信用系数,并得到最大邻居风险/系数,平均最大邻居风险/信用系数以及加权平均最大邻居风险/信用系数,将这些计算得到传播到用户ID节点以及邻居节点的风险/信用系数作为第一风险/信用传播值。
从第二类ID节点出发,采用上述同样的方法,得到第二类ID节点传播到用户ID节点的风险/信用系数,传播到邻居节点的邻居风险/信用系数,并得到最大邻居风险/系数,平均最大邻居风险/信用系数以及加权平均最大邻居风险/信用系数,将这些计算得到传播到用户ID节点以及邻居节点的风险/信用系数作为第二风险/信用传播值。
在本实施例中,原始图谱为无向图,为防止传播方向冲突(如风险/信用回传到出发种子),采用指定层数并逐层传播的方式,同时为提高计算效率,减少意义有限的小数计算,借鉴beam search的beam思想,设置一个最小信号阈值,当传导风险小于该阈值,便停止传播。
在一个较佳的实施方式中,根据单部谱图确定用于传播逾期风险的中介节点包括:
以相同的ID节点的邻居节点数,邻居节点对应用户的贷款用户比例以及逾期用户比例为行,以不同ID节点的邻居节点数,或贷款用户比例,或逾期用户比例为列,构建原始矩阵;
对原始矩阵零均值化处理以及协方差计算得到协方差矩阵;
计算协方差矩阵的特征值以及特征向量;
将协方差矩阵的特征向量单位化得到单位化特征向量;
取前k大的特征值对应的单位化特征向量;
将k个特征值与对应的单位化特征向量的乘积之和作为相应的ID节点的中介指数;
将所述中介指数从高到低排列,并取前l个中介指数对应的ID节点作为中介节点。
在本实施例中,使用单部图谱的结构计算各节点的中介指数,确定若干个中介节点。中介节点的特征为:连接途径与通过途径连接的用户数量多,邻近群体中贷款用户占比高,邻近贷款用户中逾期占比高,因此对每个ID节点计算三个指标:邻居节点数,邻居节点对应用户的贷款用户比例以及逾期用户比例,因此以相同的ID节点的邻居节点数,邻居节点对应用户的贷款用户比例以及逾期用户比例为行,以不同ID节点的邻居节点数,或贷款用户比例,或逾期用户比例为列,构建原始矩阵,并采用应用主成分分析法(PCA)对每个ID节点计算中介嫌疑指数。
计算过程如下:
(1)零均值化。对于原始矩阵M,假设ID节点的数量为m,那么M为一个m*3的矩阵,对每一列的每一个元素,减去该列的均值,从而每列均值达到0.记零均值化后矩阵为X;
(3)求出矩阵C的特征值和特征向量Cβi=λiβii=1,2,…,n;
(5)取前k大的特征值对应的单位化特征向量,此步骤得到PCA的降维矩阵,该降维矩阵为m*k的矩阵;
(6)计算k个特征值与对应的单位化特征向量的乘积之和得到一个m维的列向量,将该列向量中每个值作为对应于该值的ID节点的中介指数,反映每行(样本)整体数据量级的指标,将中介指数从高到低排序后,取前l个,比如Top20作为中介节点。
在一个较佳的实施方式中,计算用户ID节点到中介节点的中介距离包括:
从用户ID节点以及中介节点分别出发逐层遍历;
将首次相遇时的已遍历层数之和作为用户ID节点到中介节点的中介距离。
在本发明中,用户ID节点到中介节点的最短路径作为中介距离,使用基于广度优先搜索的方法,采用Dijkdtra算法,从用户ID节点以及中介节点分别出发逐层遍历,首次相遇时记录已遍历层数之和,其中,从该节点到该节点的邻居节点为一层,主要过程如下:
步骤1、对于单部图谱中的用户ID节点,设置其为起始节点src,遍历每一个节点;
步骤2、对于单部图谱中的中介节点,设置其为终止节点dst,遍历每一个节点;
步骤3、初始化节点集forward为src,初始化节点集reverse为dst,遍历层数n_src和n_dst分别为0;
步骤4、若forward数量小于等于reverse,则进行步骤5,反之则进行步骤6,若forward和reverse只要有一个为空,则表示src无法通过任何一条路径与dst连接,返回10000,也即是若用户ID节点无法达到中介节点,则将中介距离记为10000;
步骤5、从src向外做一层遍历,记录forward为当前层节点,更新已遍历层数为n_src,而后继续步骤7;
步骤6、从dst向外做一层遍历,记录reverse为当前层节点,更新已遍历层数为n_dst,而后继续步骤7;
步骤7、判断forward和reverse是否有交集,若有则返回n_src+n_dst为src到dst的最短路径,即为中介距离,若无则继续步骤4。
在本发明中,通过上述方法能够更加快速确定用户ID节点到中介节点的中介距离,并且优化了算法,对于用户ID节点无法达到中介节点的情况下,将中介距离记为1000。
在一个较佳的实施方式中,S26、根据第一关联参数,第二关联参数以及中介距离计算得到用户的逾期概率包括:
将第一关联参数,第二关联参数以及中介距离输入至逻辑回归训练模型中,计算得到用户的逾期概率。
在本实施例中,提取第一关联参数,第二关联参数以及中介距离后,使用逻辑回归训练模型中,逻辑回归是一种用于分类的训练模型。
本发明中对于逻辑回归模型的训练的过程为:按时间分割数据集,对于每个月份Y,使用Y之前六个月,即[Y-6,Y)数据构建图,并用这六个月的欠贷与还款用户作为原始谱图计算的第一类用户以及第二类用户,计算[M-6,M]有行为的用户的特征,并作为训练集,使用月份Y的用户ID节点作为测试集。在训练与测试过程均剔除孤立节点或偏僻节点,比如使用2020年全部12个月分别作为测试集,测得模型达到平均0.691的auc,以及0.381的ks.auc和ks的标准差分别为0.135和0.215。
实施例二
如图4所示,本发明提供了一种逾期概率的计算装置,该装置包括:
第一构建模块41,用于根据申请贷款的用户的历史行为数据构建原始图谱;
第二构建模块42,用于根据原始图谱中与预设非ID节点连接的ID节点构建单部图谱;
第一关联参数计算模块43,用于根据单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数,其中第一类ID节点为无逾期或者在第一逾期时间内还款的用户的ID,第二类ID节点为在第二逾期时间内未还款的用户的ID;
第二关联参数计算模块44,用于根据原始图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点的第二关联参数;
中介距离计算模块45,用于根据单部谱图确定用于传播逾期风险的中介节点,并计算用户ID节点到中介节点的中介距离;
逾期概率计算模块46,用于根据第一关联参数,第二关联参数以及中介距离计算得到用户的逾期概率。
在一个较佳的实施方式中,第二构建模块包括:
确定单元,用于确定每一ID节点的邻居节点以及非邻居节点,其中,邻居节点与ID节点连接有相同的非ID节点,非邻居节点为与ID节点没有连接相同的非ID节点;
边权重计算单元,用于每一ID节点与非邻居节点之间的边权重为0;每一ID节点与邻居节点之间的边权重通过以下方法计算:确定ID节点与非ID节点之间的第一连接途径以及邻居节点与相同的非ID节点之间的第二连接途径;根据第一连接途径与第二连接途径之间的时间覆盖度,非ID节点的度的对数,以及,ID节点与邻居节点共同连接的非ID节点的数量,计算得到ID节点与邻居节点之间的边权重;
构建单元,用于根据每一ID节点以及对应的边权重构建单部图谱。
在一个较佳的实施方式中,第一关联参数计算模块43包括:
重置系数设定单元,用于将重置系数θ作为重启随机游走概率;
邻接矩阵设定单元,用于以相同的ID节点到单部图谱与不同ID节点之间的边权重作为行,以不同的ID节点到相同的ID节点之间的边权重作为行得到邻接矩阵;
个性化向量设定单元,用于以每一ID节点的邻居节点中第一类ID节点数量的对数作为初始化向量,将初始向量归一化得到个性化向量;
第一计算单元,用于对用户ID节点做个性化page rank计算第一类ID节点到用户ID节点以及用户ID节点的邻居节点的第一RP值;
第二计算单元,用于重复上述步骤,计算得到第二类ID节点到用户ID节点以及用户ID节点的邻居节点的第二RP值;
关联参数确定单元,用于将第一RP值以及第二RP值作为第一关联参数。
在一个较佳的实施方式中,第二参数计算模块44包括:
第一风险/信用传播值确定单元,用于根据第一类ID节点的风险/信用传播系数以及与第一类ID节点所连接的非ID节点所连接的ID节点数量得到第一类ID节点到用户ID节点以及用户ID节点的邻居节点的第一风险/信用传播值;
第二风险/信用传播值确定单元,用于根据第二类ID节点的风险/信用传播系数以及第二类ID节点所连接的非ID节点所连接的ID节点数量得到第二类ID节点到用户ID节点以及邻居节点的第二风险/信用传播值;
第一关联参数确定单元,用于将第一风险/信用传播值以及第二风险/信用传播值作为第一关联参数。
在一个较佳的实施方式中,中介距离计算模块45还包括中介节点确定单元,用于以相同的ID节点的邻居节点数,邻居节点对应用户的贷款用户比例以及逾期用户比例为行,以不同ID节点的邻居节点数,或贷款用户比例,或逾期用户比例为列,构建原始矩阵;对原始矩阵零均值化处理以及协方差计算得到协方差矩阵;计算协方差矩阵的特征值以及特征向量;将协方差矩阵的特征向量单位化得到单位化特征向量取前k大的特征值对应的单位化特征向量;将k个特征值与对应的单位化特征向量的乘积之和作为相应的ID节点的中介指数;将所述中介指数从高到低排列,并取前l个中介指数对应的ID节点作为中介节点。
在一个较佳的实施方式中,中介距离计算模块45还包括中介距离计算单元,用于从用户ID节点以及中介节点分别出发逐层遍历;将首次相遇时的已遍历层数之和作为用户ID节点到中介节点的中介距离。
在一个较佳的实施方式中,逾期概率计算模块46还用于将第一关联参数,第二关联参数以及中介距离输入至逻辑回归训练模型中,计算得到所述用户的逾期概率。
本实施例所能实现的技术效果请参照实施例一中的描述,此处不再赘述。
实施例三
本发明还提供了一种电子设备,其特征在于,包括:
一个或多个处理器;以及与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行如前所述的方法,所能实现的技术效果请参照如前的描述,此处不再赘述。
其中,图5示例性的展示出了电子设备的系架构,具体可以包括处理器410,视频显示适配器511,磁盘驱动器512,输入/输出接口513,网络接口514,以及存储器520。上述处理器510、视频显示适配器511、磁盘驱动器512、输入/输出接口513、网络接口514,与存储器520之间可以通过通信总线530进行通信连接。
其中,处理器510可以采用通用的CPU(Central Processing Unit,中央处理器)、微处理器、应用专用集成电路(Application Specific Integrated Circuit,ASIC)、或者一个或多个集成电路等方式实现,用于执行相关程序,以实现本发明所提供的技术方案。
存储器520可以采用ROM(Read Only Memory,只读存储器)、RAM(Random AccessMemory,随机存取存储器)、静态存储设备,动态存储设备等形式实现。存储器520可以存储用于控制计算机系统500运行的操作系统521,用于控制计算机系统500的低级别操作的基本输入输出系统(BIOS)。另外,还可以存储网页浏览器523,数据存储管理系统524,以及设备标识信息处理系统525等等。上述设备标识信息处理系统525就可以是本发明实施例中具体实现前述各步骤操作的应用程序。总之,在通过软件或者固件来实现本发明所提供的技术方案时,相关的程序代码保存在存储器520中,并由处理器510来调用执行。
输入/输出接口513用于连接输入/输出模块,以实现信息输入及输出。输入输出/模块可以作为组件配置在设备中(图中未示出),也可以外接于设备以提供相应功能。其中输入设备可以包括键盘、鼠标、触摸屏、麦克风、各类传感器等,输出设备可以包括显示器、扬声器、振动器、指示灯等。
网络接口514用于连接通信模块(图中未示出),以实现本设备与其他设备的通信交互。其中通信模块可以通过有线方式(例如USB、网线等)实现通信,也可以通过无线方式(例如移动网络、WIFI、蓝牙等)实现通信。
总线530包括一通路,在设备的各个组件(例如处理器510、视频显示适配器511、磁盘驱动器512、输入/输出接口513、网络接口514,与存储器520)之间传输信息。
需要说明的是,尽管上述设备仅示出了处理器510、视频显示适配器511、磁盘驱动器512、输入/输出接口513、网络接口514,存储器520,总线530等,但是在具体实施过程中,该设备还可以包括实现正常运行所必需的其他组件。此外,本领域的技术人员可以理解的是,上述设备中也可以仅包含实现本发明方案所必需的组件,而不必包含图中所示的全部组件。
实施例四
本发明还保护一种计算机存储介质,用于执行实施例一中的逾期概率计算方法。
本发明的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置从网络上被下载和安装,或者从存储器被安装,或者从ROM被安装。在该计算机程序被处理器执行时,执行本发明的实施例的方法中限定的上述功能。
需要说明的是,本发明的实施例的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明的实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(Radio Frequency,射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述服务器中所包含的;也可以是单独存在,而未装配入该服务器中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该服务器执行时,使得该服务器:响应于检测到终端的外设模式未激活时,获取终端上应用的帧率;在帧率满足息屏条件时,判断用户是否正在获取终端的屏幕信息;响应于判断结果为用户未获取终端的屏幕信息,控制屏幕进入立即暗淡模式。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明的实施例的操作的计算机程序代码,程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统或系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上对本发明所提供的逾期概率计算方法、装置、电子设备及计算机存储介质,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处。综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种逾期概率计算方法,其特征在于,所述方法包括:
根据申请贷款的用户的历史行为数据构建原始图谱;
根据所述原始图谱中与预设非ID节点连接的ID节点构建单部图谱;
根据所述单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数,其中所述第一类ID节点为无逾期或者在第一逾期时间内还款的用户的ID,所述第二类ID节点为在第二逾期时间内未还款的用户的ID;
根据所述原始图谱分别计算所述第一类ID节点以及所述第二类ID节点与所述用户ID节点的第二关联参数;
根据所述单部谱图确定用于传播逾期风险的中介节点,并计算所述用户ID节点到所述中介节点的中介距离;
根据所述第一关联参数,所述第二关联参数以及所述中介距离计算得到用户的逾期概率。
2.根据权利要求1所述的方法,其特征在于,所述根据所述原始图谱中与预设非ID节点连接的ID节点构建单部图谱包括:
确定每一所述ID节点的邻居节点以及非邻居节点,其中,所述邻居节点与所述ID节点连接有相同的非ID节点,所述非邻居节点为与所述ID节点没有连接相同的非ID节点;
每一所述ID节点与所述非邻居节点之间的边权重为0;
每一所述ID节点与所述邻居节点之间的边权重通过以下方法计算:
确定所述ID节点与所述非ID节点之间的第一连接途径以及所述邻居节点与相同的所述非ID节点之间的第二连接途径;
根据所述第一连接途径与所述第二连接途径之间的时间覆盖度,所述非ID节点的度的对数,以及,所述ID节点与所述邻居节点共同连接的所述非ID节点的数量,计算得到所述ID节点与所述邻居节点之间的边权重;
根据每一所述ID节点以及对应的所述边权重构建所述单部图谱。
3.根据权利要求2所述的方法,其特征在于,根据单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数包括:
将重置系数θ作为重启随机游走概率;
以相同的ID节点到单部图谱与不同ID节点之间的边权重作为行,以不同的ID节点到相同的ID节点之间的边权重作为行得到邻接矩阵;
以每一所述ID节点的所述邻居节点中所述第一类ID节点数量的对数作为初始化向量,将所述初始向量归一化得到个性化向量;
对所述用户ID节点做个性化page rank计算所述第一类ID节点到所述用户ID节点以及所述用户ID节点的所述邻居节点的第一RP值;
同样的,计算得到所述第二类ID节点到所述用户ID节点以及所述用户ID节点的所述邻居节点的第二RP值;
将所述第一RP值以及所述第二RP值作为第一关联参数。
4.根据权利要求3所述的方法,其特征在于,所述根据原始图谱分别计算所述第一类ID节点以及第所述二类ID节点与所述用户ID节点的第二关联参数包括:
根据所述第一类ID节点的风险/信用传播系数以及与所述第一类ID节点所连接的非ID节点所连接的ID节点数量得到所述第一类ID节点到所述用户ID节点以及所述用户ID节点的所述邻居节点的第一风险/信用传播值;
根据所述第二类ID节点的风险/信用传播系数以及所述第二类ID节点所连接的非ID节点所连接的ID节点数量得到所述第二类ID节点到所述用户ID节点以及所述邻居节点的第二风险/信用传播值;
将所述第一风险/信用传播值以及所述第二风险/信用传播值作为第二关联参数。
5.根据权利要求1所述的方法,其特征在于,所述根据单部谱图确定用于传播逾期风险的中介节点包括:
以相同的ID节点的邻居节点数,所述邻居节点对应用户的贷款用户比例以及逾期用户比例为行,以不同ID节点的邻居节点数,或贷款用户比例,或逾期用户比例为列,构建原始矩阵;
对所述原始矩阵零均值化处理以及协方差计算得到协方差矩阵;
计算所述协方差矩阵的特征值以及特征向量;
将所述协方差矩阵的特征向量单位化得到单位化特征向量;
取前k大的特征值对应的所述单位化特征向量;
将k个特征值与对应的所述单位化特征向量的乘积之和作为相应的ID节点的中介指数;
将所述中介指数从高到低排列,并取前l个所述中介指数对应的所述ID节点作为中介节点。
6.根据权利要求5所述的方法,其特征在于,所述计算用户ID节点到所述中介节点的中介距离包括:
从所述用户ID节点以及所述中介节点分别出发逐层遍历;
将首次相遇时的已遍历层数之和作为所述用户ID节点到所述中介节点的中介距离。
7.根据权利要求1至6中任一项所述的方法,其特征在于,所述根据所述第一关联参数,所述第二关联参数以及所述中介距离计算得到所述用户的逾期概率包括:
将所述第一关联参数,所述第二关联参数以及所述中介距离输入至逻辑回归训练模型中,计算得到所述用户的逾期概率。
8.一种逾期概率计算装置,其特征在于,所述装置包括:
第一构建模块,用于根据申请贷款的用户的历史行为数据构建原始图谱;
第二构建模块,用于根据所述原始图谱中与预设非ID节点连接的ID节点构建单部图谱;
第一关联参数计算模块,用于根据所述单部图谱分别计算第一类ID节点以及第二类ID节点与用户ID节点之间的第一关联参数,其中所述第一类ID节点为无逾期或者在第一逾期时间内还款的用户的ID,所述第二类ID节点为在第二逾期时间内未还款的用户的ID;
第二关联参数计算模块,用于根据所述原始图谱分别计算所述第一类ID节点以及所述第二类ID节点与所述用户ID节点的第二关联参数;
中介距离计算模块,用于根据所述单部谱图确定用于传播逾期风险的中介节点,并计算所述用户ID节点到所述中介节点的中介距离;
逾期概率计算模块,用于根据所述第一关联参数,所述第二关联参数以及所述中介距离计算得到用户的逾期概率。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;以及
与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行如权利要求1~7中任一所述的方法。
10.一种计算机存储介质,其特征在于,其上存储有计算机程序,其中,该程序被处理器执行时实现如权利要求1~7中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111073758.4A CN113935820A (zh) | 2021-09-14 | 2021-09-14 | 逾期概率计算方法、装置、电子设备及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111073758.4A CN113935820A (zh) | 2021-09-14 | 2021-09-14 | 逾期概率计算方法、装置、电子设备及计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113935820A true CN113935820A (zh) | 2022-01-14 |
Family
ID=79275806
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111073758.4A Pending CN113935820A (zh) | 2021-09-14 | 2021-09-14 | 逾期概率计算方法、装置、电子设备及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113935820A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116452323A (zh) * | 2023-04-28 | 2023-07-18 | 广州市良策网络技术有限公司 | 风险评估方法、系统、设备及存储介质 |
-
2021
- 2021-09-14 CN CN202111073758.4A patent/CN113935820A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116452323A (zh) * | 2023-04-28 | 2023-07-18 | 广州市良策网络技术有限公司 | 风险评估方法、系统、设备及存储介质 |
CN116452323B (zh) * | 2023-04-28 | 2024-01-30 | 广州市良策网络技术有限公司 | 风险评估方法、系统、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210224673A1 (en) | Optimizing automated modeling algorithms for risk assessment and generation of explanatory data | |
US11893493B2 (en) | Clustering techniques for machine learning models | |
US20230100730A1 (en) | Evaluation of modeling algorithms with continuous outputs | |
US11861464B2 (en) | Graph data structure for using inter-feature dependencies in machine-learning | |
US20200090268A1 (en) | Method and apparatus for determining level of risk of user, and computer device | |
US9104963B2 (en) | Self organizing maps for visualizing an objective space | |
US20230274332A1 (en) | Method and apparatus for generating recommendation reason, and storage medium | |
WO2020005895A1 (en) | Systems and methods of windowing time series data for pattern detection | |
EP3965050A1 (en) | Systems and methods for deriving rating for properties | |
CN110490304B (zh) | 一种数据处理方法及设备 | |
US11410111B1 (en) | Generating predicted values based on data analysis using machine learning | |
CN113934851A (zh) | 用于文本分类的数据增强方法、装置及电子设备 | |
CN113935820A (zh) | 逾期概率计算方法、装置、电子设备及计算机存储介质 | |
CN114417174A (zh) | 内容推荐方法、装置、设备及计算机存储介质 | |
CN117934154A (zh) | 交易风险预测方法、模型训练方法、装置、设备、介质和程序产品 | |
CN110033165A (zh) | 逾期借款催收方式的推荐方法、装置、介质、电子设备 | |
KR102284440B1 (ko) | 딥러닝 모델 거래중개서버에 의해서 수행되는 딥러닝 모델 거래를 중개하는 방법 | |
US20220253690A1 (en) | Machine-learning systems for simulating collaborative behavior by interacting users within a group | |
CN109816234A (zh) | 服务准入方法、服务准入装置、电子设备及存储介质 | |
AU2021467490A1 (en) | Power graph convolutional network for explainable machine learning | |
CN110163482B (zh) | 确定活动方案的安全方案数据的方法、终端设备及服务器 | |
CN113743906A (zh) | 一种确定业务处理策略的方法和装置 | |
US11783206B1 (en) | Method and system for making binary predictions for a subject using historical data obtained from multiple subjects | |
KR102311108B1 (ko) | 딥러닝 모델 거래중개서버에 의해서 수행되는 딥러닝 모델 거래를 중개하는 방법 | |
KR102639021B1 (ko) | 오픈마켓 게시 제품 평점 개선을 위한 방법 및 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |