CN111507543A - 用于预测实体间业务关系的模型训练方法及装置 - Google Patents
用于预测实体间业务关系的模型训练方法及装置 Download PDFInfo
- Publication number
- CN111507543A CN111507543A CN202010466497.1A CN202010466497A CN111507543A CN 111507543 A CN111507543 A CN 111507543A CN 202010466497 A CN202010466497 A CN 202010466497A CN 111507543 A CN111507543 A CN 111507543A
- Authority
- CN
- China
- Prior art keywords
- entity
- business
- graph
- entities
- relationship
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
- G06N3/084—Backpropagation, e.g. using gradient descent
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0635—Risk analysis of enterprise or organisation activities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/067—Enterprise or organisation modelling
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Theoretical Computer Science (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Game Theory and Decision Science (AREA)
- Marketing (AREA)
- Development Economics (AREA)
- Operations Research (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Mathematical Physics (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Molecular Biology (AREA)
- Educational Administration (AREA)
- General Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Computational Linguistics (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本说明书实施例提供一种用于预测实体间业务关系的模型训练方法及装置,利用采集到的实体基础数据构建基础关系图谱,从而利用实体间已知的上下游业务关系,训练包含第一图神经网络和第一分类网络的业务关系预测模型,用于挖掘未知的上下游业务关系。进一步地,本说明书实施例还提供一种实体业务关系图谱的构建方法及装置,通过利用训练后的业务关系预测模型,挖掘出未知的上下游业务关系,进而结合已知的实体间业务关系,构建实体业务关系图谱。更进一步地,本说明书实施例还提供一种实体业务风险的预测方法及装置,基于构建出的实体业务关系图谱,实现对实体节点进行精准地业务风险预测。
Description
技术领域
本说明书一个或多个实施例涉及计算机技术领域,尤其涉及一种用于预测实体间业务关系的模型训练方法及装置,一种实体业务关系图谱的构建方法及装置,一种实体业务风险的预测方法及装置。
背景技术
随着社会的发展和科技的进步,近年来企业、机构、商户等实体的数量猛增。相应地,衍生出针对这些实体的多种分析需求,如对实体信息进行管理,包括划分实体所涉及的领域或行业类别等,又例如,对实体进行业务分析,包括确定实体的业务风险等。为了满足这些分析需求,需要采集实体自身的信息数据,如成立时间、实体规模、招聘信息等。然而,对实体信息进行全面采集通常较为困难,同时,难以保证采集到的数据能够直观、有效地反映实体的真实情况。
因此,迫切需要一种方案,能够利用采集到的有限的实体数据,实现对实体的精准分析,从而满足针对实体的多种分析需求。
发明内容
本说明书一个或多个实施例描述了一种用于预测实体间业务关系的模型训练方法及装置,利用采集到的实体基础数据构建基础关系图谱,从而利用实体间已知的上下游业务关系,训练包含第一图神经网络和第一分类网络的业务关系预测模型,用于挖掘未知的上下游业务关系。进一步地,本说明书一个或多个实施例还描述了一种实体业务关系图谱的构建方法及装置,通过利用训练后的业务关系预测模型,挖掘出未知的上下游业务关系,进而结合已知的实体间业务关系,构建实体业务关系图谱。更进一步地,本说明书一个或多个实施例还描述了一种实体业务风险的预测方法及装置,基于构建出的实体业务关系图谱,实现对实体节点进行精准的业务风险预测。
具体地,根据第一方面,提供一种用于预测实体间业务关系的模型训练方法,包括:获取预先构建的基础关系图谱,其中至少包括对应于多个实体的多个实体节点,以及实体节点之间存在交互关系时形成的连接边;基于上述多个实体中已知的实体间业务关系,获取多个训练样本,其中任意的第一训练样本包括第一实体、第二实体和对应的类别标签,该类别标签指示上述第一实体和上述第二实体之间的业务上下游关系;通过利用第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第一实体的第一特征向量和上述第二实体的第二特征向量;对上述第一特征向量和第二特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到分类预测结果;基于上述分类预测结果和类别标签,训练上述第一图神经网络和上述第一分类网络,训练后的上述第一图神经网络和第一分类网络构成业务关系预测模型,用于预测未知的实体间业务关系。
根据第二方面,提供一种实体业务关系图谱的构建方法,包括:获取业务关系预测模型,其基于上述第一方面提供的训练方法而得到,且包括上述训练后的第一图神经网络和第一分类网络;基于上述多个实体中未知的实体间业务关系,确定待预测业务关系的多个实体对,其中任意的第一实体对中包括第三实体和第四实体;通过利用上述第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第三实体的第三特征向量和上述第四实体的第四特征向量;对上述第三特征向量和第四特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到针对上述第一实体对的分类预测结果;基于上述多个实体中已知的实体间业务关系,以及得到的针对上述多个实体对的多个分类预测结果,构建实体业务关系图谱,用于表征上述多个实体之间的业务关系。
根据第三方面,提供一种实体业务风险的预测方法,包括:获取实体业务关系图谱,其基于上述第二方面提供的构建方法而得到,且用于表征多个实体之间的业务上下游关系;基于上述多个实体中已知的业务风险数据,获取多个训练样本,其中任意的第二训练样本中包括第五实体和对应的风险类别标签;通过利用第二图神经网络对上述实体业务关系图谱进行图嵌入处理,确定上述第五实体的第五特征向量;将上述第五特征向量输入第二分类网络中,得到针对上述第五实体的业务风险预测结果;基于上述业务风险预测结果和风险类别标签,训练上述第二图神经网络和第二分类网络,训练后的上述第二图神经网络和第二分类网络构成业务风险预测模型,用于预测未知的实体业务风险。
根据第四方面,提供一种用于预测实体间业务关系的模型训练装置,包括:基础图谱获取单元,配置为获取预先构建的基础关系图谱,其中至少包括对应于多个实体的多个实体节点,以及实体节点之间存在交互关系时形成的连接边;第一样本获取单元,配置为基于上述多个实体中已知的实体间业务关系,获取多个训练样本,其中任意的第一训练样本包括第一实体、第二实体和对应的类别标签,该类别标签指示上述第一实体和上述第二实体之间的业务上下游关系;第一向量确定单元,配置为通过利用第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第一实体的第一特征向量和上述第二实体的第二特征向量;第一向量融合单元,配置为对上述第一特征向量和第二特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到分类预测结果;关系模型训练单元,配置为基于上述分类预测结果和类别标签,训练上述第一图神经网络和上述第一分类网络,训练后的上述第一图神经网络和第一分类网络构成业务关系预测模型,用于预测未知的实体间业务关系。
根据第五方面,提供一种实体业务关系图谱的构建装置,包括:关系模型获取单元,配置为获取业务关系预测模型,其基于上述第四方面提供的训练装置而得到,且包括上述训练后的第一图神经网络和第一分类网络;实体对确定单元,配置为基于上述多个实体中未知的实体间业务关系,确定待预测业务关系的多个实体对,其中任意的第一实体对中包括第三实体和第四实体;第二向量确定单元,配置为通过利用上述第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第三实体的第三特征向量和上述第四实体的第四特征向量;第二向量融合单元,配置为对上述第三特征向量和第四特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到针对上述第一实体对的分类预测结果;关系图谱构建单元,配置为基于上述多个实体中已知的实体间业务关系,以及得到的针对上述多个实体对的多个分类预测结果,构建实体业务关系图谱,用于表征上述多个实体之间的业务关系。
根据第六方面,提供一种实体业务风险的预测装置,包括:关系图谱获取单元,配置为获取实体业务关系图谱,其基于上述第五方面的构建装置而得到,且用于表征多个实体之间的业务上下游关系;第二样本获取单元,配置为基于上述多个实体中已知的业务风险数据,获取多个训练样本,其中任意的第二训练样本中包括第五实体和对应的风险类别标签;第三向量确定单元,配置为通过利用第二图神经网络对上述实体业务关系图谱进行图嵌入处理,确定上述第五实体的第五特征向量;风险预测单元,配置为将上述第五特征向量输入第二分类网络中,得到针对上述第五实体的业务风险预测结果;风险模型训练的单元,配置为基于上述业务风险预测结果和风险类别标签,训练上述第二图神经网络和第二分类网络,训练后的上述第二图神经网络和第二分类网络构成业务风险预测模型,用于预测未知的实体业务风险。
根据第七方面,提供了一种计算机可读存储介质,其上存储有计算机程序,当上述计算机程序在计算机中执行时,令计算机执行上述第一方面或第二方面或第三方面的方法。
根据第八方面,提供了一种计算设备,包括存储器和处理器,上述存储器中存储有可执行代码,上述处理器执行上述可执行代码时,实现上述第一方面或第二方面或第三方面的方法。
综上,采用本说明书实施例披露的一种对企业间上下游关系进行预测的方法及装置,利用采集到的各实体的基础数据,构建基础关系图谱,再基于该基础关系图谱和已知的实体间业务关系,训练上述业务关系预测模型,用于对实体间未知的业务关系进行预测、挖掘。由此训练出的业务关系预测模型可以实现对实体间业务关系进行高效、准确地预测。再者,在本说明书实施例披露的实体业务关系图谱的构建方法及装置中,利用上述业务关系预测模型和基础关系图谱,实现对实体间未知业务关系的预测,再结合已知的业务关系,构建实体业务关系图谱,用于对实体的精准分析。另外,在本说明书实施例披露的实体业务风险的预测方法及装置中,通过上述构建的实体上下游图谱,引入与目标实体强相关的实体的数据,可以实现对目标实体的业务风险的精准预测,从而有效提高预测结果的准确度、可信度和可用性。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1示出根据一个实施例的用于预测实体间业务关系的模型训练方法的实施架构图;
图2示出本说明书实施例披露的用于预测实体间业务关系的模型训练方法流程图;
图3示出根据一个实施例的构建的基础关系图谱;
图4示出根据一个实施例的实体业务关系图谱的构建方法流程示意图;
图5示出根据一个实施例的基于图3中数据构建出的实体业务关系图谱;
图6示出根据一个实施例的实体业务风险的预测方法流程示意图;
图7示出本说明书实施例披露的用于预测实体间业务关系的模型训练装置结构图;
图8示出根据一个实施例的实体业务关系图谱的构建装置结构图;
图9示出根据一个实施例的实体业务风险的预测装置结构图。
具体实施方式
下面结合附图,对本说明书提供的方案进行描述。
如前所述,目前,对于实体信息进行全面采集通常较为困难,尤其是对规模较小(如实体中成员数量较少)的实体,能够采集到的实体基础数据更加有限。如何利用有限的实体基础数据,实现对实体的精准分析,无疑是一个挑战。
具体地,发明人发现,在对某个目标实体进行分析时,如果只利用该目标实体的自身数据,例如,实体规模(例如,10-50人)、招聘信息(如在招职位10个)、专利申请数量(如100个)、成立年限(如5年)等进行分析,则得到的分析结果具有较强的局限性,可信度和可用性不高。由此,提出通过引入与该目标实体相关联实体的数据,对该目标实体进行分析。在一种实施方式中,可以通过实体间交互数据,如实体之间的历史业务往来,实体关键成员(如企业主或机构领导或商户经营者)之间的好友关系等,初步判断出实体之间存在一定关联。然而,如果将与该目标实体进行过交互的实体,都作为分析该目标实体时引入的关联实体,会存在引入数据弱相关、数据有效性低和数据量过大等问题。
在另一种实施方式中,提出根据实体之间的业务上下游关系(以下或简称业务关系,具体可以包括供应关系、或物资流动关系或信息数据流动关系等),引入与目标实体存在强关联实体的数据。然而,采集到足量、可信的业务关系实际是十分困难的,而仅根据存在历史交互来判定两个实体之间存在业务关系,例如,如果存在实体A向实体B进行转账的历史记录,则判定实体A是实体B的上游实体,所得到的判定结果是存疑的。
基于以上观察和分析,发明人提出一种用于预测实体间业务关系的模型训练方法,在此方法中,利用采集到的各实体的基础数据,构建基础关系图谱,再基于该基础关系图谱和已知的实体间业务关系,对实体间未知的业务关系进行预测、挖掘。由此,可以根据已知的和预测出的实体间业务关系,确定目标实体的上游实体和/或下游实体,作为该目标实体的强关联实体,进而通过引入强关联实体的数据实现对目标实体的精准分析。
在一个实施例中,图1示出根据一个实施例的对实体间上下游关系进行预测的方法实施架构图,如图1所示,利用实体间已知的业务关系构建训练样本集,并结合上述基础关系图谱,训练第一图神经网络和第一分类网络,具体地,假定其中任意一个训练样本中包括第一实体和第二实体,以及包括指示第一实体和第二实体间业务关系的类别标签,基于此,将从基础关系图谱中获取的与第一实体相关的数据,以及与第二实体相关的数据,分别输入第一图神经网络中,得到第一实体的第一特征向量和第二实体的第二特征向量,再对两个向量进行融合处理,并将得到的融合向量输入第一分类网络中,得到分类预测结果,进而根据该分类预测结果和上述类别标签,训练上述第一图神经网络和第一分类网络。如此,利用上述训练样本集进行多轮迭代训练后,可以得到训练后的第一图神经网络和第一分类网络,构成业务关系预测模型,用于对实体间未知的业务关系进行预测式挖掘。
下面结合具体的实施例,对上述方法进行描述。
具体地,图2示出本说明书实施例披露的一种对企业间上下游关系进行预测的方法流程图,所述方法的执行主体可以为任何具有计算、处理能力的装置、设备或设备集群。如图2所示,所述方法包括以下步骤:
步骤S210,获取预先构建的基础关系图谱,其中至少包括对应于多个实体的多个实体节点,以及实体节点之间存在交互关系时形成的连接边;步骤S220,基于上述多个实体中已知的实体间业务关系,获取多个训练样本,其中任意的第一训练样本包括第一实体、第二实体和对应的类别标签,该类别标签指示上述第一实体和上述第二实体之间的业务上下游关系;步骤S230,通过利用第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第一实体的第一特征向量和上述第二实体的第二特征向量;步骤S240,对上述第一特征向量和第二特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到分类预测结果;步骤S250,基于上述分类预测结果和类别标签,训练上述第一图神经网络和上述第一分类网络,训练后的上述第一图神经网络和第一分类网络构成业务关系预测模型,用于预测未知的实体间业务关系。
针对以上步骤,首先需要说明的是,上述“第一实体”、“第一特征向量”等中的“第一”,“第二实体”、“第二特征向量”等中的“第二”,以及下文中的类似用语,仅为了描述的清楚性,用于区分同类事物,不具有排序等其他限定作用。
以上步骤具体如下:
首先,在步骤S210,获取预先构建的基础关系图谱。该基础关系图谱用于表征,可获取到的大量实体基础数据中存在的拓扑关系。为便于理解,下面先对上述基础关系图谱的构建进行介绍。
具体地,获取到的大量实体基础数据中至少涉及多个实体,具体包括各个实体的基础属性特征以及实体间的交互数据。
一方面,在一个实施例中,上述多个实体所属的实体类别包括企业类实体,相应地,获取的大量实体基础数据可以包括企业基础数据。在一个具体的实施例中,企业基础数据中包括企业的基础属性特征,具体可以包括企业规模(例如,500-1000人)、企业注册地址(如北京)、招聘信息(如在招职位100个)、注册资金(如5000万)、企业年利润(如1000万)、发生交易的企业数量(如128家)。在一个具体的实施例中,企业基础数据中包括企业间交互数据,具体可以包括交易数据,如订单创建时间、订单完成时间、订单金额等,还可以包括借款数据,如借款总金额、已还款总金额、借款时间等。
在另一个实施例中,上述多个实体所属的实体类别包括机构类实体,相应地,获取的大量实体基础数据可以包括机构基础数据。在一个具体的实施例中,机构基础数据中包括机构的基础属性特征,具体可以包括机构成立时间、机构类别、机构所在地。在一个具体的实施例中,机构基础数据中包括机构间交互数据,具体包括信息传递或信息共享数据,如信息传输时间、传输信息所占的存储空间等,还可以包括机构共同承办活动的活动数据,如活动举办时间、活动主题等。
在又一个实施例中,上述多个实体所属的实体类别包括商户类实体,相应地,获取的大量实体基础数据可以包括商户基础数据。在一个具体的实施例中,商户基础数据中包括商户的基础属性特征,具体可以包括商户开业时间、商户线下门店的数量、商户入驻电商平台的时间、商户注册的商标数量、商户年利润、商户经营的品牌数量等。在一个具体的实施例中,商户基础数据中包括商户间交互数据,具体可以包括资金往来数据,如支付金额、转账金额、支付次数或转账次数等,还可以包括线上联合营销的数据,具体可以包括促销活动的次数、促销活动的时间、促销活动涉及的线上活动数量等。
以上,对获取到的大量实体基础数据中涵盖的,多个实体中各个实体的基础属性特征,以及实体间的交互数据进行介绍。据此,可以确定与该多个实体对应的多个实体节点,并根据实体间交互数据,在产生过交互的实体所对应的实体节点之间建立连接边,进而构建出包含多个实体节点以及实体间具有交互关系时形成的连接边的基础关系图谱。同时,还可以将各个实体的基础属性特征确定为对应实体节点的节点特征,根据交互数据确定各条连接边的边特征,归入该基础关系图谱的数据内容中。
根据一个具体的实施例,在上述多个实体的实体类别主要包括企业类实体的情况下,可以建立企业基础关系图谱,其中包括对应于多个企业的多个企业节点,以及企业节点间存在交互关系时形成的连接边。此外,企业节点间的连接边对应的关系类型可以为交易关系或借贷关系,相应地,对应交易关系的连接边具有的边特征可以包括:交易金额、交易时间、交易满意度等,而对应借贷关系的连接边具有的边特征可以包括:借贷本金数额、已还金额、待还金额、还款年限等。
另一方面,在一个实施例中,上述大量实体基础数据中还可以包括与上述多个实体相关的实体成员的数据,具体包括实体成员之间的交互数据,实体成员与实体之间的关联数据。在一个具体的实施例中,实体成员的数据可以包括实体成员的基础属性特征,如性别、年龄等。在一个具体的实施例中,与企业实体相关的企业成员,可以是企业主、企业股东、企业投资人等,企业成员之间的交互数据可以包括企业成员之间的交易数据(如转账数据或支付数据)或社交数据(如是否为社交好友,或在社交平台上进行互动的次数)等。在另一个具体的实施例中,与机构实体相关的机构成员,可以是机构领导、机构负责人等,机构成员之间的交互数据可以包括社交数据。在又一个具体的实施例中,与商户实体相关的商户成员,可以是商户经营者、商户合伙人等,商户成员之间的交互数据可以包括交易数据或社交数据。据此,上述构建的基础关系图谱中还包括对应于多个实体成员的多个成员节点,以及,以下多种连接边中的至少一种:成员节点与实体节点之间存在关联关系时形成的连接边,成员节点之间存在交互关系时形成的连接边。
根据一个具体的实施例,上述企业基础关系图谱中还可以包括对应于多个企业成员的多个成员节点,成员节点与实体节点之间存在关联关系时形成的连接边、以及成员节点之间存在交互关系时形成的连接边。此外,在一个更具体的实施例中,其中关联关系可以包括从属关系,如某个成员就职于某家企业,相应的连接边的边特征可以包括:就职时长、职位等级、年收入等。在另一个更具体的实施例中,其中关联关系可以包括投资关系,如某个成员向某家企业进行投资,相应的连接边的边特征可以包括:投资时间、投资金额等。在一个更具体的实施例中,其中交互关系可以包括社交关系,相应的连接边的边特征可以包括:会话次数、会话时间段等。在另一个更具体的实施例中,其中交互关系可以包括交易关系,相应的连接边的边特征可以包括:交易次数、交易金额等。
示例性的,图3示出根据一个实施例的构建的基础关系图谱,其中包括与企业对应的企业节点(以圆圈示出)和与企业主对应的企业主节点(以方块示出),为便于说明,在圆圈和方块中示出节点编号;图中的连接边涉及的关系类型包括:交易关系、好友关系、企业主和企业之间的关联关系、转账关系(需知,图中对转账和交易进行区分,在其他实施方式中,还可以将转账归为交易)。由图3可知,其中节点3与节点4存在转账关系,图中表示转账关系的连接边带有箭头指向,由节点4指向节点3表示节点4曾向节点3转账;其中企业主A和企业主B之间存在好友关系和转账关系,其他内容可相应推知,不作赘述。
以上,对预先构建的基础关系图谱中涉及的多个实体,实体间的交互关系,以及相应包含的多个实体节点的节点特征,实体节点间存在交互关系时形成的连接边的边特征进行介绍。并且,对可能涉及的多个成员,成员间、成员与实体间的交互关系,以及响应包含的多个成员节点的节点特征,成员节点间存在交互关系或成员节点与实体节点间存在关联关系时形成的连接边的边特征进行介绍。
在执行步骤S210之前,之后,或同时,可以执行步骤S220,基于上述多个实体中已知的实体间业务关系,获取多个训练样本。
具体地,其中任意的第一训练样本包括第一实体、第二实体和对应的类别标签,该类别标签指示第一实体和第二实体之间的业务上下游关系。在一个实施例中,该类别标签指示第一实体和第二实体之间存在业务上下游关系,或者,不存在业务上下游关系。在另一个实施例中,该类别标签指示第一实体是第二实体的上游实体,或者,不是该第二实体的上游实体(包括第一实体是第二实体的下游实体以及两个实体之间不存在业务上下游关系的情况)。在又一个实施例中,该类别标签指示该第一实体是该第二实体的上游实体,或者,该第二实体是该第一实体的上游实体,或者,该第一实体和该第二实体之间不存在业务上下游关系。
在一种表示方式中,上述第一训练样本可以表示为(u,v,y),其中u、v和y分别表示上述第一实体、第二实体和业务类别标签。根据一个实施例,y∈{1,2,3},具体地,y=1表示第一实体是第二实体的上游实体,y=2表示第二实体是第一实体的上游实体,y=3表示第一实体和第二实体之间没有业务上下游关系。
由上,可以根据采集到的实体间业务关系,得到多个训练样本。针对其中任意的第一训练样本,在步骤S230,通过利用第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第一实体的第一特征向量和上述第二实体的第二特征向量。在一个实施例中,其中第一图神经网络可以采用以下中的任一种:图卷积神经网络(Graph ConvolutionalNetwork, 简称GCN),图注意力网络(Graph Attention Network,GAN),GraphSage,Geniepath等。
在一个实施例中,本步骤中可以包括:首先,针对上述第一实体和第二实体中的每个实体,从上述基础关系图谱中,确定对应的实体节点与其若干邻居节点;然后,将该对应的实体节点和若干邻居节点的节点特征,输入上第一图神经网络中,得到该每个实体的特征向量。
在一个具体的实施例中,可以从基础关系图谱的邻接信息中,确定上述对应的实体节点与其若干邻居节点。其中邻接信息可以体现为多种形式,如邻接矩阵,邻接表等,具体与基础关系图谱的存储方式有关。
在一个具体的实施例中,上述若干邻居节点,可以是上述对应的实体系节点的T阶以内的邻居节点,其中T为正整数,可以为超参,人为预先设定,如可设定为1或5等。
在一个具体的实施例中,可以通过第一图神经网络,对该对应的实体节点和若干邻居节点的节点特征,进行多级特征聚合,从而得到上述每个实体对应的特征向量。在一个例子中,假定上述第一实体对应于图3中的节点2,在针对节点2进行2级特征聚合的实施方式中,可以聚合与节点2相连接的一阶邻居节点1、3的特征,以及二阶邻居节点4、6和7的特征,从而得到节点2的特征向量。
在另一个实施例中,本步骤中可以包括:首先,针对上述第一实体和第二实体中的每个实体,从上述基础关系图谱中,确定对应的实体节点与其若干邻居节点,以及该对应的实体节点与其若干邻居节点之间的若干连接边;然后,将该对应的实体节点和若干邻居节点的节点特征,以及该若干连接边的边特征,输入上第一图神经网络中,得到该每个实体的特征向量。换言之,从基础关系图谱中,确定对应于第一实体的第一实体节点,该第一实体节点的若干第一邻居节点,以及该第一实体节点与若干第一邻居节点之间的若干第一连接边;然后,将该第一实体节点的节点特征、若干第一邻居节点的节点特征以及若干第一连接边的边特征,共同输入上述第一图神经网络中,得到上述第一特征向量。同理,可以得到第二特征向量。
由上,可以得到上述第一实体的第一特征向量和第二实体的第二特征向量。据此,在步骤S240,对所述第一特征向量和第二特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到分类预测结果。在一个实施例中,其中第一分类网络可以包括一个全连接层和一个Softmax层。在另一个实施例中,第一分类网络可以采用以下神经网络实现:深度神经网络(DeepNeuralNetworks,简称DNN)、卷积神经网络(ConvolutionalNeuralNetworks,简称CNN)。
具体地,若分类任务中需要预测的实体间业务上下游关系,是具体的业务上游关系或业务下游关系,则在上述融合处理时,需要使得融合向量可以体现第一特征向量和第二特征向量的相对顺序;若仅需预测是否存在业务上下游关系,而无需对业务上游关系和业务下游关系进行区分,则在上述融合处理时,可以不考虑两个特征向量的相对顺序。
在一个实施例中,分类任务中需要预测第一实体是否为第二实体的上游实体,可以理解,上述类别标签指示第一实体是否为第二实体的上游实体的实际情况。相应地,在本步骤中,上述融合处理可以包括:按照预定顺序,对第一特征向量和第二特征向量进行拼接,例如,第一特征向量在前或第二特征向量在前。由此可以将得到的拼接向量输入上述第一分类网络,得到上述分类预测结果,为针对第一实体是否为第二实体的上游实体的预测结果。
在另一个实施例中,分类任务中需要预测第一实体和第二实体之间是否存在业务上下游关系。相应地,在本步骤中,上述融合处理可以包括:拼接处理、相加处理、相减处理或对位相乘处理等。由此可以将得到的融合向量输入上述第一分类网络,得到上述分类预测结果,为针对第一实体和第二实体之间是否存在业务上下游关系的预测结果。
以上,可以得到针对第一实体和第二实体的分类预测结果。然后,在步骤S250,基于上述分类预测结果和类别标签,训练上述第一图神经网络和第一分类网络。具体可以利用反向传播法等实现训练,对现有技术不作赘述。
如此,利用上述多个训练样本,对上述第一图神经网络和第一分类网络进行多次迭代训练,直到迭代收敛或达到预定的迭代次数,可以得到训练后的上述第一图神经网络和第一分类网络,构成用于预测未知的实体间业务关系的业务关系预测模型。
综上,采用本说明书实施例披露的一种对企业间上下游关系进行预测的方法,利用采集到的各实体的基础数据,构建基础关系图谱,再基于该基础关系图谱和已知的实体间业务关系,训练上述业务关系预测模型,用于对实体间未知的业务关系进行预测、挖掘。由此训练出的业务关系预测模型可以实现对实体间业务关系进行高效、准确地预测。
以上,在得到业务关系预测模型后,可以基于该业务关系预测模型和上述基础关系图谱,对未知的实体间业务关系进行预测。在一种应用场景下,预测出的业务上下游关系,可以反映两个实体之间未来建立业务上下游关系的可能性,因此,得到的预测结果,可以辅助决策两个实体之间是否可以寻求建立业务上下游关系,或者,建立业务上的合作关系。比如说,如预测出两个实体存在业务上下游关系的概率大于预定阈值,则说明这两个实体有望建立业务关系。
在另一种应用场景下,可以通过预测出未知的业务关系,并结合已知的业务关系,构建实体业务关系图谱,用于对实体的精准分析。具体地,图4示出根据一个实施例的实体业务关系图谱的构建方法流程示意图,所述方法的执行主体可以为任何具有计算、处理能力的装置、设备或设备集群。如图4所示,所述方法包括以下步骤:
步骤S410,获取上述业务关系预测模型,其中包括上述训练后的第一图神经网络和第一分类网络;步骤S420,基于上述多个实体中未知的实体间业务关系,确定待预测业务关系的多个实体对,其中任意的第一实体对中包括第三实体和第四实体;步骤S430,通过利用上述第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第三实体的第三特征向量和上述第四实体的第四特征向量;步骤S440,对上述第三特征向量和第四特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到针对上述第一实体对的分类预测结果;步骤S450,基于上述多个实体中已知的实体间业务关系,以及得到的针对上述多个实体对的多个分类预测结果,构建实体业务关系图谱,用于表征上述多个实体之间的业务关系。
以上步骤具体如下:
首先,在步骤S410,获取上述业务关系预测模型。需要理解,该业务关系模型为采用图2中示出方法而训练得到的业务关系预测模型,其中包括上述训练后的第一图神经网络和第一分类网络。
在执行步骤S410之前、之后或同时,执行步骤S420,基于上述多个实体中未知的实体间业务关系,确定待预测业务关系的多个实体对,其中任意的第一实体对中包括第三实体和第四实体。
在一个实施例中,可以将多个实体中,实体间业务关系未知的每组实体,都归入待预测业务关系的多个实体对。在另一个实施例中,考虑到实体数量较多的场景下,对业务关系未知的每组实体都进行预测,将耗费大量的计算资源,因此,可以根据一定的筛选机制,确定出参与后续业务关系预测的多个实体对。比如,对于某个实体,可以先确定出与其业务关系未知的所有实体,然后,从基础关系图谱中,筛选出所有实体中对应的实体节点,是该某个实体所对应节点的n(为正整数)阶邻居节点的实体节点,进而将该某个实体,与筛选出的实体节点所对应的各实体,分别组成待预测的实体对,由此可知,在上述基础关系图谱中,确定出的所对应的两个实体节点是n阶之内的邻居。
由上可以确定待预测业务关系的多个实体对。然后,在步骤S430,通过利用上述第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第三实体的第三特征向量和上述第四实体的第四特征向量。需要说明,对步骤S430的描述,可以参见对上述步骤S230的描述。
如此,在确定出上述第三特征向量和第四特征向量后。接着在步骤S440,对上述第三特征向量和第四特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到针对上述第一实体对的分类预测结果。如此,可以得到针对多个实体对的多个分类预测结果,进而在步骤S450,基于得到的该多个分类预测结果以及上述多个实体中已知的实体间业务关系,构建实体业务关系图谱,用于表征上述多个实体之间的业务关系。
在一个实施例中,上述步骤S440可以包括:对所述第三特征向量和第四特征向量进行顺序拼接,并将得到的第一拼接向量输入上述第一分类网络中,得到针对第一实体对的第一分类预测结果,指示所述第三实体是否为所述第四实体的上游实体。
进一步地,在该第一分类预测结果指示第三实体是第四实体的上游实体的情况下,步骤S450可以包括:在上述实体业务关系图谱中建立,由第三实体所对应节点指向第四实体所对应节点的有向连接边,或者,由第四实体所对应节点指向第三实体所对应节点的有向边。在一个具体的实施例中,该第一分类预测结果中还包括第三实体是第四实体的上游实体的置信度(如0.8),此时,还可以将该置信度作为该有向连接边的边特征。此外,在步骤S450中还可以包括:对于根据已知业务关系建立的有向连接边,可以将置信度1作为其边特征。
而在该第一分类预测结果指示第三实体不是第四实体的上游实体的情况下,上述构建方法还可以包括:对上述第四特征向量和第三特征向量进行顺序拼接,并将得到的第二拼接向量输入上述第一分类网络中,得到针对上述第一实体对的第二分类预测结果,指示上述第四实体是否为上述第三实体的上游实体。更进一步地,在该第二分类预测结果指示第四实体不是第三实体的上游实体的情况下,不在上述实体业务关系图谱中建立二者之间的连接边。
根据一个具体的例子,图5示出根据一个实施例的基于图3中数据构建出的实体业务关系图谱,其中由节点1指向节点2的连接边表示,原材料供应商是服装制造商B的上游企业,其中有向连接边上的数字表示置信度,如节点2指向节点4的有向连接边对应的置信度为0.9。
在另一个实施例中,上述步骤S440中可以包括:对第三特征向量和第四特征向量进行任意拼接,并将得到的拼接向量输入上述第一分类网络中,得到针对第一实体对的分类预测结果,指示第三实体和第四实体之间是否存在业务上下游关系。进一步地,在该分类预测结果指示存在的情况下,步骤S450可以包括:在上述实体业务关系图谱中建立,第三实体和第四实体所对应两个节点之间的无向连接边;而在该分类预测结果指示不存在的情况下,步骤S450可以包括:在上述实体业务关系图谱中,不建立第三实体和第四实体所对应两个节点之间的连接边。另外需要说明,对步骤S440的描述,还可以参见前述对步骤S240的描述。
如此,可以实现对实体业务关系图谱的构建。
综上,在本说明书实施例披露的实体业务关系图谱的构建方法中,利用上述业务关系预测模型和基础关系图谱,实现对实体间未知业务关系的预测,再结合已知的业务关系,构建实体业务关系图谱,用于对实体的精准分析。
上述构建出的实体业务关系图谱,可以用于对实体进行精准分析。在一种应用场景下,可以用于对实体进行行业或领域分类。在另一种应用场景下,可以用于对实体进行业务风险分析。具体地,图6示出根据一个实施例的实体业务风险的预测方法流程示意图,所述方法的执行主体可以为任何具有计算、处理能力的装置、设备或设备集群。
如图6所示,所述方法包括以下步骤:
步骤S610,获取实体业务关系图谱,其用于表征多个实体之间的业务上下游关系;步骤S620,基于上述多个实体中已知的业务风险数据,获取多个训练样本,其中任意的第二训练样本中包括第五实体和对应的风险类别标签;步骤S630,通过利用第二图神经网络对上述实体业务关系图谱进行图嵌入处理,确定上述第五实体的第五特征向量;步骤S640,将上述第五特征向量输入第二分类网络中,得到针对上述第五实体的业务风险预测结果;步骤S650,基于上述业务风险预测结果和风险类别标签,训练上述第二图神经网络和第二分类网络,训练后的上述第二图神经网络和第二分类网络构成业务风险预测模型,用于预测未知的实体业务风险。
以上步骤具体如下:
首先,在步骤S610,获取实体业务关系图谱,其用于表征多个实体之间的业务上下游关系。需要理解,该实体业务关系图谱为采用图4中示出方法而构建出的实体业务关系图谱。
接着,在步骤S620,基于上述多个实体中已知的业务风险数据,获取多个训练样本,其中任意的第二训练样本中包括第五实体和对应的风险类别标签。在一个实施例中,其中风险类别标签指示对应实体的信用风险等级,例如,包括信用风险高、信用风险低或信用风险极高,又例如,包括信用风险高、信用风险中等、信用风险低或信用风险极低。需要理解,信用风险越高,说明实体的信用越差。在另一个实施例中,其中风险类别标签指示对应实体的业务违约风险等级,例如,包括违约风险高或违约风险低,又例如,包括违约风险极高、违约风险高和违约风险中等。其中业务违约可以包括借贷违约、业务订单处理违约等。
然后,在步骤S630,通过利用第二图神经网络对上述实体业务关系图谱进行图嵌入处理,确定上述第五实体的第五特征向量。需要理解,其中第二图神经网络不同于上述第一图神经网络,此处第二图神经网络用于预测实体业务风险,而上述第一图神经网络用于预测未知的业务上下游关系。并且,第二图神经网络和第一图神经网络所基于的图神经网络算法可以相同,也可以不同。
在一个实施例中,上述实体业务关系图谱中包括对应于上述多个实体的多个实体节点,以及实体节点间存在业务上下游关系时形成的有向连接边,该有向连接边由上游实体指向下游实体。相应地,本步骤中可以包括:首先,从上述实体业务关系图谱中,至少确定对应于上述第五实体的第五实体节点,以及对应于上述第五实体的若干上游实体的若干邻居节点;然后,至少将上述第五实体节点和上述若干邻居节点的节点特征,输入上述第二图神经网络中,得到上述第五特征向量。
进一步地,其中至少确定对应于上述第五实体的第五实体节点,以及对应于上述第五实体的若干上游实体的若干邻居节点,还可以包括:确定上述第五实体节点与上述若干邻居节点之间的若干连接边,其中各条连接边的边特征中包括对应上下游业务关系的置信度;其中至少将上述第五实体节点的节点特征和上述若干邻居节点的节点特征,输入上述第二图神经网络中,得到上述第五特征向量,包括:将上述节点特征和上述各条连接边的边特征,输入上述第二图神经网络中,得到上述第五特征向量。
需要说明,对步骤S630的描述,还可以参见上文中的相关描述。
如此,可以得到第五特征向量。接着,在步骤S640,将上述第五特征向量输入第二分类网络中,得到针对上述第五实体的业务风险预测结果。需要理解,其中第二分类网络不同于上述第一分类网络,此处第二分类网络用于预测实体业务风险,而上述第一分类网络用于预测未知的业务上下游关系。并且,第二分类网络和第一分类网络所基于的神经网络算法可以相同,也可以不同。
步骤S650,基于上述业务风险预测结果和风险类别标签,训练上述第二图神经网络和第二分类网络,训练后的上述第二图神经网络和第二分类网络构成业务风险预测模型,用于预测未知的实体业务风险。
综上,在本说明书实施例披露的实体业务风险的预测方法中,通过上述构建的实体上下游图谱,引入与目标实体强相关的实体的数据,可以实现对目标实体的业务风险的精准预测,从而有效提高预测结果的准确度、可信度和可用性。
根据又一方面的实施例,与上述披露的方法相对应的,还提供以下几种装置。具体地,图7示出本说明书实施例披露的用于预测实体间业务关系的模型训练装置结构图。如图7所示,该训练装置700包括:
基础图谱获取单元710,配置为获取预先构建的基础关系图谱,其中至少包括对应于多个实体的多个实体节点,以及实体节点之间存在交互关系时形成的连接边;第一样本获取单元720,配置为基于上述多个实体中已知的实体间业务关系,获取多个训练样本,其中任意的第一训练样本包括第一实体、第二实体和对应的类别标签,该类别标签指示上述第一实体和上述第二实体之间的业务上下游关系;第一向量确定单元730,配置为通过利用第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第一实体的第一特征向量和上述第二实体的第二特征向量;第一向量融合单元740,配置为对上述第一特征向量和第二特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到分类预测结果;关系模型训练单元750,配置为基于上述分类预测结果和类别标签,训练上述第一图神经网络和上述第一分类网络,训练后的上述第一图神经网络和第一分类网络构成业务关系预测模型,用于预测未知的实体间业务关系。
在一个实施例中,上述多个实体所属的实体类别包括以下中的至少一种:企业类实体、机构类实体、商户类实体。
在一个实施例中,上述基础关系图谱中还包括对应于多个实体成员的多个成员节点,以及以下多种连接边中的至少一种:成员节点与实体节点之间存在关联关系时形成的连接边,成员节点之间存在交互关系时形成的连接边。
在一个实施例中,第一向量确定单元730包括:第一节点确定模块,配置为针对上述第一实体和第二实体中的每个实体,从上述基础关系图谱中,至少确定对应的实体节点与其若干邻居节点;第一向量确定模块,配置为至少将上述对应的实体节点和上述若干邻居节点的节点特征,输入上述第一图神经网络中,得到上述每个实体的特征向量。
在一个具体的实施例中,其中第一节点确定模块还配置为:确定上述对应的实体节点和上述若干邻居节点之间的若干连接边;其中第一向量确定模块具体配置为:将上述节点特征和上述若干连接边的边特征,输入上述第一图神经网络中,得到上述每个实体的特征向量。
在一个实施例中,上述类别标签指示上述第一实体是否为上述第二实体的上游实体;其中,第一向量融合单元740具体配置为:对上述第一特征向量和第二特征向量进行顺序拼接,并将得到的拼接向量输入上述第一分类网络中,得到上述分类预测结果。
图8示出根据一个实施例的实体业务关系图谱的构建装置结构图。如图8所示,该构建装置800包括:关系模型获取单元810,配置为获取业务关系预测模型,其上述训练装置700而得到,且包括上述训练后的第一图神经网络和第一分类网络;实体对确定单元820,配置为基于上述多个实体中未知的实体间业务关系,确定待预测业务关系的多个实体对,其中任意的第一实体对中包括第三实体和第四实体;第二向量确定单元830,配置为通过利用上述第一图神经网络对上述基础关系图谱进行图嵌入处理,确定上述第三实体的第三特征向量和上述第四实体的第四特征向量;第二向量融合单元840,配置为对上述第三特征向量和第四特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到针对上述第一实体对的分类预测结果;关系图谱构建单元850,配置为基于上述多个实体中已知的实体间业务关系,以及得到的针对上述多个实体对的多个分类预测结果,构建实体业务关系图谱,用于表征上述多个实体之间的业务关系。
在一个实施例中,在上述基础关系图谱中,上述第三实体和第四实体所对应的两个实体节点是n阶之内的邻居,其中n为正整数。
在一个实施例中,第二向量融合单元840具体配置为:对上述第三特征向量和第四特征向量进行顺序拼接,并将得到的第一拼接向量输入上述第一分类网络中,得到针对上述第一实体对的第一分类预测结果,指示上述第三实体是否为上述第四实体的上游实体。
在一个具体的实施例中,其中关系图谱构建单元850具体配置为:在上述第一分类预测结果指示是的情况下,在上述实体业务关系图谱中建立,由上述第三实体所对应节点指向上述第四实体所对应节点的有向连接边。
在一个更具体的实施例中,上述第一分类预测结果中包括上述第三实体是上述第四实体的上游实体的置信度,其中关系图谱构建单元850还配置为:将上述置信度作为上述有向连接边的边特征。
在一个具体的实施例中,上述构建装置800还包括:关系预测单元860,配置为在上述第一分类预测结果指示否的情况下,对上述第四特征向量和第三特征向量进行顺序拼接,并将得到的第二拼接向量输入上述第一分类网络中,得到针对上述第一实体对的第二分类预测结果,指示上述第四实体是否为上述第三实体的上游实体。
图9示出根据一个实施例的实体业务风险的预测装置结构图。如图9所示,该预测装置900包括:
关系图谱获取单元910,配置为获取实体业务关系图谱,其基于上述构建装置800而得到,且用于表征多个实体之间的业务上下游关系;第二样本获取单元920,配置为基于上述多个实体中已知的业务风险数据,获取多个训练样本,其中任意的第二训练样本中包括第五实体和对应的风险类别标签;第三向量确定单元930,配置为通过利用第二图神经网络对上述实体业务关系图谱进行图嵌入处理,确定上述第五实体的第五特征向量;风险预测单元940,配置为将上述第五特征向量输入第二分类网络中,得到针对上述第五实体的业务风险预测结果;风险模型训练的单元950,配置为基于上述业务风险预测结果和风险类别标签,训练上述第二图神经网络和第二分类网络,训练后的上述第二图神经网络和第二分类网络构成业务风险预测模型,用于预测未知的实体业务风险。
在一个实施例中,上述实体业务关系图谱中包括对应于上述多个实体的多个实体节点,以及实体节点间存在业务上下游关系时形成的有向连接边,该有向连接边由上游实体指向下游实体。其中第三向量确定单元930包括:第二节点确定模块,配置为从上述实体业务关系图谱中,至少确定对应于上述第五实体的第五实体节点,以及对应于上述第五实体的若干上游实体的若干邻居节点;第二向量确定模块,配置为至少将该第五实体节点和上述若干邻居节点的节点特征,输入上述第二图神经网络中,得到上述第五特征向量。
在一个具体的实施例中,上述第二节点确定模块还配置为:确定上述第五实体节点与上述若干邻居节点之间的若干连接边,其中各条连接边的边特征中包括对应上下游业务关系的置信度;上述第二向量确定模块具体配置为:将上述节点特征和上述各条连接边的边特征,输入上述第二图神经网络中,得到上述第五特征向量。
根据另一方面的实施例,还提供一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序在计算机中执行时,令计算机执行结合图2、图4或图6所描述的方法。
根据再一方面的实施例,还提供一种计算设备,包括存储器和处理器,所述存储器中存储有可执行代码,所述处理器执行所述可执行代码时,实现结合图2、图4或图6所描述的方法。
本领域技术人员应该可以意识到,在上述一个或多个示例中,本发明所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时,可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。
以上所述的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的技术方案的基础之上,所做的任何修改、等同替换、改进等,均应包括在本发明的保护范围之内。
Claims (32)
1.一种用于预测实体间业务关系的模型训练方法,包括:
获取预先构建的基础关系图谱,其中至少包括对应于多个实体的多个实体节点,以及实体节点之间存在交互关系时形成的连接边;
基于所述多个实体中已知的实体间业务关系,获取多个训练样本,其中任意的第一训练样本包括第一实体、第二实体和对应的类别标签,该类别标签指示所述第一实体和所述第二实体之间的业务上下游关系;
通过利用第一图神经网络对所述基础关系图谱进行图嵌入处理,确定所述第一实体的第一特征向量和所述第二实体的第二特征向量;
对所述第一特征向量和第二特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到分类预测结果;
基于所述分类预测结果和类别标签,训练所述第一图神经网络和所述第一分类网络,训练后的所述第一图神经网络和第一分类网络构成业务关系预测模型,用于预测未知的实体间业务关系。
2.根据权利要求1所述的方法,其中,所述多个实体所属的实体类别包括以下中的至少一种:企业类实体、机构类实体、商户类实体。
3.根据权利要求1所述的方法,其中,所述基础关系图谱中还包括对应于多个实体成员的多个成员节点,以及,以下多种连接边中的至少一种:成员节点与实体节点之间存在关联关系时形成的连接边,成员节点之间存在交互关系时形成的连接边。
4.根据权利要求1所述的方法,其中,通过利用第一图神经网络对所述基础关系图谱进行图嵌入处理,确定所述第一实体的第一特征向量和所述第二实体的第二特征向量,包括:
针对所述第一实体和第二实体中的每个实体,从所述基础关系图谱中,至少确定对应的实体节点与其若干邻居节点;
至少将所述对应的实体节点和所述若干邻居节点的节点特征,输入所述第一图神经网络中,得到所述每个实体的特征向量。
5.根据权利要求4所述的方法,其中,从所述基础关系图谱中,至少确定对应的实体节点与其若干邻居节点,还包括:
确定所述对应的实体节点和所述若干邻居节点之间的若干连接边;
其中,至少将所述对应的实体节点和所述若干邻居节点的节点特征,输入所述第一图神经网络中,得到所述每个实体的特征向量,包括:
将所述节点特征和所述若干连接边的边特征,输入所述第一图神经网络中,得到所述每个实体的特征向量。
6.根据权利要求1所述的方法,其中,所述类别标签指示所述第一实体是否为所述第二实体的上游实体;其中,对所述第一特征向量和第二特征向量进行融合处理,并将得到的融合向量输入第一分类网络中,得到分类预测结果,包括:
对所述第一特征向量和第二特征向量进行顺序拼接,并将得到的拼接向量输入所述第一分类网络中,得到所述分类预测结果。
7.一种实体业务关系图谱的构建方法,包括:
获取业务关系预测模型,其基于权利要求1所述的训练方法而得到,且包括所述训练后的第一图神经网络和第一分类网络;
基于所述多个实体中未知的实体间业务关系,确定待预测业务关系的多个实体对,其中任意的第一实体对中包括第三实体和第四实体;
通过利用所述第一图神经网络对所述基础关系图谱进行图嵌入处理,确定所述第三实体的第三特征向量和所述第四实体的第四特征向量;
对所述第三特征向量和第四特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到针对所述第一实体对的分类预测结果;
基于所述多个实体中已知的实体间业务关系,以及得到的针对所述多个实体对的多个分类预测结果,构建实体业务关系图谱,用于表征所述多个实体之间的业务关系。
8.根据权利要求7所述的构建方法,在所述基础关系图谱中,所述第三实体和第四实体所对应的两个实体节点是n阶之内的邻居,其中n为正整数。
9.根据权利要求7所述的构建方法,其中,对所述第三特征向量和第四特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到针对所述第一实体对的分类预测结果,包括:
对所述第三特征向量和第四特征向量进行顺序拼接,并将得到的第一拼接向量输入所述第一分类网络中,得到针对所述第一实体对的第一分类预测结果,指示所述第三实体是否为所述第四实体的上游实体。
10.根据权利要求9所述的构建方法,其中,构建实体业务关系图谱,包括:
在所述第一分类预测结果指示是的情况下,在所述实体业务关系图谱中建立,由所述第三实体所对应节点指向所述第四实体所对应节点的有向连接边。
11.根据权利要求10所述的构建方法,其中,所述第一分类预测结果中包括所述第三实体是所述第四实体的上游实体的置信度,其中构建实体业务关系图谱还包括:
将所述置信度作为所述有向连接边的边特征。
12.根据权利要求9所述的构建方法,其中,所述构建方法还包括:
在所述第一分类预测结果指示否的情况下,对所述第四特征向量和第三特征向量进行顺序拼接,并将得到的第二拼接向量输入所述第一分类网络中,得到针对所述第一实体对的第二分类预测结果,指示所述第四实体是否为所述第三实体的上游实体。
13.一种实体业务风险的预测方法,包括:
获取实体业务关系图谱,其基于权利要求7所述的构建方法而得到,且用于表征多个实体之间的业务上下游关系;
基于所述多个实体中已知的业务风险数据,获取多个训练样本,其中任意的第二训练样本中包括第五实体和对应的风险类别标签;
通过利用第二图神经网络对所述实体业务关系图谱进行图嵌入处理,确定所述第五实体的第五特征向量;
将所述第五特征向量输入第二分类网络中,得到针对所述第五实体的业务风险预测结果;
基于所述业务风险预测结果和风险类别标签,训练所述第二图神经网络和第二分类网络,训练后的所述第二图神经网络和第二分类网络构成业务风险预测模型,用于预测未知的实体业务风险。
14.根据权利要求13所述的预测方法,所述实体业务关系图谱中包括对应于所述多个实体的多个实体节点,以及实体节点间存在业务上下游关系时形成的有向连接边,该有向连接边由上游实体指向下游实体;
其中,通过利用第二图神经网络对所述实体业务关系图谱进行图嵌入处理,确定所述第五实体的第五特征向量,包括:
从所述实体业务关系图谱中,至少确定对应于所述第五实体的第五实体节点,以及对应于所述第五实体的若干上游实体的若干邻居节点;
至少将所述第五实体节点和所述若干邻居节点的节点特征,输入所述第二图神经网络中,得到所述第五特征向量。
15.根据权利要求14所述的业务预测方法,其中,至少确定对应于所述第五实体的第五实体节点,以及对应于所述第五实体的若干上游实体的若干邻居节点,还包括:
确定所述第五实体节点与所述若干邻居节点之间的若干连接边,其中各条连接边的边特征中包括对应上下游业务关系的置信度;
其中,至少将所述第五实体节点的节点特征和所述若干邻居节点的节点特征,输入所述第二图神经网络中,得到所述第五特征向量,包括:
将所述节点特征和所述各条连接边的边特征,输入所述第二图神经网络中,得到所述第五特征向量。
16.一种用于预测实体间业务关系的模型训练装置,包括:
基础图谱获取单元,配置为获取预先构建的基础关系图谱,其中至少包括对应于多个实体的多个实体节点,以及实体节点之间存在交互关系时形成的连接边;
第一样本获取单元,配置为基于所述多个实体中已知的实体间业务关系,获取多个训练样本,其中任意的第一训练样本包括第一实体、第二实体和对应的类别标签,该类别标签指示所述第一实体和所述第二实体之间的业务上下游关系;
第一向量确定单元,配置为通过利用第一图神经网络对所述基础关系图谱进行图嵌入处理,确定所述第一实体的第一特征向量和所述第二实体的第二特征向量;
第一向量融合单元,配置为对所述第一特征向量和第二特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到分类预测结果;
关系模型训练单元,配置为基于所述分类预测结果和类别标签,训练所述第一图神经网络和所述第一分类网络,训练后的所述第一图神经网络和第一分类网络构成业务关系预测模型,用于预测未知的实体间业务关系。
17.根据权利要求16所述的装置,其中,所述多个实体所属的实体类别包括以下中的至少一种:企业类实体、机构类实体、商户类实体。
18.根据权利要求16所述的装置,其中,所述基础关系图谱中还包括对应于多个实体成员的多个成员节点,以及,以下多种连接边中的至少一种:成员节点与实体节点之间存在关联关系时形成的连接边,成员节点之间存在交互关系时形成的连接边。
19.根据权利要求16所述的装置,其中,第一向量确定单元包括:
第一节点确定模块,配置为针对所述第一实体和第二实体中的每个实体,从所述基础关系图谱中,至少确定对应的实体节点与其若干邻居节点;
第一向量确定模块,配置为至少将所述对应的实体节点和所述若干邻居节点的节点特征,输入所述第一图神经网络中,得到所述每个实体的特征向量。
20.根据权利要求19所述的装置,其中,第一节点确定模块还配置为:
确定所述对应的实体节点和所述若干邻居节点之间的若干连接边;
其中,第一向量确定模块具体配置为:
将所述节点特征和所述若干连接边的边特征,输入所述第一图神经网络中,得到所述每个实体的特征向量。
21.根据权利要求16所述的装置,其中,所述类别标签指示所述第一实体是否为所述第二实体的上游实体;其中,第一向量融合单元具体配置为:
对所述第一特征向量和第二特征向量进行顺序拼接,并将得到的拼接向量输入所述第一分类网络中,得到所述分类预测结果。
22.一种实体业务关系图谱的构建装置,包括:
关系模型获取单元,配置为获取业务关系预测模型,其基于权利要求16所述的训练装置而得到,且包括所述训练后的第一图神经网络和第一分类网络;
实体对确定单元,配置为基于所述多个实体中未知的实体间业务关系,确定待预测业务关系的多个实体对,其中任意的第一实体对中包括第三实体和第四实体;
第二向量确定单元,配置为通过利用所述第一图神经网络对所述基础关系图谱进行图嵌入处理,确定所述第三实体的第三特征向量和所述第四实体的第四特征向量;
第二向量融合单元,配置为对所述第三特征向量和第四特征向量进行融合处理,并将处理得到的融合向量输入第一分类网络中,得到针对所述第一实体对的分类预测结果;
关系图谱构建单元,配置为基于所述多个实体中已知的实体间业务关系,以及得到的针对所述多个实体对的多个分类预测结果,构建实体业务关系图谱,用于表征所述多个实体之间的业务关系。
23.根据权利要求22所述的构建装置,在所述基础关系图谱中,所述第三实体和第四实体所对应的两个实体节点是n阶之内的邻居,其中n为正整数。
24.根据权利要求22所述的构建装置,其中,第二向量融合单元具体配置为:
对所述第三特征向量和第四特征向量进行顺序拼接,并将得到的第一拼接向量输入所述第一分类网络中,得到针对所述第一实体对的第一分类预测结果,指示所述第三实体是否为所述第四实体的上游实体。
25.根据权利要求24所述的构建装置,其中关系图谱构建单元具体配置为:
在所述第一分类预测结果指示是的情况下,在所述实体业务关系图谱中建立,由所述第三实体所对应节点指向所述第四实体所对应节点的有向连接边。
26.根据权利要求25所述的构建装置,其中,所述第一分类预测结果中包括所述第三实体是所述第四实体的上游实体的置信度,其中关系图谱构建单元还配置为:
将所述置信度作为所述有向连接边的边特征。
27.根据权利要求24所述的构建装置,其中,所述构建装置还包括:
关系预测单元,配置为在所述第一分类预测结果指示否的情况下,对所述第四特征向量和第三特征向量进行顺序拼接,并将得到的第二拼接向量输入所述第一分类网络中,得到针对所述第一实体对的第二分类预测结果,指示所述第四实体是否为所述第三实体的上游实体。
28.一种实体业务风险的预测装置,包括:
关系图谱获取单元,配置为获取实体业务关系图谱,其基于权利要求22所述的构建装置而得到,且用于表征多个实体之间的业务上下游关系;
第二样本获取单元,配置为基于所述多个实体中已知的业务风险数据,获取多个训练样本,其中任意的第二训练样本中包括第五实体和对应的风险类别标签;
第三向量确定单元,配置为通过利用第二图神经网络对所述实体业务关系图谱进行图嵌入处理,确定所述第五实体的第五特征向量;
风险预测单元,配置为将所述第五特征向量输入第二分类网络中,得到针对所述第五实体的业务风险预测结果;
风险模型训练的单元,配置为基于所述业务风险预测结果和风险类别标签,训练所述第二图神经网络和第二分类网络,训练后的所述第二图神经网络和第二分类网络构成业务风险预测模型,用于预测未知的实体业务风险。
29.根据权利要求28所述的预测装置,所述实体业务关系图谱中包括对应于所述多个实体的多个实体节点,以及实体节点间存在业务上下游关系时形成的有向连接边,该有向连接边由上游实体指向下游实体;
其中第三向量确定单元包括:
第二节点确定模块,配置为从所述实体业务关系图谱中,至少确定对应于所述第五实体的第五实体节点,以及对应于所述第五实体的若干上游实体的若干邻居节点;
第二向量确定模块,配置为至少将所述第五实体节点和所述若干邻居节点的节点特征,输入所述第二图神经网络中,得到所述第五特征向量。
30.根据权利要求29所述的业务预测装置,其中,第二节点确定模块还配置为:
确定所述第五实体节点与所述若干邻居节点之间的若干连接边,其中各条连接边的边特征中包括对应上下游业务关系的置信度;
其中,第二向量确定模块具体配置为:
将所述节点特征和所述各条连接边的边特征,输入所述第二图神经网络中,得到所述第五特征向量。
31.一种计算机可读存储介质,其上存储有计算机程序,其中,当所述计算机程序在计算机中执行时,令计算机执行权利要求1-15中任一项的所述的方法。
32.一种计算设备,包括存储器和处理器,其中,所述存储器中存储有可执行代码,所述处理器执行所述可执行代码时,实现权利要求1-15中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010466497.1A CN111507543B (zh) | 2020-05-28 | 2020-05-28 | 用于预测实体间业务关系的模型训练方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010466497.1A CN111507543B (zh) | 2020-05-28 | 2020-05-28 | 用于预测实体间业务关系的模型训练方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111507543A true CN111507543A (zh) | 2020-08-07 |
CN111507543B CN111507543B (zh) | 2022-05-17 |
Family
ID=71877183
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010466497.1A Active CN111507543B (zh) | 2020-05-28 | 2020-05-28 | 用于预测实体间业务关系的模型训练方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111507543B (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112015909A (zh) * | 2020-08-19 | 2020-12-01 | 普洛斯科技(重庆)有限公司 | 知识图谱的构建方法及装置、电子设备、存储介质 |
CN112200382A (zh) * | 2020-10-27 | 2021-01-08 | 支付宝(杭州)信息技术有限公司 | 一种风险预测模型的训练方法和装置 |
CN112632975A (zh) * | 2020-12-29 | 2021-04-09 | 北京明略软件系统有限公司 | 上下游关系的抽取方法、装置、电子设备及存储介质 |
CN112836868A (zh) * | 2021-01-22 | 2021-05-25 | 支付宝(杭州)信息技术有限公司 | 一种链接预测模型的联合训练方法和装置 |
CN113191565A (zh) * | 2021-05-18 | 2021-07-30 | 同盾科技有限公司 | 安全性预测方法及装置、介质、设备 |
CN113672740A (zh) * | 2021-08-04 | 2021-11-19 | 支付宝(杭州)信息技术有限公司 | 针对关系网络的数据处理方法及装置 |
CN114491080A (zh) * | 2022-02-28 | 2022-05-13 | 中国人民解放军国防科技大学 | 一种面向人物关系网络的未知实体关系推断方法 |
CN114519445A (zh) * | 2020-11-18 | 2022-05-20 | 航天信息股份有限公司 | 一种业务交互网络的预测方法及装置 |
WO2022113439A1 (ja) * | 2020-11-30 | 2022-06-02 | 株式会社日立製作所 | データ解析装置、データ解析方法 |
WO2023051080A1 (zh) * | 2021-09-29 | 2023-04-06 | 腾讯科技(深圳)有限公司 | 图数据处理方法、装置、计算机设备、存储介质及计算机程序产品 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170061285A1 (en) * | 2015-08-28 | 2017-03-02 | Ubic, Inc. | Data analysis system, data analysis method, program, and storage medium |
CN110188198A (zh) * | 2019-05-13 | 2019-08-30 | 北京一览群智数据科技有限责任公司 | 一种基于知识图谱的反欺诈方法及装置 |
CN110570111A (zh) * | 2019-08-30 | 2019-12-13 | 阿里巴巴集团控股有限公司 | 企业风险预测方法、模型训练方法、装置及设备 |
CN110866190A (zh) * | 2019-11-18 | 2020-03-06 | 支付宝(杭州)信息技术有限公司 | 训练用于表征知识图谱的图神经网络模型的方法及装置 |
-
2020
- 2020-05-28 CN CN202010466497.1A patent/CN111507543B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170061285A1 (en) * | 2015-08-28 | 2017-03-02 | Ubic, Inc. | Data analysis system, data analysis method, program, and storage medium |
CN110188198A (zh) * | 2019-05-13 | 2019-08-30 | 北京一览群智数据科技有限责任公司 | 一种基于知识图谱的反欺诈方法及装置 |
CN110570111A (zh) * | 2019-08-30 | 2019-12-13 | 阿里巴巴集团控股有限公司 | 企业风险预测方法、模型训练方法、装置及设备 |
CN110866190A (zh) * | 2019-11-18 | 2020-03-06 | 支付宝(杭州)信息技术有限公司 | 训练用于表征知识图谱的图神经网络模型的方法及装置 |
Non-Patent Citations (1)
Title |
---|
金磐石 等: "基于知识图谱的小微企业贷款申请反欺诈方案", 《大数据》 * |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112015909B (zh) * | 2020-08-19 | 2024-04-30 | 普洛斯科技(重庆)有限公司 | 知识图谱的构建方法及装置、电子设备、存储介质 |
CN112015909A (zh) * | 2020-08-19 | 2020-12-01 | 普洛斯科技(重庆)有限公司 | 知识图谱的构建方法及装置、电子设备、存储介质 |
CN112200382A (zh) * | 2020-10-27 | 2021-01-08 | 支付宝(杭州)信息技术有限公司 | 一种风险预测模型的训练方法和装置 |
CN114519445A (zh) * | 2020-11-18 | 2022-05-20 | 航天信息股份有限公司 | 一种业务交互网络的预测方法及装置 |
JP7458306B2 (ja) | 2020-11-30 | 2024-03-29 | 株式会社日立製作所 | データ解析装置、データ解析方法 |
WO2022113439A1 (ja) * | 2020-11-30 | 2022-06-02 | 株式会社日立製作所 | データ解析装置、データ解析方法 |
CN112632975B (zh) * | 2020-12-29 | 2024-06-07 | 北京明略软件系统有限公司 | 上下游关系的抽取方法、装置、电子设备及存储介质 |
CN112632975A (zh) * | 2020-12-29 | 2021-04-09 | 北京明略软件系统有限公司 | 上下游关系的抽取方法、装置、电子设备及存储介质 |
CN112836868A (zh) * | 2021-01-22 | 2021-05-25 | 支付宝(杭州)信息技术有限公司 | 一种链接预测模型的联合训练方法和装置 |
CN113191565A (zh) * | 2021-05-18 | 2021-07-30 | 同盾科技有限公司 | 安全性预测方法及装置、介质、设备 |
CN113191565B (zh) * | 2021-05-18 | 2023-04-07 | 同盾科技有限公司 | 安全性预测方法及装置、介质、设备 |
CN113672740A (zh) * | 2021-08-04 | 2021-11-19 | 支付宝(杭州)信息技术有限公司 | 针对关系网络的数据处理方法及装置 |
CN113672740B (zh) * | 2021-08-04 | 2023-11-07 | 支付宝(杭州)信息技术有限公司 | 针对关系网络的数据处理方法及装置 |
WO2023051080A1 (zh) * | 2021-09-29 | 2023-04-06 | 腾讯科技(深圳)有限公司 | 图数据处理方法、装置、计算机设备、存储介质及计算机程序产品 |
CN114491080A (zh) * | 2022-02-28 | 2022-05-13 | 中国人民解放军国防科技大学 | 一种面向人物关系网络的未知实体关系推断方法 |
Also Published As
Publication number | Publication date |
---|---|
CN111507543B (zh) | 2022-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111507543B (zh) | 用于预测实体间业务关系的模型训练方法及装置 | |
EP2941754B1 (en) | Social media impact assessment | |
US20170140382A1 (en) | Identifying transactional fraud utilizing transaction payment relationship graph link prediction | |
US11570214B2 (en) | Crowdsourced innovation laboratory and process implementation system | |
US11775412B2 (en) | Machine learning models applied to interaction data for facilitating modifications to online environments | |
CN111737546B (zh) | 确定实体业务属性的方法及装置 | |
CN108520470B (zh) | 用于生成用户属性信息的方法和装置 | |
CN111340558B (zh) | 基于联邦学习的线上信息处理方法、装置、设备及介质 | |
US11094015B2 (en) | Data access and processing system | |
CN110688536A (zh) | 一种标签预测方法、装置、设备和存储介质 | |
US10896290B2 (en) | Automated pattern template generation system using bulk text messages | |
CN110880117A (zh) | 虚假业务识别方法、装置、设备和存储介质 | |
CN111062600A (zh) | 模型评估方法、系统、电子设备和计算机可读存储介质 | |
CN114493853A (zh) | 信用等级评价方法、装置、电子设备及存储介质 | |
CN114118816A (zh) | 一种风险评估方法、装置、设备及计算机存储介质 | |
Wang et al. | COMET: NFT Price Prediction with Wallet Profiling | |
EP3583505A1 (en) | Unified smart connector | |
CN111258469A (zh) | 处理交互序列数据的方法及装置 | |
CN116664306A (zh) | 风控规则的智能推荐方法、装置、电子设备及介质 | |
CN115795345A (zh) | 信息处理方法、装置、设备及存储介质 | |
CN115048561A (zh) | 推荐信息确定方法及装置、电子设备和可读存储介质 | |
CN116308615A (zh) | 产品推荐方法、装置、电子设备及存储介质 | |
Alam et al. | Intelligent Fraud Detection Framework for PFMS Using HGRO Feature Selection and OC-LSTM Fraud Detection Technique | |
CN113094595A (zh) | 对象识别方法、装置、计算机系统及可读存储介质 | |
CN113837677A (zh) | 物流线路生成策略的确定方法、装置以及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |