CN113554093A - 预测模型训练和账户价值预测方法、装置、设备及介质 - Google Patents

预测模型训练和账户价值预测方法、装置、设备及介质 Download PDF

Info

Publication number
CN113554093A
CN113554093A CN202110837713.3A CN202110837713A CN113554093A CN 113554093 A CN113554093 A CN 113554093A CN 202110837713 A CN202110837713 A CN 202110837713A CN 113554093 A CN113554093 A CN 113554093A
Authority
CN
China
Prior art keywords
account
value
prediction model
sub
training set
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110837713.3A
Other languages
English (en)
Other versions
CN113554093B (zh
Inventor
姚磊
华锦芝
余洋
肖勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Unionpay Co Ltd
Original Assignee
China Unionpay Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Unionpay Co Ltd filed Critical China Unionpay Co Ltd
Priority to CN202110837713.3A priority Critical patent/CN113554093B/zh
Publication of CN113554093A publication Critical patent/CN113554093A/zh
Application granted granted Critical
Publication of CN113554093B publication Critical patent/CN113554093B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/04Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/02Banking, e.g. interest calculation or account maintenance

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Data Mining & Analysis (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Game Theory and Decision Science (AREA)
  • Technology Law (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)

Abstract

本申请公开了一种组合预测模型训练方法、账户价值预测方法、装置、设备及介质。相关技术通常只将训练集中的账户分为2个等级:已经进行高价值存款的账户(如本申请最高资产价值区间对应的第一等级的账户)和尚未进行高价值存款的账户(如除本申请中第一等级之外的其他等级的账户)。本申请将账户划分为至少3个等级,基于至少两种等级组合方式,从至少3个等级中选取每个子预测模型的训练集,每个训练集中包含第一账户及第二账户,第一账户及第二账户均包含至少一个等级的账户,第一账户的资产价值高于第二账户的资产价值,将第一账户标注为高价值账户,将第二账户标注为低价值账户,基于本申请组合预测模型,可提高预测账户的价值信息的准确性。

Description

预测模型训练和账户价值预测方法、装置、设备及介质
技术领域
本申请涉及账户价值预测技术领域,尤其涉及一种组合预测模型训练方法、账户价值预测方法、装置、设备及介质。
背景技术
在实际营销过程中,银行等机构希望能够基于客户(账户)的账户信息,预测账户的价值信息,以期在预测到账户的价值信息为有高价值存款潜质的账户(为方便描述,称为高价值账户)时,可以对其进行营销等。其中,在预测账户的价值信息时,可以将账户的特征向量输入预先训练完成的预测模型,基于该预测模型的输出结果,预测账户的价值信息。
相关技术在训练该预测模型时,通常可以将设定时间段内多个账户作为预测模型的训练集中的训练数据,来训练该预测模型。其中,通常将训练集中的账户分为2个等级,即已经进行高价值存款的账户和尚未进行高价值存款的账户,并将已经进行高价值存款的账户标注为高价值账户;而将尚未进行高价值存款的账户均标注为低价值账户。
然而,由于当前尚未进行高价值存款的账户中通常也可能包含具有高价值存款潜质的高价值账户,因此,基于相关技术训练集中的训练数据(每个账户的特征向量及对应的标注信息)训练完成的预测模型,在预测账户的价值信息时,存在准确性低的技术问题。
发明内容
本申请提供了一种组合预测模型训练方法、账户价值预测方法、装置、设备及介质,用以提高预测账户的价值信息的准确性。
第一方面,本申请提供了一种组合预测模型训练方法,所述方法包括:
根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户,将所述第一账户标注为高价值账户,将所述第二账户标注为低价值账户,其中所述第一账户及所述第二账户均包含至少一个等级的账户,且所述第一账户的资产价值高于所述第二账户的资产价值;
针对每个子预测模型,基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,对该子预测模型进行训练。
在一种可能的实施方式中,所述基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户包括:
将最高资产价值区间对应的第一等级的账户,确定为第一账户;将除所述第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集;
确定至少一个第二训练集,针对每个第二训练集,将包括所述第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。
在一种可能的实施方式中,所述特征向量包括消费特征信息、房车特征信息、理财特征信息中的至少一种。
第二方面,本申请还提供了一种基于上述任一项所述组合预测模型训练方法的账户价值预测方法,所述方法包括:
将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述待预测账户属于每个等级的第一概率值;
根据每个所述第一概率值及预先确定的每个等级对应的权重值,确定所述待预测账户的价值评分值;
根据所述价值评分值,确定所述待预测账户的价值信息。
在一种可能的实施方式中,预先确定每个等级对应的权重值的过程包括:
将最高资产价值区间对应的第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述第一等级的每个账户属于每个等级的第二概率值;
基于设定的每个候选权重向量、每个所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量;其中,所述候选权重向量中包含每个等级对应的候选权重值,且所述每个等级对应的候选权重值的和值为设定数值;
将所述目标权重向量中包括的每个等级对应的目标权重值,作为所述预先确定的每个等级对应的权重值。
在一种可能的实施方式中,所述基于设定的每个候选权重向量、所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量包括:
针对设定的每个候选权重向量,根据该候选权重向量及所述第一等级的每个账户的所述第二概率值,确定该候选权重向量对应的第一等级的每个账户的价值评分总值;
根据每个价值评分总值,从每个所述候选权重向量中选取目标权重向量。
第三方面,本申请还提供了一种组合预测模型训练装置,所述装置包括:
组合模块,用于根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户,将所述第一账户标注为高价值账户,将所述第二账户标注为低价值账户,其中所述第一账户及所述第二账户均包含至少一个等级的账户,且所述第一账户的资产价值高于所述第二账户的资产价值;
训练模块,用于针对每个子预测模型,基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,对该子预测模型进行训练。
在一种可能的实施方式中,所述组合模块,具体用于将最高资产价值区间对应的第一等级的账户,确定为第一账户;将除所述第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集;确定至少一个第二训练集,针对每个第二训练集,将包括所述第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。
第四方面,本申请还提供了一种基于上述任一项所述组合预测模型训练装置的账户价值预测装置,所述装置包括:
第一确定模块,用于将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述待预测账户属于每个等级的第一概率值;
第二确定模块,用于根据每个所述第一概率值及预先确定的每个等级对应的权重值,确定所述待预测账户的价值评分值;
第三确定模块,用于根据所述价值评分值,确定所述待预测账户的价值信息。
在一种可能的实施方式中,所述第二确定模块,具体用于将最高资产价值区间对应的第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述第一等级的每个账户属于每个等级的第二概率值;
基于设定的每个候选权重向量、每个所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量;其中,所述候选权重向量中包含每个等级对应的候选权重值,且所述每个等级对应的候选权重值的和值为设定数值;
将所述目标权重向量中包括的每个等级对应的目标权重值,作为所述预先确定的每个等级对应的权重值。
在一种可能的实施方式中,所述第二确定模块,具体用于针对设定的每个候选权重向量,根据该候选权重向量及所述第一等级的每个账户的所述第二概率值,确定该候选权重向量对应的第一等级的每个账户的价值评分总值;
根据每个价值评分总值,从每个所述候选权重向量中选取目标权重向量。
第五方面,本申请还提供了一种电子设备,所述电子设备至少包括处理器和存储器,所述处理器用于执行存储器中存储的计算机程序时实现如上述任一所述一种组合预测模型训练方法的步骤,或,实现如上述任一所述账户价值预测方法的步骤。
第六方面,本申请还提供了一种计算机可读存储介质,其存储有计算机程序,所述计算机程序被处理器执行时实现如上述任一所述一种组合预测模型训练方法的步骤,或,实现如上述任一所述账户价值预测方法的步骤。
相关技术中通常只将训练集中的账户分为2个等级,即已经进行高价值存款的账户(如本申请中最高资产价值区间对应的第一等级的账户)和尚未进行高价值存款的账户(如除本申请中第一等级之外的其他等级的账户),将已经进行高价值存款的账户标注为高价值账户;而将尚未进行高价值存款的账户均标注为低价值账户。由于尚未进行高价值存款的账户中通常也可能包含具有高价值存款潜质的高价值账户,本申请将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从至少3个等级中选取每个子预测模型的训练集,其中,每个训练集中包含第一账户及第二账户,第一账户及第二账户均包含至少一个等级的账户,且第一账户的资产价值高于第二账户的资产价值,可以将第一账户标注为高价值账户,将第二账户标注为低价值账户。因此,相比相关技术,基于本申请的训练集中的每个账户的特征向量及对应的标注信息训练完成的组合预测模型,在预测账户的价值信息时,可以提高预测账户的价值信息的准确性。
附图说明
为了更清楚地说明本申请实施例或相关技术中的实施方式,下面将对实施例或相关技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1示出了一些实施例提供的一种组合预测模型训练过程示意图;
图2a示出了一些实施例提供的第一种等级组合方式示意图;
图2b示出了一些实施例提供的第二种等级组合方式示意图;
图2c示出了一些实施例提供的第三种等级组合方式示意图;
图3示出了一些实施例提供的账户价值预测过程示意图;
图4示出了一些实施例提供的预测第一等级的账户的召回率曲线示意图;
图5示出了一些实施例提供的一种确定每个等级对应的权重值过程示意图;
图6示出了一些实施例提供的一种组合预测模型训练装置示意图;
图7示出了一些实施例提供的一种账户价值预测装置示意图;
图8示出了一些实施例提供的一种电子设备结构示意图;
图9示出了一些实施例提供的另一种电子设备结构示意图。
具体实施方式
为了提高预测账户的价值信息的准确性,本申请提供了一种组合预测模型训练方法、账户价值预测方法、装置、设备及介质。
为使本申请的目的和实施方式更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的所有组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。
实施例1:
图1示出了一些实施例提供的一种组合预测模型训练过程示意图,该过程包括以下步骤:
S101:根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户,将所述第一账户标注为高价值账户,将所述第二账户标注为低价值账户,其中所述第一账户及所述第二账户均包含至少一个等级的账户,且所述第一账户的资产价值高于所述第二账户的资产价值。
本申请实施例提供的组合预测模型训练方法应用于电子设备,该电子设备可以是服务器,也可以是PC、移动终端等设备。
在一种可能的实施方式中,为了提高预测账户的价值信息的准确性,电子设备可以基于组合预测模型来预测账户的价值信息,其中组合预测模型中可以包括至少两个子预测模型。在训练该组合预测模型时,可以先获取设定时间段内,每个账户的资产价值信息,示例性的,账户的资产价值信息可以为账户在设定时间段内的存款信息或持有的存单的信息等,本申请对设定时间段及账户的资产价值信息不做具体限定,可以根据需求灵活设置。
在一种可能的实施方式中,为了提高预测账户的价值信息的准确性,用户可以预设至少3个资产价值区间,以使电子设备可以根据每个账户的资产价值信息及用户预设的每个资产价值区间,将账户划分为至少3个等级。其中,本申请对资产价值区间的数值不做具体限定,可以根据需求灵活设置,示例性的,最高资产价值区间可以为设定时间段内已经进行高价值存款的账户的资产价值的区间,除最高资产价值区间之外的其他资产价值区间可以为设定时间段内尚未进行高价值存款的账户的资产价值的区间等。可以理解的,预设的资产价值区间的数量与账户的等级的数量是一致的,资产价值区间的数量(账户的等级的数量)可以是3、4、5等,本申请对此不做具体限定,在一种可能的实施方式中,资产价值区间的数量(账户的等级的数量)可以为4,以可以最大程度的保证预测账户的价值信息的准确性的同时,还可以兼顾预测效率。
将账户划分为至少3个等级之后,可以基于设定的至少两种等级组合方式,从划分的至少3个等级中选取每个子预测模型的训练集。可以理解的,等级组合方式的总数量与子预测模型的数量是一致的,选取的每个子预测模型的训练集中既包含第一账户,又包含第二账户,第一账户及第二账户中均包含至少一个等级的账户。在一种可能的实施方式中,确定了第一账户所属的等级之后,可以将除第一账户所属的等级之外的其他等级的账户均确定为第二账户。其中,第一账户的资产价值高于第二账户的资产价值,即第一账户所属的等级的资产价值区间高于第二账户所属的等级的资产价值区间。
为了可以确定训练集中的每个账户的价值信息,针对训练集中包含每个账户,可以对每个账户进行标注。具体的,由于每个训练集中包含的第一账户的资产价值均高于第二账户的资产价值,可以认为每个训练集中的第一账户的价值高于第二账户的价值,可以将每个第一账户均标注为高价值账户,将每个第二账户均标注为低价值账户。
S102:针对每个子预测模型,基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,对该子预测模型进行训练。
确定了每个子预测模型的训练集并对每个训练集中的每个账户进行标注之后,针对每个子预测模型,可以基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,采用迭代方式对待训练的子预测模型进行训练,直到满足预设的收敛条件为止,并将最后一轮输出的子预测模型作为训练完成的子预测模型,其中,在每一轮迭代过程中执行以下操作:
获取训练集中的任一账户,该账户可以是第一账户,也可以是第二账户,且该账户包含该账户的特征向量及对应的标注信息。在一种可能的实施方式中,该账户的特征向量可以包括消费特征信息、房车特征信息、理财特征信息中的至少一种,其中确定该账户的特征向量可以采用现有技术,在此不再赘述。将获取的该任一账户输入到待训练的子预测模型中,待训练的子预测模型对该账户的特征向量进行识别,并输出该账户为高价值用户的概率值。
具体实施中,确定了输入的账户为高价值用户的概率值后,因为预先保存了该账户的标注信息,可以根据该概率值及该账户的标注信息,判断该待训练的子预测模型的识别结果是否准确。在一种可能的实施方式中,可以预设概率阈值,当概率值大于该概率阈值时,可以认为子预测模型对该账户的识别结果为高价值账户;当概率值小于该概率阈值时,可以认为子预测模型对该账户的识别结果为低价值账户。其中概率阈值可以根据需求灵活设置。示例性的,该概率阈值可以为50%,当子预测模型输出的概率值大于50%时,认为子预测模型对该账户的识别结果为高价值账户,可以根据该账户的标注信息,判断该待训练的子预测模型的识别结果是否准确,具体的,当标注信息也为高价值账户时,可以认为子预测模型对该账户的识别结果准确,而当标注信息为低价值账户时,可以认为子预测模型对该账户的识别结果不准确。同样的,当子预测模型输出的概率值小于50%时,认为子预测模型对该账户的识别结果为低价值账户,可以根据该账户的标注信息,判断该待训练的子预测模型的识别结果是否准确,具体的,当标注信息也为低价值账户时,可以认为子预测模型对该账户的识别结果准确,而当标注信息为高价值账户时,可以认为子预测模型对该账户的识别结果不准确。具体实施中,若识别结果不准确,则需要对该待训练的子预测模型的参数进行调整。
示例性的,以组合预测模型中包括第一子预测模型为例,其中,第一子预测模型输出的概率值用p1表示,则logit(p1)=α11x。其中,α1、β1均为第一子预测模型的参数,x为账户的特征向量。在一种可能的实施方式中,账户的特征向量x中可以包括至少一种特征信息,例如可以包括消费特征信息、房车特征信息、理财特征信息中的至少一种。将特征向量中包含的特征信息用xi表示,其中1≤i≤n,n为特征向量中包含的特征信息的总数量,则β1x=β11x112x213x3+…β1ixi+…β1nxn,其中β1i为针对第xi个特征信息,第一子预测模型对应的子参数。
第一子预测模型可以根据账户的特征向量,确定该账户为高价值账户的概率值p1并输出,电子设备可以根据该概率值p1、概率阈值及该账户的标注信息,判断该子预测模型的识别结果是否准确,若不准确,则可以对该待训练的子预测模型的参数α1、β11i)进行调整。
同样的,如果组合预测模型中包括的子预测模型(第二子预测模型A)输出的概率值用p12表示,则logit(p12)=α22x。其中,α2、β2均为第二子预测模型A的参数,x为账户的特征向量。在一种可能的实施方式中,账户的特征向量x中可以包括至少一种特征信息,例如可以包括消费特征信息、房车特征信息、理财特征信息中的至少一种。将特征向量中包含的特征信息用xi表示,其中1≤i≤n,n为特征向量中包含的特征信息的总数量,则β2x=β21x122x223x3+…β2ixi+…β2nxn,其中β2i为针对第xi个特征信息,第二子预测模型A对应的子参数。
第二子预测模型A可以根据账户的特征向量,确定该账户为高价值账户的概率值p12并输出,电子设备可以根据该概率值p12、概率阈值及该账户的标注信息,判断该子预测模型的识别结果是否准确,若不准确,则可以对该待训练的子预测模型的参数α2、β22i)进行调整。
同样的,如果组合预测模型中包括的子预测模型(第二子预测模型B)输出的概率值用p123表示,则logit(p123)=α33x。其中,α3、β3均为第二子预测模型B的参数,x为账户的特征向量。在一种可能的实施方式中,账户的特征向量x中可以包括至少一种特征信息,例如可以包括消费特征信息、房车特征信息、理财特征信息中的至少一种。将特征向量中包含的特征信息用xi表示,其中1≤i≤n,n为特征向量中包含的特征信息的总数量,则β3x=β31x132x233x3+…β3ixi+…β3nxn,其中β3i为针对第xi个特征信息,第二子预测模型B对应的子参数。
第二子预测模型B可以根据账户的特征向量,确定该账户为高价值账户的概率值p123并输出,电子设备可以根据该概率值p123、概率阈值及该账户的标注信息,判断该子预测模型的识别结果是否准确,若不准确,则可以对该待训练的子预测模型的参数α3、β33i)进行调整。
在一种可能的实施方式中,可以对训练集中的每个账户都进行上述操作,当满足预设的收敛条件时,确定该子预测模型训练完成。
其中,满足预设的收敛条件可以为训练集中的账户通过该待训练的子预测模型,被正确识别的账户的个数大于设定数量,或对待训练的子预测模型进行训练的迭代次数达到设置的最大迭代次数等。具体实施中可以根据需求灵活设置,在此不做具体限定。
在一种可能的实施方式中,在对待训练的子预测模型进行训练时,可以把训练集中的账户分为训练账户和测试账户,先基于训练账户对待训练的子预测模型进行训练,再基于测试账户对上述已训练的子预测模型的可靠程度进行验证。
相关技术中通常只将训练集中的账户分为2个等级,即已经进行高价值存款的账户(如本申请中最高资产价值区间对应的第一等级的账户)和尚未进行高价值存款的账户(如除本申请中第一等级之外的其他等级的账户),将已经进行高价值存款的账户标注为高价值账户;而将尚未进行高价值存款的账户均标注为低价值账户。由于尚未进行高价值存款的账户中通常也可能包含具有高价值存款潜质的高价值账户,本申请将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从至少3个等级中选取每个子预测模型的训练集,其中,每个训练集中包含第一账户及第二账户,第一账户及第二账户均包含至少一个等级的账户,且第一账户的资产价值高于第二账户的资产价值,可以将第一账户标注为高价值账户,将第二账户标注为低价值账户。因此,相比相关技术,基于本申请的训练集中的每个账户的特征向量及对应的标注信息训练完成的组合预测模型,在预测账户的价值信息时,可以提高预测账户的价值信息的准确性。
实施例2:
相关技术在训练该预测模型时,通常将训练集中的账户分为2个等级,即已经进行高价值存款的账户和尚未进行高价值存款的账户。由于已经进行高价值存款的账户的数量通常远远低于尚未进行高价值存款的账户的数量,为方便描述,将标注为高价值账户的账户称为正样本,将标注为低价值账户的账户称为负样本,即正样本的数量较少(少数类),而负样本的数量较多(多数类),正负样本比例存在较大差距,正负样本极端不平衡。而如果训练集中正负样本极端不平衡时,基于该训练集训练完成的预测模型,在预测账户的价值信息时,通常存在准确性较低的问题。
针对训练集中正负样本极端不平衡的情况,相关技术大多采用欠采样法(如模型融合法)或过采样法(如增量训练法)对训练集中正负样本的比例进行调整,使正负样本数量基本平衡。然而,相关技术在平衡正负样本时,通常是基于随机采样进行的,存在准确性低、稳定性差的技术问题。
在上述实施例的基础上,在本申请实施例中,为了平衡训练集中正负样本数量,提高预测账户价值信息的准确性和稳定性,所述基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户包括:
将最高资产价值区间对应的第一等级的账户,确定为第一账户;将除所述第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集;
确定至少一个第二训练集,针对每个第二训练集,将包括所述第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。
具体的,可以基于以下至少两种等级组合方式,从至少3个等级中选取每个子预测模型的训练集:
首先,在确定组合预测模型中其中一个子预测模型的训练集时,可以先确定资产价值区间中的最高资产价值区间,为方便描述,将最高资产价值区间对应的等级,称为第一等级。将第一等级的账户,确定为第一账户。然后,将除第一等级之外的其他等级的账户,确定为第二账户,并将由该第一账户和该第二账户组成的训练集(称为第一训练集),确定为组合预测模型中其中一个子预测模型(称为第一子预测模型)的训练集。
另外,鉴于每个子预测模型均对应一个训练集,即子预测模型的总数量与训练集的总数量是一致的。为方便描述,将组合预测模型中除上述第一子预测模型之外的其他子预测模型,称为第二子预测模型。第二子预测模型的数量为至少一个,每个第二子预测模型均对应一个训练集,将每个第二子预测模型对应的训练集,均称为第二训练集,则需要确定至少一个第二训练集。
在确定该至少一个第二训练集时,针对每个第二训练集,可以先将包括第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。为方便理解,下面通过一个具体实施例对本申请提供的等级组合方式及选取每个子预测模型的训练集的过程进行举例说明。
示例性的,以账户的资产价值为存款金额(存款信息)为例,存款金额用a表示,预设的每个资产价值区间分别为a≥20万、20万>a≥10万、10万>a≥3万、a<3万。(其中,a≥20万为设定时间段内已经进行高价值存款的账户的资产价值的区间,其他资产价值区间(20万>a≥10万、10万>a≥3万、a<3万)均为设定时间段内尚未进行高价值存款的账户的资产价值的区间。)根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为4个等级,其中最高资产价值区间(a≥20万)对应的等级为第一等级,资产价值区间(20万>a≥10万)对应的等级为第二等级,资产价值区间(10万>a≥3万)对应的等级为第三等级,最低资产价值区间(a<3万)对应的等级为第四等级。
经统计获知,参阅表1,除前一设定时间段内账户即为第一等级的账户之外,该前一设定时间段的下一相邻设定时间段内第一等级的账户中,有81.94%的账户来自第二等级,有11.86%的账户来自第三等级,有6.20%的账户来自第四等级。
表1
Figure BDA0003177769620000151
由表1可以看出,前一设定时间段账户所属的等级级别越高,该账户在下一相邻设定时间段内成为高价值存款账户(第一等级的账户)的可能性越大,也就是说,前一设定时间段存款金额较多的账户更容易发展为高价值存款账户,各等级级别之间存在层层递进的关联关系。基于此,本申请可以基于有序多分类算法确定等级组合方式。图2a示出了一些实施例提供的第一种等级组合方式示意图,图2b示出了一些实施例提供的第二种等级组合方式示意图,图2c示出了一些实施例提供的第三种等级组合方式示意图,如图2a、图2b、图2c所示,等级组合方式可以包括以下三种:
参阅图2a,第一种等级组合方式可以为:将第一等级的账户,确定为第一账户;将第二等级、第三等级及第四等级的账户均确定为第二账户。
参阅图2b,第二种等级组合方式可以为:将第一等级和第二等级的账户,均确定为第一账户;将第三等级和第四等级的账户均确定为第二账户。
参阅图2c,第三种等级组合方式可以为:将第一等级、第二等级及第三等级的账户,均确定为第一账户;将第四等级的账户确定为第二账户。
相应的,组合预测模型中共包括三个子预测模型,分别称为第一子预测模型、第二子预测模型A和第二子预测模型B。其中,可以将由上述第一种等级组合方式确定的第一账户和第二账户组成的第一训练集,确定为第一子预测模型的训练集。同时,将由上述第二种等级组合方式确定的第一账户和第二账户组成的第二训练集,确定为其中一个第二子预测模型(第二子预测模型A)的训练集。将由上述第三种等级组合方式确定的第一账户和第二账户组成的第二训练集,确定为另一个第二子预测模型(第二子预测模型B)的训练集。
确定了每个子预测模型的训练集后,与上述实施例相同,可以将每个第一账户均标注为高价值账户,将每个第二账户均标注为低价值账户。
由于本申请可以将账户划分为至少3个等级,并考虑到每个等级之间的层层递进的关联关系,除了可以将最高资产价值区间对应的第一等级的账户,确定为第一账户,将除第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集之外,还可以确定至少一个第二训练集,针对每个第二训练集,将包括第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户,并将该第二训练集确定为任一第二子预测模型的训练集。相比相关技术中通常基于随机采样平衡正负样本数量而言,本申请可以基于每个等级之间的关联关系平衡正负样本数量,从而可以在一定程度上平衡训练集中正负样本数量的同时,还可以提高确定的训练集的质量,进一步提高预测账户价值信息的准确性和稳定性。
实施例3:
为了准确的确定待预测账户的价值信息,在上述各实施例的基础上,本申请实施例提供了一种账户价值预测方法,图3示出了一些实施例提供的账户价值预测过程示意图,如图3所示,该过程包括以下步骤:
S301:将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述待预测账户属于每个等级的第一概率值。
本申请实施例提供的组合预测模型训练方法应用于电子设备,该电子设备可以是服务器,也可以是PC、移动终端等设备。
在一种可能的实施方式中,可以基于预先训练完成的每个子预测模型来预测(确定)账户的价值信息。具体的,在确定待预测账户的价值信息时,可以将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,示例性的,仍以上述实施例为例,组合预测模型中共包括三个子预测模型,分别称为第一子预测模型、第二子预测模型A和第二子预测模型B,则可以分别将待预测模型的特征向量分别输入预先训练完成的第一子预测模型、第二子预测模型A和第二子预测模型B。每个子预测模型可以输出该待预测账户为正样本的概率值。
示例性的,第一子预测模型输出的概率值用p1表示,则p1可以表示待预测账户属于高价值账户(第一等级的账户)的概率值,
Figure BDA0003177769620000171
其中,α1和β1为第一子预测模型的参数值,x为待预测账户的特征向量。
第二子预测模型A输出的概率值用p12表示,则p12可以表示待预测账户属于高价值账户(第一等级的账户和第二等级账户)的概率值(累计概率值),
Figure BDA0003177769620000172
第二子预测模型B输出的概率值用p123表示,则P123可以表示待预测账户属于高价值账户(第一等级的账户、第二等级及第三等级账户)的概率值(累计概率值),
Figure BDA0003177769620000173
为方便理解,仍以上述实施例举例说明,累计概率值满足以下公式:
p(Y≤j|x)=p(Y=1|x)+p(Y=2|x)+p(Y=3|x)+...+p(Y=j|x)...+p(Y=k|x),
其中,1≤j≤k,k为账户的等级的数量,Y为账户的价值信息,p(Y=j|x)为待预测账户属于第j等级账户的概率值(第一概率值),例如,p(Y=1|x)为待预测账户属于第一等级的账户的概率值(第一概率值),p(Y=2|x)为待预测账户属于第二等级账户的概率值(第一概率值),p(Y=3|x)为待预测账户属于第三等级账户的概率值(第一概率值)。p(Y≤j|x)为待预测账户属于第一等级、第二等级、...第j等级账户的累计概率值,例如,当j为1时,p(Y≤j|x)即为上述实施例中的p1;当j为2时,p(Y≤j|x)即为上述实施例中的p12;当j为3,p(Y≤j|x)即为上述实施例中的p123
为了确定待预测账户属于每个等级的第一概率值,可以基于每个子预测模型输出的概率值及累计概率算法,确定待预测账户属于每个等级的第一概率值。示例性的,待预测账户属于第一等级的账户的第一概率值p(Y=1|x)=p1
待预测账户属于第二等级账户的第一概率值p(Y=2|x)=p12-p1
待预测账户属于第三等级账户的第一概率值p(Y=3|x)=p123-p12
待预测账户属于第四等级账户的第一概率值p(Y=4|x)=1-p123
S302:根据每个所述第一概率值及预先确定的每个等级对应的权重值,确定所述待预测账户的价值评分值。
在一种可能的实施方式中,为了准确确定待预测账户的价值信息,可以先确定待预测账户的价值评分值,根据该价值评分值,确定待预测账户的价值信息。其中,为了准确确定待预测账户的价值评分值,可以预先确定每个等级对应的权重值,然后根据待预测账户属于每个等级的第一概率值及该预先确定的每个等级对应的权重值,确定待预测账户的价值评分值。
示例性的,仍以上述实施例为例,第一等级对应的权重值用θ1表示,第二等级对应的权重值用θ2表示,第三等级对应的权重值用θ3表示,第四等级对应的权重值用θ4表示,待预测账户的价值评分值用V表示,则:
V=θ1p(Y=1|x)+θ2p(Y=2|x)+θ3p(Y=3|x)+θ4p(Y=4|x)。
S303:根据所述价值评分值,确定所述待预测账户的价值信息。
在一种可能的实施方式中,用户可以预先设定价值评分区间值与价值信息的对应关系并将该对应关系保存在电子设备中,电子设备在根据价值评分值,确定待预测账户的价值信息时,可以先确定待预测账户所属的目标价值评分区间值,然后根据保存的价值评分区间值与价值信息的对应关系,将目标价值评分区间值对应的目标价值信息,确定为待预测账户的价值信息。其中,待预测账户的价值信息可以包括高价值账户、低价值账户;也可以包括第一等级的账户、第二等级的账户、第三等级的账户、第四等级的账户等等,待预测账户的价值信息可以根据需求灵活设置,本申请对此不做具体限定。
图4示出了一些实施例提供的预测第一等级的账户的召回率曲线示意图,如图4所示,横坐标为选取的进行账户价值信息预测的账户的数量与账户总数量的比值,如账户总数量为10000个,选取的进行账户价值信息预测的账户的数量为1000个,则横坐标即为10%。纵坐标为选取的进行账户价值信息预测的账户中实际为第一等级的账户的数量与选取的进行账户价值信息预测的账户的数量的比值。参阅图4,相比相关技术中采用欠采样法(如模型融合法)或过采样法(如增量训练法)训练预测模型,基于预测模型的输出结果(为方便描述,称为相关技术预测模型),确定账户是否为第一等级的账户的召回率、以及相比相关技术不基于预测模型,采用随机抽样统计方法(为方便描述,称为相关技术无模型)确定第一等级的账户的召回率而言,本申请实施例基于组合预测模型的账户价值预测方法(为方便描述,称为本申请组合预测模型)可以提高确定的账户的价值信息的准确性,确定第一等级的账户的召回率较高。
另外,在一种可能的实施方式中,根据价值评分值,确定待预测账户是否为第一等级的账户之后,还可以再统计预测的第一等级的账户中,实际购买银行等推荐的存款产品的账户所占的比例(存款潜客识别率)、每个账户的平均(户均)存款增长金额、户均存款余额增速、实际购买大额定期存款的账户所占的比例(大额定期存款占比)等参数值。其中,可以采用现有技术确定存款潜客识别率、户均存款增长金额、户均存款余额增速、大额定期存款占比等参数值,在此不再赘述。为方便描述,本申请基于组合预测模型确定账户的价值信息的方式称为实验组,将基于相关技术确定账户的价值信息的方式称为对照组。在同等实验条件下,如实验组和对照组均预测了1000个账户为第一等级的账户,本申请实验组的上述四个参数值均高于对照组,例如本申请实验组的存款潜客识别率比对照组高15.9%,实验组的户均存款增长金额比对照组高0.85万,实验组的户均存款余额增速比对照组高16.89%,实验组的大额定期存款占比相比对照组高8.92%。由于账户的价值信息与存款潜客识别率、户均存款增长金额、户均存款余额增速、大额定期存款占比这几个参数值之间通常是正相关的关系,由此也可以侧面反映出,本申请基于组合预测模型确定账户的价值信息的方式可以提高预测账户价值信息的准确性。
本申请可以将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于每个子预测模型输出的概率值及累计概率算法,确定待预测账户属于每个等级的第一概率值;并根据每个第一概率值及预先确定的每个等级对应的权重值,确定待预测账户的价值评分值;根据该价值评分值,确定待预测账户的价值信息。由于本申请可以基于每个子预测模型输出的概率值、预先确定的每个等级对应的权重值,综合确定待预测账户的价值评分值,从而可以在根据该价值评分值,确定待预测账户的价值信息时,可以提高确定的价值信息的准确性。
实施例4:
图5示出了一些实施例提供的一种确定每个等级对应的权重值过程示意图,如图5所示,为了准确确定每个等级对应的权重值,在上述各实施例的基础上,在本申请实施例中,预先确定每个等级对应的权重值的过程包括以下步骤:
S501:将最高资产价值区间对应的第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述第一等级的每个账户属于每个等级的第二概率值。
在一种可能的实施方式中,鉴于前一设定时间段内账户为第一等级的账户时,在该前一设定时间段的下一相邻设定时间段时,该账户通常仍为第一等级的账户,即该账户在下一相邻设定时间段的价值信息(预测的价值信息)可以认为是已知的。为了准确确定每个等级对应的权重值,提高确定待预测账户的价值信息的准确性,可以基于第一等级的账户确定每个等级对应的权重值。
具体的,在基于第一等级的账户确定每个等级对应的权重值时,可以将第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于每个子预测模型输出的概率值及累计概率算法,确定第一等级的每个账户属于每个等级的第二概率值。其中,为方便描述,将待预测账户属于每个等级的概率值称为第一概率值,将第一等级的账户属于每个等级的概率值称为第二概率值,其中确定第二概率值的过程与上述实施例中确定第一概率值的过程相同,在此不再赘述。
S502:基于设定的每个候选权重向量、每个所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量;其中,所述候选权重向量中包含每个等级对应的候选权重值,且所述每个等级对应的候选权重值的和值为设定数值。
在一种可能的实施方式中,可以预先设定多个候选权重向量,其中,每个候选权重向量中包含每个等级对应的候选权重值,且包含的每个等级对应的候选权重值的和值为设定数值。其中,设定数值可以根据需求灵活设定,例如可以为1或100等。示例性的,仍以上述实施例为例,候选权重向量中,第一等级对应的候选权重值用θ1’表示,第二等级对应的候选权重值用θ2’表示,第三等级对应的候选权重值用θ3’表示,第四等级对应的候选权重值用θ4’表示,设定数值为1,则θ1’+θ2’+θ3’+θ4’=1。
在一种可能的实施方式中,可以基于设定的每个候选权重向量、每个第二概率值及线性加权融合法,从每个候选权重向量中选取目标权重向量。在上述各实施例的基础上,在本申请实施例中,所述基于设定的每个候选权重向量、所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量包括:
针对设定的每个候选权重向量,根据该候选权重向量及所述第一等级的每个账户的所述第二概率值,确定该候选权重向量对应的第一等级的每个账户的价值评分总值;
根据每个价值评分总值,从每个所述候选权重向量中选取目标权重向量。
在从候选权重向量中,选取目标权重向量时,可以先针对设定的每个候选权重向量,根据该候选权重向量及第一等级的任一账户的第二概率值,确定该候选权重向量对应第一等级的任一账户的价值评分值。示例性的,第一等级的任一账户的价值评分值用V’表示,该任一账户属于第一等级的账户的第二概率值用p’(Y=1|x)表示,该任一账户属于第二等级账户的第二概率值用p’(Y=2|x)表示,该任一账户属于第三等级账户的第二概率值用p’(Y=3|x)表示,该任一账户属于第四等级账户的第二概率值用p’(Y=4|x)表示,则:
V’=θ1’p’(Y=1|x)+θ2’p’(Y=2|x)+θ3’p’(Y=3|x)+θ4'p'(Y=4|x)。
确定了第一等级的每个账户的价值评分值后,可以根据第一等级的每个账户的价值评分值的和值,确定候选权重向量对应的第一等级的每个账户的价值评分总值。确定了每个候选权重向量对应的价值评分总值后,可以根据每个价值评分总值,从每个候选权重向量中选取目标权重向量。在一种可能的实施方式中,价值评分总值越高,可以认为确定账户为第一等级的账户的可能性越大,为了提高确定待预测账户的价值信息的准确性,可以将每个价值评分总值中的最高值对应的候选权重向量,确定为目标权重向量。
S503:将所述目标权重向量中包括的每个等级对应的目标权重值,作为所述预先确定的每个等级对应的权重值。
确定了目标权重向量后,可以将目标权重向量中包括的每个等级对应的目标权重值,作为预先确定的每个等级对应的权重值。示例性的,如果目标权重向量中,第一等级对应的目标权重值为θ1,第二等级对应的目标权重值为θ2,第三等级对应的目标权重值为θ3,第四等级对应的目标权重值为θ4。则预先确定的第一等级对应的权重值即为θ1,第二等级对应的权重值即为θ2,第三等级对应的权重值即为θ3,第四等级对应的权重值即为θ4
实施例5:
基于相同的技术构思,本申请还提供了一种组合预测模型训练装置,图6示出了一些实施例提供的一种组合预测模型训练装置示意图,该装置包括:
组合模块61,用于根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户,将所述第一账户标注为高价值账户,将所述第二账户标注为低价值账户,其中所述第一账户及所述第二账户均包含至少一个等级的账户,且所述第一账户的资产价值高于所述第二账户的资产价值;
训练模块62,用于针对每个子预测模型,基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,对该子预测模型进行训练。
在一种可能的实施方式中,所述组合模块61,具体用于将最高资产价值区间对应的第一等级的账户,确定为第一账户;将除所述第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集;确定至少一个第二训练集,针对每个第二训练集,将包括所述第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。
实施例6:
基于相同的技术构思,本申请还提供了一种账户价值预测装置,图7示出了一些实施例提供的一种账户价值预测装置示意图,该装置包括:
第一确定模块71,用于将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述待预测账户属于每个等级的第一概率值;
第二确定模块72,用于根据每个所述第一概率值及预先确定的每个等级对应的权重值,确定所述待预测账户的价值评分值;
第三确定模块73,用于根据所述价值评分值,确定所述待预测账户的价值信息。
在一种可能的实施方式中,所述第二确定模块72,具体用于将最高资产价值区间对应的第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述第一等级的每个账户属于每个等级的第二概率值;
基于设定的每个候选权重向量、每个所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量;其中,所述候选权重向量中包含每个等级对应的候选权重值,且所述每个等级对应的候选权重值的和值为设定数值;
将所述目标权重向量中包括的每个等级对应的目标权重值,作为所述预先确定的每个等级对应的权重值。
在一种可能的实施方式中,所述第二确定模块72,具体用于针对设定的每个候选权重向量,根据该候选权重向量及所述第一等级的每个账户的所述第二概率值,确定该候选权重向量对应的第一等级的每个账户的价值评分总值;
根据每个价值评分总值,从每个所述候选权重向量中选取目标权重向量。
实施例7:
基于相同的技术构思,本申请还提供了一种电子设备,图8示出了一些实施例提供的一种电子设备结构示意图,如图8所示,包括:处理器81、通信接口82、存储器83和通信总线84,其中,处理器81,通信接口82,存储器83通过通信总线84完成相互间的通信;
所述存储器83中存储有计算机程序,当所述程序被所述处理器81执行时,使得所述处理器81执行如下步骤:
根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户,将所述第一账户标注为高价值账户,将所述第二账户标注为低价值账户,其中所述第一账户及所述第二账户均包含至少一个等级的账户,且所述第一账户的资产价值高于所述第二账户的资产价值;
针对每个子预测模型,基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,对该子预测模型进行训练。
在一种可能的实施方式中,处理器81,具体用于将最高资产价值区间对应的第一等级的账户,确定为第一账户;将除所述第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集;
确定至少一个第二训练集,针对每个第二训练集,将包括所述第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。
在一种可能的实施方式中,所述特征向量包括消费特征信息、房车特征信息、理财特征信息中的至少一种。
由于上述电子设备解决问题的原理与组合预测模型训练方法相似,因此上述电子设备的实施可以参见方法的实施,重复之处不再赘述。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口82用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选地,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器,包括中央处理器、网络处理器(NetworkProcessor,NP)等;还可以是数字指令处理器(Digital Signal Processing,DSP)、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
实施例8:
基于相同的技术构思,本申请还提供了一种电子设备,图9示出了一些实施例提供的另一种电子设备结构示意图,如图9所示,包括:处理器91、通信接口92、存储器93和通信总线94,其中,处理器91,通信接口92,存储器93通过通信94完成相互间的通信;
所述存储器93中存储有计算机程序,当所述程序被所述处理器91执行时,使得所述处理器91执行如下步骤:
将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述待预测账户属于每个等级的第一概率值;
根据每个所述第一概率值及预先确定的每个等级对应的权重值,确定所述待预测账户的价值评分值;
根据所述价值评分值,确定所述待预测账户的价值信息。
在一种可能的实施方式中,处理器91,具体用于将最高资产价值区间对应的第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述第一等级的每个账户属于每个等级的第二概率值;
基于设定的每个候选权重向量、每个所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量;其中,所述候选权重向量中包含每个等级对应的候选权重值,且所述每个等级对应的候选权重值的和值为设定数值;
将所述目标权重向量中包括的每个等级对应的目标权重值,作为所述预先确定的每个等级对应的权重值。
在一种可能的实施方式中,处理器91,具体用于针对设定的每个候选权重向量,根据该候选权重向量及所述第一等级的每个账户的所述第二概率值,确定该候选权重向量对应的第一等级的每个账户的价值评分总值;
根据每个价值评分总值,从每个所述候选权重向量中选取目标权重向量。
由于上述电子设备解决问题的原理与基于组合预测模型训练方法的账户价值预测方法相似,因此上述电子设备的实施可以参见方法的实施,重复之处不再赘述。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口92用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选地,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器,包括中央处理器、网络处理器(NetworkProcessor,NP)等;还可以是数字指令处理器(Digital Signal Processing,DSP)、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
实施例9:
基于相同的技术构思,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有可由电子设备执行的计算机程序,当所述程序在所述电子设备上运行时,使得所述电子设备执行时实现如下步骤:
根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户,将所述第一账户标注为高价值账户,将所述第二账户标注为低价值账户,其中所述第一账户及所述第二账户均包含至少一个等级的账户,且所述第一账户的资产价值高于所述第二账户的资产价值;
针对每个子预测模型,基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,对该子预测模型进行训练。
在一种可能的实施方式中,所述基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户包括:
将最高资产价值区间对应的第一等级的账户,确定为第一账户;将除所述第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集;
确定至少一个第二训练集,针对每个第二训练集,将包括所述第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。
在一种可能的实施方式中,所述特征向量包括消费特征信息、房车特征信息、理财特征信息中的至少一种。
由于上述计算机可读存储介质解决问题的原理与组合预测模型训练方法相似,因此上述计算机可读存储介质的实施可以参见方法的实施,重复之处不再赘述。
上述计算机可读存储介质可以是电子设备中的处理器能够存取的任何可用介质或数据存储设备,包括但不限于磁性存储器如软盘、硬盘、磁带、磁光盘(MO)等、光学存储器如CD、DVD、BD、HVD等、以及半导体存储器如ROM、EPROM、EEPROM、非易失性存储器(NANDFLASH)、固态硬盘(SSD)等。
实施例10:
基于相同的技术构思,本申请实施例提供了另一种计算机可读存储介质,所述计算机可读存储介质内存储有可由电子设备执行的计算机程序,当所述程序在所述电子设备上运行时,使得所述电子设备执行时实现如下步骤:
将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述待预测账户属于每个等级的第一概率值;
根据每个所述第一概率值及预先确定的每个等级对应的权重值,确定所述待预测账户的价值评分值;
根据所述价值评分值,确定所述待预测账户的价值信息。
在一种可能的实施方式中,预先确定每个等级对应的权重值的过程包括:
将最高资产价值区间对应的第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述第一等级的每个账户属于每个等级的第二概率值;
基于设定的每个候选权重向量、每个所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量;其中,所述候选权重向量中包含每个等级对应的候选权重值,且所述每个等级对应的候选权重值的和值为设定数值;
将所述目标权重向量中包括的每个等级对应的目标权重值,作为所述预先确定的每个等级对应的权重值。
在一种可能的实施方式中,所述基于设定的每个候选权重向量、所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量包括:
针对设定的每个候选权重向量,根据该候选权重向量及所述第一等级的每个账户的所述第二概率值,确定该候选权重向量对应的第一等级的每个账户的价值评分总值;
根据每个价值评分总值,从每个所述候选权重向量中选取目标权重向量。
由于上述计算机可读存储介质解决问题的原理与基于组合预测模型训练方法的账户价值预测方法相似,因此上述计算机可读存储介质的实施可以参见方法的实施,重复之处不再赘述。
上述计算机可读存储介质可以是电子设备中的处理器能够存取的任何可用介质或数据存储设备,包括但不限于磁性存储器如软盘、硬盘、磁带、磁光盘(MO)等、光学存储器如CD、DVD、BD、HVD等、以及半导体存储器如ROM、EPROM、EEPROM、非易失性存储器(NANDFLASH)、固态硬盘(SSD)等。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (13)

1.一种组合预测模型训练方法,其特征在于,所述方法包括:
根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户,将所述第一账户标注为高价值账户,将所述第二账户标注为低价值账户,其中所述第一账户及所述第二账户均包含至少一个等级的账户,且所述第一账户的资产价值高于所述第二账户的资产价值;
针对每个子预测模型,基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,对该子预测模型进行训练。
2.根据权利要求1所述的方法,其特征在于,所述基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户包括:
将最高资产价值区间对应的第一等级的账户,确定为第一账户;将除所述第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集;
确定至少一个第二训练集,针对每个第二训练集,将包括所述第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。
3.根据权利要求1所述的方法,其特征在于,所述特征向量包括消费特征信息、房车特征信息、理财特征信息中的至少一种。
4.一种基于权利要求1-3任一项所述组合预测模型训练方法的账户价值预测方法,其特征在于,所述方法包括:
将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述待预测账户属于每个等级的第一概率值;
根据每个所述第一概率值及预先确定的每个等级对应的权重值,确定所述待预测账户的价值评分值;
根据所述价值评分值,确定所述待预测账户的价值信息。
5.根据权利要求4所述的方法,其特征在于,预先确定每个等级对应的权重值的过程包括:
将最高资产价值区间对应的第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述第一等级的每个账户属于每个等级的第二概率值;
基于设定的每个候选权重向量、每个所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量;其中,所述候选权重向量中包含每个等级对应的候选权重值,且所述每个等级对应的候选权重值的和值为设定数值;
将所述目标权重向量中包括的每个等级对应的目标权重值,作为所述预先确定的每个等级对应的权重值。
6.根据权利要求5所述的方法,其特征在于,所述基于设定的每个候选权重向量、所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量包括:
针对设定的每个候选权重向量,根据该候选权重向量及所述第一等级的每个账户的所述第二概率值,确定该候选权重向量对应的第一等级的每个账户的价值评分总值;
根据每个价值评分总值,从每个所述候选权重向量中选取目标权重向量。
7.一种组合预测模型训练装置,其特征在于,所述装置包括:
组合模块,用于根据每个账户的资产价值信息及预设的每个资产价值区间,将账户划分为至少3个等级;基于设定的至少两种等级组合方式,从所述至少3个等级中选取每个子预测模型的训练集,其中每个训练集中包含第一账户及第二账户,将所述第一账户标注为高价值账户,将所述第二账户标注为低价值账户,其中所述第一账户及所述第二账户均包含至少一个等级的账户,且所述第一账户的资产价值高于所述第二账户的资产价值;
训练模块,用于针对每个子预测模型,基于该子预测模型的训练集中的每个账户的特征向量及对应的标注信息,对该子预测模型进行训练。
8.根据权利要求7所述的装置,其特征在于,所述组合模块,具体用于将最高资产价值区间对应的第一等级的账户,确定为第一账户;将除所述第一等级之外的其他等级的账户,确定为第二账户,将该第一账户和该第二账户组成的第一训练集确定为第一子预测模型的训练集;确定至少一个第二训练集,针对每个第二训练集,将包括所述第一等级在内的资产价值区间连续的至少两个等级的账户,确定为该第二训练集的第一账户;将除该至少两个等级的账户之外的其他等级的账户,确定为该第二训练集的第二账户;并将该第二训练集确定为任一第二子预测模型的训练集。
9.一种基于权利要求7-8任一项所述组合预测模型训练装置的账户价值预测装置,其特征在于,所述装置包括:
第一确定模块,用于将待预测账户的特征向量分别输入预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述待预测账户属于每个等级的第一概率值;
第二确定模块,用于根据每个所述第一概率值及预先确定的每个等级对应的权重值,确定所述待预测账户的价值评分值;
第三确定模块,用于根据所述价值评分值,确定所述待预测账户的价值信息。
10.根据权利要求9所述的装置,其特征在于,所述第二确定模块,具体用于将最高资产价值区间对应的第一等级的每个账户的特征向量分别输入到预先训练完成的每个子预测模型,基于所述每个子预测模型输出的概率值及累计概率算法,确定所述第一等级的每个账户属于每个等级的第二概率值;
基于设定的每个候选权重向量、每个所述第二概率值及线性加权融合法,从每个所述候选权重向量中选取目标权重向量;其中,所述候选权重向量中包含每个等级对应的候选权重值,且所述每个等级对应的候选权重值的和值为设定数值;
将所述目标权重向量中包括的每个等级对应的目标权重值,作为所述预先确定的每个等级对应的权重值。
11.根据权利要求10所述的装置,其特征在于,所述第二确定模块,具体用于针对设定的每个候选权重向量,根据该候选权重向量及所述第一等级的每个账户的所述第二概率值,确定该候选权重向量对应的第一等级的每个账户的价值评分总值;
根据每个价值评分总值,从每个所述候选权重向量中选取目标权重向量。
12.一种电子设备,其特征在于,所述电子设备至少包括处理器和存储器,所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1-3中任一所述一种组合预测模型训练方法的步骤,或,实现如权利要求4-6中任一所述账户价值预测方法的步骤。
13.一种计算机可读存储介质,其特征在于,其存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-3中任一所述一种组合预测模型训练方法的步骤,或,实现如权利要求4-6中任一所述账户价值预测方法的步骤。
CN202110837713.3A 2021-07-23 2021-07-23 预测模型训练和账户价值预测方法、装置、设备及介质 Active CN113554093B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110837713.3A CN113554093B (zh) 2021-07-23 2021-07-23 预测模型训练和账户价值预测方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110837713.3A CN113554093B (zh) 2021-07-23 2021-07-23 预测模型训练和账户价值预测方法、装置、设备及介质

Publications (2)

Publication Number Publication Date
CN113554093A true CN113554093A (zh) 2021-10-26
CN113554093B CN113554093B (zh) 2024-02-13

Family

ID=78104280

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110837713.3A Active CN113554093B (zh) 2021-07-23 2021-07-23 预测模型训练和账户价值预测方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN113554093B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114629797A (zh) * 2022-03-11 2022-06-14 阿里巴巴(中国)有限公司 带宽预测方法、模型生成方法及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180225667A1 (en) * 2017-02-09 2018-08-09 Guangyu Wang Electronic transactional data based predictive system
CN111311338A (zh) * 2020-03-30 2020-06-19 网易(杭州)网络有限公司 用户价值的预测方法以及用户价值预测模型的训练方法
WO2021004132A1 (zh) * 2019-07-09 2021-01-14 深圳壹账通智能科技有限公司 异常数据检测方法、装置、计算机设备和存储介质
CN112464083A (zh) * 2020-11-16 2021-03-09 北京达佳互联信息技术有限公司 模型训练方法、作品推送方法、装置、电子设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180225667A1 (en) * 2017-02-09 2018-08-09 Guangyu Wang Electronic transactional data based predictive system
WO2021004132A1 (zh) * 2019-07-09 2021-01-14 深圳壹账通智能科技有限公司 异常数据检测方法、装置、计算机设备和存储介质
CN111311338A (zh) * 2020-03-30 2020-06-19 网易(杭州)网络有限公司 用户价值的预测方法以及用户价值预测模型的训练方法
CN112464083A (zh) * 2020-11-16 2021-03-09 北京达佳互联信息技术有限公司 模型训练方法、作品推送方法、装置、电子设备及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ANDY WOOD: "the value of customer and prospect databases as a corporate asset", INTERNATIONAL JOURNAL OF RETAIL & DISTRIBUTION MANAGEMENT, vol. 31, no. 12 *
刘力欣,等: "商业银行零售客户大数据精准营销的方法和策略研究", 商业银行, pages 54 - 62 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114629797A (zh) * 2022-03-11 2022-06-14 阿里巴巴(中国)有限公司 带宽预测方法、模型生成方法及设备
CN114629797B (zh) * 2022-03-11 2024-03-08 阿里巴巴(中国)有限公司 带宽预测方法、模型生成方法及设备

Also Published As

Publication number Publication date
CN113554093B (zh) 2024-02-13

Similar Documents

Publication Publication Date Title
US10324705B2 (en) System and method for run-time update of predictive analytics system
CN110009042A (zh) 一种数据预测方法、装置、电子设备及存储介质
CN110415036B (zh) 用户等级的确定方法、装置、计算机设备和存储介质
CN111047429A (zh) 一种概率预测方法及装置
CN111340244A (zh) 预测方法、训练方法、装置、服务器及介质
WO2019205544A1 (zh) 兼顾公平性的上下文感知学习的结果预测分类器
CN112561691B (zh) 一种客户授信预测方法、装置、设备及存储介质
CN111401940A (zh) 特征预测方法、装置、电子设备及存储介质
CA2845645A1 (en) In the market model systems and methods
EP4070208A1 (en) Controlling reachability in a collaboratively filtered recommender
CN113554093A (zh) 预测模型训练和账户价值预测方法、装置、设备及介质
CN116862078B (zh) 一种换电套餐用户逾期的预测方法、系统、装置及介质
US20210357699A1 (en) Data quality assessment for data analytics
CN116578400A (zh) 多任务数据处理方法和装置
CN111310931A (zh) 参数生成方法、装置、计算机设备及存储介质
Lejeune et al. Optimization for simulation: LAD accelerator
CN114612231A (zh) 股票量化交易方法、装置、终端设备及可读存储介质
CN114841588A (zh) 信息处理方法、装置、电子设备和计算机可读介质
CN114549032A (zh) 备货处理方法及装置、计算机存储介质、电子设备
Kim Cost‐Sensitive Estimation of ARMA Models for Financial Asset Return Data
CN111143552B (zh) 文本信息的类别预测方法和装置、服务器
US20230214629A1 (en) Transformer-based autoregressive language model selection
CN117611229A (zh) 一种客户流失类型预测方法、装置、电子设备及存储介质
CN118552253A (zh) 模型训练方法、点击率预测方法、设备、介质和产品
CN117196063A (zh) 模型训练方法、对象属性值确定方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant