CN114862514A - 一种基于元学习的用户偏好商品推荐方法 - Google Patents
一种基于元学习的用户偏好商品推荐方法 Download PDFInfo
- Publication number
- CN114862514A CN114862514A CN202210504151.5A CN202210504151A CN114862514A CN 114862514 A CN114862514 A CN 114862514A CN 202210504151 A CN202210504151 A CN 202210504151A CN 114862514 A CN114862514 A CN 114862514A
- Authority
- CN
- China
- Prior art keywords
- user
- commodity
- domain
- target domain
- meta
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0631—Item recommendations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Biophysics (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Mathematical Physics (AREA)
- Biomedical Technology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Machine Translation (AREA)
Abstract
本发明公开了一种基于元学习的用户偏好商品推荐方法,本发明能够利用辅助信息进行融合来提高特征精度。本发明通过元学习建立用户通道来实现用户特征转化,解决由于单一业务过于针对性的个性化推荐导致的用户兴趣衰减问题,改善推荐系统的多样性和新奇性,同时还能够提高对目标域用户商品推荐的精确度,本发明通过元学习的再学习能力,若新任务到来也能够快速的建立映射关系,从而实现在获取已有的知识上能够快速的学习新的任务,来实现对目标域的推荐。
Description
技术领域
本发明属于跨域推荐领域,具体涉及一种基于元学习的用户偏好商品推荐方法。
背景技术
21世纪以来,随着信息技术和计算机技术的迅速发展,商务活动也呈现出国际化、虚拟化、无纸化。传统的消费产业逐渐的走向电子商务化,同时随着国内电子商务环境不断地发展和完善,网络平台购物已经成为人们生活中的一部分,人们对于平台商品的个性化推荐要求越来越严格,电商平台的冷启动问题显得额外重要,而跨域推荐可以解决由于单一业务过于针对性的个性化推荐导致的用户兴趣衰减问题,改善推荐系统的多样性和新奇性。基于元学习的用户偏好方法作为跨域推荐的技术之一,不仅可以优化和学习源域到目标域的知识,还能够提高对目标域用户商品推荐的精确度。
目前有各种技术处理以下问题:
(1)基于共享实体表示的模型方法;
该模型方法主要利用不同领域之间的重叠实体来融合不同领域之间的信息,建立起两个不同领域间的关系,从而实现跨域推荐。一般可以分为三个步骤,首先获取不同领域用户和商品的embedding向量,其次通过两个领域的公共用户进行结合得到两个领域的信息共性,最后实现预测评分。但是该模型比较依赖于有大量公共用户才能有好的推荐效果,同时直接通过结合层得到的公共特征并不太准确,导致推荐性能并不是很好。
(2)基于域间映射的模型方法;
对于源域丰富的交互历史记录来为数据较为稀疏的目标域进行推荐,从而解决目标域的冷启动问题,主要也是通过不同领域之间的重叠实体,通过重叠的实体来学习一个映射函数,将源域用户映射为目标域用户特征,但是这种映射方式依赖重叠的实体,而这部分实体比例很少,可能导致映射函数学习不充分,不能达到令人满意的效果。
(3)基于异构图嵌入的模型方法;
适用于不同领域间有一定的重叠实体,并且除评分信息外一般要具有一些辅助内容信息,如用户评论,物品标签等等,使得用户之间的相似性以及商品之间的相似性可以很好地衡量。该模型利用不同领域的实体建立一个所有领域共享的异构图,通过将全部交互信息以及内容信息整合到一个共享图中,用户以及物品在不同领域的特征可以被全面地考量,使得对用户以及物品的建模更加准确,但是模型构建的代价太大,且依赖于大量辅助信息。
发明内容
本发明的目的在于克服上述不足,提供一种基于元学习的用户偏好商品推荐方法,提高了源域到目标域的推荐精度。
为了达到上述目的,本发明包括以下步骤:
S1,采用CNN算法对源域和目标域的用户评论集和商品评价集进行文本数据处理,得到用户特征和商品特征;
对用户评分矩阵进行分解,得到分解后的用户评分矩阵;
S2,将用户特征以及商品特征与分解后的用户评分矩阵进行融合;
S3,通过源域的商品内容提取源域到目标域转化中的用户偏好特征,同时赋予转化中源域商品对目标域商品的影响权重,使用注意力网络机制来体现源域商品的用户偏好转化特征向量;
S4,根据源域到目标域的用户偏好特征,通过元学习的方法建立用户偏好通道,使源域用户特性到目标域用户特性进行转化,通过转化后的目标域用户特性和目标域的商品特性进行评分预测。
S1的具体方法如下:
将源域和目标域的用户评论集和商品评价集进行word2vec映射得到词向量矩阵WUs、WUt、WIs和WIt,WUs表示源域的用户词向量,WUt表示目标域的用户词向量,WIs表示源域的商品词向量,WIt表示目标域的商品词向量;
将源域和目标域的用户评分矩阵通过矩阵分解为us、vs、ut和vt,us表示源域的用户特征,vs表示源域的商品特征,ut表示目标域的用户特征,vt表示目标域的商品特征。
词向量的计算过程如下:
WU=word2vec(UIn)
WV=word2vec(VIm)
其中WU为用户词向量,UIn={UC,(UI1,UI2,…,UIn)},UC为用户评论集,n为用户评论集提取后的单词总数,WV为商品词向量,VIm={VC,(VI1,VI2,…,VIm)},VC为商品评论集,m为商品评价集提取后的单词总数。
S2中,融合过程如下:
ps=αCNN_WUs⊙(1-α)us
pt=αCNN_WUt⊙(1-α)ut
qs=αCNN_WVs⊙(1-α)vs
qt=αCNN_WVt⊙(1-α)vt
其中,ps和pt分别表示为源域和目标域的用户特性,来自于CNN模型和矩阵分解得到的用户特性间的融合;qs和qt分别表示源域和目标域的商品特性,来自于CNN模型和矩阵分解得到的商品特性间的融合;⊙代表两个k维向量间的相加,α表示两种特性之间的权重。
CNN模型提取用户特性和商品特征的特征向量,并行将源域和目标域的用户特征和商品特征进行融合,权重参数α在学习中更新,最终得到融合后的源域和目标域的用户与商品特征向量。
S3的具体方法如下:
将源域的商品特征输入到注意力网络中,训练学习商品的权重,训练结束后进行加权处理得到用户偏好转化特征向量。
用户偏好转化特征的计算方法如下:
S4的具体方法如下:
用户偏好转化特征向量作为元学习网络的输入来构建用户偏好通道,使输入到用户偏好通道的源域的用户特征向量转化为目标域的用户特征,将目标域的用户特征与目标域的商品特征进行点乘积,得到目标域的用户对商品的评分预测来推荐商品,们使用平均绝对值误差MAE和均方根误差RMSE作为评判指标。
评判指标的计算方法如下:
评判指标的损失函数为:
与现有技术相比,本发明首先对源域和目标域的用户评论集和商品评价集进行文本数据处理,得到用户特征和商品特征,对用户评分矩阵进行分解,得到分解后的用户评分矩阵,再将用户特征以及商品特征与分解后的用户评分矩阵进行融合,本发明能够利用辅助信息进行融合来提高特征精度。本发明根据源域到目标域的用户偏好特征,通过元学习的方法建立用户偏好通道,使源域用户特性到目标域用户特性进行转化,通过转化后的目标域用户特性和目标域的商品特性进行评分预测。本发明通过元学习建立用户通道来实现用户特征转化,解决由于单一业务过于针对性的个性化推荐导致的用户兴趣衰减问题,改善推荐系统的多样性和新奇性,同时还能够提高对目标域用户商品推荐的精确度,本发明通过元学习的再学习能力,若新任务到来也能够快速的建立映射关系,从而实现在获取已有的知识上能够快速的学习新的任务,来实现对目标域的推荐。
附图说明
图1为本发明的架构图;
图2为本发明中文本特征提取流程图;
图3为本发明中信息特征融合示意图;
图4为本发明中元学习用户偏好示意图。
具体实施方式
下面结合附图对本发明做进一步说明。
首先引入相关的定义:
定义1,CNN算法提取用户和商品特征的计算过程如下:
CNN_WU=fCNN(w;p;WU)
CNN_WV=fCNN(w;p;WV)
其中:CNN_WU表示用户特征向量,w表示CNN的权重,p表示CNN的偏差值,WU表示用户词向量;CNN_WV表示商品特征向量,WV表示商品词向量,fCNN表示CNN的激活函数。
定义2,用户偏好转化特征计算过程为:
定义3,元学习网络评分训练模型的损失函数为:
参见图1,本发明包括以下步骤:
S1,参见图2,采用CNN算法对源域和目标域的用户评论集和商品评价集进行文本数据处理,得到用户特征和商品特征;具体方法如下:
将源域和目标域的用户评论集和商品评价集进行word2vec映射得到词向量矩阵WUs、WUt、WIs和WIt,WUs表示源域的用户词向量,WUt表示目标域的用户词向量,WIs表示源域的商品词向量,WIt表示目标域的商品词向量;词向量的计算过程如下:
WU=word2vec(UIn)
WV=word2vec(VIm)
其中WU为用户词向量,UIn={UC,(UI1,UI2,…,UIn)},UC为用户评论集,n为用户评论集提取后的单词总数,WV为商品词向量,VIm={VC,(VI1,VI2,…,VIm)},VC为商品评论集,m为商品评价集提取后的单词总数。
对用户评分矩阵进行分解,得到分解后的用户评分矩阵;将源域和目标域的用户评分矩阵通过矩阵分解为us、vs、ut和vt,us表示源域的用户特征,vs表示源域的商品特征,ut表示目标域的用户特征,vt表示目标域的商品特征。
对提取得到的词向量进行文本分析,其中CNN模型的训练流程如图3所示,通过卷积层(CL)、池化层(PL)、全连接层(FCL)计算各层的误差,不断更新学习参数,最终得到用户和商品的特征向量。
最后将CNN算法提取到的源域和目标域的用户特征以及商品特征与从源域和目标域的评分矩阵分解得到的用户隐因子和商品隐因子进行融合,从而得到更精准放入源域和目标域的用户特征与商品特征。
S2,将用户特征以及商品特征与分解后的用户评分矩阵进行融合;融合过程如下:
ps=αCNN_WUs⊙(1-α)us
pt=αCNN_WUt⊙(1-α)ut
qs=αCNN_WVs⊙(1-α)vs
qt=αCNN_WVt⊙(1-α)vt
其中,ps和pt分别表示为源域和目标域的用户特性,来自于CNN模型和矩阵分解得到的用户特性间的融合;qs和qt分别表示源域和目标域的商品特性,来自于CNN模型和矩阵分解得到的商品特性间的融合;⊙代表两个k维向量间的相加,α表示两种特性之间的权重。
CNN模型提取用户特性和商品特征的特征向量,并行将源域和目标域的用户特征和商品特征进行融合,权重参数α在学习中更新,最终得到融合后的源域和目标域的用户与商品特征向量。
S3,通过源域的商品内容提取源域到目标域转化中的用户偏好特征,同时赋予转化中源域商品对目标域商品的影响权重,使用注意力网络机制来体现源域商品的用户偏好转化特征向量,这里的a′j表示该商品对于构建用户偏好通道的重要性;具体方法如下:
将源域的商品特征输入到注意力网络中,训练学习商品的权重,训练结束后进行加权处理得到用户偏好转化特征向量。
用户偏好转化特征的计算方法如下:
S4,根据源域到目标域的用户偏好特征,通过元学习的方法建立用户偏好通道,使源域用户特性到目标域用户特性进行转化,通过转化后的目标域用户特性和目标域的商品特性进行评分预测,具体方法如下:
用户偏好转化特征向量作为元学习网络的输入来构建用户偏好通道,使输入到用户偏好通道的源域的用户特征向量转化为目标域的用户特征,将目标域的用户特征与目标域的商品特征进行点乘积,得到目标域的用户对商品的评分预测来推荐商品,们使用平均绝对值误差MAE和均方根误差RMSE作为评判指标。
评判指标的计算方法如下:
评判指标的损失函数为:
元学习使用了注意力机制得到的用户偏好特征作为输入,通过元网络来学习得到用户偏好通道。如图4主要展示整个运行流程。将得到的源域商品特征输入到注意力网络中来学习到商品对用户的影响权重,从而降低掉对于目标域不相关商品的影响力,然后将商品特征与注意力得分进行加权输出用户偏好转化特征,接下来元网络将用户偏好转化特征作为输入来构学习一个函数f来作为用户偏好的转化通道,传统的元学习采用梯度下降方法来作为损失函数,这里我们采用评分训练作为损失函数,原因是因为采用评分的方式可以直接利用较丰富的rating数据来改善元学习网络,而不是稀疏的用户特征数据,这里的评分任务的训练集和测试集来自源域和目标域的公共用户,
本发明中信息特征融合通过对数据进行预处理,将数据预处理为特征向量送入CNN模型训练以及MF进行矩阵分解。如图2所示,选取源域和目标域的用户评论集和商品评论集送入CNN模型中进行训练得到用户特征和商品特征,同时使用MF来分解源域和目标域的评分矩阵得到用户特征和商品特征,将文本提取的特征和评分矩阵得到的用户特征进行加权融合,融合的参数α和β通过学习不断更新,最终输出融合后的用户特征向量和商品特征向量。
基于元学习的理念,由于传统模型的训练只能够得到一种映射关系,而元学习字面含义是学会学习,能够通过很多训练任务T和训练数据D来找个一个函数F,函数F可以生成一个函数f用于新任务,可以迅速建立起映射,通过元学习可以快速建立起源域和目标域的知识转化,更好的解决目标域数据稀疏导致的推荐准度下降的问题,同时使用基于评分的方式作为元学习中的损失函数,使得元学习参数进一步得到优化。
采用基于评分任务的方式来作为元网络的损失函数,通过源域和目标域的公共用户的评分信息作为元学习任务的训练集和测试集,使得元学习网络得到优化,进一步的提高元学习利用获取到的知识来更快的学习新的任务,最终提高对目标域用户评分预测的准确度。
本发明基于模型融合的理念,由于传统解决跨域问题的方式并没有利用好很多的辅助域信息来对用户和商品特征进行优化,导致推荐精度效果并不好,这里采用融合的理念进一步提高推荐的精度。
Claims (10)
1.一种基于元学习的用户偏好商品推荐方法,其特征在于,包括以下步骤:
S1,采用CNN算法对源域和目标域的用户评论集和商品评价集进行文本数据处理,得到用户特征和商品特征;
对用户评分矩阵进行分解,得到分解后的用户评分矩阵;
S2,将用户特征以及商品特征与分解后的用户评分矩阵进行融合;
S3,通过源域的商品内容提取源域到目标域转化中的用户偏好特征,同时赋予转化中源域商品对目标域商品的影响权重,使用注意力网络机制来体现源域商品的用户偏好转化特征向量;
S4,根据源域到目标域的用户偏好特征,通过元学习的方法建立用户偏好通道,使源域用户特性到目标域用户特性进行转化,通过转化后的目标域用户特性和目标域的商品特性进行评分预测。
2.根据权利要求1所述的一种基于元学习的用户偏好商品推荐方法,其特征在于,S1的具体方法如下:
将源域和目标域的用户评论集和商品评价集进行word2vec映射得到词向量矩阵WUs、WUt、WIs和WIt,WUs表示源域的用户词向量,WUt表示目标域的用户词向量,WIs表示源域的商品词向量,WIt表示目标域的商品词向量;
将源域和目标域的用户评分矩阵通过矩阵分解为us、vs、ut和vt,us表示源域的用户特征,vs表示源域的商品特征,ut表示目标域的用户特征,vt表示目标域的商品特征。
3.根据权利要求2所述的一种基于元学习的用户偏好商品推荐方法,其特征在于,词向量的计算过程如下:
WU=word2vec(UIn)
WV=word2vec(VIm)
其中WU为用户词向量,UIn={UC,(UI1,UI2,…,UIn)},UC为用户评论集,n为用户评论集提取后的单词总数,WV为商品词向量,VIm={VC,(VI1,VI2,…,VIm)},VC为商品评论集,m为商品评价集提取后的单词总数。
4.根据权利要求1所述的一种基于元学习的用户偏好商品推荐方法,其特征在于,S2中,融合过程如下:
ps=αCNW_WUs⊙(1-α)us
pt=αCNN_WUt⊙(1-α)ut
qs=αCNN_WVs⊙(1-α)vs
qt=αCNN_WVt⊙(1-α)vt
其中,ps和pt分别表示为源域和目标域的用户特性,来自于CNN模型和矩阵分解得到的用户特性间的融合;qs和qt分别表示源域和目标域的商品特性,来自于CNN模型和矩阵分解得到的商品特性间的融合;⊙代表两个k维向量间的相加,α表示两种特性之间的权重。
5.根据权利要求4所述的一种基于元学习的用户偏好商品推荐方法,其特征在于,CNN模型提取用户特性和商品特征的特征向量,并行将源域和目标域的用户特征和商品特征进行融合,权重参数α在学习中更新,最终得到融合后的源域和目标域的用户与商品特征向量。
6.根据权利要求1所述的一种基于元学习的用户偏好商品推荐方法,其特征在于,S3的具体方法如下:
将源域的商品特征输入到注意力网络中,训练学习商品的权重,训练结束后进行加权处理得到用户偏好转化特征向量。
8.根据权利要求1所述的一种基于元学习的用户偏好商品推荐方法,其特征在于,S4的具体方法如下:
用户偏好转化特征向量作为元学习网络的输入来构建用户偏好通道,使输入到用户偏好通道的源域的用户特征向量转化为目标域的用户特征,将目标域的用户特征与目标域的商品特征进行点乘积,得到目标域的用户对商品的评分预测来推荐商品,们使用平均绝对值误差MAE和均方根误差RMSE作为评判指标。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210504151.5A CN114862514A (zh) | 2022-05-10 | 2022-05-10 | 一种基于元学习的用户偏好商品推荐方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210504151.5A CN114862514A (zh) | 2022-05-10 | 2022-05-10 | 一种基于元学习的用户偏好商品推荐方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114862514A true CN114862514A (zh) | 2022-08-05 |
Family
ID=82637725
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210504151.5A Pending CN114862514A (zh) | 2022-05-10 | 2022-05-10 | 一种基于元学习的用户偏好商品推荐方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114862514A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115438732A (zh) * | 2022-09-06 | 2022-12-06 | 重庆理工大学 | 面向冷启动用户基于分类偏好迁移的跨域推荐方法 |
-
2022
- 2022-05-10 CN CN202210504151.5A patent/CN114862514A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115438732A (zh) * | 2022-09-06 | 2022-12-06 | 重庆理工大学 | 面向冷启动用户基于分类偏好迁移的跨域推荐方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111222332B (zh) | 一种结合注意力网络和用户情感的商品推荐方法 | |
CN106920147B (zh) | 一种基于词向量数据驱动的商品智能推荐方法 | |
CN108363695B (zh) | 一种基于双向依赖语法树表征的用户评论属性抽取方法 | |
CN111339415A (zh) | 一种基于多交互式注意力网络的点击率预测方法与装置 | |
CN110929034A (zh) | 一种基于改进lstm的商品评论细粒度情感分类方法 | |
CN110795619A (zh) | 一种融合多目标的教育资源个性化推荐系统及方法 | |
CN107944911B (zh) | 一种基于文本分析的推荐系统的推荐方法 | |
CN110489523B (zh) | 一种基于网购评价的细粒度情感分析方法 | |
CN109189921B (zh) | 评论评估模型的训练方法和装置 | |
CN109903099B (zh) | 用于评分预测的模型构建方法和系统 | |
CN110110372B (zh) | 一种用户时序行为自动切分预测方法 | |
CN112069320B (zh) | 一种基于跨度的细粒度情感分析方法 | |
CN110955826A (zh) | 基于改进型循环神经网络单元的推荐系统 | |
CN112256866A (zh) | 一种基于深度学习的文本细粒度情感分析方法 | |
Shen et al. | A voice of the customer real-time strategy: An integrated quality function deployment approach | |
Kang | Combining grey relationship analysis and neural network to develop attractive automobile booth design | |
CN111538841B (zh) | 基于知识互蒸馏的评论情感分析方法、装置及系统 | |
CN111695024A (zh) | 对象评估值的预测方法及系统、推荐方法及系统 | |
CN110569355B (zh) | 一种基于词块的观点目标抽取和目标情感分类联合方法及系统 | |
CN116680363A (zh) | 一种基于多模态评论数据的情感分析方法 | |
CN110874392A (zh) | 基于深度双向注意力机制的文本网络信息融合嵌入方法 | |
CN114862514A (zh) | 一种基于元学习的用户偏好商品推荐方法 | |
CN113742586A (zh) | 一种基于知识图谱嵌入的学习资源推荐方法及系统 | |
CN115186071A (zh) | 意图识别方法、装置、电子设备及可读存储介质 | |
CN117235302A (zh) | 一种基于辅助特征的个性化推荐方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |