CN103336793A - 一种个性化论文推荐方法及其系统 - Google Patents

一种个性化论文推荐方法及其系统 Download PDF

Info

Publication number
CN103336793A
CN103336793A CN2013102309335A CN201310230933A CN103336793A CN 103336793 A CN103336793 A CN 103336793A CN 2013102309335 A CN2013102309335 A CN 2013102309335A CN 201310230933 A CN201310230933 A CN 201310230933A CN 103336793 A CN103336793 A CN 103336793A
Authority
CN
China
Prior art keywords
user
recommendation
paper
papers
training
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013102309335A
Other languages
English (en)
Other versions
CN103336793B (zh
Inventor
程学旗
郭嘉丰
薛欢
廖华明
曹雷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Computing Technology of CAS
Original Assignee
Institute of Computing Technology of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Computing Technology of CAS filed Critical Institute of Computing Technology of CAS
Priority to CN201310230933.5A priority Critical patent/CN103336793B/zh
Publication of CN103336793A publication Critical patent/CN103336793A/zh
Application granted granted Critical
Publication of CN103336793B publication Critical patent/CN103336793B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种个性化论文推荐方法及其系统,其中该方法包括:步骤1,利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,根据所述异质学术网络数据构建训练数据集,并根据所述训练数据集进行训练得到排序学习模型;步骤2,在线构建用户配置,生成用户感兴趣的候选论文集,根据所述候选论文集并基于所述排序学习模型生成论文推荐结果,基于所述论文推荐结果,按照一定方式生成论文推荐返回给用户;步骤3,在线接收用户反馈,并根据不同的用户反馈行为相应地更新所述论文推荐结果。本发明有效地避免了推荐系统初期的“冷启动”问题,保证了推荐结果的准确率和召回率。

Description

一种个性化论文推荐方法及其系统
技术领域
本发明涉及推荐技术领域,特别是涉及一种面向在线社会化学术系统基于用户的个性化论文推荐方法及其系统。
背景技术
论文查阅,是科研人员研究工作的重要组成部分;通过查阅论文,不仅能够帮助科研人员了解相关研究方向的最新进展,而且能够为科研人员提供解决问题的新思路。然而随着科研水平的不断提高,论文的数量也呈现出快速增长态势,截止到2013年2月,仅EI就已经收录了近1500万篇学术论文。如何在海量的文献中找到感兴趣的高质量论文,是每个科研人员所面临的难题。虽然学术搜索引擎(例如Google Scholar)在一定程度上能够帮助科研人员搜索论文,但是这种基于关键词查询的模式存在以下不足:
1)论文查找涵盖了很多内在需求,涉及到论文内容、质量、发表时间和论文的作者研究水平等,而简单的关键字不能够充分地体现出用户的这种需求;
2)搜索引擎缺乏用户的偏好以及背景信息,不能够准确的捕获用户的需求。
因此,迫切需要新的信息获取模式来为研究人员提供更好的论文获取服务。而推荐技术和系统的出现,恰恰能够满足研究人员的特定的论文获取需求,在某种程度上弥补了搜索方式的不足。
推荐系统的本质就是联系用户和物品,一方面帮助用户发现对自己有价值的物品,另一方面让物品能够展示在对它感兴趣的用户面前,从而实现用户和物品利益的双赢。根据用户和物品联系方式的不同,推荐可分为四类:基于内容的推荐、基于协同过滤的推荐、社会化推荐以及混合模型推荐。
基于内容的推荐,即根据用户以往喜欢的物品,找到与这些物品相似的物品推荐给用户。这种推荐机制能够很好地建模用户的兴趣偏好,但时常会缺乏新颖度。基于内容的推荐的质量依赖于对物品建模的完整性和全面性,如果物品不能被很好地提炼它的特征,推荐效果就会下降。
基于协同过滤的推荐,即根据用户对物品的偏好,发现物品之间的相关性或用户之间的相关性,然后基于这些相关性进行推荐。基于协同过滤的推荐可分为三个子类:基于用户的协同过滤,基于物品的协同过滤和基于模型的协同过滤。基于用户的协同过滤即将与目标用户兴趣相似的其他用户所喜欢的,且目标用户没有听说过的物品推荐给目标用户。基于物品的协同过滤即是将与目标用户所偏好物品相似的其他物品推荐给目标用户。基于模型的协同过滤推荐,即基于已有用户对物品的喜好信息,训练一个推荐模型,然后求出目标用户和所有物品的相似度,选出得分最高的物品推荐给目标用户。
社会化推荐,即利用社交网络数据给用户推荐物品。人口统计学信息,比如性别、公司、学校、电子邮件等,用户的位置数据、论坛和讨论组等都可以间接地获取隐性社交关系数据。当然,社交网站是最直接的能获取显性社交关系的途径。推荐系统可以推荐用户的好友感兴趣的物品,或者更好地帮助用户找到与自己兴趣相似的好友,更快地找到自己感兴趣的内容。
混合模型推荐,是指将多个推荐方法混合在一起,避免单个推荐的缺点,综合多个推荐,从而达到更好的推荐效果。常用的混合方法包括加权的混合、切换的混合、分区的混合、分层的混合等。
此前常用的论文推荐方法是基于内容的推荐方法,即利用关键词或者话题对用户的历史关注论文进行建模,然后找到与之相似的论文推荐给用户。然而传统的基于内容的推荐仅仅考虑了内容相关性,忽视了论文所蕴含的其他丰富的信息,包括论文的质量、时间、发表论文的期刊会议的主题和质量,以及论文作者的背景和声望等。因此,推荐结果不能很好的满足用户需求。另外,推荐系统通常都面临“冷启动”问题,即在用户行为较少的情况下,不能够准确对用户或物品进行建模,进而不能够为用户推荐高质量的结果,从而形成较差的用户体验。
针对上述问题,需要提供一种论文推荐方法。
发明内容
本发明的目的在于提供一种个性化论文推荐方法及其系统,用于解决现有技术中推荐结果不能很好地满足用户需求,推荐系统通常都面临“冷启动”问题等问题。
为了实现上述目的,本发明提供一种个性化论文推荐方法,其特征在于,包括:
步骤1,利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,根据所述异质学术网络数据构建训练数据集,并根据所述训练数据集进行训练得到排序学习模型;
步骤2,在线构建用户配置,生成用户感兴趣的候选论文集,根据所述候选论文集并基于所述排序学习模型生成论文推荐结果,基于所述论文推荐结果,按照一定方式生成论文推荐返回给用户;
步骤3,在线接收用户反馈,并根据不同的用户反馈行为相应地更新所述论文推荐结果。
所述的个性化论文推荐方法,其中,所述步骤1中,包括:
步骤11,利用科研领域中研究人员撰写学术论文的行为特性,构造用户历史关注论文集和训练论文集;
步骤12,根据所述用户历史关注论文集,对所述训练论文集中的每篇论文提取异质特征,生成所述训练数据集;
步骤13,根据所述训练数据集进行训练得到排序学习模型。
所述的个性化论文推荐方法,其中,所述步骤1中,包括:
采用文档对方法对所述训练数据集进行训练获取所述排序学习模型。
所述的个性化论文推荐方法,其中,所述步骤2中,包括:
步骤21,根据用户的行为,在线构建用户配置;
步骤22,获得用户配置后,挖掘所述异质学术网络数据,生成用户可能感兴趣的候选论文集;
步骤23,根据用户配置,对用户可能感兴趣的候选论文集中的每篇论文提取特征值,并基于所述排序学习模型,获取每篇论文的排序得分,得到排序最高的论文列表,将所述论文列表中的论文存储到推荐结果集,并按照一定方式生成论文推荐返回给用户。
所述的个性化论文推荐方法,其中,所述步骤23中,包括:
采用多项分布的采样策略从所述推荐结果集中选择论文推荐给用户。
为了实现上述目的,本发明提供一种个性化论文推荐系统,其特征在于,包括:数据中心模块、推荐中心模块、在线服务模块;
所述数据中心模块,用于从数据中心获取和更新数据,并构建用户配置;
所述推荐中心模块,连接所述数据中心模块,用于利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,根据所述异质学术网络数据构建训练数据集,并根据所述训练数据集进行训练得到排序学习模型;根据用户配置信息生成用户感兴趣的候选论文集,根据所述候选论文集并基于所述排序学习模型生成论文推荐结果;获取用户在线反馈,根据不同的用户反馈行为相应地更新论文推荐结果;
所述在线服务模块,连接所述数据中心模块、所述推荐中心模块,用于基于论文推荐结果,按照一定方式生成论文推荐返回给用户,并当用户对推荐行为反馈后,把用户反馈行为放入消息队列,交给所述推荐中心模块处理。
所述的个性化论文推荐系统,其中,所述数据中心模块,用于当用户反馈行为为感兴趣、不感兴趣或已读过时,将论文推荐结果中的相应论文删除。
所述的个性化论文推荐系统,其中,所述推荐中心模块,包括:
离线训练模块,用于从所述异质学术网络数据中提取异质特征,根据所述异质特征构造训练数据集,对所述训练数据集训练离线排序学习模型,得到排序学习模型,并在排序学习模型完成后根据用户配置信息生成用户感兴趣的候选论文集,根据所述候选论文集并基于所述排序学习模型初始化论文推荐结果;
反馈分析模块,用于从所述用户消息队列中获取用户在线反馈,根据不同的用户反馈行为,采取不同方式更新所述论文推荐结果。
所述的个性化论文推荐系统,其中,所述反馈分析模块,还用于判断所述论文推荐结果的大小,并当小于一特定数目时重新获取用户配置,生成新的推荐论文以更新所述论文推荐结果。
所述的个性化论文推荐系统,其中,所述在线服务模块,包括:
推荐结果模块,用于基于所述推荐论文结果,按照一定方式生成论文推荐返回给用户;
推荐反馈模块,用于当用户对推荐行为反馈后,把用户反馈行为放入用户消息队列,交给所述推荐中心模块处理。
与现有技术相比,本发明的有益技术效果在于:
本发明提供的推荐方法,是把论文推荐看成排序问题,强调排序靠前的论文与用户兴趣更相似,采用监督式排序学习方法得到论文的排序模型,并使用该模型来实现基于用户的个性化论文推荐;该排序模型不仅考虑概念、关键词、标题和摘要等文本内容的相似度,同时也考虑了论文重要度、作者重要度、会议重要度、年份、作者重合度、论文来源等重要特征;该方法利用丰富的异质学术网络数据,生成用户感兴趣候选论文集,保证了推荐结果的准确率和召回率,从而也有效地避免了推荐系统初期的“冷启动”问题;利用学术科研领域中研究人员撰写学术论文的行为特性(即研究人员认为自己撰写论文中的引文具有更大的参考价值,对引文的喜好大于同领域中其他相关论文),自动构建排序模型所需的训练数据集,减少了人工标注的开销,极大的提高了系统开发效率。具体体现在如下方面:
1.利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,采用有监督的排序学习方法实现基于用户的个性化论文推荐,从而有效地避免了推荐系统初期的“冷启动”问题。
2.在线获取用户配置后,提出一种新的方式生成用户感兴趣的候选论文集,既保证了推荐结果的准确率和召回率,同时又保证了实时系统的运行效率。
3.利用行为队列保存用户行为反馈,根据用户的不同行为采取不同的方式更新推荐结果,保证了推荐系统的完整性与实时性。
附图说明
图1是本发明利用排序学习方法实现个性化论文推荐的流程图;
图2是本发明离线训练排序学习模型的流程图;
图3是本发明在线实现基于用户的论文推荐的流程图;
图4是本发明个性化论文推荐系统的整体架构及流程图;
图5是本发明根据用户反馈更新论文推荐的流程图。
具体实施方式
以下结合附图和具体实施例对本发明进行详细描述,但不作为对本发明的限定。
如图1所示,描述了利用排序学习方法实现个性化论文推荐的流程图。该流程为利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,提取大量异质特征,构造排序学习方法所需的训练数据集,并离线训练排序学习模型;根据用户不同的行为在线构建用户配置,生成用户感兴趣的候选论文集,基于排序学习模型生成在线论文推荐结果;在线接收用户反馈,根据不同的用户反馈行为相应地更新推荐结果,不但有效地避免了推荐系统初期的“冷启动”问题,而且提高了个性化论文推荐的准确率和召回率。包括以下步骤:
步骤110,利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,从异质学术网络数据中提取大量异质特征,构建排序学习方法所需的训练数据集,并根据训练数据集离线训练排序学习模型。
该步骤中,离线训练排序学习模型的详细过程如图2所示。
步骤120,在线构建用户配置,并根据用户配置信息生成用户感兴趣的候选论文集,基于离线排序学习模型生成论文推荐结果,在线给用户提供个性化论文推荐。
该步骤中,在线实现用户论文推荐的详细过程如图3所示。
步骤130,在线接收用户反馈,并根据不同的用户反馈行为相应更新论文推荐结果。
关于论文推荐的用户反馈行为有三种:“感兴趣”、“不感兴趣”和“已读过”。针对不同的用户反馈行为,相应地更新论文推荐结果。具体在后续的推荐系统的反馈分析模块描述。
如图2所示,是本发明离线训练排序学习模型的流程图。该流程描述了离线训练排序学习模型的详细过程,包括以下步骤:
步骤112,利用科研领域中研究人员撰写学术论文的行为特性,构造用户历史关注论文集和训练论文集。
由于在线系统运行初期,没有大量的用户行为记录,“冷启动”问题是推荐引擎初期所面临的难题之一。个性化论文推荐的目的是基于用户的历史关注论文,找出用户最想要阅读的论文推荐给用户。研究人员撰写学术论文时,会把自己最近已读过的最相关论文添加到自己的引文列表中,即研究人员认为引文中的论文具有更大的参考价值,对引文的兴趣大于同领域中的其他论文。构造如下场景:选择发表论文时间超过两年的作者,以作者发表论文最近一年为时间点切分,该时间点之前作者发表论文Spast的引文当作该作者“历史关注论文集”I,该时间点之后作者发表论文Slatest的引文(且不在I中)当作该作者“未来感兴趣论文集”Pinterest。随机从异质学术网络数据中选择同等数量的其他论文当作用户的“未来不感兴趣论文集”Pnon。用户未来感兴趣论文集和不感兴趣论文集构成了用户的训练论文集P=Pinterest∪Pnon。然后对训练论文集中每个论文打标签。标签是指用户对论文的感兴趣程度。假若用户对某一论文的引用次数越多,说明用户对这篇论文的感兴趣程度越高。本发明采用论文的出现频率来刻画标签。很显然,对于Pnon中的论文,它们的标签是“0”。
li=Freq(pi,Slatest)
其中,li表示第i篇论文pi(pi∈P)的标签,Freq(pi,Slatest)表示论文pi被Slatest的引用次数。
类似于排序学习方法常用到的信息检索领域,训练数据集包含两个部分“查询”和“文档”,本方法中用户的历史关注论文集I相当于查询,而训练论文集P相当于文档。本发明利用科研领域中研究人员撰写学术论文的行为特性,把作者当作用户,构造用户历史关注论文集和训练论文集。
步骤114,对训练论文集中的每篇论文提取异质特征。特征用于刻画排序学习方法中的训练数据。
本发明提取大量异质特征,并进行验证,总结为下述三类特征:
a)静态特征。例如论文的重要度,论文中作者的最大、最小以及平均重要度,论文的出版商的重要度,论文的发表年份等。
b)来源关系特征。论文是如何从用户的历史关注论文推导得来的,例如引用、被引用、共同引用、共同被引用、同一个作者、同一个出版商等。来源关系是单一的还是混合的。
c)内容关系特征。论文和用户历史关注论文的标题、摘要、概念、关键词及领域的最大、最小及平均相似度,作者和出版商的相似度和出现比率等。
至此,排序学习方法所需的训练数据集构造方法的描述完成。通过离线实验验证,发现作者的出现比率、论文的重要度、作者的最大重要度、概念相似度、共同引用等特征的权重较高。
步骤S116,排序学习方法即一种有监督的自动对训练数据构建排序学习模型的机器学习方法。它可以表示为:给定数据集E,(Q(i),D(i))∈E,其中Q(i)是一个向量,D(i)是Q(i)对应的Doc集合,
Figure BDA00003328636100088
i=1,2...,n,其中n表示数据集中Q的个数,m表示D(i)集合的大小。对数据集E构造排序学习模型,使得能够精确预测未知样本集D(i),i=1,2,...,n的标签序列,误差值越小越好。由于排序学习模型的输入数据不同,现有的排序学习方法包括三类:单文档方法(pointwise)、文档对方法(pairwise)和文档列表方法(listwise)。
单文档方法的处理对象是单独的一篇文档,文档是与查询无关的。首先将文档转换为特征向量,然后根据训练数据中的标签把排序问题看成分类或回归问题,用已有的机器学习方法对训练数据构造分类器或回归函数,最后对未知文档打分。单文档方法完全从单个文档的角度考虑,没有考虑到文档之间的顺序关系。
文档对方法则是将重点转向查询的文档对之间的顺序关系。文档对学习方法的训练过程和训练目标是,构造具有偏序关系的样本对,训练模型使得错误的偏序对越少越好。例如针对查询qi,有三个相关文档及得分分别是<doc1,5>,<doc2,4>,<doc3,3>。按照文档得分大小的顺序关系,得到3个文档对<doc1,doc2>,<doc1,doc3>,<doc2,doc3>,将每个文档对的距离转换为特征向量,就形成了一个具体的训练实例,该方法最终使得错误的偏序对越少越好。
文档列表方法是将每一个查询对应的所有文档结果列表整体作为一个训练实例。文档列表方法的优化目标是最大化排序学习模型学到的序与已知的序相似的概率。
由于单文档方法只考虑了文档的分类或打分,没有考虑与查询之间的关系,太过简单,不符合实际情形;而文档列表方法需要获得每个查询的所有文档的全排序,训练数据难以获取,所以本发明采用文档对方法,具体使用RankSvm算法训练排序学习模型。
RankSvm算法在训练模型阶段包括三个步骤:
1)对训练数据集中每个用户的候选论文构造特征向量
Figure BDA00003328636100081
其中,
Figure BDA00003328636100082
表示第k个用户第i篇论文对应的特征向量,表示第k个用户第i篇论文对应的标签;
2)按照步骤1构造的特征向量计算两个论文对之间的距离,例如
Figure BDA00003328636100084
Figure BDA00003328636100085
l i ( k ) > l j ( k ) , f ( x i ( k ) ) > f ( x j ( k ) ) ; l i ( k ) > l j ( k ) , f ( x i ( k ) ) < f ( x j ( k ) ) .
3)对训练数据集中每个用户的任两篇论文之间计算距离,得到不同的类别,因此可以转换成传统的分类问题,用svm算法实现。排序学习问题就可以转换成下述的svm分类问题:
min imize : V ( w , &xi; ) = 1 2 | | w 2 | | + C &Sigma; k = 1 m &xi; k
s . t . : ( l i ( k ) - l j ( k ) ) ( w T x i ( k ) - w T x j ( k ) ) &GreaterEqual; 1 - &xi; k
l i ( k ) > l j ( k ) , &ForAll; &xi; k &GreaterEqual; 0 , k = 1,2 , . . . m
其中w表示排序学习模型中各特征的权重值,ξ是损失因子,m是训练数据集中用户的个数。
排序问题具有几下特点:
第一,相关度可以分为多个级别,高度相关的文档比部分相关的文档更有价值,其在评价中应该赋予更大的权值;
第二,文档在序列中的位置越靠后,这个文档的价值越小,用户去看这些文档的几率越小。
NDCG评价方法中,每一个文档都对它所在的位置有一定的贡献,其贡献值与文档的相关度有关,然后,所有的位置上的贡献值相加作为最终的评价结果。在本实施例中,采用NDCG作为排序学习方法的评估方法。NDCG值定义为:
NDCG = 1 N k &CenterDot; &Sigma; i = 1 k 2 l i - 1 log ( 1 + i )
其中li表示位置为i的论文的标签,Nk为归一化因子。至此,离线排序学习模型训练完成。
如图3所示,是本发明在线实现基于用户的论文推荐的流程图。该流程描述了在线实现用户论文推荐的详细过程,包括以下步骤:
步骤122,根据在线社会化学术系统中用户的行为,在线构建用户配置。
在线社会化学术系统中,用户有很多行为可以反映他们对论文的偏好兴趣。例如,用户可以声明自己发表的论文ID,并得到这些论文的引文IR;用户可以标注论文IB;用户可以分享论文IS;用户可以喜欢论文IL;用户可以评论论文IC等。根据不同的用户行为,构建如下用户配置:
I=ID∪IR∪IB∪IS∪IL∪IC
利用以上方法构造的用户配置,充分地考虑了用户对论文的偏好兴趣;且只要用户采取了上述任一种行为,都将会在后续步骤中为用户推荐结果。
步骤124,获得用户配置后,挖掘异质学术网络数据,生成用户可能感兴趣的候选论文集。有下面六种方式被本发明所采纳,并验证其有效性:
a)论文及引文之间有很强的相关性,引文关系分析是选取相关论文的重要方法之一。本发明采用引用、被引用、共同引用、共同被引用的论文当作引文关系中最相关的论文。
b)用户关注一篇论文后,他可能会继续关注该论文作者的其他后续工作。因此用户关注论文中作者的其他发表论文也被选入候选论文集。
c)用户关注一篇论文后,他可能会继续关注发表在此论文发表的出版商的其他论文。因此用户关注论文的出版商中的其他发表论文也被选入候选论文集。
本发明基于离线排序学习方法构造的训练数据集,对此六种方式进行了实验验证,并证明了其有效性,如下表所示。
来源 准确率 召回率
引用 1.003% 11.512%
被引用 4.702% 8.838%
共同引用 1.131% 38.884%
共同被引用 1.373% 29.405%
同一个作者 0.634% 20.752%
同一个出版商 0.056% 25.813%
以上所有 0.046% 79.840%
由上表可以看出,选择上述几种方式能够很好地覆盖用户想要阅读论文的范围,召回率很高,接近80%,而且在很大程度上缩小了用户可能感兴趣的论文的范围,在实际系统中具有可行性。
步骤126,根据用户配置以及生成的候选论文集,对每篇论文提取特征值,基于离线训练的排序学习模型,计算每篇论文的排序得分,并得到排序最高的论文列表。为了提高用户的体验,防止在用户配置没有更新的情况下提供相同的推荐结果,本发明先存储论文列表中的论文到推荐结果集,然后采用多项分布的采样策略从推荐结果集中选择一定量的论文推荐给用户。采样策略具体描述如下:
假设推荐结果集中论文为R={r1,r2,...,rn},对应的论文推荐得分分别为S={s1,s2,...,sn},则每次采样论文为ri的概率为:
Figure BDA00003328636100111
其中n为推荐结果集中论文的个数。
如果共进行了k次独立的实验,实验结果落入每篇论文的次数分别为X={x1,x2,...,xn}的概率为:
P ( X 1 = x 1 , . . . , X n = x n ) = k ! x 1 ! &CenterDot; &CenterDot; &CenterDot; x n ! p 1 x 1 &CenterDot; &CenterDot; &CenterDot; p n x n when &Sigma; i = 1 n x i = k 0 otherwise
本发明每次依论文采样概率随机选择论文p,直到选择不同的10篇论文推荐给用户。
如图4所示,为本发明个性化论文推荐系统的整体架构及流程图。该系统400具体包含三大模块:数据中心模块10、在线服务模块20、推荐中心模块30,三个模块均位于后台服务器。
数据中心模块10,构建用户配置,并实现从数据库、Redis和内存等数据中心获取和更新数据,它将不同数据源的不同数据类型进行封装,将具体数据访问细节进行封装,提供给其他模块数据访问功能,并有利于扩展和维护。数据中心模块10是整个系统400的核心,所有的模块将与其打交道。使其提供丰富的数据访问接口,也有利于系统高效地运行。数据从逻辑上可分为原始数据、知识库和推荐结果集。
原始数据,包括所有未加工的基本源数据,比如用户行为数据(在本系统400中体现为用户注册信息、声明论文、标注论文、喜欢论文、收藏论文、分享论文)、异质学术网络数据或固定信息数据(包含论文、作者、出版商、概念等实体的具体信息及关联关系,例如论文的作者,论文发表的出版商,论文之间的引用关系)以及日志数据(scribe记录的数据)等。
知识库,即对本系统400有价值及辅助作用的额外数据,包括离线训练的语料集,离线训练的模型,其他资源数据等,例如算法模型。
推荐结果集,即不同的推荐算法生成的不同的推荐候选结果。
在线服务模块20,其直接与前端打交道,包括:推荐结果模块21、推荐反馈模块22。
推荐结果模块21,用于基于推荐结果集,按照一定方式生成论文推荐返回给用户,本发明中采用基于多项分布的采样策略。
推荐反馈模块22,用于当用户有推荐行为(“感兴趣”、“不感兴趣”、“已读过”)反馈后,把用户反馈行为放入消息队列,最后交给反馈分析模块32处理。
当用户需要个性化论文推荐结果时,前端通过Thrift调用接口调用后台服务,推荐结果模块21从推荐结果集中按照一定的方式选出10篇论文推荐给用户。选择方式采用依多项分布的采样策略。若用户不喜欢当前推荐结果或需要另外的推荐时,可选择更新推荐。更新推荐即按照一定的方式选出推荐结果集中的论文(去除当前推荐的论文)推荐给用户,同时将当前推荐的得分降低分值。
用户对推荐结果有行为反馈(“感兴趣”、“不感兴趣”、“已读过”)后,前端通过Thrift调用接口传送信号给后台服务器,推荐反馈模块22接收到信号后将用户账号、论文账号以及用户反馈行为绑定后放入消息队列。
消息队列,是为了实现通过用户的反馈来及时地更新推荐结果,实现用户行为驱动的论文推荐的更新。同时它也是连接在线服务模块20和推荐中心模块30的桥梁。消息队列的实现方式是将所有会影响推荐的用户反馈行为进行记录,当其达到一定的数量或者到达一定的时间时,重新计算所有涉及到用户的推荐动态。
考虑到在线系统中多用户多行为的特点,为每个用户创建一个自己的消息队列,每个消息队列有单独的线程运行推荐更新操作。当用户有行为反馈后,首先判断线程是否运行,若线程正在运行,则把用户反馈行为加入到自己的消息队列中,若线程已经退出,则重新启动线程,并把用户反馈行为加入到自己的消息队列中。消息队列线程按照一定的方式取出消息队列中的元素,然后启动推荐更新操作,直到消息队列为空为止,线程退出。选取方式可采用定时或定量的方式选取,例如消息队列中的用户行为数超过3个或距上次选取时间超过1分钟等等。
推荐中心模块30,其是推荐系统400的核心模块,它包括推荐算法的实现以及推荐结果的生成及更新,具体包括两个子模块:离线训练模块31、反馈分析模块32。
离线训练模块31,它为推荐系统400实现推荐算法并初始化数据中心模块10的推荐结果集。本系统400中采用有监督的排序学习方法实现个性化论文推荐。挖掘异质学术网络数据,从异质学术网络数据中提取大量异质特征,构造训练数据集,标注数据作为测试数据集,利用排序学习方法对训练数据集训练离线排序学习模型,对测试数据集中数据预测排序结果,最终使用NDCG评估方法评价排序学习模型。模型训练完成后,根据系统400中每个用户的配置,初始化推荐结果集。
具体地,推荐结果集的初始化过程如下:首先构建用户配置,即选出用户在天玑学术网中已经关注的论文,包括声明论文、标注论文、喜欢论文、收藏论文、分享论文等(若用户暂且没有在系统中有上述行为操作,则提示用户在系统中声明、标注、喜欢、收藏、分享论文),然后生成用户可能感兴趣的候选论文集,利用排序学习模型,得到论文预测得分,最终选取得分最高的前50篇论文及相关特征插入到数据中心模块10的推荐结果集。
反馈分析模块32,从用户消息队列中获取用户在线反馈,根据不同的用户反馈行为,采取不同方式调用推荐算法更新推荐结果集。
本系统400中关于论文推荐的反馈行为有三种:“感兴趣”“不感兴趣”和“已读过”,参见图5所示。
如图5所示,描述了针对不同用户反馈行为采取不同方式更新论文推荐的流程图,其中A部分表示“感兴趣”的反馈操作,B部分表示“不感兴趣”的反馈操作,C部分表示“已读过”的反馈操作,除了A、B、C以外的部分表示所有行为的共同反馈操作,
对于“感兴趣”的反馈行为,首先在数据中心模块10的推荐结果集中删除该条数据,表示这篇论文不会再推荐给用户。由于用户的配置即关注论文更新,则给用户的论文推荐肯定要随之更新。选择用户反馈的论文,生成该篇论文的候选论文集,然后融合数据中心模块10的推荐结果形成新的候选论文集,利用离线排序学习模型,计算论文得分,如果候选论文集中某些论文存在于知识库的用户可能不感兴趣的论文集中,则把它们降低分值,最终选取得分最高的50篇论文及相关特征更新到数据中心模块10的推荐结果集。
对于“不感兴趣”的反馈行为,首先在数据中心模块10的推荐结果集中删除该条数据。由于用户不喜欢这篇论文,那么和它相关的论文用户的兴趣也会降低。选择用户反馈的论文,生成该篇论文的候选论文集,然后融合知识库中用户可能不感兴趣的论文集形成新的候选论文集,利用离线排序学习模型,计算论文得分,选取得分最高的100篇论文(即用户最可能不喜欢的论文)更新到知识库。最后更新推荐结果集中论文的得分,如果知识库中用户可能不感兴趣的论文存在于推荐结果集中,则降低分值,更新到推荐结果集。由于推荐结果集中论文数量减少,假设用户对全部结果都进行反馈后,会导致没有推荐结果,所以在这里要判断推荐结果集的大小,若小于一特定数目,则重新获取用户配置,生成新的推荐更新到推荐结果集。
对于“已读过”的反馈行为,首先在数据中心模块10的推荐结果集中删除该条数据。然后用户可以选择是否标注论文,若用户标注论文,则表明用户对这篇论文是感兴趣的,即按照“感兴趣”的论文推荐更新方式操作。若用户不标注论文,则暂且并不能看出用户对论文的态度,有可能因为用户当时对这篇论文不感兴趣(弱的负反馈),或者有可能因为用户虽然读过但不想对这篇论文标注(弱的正反馈),所以暂时没有更新推荐结果集。由于推荐结果集中论文数量减少,所以在这里要判断推荐结果集的大小,若小于一定值,则重新获取用户配置,生成新的推荐更新到推荐结果集。
对于推荐系统的难题之一“冷启动”问题,本发明使用排序学习方法来实现在线的基于用户的个性化论文推荐,使得能够在系统初期用户行为很少时给出更精确的论文推荐结果;对于新用户,如果在系统400中没有任何关于论文的行为操作,建议他首先在系统中声明、标注、喜欢、分享或评论论文。
对于推荐系统400中的用户反馈,本发明采用不同的方式针对不同的用户反馈行为更新论文推荐,保证了推荐系统的准确性与完整性。
本发明提出了一种面向在线社会化学术系统的个性化论文推荐方法和系统,其利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,提取大量异质特征,构建排序学习方法所需的训练数据集,并离线训练排序学习模型;在线构建用户配置,并生成用户感兴趣的候选论文集,基于排序学习模型生成论文推荐结果;在线接收用户反馈,并根据不同的用户反馈行为相应地更新推荐结果。本发明提出的方法不但有效地避免了推荐系统初期的“冷启动”问题,而且提高了个性化论文推荐的准确率和召回率。
本发明采用监督式排序学习方法得到论文的排序学习模型,并使用该排序学习模型来实现基于用户的个性化论文推荐,采用消息队列的方式保存用户反馈行为,并基于用户反馈行为来实时更新用户的论文推荐结果,从而保证了推荐结果的准确性和实时性,以及推荐系统的功能完整性。目前该推荐方法和系统已经应用在天玑社会化学术系统中,并得到了用户的良好反馈。
当然,本发明还可有其它多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员当可根据本发明做出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

Claims (10)

1.一种个性化论文推荐方法,其特征在于,包括:
步骤1,利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,根据所述异质学术网络数据构建训练数据集,并根据所述训练数据集进行训练得到排序学习模型;
步骤2,在线构建用户配置,生成用户感兴趣的候选论文集,根据所述候选论文集并基于所述排序学习模型生成论文推荐结果,基于所述论文推荐结果,按照一定方式生成论文推荐返回给用户;
步骤3,在线接收用户反馈,并根据不同的用户反馈行为相应地更新所述论文推荐结果。
2.根据权利要求1所述的个性化论文推荐方法,其特征在于,所述步骤1中,包括:
步骤11,利用科研领域中研究人员撰写学术论文的行为特性,构造用户历史关注论文集和训练论文集;
步骤12,根据所述用户历史关注论文集,对所述训练论文集中的每篇论文提取异质特征,生成所述训练数据集;
步骤13,根据所述训练数据集进行训练得到排序学习模型。
3.根据权利要求2所述的个性化论文推荐方法,其特征在于,所述步骤1中,包括:
采用文档对方法对所述训练数据集进行训练获取所述排序学习模型。
4.根据权利要求1、2或3所述的个性化论文推荐方法,其特征在于,所述步骤2中,包括:
步骤21,根据用户的行为,在线构建用户配置;
步骤22,获得用户配置后,挖掘所述异质学术网络数据,生成用户可能感兴趣的候选论文集;
步骤23,根据用户配置,对用户可能感兴趣的候选论文集中的每篇论文提取特征值,并基于所述排序学习模型,获取每篇论文的排序得分,得到排序最高的论文列表,将所述论文列表中的论文存储到推荐结果集,并按照一定方式生成论文推荐返回给用户。
5.根据权利要求4所述的个性化论文推荐方法,其特征在于,所述步骤23中,包括:
采用多项分布的采样策略从所述推荐结果集中选择论文推荐给用户。
6.一种个性化论文推荐系统,其特征在于,包括:数据中心模块、推荐中心模块、在线服务模块;
所述数据中心模块,用于从数据中心获取和更新数据,并构建用户配置;
所述推荐中心模块,连接所述数据中心模块,用于利用科研领域中研究人员撰写学术论文的行为特性,挖掘异质学术网络数据,根据所述异质学术网络数据构建训练数据集,并根据所述训练数据集进行训练得到排序学习模型;根据用户配置信息生成用户感兴趣的候选论文集,根据所述候选论文集并基于所述排序学习模型生成论文推荐结果;获取用户在线反馈,根据不同的用户反馈行为相应地更新论文推荐结果;
所述在线服务模块,连接所述数据中心模块、所述推荐中心模块,用于基于论文推荐结果,按照一定方式生成论文推荐返回给用户,并当用户对推荐行为反馈后,把用户反馈行为放入消息队列,交给所述推荐中心模块处理。
7.根据权利要求6所述的个性化论文推荐系统,其特征在于,所述数据中心模块,用于当用户反馈行为为感兴趣、不感兴趣或已读过时,将论文推荐结果中的相应论文删除。
8.根据权利要求6或7所述的个性化论文推荐系统,其特征在于,所述推荐中心模块,包括:
离线训练模块,用于从所述异质学术网络数据中提取异质特征,根据所述异质特征构造训练数据集,对所述训练数据集训练离线排序学习模型,得到排序学习模型,并在排序学习模型完成后根据用户配置信息生成用户感兴趣的候选论文集,根据所述候选论文集并基于所述排序学习模型初始化论文推荐结果;
反馈分析模块,用于从所述用户消息队列中获取用户在线反馈,根据不同的用户反馈行为,采取不同方式更新所述论文推荐结果。
9.根据权利要求8所述的个性化论文推荐系统,其特征在于,所述反馈分析模块,还用于判断所述论文推荐结果的大小,并当小于一特定数目时重新获取用户配置,生成新的推荐论文以更新所述论文推荐结果。
10.根据权利要求6、7或9所述的个性化论文推荐系统,其特征在于,所述在线服务模块,包括:
推荐结果模块,用于基于所述推荐论文结果,按照一定方式生成论文推荐返回给用户;
推荐反馈模块,用于当用户对推荐行为反馈后,把用户反馈行为放入用户消息队列,交给所述推荐中心模块处理。
CN201310230933.5A 2013-06-09 2013-06-09 一种个性化论文推荐方法及其系统 Active CN103336793B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310230933.5A CN103336793B (zh) 2013-06-09 2013-06-09 一种个性化论文推荐方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310230933.5A CN103336793B (zh) 2013-06-09 2013-06-09 一种个性化论文推荐方法及其系统

Publications (2)

Publication Number Publication Date
CN103336793A true CN103336793A (zh) 2013-10-02
CN103336793B CN103336793B (zh) 2015-08-12

Family

ID=49244958

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310230933.5A Active CN103336793B (zh) 2013-06-09 2013-06-09 一种个性化论文推荐方法及其系统

Country Status (1)

Country Link
CN (1) CN103336793B (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104331459A (zh) * 2014-10-31 2015-02-04 百度在线网络技术(北京)有限公司 一种基于在线学习的网络资源推荐方法及装置
CN104572829A (zh) * 2014-12-08 2015-04-29 北京工业大学 一种脑信息学研究推荐方法
CN105224524A (zh) * 2015-09-02 2016-01-06 网易有道信息技术(北京)有限公司 文档翻译难度评价方法和装置
CN105488662A (zh) * 2016-01-07 2016-04-13 北京歌利沃夫企业管理有限公司 一种基于双向推荐的在线招聘系统
CN105589948A (zh) * 2015-12-18 2016-05-18 重庆邮电大学 一种文献引用网络可视化及文献推荐方法及系统
CN105893585A (zh) * 2016-04-05 2016-08-24 电子科技大学 一种结合标签数据的二部图模型学术论文推荐方法
CN106503022A (zh) * 2015-09-08 2017-03-15 北京邮电大学 推送推荐信息的方法和装置
CN106897912A (zh) * 2017-01-18 2017-06-27 太仓中科信息技术研究院 基于epsilon反馈算法的推荐系统冷启动方法
CN107153664A (zh) * 2016-03-04 2017-09-12 同方知网(北京)技术有限公司 一种基于组合特征加权的科技文献标注精简研究结论的方法流程
CN107729473A (zh) * 2017-10-13 2018-02-23 东软集团股份有限公司 文章推荐方法及其装置
CN108132961A (zh) * 2017-11-06 2018-06-08 浙江工业大学 一种基于引用预测的参考文献推荐方法
CN108717434A (zh) * 2018-05-15 2018-10-30 南京大学 一种混合逐点策略和成对策略的文本排序方法
CN108763354A (zh) * 2018-05-16 2018-11-06 浙江工业大学 一种个性化的学术文献推荐方法
CN109597934A (zh) * 2018-11-23 2019-04-09 北京字节跳动网络技术有限公司 确定点击推荐词的方法、装置、存储介质及电子设备
CN109740760A (zh) * 2018-12-25 2019-05-10 平安科技(深圳)有限公司 文本质检自动化训练方法、电子装置及计算机设备
CN111241384A (zh) * 2018-11-28 2020-06-05 上海花事电子商务有限公司 一种智能推荐图文方法及推荐图文系统
CN112307214A (zh) * 2019-07-26 2021-02-02 株式会社理光 一种基于深度强化学习的推荐方法及推荐装置
CN112347348A (zh) * 2020-10-30 2021-02-09 中教云智数字科技有限公司 一种教学资源推荐模型训练方法
CN112818037A (zh) * 2021-02-01 2021-05-18 上海阿法迪智能数字科技股份有限公司 图书推荐系统和方法
CN113343125A (zh) * 2021-06-30 2021-09-03 南京大学 一种面向学术精准推荐的异质科研信息集成方法及系统
WO2022198752A1 (zh) * 2021-03-24 2022-09-29 平安科技(深圳)有限公司 推送模型训练方法、数据推送方法、装置及存储介质
CN112818037B (zh) * 2021-02-01 2024-10-22 上海阿法迪智能数字科技股份有限公司 图书推荐系统和方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105843799B (zh) * 2016-04-05 2018-11-23 电子科技大学 一种基于多源异构信息图模型的学术论文标签推荐方法
CN106815297B (zh) * 2016-12-09 2020-04-10 宁波大学 一种学术资源推荐服务系统与方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102646122A (zh) * 2012-02-21 2012-08-22 北京航空航天大学 一种学术社交网络的自动构建方法
CN103049440A (zh) * 2011-10-11 2013-04-17 腾讯科技(深圳)有限公司 一种相关文章的推荐处理方法和处理系统
CN103049575A (zh) * 2013-01-05 2013-04-17 华中科技大学 一种主题自适应的学术会议搜索系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103049440A (zh) * 2011-10-11 2013-04-17 腾讯科技(深圳)有限公司 一种相关文章的推荐处理方法和处理系统
CN102646122A (zh) * 2012-02-21 2012-08-22 北京航空航天大学 一种学术社交网络的自动构建方法
CN103049575A (zh) * 2013-01-05 2013-04-17 华中科技大学 一种主题自适应的学术会议搜索系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
倪卫杰: "基于用户兴趣模型的个性化论文推荐系统研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104331459A (zh) * 2014-10-31 2015-02-04 百度在线网络技术(北京)有限公司 一种基于在线学习的网络资源推荐方法及装置
CN104331459B (zh) * 2014-10-31 2018-07-06 百度在线网络技术(北京)有限公司 一种基于在线学习的网络资源推荐方法及装置
CN104572829B (zh) * 2014-12-08 2018-02-23 北京工业大学 一种脑信息学研究推荐方法
CN104572829A (zh) * 2014-12-08 2015-04-29 北京工业大学 一种脑信息学研究推荐方法
CN105224524B (zh) * 2015-09-02 2022-01-25 网易有道信息技术(北京)有限公司 文档翻译难度评价方法和装置
CN105224524A (zh) * 2015-09-02 2016-01-06 网易有道信息技术(北京)有限公司 文档翻译难度评价方法和装置
CN106503022A (zh) * 2015-09-08 2017-03-15 北京邮电大学 推送推荐信息的方法和装置
US10609433B2 (en) 2015-09-08 2020-03-31 Tencent Technology (Shenzhen) Company Limited Recommendation information pushing method, server, and storage medium
CN105589948B (zh) * 2015-12-18 2018-10-12 重庆邮电大学 一种文献引用网络可视化及文献推荐方法及系统
CN105589948A (zh) * 2015-12-18 2016-05-18 重庆邮电大学 一种文献引用网络可视化及文献推荐方法及系统
CN105488662B (zh) * 2016-01-07 2021-09-03 北京华品博睿网络技术有限公司 一种基于双向推荐的在线招聘系统
CN105488662A (zh) * 2016-01-07 2016-04-13 北京歌利沃夫企业管理有限公司 一种基于双向推荐的在线招聘系统
CN107153664A (zh) * 2016-03-04 2017-09-12 同方知网(北京)技术有限公司 一种基于组合特征加权的科技文献标注精简研究结论的方法流程
CN105893585B (zh) * 2016-04-05 2019-04-26 电子科技大学 一种结合标签数据的二部图模型学术论文推荐方法
CN105893585A (zh) * 2016-04-05 2016-08-24 电子科技大学 一种结合标签数据的二部图模型学术论文推荐方法
CN106897912B (zh) * 2017-01-18 2020-08-28 太仓中科信息技术研究院 基于epsilon反馈算法的推荐系统冷启动方法
CN106897912A (zh) * 2017-01-18 2017-06-27 太仓中科信息技术研究院 基于epsilon反馈算法的推荐系统冷启动方法
CN107729473A (zh) * 2017-10-13 2018-02-23 东软集团股份有限公司 文章推荐方法及其装置
CN107729473B (zh) * 2017-10-13 2021-03-30 东软集团股份有限公司 文章推荐方法及其装置
CN108132961A (zh) * 2017-11-06 2018-06-08 浙江工业大学 一种基于引用预测的参考文献推荐方法
CN108132961B (zh) * 2017-11-06 2020-06-30 浙江工业大学 一种基于引用预测的参考文献推荐方法
CN108717434A (zh) * 2018-05-15 2018-10-30 南京大学 一种混合逐点策略和成对策略的文本排序方法
CN108717434B (zh) * 2018-05-15 2020-07-31 南京大学 一种混合逐点策略和成对策略的文本排序方法
CN108763354B (zh) * 2018-05-16 2021-04-06 浙江工业大学 一种个性化的学术文献推荐方法
CN108763354A (zh) * 2018-05-16 2018-11-06 浙江工业大学 一种个性化的学术文献推荐方法
CN109597934A (zh) * 2018-11-23 2019-04-09 北京字节跳动网络技术有限公司 确定点击推荐词的方法、装置、存储介质及电子设备
CN111241384A (zh) * 2018-11-28 2020-06-05 上海花事电子商务有限公司 一种智能推荐图文方法及推荐图文系统
CN109740760B (zh) * 2018-12-25 2024-04-05 平安科技(深圳)有限公司 文本质检自动化训练方法、电子装置及计算机设备
CN109740760A (zh) * 2018-12-25 2019-05-10 平安科技(深圳)有限公司 文本质检自动化训练方法、电子装置及计算机设备
CN112307214A (zh) * 2019-07-26 2021-02-02 株式会社理光 一种基于深度强化学习的推荐方法及推荐装置
CN112347348A (zh) * 2020-10-30 2021-02-09 中教云智数字科技有限公司 一种教学资源推荐模型训练方法
CN112818037A (zh) * 2021-02-01 2021-05-18 上海阿法迪智能数字科技股份有限公司 图书推荐系统和方法
CN112818037B (zh) * 2021-02-01 2024-10-22 上海阿法迪智能数字科技股份有限公司 图书推荐系统和方法
WO2022198752A1 (zh) * 2021-03-24 2022-09-29 平安科技(深圳)有限公司 推送模型训练方法、数据推送方法、装置及存储介质
CN113343125A (zh) * 2021-06-30 2021-09-03 南京大学 一种面向学术精准推荐的异质科研信息集成方法及系统
CN113343125B (zh) * 2021-06-30 2023-08-22 南京大学 一种面向学术精准推荐的异质科研信息集成方法及系统
WO2023272748A1 (zh) * 2021-06-30 2023-01-05 南京大学 一种面向学术精准推荐的异质科研信息集成方法及系统

Also Published As

Publication number Publication date
CN103336793B (zh) 2015-08-12

Similar Documents

Publication Publication Date Title
CN103336793B (zh) 一种个性化论文推荐方法及其系统
Grbovic et al. Real-time personalization using embeddings for search ranking at airbnb
US9990609B2 (en) Evaluating service providers using a social network
Yang et al. Tag-based expert recommendation in community question answering
Chatti et al. Tag-based collaborative filtering recommendation in personal learning environments
US11544308B2 (en) Semantic matching of search terms to results
CN107993019B (zh) 一种简历评估方法及装置
Ku et al. Artificial intelligence and visual analytics: a deep-learning approach to analyze hotel reviews & responses
US20130035996A1 (en) Social advertising technology (so-ad-tec) system and method for advertising for and in documents, and other systems and methods for accessing, structuring, and evaluating documents
US11580099B2 (en) Context-aware query suggestions
Krestel et al. Diversifying product review rankings: Getting the full picture
Shi et al. Salience and market-aware skill extraction for job targeting
Takano et al. An adaptive e-learning recommender based on user's web-browsing behavior
CN118093884B (zh) 基于关键词匹配的文本聚类方法及系统
Almagrabi et al. A survey of quality prediction of product reviews
CN108182512B (zh) 一种简历评估方法及装置
Bashir et al. Opinion-Based Entity Ranking using learning to rank
Begum et al. Exploring the Benefits of AI for Content Retrieval
Özyirmidokuz et al. Analyzing customer complaints: a web text mining application
Wang et al. AsCDPR: a novel framework for ratings and personalized preference hotel recommendation using cross-domain and aspect-based features
Li et al. Social context analysis for topic-specific expert finding in online learning communities
Wang et al. A distributed hybrid recommendation framework to address the new-user cold-start problem
Wang et al. Collaborative filtering of call for papers
Banerjee et al. Movie recommendation system using particle swarm optimization
CN108182513B (zh) 一种简历评估方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20131002

Assignee: Branch DNT data Polytron Technologies Inc

Assignor: Institute of Computing Technology, Chinese Academy of Sciences

Contract record no.: 2018110000033

Denomination of invention: Personalized paper recommendation method and system thereof

Granted publication date: 20150812

License type: Common License

Record date: 20180807