CN111222029A - 一种网络舆情信息传播中关键节点选择方法 - Google Patents
一种网络舆情信息传播中关键节点选择方法 Download PDFInfo
- Publication number
- CN111222029A CN111222029A CN202010048384.XA CN202010048384A CN111222029A CN 111222029 A CN111222029 A CN 111222029A CN 202010048384 A CN202010048384 A CN 202010048384A CN 111222029 A CN111222029 A CN 111222029A
- Authority
- CN
- China
- Prior art keywords
- user
- node
- social network
- network
- nodes
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 86
- 230000005540 biological transmission Effects 0.000 claims abstract description 43
- 230000008569 process Effects 0.000 claims abstract description 42
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 28
- 208000015181 infectious disease Diseases 0.000 claims abstract description 16
- 238000004088 simulation Methods 0.000 claims abstract description 13
- 238000002955 isolation Methods 0.000 claims abstract description 12
- 208000035473 Communicable disease Diseases 0.000 claims abstract description 9
- 239000011159 matrix material Substances 0.000 claims description 42
- 238000010276 construction Methods 0.000 claims description 7
- 230000009467 reduction Effects 0.000 claims description 7
- 235000014510 cooky Nutrition 0.000 claims description 5
- 238000010845 search algorithm Methods 0.000 claims description 5
- 230000009193 crawling Effects 0.000 claims description 3
- 238000000605 extraction Methods 0.000 claims description 3
- 239000013598 vector Substances 0.000 description 10
- 244000097202 Rathbunia alamosensis Species 0.000 description 6
- 235000009776 Rathbunia alamosensis Nutrition 0.000 description 6
- 238000011161 development Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000011160 research Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000012216 screening Methods 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002262 irrigation Effects 0.000 description 1
- 238000003973 irrigation Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9536—Search customisation based on social or collaborative filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Primary Health Care (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种网络舆情信息传播中关键节点选择方法,1)从真实社交网络中采集特定主题下的舆情事件传播流数据;2)采用传染病模型对单一微博消息的传播过程进行建模并且准确估计其传播影响力;3)为了解决用户数量过多算法时间复杂度高的问题,从网络结构特征角度采用一种启发式方法减少种子的数目,并且引入隔离效率的概念,采用贪心算法选取每次仿真过程中隔离效率最高的节点加入关键节点集;4)采用了有向图搜索中的深度优先算法解决了仿真随机性问题,得到了一组信息传播过程中的关键节点集。本发明在对网络舆情信息传播中关键节点选择过程中综合考虑网络的结构特征和信息传播的动态特征,更贴合实际应用场景。
Description
技术领域
本发明涉及社交网络应用技术领域,特别涉及一种网络舆情信息传播中关键节点选择方法。
背景技术
web2.0时代,在线社交网络发展迅速,用户从单纯的信息受众演变成为有独立影响能力的信息传播主体,社交网络为舆情事件的发展提供了广阔的平台,舆情信息在社交网络的传播呈现出传播速度越来越快,影响越来越大的特点。如何对快速发现有害舆情事件,并且准确评估其发展态势,采用智能化的引导方式疏解舆情代替暴力删帖、五毛党灌水等低效手段,是社会发展中一个关键的研究问题。社交网络中用户数量众多,每个用户对事件的发展演化能够造成不同的影响。与社交网络中意见领袖的发现不同,我们的研究问题是找到一批相对于易于引导的节点,通过改变用户行为以期望取得比较好的整体效果。目前社交网络关键节点选择算法主要可以分为以下几类:
1)基于节点属性与网络拓扑结构的节点重要性评估:这类方法利用网络的结构信息,然后基于这些已知的结构信息对节点的重要性进行排序,重要度高的节点被视为关键节点。常用的评估指标有:节点度、介数(通过节点最短路径的几率,反映了节点对其他节点之间联络的控制作用)、聚类系数以及一些中心性指标用于描述节点在社交网络中所处位置的中心程度。
2)基于贪心算法的节点影响力最大化评估:影响力最大化问题,已经有大量研究将其形式化定义出来。由于种子节点数目众多,并且组合多样性,已经被证明是一个np-hard问题,基于贪心策略的算法通常在准确性方面都有良好的表现,因此被广泛采用。传播模型上,在传播模型上主要还是使用Kempe等提出的独立级联模型和线性阈值模型。其研究思路为通过模拟信息传播过程,寻找一批能够大量增加参与节点让这些种子节点在预定的传播模型下进行影响力传播,使得传播过程终止时被影响的节点数量达到最大。
现在已经存在了许多在社交网络中发现关键节点的工作。
现有技术1提出了一种基于节点覆盖范围的社交网络影响力最大化方法,其主要方法包括:首先根据网络拓扑结构计算每个节点的覆盖范围增益,然后根据增益排序选择种子节点,最后从种子节点集合中选择该社交网络影响力最大化节点集合。
现有技术2提出了一种基于K壳分解的识别传播关键节点的方法,其方法主要包括:首先,通过采集社交平台的消息转发建立传播网络,把参与转发消息的用户加入节点集合,并且获取节点集合中用户的好友集合,建立节点拓扑图;然后根据节点度计算各个节点的K壳索引作为个体影响力;最后采用Floyd算法计算所述传播网络中每对节点间的最短距离,综合K壳索引以及最短路径排名得到传播网络中的传播关键节点。
现有技术3提出了一种基于影响力最大化的社交网络关键节点识别方法,其主要方法包括:首先根据节点度对节点影响力进行初步排序;然后在节点影响力全局稳定之前迭代更新节点影响力;最后根据影响力最大化原则,选取影响力排名靠前的节点作为关键节点。
上述社交网络关键节点发现方法的专利技术方案在关键节点选择过程中都只考虑了网络的静态特征,如节点度,k-shell特性等,忽略了社交网络信息传播过程中的节点相互影响的动态过程;其次,采用综合排名的方式导致关键节点的选取多集中在度较大的节点,在发现影响信息传播的中间关键节点方面存在不足。
发明内容
本发明的目的在于提供一种网络舆情信息传播中关键节点选择方法,以解决上述问题。
为实现上述目的,本发明采用以下技术方案:
一种网络舆情信息传播中关键节点选择方法,其特征在于,包括以下步骤:
步骤1,社交网络特定主题舆情事件传播数据流抽取及参与用户关注关系矩阵构建:对某社交网络的主站点以及它的wap站点进行网络请求抓包,分析某社交网络登录过程的网络请求序列,实现爬虫程序自动登录站点;对于获取到的特定主题下的社交网络消息,爬取每条社交网络下的转发内容,转发时间以及转发用户信息,并且获取参与转发用户的用户关注列表以及粉丝列表,根据用户之间发送消息的时序关系以及用户关注关系构建用户关注关系矩阵A=(V,E),其中V表示参与用户,E表示用户之间的关注关系,是用户的出度边;
步骤2,事件传播模型构建:使用传染病模型作为基础信息传播模型去建模每条社交网络消息的传播过程,对每条消息i进行影响力βi估计,所有消息的传播过程结合在一起即为事件整体的传播过程;
步骤3,事件传播过程中关键节点选择:依据步骤1得到的数据构造用户邻接矩阵A,利用A的结构特征进行启发式搜索,筛选出一批种子节点Q;依据步骤3得到的事件传播模型仿真模拟隔离节点v∈Q之后的信息传播结果,利用贪心算法获得每次迭代结果的最优解,最终得到一组节点序列,将多组节点序列构造成一个有向图,利用深度优先算法遍历得到的有向图,得到最终的关键节点序列。
2.根据权利要求1所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,社交网络中的特定主题事件传播流数据包括:社交网络发帖人信息、社交网络内容和社交网络发送时间;社交网络发帖人信息包括用户粉丝数、关注数、粉丝列表、关注列表和用户简介。
3.根据权利要求1所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,步骤1社交网络特定主题舆情事件传播数据流抽取及参与用户关注关系矩阵构建,其构建步骤为:
第1步:对社交网络的主站点以及社交网络wap站点进行网络请求抓包,分析社交网络登录过程的网络请求序列,模拟登录请求,获取用户Cookie实现爬虫程序自动登录社交网络站点;
第2步:模拟登录后,从社交网络搜索入口输入事件关键词,解析搜索结果页HTML得到特定主题下的社交网络消息,内容包括发帖内容、发帖时间、发帖人信息以及转发情况;根据每条社交网络消息的转发,获取转发该条社交网络的用户信息,包含用户粉丝数、关注数、粉丝列表、关注列表和用户简介;
第3步:根据每个事件参与用户的粉丝以及关注列表和转发关系,把用户之间的关系强度建模为强关联关系、中等关联关系和弱关联关系三种关联关系,得到一个N*N维的用户关系矩阵A,其中N为参与用户数。
4.根据权利要求3所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,
1)强关联关系:根据用户转发消息的时间进行构建;如果用户U转发了用户V的消息,认为用户U关注了用户V,则有一条从V指向U的边;
2)中等关联关系:用户之间存在关注关系,但是没直接有转发关系;假定用户U关注了用户V,用户V发送事件相关消息的时间比用户U早,即tv<tu;
3)弱关联关系:用户之间存在关注关系,但是双方在发贴时序上没有关系;假定用户u关注了用户v,但是用户v发送事件相关消息的时间比用户u晚,即tu<tv;用t*表示用户转发消息的时间。
5.根据权利要求1所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,步骤2事件传播模型构建,采用基本传染病SI模型描述每条微博信息的传播,以1min为周期度量传播,利用真实数据集在固定时刻的参与用户数量作为基准去估计一条社交网络消息的影响力Bi,从而构成一个N*1维的用户影响力矩阵<。
6.根据权利要求1所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,步骤3事件传播过程中关键节点选择中,采用了基于隔离效率的贪心算法,其方法步骤为:
首先设置初始关键节点集合Q={};从种子节点集合Qtemp中选取一个节点v,根据其出度计算引导该节点的成本模拟删除该节点向下的连接边,得到一个新的网络Atemp;利用得到的新网络进行模拟传播,把参与用户的减少量作为引导该节点的收益Pv,计算该节点的引导效率选择隔离效率最高的节点加入Q;
重复执行以上过程,直到关键节点集中节点数目与预设的引导节点数目相等;
接下来进行图搜索算法,执行过程为:
1)执行关键节点选择算法,得到一组节点Qlist;
2)遍历Qlist中的元素,构建一条节点选择顺序路径;
3)重复执行前两步得到多条节点路径;
4)根据多条路径构造最优节点集的关系矩阵;
5)用深度优先算法求解矩阵中的最长路径,并且要包含最多公共节点;路径上的节点为最终关键节点集合Q={q1,q2,…,qQnum}。
与现有技术相比,本发明有以下技术效果:在新浪微博特定主题事件传播流原始数据集基础上,考虑了本发明利用了用户之间本身存在的关注关系以及相关发帖的时序关系构造了用户关系强度矩阵,单条微博消息的传播与真实数据集的拟合度平均达到了95%,对消息传播的整体趋势拟合准确率达到了95.2%;在关键节点的选择结果上,由于考虑了成本收益比,本发明得到的关键节点集合中节点度的平均值很小,模拟隔离集合中所有节点所得到的参与用户数目的减少量高于隔离与关键节点集合中节点度之和相近的节点所带来的参与用户数目的减少量,隔离的成本收益比有所提高。
本发明考虑了消息传播的动态性,利用了SI模型去模拟社交网络信息传播过程中的节点相互影响的动态过程。
本发明考虑了用户参与事件的时序特征,通过准确的信息仿真能够确定节点的影响范围。
本发明考虑了成本收益比,得到的关键节点集合中节点度的平均值很小,更适合与现实场景中的舆情引导。
附图说明
图1是本发明一种网络舆情信息传播中关键节点选择方法框图。
图2是新浪微博数据集采集流程图。
图3是用户关注关系矩阵构建流程图。
图4是事件传播模型构建流程图。
图5是关键节点序列选择流程图。
具体实施方式
以下结合附图及实施例对本发明的实施方式进行详细说明:
请参阅图1至图5,一种网络舆情信息传播中关键节点选择方法,包括以下步骤:
步骤1,社交网络特定主题舆情事件传播数据流抽取及参与用户关注关系矩阵构建:对某社交网络的主站点以及它的wap站点进行网络请求抓包,分析某社交网络登录过程的网络请求序列,实现爬虫程序自动登录站点;对于获取到的特定主题下的社交网络消息,爬取每条社交网络下的转发内容,转发时间以及转发用户信息,并且获取参与转发用户的用户关注列表以及粉丝列表,根据用户之间发送消息的时序关系以及用户关注关系构建用户关注关系矩阵A=(V,E),其中V表示参与用户,E表示用户之间的关注关系,是用户的出度边;
步骤2,事件传播模型构建:使用传染病模型作为基础信息传播模型去建模每条社交网络消息的传播过程,对每条消息i进行影响力βi估计,所有消息的传播过程结合在一起即为事件整体的传播过程;
步骤3,事件传播过程中关键节点选择:依据步骤1得到的数据构造用户邻接矩阵A,利用A的结构特征进行启发式搜索,筛选出一批种子节点Q;依据步骤3得到的事件传播模型仿真模拟隔离节点v∈Q之后的信息传播结果,利用贪心算法获得每次迭代结果的最优解,最终得到一组节点序列,将多组节点序列构造成一个有向图,利用深度优先算法遍历得到的有向图,得到最终的关键节点序列。
社交网络中的特定主题事件传播流数据包括:社交网络发帖人信息、社交网络内容和社交网络发送时间;社交网络发帖人信息包括用户粉丝数、关注数、粉丝列表、关注列表和用户简介。
步骤1社交网络特定主题舆情事件传播数据流抽取及参与用户关注关系矩阵构建,其构建步骤为:
第1步:对社交网络的主站点以及社交网络wap站点进行网络请求抓包,分析社交网络登录过程的网络请求序列,模拟登录请求,获取用户Cookie实现爬虫程序自动登录社交网络站点;
第2步:模拟登录后,从社交网络搜索入口输入事件关键词,解析搜索结果页HTML得到特定主题下的社交网络消息,内容包括发帖内容、发帖时间、发帖人信息以及转发情况;根据每条社交网络消息的转发,获取转发该条社交网络的用户信息,包含用户粉丝数、关注数、粉丝列表、关注列表和用户简介;
第3步:根据每个事件参与用户的粉丝以及关注列表和转发关系,把用户之间的关系强度建模为强关联关系、中等关联关系和弱关联关系三种关联关系,得到一个N*N维的用户关系矩阵A,其中N为参与用户数。
1)强关联关系:根据用户转发消息的时间进行构建;如果用户U转发了用户V的消息,认为用户U关注了用户V,则有一条从V指向U的边;
2)中等关联关系:用户之间存在关注关系,但是没直接有转发关系;假定用户U关注了用户V,用户V发送事件相关消息的时间比用户U早,即tv<tu;
3)弱关联关系:用户之间存在关注关系,但是双方在发贴时序上没有关系;假定用户u关注了用户v,但是用户v发送事件相关消息的时间比用户u晚,即tu<tv;用t*表示用户转发消息的时间。
步骤2事件传播模型构建,采用基本传染病SI模型描述每条微博信息的传播,以1min为周期度量传播,利用真实数据集在固定时刻的参与用户数量作为基准去估计一条社交网络消息的影响力<i,从而构成一个N*1维的用户影响力矩阵<。
步骤3事件传播过程中关键节点选择中,采用了基于隔离效率的贪心算法,其方法步骤为:
首先设置初始关键节点集合Q={};从种子节点集合Qtemp中选取一个节点v,根据其出度计算引导该节点的成本模拟删除该节点向下的连接边,得到一个新的网络Atemp;利用得到的新网络进行模拟传播,把参与用户的减少量作为引导该节点的收益Pv,计算该节点的引导效率选择隔离效率最高的节点加入Q;
重复执行以上过程,直到关键节点集中节点数目与预设的引导节点数目相等;
接下来进行图搜索算法,执行过程为:
1)执行关键节点选择算法,得到一组节点Qlist;
2)遍历Qlist中的元素,构建一条节点选择顺序路径;
3)重复执行前两步得到多条节点路径;
4)根据多条路径构造最优节点集的关系矩阵;
5)用深度优先算法求解矩阵中的最长路径,并且要包含最多公共节点;路径上的节点为最终关键节点集合Q={q1,q2,…,qQnum}。
以新浪微博为例:
步骤1,社交网络特定主题舆情事件传播数据流抽取:为了获取真实场景下的舆情事件数据集,我们获取了新浪微博上特定主题下的消息流数据。数据获取按照以下过程:
第1步:对新浪微博的主站点(https://weibo.com)以及新浪微博的wap站点(https://weibo.cn)进行网络请求抓包,分析微博登录过程的网络请求序列。按照请求序列模拟发送登录数据,获取用户Cookie,实现爬虫程序自动登录微博站点;
第2步:模拟登录后,从微博搜索入口(https://s.weibo.com)输入舆情事件关键词,解析返回的搜索结果页的HTML得到该主题下的微博消息,内容包括发帖内容、发帖时间、微博id、发帖人信息(用户id、用户粉丝数、关注数、粉丝列表、关注列表、用户简介等)以及这条微博的转发情况。根据每条微博消息的转发,获取转发该条微博的用户信息,包含用户id、用户粉丝数、关注数、粉丝列表、关注列表、用户简介等;
步骤2,参与用户关注关系矩阵构建:根据获取到的每个事件参与用户的粉丝列表以及关注列表和微博转发关系,我们定义三种不同强度的关系用于描述用户之间的关系强度:
初始化矩阵:A(:,:)=0,AW(:,:)=0。
3)弱关联关系:用户之间存在关注关系,但是双方在发贴时序上没有关系。假定用户u关注了用户v,但是用户v发送事件相关微博的时间比用户u晚,即tu<tv。这说明用户v发送这条消息几乎没有受到用户u的影响,因此给定一个很大的常数Tt作为响应时间,即
其中t*表示用户发送消息的时间。
步骤3,事件传播模型构建:由步骤1获取到的有转发的微博数为m,m条微博的总体转发量为n,一般情况下n>>m。根据所获取的消息的时间流,将消息的传播过程定义为时间序列Ri={nt|t=1,…,T;i∈m},其中nt为在t时刻单位事件内(以分钟为单位)参与转发第i条微博的用户数量,T为观测时间,一般选择三天共计4320min。从观测时间的零点开始,第i条有转发的微博分别在tmi时刻发送出来。
我们选择经典传染病模型SI(Susceptible-Infected)作为信息传播模型去建模每条消息的传播情况。在SI模型当中,节点有易感染(Susceptible)和被感染(Infected)两种状态。在信息传播过程中,已经发送事件相关微博的用户为感染状态I,暂时未发事件相关微博的用户为易感染状态S。未发送微博的用户看到自己关注的用户发送了相关微博,自己会以一定的概率<被影响,转发或者发送一条相关微博进而转变为被感染状态I。如此,信息会继续扩散到下一层。
单条有转发的消息的传播过程形式化定义如下:
AW(S,t)⊙A(S)*Ib(I)<rand(S)
其中A代表用户邻接矩阵,Aw代表边的权重,与转发时延和节点的感染时间点有关,A与Aw是N维方阵,N代表事件参与的用户总数;⊙表示矩阵对应位置相乘;S代表还未转发消息的用户集合,I代表已经转发消息的用户集合,两者都为N*1的向量;Ib是不同节点的感染率,与节点的属性有关,是一个N*1的向量;t代表当前时刻;rand(S)表示生成与向量S、I同维度的在0-1范围内的随机数向量。
当t=tmi时,用户u发送了编号为i的微博,用户u的影响力为<u,更新Ib、Aw、S、I,形式化如下:
Ib(u,1)=βu
AW(:,u)=AW(:,u)
S=U\{u},I=I∪{u}
记录仿真过程中转发或者发送微博用户随时间的变化情况,利用真实数据集中第i条微博在固定时刻t的参与转发的用户数量Ri={nt|t=1,…,T;i∈m}作为groudtruth,用非线性最小二乘法去估计用户u的影响力<u,拟合度公式形式化定义如下:
对m条有转发的微博消息进行如上过程,构成一个N*1维的用户影响力矩阵Ib。单条消息的影响力估计完成后,结合微博消息的时间流Tm={tmi|i=1,…,T},随着时间t的变化,不同的用户受到影响发送或者转发了相关微博,这样就完成了事件整体的传播建模。
步骤4,种子节点筛选:由于参与用户节点数目众多,并且组合多样性,从N个节点中找出一组关键节点是一个np-hard问题。为了减少算法的时间复杂度,需要进行启发式筛选。我们提出一种从网络结构角度减少种子节点的方法。假设如果一个用户受到了正确的引导而放弃了参与该事件,我们可以认为用户不具有传播能力,进而其出度边起不到作用。在传播过程中,网络的二阶度<d2>与一阶度<d>的比值是用户衡量网络信息传播能力的指标。该值越大则消息更容易在网络中传播出去,我们对初始种子节点的选择不希望对网络结构有太大的改变从而加快了信息的传播。因此我们选择能够减少该指标的节点作为种子节点,即选择满足Δ(Q)>0的节点。Δ(Q)形式化定义如下:
同时,我们不希望选择到节点度很大的节点,因此我们需要控制种子节点的出度分布。经过上述两步筛选,最终得到种子节点集合Qtemp。
步骤5,基于贪心算法的关键节点序列选择:初始关键节点集合Q={};从种子节点集合Qtemp中选取一个节点v,根据其出度计算引导该节点的成本模拟删除该节点向下的连接边,得到一个新的网络Atemp;利用得到的新网络进行模拟传播,把参与用户的减少量作为引导该节点的收益Pv,计算该节点的引导效率选择隔离效率最高的节点加入Q,形式化表示如下:
Q=Q∪{v},N=N\{v}
重复执行以上过程,直到关键节点集中节点数目与预设的引导节点数目相等,即|Q|=Qnum。
步骤6,图搜索解决随机性:基于仿真的节点重要度计算虽然相对准确,但是由于求解过程中存在随机性,同时网络中存在着大量对等节点,因此最优效率节点容易出现范围内的偏差。图搜索算法执行过程为:
1)执行关键节点选择算法,得到一组节点Qlist;
2)遍历Qlist中的元素,构建一条节点选择顺序路径;
3)重复执行前两步得到多条节点路径;
4)根据多条路径构造最优节点集的关系矩阵;
5)用深度优先算法求解矩阵中的最长路径,并且要包含最多公共节点。路径上的节点为最终关键节点集合Q={q1,q2,…,qQnum}。
新浪微博数据集采集过程
图2展示了新浪微博数据集采集的整个流程。数据采集分为以下几个步骤:
第1步:对新浪微博的主站点(https://weibo.com)以及新浪微博的wap站点(https://weibo.cn)进行网络请求抓包,分析微博登录过程的网络请求序列。先使用get方法请求微博预登录地址,再使用用户名和密码构造post请求的请求体信息,请求登录地址(https://passport.weibo.cn/sso/login),最后使用get方法请求跳转的微博主页地址(https://weibo.cn),保存获取用户Cookie。
第2步:模拟登录后,从微博搜索入口(https://s.weibo.com)输入舆情事件关键词,解析返回的搜索结果页的HTML得到该主题下的微博消息,内容包括发帖内容、发帖时间、微博id、发帖人信息(用户id、用户粉丝数、关注数、粉丝列表、关注列表、用户简介等)。如果这条微博有人转发,获取转发该条微博的用户信息,包含用户id、用户粉丝数、关注数、粉丝列表、关注列表、用户简介等;如果这条微博没有被转发,则获取微博博主的用户信息。
用户关注关系矩阵构建过程
图3展示了用户关注关系矩阵构建的整个流程。在得到了传播数据集以及用户数据集后,对数据进行处理构建用户关系矩阵。我们定义了三种不同强度的关系用于描述用户之间的关系强度:
初始化矩阵:A(:,:)=0,AW(:,:)=0。
3)弱关联关系:用户之间存在关注关系,但是双方在发贴时序上没有关系。假定用户u关注了用户v,但是用户v发送事件相关微博的时间比用户u晚,即tu<tv。这说明用户v发送这条消息几乎没有受到用户u的影响,因此给定一个很大的常数Tt作为响应时间,即
其中t*表示用户发送消息的时间。
事件传播模型构建过程
图4展示了事件传播模型构建的整个流程。首先输入微博消息时间流Tm={tmi|i=1,…,T},对每条微博消息进行传染病模型仿真从而得到该条消息的影响力,对应发送该条消息用户的影响力<u,构成一个N*1维的用户影响力矩阵Ib。
单条有转发的消息的传播过程形式化定义如下:
AW(S,t)⊙A(S)*Ib(I)<rand(S)
其中A代表用户邻接矩阵,Aw代表边的权重,与转发时延和节点的感染时间点有关,A与Aw是N维方阵,N代表事件参与的用户总数;⊙表示矩阵对应位置相乘;S代表还未转发消息的用户集合,I代表已经转发消息的用户集合,两者都为N*1的向量;Ib是不同节点的感染率,与节点的属性有关,是一个N*1的向量;t代表当前时刻;rand(S)表示生成与向量S、I同维度的在0-1范围内的随机数向量。
当t=tmi时,用户u发送了编号为i的微博,用户u的影响力为<u,更新Ib、Aw、S、I,形式化如下:
Ib(u,1)=βu
AW(:,u)=AW(:,u)
S=U\{u},I=I∪{u}
记录仿真过程中转发或者发送微博用户随时间的变化情况,利用真实数据集中第i条微博在固定时刻t的参与转发的用户数量Ri={nt|t=1,…,T;i∈m}作为groudtruth,用非线性最小二乘法去估计用户u的影响力<u。
关键节点序列选择过程
图5展示了关键节点序列选择的步骤。首先设置初始关键节点集合Q={};从种子节点集合Qtemp中选取一个节点v,根据其出度计算引导该节点的成本模拟删除该节点向下的连接边,得到一个新的网络Atemp;利用得到的新网络进行模拟传播,把参与用户的减少量作为引导该节点的收益Pv,计算该节点的引导效率选择隔离效率最高的节点加入Q,形式化表示如下:
Q=Q∪{v},N=N\{v}
重复执行以上过程,直到关键节点集中节点数目与预设的引导节点数目相等,即|Q|=Qnum。
接下来进行图搜索算法,执行过程为:
1)执行关键节点选择算法,得到一组节点Qlist;
2)遍历Qlist中的元素,构建一条节点选择顺序路径;
3)重复执行前两步得到多条节点路径;
4)根据多条路径构造最优节点集的关系矩阵;
5)用深度优先算法求解矩阵中的最长路径,并且要包含最多公共节点。路径上的节点为最终关键节点集合Q={q1,q2,…,qQnum}。
Claims (6)
1.一种网络舆情信息传播中关键节点选择方法,其特征在于,包括以下步骤:
步骤1,社交网络特定主题舆情事件传播数据流抽取及参与用户关注关系矩阵构建:对某社交网络的主站点以及它的wap站点进行网络请求抓包,分析某社交网络登录过程的网络请求序列,实现爬虫程序自动登录站点;对于获取到的特定主题下的社交网络消息,爬取每条社交网络下的转发内容,转发时间以及转发用户信息,并且获取参与转发用户的用户关注列表以及粉丝列表,根据用户之间发送消息的时序关系以及用户关注关系构建用户关注关系矩阵A=(V,E),其中V表示参与用户,E表示用户之间的关注关系,是用户的出度边;
步骤2,事件传播模型构建:使用传染病模型作为基础信息传播模型去建模每条社交网络消息的传播过程,对每条消息i进行影响力βi估计,所有消息的传播过程结合在一起即为事件整体的传播过程;
步骤3,事件传播过程中关键节点选择:依据步骤1得到的数据构造用户邻接矩阵A,利用A的结构特征进行启发式搜索,筛选出一批种子节点Q;依据步骤3得到的事件传播模型仿真模拟隔离节点v∈Q之后的信息传播结果,利用贪心算法获得每次迭代结果的最优解,最终得到一组节点序列,将多组节点序列构造成一个有向图,利用深度优先算法遍历得到的有向图,得到最终的关键节点序列。
2.根据权利要求1所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,社交网络中的特定主题事件传播流数据包括:社交网络发帖人信息、社交网络内容和社交网络发送时间;社交网络发帖人信息包括用户粉丝数、关注数、粉丝列表、关注列表和用户简介。
3.根据权利要求1所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,步骤1社交网络特定主题舆情事件传播数据流抽取及参与用户关注关系矩阵构建,其构建步骤为:
第1步:对社交网络的主站点以及社交网络wap站点进行网络请求抓包,分析社交网络登录过程的网络请求序列,模拟登录请求,获取用户Cookie实现爬虫程序自动登录社交网络站点;
第2步:模拟登录后,从社交网络搜索入口输入事件关键词,解析搜索结果页HTML得到特定主题下的社交网络消息,内容包括发帖内容、发帖时间、发帖人信息以及转发情况;根据每条社交网络消息的转发,获取转发该条社交网络的用户信息,包含用户粉丝数、关注数、粉丝列表、关注列表和用户简介;
第3步:根据每个事件参与用户的粉丝以及关注列表和转发关系,把用户之间的关系强度建模为强关联关系、中等关联关系和弱关联关系三种关联关系,得到一个N*N维的用户关系矩阵A,其中N为参与用户数。
4.根据权利要求3所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,
1)强关联关系:根据用户转发消息的时间进行构建;如果用户U转发了用户V的消息,认为用户U关注了用户V,则有一条从V指向U的边;
2)中等关联关系:用户之间存在关注关系,但是没直接有转发关系;假定用户U关注了用户V,用户V发送事件相关消息的时间比用户U早,即tv<tu;
3)弱关联关系:用户之间存在关注关系,但是双方在发贴时序上没有关系;假定用户u关注了用户v,但是用户v发送事件相关消息的时间比用户u晚,即tu<tv;用t*表示用户转发消息的时间。
5.根据权利要求1所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,步骤2事件传播模型构建,采用基本传染病SI模型描述每条微博信息的传播,以1min为周期度量传播,利用真实数据集在固定时刻的参与用户数量作为基准去估计一条社交网络消息的影响力βi,从而构成一个N*1维的用户影响力矩阵β。
6.根据权利要求1所述的一种网络舆情信息传播中关键节点选择方法,其特征在于,步骤3事件传播过程中关键节点选择中,采用了基于隔离效率的贪心算法,其方法步骤为:
首先设置初始关键节点集合Q={};从种子节点集合Qtemp中选取一个节点v,根据其出度计算引导该节点的成本模拟删除该节点向下的连接边,得到一个新的网络Atemp;利用得到的新网络进行模拟传播,把参与用户的减少量作为引导该节点的收益Pv,计算该节点的引导效率选择隔离效率最高的节点加入Q;
重复执行以上过程,直到关键节点集中节点数目与预设的引导节点数目相等;
接下来进行图搜索算法,执行过程为:
1)执行关键节点选择算法,得到一组节点Qlist;
2)遍历Qlist中的元素,构建一条节点选择顺序路径;
3)重复执行前两步得到多条节点路径;
4)根据多条路径构造最优节点集的关系矩阵;
5)用深度优先算法求解矩阵中的最长路径,并且要包含最多公共节点;路径上的节点为最终关键节点集合Q={q1,q2,…,qQnum}。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010048384.XA CN111222029B (zh) | 2020-01-16 | 2020-01-16 | 一种网络舆情信息传播中关键节点选择方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010048384.XA CN111222029B (zh) | 2020-01-16 | 2020-01-16 | 一种网络舆情信息传播中关键节点选择方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111222029A true CN111222029A (zh) | 2020-06-02 |
CN111222029B CN111222029B (zh) | 2023-03-31 |
Family
ID=70828399
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010048384.XA Active CN111222029B (zh) | 2020-01-16 | 2020-01-16 | 一种网络舆情信息传播中关键节点选择方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111222029B (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112199608A (zh) * | 2020-11-03 | 2021-01-08 | 北京中科研究院 | 基于网络信息传播图建模的社交媒体谣言检测方法 |
CN114461930A (zh) * | 2022-04-13 | 2022-05-10 | 四川大学 | 社交网络数据采集方法、装置及储存介质 |
CN114693464A (zh) * | 2022-03-08 | 2022-07-01 | 电子科技大学 | 一种自适应的信息传播源头检测方法 |
CN114817762A (zh) * | 2022-05-12 | 2022-07-29 | 东南大学 | 微博中针对大宗商品舆情信息的恶意主体识别方法 |
CN115049002A (zh) * | 2022-06-15 | 2022-09-13 | 重庆理工大学 | 基于反向生成网络的复杂网络影响力节点识别方法 |
CN115242659A (zh) * | 2022-08-09 | 2022-10-25 | 安徽大学 | 一种基于高阶集体影响力的超网络节点分析方法 |
CN115442243A (zh) * | 2022-08-31 | 2022-12-06 | 西南大学 | 基于时序路径树的时序网络节点中心性评估方法及装置 |
CN115659007A (zh) * | 2022-09-21 | 2023-01-31 | 浙江大学 | 一种基于多样性的动态影响力传播种子最小化方法 |
CN117811992A (zh) * | 2024-02-29 | 2024-04-02 | 山东海量信息技术研究院 | 一种网络不良信息传播抑制方法、装置、设备及存储介质 |
CN118212086A (zh) * | 2024-05-21 | 2024-06-18 | 中国科学技术大学 | 基于高影响力节点协同的高效传播路径构建方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8312056B1 (en) * | 2011-09-13 | 2012-11-13 | Xerox Corporation | Method and system for identifying a key influencer in social media utilizing topic modeling and social diffusion analysis |
CN105183743A (zh) * | 2015-06-29 | 2015-12-23 | 临沂大学 | 一种微博舆情传播范围预测的方法 |
CN109213953A (zh) * | 2018-08-13 | 2019-01-15 | 华东师范大学 | 一种社交网络多信息传播模型的建模方法 |
-
2020
- 2020-01-16 CN CN202010048384.XA patent/CN111222029B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8312056B1 (en) * | 2011-09-13 | 2012-11-13 | Xerox Corporation | Method and system for identifying a key influencer in social media utilizing topic modeling and social diffusion analysis |
CN105183743A (zh) * | 2015-06-29 | 2015-12-23 | 临沂大学 | 一种微博舆情传播范围预测的方法 |
CN109213953A (zh) * | 2018-08-13 | 2019-01-15 | 华东师范大学 | 一种社交网络多信息传播模型的建模方法 |
Non-Patent Citations (2)
Title |
---|
何跃等: "突发事件中微博用户社群舆情传播特征研究", 《情报科学》 * |
杜洪涛等: "基于社会网络分析的微博社区网络结构及传播特性研究", 《情报学报》 * |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112199608B (zh) * | 2020-11-03 | 2021-05-28 | 北京中科研究院 | 基于网络信息传播图建模的社交媒体谣言检测方法 |
CN112199608A (zh) * | 2020-11-03 | 2021-01-08 | 北京中科研究院 | 基于网络信息传播图建模的社交媒体谣言检测方法 |
CN114693464B (zh) * | 2022-03-08 | 2023-04-07 | 电子科技大学 | 一种自适应的信息传播源头检测方法 |
CN114693464A (zh) * | 2022-03-08 | 2022-07-01 | 电子科技大学 | 一种自适应的信息传播源头检测方法 |
CN114461930A (zh) * | 2022-04-13 | 2022-05-10 | 四川大学 | 社交网络数据采集方法、装置及储存介质 |
CN114817762A (zh) * | 2022-05-12 | 2022-07-29 | 东南大学 | 微博中针对大宗商品舆情信息的恶意主体识别方法 |
CN114817762B (zh) * | 2022-05-12 | 2024-07-12 | 东南大学 | 微博中针对大宗商品舆情信息的恶意主体识别方法 |
CN115049002A (zh) * | 2022-06-15 | 2022-09-13 | 重庆理工大学 | 基于反向生成网络的复杂网络影响力节点识别方法 |
CN115242659A (zh) * | 2022-08-09 | 2022-10-25 | 安徽大学 | 一种基于高阶集体影响力的超网络节点分析方法 |
CN115442243B (zh) * | 2022-08-31 | 2024-04-16 | 西南大学 | 基于时序路径树的时序网络节点中心性评估方法及装置 |
CN115442243A (zh) * | 2022-08-31 | 2022-12-06 | 西南大学 | 基于时序路径树的时序网络节点中心性评估方法及装置 |
CN115659007B (zh) * | 2022-09-21 | 2023-11-14 | 浙江大学 | 一种基于多样性的动态影响力传播种子最小化方法 |
CN115659007A (zh) * | 2022-09-21 | 2023-01-31 | 浙江大学 | 一种基于多样性的动态影响力传播种子最小化方法 |
CN117811992A (zh) * | 2024-02-29 | 2024-04-02 | 山东海量信息技术研究院 | 一种网络不良信息传播抑制方法、装置、设备及存储介质 |
CN117811992B (zh) * | 2024-02-29 | 2024-05-28 | 山东海量信息技术研究院 | 一种网络不良信息传播抑制方法、装置、设备及存储介质 |
CN118212086A (zh) * | 2024-05-21 | 2024-06-18 | 中国科学技术大学 | 基于高影响力节点协同的高效传播路径构建方法 |
CN118212086B (zh) * | 2024-05-21 | 2024-08-16 | 中国科学技术大学 | 基于高影响力节点协同的高效传播路径构建方法 |
Also Published As
Publication number | Publication date |
---|---|
CN111222029B (zh) | 2023-03-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111222029B (zh) | 一种网络舆情信息传播中关键节点选择方法 | |
US20210329094A1 (en) | Discovering signature of electronic social networks | |
Wang et al. | Users’ mobility enhances information diffusion in online social networks | |
CN105809554B (zh) | 一种社交网络中用户参与热点话题的预测方法 | |
CN112256981B (zh) | 一种基于线性和非线性传播的谣言检测方法 | |
CN106780071B (zh) | 一种基于多模式混合模型的在线社会网络信息传播建模方法 | |
CN108170842A (zh) | 基于三部图模型的微博热点话题溯源方法 | |
Zhan et al. | A novel trust computing system for social networks | |
CN112948885B (zh) | 实现隐私保护的多方协同更新模型的方法、装置及系统 | |
CN109086310B (zh) | 一种融合个人行为与社会互动的谣言传播模型构建方法 | |
CN104035987A (zh) | 一种微博网络用户影响力排名方法 | |
Li et al. | Understanding video sharing propagation in social networks: Measurement and analysis | |
Hermoso et al. | From blurry numbers to clear preferences: A mechanism to extract reputation in social networks | |
Xiao et al. | User behavior prediction of social hotspots based on multimessage interaction and neural network | |
CN111342991B (zh) | 基于跨社交网络的信息传播方法 | |
CN111353905B (zh) | 针对网络社区的网民用户个体影响力测量和估算系统 | |
CN106503858A (zh) | 一种训练用于预测社交网络用户转发消息的模型的方法 | |
CN116228449A (zh) | 一种基于演化博弈的分析在线社交网络信息传播动力学的方法 | |
CN109816544B (zh) | 基于接触概率的信息传播模型实现方法及装置 | |
CN103488885B (zh) | 基于mmsb的微博网络用户行为分析方法 | |
Shi et al. | Social sourcing: Incorporating social networks into crowdsourcing contest design | |
CN110247805A (zh) | 一种基于k壳分解的识别传播关键节点的方法及装置 | |
CN110851684B (zh) | 一种基于三元关联图的社交话题影响力识别方法及装置 | |
Lin et al. | Analysis and comparison of interaction patterns in online social network and social media | |
CN108520337A (zh) | 一种基于网络风险熵差的谣言风险评估方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |