CN106599090A - 基于结构中心性的网络社区发现方法 - Google Patents
基于结构中心性的网络社区发现方法 Download PDFInfo
- Publication number
- CN106599090A CN106599090A CN201611052197.9A CN201611052197A CN106599090A CN 106599090 A CN106599090 A CN 106599090A CN 201611052197 A CN201611052197 A CN 201611052197A CN 106599090 A CN106599090 A CN 106599090A
- Authority
- CN
- China
- Prior art keywords
- community
- node
- network
- candidate
- centre
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 77
- 239000011159 matrix material Substances 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 5
- 230000015572 biosynthetic process Effects 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000005755 formation reaction Methods 0.000 claims description 4
- 238000011156 evaluation Methods 0.000 claims description 3
- 230000000717 retained effect Effects 0.000 claims description 3
- 238000002474 experimental method Methods 0.000 abstract description 8
- 230000003993 interaction Effects 0.000 abstract description 3
- 238000011160 research Methods 0.000 description 7
- 238000004422 calculation algorithm Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 239000000654 additive Substances 0.000 description 3
- 230000000996 additive effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000012552 review Methods 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000005295 random walk Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 235000005156 Brassica carinata Nutrition 0.000 description 1
- 244000257790 Brassica carinata Species 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- HUTDUHSNJYTCAR-UHFFFAOYSA-N ancymidol Chemical compound C1=CC(OC)=CC=C1C(O)(C=1C=NC=NC=1)C1CC1 HUTDUHSNJYTCAR-UHFFFAOYSA-N 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000003012 network analysis Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000003997 social interaction Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Computing Systems (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种基于结构中心性的网络社区发现方法,其能有效揭示复杂网络中固有的社区结构。根据节点的局部交互信息及节点间全局信息,提出了一种节点中心性度量,以定位网络中的局部结构中心节点,同时确定社区聚类数量;基于识别的结构中心,本发明采用一种启发式的局部搜索策略,从结构中心向边缘扩展的方式揭示完整的社区结构。同时,本发明通过对社区结构定义一个边界区域,有效识别出了网络社区中不同的节点角色,以揭示网络群体结构特征。通过大量实验证明了本方法能有效揭示网络中的社区结构,普适性较强,具有较高的应用价值。
Description
技术领域
本发明属于复杂网络分析技术研究领域。具体地,涉及一种基于结构中心性的网络社区发现方法。
背景技术
复杂网络是对复杂系统的一种抽象描述,网络中的节点表示复杂系统中的个体,网络中的连边表示复杂系统中个体间的内在联系。复杂网络已成为一个广泛的交叉学科,其涉及物理、生物、社会科学、系统科学、网络科学等学科领域,逐渐成为解决复杂问题的一个挑战性研究课题,并在众多领域有着广泛的应用,如社交网络分析、生物工程、电力与交通、人类行为分析、大数据分析等。对复杂网络的研究分析,极大地拓展了人们理解世界的广度和深度,有着重大的现实意义。目前,在大量的复杂网络研究中,对复杂网络中社区结构的研究是一个重大的研究焦点。一般说来,复杂网络中的社区结构对应复杂系统中不同的功能模块和结构单元。对于给定的网络结构划分,社区内部节点相对于社区之间有着更紧密的连接。例如在社交网络中,由于社会交互性的增强,基于不同兴趣、主题、职业、地域等特征形成的大量紧密群体,社区结构特征尤为明显。通信网络中的社区代表了通信群或个人关系网。因此,挖掘网络中紧密联系的社区结构对理解和分析网络结构属性、信息传播规律、人类社会组织结构等有重要的理论意义和广泛的应用价值。
网络社区发现旨在揭示网络中带有某种自然属性的局部结构,根据一定的规则,将网络中相互连接的节点划分为若干模块,使得各模块内部的联系相对稠密,模块间的连接相对稀疏。尽管社区结构的概念便于理解,但由于网络结构的多样性和复杂性,社区发现方法也复杂多样。在复杂网络的社区结构研究中,大量的社区发现算法被提出,如基于图分割、层次聚类、派系过滤、中心度测量、谱聚类、基于模块度优化、连边检测等。尽管如此,大部分方法需要先验知识指导才能实现有效划分,同时没有提出一个统一的度量准则,因此有其局限性。根据社区结构的定义,一个网络可以看作是多个社区组合而成。对于社区结构划分,仍然有两个关键问题 需要解决:一是确定社区结构的数量。对于一个的复杂网络结构,其社区划分和节点的从属关系是无法提前预知的,而目前很多社区发现方法需要预先设定社区的数量;另一个就是每个社区成员确定。在现实网络中,由于网络机构的复杂性和多样性,一个节点应属于此社区而非彼社区,或者同时属于多个不同社区。如何确定网络节点的类别属性,避免社区结构的不合理划分,依然是一个挑战性的问题。传统的社区划分方法如图分割将网络中的每一个节点硬性地划分到一个特定的社区,而忽略了其内在联系。
另外,社区结构中的节点是基于某种相似性或共同特征如社交网络中的不同兴趣、爱好、主题等关系联系在一起,具有某种相同的属性,这是人们研究社区划分的出发点之一。对于非重叠社区发现问题来说,目前大量现有的社区结构发现方法从全局的角度划分社区,使得既定的目标函数得到最优解,如此的划分会导致社区的不合理划分。实际上,在真实网络结构如社交网络中,社区的形成主要取决于个体间的局部交互,而受整个网络的影响甚微。另外,尽管有一些局部的方法被提出,但是这些局部社区发现方法不能揭示固有的社区结构,同时忽略了社区中不同的节点角色。
针对社区发现中的聚类数目和社区有效划分两个基本问题,本发明提出了一种基于结构中心性的网络社区结构发现方法。该方法有效揭示了潜在的社区结构,同时识别出了网络社区中不同的节点角色。本发明提出用密度聚类的思想而来解决复杂网络中的社区结构发现问题。
发明内容
针对现有技术中的缺陷,本发明提供一种基于结构中心性的网络社区发现方法。
根据本发明提供的一种基于结构中心性的网络社区发现方法,包括如下步骤:
步骤S1、建立待分析网络的邻接矩阵A,根据节点顺序对待分析网络中的节点进行编号,编号从1开始,构建元素为0或1的N阶方阵,其中N为节点总个数;
步骤S2、初始化标记所有节点为未分类节点;
步骤S3、识别出待分析网络中的结构中心节点;
步骤S4、选取一个未被处理的结构中心节点并初始化为初始的社区结构,通过局部节点扩展进而识别整个社区结构;
步骤S5、针对识别到的社区结构,找到对应的社区边界,逐步识别出不同的节点角色作为节点分类,并划分到各自的社区结构中;若还存在未被处理的结构中心节点,则返回步骤S4继续执行;否则,则认为完成社区结构划分。
优选地,步骤S5包括,认为完成社区结构划分并进入步骤S6继续执行;
步骤S6、基于社区结构划分,评价社区结构划分的质量。
优选地,所述步骤S3,具体过程包括:
步骤S31、对待分析网络计算结构中心性:
sc(i)=ρi*δi,i∈[1,N]
其中,sc(i)表示节点i的结构中心性;i表示节点序号,N为网络节点数;ρi表示节点i的局部密度;δi表示节点i与局部密度高于ρi的节点j之间最小的相对距离;其中,当x<0时,则函数ψ(x)=1,否则,则函数ψ(x)=0;dij表示邻接矩阵A中节点i与节点j之间的距离,dc为截断距离;ρj表示节点j的局部密度,
步骤S32、计算待分析网络中全部节点的平均结构中心性,将结构中心性大于平均结构中心性的节点作为候选结构中心节点,插入候选中心节点队列CC;
步骤S33、将候选中心节点队列CC中的候选结构中心节点按结构中心性降序排列;
步骤S34、在候选中心节点队列CC中,选取第一个候选结构中心节点作为结构中心节点,并从候选中心节点队列CC中删除该候选结构中心节点;
步骤S35、计算当前候选队列队CC中待识别的第一个候选结构中心节点与已识别的所有结构中心节点间的距离,如果距离小于截取距离dc则将该候选结构中心节点作为结构中心节点且删除这个候选结构中心节点,否则作为已识别的候选结构中心节点保留在候选队列CC中;
其中,步骤S35被反复执行,直到识别出所有的结构中心节点。
优选地,所述步骤S4,具体包括:
步骤S41、初始化结构中心节点为初始的社区结构,其中,将社区结构记为
步骤S42、将社区结构的邻居节点逐一合并到社区结构中,具体为:
当邻居节点v添加到社区结构后,计算社区结构的子图密度增益ΔDv;社区结构的子图密度函数定义如下:
其中,表示社区结构内部连边的数量,表示社区结构内部节点的数量,ρi为节点i的局部密度;
步骤S43、当ΔDv>0时,保持将邻居节点添加至社区结构中,否则将该邻居节点从社区结构中去除,然后更新社区结构的邻居节点集合;
其中,步骤S43被反复执行,直到社区结构的子图密度函数不再增加为止。
优选地,所述步骤S5,具体步骤包括:
步骤S51、基于识别的第i个社区结构找到第i个社区结构的社区边界区域社区边界区域由社区边界节点组成,定义如下:
其中,v,w分别表示属于第i个社区结构第j个社区结构的节点,dist(v,w)表示两节点v,w间的距离;
步骤S52、计算社区结构的社区边界密度ρb;
社区边界密度ρb定义为社区边界区域中具有最大密度的边界节点,公式定义如下:
ρb=maxi∈Bρi
步骤S53、将社区结构中节点密度小于社区边界密度ρb的社区边界节点划分为边缘节点,而节点密度大于或等于ρb的社区边界节点划分为核心节点,其中,社区边界区域记为B,i∈B表示所有社区边界区域中的社区边界节点。
优选地,社区结构划分的质量的具体计算公式定义如下:
其中,Q表示社区结构划分的质量;i为社区结构数量,eii表示第i个社区结构内部节点间连边的数量占整个网络边数的比例,ai表示一端与第i个社区结构中节点相连的连边数量占整个网络连边数量的比例。
与现有技术相比,本发明具有如下的有益效果:
1、本发明在传统网络社区发现的基础上,运用密度聚类的方法实现网络社区结构的有效划分;与现有算法不同的是,该方法直接定位社区结构中心,然后扩展整个有意义的社区结构,从而避免了网络结构的不合理划分,并进一步提高了社区结构划分的合理性和可靠性;
2、本发明基于密度聚类思想提出了一种新的节点中心性度量,从多维角度挖据节点属性,在完成网络划分前就能有效确定网络中的社区结构数量;
3、本发明基于节点的局部密度特性,结合节点的局部结构信息,提出了社区边界的概念,有效区分了社区结构中不同的节点角色。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1、图2为本发明所提供方法在真实网络结构中的应用示意图。
图3为本发明所提供方法与其他方法在GN网络上的性能对比图。
图4、图5为本发明所提供方法与其他方法在小规模LFR网络上的性能对比图。
图6、图7为本发明所提供方法与其他方法在较大规模LFR网络上的性能对比图
图8、图9为本发明分析一个真实网络的示意图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变化和改进。这些都属于本发明的保护范围。
本发明公开了一种基于结构中心性的网络社区发现方法。该方法能有效揭示复杂网络中固有的社区结构。根据节点的局部交互信息及节点间全局信息,提出了一种节点中心性度量,以定位网络中的局部结构中心节点,同时确定社区聚类数量;基于识别的结构中心,本发明采用一种启发式的局部搜索策略,从结构中心向边缘扩展的方式揭示完整的社区结构。同时,本发明通过定义一个边界区域,有效识别出了网络社区中不同的节点角色,以揭示网络群体结构特征。通过大量实验证明了本方法能有效揭示网络中的社区结构,普适性较强,具有较高的应用价值。
根据本发明提供的基于结构中心性的网络社区发现方法,包括:
S1、建立待分析网络的邻接矩阵A,根据节点顺序对待分析网络中的节点进行编号,编号从1开始,构建元素为0或1的N阶方阵,其中N为节点总个数;
S2、初始化标记所有节点为未分类节点;
S3、识别出待分析网络中的结构中心节点;
S4、选取一个未被处理的结构中心节点并初始化为初始的社区结构,通过局部节点扩展进而识别整个社区结构;
S5、针对识别到的社区结构,找到对应的社区边界,逐步识别出不同的节点角色作为节点分类,并划分到各自的社区结构中;若还存在未被处理的结构中心节点,则返回步骤S4继续执行;否则,则认为完成社区结构划分,并进入步骤S6继续执行;
S6、基于社区结构划分,评价社区结构划分的质量。
所述步骤S3具体包括:
S31、对待分析网络计算其结构中心性分布。结构中心性由具有较大的局部密度同时与其他高密度节点保持相对大的距离的节点来刻画。为了定位局部结构中心节点,本方法提出结构中心性以度量结构中心节点。
其中,节点局部密度定义如下:
其中,当x<0时,ψ(x)=1,否则ψ(x)=0。dij表示连接矩阵A中节点i与节点j之间的距离,dc为截断距离。距离度量有多种替代形式,在此采用最短路径作为距离度量。
其中,相对距离表示节点以其他高密度节点间的最小距离,其定义如下:
因此,结构中心性定义如下;
sc(i)=ρi*δi
其中,i表示网络节点序号(i∈[1,N]),ρi表示节点i的局部密度,δi表示节点i与其他高密度节点间最大的相对距离;
S32、计算节点的平均结构中心性,将大于平均值的节点插入候选中心节点队列CC;
S33、将候选结构中心节点按局部密度降序排列;
S34、选取第一个节点作为首个结构中心节点,并从候选队列中删除该节点;
S35、计算当前候选队列队CC中待识别的第一个候选结构中心节点与已识别的所有结构中心节点间的距离,如果距离小于截取距离dc则将该候选结构中心节点作为结构中心节点且删除这个候选结构中心节点,否则作为已识别的候选结构中心节点保留在候选队列CC中;
其中,步骤S35被重复执行,直到识别出所有的结构中心节点。
优选地,所述步骤S4,具体步骤包括:
S41、初始化结构中心节点为初始的社区结构
S42、将社区结构的邻居节点逐一合并到社区结构中,具体为:
当邻居节点v添加到社区结构后,计算社区结构的子图密度增益ΔDv;社区结构的 子图密度函数定义如下:
其中,表示社区结构内部连边的数量,表示社区结构内部节点的数量,ρi为节点i的局部密度;当截断距离dc取值为1时,其中ki表示节点i的度,即表示节点局部密度与节点度等价;
定位结构中心节点的过程如图1、图2所示。其中图1表示一个规模为1000个节点的基准网络在节点密度和相对距离两个维度上的分布。该基准网络接近真实网络结构,其节点度分布和网络社区规模分布均服从幂律分布,且具有已知的社区结构划分。图2表示该基准网络节点的结构中心性分布情况,其中,在水平截线以上的16个节点对应不同的结构中心节点。通过分析可知,这些识别节点分别分布在不同的社区中,与真实的网络社区划分完全一致。
S43、当ΔDv>0时,保持将邻居节点添加至社区结构中,否则将该邻居节点从社区结构中去除,然后更新社区结构的邻居节点集合;
其中,步骤S43被反复执行,直到社区结构的子图密度函数不再增加为止。
优选地,所述步骤S5,具体步骤包括:
S51、基于识别的第i个社区结构找到第i个社区结构的社区边界区域社区边界区域由社区边界节点组成,定义如下:
其中,v,w分别表示属于第i个社区结构第j个社区结构的节点,dist(v,w)表示两节点v,w间的距离;
S52、计算社区结构的社区边界密度ρb;
社区边界密度ρb定义为社区边界区域中具有最大密度的边界节点,公式定义如下:
ρb=maxi∈Bρi
S53、将社区结构中节点密度小于社区边界密度ρb的社区边界节点划分为边缘节点(outlier),而节点密度大于或等于ρb的社区边界节点划分为核心节点(cores)。
社区结构划分的质量的具体计算公式定义如下:
其中,Q表示社区结构划分的质量;i为社区结构数量,eii表示第i个社区结构内部节点间连边的数量占整个网络边数的比例,ai表示一端与第i个社区结构中节点相连的连边 数量占整个网络连边数量的比例。
是表示社区结构的统一符号,则表示第i个社区结构。
B是表示社区边界区域的统一符号,Bi则表示第i个社区边界区域。
为详细说明说提供方法的有效性和可扩展性,本发明通过实验进行了下面的实施例。
1)实验条件:CPU Intel Pentium Dual-Core 2.0-GHz,RAM 4.00GB,Windows 7操作系统,仿真软件RStudio。
2)实验对象
实验分别选取人工合成网络和真实世界网络。
人工合成网络
人工生成网络分别使用GN基准网络和LFR基准网络。GN基准网络由Girvan和Newman于2002年在论文“Community structure in social and biological networks”(Girvan M,Newman M.E.Proceedings of the National Academy of Sciences of theUnited States of America.2002,99(12):7821-6.)中提出。该网络由128个节点组成四个相等规模的社区结构,节点具有相同的度分布,而节点的出度和入度可调节,其用混合参数μ表示节点的出入度比例以调整网络的模糊程度,μ值越大,网络社区间的界限越模糊。LFR基准网络由Lancichinetti等人在2008年提出(Lancichinetti A,Fortunato S,RadicchiF.Benchmark graphs for testing community detection algorithms.Physical ReviewE.2008,78(4):046110.)。实际上,LFR基准网络是GN基准网络的扩展,其反映了节点度分布和社区结构规模分布的同质性,即节点度分布和社区规模满足幂律分布,使得网络结果更接近真实网络。为了评价发明方法的性能,使用标准互信息(NMI)来度量划分结果。若NMI值越接近于1,说明发现的网络社区结构越接近真实的社区结构。
本发明说描述方法在实验中用LCCD表示。同时,为体现其性能效果,本方法与其他六个经典的社区发现方法进行了比较。这些方法包括三个局部方法:Pons等人于2005年在《20th International Symposium on Computer and Information Sciences》上发表的论文“Computing communities in large networks using random walks”中提出的Walktrap方法、Raghavan等人2007年在《Physical review E》上发表的论文“Near lineartime algorithm to detect community structures in large-scale networks”中提出的LPA方法,和Xu等人2007年在《Proceedings of the 13th ACM SIGKDD internationalconference on Knowledge discovery and data mining》上发表的论 文“Scan:astructural clustering algorithm for networks”中提出的SCAN方法,以及包括三个全局方法:Clauset等人2004年在《Physical review E》上发表的论文“Finding communitystructure in very large networks”中提出的CNM方法、Blondel等人于2008年在《Journal of Statistical Mechanics》上发表的“Fast unfolding of communities inlarge networks”中提出的Louvain方法,以及Rosvall和Bergstrom于2008年在《Proceedings of the National Academy of Sciences of the United States ofAmerica》上发表的“Maps of random walks on complex networks reveal communitystructure”中提出的Infomap方法。
基于GN基准网络的仿真实验结果如图3所示。当混合系数小于0.15时,所有方法都能有效检测真实的网络社区结构,即NMI=1。随着混合系数逐渐增大,各方法的社区结构识别能力呈现不同程度下降。如图3所示,当混合系数不大于0.4时,除了本发明所提供方法LCCD外,还有其他三个方法:Walktrap、Infomap和Lovvain能有效揭示真实的社区结构。然而,当混合系数继续增大,各个方法对网络社区的识别性能都有不同程度下降,但LCCD方法相对其他所有方法仍然具有较大优势。可以发现,尽管LCCD方法在定混合系数小于0.55时的NMI分数略低于Louvain方法,但是,当混合系数超过0.55时,LCCD方法在GN基准网络上表现出最佳性能,并趋于稳定。原因在于本方法是基于社区结构中心的局部扩展策略,在网络社区边界模糊的情况下,仍然能识别最近邻的节点而保持一定的识别能力。显而易见,本发明所提供方法对于社区边界模糊的网络结构具有明显优势。
基于LFR基准网络的仿真实验结果如图4、图5以及图6、图7所示。为了分析网络规模和社区规模对本方法的影响,在此采用了两种不同节点规模(N=1000和N=10000)、不同社区规模(B表示大规模社区,S表示小规模社区)分布的LFR基准网络来进行对比,如图中1000B和10000S所示。在LFR网络中,节点度分布、社区数量和社区规模均有变化。当小规模网络的混合系数不大于0.5时(图4、图5)及大规模网络的混合系数不大于0.6时(图6、图7),本方法能完全揭示真实的网络社区划分。通过观察可以发现,在其他所有对比方法中,仅Louvain方法具有与LCCD相比拟的性能。其中,Infomap方法在混合系数小于0.6时获得最佳的NMI分数,性能稳定。但随着混合系数的增大,其识别能力急剧下降。而本发明说描述方法在混合系数不断降低时仍然能保持一定的识别能力。该实验进一步体现了本方法的有效性和稳定性。
真实世界网络
本发明实验中的真实世界网络选用Zachary空手道俱乐部社交网络。此网络广泛用于测试社区检测算法的有效性和可靠性。此网络是基于Zachery对该俱乐部成员间的社会交互进行了长达两年时间的调查和观察,并构建了一个具有34个俱乐部成员78条边的交互网络。在观察过程中,由于俱乐部管理者(节点1)和教练(节点33)分歧,最终俱乐部成员分裂成两个较小的社区结构。本方法应用于此真实世界网络的结果如图8、图9所示。
在实验中,本发明所提方法能有效检测出网络结构中的分裂现象。实验结果表明,两个带有明显社区结构的群组被检测出,如图8所示。其中,不同的颜色对应不同的社区结构,不同的形状表示不同的节点角色。而在灰度图中,节点序号为1和34的深色圆形节点对应两个结构中心,正方形节点社区中的核心节点,而浅色圆形节点为边缘节点。图9显示了本方法对网络中的结构中心节点的识别过程。通过分析网络中各节点的局部密度和相对距离度量,在这两种度量组成的二维空间坐标中,可以观察到节点差异性分布。其中,偏离大部分节点较远的两个节点同时具有较大的密度和相对距离,从而被识别为结构中心节点,而后续的过程是围绕结构中心节点进行的扩展。通过对比发现,该结果与真实网络划分完全一致。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变化或修改,这并不影响本发明的实质内容。在不冲突的情况下,本申请的实施例和实施例中的特征可以任意相互组合。
Claims (6)
1.一种基于结构中心性的网络社区发现方法,其特征在于,包括如下步骤:
步骤S1、建立待分析网络的邻接矩阵A,根据节点顺序对待分析网络中的节点进行编号,编号从1开始,构建元素为0或1的N阶方阵,其中N为节点总个数;
步骤S2、初始化标记所有节点为未分类节点;
步骤S3、识别出待分析网络中的结构中心节点;
步骤S4、选取一个未被处理的结构中心节点并初始化为初始的社区结构,通过局部节点扩展进而识别整个社区结构;
步骤S5、针对识别到的社区结构,找到对应的社区边界,逐步识别出不同的节点角色作为节点分类,并划分到各自的社区结构中;若还存在未被处理的结构中心节点,则返回步骤S4继续执行;否则,则认为完成社区结构划分。
2.根据权利要求1所述基于结构中心性的网络社区发现方法,其特征在于,步骤S5包括,认为完成社区结构划分并进入步骤S6继续执行;
步骤S6、基于社区结构划分,评价社区结构划分的质量。
3.根据权利要求1所述基于结构中心性的网络社区发现方法,其特征在于,所述步骤S3,具体过程包括:
步骤S31、对待分析网络计算结构中心性:
sc(i)=ρi*δi,i∈[1,N]
其中,sc(i)表示节点i的结构中心性;i表示节点序号,N为网络节点数;ρi表示节点i的局部密度;δi表示节点i与局部密度高于ρi的节点j之间最小的相对距离;其中,当x<0时,则函数ψ(x)=1,否则,则函数ψ(x)=0;dij表示邻接矩阵A中节点i与节点j之间的距离,dc为截断距离;ρj表示节点j的局部密度;
步骤S32、计算待分析网络中全部节点的平均结构中心性,将结构中心性大于平均结构中心性的节点作为候选结构中心节点,插入候选中心节点队列CC;
步骤S33、将候选中心节点队列CC中的候选结构中心节点按结构中心性降序排列;
步骤S34、在候选中心节点队列CC中,选取第一个候选结构中心节点作为结构中心 节点,并从候选中心节点队列CC中删除该候选结构中心节点;
步骤S35、计算当前候选队列队CC中待识别的第一个候选结构中心节点与已识别的所有结构中心节点间的距离,如果距离小于截取距离dc则将该候选结构中心节点作为结构中心节点且删除这个候选结构中心节点,否则作为已识别的候选结构中心节点保留在候选队列CC中;
其中,步骤S35被反复执行,直到识别出所有的结构中心节点。
4.根据权利要求1所述基于结构中心性的网络社区发现方法,其特征在于,所述步骤S4,具体包括:
步骤S41、初始化结构中心节点为初始的社区结构,其中,将社区结构记为
步骤S42、将社区结构的邻居节点逐一合并到社区结构中,具体为:
当邻居节点v添加到社区结构后,计算社区结构的子图密度增益ΔDv;社区结构的子图密度函数定义如下:
其中,表示社区结构内部连边的数量,表示社区结构内部节点的数量,ρi为节点i的局部密度;
步骤S43、当ΔDv>0时,保持将邻居节点添加至社区结构中,否则将该邻居节点从社区结构中去除,然后更新社区结构的邻居节点集合;
其中,步骤S43被反复执行,直到社区结构的子图密度函数不再增加为止。
5.根据权利要求1所述基于结构中心性的网络社区发现方法,其特征在于,所述步骤S5,具体步骤包括:
步骤S51、基于识别的第i个社区结构找到第i个社区结构的社区边界区域社区边界区域由社区边界节点组成,定义如下:
其中,v,w分别表示属于第i个社区结构第j个社区结构的节点,dist(v,w)表示两节点v,w间的距离;
步骤S52、计算社区结构的社区边界密度ρb;
社区边界密度ρb定义为社区边界区域中具有最大密度的社区边界节点,公式定义如下:
ρb=maxi∈Bρi
步骤S53、将社区结构中节点密度小于社区边界密度ρb的社区边界节点划分为边 缘节点,而节点密度大于或等于ρb的社区边界节点划分为核心节点;其中,社区边界区域记为B,i∈B表示所有社区边界区域中的社区边界节点。
6.根据权利要求2所述基于结构中心性的网络社区发现方法,其特征在于,社区结构划分的质量的具体计算公式定义如下:
其中,Q表示社区结构划分的质量;i为社区结构数量,eii表示第i个社区结构内部节点间连边的数量占整个网络边数的比例,ai表示一端与第i个社区结构中节点相连的连边数量占整个网络连边数量的比例。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611052197.9A CN106599090A (zh) | 2016-11-24 | 2016-11-24 | 基于结构中心性的网络社区发现方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611052197.9A CN106599090A (zh) | 2016-11-24 | 2016-11-24 | 基于结构中心性的网络社区发现方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106599090A true CN106599090A (zh) | 2017-04-26 |
Family
ID=58593221
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611052197.9A Pending CN106599090A (zh) | 2016-11-24 | 2016-11-24 | 基于结构中心性的网络社区发现方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106599090A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107705212A (zh) * | 2017-07-07 | 2018-02-16 | 江苏开放大学 | 一种基于粒子群随机游走的角色识别方法 |
CN107948246A (zh) * | 2017-10-31 | 2018-04-20 | 武汉科技大学 | 一种基于车联网车辆社交性的rsu部署方法及系统 |
CN108509607A (zh) * | 2018-04-03 | 2018-09-07 | 三盟科技股份有限公司 | 一种基于Louvain算法的社区发现方法及系统 |
CN108763497A (zh) * | 2018-05-30 | 2018-11-06 | 河南科技大学 | 一种基于中心节点扩展的社区发现方法 |
CN108833461A (zh) * | 2018-04-10 | 2018-11-16 | 中国矿业大学 | 基于网络分解的社交网络关键节点发现方法及系统 |
CN111026895A (zh) * | 2019-12-02 | 2020-04-17 | 上海交通大学 | 一种数据可视化处理方法、装置及存储介质 |
CN111325647A (zh) * | 2020-02-12 | 2020-06-23 | 同济大学 | 一种基于社会网络分析的社区公共空间更新设计方法 |
CN111464343A (zh) * | 2020-03-22 | 2020-07-28 | 华南理工大学 | 一种基于平均互信息的最大派系贪心扩展社区发现方法及系统 |
CN112291827A (zh) * | 2020-10-29 | 2021-01-29 | 王程 | 社会属性驱动的容迟网络路由改良算法 |
CN112800345A (zh) * | 2021-02-03 | 2021-05-14 | 安徽大学 | 一种社区角色感知的用户需求主动预测方法及系统 |
CN113570365A (zh) * | 2021-07-20 | 2021-10-29 | 中国科学院信息工程研究所 | 一种基于社区发现的dag网络拓扑构建方法及交易方法 |
CN115086179A (zh) * | 2022-08-19 | 2022-09-20 | 北京科技大学 | 一种社交网络中社区结构的检测方法 |
-
2016
- 2016-11-24 CN CN201611052197.9A patent/CN106599090A/zh active Pending
Cited By (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107705212B (zh) * | 2017-07-07 | 2021-06-15 | 江苏开放大学 | 一种基于粒子群随机游走的角色识别方法 |
CN107705212A (zh) * | 2017-07-07 | 2018-02-16 | 江苏开放大学 | 一种基于粒子群随机游走的角色识别方法 |
CN107948246A (zh) * | 2017-10-31 | 2018-04-20 | 武汉科技大学 | 一种基于车联网车辆社交性的rsu部署方法及系统 |
CN107948246B (zh) * | 2017-10-31 | 2020-08-07 | 武汉科技大学 | 一种基于车联网车辆社交性的rsu部署方法及系统 |
CN108509607A (zh) * | 2018-04-03 | 2018-09-07 | 三盟科技股份有限公司 | 一种基于Louvain算法的社区发现方法及系统 |
CN108833461B (zh) * | 2018-04-10 | 2020-07-17 | 中国矿业大学 | 基于网络分解的社交网络关键节点发现方法及系统 |
CN108833461A (zh) * | 2018-04-10 | 2018-11-16 | 中国矿业大学 | 基于网络分解的社交网络关键节点发现方法及系统 |
CN108763497A (zh) * | 2018-05-30 | 2018-11-06 | 河南科技大学 | 一种基于中心节点扩展的社区发现方法 |
CN111026895A (zh) * | 2019-12-02 | 2020-04-17 | 上海交通大学 | 一种数据可视化处理方法、装置及存储介质 |
CN111026895B (zh) * | 2019-12-02 | 2023-04-28 | 上海交通大学 | 一种数据可视化处理方法、装置及存储介质 |
CN111325647A (zh) * | 2020-02-12 | 2020-06-23 | 同济大学 | 一种基于社会网络分析的社区公共空间更新设计方法 |
CN111325647B (zh) * | 2020-02-12 | 2023-03-28 | 同济大学 | 一种基于社会网络分析的社区公共空间更新设计方法 |
CN111464343A (zh) * | 2020-03-22 | 2020-07-28 | 华南理工大学 | 一种基于平均互信息的最大派系贪心扩展社区发现方法及系统 |
CN111464343B (zh) * | 2020-03-22 | 2021-10-26 | 华南理工大学 | 一种基于平均互信息的最大派系贪心扩展社区发现方法及系统 |
CN112291827A (zh) * | 2020-10-29 | 2021-01-29 | 王程 | 社会属性驱动的容迟网络路由改良算法 |
CN112800345B (zh) * | 2021-02-03 | 2022-09-30 | 安徽大学 | 一种社区角色感知的用户需求主动预测方法及系统 |
CN112800345A (zh) * | 2021-02-03 | 2021-05-14 | 安徽大学 | 一种社区角色感知的用户需求主动预测方法及系统 |
CN113570365A (zh) * | 2021-07-20 | 2021-10-29 | 中国科学院信息工程研究所 | 一种基于社区发现的dag网络拓扑构建方法及交易方法 |
CN113570365B (zh) * | 2021-07-20 | 2024-02-02 | 中国科学院信息工程研究所 | 一种基于社区发现的dag网络交易方法 |
CN115086179A (zh) * | 2022-08-19 | 2022-09-20 | 北京科技大学 | 一种社交网络中社区结构的检测方法 |
CN115086179B (zh) * | 2022-08-19 | 2022-12-09 | 北京科技大学 | 一种社交网络中社区结构的检测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106599090A (zh) | 基于结构中心性的网络社区发现方法 | |
Li et al. | Modular community detection in networks | |
Aghaalizadeh et al. | A three-stage algorithm for local community detection based on the high node importance ranking in social networks | |
Seifi et al. | Stable community cores in complex networks | |
CN104268629B (zh) | 一种基于先验信息和网络固有信息的复杂网络社区检测方法 | |
Xu et al. | A novel disjoint community detection algorithm for social networks based on backbone degree and expansion | |
CN105868791A (zh) | 基于模糊聚类的多分辨率社区发现方法 | |
CN103020163A (zh) | 一种网络中基于节点相似度的网络社区划分方法 | |
CN109978050A (zh) | 基于svm-rf的决策规则提取及约简方法 | |
CN109614520B (zh) | 一种面向多模式图匹配的并行加速方法 | |
Robles et al. | The shape of an image: A study of mapper on images | |
Zarezade et al. | Community detection using a new node scoring and synchronous label updating of boundary nodes in social networks | |
CN109783696B (zh) | 一种面向弱结构相关性的多模式图索引构建方法及系统 | |
Cruz et al. | Integrating heterogeneous information within a social network for detecting communities | |
de Aguiar et al. | Modelling Spatial Relations by Generalized Proximity Matrices. | |
Sathik et al. | Comparative analysis of community discovery methods in social networks | |
Amrahov et al. | A community detection algorithm on graph data | |
Mekouar et al. | Community outlier detection in social networks based on graph matching | |
Mahajan et al. | Various approaches of community detection in complex networks: a glance | |
Chattopadhyay et al. | A similarity based generalized modularity measure towards effective community discovery in complex networks | |
Wu et al. | Detecting highly overlapping community structure based on maximal clique networks | |
Oliveira et al. | High quality multi-core multi-level algorithm for community detection | |
Liu et al. | Evaluating community structure in bipartite networks | |
Queyroi | Optimizing a hierarchical community structure of a complex network | |
Wang et al. | A detecting community method in complex networks with fuzzy clustering |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170426 |
|
RJ01 | Rejection of invention patent application after publication |