CN104679966B - 基于多层次方法和离散粒子群的赋权超图优化划分方法 - Google Patents

基于多层次方法和离散粒子群的赋权超图优化划分方法 Download PDF

Info

Publication number
CN104679966B
CN104679966B CN201510135672.8A CN201510135672A CN104679966B CN 104679966 B CN104679966 B CN 104679966B CN 201510135672 A CN201510135672 A CN 201510135672A CN 104679966 B CN104679966 B CN 104679966B
Authority
CN
China
Prior art keywords
node
particle
empowerment hypergraph
hypergraph
empowerment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510135672.8A
Other languages
English (en)
Other versions
CN104679966A (zh
Inventor
冷明
孙凌宇
冷子阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201510135672.8A priority Critical patent/CN104679966B/zh
Publication of CN104679966A publication Critical patent/CN104679966A/zh
Application granted granted Critical
Publication of CN104679966B publication Critical patent/CN104679966B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种基于多层次方法和离散粒子群的赋权超图优化划分方法,其读取赋权超图文件,采用改进压缩的内存存储格式进行存储,然后启动基于多层次方法和离散粒子群的赋权超图划分程序进行划分,将划分结果存储在赋权超图划分文件中。在粗化阶段,采用赋权超图的结点匹配程序将当前水平层粗化赋权超图的某些结点结合在一起,得到下一水平层的粗化赋权超图,重复此过程直到粗化赋权超图足够小为止;在初始划分阶段,运行基于FM方法的赋权超图划分程序,得到最小赋权超图的初始划分;在优化阶段,从最小赋权超图投影回初始赋权超图,在每一水平层的细化赋权超图中,采用离散粒子群搜索程序对细化赋权超图的投影划分进行优化。

Description

基于多层次方法和离散粒子群的赋权超图优化划分方法
技术领域
本发明涉及一种电路划分和云计算任务调度中基于多层次方法和离散粒子群的赋权超图优化划分方法。
背景技术
现有技术的划分系统中有若干种结点的划分方法,这些划分方法从依赖关系数目最小、划分后结点子集的结点数目均匀分布等不同的方面来实现,主要有基于迁移的划分方法、水平嵌套划分方法和多层次划分方法等。
基于迁移的划分方法。该方法首先产生结点的随机初始划分,同一个结点不能同时属于两个结点子集。在迁移优化阶段,从两个结点子集中各选取一个结点进行成对交换,这两个结点分别属于两个不同的结点子集且收益最大,从而每次都利用交换过程最大限度地改进结点划分质量。记录割切达到最小值时刻的结点划分结果,且一旦交换了所选择的两个结点,在整个迁移过程余下的优化改进中,将这两个结点锁定使得它们不再被选中。重复上述过程直到所有可能的结点都经过迁移之后,回滚到累计收益最大值即割切最小值的时刻。该划分方法得到的结点划分结果不稳定,离散性很大,因此限制了该划分方法所能解决问题的规模。
水平嵌套划分方法。该方法首先选择一个结点,将这个结点标上号码0,然后将所有和这个结点相连的结点标上号码1,之后对于那些还未标上号码,但是和已经标上号码的结点相连的结点,将其标号为相连结点的号码加1。直到一半的结点标上号码,标号过程才结束。那些已经标上号码的结点集合设为一个结点子集,其他结点为另一个结点子集。该划分方法只有在选取的初始结点接近外围时,得到的结点划分结果相对较好,总的来说该结点划分结果也不稳定。
多层次划分方法。Karypis针对结点规模达到几百万的划分问题,提出了多层次划分的概念,在相对较短的时间内可以得到高质量的划分。该方法包含粗化、初始划分和迁移优化三个阶段。首先,它采用随机匹配策略将某些结点结合在一起,得到下一水平层的粗化图,重复此过程直到粗化图足够小为止,即得到一个最小图。然后,采用划分方法对最小图进行对分,得到一个初始划分。之后,将最小图投影回初始图,在每一水平层的细化划分中,按照贪心原则选择收益值最大的结点进行迁移优化,得到最后的结点划分结果。
多层次划分方法在电路划分和云计算任务调度中的应用。自多层次划分的概念提出以来,得到了广泛地重视,并应用在电路划分和云计算任务调度等多个研究领域。
2008年中国专利局公告的由冷明、郁松年和孙凌宇申报,中国专利号为200710043765.3号《基于多水平划分法的大规模集成电路划分方法》的发明专利,针对现有技术方案中因采用随机策略进行匹配和贪心原则进行迁移优化,导致无法逃离局部最优的划分,提供了一种改进的基于多水平划分法的大规模集成电路划分方法,有效地提高了大规模集成电路划分的效率和性能。该发明专利在多水平划分方法的粗化阶段,通过对结点属性进行赋权无向图中所有结点的核值求解排序,按照基于结点核值的非严格降序访问处于未匹配状态的结点,依据一定规则对其进行匹配,从而将连接性好的结点合并在一起;在多水平划分方法的优化阶段,采用免疫克隆优化程序改进贪心原则的局部搜索方法,对在每一水平层投影的划分进行优化,借助克隆操作、克隆变异操作、接种免疫疫苗操作和克隆选择操作,使得改进后的方法在利用启发信息搜索局部最优解的同时,能更自由地对具有潜力的解空间进行搜索,增加全局搜索能力。
2012年中国专利局公告的由孙凌宇、冷明和冷子阳申报,中国专利号为201210155738.6号《基于多水平划分法和赋权超图的大规模集成电路划分方法》的发明专利,针对采用赋权无向图作为大规模集成电路划分问题的数学模型,存在着赋权无向图最优划分和大规模集成电路最优划分的不一致性,提供了一种基于多水平划分法和赋权无向超图的大规模集成电路划分方法,进一步提高了大规模集成电路划分的效率和性能。该发明采用赋权无向超图对电路划分问题进行数学建模,其中电路逻辑单元表示为赋权无向超图中的结点,电路单元间的连线表示为赋权无向超图中的超边。相比赋权无向图而言,赋权无向超图为电路提供了更为精确的模型:每条超边可以连接两个以上的结点,对应于电路单元间的信号可以连接两个以上的电路逻辑单元。该发明将大规模集成电路划分问题转换为赋权无向超图划分问题,其中大规模集成电路划分问题要求每个电路子集所包含的电路逻辑单元数目相等,对应于赋权无向超图划分问题的平衡约束条件,划分结果使得这些电路子集之间的内连线数据达到最小,对应于赋权无向超图划分问题的最小化总割切。
2014年中国专利局公告的由孙凌宇、冷明和冷子阳申报,中国专利号为201410136320.X号《基于多水平划分法和赋权有向超图的云计算任务调度方法》的发明专利,提供了一种基于多水平划分法和赋权有向超图的云计算任务调度方法,进一步提高了任务调度的效率和性能。该发明采用赋权有向超图来构造任务划分问题的数学模型,描述任务的资源需求及依赖关系,其中任务表示为赋权有向超图的结点,任务结点间的先后依赖关系表示为赋权有向超图中的有向超边,并生成相应的赋权有向超图文件;然后启动基于多水平划分方法的赋权有向超图划分程序,对生成的赋权有向超图进行划分;最后依据赋权有向超图的划分结果构造任务子集,通过MapReduce任务调度模型对其进行映射和调度。
发明内容
本发明的目的在于针对已有技术存在的不足,提供一种基于多层次方法和离散粒子群的赋权超图优化划分方法,有效地缩短了划分所需的运行时间,减少了划分所需的存储空间。为达到上述目的,本发明的构思如下。
一、在多层次方法的粗化阶段,通过对赋权超图中所有结点进行基于结点属性函数的核值求解排序,进而基于结点核值的非严格降序访问处于未匹配状态的结点,依据一定规则对其进行匹配,从而将连接性好的结点合并在一起,为多层次划分的后续阶段提供更优的粗化赋权超图。
二、在多层次方法的优化阶段,采用多目标的离散粒子群搜索程序改进贪心原则的局部搜索方法,对在每一水平层粗化赋权超图投影的划分进行优化,其中粒子所处|V|维空间位置对应于一个划分方案,即粒子在每个维度空间的位置代表该维度空间对应结点所处划分的结点子集;伴随着优化阶段的细化过程,每个粒子解决方案代表的划分投影到当前水平层的细化赋权超图上,且粒子的自由度随着空间维度|V|的增加而增大;粒子之间进行直接通信或者间接通信,利用它们聚集协同表现出的智能行为,有效地搜索多约束条件下、多目标组合的Pareto有效解,使非劣迁移优化解向着Pareto-最优面逼近,增强迁移优化算法的多目标搜索能力。
根据上述的发明构思,本发明的技术方案是这样实现的:一种基于多层次方法和离散粒子群的赋权超图优化划分方法,其特征在于,具体步骤如下。
步骤1,读取赋权超图文件,读取按照改进压缩的文件存储格式保存的赋权超图文件。
步骤2,在内存中存储赋权超图文件,采用改进压缩的内存存储格式对赋权超图进行存储。
步骤3,对内存中的赋权超图划分,启动基于多层次方法和离散粒子群的赋权超图划分程序,对内存中的赋权超图进行划分,将最终得到的划分结果存储在赋权超图划分文件中。
上述的步骤1中,所述的赋权超图的改进压缩的文件存储格式如下。
步骤1.1,文件格式的第1行第1个参数代表着赋权超边的数目m,第2个参数代表着赋权结点的数目n。
步骤1.2,文件格式的第2行开始到第m+1行的每行代表着一条赋权超边的相关信息,第1个数值为赋权超边的权值信息,其余数值为赋权超边的结点信息,其中每行的最后一个数值代表赋权超边的尾端结点信息,且赋权超边的源端结点信息处于赋权超边的权值信息和尾端结点信息之间。
步骤1.3,文件格式的第m+2行开始到第m+n+1行的每行代表着一个赋权结点的权值信息。
上述的步骤2中,所述的赋权超图的改进压缩的内存存储格式如下。
步骤2.1,使用vwgts数组存储赋权超图中结点的权值信息,且vwgts数组的大小为赋权超图中的结点个数。
步骤2.2,使用xadj数组存储每个结点所有邻接赋权超边列表的起始位置信息,即第i个结点的终止位置为第i+1个结点的起始位置减1,且xadj数组的大小为赋权超图中的结点个数加1,xadj数组最后一个元素用于存放最后一个结点的终止位置。
步骤2.3,使用adjncy数组存储每个结点所有邻接赋权超边的列表信息,第i个结点的邻接赋权超边列表存储在adjncy数组中,从adjncy[xadj[i]]到adjncy[xadj[i+1]-1]。
步骤2.4,使用eptr数组存储每条赋权超边所包含的结点列表的起始位置信息,即第j条赋权超边的终止位置为第j+1条赋权超边的起始位置减1,且eptr数组的大小为赋权超图中的赋权超边条数加1,eptr数组最后一个元素用于存放最后一条赋权超边的终止位置。
步骤2.5,使用eind数组存储每条赋权超边所包含结点的列表信息,其中每条赋权超边的尾端结点只有1个,且每条赋权超边尾端结点的所有直接前驱结点都包含在该赋权超边的源端子集中;第j条赋权超边的结点列表存储在eind数组中,从eind[eptr[j]]到eind[eptr[j+1]-1],其中第j条赋权超边的源端结点为eind[eptr[j]]到eind[eptr[j+1]-2],第j条赋权超边的尾端结点为eind[eptr[j+1]-1]。
步骤2.6,使用hewgts数组存储赋权超边的权值信息,且hewgts数组的大小为赋权超图中的赋权超边数目。
上述的步骤3中,所述的基于多层次方法和离散粒子群的赋权超图划分程序的步骤如下。
步骤3.1,进入到多层次方法的粗化阶段,采用赋权超图的结点匹配程序将当前水平层粗化赋权超图的某些结点结合在一起,得到每一水平层的粗化赋权超图,重复此过程直到粗化赋权超图足够小为止,即得到一个最小赋权超图。
步骤3.2,进入到多层次方法的初始划分阶段,运行基于FM方法的赋权超图划分程序,得到最小赋权超图的初始划分。
步骤3.3,多层次方法优化阶段的离散粒子群优化划分程序初始化,初始化全体粒子的全局历史最优位置向量和每个粒子的自身位置向量、自身速度向量、自身历史最优位置向量。
步骤3.4,进入到多层次方法的优化阶段,从最小赋权超图投影回初始赋权超图,在每一水平层的细化赋权超图中,采用离散粒子群优化划分程序对细化赋权超图的投影划分进行优化,得到每一水平层细化赋权超图的近似非劣最优划分集。
步骤3.5,由于在基于多层次方法的赋权超图划分过程中,可能违背赋权超图划分问题的平衡约束条件,因此在基于多层次方法的赋权超图划分所求解的基础上,运行基于EE-FM方法的赋权超图划分程序,使原始赋权超图的近似非劣最优划分解满足平衡约束条件,从而得到赋权超图划分问题的划分结果。
步骤3.6,将最终得到的赋权超图划分结果存储在赋权超图划分文件中。
上述的步骤3.1中,所述的当前水平层粗化赋权超图的结点匹配程序的步骤如下。
步骤3.1.1,标注当前水平层粗化赋权超图中所有结点处于未匹配状态。
步骤3.1.2,运行赋权超图的结点核值计算程序,基于结点属性函数值进行当前水平层粗化赋权超图中所有结点的核值求解,并按照结点的核值进行非严格降序排序。
步骤3.1.3,按照结点核值的非严格降序访问处于未匹配状态的结点v;如果结点v还有邻接结点未匹配,那么选取处于未匹配状态的且权值最大的邻接超边的邻接结点u和结点v匹配,且标注这两个结点为匹配状态;如果结点v所有邻接结点均处于匹配状态,则结点v仍处于未匹配状态,在粗化过程中直接拷贝到下一水平层的粗化赋权超图中。
步骤3.1.4,重复步骤3.1.3,直至所有结点访问结束。
上述的步骤3.1.2中,所述的赋权超图的结点核值计算程序的步骤如下。
步骤3.1.2.1,计算出所有结点的属性函数值。
步骤3.1.2.2,对所有结点的属性函数值进行非严格降序排序。
步骤3.1.2.3,按照结点属性函数值的非严格降序次序访问每个结点,计算每个结点的核值。
上述的步骤3.1.2.2中,所述的对所有结点的属性函数值进行非严格降序排序的步骤如下。
步骤3.1.2.2.1,根据结点的属性函数值属于在一定范围内的整数的特点,扫描所有结点的属性函数值,统计每一种属性函数值的结点个数,存储在计数辅助数组bin中。
步骤3.1.2.2.2,针对每一种属性函数值,借助计数辅助数组bin,计算出在所有结点的属性函数值中,小于该属性函数值的结点个数,存储在位置辅助数组pos中。
步骤3.1.2.2.3,扫描所有结点的属性函数值,针对每一个结点的属性函数值,借助位置辅助数组pos,得到该结点的属性函数值在非严格降序排序的次序,并将该次序存储在次序辅助数组vert中。
上述的步骤3.1.2.3中,所述的计算结点v的核值的步骤如下。
步骤3.1.2.3.1,将结点v的属性函数值作为核值输出。
步骤3.1.2.3.2,标记结点v从所在的超边e中删除。
步骤3.1.2.3.3,如果超边e删除结点v后,仍包含两个及以上未被标记删除的结点,则超边e仍然存在,否则删除超边e。
步骤3.1.2.3.4,重新计算结点v的邻接结点u的属性函数值。
步骤3.1.2.3.5,如果邻接结点u的属性函数值大于结点v的属性函数值,更新邻接结点u的属性函数值为结点v的属性函数值,并且借助计数辅助数组bin、位置辅助数组pos和次序辅助数组vert的信息,快速更新邻接结点u在所有结点的属性函数值非严格降序排序的次序;否则不更新邻接结点u的属性函数值及其排序的次序。
上述的步骤3.3中,所述的离散粒子群搜索程序初始化的步骤如下。
步骤3.3.1,设定全体粒子的全局历史最优位置向量的初值为最小赋权超图的初始划分。
步骤3.3.2,遍历每个粒子,并设定每个粒子的自身位置向量的初值为最小赋权超图的初始划分,粒子在最小赋权超图的每个维度空间的位置代表着该维度空间对应的最小赋权超图结点所处划分的结点子集。
步骤3.3.3,遍历每个粒子,并在速度阈值范围内随机给定每个粒子在每个维度空间的速度向量。
步骤3.3.4,遍历每个粒子,并设定每个粒子的自身位置向量的初值为自身历史最优位置向量。
上述的步骤3.4中,所述的离散粒子群搜索程序的步骤如下。
步骤3.4.1,遍历每个粒子,并依据每个粒子的上一水平层粗化赋权超图的自身位置向量投影到当前水平层的细化赋权超图上,得到每个粒子在当前水平层细化赋权超图的自身位置向量。粒子在当前水平层的细化赋权超图的每个维度空间的位置代表着该维度空间对应的当前水平层的细化赋权超图结点所处划分的结点子集。
步骤3.4.2,遍历每个粒子,并依据每个粒子的上一水平层粗化赋权超图的自身速度向量投影到当前水平层的细化赋权超图上,得到每个粒子在当前水平层细化赋权超图的自身速度向量,即粒子在当前水平层细化赋权超图的每个维度空间的速度。
步骤3.4.3,遍历每个粒子,并依据每个粒子的当前水平层细化赋权超图的自身位置向量,计算每个粒子的二维辅助数组EDG[n][m] 。
步骤3.4.4,遍历每个粒子,并依据每个粒子的二维辅助数组EDG[n][m],快速计算每个粒子在当前水平层的细化赋权超图的自身位置向量的割切值。
步骤3.4.5,循环初始化,初始化循环计数器COUNT为0。
步骤3.4.6,遍历每个粒子在当前水平层的细化赋权超图的所有维度,更新每个粒子在每个维度的自身速度、自身位置,进而得到每个粒子的自身速度向量和自身位置向量。
步骤3.4.7,依据粒子的自身位置向量更新计算粒子的二维辅助数组EDG[n][m]。
步骤3.4.8,由于经过一系列结点的迁移后,粒子自身位置向量对应的划分可能违背赋权超图划分问题的平衡约束条件,因此每个粒子针对自身位置向量,运行基于EE-FM方法的赋权超图划分方法,使划分解满足平衡约束条件,从而得到赋权超图划分问题的划分结果。
步骤3.4.9,遍历每个粒子,并依据每个粒子的自身位置向量和二维辅助数组EDG[n][m],快速计算每个粒子的当前水平层细化赋权超图的自身位置向量的割切值;如果该粒子的自身位置向量的割切值小于自身历史最优位置向量的割切值,则更新该粒子的历史最优位置向量为当前的自身位置向量;如果该粒子的自身位置向量的割切值小于全体粒子的全局历史最优位置向量的割切值,则更新全体粒子的全局历史最优位置向量为该粒子当前的自身位置向量。
步骤3.4.10,重复步骤3.4.6、3.4.7、3.4.8、3.4.9和循环计数器COUNT加1,直至循环计数器COUNT到达给定的上限。
上述的步骤3.4.3和步骤3.4.7中,所述的计算粒子的二维辅助数组EDG[n][m]的步骤如下。
步骤3.4.3.1,二维辅助数组EDG[n][m]清零。
步骤3.4.3.2,读取eptr数组和eind数组存储的每条超边所包含的结点信息,基于粒子的当前水平层细化赋权超图的自身位置向量,计算每条超边在n个划分子集V1~Vn的结点个数,即二维辅助数组EDG[n][m]存放m条超边在n个划分子集的结点个数。
上述的步骤3.4.4和步骤3.4.9中,所述的快速计算粒子自身位置向量割切值的步骤如下。
步骤3.4.4.1,划分割切值清零。
步骤3.4.4.2,遍历每条超边是否结束,如果访问未结束,即存在超边e未被访问,则转步骤3.4.4.3;否则访问结束,返回划分割切值。
步骤3.4.4.3,如果满足EDG[i][e] ≥1的条件1和EDG[j][e]≥1的条件2时,意味着超边e在划分子集Vi和Vj的结点个数都大于等于1,即可判定超边e是两栖边,并将划分割切值累加上当前超边的权值;否则判定超边e不是两栖边,划分割切值不变。
步骤3.4.4.4,转步骤3.4.4.2。
上述的步骤3.4.6中,所述的更新粒子在当前维度的自身速度和自身位置的步骤如下。
步骤3.4.6.1,计算出粒子在当前维度的自身速度与惯性权重参数的乘积。
步骤3.4.6.2,计算出粒子在当前维度的历史最优位置和粒子的当前自身位置的差,再和认知参数相乘。
步骤3.4.6.3,计算出全体粒子在当前维度的全局历史最优位置和粒子的当前自身位置的差,再和社会参数相乘。
步骤3.4.6.4,计算出步骤3.4.6.1、步骤3.4.6.2、步骤3.4.6.3得到的三个乘积的和,在速度阈值范围内更新粒子在当前维度的自身速度。
步骤3.4.6.5,快速计算出粒子在当前维度的迁移收益值,如果收益值大于零,则对粒子在当前维度的位置进行迁移,更新粒子在当前维度的自身位置;否则计算出粒子在当前维度的粒子自身位置和自身速度向量的和,更新粒子在当前维度的自身位置。
上述的步骤3.4.6.5中,所述的快速计算粒子在当前维度的迁移收益值的步骤如下。
步骤3.4.6.5.1,迁移收益值清零。
步骤3.4.6.5.2,读取粒子在当前维度的自身位置保存在from变量。
步骤3.4.6.5.3,遍历当前维度对应结点的所有邻接超边eId,如果二维数组EDG[from][eId]值为1,则将收益值加上超边eId的权值;否则将收益值减去超边eId的权值。
本发明与现有技术相比较,具有如下显而易见的突出实质性特点和显著优点。
一、提高了赋权超图划分的性能。
本发明基于多层次方法和离散粒子群的赋权超图优化划分方法,借助二维辅助数组EDG[n][m]存储每条超边在划分子集的结点个数,实现了划分割切值的快速计算方法,避免了遍历超边中的结点。该方法有效地找到比现有技术更优的赋权超图划分结果,降低了空间复杂度和时间复杂度,最终显著地提高了赋权超图划分的性能。
附图说明
通过以下对本发明基于多层次方法和离散粒子群的赋权超图优化划分方法的实例结合其附图的描述,可以进一步理解本发明的目的、具体结构特征和优点。
图1是本发明基于多层次方法和离散粒子群的赋权超图优化划分方法的流程图。
图2是本发明的赋权超图的改进压缩的内存存储格式。
图3是本发明基于多层次方法和离散粒子群的赋权超图优化划分过程中优化阶段的离散粒子群优化划分程序的流程图。
具体实施方式
为了能够更清楚地理解本发明基于多层次方法和离散粒子群的赋权超图优化划分方法的技术内容,特举以下实例详细说明。
本实施例的基于多层次方法和离散粒子群的赋权超图优化划分方法的流程图如图1所示。输入并读取按照改进压缩的文件存储格式保存的赋权超图文件101;采用改进压缩的内存存储格式存储赋权超图102;启动基于多层次方法和离散粒子群的赋权超图划分程序108,进入到多层次方法的粗化阶段,采用赋权超图的结点匹配程序将当前水平层粗化赋权超图的某些结点结合在一起,得到每一水平层的粗化赋权超图103;重复此过程直到粗化赋权超图足够小为止,即得到一个最小赋权超图,然后进入到多层次方法的初始划分阶段,运行基于FM方法的赋权超图划分程序,得到最小赋权超图的初始划分104;进入到多层次方法的优化阶段,从最小赋权超图投影回初始赋权超图,在每一水平层的细化赋权超图中,采用离散粒子群优化划分程序对细化赋权超图的投影划分进行优化,得到每一水平层细化赋权超图的近似非劣最优划分集105;运行基于EE-FM方法的赋权超图划分程序106,使原始赋权超图的近似非劣最优划分解满足平衡约束条件,从而得到赋权超图划分问题的划分结果,并将其存储在赋权超图的划分文件107。
本实施例的赋权超图改进压缩的文件存储格式参见在先技术[1] “G. Karypisand V. Kumar. HMetis 1.5.3: A Hypergraph Partitioning Package [R]. Technicalreport, Department of Computer Science, University of Minnesota, 1998.”和在先技术[2] “孙凌宇,冷明,郭恺强,朱平. 一种VLSI设计到超图的转换系统[J]. 计算机工程与应用, 2012, Vol.29, Issue.2, Pages 7-16.”。与在先技术[1,2]相同点:文件格式的第1行第1个参数代表着赋权超边的数目m,第2个参数代表着赋权结点的数目n;文件格式的第2行开始到第m+1行的每行代表着一条赋权超边的相关信息;文件格式的第m+2行开始到第m+n+1行的每行代表着一个赋权结点的权值信息。与在先技术[1,2]区别点:文件格式的第2行开始到第m+1行中,除第1个数值之外的其余数值为赋权超边的结点信息,其中每行的最后一个数值代表赋权超边的尾端结点信息,且赋权超边的源端结点信息处于赋权超边的权值信息和尾端结点信息之间。
本实施例的赋权超图的改进压缩的内存存储格式如图2所示。存储结构使用adjncy数组204存储每个结点所有邻接超边的列表信息。使用xadj数组203存储每个结点所有邻接超边列表的起始位置信息,即第i个结点的终止位置为第i+1个结点的起始位置减1,且xadj数组203的大小为赋权超图中的结点个数加1, xadj数组203最后一个元素用于存放最后一个结点的终止位置。使用eind数组207存储每条超边所包含结点的列表信息。使用eptr数组206存储每条超边所包含的结点列表的起始位置信息,即第j条超边的终止位置为第j+1条超边的起始位置减1,且eptr数组206的大小为赋权超图中的超边条数加1, eptr数组206最后一个元素用于存放最后一条超边的终止位置。使用vwgts数组202存储结点的权值信息,且vwgts数组202的大小为赋权超图中的结点个数。使用hewgts数组205存储超边的权值信息,且hewgts数组205的大小为赋权超图中的超边条数。假设数组地址从零开始,结点编号从零开始,则第i个结点的邻接超边列表存储在adjncy数组204中,从adjncy[xadj[i]]到adjncy[xadj[i+1]-1];第j条超边的邻接结点列表存储在eind数组207中,从eind[eptr[j]]到eind[eptr[j+1]-1] ,其中第j条超边的源端结点为eind[eptr[j]]到eind[eptr[j+1]-2],第j条超边的尾端结点为eind[eptr[j+1]-1]。图例201总共包含7个结点和8条超边,其中第6个结点的权值为7,有2条邻接超边f、h;超边f对应的权值为4,且相应的邻接结点分别为结点7、3、6;超边h对应的权值为1,且相应的邻接结点分别为结点4、6。
本实施例的基于FM方法的赋权超图划分程序参见在先技术[4] “Fiduccia C,Mattheyses R. A linear-time heuristics for improving network partitions[C].Proceedings of the 19th Design Automation Conference. Los Alamitos: IEEEComputer Society Press, 1982, Pages 175-181.”。
本实施例的基于EE-FM方法的赋权超图划分程序参见在先技术[5] “Karypis G,Aggarwal R, Kumar V, Shekhar S. Multilevel hypergraph partitioning:Applications in VLSI domain[J]. IEEE transactions on very large scaleintegration systems, 1999, Vol.7, Issue.1, Pages 69-79.”。
本实施例的基于多层次方法和离散粒子群的赋权超图优化划分过程中优化阶段的离散粒子群优化划分程序的流程图如图3所示,步骤如下。
A01:初始化全体粒子的全局历史最优位置向量,设定全体粒子的全局历史最优位置向量的初值为最小赋权超图的初始划分。
A02:初始化每个粒子的自身位置向量,遍历每个粒子并设定每个粒子的自身位置向量的初值为最小赋权超图的初始划分,粒子在最小赋权超图的每个维度空间的位置代表着该维度空间对应的最小赋权超图结点所处划分的结点子集。
A03:初始化每个粒子的自身速度向量,遍历每个粒子并在速度阈值范围内,随机给定每个粒子在每个维度空间的速度向量。
A04:初始化每个粒子的自身历史最优位置向量,遍历每个粒子并设定每个粒子的自身位置向量的初值为自身历史最优位置向量。
A05:投影每个粒子的自身位置向量,遍历每个粒子并依据每个粒子的上一水平层粗化赋权超图的自身位置向量投影到当前水平层的细化赋权超图上,得到每个粒子在当前水平层细化赋权超图的自身位置向量。粒子在当前水平层的细化赋权超图的每个维度空间的位置代表着该维度空间对应的当前水平层的细化赋权超图结点所处划分的结点子集。
A06:投影每个粒子的自身速度向量,遍历每个粒子并依据每个粒子的上一水平层粗化赋权超图的自身速度向量投影到当前水平层的细化赋权超图上,得到每个粒子在当前水平层细化赋权超图的自身速度向量,即粒子在当前水平层细化赋权超图的每个维度空间的速度。
A07:计算每个粒子的二维辅助数组EDG[n][m],遍历每个粒子并依据每个粒子的当前水平层细化赋权超图的自身位置向量,计算每个粒子的二维辅助数组EDG[n][m]。
A08:快速计算每个粒子在当前水平层的细化赋权超图的自身位置向量的割切值,遍历每个粒子并依据每个粒子的二维辅助数组EDG[n][m],快速计算每个粒子在当前水平层的细化赋权超图的自身位置向量的割切值。
A09:循环初始化,初始化循环计数器COUNT为0。
A10:更新每个粒子的自身速度向量和自身位置向量,遍历每个粒子在当前水平层的细化赋权超图的所有维度,更新每个粒子在每个维度的自身速度、自身位置,进而得到每个粒子的自身速度向量和自身位置向量。
A11:更新每个粒子的二维辅助数组EDG[n][m],依据粒子的自身位置向量更新计算粒子的二维辅助数组EDG[n][m]。
A12:运行基于EE-FM方法的赋权超图划分程序,由于经过一系列结点的迁移后,粒子自身位置向量对应的划分可能违背赋权超图划分问题的平衡约束条件,因此每个粒子针对自身位置向量,运行基于EE-FM方法的赋权超图划分程序,使划分解满足平衡约束条件,从而得到赋权超图划分问题的划分结果。
A13:快速计算每个粒子的自身位置向量的割切值,遍历每个粒子并依据每个粒子的自身位置向量和二维辅助数组EDG[n][m],快速计算每个粒子的当前水平层细化赋权超图的自身位置向量的割切值;如果该粒子的自身位置向量的割切值小于自身历史最优位置向量的割切值,则更新该粒子的历史最优位置向量为当前的自身位置向量;如果该粒子的自身位置向量的割切值小于全体粒子的全局历史最优位置向量的割切值,则更新全体粒子的全局历史最优位置向量为该粒子当前的自身位置向量。
A14: 重复步骤A10、A11、A12、A13,循环计数器COUNT加1,直至循环计数器COUNT到达给定的上限。
A15: 投影到上一水平层的粗化赋权超图。
A16: 重复步骤A05、A06、A07、A08、A09、A10、A11、A12、A13、A14、A15,直至投影回到初始赋权超图。
A17:运行基于EE-FM方法的赋权超图划分程序,由于在基于多层次方法的赋权超图划分过程中,可能违背赋权超图划分问题的平衡约束条件,因此在基于多层次方法的赋权超图划分所求解的基础上,运行基于EE-FM方法的赋权超图划分程序,使原始赋权超图的近似非劣最优划分解满足平衡约束条件,从而得到赋权超图划分问题的划分结果。

Claims (1)

1.一种基于多层次方法和离散粒子群的赋权超图优化划分方法,其特征在于,具体步骤如下:
步骤1,读取赋权超图文件,读取按照改进压缩的文件存储格式保存的赋权超图文件;
步骤2,在内存中存储赋权超图文件,采用改进压缩的内存存储格式对赋权超图进行存储;
步骤3,对内存中的赋权超图划分,启动基于多层次方法和离散粒子群的赋权超图划分程序,对内存中的赋权超图进行划分,将最终得到的划分结果存储在赋权超图划分文件中;
上述的步骤1中,所述的赋权超图的改进压缩的文件存储格式如下:
步骤1.1,文件格式的第1行第1个参数代表着赋权超边的数目m,第2个参数代表着赋权结点的数目n;
步骤1.2,文件格式的第2行开始到第m+1行的每行代表着一条赋权超边的相关信息,第1个数值为赋权超边的权值信息,其余数值为赋权超边的结点信息,其中每行的最后一个数值代表赋权超边的尾端结点信息,且赋权超边的源端结点信息处于赋权超边的权值信息和尾端结点信息之间;
步骤1.3,文件格式的第m+2行开始到第m+n+1行的每行代表着一个赋权结点的权值信息;
上述的步骤2中,所述的赋权超图的改进压缩的内存存储格式如下:
步骤2.1,使用vwgts数组存储赋权超图中结点的权值信息,且vwgts数组的大小为赋权超图中的结点个数;
步骤2.2,使用xadj数组存储每个结点所有邻接赋权超边列表的起始位置信息,即第i个结点的终止位置为第i+1个结点的起始位置减1,且xadj数组的大小为赋权超图中的结点个数加1,xadj数组最后一个元素用于存放最后一个结点的终止位置;
步骤2.3,使用adjncy数组存储每个结点所有邻接赋权超边的列表信息,第i个结点的邻接赋权超边列表存储在adjncy数组中,从adjncy[xadj[i]]到adjncy[xadj[i+1]-1];
步骤2.4,使用eptr数组存储每条赋权超边所包含的结点列表的起始位置信息,即第j条赋权超边的终止位置为第j+1条赋权超边的起始位置减1,且eptr数组的大小为赋权超图中的赋权超边条数加1,eptr数组最后一个元素用于存放最后一条赋权超边的终止位置;
步骤2.5,使用eind数组存储每条赋权超边所包含结点的列表信息,其中每条赋权超边的尾端结点只有1个,且每条赋权超边尾端结点的所有直接前驱结点都包含在该赋权超边的源端子集中;第j条赋权超边的结点列表存储在eind数组中,从eind[eptr[j]]到eind[eptr[j+1]-1],其中第j条赋权超边的源端结点为eind[eptr[j]]到eind[eptr[j+1]-2],第j条赋权超边的尾端结点为eind[eptr[j+1]-1];
步骤2.6,使用hewgts数组存储赋权超边的权值信息,且hewgts数组的大小为赋权超图中的赋权超边数目;
上述的步骤3中,所述的基于多层次方法和离散粒子群的赋权超图划分程序的步骤如下:
步骤3.1,进入到多层次方法的粗化阶段,采用赋权超图的结点匹配程序将当前水平层粗化赋权超图的某些结点结合在一起,得到每一水平层的粗化赋权超图,重复此过程直到粗化赋权超图足够小为止,即得到一个最小赋权超图;
步骤3.2,进入到多层次方法的初始划分阶段,运行基于FM方法的赋权超图划分程序,得到最小赋权超图的初始划分;
步骤3.3,多层次方法优化阶段的离散粒子群优化划分程序初始化,初始化全体粒子的全局历史最优位置向量和每个粒子的自身位置向量、自身速度向量、自身历史最优位置向量;
步骤3.4,进入到多层次方法的优化阶段,从最小赋权超图投影回初始赋权超图,在每一水平层的细化赋权超图中,采用离散粒子群优化划分程序对细化赋权超图的投影划分进行优化,得到每一水平层细化赋权超图的近似非劣最优划分集;
步骤3.5,由于在基于多层次方法的赋权超图划分过程中,可能违背赋权超图划分问题的平衡约束条件,因此在基于多层次方法的赋权超图划分所求解的基础上,运行基于EE-FM方法的赋权超图划分程序,使原始赋权超图的近似非劣最优划分解满足平衡约束条件,从而得到赋权超图划分问题的划分结果;
步骤3.6,将最终得到的赋权超图划分结果存储在赋权超图划分文件中;
上述的步骤3.1中,所述的当前水平层粗化赋权超图的结点匹配程序的步骤如下:
步骤3.1.1,标注当前水平层粗化赋权超图中所有结点处于未匹配状态;
步骤3.1.2,运行赋权超图的结点核值计算程序,基于结点属性函数值进行当前水平层粗化赋权超图中所有结点的核值求解,并按照结点的核值进行非严格降序排序;
步骤3.1.3,按照结点核值的非严格降序访问处于未匹配状态的结点v;如果结点v还有邻接结点未匹配,那么选取处于未匹配状态的且权值最大的邻接超边的邻接结点u和结点v匹配,且标注这两个结点为匹配状态;如果结点v所有邻接结点均处于匹配状态,则结点v仍处于未匹配状态,在粗化过程中直接拷贝到下一水平层的粗化赋权超图中;
步骤3.1.4,重复步骤3.1.3,直至所有结点访问结束;
上述的步骤3.1.2中,所述的赋权超图的结点核值计算程序的步骤如下:
步骤3.1.2.1,计算出所有结点的属性函数值;
步骤3.1.2.2,对所有结点的属性函数值进行非严格降序排序;
步骤3.1.2.3,按照结点属性函数值的非严格降序次序访问每个结点,计算每个结点的核值;
上述的步骤3.1.2.2中,所述的对所有结点的属性函数值进行非严格降序排序的步骤如下:
步骤3.1.2.2.1,根据结点的属性函数值属于在一定范围内的整数的特点,扫描所有结点的属性函数值,统计每一种属性函数值的结点个数,存储在计数辅助数组bin中;
步骤3.1.2.2.2,针对每一种属性函数值,借助计数辅助数组bin,计算出在所有结点的属性函数值中,小于该属性函数值的结点个数,存储在位置辅助数组pos中;
步骤3.1.2.2.3,扫描所有结点的属性函数值,针对每一个结点的属性函数值,借助位置辅助数组pos,得到该结点的属性函数值在非严格降序排序的次序,并将该次序存储在次序辅助数组vert中;
上述的步骤3.1.2.3中,所述的计算结点v的核值的步骤如下:
步骤3.1.2.3.1,将结点v的属性函数值作为核值输出;
步骤3.1.2.3.2,标记结点v从所在的超边e中删除;
步骤3.1.2.3.3,如果超边e删除结点v后,仍包含两个及以上未被标记删除的结点,则超边e仍然存在,否则删除超边e;
步骤3.1.2.3.4,重新计算结点v的邻接结点u的属性函数值;
步骤3.1.2.3.5,如果邻接结点u的属性函数值大于结点v的属性函数值,更新邻接结点u的属性函数值为结点v的属性函数值,并且借助计数辅助数组bin、位置辅助数组pos和次序辅助数组vert的信息,快速更新邻接结点u在所有结点的属性函数值非严格降序排序的次序;否则不更新邻接结点u的属性函数值及其排序的次序;
上述的步骤3.3中,所述的离散粒子群搜索程序初始化的步骤如下:
步骤3.3.1,设定全体粒子的全局历史最优位置向量的初值为最小赋权超图的初始划分;
步骤3.3.2,遍历每个粒子,并设定每个粒子的自身位置向量的初值为最小赋权超图的初始划分,粒子在最小赋权超图的每个维度空间的位置代表着该维度空间对应的最小赋权超图结点所处划分的结点子集;
步骤3.3.3,遍历每个粒子,并在速度阈值范围内随机给定每个粒子在每个维度空间的速度向量;
步骤3.3.4,遍历每个粒子,并设定每个粒子的自身位置向量的初值为自身历史最优位置向量;
上述的步骤3.4中,所述的离散粒子群搜索程序的步骤如下:
步骤3.4.1,遍历每个粒子,并依据每个粒子的上一水平层粗化赋权超图的自身位置向量投影到当前水平层的细化赋权超图上,得到每个粒子在当前水平层细化赋权超图的自身位置向量;粒子在当前水平层的细化赋权超图的每个维度空间的位置代表着该维度空间对应的当前水平层的细化赋权超图结点所处划分的结点子集;
步骤3.4.2,遍历每个粒子,并依据每个粒子的上一水平层粗化赋权超图的自身速度向量投影到当前水平层的细化赋权超图上,得到每个粒子在当前水平层细化赋权超图的自身速度向量,即粒子在当前水平层细化赋权超图的每个维度空间的速度;
步骤3.4.3,遍历每个粒子,并依据每个粒子的当前水平层细化赋权超图的自身位置向量,计算每个粒子的二维辅助数组EDG[n][m] ;
步骤3.4.4,遍历每个粒子,并依据每个粒子的二维辅助数组EDG[n][m],快速计算每个粒子在当前水平层的细化赋权超图的自身位置向量的割切值;
步骤3.4.5,循环初始化,初始化循环计数器COUNT为0;
步骤3.4.6,遍历每个粒子在当前水平层的细化赋权超图的所有维度,更新每个粒子在每个维度的自身速度、自身位置,进而得到每个粒子的自身速度向量和自身位置向量;
步骤3.4.7,依据粒子的自身位置向量更新计算粒子的二维辅助数组EDG[n][m];
步骤3.4.8,由于经过一系列结点的迁移后,粒子自身位置向量对应的划分可能违背赋权超图划分问题的平衡约束条件,因此每个粒子针对自身位置向量,运行基于EE-FM方法的赋权超图划分方法,使划分解满足平衡约束条件,从而得到赋权超图划分问题的划分结果;
步骤3.4.9,遍历每个粒子,并依据每个粒子的自身位置向量和二维辅助数组EDG[n][m],快速计算每个粒子的当前水平层细化赋权超图的自身位置向量的割切值;如果该粒子的自身位置向量的割切值小于自身历史最优位置向量的割切值,则更新该粒子的历史最优位置向量为当前的自身位置向量;如果该粒子的自身位置向量的割切值小于全体粒子的全局历史最优位置向量的割切值,则更新全体粒子的全局历史最优位置向量为该粒子当前的自身位置向量;
步骤3.4.10,重复步骤3.4.6、3.4.7、3.4.8、3.4.9和循环计数器COUNT加1,直至循环计数器COUNT到达给定的上限;
上述的步骤3.4.3和步骤3.4.7中,所述的计算粒子的二维辅助数组EDG[n][m]的步骤如下:
步骤3.4.3.1,二维辅助数组EDG[n][m]清零;
步骤3.4.3.2,读取eptr数组和eind数组存储的每条超边所包含的结点信息,基于粒子的当前水平层细化赋权超图的自身位置向量,计算每条超边在n个划分子集V1~Vn的结点个数,即二维辅助数组EDG[n][m]存放m条超边在n个划分子集的结点个数;
上述的步骤3.4.4和步骤3.4.9中,所述的快速计算粒子自身位置向量割切值的步骤如下:
步骤3.4.4.1,划分割切值清零;
步骤3.4.4.2,遍历每条超边是否结束,如果访问未结束,即存在超边e未被访问,则转步骤3.4.4.3;否则访问结束,返回划分割切值;
步骤3.4.4.3,如果满足EDG[i][e] ≥1的条件1和EDG[j][e]≥1的条件2时,意味着超边e在划分子集Vi和Vj的结点个数都大于等于1,即可判定超边e是两栖边,并将划分割切值累加上当前超边的权值;否则判定超边e不是两栖边,划分割切值不变;
步骤3.4.4.4,转步骤3.4.4.2;
上述的步骤3.4.6中,所述的更新粒子在当前维度的自身速度和自身位置的步骤如下:
步骤3.4.6.1,计算出粒子在当前维度的自身速度与惯性权重参数的乘积;
步骤3.4.6.2,计算出粒子在当前维度的历史最优位置和粒子的当前自身位置的差,再和认知参数相乘;
步骤3.4.6.3,计算出全体粒子在当前维度的全局历史最优位置和粒子的当前自身位置的差,再和社会参数相乘;
步骤3.4.6.4,计算出步骤3.4.6.1、步骤3.4.6.2、步骤3.4.6.3得到的三个乘积的和,在速度阈值范围内更新粒子在当前维度的自身速度;
步骤3.4.6.5,快速计算出粒子在当前维度的迁移收益值,如果收益值大于零,则对粒子在当前维度的位置进行迁移,更新粒子在当前维度的自身位置;否则计算出粒子在当前维度的粒子自身位置和自身速度向量的和,更新粒子在当前维度的自身位置;
上述的步骤3.4.6.5中,所述的快速计算粒子在当前维度的迁移收益值的步骤如下:
步骤3.4.6.5.1,迁移收益值清零;
步骤3.4.6.5.2,读取粒子在当前维度的自身位置保存在from变量;
步骤3.4.6.5.3,遍历当前维度对应结点的所有邻接超边eId,如果二维数组EDG[from][eId]值为1,则将收益值加上超边eId的权值;否则将收益值减去超边eId的权值。
CN201510135672.8A 2015-03-26 2015-03-26 基于多层次方法和离散粒子群的赋权超图优化划分方法 Expired - Fee Related CN104679966B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510135672.8A CN104679966B (zh) 2015-03-26 2015-03-26 基于多层次方法和离散粒子群的赋权超图优化划分方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510135672.8A CN104679966B (zh) 2015-03-26 2015-03-26 基于多层次方法和离散粒子群的赋权超图优化划分方法

Publications (2)

Publication Number Publication Date
CN104679966A CN104679966A (zh) 2015-06-03
CN104679966B true CN104679966B (zh) 2017-06-16

Family

ID=53315005

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510135672.8A Expired - Fee Related CN104679966B (zh) 2015-03-26 2015-03-26 基于多层次方法和离散粒子群的赋权超图优化划分方法

Country Status (1)

Country Link
CN (1) CN104679966B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105159762B (zh) * 2015-08-03 2018-09-07 冷子阳 基于贪心策略的启发式云计算任务调度方法
CN106557581B (zh) * 2016-11-29 2021-02-12 佛山科学技术学院 一种基于多层次框架及超边迁移的超图划分方法
CN106919769B (zh) * 2017-03-15 2020-04-10 冷明 一种基于多层次方法和赋权超图的层次式fpga布局布线方法
CN109218414A (zh) * 2018-08-27 2019-01-15 杭州中恒云能源互联网技术有限公司 一种面向智能电网混合网络架构的分布式计算方法
CN109377495B (zh) * 2018-09-28 2021-11-12 北京航空航天大学 一种支持增量分割的大规模图分割方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102682176A (zh) * 2012-05-18 2012-09-19 冷明 基于元胞自动机和赋权超图的大规模集成电路划分方法
CN102693340A (zh) * 2012-05-19 2012-09-26 孙凌宇 基于多水平划分法和赋权超图的大规模集成电路划分方法
CN103885839A (zh) * 2014-04-06 2014-06-25 孙凌宇 基于多水平划分法和赋权有向超图的云计算任务调度方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102682176A (zh) * 2012-05-18 2012-09-19 冷明 基于元胞自动机和赋权超图的大规模集成电路划分方法
CN102693340A (zh) * 2012-05-19 2012-09-26 孙凌宇 基于多水平划分法和赋权超图的大规模集成电路划分方法
CN103885839A (zh) * 2014-04-06 2014-06-25 孙凌宇 基于多水平划分法和赋权有向超图的云计算任务调度方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Multilevel Hypergraph Partitioning:Applications in VLSI Domain;George Karypis等;《IEEE TRANSACTIONS ON VERY LARGE SCALE INTEGRATION (VLSI) SYSTEMS》;19990331;全文 *
离散群体智能算法的研究与应用;陈恩修;《中国博士学位论文全文数据库 信息科技辑》;20091015;第1.2节 *

Also Published As

Publication number Publication date
CN104679966A (zh) 2015-06-03

Similar Documents

Publication Publication Date Title
CN103885839B (zh) 基于多水平划分法和赋权有向超图的云计算任务调度方法
CN104679966B (zh) 基于多层次方法和离散粒子群的赋权超图优化划分方法
CN107402955B (zh) 确定地理围栏的索引网格的方法和装置
Assad Multicommodity network flows—a survey
CN106528773B (zh) 一种基于Spark平台支持空间数据管理的图计算系统及方法
CN106919769A (zh) 一种基于多层次方法和赋权超图的层次式fpga布局布线方法
CN102693340B (zh) 基于多水平划分法和赋权超图的大规模集成电路划分方法
CN110059067A (zh) 一种水利空间矢量大数据存储管理方法
CN104298713A (zh) 一种基于模糊聚类的图片检索方法
CN102722553A (zh) 基于用户日志分析的分布式倒排索引组织方法
Gole et al. Frequent Itemset Mining for Big Data in social media using ClustBigFIM algorithm
CN104731925A (zh) 基于MapReduce的FP-Growth的负载均衡并行计算方法
CN105205052A (zh) 一种数据挖掘方法及装置
Götz et al. Parallel computation of component trees on distributed memory machines
CN106021458A (zh) 一种云环境下的大数据快速聚合查询方法
Yang et al. Circuit clustering for delay minimization under area and pin constraints
CN104834709B (zh) 一种基于负载均衡的并行余弦模式挖掘方法
CN103279505A (zh) 一种基于语义的海量数据处理方法
CN103198099A (zh) 基于云计算的面向电信业务的数据挖掘应用方法
Wu et al. LSH-based distributed similarity indexing with load balancing in high-dimensional space
CN101140583A (zh) 一种文本检索的方法和装置
CN105138607B (zh) 一种基于混合粒度分布式内存网格索引的knn查询方法
CN103870342B (zh) 云计算环境中的基于结点属性函数的任务核值计算方法
CN116796083B (zh) 一种空间数据划分方法及系统
Xu et al. Efficient similarity join based on Earth mover’s Distance using Mapreduce

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170616

Termination date: 20180326

CF01 Termination of patent right due to non-payment of annual fee