CN108647900A - 一种应用于水文模拟领域的区域划分方法 - Google Patents

一种应用于水文模拟领域的区域划分方法 Download PDF

Info

Publication number
CN108647900A
CN108647900A CN201810479541.5A CN201810479541A CN108647900A CN 108647900 A CN108647900 A CN 108647900A CN 201810479541 A CN201810479541 A CN 201810479541A CN 108647900 A CN108647900 A CN 108647900A
Authority
CN
China
Prior art keywords
node
region
initial packet
hydrology
partitioning method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810479541.5A
Other languages
English (en)
Other versions
CN108647900B (zh
Inventor
储根深
胡长军
吴彦飞
吴佳豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Science and Technology Beijing USTB
Original Assignee
University of Science and Technology Beijing USTB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Science and Technology Beijing USTB filed Critical University of Science and Technology Beijing USTB
Priority to CN201810479541.5A priority Critical patent/CN108647900B/zh
Publication of CN108647900A publication Critical patent/CN108647900A/zh
Application granted granted Critical
Publication of CN108647900B publication Critical patent/CN108647900B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/26—Government or public services

Landscapes

  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Educational Administration (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Primary Health Care (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Game Theory and Decision Science (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明提供一种应用于水文模拟领域的区域划分方法，其中，所述方法包括：读取步骤：读入水文拓扑文件，遍历所述水文拓扑文件中从上游至下游各个区域内的所有结点；计算步骤：根据遍历得到的结点信息计算负载均衡因子，并计算初始分组的数目；分组步骤：根据初始分组的数目将各个结点进行初始分组；分配步骤：将初始分组进行优先级的排序，并依次将未被分配的各区域结点的计算任务分配到各计算单元节点，重复执行上述分配任务直到所有区域结点被分配完毕。本发明提供的技术方案按照水文拓扑结构各个结点的优先级进行区域划分，充分发挥了流域拓扑结构上下游特点。

Description

一种应用于水文模拟领域的区域划分方法
技术领域
本发明涉及水文领域，特别是指一种应用于水文模拟领域的区域划分方法。
背景技术
在大规模水文模拟计算中，由于需要模拟的地理区域数目(记为N)远大于计算单元数目(记计算单元数目为M，则N>M)，因此需要基于一些策略将N个区域的计算量分配给M个计算单元。区域划分策略的优劣直接影响到并行效率，进而影响整个模拟系统性能的好坏。
常用的划分依据有负载均衡、通信最小化。就水文模拟领域而言，目前的一些区域划分方法大都属于通用的划分方式，虽然可以实现负载均衡、通信最小化，但是并未考虑大自然水系之间的上下游汇流关系。鉴于水文拓扑结构的特殊性(例如独特的上下游汇流关系、河网拓扑结构的短期不变性)，如果将目前的区域划分方法直接应用于水文模拟领域，会使得整个模拟系统的性能大打折扣。
发明内容
本发明要解决的技术问题是如何提高水文模拟系统的性能，提供一种应用于水文模拟领域的区域划分方法。
为解决上述技术问题，本发明的实施例提供一种应用于水文模拟领域的区域划分方法，包括：
读取步骤：读入水文拓扑文件，遍历所述水文拓扑文件中从上游至下游各个区域内的所有结点；
计算步骤：根据遍历得到的结点信息计算负载均衡因子，并计算初始分组的数目；
分组步骤：根据初始分组的数目将各个结点进行初始分组；
分配步骤：将初始分组进行优先级的排序，并依次将未被分配的各区域结点的计算任务分配到各计算单元节点，重复执行上述分配任务直到所有区域结点被分配完毕。
优选的，所述水文拓扑文件包括邻接矩阵形式的图文件，所述读取步骤还包括：
记录所述图文件中的顶点信息、边信息以及权值信息。
优选的，在所述计算步骤中，所述负载均衡因子其中，m为计算单元个数，total为各个区域计算量总权值。
优选的，在所述计算步骤中，所述初始分组的数目其中，n为所述图文件中的顶点个数。
优选的，所述分组步骤还包括：
从深层次到浅层次遍历所述水文拓扑文件的拓扑结构，将各个结点进行初始分组；
当遍历数目达到m时，将该m个结点划分为一组，并给予组中每个结点相同的组号，所述组号的范围在[0，G]。
优选的，所述分配步骤具体包括：
将所述组号视作各组中结点的优先级，按照优先级由高到低的顺序，依次将未被分配的各区域结点的计算任务分配到各计算单元，同时把该区域结点设为已分配状态，重复执行上述分配任务直到所有区域结点被分配完毕。
本发明的上述技术方案的有益效果如下：
上述方案中，在进行任务划分时，同时考虑负载均衡、通信开销、上下游汇流关系，通过在区域划分策略中引入“流域分组”的概念，并按照水文拓扑结构各个结点的优先级进行区域划分，越靠近上游的区域结点，其优先级越高，在区域划分中也越先被分配给计算单元，充分发挥了流域拓扑结构上下游特点，进而极大的提高了整个模拟系统的性能。
附图说明
图1为本发明的实施例中一种应用于水文模拟领域的区域划分方法流程示意图；
图2为本发明的实施例中河网拓扑结构与任务划分示例图；
图3为本发明的实施例中计算单元示例图以及根据本发明对附图2所示拓扑结构进行划分的结果示意图。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。
本发明针对现有技术中如何提高水文模拟系统的性能的技术问题，提供一种应用于水文模拟领域的区域划分方法。本发明的方法在进行任务划分时，同时考虑负载均衡、通信开销、上下游汇流关系。本发明通过在区域划分策略中引入“流域分组”的概念，并按照水文拓扑结构各个结点的优先级(例如越靠近上游的区域结点，其优先级越高，在区域划分中也越先被分配给计算单元)进行区域划分，充分发挥了流域拓扑结构上下游特点。
如图1所示，在步骤S1中，读取步骤：读入水文拓扑文件，遍历所述水文拓扑文件中从上游至下游各个区域内的所有结点。
本实施中，所述水文拓扑文件包括邻接矩阵形式的图文件，所述读取步骤还包括：
记录所述图文件中的顶点信息、边信息以及权值信息。
其中，假设顶点数目为n，例如图2中n＝11。
在步骤S2中，计算步骤：根据遍历得到的结点信息计算负载均衡因子，并计算初始分组的数目。
本实施中，在所述计算步骤中，所述负载均衡因子其中，m为计算单元个数(如图2中m＝3)，total为各个区域计算量总权值，而且假设负载不平衡度为z，如图2中假设z＝0.3。
本实施中，在所述计算步骤中，所述初始分组的数目其中，n为所述图文件中的顶点个数，如图2中所示，其例中且4组的组号依次为0、1、2、3，每组结点数目依次为：3、3、3、2。
在步骤S3中，分组步骤：根据初始分组的数目将各个结点进行初始分组。
本实施中，所述分组步骤还包括：
从深层次到浅层次遍历所述水文拓扑文件的拓扑结构，将各个结点进行初始分组；
当遍历数目达到m时，将该m个结点划分为一组，并给予组中每个结点相同的组号(如图2中的group_id)，所述组号的范围在[0，G]。
本实施中，遍历过程遵循叶子节点优先准则和通信最小化准则。
在步骤S4中，分配步骤：将初始分组进行优先级的排序，并依次将未被分配的各区域结点的计算任务分配到各计算单元节点，重复执行上述分配任务直到所有区域结点被分配完毕。
本实施中，所述分配步骤具体包括：
将所述组号视作各组中结点的优先级(例如图2中的group_id越小优先级越高)，按照优先级由高到低的顺序，依次将未被分配的各区域结点的计算任务分配到各计算单元，同时把该区域结点设为已分配状态，重复执行上述分配任务直到所有区域结点被分配完毕。
其中，当把某个区域结点划分给计算节点m[i]时，计算已分配给该计算单元的区域结点的总权值total_m[i]，同时根据total_m[i]的数值判断负载均衡：如total_m[i]>＝(1+z)*x，则不再分配结点给该计算节点；否则继续分配。
本发明的上述技术方案的有益效果如下：
上述方案中，在进行任务划分时，同时考虑负载均衡、通信开销、上下游汇流关系，通过在区域划分策略中引入“流域分组”的概念，并按照水文拓扑结构各个结点的优先级进行区域划分，越靠近上游的区域结点，其优先级越高，在区域划分中也越先被分配给计算单元，充分发挥了流域拓扑结构上下游特点，进而极大的提高了整个模拟系统的性能。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (6)

1.一种应用于水文模拟领域的区域划分方法，其特征在于，所述方法包括：
读取步骤：读入水文拓扑文件，遍历所述水文拓扑文件中从上游至下游各个区域内的所有结点；
计算步骤：根据遍历得到的结点信息计算负载均衡因子，并计算初始分组的数目；
分组步骤：根据初始分组的数目将各个结点进行初始分组；
分配步骤：将初始分组进行优先级的排序，并依次将未被分配的各区域结点的计算任务分配到各计算单元节点，重复执行上述分配任务直到所有区域结点被分配完毕。
2.如权利要求1所述的应用于水文模拟领域的区域划分方法，其特征在于，所述水文拓扑文件包括邻接矩阵形式的图文件，所述读取步骤还包括：
记录所述图文件中的顶点信息、边信息以及权值信息。
3.如权利要求2所述的应用于水文模拟领域的区域划分方法，其特征在于，在所述计算步骤中，所述负载均衡因子其中，m为计算单元个数，total为各个区域计算量总权值。
4.如权利要求3所述的应用于水文模拟领域的区域划分方法，其特征在于，在所述计算步骤中，所述初始分组的数目其中，n为所述图文件中的顶点个数。
5.如权利要求3所述的应用于水文模拟领域的区域划分方法，其特征在于，所述分组步骤还包括：
从深层次到浅层次遍历所述水文拓扑文件的拓扑结构，将各个结点进行初始分组；
当遍历数目达到m时，将该m个结点划分为一组，并给予组中每个结点相同的组号，所述组号的范围在[0，G]。
6.如权利要求5所述的应用于水文模拟领域的区域划分方法，其特征在于，所述分配步骤具体包括：
将所述组号视作各组中结点的优先级，按照优先级由高到低的顺序，依次将未被分配的各区域结点的计算任务分配到各计算单元，同时把该区域结点设为已分配状态，重复执行上述分配任务直到所有区域结点被分配完毕。
CN201810479541.5A 2018-05-18 2018-05-18 一种应用于水文模拟领域的区域划分方法 Active CN108647900B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810479541.5A CN108647900B (zh) 2018-05-18 2018-05-18 一种应用于水文模拟领域的区域划分方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810479541.5A CN108647900B (zh) 2018-05-18 2018-05-18 一种应用于水文模拟领域的区域划分方法

Publications (2)

Publication Number Publication Date
CN108647900A true CN108647900A (zh) 2018-10-12
CN108647900B CN108647900B (zh) 2022-03-11

Family

ID=63756816

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810479541.5A Active CN108647900B (zh) 2018-05-18 2018-05-18 一种应用于水文模拟领域的区域划分方法

Country Status (1)

Country Link
CN (1) CN108647900B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109753362A (zh) * 2019-01-14 2019-05-14 中国水利水电科学研究院 一种分布式水文模型的汇流并行调度方法
CN112612784A (zh) * 2020-11-09 2021-04-06 中国再保险(集团)股份有限公司 河水流域计算单元自动划分方法、装置和计算机设备
CN117312608A (zh) * 2023-08-14 2023-12-29 河海大学 一种基于深度优先搜索的河网节点简并方法

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722909A (zh) * 2012-05-28 2012-10-10 武汉大学 一种基于自适应尺度dem的流水线拓扑网络动态模拟方法
CN103092572A (zh) * 2013-01-11 2013-05-08 中国科学院地理科学与资源研究所 一种集群环境下分布式水文模拟的并行化方法
CN103235742A (zh) * 2013-04-07 2013-08-07 山东大学 多核集群服务器上基于依赖度的并行任务分组调度方法
CN103577267A (zh) * 2012-08-03 2014-02-12 上海博泰悦臻电子设备制造有限公司 车载设备的资源分配方法及装置
CN104508654A (zh) * 2012-07-31 2015-04-08 华为技术有限公司 分组传输优先级信道分配
CN105138722A (zh) * 2015-07-14 2015-12-09 南京师范大学 基于数字河湖网络的平原河网区流域集水单元划分方法
CN105488104A (zh) * 2015-11-19 2016-04-13 清华大学 基于云计算的水文模拟系统
CN105528243A (zh) * 2015-07-02 2016-04-27 中国科学院计算技术研究所 一种利用数据拓扑信息的优先级分组调度方法及系统
CN105824936A (zh) * 2016-03-18 2016-08-03 河北大学 一种基于概念格的信息提取方法
CN106708944A (zh) * 2016-11-23 2017-05-24 南京师范大学 面向swmm建模与顾及多要素的城市区域子流域自动划分方法
US20170169605A1 (en) * 2015-12-10 2017-06-15 Ocean Networks Canada Society Automated generation of digital elevation models
CN107944111A (zh) * 2017-11-16 2018-04-20 河海大学 基于改进图论和水文模拟的河网水系连通度计算方法
US20180121484A1 (en) * 2016-10-27 2018-05-03 Sap Se Audit Schedule Determination

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722909A (zh) * 2012-05-28 2012-10-10 武汉大学 一种基于自适应尺度dem的流水线拓扑网络动态模拟方法
CN104508654A (zh) * 2012-07-31 2015-04-08 华为技术有限公司 分组传输优先级信道分配
CN103577267A (zh) * 2012-08-03 2014-02-12 上海博泰悦臻电子设备制造有限公司 车载设备的资源分配方法及装置
CN103092572A (zh) * 2013-01-11 2013-05-08 中国科学院地理科学与资源研究所 一种集群环境下分布式水文模拟的并行化方法
CN103235742A (zh) * 2013-04-07 2013-08-07 山东大学 多核集群服务器上基于依赖度的并行任务分组调度方法
CN105528243A (zh) * 2015-07-02 2016-04-27 中国科学院计算技术研究所 一种利用数据拓扑信息的优先级分组调度方法及系统
CN105138722A (zh) * 2015-07-14 2015-12-09 南京师范大学 基于数字河湖网络的平原河网区流域集水单元划分方法
CN105488104A (zh) * 2015-11-19 2016-04-13 清华大学 基于云计算的水文模拟系统
US20170169605A1 (en) * 2015-12-10 2017-06-15 Ocean Networks Canada Society Automated generation of digital elevation models
CN105824936A (zh) * 2016-03-18 2016-08-03 河北大学 一种基于概念格的信息提取方法
US20180121484A1 (en) * 2016-10-27 2018-05-03 Sap Se Audit Schedule Determination
CN106708944A (zh) * 2016-11-23 2017-05-24 南京师范大学 面向swmm建模与顾及多要素的城市区域子流域自动划分方法
CN107944111A (zh) * 2017-11-16 2018-04-20 河海大学 基于改进图论和水文模拟的河网水系连通度计算方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109753362A (zh) * 2019-01-14 2019-05-14 中国水利水电科学研究院 一种分布式水文模型的汇流并行调度方法
CN109753362B (zh) * 2019-01-14 2020-03-24 中国水利水电科学研究院 一种分布式水文模型的汇流并行调度方法
CN112612784A (zh) * 2020-11-09 2021-04-06 中国再保险(集团)股份有限公司 河水流域计算单元自动划分方法、装置和计算机设备
CN117312608A (zh) * 2023-08-14 2023-12-29 河海大学 一种基于深度优先搜索的河网节点简并方法

Also Published As

Publication number Publication date
CN108647900B (zh) 2022-03-11

Similar Documents

Publication Publication Date Title
CN109981438B (zh) 一种面向sdn和nfv协同部署框架的卫星网络负载均衡方法
CN104639639B (zh) 一种虚拟机部署位置的调整方法、装置及系统
CN104683488B (zh) 流式计算系统及其调度方法和装置
Ou et al. Power-law strength-degree correlation from resource-allocation dynamics on weighted networks
Ordónez et al. Robust capacity expansion of network flows
CN108647900A (zh) 一种应用于水文模拟领域的区域划分方法
CN106453085A (zh) 基于业务重要度的风险均衡路由分配的方法及系统
CN105681153A (zh) 一种虚拟网络映射方法及装置
CN101494590A (zh) 一种通信网络中基于负载平衡的最优路径选择方法
Chu et al. Improving multi-objective reservoir operation optimization with sensitivity-informed dimension reduction
CN104935628A (zh) 一种在多个数据中心之间迁移多个关联虚拟机的方法
CN106027288A (zh) 一种配电线路信息监测业务通信流量预测方法
CN108270805A (zh) 用于数据处理的资源分配方法及装置
Triki et al. A green energy-aware hybrid virtual network embedding approach
CN108830436B (zh) 基于分形树自平衡划分的共享自行车调度方法
Zhou et al. Resource-aware virtual network parallel embedding based on genetic algorithm
CN105138391B (zh) 面向广域分布云系统公平的多任务虚拟机分配方法
Kaveh et al. Chaotic vibrating particles system for resource-constrained project scheduling problem
CN109388891B (zh) 一种超大尺度虚拟河网提取及汇流方法
Wang et al. Analysis of price of anarchy in traffic networks with heterogeneous price-sensitivity populations
CN114330184B (zh) 一种多层次分组方法及装置
Yuan et al. Consensus of multi-agent systems with piecewise continuous time-varying topology
CN110504689B (zh) 一种基于云计算技术的电力系统潮流计算方法
Tang et al. Traffic allocation for manufacturing systems
Karakostas et al. Selfish routing with oblivious users

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant