CN105376112A - 中间处理约束下的异构网络资源配置方法 - Google Patents
中间处理约束下的异构网络资源配置方法 Download PDFInfo
- Publication number
- CN105376112A CN105376112A CN201510822590.0A CN201510822590A CN105376112A CN 105376112 A CN105376112 A CN 105376112A CN 201510822590 A CN201510822590 A CN 201510822590A CN 105376112 A CN105376112 A CN 105376112A
- Authority
- CN
- China
- Prior art keywords
- intermediate node
- data flow
- list
- node
- heterogeneous network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/70—Admission control; Resource allocation
- H04L47/80—Actions related to the user profile or the type of traffic
- H04L47/801—Real time traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L45/00—Routing or path finding of packets in data switching networks
- H04L45/02—Topology update or discovery
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/12—Discovery or management of network topologies
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L45/00—Routing or path finding of packets in data switching networks
- H04L45/12—Shortest path evaluation
- H04L45/126—Shortest path evaluation minimising geographical or physical path length
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L45/00—Routing or path finding of packets in data switching networks
- H04L45/16—Multipoint routing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/12—Avoiding congestion; Recovering from congestion
- H04L47/125—Avoiding congestion; Recovering from congestion by balancing the load, e.g. traffic engineering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/50—Queue scheduling
- H04L47/56—Queue scheduling implementing delay-aware scheduling
- H04L47/564—Attaching a deadline to packets, e.g. earliest due date first
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/70—Admission control; Resource allocation
- H04L47/83—Admission control; Resource allocation based on usage prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5003—Managing SLA; Interaction between SLA and QoS
- H04L41/5019—Ensuring fulfilment of SLA
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/70—Admission control; Resource allocation
- H04L47/78—Architectures of resource allocation
- H04L47/783—Distributed allocation of resources, e.g. bandwidth brokers
- H04L47/785—Distributed allocation of resources, e.g. bandwidth brokers among multiple network domains, e.g. multilateral agreements
- H04L47/786—Mapping reservation between domains
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提出一种中间处理约束下的异构网络资源配置方法,包括:分别获取每个数据流的截止时间和资源需求量,并根据每个数据流的截止时间和资源需求量为每个数据流设置对应的评价分数,根据评价分数对数据流进行排序,以为每个中间节点生成对应的偏好列表;获取异构网络的网络拓扑信息,计算数据流经过中间节点的传输路径长度;将每个中间节点的服务名额初始化为1,并在数据流与中间节点之间进行双向匹配,以得到每个中间节点的准服务名单;根据准服务名单得到中间节点和数据流的映射关系,并结合中间节点对应的偏好列表对数据流进行顺序调度。本发明实现了数据密集型应用在中间处理约束下的低延迟及高性能,达到资源最优配置和最佳网络性能。
Description
技术领域
本发明涉及网络资源管理技术领域,特别涉及一种中间处理约束下的异构网络资源配置方法。
背景技术
异构网络中的实时大数据应用通常基于大量感知数据的分析和处理,根据系统反馈做出相应决策。传统的不加选择地将初始感知数据上传到服务器的方式,不仅导致低效,而且极大地浪费网络资源,甚至造成网络拥塞和业务失效等后果。因此,一种可行的方式,则是充分利用网络节点的处理能力,将初始数据在节点上进行处理后,再将结果传送到服务器。然而,异构网络中的节点之间的能力差异、分级处理模式、以及负载均衡等因素,催生出一种新的需求,即越来越多的特殊工作流要求在其源到目的之间的路径上的某个中间节点上进行处理(例如尺寸裁剪、格式转换、去噪处理等),即中间处理约束。中间处理节点(简称中间节点)通常是专用的、高性能的、具有充足资源(例如CPU、GPU、内存等)的机器。
另一方面,一个软实时的应用包括多个数据流。由于流之间具有相互依赖性——某些流必须在其它流完成之后才能进行处理,因此,流期望的完成时间也各有差异,即每个流的截止时间不同。同时,对于软实时应用,其包含的流即使在截止时间之后才完成,这个流依然是有效的。在这个背景下,优化软实时应用的延迟则意味着最小化所有流的总延迟。
而传统的解决方案要么只关注路由优化,寻找最短的传输路径,以减少数据的传输延迟;要么只关注流的调度次序,以减少流在处理节点上的排队时间。由于流的完成时间由路由延迟、排队时间和处理时间三部分组成,任何单一角度的优化,都无法实现系统资源的全局最优配置。因此,全局优化要求同时考虑路由与调度两个角度。路由角度的问题是如何将中间节点分配给流,而调度角度的问题则是哪些流应该被优先地处理。
发明内容
本发明旨在至少在一定程度上解决上述相关技术中的技术问题之一。
为此,本发明的目的在于提出一种中间处理约束下的异构网络资源配置方法,该方法从调度和路由两个角度进行联合优化,以最小化数据密集型应用的延迟,实现了数据密集型应用在中间处理约束下的低延迟及高性能,达到资源最优配置和最佳网络性能。
为了实现上述目的,本发明的实施例提出了一种中间处理约束下的异构网络资源配置方法,包括以下步骤:S1:分别获取每个数据流的截止时间和资源需求量,并分别根据每个数据流的截止时间和资源需求量为每个数据流设置对应的评价分数,并根据所述评价分数对所述数据流进行排序,以为每个中间节点生成对应的偏好列表;S2:获取所述异构网络的网络拓扑信息,并根据所述网络拓扑信息计算所述数据流经过所述中间节点的传输路径长度;S3:将每个所述中间节点的服务名额初始化为1,并在所述数据流与中间节点之间进行双向匹配,以得到每个所述中间节点的准服务名单;S4:根据每个所述中间节点的准服务名单得到所述中间节点和数据流的映射关系,根据所述映射关系和所述中间节点对应的偏好列表对所述数据流进行顺序调度。
另外,根据本发明上述实施例的中间处理约束下的异构网络资源配置方法还可以具有如下附加的技术特征:
在一些示例中,所述S2进一步包括:根据所述网络拓扑信息计算所有数据流的源节点到中间节点之间的最短路径长度,以及所述中间节点到所有流的目的节点之间的最短路径长度;根据所述所有数据流的源节点到中间节点之间的最短路径长度和所述中间节点到所有流的目的节点之间的最短路径长度得到所述数据流经过所述中间节点的传输路径长度。
在一些示例中,其中,所述中间节点的传输路径长度为所述所有数据流的源节点到中间节点之间的最短路径长度和所述中间节点到所有流的目的节点之间的最短路径长度之和。
在一些示例中,所述步骤S3进一步包括:S31:对所述中间节点进行排序,以为每个数据流生成对应的偏好列表;S32:每个数据流向其对应的偏好列表上的第一个中间节点提出申请;S33:每个所述中间节点判断向其提出申请的数据流的数量是否超过该中间节点的可服务名额,如果是,则根据该中间节点对应的偏好列表剔除可服务名额之外的数据流,并将可服务名额之内的数据流加入其准服务名单中,并将所述中间节点的可服务名额加1。
在一些示例中,在所述步骤S33之后,还包括:S34:如果所有数据流均集中在一个中间节点的准服务名单内,则执行所述步骤S4,否则,执行所述步骤S31。
在一些示例中,在所述步骤S33中,还包括:如果每个所述中间节点判断向其提出申请的数据流的数量未超过该中间节点的可服务名额,则直接将所述数据流加入所述中间节点的准服务名单。
在一些示例中,所述步骤S31,进一步包括:S311:根据每个所述中间节点对应的偏好列表和每个中间节点当前的准处理名单计算每个数据流在每个中间节点上期望的完工时间;S312:根据所述期望的完工时间和所述数据流经过所述中间节点的传输路径长度为每个所述中间节点设置一个评价分数,并根据所述评价分数对所述中间节点进行排序,以为每个所述数据流生成对应的偏好列表。
在一些示例中,所述步骤S311进一步包括:S3111:判断所述中间节点的准处理名单上是否存在数据流;S3112:如果所述中间节点的准处理名单上不存在所述数据流,则将所述数据流添加至所述中间节点的准处理名单;S3113:根据所述中间节点对应的偏好列表得到所述数据流在所述中间节点上的调度次序,并计算所述数据流的处理时间和期望的排队时间,并根据所述数据流的处理时间和期望的排队时间得到所述数据流期望的完工时间。
在一些示例中,其中,所述数据流期望的完工时间为所述数据流的处理时间和期望的排队时间之和。
根据本发明实施例的中间处理约束下的异构网络资源配置方法,基于经典的匹配理论,采用逐步提升名额的循环迭代机制,根据流和中间节点之间的相互偏好性,提出了流和中间节点之间的双向匹配框架,以达到路由与调度的融合,即从调度和路由两个角度进行联合优化,以最小化数据密集型应用的延迟,实现了数据密集型应用在中间处理约束下的低延迟及高性能,从而达到资源最优配置和最佳网络性能。另外,本发明可以适用于比较广泛的场景,如智慧城市、智能工厂和云数据中心等,因此适用范围广。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解,其中:
图1是本发明一个实施例的中间处理约束下的异构网络资源配置方法的流程图;
图2是本发明一个实施例的数据流完成时间组成部分示意图;
图3是本发明一个具体实施例的数据流期望完工时间计算过程示意图;
图4是本发明一个具体实施例的中间处理约束下的网络数据处理过程示意图;
图5是本发明一个实施例的所有数据流的总时延累积概率分布示意图;
图6是本发明一个实施例的相对问题下界的最优性差距累积概率分布示意图;
图7是本发明一个实施例的数据流的最大完成时间累积概率分布示意图;以及
图8是本发明一个实施例的数据流的平均路由延迟累积概率分布示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
以下结合附图描述根据本发明实施例的中间处理约束下的异构网络资源配置方法。
首先,本发明的主要实现思想为:在中间处理约束下,通过在流与中间节点之间进行双向匹配,达到路由与调度两个角度的联合优化。针对网络中的多个数据流竞争多个中间节点的情况,数据流根据其偏好选择各自优选的中间节点,同时,中间节点服务能力是有限的,每个中间节点都有一个服务名额,因而需要根据其偏好,选择各自可服务名额内的数据流,经过循环迭代,得到流与中间节点的映射关系。然后,中间节点根据其偏好对需要在该节点上处理的流进行顺序调度。其中,中间节点的选择决定了路由延迟和处理时间,而流的调度次序决定了排队时间。
具体地,图1是根据本发明一个实施例的中间处理约束下的异构网络资源配置方法的流程图。如图1所示,该方法包括以下步骤:
步骤S1:分别获取每个数据流的截止时间和资源需求量,并分别根据每个数据流的截止时间和资源需求量为每个数据流设置对应的评价分数,并根据评价分数对数据流进行排序,以为每个中间节点生成对应的偏好列表。其中,该评价分数是一个标准化的加权和。
步骤S2:获取异构网络的网络拓扑信息,并根据网络拓扑信息计算数据流经过中间节点的传输路径长度。
在本发明的一个实施例中,例如,步骤S2进一步包括:
步骤S21:针对所有的数据流和中间结点,根据网络拓扑信息计算所有数据流的源节点到中间节点之间的最短路径长度,以及中间节点到所有流的目的节点之间的最短路径长度。
步骤S22:根据所有数据流的源节点到中间节点之间的最短路径长度和中间节点到所有流的目的节点之间的最短路径长度得到数据流经过中间节点的传输路径长度。更为具体地,中间节点的传输路径长度为所有数据流的源节点到中间节点之间的最短路径长度和中间节点到所有流的目的节点之间的最短路径长度之和。
步骤S3:将每个中间节点的服务名额初始化为1,并在数据流与中间节点之间进行双向匹配,以得到每个中间节点的准服务名单。
在本发明的一个实施例中,步骤S3进一步包括:
步骤S31:对中间节点进行排序,以为每个数据流生成对应的偏好列表。该步骤例如进一步包括:
S311:根据步骤S1中得到的每个中间节点对应的偏好列表和每个中间节点当前的准处理名单计算每个数据流在每个中间节点上期望的完工时间,其中,每个中间节点当前的准处理名单初始为0。该步骤例如进一步包括:
S3111:针对每个中间节点,判断该中间节点的准处理名单上是否存在数据流。
S3112:如果中间节点的准处理名单上不存在数据流,则将数据流临时添加至中间节点的准处理名单。
S3113:根据步骤S1中得到的中间节点对应的偏好列表得到该数据流在中间节点上的调度次序,并计算该数据流的处理时间和期望的排队时间,并根据数据流的处理时间和期望的排队时间得到数据流期望的完工时间。更为具体地,数据流期望的完工时间为数据流的处理时间和期望的排队时间之和。
S312:根据数据流在中间节点上期望的完工时间和数据流经过中间节点的传输路径长度为每个中间节点设置一个评价分数,并根据该评价分数对中间节点进行排序,以为每个数据流生成对应的偏好列表。其中,该评价分数是一个标准化的加权和。
步骤S32:依据步骤S312中得到的每个数据流对应的偏好列表,每个数据流向其对应的偏好列表上的第一个中间节点提出申请。
步骤S33:每个中间节点判断向其提出申请的数据流的数量是否超过该中间节点的可服务名额,如果是,则根据该中间节点对应的偏好列表剔除可服务名额之外的数据流,并将可服务名额之内的数据流加入其准服务名单中,并将中间节点的可服务名额加1。进一步地,如果每个中间节点判断向其提出申请的数据流的数量未超过该中间节点的可服务名额,则直接将数据流加入中间节点的准服务名单。
进一步地,在步骤S33之后,例如还包括:
步骤S34:如果所有数据流均集中在一个中间节点的准服务名单内,则执行后续的步骤S4,否则,返回执行步骤S31。
步骤S4:根据每个中间节点的准服务名单得到中间节点和数据流的映射关系,在每个中间节点上中,根据映射关系和步骤S1中得到的中间节点对应的偏好列表对数据流进行顺序调度。
因此,本发明实施例的方法基于经典的匹配理论,采用逐步提升名额的循环迭代机制,根据流和中间节点之间的相互偏好性,提出了流和中心节点之间的双向匹配框架,以达到路由与调度的融合,实现了数据密集型应用在中间处理约束下的低延迟、高性能的目标。
为了便于理解,以下结合附图2-8,以具体地示例对本发明上述实施例所述的方法进行进一步详细地描述。
参见图2所示,数据流的完成时间是完工时间和路由延迟的总和,其中,完工时间又包括数据流在节点上的排队时间和处理时间两部分,而路由延迟则等于经过中间节点,从源节点到目的节点之间的路径上的传输延迟。假设中间节点是异构的,其数据速度具有差异性,则易知处理时间和路由延迟依赖于中间节点的选取,而排队时间依赖于数据流在中间节点上的调度策略。然而,同时减小排队时间、处理时间和路由延迟并非易事。例如,对于数据流来说,在高性能的节点上处理可以实现较短的处理时间,但是它的传输路径可能会很长;另外,在实现最短路由时,往往会选择数据流最短路径上的节点,而若这个节点需要服务的数据流超过其负载限额,该节点上的排队时间可能会非常长。
例如,用M表示所有数据流的集合,K表示所有中间节点的集合。Cm表示数据流m(m∈M)的完成时间,dm表示数据流的截止时间,则数据流m的时延(Tardiness)可以表示为Tm=max{0,Cm-dm}。本发明的实施例是在中间处理约束下,最小化所有数据流的总时延,即因此,本发明实施例的方法从数据流调度和路由两个角度进行联合优化,具体来说,解决了如何将中间节点分配给数据流,且哪些数据流应该被优先地处理,以最小化所有数据流的总时延。
对于中间节点的分配,本发明的实施例采用在数据流和中间节点之间进行双向匹配的方法,通过循环迭代,实现中间节点的接近最优的分配方案。例如,定义Am为数据流m选择中间节点时的偏好列表(Am中的元素属于集合K),定义Bk为中间节点k(k∈K)选择数据流时的偏好列表(Bk中的元素属于集合M)。例如:
在数据流选择中间节点时,定义一个标准化的变量θl作为衡量数据流经过中间节点的数据传输路径长度lmk(m∈M,k∈K)的评价分数,θl与lmk成反比。类似地,标准化的变量θe作为衡量数据流的期望完工时间hmk的评价分数,θe与hmk成反比,则偏好列表Am由按θl+θe对中间节点进行降序排序得到。由于数据流期望的完工时间取决于队列中的数据流相互作用,因而偏好列表Am在匹配的每一次迭代里都是动态变化的。
在中间节点选择数据流时,定义一个标准化的变量θd作为衡量数据流截止时间dm的评价分数,θd与dm成反比。类似地,标准化的变量θd作为衡量数据流的资源需求量qm的评价分数,θq与qm成反比,则偏好列表Bk由按θd+θq对数据流进行降序排序得到。
由于数据流的完工时间取决于数据流在中间节点上的排队时间和处理时间,为了计算数据流在各个中间节点上期望的完工时间,需要在节点上进行一次模拟调度过程。作为具体的示例,参见图3所示,f1,f2和f3三个数据流已经在某个中间节点的准处理名单里,计算数据流f4在该中间节点上的期望的完工时间,则只需临时地将f4加入到该中间节点的准处理名单中,然后,根据f1→f4在偏好列表Bk上的排序进行调度。在该示例中,假设Bk中的排列顺序为f1>f2>f3>f4,资源需求量q1=10,q2=5,q3=8,q4=6,假设数据流在节点上的处理时间pm与资源需求量qm成正比,不失一般性,设pm=qm(m=1,2,3,4)。节点上的总资源量为Q=18。在该节点上调度四个数据流,则可以得到数据流f4在该中间节点上的期望的排队时间为10,期望的完工时间为16。
进一步地,为实现中心节点的高效资源分配方案,下面在数据流与中心节点之间进行双向匹配。该双向匹配是一个循环迭代的过程,具体来说,就是不断循环迭代以下步骤1至步骤2:
步骤1:生成偏好列表Am,每个数据流向其偏好列表上的第一个中间节点提出申请,对于每一个中间节点,如果向其申请的数据流的数目x超过其服务名额即则根据偏好列表Bk,每个中间节点剔除可服务名额之外的数据流将可服务名额之内的数据流(前x个)放入其准服务名单,然后,将该中间节点的可服务名额增加1;否则,直接将x个数据流放入其准服务名单。
步骤2:如果所有数据流都在某个中间节点的准服务名单里,则迭代中止,此时每个中间节点的准服务名单,即为中间节点和数据流的映射关系;否则,继续进行循环迭代。
另一方面,针对哪些数据流应该被优先地处理的问题,例如,本发明的实施方案如下:如果一个中间节点要服务的数据流超过1,则根据准处理名单上的数据流在偏好列表Bk中的排序,进行顺序调度。其中,数据流在节点上的处理必须满足资源约束,即同一时间处理的数据流的资源需求总量不能超过该节点上可用的资源量。
以下通过具体的示例对本发明的实施例进行性能评估。例如,参见图4所示,考虑一个智慧城市中的智能交通系统,其中拥有500个传感器节点,10个中间处理节点,即|M|=500,|K|=10。其它的参数在合理的范围内随机生成,一共生成100个随机网络拓扑。
参见图5所示,相比单一的调度策略和路由策略,本发明的实施例能够实现最短的时延。在本示例中,能够实现60%的实例中总时延为0,这表示60%的应用能够及时地完成。
为定量地评估本发明实施例的最优性,对于每一个实例I,定义最优性差距为:
其中,Z(I)表示实例I的目标函数值,ZLB(I)表示该优化问题的下界。参见图6所示,超过90%的情况下,本发明实施例的最优性差距都小于0.4,然而,单一的调度策略和路由策略仅能够实现5%的情况下,最优性差距小于0.4。这说明本发明实施例的结果与问题下界非常接近,能够实现接近最优的性能。
图7给出了最大完成时间的累积概率分布示意图。从图7中可以看出,本发明的实施例可以实现最小的最大完成时间。图8给出了平均路由延迟的累积概率分布示意图。从图8中可以看出,由于将具有最短传输路径的中间节点分配给流,单一的路由策略实现了最短路由延迟,然而单一的调度策略由于不考虑传输路径的长短,从而导致路由延迟不可控。
也就是说,本发明的实施例针对中间处理约束下的异构网络资源分配问题,提出了最小化所有流的总时延的优化目标。通过对影响优化目标的因素进行权衡,分别提出了针对流和中间节点的偏好列表生成方法。通过逐步提升名额的方法,提出了流和中间节点之间的双向匹配框架。通过该框架的循环迭代,实现中间节点的优化分配。最后,根据节点分配方案,在节点上对流进行顺序调度。因此,本发明能够实现低时延的优化目标,能够得到接近最优的异构网络资源分配结果。
综上,根据本发明实施例的中间处理约束下的异构网络资源配置方法,基于经典的匹配理论,采用逐步提升名额的循环迭代机制,根据流和中间节点之间的相互偏好性,提出了流和中间节点之间的双向匹配框架,以达到路由与调度的融合,即从调度和路由两个角度进行联合优化,以最小化数据密集型应用的延迟,实现了数据密集型应用在中间处理约束下的低延迟及高性能,从而达到资源最优配置和最佳网络性能。另外,本发明可以适用于比较广泛的场景,如智慧城市、智能工厂和云数据中心等,因此适用范围广。
在本发明的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”、“轴向”、“径向”、“周向”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系,除非另有明确的限定。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
在本发明中,除非另有明确的规定和限定,第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触,或第一和第二特征通过中间媒介间接接触。而且,第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方,或仅仅表示第一特征水平高度小于第二特征。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (9)
1.一种中间处理约束下的异构网络资源配置方法,其特征在于,包括以下步骤:
S1:分别获取每个数据流的截止时间和资源需求量,并分别根据每个数据流的截止时间和资源需求量为每个数据流设置对应的评价分数,并根据所述评价分数对所述数据流进行排序,以为每个中间节点生成对应的偏好列表;
S2:获取所述异构网络的网络拓扑信息,并根据所述网络拓扑信息计算所述数据流经过所述中间节点的传输路径长度;
S3:将每个所述中间节点的服务名额初始化为1,并在所述数据流与中间节点之间进行双向匹配,以得到每个所述中间节点的准服务名单;
S4:根据每个所述中间节点的准服务名单得到所述中间节点和数据流的映射关系,根据所述映射关系和所述中间节点对应的偏好列表对所述数据流进行顺序调度。
2.根据权利要求1所述的中间处理约束下的异构网络资源配置方法,其特征在于,所述S2进一步包括:
根据所述网络拓扑信息计算所有数据流的源节点到中间节点之间的最短路径长度,以及所述中间节点到所有流的目的节点之间的最短路径长度;
根据所述所有数据流的源节点到中间节点之间的最短路径长度和所述中间节点到所有流的目的节点之间的最短路径长度得到所述数据流经过所述中间节点的传输路径长度。
3.根据权利要求2所述的中间处理约束下的异构网络资源配置方法,其特征在于,其中,所述中间节点的传输路径长度为所述所有数据流的源节点到中间节点之间的最短路径长度和所述中间节点到所有流的目的节点之间的最短路径长度之和。
4.根据权利要求1所述的中间处理约束下的异构网络资源配置方法,其特征在于,所述步骤S3进一步包括:
S31:对所述中间节点进行排序,以为每个数据流生成对应的偏好列表;
S32:每个数据流向其对应的偏好列表上的第一个中间节点提出申请;
S33:每个所述中间节点判断向其提出申请的数据流的数量是否超过该中间节点的可服务名额,如果是,则根据该中间节点对应的偏好列表剔除可服务名额之外的数据流,并将可服务名额之内的数据流加入其准服务名单中,并将所述中间节点的可服务名额加1。
5.根据权利要求4所述的中间处理约束下的异构网络资源配置方法,其特征在于,在所述步骤S33之后,还包括:
S34:如果所有数据流均集中在一个中间节点的准服务名单内,则执行所述步骤S4,否则,执行所述步骤S31。
6.根据权利要求4所述的中间处理约束下的异构网络资源配置方法,其特征在于,在所述步骤S33中,还包括:
如果每个所述中间节点判断向其提出申请的数据流的数量未超过该中间节点的可服务名额,则直接将所述数据流加入所述中间节点的准服务名单。
7.根据权利要求4所述的中间处理约束下的异构网络资源配置方法,其特征在于,所述步骤S31,进一步包括:
S311:根据每个所述中间节点对应的偏好列表和每个中间节点当前的准处理名单计算每个数据流在每个中间节点上期望的完工时间;
S312:根据所述期望的完工时间和所述数据流经过所述中间节点的传输路径长度为每个所述中间节点设置一个评价分数,并根据所述评价分数对所述中间节点进行排序,以为每个所述数据流生成对应的偏好列表。
8.根据权利要求7所述的中间处理约束下的异构网络资源配置方法,其特征在于,所述步骤S311进一步包括:
S3111:判断所述中间节点的准处理名单上是否存在数据流;
S3112:如果所述中间节点的准处理名单上不存在所述数据流,则将所述数据流添加至所述中间节点的准处理名单;
S3113:根据所述中间节点对应的偏好列表得到所述数据流在所述中间节点上的调度次序,并计算所述数据流的处理时间和期望的排队时间,并根据所述数据流的处理时间和期望的排队时间得到所述数据流期望的完工时间。
9.根据权利要求8所述的中间处理约束下的异构网络资源配置方法,其特征在于,其中,所述数据流期望的完工时间为所述数据流的处理时间和期望的排队时间之和。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510822590.0A CN105376112B (zh) | 2015-11-24 | 2015-11-24 | 中间处理约束下的异构网络资源配置方法 |
PCT/CN2016/104947 WO2017088638A1 (zh) | 2015-11-24 | 2016-11-07 | 中间处理约束下的异构网络资源配置方法 |
US15/771,946 US10412023B2 (en) | 2015-11-24 | 2016-11-07 | Resource allocation method under heterogeneous network under intermediate processing constraints |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510822590.0A CN105376112B (zh) | 2015-11-24 | 2015-11-24 | 中间处理约束下的异构网络资源配置方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105376112A true CN105376112A (zh) | 2016-03-02 |
CN105376112B CN105376112B (zh) | 2018-06-19 |
Family
ID=55377939
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510822590.0A Active CN105376112B (zh) | 2015-11-24 | 2015-11-24 | 中间处理约束下的异构网络资源配置方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10412023B2 (zh) |
CN (1) | CN105376112B (zh) |
WO (1) | WO2017088638A1 (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105872043A (zh) * | 2016-03-29 | 2016-08-17 | 清华大学 | 交互应用在云部署中的延迟差异平衡方法 |
CN106487910A (zh) * | 2016-10-26 | 2017-03-08 | 苏州大学 | 一种内容分发网络创建方法 |
WO2017088638A1 (zh) * | 2015-11-24 | 2017-06-01 | 清华大学 | 中间处理约束下的异构网络资源配置方法 |
EP3531621A4 (en) * | 2016-12-15 | 2019-08-28 | Huawei Technologies Co., Ltd. | METHOD AND DEVICE FOR DELAYING MEASUREMENT OF NETWORK NODE DEVICE AND NETWORK NODE DEVICE |
CN115022233A (zh) * | 2022-06-16 | 2022-09-06 | 电子科技大学 | 一种可定制点到多点数据传输完成时间的传输方法 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108574594B (zh) * | 2017-03-14 | 2020-04-03 | 华为技术有限公司 | 一种网络业务传输的方法及系统 |
US10374695B2 (en) * | 2017-05-26 | 2019-08-06 | Loon Llc | Temporospatial software-defined networking for NGSO satellite networks |
US10581523B2 (en) | 2017-04-26 | 2020-03-03 | Loon Llc | Temporospatial software-defined networking for NGSO satellite networks |
US11273836B2 (en) | 2017-12-18 | 2022-03-15 | Plusai, Inc. | Method and system for human-like driving lane planning in autonomous driving vehicles |
US11130497B2 (en) | 2017-12-18 | 2021-09-28 | Plusai Limited | Method and system for ensemble vehicle control prediction in autonomous driving vehicles |
US20190185012A1 (en) | 2017-12-18 | 2019-06-20 | PlusAI Corp | Method and system for personalized motion planning in autonomous driving vehicles |
US11329885B2 (en) * | 2018-06-21 | 2022-05-10 | International Business Machines Corporation | Cluster creation using self-aware, self-joining cluster nodes |
CN115086202B (zh) * | 2022-04-14 | 2023-06-20 | 安世亚太科技股份有限公司 | 一种基于网络数字孪生体的时延分析方法及系统 |
CN118488587A (zh) * | 2024-07-12 | 2024-08-13 | 北京中网华通设计咨询有限公司 | 基于人工智能的无线通信网络调度方法及系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103297341A (zh) * | 2013-07-04 | 2013-09-11 | 清华大学 | 在域内路由器节点上配置流量的方法 |
CN104702694A (zh) * | 2015-03-19 | 2015-06-10 | 清华大学 | 基于混合传输模式的数据中心的动态数据流调度方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8619756B2 (en) * | 2009-07-15 | 2013-12-31 | Qualcomm Incorporated | Systems and methods for providing resource allocation meeting communication constraints for multi-hop network data flows |
CN103476062B (zh) * | 2012-06-06 | 2015-05-27 | 华为技术有限公司 | 一种数据流调度的方法、设备和系统 |
CN103036792B (zh) * | 2013-01-07 | 2015-05-20 | 北京邮电大学 | 一种最大化最小公平多数据流传输调度方法 |
US10187840B2 (en) * | 2013-02-07 | 2019-01-22 | Idac Holdings, Inc. | Method and apparatus for selecting a routing path in a mesh network |
CN104010004B (zh) * | 2014-06-18 | 2017-05-24 | 中国人民解放军信息工程大学 | 一种数据传输网络的建立方法及系统 |
CN105376112B (zh) * | 2015-11-24 | 2018-06-19 | 清华大学 | 中间处理约束下的异构网络资源配置方法 |
-
2015
- 2015-11-24 CN CN201510822590.0A patent/CN105376112B/zh active Active
-
2016
- 2016-11-07 US US15/771,946 patent/US10412023B2/en active Active
- 2016-11-07 WO PCT/CN2016/104947 patent/WO2017088638A1/zh active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103297341A (zh) * | 2013-07-04 | 2013-09-11 | 清华大学 | 在域内路由器节点上配置流量的方法 |
CN104702694A (zh) * | 2015-03-19 | 2015-06-10 | 清华大学 | 基于混合传输模式的数据中心的动态数据流调度方法 |
Non-Patent Citations (2)
Title |
---|
M. SHEN,ECT AL.,: ""Routing on demand: toward the energy-aware traffic engineering with OSPF"", 《PROCEEDINGS OF IFIP/TC6 NETWORKING》 * |
沈蒙,: ""网络虚拟化中的高效映射与流量管理研究"", 《中国博士学位论文全文数据库-信息科技辑》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017088638A1 (zh) * | 2015-11-24 | 2017-06-01 | 清华大学 | 中间处理约束下的异构网络资源配置方法 |
CN105872043A (zh) * | 2016-03-29 | 2016-08-17 | 清华大学 | 交互应用在云部署中的延迟差异平衡方法 |
CN105872043B (zh) * | 2016-03-29 | 2019-01-11 | 清华大学 | 交互应用在云部署中的延迟差异平衡方法 |
CN106487910A (zh) * | 2016-10-26 | 2017-03-08 | 苏州大学 | 一种内容分发网络创建方法 |
CN106487910B (zh) * | 2016-10-26 | 2019-07-19 | 苏州大学 | 一种内容分发网络创建方法 |
EP3531621A4 (en) * | 2016-12-15 | 2019-08-28 | Huawei Technologies Co., Ltd. | METHOD AND DEVICE FOR DELAYING MEASUREMENT OF NETWORK NODE DEVICE AND NETWORK NODE DEVICE |
US11050649B2 (en) | 2016-12-15 | 2021-06-29 | Huawei Technologies Co., Ltd. | Delay measurement method of network node device, apparatus, and network node device |
CN115022233A (zh) * | 2022-06-16 | 2022-09-06 | 电子科技大学 | 一种可定制点到多点数据传输完成时间的传输方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2017088638A1 (zh) | 2017-06-01 |
US10412023B2 (en) | 2019-09-10 |
CN105376112B (zh) | 2018-06-19 |
US20180316625A1 (en) | 2018-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105376112A (zh) | 中间处理约束下的异构网络资源配置方法 | |
CN103650435B (zh) | 路由流量调整方法、装置及控制器 | |
CN106357739B (zh) | 一种针对批量云服务请求的两阶段组合与调度方法 | |
CN112346854B (zh) | 一种分层协同决策的网内资源调度方法及系统、存储介质 | |
CN111030835B (zh) | 一种ttfc网络的任务调度模型及消息调度表生成方法 | |
CN101163105B (zh) | 一种获取路径信息的方法和路径计算节点 | |
CN104901989B (zh) | 一种现场服务提供系统及方法 | |
CN102752395B (zh) | 一种用于分布式数据中心实时业务分配的在线调度方法 | |
CN108985709A (zh) | 面向多卫星数据中心协同遥感产品生产的工作流管理方法 | |
CN113472659B (zh) | 转发路径的确定方法、装置及sdn控制器 | |
CN112153153B (zh) | 一种协调分布式的网内资源调度方法及系统、存储介质 | |
CN104283963B (zh) | 一种分布合作式的cdn负载均衡方法 | |
Abdellatif et al. | Dynamic network slicing and resource allocation for 5G-and-beyond networks | |
CN113765825B (zh) | 一种链式业务流调度的规划方法和系统架构 | |
CN113891466B (zh) | 一种面向边缘无线网络中udl任务的在线调度系统及方法 | |
Zhang et al. | Uav base station network transmission-based reverse auction mechanism for digital twin utility maximization | |
CN114205374B (zh) | 基于信息时效性的传输和计算联合调度方法、装置及系统 | |
CN116684418B (zh) | 基于算力服务网关的算力编排调度方法、算力网络及装置 | |
CN105719118A (zh) | 基于图论的多目标物流调度方法和系统 | |
CN116820757A (zh) | 一种利用算力网络处理任务的方法、装置、设备及介质 | |
Zhao et al. | Distributed resource allocation for synchronous fork and join processing networks | |
CN116436806B (zh) | 算网资源编排方法、装置、电子设备及计算机存储介质 | |
CN114827142B (zh) | 一种确保容器化边缘服务请求实时性的调度方法 | |
CN115134243B (zh) | 一种工业控制任务分布式部署方法及系统 | |
WO2023226963A1 (zh) | 一种云资源推荐方法及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |