CN110971532A - 一种网络资源管理方法、装置及设备 - Google Patents

一种网络资源管理方法、装置及设备 Download PDF

Info

Publication number
CN110971532A
CN110971532A CN201811156108.4A CN201811156108A CN110971532A CN 110971532 A CN110971532 A CN 110971532A CN 201811156108 A CN201811156108 A CN 201811156108A CN 110971532 A CN110971532 A CN 110971532A
Authority
CN
China
Prior art keywords
flow control
network resource
group
scheduling module
resource scheduling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811156108.4A
Other languages
English (en)
Other versions
CN110971532B (zh
Inventor
欧阳晋
刘兴君
蒋雄伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201811156108.4A priority Critical patent/CN110971532B/zh
Publication of CN110971532A publication Critical patent/CN110971532A/zh
Application granted granted Critical
Publication of CN110971532B publication Critical patent/CN110971532B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/29—Flow control; Congestion control using a combination of thresholds
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/50—Queue scheduling
    • H04L47/60—Queue scheduling implementing hierarchical scheduling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/50—Queue scheduling
    • H04L47/62—Queue scheduling characterised by scheduling criteria
    • H04L47/622—Queue service order
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/50—Queue scheduling
    • H04L47/62—Queue scheduling characterised by scheduling criteria
    • H04L47/6245—Modifications to standard FIFO or LIFO
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/50—Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请实施方式公开了一种网络资源管理方法、装置及设备。所述设备包括：控制组层组件，设置有用于与适配层组件通信的接口，用于构建包含多个进程组的控制组，并分别设置所述多个进程组的流量控制参数；所述适配层组件，用于获取所述多个进程组的流量控制参数，并根据所述流量控制参数，分别将所述多个进程组的报文数据映射至网络资源调度模块中；网络资源调度模块，用于接收所述适配层组件对所述多个进程组的报文数据的映射。利用本申请的技术方案，可以简化物理节点上网路流量控制的架构。

Description

一种网络资源管理方法、装置及设备
技术领域
本申请涉及分布式系统技术领域，特别涉及一种网络资源管理方法、装置及设备。
背景技术
网络资源管理是分布式系统中的重要技术，其目的在于对分布式系统中各个物理节点上的不同租户进行网络带宽隔离。在网络资源管理技术中，不仅需要实现各个租户的流量使用互不影响，还需要进行流量的动态调整，使得整个分布式系统的网络资源的使用率得到优化。
现有技术中，通常需要两个独立的系统实现网络资源的管理。典型的，在Linux操作系统中，需要流量控制(Traffic Control，TC)和网络分类器控制组(Networkclassifier Control Group，Net_cls Cgroup)子系统两个独立机制的协同合作才可以完成对Linux操作系统的网络资源管理。由于上述两个机制之间是独立的关系，因此，对于需要进行网络资源管理的对象(如进程中产生的报文分组)，在上述两个机制中均有各自的标识信息。而为了实现网络资源管理，需要通过人工手动的方式关联流量控制对象的两个不同的标识信息。以上依靠人工手动方式实现分布式系统中流量管理的方式增加了流量管理的复杂度和管理成本。
因此，现有技术中亟需一种低成本的、简单灵活的分布式系统中网络资源管理方式。
发明内容
本申请实施方式的目的是提供一种网络资源管理方法、装置及设备，可以简化物理节点上网路流量控制的架构。
具体地，所述网络资源管理方法、装置及设备是这样实现的：
一种网络资源管理设备，包括：
控制组层组件，设置有用于与适配层组件通信的接口，用于构建包含多个进程组的控制组，并分别设置所述多个进程组的流量控制参数；
所述适配层组件，用于获取所述多个进程组的流量控制参数，并根据所述流量控制参数，分别将所述多个进程组的报文数据映射至网络资源调度模块中；
网络资源调度模块，用于接收所述适配层组件对所述多个进程组的报文数据的映射。
一种网络资源管理方法，所述方法包括：
适配层组件获取控制组中进程组的流量控制参数；
所述适配层组件根据所述流量控制参数，将所述进程组的报文数据映射至网络资源调度模块中，其中，所述控制组和所述网络资源调度模块中分别设置有用于与所述适配层组件通信的接口。
一种网络资源管理装置，包括处理器以及用于存储处理器可执行指令的存储器，所述处理器执行所述指令时实现：
适配层组件获取控制组中进程组的流量控制参数；
根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中，其中，所述控制组和所述网络资源调度模块中分别设置有用于连接所述适配层组件的接口。
一种计算机可读存储介质，其上存储有计算机指令，所述指令被执行时实现所述网络资源管理方法的步骤。
本申请提供的网络资源管理方法、装置及设备，可以在控制组与网络资源调度模块之间建立连接两者的适配层组件，通过所述适配层组件，可以基于进程组的流量控制参数，将所述进程组的报文数据映射至所述网络资源调度模块。相对于现有技术中，需要在用于对控制组进行流量管理的子系统中手动设置分配类标识符的方式，本申请提供的技术方案可以节省该步操作，由所述适配层组件自行完成流量控制的大部分操作，简化物理节点上网路流量控制的架构。
附图说明
为了更清楚地说明本申请实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本申请提供的可分类队列的结构示意图；
图2是本申请提供的网络控制框架的结构示意图；
图3是本申请应用场景提供的控制组的示例结构图；
图4是本申请提供的网络资源管理方法的一种实施例的方法流程图；
图5是控制组的一种结构示意图；
图6为本申请提供的网络资源管理装置的一个实施例的模块结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请中的技术方案，下面将结合本申请实施方式中的附图，对本申请实施方式中的技术方案进行清楚、完整地描述，显然，所描述的实施方式仅仅是本申请一部分实施方式，而不是全部的实施方式。基于本申请中的实施方式，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式，都应当属于本申请保护的范围。
为了方便本领域技术人员理解本申请实施例提供的技术方案，下面首先通过图1对技术方案实现的技术环境进行说明。
在本场景中，为了清楚的示出本方案的细节，因此非限制性地以Linux操作系统的网络资源管理方式进行说明，但是，本领域技术人员可以理解到，本方案的网络资源管理方式可以基于任何分布式系统。如上所述，在Linux操作系统中，需要TC和Net_cls Cgroup子系统两个独立的机制协同合作才可完成对Linux操作系统的流量管理。其中，Net_clsCgroup子系统用于控制进程使用网络资源，其实现的基本思想就是将控制组Cgroup和Linux内核现有的网络数据包分类和调度的机制(即TC机制)相关联。Net_cls Cgroup子系统并不直接控制网络读写，而是将Cgroup中各个进程组产生的报文分组的网络资源控制交由TC来处理。
TC为Linux内核提供的处于链路层的用于实现网络隔离的框架。在TC框架中，可以为物理节点上的网卡设置用于流量控制的队列，该队列用于排列需要从该物理节点上的网卡转发出去的报文分组。当确定从网卡入口接收到的报文分组需要从网卡出口转发时，可以将该报文分组按序添加至所述队列中，以进行流量控制。在TC框架设置的队列中，一些队列的功能比较简单，可以对报文分组实行先进先出的策略。一些队列则功能较为复杂，可以将不同的报文分组进行排队、分类，并基于不同的规则以不同的顺序发送。为实现这样的功能，需要对队列使用不同的过滤器将报文分组划分成不同的类别，因此，此类队列可以被称为可分类队列。图1是可分类队列的一种示意图，如图1所示，类别和过滤器为可分类队列的内部结构，并且可分类队列可以包含多个类别，而一个类别又可以包含多个子队列，或者子类别等。进入某个类别的报文分组可以依据不同的规则设置在不同的子类别中，以此类推。而过滤器是队列用于对报文分组进行分类的工具，可以确定报文分组将被分配到哪个子类别中。
基于此，在Net_cls Cgroup子系统将报文分组交由TC处理的过程中，可以设置报文分组的分配类标识符(ClassID)，所述ClassID用于标识该报文分组的数据包将被分配至TC可分类队列中的类别。然后，所述报文分组可以被发送至TC的过滤器中，所述过滤器可以根据所述报文分组的ClassID，将所述报文分组分配至与所述ClassID相匹配的可分类队列中。再由物理节点上设置的具体队列规则控制报文分组的发送，以达到控制网络资源使用的目的。
在设置所述ClassID的过程中，创建设置有Net_cls Cgroup子系统的Cgroup，可以自动生成与该Cgroup相关联的名称为Net_cls Cgroup子系统ClassID的文件，通过该文件可以指定与该Cgroup相关的数据包进入TC可分类队列中的类别。在具体实现方式中，可以通过向该文件中写入形如0xAAAABBBB的十六进制数据设置Cgroup的ClassID，再进行相应的TC配置。这样，当Cgroup中的进程组需要使用网卡发送报文分组数据包的时候，则会按照文件中ClassID相应的TC策略控制进程组对网络资源的使用。
由此可见，上述在利用Net_cls Cgroup子系统建立Cgroup与TC机制之间的关联关系的过程中，需要人工手动设置ClassID的数值，该方式不仅增加了Linux操作系统中对Cgroup中进程的网络资源管理的复杂度，而且降低网络资源管理的效率。
基于类似于上文所述的技术需求，本申请提供一种网络资源管理方法，该方法可以通过构建的适配层组件连接所述控制组和TC，简化物理节点上网路流量控制的架构。
下面通过一个具体的应用场景说明本申请提供的技术方案。
图2是本申请提供的网络资源管理设备的模块结构示意图，如图2所示，为了满足上述所述的技术需求，可以通过构建适配层组件以连接控制组层组件和网络资源调度模块(如TC)。在图2所示的结构中，控制组层组件可以构建包含多个进程组的进程组树，并指定所述进程组树中各个进程组的流量控制参数。图3是一种进程组树的示意图，如图3所示，在客户端上可以包括多种进程组，并且，可以设置所述客户端上的各个应用为一个进程组，且各个应用对应的进程组还可以划分成多个其他的进程组。如图3所示，可以设置该客户端上从根进程组划分的进程组包括通讯APP进程组、网购APP进程组、摄影APP进程组等等，其中，所述网购APP进程组还可以进一步划分成购物清单进程组、物流进程组、产品收藏进程组、产品搜索进程组等等。另外，所述控制组层组件还可以进一步确定分配给各个进程组的带宽，例如，分配给所有进程组的总带宽为100M，然后，在分配给下一层的进程组带宽分别为10M、60M、5M等。
所述适配层组件在接收到所述控制组层组件通过的进程组树以及各个进程组对应的流量控制参数之后，可以将各个进程组生成的报文数据映射至网络控制模块中。在网络资源调度模块中，可以维护着多种具有不同流量控制策略的可分类队列，用于排列具有不同流量控制参数的报文数据。所述流量控制策略可以包括分层的令牌桶(Hierarchicaltoken bucket，HTB)、消息队列控制器(Message Queue controller)等等。在一个示例中，如图1所示，所述网络资源调度模块中可以包括多个过滤器，其中过滤器1限定的带宽为0-50M，过滤器2限定的带宽为50M-100M，过滤器3限定的带宽大于100M。那么，对于图3所示的控制组中，网购APP进程组可以被设置在过滤器2对应的子类别中。对于其他的流量控制策略，也是基于相同的原理，本申请在此不再赘述。
下面结合附图对本申请所述的网络资源管理方法进行详细的说明。图4是本申请提供的网络资源管理方法的一种实施例的方法流程图。虽然本申请提供了如下述实施例或附图所示的方法操作步骤，但基于常规或者无需创造性的劳动在所述方法中可以包括更多或者更少的操作步骤。在逻辑性上不存在必要因果关系的步骤中，这些步骤的执行顺序不限于本申请实施例提供的执行顺序。所述方法在实际中的网络资源管理过程中，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。
具体的本申请提供的网络资源管理方法的一种实施例如图4所示，所述方法可以包括：
S401：适配层组件获取控制组中进程组的流量控制参数。
S2403：根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中，其中，所述控制组和所述网络资源调度模块中分别设置有用于连接所述适配层组件的接口。
本实施例中，所述适配层组件可以包括设置于物理节点中用于连接控制组和网络资源调度模块的组件，其中物理节点可以包括分布式系统中的物理节点，也可以包括任何需要进行网络流量管理的物理节点中，本申请对此不做限制。当然，所述适配层组件可以应用于任何需要进行网络流量管理的客户端中，且所述适配层组件具有可插拔的功能，可以实现在客户端中的灵活使用。
如上述所示，在物理节点上，往往创建用于组织进程组的控制组Cgroup，控制组的一种典型的结构为树形结构。图5是树形控制组的结构示意图，如图5所示，控制组中可以包括多个进程组，所述进程组中可以包括多个进程。初始情况下，物理节点上的所有进程形成一个进程组(即根进程组)，根据节点上系统对资源的需求，所述根进程组可以被进一步细分为子进程组，子进程组内的进程是根进程组内进程的子集。而这些子进程组还可以进一步细分，这样，系统内所有的进程组可以形成一棵具有层次等级(hierarchy)关系的进程组树。由于进程组可以被进一步划分，因此一个进程可能处于多个进程组中，但这些进程组必然不处于同一层级中。另外，如果某个进程组内的进程创建了子进程，那么该子进程默认与父进程处于同一进程组中。也就是说，控制组对该进程组的资源控制同样作用于子进程。
需要说明的是，Cgroup为Linux系统中用于组织管理系统内进程的机制，本领域技术人员可以理解，本申请各个实施例所述的控制组不限于Linux系统中的Croup，可以为任何系统中用于组织管理系统内进程的机制，本申请对此不做限制。
在本申请的一个实施例中，所述适配层组件可以获取所述控制组中各个进程组的流量控制参数。在本实施例中，所述控制组中可以设置面向所述适配层组件的接口，通过所述接口，所述适配层组件可以访问所述控制组，读取所述控制组的相关数据。在一个实施例中，物理节点上的系统在创建所述进程组的过程中，可以指定所述进程组的流量控制参数。在另一个实施例中，可以在创建完成所述进程组之后，设置所述进程组的流量控制参数，本申请对于流量控制参数的设置方式不做限制。本实施例中，所述流量控制参数可以用于指定所述进程组在网络资源调度模块中的流量分配方式。在本申请的一个实施例中，所述流量控制参数的参数类型可以包括下述中的至少一种：流量控制阈值、流量控制权重值。其中，所述流量控制阈值可以包括指定所述进程组的具体流量范围，如指定进程组1的流量阈值为不大于80Mb/s。所述流量控制权重值可以包括指定所述进程组流量控制的权重值。通过所述权重值可以全局地控制整个控制组的流量分配。例如，设置控制组中三个进程组的权重值分别为0.3、0.3、0.3，也就是说这三个进程组的流量分配关系为1:1:1。若确定所述控制组的根进程组的流量阈值为100Mb/s，那么，以上三个进程组所分配的流量均为33.3Mb/s，若所述根进程组的流量阈值为300Mb/s，那么，以上三个进程组所分配的流量均为100Mb/s。通过权重值控制流量的方式，可以充分利用分配给控制组的流量资源。
在本申请的一个实施例中，所述适配层组件在获取到所述进程组的流量控制参数之后，可以根据所述流量控制参数将所述进程组的报文数据映射至所述网络资源调度模块中。本实施例中，也可以在所述网络资源调度模块中设置面向所述适配层组件的接口。通过所述接口，所述适配层组件可以访问所述网络资源调度模块。其中，所述访问可以包括在所述网络资源调度模块中进行读和/或写。
本申请的一个实施例中，所述网络资源调度模块可以包括Linux操作系统的TC。在所述网络资源调度模块中，可以包括至少一种可分类队列，所述可分类队列可以用于排列需要经过网卡转发的报文数据。所述可分类队列中可以包括多个子分类，分别用于排列具有不同流量控制参数的报文数据。本实施例中，所述适配层组件可以根据所述进程组的流量控制参数，将所述进程组产生的报文数据分配至所述网络资源调度模块的可分类队列的子分类中。在一个实施例中，所述适配层组件可以根据所述流量控制参数的参数类型，价格所述进程组产生的报文数据分配至相应的子分类中。例如，若对于具有明确的流量控制阈值的进程组，可以将该进程组产生的报文数据设置于相匹配的具有与所述流量控制阈值相匹配的可分类队列的子分类中。若对于参数类型为流量控制权重值的进程组，可以利用HTB、MQ controller等策略实现对进程组产生的报文数据进行流量控制。在本申请的一个实施例中，若所述适配层组件还可以在所述网络资源调度模块中创建用于排列所述进程组的报文数据的可分类队列或者可分类队列中的子分类。例如，可以在所述网络资源调度模块中创建HTB等等。
在本申请的一个实施例中，所述适配层组件还可以将所述网络资源调度模块的一些运行数据传递至所述控制组中。在一个实施例中，所述适配层组件可以从所述网络资源调度模块中获取所述进程组的流量状态信息，并将所述流量状态信息发送至所述控制组。在本申请的一个实施例中，所述流量状态信息包括下述中的至少一种信息：流量总使用量、数据流量传输速率、不同时间段内的平均流量使用量、最大数据流量传输速率、最低数据流量传输速率。本实施例中，以上流量状态信息可以为所述适配层组件直接从所述网络资源调度模块读取到的信息，也可以为所述适配层组件直接从所述网络资源调度模块读取一些信息之后进行统计得到的信息。所述流量状态信息被发送至所述控制组之后，用于可以通过所述控制组获取到所述流量状态信息，还可以基于所述流量状态信息对所述控制组中的进程组调整流量控制策略，例如，通过所述适配层组件返回的流量状态数据发现，节点的网卡还可以传递更多的流量，则可以将一些需要大量传递数据的进程组的流量控制阈值提升，以充分利用物理节点上的资源。
需要说明的是，所述适配层组件可以将所述进程组的报文数据传递至所述网络资源调度模块中，由所述网络资源调度模块基于相应的协议将所述报文数据设置于对应的可分类的子分类中，本申请对此不做限制。
本申请提供的网络资源管理方法，可以在控制组与网络资源调度模块之间建立连接两者的适配层组件，通过所述适配层组件，可以基于进程组的流量控制参数，将所述进程组的报文数据映射至所述网络资源调度模块。相对于现有技术中，需要在用于对控制组进行流量管理的子系统中手动设置分配类标识符的方式，本申请提供的技术方案可以节省该步操作，由所述适配层组件自行完成流量控制的大部分操作，简化物理节点上网路流量控制的架构。
本申请另一方面还提供一种网络资源管理装置，如图6所示，所述装置包括处理器以及用于存储处理器可执行指令的存储器，所述处理器执行所述指令时可以实现：
适配层组件获取控制组中进程组的流量控制参数；
根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中，其中，所述控制组和所述网络资源调度模块中分别设置有用于连接所述适配层组件的接口。
可选的，在本申请的一个实施例中，所述适配层组件获取控制组中进程组的流量控制指标可以包括：
适配层组件获取具有树形结构的控制组，所述控制组以所述树形结构组织多个进程组，所述控制组中分别设置有所述多个进程组的流量控制参数。
可选的，在本申请的一个实施例中，所述流量控制参数的参数类型可以包括下述中的至少一种：流量控制阈值、流量控制权重值。
可选的，在本申请的一个实施例中，所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中可以包括：
根据所述进程组的流量控制参数的参数类型，将所述进程组的报文数据设置于网络资源调度模块中对应的可分类队列的子分类中。
可选的，在本申请的一个实施例中，所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中可以包括：
根据所述进程组的流量控制参数的参数类型，在网络资源调度模快中创建用于排列所述进程组的报文数据的可分类队列或者可分类队列中的子分类。
可选的，在本申请的一个实施例中，在所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中之后，所述装置还可以包括：
从所述网络资源调度模块中获取所述进程组的流量状态信息；
将所述流量状态信息发送至所述控制组。
可选的，在本申请的一个实施例中，所述流量状态信息可以包括下述中的至少一种信息：流量总使用量、数据流量传输速率、不同时间段内的平均流量使用量、最大数据流量传输速率、最低数据流量传输速率。
本申请另一方面还提供一种计算机可读存储介质，其上存储有计算机指令，所述指令被执行时实现上述任一实施例所述方法的步骤。
所述计算机可读存储介质可以包括用于存储信息的物理装置，通常是将信息数字化后再以利用电、磁或者光学等方式的媒体加以存储。本实施例所述的计算机可读存储介质有可以包括：利用电能方式存储信息的装置如，各式存储器，如RAM、ROM等；利用磁能方式存储信息的装置如，硬盘、软盘、磁带、磁芯存储器、磁泡存储器、U盘；利用光学方式存储信息的装置如，CD或DVD。当然，还有其他方式的可读存储介质，例如量子存储器、石墨烯存储器等等。
在20世纪90年代，对于一个技术的改进可以很明显地区分是硬件上的改进(例如，对二极管、晶体管、开关等电路结构的改进)还是当所述资源占用率小于第三预设阈值时，将所述多个租户迁移至其他服务节点上。
软件上的改进(对于方法流程的改进)。然而，随着技术的发展，当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此，不能说一个方法流程的改进就不能用硬件实体模块来实现。例如，可编程逻辑器件(Programmable Logic Device,PLD)(例如现场可编程门阵列(Field Programmable Gate Array，FPGA))就是这样一种集成电路，其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上，而不需要请芯片制造厂商来设计和制作专用的集成电路芯片2。而且，如今，取代手工地制作集成电路芯片，这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现，它与程序开发撰写时所用的软件编译器相类似，而要编译之前的原始代码也得用特定的编程语言来撰写，此称之为硬件描述语言(Hardware Description Language，HDL)，而HDL也并非仅有一种，而是有许多种，如ABEL(Advanced Boolean Expression Language)、AHDL(Altera Hardware Description Language)、Confluence、CUPL(Cornell UniversityProgramming Language)、HDCal、JHDL(Java Hardware Description Language)、Lava、Lola、MyHDL、PALASM、RHDL(Ruby Hardware Description Language)等，目前最普遍使用的是VHDL(Very-High-Speed Integrated Circuit Hardware Description Language)与Verilog2。本领域技术人员也应该清楚，只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中，就可以很容易得到实现该逻辑方法流程的硬件电路。
本领域技术人员也知道，除了以纯计算机可读程序代码方式实现控制器以外，完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件，而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至，可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施方式或者实施方式的某些部分所述的方法。
虽然通过实施方式描绘了本申请，本领域普通技术人员知道，本申请有许多变形和变化而不脱离本申请的精神，希望所附的权利要求包括这些变形和变化而不脱离本申请的精神。

Claims (22)

1.一种网络资源管理设备，其特征在于，包括：
控制组层组件，设置有用于与适配层组件通信的接口，用于构建包含多个进程组的控制组，并分别设置所述多个进程组的流量控制参数；
所述适配层组件，用于获取所述多个进程组的流量控制参数，并根据所述流量控制参数，分别将所述多个进程组的报文数据映射至网络资源调度模块中；
网络资源调度模块，用于接收所述适配层组件对所述多个进程组的报文数据的映射。
2.根据权利要求1所述的设备，其特征在于，所述构建包含多个进程组的控制组，并分别设置所述多个进程组的流量控制参数包括：
构建具有树形结构的控制组，所述控制组以所述树形结构组织多个进程组，所述控制组中分别设置有所述多个进程组的流量控制参数。
3.根据权利要求1所述的设备，其特征在于，所述流量控制参数的参数类型包括下述中的至少一种：流量控制阈值、流量控制权重值。
4.根据权利要求1所述的设备，其特征在于，所述根据所述流量控制参数，分别将所述多个进程组的报文数据映射至网络资源调度模块中包括：
分别根据所述多个进程组的流量控制参数的参数类型，将所述进程组的报文数据设置于网络资源调度模块中对应的可分类队列的子分类中。
5.根据权利要求1所述的设备，其特征在于，所述根据所述流量控制参数，分别将所述多个进程组的报文数据映射至网络资源调度模块中包括：
分别根据所述多个进程组的流量控制参数的参数类型，在网络资源调度模快中创建用于排列所述进程组的报文数据的可分类队列或者可分类队列中的子分类。
6.根据权利要求1所述的设备，其特征在于，所述适配层组件还用于：
从所述网络资源调度模块中获取所述进程组的流量状态信息；
将所述流量状态信息发送至所述控制组组件。
7.根据权利要求6所述的设备，其特征在于，所述流量状态信息包括下述中的至少一种信息：流量总使用量、数据流量传输速率、不同时间段内的平均流量使用量、最大数据流量传输速率、最低数据流量传输速率。
8.一种网络资源管理方法，其特征在于，所述方法包括：
适配层组件获取控制组中进程组的流量控制参数；
所述适配层组件根据所述流量控制参数，将所述进程组的报文数据映射至网络资源调度模块中，其中，所述控制组和所述网络资源调度模块中分别设置有用于与所述适配层组件通信的接口。
9.根据权利要求8所述的方法，其特征在于，所述适配层组件获取控制组中进程组的流量控制指标包括：
适配层组件获取具有树形结构的控制组，所述控制组以所述树形结构组织多个进程组，所述控制组中分别设置有所述多个进程组的流量控制参数。
10.根据权利要求8所述的方法，其特征在于，所述流量控制参数的参数类型包括下述中的至少一种：流量控制阈值、流量控制权重值。
11.根据权利要求8所述的方法，其特征在于，所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中包括：
根据所述进程组的流量控制参数的参数类型，将所述进程组的报文数据设置于网络资源调度模块中对应的可分类队列的子分类中。
12.根据权利要求8所述的方法，其特征在于，所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中包括：
根据所述进程组的流量控制参数的参数类型，在网络资源调度模快中创建用于排列所述进程组的报文数据的可分类队列或者可分类队列中的子分类。
13.根据权利要求8所述的方法，其特征在于，在所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中之后，所述方法还包括：
从所述网络资源调度模块中获取所述进程组的流量状态信息；
将所述流量状态信息发送至所述控制组。
14.根据权利要求13所述的方法，其特征在于，所述流量状态信息包括下述中的至少一种信息：流量总使用量、数据流量传输速率、不同时间段内的平均流量使用量、最大数据流量传输速率、最低数据流量传输速率。
15.一种网络资源管理装置，其特征在于，包括处理器以及用于存储处理器可执行指令的存储器，所述处理器执行所述指令时实现：
适配层组件获取控制组中进程组的流量控制参数；
根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中，其中，所述控制组和所述网络资源调度模块中分别设置有用于连接所述适配层组件的接口。
16.根据权利要求15所述的装置，其特征在于，所述适配层组件获取控制组中进程组的流量控制指标包括：
适配层组件获取具有树形结构的控制组，所述控制组以所述树形结构组织多个进程组，所述控制组中分别设置有所述多个进程组的流量控制参数。
17.根据权利要求15所述的装置，其特征在于，所述流量控制参数的参数类型包括下述中的至少一种：流量控制阈值、流量控制权重值。
18.根据权利要求15所述的装置，其特征在于，所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中包括：
根据所述进程组的流量控制参数的参数类型，将所述进程组的报文数据设置于网络资源调度模块中对应的可分类队列的子分类中。
19.根据权利要求15所述的装置，其特征在于，所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中包括：
根据所述进程组的流量控制参数的参数类型，在网络资源调度模快中创建用于排列所述进程组的报文数据的可分类队列或者可分类队列中的子分类。
20.根据权利要求15所述的装置，其特征在于，在所述根据所述流量控制参数将所述进程组的报文数据映射至网络资源调度模块中之后，所述装置还包括：
从所述网络资源调度模块中获取所述进程组的流量状态信息；
将所述流量状态信息发送至所述控制组。
21.根据权利要求20所述的装置，其特征在于，所述流量状态信息包括下述中的至少一种信息：流量总使用量、数据流量传输速率、不同时间段内的平均流量使用量、最大数据流量传输速率、最低数据流量传输速率。
22.一种计算机可读存储介质，其特征在于，其上存储有计算机指令，所述指令被执行时实现权利要求8至14中任一项所述方法的步骤。
CN201811156108.4A 2018-09-30 2018-09-30 一种网络资源管理方法、装置及设备 Active CN110971532B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811156108.4A CN110971532B (zh) 2018-09-30 2018-09-30 一种网络资源管理方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811156108.4A CN110971532B (zh) 2018-09-30 2018-09-30 一种网络资源管理方法、装置及设备

Publications (2)

Publication Number Publication Date
CN110971532A true CN110971532A (zh) 2020-04-07
CN110971532B CN110971532B (zh) 2023-07-21

Family

ID=70028741

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811156108.4A Active CN110971532B (zh) 2018-09-30 2018-09-30 一种网络资源管理方法、装置及设备

Country Status (1)

Country Link
CN (1) CN110971532B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112084031A (zh) * 2020-09-14 2020-12-15 海光信息技术股份有限公司 一种进程分配方法、并行处理器及电子设备
CN112134813A (zh) * 2020-09-22 2020-12-25 上海商米科技集团股份有限公司 一种基于应用进程优先级的带宽分配方法及电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040105384A1 (en) * 2002-11-28 2004-06-03 International Business Machines Corporation Event-driven flow control for a very high-speed switching node
US20060098675A1 (en) * 2004-11-05 2006-05-11 Michitaka Okuno Traffic control method for network equipment
CN101854268A (zh) * 2009-04-04 2010-10-06 华为技术有限公司 Ip网络性能测量、服务质量控制的方法、装置和系统
US20110261705A1 (en) * 2010-04-23 2011-10-27 Kamerkar Sushil S Mapping Traffic Classes to Flow Control Groups
CN102265563A (zh) * 2008-12-23 2011-11-30 爱立信电话股份有限公司 识别通信网络中的业务流的方法和设备
US20140113611A1 (en) * 2012-10-23 2014-04-24 Tencent Technology (Shenzhen) Company Limited Traffic control method and device
US20170012947A1 (en) * 2015-07-12 2017-01-12 Qualcomm Incorporated Network architecture and security with simplified mobility procedure
CN106411558A (zh) * 2015-07-27 2017-02-15 阿里巴巴集团控股有限公司 一种数据流量限制的方法及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040105384A1 (en) * 2002-11-28 2004-06-03 International Business Machines Corporation Event-driven flow control for a very high-speed switching node
US20060098675A1 (en) * 2004-11-05 2006-05-11 Michitaka Okuno Traffic control method for network equipment
CN102265563A (zh) * 2008-12-23 2011-11-30 爱立信电话股份有限公司 识别通信网络中的业务流的方法和设备
CN101854268A (zh) * 2009-04-04 2010-10-06 华为技术有限公司 Ip网络性能测量、服务质量控制的方法、装置和系统
US20110261705A1 (en) * 2010-04-23 2011-10-27 Kamerkar Sushil S Mapping Traffic Classes to Flow Control Groups
US20140113611A1 (en) * 2012-10-23 2014-04-24 Tencent Technology (Shenzhen) Company Limited Traffic control method and device
US20170012947A1 (en) * 2015-07-12 2017-01-12 Qualcomm Incorporated Network architecture and security with simplified mobility procedure
CN106411558A (zh) * 2015-07-27 2017-02-15 阿里巴巴集团控股有限公司 一种数据流量限制的方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
杨冬等: "基于令牌桶算法的卫星数据地面传输", 《软件》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112084031A (zh) * 2020-09-14 2020-12-15 海光信息技术股份有限公司 一种进程分配方法、并行处理器及电子设备
CN112084031B (zh) * 2020-09-14 2022-07-08 成都海光微电子技术有限公司 一种进程分配方法、并行处理器及电子设备
CN112134813A (zh) * 2020-09-22 2020-12-25 上海商米科技集团股份有限公司 一种基于应用进程优先级的带宽分配方法及电子设备

Also Published As

Publication number Publication date
CN110971532B (zh) 2023-07-21

Similar Documents

Publication Publication Date Title
CN112153700B (zh) 一种网络切片资源管理方法及设备
US20190324819A1 (en) Distributed-system task assignment method and apparatus
JP6528507B2 (ja) オブジェクト指向のネットワーク仮想化
US10333859B2 (en) Multi-tenant resource coordination method
CN108776934A (zh) 分布式数据计算方法、装置、计算机设备及可读存储介质
CN104539708B (zh) 一种云平台资源的缩容方法、装置与系统
CN109783225B (zh) 一种多租户大数据平台的租户优先级管理方法及系统
CN104503826A (zh) 一种云计算数据中心的虚拟机映射方法及装置
CN109933315A (zh) 一种图形化的业务处理系统和方法
CN114675956B (zh) 一种基于Kubernetes集群之间Pod配置及调度的方法
CN114168302A (zh) 任务调度方法、装置、设备及存储介质
CN105022668B (zh) 一种作业调度方法及系统
CN112596904A (zh) 一种基于量子云平台量子服务资源调用优化的方法
CN110971532B (zh) 一种网络资源管理方法、装置及设备
CN110476154A (zh) 用于数据收集的代理服务器设备和方法
CN114661419A (zh) 一种服务质量控制系统及方法
EP3026869A2 (en) Method, device and system for carrying out telecommunication capability group sending
CN111984505A (zh) 一种运维数据采集引擎及采集方法
CN103927244A (zh) 一种基于动态代理实现的插件调度过程监控的方法
CN117332881B (zh) 分布式训练方法及电子设备
EP4206915A1 (en) Container creation method and apparatus, electronic device, and storage medium
CN114168297A (zh) 一种归集任务调度方法、装置、设备及介质
CN117608760A (zh) 应用于Kubernetes的云上应用混合部署方法
CN112559202A (zh) 基于嵌入式实时操作系统的飞行器应用软件通讯方法
CN114443293A (zh) 一种大数据平台的部署系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40026975

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant