CN106464528B - 用于通信网络中的无接触编配的方法、介质、及装置 - Google Patents

用于通信网络中的无接触编配的方法、介质、及装置 Download PDF

Info

Publication number
CN106464528B
CN106464528B CN201580027302.0A CN201580027302A CN106464528B CN 106464528 B CN106464528 B CN 106464528B CN 201580027302 A CN201580027302 A CN 201580027302A CN 106464528 B CN106464528 B CN 106464528B
Authority
CN
China
Prior art keywords
node
vrf
boundary
element selected
boundary element
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580027302.0A
Other languages
English (en)
Other versions
CN106464528A (zh
Inventor
维莎巴哈·斯坎德
董立勤
萨钦·维贾伊·维莎瓦鲁佩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cisco Technology Inc
Original Assignee
Cisco Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cisco Technology Inc filed Critical Cisco Technology Inc
Publication of CN106464528A publication Critical patent/CN106464528A/zh
Application granted granted Critical
Publication of CN106464528B publication Critical patent/CN106464528B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0876Aspects of the degree of configuration automation
    • H04L41/0886Fully automatic configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4633Interconnection of networks using encapsulation techniques, e.g. tunneling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4641Virtual LANs, VLANs, e.g. virtual private networks [VPN]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • H04L41/0806Configuration setting for initial configuration or provisioning, e.g. plug-and-play
    • H04L41/0809Plug-and-play configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • H04L41/084Configuration by using pre-existing information, e.g. using templates or copying from other elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/085Retrieval of network configuration; Tracking network configuration history
    • H04L41/0853Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0895Configuration of virtualised networks or elements, e.g. virtualised network function or OpenFlow elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/02Topology update or discovery
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/58Association of routers
    • H04L45/586Association of routers of virtual routers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0817Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876Network utilisation, e.g. volume of load or congestion level

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

一种方法在一个实施例中被提供并且包括从针对通信网络中创建的新的虚拟路由和转发元素(“VRF”)的编配器元件接收该VRF的名称和互连标识;选择该VRF的边界元件;并且在数据库中创建针对被选择的边界元件的VRF条目,其中该条目对被选择的边界元件的配置概要文件进行标识。该方法还包括将VRF创建通知转发到被选择的边界元件;并且响应于来自被选择的边界元件对数据库的查询,将配置概要文件从对应的条目提供给被选择的边界元件。被选择的边界元件自动应用配置概要文件来配置被选择的边界元件。

Description

用于通信网络中的无接触编配的方法、介质、及装置
技术领域
本公开一般涉及数据通信网络,并且更具体地,涉及用于这种网络中的层3(“L3”)数据中心互连(“DCI”)的无接触编配(orchestration)的技术。
背景技术
动态结构自动化(也称为“DFA”)是用于辅助数据中心联网的网络结构架构。DFA的物理拓扑是基于双层胖树(也称为Clos网络)的,其中多个叶节点(可以被实现为架顶(“ToR”)交换机或路由器)连接到多个脊节点(被实现为交换机或路由器)中的每个,反之亦然。DFA结构通过一个或多个边界叶(“BL”)节点与其他DFA结构以及互联网进行通信。对于不支持数据中心互连(“DCI”)功能的BL节点(例如,多协议标签交换/虚拟专用网络(“MPLS/VPN”)、层2 VPN(“VPLS”)和/或覆盖传输虚拟化(“OTV”)),单独的DCI节点必须连接到BL节点,该解决方案通常被称为“双盒解决方案”。
目前,如果租户端点要与另一结构中的相同虚拟路由和转发元素(“VRF”)中的端点具有L3连接,则无论另一结构是否在地理上并置,都必须在BL节点和DCI节点处手动配置信息,这是繁琐且易于出错的过程。
附图说明
为了提供对本公开及其特征和优点的更完整的理解,结合附图参考以下描述,其中相同的参考标号表示相同的部分,其中:
图1是根据实施例的特征示出了用于在通信网络中实现L3 DCI的无接触编配的系统的示例部署的简化框图;
图2是根据实施例的特征示出了用于在通信网络中实现L3 DCI的无接触编配的系统的示例部署的另一简化框图;
图3是根据实施例的特征示出了用于在通信网络中实现L3 DCI的无接触编配的系统的示例部署的图2框图的更简化版本;
图4是根据实施例的特征示出了用于在通信网络中实现L3 DCI的无接触编配的操作过程的流程图;以及
图5示出根据实施例的特征的与DCI节点和BL节点相对应的示例资产数据库条目。
具体实施方式
概览
一种方法在一个实施例中被提供并且包括从针对通信网络中创建的新的虚拟路由和转发元素(“VRF”)的编配器元件接收该VRF的名称和互连标识;选择该VRF的边界元件;并且在数据库中创建针对被选择的边界元件的VRF条目,其中该条目对被选择的边界元件的配置概要文件进行标识。该方法还包括将VRF创建通知转发到被选择的边界元件;并且响应于来自被选择的边界元件对数据库的查询,将配置概要文件从对应的条目提供给被选择的边界元件。被选择的边界元件自动应用配置概要文件来配置被选择的边界元件。该方法还包括向VRF分配网络标识符。在一些实施例中,被选择的边界元件包括边界叶节点,该边界叶节点包括有数据中心互连(“DCI”)功能。而在其他实施例中,被选择的边界元件包括边界叶节点/DCI节点对。
创建针对被选择的边界元件的条目包括创建针对边界叶节点/DCI节点对的每个节点的条目,其中条目中的每个条目对边界叶节点/DCI节点对中的节点的相应一个节点的配置概要文件进行标识。此外,提供配置概要文件包括向边界叶节点/DCI节点对的每个节点提供相应的配置概要文件。在一个实施例中,VRF创建通知包括VRF名称和节点ID。除此之外,查询可以包括VRF名称和节点ID。
示例实施例
多租户是DFA结构的重要特征。租户业务通过该结构被交换或路由,并用段ID被封装,其中段ID在一个实施例中可以是VXLAN段ID。可以在连接到VLAN的虚拟机(VM)的叶节点上向租户分配一个或多个VLAN。每个VLAN与层2(“L2”)段ID相关联,L2段ID用于封装通过该结构被交换的业务。除此之外,租户可以与叶节点上的VRF相关联。租户的IP分组可以基于其VRF中的查找,通过IP结构被转发。每个VRF与层3(“L3”)段ID相关联,L3段ID用于封装通过该结构被路由的业务。简化的结构管理和自动配设是DFA结构的重要方面。在一个实施例中,网络管理器(例如,可从加利福尼亚州圣何塞的思科系统公司(Cisco Systems,Inc.)获得的数据中心网络管理(“DCNM”))可以作为管理中心点(“CPOM”)以便于操作。
一般地,DCNM对数据中心结构的整体正常运行时间和可靠性进行配设和优化。DCNM还可以提供智能和可扩展结构的自服务配设,集中结构管理来辅助资源的移动、添加和改变,主动地监控存储区域网络(“SAN”)和局域网(“LAN”)并检测性能退化,以及开放用于管理和编配平台的应用程序编程接口(“API”)。DCNM还可以缓和数据中心中断的诊断和故障排除,并简化虚拟化数据中心的操作管理。
为了提供节点级冗余并实现更强的可扩展性,基于节点可以支持的VRF数目存在最大限制(例如,通常为1k-4k)这一事实,需要在多个BL节点上配置VRF。手动执行这种配置的网络管理员可能需要关于在哪里和在多少个节点上配置新的VRF做出额外决定。网络管理员可能想要考虑各种标准(例如,BL节点上的电流负载、BL节点的容量等),并且在做出最终决定之前发出若干命令。在其中也涉及DCI盒的双盒解决方案的情形下,需要配置的节点数目加倍。重要的是,在多个节点上的配置是一致的;因此,手动执行此过程是容易出错的。
本文所描述的实施例支持用于DFA结构互连的无接触DCI编配,覆盖了由VRF创建、推模型和重启处理触发的节点选择。在这样的一个实施例中,用户对将被提供的BL/DCI节点数目、每个节点的VRF数目、每个VRF将使用的BL/DCI对数目(即,“冗余因子”)、以及BL节点与对应的DCI节点之间的(一个或多个)链路的标识(若实施双盒解决方案)进行规划。所有这些信息被存储在网络结构CPOM或者等同的管理站中。CPOM提供可以由编配工具调用的API,该API可以通过使用任何编配工具(例如,虚拟云Director(“vCD”)或Openstack)来实现。在接收到VRF创建消息时,CPOM选择VRF将驻留在其上的BL/DCI节点。应注意的是,可以基于冗余因子来选择不止一对。应注意的是,可以通过使用思科的DCNM来实现CPOM。
用于在可用的节点上负载平衡VRF的默认算法是轮循。BL节点选择算法可以基于特定于用户的要求来定制,或者甚至直接从用户脚本定制。CPOM填充网络资产数据库(“ADB”)中的配置概要文件,该网络资产数据库可以是轻量级目录访问协议(“LDAP”)数据库或其他类型的数据库。配置概要文件包括针对租户的配置信息,以实现DFA结构间的连接。该信息包括在BL节点和对应的DCI盒之间使用的逻辑接口,以及与对等体建立BGP会话所需的诸如路由目标的BGP配置参数。然后CPOM向分配给VRF的节点发出通知。该通知可以(但不被要求)是通过到所分配的节点的直接安全外壳(“SSH”)会话的命令行接口(“CLI”)命令的形式。提供给该节点的关键字是VRF名称和节点标识符(“节点ID”)。在一个实施例中,节点的管理IP地址用作节点ID。然后节点将VRF名称和节点ID用作关键字来查询ADB。ADB用配置概要文件名称和一组参数进行响应,以基于该配置概要文件创建配置。配置概要文件本身可以经由开机自动配设(“POAP”)存在于节点处,或者如果其尚不存在则可以从ADB检索。如果还未在BL节点上创建VRF,则该BL节点还将轮询ADB以获得架构内通信所需的租户配置信息。对于不支持配置概要文件的节点,CPOM可以向该节点发送所有配置命令。
在上述方式中,配置过程可以是完全自动化的。将任务分配给能够访问所有节点的当前状态的管理中心点(例如,CPOM),使得能够使用许多有用的启发式方法以最优的方式为VRF分配BL/DCI节点。这样的启发式方法可以包括但不限于CPU负载、链路带宽利用、基于设备类型的节点容量等。本文所描述的实施例支持BL/DCI节点的重启。例如,当BL或DCI节点重启时,该节点可以用其节点标识符(例如,管理IP地址)作为关键字查询ADB。ADB将返回分配给所标识的节点的所有VRF以及这些VRF的配置概要文件。以这种方式,节点可以在重启时重新学习它们的VRF配置。
本文所描述的实施例支持BL/DCI节点的重启。如,当BL或DCI节点重启时,该节点可以用其节点标识符(例如,管理IP地址)作为关键字查询ADB。ADB将返回分配给所标识的节点的所有VRF以及这些VRF的配置概要文件。以这种方式,节点可以在重启时重新学习它们的VRF配置。
现在参考图1,其中示出了根据本文所描述的实施例的示例通信系统10的简化框图。如图1所示,系统10包括三个DFA结构,分别由参考标号12A、12B和12C表示。在一个实施例中,结构12A-12C在地理上是分散的。例如,结构12A可以位于华盛顿特区、结构12B可以位于印度孟买、结构12C可以位于中国北京。在其他实施例中,结构12A-12C中的一个或多个可以位于相同的地理区域。结构12A-12C中的每个包括多个叶节点14,其在某些实施例中包括网络交换或路由元件。每个结构12A-12C的叶节点14连接到各自的计算网络16,每个计算网络16包括用于托管虚拟机(“VM”)或物理服务器的多个服务器。每个叶节点14连接到多个脊节点18中的每个。
如前所述,叶节点14可以被实现为交换元件(例如,架顶(“ToR”)交换机),该交换元件可以位于容纳一个或多个网络计算元件(例如,物理服务器)的机架单元(未示出)中,该计算单元由图1中的计算网络16共同表示。每个叶节点连接到脊节点中的每个脊节点(这可以通过使用路由器或交换机实现),并且被配置成路由包括有机架单元中的计算元件的物理服务器和其它网络元件之间的通信。虽然未示出,但应认识到的是,计算网络16的每个物理服务器可以在其上实例化用于托管虚拟机(“VM”)的一个或多个虚拟交换机。可以在每个物理服务器上创建和运行虚拟交换机和VM,其中该物理服务器控制着安装在服务器上的管理程序。每个虚拟交换机可以被配置成管理特定虚拟网络和/或子网络(“子网”)中的VM的通信。虚拟交换机可以被实现为在对应的物理服务器上存储和执行的软件。因此,虚拟交换机执行物理交换设备的功能。类似地,每个VM可以包括在对应的物理服务器上存储和执行的软件。VM被配置为经由系统10与其他VM交换通信。应该理解的是,托管了任何数目的虚拟交换机和VM的任何数目的物理服务器可以存在于系统10中。此外,如前所述,计算网络16可以仅包括基本的刀片服务器/物理服务器,并且可以没有VM。
再次参考叶节点14,每个叶节点负责管理源自和去往它所连接的计算节点的通信(例如,路由和转发)。叶节点14可以用于向与机架中的物理服务器、虚拟机和虚拟交换机相关联的通信提供冗余和容错。如上所述,计算网络16的物理服务器托管VM。VM可以经由叶节点在系统10中与其他VM交换通信(例如,数据分组)。每个VM是租户网络的成员,该租户网络是可以包括一个或多个VLAN的唯一的L3子网。例如,租户“公司A”可以具有两个层/租户网络;即,1.1.1.0/24和2.2.2.0/24。租户网络或子网可以跨越多个VLAN。作为VM是其成员的租户网络,为了对数据分组进行交换,可以为该租户网络配设某些网络属性。例如,在实例化时,可以为租户网络和其中的VM配设虚拟网络分段资源,例如VM和租户网络可以与一个或多个虚拟局域网(VLAN)标识符和子网标识符相关联。在一个示例中,可以在每个交换机或每个端口的基础上配设虚拟网络分段资源(例如,每个交换机多达四千个VLAN,或者交换机的每个端口多达四千个VLAN)。因此,当在创建租户网络和其中的VM时,ToR交换机可以为给定的分段分配选择未使用的VLAN。虚拟分段资源还可以包括交换机虚拟接口(SVI)分配、访问控制列表(ACL)分配、服务质量(QoS)分配、虚拟路由和转发(VRF)分配等。应理解的是,也可以将现在已知或迄今为止构想的其他网络信息分配给VM。每个租户网络还与段标识符(段ID)相关联,该段标识符用于唯一地标识特定结构中的租户网络。段ID是24位标识符,它允许1600万个租户网络被唯一地寻址。VXLAN是在IP/UDP封装策略上的也具有VNI(虚拟网络标识符)的特定MAC,其中该VNI也恰好是24位。然而,由于VNI是标识符,所以本文所使用的术语“段”比VNI更通用,但是这并不指示封装应该为VXLAN或任何其他封装策略。
再次参考图1,根据本文所描述的实施例的特征,结构12A-12C中的每个包括一个或多个BL节点20,其中每个BL节点连接到DCI节点22。虽然BL/DCI节点组合在图1中被示为包括单独的节点20和22,但在一些实施例中,BL/DCI功能可以被集成到单个设备或节点中。DCI节点22将它们各自的结构12A-12C连接到数据中心间核心,其可以是MPLS/IP网络24。
现在参考图2,其中示出了体现用于本文所描述的L3 DCI技术的无接触编配的特征的系统30的一部分的更简化的框图。系统30包括通过MPLS/IP核心网络34互连的两个结构32A、32B。结构32A包括在图2中由叶节点36表示的多个叶节点,其中每个叶节点连接到在图2中由脊节点38表示的多个脊节点中的每个。BL节点40也被提供并连接到脊节点38的每个脊节点。与系统10(图1)一样,在框架32A中实施双盒解决方案,使得单独的DCI节点42被提供并连接在BL节点40和核心网络34之间。类似地,结构32B包括在图2中由叶节点46表示的多个叶节点,其中每个叶节点连接到在图2中由脊节点48表示的多个脊节点中的每个。BL节点50也被提供并连接到脊节点48中的每个脊节点。与系统10(图1)一样,在结构32B中实施双盒解决方案,使得单独的DCI节点52被提供并连接在BL节点50和核心网络34之间。
如图2所示,结构32A、32B中的每个都被提供以各自的CPOM 60A、60B。每个CPOM60A、60B包括等同于网络管理系统(例如,DCNM)和资产数据库(“ADB”)64A、64B的功能,其目的将在下文更详细地描述。应注意的是,虽然ADB 64A、64B在图2中被示出为与各自的CPOM60A、60B集成在一起,但是ADB可以包括其相应的CPOM经由适当的连接可访问的单独的组件。还提供了可以通过使用例如vCD或Openstack实现的VRF网络编配器66,用于在系统30中发起VRF的创建、删除和修改。
如将变得更显而易见的,本文所描述的无接触DCI编配系统的主要组件包括(1)CPOM,例如CPOM 60A、60B;(2)资产数据库,例如ADB 64A、64B;以及(3)网络节点(例如,BL节点40、50和DCI节点42、52)。总之,CPOM(或等同的管理站)向用户提供GUI,并且通过该GUI,网络资源的详细信息被输入。CPOM可以向节点分配VRF,用VRF的配置概要文件和配置参数填充ADB,并且将VRF的分配通知给网络节点。ADB可以用作VRF信息的储存库,并且对关于分配给节点的特定VRF或所有VRF的网络节点查询进行响应。网络节点监听用于从这里创建、修改和删除VRF的CPOM触发器。网络节点还可以在创建通知时查询ADB以获得VRF详细信息,将配置参数应用于所提供的配置概要文件,并在重启时查询ADB。
应注意的是,一个结构中的DCI节点经由边界网关协议(“BGP”)/MPLS VPN与其他结构中的DCI盒进行通信。为了维持要交换哪个VRF路由的共识,可以使用各种技术。例如,CPOM可以出于DCI的目的,对在所有DFA集群中使用的BGP路由目标(“RT”)进行分配。然后中央服务器将维持用VRF名称索引的RT数据库。当配置新的VRF时,集群的CPOM将通过提供VRF名称来查询中央服务器以获得新的RT。然后RT将被CPOM安装在ADB中,并在查询时被传递给网络节点。此外和/或可选地,可以通过引进可扩展RT的概念来使用对BGP的协议增强。通过直接从VRF名称映射RT,每个DFA集群可以针对相同的VRF独立地导出相同的RT。
现在参考图3,其中示出的是图2所示的系统30的更简化的框图,仅包括与解释本文所描述的L3 DCI技术的无接触编配的实施例相关的那些元件。仅出于说明和解释的目的,ADB 64A被示为独立于图3中的CPOM 60A。将参考图3和图4解释用于实现本文所描述的L3 DCI技术的无接触编配的实施例的操作。如图4所示,在步骤100中,响应于来自编配器(例如,编配器66(图3))的已创建新VRF的通知,将VRF名称和DCI ID传递给CPOM(例如,CPOM60A)。该步骤在图3中由箭头100’示出。在一个实施例中,DCI ID是在CPOM或编配器上输入的数字。保留值(例如,零)用于指示用户不希望VRF跨越多个结构。在步骤102中,CPOM选择BL节点/DCI节点对,选择BL节点和DCI节点之间的逻辑链路,并且填充所选择对的ADB中的概要文件。该步骤在图3中由箭头102’示出。应认识到的是,基于用户冗余规范,可以在步骤102中选择不止一个BL节点/DCI节点对。用于在可用的节点上负载平衡VRF的默认算法是轮循;然而,可以基于用户特定的要求来定制选择算法。在步骤102中被填充的ADB概要文件包含针对租户的配置信息来实现DFA结构之间的连接。该信息包括在BL节点和DCI节点之间使用的逻辑接口以及与另一结构中的对等BL节点/DCI节点对建立BGP会话所需的BGP配置参数(例如,RT)。特别地,CPOM在ADB中设置两个条目;一个条目用于BL节点而另一个用于DCI节点。ADB的查找关键字是VRF名称加上节点IP。图5示出了分别用于DCI节点和BL节点的ADB条目20、22。
在步骤104中,CPOM向BL节点/DCI节点对(例如,BL节点40/DCI节点41(图3))发送包括有VRF名称和节点ID的VRF创建通知。该步骤在图3中由箭头104’示出。在一个实施例中,通过使用特别定义的CLI经由到管理IP的直接SSH来执行此步骤。在步骤106中,BL节点和DCI节点使用关键字VRF名称和节点ID来查询ADB。该步骤在图3中由箭头106’示出。在步骤108中,ADB用其对应的配置概要文件来响应每个节点。该步骤在图3中由箭头108’示出。在步骤110中,BL节点和DCI节点各自例如通过将返回的概要文件转换成CLI命令来在本地应用它们各自的概要文件。该步骤在图3中并未示出,因为其在BL节点和DC节点内部发生。在完成步骤110时,BL节点向其路由反射器(“RR”)(图3中未示出)发送路由刷新命令,并且DCI节点经由核心网络(例如,网络34(图3))向对等DCI(例如,DCI节点52(图3))发送路由刷新命令。以这种方式更新路由以反映新的VRF。此时,对等DCI节点间的BGP会话出现并且编配完成。
应认识到的是,虽然在图3中将过程示出为仅在结构32A中发生,但类似的过程在系统30中的其它结构(例如,结构32B)中同时发生。除非部署了使用可扩展RT的BGP增强,否则其他结构应针对相同租户使用相同的DCI ID。此外,虽然图示出了双盒解决方案,但是相同的机制也适用于实施单盒解决方案的情况。
关于VRF的删除,在从编配器接收到已删除VRF的通知时,CPOM移除该VRF的ADB条目并且收回VRF概要文件。CPOM还将VRF的删除通知给BL节点/DCI节点对。与创建通知相类似,删除通知将包括VRF名称和节点ID。BL节点和DCI节点生成配置以在本地删除VRF。此外,用户可以修改各种VRF参数,例如,改变DCI ID(例如,在用户输入错误的情况下)以及添加或移除对地址族的支持。关于VRF修改,在从编配器或经由CPOM GUI直接从用户接收到VRF已被修改的通知时,CPOM修改该VRF的ADB条目并将该VRF的修改通知给BL节点/DCI节点对。与创建和删除通知相类似,修改通知将包括VRF名称和节点ID。BL节点和DCI节点生成配置以在本地删除VRF。
本文所描述的实施例包括这样一种机制,该机制用于在DFA结构中创建新的VRF时自动选择BL/DCI节点并将所需的配置数据下推到所选择的BL/DCI节点,使跨DFA群集的租户通信完全自动化。实施例可以允许BL节点在重启时的平稳恢复,从而补充针对结构内通信设计的现有DFA自动化过程,并且向用户提供简单、易于使用并且不太易出错的过程。
实施例补充了现有的DFA自动化机制,并且共同地实现了用于结构间和结构内通信的完全无接触编配。此外,实施例为租户在选择BL节点上提供了灵活性。选择算法可以基于客户要求来定制,并且可以被指定将不止一个BL分配给特定租户以实现负载平衡并提供冗余。此外,本文所描述的实施例在没有用户干预的情况下使所选择的BL节点和DCI盒的配置自动化,并且在节点重启/重载时实现平滑的恢复。此外,实施例保持覆盖方案的无接触优势,并且具有使用网络设备的全部能力的额外优点。可以向不同的VRF提供不同的服务质量(“QoS”)、定制的冗余级别、访问控制策略等。
在一个示例实施方案中,涉及实现本文所描述的实施例的各种设备可以包括用于实现所述功能的软件。例如,参考图2和图3,CPOM 60A可以通过使用包括软件的一个或多个计算机设备来实现,其中软件在用于辅助本文所描述的活动的一个或多个有形介质中被实现。用于实现CPOM 60A的计算机设备还可以包括用于存储要在实现本文所概述的功能中使用的信息的存储器设备(或存储器元件)。此外,用于实现CPOM 60A的计算机设备还可以包括能够执行软件或算法的处理器以执行如本说明书中所讨论的功能,包括但不限于参考图3和图4示出和描述的功能。在适当的情况下并且基于特定的需要,这些设备还可以在任何适合的存储器元件(随机存取存储器(“RAM”)、ROM、EPROM,EEPROM、ASIC等)、软件、硬件或任何其它适合的组件、设备、元件或对象中保持信息。本文所讨论的任何存储器项应被解释为包括在广义术语“存储器元件”内。类似地,在本说明书中所描述的任何潜在的处理元件、模块和机器应当被解释为包括在广义术语“处理器”内。每个网络元件还可以包括在网络环境中用于接收、发送和/或以其它方式传递数据或信息的适合的接口。
应注意的是,在某些示例实施方案中,本文以及图3和4中概述的功能可以由在一个或多个有形介质中编码的逻辑(例如,在专用集成电路(“ASIC”)中提供的嵌入式逻辑、数字信号处理器(“DSP”)指令、由处理器或其他类似机器执行的软件(可能包括目标代码和源代码)等)实现。在这些实例的一些实例中,存储器元件可以存储用于本文所描述的操作的数据。这包括能够存储被执行以实现本说明书中所描述的活动(包括但不限于参考图3和4所示出和描述的功能)的软件、逻辑、代码或处理器指令的存储器元件。处理器可以执行与用于实现本说明书中详细描述的操作的数据相关联的任何类型的指令。在一个示例中,处理器可以将元件或物品(例如,数据)从一个状态或事物转换到另一个状态或事物。在另一示例中,本文概述的活动可以使用固定逻辑或可编程逻辑(例如,由处理器执行的软件/计算机指令)来实现,并且本文中标识的元件可以是包括有数字逻辑、软件、代码、电子指令或任何其适当组合的某种类型的可编程处理器、可编程数字逻辑(例如,现场可编程门阵列(“FPGA”)、可擦除可编程只读存储器(“EPROM”)、电可擦除可编程ROM(“EEPROM”))或ASIC。
应注意的是,本文所讨论的许多基础设施可以被配设为任何类型的网络元件的一部分。本文所使用的术语“网络元件”或“网络设备”可以包括计算机、服务器、网络器具、主机、路由器、交换机、网关、网桥、虚拟装备、负载平衡器、防火墙、处理器、模块或可操作以在网络环境中交换信息的任何其他适合的设备、组件、元件或对象。此外,网络元件可以包括辅助其操作的任何适合的硬件、软件、组件、模块、接口或对象。这可以包括允许数据或信息有效交换的适合的算法和通信协议。
在一个实施方案中,网络元件/设备(例如,BL节点、DCI节点、CPOM和编配器)可以包括用于实现(或促进)本文所讨论的活动的软件。这可以包括图中所示的任何组件、引擎、逻辑等的实例的实施。此外,这些装置中的每个可具有内部结构(例如,处理器、存储器元件等)以辅助一些本文所描述的操作。在其他实施例中,这些活动可以在这些设备的外部执行,或者被包括在某些其他网络元件中以实现期望的功能。可选择地,为了实现本文所描述的管理活动,这些网络设备可以包括可以与其他网络元件协作的软件(或往复式软件)。在其他实施例中,一个或多个设备可以包括辅助其操作的任何适合的算法、硬件、软件、组件、模块、接口或对象。
应注意的是,使用以上提供的示例以及本文提供的许多其他示例,可以根据两个、三个或四个网络元件来描述相互作用。然而,这仅出于清楚和示例的目的。在某些情形下,通过仅引用有限数目的网络元件来描述一组给定流程的一个或多个功能可能更容易。应理解的是,参考附图(及其教导)示出和描述的拓扑是容易扩展的,并且可以容纳大量组件以及更复杂/精细的布置和配置。相应地,由于所示拓扑可能应用于无数其他架构,所以所提供的示例不应限制所示拓扑的范围并且不应约束所示拓扑的广泛教导。
还应注意的是,前述流程图中的步骤仅示出可以由图中所示的通信系统执行或在其内执行的一些可能的信令场景和模式。在适当的情况下,这些步骤中的一些可以被删除或移除,或者这些步骤可以被显著地修改或改变而不背离本公开的范围。此外,许多这些操作已经被描述为正与一个或多个额外操作同时或并行地执行。然而,这些操作的时序可以被显著地改变。出于示例和讨论的目的提供前述操作流程。由图中所示的通信系统提供了实质的灵活性,因为任何适合的布置、时序、配置和时序机制可以被提供,而不背离本公开的教导。
虽然已参考特定布置和配置详细描述了本公开,但这些示例配置和布置可以被显著地改变而不背离本公开的范围。例如,虽然已经参考特定的通信交换描述了本公开,但是本文所描述的实施例可以适用于其他架构。
所属领域技术人员可以确定许多其它改变、替代、变化、更改和修改,并且本公开旨在包括落入所附权利要求的范围内的所有这样的改变、替代、变化、更改和修改。为了帮助美国专利商标局(USPTO),除此之外,帮助关于本申请被授权的任何专利的任何读者解释所附权利要求,申请人希望注意到申请人:(a)不旨在让所附权利要求中的任一项触及35U.S.C.第112部分的第六(6)段因为它在文件递交时已存在,除非词语“用于…的装置”或“用于…的步骤”在特定的权利要求中被具体使用;并且(b)不旨在通过说明书中的任何陈述来以任何不反映在所附权利要求中的方式限制本公开。

Claims (20)

1.一种用于通信网络中的无接触编配的方法,包括:
从针对通信网络中创建的新的虚拟路由和转发元素VRF的编配器元件接收所述VRF的名称和互连标识;
选择所述VRF的边界元件;
响应于选择所述边界元件在数据库中创建针对被选择的边界元件的VRF条目,所述条目对所述被选择的边界元件的配置概要文件进行标识;
将VRF创建通知转发到所述被选择的边界元件;以及
响应于来自所述被选择的边界元件的对所述数据库的查询,从对应的所述条目向所述被选择的边界元件提供所述配置概要文件;
其中所述被选择的边界元件自动应用所述配置概要文件来配置所述被选择的边界元件。
2.如权利要求1所述的方法,还包括向所述VRF分配网络标识符。
3.如权利要求1所述的方法,其中所述被选择的边界元件包括边界叶节点,该边界叶节点包括数据中心互连DCI功能。
4.如权利要求1所述的方法,其中所述被选择的边界元件包括边界叶节点/DCI节点对。
5.如权利要求4所述的方法,其中所述创建针对所述被选择的边界元件的条目包括创建针对所述边界叶节点/DCI节点对的每个节点的条目,其中所述条目中的每个条目对所述边界叶节点/DCI节点对中的节点的相应一个节点的配置概要文件进行标识。
6.如权利要求5所述的方法,其中,所述提供所述配置概要文件包括向所述边界叶节点/DCI节点对中的节点的每个节点提供相应的配置概要文件。
7.如权利要求1所述的方法,其中所述查询包括提供给所述VRF创建中的所述被选择的边界元件的VRF名称和节点ID。
8.如权利要求1所述的方法,还包括在重启所述被选择的边界元件之后:
从所述被选择的边界元件接收对所述数据库的新查询;以及
响应于所述新查询,从对应的所述条目向所述被选择的边界元件提供所述配置概要文件;
其中所述被选择的边界元件自动应用所述配置概要文件来配置所述被选择的边界元件。
9.一种或多种包括用于执行的代码的非暂时性有形介质,并且当被处理器执行时所述非暂时性有形介质可操作以执行包括以下各项的操作:
从针对通信网络中创建的新的虚拟路由和转发元素VRF的编配器元件接收所述VRF的名称和互连标识;
选择所述VRF的边界元件;
响应于选择所述边界元件在数据库中创建针对被选择的边界元件的VRF条目,所述条目对所述被选择的边界元件的配置概要文件进行标识;
将VRF创建通知转发到所述被选择的边界元件;以及
响应于来自所述被选择的边界元件的对所述数据库的查询,从对应的所述条目向所述被选择的边界元件提供所述配置概要文件;
其中所述被选择的边界元件自动应用所述配置概要文件来配置所述被选择的边界元件。
10.如权利要求9所述的介质,其中所述操作还包括向所述VRF分配网络标识符。
11.如权利要求9所述的介质,其中所述被选择的边界元件包括边界叶节点,该边界叶节点包括数据中心互连DCI功能。
12.如权利要求9所述的介质,其中所述被选择的边界元件包括边界叶节点/DCI节点对。
13.如权利要求12所述的介质,其中所述创建针对所述被选择的边界元件的条目包括创建针对所述边界叶节点/DCI节点对的每个节点的条目,其中所述条目中的每个条目对所述边界叶节点/DCI节点对中的节点的相应一个节点的配置概要文件进行标识;并且其中所述提供所述配置概要文件包括向所述边界叶节点/DCI节点对中的节点的每个节点提供相应的配置概要文件。
14.如权利要求9所述的介质,其中所述VRF创建通知包括所述VRF名称和节点ID,并且其中所述查询包括所述VRF名称和所述节点ID。
15.一种用于通信网络中的无接触编配的装置,包括:
存储器元件,被配置为存储数据;
处理器,可操作以执行与所述数据相关联的指令;以及
管理模块的中心点,被配置为:
从针对通信网络中创建的新的虚拟路由和转发元素VRF的编配器元件接收所述VRF的名称和互连标识;
选择所述VRF的边界元件;
响应于选择所述边界元件在数据库中创建针对被选择的边界元件的VRF条目,所述条目对所述被选择的边界元件的配置概要文件进行标识;
将VRF创建通知转发到所述被选择的边界元件;以及
响应于来自所述被选择的边界元件的对所述数据库的查询,从对应的所述条目向所述被选择的边界元件提供所述配置概要文件;
其中所述被选择的边界元件自动应用所述配置概要文件来配置所述被选择的边界元件。
16.如权利要求15所述的装置,其中所述模块还被配置为向所述VRF分配网络标识符。
17.如权利要求15所述的装置,其中所述被选择的边界元件包括边界叶节点,该边界叶节点包括数据中心互连DCI功能。
18.如权利要求15所述的装置,其中所述被选择的边界元件包括边界叶节点/DCI节点对。
19.如权利要求18所述的装置,其中所述创建针对所述被选择的边界元件的条目包括创建针对所述边界叶节点/DCI节点对的每个节点的条目,其中所述条目中的每个条目对所述边界叶节点/DCI节点对中的节点的相应一个节点的配置概要文件进行标识;并且其中所述提供所述配置概要文件包括向所述边界叶节点/DCI节点对中的节点的每个节点提供相应的配置概要文件。
20.如权利要求15所述的装置,其中所述VRF创建通知包括所述VRF名称和节点ID,并且其中所述查询包括所述VRF名称和所述节点ID。
CN201580027302.0A 2014-05-23 2015-05-22 用于通信网络中的无接触编配的方法、介质、及装置 Active CN106464528B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/286,891 US9716628B2 (en) 2014-05-23 2014-05-23 Touchless orchestration for layer 3 data center interconnect in communications networks
US14/286,891 2014-05-23
PCT/US2015/032260 WO2015179813A1 (en) 2014-05-23 2015-05-22 Touchless orchestration for layer 3 data center interconnect in communications networks

Publications (2)

Publication Number Publication Date
CN106464528A CN106464528A (zh) 2017-02-22
CN106464528B true CN106464528B (zh) 2019-10-08

Family

ID=53442957

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580027302.0A Active CN106464528B (zh) 2014-05-23 2015-05-22 用于通信网络中的无接触编配的方法、介质、及装置

Country Status (4)

Country Link
US (1) US9716628B2 (zh)
EP (1) EP3146676B1 (zh)
CN (1) CN106464528B (zh)
WO (1) WO2015179813A1 (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9485115B2 (en) 2014-04-23 2016-11-01 Cisco Technology, Inc. System and method for enabling conversational learning in a network environment
US9716628B2 (en) 2014-05-23 2017-07-25 Cisco Technology, Inc. Touchless orchestration for layer 3 data center interconnect in communications networks
US9985867B2 (en) 2015-12-11 2018-05-29 Cisco Technology, Inc. Optimizing EVPN for data centers with redundant top-of-rack deployments
US11271870B2 (en) 2016-01-27 2022-03-08 Oracle International Corporation System and method for supporting scalable bit map based P_Key table in a high performance computing environment
US10594627B2 (en) * 2016-01-27 2020-03-17 Oracle International Corporation System and method for supporting scalable representation of switch port status in a high performance computing environment
CN107104871B (zh) * 2016-02-22 2021-11-19 中兴通讯股份有限公司 子网互通方法和装置
CN107800549B (zh) * 2016-08-30 2020-01-03 新华三技术有限公司 基于交换设备的端口实现多租户设备环境mdc的方法和装置
US11232091B2 (en) * 2016-09-29 2022-01-25 Vmware, Inc. Software-defined data center (SDDC) rack quick discovery after hardware management system (HMS) restart
US10684893B2 (en) 2017-02-25 2020-06-16 Vmware, Inc. Methods and apparatus to manage compute resources in a hyperconverged infrastructure computing environment
US10462221B2 (en) 2017-02-25 2019-10-29 Vmware, Inc. Distributed storage resource management in a hyper converged infrastructure
US10491476B2 (en) 2017-08-22 2019-11-26 Cisco Technology, Inc. Extending a virtual local area network across a layer 2 data center interconnect
US10708185B2 (en) 2017-11-30 2020-07-07 Cisco Technology, Inc. Dynamic next-hop selection for routes in a network fabric
US10931568B2 (en) * 2018-07-02 2021-02-23 Hewlett Packard Enterprise Development Lp Hitless maintenance of a L3 network
US11422912B2 (en) 2019-04-19 2022-08-23 Vmware, Inc. Accurate time estimates for operations performed on an SDDC
US11424940B2 (en) 2019-06-01 2022-08-23 Vmware, Inc. Standalone tool for certificate management
US11528188B2 (en) 2019-06-07 2022-12-13 Hewlett Packard Enterprise Development Lp Graphically managing a networking device configuration
US11290332B2 (en) 2019-12-11 2022-03-29 Oracle International Corporation System and method for modelling cloud networks for automation
US11206212B2 (en) * 2019-12-16 2021-12-21 Vmware, Inc. Disambiguating traffic in networking environments with multiple virtual routing and forwarding (VRF) logical routers
US11546228B2 (en) 2021-01-04 2023-01-03 Oracle International Corporation Zero-touch configuration of network devices using hardware metadata

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101636661A (zh) * 2005-06-23 2010-01-27 思科技术公司 用于为冗余站点提供更快收敛的方法和设备
US8943063B2 (en) * 2012-10-10 2015-01-27 Polytechnic Institute Of New York University Generating a tunable finite automaton for regular expression matching

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6704795B1 (en) * 1999-10-12 2004-03-09 Cisco Technology, Inc. Technique for reducing consumption of router resources after BGP restart
US7486659B1 (en) * 2003-02-24 2009-02-03 Nortel Networks Limited Method and apparatus for exchanging routing information between virtual private network sites
US7894434B2 (en) * 2006-07-03 2011-02-22 Hewlett-Packard Development Company, L.P. Method, apparatus, and system for capturing traffic statistics between two sites of MPLS based VPN
US7684354B2 (en) * 2006-08-04 2010-03-23 Schlumberger Technology Corporation Method and system for analyzing the topology of a multiprotocol label switching (MPLS)/virtual private network (VPN) network
US8179905B1 (en) * 2006-09-27 2012-05-15 At&T Intellectual Property Ii, L.P. Method and apparatus for providing communication for virtual private networks
US8619779B2 (en) * 2009-09-30 2013-12-31 Alcatel Lucent Scalable architecture for enterprise extension in a cloud topology
US8532108B2 (en) * 2009-09-30 2013-09-10 Alcatel Lucent Layer 2 seamless site extension of enterprises in cloud computing
US8995446B2 (en) * 2009-12-21 2015-03-31 Cisco Technology, Inc. Efficient generation of VPN-based BGP updates
JP5458999B2 (ja) * 2010-03-19 2014-04-02 富士通株式会社 ネットワーク管理制御プログラム、ネットワーク管理制御装置およびネットワーク管理制御方法
US8699499B2 (en) * 2010-12-08 2014-04-15 At&T Intellectual Property I, L.P. Methods and apparatus to provision cloud computing network elements
US8953590B1 (en) * 2011-03-23 2015-02-10 Juniper Networks, Inc. Layer two virtual private network having control plane address learning supporting multi-homed customer networks
US9356886B2 (en) * 2012-10-05 2016-05-31 Cisco Technology, Inc. Techniques for scalable and foolproof virtual machine move handling with virtual port channels
US8613070B1 (en) 2012-10-12 2013-12-17 Citrix Systems, Inc. Single sign-on access in an orchestration framework for connected devices
US9258210B2 (en) * 2013-10-01 2016-02-09 Juniper Networks, Inc. Dynamic area filtering for link-state routing protocols
US9294349B2 (en) 2013-10-15 2016-03-22 Cisco Technology, Inc. Host traffic driven network orchestration within data center fabric
US9716628B2 (en) 2014-05-23 2017-07-25 Cisco Technology, Inc. Touchless orchestration for layer 3 data center interconnect in communications networks

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101636661A (zh) * 2005-06-23 2010-01-27 思科技术公司 用于为冗余站点提供更快收敛的方法和设备
US8943063B2 (en) * 2012-10-10 2015-01-27 Polytechnic Institute Of New York University Generating a tunable finite automaton for regular expression matching

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Cisco Dynamic Fabric Automation Technology: Overview and;CISCO;《Cisco Dynamic Fabric Automation Technology》;20140520;全文 *

Also Published As

Publication number Publication date
EP3146676A1 (en) 2017-03-29
EP3146676B1 (en) 2019-09-11
US20150341220A1 (en) 2015-11-26
US9716628B2 (en) 2017-07-25
CN106464528A (zh) 2017-02-22
WO2015179813A1 (en) 2015-11-26

Similar Documents

Publication Publication Date Title
CN106464528B (zh) 用于通信网络中的无接触编配的方法、介质、及装置
US10996938B2 (en) Automated selection of software images for network devices
CN105247826B (zh) 网络设备的网络功能虚拟化
US9419811B2 (en) Automatic fabric multicast group selection in a dynamic fabric automation network architecture
US11316738B2 (en) Vendor agnostic profile-based modeling of service access endpoints in a multitenant environment
US9692729B1 (en) Graceful migration of isolated virtual network traffic
JP6950327B2 (ja) スイッチ及びサービス機能のクロスドメイン・オーケストレーション
US10630508B2 (en) Dynamic customer VLAN identifiers in a telecommunications network
CN104584484A (zh) 提供基于策略的数据中心网络自动化的系统和方法
US20160006642A1 (en) Network-wide service controller
Matias et al. An OpenFlow based network virtualization framework for the cloud
US11425028B2 (en) Priority based automated network selection for micro-services in service mesh
US11716250B2 (en) Network scale emulator
US20190227882A1 (en) Upgrade backup in virtualized computing environments
Bozakov et al. Towards a scalable software-defined network virtualization platform
US9166947B1 (en) Maintaining private connections during network interface reconfiguration
US10009253B2 (en) Providing shared resources to virtual devices
US11997011B2 (en) Virtual port group
Figueira et al. SDN multi-domain orchestration and control: Challenges and innovative future directions
Zhao et al. Proactive and hitless vSDN reconfiguration to balance substrate TCAM utilization: From algorithm design to system prototype
Vilalta et al. Experimental validation of resource allocation in transport network slicing using the ADRENALINE testbed
US12021743B1 (en) Software-defined multi-network-segment gateways for scalable routing of traffic between customer-premise network segments and cloud-based virtual networks
US20240333640A1 (en) Custom configuration of cloud-based multi-network-segment gateways
CN113726651B (zh) 一种路由管理方法、设备及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant