JP7275237B2 - 複数のパブリッククラウドに跨る仮想ネットワークの生成 - Google Patents

複数のパブリッククラウドに跨る仮想ネットワークの生成 Download PDF

Info

Publication number
JP7275237B2
JP7275237B2 JP2021197848A JP2021197848A JP7275237B2 JP 7275237 B2 JP7275237 B2 JP 7275237B2 JP 2021197848 A JP2021197848 A JP 2021197848A JP 2021197848 A JP2021197848 A JP 2021197848A JP 7275237 B2 JP7275237 B2 JP 7275237B2
Authority
JP
Japan
Prior art keywords
network address
tenant
mfn
public cloud
address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021197848A
Other languages
English (en)
Other versions
JP2022043118A (ja
Inventor
イスラエル サイドン,
チェン ダール,
プラシャンス ベヌゴパル,
イヤル ゾハール,
アレックス マルクゼ,
アラン バーグマン,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
VMware LLC
Original Assignee
VMware LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by VMware LLC filed Critical VMware LLC
Publication of JP2022043118A publication Critical patent/JP2022043118A/ja
Priority to JP2023076202A priority Critical patent/JP2023109797A/ja
Application granted granted Critical
Publication of JP7275237B2 publication Critical patent/JP7275237B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4641Virtual LANs, VLANs, e.g. virtual private networks [VPN]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/14Charging, metering or billing arrangements for data wireline or wireless communications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/14Charging, metering or billing arrangements for data wireline or wireless communications
    • H04L12/1403Architecture for metering, charging or billing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/14Charging, metering or billing arrangements for data wireline or wireless communications
    • H04L12/1428Invoice generation, e.g. customization, lay-out, database processing, algorithms for calculating the bill or formatting invoices as WWW pages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2854Wide area networks, e.g. public data networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2854Wide area networks, e.g. public data networks
    • H04L12/2856Access arrangements, e.g. Internet access
    • H04L12/2858Access network architectures
    • H04L12/2859Point-to-point connection between the data network and the subscribers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/40Bus networks
    • H04L12/403Bus networks with centralised control, e.g. polling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4633Interconnection of networks using encapsulation techniques, e.g. tunneling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/66Arrangements for connecting between networks having differing types of switching systems, e.g. gateways
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0895Configuration of virtualised networks or elements, e.g. virtualised network function or OpenFlow elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0823Errors, e.g. transmission errors
    • H04L43/0829Packet loss
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0852Delays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876Network utilisation, e.g. volume of load or congestion level
    • H04L43/0888Throughput
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/02Topology update or discovery
    • H04L45/04Interdomain routing, e.g. hierarchical routing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/12Shortest path evaluation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/14Routing performance; Theoretical aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/64Routing or path finding of packets in data switching networks using an overlay routing layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/74Address processing for routing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/74Address processing for routing
    • H04L45/745Address table lookup; Address filtering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/09Mapping addresses
    • H04L61/25Mapping addresses of the same type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/09Mapping addresses
    • H04L61/25Mapping addresses of the same type
    • H04L61/2503Translation of Internet protocol [IP] addresses
    • H04L61/2514Translation of Internet protocol [IP] addresses between local and global IP addresses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/09Mapping addresses
    • H04L61/25Mapping addresses of the same type
    • H04L61/2503Translation of Internet protocol [IP] addresses
    • H04L61/255Maintenance or indexing of mapping tables
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/45Network directories; Name-to-address mapping
    • H04L61/4505Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • H04L61/4511Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0227Filtering policies
    • H04L63/0245Filtering by information in the payload
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0272Virtual private networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/029Firewall traversal, e.g. tunnelling or, creating pinholes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/20Network architectures or network communication protocols for network security for managing network security; network security policies in general
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M15/00Arrangements for metering, time-control or time indication ; Metering, charging or billing arrangements for voice wireline or wireless communications, e.g. VoIP
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M15/00Arrangements for metering, time-control or time indication ; Metering, charging or billing arrangements for voice wireline or wireless communications, e.g. VoIP
    • H04M15/51Arrangements for metering, time-control or time indication ; Metering, charging or billing arrangements for voice wireline or wireless communications, e.g. VoIP for resellers, retailers or service providers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • G06F2009/45562Creating, deleting, cloning virtual machine instances
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • G06F2009/45587Isolation or security of virtual machine instances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2101/00Indexing scheme associated with group H04L61/00
    • H04L2101/30Types of network names
    • H04L2101/35Types of network names containing special prefixes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2212/00Encapsulation of packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/04Network management architectures or arrangements
    • H04L41/046Network management architectures or arrangements comprising network management agents or mobile agents therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/40Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks using virtualisation of network functions or resources, e.g. SDN or NFV entities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/09Mapping addresses
    • H04L61/25Mapping addresses of the same type
    • H04L61/2503Translation of Internet protocol [IP] addresses
    • H04L61/256NAT traversal
    • H04L61/2567NAT traversal for reachability, e.g. inquiring the address of a correspondent behind a NAT server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0227Filtering policies
    • H04L63/0263Rule management
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0281Proxies

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Environmental & Geological Engineering (AREA)
  • Databases & Information Systems (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Details Of Aerials (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Position Fixing By Use Of Radio Waves (AREA)
  • Radar Systems Or Details Thereof (AREA)

Description

現在、企業エンタープライズネットワークは、企業のさまざまなオフィスや部門を安全に接続する通信バックボーンである。このネットワークは、通常、広域ネットワーク(WAN)で、(1)支店および地域キャンパスのユーザ、(2)ビジネスアプリケーション、イントラネット、およびそれらに対応するデータをホストする企業データセンタ、(3)企業ファイアウォールおよびDMZ(非武装地帯)を介してグローバルインターネットを接続する。エンタープライズネットワークには、フレームリレーやMPLS(マルチプロトコル・ラベル・スイッチング)などの高価なリース回線によって相互接続されたスイッチ、ルータ、ミドルボックスアプライアンスなどの特殊なハードウェアが含まれる。
ここ数年、企業がコミュニケーションサービスを提供し、利用する方法にパラダイムシフトがあった。まず、モビリティ革命により、ユーザはいつでも、スマートフォンを中心としたモバイルデバイスを使用して、どこからでもサービスにアクセスできるようになった。このようなユーザは、パブリックインターネットおよびセルラネットワークを介してビジネスサービスにアクセスする。同時に、サードパーティのSaaS(Software as a Service)ベンダ(例えばSalesforce、Workday、Zendeskなど)が従来のオンプレミスアプリケーションに取って代わり、プライベートデータセンタでホストされている他のアプリケーションがパブリッククラウドに再配置されてきた。このトラフィックはまだエンタープライズネットワーク内で伝送されているが、その大部分は企業ネットワーク境界の外側で発信および終端され、パブリックインターネットと企業ネットワークの両方を(1度または2度)通過する必要がある。最近の研究では、企業ネットワークの40%が、バックホールされたトラフィック(すなわち、企業ネットワークで観測されたインターネットトラフィック)の割合が80%以上であることを報告している。これは、企業トラフィックの大半が高価な専用線と消費者用インターネットの両方を介して伝送されることを意味する。
消費者中心のサービスとしては、インターネット自体はビジネストラフィックに対して劣悪な媒体である。これは、重要なビジネスアプリケーションにおいて期待される、信頼性、QoS(Quality of Service)保証およびセキュリティを欠いている。さらに、絶えず増加する消費者トラフィック需要、ネット中立性規制、及びメジャーなプレーヤ(例えば、Netflix、Google、パブリッククラウド)によるインターネットバイパスの創出により、トラフィックの単位あたりの収益は低下してきた。このような傾向により、サービスプロバイダが消費者の要求に迅速に対応し、適切なビジネスサービスを提供するインセンティブが減少している。
パブリッククラウドの成長により、企業はより多くのコンピューティング基盤をパブリッククラウドデータセンタに移行している。パブリッククラウドプロバイダは、コンピューティングおよびネットワーク基盤への投資の先頭に立っている。これらのクラウドサービスは、2016年にはAzure、AWS、IBMおよびGoogleを用いてそれぞれ世界中の領域の38、16、25および14にまで拡大している、多くのデータセンタを世界中に構築してきた。各パブリッククラウドプロバイダは、潜水船によって配備された暗いファイバケーブルと海底ケーブルを使用する高価な高速ネットワークを使用して、独自のデータセンタを相互接続している。
今日では、このような変化にもかかわらず、企業のネットワークポリシによって、すべての企業トラフィックがセキュアなWANゲートウェイを通過するよう強制されることがよくある。ユーザがモバイル化し、アプリケーションがSaaSやパブリッククラウドに移行するにつれて、企業WANは全ての企業通信を低速化させるコストのかかる回り道となっている。企業WANのトラフィックのほとんどは、インターネットから送信されるか、インターネットへ送信される。インターネットを介してこのトラフィックを送信する代替的なセキュアなソリューションは、パフォーマンスが低く信頼性が低いため、適切ではない。
いくつかの実施形態は、1つ以上の領域(例えば、複数の都市、州、国など)の1つ以上のパブリッククラウドプロバイダの複数のパブリッククラウドデータセンタを介して、エンティティに対する仮想ネットワークを確立する。このような仮想ネットワークを確立することができるエンティティの例には、ビジネスエンティティ(例えば、企業)、非営利エンティティ(例えば、病院、研究組織など)、教育エンティティ(例えば、総合大学、カレッジなど)、または他の任意のタイプのエンティティが含まれ得る。パブリッククラウドプロバイダーの例としては、Amazon Web Services (AWS)、Google Cloud Platform (GCP)、Microsoft Azureなどが含まれる。
いくつかの実施形態では、高速で信頼性の高いプライベートネットワークは、2つ以上のパブリッククラウドデータセンタ(パブリッククラウド)を相互接続する。いくつかの実施形態は、仮想ネットワークを、1つ以上のプライベートネットワーク(例えば、支社、部門、エンティティの部門、またはそれらに関連するデータセンタ内のネットワーク)、モバイルユーザ、SaaS(Software as a Service)プロバイダマシン、パブリッククラウド内のマシンおよび/またはサービス、およびその他のウェブアプリケーションを相互接続するための、複数のパブリッククラウドにまたがるオーバーレイネットワークとして定義する。
いくつかの実施形態における仮想ネットワークは、インターネットを介したこのトラフィックのルーティングを最小化しようとする一方で、最適なエンドツーエンドの性能、信頼性、およびセキュリティのために、エンティティのデータメッセージの宛先へのルーティングを最適化するように構成することができる。また、いくつかの実施形態における仮想ネットワークは、ネットワークを通過するデータメッセージフローのレイヤ4処理を最適化するように構成することができる。例えば、いくつかの実施形態では、仮想ネットワークは、接続パスにわたってレート制御機構を分割することによって、TCP(トランスポート制御プロトコル)接続のエンドツーエンドのレートを最適化する。
いくつかの実施形態では、複数のパブリッククラウドに展開される複数のコンポーネントを構成することによって、仮想ネットワークを確立する。これらのコンポーネントには、いくつかの実施形態において、ソフトウェアベースの測定エージェント、ソフトウェア転送要素(例えば、ソフトウェアルータ、スイッチ、ゲートウェイ等)、レイヤ4接続プロキシ及びミドルボックスサービスマシン(例えば、アプライアンス、VM、コンテナ等)が含まれる。いくつかの実施形態では、これらのコンポーネントの1つ以上が、Open vSwitch、OpenVPN、strongSwan、およびRyuなどの標準化され、または一般的に利用可能なソリューションを使用する。
いくつかの実施形態は、複数のパブリッククラウド上で仮想ネットワークを実装するために、パブリッククラウドコンポーネントを構成する論理的に集中化されたコントローラクラスタ(例えば、1つ以上のコントローラサーバのセット)を利用する。いくつかの実施形態では、冗長性および高可用性を改善するために、このクラスタ内のコントローラは、様々な異なるロケーション(例えば、異なるパブリッククラウドデータセンタ内)に存在する。いくつかの実施形態では、コントローラクラスタは、仮想ネットワークを確立するために使用されるパブリッククラウドコンポーネントの数、またはこれらのコンポーネントに割り当てられるコンピューティングまたはネットワークリソースを、スケールアップまたはスケールダウンする。
いくつかの実施形態では、同じパブリッククラウドプロバイダの同じパブリッククラウドのセット、および/または同じパブリッククラウドプロバイダまたは異なるパブリッククラウドプロバイダの異なるパブリッククラウドのセット上に、異なるエンティティのための異なる仮想ネットワークを確立する。いくつかの実施形態では、仮想ネットワークプロバイダは、異なるテナントが同じまたは異なるパブリッククラウド上で異なる仮想ネットワークを定義することを可能にするソフトウェアおよびサービスを提供する。いくつかの実施形態では、同じコントローラクラスタまたは異なるコントローラクラスタを使用して、パブリッククラウドコンポーネントを構成し、複数の異なるエンティティに対して同じまたは異なるパブリッククラウドのセット上の異なる仮想ネットワークを実装することができる。
1つ以上のパブリッククラウド上にテナントの仮想ネットワークをデプロイするため、コントローラクラスタは、(1)テナントの支店、データセンタ、モバイルユーザおよびSaaSプロバイダのロケーションに基づいて、テナントの仮想ネットワークに出入りする可能性のある入出力ルータを識別し、(2)仮想ネットワークを実装する他の中間パブリッククラウドルータを介して、識別された入力ルータから識別された出力ルータへ通過する経路を識別する。これらの経路を識別した後、コントローラクラスタはこれらの経路を(1つ以上の)パブリッククラウド内の仮想ネットワークルータの転送テーブルに伝播する。OVSベースの仮想ネットワークルータを使用する実施形態では、コントローラはOpenFlowを使用して経路を配信する。
前述の概要は、本発明のいくつかの実施形態の簡単な紹介として役立つように意図されている。本書において開示されているすべての発明の主題の紹介または概要を意味するものではない。以下の詳細な説明および詳細な説明で参照される図面は、概要ならびに他の実施形態で説明される実施形態をさらに説明する。したがって、本書面によって説明されるすべての実施形態を理解するために、概要、詳細な説明、図面、および特許請求の範囲の全体的な検討が必要である。さらに、特許請求の範囲に記載される主題は、概要、詳細な説明、および図面における例示的な詳細によって限定されるべきではない。
本発明の新規な特徴は、添付の特許請求の範囲に記載されている。しかしながら、説明のために、本発明のいくつかの実施形態を以下の図に示す。
図1Aは、2つのパブリッククラウドプロバイダの複数のパブリッククラウドデータセンタ上に、1つの企業に対して定義された仮想ネットワークを示している。
図1Bは、パブリッククラウド上にデプロイされた、2つの企業テナントに対する2つの仮想ネットワークの例を示している。
図1Cは、パブリッククラウド上にデプロイされた1つのネットワークと、パブリッククラウドの別のペア上にデプロイされたもう1つの仮想ネットワークの、2つの仮想ネットワークの例を代替的に示している。
図2は、本発明のいくつかの実施形態の管理転送ノードおよびコントローラクラスタの例を示す。
図3は、いくつかの実施形態において、コントローラ測定処理レイヤが生成する測定グラフの例を示す。
図4Aは、いくつかの実施形態において、測定グラフからコントローラパス識別レイヤが生成するルーティンググラフの例を示す。
図4Bは、2つのSaaSプロバイダの既知のIPを、これらのSaaSプロバイダのデータセンタに最も近いデータセンタにあるルーティンググラフの2つのノードに追加する例を示している。
図4Cは、2つのSaaSプロバイダを表すために2つのノードを追加することによって生成されるルーティンググラフを示す。
図4Dは、2つのパブリッククラウドにそれぞれ接続する既知のIPアドレスを持つ支店とデータセンタを表すために追加されたノードを含むルーティンググラフを示している。
図5は、コントローラ測定レイヤから受信した測定グラフからルーティンググラフを生成するために、コントローラパス識別レイヤが使用するプロセスを示す。
図6は、いくつかの実施形態のIPsecデータメッセージフォーマットを示す。
図7は、いくつかの実施形態の2つのカプセル化ヘッダの例を示し、図8は、いくつかの実施形態においてこれら2つのヘッダがどのように使用されるかを説明する例を示す。
図9から図11は、2つの異なる支店の2つのコンピューティングデバイス間で送信されるメッセージを受信したときに、入力、中間、および出力MFNによってそれぞれ実行されるメッセージ処理プロセスを示している。
図12は、入力MFNと出力MFNの間に中間MFNを含まない例を示す。
図13は、支店の企業コンピューティングデバイスから別の支店またはSaaSプロバイダデータセンタ内の別のデバイスに送信されるメッセージを受信したときに、入力MFNのCFEによって実行されるメッセージ処理プロセスを示している。
図14は、出力ルータで実行されているNAT動作を示している。
図15は、SaaSプロバイダマシンからテナントマシンに送信されるメッセージを受信する入力ルータによって実行されるメッセージ処理プロセスを示している。
図16は、仮想ネットワークのインターネットへの出力パス上にある各仮想ネットワークゲートウェイに配置されるTMエンジンを示している。
図17は、図16に示された単一NATアプローチの代わりに、いくつかの実施形態において使用されるダブルNATアプローチを示す。
図18は、入力NATエンジンの送信元ポート変換を示す例を示している。
図19は、図18のデータメッセージの処理に応答してSaaSマシンが送信する応答メッセージの処理を示す。
図20は、1つ以上のパブリッククラウドプロバイダのN個のパブリッククラウドにネットワーク基盤とコントローラクラスタとを有する、仮想ネットワークプロバイダのM個のテナントに対するM個の仮想企業WANの例を示している。
図21は、仮想ネットワークプロバイダのコントローラクラスタによって実行される、特定のテナントに対して仮想WANをデプロイおよび管理するプロセスを概念的に示している。
図22は、本発明のいくつかの実施形態が実装されるコンピュータシステムを概念的に示している。
本発明の以下の詳細な説明では、本発明の多数の詳細、例および実施形態を説明する。しかしながら、当業者であれば、本発明は、記載された実施形態に限定されず、また、本発明は、説明された特定の詳細および実施例の一部を伴わずに実施することができることは明らか且つ自明である。
いくつかの実施形態は、1つ以上の領域(例えば、複数の都市、州、国など)の1つ以上のパブリッククラウドプロバイダの複数のパブリッククラウドデータセンタを介して、エンティティに対する仮想ネットワークを確立する。このような仮想ネットワークを確立することができるエンティティの例には、ビジネスエンティティ(例えば、企業)、非営利エンティティ(例えば、病院、研究組織など)、教育エンティティ(例えば、総合大学、カレッジなど)、または他の任意のタイプのエンティティが含まれ得る。パブリッククラウドプロバイダの例としては、Amazon Web Services (AWS)、Google Cloud Platform (GCP)、Microsoft Azureなどが含まれる。
いくつかの実施形態は、仮想ネットワークを、複数のパブリッククラウドデータセンタ(パブリッククラウド)にまたがって、1つ以上のプライベートネットワーク(例えば、支社、部門、部署、またはそれらに関連するデータセンタ内のネットワーク)、モバイルユーザ、SaaS (Software as a Service)プロバイダマシン、パブリッククラウド内のマシンおよび/またはサービス、およびその他のウェブアプリケーションを相互接続するオーバーレイネットワークとして定義する。いくつかの実施形態では、高速で信頼性の高いプライベートネットワークは、2つ以上のパブリッククラウドデータセンタを相互接続する。
いくつかの実施形態における仮想ネットワークは、インターネットを介したこのトラフィックのルーティングを最小化しようとする一方で、最適なエンドツーエンドの性能、信頼性、およびセキュリティのために、エンティティのデータメッセージの宛先へのルーティングを最適化するように構成することができる。また、いくつかの実施形態における仮想ネットワークは、ネットワークを通過するデータメッセージフローのレイヤ4処理を最適化するように構成することができる。例えば、いくつかの実施形態では、仮想ネットワークは、接続パスにわたってレート制御機構を分割することによって、TCP(トランスポート制御プロトコル)接続のエンドツーエンドのレートを最適化する。
いくつかの実施形態では、複数のパブリッククラウドに展開される複数のコンポーネントを構成することによって、仮想ネットワークを確立する。これらのコンポーネントには、いくつかの実施形態において、ソフトウェアベースの測定エージェント、ソフトウェア転送要素(例えば、ソフトウェアルータ、スイッチ、ゲートウェイ等)、レイヤ4接続プロキシ及びミドルボックスサービスマシン(例えば、アプライアンス、VM、コンテナ等)が含まれる。
いくつかの実施形態は、パブリッククラウドコンポーネントを構成する論理的に集中化されたコントローラクラスタ(例えば、1つ以上のコントローラサーバのセット)を利用して、複数のパブリッククラウド上で仮想ネットワークを実装する。いくつかの実施形態では、冗長性および高可用性を改善するために、このクラスタ内のコントローラは、様々な異なるロケーション(例えば、異なるパブリッククラウドデータセンタ内)に存在する。コントローラクラスタ内の異なるコントローラが異なるパブリッククラウドデータセンタに配置されている場合、いくつかの実施形態のコントローラは、それらの状態(例えば、テナントを識別するためにそれらが生成する構成データ、仮想ネットワークを通る経路など)を共有する。いくつかの実施形態では、コントローラクラスタは、仮想ネットワークを確立するために使用されるパブリッククラウドコンポーネントの数、またはこれらのコンポーネントに割り当てられるコンピューティングまたはネットワークリソースを、スケールアップまたはスケールダウンする。
いくつかの実施形態では、同じパブリッククラウドプロバイダの同じパブリッククラウドのセット、および/または同じパブリッククラウドプロバイダまたは異なるパブリッククラウドプロバイダの異なるパブリッククラウドのセット上に、異なるエンティティのための異なる仮想ネットワークを確立する。いくつかの実施形態では、仮想ネットワークプロバイダは、異なるテナントが同じまたは異なるパブリッククラウド上で異なる仮想ネットワークを定義することを可能にするソフトウェアおよびサービスを提供する。いくつかの実施形態では、同じコントローラクラスタまたは異なるコントローラクラスタを使用して、パブリッククラウドコンポーネントを構成し、複数の異なるエンティティに対して同じまたは異なるパブリッククラウドのセット上の異なる仮想ネットワークを実装することができる。
以下の説明では、企業の仮想ネットワークのいくつかの例を示す。しかしながら、当業者は、いくつかの実施形態は他の事業体、非営利組織、教育組織などの他のタイプのエンティティのための仮想ネットワークを定義することを理解するであろう。また、本明細書で使用されているように、データメッセージは、ネットワークを介して送信される特定の形式のビットの集合を指す。当業者であれば、データメッセージという用語は、ネットワークを介して送信される様々なフォーマット化されたビットの集合を指すように本書で用いられることを理解するであろう。これらのビットのフォーマットは、標準化されたプロトコルまたは標準化されていないプロトコルによって指定することができる。標準化されたプロトコルに従ったデータメッセージの例としては、イーサネットフレーム、IPパケット、TCPセグメント、UDPデータグラムなどがある。また、本明細書で使用するL2、L3、L4、L7レイヤ(またはレイヤ2、レイヤ3、レイヤ4、レイヤ7)は、OSI(Open System Interconnection)レイヤモデルの第2データリンクレイヤ、第3ネットワークレイヤ、第4トランスポートレイヤ、第7レイヤプリケーションレイヤをそれぞれ参照している。
図1Aは、2つのパブリッククラウドプロバイダAおよびBの複数のパブリッククラウドデータセンタ105および110上の、企業に対して定義される仮想ネットワーク100を示す。図示するように、仮想ネットワーク100は、異なるパブリッククラウドに異なる管理転送ノード150を配置し、オーバレイトンネル152を介して管理転送ノード(MFN)を相互に接続することによって確立されるセキュアなオーバレイネットワークである。いくつかの実施形態では、MFNは、パブリッククラウドデータセンタ内のいくつかの異なるコンポーネントを概念的にグループ化したものであり、他のパブリッククラウドデータセンタ内の他のMFN(他のコンポーネントのグループと共に)が、1つ以上のエンティティに対して1つ以上のオーバレイ仮想ネットワークを確立する。
以下にさらに説明するように、MFNを形成するコンポーネントのグループは、いくつかの実施形態において、(1)パブリッククラウドデータセンタの外にある外部マシンロケーションである、エンティティのコンピューティングノード(例えば、オフィス、プライベートデータセンタ、リモートユーザなど)とVPN接続を確立する1つ以上のVPNゲートウェイ、(2)共有パブリッククラウドネットワークファブリック上でオーバレイ仮想ネットワークを定義するために、カプセル化されたデータメッセージを相互に転送する1つ以上の転送要素、(3)ミドルボックスサービス動作およびL4-L7最適化を実行する1つ以上のサービスマシン、および(4)パブリッククラウドデータセンタを通る所望のパスを識別するために、パブリッククラウドデータセンタ間のネットワーク接続品質に関する測定値を取得する1つ以上の測定エージェントを含む。いくつかの実施形態では、異なるMFNは、そのようなコンポーネントを異なる配置及び異なる数で有することができ、1つのMFNは、冗長性とスケーラビリティの理由により、そのようなコンポーネントを異なる数で有することができる。
また、いくつかの実施形態では、各MFNのコンポーネントのグループは、MFNのパブリッククラウドデータセンタ内の異なるコンピュータ上で実行される。いくつかの実施形態では、MFNのコンポーネントのいくつかまたはすべてをパブリッククラウドデータセンタの1つのコンピュータ上で実行することができる。いくつかの実施形態におけるMFNのコンポーネントは、他のテナントの他のマシンも実行するホストコンピュータ上で実行される。これらの他のマシンは、他のテナントの他のMFNの他のマシンであっても、他のテナントの関連のないマシン(コンピューティング仮想マシンやコンテナなど)であってもよい。
いくつかの実施形態における仮想ネットワーク100は、異なるエンティティ(例えば、仮想ネットワークプロバイダの異なる企業顧客/テナント)のために、同一または異なるパブリッククラウドデータセンタ上に異なる仮想ネットワークをデプロイする仮想ネットワークプロバイダによってデプロイ(配備)される。いくつかの実施形態における仮想ネットワークプロバイダは、MFNをデプロイし、これらのMFNを構成および管理するためのコントローラクラスタを提供するエンティティである。
仮想ネットワーク100は、企業のコンピューティングエンドポイント(データセンタ、支店、モバイルユーザなど)を、相互に、及び、パブリッククラウド内に存在するか、またはインターネットを介してアクセス可能なプライベートデータセンタに常駐する外部サービス(パブリックウェブサービス、またはOffice365やSalesforceなどのSaaSサービス)に、接続する。この仮想ネットワークは、異なるパブリッククラウドのさまざまなロケーションを利用して、異なる企業のコンピューティングエンドポイント(異なるプライベートネットワークや企業の異なるモバイルユーザなど)をその周辺のパブリッククラウドに接続する。企業のコンピューティングエンドポイントは、以下の説明では企業コンピューティングノードとも呼ばれる。
いくつかの実施形態では、仮想ネットワーク100は、これらのパブリッククラウドを相互接続する高速ネットワークを利用して、パブリッククラウドを通るデータメッセージをその宛先に転送するか、またはその宛先にできるだけ近づけながら、インターネットを通るデータメッセージの横断を低減する。企業のコンピューティングエンドポイントが、仮想ネットワークがまたがるパブリッククラウドデータセンタの外部にある場合、これらのエンドポイントは外部マシンロケーションと呼ばれる。これは、企業の支店、プライベートデータセンタ、およびリモートユーザのデバイスについての場合である。
図1Aに示す例では、仮想ネットワーク100は、パブリッククラウドプロバイダAの6つのデータセンタ105aから105fと、パブリッククラウドプロバイダBの4つのデータセンタ110aから110dにまたがっている。これらのパブリッククラウドにまたがって、この仮想ネットワークは、異なる地理的領域に位置する企業テナントのいくつかの支店、企業データセンタ、SaaSプロバイダ、およびモバイルユーザを接続する。具体的には、仮想ネットワーク100は、2つの異なる都市(例えば、カリフォルニア州サンフランシスコおよびインドのプネー(Pune))の2つの支店130aおよび130b、別の都市(例えば、ワシントン州シアトル)の1つの企業データセンタ134、別の2つの都市(ワシントン州レッドモンドおよびフランスのパリ)の2つのSaaSプロバイダデータセンタ136aおよび136b、および世界の様々な場所のモバイルユーザ140を接続する。そのため、この仮想ネットワークは仮想企業WANとして見ることができる。
いくつかの実施形態では、支店130aおよび130bは、支店の場所にあるコンピュータと、パブリッククラウドの外部にある支店のプライベートデータセンタとを接続する自身のプライベートネットワーク(例えば、ローカルエリアネットワーク)を有する。同様に、いくつかの実施形態における企業データセンタ134は、自身のプライベートネットワークを有し、パブリッククラウドデータセンタの外部に存在する。しかしながら、他の実施形態では、企業データセンタ134または支店130aおよび130bのデータセンタはパブリッククラウド内にあってもよいが、仮想ネットワークは、企業データセンタまたは支店データセンタが仮想ネットワーク100のエッジに接続するので、このパブリッククラウドにはまたがらない。
上述のように、仮想ネットワーク100は、オーバレイトンネル152を介して、異なるパブリッククラウド内の、デプロイされている異なる管理転送ノード150を接続することによって確立される。各管理転送ノード150は、いくつかの構成可能なコンポーネントを含む。上述し、さらに以下に説明するように、MFNコンポーネントは、いくつかの実施形態において、ソフトウェアベースの測定エージェント、ソフトウェア転送要素(例えば、ソフトウェアルータ、スイッチ、ゲートウェイなど)、レイヤ4プロキシ(例えば、TCPプロキシ)、およびミドルボックスサービスマシン(例えば、VM、コンテナなど)を含む。いくつかの実施形態におけるこれらのコンポーネントのうちの1つ以上は、Open vSwitch、OpenVPN、strongSwanなどの標準化された、または一般的に利用可能なソリューションを使用する。
いくつかの実施形態では、各MFN(すなわち、概念的にMFNを形成するコンポーネントのグループ)は、パブリッククラウドデータセンタにMFNを配置および設定する仮想ネットワークプロバイダの異なるテナントによって共有され得る。結合的にまたは代替的に、いくつかの実施形態における仮想ネットワークプロバイダは、特定のテナントのために、1つ以上のパブリッククラウドデータセンタに一意のMFNのセットをデプロイすることができる。例えば、セキュリティ上の理由やサービス品質上の理由から、特定のテナントが別のテナントとMFNリソースを共有したくない場合がある。このようなテナントの場合、仮想ネットワークプロバイダは、複数のパブリッククラウドデータセンタに自身のMFNのセットをデプロイすることができる。
いくつかの実施形態では、論理的に集中化されたコントローラクラスタ160(例えば、1つ以上のコントローラサーバのセット)は、パブリッククラウド105および110の1つ以上の内外で動作し、管理転送ノード150のパブリッククラウドコンポーネントを構成して、パブリッククラウド105および110上に仮想ネットワークを実装する。いくつかの実施形態では、冗長性および高可用性を改善するために、このクラスタ内のコントローラは、様々なロケーション(例えば、異なるパブリッククラウドデータセンタ内)に存在する。いくつかの実施形態では、コントローラクラスタは、仮想ネットワークを確立するために使用されるパブリッククラウドコンポーネントの数、またはこれらのコンポーネントに割り当てられるコンピューティングまたはネットワークリソースを、スケールアップまたはスケールダウンする。
いくつかの実施形態では、コントローラクラスタ160、または仮想ネットワークプロバイダの別のコントローラクラスタは、同じパブリッククラウド105および110上に、および/または異なるパブリッククラウドプロバイダの異なるパブリッククラウド上に、別の企業テナントのための別の仮想ネットワークを確立する。コントローラクラスタに加えて、他の実施形態の仮想ネットワークプロバイダは、異なるテナントが同一または異なるパブリッククラウド上に異なる仮想ネットワークをデプロイすることを可能にする転送要素およびサービスマシンをパブリッククラウド内にデプロイする。図1Bは、パブリッククラウド105および110上にデプロイされた2つの企業テナントの2つの仮想ネットワーク100および180の例を示している。図1Cは、代替的に、パブリッククラウド105および110上にデプロイされた1つのネットワーク100と、パブリッククラウド110および115の別のペア上にデプロイされた他の仮想ネットワーク182とを備える、2つの仮想ネットワーク100および182の例を示す。
MFNの構成されたコンポーネントを介して、図1Aの仮想ネットワーク100は、企業テナントの異なるプライベートネットワークおよび/または異なるモバイルユーザが、これらのプライベートネットワークおよび/またはモバイルユーザに関して、(例えば、接続速度、損失、遅延および/またはコストに関して、物理的距離に関して、および/または、ネットワーク接続信頼性等に関して測定されるような)最適なロケーションにある異なるパブリッククラウドに接続することを可能にする。これらのコンポーネントはまた、いくつかの実施形態における仮想ネットワーク100が、パブリッククラウドを相互接続する高速ネットワークを使用して、パブリッククラウドを通過するデータメッセージを、インターネットを通過するそれらのトラバーサルを低減しながら、それらの宛先に転送することを可能にする。
いくつかの実施形態では、MFNコンポーネントはまた、エンドツーエンドのパフォーマンス、信頼性およびセキュリティを最適化する、ネットワークレイヤ、トランスポートレイヤおよびアプリケーションレイヤでの新規なプロセスを実行するように構成される。いくつかの実施形態では、これらのプロセスのうちの1つ以上は、現在のネットワークプロトコルの硬直化から解放された独自の高性能ネットワーキングプロトコルを実装する。したがって、いくつかの実施形態における仮想ネットワーク100は、インターネット自律システム、ルーティングプロトコル、またはエンドツーエンドのトランスポート機構によって制限されない。
例えば、いくつかの実施形態では、MFN150のコンポーネントは、(1)最適化されたマルチパスおよび適応的な集中化ルーティングを生成し、(2)強力なQoSを提供し、(3)中間TCP分割および/または終端を通してエンドツーエンドのTCPレートを最適化し、(4)スケーラブルなアプリケーションレベルのミドルボックスサービス(例えば、ファイアウォール、侵入検知システム(IDS)、侵入防御システム(IPS)、WAN最適化など)を、グローバルネットワーク機能の仮想化(NFV)におけるクラウドのコンピューティング部分に再配置する。従って、既存のネットワークプロトコルに拘束されることなく、企業のカスタマイズされ且つ変化する要求に適合するように、仮想ネットワークを最適化することができる。また、いくつかの実施形態では、仮想ネットワークは、継続的な要求の変化に応じて、性能のケイパビリティと地理的広がりの両方において、動的かつ弾力的にスケールアップ/ダウンすることができる「従量制(pay as you go)」基盤として構成することができる。
仮想ネットワーク100を実装するためには、仮想ネットワークがまたがった各パブリッククラウドデータセンタ105aから105fおよび110aから110d内の少なくとも1つの管理転送ノード150を、コントローラのセットによって構成されなければならない。図2は、本発明のいくつかの実施形態の管理転送ノード150およびコントローラクラスタ160の例を示す。いくつかの実施形態では、各管理転送ノード150は、パブリッククラウドデータセンタ内のホストコンピュータ上で動作するマシン(例えば、VM又はコンテナ)である。他の実施形態では、各管理転送ノード150は、1つのパブリッククラウドデータセンタ内の同じホストコンピュータ上で動作する複数のマシン(例えば、複数のVMまたはコンテナ)によって実現される。さらに他の実施形態では、1つのMFNの2つ以上のコンポーネントは、1つ以上のパブリッククラウドデータセンタ内の2つ以上のホストコンピュータ上で動作する2つ以上のマシンによって実現され得る。
図示されるように、管理転送ノード150は、測定エージェント205、ファイアウォールおよびNATミドルボックスサービスエンジン210および215、1つ以上の最適化エンジン220、エッジゲートウェイ225および230、およびクラウド転送要素235(例えば、クラウドルータ)を含む。いくつかの実施形態では、これらのコンポーネント205から235の各々は、2つ以上のコンポーネントのクラスタとして実装され得る。
いくつかの実施形態におけるコントローラクラスタ160は、各コンポーネントクラスタを動的にスケールアップまたはスケールダウンして、(1)各コンポーネントの機能を実装するためのマシン(例えば、VMまたはコンテナ)を追加または削除すること、および/または(2)そのクラスタのコンポーネントを実装する以前に配置されたマシンにコンピューティングおよび/またはネットワークリソースを追加または削除することができる。したがって、パブリッククラウドデータセンタ内に配置された各MFN150を、MFNのクラスタとして見る、或いは、MFNの異なる動作を実行する複数の異なるコンポーネントクラスタを含むノードとして見ることができる。
また、いくつかの実施形態では、コントローラクラスタは、パブリッククラウドデータセンタ上に仮想ネットワークを定義する異なるテナントに対して、コントローラクラスタがパブリッククラウドデータセンタに異なるMFNのセットをデプロイする。このアプローチでは、任意の2つのテナントの仮想ネットワークは、MFNを共有しない。ただし、以下に説明する実施形態では、各MFNを用いて、異なるテナントに対して異なる仮想ネットワークを実装することができる。他の実施形態では、コントローラクラスタ160は、デプロイされた自身専用のMFNのセットを有するテナントの第1のセットの各テナントの仮想ネットワークを実装する一方で、デプロイされたMFNの共有セットを有するテナントの第2のセットの各テナントの仮想ネットワークを実装することができることを、当業者は理解するであろう。
いくつかの実施形態では、図2に示すように、支店ゲートウェイ225およびリモートデバイスゲートウェイ230は、MFN150に接続する1つ以上の支店130およびリモートデバイス(例えば、モバイルデバイス140)とそれぞれセキュアVPN接続を確立する。このようなVPN接続の一例は、以下でさらに説明するIPsec接続である。しかしながら、当業者は、他の実施形態では、このようなゲートウェイ225および/または230が異なるタイプのVPN接続を確立することを理解するであろう。
いくつかの実施形態におけるMFN150は、ファイアウォール動作、NAT動作、IPS動作、IDS動作、負荷分散動作、WAN最適化動作など、1つ以上のミドルボックスサービス動作を実行する1つ以上のミドルボックスエンジンを含む。これらのミドルボックス動作(例えば、ファイアウォール動作、WAN最適化動作など)を、パブリッククラウドに配置されたMFNに組み込むことにより、仮想ネットワーク100は、企業のデータセンタおよび/または支店において従来企業のWAN基盤によって実行されていた機能の多くをパブリッククラウドに実装する。
したがって、多くのミドルボックスサービスに対して、企業のコンピューティングノード(例えば、リモートデバイス、支店、データセンタ)は、プライベートデータセンタまたは支店における企業のWAN基盤にアクセスする必要がなくなり、これらのサービスの多くがパブリッククラウドにデプロイされるようになる。このアプローチにより、企業のコンピューティングノード(リモートデバイス、支店、データセンタなど)からこれらのサービスへのアクセスが高速化され、そうでなければこのようなサービスの提供専用になるプライベートデータセンタでのコストのかかる輻輳ネットワークのボトルネックが回避される。
このアプローチは、パブリッククラウドデータセンタにおける各種MFNにWANゲートウェイの機能を効果的に分散させる。例えば、いくつかの実施形態の仮想ネットワーク100では、従来の企業WANゲートウェイセキュリティ機能(例えば、ファイアウォール動作、侵入検知動作、侵入防御動作など)の大部分またはすべてが、パブリッククラウドMFN(例えば、コンピューティングエンドポイントからの仮想ネットワークへのデータが受信される入力MFN)に移動される。これにより、効果的に、仮想ネットワーク100は、仮想ネットワーク100を実装する多くの異なるMFNで実現される分散WANゲートウェイを有することができる。
図2に示す例では、MFN150は、ファイアウォールエンジン210、NATエンジン215、および1つ以上のL4からL7の最適化エンジンを含むように示されている。当業者は、他の実施形態では、MFN150が他のミドルボックス動作を実行するための他のミドルボックスエンジンを含むことを理解するであろう。いくつかの実施形態では、ファイアウォールエンジン210は、(1)仮想ネットワークへの入力パス上のデータメッセージフロー(例えば、ゲートウェイ225および230が支店130およびモバイルデバイス140から受信して処理するデータメッセージフロー)、および(2)仮想ネットワークからの出力パス上のデータメッセージフロー(例えば、NATエンジン215およびインターネット202を介してSaaSプロバイダデータセンタに送信されるデータメッセージフロー)にファイアウォールルールを実施する。
いくつかの実施形態におけるMFN150のファイアウォールエンジン210は、ファイアウォールエンジンが、データメッセージフローが仮想ネットワークに入る入力MFNと、データメッセージフローが仮想ネットワークから出る出力MFNとの間の中間ホップであるMFNに属する場合にも、ファイアウォールルールを実施する。他の実施形態では、ファイアウォールエンジン210は、データメッセージフローの入力MFNおよび/または出力MFNの一部である場合にのみ、ファイアウォールルールを実施する。
いくつかの実施形態では、NATエンジン215は、ネットワークアドレス変換を実行して、インターネット202を介して仮想ネットワークから第三者デバイス(例えば、SaaSプロバイダマシン)への出力パス上のデータメッセージフローの送信元ネットワークアドレスを変更する。このようなネットワークアドレス変換により、アドレス変換なしでテナントやパブリッククラウドプロバイダのプライベートネットワークアドレスを指定するデータメッセージフローを処理するように、第三者マシン(SaaSマシンなど)を適切に構成することを可能にする。これは、異なるテナントやクラウドプロバイダのプライベートネットワークアドレスが重複する可能性があるため、特に問題になる。アドレス変換により、第三者デバイス(SaaSマシンなど)からの応答メッセージが、仮想ネットワーク(メッセージを仮想ネットワークから出すMFNのNATエンジンなど)によって適切に受信されることも可能にする。
いくつかの実施形態におけるMFNのNATエンジン215は、第三者マシンに届くように仮想ネットワークを出るか、または第三者マシンから仮想ネットワークに入る、各データメッセージフロー上でダブルNAT動作を行う。後述するように、2つのNAT動作のうちの1つのNAT動作は、仮想ネットワークに入るときにその入力MFNにおけるそのようなデータメッセージフロー上で実行され、もう1つのNAT動作は、仮想ネットワークから出るときにその出力MFNにおけるデータメッセージフロー上で実行される。
このダブルNATアプローチは、より多くのテナントプライベートネットワークを、パブリッククラウドプロバイダのネットワークにマッピングすることを可能にする。このアプローチはまた、テナントプライベートネットワークへの変更に関するデータをMFNへ配信する負荷を低減する。入力または出力NAT動作の前に、いくつかの実施形態は、テナント識別子を使用して、テナントの送信元ネットワークアドレスを、NAT動作によってさらに別の送信元ネットワークアドレスにマッピングされる別の送信元ネットワークアドレスに最初にマッピングするテナントマッピング動作を実行する。ダブルNAT動作を実行すると、テナントプライベートネットワークへの変更に関するデータを配信するためのデータ配信負荷が軽減される。
最適化エンジン220は、最良のエンドツーエンド性能と信頼性のために、エンティティのデータメッセージの宛先への転送を最適化する新規のプロセスを実行する。これらのプロセスのいくつかは、現在のネットワークプロトコルの硬直化から解放される、独自の高性能ネットワークプロトコルを実現する。例えば、いくつかの実施形態では、最適化エンジン220は、中間TCP分割および/または終端を通して、エンドツーエンドのTCPレートを最適化する。
クラウド転送要素235は、データメッセージフローが宛先に到達するために別のパブリッククラウドを通過する必要がある場合に、次ホップMFNのクラウド転送要素(CFE)にデータメッセージフローを転送し、またはデータメッセージフローが同じパブリッククラウドを介して宛先に到達できる場合に、同じパブリッククラウド内の出力ルータにデータメッセージフローを転送する、MFNエンジンである。いくつかの実施形態では、MFN150のCFE235はソフトウェアルータである。
データメッセージを転送するために、CFEはトンネルヘッダを用いてメッセージをカプセル化する。異なる実施形態は、トンネルヘッダを用いてデータメッセージをカプセル化するために異なるアプローチを用いる。以下に説明するいくつかの実施形態は、仮想ネットワークに出入りするためのネットワーク入力/出力アドレスを識別するために1つのトンネルヘッダを使用し、データメッセージが、出力MFNに到達するために1つ以上の中間MFNを通過しなければならない場合には、次ホップMFNを識別するために別のトンネルヘッダを使用する。
具体的には、いくつかの実施形態では、CFEは、2つのトンネルヘッダである、(1)仮想ネットワークに出入りするための入力CFEおよび出力CFEを識別する内部ヘッダ、および(2)次ホップCFEを識別する外部ヘッダ、を有するデータメッセージを送信する。いくつかの実施形態における内部トンネルヘッダは、仮想ネットワークプロバイダの複数の異なるテナントが仮想ネットワークプロバイダのMFNのCFEの共通セットを使用することを可能にするために、テナント識別子も含む。他の実施形態は、オーバーレイ仮想ネットワークを定義するために、異なるトンネルヘッダを定義する。
1つ以上のパブリッククラウド上にテナントの仮想ネットワークをデプロイするために、コントローラクラスタは、(1)テナント企業のコンピューティングノード(支店、データセンタ、モバイルユーザ、SaaSプロバイダなど)のロケーションに基づいて、テナントの仮想ネットワークに出入りする可能性のある入出力ルータを識別し、(2)仮想ネットワークを実装する他の中間パブリッククラウドルータを介して、識別された入力ルータから識別された出力ルータへ通過する経路を識別する。これらの経路を識別した後、コントローラクラスタは、パブリッククラウド内のMFNのCFE235の転送テーブルにこれらの経路を伝播する。OVSベースの仮想ネットワークルータを使用する実施形態では、コントローラはOpenFlowを使用して経路を配信する。
いくつかの実施形態では、コントローラクラスタ160は、最良のエンドツーエンドの性能、信頼性、およびセキュリティを達成するために、いくつかのネットワーク処理レイヤを最適化するために仮想ネットワークを実装する各MFN150のコンポーネント205から235を構成することもできる。例えば、いくつかの実施形態では、これらのコンポーネントは、(1)レイヤ3トラフィックのルーティング(例えば、最短経路、パケット重複)を最適化し、(2)レイヤ4TCP輻輳制御(例えば、セグメンテーション、レート制御)を最適化し、(3)セキュリティ機能(例えば、暗号化、精密パケット検査、ファイアウォール)を実装し、および(4)アプリケーションレイヤの圧縮機能(例えば、重複排除、キャッシュ)を実装するために、構成される。仮想ネットワーク内では、企業トラフィックはセキュリティ保護され、検査され、そしてログが記録される。
いくつかの実施形態では、パブリッククラウドデータセンタ内の各MFNに対して、1つの測定エージェントがデプロイされる。他の実施形態では、パブリッククラウドデータセンタ内またはデータセンタの集合内(例えば、1つの利用可能ゾーン内のデータセンタのような、近くに関連するデータセンタの集合内)の複数のMFNは、1つの測定エージェントを共有する。レイヤ3および4の処理を最適化するために、各管理転送ノード150に関連付けられた測定エージェント205は、そのノードと他のいくつかの「隣接」ノードとの間のネットワーク接続の品質を定量化した測定値を、繰り返し生成する。
異なる実施形態は、隣接ノードを異ならせるように定義する。特定のパブリッククラウドプロバイダの1つのパブリッククラウドデータセンタにおける特定のMFNについて、いくつかの実施形態における隣接ノードは、(1)特定のパブリッククラウドプロバイダの任意のパブリッククラウドデータセンタで動作する任意の他のMFN、および(2)特定のMFNと同じ「領域」内にある別のパブリッククラウドプロバイダのデータセンタで動作する任意の他のMFNを含む。
異なる実施形態は、同じ領域を異なる形式で定義する。例えば、いくつかの実施形態は、特定の管理転送ノードの周りの境界形状を指定する距離に関して領域を定義する。他の実施形態は、カリフォルニア北部、カリフォルニア南部など、都市、州、または地域の観点から領域を定義する。このアプローチの前提は、同じパブリッククラウドプロバイダの異なるデータセンタが非常に高速なネットワーク接続で接続されているのに対し、異なるパブリッククラウドプロバイダのデータセンタ間のネットワーク接続は、データセンタが同じ領域内にある場合は高速である可能性が高く、データセンタが異なる領域にある場合は高速ではない可能性が高いということである。異なるパブリッククラウドプロバイダのデータセンタ間の接続では、データセンタが異なる領域にある場合、パブリックインターネットを経由して長い距離を通過する必要がある場合がある。
測定エージェント205は、異なる実施形態において異なる方法で測定値を生成する。いくつかの実施形態では、測定エージェントは、周期的に(例えば、毎秒、毎N秒、毎分、毎M分等)pingメッセージを、その隣接する管理転送ノードの測定エージェントのそれぞれに送信する。pingメッセージのサイズが小さい場合、大きなネットワーク接続料金は発生しない。たとえば、各ノードが10秒ごとに互いのノードにpingを送信する100ノードの場合、各ノードに対して約10Kb/sの入出力測定トラフィックが生成され、これにより、現在のパブリッククラウドの価格が与えられた場合、ノードあたり1年あたり数ドル(たとえば$5)のネットワーク消費料金が発生する。
測定エージェント205は、受信する応答メッセージの速度に基づいて、ネットワーク接続スループット速度、遅延、損失、およびリンク信頼性などの測定メトリック値を計算し、更新する。これらの動作を繰り返し行うことによって、測定エージェント205は、隣接するノードへのネットワーク接続の品質を表す測定結果のマトリックスを定義し、更新する。エージェント205は、その隣接ノードの測定エージェントと相互作用するので、その測定マトリックスは、ノードのローカルクリークへの接続の品質のみを定量化する。
異なる管理転送ノードの測定エージェントは、それらの測定マトリックスをコントローラクラスタ160に送り、その後、すべての異なるクリーク接続データを集約して、管理転送ノードの異なるペア間の接続の集合メッシュビューを得る。コントローラクラスタ160が、2つのペアの転送ノード間のリンクについて異なる測定値(例えば、異なる時間に1つのノードによって取られた測定値)を収集すると、コントローラクラスタは、異なる測定値からブレンドされた値を生成する(例えば、測定値の平均または加重平均を生成する)。いくつかの実施形態における集約メッシュビューは、管理転送ノードの各ペア間のすべてのネットワーク接続のフルメッシュビューであり、他の実施形態では、個々の管理転送ノードの測定エージェントによって生成されたものよりも完全なビューである。
図2に示すように、コントローラクラスタ160は、1つ以上の測定処理エンジン280、1つ以上のパス識別エンジン282、および1つ以上の管理インタフェース284のクラスタを含む。不必要な詳細を用いて説明を不明瞭にしないために、これらのクラスタの各々は、単一のエンジンまたはインタフェースレイヤ、即ち、測定処理レイヤ280、パス識別レイヤ282、および管理インタフェースレイヤ284に関して、以下に参照される。
測定処理レイヤ280は、管理転送ノードの測定エージェント205から測定マトリックスを受信し、これらの測定マトリックスを処理して、異なるペアの管理転送ノード間の接続品質を表す集約メッシュマトリックスを生成する。測定処理レイヤ280は、集合メッシュマトリックスをパス識別レイヤ282に提供する。集合メッシュマトリックスに基づいて、パス識別レイヤ282は、異なる企業データエンドポイント(例えば、異なる支店、企業データセンタ、SaaSプロバイダデータセンタおよび/またはリモートデバイス)を接続するために、仮想ネットワークを通る異なる所望のルーティングパスを識別する。次いで、このレイヤ282は、管理転送ノード150のクラウド転送要素235に配信される経路テーブル内のこれらのルーティングパスを提供する。
いくつかの実施形態では、データメッセージエンドポイントの各ペアのために識別されたルーティングパスは、最適化基準のセットに基づいて最適とみなされたルーティングパスである。例えば、それは、最速のルーティングパス、最短のルーティングパス、または、インターネットを最小限に使用するパスである。他の実施形態では、パス識別エンジンは、同じ2つのエンドポイント間の複数の異なるルーティングパスを(ルーティングテーブル内で)識別し、提供することができる。これらの実施形態では、管理転送ノード150のクラウド転送要素235は、次に、それらが実施しているQoS基準または他のランタイム基準に基づいて、パスの1つを選択する。いくつかの実施形態における各CFE235は、CFEから仮想ネットワークの出力ポイントまでのルーティングパス全体を受信せず、むしろパスの次ホップを受信する。
いくつかの実施形態では、パス識別レイヤ282は、集合メッシュマトリックス内の測定値を、それが実行するルーティングアルゴリズムへの入力として使用して、グローバルルーティンググラフを構築する。このグローバルルーティンググラフは、測定処理レイヤ280がいくつかの実施形態で生成する測定グラフの、集約され且つ最適化されたバージョンである。図3は、いくつかの実施形態において、コントローラ測定処理レイヤ280が生成する測定グラフ300の例を示す。このグラフは、AWS内のさまざまな管理転送ノード150とGCPパブリッククラウド310および320(すなわち、AWSおよびGCPのデータセンタ)の間のネットワーク接続を示している。図4Aは、いくつかの実施形態において、測定グラフ300からコントローラパス識別レイヤ282が生成するルーティンググラフ400の例を示す。
図5は、コントローラパス識別レイヤが、コントローラ測定レイヤから受信した測定グラフからルーティンググラフを生成するために使用する処理500を示す。パス識別レイヤ282は、コントローラ測定レイヤから更新された測定グラフを繰り返し受信すると、この処理500を繰り返し実行する(例えば、新しい測定グラフを受信するたびに処理500を実行する、または新しい測定グラフを受信するたびにそれぞれのN回を実行する)。他の実施形態では、パス識別レイヤ282は、このプロセスを定期的に(例えば、12時間毎または24時間毎に)実行する。
図示したように、パス識別レイヤは、最初に(505において)ルーティンググラフを測定グラフと同一であるように定義する(すなわち、管理転送ノードの同一ペア間に同一のリンクを有するようにする)。510において、プロセスは、測定グラフ300から不良リンクを除去する。不良リンクの例としては、過剰なメッセージ損失や信頼性の低いリンク(たとえば、過去15分間にメッセージ損失が2%を超えたリンクや、過去2分間にメッセージ損失が10%を超えたリンク)がある。図4Aは、測定グラフ300内のリンク302、304および306が、ルーティンググラフ400内で除外されることを示す。この図は、これらのリンクを破線で表すことによって、これらのリンクを除外する方法を示している。
次に、処理500は、515において、いくつかの計算された値とプロバイダ固有の値との加重された組合せとして、リンク重みスコア(コストスコア)を計算する。いくつかの実施形態では、重みスコアは、リンクの(1)計算された遅延値、(2)計算された損失値、(3)プロバイダネットワーク接続コスト、および(4)プロバイダコンピューティングコスト、の加重された組み合わせである。いくつかの実施形態では、プロバイダコンピューティングコストは、リンクによって接続された管理転送ノードがパブリッククラウドデータセンタ内のホストコンピュータ上で実行されるマシン(例えば、VMまたはコンテナ)であるとして考慮される。
520において、プロセスは、仮想ネットワーク内のデータメッセージフローのための既知の送信元および宛先IPアドレス(例えば、企業エンティティによって使用されるSaaSプロバイダの既知のIP)をルーティンググラフに追加する。いくつかの実施形態では、プロセスは、可能性のあるメッセージフローのエンドポイントの各既知のIPアドレスを、そのエンドポイントに最も近いルーティンググラフのノード(例えば、MFNを表すノード)に追加する。そのような場合、いくつかの実施形態での処理は、遅延コストがゼロで損失コストがゼロのリンクを介して、そのような各エンドポイントが仮想ネットワークに接続されることを想定している。図4Bは、2つのSaaSプロバイダのための既知のIPを、これらのSaaSプロバイダのデータセンタに最も近いデータセンタにあるルーティンググラフの2つのノード402および404(2つのMFNを表す)に追加する例を示している。この例では、1つのノードがAWSパブリッククラウドにあり、もう1つのノードがGCPパブリッククラウドにある。
代わりに、または、いくつかの実施形態では、処理500は、送信元および宛先エンドポイントを表すためにノードをこのグラフに追加し、これらのノードにIPアドレスを割り当て、これらの追加されたノードをルーティンググラフの他のノードに接続するリンク(例えば、パブリッククラウドのMFNを表すルーティンググラフのノード)に重み値を割り当てることによって、既知の送信元および宛先IPアドレスをルーティンググラフに追加する。フローの送信元および宛先エンドポイントがノードとして追加されると、パス識別エンジン282は、異なる送信元および宛先エンドポイント間の仮想ネットワークを通る異なる経路を識別するときに、これらのノードに到達するコスト(例えば、距離コスト、遅延コスト、および/または金銭的コストなど)を考慮することができる。
図4Cは、2つのSaaSプロバイダを表すために、2つのノード412および414を図4Aのノードグラフ400に追加することによって生成されるルーティンググラフ410を示す。この例では、既知のIPアドレスがノード412および414に割り当てられ、これらのノードは、重みW1およびW2が割り当てられたリンク416および418を介してノード402および404(2つのMFNを表す)に接続される。このアプローチは、図4Bに示すアプローチに2つのSaaSプロバイダの既知のIPアドレスを追加するための代替アプローチである。
図4Dは、より詳細なルーティンググラフ415を示す。このより詳細なルーティンググラフでは、追加のノード422および424が追加されて、AWSおよびGCPパブリッククラウド310および320にそれぞれ接続する既知のIPアドレスを持つ外部の企業コンピューティングノード(例えば、支店およびデータセンタ)を表す。これらのノード422/424の各々は、MFNを表すルーティンググラフノードの少なくとも1つに関連付けられる重み値Wiを有する、少なくとも1つのリンク426によって接続される。これらのノードのいくつか(例えば、いくつかの支店)は、同じMFNまたは異なるMFNへの複数のリンクで接続されている。
次に、処理500は、525において、各MFNと、企業エンティティのデータメッセージフローのための仮想ネットワークの出力ロケーションとして機能することができる、それぞれの他のMFNとの間の最低コストパス(例えば、最短パスなど)を計算する。いくつかの実施形態における出力MFNは、モバイルデバイス接続および出力インターネット接続のための候補ロケーションであるMFNと、外部の企業コンピューティングノード(例えば、支店、企業データセンタ、およびSaaSプロバイダデータセンタ)に接続されたMFNとを含む。いくつかの実施形態では、この計算は、異なるMFNのペア間の最短経路を識別する従来の最低コスト(例えば、最短経路)識別プロセスを使用する。
各候補MFNペアに対して、最低コスト識別プロセスは、計算された重みスコア(すなわち、510で計算されたスコア)を使用して、MFNペアの間に複数のそのようなパスが存在するとき、最低スコアをもつパスを識別する。最低コストのパスを計算するためのいくつかの方法について、以下でさらに説明する。上述のように、パス識別レイヤ282は、いくつかの実施形態において、2つのMFNペア間の複数のパスを識別する。これは、異なる状況下で、クラウド転送要素235が異なるパスを使用することを可能にするためである。したがって、これらの実施形態では、処理500は、2つのMFNペア間の複数のパスを識別することができる。
530において、プロセスは、525で識別される最低コストパスのいずれによっても使用されないMFNペア間のリンクをルーティンググラフから削除する。次に、535において、プロセスは、ルーティンググラフからクラウド転送要素235のためのルーティングテーブルを生成する。535において、プロセスは、これらのルーティングテーブルを管理転送ノードのクラウド転送要素235に配信する。535の後、プロセスは終了する。
いくつかの実施形態では、仮想ネットワークは、(1)エンティティのコンピューティングノード(例えば、支店、データセンタ、モバイルユーザなど)との外部セキュア接続と、(2)インターネットを介した第三者のコンピュータ(例えば、SaaSプロバイダサーバ)への外部接続との2種類の外部接続を有する。いくつかの実施形態では、仮想ネットワークの外部の送信元ノードおよび宛先ノードで終端する各データパスについて、最適な仮想ネットワークの入出力ロケーションを発見することによって、仮想ネットワークを最適化する。例えば、支店をSaaSプロバイダサーバ(例えば、salesforce.comサーバ)に接続するために、いくつかの実施形態は、支店を最適エッジMFN(例えば、支店または支店に最も近いネットワーク接続を有するMFN)に接続し、最適に配置されたSaaSプロバイダサーバ(例えば、支店のエッジMFNに最も近いか、SaaSプロバイダサーバに接続されたエッジMFNを介して支店のエッジMFNへの最速パスを有するSaaS)への最適なエッジMFNを識別する。
VPN接続を介してエンティティの各コンピューティングノード(支店、モバイルユーザなど)を最も近いMFNに関連付けるために、いくつかの実施形態では、仮想ネットワークプロバイダは、コンピューティングノードが接続するために、パブリッククラウドに1つ以上の権威(authoritative)ドメインネームサーバ(DNS)をデプロイする。いくつかの実施形態では、ある実施形態の企業コンピューティングノードが、仮想ネットワークプロバイダのMFNへのVPN接続を確立する(すなわち、VPN接続を初期化または再初期化する)必要があるたびに、コンピューティングノードは、まず、権威DNSサーバが企業コンピューティングノードに最も近いMFNとして識別するMFNの識別情報をこのサーバから得るために、このサーバを用いてその仮想ネットワークと関連付けられたアドレス(例えば、virtualnetworkX.net)を解決する。このMFNを識別するために、権威DNSサーバは、いくつかの実施形態において、MFN識別子(例えば、MFNのIPアドレス)を提供する。その後、企業コンピューティングノードは、この管理転送ノードへのVPN接続を確立する。
他の実施形態では、企業コンピューティングノードは、VNPのMFNへのVPN接続を確立する必要があるたびに、DNS解決を最初に実行しない(すなわち、特定のドメインのためのネットワークアドレスを最初に解決しない)。例えば、いくつかの実施形態では、企業コンピューティングノードは、対象のMFNが接続すべき最適なものであるかどうかを決定するために別のDNS解決を実行する前に、特定の期間(例えば、1日、1週間など)の間、DNS解決されたMFNを用いる。
DNS要求の送信元IPアドレスが、ノード自体ではなく、企業コンピューティングノードのローカルDNSサーバの送信元IPアドレスである場合、いくつかの実施形態では、権威DNSサーバは、企業コンピューティングノードに最も近いMFNではなく、ローカルDNSサーバに最も近いMFNを識別する。これに対処するために、いくつかの実施形態におけるDNS要求は、ドットによって連結および区切られた1つ以上の部分(ラベル)を含むドメイン名を用いて企業コンピューティングノードを識別する。ここで、これらの部分の1つは企業を識別し、他の部分は企業のコンピューティングノードを識別する。
いくつかの実施形態では、このドメイン名は、ドメイン名内の右ラベルから左ラベルへと階層が下がるドメインおよびサブドメインを規定する。右端の最初のラベルは特定のドメインを識別し、最初のラベルの左側の2番目のラベルは企業エンティティを識別し、2番目のラベルの左側の3番目のラベルは、エンティティに複数の外部マシンロケーションがある場合のエンティティの外部マシンロケーションを識別する。例えば、いくつかの実施形態では、DNS要求は、企業コンピューティングノードを企業myCompanyのmyNodeとして識別し、アドレスmyNode.myCompany.virtualnetwork.netの解像度を求める。次いで、DNSサーバは、myNode識別子を使用して、企業コンピューティングノードがVPN接続を確立すべき入力MFNをより良く選択する。異なる実施形態では、myNode識別子は異なる方法で表現される。例えば、これは、IPアドレス、ロケーションの緯度/経度説明、GPS(地球測位システム)ロケーション、ストリートアドレスなどとしてアドレス指定されてもよい。
IPアドレスが適切にロケーションを反映している場合であっても、複数の潜在的な入力ルータが存在する可能性があり、たとえば、同じクラウド内の異なるデータセンタに属している場合や、同じ領域内の異なるクラウドに属している場合などである。このような場合、いくつかの実施形態における仮想ネットワークの権威サーバは、潜在的なMFNのCFE(例えば、C5、C8、C12)のIPのリストを送り返す。いくつかの実施形態における企業コンピューティングノードは、次に、リスト内の異なるCFEにpingして測定値(例えば、距離または速度測定値)を生成し、CFE候補のセットのなかで測定値を比較することによって、最も近いものを選択する。
さらに、企業コンピューティングノードは、企業エンティティの他のコンピューティングノードによって現在使用されているMFNを識別することによって、この選択の基礎とすることができる。例えば、いくつかの実施形態では、企業のコンピューティングノードは、企業の支店の多くがすでに所定のクラウドに接続されている場合、新しいコンピューティングノードが同じクラウドに接続するインセンティブを有し、これにより、処理、レイテンシー、およびドルに関してクラウド間コストを最小限に抑えるように、各MFNに接続コストを追加する。
他の実施形態は、他のDNS解決技術を使用する。例えば、企業コンピューティングノード(例えば、支店、データセンタ、モバイルユーザなど)がDNS解決を行う必要があるたびに、企業コンピューティングノード(例えば、支店またはデータセンタのモバイルデバイスまたはローカルDNSリゾルバ)は、多数のエンティティの権威DNSリゾルバとして機能するDNSサービスプロバイダと通信する。いくつかの実施形態では、このDNSサービスプロバイダは、1つ以上のプライベートデータセンタに配置されたDNS解決マシンを有する一方、他の実施形態では、1つ以上のパブリッククラウドデータセンタの一部である。
インターネットに直接接続するN個の管理転送ノードのうち、どれがSaaSプロバイダサーバに到達するために使用されるべきかを識別するために、いくつかの実施形態では、仮想ネットワーク(例えば、MFNを構成する入力MFNまたはコントローラクラスタ)は、N個の管理転送ノードから1つ以上の候補エッジMFNのセットを識別する。以下にさらに説明するように、いくつかの実施形態における各候補エッジMFNは、SaaSプロバイダサーバへの距離、ネットワーク接続速度、コスト、遅延および/または損失、ネットワーク計算コストなどの基準のセットに基づいて最適であるとみなされるエッジMFNである。
最適なエッジポイントを識別することを支援するために、いくつかの実施形態のコントローラクラスタは、エンティティに対して、最も一般的なSaaSプロバイダおよび消費者ウェブの宛先およびそれらのIPアドレスサブネットのリストを保持する。このような宛先ごとに、コントローラクラスタは、1つ以上の最適なMFN(物理的な距離、ネットワーク接続速度、コスト、損失および/または遅延、計算コストなどによって再び判断される)を候補出力ノードとして割り当てる。次に、各出力MFN候補に対して、コントローラクラスタは、各可能性のある入力MFNから候補MFNまでの最良経路を計算し、それに応じて、インターネットSaaSプロバイダまたはウェブ宛先が正しい仮想ネットワークの次ホップノードに関連付けられるように、結果であるMFN内の次ホップテーブルを設定する。
サービス宛先には、(権威DNSサーバによって提供されるように)複数のロケーションの複数のIPサブネットを介して到達できることが多いため、遅延を最小限に抑え、且つ負荷分散を提供するための、いくつかの潜在的な出力ノードが存在する。したがって、いくつかの実施形態では、コントローラクラスタは、各MFNについて最良のロケーションと出力ノードを計算し、それに応じて次ホップを更新する。また、SaaSプロバイダ(例えば、office365.com)に到達するための最良の出力ノードは、1つのパブリッククラウドプロバイダ(例えば、Microsoft Azure)を経由することもできるが、純粋に距離または接続速度からの最良の入力MFNは、別のパブリッククラウドプロバイダ(例えば、AWS)に存在するかもしれない。このような状況では、仮想ネットワークを出る前に別のクラウド(つまり、出力MFNが最適なパブリッククラウド)に移動するための遅延、処理、コストの点で最適ではないかもしれない。複数の候補エッジノードを提供することは、そのような状況において、最適エッジMFNおよび選択されたエッジMFNへの最適経路の選択を可能にする。
インターネットに接続するか、または企業エンティティの企業コンピューティングノードに接続する出力MFNへの仮想ネットワークを介した最適なパスを識別するために、コントローラクラスタは、MFN間の最適なルーティングパスを識別する。上述のように、いくつかの実施形態におけるコントローラクラスタは、直接接続されたMFNのペア間の各リンクにコストをかけることによって、例えば、推定された待ち時間と金銭的コストの加重和を反映するメトリックスコアに基づいて、任意の2つのMFN間の最良経路を識別する。レイテンシと金銭的コストは、いくつかの実施形態において、(1)リンク遅延測定、(2)推定されたメッセージ処理レイテンシ、(3)同一パブリッククラウドプロバイダの別のデータセンタへ、またはパブリッククラウドプロバイダのクラウド(例えば、別のパブリッククラウドプロバイダの別のパブリッククラウドデータセンタまたはインターネットへ)を出るために、特定のデータセンタからの発信トラフィックに対するクラウド料金、および(4)パブリッククラウド内のホストコンピュータ上で実行されるMFNに関連する推定メッセージ処理コストを含む。
これらのペアワイズリンクの計算コストを使用して、コントローラクラスタは、ルーティングパスによって使用される個々のペアワイズリンクのコストを集計することによって、これらのペアワイズリンクのうちの1つ以上を使用する各ルーティングパスのコストを計算することができる。上述のように、コントローラクラスタは、次に、ルーティングパスの計算コストに基づいてそのルーティンググラフを定義し、定義されたルーティンググラフに基づいて、MFNのクラウドルータの転送テーブルを生成する。また、上述のように、コントローラクラスタは、これらのコスト計算、グラフ生成、および転送テーブルの更新および配信動作を繰り返し、定期的に(例えば、12時間毎、24時間毎など)またはMFNの測定エージェントから測定更新を受信すると実行する。
MFNのCFEの転送テーブルが次ホップMFNのCFEを指すときはいつでも、CFEは近いとみなす。いくつかの実施形態では、CFEは、CFEへのセキュアでアクティブに維持されたVPNトンネルを確立する。いくつかの実施形態における安全なトンネルは、カプセル化されたデータメッセージのペイロードを暗号化することを要するトンネルである。また、いくつかの実施形態では、トンネルは、他のエンドポイントにキープアライブ(keep alive)信号を送信するトンネルの一方または両方のエンドポイントによって能動的に維持される。
他の実施形態では、CFEは、セキュアでアクティブに維持されているVPNトンネルを確立しない。例えば、いくつかの実施形態では、CFE間のトンネルは、キープアライブ信号の送信を通じて能動的に監視されない静的トンネルである。また、いくつかの実施形態では、CFE間のこれらのトンネルは、それらのペイロードを暗号化しない。いくつかの実施形態では、CFEペアの間のトンネルは、2つのカプセル化ヘッダを含み、データメッセージが仮想ネットワークに出入りする(すなわち、パブリッククラウドに出入りする)ためのテナントIDと入力CFEを識別する内部ヘッダと、入力CFEから出力CFEまでゼロ以上のCFEを通過するための送信元および宛先ネットワークアドレス(例えば、IPアドレス)を特定する外部カプセル化ヘッダとを有する。
いくつかの実施形態では、内部トンネルに加えて、仮想ネットワークは、上述のように、VPNトンネルを使用して企業コンピューティングノードをエッジMFNに接続する。したがって、セキュアトンネルを使用してCFEと接続する実施形態では、データメッセージは、完全にセキュアなVPNパスを使用して仮想ネットワークを通過する。
仮想ネットワークデータメッセージは、仮想ネットワーク内のカプセル化を使用して転送されるため、いくつかの実施形態では、仮想ネットワークは、テナントの異なるプライベートネットワークによって使用されるプライベートアドレスとは異なる自身のユニークなネットワークアドレスを使用する。他の実施形態では、仮想ネットワークは、それが定義されているパブリッククラウドのプライベートおよびパブリックネットワークアドレス空間を使用する。さらに別の実施形態では、仮想ネットワークは、そのコンポーネント(例えば、そのMFN、CFE、および/またはサービスの一部)のために、パブリッククラウドのプライベートおよびパブリックネットワークアドレス空間をそのコンポーネントの他のために使用する一方で、その自身のユニークなネットワークアドレスのいくつかを使用する。
また、いくつかの実施形態では、仮想ネットワークは、独自のプロトコルを備えたクリーンスレート通信プラットフォームを使用する。データメッセージが全体としてソフトウェアMFNルータ(例えば、ソフトウェアCFE)を介して転送される実施形態では、仮想ネットワークは、長距離のエンドツーエンド接続のための最適化されたレート制御を提供することができる。これは、いくつかの実施形態では、各MFN150でTCP最適化プロキシエンジン220を動作させることによって達成される。(例えば、HTTPSを用いる)TCP自体が破られない他の実施形態では、これは、プロキシエンジン220が、TCP受信ウィンドウおよびACK操作を共に有するフロー毎の中間バッファリングを用いて、レート制御をセグメント化することによって達成される。
クリーンスレート(clean-slate)の性質により、いくつかの実施形態では、仮想ネットワークは、より良いサービスを提供するために、そのコンポーネントの多くを最適化する。例えば、いくつかの実施形態では、仮想ネットワークは、仮想ネットワークを介してルーティングされるプレミアム帯域幅保証のVPNセットアップをサポートするために、マルチパスルーティングを用いる。いくつかの実施形態では、このようなVPNは、ATM/MPLSルーティングに類似した各MFN内の状態データを含み、それらの確立および除去は、集中的に制御される。いくつかの実施形態は、(パケットペアまたは類似のプロセスを介して)直接測定することにより、または、リンクの所与の容量を有することにより、そして既にこのリンクを介して送信されたトラフィックをこの容量から減少させることにより、送信リンク当たりの利用可能な帯域幅を識別する。
いくつかの実施形態は、制約としてリンクの残留帯域幅を使用する。例えば、リンクが利用可能な帯域幅の少なくとも2Mbpsを有していない場合、いくつかの実施形態のコントローラクラスタは、任意の宛先への最低コストパス(例えば、最短パス)を計算するために使用されるリンクのセットからリンクを除去する(例えば、グラフ400のようなルーティンググラフからリンクを除去する)。このリンクの除去後もエンドツーエンド経路が未だ使用可能である場合、新らたなVPNはこの新らたな経路を介してルーティングされる。VPNを除去すると、使用可能なキャパシティを特定のリンクに戻すことができる。これにより、このリンクを最低コストパス(最短パスなど)の計算に含めることができる。いくつかの実施形態は、例えば、MPTCP(マルチパスTCP)を使用するなど、複数パスにわたるトラフィックのロードバランシングのような、複数パスルーティングのための他のオプションを用いる。
いくつかの実施形態は、仮想ネットワーク内の2つの分離したパス(例えば、最大分離したパス)を介して、入力MFNから出力MFNへのトラフィックを複製するために、パスの並列性および安価なクラウドリンクを利用することにより、プレミアム顧客に対してより良いサービスを提供する。このアプローチでは、到着した最も早いメッセージは受け入れられ、後のメッセージは破棄される。このアプローチは、出力処理の複雑さを増加させる代わりに、仮想ネットワークの信頼性を増加させ、遅延を低減する。いくつかのそのような実施形態では、順方向誤り訂正(FEC)技法を使用して、信頼性を高める一方で、重複トラフィックを低減する。クリーンスレートの性質により、いくつかの実施形態の仮想ネットワークは、アプリケーションレイヤの最適化(例えば、重複排除およびキャッシュ動作)およびセキュリティ最適化(例えば、暗号化、DPI(ディープパケット検査)およびファイアウォール処理の追加)のような、他の上位レイヤの最適化を行う。
いくつかの実施形態の仮想ネットワークは、エニーキャストメッセージングを使用することによって仮想ネットワーク設定をさらに改善するための、クラウドプロバイダとのコラボレーションについて説明する。例えば、全てのMFNが同じ外部IPアドレスを取得する場合、いくつかの実施形態では、エニーキャスト接続を使用して、任意の新しい企業コンピューティングノードを最適エッジノード(例えば、最も近いエッジノード)に接続することは容易である。同様に、SaaSプロバイダは、このIPアドレスを取得し、最適なMFN(例えば、最も近いMFN)に接続することができる。
上述したように、異なる実施形態は、異なるタイプのVPN接続を使用して、企業コンピューティングノード(例えば、支店およびモバイルデバイス)を、企業エンティティの仮想ネットワークを確立するMFNに接続する。いくつかの実施形態は、これらのVPN接続を設定するためにIPsecを使用する。図6は、いくつかの実施形態のIPsecデータメッセージフォーマットを示す。具体的には、この図は、企業のコンピューティングノードのマシンによって生成されたデータメッセージ605の元のフォーマットを示し、データメッセージ605がカプセル化された後に(例えば、企業のコンピューティングノードまたはMFN)、IPsecトンネル(例えば、MFNまたは企業のコンピューティングノード)を介して送信するためのIPsecカプセル化データメッセージ610を示す。
この例では、IPsecトンネルは、ESPトンネルモード(ポート50)を用いて設定される。図示するように、このモードは、この例においてIPヘッダ内のTCPプロトコル識別子をESPプロトコル識別子で置き換えることによって設定される。ESPヘッダは、メッセージ615(すなわち、ヘッダ620およびペイロード625)の開始を識別する。メッセージ615は、IPsecカプセル化データメッセージの受信装置によって(例えば、MFNのIPsecゲートウェイによって)認証されなければならない。ペイロード625の開始は、メッセージ615の次のフィールド622の値によって識別される。また、ペイロード625は暗号化される。このペイロードは、元のデータメッセージ605のIPヘッダ、TCPヘッダおよびペイロード、ならびに次のフィールド622を含むパディングフィールド630を含む。
いくつかの実施形態では、MFNのIPsecゲートウェイのそれぞれは、同一または異なる仮想ネットワークテナント(例えば、同一企業または異なる企業)のための複数のIPsec接続を扱うことができる。従って、いくつかの実施形態におけるMFNのIPsecゲートウェイ(例えば、ゲートウェイ230)は、トンネルID、テナントID(TID)、および企業コンピューティングノードのサブネットに関して各IPsec接続を識別する。いくつかの実施形態では、テナントの異なる企業ノード(例えば、異なる支店)は、重複するIPサブネットを持たない(RFC 1579による)。いくつかの実施形態におけるIPsecゲートウェイは、各IPsecトンネルID(IPsecトンネルヘッダに含まれる)をテナントIDにマッピングするテーブルを有する。IPsecゲートウェイが処理するように設定されている特定のテナントの場合、IPsecゲートウェイは、MFNとそのクラウド転送要素によって確立された仮想ネットワークに接続する、そのテナントのすべてのサブネットのマッピングを有する。
第1のパブリッククラウドデータセンタの入力側の第1のMFNが、テナントIDに関連付けられた、第2のパブリッククラウドデータセンタの出力側の第2のMFNに接続する宛先(ブランチやデータセンタのサブネット、SaaSプロバイダなど)に向けられたデータメッセージをIPsecトンネルを介して受信すると、第1のMFNのIPsecゲートウェイはIPsecトンネルヘッダを削除する。いくつかの実施形態では、第1のMFNのCFEは、メッセージが、入力側の第1のMFNから出力側の第2のMFNまで、直接または1つ以上の他の中間MFNを介して、パスを通過することを可能にする2つのカプセル化ヘッダでメッセージをカプセル化する。第1のMFNのCFEは、コントローラが構成したルーティングテーブルを使用して、このパスを識別する。
上述のように、いくつかの実施形態における2つのカプセル化ヘッダは、(1)カプセル化されたデータメッセージが仮想ネットワークのMFNを通過して出力MFNのCFEに到達することを可能にする次ホップMFNのCFEを指定する外部ヘッダと、(2)テナントIDと、仮想ネットワークに出入りするデータメッセージのためのMFNを識別する入力及び出力MFNのCFEを指定する内部ヘッダとを含む。
具体的には、いくつかの実施形態では、内部カプセル化ヘッダは、第2の出力MFNのCFEの宛先IPアドレスと、第1の入力MFNのCFEの送信元IPアドレスとを有する有効なIPヘッダを含む。このアプローチは、標準IPルータソフトウェアをMFNのすべてのCFEで使用することを可能にする。カプセル化には、テナントID(たとえば、顧客CID)がさらに含まれる。メッセージが第2の出力MFNのCFEに到着すると、メッセージはカプセル化解除され、第2のMFNによって宛先に送信される(たとえば、第2のMFNのIPsecゲートウェイによって、テナントIDとメッセージの宛先サブネットに関連付けられた別のIPsecトンネルを介して宛先に送信される)。
クラウドプロバイダによっては、マシンが送信元IPを「なりすまし」することを禁止したり、TCPおよびUDPトラフィックに他の制限を課したりすることがある。このような制限に対処するために、いくつかの実施形態は、1つ以上の経路によって使用されるMFNの隣接するペアを接続するために、外部ヘッダを使用する。いくつかの実施形態におけるこのヘッダは、送信元および宛先IPアドレスおよびUDPプロトコルパラメータを指定するUDPヘッダである。いくつかの実施形態では、入力MFNのCFEは、そのIPアドレスを外部ヘッダの送信元IPアドレスとして指定し、一方、次のMFNのCFEホップのIPアドレスを外部ヘッダの宛先IPアドレスとして指定する。
出力MFNのCFEへのパスに1つ以上の中間MFNのCFEが含まれる場合、中間CFEは、受信したダブルカプセル化メッセージの外部ヘッダの送信元IPアドレスをそのIPアドレスに置き換える。また、内部ヘッダの宛先IPアドレスを使用して、ルーティングテーブルで経路ルックアップを実行し、内部ヘッダの宛先IPアドレスへのパス上にある次ホップのMFNのCFEの宛先IPアドレスを識別する。次に、中間CFEは、外部ヘッダ内の宛先IPアドレスを、その経路テーブルルックアップを介して識別したIPアドレスで置き換える。
ダブルカプセル化されたデータメッセージが出力MFNのCFEに到達すると、CFEは、内部ヘッダで宛先IPアドレスを取得した場合に、この宛先IPアドレスがデータメッセージの出力ノードであると判断し、この宛先IPアドレスがそれに属していると判断する。このCFEは、次に、データメッセージから2つのカプセル化ヘッダを削除し、それを宛先に送信する(例えば、データメッセージの元のヘッダのテナントIDと宛先IPアドレスまたはサブネットに関連付けられた別のIPsecトンネルを介して、MFNのIPsecゲートウェイを通って宛先に送信する)。
図7は、いくつかの実施形態の2つのカプセル化ヘッダの例を示し、図8は、いくつかの実施形態においてこれら2つのヘッダがどのように使用されるかを説明する例を示す。以下の説明では、内部ヘッダはテナントヘッダと呼ばれる。これには、テナントの企業コンピューティングエンドノードに接続されている仮想ネットワークの入出力ノードのIDとともにテナントIDが含まれるためである。外部ヘッダは、データメッセージが入力および出力MFNのCFEの間の仮想ネットワークを通るパスを移動するときに、仮想ネットワークを通る次ホップを識別するために使用されるため、以下のVNホップトンネルヘッダと呼ばれる。
図7は、元のヘッダ755およびペイロード760を有する元のデータメッセージ750をカプセル化する、VNホップトンネルヘッダ705およびテナントトンネルヘッダ720を示す。図示されるように、いくつかの実施形態におけるVNホップトンネルヘッダ705は、UDPヘッダ710およびIPヘッダ715を含む。いくつかの実施形態におけるUDPヘッダは、UDPプロトコルに従って定義される。いくつかの実施形態において、VNホップトンネルは標準のUDPトンネルであるが、他の実施形態では、このトンネルは独自のUDPトンネルである。さらに他の実施形態では、このトンネルは、標準または独自のTCPトンネルである。いくつかの実施形態におけるトンネルヘッダ705は、そのペイロードを暗号化した暗号化済みのものであり、他の実施形態においては、それは、暗号化されていないトンネルである。
以下にさらに説明するように、いくつかの実施形態におけるトンネルヘッダ705は、オーバーレイVNPネットワークを定義するために使用され、各MFNのCFEによって、アンダーレイパブリッククラウドネットワークを介して次ホップMFNのCFEに到達するために使用される。したがって、トンネルヘッダ705のIPヘッダ715は、VNPトンネルによって接続された第1および第2の隣接MFNの第1および第2のCFEの送信元および宛先IPアドレスを識別する。場合によっては(たとえば、次ホップの宛先MFNが、送信元MFNとは異なるパブリッククラウドベンダーの別のパブリッククラウドにある場合)、送信元IPアドレスと宛先IPアドレスは、MFNを含むパブリッククラウドデータセンタによって使用されるパブリックIPアドレスである。また、送信元と宛先のMFNのCFEが同じパブリッククラウドに属している場合、送信元と宛先のIPアドレスは、パブリッククラウドでのみ使用されるプライベートIPアドレスにすることができる。或いは、このような場合でも、送信元と宛先のIPアドレスがパブリッククラウドベンダのパブリックIPアドレスであり得る。
図7に示すように、テナントトンネルヘッダ720は、IPヘッダ725、テナントIDフィールド730および仮想回線ラベル735を含む。テナントトンネルヘッダ720は、データメッセージを出力MFNの出力CFEに転送するための次ホップを識別するために、入力ホップCFEの後の各ホップCFEによって使用される。したがって、IPヘッダ725は、入力CFEのIPアドレスである送信元IPアドレスと、出力CFEのIPアドレスである宛先IPアドレスとを含む。VNホップヘッダ705の送信元および宛先IPアドレスと同様に、テナントヘッダ720の送信元および宛先IPアドレスは、1つのパブリッククラウドプロバイダのプライベートIPアドレス(データメッセージが1つのパブリッククラウドプロバイダのデータセンタのみを通過する経路を通過する場合)または1つ以上のパブリッククラウドプロバイダのパブリックIPアドレス(たとえば、データメッセージが2つ以上のパブリッククラウドプロバイダのデータセンタを通過する経路を通過する場合)のいずれかであることができる。
テナントヘッダ720のIPヘッダは、いくつかの実施形態では、任意の標準ソフトウェアルータおよびIPルーティングテーブルを使用してルーティングされることができる。テナントIDフィールド730は、テナントIDを含み、これは、テナントをユニークに識別するために入出力MFNで使用することができる、ユニークなテナント識別子である。いくつかの実施形態における仮想ネットワークプロバイダは、プロバイダのテナントである異なる企業エンティティに対して異なるテナントIDを定義する。VCLフィールド735は、いくつかの実施形態が、ネットワークを通してメッセージを転送するための代替の方法(非IPベースの方法)を提供するために使用する、オプションのルーティングフィールドである。いくつかの実施形態では、テナントトンネルヘッダ720は、GUE(汎用UDPカプセル化)ヘッダである。
図8は、いくつかの実施形態において、これら2つのトンネルヘッダ705および710がどのように使用されるかを示す例を表している。この例では、データメッセージ800は、企業の第1の支店805内の第1のマシン802(例えば、第1のVM)から、企業の第2の支店810内の第2のマシン804(例えば、第2のVM)に送信される。2つのマシンは、2つの異なるサブネット、10.1.0.0と10.2.0.0にある。第1のマシンのIPアドレスは10.1.0.17、第2のマシンのIPアドレスは10.2.0.22である。この例では、第1の支店805は、第1のパブリッククラウドデータセンタ830内の入力MFN850に接続し、第2の支店810は、第2のパブリッククラウドデータセンタ838内の出力MFN855に接続する。また、この例では、第1および第2のパブリッククラウドデータセンタの入力MFN850および出力MFN855は、第3のパブリッククラウドデータセンタ836の中間MFN857を介して間接的に接続されている。
図示されるように、マシン802からのデータメッセージ800は、最初の支店805を入力MFN850に接続するIPsecトンネル870に沿って入力MFN850に送られる。このIPsecトンネル870は、第1の支店のIPsecゲートウェイ848と、入力MFN850のIPsecゲートウェイ852との間に確立される。このトンネルは、データメッセージ800をIPsecトンネルヘッダ806でカプセル化することによって確立される。
MFN850のIPsecゲートウェイ852は、データメッセージをカプセル化解除し(すなわち、IPsecトンネルヘッダ806を除去し)、カプセル化解除されたメッセージをこのMFNのCFE832に直接、または1つ以上のミドルボックスサービスマシン(例えば、図2のマシン210のようなファイアウォールマシン)を介して渡す。このメッセージを渡す際に、いくつかの実施形態では、IPsecゲートウェイまたはMFN850の他のモジュールは、メッセージをIPsecトンネルのトンネルIDおよび企業のテナントIDと関連付ける。このテナントIDは、仮想ネットワークプロバイダのレコード内の企業を識別する。
関連付けられたテナントIDおよび/またはIPsecトンネルIDに基づいて、入力MFN850のCFE832は、異なるパブリッククラウドデータセンタ内のMFNによって確立された仮想ネットワークを介して、メッセージの宛先のマシンのサブネット(すなわち、第2の支店810)への経路を識別する。たとえば、CFE832は、テナントIDおよび/またはIPsecトンネルIDを使用して、企業のルーティングテーブルを識別する。このルーティングテーブルでは、CFE832は、受信メッセージの宛先IPアドレス10.2.0.22を使用して、パブリッククラウドデータセンタ838の出力MFN855のCFE853を、データメッセージ800の宛先出力転送ノードとして識別するレコードを識別する。いくつかの実施形態では、識別されたレコードは、第2の支店810のサブネット10.2.0.0/16全体をMFN855のCFE853にマップする。
出力CFE853を識別した後、入力MFN850のCFE832は、受信したデータメッセージを、そのIPヘッダ725内に入力CFE832の送信元IPおよび出力CFE853の宛先IPを含むテナントトンネルヘッダ860でカプセル化する。いくつかの実施形態では、これらのIPアドレスは、パブリックIPアドレス空間で定義される。トンネルヘッダ860はまた、入力MFN850においてデータメッセージに関連付けられたテナントIDを含む。上述したように、このトンネルヘッダは、いくつかの実施形態において、VCLヘッダ値も含む。
いくつかの実施形態では、入力CFE832は、出力CFE853への所望のCFEルーティングパス上にある次ホップMFNも識別する。いくつかの実施形態では、入力CFE832は、出力CFE853の宛先IPアドレスを使用して、そのルーティングテーブル内のこの次ホップCFEを識別する。この例の次ホップMFNのCFEは、第3のパブリッククラウドデータセンタ836の第3のMFN857のCFE856である。
次ホップMFNのCFEを識別した後、入力MFNのCFEは、カプセル化されたデータメッセージ800をVNホップ、第2のトンネルヘッダ862でカプセル化する。このトンネルヘッダは、メッセージを次ホップCFE856にルーティングできるようにする。この外部ヘッダ862のIPヘッダ715において、入力MFNのCFE832は、送信元および宛先IPアドレスを、入力CFE832の送信元IPおよび中間CFE856の宛先IPとして指定する。また、いくつかの実施形態において、そのレイヤ4プロトコルをUDPとして指定する。
第3のMFN857のCFE856がダブルカプセル化されたデータメッセージを受信すると、CFE856は、VNホップ、第2のトンネルヘッダ862を取り除き、MFN855のCFE853の宛先IPアドレスをテナントヘッダ860から取り出す。このIPアドレスはCFE856に関連付けられていないため、データメッセージは宛先に到達するために別のMFNを通過しなければならない。したがって、CFE856は、取り出された宛先IPアドレスを使用して、次ホップMFNのCFE853を識別するルーティングテーブル内のレコードを識別する。次に、この変更は外部ヘッダ705を用いたデータメッセージを再カプセル化し、そのIPヘッダ715内の送信元および宛先IPアドレスを、それ自身のIPアドレスおよびMFNのCFE853の宛先IPアドレスとして指定する。次に、CFE856は、パブリッククラウドデータセンタ836および838の中間ルーティングファブリックを介して、ダブルカプセル化データメッセージ800を出力CFE853に転送する。
カプセル化データメッセージを受信した後、出力CFE853は、内部ヘッダ860内の宛先IPアドレスを検索して、この宛先IPアドレスがそれに属していると判定した場合、カプセル化されたメッセージがそれに向けたものであると判定する。出力CFE853は、データメッセージ800からカプセル化ヘッダ860および862の両方を除去し、データメッセージの元のヘッダ内の宛先IPアドレスを取り出す。この宛先IPアドレスは、第2の支店のサブネット内の第2のマシン804のIPアドレスを示す。
除去されたテナントトンネルヘッダ860のテナントIDを使用して、出力CFE853は、検索する正しいルーティングテーブルを識別し、受信データメッセージの元のヘッダ値から抽出された宛先IPアドレスに基づいてこのルーティングテーブルを検索する。この検索から、出力CFE853は、データメッセージを宛先に転送するために使用するIPsec接続を識別するレコードを識別する。次に、IPsecコネクション識別子とともにデータメッセージを第2のMFNのIPsecゲートウェイ858に提供し、次にこのメッセージをIPsecトンネルヘッダ859でカプセル化し、それを第2の支店810のIPsecゲートウェイ854に転送する。次に、ゲートウェイ854は、IPsecトンネルヘッダを除去し、データメッセージを宛先マシン804に転送する。
ここで、図9から図15を参照して、より詳細なメッセージ処理の例について説明する。これらの例では、各テナントIPsecインタフェースがVNPトンネルと同じローカルパブリックIPアドレス上にあると想定されている。したがって、いくつかの実施形態のインタフェースは、単一のVRF(仮想ルーティングおよび転送)ネームスペースに接続される。このVRFネームスペースは、以下ではVNPネームスペースと呼ぶ。
図9から図11は、テナントの2つの異なる外部マシンのロケーション(例えば、支店、データセンタなど)にある2つのコンピューティングデバイス間で送信されるメッセージを受信したときに、入力MFN、中間MFN、および出力MFNによってそれぞれ実行されるメッセージ処理プロセス900-1100を示す。いくつかの実施形態では、コントローラクラスタ160は、各CFEがテナントの異なるデータメッセージフローの入力、中間、および出力CFEとして動作するように各MFNのCFEを構成するが、そのような各CFEは、テナントの異なるデータメッセージフローのための入力、中間、および出力CFEとしてサービスを提供する候補である。
プロセス900‐1100は、図8および図12の2つの例を参照して、以下に説明される。上述のように、図8は、データメッセージが中間MFNを通過して出力MFNに到達する場合の例を示している。図12は、入力MFNと出力MFNの間に中間MFNを含まない例を示す。具体的には、2つの支店が直接接続された2つのMFN1250および1255を有する2つのパブリッククラウドデータセンタ1230および1238に接続される場合の、第1の支店1205内の第1のデバイス1202から第2の支店1220内の第2のデバイス1210に送信されるデータメッセージ1200を示す。図示されるように、これらの例のMFNのCFE1232および1253は、各MFNに関連付けられたルーティング動作を実行する。
いくつかの実施形態では、入力MFN850および1250の入力CFE(例えば、入力CFE832または1232)は、プロセス900を実行する。図9に示すように、入力プロセス900は、受信データメッセージ内のIPsecトンネル(例えば、806または1206)の識別子に基づいて、(905において)最初にテナントルーティングコンテキストを識別することによって開始する。いくつかの実施形態では、IPsecゲートウェイまたは他のMFNモジュールは、マッピングテーブルにIPsecトンネルIDに対するテナントIDを格納する。データメッセージが特定のIPsecトンネルに沿って受信されると、IPsecゲートウェイはIPsecトンネルIDを抽出する。このIPsecトンネルIDは、このゲートウェイまたは別のMFNモジュールが、そのマッピングテーブルを参照することによって、関連するテナントIDを識別するために使用する。テナントIDを識別することで、プロセスは、使用するテナントルーティングテーブルまたはVRFネームスペースのテナント部分を識別する。
910で、プロセスは、このデータメッセージを受信することを考慮して、識別されたIPsecトンネルのRX(受信)カウンタをインクリメントする。次に、915において、プロセスは、識別されたテナントルーティングコンテキスト(例えば、VRF名前空間のテナントの部分)において、パブリッククラウドデータセンタを介して構築されたテナントの仮想ネットワークを出るための出力インタフェースのIPアドレスを識別するために、経路ルックアップ(例えば、最長のプレフィックスの一致、LPM、ルックアップ)を実行する。ブランチ・ツー・ブランチの例では、出力インタフェースは、宛先ブランチに接続されたMFNの出力CFE(CFE853または1253など)のIPアドレスである。
920において、プロセスは、受信したデータメッセージにテナントトンネルヘッダ(例えば、ヘッダ860または1260)を追加し、このトンネルヘッダの送信元および宛先IPアドレスとして、入力CFEの送信元IPアドレス(例えば、入力CFE832または1252)および出力CFEの宛先IPアドレス(例えば、出力CFE853または1253)を埋め込む。テナントヘッダでは、テナントID(905で識別)もテナントヘッダに格納される。920で、プロセスはテナントヘッダの外部にVNホップトンネルヘッダ(例えばヘッダ862または1262)を追加し、そのIPアドレスをこのヘッダの送信元IPアドレスとして格納する。このプロセスはまた、(920で)VNPトンネルヘッダのUDPパラメータ(例えばUDPポート)を規定する。
次に、925において、プロセスは、このデータメッセージの送信を考慮するために、テナントのためのVN送信カウンタをインクリメントする。930において、プロセスは、このデータメッセージの次ホップインタフェースを識別するために、識別されたVNPルーティングコンテキスト(例えば、VRF名前空間のVNPの部分)において、経路ルックアップ(例えば、LPMルックアップ)を実行する。いくつかの実施形態では、この経路ルックアップは、(例えば、VRF名前空間のVNPの部分における)出力CFEの宛先IPに少なくとも部分的に基づいたLPMルックアップである。
935で、プロセスは、次ホップ出力インタフェースが入力CFEのローカルインタフェース(例えば、物理または仮想ポート)であるかどうかを判定する。もしそうなら、プロセスは(937で)VNホップ外部トンネルヘッダの宛先IPアドレスを915で識別された出力インタフェースIPアドレスとして定義する。次に、940において、プロセスは、宛先の出力CFEに転送できるように、そのローカルインタフェースにダブルカプセル化データメッセージを提供する。940の後、プロセス900は終了する。
図12は、入力CFE1232が第1の支店1205のデバイス1202から受信するデータメッセージ1200の動作905から940の例を示す。図示されるように、このCFEのMFN1250は、IPsecゲートウェイ1252において、このデータメッセージを、第1の支店1205のIPsecゲートウェイ1248からのIPsecカプセル化メッセージとして受信する。受信CFE1232は、受信したメッセージ1200を(IPsecヘッダがIPsecゲートウェイ1252によって除去された後に)VNホップトンネルヘッダ1262およびテナントトンネルヘッダ1260でカプセル化し、このダブルカプセル化されたメッセージをパブリッククラウド1238のMFN1255の出力CFE1253に転送する。図示されるように、この例では、トンネルヘッダ1260および1262の両方の送信元および宛先IPアドレスは同一である。これらの2セットのIPアドレスが同一である場合、CFE856のような、介在するCFEを介してデータメッセージがルーティングされない場合、いくつかの実施形態は、外部IPヘッダ1262を使用しない。
プロセスが(935で)次ホップ出力インタフェースが入力CFEのローカルインタフェースではなく、むしろ別のルータの宛先IPアドレスであると判定する場合、プロセスは(945で)VNホップトンネルヘッダに、次ホップ中間CFE(例えば、中間CFE856)の宛先IPアドレスをVNホップトンネルヘッダの宛先IPアドレスとして埋め込む。
次に、950において、プロセスは、識別されたVNPルーティングコンテキスト(例えば、VRFネームスペースのVNPの部分)において、別の経路ルックアップ(例えば、LPMルックアップ)を実行する。今回、ルックアップは、VNPトンネルヘッダで識別される中間CFEのIPアドレスに基づいている。中間CFE(例えば、CFE856)は、入力CFE(例えば、CFE832)のための仮想ネットワークにおける次ホップCFEであるので、ルーティングテーブルは、中間CFEに送られるデータメッセージのためのローカルインタフェース(例えば、ローカルポート)を識別する。したがって、VNPルーティングコンテキストにおけるこのルックアップは、受信CFEが(950において)ダブルカプセル化されたメッセージを提供するローカルインタフェースを識別する。その後、プロセスは、このデータメッセージの送信を考慮して、VN中間カウンタを(955で)インクリメントする。955の後、プロセスは終了する。
図10は、出力MFNのCFE(例えば、CFE853または1253)が、MFNに接続された企業コンピューティングノード(例えば、支店、データセンタ、リモートユーザのロケーション)に転送されるべきデータメッセージを受信したときに、いくつかの実施形態において実行するプロセス1000を示す。図示されるように、プロセスは、最初に、仮想ネットワークに関連付けられたインタフェース上でデータメッセージを(1005で)受信する。このメッセージは、VNホップトンネルヘッダ(ヘッダ862または1262など)とテナントトンネルヘッダ(ヘッダ860または1260など)でカプセル化される。
1010で、プロセスは、VNホップトンネルヘッダの宛先IPアドレスがそのCFEの宛先IPアドレスであると判定する(CFE853または1253のIPアドレスなど)。次に、1015で、プロセスは2つのトンネルヘッダを除去する。その後、プロセスは、除去されたテナントトンネルヘッダからテナントIDを(1020で)取得する。受信したデータメッセージを考慮するために、CFEは、抽出されたテナントIDで指定されたテナントに対して保持しているRX(受信)カウンタを(1025で)インクリメントする。
次に、1030において、プロセスは、このデータメッセージの次ホップインタフェースを識別するために、識別されたテナントルーティングコンテキスト(すなわち、1020で抽出されたテナントIDによって識別されたテナントのルーティングコンテキスト)において、経路ルックアップ(例えば、LPMルックアップ)を実行する。プロセスは、いくつかの実施形態において、受信データメッセージの元のヘッダ(例えば、ヘッダ755)内の宛先IPアドレスに基づいて、このルックアップを実行する。このルックアップによって識別されるレコードから、プロセス1000は、データメッセージが宛先に送られる必要があるIPsecインタフェースを識別する。従って、プロセス1000は、カプセル化解除され受信されたデータメッセージを、そのMFNのIPsecゲートウェイ(例えば、ゲートウェイ858または1258)に送信する。
次に、このゲートウェイは、IPsecトンネルヘッダ(例えば、トンネルヘッダ859または1259)でデータメッセージをカプセル化し、それを宛先の企業コンピューティングノード(例えば、宛先支店)のゲートウェイ(例えば、ゲートウェイ854または1254)に転送する。データメッセージはそこでカプセル化解除され、宛先に転送される。1030の後、CFEまたはそのMFNは、宛先の企業コンピューティングノード(例えばゲートウェイ854と858の間のIPsec接続、またはゲートウェイ1254と1258の間のIPsec接続)へのIPsec接続に沿ったメッセージの送信を管理するカウンタを(1035で)インクリメントする。
図11は、いくつかの実施形態において、中間MFNのCFE(例えば、CFE856)が、別のMFNの別のCFEに転送されるべきデータメッセージを受信したときに実行するプロセス1100を示す。図示されるように、プロセスは、最初に、仮想ネットワークに関連付けられたインタフェース上で(1105において)データメッセージを受信する。いくつかの実施形態では、このメッセージは、2つのトンネルヘッダである、VNトンネルヘッダ(例えば、ヘッダ862)およびテナントトンネルヘッダ(例えば、ヘッダ860)でカプセル化されている。
1110において、プロセスは、このトンネルヘッダの宛先IPアドレスがそのCFEの宛先IPアドレスであると判定されるため、VNホップトンネルを終了する(例えば、CFE856の宛先IPアドレス)。次に、1115で、プロセスはVNホップトンネルヘッダが正しいUDPポートを指定するかどうかを判定する。そうでない場合、プロセスは終了する。それ以外の場合、1120で、プロセスはVNホップトンネルヘッダを削除する。受信したデータメッセージを考慮するために、CFEは、中間ホップCFEとして受信したメッセージの数を定量化するために、保持するRX(受信)カウンタを(1125において)インクリメントする。
1130において、プロセスは、このデータメッセージの次ホップインタフェースを識別するために、識別されたVNPルーティングコンテキスト(例えば、VRF名前空間のVNPの部分)において、経路ルックアップ(例えば、LPMルックアップ)を実行する。いくつかの実施形態では、この経路ルックアップは、内部テナントトンネルヘッダで識別される出力CFEの宛先IPに少なくとも部分的に基づいた(例えば、VRF名前空間のVNPの部分における)LPMルックアップである。
次に、プロセスは、(1135において)次ホップ出力インタフェースが中間CFEのローカルインタフェースであるかどうかを決定する。その場合、プロセスは(1140において)テナントトンネルヘッダを用いて既にカプセル化されているデータメッセージにVNホップトンネルヘッダを追加する。プロセスは、VNホップトンネルヘッダの宛先IPアドレスを、テナントトンネルヘッダで指定されている出力CFEの宛先IPアドレスに(1142において)設定する。また、VNホップトンネルヘッダの送信元IPアドレスを(1142において)CFEのIPアドレスに設定する。このトンネルヘッダでは、プロセスはUDP属性(例えばUDPポートなど)も設定する。
次に、1144において、プロセスは、データメッセージを宛先の出力CFEに転送できるように、(1130で識別される)そのローカルインタフェースに、ダブルカプセル化されたデータメッセージを提供する。このVNホップトンネルのカプセル化解除および転送の一例は、図8のCFE856の動作を参照して上述した。受信したデータメッセージを考慮するために、CFEは、中間ホップCFEとして送信したメッセージの数を定量化するために保持するTX(送信)カウンタを(1146で)インクリメントする。1146の後、プロセス1100は終了する。
一方、プロセスは、(1135において)次ホップ出力インタフェースがそのCFEのローカルインタフェースではなく、むしろ別のルータの宛先IPアドレスであると判定した場合、プロセスは、以前にVNホップトンネルヘッダを削除したデータメッセージに(1150において)VNホップトンネルヘッダを追加する。新しいVNホップトンネルヘッダでは、処理1100がそのCFEの送信元IPアドレスと次ホップ中間CFEの宛先IPアドレス(1130で特定)を、VNホップトンネルヘッダの送信元および宛先IPアドレスとして(1150において)埋め込む。このVNPトンネルヘッダは、UDPの宛先ポートを持つUDPレイヤ4プロトコルも指定する。
次に、1155において、プロセスは、識別されたVNPルーティングコンテキスト(例えば、VRFネームスペースのVNPの部分)において、別の経路ルックアップ(例えば、LPMルックアップ)を実行する。今回、ルックアップは、新しいVNホップトンネルヘッダで識別される次ホップ中間CFEのIPアドレスに基づく。この中間CFEは、仮想ネットワーク内の現在の中間CFEの次ホップであるため、ルーティングテーブルは、次ホップ中間CFEに送信されるデータメッセージのローカルインタフェースを識別する。したがって、VNPルーティングコンテキストにおけるこのルックアップは、現在の中間CFEがダブルカプセル化されたメッセージを提供するためのローカルインタフェースを識別する。次に、プロセスは、このデータメッセージの送信を考慮するための(1160において)VN中間TX(送信)カウンタをインクリメントする。1160の後、プロセスは終了する。
図13は、テナントの企業コンピューティングデバイス(例えば、支店内)から別のテナントマシン(例えば、別の支店、テナントデータセンタまたはSaaSプロバイダデータセンタ内)に送信されるテナントのメッセージを受信したときに、入力MFNのCFEによって実行されるメッセージ処理プロセス1300を示す。図9のプロセス900は、後述するように、このプロセス1300のサブセットである。図13に示すように、プロセス1300は、入ってくるIPsecトンネルの識別子に基づいて、テナントルーティングコンテキストを(905において)最初に識別することによって、開始される。
1310において、プロセスは、受信データメッセージのヘッダ内の送信元IPアドレスと宛先IPアドレスの両方がパブリックIPアドレスであるかどうかを判定する。そうである場合、プロセス(1315)は、データメッセージをドロップし、受信データメッセージのIPsecトンネルのために保持しているドロップカウンタをインクリメントする。1315において、プロセスがカウンタをドロップするのは、テナントのIPsecトンネルを介してメッセージを受信する場合には、パブリックIPアドレスとの間でアドレス指定されたメッセージを受信すべきではないためである。いくつかの実施形態では、プロセス1300はまた、ICMPエラーメッセージを送信元の企業コンピューティングマシンへ送り返す。
一方、(1310において、)データメッセージがパブリックIPアドレスからのものではなく、他のパブリックIPアドレスへのものでもないと判定した場合、(1320において)受信データメッセージのヘッダ内の宛先IPアドレスがパブリックIPアドレスであるか否かを判定する。その場合、プロセスは、プロセス1300の開始時に実行された動作905を除き、図9のプロセス900を実行するために1325に遷移する。1325の後、プロセス1300は終了する。一方、プロセス1300は、(1320において)受信データメッセージのヘッダ内の宛先IPアドレスがパブリックIPアドレスでないと判定した場合、このデータメッセージを受信するために、識別されたIPsecトンネルのRX(受信)カウンタを(1330で)インクリメントする。
次に、プロセス1300は、識別されたテナントルーティングコンテキスト(例えば、VRFネームスペースのテナントの部分)において、(1335において)経路ルックアップ(例えば、LPMルックアップ)を実行する。このルックアップは、パブリッククラウドデータセンタを介して構築されたテナントの仮想ネットワークを出るための出力インタフェースのIPアドレスを識別する。図13に示す例では、プロセス1300は、データメッセージがSaaSプロバイダデータセンタ内のマシンに向けたものである場合、ルックアップ動作1335に到達する。したがって、このルックアップは、テナントの仮想ネットワークを出てSaaSプロバイダマシンに到達するための出力ルータのIPアドレスを識別する。いくつかの実施形態では、すべてのSaaSプロバイダ経路は、1つの経路テーブルまたはVRFネームスペースの1つの部分にインストールされ、他の実施形態では、異なるSaaSプロバイダの経路は、異なる経路テーブルまたは異なるVRFネームスペース部分に格納される。
1340において、プロセスは、受信データメッセージにテナントトンネルヘッダを追加し、このトンネルヘッダに送信元および宛先IPアドレスとして、入力CFEの送信元IPアドレスおよび出力ルータの宛先IPアドレスを埋め込む。次に、1345において、プロセスは、このデータメッセージの送信を考慮するために、テナントのためのVN送信カウンタをインクリメントする。1350において、プロセスは、このデータメッセージの次ホップインタフェースとしてそのローカルインタフェースの一つを識別するために、VNPルーティングコンテキスト(例えば、VNPネームスペースのVNPの部分)において、経路ルックアップ(例えば、LPMルックアップ)を実行する。次ホップが別のCFEである場合(他のパブリッククラウドデータセンタでの場合など)、いくつかの実施形態でのプロセスは、さらにVNホップヘッダでデータメッセージをカプセル化し、VNホップヘッダの送信元および宛先としてCFEのIPアドレスと他のCFEのIPアドレスを組み込む。1355において、プロセスは、データメッセージをその出力ルータに転送できるようにするために、カプセル化されたデータメッセージを識別されたローカルインタフェースに提供する。1355の後、プロセス1300は終了する。
いくつかの場合には、入力MFNは、そのCFEが別のMFNのCFEを経由せずにデータメッセージの宛先マシンに直接転送することができる、テナントのためのデータメッセージを受信することができる。このようないくつかの場合において、CFEがテナント固有の情報を他の後続のVN処理モジュールに中継する必要がない場合、または必要な情報を他のメカニズムを介して後続のVN処理モジュールに提供可能である場合、データメッセージをテナントヘッダまたはVNホップヘッダでカプセル化する必要がない。
たとえば、テナントのデータメッセージを外部のSaaSプロバイダデータセンタに直接転送するには、後でさらに説明するように、入力MFNのNATエンジン215は、テナント識別子に基づいてNAT動作を実行しなければならない。入力MFN内の入力CFEまたは別のモジュールは、入力MFNの関連するNATエンジン215にテナント識別子を提供しなければならない。入力CFEおよびNATエンジンが同じコンピュータ上で実行される場合、いくつかの実施形態は、この情報を共有メモリの場所に格納することによって、これら2つのモジュール間でこの情報を共有する。一方、CFEおよびNATエンジンが同じコンピュータ上で実行されない場合、いくつかの実施形態は、他のメカニズム(例えば、帯域外通信)を使用して、入力CFEおよびNATエンジン間でテナントIDを共有する。しかしながら、このような場合、他の実施形態は、入力MFNの異なるモジュール間で保存IDを記憶し、共有するためにカプセル化ヘッダを使用する(すなわち、帯域内通信を使用する)。
以下にさらに説明するように、いくつかの実施形態は、テナントの仮想ネットワークの外部にメッセージを送信する前に、データメッセージの送信元IP/ポートアドレスに対して1または2の送信元NATの動作を実行する。図14は、出力ルータで実行されているNAT動作を示している。しかしながら、以下にさらに説明するように、いくつかの実施形態は、この追加のNAT動作が図13を参照して上述されていないとしても、入力ルータにおけるデータメッセージに対して別のNAT動作を実行する。
図14は、出力ルータが、インターネットを介してSaaSプロバイダデータセンタに転送されるべきデータメッセージを受信したときに、いくつかの実施形態において実行する処理1400を示す。図示されるように、プロセスは、最初に、仮想ネットワークに関連付けられたインタフェース上で(1405において)データメッセージを受信する。このメッセージは、テナントトンネルヘッダでカプセル化される。
1410で、プロセスは、このトンネルヘッダの宛先IPアドレスがルータの宛先IPアドレスであると判定するため、テナントトンネルヘッダを除去する。その後、プロセスは、除去されたトンネルヘッダからテナントIDを(1415において)取得する。受信されたデータメッセージを考慮するために、プロセスは、抽出されたテナントIDによって指定されたテナントに対して保持するRX(受信)カウンタを(1420において)インクリメントする。
次に、1425において、プロセスは、データメッセージの元のヘッダ内の宛先IPが、出力ルータのローカルインタフェース(例えば、ローカルポート)を介して到達可能なパブリックIPであるかどうかを判定する。このローカルインタフェースは、VNPトンネルに関連付けられていないインタフェースである。そうでない場合、プロセスは終了する。それ以外の場合、プロセスは(1430において)送信元NAT動作を実行して、このメッセージのヘッダ内のデータメッセージの送信元IP/ポートアドレスを変更する。NAT動作およびそれを実行する理由は、図16および図17を参照して、以下にさらに説明される。
1430の後に、プロセスは、(1435において)このデータメッセージの次ホップインタフェースを識別するために、インターネットルーティングコンテキスト(すなわち、ルーティングデータのインターネットルーティング部分、例えば、ルータのインターネットVRF名前空間)において経路ルックアップ(例えば、LPMルックアップ)を実行する。プロセスは、いくつかの実施形態において、受信データメッセージの元のヘッダの宛先ネットワークアドレス(例えば、宛先IPアドレス)に基づいて、このルックアップを実行する。このルックアップによって識別されるレコードから、プロセス1400は、データメッセージが宛先に送られる必要があるローカルインタフェースを識別する。したがって、1435において、プロセス1400は、送信元ネットワークアドレス変換データメッセージを、その宛先に転送するために、その識別されたローカルインタフェースに提供する。1435の後、プロセスは、メッセージをSaaSプロバイダに送信するために保持するカウンタを(1440において)インクリメントし、その後終了する。
図15は、SaaSプロバイダマシンからテナントマシンに送信されるメッセージを受信する入力ルータによって実行されるメッセージ処理プロセス1500を示している。図示されるように、入力プロセス1500は、最初に、いくつかまたは全てのSaaSプロバイダ通信に使用されるパブリックIPアドレスを有する専用の入力インタフェース上のデータメッセージを受信することによって(1505において)開始する。いくつかの実施形態において、この入力インタフェースは、仮想ネットワークとの通信に使用されるものとは異なるIPアドレスを有する、異なるインタフェースである。
メッセージを受信した後、プロセスは、受信データメッセージのヘッダに含まれる宛先IPアドレスを使用して、パブリックインターネットルーティングコンテキストで(1510において)経路ルックアップを実行する。このルックアップに基づいて、プロセスは宛先IPアドレスがローカルであり、有効なNAT動作に関連付けられているかどうかを(1515において)判定する。そうでない場合、プロセスは終了する。それ以外の場合、プロセスは(1520において)インターネットRX(受信)カウンタをインクリメントして、データメッセージを受信することを考慮する。
次に、1525で、プロセスは、データメッセージの宛先IP/ポートアドレスを、仮想ネットワークが特定のテナントに関連付けられている新しい宛先IP/ポートアドレスに変換するリバースNAT動作を実行する。このNAT動作では、テナントIDも生成される(たとえば、テナントIDを変換された宛先IPに関連付けるマッピングテーブルからテナントIDを取得したり、新しい宛先IP/ポートアドレスを取得するために使用されるのと同じマッピングテーブルからテナントIDを取得したりする)。いくつかの実施形態では、処理1500は、処理1400が(1430において)そのSNAT動作を実行したときに(1525において)そのリバースNAT動作を実行するために、処理1400が生成した接続レコードを使用する。この接続レコードには、SNATおよびDNAT動作で使用される内部IP/ポートアドレスと外部IP/ポートアドレスのマッピングが含まれる。
変換された宛先ネットワークアドレスに基づいて、プロセスは、(1530において)識別されたテナントルーティングコンテキスト(すなわち、テナントIDによって指定されたルーティングコンテキスト)で経路ルックアップ(例えば、LPMルックアップ)を実行し、テナントの仮想ネットワークを出て企業コンピューティングノード(例えば、支店)内のテナントのマシンに到達するための出力インタフェースのIPアドレスを識別する。この出力インタフェースは、いくつかの実施形態における出力MFNの出力CFEのIPアドレスである。1530において、プロセスは、受信データメッセージにテナントトンネルヘッダを追加し、このトンネルヘッダの送信元および宛先IPアドレスとして、入力ルータのIPアドレスおよび出力CFEのIPアドレスを埋め込む。次に、1535において、プロセスは、このデータメッセージの送信を考慮するために、テナントのためのVN送信カウンタをインクリメントする。
1540において、プロセスは、識別されたVNPルーティングコンテキスト(例えば、ルータのVRFネームスペースのようなルーティングデータのVNPの部分)において、入力ルータがカプセル化されたメッセージを提供するためのローカルインタフェース(例えば、その物理または仮想ポート)を識別するために、経路ルックアップ(例えば、LPMルックアップ)を実行する。次に、プロセスは(1540において)受信データメッセージにVNホップヘッダを追加し、このVNホップヘッダの送信元および宛先IPアドレスとして、入力ルータのIPアドレスと次ホップCFEのIPアドレスを埋め込む。1555の後、プロセスは終了する。
上述のように、いくつかの実施形態におけるMFNは、仮想ネットワークへのデータメッセージの入出力パス上でNAT動作を行うNATエンジン215を含む。NAT動作は、今日、多くのコンテキストにおいて、そして多くのデバイス(例えば、ルータ、ファイアウォール等)によって、一般に実行される。例えば、NAT動作は一般に、トラフィックがプライベートネットワークから出て、インターネットで使用されている規制されたパブリックIPアドレス空間から内部IPアドレス空間を隔離するときに実行される。NAT動作では、通常、1つのIPアドレスが別のIPアドレスにマップされる。
インターネットに接続されたコンピュータの急増に伴い、課題は、コンピュータの数が利用可能なIPアドレスの数を上回ることである。残念ながら、4,294,967,296もの利用可能なユニークなアドレスがあるとしても、各コンピュータに一意のパブリックIPアドレスを割り当てることは、すでに実用的ではない。回避する方法の1つは、プライベートネットワークのエッジポイントにあるルータにのみパブリックIPアドレスを割り当てることである。一方、ネットワーク内の他の装置は、内部プライベートネットワーク内でのみ一意のアドレスを取得する。デバイスが内部プライベートネットワーク外のデバイスと通信する場合、そのトラフィックは通常、NAT動作を実行するインターネットゲートウェイを通過し、このトラフィックの送信元IPをインターネットゲートウェイのパブリック送信元IPアドレスに置き換える。
プライベートネットワークのインターネットゲートウェイは、インターネット上に登録されたパブリックアドレスを取得するが、このゲートウェイに接続するプライベートネットワーク内の各デバイスは、登録されていないプライベートアドレスを受信する。内部プライベートネットワークのプライベートアドレスは、任意の範囲のIPアドレスにすることができる。しかしながら、IETF(Internet Engineering Task Force)は、プライベートネットワークが使用するプライベートアドレスのいくつかの範囲を提案している。これらの範囲は、ルータがプライベートアドレスとパブリックアドレスを容易に区別できるように、一般にパブリックインターネットでは利用可能ではない。これらのプライベートアドレスの範囲はRFC1918として知られ、(1)クラスA 10.0.0.0~10.255.255.255、(2)クラスB 172.16.0.0~172.31.255.255、(3)クラスC 192.168.0.0~192.168.255.255である。
プライベートネットワークから出るデータメッセージフローで送信元IP変換を実行することが重要である。これにより、外部デバイスは、同じ内部IPアドレスを使用する異なるプライベートネットワーク内の異なるデバイスを区別できる。外部デバイスがプライベートネットワーク内のデバイスに応答メッセージを送信する必要がある場合、外部デバイスはインターネット上のユニークでルーティング可能なパブリックアドレスに応答を送信する必要がある。多数のプライベートネットワーク内の多数のデバイスで使用される可能性がある内部デバイスの元のIPアドレスは使用することができない。外部デバイスは、元のNAT動作が内部デバイスのプライベートの送信元IPアドレスを置き換えた、パブリックIPアドレスに応答を送信する。この応答メッセージを受信した後、プライベートネットワーク(例えば、ネットワークのゲートウェイ)は、応答のパブリックの宛先IPアドレスを内部デバイスのIPアドレスに置き換えるために、別のNAT動作を実行する。
プライベートネットワーク内の多くのデバイス、およびこれらのデバイス上で実行される多くのアプリケーションは、プライベートネットワークに関連付けられた1つまたは有限のパブリックIPアドレスを共有する必要がある。したがって、NAT動作は通常、レイヤ4ポートアドレス(例えば、UDPアドレス、TCPアドレス、RTPアドレスなど)を変換して、これらのマシン上の異なる内部マシンおよび/または異なるアプリケーション上で開始または終了される内部メッセージフローに外部メッセージフローを一意に関連付けることができるようにする。NAT動作は、多くのコンテキストにおいて、これらの動作が、接続を追跡し、テーブル、メッセージの再構成、タイムアウト、期限切れ追跡された接続の強制終了などを動的に処理する必要があるため、ステートフルオペレーションであることもよくある。
上述のように、いくつかの実施形態の仮想ネットワークプロバイダは、複数のパブリッククラウド上の異なるテナントへのサービスとしての仮想ネットワークを提供する。これらのテナントは、プライベートネットワークで共通のIPアドレスを使用し、仮想ネットワークプロバイダの共通のネットワークリソース(パブリックIPアドレスなど)を共有する。いくつかの実施形態では、異なるテナントのデータトラフィックは、トンネルを介してオーバーレイネットワークのCFE間で伝送され、トンネルは各メッセージを一意のテナントIDでマークする。これらのテナント識別子を使用すると、プライベートのテナントIPスペースが重複している場合でも、メッセージを送信元デバイスに返信することができる。たとえば、テナント識別子により、テナント17の支店から送信元アドレス10.5.12.1を使用してAmazon.comに送信されたメッセージと、テナント235の支店から同じ送信元アドレス(同じ送信元ポート番号55331も含む)を使用してAmazon.comに送信されたメッセージを区別することができる。
RFC1631に従って実装された標準的なNATはテナンシー(tenancy)の概念をサポートしていないため、同じプライベートIPアドレスを持つ2つのメッセージを区別する方法がない。しかしながら、いくつかの実施形態の多くの仮想ネットワークのデプロイにおいて、今日では、多くの成熟したオープンソース、高性能な実装が存在するため、標準NATエンジンを使用することは有益である。実際、今日の多くのLinuxカーネルは標準機能としてNATエンジンを機能させている。
テナントの仮想ネットワークの異なるテナントに標準NATエンジンを使用するために、いくつかの実施形態の仮想ネットワークプロバイダは、標準NATエンジンを使用する前にテナンシーマッピング(TM)エンジンを使用する。図16は、仮想ネットワークのインターネットへの出力パス上にある各仮想ネットワークゲートウェイ1602内にデプロイされるそのようなTMエンジン1605を示す。図示されるように、各TMエンジン1605は、インターネット1625を介してSaaSプロバイダデータセンタ1620へのメッセージの出力パス上のNATエンジン1610の前に配置される。いくつかの実施形態では、MFNの各NATエンジン215は、(TMエンジン1605のような)TMエンジンおよび(NATエンジン1610のような)標準NATエンジンを含む。
図16に示される例では、メッセージフローは、2つの支店1655および1660、および2つの仮想ネットワークテナントのデータセンタ1665から来て、同じ入力ゲートウェイ1670を介して仮想ネットワーク1600に入るが、必ずしもそうである必要はない。いくつかの実施形態における仮想ネットワーク1600は、複数のパブリッククラウドベンダの複数のパブリッククラウドデータセンタにわたって定義される。いくつかの実施形態では、仮想ネットワークゲートウェイは、管理転送ノードの一部であり、TMエンジンは、出力MFN内のNATエンジン1610の前に配置される。
データメッセージがSaaSプロバイダデータセンタ1620への経路上で仮想ネットワークを出るために出力ゲートウェイ1602に到達すると、各TMエンジン1605は、これらのデータメッセージの送信元ネットワークアドレス(例えば、送信元IPおよび/またはポートアドレス)を新しい送信元ネットワークアドレス(例えば、送信元IPおよび/またはポートアドレス)にマッピングし、NATエンジン1610は、新しい送信元ネットワークアドレスをさらに別の送信元ネットワークアドレス(例えば、別の送信元IPおよび/またはポートアドレス)にマッピングする。いくつかの実施形態では、TMエンジンはステートレス要素であり、動的データ構造を見ることなく、静的テーブルを介して各メッセージのマッピングを実行する。ステートレス要素として、TMエンジンは、データメッセージフローの後続のメッセージを処理するときに接続レコードを使用するために、データメッセージフローの最初のデータメッセージを処理するときに接続レコードを生成しない。
一方、いくつかの実施形態におけるNATエンジン1605は、以前のSNATマッピングを反映する接続レコードを保存する接続ストレージへの参照によってそのマッピングを実行するステートフル要素である。NATエンジンがデータメッセージを受信すると、いくつかの実施形態では、このエンジンは、最初に接続ストレージをチェックして、受信したメッセージのフローのために以前に接続レコードを生成したかどうかを判定する。その場合、NATエンジンはこのレコードに含まれるマッピングを使用してSNAT動作を実行する。それ以外の場合は、新しいデータメッセージフローの新しいアドレスマッピングを取得するために使用する基準のセットに基づいてSNAT動作を実行する。これを行うために、いくつかの実施形態では、NATエンジンは、共通のネットワークアドレス変換技術を使用する。
いくつかの実施形態では、NATエンジンは、元のメッセージを送信したテナントマシンに応答データメッセージを転送するDNAT動作を実行するために、SaaSプロバイダマシンからの応答データメッセージを受信したときに、いくつかの実施形態の接続ストレージを使用することもできる。いくつかの実施形態では、処理された各データメッセージフローの接続レコードは、フローの識別子(例えば、変換された送信元ネットワークアドレスを有する5つのタプル識別子)を含むレコード識別子を有する。
マッピングを実行する際、TMエンジンは、同じ送信元IPアドレスとポートアドレスを使用する異なるテナントからのデータメッセージフローが、重複しない一意のアドレス空間にマッピングされるようにする。各メッセージに対して、TMエンジンはテナントIDを識別し、この識別子に基づいてアドレスマッピングを実行する。いくつかの実施形態では、TMエンジンは、異なるテナントからの任意の2つのメッセージが同じIPアドレスにマッピングされないように、異なるテナントの送信元IPアドレスを異なるIP範囲にマッピングする。
したがって、異なるテナントIDを持つ各ネットワークタイプは、IPアドレス(0.0.0.0~255.255.255.255)の完全な232の領域内の一意の宛先にマップされる。クラスAとBのネットワークは、クラスCのネットワークの256倍と16倍のIPアドレスを使用することができる。クラスA、B、およびCネットワークのサイズ比率を考慮すると、256のクラスAネットワークは、以下のように、(1)240のテナントをクラスAネットワークにマップするための240のクラスAネットワーク、(2)240のテナントをクラスBネットワークにマップするための15のクラスAネットワーク、および(3)240のテナントをクラスCネットワークにマップするための1つのクラスAネットワーク、に割り当てることができる。より具体的には、いくつかの実施形態において、最低範囲のAネットワーク(0.x.x/24から始まり、1.x.x/24、...、239.x.x/24まで)は、10.xクラスAネットワークから240の異なる対象クラスAネットワークに至るアドレスをマップするために使用される。次の15のクラスAネットワーク240.x.x.x/24から254.x.x.x/24は、それぞれ16のクラスBネットワーク(例えば、合計240のネットワーク(15*16))を含めるように使用される。最後のクラスAネットワーク255.x.x.x/24は、最大256のプライベートクラスCネットワークを含めるように使用される。256のテナントを取り付けることができるが、240のみが使用され、16のクラスCネットワークは使用されない。要約すると、いくつかの実施形態は、以下のマッピングを使用する。
・10.x.x.x/24ネットワークは、1.x.x.x/24-239.x.x.x/24につき、テナントごとに240の異なるマッピングとなり、
・172.16-31.x.x/12ネットワークは、240.x.x.x/24-254.x.x.x/24につき、テナントごとに240の異なるマッピングとなり、
・192.168.x.x/16は、255.x.x.x/24ネットワークにつき、各テナントに対して256個のマッピングのうち240個の利用可能なマッピングとなる。
上述のスキームでは、テナントがどのネットワーククラスのタイプを使用するかは事前に不明であると想定して、最大240のテナントをサポートすることができる。いくつかの実施形態では、パブリッククラウドネットワークは、プライベートIPアドレスを使用する。このような場合、プライベートアドレス空間に再びマップしないことが望ましい。いくつかの実施形態では、クラスAネットワークおよびクラスBネットワークを除去するので、これらの実施形態でサポート可能なテナントは239個のみである。ユニークなマッピングを達成するために、いくつかの実施形態は、すべてのテナントIDを1から239まで番号付けし、次に、プライベートなドメインのうちのマスクされていない部分の最下位8ビットに、モジュロ240の(8ビットで表される)テナントIDを加える。この場合、クラスAアドレスの場合、最初のテナント(番号1)は11.xx.xx.xx/24に、最後のテナント(239)は9.xx.xx.xx/24にマップされる。
図16に示す実装では、いくつかの実施形態は、各TMエンジン1605に、任意の潜在的なテナントIDのサブネットと、そのような各サブネット内の任意の特定のIPアドレスにメッセージをルーティングする方法とを提供する。この情報は、テナント、ブランチ、およびモバイルデバイスが追加または削除されると、動的に変化し得る。したがって、この情報は、仮想ネットワークのインターネット出力ゲートウェイ内のTMエンジンに動的に配信される必要がある。仮想ネットワークプロバイダの出力インターネットゲートウェイが多数のテナントによって使用される可能性があるため、配信され定期的に更新される情報の量は大きくなる可能性がある。また、テナントIDの240(または239)という制限は、グローバルなものであり、出力ポイントに複数のIPアドレスを追加することによってのみ解決することができる。
図17は、図16に示された単一NATアプローチの代わりに、いくつかの実施形態において使用されるダブルNATアプローチを示す。図17に示すアプローチは、ほとんどの(すべてではないが)TMエンジンに配布されるテナントデータをより少なくし、より多くのプライベートテナントネットワークを仮想ネットワークプロバイダの内部ネットワークにマップすることを可能にする。テナントマシンから仮想ネットワーク1700を通って、次にインターネット1625を通って別のマシン(例えば、SaaSプロバイダデータセンタ1620内のマシン)に通過するデータメッセージフローの場合、図17に示されているアプローチは、データメッセージフローの入力ゲートウェイ1770と、このフローが仮想ネットワークを出てインターネット1625に入る出力ゲートウェイ1702または1704とにNATエンジンを配置する。このアプローチはまた、入力ゲートウェイ1770のNATエンジン1712の前にTMエンジン1705を配置する。
図17に示される例では、メッセージフローは、2つの支店1755および1760、および2つの仮想ネットワークテナントのデータセンタ1765から来て、同じ入力ゲートウェイ1770を介して仮想ネットワーク1700に入るが、必ずしもそうである必要はない。仮想ネットワーク1600と同様に、いくつかの実施形態における仮想ネットワーク1700は、複数のパブリッククラウドベンダの複数のパブリッククラウドデータセンタにわたって定義される。また、いくつかの実施形態では、仮想ネットワークゲートウェイ1702、1704、および1770は、管理転送ノードの一部であり、TMエンジンは、これらのMFN内のNATエンジン215の前に、これらの実施形態では配置される。
TMエンジン1605および1705は、図16および17において同様に動作する。TMエンジン1605と同様に、TMエンジン1705は、データメッセージがSaaSプロバイダデータセンタ1620に向けられる(すなわち、SaaSプロバイダデータセンタ1620の宛先IPアドレスを有する)場合、仮想ネットワークに入ってくるデータメッセージの送信元IPアドレスおよびポートアドレスを新しい送信元IPアドレスおよびポートアドレスにマップする。このようなデータメッセージごとに、TMエンジン1705は、テナントIDを識別し、この識別子に基づいてアドレスマッピングを実行する。
いくつかの実施形態におけるTMエンジン1605と同様に、TMエンジン1705はステートレス要素であり、動的データ構造を参照することなく、静的テーブルを介して各メッセージのマッピングを実行する。ステートレス要素として、TMエンジンは、データメッセージフローの後続のメッセージを処理するときに接続レコードを使用するために、データメッセージフローの最初のデータメッセージを処理するときに接続レコードを生成しない。
そのマッピングを行う際に、入力ゲートウェイ1770内のTMエンジン1705は、同じ送信元IPおよびポートアドレスを使用する異なるテナントからのデータメッセージフローが、重複しない一意のアドレス空間にマッピングされることを保証する。いくつかの実施形態では、TMエンジンは、異なるテナントからの任意の2つのメッセージが同じIPアドレスにマッピングされないように、異なるテナントの送信元IPアドレスを異なるIP範囲にマッピングする。他の実施形態では、TMエンジン1705は、2つの異なるテナントの送信元IPアドレスを同じ送信元IPの範囲にマッピングするが、異なる送信元ポートの範囲にマッピングすることができる。さらに別の実施形態では、TMエンジンは、2つのテナントを異なる送信元IPの範囲にマッピングする一方で、他の2つのテナントを同じ送信元IPの範囲にマッピングしつつ、異なる送信元ポートの範囲にマッピングする。
TMエンジン1605とは異なり、仮想ネットワーク入力ゲートウェイのTMエンジン1705は、入力ゲートウェイに接続されている支店、企業データセンタ、および企業コンピューティングノードのテナントを識別するだけでよい。これにより、各TMエンジンに最初に提供され、定期的に更新される必要があるテナントデータが大幅に削減される。また、以前と同様に、各TMエンジンは、一意のアドレス空間に239/240テナントのみをマッピングすることができる。ただし、TMエンジンは仮想ネットワークプロバイダの入力ゲートウェイに配置されるため、TMエンジンはそれぞれ239/240テナントを一意にマップすることができる。
いくつかの実施形態における入力ゲートウェイ1770のNATエンジン1712は、入力ゲートウェイ1770が存在するパブリッククラウド(例えば、AWS、GCPまたはAzure)に固有の外部パブリックIPアドレスまたは内部IPアドレスのいずれかを使用することができる。どちらの場合も、NATエンジン1712は、受信メッセージ(すなわち、仮想ネットワーク1700に入るメッセージ)の送信元ネットワークアドレスを、その入力ゲートウェイのプライベートクラウドネットワーク内でユニークなIPアドレスにマップする。いくつかの実施形態では、NATエンジン1712は、各テナントのデータメッセージフローの送信元IPアドレスを異なる一意のIPアドレスに変換する。しかしながら、他の実施形態では、NATエンジン1712は、異なるテナントのデータメッセージフローの送信元IPアドレスを同じIPアドレスに変換するが、異なるテナントのデータメッセージフローを区別するために送信元ポートアドレスを使用する。さらに別の実施形態では、NATエンジンは、2つのテナントの送信元IPアドレスを異なる送信元IPの範囲にマッピングし、一方、2つの他のテナントの送信元IPアドレスを同じ送信元IPの範囲にマッピングするが、送信元ポートの範囲は異なるようにする。
いくつかの実施形態では、NATエンジン1712は、以前のSNATマッピングを反映する接続レコードを保存する接続ストレージへの参照によってマッピングを実行するステートフル要素である。いくつかの実施形態では、NATエンジンは、元のメッセージを送信したテナントマシンに応答データメッセージを転送するDNAT動作を実行するために、SaaSプロバイダマシンからの応答データメッセージを受信したときに、いくつかの実施形態の接続ストレージを使用することもできる。TMおよびNATエンジン1705、1710および1712は、いくつかの実施形態において、コントローラクラスタ160によって構成される(例えば、異なるテナントおよびネットワークアドレス空間の異なる範囲のために使用するマッピングを記述するためのテーブルが提供される)。
図18は、入力NATエンジン1712の送信元ポート変換を説明する例を示している。具体的には、入力ゲートウェイ1770を介して仮想ネットワーク1700に入り、出力ゲートウェイ1702で仮想ネットワークを出るときに、テナンシーマッピングエンジン1705および入力NATエンジン1712がデータメッセージ1800上で実行する送信元アドレスマッピングを示す。図示されるように、テナントゲートウェイ1810は、データメッセージ1800を送信し、これは、送信元IPアドレス10.1.1.13および送信元ポートアドレス4432をもつIPsecゲートウェイ1805に到着する。いくつかの実施形態では、これらの送信元アドレスは、テナントマシンによって使用されるアドレスであり(図示せず)、他の実施形態では、これらの送信元アドレスの一方または両方は、テナントゲートウェイによって実行される送信元NAT動作またはテナントデータセンタ内の別のネットワーク要素によって生成される送信元アドレスである。
このメッセージがIPsecゲートウェイ1805によって処理された後、このゲートウェイまたは入力MFNの別のモジュールは、このメッセージを15であるテナントIDに関連付け、これはメッセージ1800が属する仮想ネットワークテナントを識別する。このテナントIDに基づいて、テナントマッピングエンジン1705は、次に、図に示すように、送信元IPおよびポートアドレスを15.1.1.13および253の送信元IPおよびポート宛先にマッピングする。この送信元IPアドレスとポートアドレスは、データメッセージ1800のメッセージフローを一意に識別する。いくつかの実施形態では、TMエンジン1705は、このマッピングをステートレスな方法で(すなわち、接続追跡レコードを参照せずに)実行する。他の実施形態では、TMエンジンは、ステートフルな方法でこのマッピングを実行する。
次に、入力NATエンジン1712は、(1)データメッセージ1800の送信元IPアドレスを198.15.4.33であるユニークなプライベートまたはパブリック(内部または外部) IPアドレスに変換し、(2)このメッセージの送信元ポート宛先をポート宛先714に変換する。いくつかの実施形態において、仮想ネットワークは、同一または異なるテナントの他のデータメッセージフローのために、このIPアドレスを使用する。したがって、これらの実施形態では、NATエンジン1712の送信元ネットワークアドレス変換(SNAT)動作は、送信元ポートアドレスを使用して、仮想ネットワーク内で同じIPアドレスを使用する異なるテナントの異なるメッセージフローを区別する。
いくつかの実施形態では、入力NATエンジンのSNAT動作によって割り当てられた送信元ポートアドレスは、仮想ネットワーク1700の外部の異なるメッセージフローを区別するために使用される送信元ポートアドレスでもある。これは、図18に示されている例の場合である。この例の出力NATエンジン1710は、SNAT動作を実行するときに、データメッセージの送信元ポートアドレスを変更しない。代わりに、送信元IPアドレスを外部IPアドレス198.15.7.125に変更する。これは、いくつかの実施形態では、仮想ネットワークの出力ゲートウェイのパブリックIPアドレスである。いくつかの実施形態におけるこのパブリックIPアドレスは、パブリッククラウドデータセンタのIPアドレスでもあり、そこでは入出力ゲートウェイ1770および1702が動作する。
送信元IPアドレスおよびポートアドレスである198.15.7.125および714を使用して、データメッセージはインターネットを介してルーティングされ、SaaSプロバイダのデータセンタのゲートウェイ1815に到達する。このデータセンタでは、SaaSプロバイダマシンは、このメッセージに基づいて動作を実行し、応答メッセージ1900を送り返す。その処理は、図19を参照して後述する。いくつかの実施形態では、SaaSプロバイダマシンは、送信元IPアドレス198.15.7.125および714を参照することによって定義される1つ以上のサービスルールに基づいて、データメッセージに対して1つ以上のサービス動作(例えば、ファイアウォール動作、IDS動作、IPS動作などのミドルボックスサービス動作)を実行する。これらの実施形態のいくつかにおいて、異なるテナントの異なるサービスルールは、これらのルール識別子で異なる送信元ポートアドレスを指定しながら、ルール識別子で同じ送信元IPアドレス(例えば198.15.7.125)を指定することができる。ルール識別子は、データメッセージに一致するルールを識別するルックアップ動作の実行中に、データメッセージフロー属性と比較するための属性のセットを指定する。
図19は、SaaSマシン(図示せず)がデータメッセージ1800の処理に応答して送信する応答メッセージ1900の処理を示す。いくつかの実施形態では、応答メッセージ1900は、元のデータメッセージ1800と同一であってもよく、元のデータメッセージ1800の修正バージョンであってもよく、あるいは完全に新しいデータメッセージであってもよい。図示されるように、SaaSゲートウェイ1815は、宛先IPアドレスおよびポートアドレス198.15.7.125および714に基づいてメッセージ1900を送信する。これらのアドレスは、このメッセージがSaaSゲートウェイ1815に到着したときのデータメッセージ1800の送信元IPおよびポートアドレスである。
メッセージ1900は、仮想ネットワークのゲートウェイ(図示せず)で受信され、このゲートウェイは、メッセージ1800がSaaSプロバイダに送信される前に、メッセージ1800に対する最後のSNAT動作を実行したNATエンジン1710に、データメッセージを提供する。図19に示す例では、データメッセージ1900は、最後のSNAT動作を実行したのと同じNATエンジン1710で受信されるが、これは、それぞれのデプロイにおいて該当する必要はない。
NATエンジン1710(現在入力NATエンジンとして機能している)は、データメッセージ1900上でDNAT(宛先NAT)動作を実行する。この動作は、パブリッククラウドルーティングファブリックおよび仮想ネットワークコンポーネント間を介してデータメッセージ1900を転送するために、外部宛先IPアドレス198.15.7.125を、仮想ネットワークによって使用される宛先IPアドレス198.15.4.33に変更する。繰り返しになるが、IPアドレス198.15.4.33は、いくつかの実施形態において、パブリックまたはプライベートIPアドレスであり得る。
図示されるように、NATエンジン1712(現在は出力NATエンジンとして機能している)は、NATエンジン1710が宛先IPアドレスを変換した後、メッセージ1900を受信する。次に、NATエンジン1712は、宛先IPおよびポートアドレスを15.1.1.13および253に置き換える、第2のDNAT動作をこのメッセージ1900に対して実行する。これらのアドレスは、TMエンジン1705によって認識されるアドレスである。TMエンジン1705は、これらのアドレスを10.1.1.13および4432の宛先IPおよびポートアドレスに置き換え、データメッセージ1900をテナントID15に関連付け、メッセージ1900をこのテナントIDと共にテナントゲートウェイ1810に転送するためのIPsecゲートウェイ1805に提供する。
いくつかの実施形態では、仮想ネットワークプロバイダは、上記のプロセス、システム、およびコンポーネントを使用して、同一または異なるパブリッククラウドプロバイダの複数のパブリッククラウド上で、複数の異なるテナント(たとえば、複数の企業の複数の異なる企業WAN)に複数の仮想WANを提供する。図20は、1つ以上のパブリッククラウドプロバイダの第Nのパブリッククラウド2005で、ネットワーク基盤およびコントローラクラスタ2010を持つ仮想ネットワークプロバイダの第Mのテナントの第Mの仮想企業WAN2015の例を示している。
各テナントの仮想WAN2015は、第Nのパブリッククラウド2005の全て又はこれらのパブリッククラウドのサブセットにまたがることができる。各テナントの仮想WAN2015は、1つ以上の支店2020、データセンタ2025、SaaSプロバイダデータセンタ2030、およびテナントのリモートデバイスを接続する。いくつかの実施形態では、各テナントの仮想WANは、VNPのコントローラクラスタがテナントの異なるコンピューティングノード2020から2035の間でデータメッセージを効率的に転送するために必要であるとみなすパブリッククラウド2005にまたがる。パブリッククラウドの選択において、いくつかの実施形態におけるコントローラクラスタは、テナントが選択するパブリッククラウド、および/またはテナントまたはテナントの少なくとも1つのSaaSプロバイダが1つ以上のマシンを持つパブリッククラウドも考慮する。
各テナントの仮想WAN2015は、テナントのリモートデバイス2035(例えば、モバイルデバイスまたはリモートコンピュータ)が、SaaSプロバイダサービスにアクセスするために(すなわち、SaaSプロバイダマシンまたはマシンクラスタにアクセスするために)、任意の支店またはテナントデータセンタのテナントのWANゲートウェイとのやり取りを回避することを可能にする。いくつかの実施形態におけるテナントの仮想WANは、これらのWANゲートウェイ(例えば、WANセキュリティゲートウェイ)の機能を仮想WANがまたがるパブリッククラウド内の1つ以上のマシンに移動することによって、リモートデバイスが支店およびテナントデータセンタのWANゲートウェイを回避することを可能にする。
たとえば、リモートデバイスがテナントまたはそのSaaSプロバイダサービスのコンピューティングリソースにアクセスできるようにするには、いくつかの実施形態のWANゲートウェイが、リモートデバイスがテナントのコンピュータリソースまたはそのSaaSプロバイダサービスにアクセスする方法を制御するファイアウォールルールを適用する必要がある。テナントのブランチまたはデータセンタWANゲートウェイを回避するために、テナントのファイアウォールエンジン210は、テナントの仮想WANがまたがる1つ以上のパブリッククラウドの仮想ネットワークMFNに配置される。
これらのMFN内のファイアウォールエンジン210は、リモートデバイスとの間のデータメッセージフローに対してファイアウォールサービス動作を実行する。1つ以上のパブリッククラウドにデプロイされた仮想ネットワークでこれらの動作を実行することで、テナントのリモートデバイスに関連付けられたデータメッセージトラフィックが、ファイアウォールルール処理を受けるためにテナントのデータセンタまたは支店を介して不必要にルーティングされる必要がなくなる。これにより、テナントデータセンタおよび支店でのトラフィックの輻輳が緩和され、これらのロケーションでコンピューティングリソースに送信されないトラフィックを処理するために、これらのロケーションでコストの高い受信/送信ネットワーク帯域幅を消費することが回避される。また、このアプローチは、データメッセージフローが宛先(例えば、入力MFN、出力MFN、または中間ホップMFN)を通過するときに、介在するファイアウォールルール処理が仮想ネットワーク内で発生することを可能にするため、リモートデバイスとの間でのデータメッセージトラフィックの転送を高速化するのにも役立つ。
いくつかの実施形態では、MFNのファイアウォールを実施するエンジン210(例えば、ファイアウォールサービスVM)は、VNP中央コントローラ160からファイアウォールルールを受信する。いくつかの実施形態におけるファイアウォールルールは、ルール識別子およびアクションを含む。いくつかの実施形態におけるルール識別子は、ファイアウォールルールがデータメッセージに一致するかどうかを判定するために、レイヤ2属性(例えば、MACアドレス)、レイヤ3属性(例えば、5つのタプル識別子など)、テナントID、ロケーションID(例えば、オフィスロケーションID、データセンタID、リモートユーザIDなど)などのデータメッセージ属性と比較される1つ以上の一致用の値(match value)を含む。
ファイアウォールルールのいくつかの実施形態におけるアクションは、ファイアーウォールルールがデータメッセージの属性と一致する場合に、ファイアウォール実施エンジン210がデータメッセージに対して取るべきアクション(例えば、許可、ドロップ、再ダイレクトなど)を特定している。複数のファイアウォールルールがデータメッセージと一致する可能性に対処するために、ファイアウォール実施エンジン210は、あるファイアウォールルールが別のファイアウォールルールよりも高い優先順位を持つことができるように、ファイアウォールルールデータストレージにファイアウォールルール(コントローラクラスタ160から受信する)を階層的に保存する。データメッセージが2つのファイアウォールルールに一致する場合、ファイアウォール実施エンジンは、いくつかの実施形態において、より高い優先度をもつルールを適用する。他の実施形態では、ファイアウォール実施エンジンは、その階層に従ってファイアウォールルールを検査し(すなわち、より高い優先順位のルールをより低い優先順位のルールの前に検査する)、別のより低い優先順位のルールがデータメッセージと一致する場合に、それが最初により高い優先順位のルールと一致することを確実にする。
いくつかの実施形態では、コントローラクラスタは、データメッセージが仮想ネットワークに入るときに入力ノード(例えば、ノード850)において、仮想ネットワーク上の中間ノード(例えば、ノード857)において、または仮想ネットワークを出るときに出力ノード(例えば、ノード855)において、ファイアウォールサービスがデータメッセージを検査するようにMFNコンポーネントを構成することができる。これらのノードのそれぞれにおいて、いくつかの実施形態におけるCFE(例えば、832、856、または858)は、その関連するファイアウォールサービスエンジン210を呼び出して、CFEが受信するデータメッセージ上でファイアウォールサービス動作を実行する。いくつかの実施形態では、ファイアウォールサービスエンジンは、このモジュールがデータメッセージに対してファイアウォールのアクションを実行することができるように、ファイアウォールサービスエンジンがそれを呼び出したモジュール(例えば、CFE)にその決定を返すのに対し、他の実施形態では、ファイアウォールサービスエンジンが、データメッセージに対してそのファイアウォールのアクションを実行することができるようにする。
いくつかの実施形態において、他のMFNコンポーネントは、ファイアウォールサービスエンジンにその動作を実行させるよう指示する。例えば、いくつかの実施形態におけるVPNゲートウェイ(例えば、225または230)は、データメッセージが入力ノードのCFEに渡されるべきかどうかを判定するため、関連するファイアウォールサービスエンジンにその動作を実行するように指示する。また、いくつかの実施形態のCFEは、データメッセージをその関連するファイアウォールサービスエンジンに渡し、それは、データメッセージを通過させることを決定した場合、外部ネットワーク(例えば、インターネット)を介してその宛先にデータメッセージを渡すか、または、外部ネットワークを介してその宛先にデータメッセージを渡す前に、そのデータメッセージをその関連するNATエンジン215に渡してそのNAT動作を実行する。
いくつかの実施形態の仮想ネットワークプロバイダは、パブリッククラウドで定義されているテナントのWANセキュリティゲートウェイが、ファイアウォールサービスに加えて、またはファイアウォールサービスの代わりに、他のセキュリティサービスを実装することを可能にする。たとえば、テナントの分散型WANセキュリティゲートウェイ(いくつかの実施形態では、テナントの仮想ネットワークがまたがる各パブリッククラウドデータセンタに分散される)には、ファイアウォールサービスエンジンだけでなく、侵入検知エンジンや侵入防御エンジンも含まれる。いくつかの実施形態では、侵入検知エンジンおよび侵入防御エンジンは、MFN150にアーキテクチャ的に組み込まれ、ファイアウォールサービスエンジン210と同様の位置を占める。
いくつかの実施形態におけるこれらのエンジンの各々は、中央コントローラクラスタ160によって配信される侵入検知/防御ポリシーを格納する1つ以上のストレージを含む。いくつかの実施形態では、これらのポリシーは、テナントの仮想ネットワーク(複数のパブリッククラウドデータセンタにデプロイされる)への不正な侵入を検出/防止し、検出された侵入イベント(ログの生成、通知の送信、サービスまたはマシンのシャットダウンなど)に応じてアクションを実行するようにエンジンを構成する。ファイアウォールルールと同様に、侵入検知/防御ポリシーは、仮想ネットワークが定義されている、それぞれの管理転送ノード(たとえば、入力MFN、中間MFN、および/またはデータメッセージフローの出力MFN)で実施することができる。
前述のように、仮想ネットワークプロバイダは、仮想WANがまたがる各パブリッククラウドに少なくとも1つのMFNをデプロイして、テナントのメッセージフローが仮想WANに出入りできるようにMFN間の経路を定義するようにデプロイされたMFNを構成する。また、上述したように、各MFNは、いくつかの実施形態では異なるテナントによって共有されることができ、他の実施形態では、各MFNは、ただ1つの特定のテナントのためにデプロイされる。
いくつかの実施形態では、各テナントの仮想WANは、オーバレイトンネルを介してそのWANによって使用されるMFNを接続することによって確立されるセキュアな仮想WANである。いくつかの実施形態におけるこのオーバレイトンネルアプローチは、各テナントのデータメッセージフローを、各テナントに固有のトンネルヘッダでカプセル化する。例えば、テナントを一意に識別するテナント識別子を含む。テナントの場合、いくつかの実施形態では、仮想ネットワークプロバイダのCFEは、テナントの仮想WANに出入りするための入力/出力転送要素を識別するために1つのトンネルヘッダを使用し、仮想ネットワークの介在する転送要素を通過するために別のトンネルヘッダを使用する。仮想WANのCFEは、他の実施形態において、異なるオーバレイカプセル化機構を使用する。
1つ以上のパブリッククラウド上にテナントの仮想WANをデプロイするために、VNPのコントローラクラスタは、(1)テナントの会社のコンピューティングノード(支店、データセンタ、モバイルユーザ、SaaSプロバイダなど)のロケーションに基づいて、テナントが利用可能なエッジMFN(異なるデータメッセージフローの入力または出力MFNとして機能できる)を識別し、(2)利用可能なすべてのエッジMFN間の経路を識別する。これらの経路が識別されると、CFEの転送テーブルに伝播される(たとえば、OpenFlowを使用して、異なるOVSベースの仮想ネットワークルータに伝播される)。具体的には、テナントの仮想WANを通過する最適な経路を識別するために、このWANに関連付けられたMFNは、それらと隣接するMFNとの間のネットワーク接続の品質を定量化する測定値を生成し、その測定値をVNPのコントローラクラスタに定期的に提供する。
前述のように、コントローラクラスタは、異なるMFNからの測定値を集約し、これらの測定値に基づいてルーティンググラフを生成し、テナントの仮想WANを通る経路を定義し、これらの経路をMFNのCFEの転送要素に配信する。テナントの仮想WANの定義済み経路を動的に更新するために、このWANに関連付けられているMFNは、定期的に測定値を生成し、これらの測定値をコントローラクラスタに提供する。コントローラクラスタは、受信した更新された測定値に基づいて、測定集計、経路グラフ生成、経路識別、および経路配信を定期的に繰り返す。
テナントの仮想WANを経由する経路を定義する場合、VNPのコントローラクラスタは、必要なエンドツーエンドのパフォーマンス、信頼性、およびセキュリティのために経路を最適化し、テナントのメッセージフローのルーティングを最小限に抑えようとする。また、コントローラクラスタは、ネットワークを通過するデータメッセージフローのレイヤ4処理を最適化するように、MFNコンポーネントを構成する(たとえば、接続パス全体でレート制御機構を分割することによってTCP接続のエンドツーエンドレートを最適化する)。
パブリッククラウドの普及により、企業の各支店に近い主要なパブリッククラウドデータセンタを見つけることが非常に容易になった。同様に、SaaSベンダは、パブリッククラウド内、または、パブリッククラウドデータセンタの近くに同様に配置されるアプリケーションのホスティングを増加させている。したがって、仮想企業WAN2015は、パブリッククラウド2005を、企業のコンピューティングノード(例えば、支店、データセンタ、リモートデバイス、SaaSプロバイダ)の近傍に存在する企業ネットワーク基盤として安全に使用する。
企業WANでは、ビジネスクリティカルなアプリケーションを常に許容可能なパフォーマンスで提供するために、帯域幅の保証が必要である。このようなアプリケーションは、例えば、ERP、財務または調達、期限指向アプリケーション(例えば、工業またはIoT制御)、リアルタイムアプリケーション(例えば、VoIPまたはビデオ会議)のような、対話型データアプリケーションであり得る。したがって、従来のWAN基盤(フレームリレーやMPLSなど)は、このような保証を提供する。
マルチテナントネットワークで帯域幅保証を提供する際の主な障害は、特定の顧客のために1つ以上のパスで帯域幅を確保する必要があることである。いくつかの実施形態では、VNPはQoSサービスを提供し、入力認定レート(Ingress Committed Rate、ICR)保証および出力認定レート(Egress Committed Rate、ECR)保証を提供する。ICRは仮想ネットワークに入るトラフィックレートを表し、ECRは仮想ネットワークからテナントサイトに出るトラフィックレートを表す。
トラフィックがICRおよびECRの制限を超えない限り、いくつかの実施形態における仮想ネットワークは、帯域幅および遅延の保証を提供する。たとえば、HTTPの入力または出力トラフィックが1Mbpsを超えない限り、帯域幅と低遅延が保証される。これは、ポイント・ツー・クラウドモデルであり、なぜなら、QoSの目的のためには、VNPは、その宛先がICR/ECRの境界内にある限り、トラフィックの宛先を追跡する必要がないためである。このモデルは、ホースモデルと呼ばれることもある。
より厳格なアプリケーションでは、顧客がポイント・ツー・ポイント保証を希望する場合、非常に重要なトラフィックを配信するために仮想データパイプを構築する必要がある。たとえば、エンタープライズでは、サービスレベルアグリーメントの保証が高い2つのハブサイトまたはデータセンタが必要になる場合がある。そのため、VNPルーティングでは、各顧客の帯域幅制約を満たすルーティングパスが自動的に選択される。これは、ポイント・ツー・ポイントモデルまたはパイプモデルと呼ばれる。
エンドユーザに保証された帯域幅を提供するVNPの主な利点は、変化する帯域幅要求に応じてVNP基盤を調整することが可能なことである。ほとんどのパブリッククラウドでは、同じクラウドの異なる領域に配置された2つのインスタンス間の最低帯域幅保証が提供される。現在のネットワークに、新しい要求に対して、保証された帯域幅を提供するのに十分な未使用キャパシティがない場合、VNPはそのファシリティに新しいリソースを追加する。たとえば、VNPは高需要領域に新しいCFEを追加することができる。
1つの課題は、経路を計画し、基盤をスケールアップおよびスケールダウンする際に、この新しい次元のパフォーマンスとコストを最適化することである。アルゴリズムおよび帯域幅アカウンティングを容易にするために、いくつかの実施形態は、エンド・ツー・エンドの帯域幅確保が分割されないことを想定する。他の方法として、ある特定の帯域幅(例えば、10Mbps)が、特定のテナントのブランチAとブランチBの間に確保されている場合、帯域幅は、ブランチAが接続する入力CFEから始まる単一のパス上に割り当てられ、次に、ブランチBに接続されている出力CFEに到達するために、ゼロ以上の中間CFEのセットを通過する。また、いくつかの実施形態は、帯域幅の保証されるパスは単一のパブリッククラウドを通過するだけであると想定する。
ネットワークトポロジ上で交差する様々な帯域幅の確保を考慮するために、いくつかの実施形態では、VNPは、確保された帯域幅のパス上のルーティングを静的に定義し、データメッセージフローが、帯域幅要件のために、確保された同じ経路を常に通過するようにする。いくつかの実施形態では、各経路は、その経路によって通過する各CFEが、この経路に関連付けられた単一の発信インタフェースと一致する単一のタグで識別される。具体的には、各CFEは、ヘッダにこのタグがあり、特定の着信インタフェースから到着する各データメッセージに対して、単一の発信インタフェースを照合する。
いくつかの実施形態では、コントローラクラスタは、いくつかの相互接続されたノードによって形成されるネットワークグラフを維持する。グラフの各ノードnには、このノードに割り当てられた保証帯域幅の合計(TBWn)と、このノードによってすでに確保(特定の予約パスに割り当て)されている帯域幅の合計(RBWn)がある。さらに、各ノードについて、グラフは、ギガバイトあたりのコスト(Cij)と、このノードとグラフ内の他のすべてのノードとの間の送信トラフィックに関連するミリ秒単位の遅延(Dij)とを含む。ノードiとノードjの間の送信トラフィックに関連する重みはWij=a*Cij+Dijであり、ここでaは、典型的には1から10の間のシステムパラメータである。
ブランチAとブランチBの間の値BWの帯域幅確保の要求が受け入れられると、コントローラクラスタは、まず、ブランチAとブランチBにそれぞれバインドされている特定の入力および出力ルータnとmに要求をマッピングする。次に、コントローラクラスタは、nとmの間の2つの最低コスト(例えば、最短経路)を計算するルーティングプロセスを実行する。最初の経路は、計算された経路に沿った利用可能な帯域幅に関係なく、nとmの間の最低コスト(例えば最短経路)経路である。この経路の全重みは、W1として計算される。
第2の最低コスト(例えば、最短経路)計算は、最初にBW > TBWi - RBWiの全てのノードiを排除することによってグラフを修正する。修正されたグラフは、トリミング済グラフと呼ばれる。次に、コントローラクラスタは、トリミング済みのグラフ上で第2の最低コスト(例えば、最短経路)経路計算を実行する。第2の経路の重みがK%以下(Kは通常、第1の経路よりも10%~30%高い)の場合、第2の経路が優先パスとして選択される。一方、この要件を満たさない場合、コントローラクラスタは、第1の経路に、TBWiRBWiの値が最も小さいノードiを追加し、次に、2つの最低コスト(例えば、最短経路)計算を繰り返す。コントローラクラスタは、条件が満たされるまで、さらにルータを追加し続ける。その時点で、確保された帯域幅BWがすべてのRBWiに追加され、ここでiは選択された経路上のルータである。
すでに帯域幅が確保されている経路の追加帯域幅を要求する特別な場合、コントローラクラスタは、まずノードAとBの間の現在の帯域幅確保を削除し、これらのノード間の合計帯域幅要求のパスを計算する。これを行うために、いくつかの実施形態では、各ノードのために保持される情報は、各タグ、または各送信元および宛先ブランチのために確保された帯域幅も含み、確保された帯域幅全体だけではない。帯域幅確保がネットワークに追加された後に、仮想ネットワーク経由の測定されたネットワーク遅延またはコストに大きな変化がない限り、いくつかの実施形態は、経路を再考しない。しかしながら、測定および/またはコストが変更した場合、これらの実施形態は、帯域幅予約および経路計算処理を繰り返す。
図21は、仮想ネットワークプロバイダのコントローラクラスタ160によって実行され、特定のテナントのために仮想WANをデプロイし管理するプロセス2100を概念的に示している。いくつかの実施形態では、プロセス2100は、コントローラクラスタ160上で実行されるいくつかの異なるコントローラプログラムによって実行される。このプロセスの動作は、図21に示すシーケンスに従う必要はない。なぜなら、これらの動作は、異なるプログラムによって並列または異なるシーケンスで実行することができるからである。したがって、これらの動作は、コントローラクラスタによって実行される動作の1つの例示的なシーケンスを説明するためだけに、この図に示されている。
図示されているように、コントローラクラスタは、最初に、いくつかの異なるパブリッククラウドプロバイダ(Amazon AWS、Google GCP など)の複数のパブリッククラウドデータセンタに(2105において)複数のMFNをデプロイする。いくつかの実施形態におけるコントローラクラスタは、プロセス2100が示されている特定のテナントとは異なる1つ以上の他のテナントに対して、これらのデプロイされたMFNを(2105において)構成する。
2110において、コントローラクラスタは、特定のテナントの外部マシン属性およびロケーションに関する特定のテナントデータを受信する。いくつかの実施形態では、このデータは、特定のテナントによって使用されるプライベートサブネットと、特定のテナントが外部マシンを有する1つ以上のテナントオフィスおよびデータセンタの識別子とを含む。いくつかの実施形態では、コントローラクラスタは、APIを介して、またはコントローラクラスタが提供するユーザインタフェースを介してテナントデータを受信することができる。
次に、2115において、コントローラクラスタは、特定のテナントのための仮想ネットワークを確立するために使用する候補MFNであるMFN150の測定エージェント205によって収集された測定値から、特定のテナントのためのルーティンググラフを生成する。上述のように、ルーティンググラフは、MFNを表すノードと、MFN間のネットワーク接続を表すノード間のリンクを有する。リンクには、関連付けられた重みがある。これは、リンクによって表されるネットワーク接続を用いる際の品質やコストを定量化するコスト値である。前述のように、コントローラクラスタは、まず、収集された測定値から測定グラフを生成し、次に、最適でない(例えば、大きな遅延またはドロップ率を有する)測定グラフからリンクを除去することによって、ルーティンググラフを生成する。
ルーティンググラフを構築した後、コントローラクラスタは(2120で)パス検索を実行して、テナントの外部マシンが(MFNによって配置される)仮想ネットワークにデータメッセージを送信し、そして仮想ネットワークからデータメッセージを受信するために使用することができる、入出力ノード(つまり、MFN)の候補の異なるペア間の利用可能な経路を識別する。いくつかの実施形態では、コントローラクラスタは、既知のパス探索アルゴリズムを使用して、各候補ノードの入出力ペア間の異なるパスを識別する。このようなペアの各パスは、入力ノードから出力ノードへ、ゼロ個以上の中間ノードを介して連結されたときに通過する、1つ以上のリンクを使用する。
いくつかの実施形態では、任意の2つのMFN間のコストは、2つのMFN間の接続リンクのための推定遅延と金銭的コストの加重和を含む。待ち時間と金銭的コストは、いくつかの実施形態において、(1)リンク遅延測定、(2)推定メッセージ処理待ち時間、(3)同一パブリッククラウドプロバイダの別のデータセンタからパブリッククラウドプロバイダの別のデータセンタへ、またはパブリッククラウドプロバイダのクラウド(例えば、別のパブリッククラウドプロバイダの別のパブリッククラウドデータセンタへ、またはインターネットへ)を出るために、特定のデータセンタからの発信トラフィックに対するクラウド料金、および(4)パブリッククラウド内のホストコンピュータ上で実行されるMFNに関連する推定メッセージ処理コストのうちの1つ以上を含む。
いくつかの実施形態は、可能な限りこのような横断を最小化するために、公衆インターネットを通過する2つのMFN間の接続リンクのペナルティを評価する。また、いくつかの実施形態は、そのような接続を使用するために経路生成をバイアスするために、2つのデータセンタ間のプライベートネットワーク接続の使用を促進する(例えば、接続リンクコストを削減することによって)。これらのペアワイズリンクの計算コストを使用して、コントローラクラスタは、ルーティングパスによって使用される個々のペアワイズリンクのコストを集計することによって、これらのペアワイズリンクのうちの1つ以上を使用する各ルーティングパスのコストを計算することができる。
次に、コントローラクラスタは、ノードの各候補の入出力ペア間の識別された候補パスの計算されたコスト(例えば、最低の集約コスト)に基づいて、1つまたは最大N個の識別されたパス(ここで、Nは、1より大きい整数)を(2120において)選択する。いくつかの実施形態では、各パスについて計算されたコストは、上述のように、パスによって使用される各リンクの重みコストに基づく(例えば、各リンクの関連する重み値の合計である)。コントローラクラスタは、2つのMFN間で複数の経路が必要な場合に、入力MFNまたは中間MFNがマルチパス動作を実行できるように、入力/出力ノードのペア間で複数のパスを選択することができる。
(2120で)入力/出力ノードの候補ペアごとに1つまたはN個のパスを選択した後、コントローラクラスタは選択されたパスに基づいて1つまたはN個の経路を定義し、特定のテナントの仮想ネットワークを実装するMFNの経路テーブルまたは経路テーブルの一部を生成する。生成された経路レコードは、特定のテナントの異なるサブネットに到達するエッジMFNを識別し、入力MFNから出力MFNへの経路を通過するための次ホップMFNを識別する。
2125において、コントローラクラスタは、特定のテナントのための仮想ネットワークを実装するように、これらのMFNの転送要素235を構成するために、経路レコードをMFNに配信する。いくつかの実施形態では、コントローラクラスタは、ソフトウェアで定義されるマルチテナントデータセンタで現在使用されている通信プロトコルを使用して転送要素と通信し、ホストコンピュータ上で実行されるソフトウェアルータを設定して、ホストコンピュータにまたがる論理ネットワークを実装することにより、経路レコードを通過させる。
MFNが設定され、仮想ネットワークが特定のテナントに対して動作するようになると、エッジMFNはテナントの外部マシン(つまり、仮想ネットワーク外のマシン)からデータメッセージを受信し、これらのデータメッセージを仮想ネットワーク内のエッジMFNに転送する。このエッジMFNは、テナントの他の外部マシンにデータメッセージを転送する。このような転送動作を実行している間、入力MFN、中間MFN、および出力MFNは、その転送動作に関する統計を収集する。また、いくつかの実施形態では、いくつかの実施形態では、各MFN上の1つ以上のモジュールが、パブリッククラウドデータセンタにおけるネットワークまたはコンピューティング消費に関する他の統計を収集する。いくつかの実施形態では、パブリッククラウドプロバイダは、そのような消費データを収集し、収集されたデータを仮想ネットワークプロバイダに渡す。
課金サイクルに近づくと、コントローラクラスタは、MFNによって収集された(例えば、2130において)統計、および/またはMFNによって収集された、またはパブリッククラウドプロバイダによって提供されたネットワーク/コンピューティング消費データを収集する。収集された統計、および/または提供されたネットワーク/コンピューティング消費データに基づいて、コントローラクラスタは(2130で)請求レポートを生成し、特定のテナントに請求レポートを送信する。
前述のように、請求レポートで請求される金額は、コントローラクラスタが受信する統計およびネットワーク/消費データ(たとえば、2130)を示す。また、いくつかの実施形態では、この請求は、仮想ネットワークプロバイダが(特定のテナントのために仮想ネットワークを実装する)MFNを運用するために費やしたコストと、収益率(例えば、10%の増加)を加算したコストを考慮している。特定のテナントは、テナントの仮想ネットワークがデプロイされている複数の異なるパブリッククラウドプロバイダからの請求を処理する必要がないため、この課金スキームは特定のテナントにとって便利である。いくつかの実施形態におけるVNPの発生費用には、パブリッククラウドプロバイダがVNPに請求する費用が含まれる。2130において、コントローラクラスタはまた、クレジットカードを請求するか、または請求書に反映される料金のために銀行口座から電子的に資金を引き出す。
2135において、コントローラクラスタは、測定エージェント205から新しい測定値を受信したか否かを判定する。そうでない場合、プロセスは2145に遷移する。これについては後述する。一方、コントローラクラスタは、測定エージェントから新しい測定値を受信したと判定した場合、新しい測定値に基づいて、特定のテナントのルーティンググラフを再検査する必要があるかどうかを(2140で)判定する。MFNの障害がない場合、いくつかの実施形態のコントローラクラスタは、受信され、更新された測定値に基づいて、特定の期間(例えば、24時間毎または週毎)に、各テナントのルーティンググラフを最大で1回更新する。
コントローラクラスタが、受信した新しい測定に基づいてルーティンググラフを再検査する必要があると判定した場合(2140で)、プロセスは、新たに受信した測定に基づいて新しい測定グラフを(2145において)生成する。いくつかの実施形態では、新しい測定セットが受信されるたびに、測定グラフのリンクに関連する測定値が劇的に変動しないことを確実にするために、コントローラクラスタは、重み付け和を使用して、各新しい測定を以前の測定と混合する。
2145において、コントローラクラスタはまた、調整された測定グラフに基づいてルーティンググラフを調整する必要があるかどうか(例えば、ルーティンググラフのリンクの重み値を調整する必要があるかどうか、またはリンクに関連する調整された測定値のためにルーティンググラフ内のリンクを追加または削除する必要があるかどうか)を判定する。その場合、コントローラクラスタ(2145)は、ルーティンググラフを調整し、パス探索動作(動作2120など)を実行して、入出力ノードのペア間の経路を識別し、識別された経路に基づいて経路レコードを生成し、経路レコードをMFNに配信する。2145から、プロセスは2150に遷移する。
また、コントローラクラスタが(2140において)ルーティンググラフを再検査する必要がないと判定した場合、プロセスは2150に遷移する。2150で、コントローラクラスタは、処理されたデータメッセージおよび消費されたネットワーク/コンピューティングリソースに関する統計を収集する必要がある別の請求サイクルに近づいているかどうかを判定する。そうでない場合、プロセスは2135に戻り、MFN測定エージェントから新しい測定値を受信したかどうかを判定する。それ以外の場合、プロセスは2130に戻り、統計の収集、消費データのネットワーク/コンピューティング、および請求レポートの生成と送信を行う。いくつかの実施形態では、コントローラクラスタは、特定のテナントがパブリッククラウドデータセンタ全体にデプロイされる仮想ネットワークを必要としなくなるまで、処理2100の動作を繰り返し実行する。
いくつかの実施形態では、コントローラクラスタは、パブリッククラウドデータセンタにテナント用の仮想ネットワークをデプロイするだけでなく、パブリッククラウドデータセンタにコンピューティングノードマシンおよびサービスマシンをデプロイし、設定する際にテナントを支援する。デプロイされたサービスマシンは、MFNのサービスマシンとは別のマシンにすることができる。いくつかの実施形態では、コントローラクラスタの請求レポートは、配置されたコンピューティングおよびサービスマシンによって消費されるコンピューティングリソースも考慮する。繰り返しになるが、複数のパブリッククラウドプロバイダの複数のパブリッククラウドデータセンタで消費されるネットワークおよびコンピューティングリソースのために、1つの仮想ネットワークプロバイダから1つの請求書を発行する方が、複数のパブリッククラウドプロバイダから複数の請求書を受信するよりもテナントにとって望ましい。
上述の特徴およびアプリケーションの多くは、コンピュータ可読記憶媒体(コンピュータ可読媒体とも呼ばれる)に記録された命令のセットとして規定されるソフトウェアプロセスとして実行される。これらの命令が、1つ以上の処理部(例えば、一つ以上のプロセッサ、プロセッサのコア、または他の処理部)によって実行されるとき、それらは、処理部に命令に示された動作を実行させる。コンピュータ可読媒体の例は、限定されるものではないが、CD-ROM、フラッシュドライブ、RAMチップ、ハードドライブ、EPROMなどが含まれる。コンピュータ可読媒体には、搬送波および無線または有線接続を通過する電子信号は含まれない。
本明細書では、用語「ソフトウェア」は、読出専用メモリに存在するファームウェア、または磁気ストレージに記憶され、プロセッサによって処理するためにメモリに読み取ることができるアプリケーションを含むことを意味する。また、いくつかの実施形態では、複数のソフトウェア発明は、個別のソフトウェア発明を維持する一方で、より大きなプログラムのサブ部分として実施されてもよい。いくつかの実施形態では、複数のソフトウェア発明はまた、個別のプログラムとして実施されてもよい。最後に、ここで説明されるソフトウェア発明をともに実施する個別のプログラムの任意の組み合わせは、発明の範囲内である。いくつかの実施形態では、ソフトウェアプログラムが、1以上の電子システムを動作させるためにインストールされる場合、1以上の特定の機械的実施を定義し、ソフトウェアプログラムの動作を実行する。
図22は、本発明のいくつかの実施形態が実施されるコンピュータシステム2200を概念的に示している。コンピュータシステム2200は、上述のホスト、コントローラ、およびマネージャのいずれかを実装するために使用することができる。したがって、それは、上述のプロセスのいずれかを実行するために使用することができる。このコンピュータシステムは、種々のタイプの非一時的な機械可読媒体と、種々の他のタイプの機械可読媒体のためのインタフェースとを含む。コンピュータシステム2200は、バス2205、処理ユニット2210、システムメモリ2225、読出専用メモリ2230、永続ストレージデバイス2235、入力デバイス2240、および出力デバイス2245を含む。
バス2205は、集合的に、コンピュータシステム2200の多数の内部装置を通信的に接続するすべてのシステム、周辺装置、およびチップセットバスを表す。例えば、バス2205は、処理ユニット2210を読出専用メモリ2230、システムメモリ2225、および永続ストレージデバイス2235と通信的に接続する。
これらの様々なメモリユニットから、処理ユニット2210は、本発明のプロセスを実行するために、処理するための命令を検索し、処理するためのデータを検索する。処理ユニットは、異なる実施形態では、単一プロセッサまたはマルチコアプロセッサであってもよい。読出専用メモリ(ROM)2230は、処理ユニット2210及びコンピュータシステムの他のモジュールによって必要とされる静的データ及び命令を記録する。一方、永続ストレージデバイス2235は、読み出し/書き込みメモリデバイスである。このデバイスは、コンピュータシステム2200がオフの場合であっても命令及びデータを記録する不揮発性メモリユニットである。本発明のいくつかの実施形態は、永続ストレージデバイス2235として大容量記憶装置(例えば、磁気または光ディスクおよびその対応するディスクドライブ)を使用する。
他の実施形態では、取り外し可能ストレージデバイス(フロッピーディスク、フラッシュドライブなど)を永続ストレージデバイスとして使用する。永続ストレージデバイス2235と同様に、システムメモリ2225は、読取り/書込みメモリデバイスである。しかしながら、ストレージデバイス2235とは異なり、システムメモリは、ランダムアクセスメモリのような揮発性読み出し/書き込みメモリである。システムメモリは、プロセッサが実行時に必要とする命令とデータの一部が格納される。いくつかの実施形態では、本発明のプロセスは、システムメモリ2225、永続ストレージデバイス2235、および/または読み出し専用メモリ2230に記憶される。これらの様々なメモリユニットから、処理ユニット2210は、いくつかの実施形態のプロセスを実行するために、処理するための命令を検索し、処理するためのデータを検索する。
バス2205はまた、入出力デバイス2240および2245に接続する。入力デバイスは、ユーザが情報を通信し、コマンドをコンピュータシステムに選択することを可能にする。入力デバイス2240は、英数字キーボードおよびポインティングデバイス(「カーソル制御装置」とも呼ばれる)を含む。出力デバイス2245は、コンピュータシステムによって生成された画像を表示する。出力デバイスには、プリンタと、ブラウン管(CRT)または液晶ディスプレイ(LCD)などの表示デバイスが含まれる。いくつかの実施形態は、入力デバイスおよび出力デバイスの両方として機能するタッチスクリーンなどのデバイスを含む。
最後に、図22に示すように、バス2205は、ネットワークアダプタ(図示せず)を介して、コンピュータシステム2200をネットワーク2265に結合する。このようにして、コンピュータは、(ローカルエリアネットワーク(「LAN」)、ワイドエリアネットワーク(「WAN」)、イントラネット、インターネットなどのネットワークのネットワーク、などのコンピュータのネットワークの一部になることができる。コンピュータシステム2200の任意の又は全てのコンポーネントを、本発明と共に使用することができる。
いくつかの実施形態は、機械可読媒体またはコンピュータ可読媒体(代替として、コンピュータ可読ストレージ媒体、機械可読媒体、または機械可読ストレージ媒体)にコンピュータプログラム命令を記憶する、マイクロプロセッサ、ストレージデバイスおよびメモリなどの電子コンポーネントを含む。そのようなコンピュータ可読媒体のいくつかの例には、RAM、ROM、読出専用のコンパクトディスク(CD-ROM)、記録可能コンパクトディスク(CD-R)、書き換え可能コンパクトディスク(CD-RW)、読出専用のデジタル多用途ディスク(例えば、DVD-ROM、デュアルレイヤDVD-ROM)、様々な記録可能/書き換え可能DVD(例えば、DVD-RAM、DVD-RW、DVD+RWなど)、フラッシュメモリ(例えば、SDカード、ミニSDカード、マイクロSDカードなど)、磁気および/またはソリッドステートハードドライブ、読出専用のおよび記録可能ブルーレイ(登録商標)ディスク、超密度光ディスク、任意の他の光または磁気媒体、およびフロッピー(登録商標)ディスクが含まれる。コンピュータ可読媒体は、少なくとも1つの処理ユニットによって実行可能であり、種々の動作を実行するための命令のセットを含むコンピュータプログラムを記憶することができる。コンピュータプログラムまたはコンピュータコードの例には、コンパイラによって生成されるマシンコード、およびコンピュータ、電子部品、またはインタプリタを使用するマイクロプロセッサによって実行される高水準コードを含むファイルが含まれる。
上記の説明は、主に、ソフトウェアを実行するマイクロプロセッサまたはマルチコアプロセッサを指すが、いくつかの実施形態は、特定用途向け集積回路またはフィールドプログラマブルゲートアレイなどの1つ以上の集積回路によって実行される。いくつかの実施形態では、そのような集積回路は、回路自体に格納された命令を実行する。
本明細書で使用される「コンピュータ」、「サーバ」、「プロセッサ」、「メモリ」という用語は、すべて電子デバイスまたはその他の技術的なデバイスを指す。これらの用語は、人または人々のグループを除外する。明細書では、用語の表示または表示は、電子デバイス上での表示を意味する。本明細書で使用されるように、「コンピュータ可読媒体」、「コンピュータ可読メディア」、および「機械可読媒体」という用語は、全体として、コンピュータが読み取り可能な形式で情報を保存する実体のある物理的な物体に限定される。これらの用語は、無線信号、有線ダウンロード信号、およびその他の一過性または一時的な信号を除外する。
本発明は、数多くの特定の詳細を参照して説明されてきたが、当業者は、本発明が本発明の精神から逸脱することなく、他の特定の形態で実施可能であることを認識するであろう。たとえば、上記の例のいくつかは、仮想ネットワークプロバイダの企業テナントの仮想企業WAN を示している。当業者は、ある実施形態では、仮想ネットワークプロバイダが、企業以外のテナント(例えば、学校、大学、非営利団体など)のために、1つ以上のパブリッククラウドプロバイダの複数のパブリッククラウドデータセンタ上に仮想ネットワークをデプロイすることを理解するであろう。これらの仮想ネットワークは、企業以外のエンティティの複数のコンピューティングエンドポイント(オフィス、データセンタ、コンピュータ、リモートユーザのデバイスなど)を接続する仮想WANである。
上述のいくつかの実施形態は、オーバレイカプセル化ヘッダ内の各種データの断片を含む。当業者の1人は、他の実施形態が、このデータのすべてを中継するためのカプセル化ヘッダを使用しない可能性があることを理解するであろう。例えば、オーバレイカプセル化ヘッダにテナント識別子を含める代わりに、他の実施形態は、データメッセージを転送するCFEの宛先からテナント識別子を導出する。例えば、異なるテナントがパブリッククラウドにデプロイされた独自のMFNを有するいくつかの実施形態では、テナント識別子は、テナントメッセージを処理するMFNに関連付けられる。
また、いくつかの図は、本発明のいくつかの実施形態のプロセスを概念的に示す。他の実施形態では、これらのプロセスの特定の動作は、これらの図に示されて説明されている正確な順序では実行されない。特定の動作は、1つの連続した一連の動作では実行されず、異なる特定の動作は、異なる実施形態で実行され得る。さらに、プロセスは、いくつかのサブプロセスを使用して、またはより大きなマクロプロセスの一部として実装することができる。したがって、当業者であれば、本発明は、上述の例示的詳細によって限定されるものではなく、むしろ、添付の請求項によって定義されるものであることが理解されるであろう。

Claims (19)

  1. 第1のパブリッククラウドデータセンタと第2のパブリッククラウドデータセンタとを含む複数のパブリッククラウドデータセンタに跨る、特定のテナントのために定義される仮想ネットワークを介して第1のネットワークから外部サービスマシンへのデータメッセージを転送する方法であって、前記方法は、
    前記第1のパブリッククラウドデータセンタに配置される入力ゲートウェイであって、前記第1のネットワークからの前記データメッセージが前記入力ゲートウェイを通過して前記仮想ネットワークに入る、前記入力ゲートウェイ
    前記データメッセージが前記仮想ネットワーク及び前記複数のパブリッククラウドデータセンタの外側の前記外部サービスマシンと関連付けれていると判定
    第1の送信元ネットワークアドレス変換(SNAT)動作を実行して、前記データメッセージに関連付けられている第1の送信元ネットワークアドレスを、修正された第2の送信元ネットワークアドレスに修正する、ように構成することと
    前記第2のパブリッククラウドデータセンタに配置される出力ゲートウェイであって、前記データメッセージが前記出力ゲートウェイから前記仮想ネットワークを出る、前記出力ゲートウェイ
    第2のSNAT動作を実行して、前記データメッセージの前記修正された第2の送信元ネットワークアドレスを、修正された第3の送信元ネットワークアドレスに修正
    前記修正された第3の送信元ネットワークアドレスを用いて前記データメッセージを、前記パブリッククラウドデータセンタの外側である外部ネットワークを介して前記外部サービスマシンへ転送する、ように構成することと、を含む方法。
  2. 請求項1に記載の方法であって、前記第1のSNAT動作と前記第2のSNAT動作の両方は、それぞれが前記データメッセージのフロー識別子に関連付けられるレコードを生成して、前記データメッセージのフローの一部である後続のデータメッセージを処理するために用いる、ステートフルプロセスである、方法。
  3. 請求項1に記載の方法であって、
    前記第1の送信元ネットワークアドレスは、パブリッククラウドプロバイダのセットの1つではないエンティティのプライベートネットワークアドレス空間におけるネットワークアドレスであり、
    前記第2の送信元ネットワークアドレスと第3の送信元ネットワークアドレスは、パブリックネットワークアドレス空間におけるネットワークアドレスである、方法。
  4. 請求項1に記載の方法であって、
    前記第1の送信元ネットワークアドレスは、パブリッククラウドプロバイダのセットの1つではないエンティティのプライベートネットワークアドレス空間におけるネットワークアドレスであり、
    前記第2の送信元ネットワークアドレスは、パブリッククラウドプロバイダのプライベートネットワークアドレス空間におけるネットワークアドレスであり、
    第3の送信元ネットワークアドレスは、パブリックネットワークアドレス空間におけるネットワークアドレスである、方法。
  5. 請求項1に記載の方法であって、前記入力ゲートウェイと前記出力ゲートウェイは、前記パブリッククラウドデータセンタに跨る前記仮想ネットワークを実施するために、前記複数のパブリッククラウドデータセンタ構成される転送要素である、方法。
  6. 請求項1に記載の方法であって、更に、
    前記第1のSNAT動作の前に、第3のSNAT動作を実行して、前記データメッセージのオリジナルの送信元ネットワークアドレスを前記第1の送信元ネットワークアドレスに修正する、方法。
  7. 請求項に記載の方法であって、前記第3のSNAT動作、前記特定のテナントを識別するテナント識別子(TID)に基づく、方法。
  8. 請求項7に記載の方法であって、更に、異なるテナントのデータメッセージに対して前記第1のSNAT動作と前記第2のSNAT動作と前記第3のSNAT動作とを実行することを含み、
    各テナントの前記データメッセージに対する前記第3のSNAT動作は、各テナントに関連付けられたTIDに基づき、
    前記第3のSNAT動作は、異なるテナントの前記データメッセージを異なる送信元ネットワークアドレス空間にマップして、共通ネットワークアドレス空間が2つのテナントに対して使用される場合であっても、前記異なるテナントの前記修正された第2送信元ネットワークアドレスが重複しないことを保証する、方法。
  9. 請求項7に記載の方法であって、前記第1の送信元ネットワークアドレスと前記第2の送信元ネットワークアドレスと前記第3の送信元ネットワークアドレスはそれぞれ、レイヤ3ネットワークアドレスを含む、方法。
  10. 請求項7に記載の方法であって、
    前記第1の送信元ネットワークアドレスと前記第2の送信元ネットワークアドレスと前記第3の送信元ネットワークアドレスはそれぞれ、レイヤ3ネットワークアドレスとレイヤ4ネットワークアドレスとを含み、
    前記第1のSNAT動作と前記第2のSNAT動作と前記第3のSNAT動作の少なくとも1つは、前記レイヤ3ネットワークアドレスと前記レイヤ4ネットワークアドレスの両方を修正する、方法。
  11. 請求項10に記載の方法であって、前記第1のSNAT動作と前記第2のSNAT動作と前記第3のSNAT動作のそれぞれは、前記レイヤ3ネットワークアドレスと前記レイヤ4ネットワークアドレスの両方を修正する、方法。
  12. 請求項1に記載の方法であって、前記入力ゲートウェイは
    前記データメッセージのヘッダから宛先ネットワークアドレスを取り出すことと、
    前記取り出した宛先ネットワークアドレスを使用して、前記データメッセージの宛先アドレスが、前記パブリッククラウドデータセンタの外側のマシンと接続されるインタフェースと関連付けられていることを判定することと、により
    前記データメッセージが前記外部サービスマシンに関連付けられていることを判定する、方法。
  13. 請求項12に記載の方法であって、
    前記外部ネットワークはインターネットであり、
    前記取り出した宛先ネットワークアドレスを使用することは、前記取り出した宛先ネットワークアドレスに基づいてパブリックインターネットコンテキストにおけるルックアップ動作を実行することを含む、方法。
  14. 請求項1に記載の方法であって、前記外部サービスマシンはSaaS(software as a service)プロバイダのマシンであり、一方で、前記データメッセージの送信元は、前記特定のテナントのオフィス内のマシン、前記特定のテナントのプライベートデータセンタ内のマシン、及び前記特定のテナントのリモートユーザマシンのうちの1つである、方法。
  15. 請求項14に記載の方法であって、前記外部サービスマシンは前記SaaSプロバイダのプライベートデータセンタ内にある、方法。
  16. 請求項1に記載の方法であって、レコードを使用して前記外部サービスマシンから受信したデータメッセージに対する少なくとも1つの宛先ネットワークアドレス変換動作を実行するために、前記第1のSNAT動作と前記第2のSNAT動作のための少なくとも1つの前記レコードを生成することを更に含む、方法。
  17. 請求項1に記載の方法であって、前記複数のパブリッククラウドデータセンタは複数のマルチテナントパブリッククラウドデータセンタを含む、方法。
  18. コンピューティングデバイスであって、
    プロセッシングユニットのセットと、
    プログラムを格納する機械可読媒体であって、前記プログラムは前記プロセッシングユニットの少なくとも1つによって実行されると、請求項1から17のいずれか1項に記載の方法を実行する、コンピューティングデバイス。
  19. プロセッシングユニットの少なくとも1つによって実行されると、請求項1から17のいずれか1項に記載の方法を実行する、コンピュータプログラム。
JP2021197848A 2017-10-02 2021-12-06 複数のパブリッククラウドに跨る仮想ネットワークの生成 Active JP7275237B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023076202A JP2023109797A (ja) 2017-10-02 2023-05-02 複数のパブリッククラウドに跨る仮想ネットワークの生成

Applications Claiming Priority (28)

Application Number Priority Date Filing Date Title
US201762566524P 2017-10-02 2017-10-02
US62/566,524 2017-10-02
US15/972,095 US10958479B2 (en) 2017-10-02 2018-05-04 Selecting one node from several candidate nodes in several public clouds to establish a virtual network that spans the public clouds
US15/972,103 2018-05-04
US15/972,098 US10805114B2 (en) 2017-10-02 2018-05-04 Processing data messages of a virtual network that are sent to and received from external service machines
US15/972,093 2018-05-04
US15/972,083 2018-05-04
US15/972,102 US11855805B2 (en) 2017-10-02 2018-05-04 Deploying firewall for virtual network defined over public cloud infrastructure
US15/972,086 US11516049B2 (en) 2017-10-02 2018-05-04 Overlay network encapsulation to forward data message flows through multiple public cloud datacenters
US15/972,100 US10778466B2 (en) 2017-10-02 2018-05-04 Processing data messages of a virtual network that are sent to and received from external service machines
US15/972,100 2018-05-04
US15/972,091 US10608844B2 (en) 2017-10-02 2018-05-04 Graph based routing through multiple public clouds
US15/972,093 US10594516B2 (en) 2017-10-02 2018-05-04 Virtual network provider
US15/972,104 US10686625B2 (en) 2017-10-02 2018-05-04 Defining and distributing routes for a virtual network
US15/972,091 2018-05-04
US15/972,088 2018-05-04
US15/972,102 2018-05-04
US15/972,090 2018-05-04
US15/972,103 US10841131B2 (en) 2017-10-02 2018-05-04 Distributed WAN security gateway
US15/972,098 2018-05-04
US15/972,086 2018-05-04
US15/972,104 2018-05-04
US15/972,090 US10666460B2 (en) 2017-10-02 2018-05-04 Measurement based routing through multiple public clouds
US15/972,083 US11005684B2 (en) 2017-10-02 2018-05-04 Creating virtual networks spanning multiple public clouds
US15/972,095 2018-05-04
US15/972,088 US11102032B2 (en) 2017-10-02 2018-05-04 Routing data message flow through multiple public clouds
PCT/US2018/053811 WO2019070611A1 (en) 2017-10-02 2018-10-01 CREATING VIRTUAL NETWORKS COVERING MULTIPLE PUBLIC CLOUDS
JP2020505426A JP6991646B2 (ja) 2017-10-02 2018-10-01 複数のパブリッククラウドに跨る仮想ネットワークの生成

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020505426A Division JP6991646B2 (ja) 2017-10-02 2018-10-01 複数のパブリッククラウドに跨る仮想ネットワークの生成

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2023076202A Division JP2023109797A (ja) 2017-10-02 2023-05-02 複数のパブリッククラウドに跨る仮想ネットワークの生成

Publications (2)

Publication Number Publication Date
JP2022043118A JP2022043118A (ja) 2022-03-15
JP7275237B2 true JP7275237B2 (ja) 2023-05-17

Family

ID=65896280

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2020505426A Active JP6991646B2 (ja) 2017-10-02 2018-10-01 複数のパブリッククラウドに跨る仮想ネットワークの生成
JP2021197848A Active JP7275237B2 (ja) 2017-10-02 2021-12-06 複数のパブリッククラウドに跨る仮想ネットワークの生成
JP2023076202A Pending JP2023109797A (ja) 2017-10-02 2023-05-02 複数のパブリッククラウドに跨る仮想ネットワークの生成

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2020505426A Active JP6991646B2 (ja) 2017-10-02 2018-10-01 複数のパブリッククラウドに跨る仮想ネットワークの生成

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2023076202A Pending JP2023109797A (ja) 2017-10-02 2023-05-02 複数のパブリッククラウドに跨る仮想ネットワークの生成

Country Status (10)

Country Link
US (13) US10778466B2 (ja)
EP (2) EP4106280A1 (ja)
JP (3) JP6991646B2 (ja)
KR (3) KR102368063B1 (ja)
CN (2) CN115051869A (ja)
AU (3) AU2018345729B2 (ja)
BR (1) BR112020006724A2 (ja)
CA (2) CA3074501C (ja)
ES (1) ES2920281T3 (ja)
WO (1) WO2019070611A1 (ja)

Families Citing this family (122)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8560634B2 (en) * 2007-10-17 2013-10-15 Dispersive Networks, Inc. Apparatus, systems and methods utilizing dispersive networking
US10749711B2 (en) 2013-07-10 2020-08-18 Nicira, Inc. Network-link method useful for a last-mile connectivity in an edge-gateway multipath system
US10454714B2 (en) 2013-07-10 2019-10-22 Nicira, Inc. Method and system of overlay flow control
US9596126B2 (en) 2013-10-10 2017-03-14 Nicira, Inc. Controller side method of generating and updating a controller assignment list
US10135789B2 (en) 2015-04-13 2018-11-20 Nicira, Inc. Method and system of establishing a virtual private network in a cloud service for branch networking
US10425382B2 (en) 2015-04-13 2019-09-24 Nicira, Inc. Method and system of a cloud-based multipath routing protocol
US10498652B2 (en) 2015-04-13 2019-12-03 Nicira, Inc. Method and system of application-aware routing with crowdsourcing
US9942131B2 (en) * 2015-07-29 2018-04-10 International Business Machines Corporation Multipathing using flow tunneling through bound overlay virtual machines
US10826805B2 (en) * 2016-07-11 2020-11-03 Acronis International Gmbh System and method for dynamic online backup optimization
US10992558B1 (en) 2017-11-06 2021-04-27 Vmware, Inc. Method and apparatus for distributed data network traffic optimization
US11252079B2 (en) 2017-01-31 2022-02-15 Vmware, Inc. High performance software-defined core network
US10992568B2 (en) 2017-01-31 2021-04-27 Vmware, Inc. High performance software-defined core network
US11706127B2 (en) 2017-01-31 2023-07-18 Vmware, Inc. High performance software-defined core network
US20180219765A1 (en) 2017-01-31 2018-08-02 Waltz Networks Method and Apparatus for Network Traffic Control Optimization
US11121962B2 (en) 2017-01-31 2021-09-14 Vmware, Inc. High performance software-defined core network
US20200036624A1 (en) 2017-01-31 2020-01-30 The Mode Group High performance software-defined core network
US10574528B2 (en) 2017-02-11 2020-02-25 Nicira, Inc. Network multi-source inbound quality of service methods and systems
US10778528B2 (en) 2017-02-11 2020-09-15 Nicira, Inc. Method and system of connecting to a multipath hub in a cluster
US10523539B2 (en) 2017-06-22 2019-12-31 Nicira, Inc. Method and system of resiliency in cloud-delivered SD-WAN
US10999100B2 (en) 2017-10-02 2021-05-04 Vmware, Inc. Identifying multiple nodes in a virtual network defined over a set of public clouds to connect to an external SAAS provider
US10999165B2 (en) 2017-10-02 2021-05-04 Vmware, Inc. Three tiers of SaaS providers for deploying compute and network infrastructure in the public cloud
US10778466B2 (en) 2017-10-02 2020-09-15 Vmware, Inc. Processing data messages of a virtual network that are sent to and received from external service machines
US11115480B2 (en) 2017-10-02 2021-09-07 Vmware, Inc. Layer four optimization for a virtual network defined over public cloud
US10959098B2 (en) 2017-10-02 2021-03-23 Vmware, Inc. Dynamically specifying multiple public cloud edge nodes to connect to an external multi-computer node
US11089111B2 (en) 2017-10-02 2021-08-10 Vmware, Inc. Layer four optimization for a virtual network defined over public cloud
US11223514B2 (en) 2017-11-09 2022-01-11 Nicira, Inc. Method and system of a dynamic high-availability mode based on current wide area network connectivity
US10523450B2 (en) * 2018-02-28 2019-12-31 Oracle International Corporation Overlay network billing
US11115330B2 (en) * 2018-03-14 2021-09-07 Juniper Networks, Inc. Assisted replication with multi-homing and local bias
EP3788742B1 (en) * 2018-05-04 2023-02-08 Laibson, Benjamin William Emulation of cloud computing service regions
US10594782B2 (en) * 2018-06-07 2020-03-17 Level 3 Communications, Llc Load distribution across superclusters
US10812337B2 (en) 2018-06-15 2020-10-20 Vmware, Inc. Hierarchical API for a SDDC
US10942788B2 (en) 2018-06-15 2021-03-09 Vmware, Inc. Policy constraint framework for an sddc
EP3811568A1 (en) * 2018-06-20 2021-04-28 NEC Laboratories Europe GmbH Multi-access edge computing, mec, system and method for operating the same
CN110661896B (zh) * 2018-06-29 2021-06-22 网宿科技股份有限公司 一种确定数据流的映射地址的方法及服务器
US11522835B2 (en) * 2018-07-03 2022-12-06 Vmware, Inc. Context based firewall service for agentless machines
US10999220B2 (en) 2018-07-05 2021-05-04 Vmware, Inc. Context aware middlebox services at datacenter edge
US11184327B2 (en) * 2018-07-05 2021-11-23 Vmware, Inc. Context aware middlebox services at datacenter edges
US11086700B2 (en) * 2018-08-24 2021-08-10 Vmware, Inc. Template driven approach to deploy a multi-segmented application in an SDDC
US20200067829A1 (en) * 2018-08-27 2020-02-27 Ca, Inc. Methods and devices for intelligent selection of channel interfaces
US10708125B1 (en) * 2018-09-05 2020-07-07 Amazon Technologies, Inc. Gateway configuration using a network manager
US20200106793A1 (en) * 2018-10-02 2020-04-02 Olympus Infotech, LLC Methods, systems, and computer program products for continuous cyber risk monitoring
US11095558B2 (en) 2018-12-28 2021-08-17 Alibaba Group Holding Limited ASIC for routing a packet
US11316901B1 (en) * 2019-06-06 2022-04-26 NortonLifeLock Inc. Systems and methods for protecting users
US10911330B2 (en) * 2019-06-12 2021-02-02 Cisco Technology, Inc. Intent based application fabric
WO2021021169A1 (en) 2019-07-31 2021-02-04 Huawei Technologies Co., Ltd Transporting mtnc-id over srv6-enabled dataplane for 5g transport
CN114710975B (zh) * 2019-07-31 2023-07-28 华为技术有限公司 一种用于多域间传输多传输网络上下文标识的方法、基站、网元及装置
US10659310B1 (en) * 2019-08-16 2020-05-19 LogicMonitor, Inc. Discovering and mapping the relationships between macro-clusters of a computer network topology for an executing application
US11252105B2 (en) 2019-08-27 2022-02-15 Vmware, Inc. Identifying different SaaS optimal egress nodes for virtual networks of different entities
CN110650092B (zh) * 2019-09-24 2022-05-03 网易(杭州)网络有限公司 一种数据处理的方法和装置
US11363060B2 (en) * 2019-10-24 2022-06-14 Microsoft Technology Licensing, Llc Email security in a multi-tenant email service
US11044190B2 (en) 2019-10-28 2021-06-22 Vmware, Inc. Managing forwarding elements at edge nodes connected to a virtual network
CN110784398B (zh) * 2019-11-01 2022-05-17 锱云(上海)物联网科技有限公司 一种工业物联网加工设备数据采集系统以及数据分析方法
US10979534B1 (en) 2019-11-29 2021-04-13 Amazon Technologies, Inc. Latency-based placement of cloud compute instances within communications service provider networks
US11470047B1 (en) * 2019-11-29 2022-10-11 Amazon Technologies, Inc. Managed virtual networks for computing cloud edge locations
US11418995B2 (en) 2019-11-29 2022-08-16 Amazon Technologies, Inc. Mobility of cloud compute instances hosted within communications service provider networks
US10965737B1 (en) * 2019-11-29 2021-03-30 Amazon Technologies, Inc. Cloud computing in communications service provider networks
US11394640B2 (en) 2019-12-12 2022-07-19 Vmware, Inc. Collecting and analyzing data regarding flows associated with DPI parameters
US11489783B2 (en) 2019-12-12 2022-11-01 Vmware, Inc. Performing deep packet inspection in a software defined wide area network
US11411777B2 (en) * 2020-01-14 2022-08-09 Vmware, Inc. Port mapping for bonded interfaces of ECMP group
US11606712B2 (en) 2020-01-24 2023-03-14 Vmware, Inc. Dynamically assigning service classes for a QOS aware network link
US11323918B2 (en) * 2020-01-24 2022-05-03 Cisco Technology, Inc. Switch and backhaul capacity-based radio resource management
US11588693B2 (en) * 2020-02-26 2023-02-21 Red Hat, Inc. Migrating networking configurations
CN111404801B (zh) * 2020-03-27 2021-09-28 四川虹美智能科技有限公司 跨云厂商的数据处理方法、装置及系统
EP4078901A4 (en) 2020-04-01 2023-10-11 VMWare, Inc. AUTOMATIC DEPLOYMENT OF NETWORK ELEMENTS FOR HETEROGENEOUS COMPUTING ELEMENTS
US11258713B2 (en) 2020-04-06 2022-02-22 Vmware, Inc. Policy-based proximity routing
CN116016315A (zh) * 2020-05-25 2023-04-25 华为技术有限公司 一种路由管理方法、设备及系统
CN111683086B (zh) * 2020-06-05 2022-11-01 北京百度网讯科技有限公司 网络数据处理方法、装置、电子设备和存储介质
CN116405565A (zh) * 2020-06-29 2023-07-07 华为云计算技术有限公司 一种云服务的资源发放方法及相关设备
US11245641B2 (en) 2020-07-02 2022-02-08 Vmware, Inc. Methods and apparatus for application aware hub clustering techniques for a hyper scale SD-WAN
US11803408B2 (en) 2020-07-29 2023-10-31 Vmware, Inc. Distributed network plugin agents for container networking
US11709710B2 (en) 2020-07-30 2023-07-25 Vmware, Inc. Memory allocator for I/O operations
US11863352B2 (en) 2020-07-30 2024-01-02 Vmware, Inc. Hierarchical networking for nested container clusters
US10911407B1 (en) 2020-08-04 2021-02-02 Palo Alto Networks, Inc. Localization at scale for a cloud-based security service
US11552930B2 (en) 2020-08-31 2023-01-10 Equinix, Inc. Virtual domains within a shared device
US11171878B1 (en) 2020-09-21 2021-11-09 Vmware, Inc. Allocating additional bandwidth to resources in a datacenter through deployment of dedicated gateways
US11095612B1 (en) 2020-10-30 2021-08-17 Palo Alto Networks, Inc. Flow metadata exchanges between network and security functions for a security service
US11785048B2 (en) 2020-10-30 2023-10-10 Palo Alto Networks, Inc. Consistent monitoring and analytics for security insights for network and security functions for a security service
US11575591B2 (en) 2020-11-17 2023-02-07 Vmware, Inc. Autonomous distributed forwarding plane traceability based anomaly detection in application traffic for hyper-scale SD-WAN
US11575600B2 (en) 2020-11-24 2023-02-07 Vmware, Inc. Tunnel-less SD-WAN
US11929903B2 (en) 2020-12-29 2024-03-12 VMware LLC Emulating packet flows to assess network links for SD-WAN
CN114760167A (zh) * 2020-12-29 2022-07-15 华为技术有限公司 报文转发的方法、装置和网络系统
US11792127B2 (en) 2021-01-18 2023-10-17 Vmware, Inc. Network-aware load balancing
US11979325B2 (en) 2021-01-28 2024-05-07 VMware LLC Dynamic SD-WAN hub cluster scaling with machine learning
US11848985B2 (en) * 2021-01-29 2023-12-19 Salesforce, Inc. Mass electronic mail sending system with flexible public sending network addresses
WO2022169343A1 (en) * 2021-02-08 2022-08-11 Samsung Electronics Co., Ltd. Method and communication network for providing access to localized services (pals)
CN113225405A (zh) * 2021-02-25 2021-08-06 紫光云技术有限公司 一种公有云平台下nat暂停和开启操作的方法、电子设备
KR102270143B1 (ko) * 2021-03-02 2021-06-28 주식회사 아라드네트웍스 네트워크 격리를 위한 통신 제어 방법 및 이를 이용한 장치
US11888740B2 (en) 2021-03-05 2024-01-30 Cisco Technology, Inc. Classification and forwarding node for integrating disparate headend traffic ingress services with disparate backend services
US11606290B2 (en) 2021-03-25 2023-03-14 Vmware, Inc. Connectivity between virtual datacenters
CN112948132B (zh) * 2021-04-07 2022-09-06 广西师范大学 云服务事件及服务等级合约数据的向量化方法
US20220329576A1 (en) * 2021-04-09 2022-10-13 Hewlett Packard Enterprise Development Lp Securing communication between a cloud platform and an application hosted on an on-premise private network
US11582144B2 (en) 2021-05-03 2023-02-14 Vmware, Inc. Routing mesh to provide alternate routes through SD-WAN edge forwarding nodes based on degraded operational states of SD-WAN hubs
EP4282140A1 (en) 2021-05-03 2023-11-29 VMware, Inc. On demand routing mesh for routing packets through sd-wan edge forwarding nodes in an sd-wan
US11729065B2 (en) 2021-05-06 2023-08-15 Vmware, Inc. Methods for application defined virtual network service among multiple transport in SD-WAN
CN117178259A (zh) * 2021-05-24 2023-12-05 Vm维尔股份有限公司 通过专用网关的部署为数据中心中的资源分配附加带宽
US20220376998A1 (en) * 2021-05-24 2022-11-24 Cisco Technology, Inc. Autonomous system bottleneck detection
US11729095B2 (en) 2021-05-24 2023-08-15 Vmware, Inc. Allocating additional bandwidth to resources in a datacenter through deployment of dedicated gateways
CN113259174B (zh) * 2021-06-07 2021-10-19 上海慧捷智能技术有限公司 一种基于多云架构的联络中心系统及其实现的方法
US11606254B2 (en) 2021-06-11 2023-03-14 Vmware, Inc. Automatic configuring of VLAN and overlay logical switches for container secondary interfaces
US11635903B2 (en) * 2021-06-15 2023-04-25 International Business Machines Corporation Cloud data migration
US20220407820A1 (en) * 2021-06-18 2022-12-22 Vmware, Inc. Method and apparatus for deploying tenant deployable elements across public clouds based on harvested performance metrics of types of resource elements in the public clouds
US11489720B1 (en) 2021-06-18 2022-11-01 Vmware, Inc. Method and apparatus to evaluate resource elements and public clouds for deploying tenant deployable elements based on harvested performance metrics
US20220407915A1 (en) * 2021-06-18 2022-12-22 Vmware, Inc. Method and apparatus for deploying tenant deployable elements across public clouds based on harvested performance metrics
US11611566B2 (en) * 2021-06-25 2023-03-21 Microsoft Technology Licensing, Llc Automatic verification of safety for virtualized networks
US11765244B1 (en) * 2021-06-30 2023-09-19 Amazon Technologies, Inc. Latency-based service discovery and routing for multi-location service-oriented applications
US11729094B2 (en) 2021-07-02 2023-08-15 Vmware, Inc. Source-based routing for virtual datacenters
US20230025586A1 (en) * 2021-07-24 2023-01-26 Vmware, Inc. Network management services in a secure access service edge application
US11375005B1 (en) 2021-07-24 2022-06-28 Vmware, Inc. High availability solutions for a secure access service edge application
WO2023015311A1 (en) * 2021-08-05 2023-02-09 Juniper Networks, Inc. Multiplexing tenant tunnels in software-as-a-service deployments
KR20230021506A (ko) * 2021-08-05 2023-02-14 한국전자통신연구원 사용자 정의 기반의 가상 네트워크 설정 방법
US11943146B2 (en) 2021-10-01 2024-03-26 VMware LLC Traffic prioritization in SD-WAN
US11803569B2 (en) * 2021-10-05 2023-10-31 Procore Technologies, Inc. Computer system and method for accessing user data that is distributed within a multi-zone computing platform
WO2023105579A1 (ja) * 2021-12-06 2023-06-15 日本電信電話株式会社 パケット中継システム、および、パケット中継方法
US11902245B2 (en) 2022-01-14 2024-02-13 VMware LLC Per-namespace IP address management method for container networks
US11909815B2 (en) 2022-06-06 2024-02-20 VMware LLC Routing based on geolocation costs
US11962493B2 (en) 2022-06-21 2024-04-16 VMware LLC Network address translation in active-active edge cluster
US11924046B1 (en) 2022-08-23 2024-03-05 Cisco Technology, Inc. Network hierarchy constructs enabling instant global wide area network connectivity
US11962429B1 (en) * 2022-11-02 2024-04-16 Cisco Technology, Inc. Sharing transport interfaces between tenants on multi-tenant edge devices
US11848910B1 (en) 2022-11-11 2023-12-19 Vmware, Inc. Assigning stateful pods fixed IP addresses depending on unique pod identity
US11831511B1 (en) 2023-01-17 2023-11-28 Vmware, Inc. Enforcing network policies in heterogeneous systems
US11843536B1 (en) 2023-01-18 2023-12-12 Bank Of America Corporation Systems, methods, and apparatuses for determining data routing in an electronic environment
US11929838B1 (en) * 2023-05-11 2024-03-12 VMware LLC Egress cost optimization for multi-cloud network

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014200010A (ja) 2013-03-29 2014-10-23 株式会社日立ソリューションズ データ交換システム、及び仮想プライベートクラウド間でデータ交換を可能とする環境を設定する方法
JP2017524290A (ja) 2015-04-17 2017-08-24 エクイニクス,インコーポレイティド クラウドベースのサービス交換

Family Cites Families (843)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5652751A (en) 1996-03-26 1997-07-29 Hazeltine Corporation Architecture for mobile radio networks with dynamically changing topology using virtual subnets
JP2964957B2 (ja) 1996-08-15 1999-10-18 日本電気株式会社 高速ルーティング制御方式
US5909553A (en) 1997-02-19 1999-06-01 International Business Machines Corporation Systems and methods for controlling the transmission of relatively large data objects in a communications system
US6157648A (en) 1997-03-06 2000-12-05 Bell Atlantic Network Services, Inc. Network session management
US20080055241A1 (en) 1998-03-26 2008-03-06 Immersion Corporation Systems and Methods for Haptic Feedback Effects for Control Knobs
US6154465A (en) * 1998-10-06 2000-11-28 Vertical Networks, Inc. Systems and methods for multiple mode voice and data communications using intelligenty bridged TDM and packet buses and methods for performing telephony and data functions using the same
JP2002525913A (ja) 1998-09-11 2002-08-13 シェアウェーブ・インコーポレーテッド コンピュータ・ネットワーク内の通信を制御するための方法および装置
US6445682B1 (en) 1998-10-06 2002-09-03 Vertical Networks, Inc. Systems and methods for multiple mode voice and data communications using intelligently bridged TDM and packet buses and methods for performing telephony and data functions using the same
US6363378B1 (en) 1998-10-13 2002-03-26 Oracle Corporation Ranking of query feedback terms in an information retrieval system
US6578083B2 (en) 1999-02-05 2003-06-10 Pluris, Inc. Method for monitoring data flow at a node on a network facilitating data transfer on at least one link having at least one class of service
US6930983B2 (en) 2000-03-15 2005-08-16 Texas Instruments Incorporated Integrated circuits, systems, apparatus, packets and processes utilizing path diversity for media over packet applications
US6744775B1 (en) 1999-09-27 2004-06-01 Nortel Networks Limited State information and routing table updates in large scale data networks
EP2101446B1 (en) 2000-06-16 2012-03-21 Fujitsu Limited Communication device having VPN accomodation function
US20020087716A1 (en) 2000-07-25 2002-07-04 Shakeel Mustafa System and method for transmitting customized multi priority services on a single or multiple links over data link layer frames
US7003481B2 (en) 2000-08-25 2006-02-21 Flatrock Ii, Inc. Method and apparatus for providing network dependent application services
US7320017B1 (en) 2000-09-06 2008-01-15 Cisco Technology, Inc. Media gateway adapter
US9525696B2 (en) 2000-09-25 2016-12-20 Blue Coat Systems, Inc. Systems and methods for processing data flows
US6876988B2 (en) 2000-10-23 2005-04-05 Netuitive, Inc. Enhanced computer performance forecasting system
US6976087B1 (en) 2000-11-24 2005-12-13 Redback Networks Inc. Service provisioning methods and apparatus
US7333512B2 (en) 2000-12-18 2008-02-19 Rmi Corporation Dynamic mixing TDM data with data packets
US7519048B2 (en) 2000-12-28 2009-04-14 Nec Corporation Communication system and packet switching method thereof
US7536715B2 (en) 2001-05-25 2009-05-19 Secure Computing Corporation Distributed firewall system and method
JP3737385B2 (ja) 2001-06-07 2006-01-18 富士通株式会社 最適化パス設定方法及びそれを用いた網管理システム
JP3621987B2 (ja) 2001-09-07 2005-02-23 独立行政法人情報通信研究機構 無線システムのシームレス統合ネットワークシステム
US20030061269A1 (en) 2001-09-17 2003-03-27 Flow Engines, Inc. Data flow engine
EP1324628B1 (en) 2001-12-13 2009-11-11 Sony Deutschland GmbH Adaptive quality-of-service reservation and pre-allocation for mobile systems
US20030112808A1 (en) 2001-12-13 2003-06-19 Net Reality Ltd Automatic configuration of IP tunnels
AU2003217640A1 (en) 2002-02-22 2003-09-09 The Trustees Of The University Of Pennsylvania System and method for distributing traffic in a network
JP2003258854A (ja) 2002-02-27 2003-09-12 Toshiba Corp ルータ装置及びインターネットサービスプロバイダ選択方法
US7751409B1 (en) 2002-03-20 2010-07-06 Oracle America, Inc. Logical service domains for enabling network mobility
US7289456B2 (en) 2002-04-08 2007-10-30 Telcordia Technologies, Inc. Determining and provisioning paths within a network of communication elements
US7280476B2 (en) 2002-06-04 2007-10-09 Lucent Technologies Inc. Traffic control at a network node
CN1647054B (zh) 2002-06-19 2010-09-08 艾利森电话股份有限公司 双模网络设备驱动设备、系统和方法
US7086061B1 (en) 2002-08-01 2006-08-01 Foundry Networks, Inc. Statistical tracking of global server load balancing for selecting the best network address from ordered list of network addresses based on a set of performance metrics
US8656050B2 (en) 2002-09-24 2014-02-18 Alcatel Lucent Methods and systems for efficiently configuring IP-based, virtual private networks
US7440573B2 (en) 2002-10-08 2008-10-21 Broadcom Corporation Enterprise wireless local area network switching system
US8154581B2 (en) 2002-10-15 2012-04-10 Revolutionary Concepts, Inc. Audio-video communication system for receiving person at entrance
US7606156B2 (en) 2003-10-14 2009-10-20 Delangis Eric M Residential communications gateway (RCG) for broadband communications over a plurality of standard POTS lines, with dynamic allocation of said bandwidth, that requires no additional equipment or modifications to the associated class 5 offices or the PSTN at large
US7386605B2 (en) 2002-11-05 2008-06-10 Enterasys Networks, Inc. Methods and apparatus for automated edge device configuration in a heterogeneous network
US7584298B2 (en) 2002-12-13 2009-09-01 Internap Network Services Corporation Topology aware route control
US7397795B2 (en) * 2003-02-24 2008-07-08 Intel California Method and system for label-based packet forwarding among multiple forwarding elements
JP4354201B2 (ja) 2003-03-18 2009-10-28 富士通株式会社 不正アクセス対処システム、及び不正アクセス対処処理プログラム
US7452278B2 (en) 2003-05-09 2008-11-18 Microsoft Corporation Web access to secure data
US7373660B1 (en) 2003-08-26 2008-05-13 Cisco Technology, Inc. Methods and apparatus to distribute policy information
US7313629B1 (en) 2003-11-06 2007-12-25 Sprint Communications Company L.P. Method for altering link weights in a communication network within network parameters to provide traffic information for improved forecasting
US7903555B2 (en) 2003-12-17 2011-03-08 Intel Corporation Packet tracing
JP4398263B2 (ja) 2004-01-13 2010-01-13 富士通株式会社 経路設計方法
US7246256B2 (en) 2004-01-20 2007-07-17 International Business Machines Corporation Managing failover of J2EE compliant middleware in a high availability system
US20050159166A1 (en) 2004-01-21 2005-07-21 Telefonaktiebolaget Lm Ericsson (Publ) Quality of service controlled link adaptation
US8145785B1 (en) 2004-02-13 2012-03-27 Habanero Holdings, Inc. Unused resource recognition in real time for provisioning and management of fabric-backplane enterprise servers
US7376122B2 (en) 2004-02-23 2008-05-20 Microsoft Corporation System and method for link quality source routing
US7428214B2 (en) 2004-03-04 2008-09-23 Cisco Technology, Inc. Methods and devices for high network availability
US7496661B1 (en) 2004-03-29 2009-02-24 Packeteer, Inc. Adaptive, application-aware selection of differentiated network services
US7957266B2 (en) 2004-05-28 2011-06-07 Alcatel-Lucent Usa Inc. Efficient and robust routing independent of traffic pattern variability
US7561534B2 (en) 2004-06-30 2009-07-14 Alcatel-Lucent Usa Inc. Methods of network routing having improved resistance to faults affecting groups of links subject to common risks
US7684374B2 (en) 2004-07-28 2010-03-23 Broadcom Corporation Handling of multimedia call sessions and attachments using multi-network simulcasting
US8572234B2 (en) 2004-11-30 2013-10-29 Hewlett-Packard Development, L.P. MPLS VPN fault management using IGP monitoring system
US7936762B2 (en) 2004-12-09 2011-05-03 The Boeing Company QOS provisioning in a network having dynamic link states
US8250214B2 (en) 2004-12-20 2012-08-21 Vmware, Inc. System, method and computer program product for communicating with a private network
US8954595B2 (en) 2004-12-30 2015-02-10 Citrix Systems, Inc. Systems and methods for providing client-side accelerated access to remote applications via TCP buffering
AU2005321093A1 (en) 2004-12-31 2006-07-06 British Telecommunications Public Limited Company Method to run a connectionless network as a connection oriented network
EP1679835A1 (en) 2005-01-07 2006-07-12 Koninklijke KPN N.V. Method, device and system for predicting a data session time
US7395277B2 (en) 2005-01-25 2008-07-01 International Business Machines Corporation Content framework method
US20060171365A1 (en) 2005-02-02 2006-08-03 Utstarcom, Inc. Method and apparatus for L2TP dialout and tunnel switching
US9306831B2 (en) 2005-02-14 2016-04-05 Cisco Technology, Inc. Technique for efficient load balancing of TE-LSPs
US7710865B2 (en) 2005-02-25 2010-05-04 Cisco Technology, Inc. Disaster recovery for active-standby data center using route health and BGP
US7609619B2 (en) 2005-02-25 2009-10-27 Cisco Technology, Inc. Active-active data center using RHI, BGP, and IGP anycast for disaster recovery and load distribution
US7701851B2 (en) 2005-07-20 2010-04-20 Vidyo, Inc. System and method for the control of the transmission rate in packet-based digital communications
US7945678B1 (en) 2005-08-05 2011-05-17 F5 Networks, Inc. Link load balancer that controls a path for a client to connect to a resource
CN1909501A (zh) 2005-08-05 2007-02-07 华为技术有限公司 一种端到端业务快速收敛的方法和路由设备
US7426626B2 (en) 2005-08-23 2008-09-16 Qualcomm Incorporated TLB lock indicator
US8259566B2 (en) 2005-09-20 2012-09-04 Qualcomm Incorporated Adaptive quality of service policy for dynamic networks
US7920572B2 (en) 2005-09-20 2011-04-05 Cisco Technology, Inc. Modifying operation of peer-to-peer networks based on integrating network routing information
US7401198B2 (en) 2005-10-06 2008-07-15 Netapp Maximizing storage system throughput by measuring system performance metrics
US20070091794A1 (en) 2005-10-20 2007-04-26 Clarence Filsfils Method of constructing a backup path in an autonomous system
US20070115812A1 (en) 2005-11-22 2007-05-24 Silver Peak Systems, Inc. Sequence numbers for multiple quality of service levels
US7693047B2 (en) 2005-11-28 2010-04-06 Cisco Technology, Inc. System and method for PE-node protection
US20070162639A1 (en) 2005-11-30 2007-07-12 Chu Hsiao-Keng J TCP-offload-engine based zero-copy sockets
US7673042B2 (en) 2005-12-06 2010-03-02 Shunra Software, Ltd. System and method for comparing service levels to a service level objective
US8141156B1 (en) 2005-12-28 2012-03-20 At&T Intellectual Property Ii, L.P. Method and apparatus for mitigating routing misbehavior in a network
US7581022B1 (en) 2005-12-29 2009-08-25 At&T Corp. Method for tunable inter domain egress selection
CN101356783B (zh) 2006-01-12 2014-06-04 博通以色列研发公司 虚拟化网络环境中具有i/o共享的协议卸载和直接i/o的方法和系统
US7633956B1 (en) 2006-01-19 2009-12-15 Cisco Technology, Inc. System and method for providing support for multipoint L2VPN services in devices without local bridging
US9015299B1 (en) 2006-01-20 2015-04-21 Cisco Technology, Inc. Link grouping for route optimization
US7680925B2 (en) 2006-01-24 2010-03-16 Cisco Technology, Inc. Method and system for testing provisioned services in a network
US7633882B2 (en) 2006-02-02 2009-12-15 Eaton Corporation Ad-hoc network and method employing globally optimized routes for packets
US20150003240A1 (en) 2006-02-21 2015-01-01 Rockstar Consortium Us Lp Adaptive call routing in ip networks
US7873025B2 (en) 2006-02-23 2011-01-18 Cisco Technology, Inc. Network device that determines application-level network latency by monitoring option values in a transport layer message
US7729257B2 (en) 2006-03-30 2010-06-01 Alcatel-Lucent Usa Inc. Method and apparatus for link transmission scheduling for handling traffic variation in wireless mesh networks
US7865615B2 (en) 2006-05-08 2011-01-04 Cisco Technology, Inc. Maintaining IGP transparency of VPN routes when BGP is used as a PE-CE protocol
US7953020B2 (en) 2006-05-22 2011-05-31 At&T Intellectual Property Ii, L.P. Method for implementing and reporting one-way network measurements
US8488447B2 (en) 2006-06-30 2013-07-16 Centurylink Intellectual Property Llc System and method for adjusting code speed in a transmission path during call set-up due to reduced transmission performance
DE102006032832A1 (de) 2006-07-14 2008-01-17 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Netzwerksystem und Verfahren zur Steuerung verteilter Speicher
US7639609B2 (en) 2006-07-18 2009-12-29 Opnet Technologies, Inc. Controlled incremental multi-protocol label switching (MPLS) traffic engineering
US8566452B1 (en) 2006-08-03 2013-10-22 F5 Networks, Inc. Intelligent HTTP based load-balancing, persistence, and application traffic management of SSL VPN tunnels
US7907595B2 (en) 2006-09-29 2011-03-15 Avaya, Inc. Method and apparatus for learning endpoint addresses of IPSec VPN tunnels
KR100817798B1 (ko) 2006-10-20 2008-03-31 한국정보보호진흥원 인터넷 제어 메시지 프로토콜의 타임스탬프 기능을 이용한네트워크 링크 가용 대역폭 추정 방법
US7885180B2 (en) 2006-12-15 2011-02-08 Check Point Software Technologies Inc. Address resolution request mirroring
EP2104897A4 (en) 2007-01-17 2010-12-22 Nortel Networks Ltd FRONTIER GATEWAY PROTOCOL EXTENDED COMMUNITY ATTRIBUTE FOR LAYER 2 AND LAYER 3 VIRTUAL PRIVATE NETWORKS USING 802.1AH STANDARD TUNNELS
US7830804B2 (en) 2007-01-17 2010-11-09 Sierra Wireless, Inc. Quality of service application programming interface over socket
CN100484037C (zh) 2007-03-14 2009-04-29 华为技术有限公司 设备跟踪系统、装置及方法
US8205246B2 (en) 2007-05-10 2012-06-19 Cisco Technology, Inc. User sensitive filtering of network application layer resources
US8111692B2 (en) 2007-05-31 2012-02-07 Embarq Holdings Company Llc System and method for modifying network traffic
EP2208311B1 (en) 2007-06-19 2012-08-22 Sand Holdings, LLC An autonomous, automatic-reset/restore client and a monitoring system
US8094659B1 (en) 2007-07-09 2012-01-10 Marvell Israel (M.I.S.L) Ltd. Policy-based virtual routing and forwarding (VRF) assignment
US7974264B2 (en) 2007-07-13 2011-07-05 Michael Rothschild Method and a system for determining the spatial location of nodes in a wireless network
EP2201474B1 (en) 2007-10-03 2020-05-06 NTT Global Networks Incorporated Virtualized application acceleration infrastructure
US8560634B2 (en) 2007-10-17 2013-10-15 Dispersive Networks, Inc. Apparatus, systems and methods utilizing dispersive networking
EP2223254A4 (en) 2007-11-05 2011-11-02 Intelli Check Mobilisa Inc DYNAMIC ACCESS CONTROL IN RESPONSE TO FLEXIBLE RULES
US8667095B2 (en) 2007-11-09 2014-03-04 Cisco Technology, Inc. Local auto-configuration of network devices connected to multipoint virtual connections
US8503334B2 (en) 2007-12-14 2013-08-06 Level 3 Communications, Llc System and method for providing network services over shared virtual private network (VPN)
US9130968B2 (en) 2008-01-16 2015-09-08 Netapp, Inc. Clustered cache appliance system and methodology
GB2458154B (en) 2008-03-07 2012-06-27 Hewlett Packard Development Co Routing across a virtual network
US8681709B2 (en) 2008-03-27 2014-03-25 At&T Mobility Ii Llc Dynamic allocation of communications resources
US8170123B1 (en) 2008-04-15 2012-05-01 Desktone, Inc. Media acceleration for virtual computing services
US8964548B1 (en) 2008-04-17 2015-02-24 Narus, Inc. System and method for determining network application signatures using flow payloads
US8395989B2 (en) 2008-04-23 2013-03-12 Verizon Patent And Licensing Inc. Method and system for network backbone analysis
US8001413B2 (en) 2008-05-05 2011-08-16 Microsoft Corporation Managing cluster split-brain in datacenter service site failover
US8160063B2 (en) 2008-06-09 2012-04-17 Microsoft Corporation Data center interconnect and traffic engineering
US8125907B2 (en) 2008-06-12 2012-02-28 Talari Networks Incorporated Flow-based adaptive private network with multiple WAN-paths
US7962458B2 (en) 2008-06-12 2011-06-14 Gravic, Inc. Method for replicating explicit locks in a data replication engine
US9717021B2 (en) 2008-07-03 2017-07-25 Silver Peak Systems, Inc. Virtual network overlay
US8098663B2 (en) 2008-07-08 2012-01-17 Cisco Technology, Inc. Carrier's carrier without customer-edge-to-customer-edge border gateway protocol
US8243589B1 (en) 2008-08-14 2012-08-14 United Services Automobile Association (Usaa) Systems and methods for data center load balancing
JP5074327B2 (ja) 2008-08-21 2012-11-14 株式会社日立製作所 経路制御システム
US9715401B2 (en) 2008-09-15 2017-07-25 International Business Machines Corporation Securing live migration of a virtual machine from a secure virtualized computing environment, over an unsecured network, to a different virtualized computing environment
US7974219B2 (en) 2008-09-26 2011-07-05 Hewlett-Packard Development Company, L.P. Network troubleshooting using path topology
US8006129B2 (en) 2008-10-03 2011-08-23 Cisco Technology, Inc. Detecting and preventing the split-brain condition in redundant processing units
US9270595B2 (en) 2008-10-10 2016-02-23 Hewlett Packard Enterprise Development Lp Method and system for controlling a delay of packet processing using loop paths
US7978612B2 (en) 2008-10-13 2011-07-12 Cisco Technology, Inc. Two-hop relay for reducing distance vector routing information
US8116225B2 (en) 2008-10-31 2012-02-14 Venturi Wireless Method and apparatus for estimating channel bandwidth
US8155158B2 (en) 2008-11-12 2012-04-10 Patricio Humberto Saavedra System, apparatus and method for providing aggregated network connections
US9929964B2 (en) 2008-11-12 2018-03-27 Teloip Inc. System, apparatus and method for providing aggregation of connections with a secure and trusted virtual network overlay
US20100128600A1 (en) 2008-11-26 2010-05-27 A T & T Intellectual Property I, L.P. Automated Network Fault Analysis
US8442043B2 (en) 2008-12-29 2013-05-14 Cisco Technology, Inc. Service selection mechanism in service insertion architecture data plane
US8898286B2 (en) 2010-06-04 2014-11-25 Broadcom Corporation Method and system for providing secure transactions via a broadband gateway
US10057775B2 (en) 2009-01-28 2018-08-21 Headwater Research Llc Virtualized policy and charging system
US8893009B2 (en) 2009-01-28 2014-11-18 Headwater Partners I Llc End user device that secures an association of application to service policy with an application certificate check
US8289997B2 (en) 2009-02-02 2012-10-16 Novara Technology, LLC Bandwidth sharing in a distributed wireless client application using inverse multiplexing termination
US7961599B2 (en) 2009-03-03 2011-06-14 Alcatel Lucent Pseudowire tunnel redundancy
US8094575B1 (en) 2009-03-24 2012-01-10 Juniper Networks, Inc. Routing protocol extension for network acceleration service-aware path selection within computer networks
JP5391777B2 (ja) 2009-03-30 2014-01-15 日本電気株式会社 経路選択方法及び経路選択システム並びにそれに用いるルータ
US8582502B2 (en) 2009-06-04 2013-11-12 Empire Technology Development Llc Robust multipath routing
US8199753B2 (en) 2009-06-05 2012-06-12 Juniper Networks, Inc. Forwarding frames in a computer network using shortest path bridging
US9069727B2 (en) 2011-08-12 2015-06-30 Talari Networks Incorporated Adaptive private network with geographically redundant network control nodes
US10785117B2 (en) 2009-06-11 2020-09-22 Talari Networks Incorporated Methods and apparatus for configuring a standby WAN link in an adaptive private network
US9210065B2 (en) 2009-06-22 2015-12-08 Alcatel Lucent Providing cloud-based services using dynamic network virtualization
US8489744B2 (en) 2009-06-29 2013-07-16 Red Hat Israel, Ltd. Selecting a host from a host cluster for live migration of a virtual machine
US8885667B2 (en) 2009-07-10 2014-11-11 Time Warner Cable Enterprises Llc Destination based methodology for managing network resources
US8744807B2 (en) 2009-08-10 2014-06-03 Siemens Aktiengesellschaft Scalable and extensible framework for storing and analyzing sensor data
JP5398410B2 (ja) 2009-08-10 2014-01-29 アラクサラネットワークス株式会社 ネットワークシステム,パケット転送装置,パケット転送方法及びコンピュータプログラム
US8346808B2 (en) 2009-08-12 2013-01-01 Westell Technologies, Inc. System and method of accessing resources in a computer network
US8787380B2 (en) 2009-08-20 2014-07-22 Nec Europe Ltd. Method for controlling the traffic within a network structure and a network structure
CN102025591B (zh) 2009-09-18 2013-12-18 中兴通讯股份有限公司 虚拟专用网络的实现方法及系统
US8619779B2 (en) 2009-09-30 2013-12-31 Alcatel Lucent Scalable architecture for enterprise extension in a cloud topology
CN102035814B (zh) 2009-09-30 2014-08-27 瞻博网络公司 通过vpn ipsec隧道确保服务质量
WO2011044957A1 (en) 2009-10-13 2011-04-21 Telefonaktiebolaget Lm Ericsson (Publ) Multipoint-to-multipoint service for a communications network
US8260830B2 (en) 2009-11-09 2012-09-04 Middlecamp William J Adapting a timer bounded arbitration protocol
US8488491B2 (en) 2009-11-12 2013-07-16 Cisco Technology, Inc. Compressed virtual routing and forwarding in a communications network
JP5392049B2 (ja) 2009-12-11 2014-01-22 富士通株式会社 経路制御方法、通信システム、及び通信装置
US8422379B2 (en) 2009-12-15 2013-04-16 At&T Intellectual Property I, Lp Method of simple and efficient failure resilient load balancing
US20110153909A1 (en) 2009-12-22 2011-06-23 Yao Zu Dong Efficient Nested Virtualization
US8224971B1 (en) 2009-12-28 2012-07-17 Amazon Technologies, Inc. Using virtual networking devices and routing information to initiate external actions
US8452932B2 (en) 2010-01-06 2013-05-28 Storsimple, Inc. System and method for efficiently creating off-site data volume back-ups
WO2011103293A2 (en) 2010-02-17 2011-08-25 Rubenstein, Allen Content and application delivery network aggregation
EP2545682A4 (en) 2010-03-10 2017-01-04 Telefonaktiebolaget LM Ericsson (publ) Sub-path e2e probing
WO2011120000A2 (en) 2010-03-26 2011-09-29 Citrix Systems, Inc. Systems and methods for link load balancing on a multi-core device
US8665722B2 (en) 2010-03-29 2014-03-04 Ted Szymanski Method to achieve bounded buffer sizes and quality of service guarantees in the internet network
WO2011130602A1 (en) 2010-04-15 2011-10-20 Vonage Network, Llc Systems and methods of improving the quality of voip communications
US9300576B2 (en) 2010-05-03 2016-03-29 Pluribus Networks Inc. Methods, systems, and fabrics implementing a distributed network operating system
US8724456B1 (en) 2010-05-19 2014-05-13 Juniper Networks, Inc. Network path selection for multi-homed edges to ensure end-to-end resiliency
US8799504B2 (en) 2010-07-02 2014-08-05 Netgear, Inc. System and method of TCP tunneling
US8705530B2 (en) 2010-07-29 2014-04-22 At&T Intellectual Property I, L.P. Methods and apparatus to implement multipoint and replicated communication paths using upstream and recursive downstream label mappings
EP2601757B1 (en) 2010-08-05 2017-10-04 Thomson Licensing Method and apparatus for converting a multicast session to a unicast session
US9323561B2 (en) 2010-08-13 2016-04-26 International Business Machines Corporation Calibrating cloud computing environments
JP5477603B2 (ja) 2010-09-09 2014-04-23 日本電気株式会社 コンピュータシステム、及びコンピュータシステムにおける通信方法
WO2012038722A1 (en) 2010-09-24 2012-03-29 Bae Systems Plc Admission control in a self aware network
US8547835B2 (en) 2010-10-21 2013-10-01 Telefonaktiebolaget L M Ericsson (Publ) Controlling IP flows to bypass a packet data network gateway using multi-path transmission control protocol connections
US8589558B2 (en) 2010-11-29 2013-11-19 Radware, Ltd. Method and system for efficient deployment of web applications in a multi-datacenter system
JP5750167B2 (ja) 2010-12-07 2015-07-15 エンパイア テクノロジー ディベロップメント エルエルシー 端末間の体感品質を測定するためのオーディオフィンガープリントの差分
US8385225B1 (en) 2010-12-14 2013-02-26 Google Inc. Estimating round trip time of a network path
US9031059B2 (en) 2010-12-17 2015-05-12 Verizon Patent And Licensing Inc. Fixed mobile convergence and voice call continuity using a mobile device/docking station
WO2012084025A1 (en) 2010-12-21 2012-06-28 Telefonaktiebolaget Lm Ericsson (Publ) Method and apparatus for providing temporal context for recommending content for consumption by a user device
US8806482B1 (en) 2011-01-06 2014-08-12 Amazon Technologies, Inc. Interaction with a virtual network
US9009217B1 (en) 2011-01-06 2015-04-14 Amazon Technologies, Inc. Interaction with a virtual network
US9135037B1 (en) 2011-01-13 2015-09-15 Google Inc. Virtual network protocol
US10637782B2 (en) 2011-03-23 2020-04-28 Hughes Network Systems, Llc System and method for policy-based multipath WAN transports for improved quality of service over broadband networks
US8462780B2 (en) 2011-03-30 2013-06-11 Amazon Technologies, Inc. Offload device-based stateless packet processing
US8774213B2 (en) 2011-03-30 2014-07-08 Amazon Technologies, Inc. Frameworks and interfaces for offload device-based packet processing
US8661295B1 (en) 2011-03-31 2014-02-25 Amazon Technologies, Inc. Monitoring and detecting causes of failures of network paths
US20120266026A1 (en) 2011-04-18 2012-10-18 Ramya Malanai Chikkalingaiah Detecting and diagnosing misbehaving applications in virtualized computing systems
US9253252B2 (en) 2011-05-06 2016-02-02 Citrix Systems, Inc. Systems and methods for cloud bridging between intranet resources and cloud resources
WO2012154506A1 (en) 2011-05-06 2012-11-15 Interdigital Patent Holdings, Inc. Method and apparatus for bandwidth aggregation for ip flow
US9054999B2 (en) 2012-05-09 2015-06-09 International Business Machines Corporation Static TRILL routing
US8873398B2 (en) 2011-05-23 2014-10-28 Telefonaktiebolaget L M Ericsson (Publ) Implementing EPC in a cloud computer with openflow data plane
US9154327B1 (en) 2011-05-27 2015-10-06 Cisco Technology, Inc. User-configured on-demand virtual layer-2 network for infrastructure-as-a-service (IaaS) on a hybrid cloud network
JP5672154B2 (ja) 2011-05-31 2015-02-18 株式会社バッファロー ネットワークシステム、ゲートウェイ装置、経路決定方法、プログラム、および記憶媒体
EP2716132A2 (en) 2011-06-02 2014-04-09 Interdigital Patent Holdings, Inc. Methods, apparatus, and systems for managing converged gateway communications
US9304798B2 (en) * 2011-06-07 2016-04-05 Hewlett Packard Enterprise Development Lp Scalable multi-tenant network architecture for virtualized datacenters
US20120317270A1 (en) 2011-06-10 2012-12-13 Alcatel-Lucent Usa Inc. Intelligent presence cost management based upon congestion status and subscriber profile
US20120331160A1 (en) 2011-06-22 2012-12-27 Telefonaktiebolaget L M Ericsson (Publ) Multi-path transmission control protocol proxy service
US8804745B1 (en) 2011-06-27 2014-08-12 Amazon Technologies, Inc. Virtualization mapping
US8661287B2 (en) 2011-06-30 2014-02-25 Rackspace Us, Inc. Automatically performing failover operations with a load balancer
US9100305B2 (en) 2011-07-12 2015-08-04 Cisco Technology, Inc. Efficient admission control for low power and lossy networks
CN107071086B (zh) 2011-08-17 2020-06-05 Nicira股份有限公司 逻辑l3路由
AU2012296330B2 (en) 2011-08-17 2016-03-17 Nicira, Inc. Hierarchical controller clusters for interconnecting different logical domains
EP2736197B1 (en) 2011-08-17 2016-03-09 Huawei Technologies Co., Ltd. Packet reassembly and resequence method, apparatus and system
US8630291B2 (en) 2011-08-22 2014-01-14 Cisco Technology, Inc. Dynamic multi-path forwarding for shared-media communication networks
CA2750345C (en) 2011-08-24 2013-06-18 Guest Tek Interactive Entertainment Ltd. Method of allocating bandwidth between zones according to user load and bandwidth management system thereof
US10044678B2 (en) 2011-08-31 2018-08-07 At&T Intellectual Property I, L.P. Methods and apparatus to configure virtual private mobile networks with virtual private networks
US8797874B2 (en) 2011-09-09 2014-08-05 Futurewei Technologies, Inc. Apparatus and system for packet routing and forwarding in an interior network
US8811212B2 (en) 2012-02-22 2014-08-19 Telefonaktiebolaget L M Ericsson (Publ) Controller placement for fast failover in the split architecture
CN102377630A (zh) 2011-10-13 2012-03-14 华为技术有限公司 基于流量工程隧道的虚拟专用网络实现方法及系统
US9300548B2 (en) 2011-10-14 2016-03-29 Alcatel Lucent Providing dynamic reliability and security in communications environments
US9923826B2 (en) 2011-10-14 2018-03-20 Citrix Systems, Inc. Systems and methods for dynamic adaptation of network accelerators
US20130103834A1 (en) 2011-10-21 2013-04-25 Blue Coat Systems, Inc. Multi-Tenant NATting for Segregating Traffic Through a Cloud Service
US8700683B2 (en) 2011-10-24 2014-04-15 Nokia Corporation Method and apparatus for providing a key-value based storage interface
US8745177B1 (en) 2011-11-01 2014-06-03 Edgecast Networks, Inc. End-to-end monitoring and optimization of a content delivery network using anycast routing
CN103095543B (zh) 2011-11-07 2016-10-05 华为技术有限公司 用于域间虚拟专用网络对接的方法和设备
KR20130050156A (ko) 2011-11-07 2013-05-15 한국전자통신연구원 가상 주소 공간 전환 장치
US8874974B2 (en) 2011-11-15 2014-10-28 International Business Machines Corporation Synchronizing a distributed communication system using diagnostic heartbeating
US8756453B2 (en) 2011-11-15 2014-06-17 International Business Machines Corporation Communication system with diagnostic capabilities
US8769089B2 (en) 2011-11-15 2014-07-01 International Business Machines Corporation Distributed application using diagnostic heartbeating
US20130142201A1 (en) 2011-12-02 2013-06-06 Microsoft Corporation Connecting on-premise networks with public clouds
CN103166824B (zh) 2011-12-13 2016-09-28 华为技术有限公司 一种互联方法、装置和系统
US9411655B2 (en) 2011-12-30 2016-08-09 Dell Products, Lp System and method for detection and deployment of virtualization capable assets in a managed datacenter
CN102413061B (zh) 2011-12-31 2015-04-15 杭州华三通信技术有限公司 一种报文传输方法及设备
US8855071B1 (en) 2012-01-04 2014-10-07 Juniper Networks, Inc. Handling errors in subscriber session management within mobile networks
US8908698B2 (en) 2012-01-13 2014-12-09 Cisco Technology, Inc. System and method for managing site-to-site VPNs of a cloud managed network
US20130185729A1 (en) 2012-01-13 2013-07-18 Rutgers, The State University Of New Jersey Accelerating resource allocation in virtualized environments using workload classes and/or workload signatures
US9106555B2 (en) 2012-01-25 2015-08-11 Cisco Technology, Inc. Troubleshooting routing topology based on a reference topology
US8660129B1 (en) 2012-02-02 2014-02-25 Cisco Technology, Inc. Fully distributed routing over a user-configured on-demand virtual network for infrastructure-as-a-service (IaaS) on hybrid cloud networks
CN104106242B (zh) 2012-02-24 2017-06-13 华为技术有限公司 分片网络中委托转发和地址解析
US20130223226A1 (en) 2012-02-29 2013-08-29 Dell Products, Lp System and Method for Providing a Split Data Plane in a Flow-Based Switching Device
US20130238782A1 (en) 2012-03-09 2013-09-12 Alcatel-Lucent Usa Inc. Method and apparatus for identifying an application associated with an ip flow using dns data
US8730793B2 (en) 2012-03-16 2014-05-20 Avaya Inc. Method and apparatus providing network redundancy and high availability to remote network nodes
US8892936B2 (en) 2012-03-20 2014-11-18 Symantec Corporation Cluster wide consistent detection of interconnect failures
US8885562B2 (en) 2012-03-28 2014-11-11 Telefonaktiebolaget L M Ericsson (Publ) Inter-chassis redundancy with coordinated traffic direction
US8730806B2 (en) 2012-04-03 2014-05-20 Telefonaktiebolaget L M Ericsson (Publ) Congestion control and resource allocation in split architecture networks
US8856339B2 (en) 2012-04-04 2014-10-07 Cisco Technology, Inc. Automatically scaled network overlay with heuristic monitoring in a hybrid cloud environment
US8923149B2 (en) 2012-04-09 2014-12-30 Futurewei Technologies, Inc. L3 gateway for VXLAN
US9996370B1 (en) 2012-04-18 2018-06-12 Open Invention Network Llc Page swapping in virtual machine environment
US9203784B2 (en) 2012-04-24 2015-12-01 Cisco Technology, Inc. Distributed virtual switch architecture for a hybrid cloud
US9071541B2 (en) 2012-04-25 2015-06-30 Juniper Networks, Inc. Path weighted equal-cost multipath
US9389920B2 (en) 2012-05-02 2016-07-12 Futurewei Technologies, Inc. Intelligent data center cluster selection
JP5991013B2 (ja) 2012-05-08 2016-09-14 富士通株式会社 基地局及び無線リソース割当て方法
US9379971B2 (en) 2012-05-11 2016-06-28 Simula Inovation AS Method and apparatus for determining paths between source/destination pairs
JP6046241B2 (ja) 2012-05-15 2016-12-14 テレフオンアクチーボラゲット エルエム エリクソン(パブル) リンクアグリゲーショングループにおけるスプリットブレイン問題を検知し、それに対処するための方法及び装置
WO2013173973A1 (zh) 2012-05-22 2013-11-28 华为技术有限公司 网络通信方法和装置
TWI482469B (zh) 2012-05-23 2015-04-21 Gemtek Technology Co Ltd 路由裝置
US10063443B2 (en) 2012-05-29 2018-08-28 Openet Telecom Ltd. System and method for managing VoLTE session continuity information using logical scalable units
US8959185B2 (en) * 2012-06-06 2015-02-17 Juniper Networks, Inc. Multitenant server for virtual networks within datacenter
US9898317B2 (en) 2012-06-06 2018-02-20 Juniper Networks, Inc. Physical path determination for virtual network packet flows
US9729424B2 (en) 2012-06-11 2017-08-08 Futurewei Technologies, Inc. Defining data flow paths in software-defined networks with application-layer traffic optimization
US9647938B2 (en) 2012-06-11 2017-05-09 Radware, Ltd. Techniques for providing value-added services in SDN-based networks
US10031782B2 (en) 2012-06-26 2018-07-24 Juniper Networks, Inc. Distributed processing of network device tasks
US9100329B1 (en) 2012-06-28 2015-08-04 Juniper Networks, Inc. Providing non-interrupt failover using a link aggregation mechanism
US9203764B2 (en) 2012-07-11 2015-12-01 Telefonaktiebolaget L M Ericsson (Publ) Quality of experience enhancement through feedback for adjusting the quality of service in communication networks
US9819658B2 (en) 2012-07-12 2017-11-14 Unisys Corporation Virtual gateways for isolating virtual machines
CN104094577B (zh) 2012-08-13 2017-07-04 统一有限责任两合公司 用于间接地评定活动实体的状态的方法和装置
US9210079B2 (en) 2012-08-14 2015-12-08 Vmware, Inc. Method and system for virtual and physical network integration
US9563480B2 (en) 2012-08-21 2017-02-07 Rackspace Us, Inc. Multi-level cloud computing system
US9331940B2 (en) 2012-08-28 2016-05-03 Alcatel Lucent System and method providing distributed virtual routing and switching (DVRS)
CN103227843B (zh) 2012-08-31 2016-05-04 杭州华三通信技术有限公司 一种物理链路地址管理方法及装置
CN103685026A (zh) 2012-08-31 2014-03-26 中兴通讯股份有限公司 一种虚拟网络的接入方法和系统
US9807613B2 (en) 2012-09-06 2017-10-31 Dell Products, Lp Collaborative method and system to improve carrier network policies with context aware radio communication management
US9106548B2 (en) 2012-09-11 2015-08-11 Telefonaktiebolaget L M Ericsson (Publ) Network fault localization
US9521067B2 (en) 2012-09-28 2016-12-13 Cornell University System and methods for improved network routing
CN103731407B (zh) 2012-10-12 2017-08-11 华为技术有限公司 Ike报文协商的方法及系统
CN105190557B (zh) 2012-10-16 2018-09-14 思杰系统有限公司 用于通过多级api集成在公共与私有云之间进行桥接的系统和方法
US20140112171A1 (en) 2012-10-23 2014-04-24 Mr. Babak PASDAR Network system and method for improving routing capability
US9223635B2 (en) 2012-10-28 2015-12-29 Citrix Systems, Inc. Network offering in cloud computing environment
US9497250B2 (en) 2012-10-29 2016-11-15 International Business Machines Corporation Runtime grouping of tuples in a streaming application
US9930011B1 (en) 2012-11-30 2018-03-27 United Services Automobile Association (Usaa) Private network request forwarding
US9417922B2 (en) 2012-12-03 2016-08-16 Cutting Edge Consulting Associates, Inc. Systems and methods for protecting an identity in network communications
EP2760158B1 (en) 2012-12-03 2017-02-15 Huawei Technologies Co., Ltd. Policy processing method and network device
US9185114B2 (en) 2012-12-05 2015-11-10 Symantec Corporation Methods and systems for secure storage segmentation based on security context in a virtual environment
KR20140073243A (ko) 2012-12-06 2014-06-16 삼성전자주식회사 Http 메시지 처리 방법 및 장치
US9338225B2 (en) 2012-12-06 2016-05-10 A10 Networks, Inc. Forwarding policies on a virtual service network
US20140164718A1 (en) 2012-12-07 2014-06-12 Open Kernel Labs, Inc. Methods and apparatus for sharing memory between multiple processes of a virtual machine
US10057183B2 (en) 2012-12-07 2018-08-21 Hewlett Packard Enterprise Development Lp Network resource management
US9055000B1 (en) 2012-12-17 2015-06-09 Juniper Networks, Inc. Distributed network subnet
US9515899B2 (en) 2012-12-19 2016-12-06 Veritas Technologies Llc Providing optimized quality of service to prioritized virtual machines and applications based on quality of shared resources
US9053058B2 (en) 2012-12-20 2015-06-09 Apple Inc. QoS inband upgrade
US9563423B1 (en) 2012-12-21 2017-02-07 EMC IP Holding Company LLC System and method for simultaneous shared access to data buffers by two threads, in a connection-oriented data proxy service
US9203748B2 (en) 2012-12-24 2015-12-01 Huawei Technologies Co., Ltd. Software defined network-based data processing method, node, and system
US9680870B2 (en) 2012-12-28 2017-06-13 Verizon Patent And Licensing Inc. Software-defined networking gateway
US10432528B2 (en) 2013-01-08 2019-10-01 Telefonaktiebolaget Lm Ericsson (Publ) Distributed traffic inspection in a telecommunications network
US9621460B2 (en) 2013-01-14 2017-04-11 Versa Networks, Inc. Connecting multiple customer sites over a wide area network using an overlay network
JP6024474B2 (ja) * 2013-01-23 2016-11-16 富士通株式会社 マルチテナントシステム、管理装置、管理プログラム、およびマルチテナントシステムの制御方法
EP2763362A1 (en) 2013-01-31 2014-08-06 Thomson Licensing A method for connecting a multi-homed and MPTCP capable client with a regular TCP server
US9060025B2 (en) 2013-02-05 2015-06-16 Fortinet, Inc. Cloud-based security policy configuration
WO2014121460A1 (zh) 2013-02-06 2014-08-14 华为技术有限公司 一种网络虚拟化的数据传输的方法、设备和路由系统
US9225647B2 (en) 2013-02-11 2015-12-29 Vmware, Inc. Distributed deep packet inspection
US20140229210A1 (en) 2013-02-14 2014-08-14 Futurewei Technologies, Inc. System and Method for Network Resource Allocation Considering User Experience, Satisfaction and Operator Interest
JP5953421B2 (ja) 2013-02-25 2016-07-20 株式会社日立製作所 仮想サーバおよび非仮想サーバ混在環境におけるテナントネットワーク構成の管理方法
US9699034B2 (en) 2013-02-26 2017-07-04 Zentera Systems, Inc. Secure cloud fabric to connect subnets in different network domains
US10348767B1 (en) * 2013-02-26 2019-07-09 Zentera Systems, Inc. Cloud over IP session layer network
US9525564B2 (en) 2013-02-26 2016-12-20 Zentera Systems, Inc. Secure virtual network platform for enterprise hybrid cloud computing environments
US9065734B2 (en) 2013-03-08 2015-06-23 Telefonaktiebolaget L M Ericsson (Publ) Network bandwidth allocation in multi-tenancy cloud computing networks
US9306949B1 (en) 2013-03-12 2016-04-05 Amazon Technologies, Inc. Configure interconnections between networks hosted in datacenters
US20140269690A1 (en) 2013-03-13 2014-09-18 Qualcomm Incorporated Network element with distributed flow tables
US9794854B2 (en) 2013-03-14 2017-10-17 Google Inc. Optimizing packet/frame forwarding or routing in a wireless backhaul transport system
US20160020844A1 (en) 2013-03-14 2016-01-21 Google Inc. Systems and methods for wireless backhaul transport
US9477500B2 (en) 2013-03-15 2016-10-25 Avi Networks Managing and controlling a distributed network service platform
US9832205B2 (en) 2013-03-15 2017-11-28 International Business Machines Corporation Cross provider security management functionality within a cloud service brokerage platform
US9354983B1 (en) 2013-03-15 2016-05-31 Entreda, Inc. Integrated it service provisioning and management
US8818892B1 (en) 2013-03-15 2014-08-26 Palantir Technologies, Inc. Prioritizing data clusters with customizable scoring strategies
US9628328B2 (en) 2013-03-15 2017-04-18 Rackspace Us, Inc. Network controller with integrated resource management capability
US9075771B1 (en) 2013-03-15 2015-07-07 Symantec Corporation Techniques for managing disaster recovery sites
US9450817B1 (en) 2013-03-15 2016-09-20 Juniper Networks, Inc. Software defined network controller
US10263848B2 (en) 2013-03-20 2019-04-16 Wolting Holding B.V. Compiler for and method for software defined networks
EP2784996A1 (en) 2013-03-27 2014-10-01 British Telecommunications public limited company Deadline driven content delivery
US9432245B1 (en) 2013-04-16 2016-08-30 Amazon Technologies, Inc. Distributed load balancer node architecture
US10021027B2 (en) 2013-04-30 2018-07-10 Comcast Cable Communications, Llc Network validation with dynamic tunneling
US20140337674A1 (en) 2013-05-10 2014-11-13 Nec Laboratories America, Inc. Network Testing
US20140355441A1 (en) 2013-05-29 2014-12-04 Ashok Kumar Jain Method and apparatus of delivering assured services over unreliable internet infrastructure by using virtual overlay network architecture over a public cloud backbone
JP6310066B2 (ja) 2013-05-31 2018-04-11 テレコム・イタリア・エッセ・ピー・アー パケット交換通信ネットワークのリンクのパフォーマンス測定
CN104219147B (zh) 2013-06-05 2018-10-16 中兴通讯股份有限公司 边缘设备的vpn实现处理方法及装置
US9529692B2 (en) 2013-06-07 2016-12-27 Apple Inc. Memory management tools
US9471356B2 (en) 2013-06-12 2016-10-18 Dell Products L.P. Systems and methods for providing VLAN-independent gateways in a network virtualization overlay implementation
US9264289B2 (en) 2013-06-27 2016-02-16 Microsoft Technology Licensing, Llc Endpoint data centers of different tenancy sets
US9648547B1 (en) 2013-06-28 2017-05-09 Google Inc. Self-organizing topology management
US9608962B1 (en) 2013-07-09 2017-03-28 Pulse Secure, Llc Application-aware connection for network access client
US10454714B2 (en) 2013-07-10 2019-10-22 Nicira, Inc. Method and system of overlay flow control
US9722815B2 (en) 2013-07-10 2017-08-01 Sunil Mukundan Edge-gateway multipath method and system
US10749711B2 (en) 2013-07-10 2020-08-18 Nicira, Inc. Network-link method useful for a last-mile connectivity in an edge-gateway multipath system
US9344349B2 (en) 2013-07-12 2016-05-17 Nicira, Inc. Tracing network packets by a cluster of network controllers
US10003536B2 (en) 2013-07-25 2018-06-19 Grigore Raileanu System and method for managing bandwidth usage rates in a packet-switched network
US9979622B2 (en) 2013-07-30 2018-05-22 Cisco Technology, Inc. Elastic WAN optimization cloud services
US9203781B2 (en) 2013-08-07 2015-12-01 Cisco Technology, Inc. Extending virtual station interface discovery protocol (VDP) and VDP-like protocols for dual-homed deployments in data center environments
US9641551B1 (en) 2013-08-13 2017-05-02 vIPtela Inc. System and method for traversing a NAT device with IPSEC AH authentication
US9311140B2 (en) 2013-08-13 2016-04-12 Vmware, Inc. Method and apparatus for extending local area networks between clouds and migrating virtual machines using static network addresses
US9338223B2 (en) 2013-08-14 2016-05-10 Verizon Patent And Licensing Inc. Private cloud topology management system
WO2015021629A1 (zh) 2013-08-15 2015-02-19 华为技术有限公司 一种资源发放方法
US9559951B1 (en) 2013-08-29 2017-01-31 Cisco Technology, Inc. Providing intra-subnet and inter-subnet data center connectivity
US9875355B1 (en) 2013-09-17 2018-01-23 Amazon Technologies, Inc. DNS query analysis for detection of malicious software
WO2015041706A1 (en) 2013-09-23 2015-03-26 Mcafee, Inc. Providing a fast path between two entities
US20150089628A1 (en) 2013-09-24 2015-03-26 Michael Lang System and Method for Provision of a Router / Firewall in a Network
US20150088942A1 (en) 2013-09-25 2015-03-26 Westell Technologies, Inc. Methods and Systems for Providing File Services
US9379981B1 (en) 2013-09-27 2016-06-28 Google Inc. Flow level dynamic load balancing
US9461969B2 (en) 2013-10-01 2016-10-04 Racemi, Inc. Migration of complex applications within a hybrid cloud environment
US9635580B2 (en) 2013-10-08 2017-04-25 Alef Mobitech Inc. Systems and methods for providing mobility aspects to applications in the cloud
US9628290B2 (en) 2013-10-09 2017-04-18 International Business Machines Corporation Traffic migration acceleration for overlay virtual environments
WO2015051845A1 (en) 2013-10-10 2015-04-16 Telefonaktiebolaget L M Ericsson (Publ) A pool of network gateways
US9361336B2 (en) 2013-10-11 2016-06-07 Vmware, Inc. Methods and apparatus to manage virtual machines
US9608917B1 (en) 2013-10-21 2017-03-28 Google Inc. Systems and methods for achieving high network link utilization
US9397946B1 (en) 2013-11-05 2016-07-19 Cisco Technology, Inc. Forwarding to clusters of service nodes
JP2015095784A (ja) 2013-11-12 2015-05-18 富士通株式会社 情報処理システム、情報処理システムの制御方法及び情報処理装置の制御プログラム
EP3072263B1 (en) 2013-11-18 2017-10-25 Telefonaktiebolaget LM Ericsson (publ) Multi-tenant isolation in a cloud environment using software defined networking
DE102013113023A1 (de) 2013-11-25 2015-05-28 Reiner Kunz Innovative Operationsleuchte für Operationsräume, welche zu einem Datenaustausch mit anderen Operationsraum-Geräten in der Lage ist
US9231871B2 (en) 2013-11-25 2016-01-05 Versa Networks, Inc. Flow distribution table for packet flow load balancing
US9813343B2 (en) 2013-12-03 2017-11-07 Akamai Technologies, Inc. Virtual private network (VPN)-as-a-service with load-balanced tunnel endpoints
US9461923B2 (en) 2013-12-06 2016-10-04 Algoblu Holdings Limited Performance-based routing in software-defined network (SDN)
TWI528755B (zh) 2013-12-06 2016-04-01 財團法人工業技術研究院 軟體定義網路中用於延遲量測之網路控制器、延遲量測系統及延遲量測方法
US9288135B2 (en) 2013-12-13 2016-03-15 International Business Machines Corporation Managing data flows in software-defined network using network interface card
US9612854B2 (en) 2013-12-18 2017-04-04 Telefonaktiebolaget Lm Ericsson (Publ) System and method for virtualizing a remote device
US9467478B1 (en) 2013-12-18 2016-10-11 vIPtela Inc. Overlay management protocol for secure routing based on an overlay network
US9363178B2 (en) 2013-12-18 2016-06-07 Telefonaktiebolaget L M Ericsson (Publ) Method, apparatus, and system for supporting flexible lookup keys in software-defined networks
US20150189009A1 (en) 2013-12-30 2015-07-02 Alcatel-Lucent Canada Inc. Distributed multi-level stateless load balancing
US9450852B1 (en) 2014-01-03 2016-09-20 Juniper Networks, Inc. Systems and methods for preventing split-brain scenarios in high-availability clusters
US10097372B2 (en) 2014-01-09 2018-10-09 Ciena Corporation Method for resource optimized network virtualization overlay transport in virtualized data center environments
JP6328432B2 (ja) 2014-01-16 2018-05-23 クラリオン株式会社 ゲートウェイ装置、ファイルサーバシステム及びファイル分散方法
US9436813B2 (en) 2014-02-03 2016-09-06 Ca, Inc. Multi-tenancy support for a product that does not support multi-tenancy
US20150257081A1 (en) 2014-02-04 2015-09-10 Architecture Technology, Inc. Hybrid autonomous network and router for communication between heterogeneous subnets
US9825822B1 (en) 2014-02-13 2017-11-21 Amazon Technologies, Inc. Group networking in an overlay network
US20150236962A1 (en) 2014-02-14 2015-08-20 Exinda Networks PTY, Ltd. of Australia Method and system for using dynamic bandwidth detection to drive quality of service control refinement
US8989199B1 (en) 2014-02-24 2015-03-24 Level 3 Communications, Llc Control device discovery in networks having separate control and forwarding devices
JP5858205B1 (ja) 2014-03-07 2016-02-10 日本電気株式会社 ネットワークシステムと拠点間ネットワーク連携制御装置及びネットワーク制御方法並びにプログラム
US9479482B2 (en) 2014-03-14 2016-10-25 Soha Systems, Inc. Secure application delivery system with security services interface in the cloud
US9479424B2 (en) 2014-03-18 2016-10-25 Telefonaktiebolaget Lm Ericsson (Publ) Optimized approach to IS-IS LFA computation with parallel links
US10476698B2 (en) 2014-03-20 2019-11-12 Avago Technologies International Sales Pte. Limited Redundent virtual link aggregation group
US9647883B2 (en) 2014-03-21 2017-05-09 Nicria, Inc. Multiple levels of logical routers
US9787559B1 (en) 2014-03-28 2017-10-10 Juniper Networks, Inc. End-to-end monitoring of overlay networks providing virtualized network services
US9401851B2 (en) 2014-03-28 2016-07-26 Verizon Patent And Licensing Inc. Network management system
US9807004B2 (en) 2014-04-01 2017-10-31 Google Inc. System and method for software defined routing of traffic within and between autonomous systems with enhanced flow routing, scalability and security
US10846257B2 (en) 2014-04-01 2020-11-24 Endance Technology Limited Intelligent load balancing and high speed intelligent network recorders
US9226156B2 (en) 2014-04-28 2015-12-29 Stad.Io, Llc Authenticated registration of participants for web access at live events
US9407541B2 (en) 2014-04-24 2016-08-02 International Business Machines Corporation Propagating a flow policy by control packet in a software defined network (SDN) based network
US20150317169A1 (en) 2014-05-04 2015-11-05 Midfin Systems Inc. Constructing and operating high-performance unified compute infrastructure across geo-distributed datacenters
JP6393773B2 (ja) 2014-05-12 2018-09-19 華為技術有限公司Huawei Technologies Co.,Ltd. Ipネットワークにおける部分ソフトウェア定義ネットワークのスイッチ置換
US9455922B2 (en) 2014-05-19 2016-09-27 Intel Corporation Technologies for moderating packet ingress interrupt generation
WO2015180084A1 (zh) 2014-05-29 2015-12-03 华为技术有限公司 一种报文转发方法和VxLAN网关
US9961545B2 (en) 2014-06-03 2018-05-01 Qualcomm Incorporated Systems, methods, and apparatus for authentication during fast initial link setup
US11399063B2 (en) 2014-06-04 2022-07-26 Pure Storage, Inc. Network authentication for a storage system
WO2015187946A1 (en) 2014-06-05 2015-12-10 KEMP Technologies Inc. Adaptive load balancer and methods for intelligent data traffic steering
US9413659B2 (en) 2014-06-11 2016-08-09 Cisco Technology, Inc. Distributed network address and port translation for migrating flows between service chains in a network environment
US10062045B2 (en) 2014-06-12 2018-08-28 International Business Machines Corporation Project workspace prioritization
US9350710B2 (en) 2014-06-20 2016-05-24 Zscaler, Inc. Intelligent, cloud-based global virtual private network systems and methods
US10019278B2 (en) 2014-06-22 2018-07-10 Cisco Technology, Inc. Framework for network technology agnostic multi-cloud elastic extension and isolation
US10075329B2 (en) 2014-06-25 2018-09-11 A 10 Networks, Incorporated Customizable high availability switchover control of application delivery controllers
US9634936B2 (en) 2014-06-30 2017-04-25 Juniper Networks, Inc. Service chaining across multiple networks
US9876723B2 (en) 2014-12-21 2018-01-23 Pismo Labs Technology Limited Methods and systems for evaluating network performance of an aggregated connection
US20160019317A1 (en) 2014-07-16 2016-01-21 Commvault Systems, Inc. Volume or virtual machine level backup and generating placeholders for virtual machine files
CN105323136B (zh) 2014-07-31 2020-01-10 中兴通讯股份有限公司 信息的处理方法及装置
US20160035183A1 (en) 2014-07-31 2016-02-04 Wms Gaming Inc. Electronic gaming machine service bus
EP3175647B1 (en) 2014-08-03 2018-12-12 Hughes Network Systems, LLC Centralized ground-based route determination and traffic engineering for software defined satellite communications networks
US10609159B2 (en) 2014-08-04 2020-03-31 Microsoft Technology Licensing, Llc Providing higher workload resiliency in clustered systems based on health heuristics
US9665432B2 (en) 2014-08-07 2017-05-30 Microsoft Technology Licensing, Llc Safe data access following storage failure
US9356943B1 (en) 2014-08-07 2016-05-31 Symantec Corporation Systems and methods for performing security analyses on network traffic in cloud-based environments
CN105684382A (zh) 2014-08-11 2016-06-15 华为技术有限公司 报文的控制方法、交换机及控制器
US10038629B2 (en) 2014-09-11 2018-07-31 Microsoft Technology Licensing, Llc Virtual machine migration using label based underlay network forwarding
US9336040B2 (en) 2014-09-15 2016-05-10 Intel Corporation Techniques for remapping sessions for a multi-threaded application
TW201728124A (zh) 2014-09-16 2017-08-01 科勞簡尼克斯股份有限公司 以彈性地定義之通信網路控制器為基礎之網路控制、操作及管理
WO2016045702A1 (en) 2014-09-23 2016-03-31 Nokia Solutions And Networks Oy Transmitting data based on flow input from base station
US9935829B1 (en) 2014-09-24 2018-04-03 Amazon Technologies, Inc. Scalable packet processing service
US10038601B1 (en) 2014-09-26 2018-07-31 Amazon Technologies, Inc. Monitoring a multi-tier network fabric
US9825905B2 (en) 2014-10-13 2017-11-21 Vmware Inc. Central namespace controller for multi-tenant cloud environments
US9723065B2 (en) 2014-10-13 2017-08-01 Vmware, Inc. Cross-cloud object mapping for hybrid clouds
JP6721166B2 (ja) 2014-10-14 2020-07-08 ミド ホールディングス リミテッド 仮想ネットワークにおける分散型フロー状態p2p設定のためのシステムおよび方法
US20160164886A1 (en) 2014-10-17 2016-06-09 Computer Sciences Corporation Systems and methods for threat analysis of computer data
WO2016071390A1 (en) 2014-11-07 2016-05-12 British Telecommunications Public Limited Company Method and system for secure communication with shared cloud services
US9590902B2 (en) 2014-11-10 2017-03-07 Juniper Networks, Inc. Signaling aliasing capability in data centers
KR102233645B1 (ko) 2014-11-11 2021-03-30 한국전자통신연구원 가상 네트워크 기반 분산 다중 도메인 라우팅 제어 시스템 및 라우팅 제어 방법
US9930013B2 (en) 2014-11-14 2018-03-27 Cisco Technology, Inc. Control of out-of-band multipath connections
US10135956B2 (en) 2014-11-20 2018-11-20 Akamai Technologies, Inc. Hardware-based packet forwarding for the transport layer
US9983936B2 (en) 2014-11-20 2018-05-29 Commvault Systems, Inc. Virtual machine change block tracking
US9602544B2 (en) 2014-12-05 2017-03-21 Viasat, Inc. Methods and apparatus for providing a secure overlay network between clouds
US9560018B2 (en) 2014-12-08 2017-01-31 Cisco Technology, Inc. Autonomic locator/identifier separation protocol for secure hybrid cloud extension
WO2016102004A1 (en) 2014-12-23 2016-06-30 Huawei Technologies Co., Ltd. Network extended tcp splicing
WO2016102001A1 (en) 2014-12-23 2016-06-30 Telecom Italia S.P.A. Method and system for dynamic rate adaptation of a stream of multimedia contents in a wireless communication network
US9747249B2 (en) * 2014-12-29 2017-08-29 Nicira, Inc. Methods and systems to achieve multi-tenancy in RDMA over converged Ethernet
US20160192403A1 (en) 2014-12-30 2016-06-30 Qualcomm Incorporated Mechanism to provide lte voice, internet and embms services over ethernet for connected home architecture
CN105812260B (zh) 2014-12-31 2019-03-19 华为技术有限公司 一种控制mac地址转发表发送的方法、装置及系统
US9787573B2 (en) 2014-12-31 2017-10-10 Juniper Networks, Inc. Fast convergence on link failure in multi-homed Ethernet virtual private networks
US20160197834A1 (en) 2015-01-02 2016-07-07 Siegfried Luft Architecture and method for traffic engineering between diverse cloud providers
US20160198003A1 (en) 2015-01-02 2016-07-07 Siegfried Luft Architecture and method for sharing dedicated public cloud connectivity
US20160197835A1 (en) 2015-01-02 2016-07-07 Siegfried Luft Architecture and method for virtualization of cloud networking components
EP3245762B1 (en) 2015-01-12 2021-12-29 Telefonaktiebolaget LM Ericsson (publ) Method and apparatus for router maintenance
US10061664B2 (en) 2015-01-15 2018-08-28 Cisco Technology, Inc. High availability and failover
US9722906B2 (en) 2015-01-23 2017-08-01 Cisco Technology, Inc. Information reporting for anomaly detection
US9819565B2 (en) 2015-01-26 2017-11-14 Ciena Corporation Dynamic policy engine for multi-layer network management
US20170373950A1 (en) 2015-01-27 2017-12-28 Nokia Solutions And Networks Oy Traffic flow monitoring
WO2016123314A1 (en) 2015-01-28 2016-08-04 Hewlett-Packard Development Company, L.P. Data loop determination in a software-defined network
CN107409079B (zh) 2015-01-28 2021-05-07 安博科技有限公司 用于全局虚拟网络的系统和方法
US10313428B2 (en) 2015-02-07 2019-06-04 Vmware, Inc. Multi-subnet participation for network gateway in a cloud environment
CN104639639B (zh) 2015-02-09 2018-04-27 华为技术有限公司 一种虚拟机部署位置的调整方法、装置及系统
US9800507B2 (en) 2015-02-10 2017-10-24 Verizon Patent And Licensing Inc. Application-based path computation
US20160255169A1 (en) 2015-02-27 2016-09-01 Futurewei Technologies, Inc. Method and system for smart object eviction for proxy cache
US11121967B2 (en) 2015-03-05 2021-09-14 Algoblu Holdings Limited Data routing across multiple autonomous network systems
US9628380B2 (en) 2015-03-06 2017-04-18 Telefonaktiebolaget L M Ericsson (Publ) Method and system for routing a network function chain
US9729451B2 (en) 2015-03-06 2017-08-08 Juniper Networks, Inc. Managing routing information in a hub-and-spokes network
US10491525B2 (en) 2015-03-10 2019-11-26 Huawei Technologies Co., Ltd. Traffic engineering feeder for packet switched networks
US10614056B2 (en) 2015-03-24 2020-04-07 NetSuite Inc. System and method for automated detection of incorrect data
CN107852604B (zh) 2015-04-07 2021-12-03 安博科技有限公司 用于提供全局虚拟网络(gvn)的系统
US10579406B2 (en) 2015-04-08 2020-03-03 Avago Technologies International Sales Pte. Limited Dynamic orchestration of overlay tunnels
US10135789B2 (en) 2015-04-13 2018-11-20 Nicira, Inc. Method and system of establishing a virtual private network in a cloud service for branch networking
US10498652B2 (en) 2015-04-13 2019-12-03 Nicira, Inc. Method and system of application-aware routing with crowdsourcing
US10425382B2 (en) 2015-04-13 2019-09-24 Nicira, Inc. Method and system of a cloud-based multipath routing protocol
US9848041B2 (en) 2015-05-01 2017-12-19 Amazon Technologies, Inc. Automatic scaling of resource instance groups within compute clusters
US10681058B2 (en) 2015-05-01 2020-06-09 Pcms Holdings, Inc. Systems, methods, and devices to defend against attacks
US9769065B2 (en) 2015-05-06 2017-09-19 Telefonaktiebolaget Lm Ericsson (Publ) Packet marking for L4-7 advanced counting and monitoring
US9954799B2 (en) 2015-05-14 2018-04-24 International Business Machines Corporation Adaptive service chain management
US10701037B2 (en) 2015-05-27 2020-06-30 Ping Identity Corporation Scalable proxy clusters
US10349240B2 (en) 2015-06-01 2019-07-09 Huawei Technologies Co., Ltd. Method and apparatus for dynamically controlling customer traffic in a network under demand-based charging
US9729348B2 (en) 2015-06-04 2017-08-08 Cisco Technology, Inc. Tunnel-in-tunnel source address correction
US10397277B2 (en) 2015-06-14 2019-08-27 Avocado Systems Inc. Dynamic data socket descriptor mirroring mechanism and use for security analytics
US9563514B2 (en) 2015-06-19 2017-02-07 Commvault Systems, Inc. Assignment of proxies for virtual-machine secondary copy operations including streaming backup jobs
CN108353029B (zh) 2015-06-25 2021-02-26 Nec实验室欧洲有限公司 用于管理计算网络中的数据业务的方法和系统
US20160380886A1 (en) 2015-06-25 2016-12-29 Ciena Corporation Distributed data center architecture
US10503532B2 (en) 2015-06-26 2019-12-10 Vmware, Inc. Creating a virtual machine clone of the host computing device and handling of virtual machine clone requests via an I/O filter
US10498664B2 (en) 2015-06-29 2019-12-03 Vmware, Inc. Hybrid cloud resource scheduling
US10136359B2 (en) 2015-06-30 2018-11-20 Qualcomm Incorporated Traffic flow migration in backhaul networks
US9787641B2 (en) 2015-06-30 2017-10-10 Nicira, Inc. Firewall rule management
EP3316880B1 (en) 2015-07-01 2021-09-01 The Research Foundation for The State University of New York Third generation taxoids and use thereof
US9462010B1 (en) 2015-07-07 2016-10-04 Accenture Global Services Limited Threat assessment level determination and remediation for a cloud-based multi-layer security architecture
US10797992B2 (en) 2015-07-07 2020-10-06 Cisco Technology, Inc. Intelligent wide area network (IWAN)
US10397283B2 (en) 2015-07-15 2019-08-27 Oracle International Corporation Using symmetric and asymmetric flow response paths from an autonomous system
US10050951B2 (en) 2015-07-20 2018-08-14 Cisco Technology, Inc. Secure access to virtual machines in heterogeneous cloud environments
CN106375231B (zh) 2015-07-22 2019-11-05 华为技术有限公司 一种流量切换方法、设备及系统
US10637889B2 (en) 2015-07-23 2020-04-28 Cisco Technology, Inc. Systems, methods, and devices for smart mapping and VPN policy enforcement
US10298489B2 (en) 2015-07-24 2019-05-21 International Business Machines Corporation Adding multi-tenant awareness to a network packet processing device on a software defined network (SDN)
US9942131B2 (en) 2015-07-29 2018-04-10 International Business Machines Corporation Multipathing using flow tunneling through bound overlay virtual machines
CN106412628B (zh) 2015-07-30 2020-07-24 华为技术有限公司 一种带宽调整方法及相关设备
US10567347B2 (en) 2015-07-31 2020-02-18 Nicira, Inc. Distributed tunneling for VPN
US9819581B2 (en) 2015-07-31 2017-11-14 Nicira, Inc. Configuring a hardware switch as an edge node for a logical router
US10966146B2 (en) * 2015-08-04 2021-03-30 Nec Corporation Communication system, communication apparatus, communication method, terminal, and non-transitory medium
US10630749B2 (en) 2015-08-14 2020-04-21 Cisco Technology, Inc. Timely delivery of real-time media problem when TCP must be used
US9763054B2 (en) 2015-08-19 2017-09-12 Locix Inc. Systems and methods for determining locations of wireless sensor nodes in a tree network architecture having mesh-based features
US10198724B2 (en) 2015-08-21 2019-02-05 Mastercard International Incorporated Payment networks and methods for facilitating data transfers within payment networks
CN106487534B (zh) 2015-08-24 2019-08-13 华为技术有限公司 网络控制策略的生成方法、装置及网络控制器
US10038650B2 (en) 2015-08-25 2018-07-31 Futurewei Technologies, Inc. System and method for tunnel stitching transport
US9906562B2 (en) 2015-08-28 2018-02-27 Nicira, Inc. Associating service tags with remote data message flows based on remote device management attributes
US10547540B2 (en) 2015-08-29 2020-01-28 Vmware, Inc. Routing optimization for inter-cloud connectivity
JP6440203B2 (ja) 2015-09-02 2018-12-19 Kddi株式会社 ネットワーク監視システム、ネットワーク監視方法およびプログラム
JP2017059991A (ja) 2015-09-16 2017-03-23 株式会社日立製作所 ネットワーク制御装置、ネットワーク制御方法、および、ネットワーク制御プログラム
US9733973B2 (en) 2015-09-16 2017-08-15 Cisco Technology, Inc. Automatically determining sensor location in a virtualized computing environment
US10178032B1 (en) 2015-09-23 2019-01-08 EMC IP Holding Company LLC Wide area network distribution, load balancing and failover for multiple internet protocol addresses
KR101998355B1 (ko) 2015-09-23 2019-07-09 구글 엘엘씨 분산형 소프트웨어 정의 네트워크 패킷 코어 시스템에서 이동성 관리를 위한 시스템들 및 방법들
WO2017053956A1 (en) 2015-09-25 2017-03-30 Ubiquiti Networks, Inc. Compact and integrated key controller apparatus for monitoring networks
US10229017B1 (en) 2015-10-01 2019-03-12 EMC IP Holding Company LLC Resetting fibre channel devices for failover in high availability backup systems
US10067780B2 (en) 2015-10-06 2018-09-04 Cisco Technology, Inc. Performance-based public cloud selection for a hybrid cloud environment
US10033607B2 (en) 2015-10-13 2018-07-24 Nxp Usa, Inc. Packet loss debug system and method
US10462136B2 (en) 2015-10-13 2019-10-29 Cisco Technology, Inc. Hybrid cloud security groups
US9838284B2 (en) 2015-10-14 2017-12-05 At&T Intellectual Property I, L.P. Dedicated software-defined networking network for performance monitoring of production software-defined networking network
US9672074B2 (en) 2015-10-19 2017-06-06 Vmware, Inc. Methods and systems to determine and improve cost efficiency of virtual machines
US10333897B2 (en) 2015-10-23 2019-06-25 Attala Systems Corporation Distributed firewalls and virtual network services using network packets with security tags
US9948503B2 (en) 2015-10-23 2018-04-17 Hughes Network Systems, Llc Gateway redundancy protocol for communications networks
CN106656801B (zh) 2015-10-28 2019-11-15 华为技术有限公司 业务流的转发路径的重定向方法、装置和业务流转发系统
US9747179B2 (en) 2015-10-29 2017-08-29 Netapp, Inc. Data management agent for selective storage re-caching
US11025514B2 (en) 2015-10-30 2021-06-01 Nicira, Inc. Automatic health check and performance monitoring for applications and protocols using deep packet inspection in a datacenter
US10027530B2 (en) 2015-10-30 2018-07-17 Telefonaktiebolaget Lm Ericsson (Publ) System and method for troubleshooting SDN networks using flow statistics
RU2692042C1 (ru) 2015-10-31 2019-06-19 Хуавей Текнолоджиз Ко., Лтд. Способ определения маршрута и соответствующие устройство и система
US9794370B2 (en) 2015-11-09 2017-10-17 Telefonaktiebolaget Lm Ericsson (Publ) Systems and methods for distributed network-aware service placement
US9916214B2 (en) 2015-11-17 2018-03-13 International Business Machines Corporation Preventing split-brain scenario in a high-availability cluster
US9825911B1 (en) 2015-11-18 2017-11-21 Amazon Technologies, Inc. Security policy check based on communication establishment handshake packet
KR20170058201A (ko) 2015-11-18 2017-05-26 한국전자통신연구원 다중 클라우드 환경에서의 가상 네트워크 제공 시스템 및 그 방법
US10904142B2 (en) 2015-11-19 2021-01-26 Adaptiv Networks Inc. System, apparatus and method for providing a virtual network edge and overlay with virtual control plane
CA3005641C (en) 2015-11-19 2021-10-12 Teloip Inc. System, apparatus and method for providing a virtual network edge and overlay with virtual control plane
US9602389B1 (en) 2015-11-21 2017-03-21 Naveen Maveli Method and system for defining logical channels and channel policies in an application acceleration environment
US10425302B2 (en) 2015-11-23 2019-09-24 International Business Machines Corporation Scalable end-to-end quality of service monitoring and diagnosis in software defined networks
US9843485B2 (en) 2015-11-30 2017-12-12 International Business Machines Coprporation Monitoring dynamic networks
US9992091B2 (en) 2015-11-30 2018-06-05 Cisco Technology, Inc. Performing network topology traces with minimal data collection
US10257019B2 (en) 2015-12-04 2019-04-09 Arista Networks, Inc. Link aggregation split-brain detection and recovery
US10148756B2 (en) 2015-12-09 2018-12-04 At&T Intellectual Property I, L.P. Latency virtualization in a transport network using a storage area network
US9426030B1 (en) 2015-12-11 2016-08-23 International Business Machines Coporation Automatically generating configuration images and deploying computer components in a computing environment that comprises a shared pool of configurable computing resources
US10117285B2 (en) 2015-12-16 2018-10-30 Verizon Patent And Licensing Inc. Cloud WAN overlay network
US9542219B1 (en) 2015-12-17 2017-01-10 International Business Machines Corporation Automatic analysis based scheduling of jobs to appropriate cloud resources
US20170180220A1 (en) 2015-12-18 2017-06-22 Intel Corporation Techniques to Generate Workload Performance Fingerprints for Cloud Infrastructure Elements
US10187289B1 (en) 2015-12-28 2019-01-22 Amazon Technologies, Inc. Route advertisement management using tags in directly connected networks
US11025477B2 (en) 2015-12-31 2021-06-01 Akamai Technologies, Inc. Overlay network ingress edge region selection
EP3229405B1 (en) 2015-12-31 2020-07-15 Huawei Technologies Co., Ltd. Software defined data center and scheduling and traffic-monitoring method for service cluster therein
WO2017117339A1 (en) 2015-12-31 2017-07-06 Affirmed Networks, Inc. Network redundancy and failure detection
WO2017119950A1 (en) 2016-01-08 2017-07-13 Inspeed Networks, Inc. Bidirectional data traffic control
US10103947B2 (en) 2016-01-08 2018-10-16 Universal Research Solutions, Llc Processing of portable device data
US9866637B2 (en) 2016-01-11 2018-01-09 Equinix, Inc. Distributed edge processing of internet of things device data in co-location facilities
US10439743B2 (en) 2016-01-12 2019-10-08 Telefonaktiebolaget Lm Ericsson (Publ) System, method and apparatus for managing co-channel interference
US20170214701A1 (en) 2016-01-24 2017-07-27 Syed Kamran Hasan Computer security based on artificial intelligence
US10367655B2 (en) 2016-01-25 2019-07-30 Alibaba Group Holding Limited Network system and method for connecting a private network with a virtual private network
US10320691B1 (en) 2016-01-30 2019-06-11 Innovium, Inc. Visibility packets
EP4145719A1 (en) 2016-02-03 2023-03-08 Mitsubishi Electric Corporation Communication system, base station and user equipment
EP3417577B1 (en) 2016-02-15 2020-01-15 Telefonaktiebolaget LM Ericsson (PUBL) Ospf extensions for flexible path stitching and selection for traffic transiting segment routing and mpls networks
US9842045B2 (en) 2016-02-19 2017-12-12 International Business Machines Corporation Failure recovery testing framework for microservice-based applications
US10200278B2 (en) 2016-03-02 2019-02-05 Arista Networks, Inc. Network management system control service for VXLAN on an MLAG domain
US10142163B2 (en) 2016-03-07 2018-11-27 Cisco Technology, Inc BFD over VxLAN on vPC uplinks
WO2017152396A1 (zh) 2016-03-09 2017-09-14 华为技术有限公司 流表处理方法及装置
CN107533668B (zh) 2016-03-11 2021-01-26 慧与发展有限责任合伙企业 用于计算神经网络的节点值的硬件加速器和方法
US10158727B1 (en) 2016-03-16 2018-12-18 Equinix, Inc. Service overlay model for a co-location facility
US9942787B1 (en) 2016-03-22 2018-04-10 Amazon Technologies, Inc. Virtual private network connection quality analysis
US10404727B2 (en) 2016-03-25 2019-09-03 Cisco Technology, Inc. Self organizing learning topologies
US10313241B2 (en) 2016-03-28 2019-06-04 Cox Communications, Inc. Systems and methods for routing internet packets between enterprise network sites
US10205683B2 (en) 2016-03-28 2019-02-12 Mellanox Technologies Tlv Ltd. Optimizing buffer allocation for network flow control
US9935955B2 (en) 2016-03-28 2018-04-03 Zscaler, Inc. Systems and methods for cloud based unified service discovery and secure availability
US10250466B2 (en) 2016-03-29 2019-04-02 Juniper Networks, Inc. Application signature generation and distribution
US10277505B2 (en) 2016-03-30 2019-04-30 Juniper Networks, Inc. Routing inter-AS LSPs with centralized controller
US20170289002A1 (en) 2016-03-31 2017-10-05 Mrittika Ganguli Technologies for deploying dynamic underlay networks in cloud computing infrastructures
US10187292B2 (en) 2016-04-15 2019-01-22 Microsoft Technology Licensing, Llc Data center topology having multiple classes of reliability
US10819630B1 (en) 2016-04-20 2020-10-27 Equinix, Inc. Layer three instances for a cloud-based services exchange
EP3449353B1 (en) 2016-04-26 2021-11-24 Umbra Technologies Ltd. Data beacon pulsers powered by information slingshot
CN105827623B (zh) 2016-04-26 2019-06-07 山石网科通信技术股份有限公司 数据中心系统
US10333849B2 (en) 2016-04-28 2019-06-25 Nicira, Inc. Automatic configuration of logical routers on edge nodes
US10484515B2 (en) 2016-04-29 2019-11-19 Nicira, Inc. Implementing logical metadata proxy servers in logical networks
US10841273B2 (en) 2016-04-29 2020-11-17 Nicira, Inc. Implementing logical DHCP servers in logical networks
CN107332812B (zh) 2016-04-29 2020-07-07 新华三技术有限公司 网络访问控制的实现方法及装置
US10305807B2 (en) 2016-05-03 2019-05-28 Citrix Systems, Inc. Systems and methods to choose an optimal path from multiple high latency links
WO2017193427A1 (zh) 2016-05-10 2017-11-16 华为技术有限公司 分组交换业务识别方法及终端
US20170339022A1 (en) 2016-05-17 2017-11-23 Brocade Communications Systems, Inc. Anomaly detection and prediction in a packet broker
US10129177B2 (en) 2016-05-23 2018-11-13 Cisco Technology, Inc. Inter-cloud broker for hybrid cloud networks
WO2017205099A1 (en) 2016-05-24 2017-11-30 Level 3 Communications, Llc Route selection system for a communication network and method of operating the same
US10200264B2 (en) 2016-05-31 2019-02-05 128 Technology, Inc. Link status monitoring based on packet loss detection
US10275325B2 (en) 2016-06-17 2019-04-30 Weixu Technology Co., Ltd. Method of site isolation protection, electronic device and system using the same method
KR20190020082A (ko) 2016-06-18 2019-02-27 클레버넷 인코퍼레이티드 다수의 채널을 사용하여 성능을 향상시키는 지능형 적응 전송 계층
US10404827B2 (en) 2016-06-22 2019-09-03 Cisco Technology, Inc. Client network information service
US10200343B2 (en) 2016-06-29 2019-02-05 Nicira, Inc. Implementing logical network security on a hardware switch
CN113395210B (zh) 2016-06-29 2022-09-16 华为技术有限公司 一种计算转发路径的方法及网络设备
US10404788B2 (en) 2016-06-30 2019-09-03 Alibaba Group Holding Limited Express route transmissions between virtual machines and cloud service computing devices
US9992154B2 (en) 2016-06-30 2018-06-05 Juniper Networks, Inc. Layer 3 convergence for EVPN link failure
US20180013636A1 (en) 2016-07-07 2018-01-11 Cisco Technology, Inc. System and method for scaling application containers in cloud environments
US9888278B2 (en) 2016-07-07 2018-02-06 Telefonaktiebolaget Lm Ericsson (Publ) Bandwidth and ABR video QoE management based on OTT video providers and devices
US10320664B2 (en) 2016-07-21 2019-06-11 Cisco Technology, Inc. Cloud overlay for operations administration and management
US10608928B2 (en) 2016-08-05 2020-03-31 Huawei Technologies Co., Ltd. Service-based traffic forwarding in virtual networks
US10972437B2 (en) 2016-08-08 2021-04-06 Talari Networks Incorporated Applications and integrated firewall design in an adaptive private network (APN)
JP6505172B2 (ja) 2016-08-25 2019-04-24 エヌエイチエヌ エンターテインメント コーポレーションNHN Entertainment Corporation 仮想ネットワーク環境で仮想スイッチを利用してロードバランシングを処理する方法およびシステム
US10397136B2 (en) 2016-08-27 2019-08-27 Nicira, Inc. Managed forwarding element executing in separate namespace of public cloud data compute node than workload application
US10225103B2 (en) 2016-08-29 2019-03-05 Vmware, Inc. Method and system for selecting tunnels to send network traffic through
US10681131B2 (en) 2016-08-29 2020-06-09 Vmware, Inc. Source network address translation detection and dynamic tunnel creation
US10454758B2 (en) 2016-08-31 2019-10-22 Nicira, Inc. Edge node cluster network redundancy and fast convergence using an underlay anycast VTEP IP
US10326830B1 (en) 2016-09-02 2019-06-18 Amazon Technologies, Inc. Multipath tunneling to a service offered at several datacenters
US10491531B2 (en) 2016-09-13 2019-11-26 Gogo Llc User directed bandwidth optimization
US10552267B2 (en) 2016-09-15 2020-02-04 International Business Machines Corporation Microcheckpointing with service processor
US10491689B2 (en) * 2016-09-16 2019-11-26 Oracle International Corporation Centralized monitoring of cloud operations
CN107864168B (zh) 2016-09-22 2021-05-18 华为技术有限公司 一种网络数据流分类的方法及系统
US10116593B1 (en) 2016-09-23 2018-10-30 Amazon Technologies, Inc. Transmission and storage of routing path information and routing topology information using a single routing protocol
JP6763267B2 (ja) 2016-09-29 2020-09-30 株式会社リコー 情報処理システム、情報処理装置、プログラム及びレポート作成方法
CN106230650A (zh) 2016-09-30 2016-12-14 赛特斯信息科技股份有限公司 SDN Overlay网络故障定位系统及方法
US10148564B2 (en) 2016-09-30 2018-12-04 Juniper Networks, Inc. Multiple paths computation for label switched paths
US10250498B1 (en) 2016-10-03 2019-04-02 Sprint Communications Company L.P. Session aggregator brokering of data stream communication
US9667619B1 (en) 2016-10-14 2017-05-30 Akamai Technologies, Inc. Systems and methods for utilizing client side authentication to select services available at a given port number
US10355944B2 (en) 2016-10-31 2019-07-16 Riverbed Technology, Inc. Minimally invasive monitoring of path quality
US10263882B2 (en) 2016-10-31 2019-04-16 Riverbed Technology, Inc. Dynamically influencing route re-distribution between an exterior gateway protocol and an interior gateway protocol
US10778722B2 (en) * 2016-11-08 2020-09-15 Massachusetts Institute Of Technology Dynamic flow system
US9906401B1 (en) 2016-11-22 2018-02-27 Gigamon Inc. Network visibility appliances for cloud computing architectures
US10749856B2 (en) 2016-11-23 2020-08-18 Ingram Micro, Inc. System and method for multi-tenant SSO with dynamic attribute retrieval
US10560431B1 (en) 2016-12-05 2020-02-11 Amazon Technologies, Inc. Virtual private gateway for encrypted communication over dedicated physical link
US10826905B2 (en) 2016-12-05 2020-11-03 Citrix Systems, Inc. Secure access to on-premises web services from multi-tenant cloud services
US10298619B2 (en) 2016-12-16 2019-05-21 Nicira, Inc. Application template generation and deep packet inspection approach for creation of micro-segmentation policy for network applications
US10868760B2 (en) 2016-12-19 2020-12-15 Vmware, Inc. System and method for managing public IP addresses for virtual data centers
US10237123B2 (en) 2016-12-21 2019-03-19 Nicira, Inc. Dynamic recovery from a split-brain failure in edge nodes
US10887173B2 (en) 2016-12-21 2021-01-05 Juniper Networks, Inc. Communicating state information in distributed operating systems
US10802857B2 (en) 2016-12-22 2020-10-13 Nicira, Inc. Collecting and processing contextual attributes on a host
US10263832B1 (en) 2016-12-29 2019-04-16 Juniper Networks, Inc. Physical interface to virtual interface fault propagation
CN108306831B (zh) 2017-01-13 2021-12-03 华为技术有限公司 选路方法及装置
US10440049B2 (en) 2017-01-19 2019-10-08 Paypal, Inc. Network traffic analysis for malware detection and performance reporting
US20180219766A1 (en) 2017-01-31 2018-08-02 Waltz Networks Method and Apparatus for Network Traffic Control Optimization
US11121962B2 (en) 2017-01-31 2021-09-14 Vmware, Inc. High performance software-defined core network
US20190280962A1 (en) 2017-01-31 2019-09-12 The Mode Group High performance software-defined core network
US11252079B2 (en) 2017-01-31 2022-02-15 Vmware, Inc. High performance software-defined core network
US20200106696A1 (en) 2017-01-31 2020-04-02 The Mode Group High performance software-defined core network
US20190280963A1 (en) 2017-01-31 2019-09-12 The Mode Group High performance software-defined core network
US20180219765A1 (en) 2017-01-31 2018-08-02 Waltz Networks Method and Apparatus for Network Traffic Control Optimization
US20190372889A1 (en) 2017-01-31 2019-12-05 The Mode Group High performance software-defined core network
US11706127B2 (en) 2017-01-31 2023-07-18 Vmware, Inc. High performance software-defined core network
US20200296026A1 (en) 2017-01-31 2020-09-17 The Mode Group High performance software-defined core network
US20200021515A1 (en) 2017-01-31 2020-01-16 The Mode Group High performance software-defined core network
US20200021514A1 (en) 2017-01-31 2020-01-16 The Mode Group High performance software-defined core network
US20190280964A1 (en) 2017-01-31 2019-09-12 The Mode Group High performance software-defined core network
US10992558B1 (en) 2017-11-06 2021-04-27 Vmware, Inc. Method and apparatus for distributed data network traffic optimization
US20190238449A1 (en) 2017-01-31 2019-08-01 The Mode Group High performance software-defined core network
US10992568B2 (en) 2017-01-31 2021-04-27 Vmware, Inc. High performance software-defined core network
US20200036624A1 (en) 2017-01-31 2020-01-30 The Mode Group High performance software-defined core network
US10574528B2 (en) 2017-02-11 2020-02-25 Nicira, Inc. Network multi-source inbound quality of service methods and systems
US10778528B2 (en) 2017-02-11 2020-09-15 Nicira, Inc. Method and system of connecting to a multipath hub in a cluster
US10506926B2 (en) 2017-02-18 2019-12-17 Arc Devices Limited Multi-vital sign detector in an electronic medical records system
US10382492B2 (en) 2017-03-02 2019-08-13 Draios Inc. Automated service-oriented performance management
US11032248B2 (en) 2017-03-07 2021-06-08 Nicira, Inc. Guest thin agent assisted host network encryption
US10002530B1 (en) 2017-03-08 2018-06-19 Fujitsu Limited Traffic signal control using multiple Q-learning categories
US10503427B2 (en) 2017-03-10 2019-12-10 Pure Storage, Inc. Synchronously replicating datasets and other managed objects to cloud-based storage systems
CN106656847B (zh) 2017-03-10 2019-05-24 重庆邮电大学 网络效用最大化的sdn负载均衡方法
WO2018165934A1 (en) 2017-03-16 2018-09-20 Intel Corporation Systems, methods and devices for user plane traffic forwarding
US10367712B2 (en) 2017-03-20 2019-07-30 Citrix Systems, Inc. Auto tuning of hybrid wan links by adaptive duplication of packets on alternate links
US9832128B1 (en) 2017-03-20 2017-11-28 Engine Media, Llc Dynamic advertisement routing
CN110036661B (zh) 2017-03-23 2020-03-27 Oppo广东移动通信有限公司 一种上行数据传输方法、终端、网络侧设备及系统
US10873794B2 (en) 2017-03-28 2020-12-22 Cisco Technology, Inc. Flowlet resolution for application performance monitoring and management
WO2018187094A1 (en) 2017-04-06 2018-10-11 Common Networks, Inc. Systems and methods for networking and wirelessly routing communications
CN108696434B (zh) 2017-04-11 2022-01-14 华为技术有限公司 一种转发数据报文的方法、设备和系统
US10333836B2 (en) 2017-04-13 2019-06-25 Cisco Technology, Inc. Convergence for EVPN multi-homed networks
CA3001394A1 (en) 2017-04-13 2018-10-13 Iot Cloud Technologies Inc. Method and system to sanitize, recover, analyze and wipe data stored on memory devices connected to a dedicated embedded microcomputer system with a network connection
US10498810B2 (en) 2017-05-04 2019-12-03 Amazon Technologies, Inc. Coordinating inter-region operations in provider network environments
US10142226B1 (en) 2017-05-24 2018-11-27 Amazon Technologies, Inc. Direct network connectivity with scalable forwarding and routing fleets
US10432523B2 (en) 2017-05-31 2019-10-01 Juniper Networks, Inc. Routing protocol signaling of multiple next hops and their relationship
US10476817B2 (en) 2017-05-31 2019-11-12 Juniper Networks, Inc. Transport LSP setup using selected fabric path between virtual nodes
US10382333B2 (en) 2017-05-31 2019-08-13 Juniper Networks, Inc. Fabric path context-based forwarding for virtual nodes
US10164873B1 (en) 2017-06-01 2018-12-25 Ciena Corporation All-or-none switchover to address split-brain problems in multi-chassis link aggregation groups
US10462042B2 (en) 2017-06-20 2019-10-29 Cisco Technology, Inc. Network path selection
US10523539B2 (en) 2017-06-22 2019-12-31 Nicira, Inc. Method and system of resiliency in cloud-delivered SD-WAN
US10616379B2 (en) 2017-06-23 2020-04-07 Futurewei Technologies, Inc. Seamless mobility and session continuity with TCP mobility option
US10742447B2 (en) 2017-07-10 2020-08-11 Level 3 Communications, Llc Connecting to multiple cloud instances in a telecommunications network
JP6904127B2 (ja) 2017-07-19 2021-07-14 富士通株式会社 中継ノード決定プログラム、中継ノード決定方法および並列処理装置
US10742750B2 (en) 2017-07-20 2020-08-11 Cisco Technology, Inc. Managing a distributed network of function execution environments
US10454812B2 (en) 2017-07-28 2019-10-22 Juniper Networks, Inc. Service level agreement based next-hop selection
US10523560B2 (en) 2017-07-28 2019-12-31 Juniper Networks, Inc. Service level agreement based next-hop selection
US10461993B2 (en) 2017-07-31 2019-10-29 Cisco Technology, Inc. Network hub site redundancy and failover
US20190046056A1 (en) * 2017-08-10 2019-02-14 VVVital Patent Holdings Limited Multi-Vital Sign Detector in an Electronic Medical Records System
US20190058709A1 (en) 2017-08-16 2019-02-21 Telefonaktiebolaget Lm Ericsson (Publ) Tenant management method and system in a cloud computing environment
CN109412964B (zh) 2017-08-18 2022-04-29 华为技术有限公司 报文控制方法及网络装置
US11695648B2 (en) 2017-08-23 2023-07-04 Nec Corporation Method for supporting service level agreement monitoring in a software defined network and corresponding software defined network
US10491516B2 (en) 2017-08-24 2019-11-26 Nicira, Inc. Packet communication between logical networks and public cloud service providers native networks using a single network interface and a single routing table
CN114584465A (zh) 2017-08-27 2022-06-03 Nicira股份有限公司 在公共云中执行在线服务
WO2019043435A1 (en) 2017-08-30 2019-03-07 Telefonaktiebolaget Lm Ericsson (Publ) PACKET TRACKING METHOD AND SYSTEM IN SOFTWARE-DEFINED NETWORKS
WO2019043827A1 (ja) 2017-08-30 2019-03-07 エヌ・ティ・ティ・コミュニケーションズ株式会社 ネットワーク制御装置、通信システム、ネットワーク制御方法、プログラム、及び記録媒体
US10616085B2 (en) 2017-08-31 2020-04-07 Zte Corporation Residence time measurement for optimizing network services
US10554538B2 (en) 2017-09-12 2020-02-04 Adara Networks, Inc. Dynamic link state routing protocol
US10511546B2 (en) 2017-09-29 2019-12-17 Juniper Networks, Inc. Connecting virtual nodes in a network device using abstract fabric interfaces
US10778466B2 (en) 2017-10-02 2020-09-15 Vmware, Inc. Processing data messages of a virtual network that are sent to and received from external service machines
US11089111B2 (en) 2017-10-02 2021-08-10 Vmware, Inc. Layer four optimization for a virtual network defined over public cloud
US10999100B2 (en) 2017-10-02 2021-05-04 Vmware, Inc. Identifying multiple nodes in a virtual network defined over a set of public clouds to connect to an external SAAS provider
US11115480B2 (en) 2017-10-02 2021-09-07 Vmware, Inc. Layer four optimization for a virtual network defined over public cloud
US10959098B2 (en) 2017-10-02 2021-03-23 Vmware, Inc. Dynamically specifying multiple public cloud edge nodes to connect to an external multi-computer node
US10999165B2 (en) 2017-10-02 2021-05-04 Vmware, Inc. Three tiers of SaaS providers for deploying compute and network infrastructure in the public cloud
US10608887B2 (en) 2017-10-06 2020-03-31 Nicira, Inc. Using packet tracing tool to automatically execute packet capture operations
EP3701687A4 (en) 2017-10-27 2021-02-17 Telefonaktiebolaget LM Ericsson (publ) OPTIMIZED DATA PATH ERROR RECOVERY WITH FOLLOW-UP ENGINE
US10805181B2 (en) 2017-10-29 2020-10-13 Nicira, Inc. Service operation chaining
US11223514B2 (en) 2017-11-09 2022-01-11 Nicira, Inc. Method and system of a dynamic high-availability mode based on current wide area network connectivity
US10778651B2 (en) 2017-11-15 2020-09-15 Nicira, Inc. Performing context-rich attribute-based encryption on a host
US10644978B2 (en) 2017-11-22 2020-05-05 Hughes Network Systems, Llc Latency increase estimated rate limiter adjustment
US10565464B2 (en) 2017-12-21 2020-02-18 At&T Intellectual Property I, L.P. Adaptive cloud offloading of mobile augmented reality
US20190207844A1 (en) 2018-01-03 2019-07-04 Hewlett Packard Enterprise Development Lp Determining routing decisions in a software-defined wide area network
US10797910B2 (en) 2018-01-26 2020-10-06 Nicira, Inc. Specifying and utilizing paths through a network
US10439927B2 (en) 2018-01-31 2019-10-08 International Business Machines Corporation Distributed storage path configuration
US10673781B2 (en) 2018-01-31 2020-06-02 Hewlett Packard Enterprise Development Lp Dedicated virtual local area network for peer-to-peer traffic transmitted between switches
WO2019152509A1 (en) 2018-01-31 2019-08-08 Assia Spe, Llc Systems and methods for broadband communication link performance monitoring
WO2019161206A1 (en) 2018-02-19 2019-08-22 Futurewei Technologies, Inc. Multi-cloud vpc routing and registration
US10932322B2 (en) 2018-02-23 2021-02-23 Cisco Technology, Inc. Policy mapping methods and apparatus for use in interconnecting software-defined wide area network (SD-WAN) fabrics with mobile networks for communications with UEs
US11792307B2 (en) 2018-03-28 2023-10-17 Apple Inc. Methods and apparatus for single entity buffer pool management
US20190319881A1 (en) 2018-04-13 2019-10-17 Microsoft Technology Licensing, Llc Traffic management based on past traffic arrival patterns
US11102079B2 (en) 2018-04-17 2021-08-24 Microsoft Technology Licensing, Llc Cross-regional virtual network peering
US10778464B2 (en) 2018-04-20 2020-09-15 Futurewei Technologies, Inc. NSH encapsulation for traffic steering establishing a tunnel between virtual extensible local area network (VxLAN) tunnel end points (VTEPS) using a NSH encapsulation header comprising a VxLAN header whose VNI field has been replaced by an NSH shim
US20200301764A1 (en) 2018-04-23 2020-09-24 SCRRD, Inc. Operating system on a computing system
US10715427B2 (en) 2018-04-27 2020-07-14 Hewlett Packard Enterprise Development Lp Determining routing decisions in a software-defined wide area network overlay
US20190334786A1 (en) 2018-04-30 2019-10-31 Hewlett Packard Enterprise Development Lp Predicting Workload Patterns in a Data Storage Network
US11388096B2 (en) 2018-05-04 2022-07-12 T-Mobile Usa, Inc. Performance driven software defined networking
US11438254B2 (en) 2018-06-13 2022-09-06 Telefonaktiebolaget Lm Ericsson (Publ) Apparatus and method to trace packets in a packet processing pipeline of a software defined networking switch
US10666497B2 (en) 2018-06-22 2020-05-26 Intel Corporation Localized service resiliency
US11184327B2 (en) 2018-07-05 2021-11-23 Vmware, Inc. Context aware middlebox services at datacenter edges
US10749773B2 (en) 2018-07-06 2020-08-18 International Business Machines Corporation Determining a location of optimal computing resources for workloads
WO2020012491A1 (en) 2018-07-10 2020-01-16 Telefonaktiebolaget L M Ericsson (Publ) Mechanism for hitless resynchronization during sdn controller upgrades between incompatible versions
WO2020018704A1 (en) 2018-07-18 2020-01-23 The Mode Group High performance software-defined core network
US10892958B2 (en) 2018-08-03 2021-01-12 Huawei Technologies Co., Ltd. Methods and functions of network performance monitoring and service assurance
US10999163B2 (en) 2018-08-14 2021-05-04 Juniper Networks, Inc. Multi-cloud virtual computing environment provisioning using a high-level topology description
US11233778B2 (en) 2018-08-15 2022-01-25 Juniper Networks, Inc. Secure forwarding of tenant workloads in virtual networks
US10992654B2 (en) 2018-08-17 2021-04-27 Cisco Technology, Inc. Secure WAN path selection at campus fabric edge
US11115327B2 (en) 2018-08-24 2021-09-07 Oracle International Corporation Methods, systems, and computer readable media for providing mobile device connectivity
US11271905B2 (en) 2018-09-21 2022-03-08 Google Llc Network architecture for cloud computing environments
US11182209B2 (en) 2018-09-21 2021-11-23 Google Llc Distributed job scheduling system
US10834004B2 (en) 2018-09-24 2020-11-10 Netsia, Inc. Path determination method and system for delay-optimized service function chaining
US10911374B1 (en) 2018-09-28 2021-02-02 Riverbed Technology, Inc. Software defined wide area network (SD WAN) enabled network fabric for containers
US11108664B2 (en) 2018-10-19 2021-08-31 Comcast Cable Communications, Llc Prioritized message routing
DE112018008119T5 (de) 2018-11-01 2021-08-12 Hewlett Packard Enterprise Development Lp Modifizieren einer Ressourcenzuweisung oder einer Strategie in Reaktion auf Steuerungsinformationen von einer virtuellen Netzwerkfunktion
US11102113B2 (en) 2018-11-08 2021-08-24 Sap Se Mapping of internet protocol addresses in a multi-cloud computing environment
US10708144B2 (en) 2018-11-14 2020-07-07 Juniper Networks, Inc. Predicting application quality of experience metrics using adaptive machine learned probes
EP3878160A1 (en) 2018-11-15 2021-09-15 VMware, Inc. Layer four optimization in a virtual network defined over public cloud
US10795817B2 (en) 2018-11-16 2020-10-06 Western Digital Technologies, Inc. Cache coherence for file system interfaces
US10893004B2 (en) 2018-11-20 2021-01-12 Amazon Technologies, Inc. Configurable detection of network traffic anomalies at scalable virtual traffic hubs
US10715402B2 (en) 2018-11-27 2020-07-14 Servicenow, Inc. Systems and methods for enhanced monitoring of a distributed computing system
US11233822B2 (en) 2018-11-30 2022-01-25 Cisco Technology, Inc. Dynamic honeypots
US11201854B2 (en) 2018-11-30 2021-12-14 Cisco Technology, Inc. Dynamic intent-based firewall
US10999197B2 (en) 2018-11-30 2021-05-04 Cisco Technology, Inc. End-to-end identity-aware routing across multiple administrative domains
US10951529B2 (en) 2018-12-13 2021-03-16 Fortinet, Inc. Dynamic service-based load balancing in a software-defined wide area network (SD-WAN)
US11115426B1 (en) 2018-12-13 2021-09-07 Cisco Technology, Inc. Distributed packet capture for network anomaly detection
US11095558B2 (en) 2018-12-28 2021-08-17 Alibaba Group Holding Limited ASIC for routing a packet
US11032175B2 (en) 2018-12-31 2021-06-08 Hughes Network Systems Packet loss isolation test
US11099873B2 (en) 2019-01-04 2021-08-24 Microsoft Technology Licensing, Llc Network configuration updates for virtual machine
US10892989B2 (en) 2019-01-18 2021-01-12 Vmware, Inc. Tunnel-based service insertion in public cloud environments
US11012299B2 (en) 2019-01-18 2021-05-18 Cisco Technology, Inc. Seamless multi-cloud routing and policy interconnectivity
US11552874B1 (en) 2019-01-18 2023-01-10 Keysight Technologies, Inc. Methods, systems and computer readable media for proactive network testing
US20200244721A1 (en) 2019-01-30 2020-07-30 Hewlett Packard Enterprise Development Lp Deploying a workload
US11336482B2 (en) 2019-01-31 2022-05-17 Juniper Networks, Inc. Policy-driven on-demand tunnel creation/deletion based on traffic information in a wide area network (WAN)
US11271795B2 (en) 2019-02-08 2022-03-08 Ciena Corporation Systems and methods for proactive network operations
US10911517B2 (en) 2019-02-17 2021-02-02 Cisco Technology, Inc. Determining end times for single page applications
US11165828B2 (en) 2019-02-28 2021-11-02 Cisco Technology, Inc. Systems and methods for on-demand flow-based policy enforcement in multi-cloud environments
US11134126B2 (en) 2019-03-06 2021-09-28 Hewlett Packard Enterprise Development Lp Adaptive routing of branch traffic in software-defined wide area network (SDWAN) deployments
US10855575B2 (en) 2019-03-06 2020-12-01 Hewlett Packard Enterprise Development Lp Adaptive traffic routing in a software-defined wide area network
US11005729B2 (en) 2019-03-14 2021-05-11 Juniper Networks, Inc. Satisfying service level agreement metrics for unknown applications
US11423254B2 (en) 2019-03-28 2022-08-23 Intel Corporation Technologies for distributing iterative computations in heterogeneous computing environments
US10972386B2 (en) 2019-03-29 2021-04-06 Juniper Networks, Inc. Scalable multi-tenant underlay network supporting multi-tenant overlay network
US20200314614A1 (en) 2019-03-29 2020-10-01 Apple Inc. Systems and methods for autonomous vehicle communication
US11201800B2 (en) 2019-04-03 2021-12-14 Cisco Technology, Inc. On-path dynamic policy enforcement and endpoint-aware policy enforcement for endpoints
US11128492B2 (en) 2019-04-16 2021-09-21 Hewlett Packard Enterprise Development Lp Automated gateway selection in SD-WAN
DE112019007229T5 (de) 2019-04-18 2022-01-13 Hewlett Packard Enterprise Development Lp Heuristische sd-wan-routen-neukonfiguration
US11128490B2 (en) 2019-04-26 2021-09-21 Microsoft Technology Licensing, Llc Enabling access to dedicated resources in a virtual network using top of rack switches
US11212223B2 (en) 2019-04-27 2021-12-28 Hewlett Packard Enterprise Development Lp Uplink selection in a SD-WAN
US11303727B2 (en) 2019-04-30 2022-04-12 Jio Platforms Limited Method and system for routing user data traffic from an edge device to a network entity
US11050644B2 (en) 2019-04-30 2021-06-29 Hewlett Packard Enterprise Development Lp Dynamic device anchoring to SD-WAN cluster
US11025522B2 (en) 2019-05-04 2021-06-01 Juniper Networks, Inc. Path monitoring system (PMS) controller or ingress node based multiprotocal label switching (MPLS) ping and traceroute in inter- autonomous system (AS) segment routing (SR) networks
US11093287B2 (en) 2019-05-24 2021-08-17 Intel Corporation Data management for edge architectures
US10693739B1 (en) 2019-05-29 2020-06-23 Accenture Global Solutions Limited Network design platform
US10979316B2 (en) 2019-05-31 2021-04-13 Juniper Networks, Inc. Dynamic application SLA metric generation, distribution, and intent-based SD-WAN link selection
US10826775B1 (en) 2019-06-19 2020-11-03 Cisco Technology, Inc. Policy plane integration across multiple domains
US11258628B2 (en) 2019-06-24 2022-02-22 Cisco Technology, Inc. Plug and play at sites using TLOC-extension
US11526434B1 (en) 2019-06-25 2022-12-13 Amazon Technologies, Inc. Network-level garbage collection in an on-demand code execution system
US20200412483A1 (en) 2019-06-25 2020-12-31 Cisco Technology, Inc. Xor forward error correction for isolated and burst losses over a software-defined-wide area network
US11071005B2 (en) 2019-06-27 2021-07-20 Cisco Technology, Inc. Congestion avoidance with adaptive QoS policy enforcement from SD-WAN controller in SD-WAN networks
US11032107B2 (en) 2019-06-28 2021-06-08 Juniper Networks, Inc. GRE tunneling with reduced packet encryption at intermediate routers
US10498665B1 (en) 2019-07-15 2019-12-03 Capital One Services, Llc Method for managing state of cloud-based systems
US11184273B2 (en) 2019-07-24 2021-11-23 Vmware, Inc. Machine learning-based path priority determination for routing data in software-defined networks
JP7388032B2 (ja) 2019-07-29 2023-11-29 富士フイルムビジネスイノベーション株式会社 情報処理システム及び情報処理システム用制御プログラム
US11374791B2 (en) 2019-07-31 2022-06-28 Hewlett Packard Enterprise Development Lp Orchestration of subnetwork extensions across a wide area network
US11329950B2 (en) 2019-08-02 2022-05-10 Cisco Technology, Inc. Wide area network edge device connectivity for high availability and extensibility
US20220191719A1 (en) 2019-08-09 2022-06-16 Hewlett-Packard Development Company, L.P. Network connectivity performance determination on computing devices
US10691728B1 (en) 2019-08-13 2020-06-23 Datadog, Inc. Transforming a data stream into structured data
US11252105B2 (en) 2019-08-27 2022-02-15 Vmware, Inc. Identifying different SaaS optimal egress nodes for virtual networks of different entities
US10938717B1 (en) 2019-09-04 2021-03-02 Cisco Technology, Inc. Policy plane integration across multiple domains
US11169816B2 (en) 2019-09-05 2021-11-09 Facebook Technologies, Llc System and method for key value store
US20210092062A1 (en) 2019-09-20 2021-03-25 Citrix Systems, Inc. Quality of experience (qoe) enhancement device and related techniques
US11082304B2 (en) 2019-09-27 2021-08-03 Oracle International Corporation Methods, systems, and computer readable media for providing a multi-tenant software-defined wide area network (SD-WAN) node
US11115347B2 (en) 2019-10-14 2021-09-07 Hewlett Packard Enterprise Development Lp Dynamic monitoring and migration of applications
US11153119B2 (en) 2019-10-15 2021-10-19 Cisco Technology, Inc. Dynamic discovery of peer network devices across a wide area network
US11509534B2 (en) 2019-10-23 2022-11-22 Juniper Networks, Inc. Collection of error packet information for network policy enforcement
US20210126854A1 (en) 2019-10-23 2021-04-29 Arista Networks, Inc. Tcp performance model based in-band network telemetry
US11044190B2 (en) 2019-10-28 2021-06-22 Vmware, Inc. Managing forwarding elements at edge nodes connected to a virtual network
US11411857B2 (en) 2019-11-25 2022-08-09 Cisco Technology, Inc. Multicast performance routing and policy control in software defined wide area networks
US11483796B2 (en) 2019-11-25 2022-10-25 Cisco Technology, Inc. Systems and methods for dynamically generating a mobile software-defined wide area network gateway location for remote users
US11316869B2 (en) 2019-12-10 2022-04-26 Cisco Technology, Inc. Systems and methods for providing attestation of data integrity
US11489783B2 (en) 2019-12-12 2022-11-01 Vmware, Inc. Performing deep packet inspection in a software defined wide area network
CN114342330A (zh) 2019-12-12 2022-04-12 Vm维尔股份有限公司 收集和分析关于与dpi参数关联的流的数据
US11394640B2 (en) 2019-12-12 2022-07-19 Vmware, Inc. Collecting and analyzing data regarding flows associated with DPI parameters
FR3105681B1 (fr) 2019-12-20 2021-12-03 Sagemcom Broadband Sas Procédé et dispositif de détermination d’une topologie d’un réseau de points d’accès sans fils
CN111198764B (zh) 2019-12-31 2024-04-26 江苏省未来网络创新研究院 一种基于sdn的负载均衡实现系统及方法
US11398969B2 (en) 2020-01-22 2022-07-26 Cisco Technology, Inc. Network conversation testing of flow level operations
US11606712B2 (en) 2020-01-24 2023-03-14 Vmware, Inc. Dynamically assigning service classes for a QOS aware network link
US11665095B2 (en) 2020-02-21 2023-05-30 Cisco Technology, Inc. Fine-grained SD-WAN optimization services for cloud-native applications
US11556349B2 (en) 2020-03-04 2023-01-17 International Business Machines Corporation Booting a secondary operating system kernel with reclaimed primary kernel memory
US11316773B2 (en) 2020-04-06 2022-04-26 Vmware, Inc. Configuring edge device with multiple routing tables
US20210314385A1 (en) 2020-04-07 2021-10-07 Cisco Technology, Inc. Integration of hyper converged infrastructure management with a software defined network control
US11108851B1 (en) 2020-04-10 2021-08-31 Hewlett Packard Enterprise Development Lp Dynamic application routing in a software defined wide area network
CN113812126B (zh) 2020-04-14 2023-10-03 华为云计算技术有限公司 报文传输方法、装置及系统,可读存储介质
US20200241927A1 (en) 2020-04-15 2020-07-30 Intel Corporation Storage transactions with predictable latency
US20230336428A1 (en) 2020-04-15 2023-10-19 Alkira, Inc. Application-agnostic tenant onboarding onto a multi-tenant system
US11750512B2 (en) 2020-04-22 2023-09-05 Hewlett Packard Enterprise Development Lp Identifying a dynamic network parameter probe interval in an SD-WAN
US11394606B2 (en) 2020-05-26 2022-07-19 Cisco Technology, Inc. Auto-provisioning of SD-WAN hubs and spokes
US20200322287A1 (en) 2020-06-18 2020-10-08 Intel Corporation Switch-managed resource allocation and software execution
US11297513B2 (en) 2020-06-23 2022-04-05 T-Mobile Usa, Inc. System for administering test cases from a mobile device for a telecommunications network
US11398948B2 (en) 2020-06-29 2022-07-26 Cisco Technology, Inc. Generation and deployment of inherited network topology models
US11245641B2 (en) 2020-07-02 2022-02-08 Vmware, Inc. Methods and apparatus for application aware hub clustering techniques for a hyper scale SD-WAN
WO2022020479A1 (en) 2020-07-21 2022-01-27 Google Llc Network anomaly detection
US11709710B2 (en) 2020-07-30 2023-07-25 Vmware, Inc. Memory allocator for I/O operations
US11240153B1 (en) 2020-07-31 2022-02-01 Cisco Technology, Inc. Scoring policies for predictive routing suggestions
US11516104B2 (en) 2020-08-10 2022-11-29 Cisco Technology, Inc. Systems and methods for determining a network path trace
US11588711B2 (en) 2020-08-14 2023-02-21 Cisco Technology, Inc. Intent-driven cloud branches
US11337227B2 (en) 2020-08-24 2022-05-17 Amazon Technologies, Inc. Distributed network connectivity monitoring of provider network edge location resources from cellular networks
US11356319B2 (en) 2020-09-11 2022-06-07 Arista Networks, Inc. Distinguishing network vs server issues when diagnosing application performance problems
CN116325900A (zh) 2020-10-22 2023-06-23 华为技术有限公司 一种通信方法及装置
US20220131807A1 (en) 2020-10-28 2022-04-28 Vmware, Inc. Identification of faulty sd-wan segment
US11095612B1 (en) 2020-10-30 2021-08-17 Palo Alto Networks, Inc. Flow metadata exchanges between network and security functions for a security service
CN115918139A (zh) 2020-11-16 2023-04-04 瞻博网络公司 网络切片的主动保证
US11575591B2 (en) 2020-11-17 2023-02-07 Vmware, Inc. Autonomous distributed forwarding plane traceability based anomaly detection in application traffic for hyper-scale SD-WAN
US11575600B2 (en) 2020-11-24 2023-02-07 Vmware, Inc. Tunnel-less SD-WAN
US11522780B1 (en) 2020-12-10 2022-12-06 Amazon Technologies, Inc. Monitoring networks by detection of noisy agents
JP2024502944A (ja) 2020-12-21 2024-01-24 ジェネシス クラウド サービシーズ インコーポレイテッド 適用される異常検出及びコンタクトセンターコンピューティング環境に関連するシステム及び方法
US11929903B2 (en) 2020-12-29 2024-03-12 VMware LLC Emulating packet flows to assess network links for SD-WAN
US11765057B2 (en) 2020-12-30 2023-09-19 Oracle International Corporation Systems and methods for performing end-to-end link-layer and IP-layer health checks between a host machine and a network virtualization device
US11381474B1 (en) 2020-12-31 2022-07-05 Juniper Networks, Inc. Wan link selection for SD-WAN services
US11575651B2 (en) 2020-12-31 2023-02-07 Palo Alto Networks, Inc. Dynamically scalable application firewall deployment for cloud native applications
US11595231B2 (en) 2021-01-07 2023-02-28 Hewlett Packard Enterprise Development Lp Metric based dynamic virtual private network (VPN) tunnel between branch gateway devices
US20220231949A1 (en) 2021-01-18 2022-07-21 Vmware, Inc. Network-aware load balancing
US11792127B2 (en) 2021-01-18 2023-10-17 Vmware, Inc. Network-aware load balancing
EP4189937A1 (en) 2021-01-18 2023-06-07 VMware, Inc. Network-aware load balancing
CN116868551A (zh) 2021-01-21 2023-10-10 Vm维尔股份有限公司 保持端到端性能的跨网段主动优化
US11979325B2 (en) 2021-01-28 2024-05-07 VMware LLC Dynamic SD-WAN hub cluster scaling with machine learning
US11797510B2 (en) 2021-04-20 2023-10-24 Netapp, Inc. Key-value store and file system integration
US20220353190A1 (en) 2021-04-29 2022-11-03 Vmware, Inc. Methods for micro-segmentation in sd-wan for virtual networks
WO2022231668A1 (en) 2021-04-29 2022-11-03 Vmware, Inc. Methods for micro-segmentation in sd-wan for virtual networks
US11582144B2 (en) 2021-05-03 2023-02-14 Vmware, Inc. Routing mesh to provide alternate routes through SD-WAN edge forwarding nodes based on degraded operational states of SD-WAN hubs
US20220353152A1 (en) 2021-05-03 2022-11-03 Vmware, Inc. Methods to support dynamic transit paths through hub clustering across branches in sd-wan
EP4282140A1 (en) 2021-05-03 2023-11-29 VMware, Inc. On demand routing mesh for routing packets through sd-wan edge forwarding nodes in an sd-wan
US11729065B2 (en) 2021-05-06 2023-08-15 Vmware, Inc. Methods for application defined virtual network service among multiple transport in SD-WAN
US11489720B1 (en) 2021-06-18 2022-11-01 Vmware, Inc. Method and apparatus to evaluate resource elements and public clouds for deploying tenant deployable elements based on harvested performance metrics
US20220407790A1 (en) 2021-06-18 2022-12-22 Vmware, Inc. Method and apparatus for deploying tenant deployable elements across public clouds based on harvested performance metrics
US20220407774A1 (en) 2021-06-18 2022-12-22 Vmware, Inc. Method and apparatus for modifying the deployment of resource elements in public clouds based on harvested performance metrics
WO2022265681A1 (en) 2021-06-18 2022-12-22 Vmware, Inc. Method and apparatus for deploying tenant deployable elements across public clouds based on harvested performance metrics
US20220407773A1 (en) 2021-06-18 2022-12-22 Vmware, Inc. Method and apparatus for deploying tenant deployable elements across public clouds based on harvested performance metrics of sub-types of resource elements in the public clouds
US20220407820A1 (en) 2021-06-18 2022-12-22 Vmware, Inc. Method and apparatus for deploying tenant deployable elements across public clouds based on harvested performance metrics of types of resource elements in the public clouds
US20220407915A1 (en) 2021-06-18 2022-12-22 Vmware, Inc. Method and apparatus for deploying tenant deployable elements across public clouds based on harvested performance metrics
US20230028872A1 (en) 2021-07-22 2023-01-26 Vmware, Inc. Methods for smart bandwidth aggregation based dynamic overlay selection among preferred exits in sd-wan
WO2023009159A1 (en) 2021-07-24 2023-02-02 Vmware, Inc. Network management services in a point-of-presence
US11375005B1 (en) 2021-07-24 2022-06-28 Vmware, Inc. High availability solutions for a secure access service edge application
US20230025586A1 (en) 2021-07-24 2023-01-26 Vmware, Inc. Network management services in a secure access service edge application
US20230026865A1 (en) 2021-07-24 2023-01-26 Vmware, Inc. Network management services in a virtual network
US20230026330A1 (en) 2021-07-24 2023-01-26 Vmware, Inc. Network management services in a point-of-presence
US11943146B2 (en) 2021-10-01 2024-03-26 VMware LLC Traffic prioritization in SD-WAN
US20230216804A1 (en) 2022-01-04 2023-07-06 Vmware, Inc. Efficient mechanism for the transmission of multipath duplicate packets
US20230216768A1 (en) 2022-01-04 2023-07-06 Vmware, Inc. Enhanced path selection using online detection of paths overlaps
US20230216801A1 (en) 2022-01-04 2023-07-06 Vmware, Inc. Explicit congestion notification in a virtual environment

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014200010A (ja) 2013-03-29 2014-10-23 株式会社日立ソリューションズ データ交換システム、及び仮想プライベートクラウド間でデータ交換を可能とする環境を設定する方法
JP2017524290A (ja) 2015-04-17 2017-08-24 エクイニクス,インコーポレイティド クラウドベースのサービス交換

Also Published As

Publication number Publication date
BR112020006724A2 (pt) 2020-10-06
EP3662619B1 (en) 2022-05-04
JP2020536403A (ja) 2020-12-10
JP6991646B2 (ja) 2022-01-12
JP2022043118A (ja) 2022-03-15
AU2023204664A1 (en) 2023-08-03
CA3074501A1 (en) 2019-04-11
EP4106280A1 (en) 2022-12-21
RU2020118757A (ru) 2021-11-01
US20190104063A1 (en) 2019-04-04
US11855805B2 (en) 2023-12-26
US10778466B2 (en) 2020-09-15
US10805114B2 (en) 2020-10-13
AU2018345729B2 (en) 2021-06-03
US10686625B2 (en) 2020-06-16
WO2019070611A1 (en) 2019-04-11
CN111095876A (zh) 2020-05-01
US10841131B2 (en) 2020-11-17
US20190103992A1 (en) 2019-04-04
US20190104051A1 (en) 2019-04-04
US20190104064A1 (en) 2019-04-04
US20190104053A1 (en) 2019-04-04
KR20230074626A (ko) 2023-05-30
US20190104052A1 (en) 2019-04-04
US20190103990A1 (en) 2019-04-04
CN115051869A (zh) 2022-09-13
KR102368063B1 (ko) 2022-03-02
ES2920281T3 (es) 2022-08-02
AU2018345729A1 (en) 2020-03-12
US20190104109A1 (en) 2019-04-04
CN111095876B (zh) 2022-07-05
KR20220028172A (ko) 2022-03-08
AU2021221592A1 (en) 2021-09-16
US20190104049A1 (en) 2019-04-04
US10608844B2 (en) 2020-03-31
US11005684B2 (en) 2021-05-11
US20190104050A1 (en) 2019-04-04
US11102032B2 (en) 2021-08-24
JP2023109797A (ja) 2023-08-08
US20240039760A1 (en) 2024-02-01
AU2021221592B2 (en) 2023-04-13
US11516049B2 (en) 2022-11-29
CA3074501C (en) 2023-08-01
EP3662619A1 (en) 2020-06-10
KR102535288B1 (ko) 2023-05-30
US20190103991A1 (en) 2019-04-04
RU2766313C2 (ru) 2022-03-15
US10958479B2 (en) 2021-03-23
CA3200752A1 (en) 2019-04-11
KR20200064102A (ko) 2020-06-05
US10594516B2 (en) 2020-03-17
US20190104111A1 (en) 2019-04-04
RU2020118757A3 (ja) 2021-11-01
US10666460B2 (en) 2020-05-26

Similar Documents

Publication Publication Date Title
JP7275237B2 (ja) 複数のパブリッククラウドに跨る仮想ネットワークの生成
US11894949B2 (en) Identifying multiple nodes in a virtual network defined over a set of public clouds to connect to an external SaaS provider
JP7417812B2 (ja) 仮想ネットワークを実施するためのリコメンデーションの提供
US10999165B2 (en) Three tiers of SaaS providers for deploying compute and network infrastructure in the public cloud
US10959098B2 (en) Dynamically specifying multiple public cloud edge nodes to connect to an external multi-computer node

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211228

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230308

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230407

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230502

R150 Certificate of patent or registration of utility model

Ref document number: 7275237

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350