JP2020537854A - 通信ルーティングシステム - Google Patents

通信ルーティングシステム Download PDF

Info

Publication number
JP2020537854A
JP2020537854A JP2020521976A JP2020521976A JP2020537854A JP 2020537854 A JP2020537854 A JP 2020537854A JP 2020521976 A JP2020521976 A JP 2020521976A JP 2020521976 A JP2020521976 A JP 2020521976A JP 2020537854 A JP2020537854 A JP 2020537854A
Authority
JP
Japan
Prior art keywords
routing system
fabric
line card
routing
distributed routing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020521976A
Other languages
English (en)
Other versions
JP7389742B2 (ja
Inventor
サンドラー,エフゲニー
ジルバーマン,アレクサンダー
クライデン,アミール
ゾルコバー,ガル
Original Assignee
ドライブネッツ リミテッド
ドライブネッツ リミテッド
エーティーアンドティー サービシズ インコーポレイテッド
エーティーアンドティー サービシズ インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ドライブネッツ リミテッド, ドライブネッツ リミテッド, エーティーアンドティー サービシズ インコーポレイテッド, エーティーアンドティー サービシズ インコーポレイテッド filed Critical ドライブネッツ リミテッド
Publication of JP2020537854A publication Critical patent/JP2020537854A/ja
Application granted granted Critical
Publication of JP7389742B2 publication Critical patent/JP7389742B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/25Routing or path finding in a switch fabric
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/145Network analysis or design involving simulating, designing, planning or modelling of a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4633Interconnection of networks using encapsulation techniques, e.g. tunneling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4641Virtual LANs, VLANs, e.g. virtual private networks [VPN]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/40Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks using virtualisation of network functions or resources, e.g. SDN or NFV entities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/28Routing or path finding of packets in data switching networks using route fault recovery
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/54Organization of routing tables
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/58Association of routers
    • H04L45/586Association of routers of virtual routers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/25Routing or path finding in a switch fabric
    • H04L49/253Routing or path finding in a switch fabric using establishment or release of connections between ports
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/24Multipath

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

通信ネットワーク内で使用される分散ルーティングシステムが記載されている。前記分散ルーティングシステムが、ルーティングエンジン及び/又は管理エンジンとして構成される少なくとも1つのプロセッサと、到着する帯域外トラフィックを制御するように構成された少なくとも1つのスイッチ・ファブリック・コントローラと、各々が、前記分散ルーティングシステムの転送プレーン内でのスイッチング及び/又はルーティング能力を提供する為の少なくとも1つのラインカード及び/又は少なくとも1つのファブリック・スイッチング・ユニットを含む、スタンドアロン・ハードウェアである複数のホワイトボックスと、を有し、少なくとも1つの制御スイッチが、前記複数のホワイトボックスを前記少なくとも1つのプロセッサに接続することが可能であり、それにより、前記少なくとも1つのプロセッサが、前記複数のホワイトボックスへの/からのトラフィックのルーティングを管理することを可能にする。【選択図】図1

Description

本開示は、包括的には、通信システムの分野に関する。特に、本開示は、ソフトウェア定義ネットワーク(software-defined networking)(SDN)を実行するシステムに関する。
今日のコンピュータネットワークにおいて搬送されているデータトラフィックの容量は成長し続けており、そのようなコンピュータネットワーク間でデータパケットを十分に転送することができるビッグルータへの需要も伸びている。ルータは、通常、最終宛先ノードにデータパケットが到達するまで、ネットワークに沿って1つのルータから他のルータへ各データパケットを転送することにより、トラフィック指向機能を実行する。
ルータは、通常、異なるネットワークからの2つ以上のデータラインに接続される。これらのデータラインの1つに沿ってデータパケットが到着すると、最終目的地を決定する為に、データパケット内に埋め込まれているネットワークアドレス情報を読出する。その後、ルーティングテーブル内に含まれている情報を使用して、又は、事前に定義されたルーティングポリシーに従うことにより、ルータは、データパケットを次のネットワークノードに向かって転送する。
また、ルータは、通常、複数のプレーン、即ち制御プレーン及び転送プレーンと呼ばれる動作の2つのステージを有する。ルータは、特定の目的地に向かってデータパケットを転送する為にどのルートを使用するべきか、そして、どの物理インタフェース接続を介して実行するべきか、をリストアップしているルーティングテーブルを維持する。このことは、内部に事前構成されたスタティックルートを使用することにより、又は、ダイナミック・ルーティング・プロトコルを実行している間にルートを学習することにより、達成される。スタティックルート及びダイナミックルートは、ルータのルーティング情報ベース(Routing Information Base)(RIB)に記憶されている。その後、制御プレーンロジックが、RIBから必須ではない指令を取り除き、転送プレーンにより使用される転送情報ベース(Forwarding Information Base)(FIB)を構築する。
転送プレーンは、ルータが入出力インタフェース接続間でデータパケットを転送することを可能にする為に使用される。転送プレーンは、データパケットのヘッダに埋め込まれた情報を使用することにより、そして、ルーティングテーブル制御プレーン内に記録されているデータを使用することにより、データパケットを正しいネットワークに搬送することを可能にする。
異なるサイズのルータを設置することができる。最もパワフルなルータは、通常、インターネット・サービス・プロバイダ(ISP)、大学及び研究施設に設置される。また、イントラネット・データ・トラフィックへの増え続けている要求に対処する為に、大企業もパワフルなルータを使用することがある。
通常、ルータは、全てのルータ・ハードウェア・コンポーネントを収容する剛性シート金属構造のシャーシを有する。従来、ルータは、ラインカードを保持する為のラインカードシャーシ、ファブリック・スイッチング・ユニット及びルーティングプロセッサを有し、ルーティングプロセッサが、ラインカード及びラインカード間を搬送されるトラフィックを管理する。ラインカードは、物理インタフェースカード及びモジュラーサービスカードから成る。異なるラインカード間に伸びている光ファイバ又はツイストペアケーブルを使用することにより、物理的接続性が得られる。ルーティングプロセッサによりルーティング決定がなされ、ルーティングプロセッサから受信した入力に基づいて、スイッチングファブリックがデータパケットのルーティングを処理する。
また、近年、ホワイトボックスの使用が増加している。ホワイトボックスは、転送プレーン内でスイッチング及び/又はルーティングする為のオープン又は業界標準対応ハードウェアである、スタンドアロン・コモディティである。ホワイトボックスは、通信ネットワークの基本的なハードウェア要素をユーザに提供する。しかしながら、そのようなホワイトボックスが多数使用されると、従来の解決法においては、このタスクを実行する為にパワフルなルータを使用する必要があり、そして、これらのパワフルなルータと共に上述のように多数のホワイトボックスを使用すると、全体の動作がかなり煩雑な動作となるので、それらの動作を管理することが問題となる。
本発明は、この問題の解決策を提供することを目的としている。
本開示は、特許請求の範囲を参照することによって要約できる。
本開示の目的は、同じルーティングエンティティに関連するラインカード間を搬送されるトラフィックを管理する為に、パワフルなルータの一部としてバックプレーンを有する物理的シャーシを使用することなく、パワフルなルータの機能性を得る為のシステム及び方法を提供することである。
本開示の他の目的は、提供される新規なシステムを実施することにより達成される機能性を有するパワフルなルータの一部として使用される複数のラインカードの代わりに複数のスタンドアロン・ホワイトボックスを使用して、パワフルなルータの機能性を得る為のシステム及び方法を提供することである。
本開示の他の目的は、以下の説明から明らかになる。
本開示の第1の実施形態によれば、通信ネットワーク内で使用される分散ルーティングシステムであって、前記分散ルーティングシステムが、ルーティングエンジン及び/又は管理エンジンとして構成される少なくとも1つのプロセッサと、到着する帯域外トラフィックを制御するように構成された少なくとも1つのスイッチング・ファブリック・コントローラと、各々が、前記分散ルーティングシステムの転送プレーン内でのスイッチング及び/又はルーティング能力を提供する為の少なくとも1つのラインカード及び/又は少なくとも1つのファブリック・スイッチング・ユニットを含む、スタンドアロン・ハードウェアである複数のホワイトボックスと、を有し、少なくとも1つの制御スイッチが、前記複数のホワイトボックス及び前記少なくとも1つのプロセッサ間の接続を確立するように構成され、それにより、前記少なくとも1つのプロセッサが、前記複数のホワイトボックスへの/からのトラフィックのルーティングを管理することを可能にすることを特徴とする分散ルーティングシステムを提供する。
本明細書及び特許請求の範囲を通して使用されている用語「ホワイトボックス」は、著名なブランド名を有していないサーバ又はパーソナルコンピュータのような、オープン又は業界標準対応ハードウェアであるコモディティを示す為に使用されている。例えば、この用語は、小規模なシステムインテグレータにより組み立てられたシステム及び、相手先ブランド名製造(Original Design Manufacturer)(ODM)又は小売りで別々に購入した部品からエンドユーザにより組み立てられた自作のコンピュータシステムに用いられる。これらのホワイトボックスは、転送プレーン内のルータ及び/又はスイッチとしてよく使用される。ホワイトボックスは、ネットワークの基本的なハードウェア要素をユーザに提供する。
本明細書及び特許請求の範囲を通して使用されている用語「プロセッサ」は、例えば、各ホワイトボックスのx86部分内に備えられたサーバ又は他の同等の処理装置のような、処理能力を備える装置又はその部品を示す為に使用されている。
本明細書及び特許請求の範囲を通して使用されている用語「スイッチングファブリック」は、ファブリック・スイッチング・ユニット(個別のボックス)、ファブリック・スイッチング・ユニットが収容している集積回路、及びスイッチングパスの制御を可能にするプログラミングを示す為に使用されている。
本明細書及び特許請求の範囲を通して使用されている用語「Closネットワーク」は、実際のマルチステージ電話スイッチングシステムを理論的に理想化しているマルチステージ回路スイッチング通信ネットワークを示す為に使用されている。物理的回路スイッチングが最大の実施可能な単一のクロスバースイッチの能力を超えることが必要である場合、Closネットワークが必要である。Closネットワークの優位点は、(各クロスバースイッチを構成する)必要なクロスポイントの数を、スイッチングシステム全体を1つの大きなクロスバースイッチにより実行する場合に必要なクロスポイントの数に比べて、はるかに少なくすることができることである。Closネットワークは3つのステージ:イングレス(ingress)ステージ、中間ステージ、及びイグレス(egress)ステージを有する。各ステージは、いくつかのクロスバースイッチにより構成される。イングレス・クロスバースイッチに入る各パケットは、利用可能な中間ステージ・クロスバースイッチのいずれかを通り、関連するイグレス・クロスバースイッチにルーティングされることができる。イングレススイッチを中間ステージスイッチに接続するリンク及び中間ステージスイッチをイグレススイッチに接続するリンクの両方がフリーである場合、中間ステージクロスバーは、どの特定の新しいパケットにも利用可能である。
他の実施形態によれば、少なくとも1つのプロセッサが、全ての帯域内でのトラフィック制御及び管理の為の焦点として機能するように構成される。
また、他の実施形態によれば、少なくとも1つのプロセッサが、複数のファブリック・スイッチング・ユニット及び複数のラインカードの為のルーティングテーブルをプログラミングするように構成されたSDNコントローラとして機能するように構成される。
さらに他の実施形態によれば、分散ルーティングシステム内で実行されるキューイングポリシー(queuing policy)が、a)端末間仮想出力キューイング(End-to-End Virtual Output Queuing)(VOQ)、及びb)複合入出力キューイング(Combined Input Output Queuing)(CIOQ)から成る群から選択される1つのメンバーである。
さらに他の実施形態によれば、各ラインカードは、全てのファブリック・スイッチング・ユニットのそれぞれを通って、他のラインカードのいずれかに接続することができる。
また、他の実施形態によれば、ファブリック・スイッチング・ユニットを介して、イングレスラインカードからイグレスラインカードへトラフィックを搬送する為のルーティングポリシーは、等価コストマルチパス(Equal Cost MultiPath)(ECMP)ポリシー(又は他の適用可能な負荷分散機構)を実行することを含む。
さらに他の実施形態によれば、各ラインカード及び各ファブリック・スイッチング・ユニットが、独自のシャーシ内ループバック・インタフェース・アドレス(intra-chassis loopback interface address)を有し、各ラインカード及び各ファブリック・スイッチング・ユニットが、分散ルーティングシステム内に備えられた他のラインカード及びファブリック・スイッチング・ユニットと、内部ゲートウェイプロトコル(interior gateway protocol)(以下、IGP)隣接性を確立し、前記シャーシ内ループバック・インタフェース・アドレスを他のラインカード及びファブリック・スイッチング・ユニットに提供するように構成される。
添付の図面は、本明細書に組み込まれ、本明細書の一部を構成するものであり、本開示の幾つかの実施形態を図示し、本明細書の記述とともに、本開示の実施形態の原理を説明するものである。
本開示の実施形態による、ルーティングシステムの概略図である。 2種類の潜在的VOQを表示するラインカードを示す図である。 本開示の実施形態による、2つのステージの転送決定を含むルーティングパイプラインの仮想モデルを示す図である。 本開示の実施形態により解釈されるネットワークのトポロジーの例を示す図である。 仮想シャーシ・ルーティングシステム内に制御プロトコルを適用する実施形態を示す図である。 仮想シャーシ・ルーティングシステム内のデータフローの例を示す図である。 仮想シャーシ・ルーティングシステムの制御プレーンフローの例を示す図である。 図7に記載の仮想シャーシ・ルーティングシステムのデータプレーンフローを示す図である。 本開示の実施形態により解釈されるルーティングシステムの仮想シャーシの様々な実行を例示する図である。 本開示の実施形態により解釈されるルーティングシステムの仮想シャーシの様々な実行を例示する図である。 本開示の実施形態により解釈されるルーティングシステムの仮想シャーシの様々な実行を例示する図である。 本開示の実施形態により解釈されるルーティングシステムの仮想シャーシの様々な実行を例示する図である。
以下の詳細な説明における特定の詳細及び値のいくつかは、本開示の特定の例を示すものである。但し、この説明は、単なる例であり、本発明の範囲を限定することを意図するものではない。特許請求の範囲に記載された方法及びデバイスは、当技術分野において公知の他の方法を用いても実施できることは、当業者にとって明らかである。更に、ここに記載する実施形態は、異なるステップを含むが、その全てが本発明の全ての実施形態において必要とされるわけではない。本発明の範囲は、特許請求の範囲を参照することによって把握できる。
図1は、本開示の実施形態により解釈される、複数のホワイトボックスを組み合わせた仮想シャーシであるルーティングシステム100の概略図である。以下の記載において、上記のシステムの動作に関する様々な側面が記載され、例示される。
図1に記載のルーティングシステムは、全ての帯域内でのトラフィック制御及び管理の為の焦点として使用されるように構成されたルーティングエンジン(RE)/管理エンジン(ME)として機能する1組のサーバ(110及び110’)を含む。これらの2つのエンジンのそれぞれは、ラインカード(130i〜130K)及びファブリック・スイッチング・ユニット(120i〜120N+I)のルーティングテーブルを構成するのに適したSDNコントローラとしても動作することができる。また、これらの2つのエンジンは、関連する全ての他の要素を監視し、ヘルスチェックを実行することにより、ルータ構造及びコヒーレンシを維持する為に使用することもできる。
また、ルーティングシステム100はさらに、2つの制御及び管理ToR(Top of Rack)スイッチ(140及び140’)を含み、上記スイッチのそれぞれが、ルーティングシステム(例えば、ラインカード及びファブリック・スイッチング・ユニット)のスイッチング要素を、管理、提供、転送情報ベース(FIB)プログラミング、及びトラフィック制御の為のRE/MEサーバに接続することができる帯域外(OOB)ファブリック・スイッチング・ユニットとして使用される。
ルーティングシステム100に備えられたファブリック・スイッチング・ユニット(120i〜120N+I)のそれぞれは、パケット転送目的において必要である、様々なラインカード間で実行される通信を可能にする一時ジャンクションとして使用されるように構成される。一方、ファブリック・スイッチング・ユニット(120i〜120N+I)のそれぞれは、ラインカードの管理、提供、FIBプログラミング及びトラフィック制御を可能にする、RE/ME(110及び110’)間で実行される通信を可能にする一次ジャンクションとしてそのようなセットアップに構成される。
好ましくは、ファブリック・スイッチング・ユニットは、Closトポロジー内のラインカードに接続され、Closトポロジーは以下のことを可能にする:
i)全てのファブリック・スイッチング・ユニットの全てのラインカードへの接続、
ii)ファブリック・スイッチング・ユニット同士の間での直接相互接続の回避、
iii)ラインカード同士の間での直接相互接続の回避、
iv)ファブリック・スイッチング・ユニットjのそれぞれを介した、ルーティングシステム100内に備えられた全てのラインカードiと、ルーティングシステム100内の他のラインカードのそれぞれとの間の一時接続の確立。
ルーティングシステム100内に含まれる転送エンジン(FE)ともみなされる、ラインカード(130i〜130K+l)のそれぞれは、好ましくは以下の機能性を可能にするように動作する:
トラフィックをスイッチングしてデータパケットの転送を可能にする、
(ユーザ・ネットワーク・インタフェース(UNI)を介して)顧客リンク又は(ネットワーク間インタフェース(NNI)を介して)隣接ネットワーク要素に接続する、そして、
(ファブリック層を介して接続されるローカルポート又はリモートポートのいずれかである)イグレスポート及びイングレスポート(例えば、ローカルポート)間でデータパケットを転送する為のRE/ME110/110’によりなされた決定を実行する。
キューイングポリシー
以下の議論において、ヘッドオブラインブロッキング(Head of Line Blocking)(以下、HOLB)に苦しんでいるイングレス/入力キューイングスキームに関しては扱っておらず、Nの倍数によるスピードアップが必要となるイグレス/出力キューイングスキームに関しても扱っていない(ここで、Nはイングレスインタフェースの数である)。
次のキューイングディスカッション(queuing discussion)において、以下のキューイングスキームのみを参照にする:
・端末間仮想出力キューイング(End-to-End Virtual Output Queuing)(以下、VOQ)、
・複合入出力キューイング(Combined Input Output Queuing)(以下、CIOQ)、
ここで、VOQポリシーは、各ファブリック・スイッチング・ユニットのイグレスポート及び各イグレスポートのイグレス輻輳/衝突バッファ(egress congestion / collision buffer)において実行される。
端末間VOQ
端末間VOQポリシーを実行しているシステムにおいて、トラフィッククラス別で、イグレスサブインタフェース毎に、固有のキューイングスキームが存在する。データパケットは、スイッチングファブリックを介してイグレスインタフェースに通信される前のデータパケットに対してなされたスイッチング/ルーティング決定に続くキュー内でバッファリングされる。キューバッファは、システムのイングレス部分に論理的に配置されるが、イグレスインタフェースを表す。そのようなスキームは、スイッチング/ルーティング性能を劣化させるHOLBの発生を効果的に防止し、イグレス側においてN倍のスピードアップを必要としない。
端末間VOQ対応システムは、複数のスイッチング・ネットワーク処理ユニット(以下、NPU)/パケットプロセッサ(以下、PP)、同様に、同じチップ上又は異なるチップ上に存在するファブリック・スイッチング要素を含む。
複数のこれらのNPUの全てが、単一のトラフィック管理ドメイン(以下、TMD)のファブリック・スイッチング要素を通じてリンクされ、それにより、NPUの1つを介してシステムに入るパケットが、グローバル/TMD全体の制約(global/TMD wide constraints)に基づく伝送をスケジューリングされると、そのスケジューリングは、ファブリックと同様にイグレスインタフェースの状態を考慮に入れる。
そのようなシステムにおいて、通常実行されるスケジューリングアルゴリズムは、可能な限り正確で、決定性で、適正で、効果的なトークンベースのアルゴリズムである。数学的に、この特性評価は、ファブリックラインを通じて全てのイングレス及びイグレスインタフェースを接続することができる最良の二分グラフ(best bi-partite graph)に近似させようとすることと本質的に等しい。
正確で、決定性で、適正で、効果的なこれらの要件を満たす為に、スケジューリングは、好ましくは以下のように実行される、
1.非同期ドメイン(パケット)から同期ドメイン(セル又はマイクロセル(yセル))へ移動し、
2.小さなyセルモードにおいて動作し、ここで、エレファントフロー/フレーム(elephant flows / frames)でファブリックを妨げることを避ける為に、伝送されたデータパケットは元のデータパケットのフラグメントだけであり、
3.バッファを使用することなく、必要とされる広範囲のスイッチング帯域幅をファブリックが処理することを可能にするファブリック動作をスピードアップする(例えば、1.2〜2倍)。
複合入出力キューイング(CIOQ)
HOLBを減少する為に提案されている1つの方法は、スイッチのスピードアップを増加させることである。X倍にスピードアップしたスイッチは、タイムスロット内で、各入力からXパケットまで除去することができ、各出力にXパケットまで送達することができ、ここで、タイムスロットは、複数の入力ポートにパケットが到達する間にわたる期間である。したがって、出力キュースイッチはN倍にスピードアップされ、入力キュースイッチは1倍にスピードアップされる。スイッチング後の出力と同様にスイッチング前の入力において、1からNパケットの間の値がバッファリングされる必要がある。この構造が、通常の複合入出力キューイング(CIOQ)スイッチ構造と呼ばれる。
しかしながら、本発明により提供される解決策は、単純なCIOQ構造を実行する通常のシステムとは、少なくとも以下の特徴により相違する:
1.本発明によると、VOQバッファリングスキームは、ファブリックインタフェース(物理的ポート/LAGバンドル)の為に提供されており、
2.本発明によると、VOQバッファリングスキームは、ラインカードイグレスインタフェース(物理的ポート/LAGバンドル/サブインタフェース)の為に提供されており、
3.本発明によると、VOQバッファリングスキームは、ファブリック・スイッチング・ユニット自体の内部に提供されている。
上述のように、図1は、回帰構造ブロック(recurrent building block)により構築され、CLOSネットワーク型の構造で相互接続されるファブリック・スイッチング・ユニット(120i〜120N+I)及びラインカード(130i〜130K+l)間の相互接続性を示している。例えば、CLOS構造のような、スイッチに基づくFFF(Fixed Form Factor)(固定フォームファクタ)を有する深いバッファ装置を有するか有していないマーチャントシリコン(merchant silicon)NPUに基づくミニ仮想シャーシは、8xマーチャントシリコンNPU装置及び4xファブリック要素を含む。図1を参照してここに記載されているルーティングシステムの固有の特徴は、各構造ブロックが独自の端末間VOQシステムとして事実機能することである。
図2は、2種類の潜在的VOQを表示するラインカードを示す図であり、1つはイグレスVOQであり、もう1つはファブリックVOQである。以下の表1に、これらの2種類のVOQの間に存在するいくつかの相違点の概要を記載する。
Figure 2020537854
次に、2つのステージの転送決定を含むルーティングパイプラインの仮想モデルを示す図である図3を参照する。
第1のステージにおいて(イングレスラインカードにおいて)、パケットヘッダがイグレスラインカードに関連するルックアップテーブルの為の入力として使用され、イグレスラインカードからパケットの目的地へ伸びるパスに沿った次ホップに向かってパケットが搬送される。このステージは、ファブリックを通してイグレスラインカードへ向かうパスを選択することと本質的に等しい。
仮想モデルの第2のステージにおいて(イグレスラインカードにおいて)、パケットヘッダが次ホップに接続されたイグレスインタフェースに関連するルックアップテーブルの為の入力として使用され、次ホップに向かってパケットが今搬送される。
当業者には理解できるように、仮想モデルの上記2つのステージは、イングレス及びイグレスインタフェースの両方が同じラインカードスイッチに存在している場合、単一のステージに併合することができる。
ファブリックパス及びスケジューリング
この議論の為に、ルーティングシステムの各ラインカードは、ルーティングシステムに属する様々なファブリック・スイッチング・ユニットの1つを介して、ルーティングシステムの他のどのラインカードとも通信することができるので、様々なファブリック・スイッチング・ユニットの動作を操作する為にそれ自体のスケジューリングアルゴリズムは適用されない。しかし、本開示の1つの実施形態により実行されるルーティングストラテジーは、ファブリックを介してイングレスラインカードからイグレスラインカードへのトラフィックのルーティングを処理する、等価コストマルチパス(Equal Cost MultiPath)(以下、ECMP)又は他の適用可能な機構のような負荷分散機構である。
このルーティングストラテジーは、次ホップパケットが転送されるべき単一の目的地がどこかを決定し、ルーティングメトリック計算においてトップタイになる複数の最良のパスにわたって転送されることができる。
以下の目的の為に、この例によるECMPは使用される:
1.ファブリック上で負荷を平均化する為に、様々なラインカード間にトラフィックを分散する(又は少なくとも分散するよう努力する)、
2.そのために同じパスを選択することにより、パケット順序及びフローコヒーレンシを維持する。
ここで、図1に例示されているルーティングシステムは、Kラインカード及びNファブリック・スイッチング・ユニットを含むと仮定する。
各ラインカードにおいて、以下の関係を適用することができる:
#FabricsToLineCardsPaths = (K-1)* N
イングレス及びイグレスポートが同じラインカードスイッチに存在する場合、ファブリック上のパスは採用されない。
シャーシ内接続性
この例によると、シャーシ内接続性(intra-chassis connectivity)は以下の特徴を備えている:
・各ラインカードは、インタフェースのバンドルを介して、ファブリックに接続している。
・インタフェースのバンドルは、Xファブリック対向インタフェースから構築される、
・以下の関係が有効である限り、Xは現在の要求に適応する為に動的に変化する、
X *(N+1)<= p/2 及び X * K <= t
ここで、
・N+1は、ファブリック・スイッチング・ユニットを保持するホワイトボックスの数であり、
・Kは、ラインカードを保持するホワイトボックスの数であり、
・pは、ラインカードを保持するホワイトボックスにおけるポートの数であり、
・tは、ファブリック・スイッチング・ユニットを保持するホワイトボックスにおけるポートの数である。
・各ラインカードは、X * Nネットワーク対向インタフェースを有し、それにより、N+1ファブリック保護スキームを確保し、
・ファブリック・スイッチング・ユニットは、スピードアップ・ファブリックであり、
・各ラインカードは、追加のファブリック・スイッチング・ユニットに接続され、その数はN+2であり、
・追加のファブリック対向バンドルが使用され、このバンドルが、オーバーサブスクライブド・インタフェースから構築され、
・追加のファブリック対向バンドルが、シャーシ内スピードアップ機能性を達成する為に使用され、以下に詳細に記載される。
シャーシ内ルーティングスキーム
下に配置される物理的ネットワーク上に載置される複数の装置又はシステム間にトンネルが作成される。このことは、オーバーレイネットワークが、2つのホスト間にパスが存在するという条件で、アンダーレイネットワークの状態とは無関係に機能することができることを意味している。しかしながら、このことはまた、オーバーレイネットワークが、物理的ネットワークの詳細を不明瞭にすることを意味している。
内部ゲートウェイプロトコル(以下、IGP)は、自律システム内のゲートウェイ(通常、ルータ)間でルーティング情報を交換する為に使用されるプロトコルのタイプである。その後、このルーティング情報は、IP(インターネットプロトコル)のようなネットワーク層プロトコルをルーティングする為に使用することができる。
IGPに使用することができるプロトコルの例には、開放型最短経路優先(Open Shortest Path First)(OSPF)、ルーティング情報プロトコル(RIP)、中間システム間連携(Intermediate System to Intermediate System)(IS−IS)、及び強化型内部ゲートウェイ・ルーティング・プロトコル(Enhanced Interior Gateway Routing Protocol)(EIGRP)が含まれる。
本開示の実施形態によるアンダーレイIGPを特徴づける特徴は以下の通りである:
i)各ラインカード及び各ファブリック・スイッチング・ユニットは、独自のシャーシ内ループバック・インタフェース・アドレスを有し、
ii)各ラインカード/ファブリック・スイッチング・ユニットは、他のラインカード及びファブリック・スイッチング・ユニットと、IGP隣接性を確立し、独自のシャーシ内ループバック・インタフェース・アドレスを提供するように構成され、
・ラインカードが、ファブリック対向インタフェースを介してのみIGPリンク状態アドバタイズメント(Link State Advertisement)(以下、LSA)を送信し、そして、
・ラインカードが、(例えば、ネットワークIGP/外部ゲートウェイプロトコル(Exterior Gateway Protocol)(EGP)を使用して)ネットワーク対向インタフェースにシャーシ内ループバックアドレスを提供しない。
この実施形態により、アンダーレイラベル分配プロトコル(以下、LDP)又は他の適用可能なプロトコルが、シャーシ内ネットワーク内でラベルを分配し、シャーシ内ループバックアドレスの為の前方誤り訂正(forward error corrections)(FEC)を構築する為に使用される。各シャーシ内ループバックの為のFECは、複数のパス、好ましくはN+2パスから構築される。また、ファブリックは、イグレスラインカードの為のペナルチメート・ホップ・ポッピング(Penultimate Hop Popping)(以下、PHP)として機能することができる。PHPは、MPLS使用可能なネットワーク内で特定のルータにより実行される機能であり、パケットが隣接ラベル・エッジ・ルータ(Label Edge Router)(LER)に転送される前に、MPLSのタグ付パケットの最外ラベルがラベル・スイッチ・ルータ(Label Switch Router)(LSR)により除去される処理を参照する。
シャーシ内障害検出及び保護機構
双方向フォーワーディング検出(Bidirectional Forwarding Detection)(以下、BFD)又は他の適用可能なプロトコルは、リンクにより接続された2つのフォーワーディングエンジン間で発生する障害を検出する為に使用されるネットワークプロトコルである。BFDは、イーサネット、仮想回路、トンネル及びMPLSラベル・スイッチド・パスのような、どんな障害検出もサポートしない物理的媒体上でも障害の低オーバーヘッド検出を提供する。
BFDは、特定リンク上の2つの終点間のセッションを確立する為に使用することができる。2つのシステム間に1つより多くのリンクが存在していた場合、それらのリンクのそれぞれを監視する為に複数のBFDセッションが確立される。BFDセッションは、スリーウェイハンドシェイク(three-way handshake)により確立され、スリーウェイハンドシェイクにより分解される。
BFDは、1組のラインカード間に伸びているリンクに沿って発生する障害を検出する為に、本発明の実施形態によって使用される。好ましくは、BFDプロトコルは、以下のことを観察することにより実行される:
・マルチホップIP−BFDが、ラインカード間に伸びているリンクに沿って維持され、そして、
・IP−BFDセッションが、各ラインカード上のファブリック対向バンドル間に確立され、各ファブリック対向バンドルは独自の固有IPアドレスを有する。
上述の検出機構BDFと共に実行することができる保護機構の例は、高速リルーティング(Fast ReRoute)(FRR)である。FRRは、リンク又はルータ障害時に、迅速なトラフィック回復を提供する為に使用される。通常、任意の単一リンク又はノード障害時に、50msまでのレベルで影響を受けたトラフィックフローを回復することができる。おそらく、本開示の実施形態の保護機構は、等価コストマルチパス(ECMP)機構とFRRを組み合わせて実行することにより、達成される。
シャーシ内ルーティングスキーム上のイグレスルーティング
イグレスIGP/EGPパケットにおいて、EGPは、自律システムのネットワーク内の(それぞれ独自のルータを有する)2つの隣接するゲートウェイホスト間のルーティング情報を交換する為の外部ゲートウェイプロトコルであり、イグレスIGP/EGPパケットは、ルーティングエンジン(RE)に向かって搬送される間、ラインカードによりトラップされる。
その後、REは、おそらく、特定のネットワーク目的地へのルートのリストを記憶しているデータテーブルであるルーティング情報ベース(RIB)を構築する。RIBは、RIBに近接する周りのネットワークのトポロジーに関する情報を含んでいる。そのようなRIBは、以下の情報に基づいて構築することができる:パケットヘッダに関連するプレフィックス、パケットの為の次ホップ、及び出力インタフェース(以下、OIF)。
次に、REは、各ラインカード上のイグレス転送情報ベース(FIB)を、以下のようにアップデートすることができる:
(i)ラインカードナンバーiのイグレスにおける次OIFを含む各プレフィックスの為に、REは、ラインカードiのシャーシ内ループバックを与えられたプレフィックスの次ホップとして設定し、そして、
(ii)ラインカードi自体において、RIBにおいて特定された次ホップ値よって次ホップが設定される。
IPルーティングの例
本発明により提供される解決策によって解釈されるシステムにおける1つの可能なルーティング実行を説明している以下の例についてここで検討する。
イングレスラインカードにおけるルーティング
・(シャーシ内ネットワークを介して)イグレスラインカードに対する回帰FECルーティングを使用して、パケットプレフィックスから、各イグレスラインカードのループバックアドレスが引き出され、
・その後、シャーシ内MPLSラベル(又は他の使用可能なカプセル化手段)を使用してパケットはカプセル化され、ファブリック・スイッチング・ユニットの1つに向かって転送される。随意的に、利用可能な複数のファブリック・スイッチング・ユニットの中から使用すべき特定のファブリック・スイッチング・ユニットを決定することは、ECMP機構を適用することにより決定される。
ファブリックルーティング
・その後、選択されたファブリック・スイッチング・ユニットは、ラベル・スイッチド・パス(Label Switched Path)(LSP)にしたがってパケットを転送し、そして、
・PHPとして機能するファブリック・スイッチング・ユニットは、各イグレスラインカードに向かってパケットを転送する前に、MPLSラベルを除去する。
イグレスラインカードにおけるルーティング
・イグレスラインカードは、転送されたパケットをファブリック・スイッチング・ユニットにより受信し、そして、最長プレフィックス一致(Longest Prefix Match)(LPM)ルックアップテーブルから最長プレフィックス一致(LPM)を適用することにより、その特定のプレフィックスのパケットの為の次出力インタフェース(OIF)を返し、
・パケットは、ネットワーク対向出力インタフェースを介して搬送される。
トラフィックをルーティングする為に図1に図示されているホワイトボックス仮想シャーシの基本原理は、上記において議論されている。これらの原理をより理解する為に、図4〜8には、そのようなシステムのトポロジーと同様にその動作原理に関する特定の側面が図示されている。図4には、ネットワークトポロジーの例が図示されており、図5には、制御プロトコルを適用する実施形態が図示されており、図6には、システム内のデータフローの例が図示されており、図7には、仮想シャーシ・ルーティングシステムの制御プレーンフローが図示されており、図8には、仮想シャーシ・ルーティングシステムのデータプレーンフローが図示されている。
次に、ルーティングシステムのホワイトボックス仮想シャーシの特定の実行を例示する図9〜12を参照にする。
図9は、本開示の実施形態により解釈されるルーティングシステムの特定仮想シャーシを例示している。図10は、ホワイトボックスの20ポートに基づく10以下のラインカード及びホワイトボックスの20ポートに基づく5個(4+1)のファブリック・スイッチング・ユニットを備える仮想シャーシの為の配置オプションを図示している。図11は、20個のホワイトボックス・ポートを備える仮想シャーシから72個のホワイトボックス・ポートを備える仮想シャーシへのアップグレードオプションのトラフィックに影響与えない例を図示している。図12は、仮想シャーシの為のもう1つの配置オプションを図示しており、この例において、仮想シャーシは、ホワイトボックスの72ポートに基づく36以下のラインカード及びホワイトボックスの72ポートに基づく18個(17+1)のファブリック・スイッチング・ユニットを備える。
本発明の他の実施形態は、ここに開示した発明の明細書及び実施を考慮することによって、当業者に明らかとなる。本明細書及び実施例は、単に例示的なものであり、本発明の真の範囲及び思想は、特許請求の範囲によって示される。

Claims (7)

  1. 通信ネットワーク内で使用される分散ルーティングシステムであって、前記分散ルーティングシステムが、
    ルーティングエンジン及び/又は管理エンジンとして構成される少なくとも1つのプロセッサと、
    到着する帯域外トラフィックを制御するように構成された少なくとも1つのスイッチ・ファブリック・コントローラと、
    各々が、前記分散ルーティングシステムの転送プレーン内でのスイッチング及び/又はルーティング能力を提供する為の少なくとも1つのラインカード及び/又は少なくとも1つのファブリック・スイッチング・ユニットを含む、スタンドアロン・ハードウェアである複数のホワイトボックスと、
    を有し、
    少なくとも1つの制御スイッチが、前記複数のホワイトボックスを前記少なくとも1つのプロセッサに接続するように構成され、それにより、前記少なくとも1つのプロセッサが、前記複数のホワイトボックスへの/からのトラフィックのルーティングを管理することを可能にすることを特徴とする分散ルーティングシステム。
  2. 前記少なくとも1つのプロセッサが、全ての帯域内でのトラフィック制御及び管理の為の焦点として機能するように構成されることを特徴とする請求項1に記載の分散ルーティングシステム。
  3. 少なくとも1つのプロセッサが、複数のファブリック・スイッチング・ユニット及び複数のラインカードの為のルーティングテーブルをプログラミングするように構成されたSDNコントローラとして機能するように構成されることを特徴とする請求項1に記載の分散ルーティングシステム。
  4. 前記分散ルーティングシステム内で実行されるキューイングポリシーが、a)端末間仮想出力キューイング(VOQ)、及びb)複合入出力キューイング(CIOQ)から成る群から選択される1つのメンバーであることを特徴とする請求項1に記載の分散ルーティングシステム。
  5. 各ラインカードは、全ての前記ファブリック・スイッチング・ユニットのそれぞれを通って、他の前記ラインカードのいずれかに接続することができることを特徴とする請求項1に記載の分散ルーティングシステム。
  6. 前記ファブリック・スイッチング・ユニットを介して、イングレスラインカードからイグレスラインカードへトラフィックを搬送する為のルーティングポリシーは、等価コストマルチパス(ECMP)ポリシーを実行することを含むことを特徴とする請求項5に記載の分散ルーティングシステム。
  7. 各ラインカード及び各ファブリック・スイッチング・ユニットが、独自のシャーシ内ループバック・インタフェース・アドレスを有し、各ラインカード及び各ファブリック・スイッチング・ユニットが、前記分散ルーティングシステム内に備えられた他のラインカード及びファブリック・スイッチング・ユニットと、IGP隣接性を確立し、前記シャーシ内ループバック・インタフェース・アドレスを他のラインカード及びファブリック・スイッチング・ユニットに提供するように構成されることを特徴とする請求項1に記載の分散ルーティングシステム。
JP2020521976A 2017-10-17 2018-10-15 通信ルーティングシステム Active JP7389742B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762573190P 2017-10-17 2017-10-17
US62/573,190 2017-10-17
PCT/IL2018/051106 WO2019077602A1 (en) 2017-10-17 2018-10-15 COMMUNICATION DELIVERY SYSTEM

Publications (2)

Publication Number Publication Date
JP2020537854A true JP2020537854A (ja) 2020-12-24
JP7389742B2 JP7389742B2 (ja) 2023-11-30

Family

ID=66174462

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020521976A Active JP7389742B2 (ja) 2017-10-17 2018-10-15 通信ルーティングシステム

Country Status (8)

Country Link
US (1) US20200304427A1 (ja)
EP (1) EP3698520B1 (ja)
JP (1) JP7389742B2 (ja)
DK (1) DK3698520T3 (ja)
ES (1) ES2975316T3 (ja)
IL (1) IL273747A (ja)
PT (1) PT3698520T (ja)
WO (1) WO2019077602A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11153211B2 (en) * 2017-12-09 2021-10-19 Intel Corporation Fast data center congestion response
WO2019145938A1 (en) 2018-01-28 2019-08-01 Drivenets Ltd. Method and device for improving bandwidth utilization in a communication network
US11178060B2 (en) * 2019-10-08 2021-11-16 Hewlett Packard Enterprise Development Lp Self forming local fabric
US11381456B2 (en) 2020-04-06 2022-07-05 Vmware, Inc. Replication of logical network data between global managers
US11088919B1 (en) 2020-04-06 2021-08-10 Vmware, Inc. Data structure for defining multi-site logical network
US11777793B2 (en) 2020-04-06 2023-10-03 Vmware, Inc. Location criteria for security groups
US11394634B2 (en) 2020-04-06 2022-07-19 Vmware, Inc. Architecture for stretching logical switches between multiple datacenters
US11343227B2 (en) 2020-09-28 2022-05-24 Vmware, Inc. Application deployment in multi-site virtualization infrastructure
US11979313B2 (en) * 2022-09-01 2024-05-07 At&T Intellectual Property I, L.P. Scalable core and edge network router

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050089054A1 (en) * 2003-08-11 2005-04-28 Gene Ciancaglini Methods and apparatus for provisioning connection oriented, quality of service capabilities and services
JP2007510378A (ja) * 2003-10-30 2007-04-19 チーク テクノロジーズ,インク. ノンブロッキングで決定論的マルチレートユニキャストパケットスケジューリング
EP2034410A2 (en) * 2007-06-22 2009-03-11 Sun Microsystems, Inc. Cluster system management
JP2016100843A (ja) * 2014-11-25 2016-05-30 日立金属株式会社 中継装置
US20160218917A1 (en) * 2015-01-26 2016-07-28 Telefonaktiebolaget L M Ericsson (Publ) SDN Based Interdomain and Intradomain Traffic Engineering
US20170187629A1 (en) * 2015-12-28 2017-06-29 Amazon Technologies, Inc. Multi-path transport design

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7263097B1 (en) * 2001-11-26 2007-08-28 Integrated Device Technology, Inc. Programmably sliceable switch-fabric unit and methods of use
KR100591107B1 (ko) * 2004-02-02 2006-06-19 삼성전자주식회사 분산 구조 라우터의 라우팅 처리 방법 및 그 장치
CN101242371B (zh) * 2008-03-14 2010-11-10 杭州华三通信技术有限公司 基于PCIe交换架构路由器堆叠的方法、系统和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050089054A1 (en) * 2003-08-11 2005-04-28 Gene Ciancaglini Methods and apparatus for provisioning connection oriented, quality of service capabilities and services
JP2007510378A (ja) * 2003-10-30 2007-04-19 チーク テクノロジーズ,インク. ノンブロッキングで決定論的マルチレートユニキャストパケットスケジューリング
EP2034410A2 (en) * 2007-06-22 2009-03-11 Sun Microsystems, Inc. Cluster system management
JP2016100843A (ja) * 2014-11-25 2016-05-30 日立金属株式会社 中継装置
US20160218917A1 (en) * 2015-01-26 2016-07-28 Telefonaktiebolaget L M Ericsson (Publ) SDN Based Interdomain and Intradomain Traffic Engineering
US20170187629A1 (en) * 2015-12-28 2017-06-29 Amazon Technologies, Inc. Multi-path transport design

Also Published As

Publication number Publication date
EP3698520A4 (en) 2020-12-09
EP3698520A1 (en) 2020-08-26
IL273747A (en) 2020-05-31
ES2975316T3 (es) 2024-07-04
PT3698520T (pt) 2024-03-27
DK3698520T3 (da) 2024-04-02
US20200304427A1 (en) 2020-09-24
WO2019077602A1 (en) 2019-04-25
WO2019077602A8 (en) 2019-05-23
EP3698520B1 (en) 2024-03-20
JP7389742B2 (ja) 2023-11-30

Similar Documents

Publication Publication Date Title
JP7389742B2 (ja) 通信ルーティングシステム
US10574566B2 (en) Reducing or eliminating routing microloops in networks having a CLOS topology, such as data center CLOS networks employing the exterior border gateway protocol (EBGP) for example
US9444768B1 (en) Multi-router system having shared network interfaces
CN113347091B (zh) 灵活算法感知边界网关协议前缀分段路由标识符
EP1609279B1 (en) Method for recursive bgp route updates in mpls networks
US7463597B1 (en) Spanning tree protocol synchronization within virtual private networks
EP1800435B1 (en) Reporting out-of-resources (OOR) conditions in a data network
US8576721B1 (en) Local forwarding bias in a multi-chassis router
US11546246B2 (en) Minimizing or reducing traffic loss when an external border gateway protocol (eBGP) peer goes down
US10069725B1 (en) Collapsed forwarding for service domain routers
US11349735B2 (en) Faster fault-detection mechanism, for example using bidirectional forwarding detection (BFD), on network nodes and/or hosts multihomed using a link aggregation group (LAG)
US11277328B1 (en) Using anycast as an abstract next hop (ANH) to reduce information related to border gateway protocl (BGP) next hops received by autonomous system border routers (ASBRs) and/or to improve BGP path convergence
US7457248B1 (en) Graceful shutdown of network resources in data networks
US11765077B1 (en) Ping and traceroute in inter-autonomous system (AS) segment routing (SR) networks without requiring headend router or path monitoring system (PMS) controller knowledge of topology outside of origin AS
US9049142B1 (en) Method and apparatus to enable protection for selective traffic in an MPLS network
US7680113B2 (en) Inter-FE MPLS LSP mesh network for switching and resiliency in SoftRouter architecture
US11451478B1 (en) Distributed tactical traffic engineering (TE) using loop free alternative (LFA), remote-LFA (R-LFA) and/or topology independent-LFA (TI-LFA) secondary paths
US11050679B1 (en) Defining non-forwarding adjacencies in bipartite networks, such as Clos newtorks, having a level 2 backbone and level 1 nodes
US8644315B2 (en) Label distribution protocol label filtering
Imran et al. Design and simulation of traffic engineering using MPLS in GNS3 environment
US20240235999A1 (en) Reducing convergence time and/or avoiding split-brain in multi-homed ethernet segment deployments, such as esi-lag deployments
EP4401364A1 (en) Reducing convergence time and/or avoiding split-brain in multi-homed ethernet segment deployments, such as esi-lag deployments

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211006

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20211222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221011

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230516

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230816

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231117

R150 Certificate of patent or registration of utility model

Ref document number: 7389742

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150