CN101682518A - 分布式连接建立和恢复 - Google Patents

Abstract

通过使用正被用于控制网络上的转发的路由协议的扩展来扩散连接约束。节点保存拓扑和连接数据库并基于所述约束来为连接计算路由。如果节点处于所计算的用于连接的路由上，则它将为连接安装转发状态。因为每个节点具有网络拓扑的一致视图，并且已经被提供有与连接相关联的约束，所以网络上的每个节点将为连接计算出相同的路由。当出现故障时，节点将在全网络范围优先级的基础上为连接计算恢复路径，以使得能够为受影响的连接创建恢复路径，而无需告知恢复路径。时间戳被使用来允许无论事件到达的次序如何，节点都以一致次序来应用事件。

Description

分布式连接建立和恢复

对相关申请的交叉引用

本申请对于2007年6月1日提交的题为“Flooding BasedMechanism For Connection Creation With Absolute Priority BasedRestoration”的美国临时专利申请第60/941,430号主张优先权，该申请的内容在此引用以供参考。

技术领域

本发明涉及网络，并且更具体地，涉及诸如由链路状态协议控制的以太网之类的网络中的分布式连接的建立和恢复。

背景技术

在以太网络架构中，连接至网络的设备为在任何给定时间使用共享通信路径的能力而竞争。在多个桥接(bridge)或者节点被用于互连网络段的情况下，经常存在去往同一目的地的多个潜在路径冗余。该架构的益处在于，其在桥接之间提供了路径冗余并且允许以附加链路形式向网络增加容量。尽管如此，为防止形成环路，通常使用生成树(spanning tree)来限制网络上广播业务的方式。因为路由(route)是通过对帧进行广播并等待响应而知悉的，并且因为请求和响应这二者都会遵循生成树，所以多数(如果不是全部)业务会沿着作为生成树一部分的链路而行。这通常会导致对生成树上的链路的过度利用、并且未能利用并非生成树的一部分的链路。

为克服以太网络中的固有限制，于2006年10月2日提交的题为“Provider Link State Bridging”的美国专利申请第11/537,775中披露了链路状态协议控制的以太网，该申请的内容在此引用以供参考。正如在该申请中更为详细描述的那样，链路状态协议控制的以太网中的节点交换链路状态通告(advertisement)以构建对网络拓扑的同步视图(view)，后者被存储在链路状态数据库中。此后，链路状态数据库可用于计算贯穿网络的最短路径。链路状态通告可用于向特定网络层中的所有其它节点分发链路状态更新。

除了构建网络拓扑数据库之外，每个节点还填充转发信息库(FIB)，节点将使用FIB来做出转发决策，以使得在所计算的最短路径上将帧转发至目的地。因为总是使用去往特定目的地的最短路径，所以网络业务将通过更大量的链路被分发，并且沿着对于更大量的节点而言更优的路径而行，所述更优指的是优于使用单个生成树或甚至多个生成树在网络上承载业务的情况。

当客户业务进入供应商网络时，客户MAC目的地址(C-MAC DA)被解析为供应商MAC目的地址(B-MAC DA)，以使得供应商可以使用供应商MAC地址空间在供应商网络上转发业务。此外，供应商网络上的网络单元被配置成基于虚拟LAN ID(VID)来转发业务，以使得可在整个网络中的不同路径上转发被发往相同目的地但是具有不同VID的不同帧。在操作中，链路状态协议控制的以太网可将一个VID范围与最短路径转发关联起来，以使得可使用来自于该范围的VID来转发单播和多播业务，并且可在不同于最短路径的路径上跨越网络创建业务工程路径，并通过使用第二VID范围来对其进行转发。于2007年4月3日提交的题为“Engineered Paths In A Link StateProtocol Controlled Ethernet Network”的美国专利申请第11/732,381中更为详细地描述了在链路状态协议控制的以太网中使用业务工程(TE Traffic Engineered)路径，该申请的内容在此引用以供参考。

电工电子工程师学会(IEEE)已研发了草案标准802.1Qay，后者通常被称为供应商骨干桥接--业务工程(PBB-TE)。按照惯例，当PBB-TE将被用于传输IP业务时，会跨越PBB-TE网络建立连接。于2007年4月19日提交的题为“GMPLS Control of Ethernet”的美国专利申请第11/580,796中描述了一种跨越PBB-TE网络建立连接的方法，该申请的内容在此引用以供参考。

正如该申请中更为详细描述的那样，当将跨越PBB-TE网络建立连接时，将由首端节点或中央管理系统计算连接，并且接着连接建立消息将在整个PBB-TE网络上被传送。例如，假设节点A被要求建立到节点E的连接。节点A会执行路径计算过程以计算到节点E的路径，作为例子，假设该路径包括中间节点B、C和D。

此后，节点A将创建RSVP-TE路径建立消息(该消息包含关于通过网络的路径的信息)，并且向节点B发送路径建立消息。节点B将处理该消息并将其传给节点C。该消息会继续前进，直到其到达其目的地(节点E)为止。

当节点E接收到路径建立消息时，其会生成RSVP-TE响应消息，该响应消息将通过网络沿相反路径而行。作为RSVP-TE信令的一部分，该路径上的节点保留资源并且安装(install)转发状态以允许沿该路径转发业务。

在于2006年3月22日提交的题为“Method and Apparatus ForEstablishing Forwarding State Using Path State Advertisements”的美国专利申请第11/525,594中，建议使用链路协议控制分组而非使用单独的信令协议来在网络上承载该连接信息。在该申请中，首端节点会使用其拓扑数据库中的网络拓扑信息来计算通过网络的路径。尽管如此，并不是使用RSVP-TE来告知(signal)网络上的这些连接，而是诸如ISIS之类的链路状态协议被扩展为在通过网络的其特定路径中承载连接信息。在这种情况下，首端节点计算路由，并在整个网络范围内扩散(flood)路由。网络上的所有节点在其连接数据库中存储连接。在连接的路由上的节点为连接安装转发状态，以借此允许在PEE-TB网络上创建连接。申请11/525,594的内容在此引用以供参考。

PEE-TB网络可包括许多连接，每个连接被承载于网络上所告知的业务工程路径上。当网络上发生故障时，对于受故障影响的那些连接的首端节点会为这些连接重新计算新路由，并且在链路状态通告中扩散新路由。在给定新的网络拓扑以及与路由相关联的约束，诸如所需的带宽、期望的终端节点以及连接的相对优先级的情况下，首端节点会计算这些路由。因为网络上存在许多受到给定故障影响的不同首端节点，并且每个首端节点负责为其受影响的连接计算新的路由集，所以在两个不同首端节点都试图为用于给定节点/链路上的不同连接的恢复路径保留资源时，可能会发生冲突。此外，尽管每个节点会优先考虑其自身的连接，但是协调由网络上的不同节点所建立的连接的优先级仍然是一种挑战。因而，提供一种在网络上发生故障之后重新建立连接的新方式，将会颇为有利。

发明内容

不是由首端节点在网络中为连接计算通过网络的显式(explicit)路径，而是首端节点通告一组连接约束，诸如连接所需的带宽、用于连接的入口/出口节点对、以及连接优先级。通过使用正被用于控制网络上的转发(forwarding)的路由协议的扩展来在网络上扩散连接约束。

网络可以是分组网络、链路状态协议控制的以太网、或者另一网络。当网络上的节点接收到包含连接约束信息的控制分组(TLV)时，节点会在其连接数据库中存储连接约束，并根据当前网络拓扑和所接收到的约束来为连接计算通过网络的路由，以确定其是否处在用于该连接的路由上。将根据优先级信息，对于所计算的用于该连接的路由相对于其它连接进行排位(rank)，并且由节点将所计算的用于该连接的路由存储在连接数据库中。如果节点处于所计算用于该连接的路由上，则节点会将用于与该连接相关联的DA/VID的转发状态安装到其转发信息库中。网络上的每个节点执行该相同过程。如果每个节点对网络拓扑具有一致视图，并且已经被提供了与该连接相关联的约束，则网络上的每个节点会为该连接计算出相同的路由。因而，该连接的转发状态会跨越网络而端到端地联系(link up)起来。

当网络上发生故障时，该故障会被通告给网络上的所有节点。在收到故障指示时，节点会检查其连接数据库以确定哪些连接受到故障影响。每个节点会为每个受影响的连接重新计算新路由(恢复路径)，并在其连接数据库中存储经更新的路由信息。节点按优先级次序来处理连接以由此使得能够针对恢复路由而实施全网络范围(networkwide)连接优先化。此后，节点会基于所计算出的新路由来安装/除去转发状态。具体地，如果节点之前处于用于连接的路由上，并且不再处于用于恢复路径的路由上，则节点将从它的转发信息库除去用于该连接的转发状态。相反，如果节点先前不处于用于连接的路由上而是处在用于恢复路径的路由上，则该节点会将用于该连接的转发状态安装到其转发信息库中。如果节点对网络都具有一致视图，并且以相同次序为受到故障影响的连接计算恢复路径，则用于连接的恢复路径也会跨越网络而端到端地联系起来。此外，创建恢复路径而无需用于连接的显式信令。

如果网络上的所有节点对网络拓扑具有一致视图，则使网络上的节点基于约束信息来为连接计算路由会很有效。可能会发生网络上出现多于一个故障的情况。因为节点在接收到第一故障通知时可能开始为连接重新计算路由，所以故障通知的接收次序会影响节点计算通过网络的路由的方式。因而，诸如故障通知和连接请求之类的事件通知可被加上时间戳，以允许节点以一致的方式处理事件通知。为适应加时间戳的事件通知抵达时次序颠倒，每个节点会保存网络连接的基准网络视图，以使得节点能够回到在前网络状态，并且无论事件通知被接收的次序如何，都以一致的次序应用(apply)事件通知。

附图说明

所附权利要求中具体地指出了本发明的各个方面。以下附图以示例性的方式阐释了本发明，在附图中，相同的附图标记表示类似元素。以下附图以阐释为目的揭示了本发明的不同实施例，并非意在限制本发明的范围。为清楚起见，各附图中并未标示出每个组件。在附图中：

图1是网状网络的示意图，该网状网络可用于实现诸如链路状态协议控制的以太网之类的网络。

图2是诸如链路状态协议控制的以太网单元之类的网络的示意图。

图3-8是示例性网络的网络图，该网络图示出了可由网络上的节点保存的若干可能的表，并示出了在网络上发生故障时这些表如何改变。

图9-11是示出了接收事件通知以及将事件通知应用于节点的拓扑数据库的定时的时间线。

图12是示出了节点的基础(base)拓扑与当前拓扑之间的N个时间单元的滑窗的时间线，在接收到任一事件通知时，节点可使用当前拓扑来回复到先前拓扑。

图13是示出了具有两个拓扑数据库和连接数据库的节点的功能性框图。

图14是示出了节点在处理事件通知时所执行的过程的流程图。

图15是示出了节点所执行的过程的流程图，该过程用于记住(keep track of)网络上的事件的次序以允许节点以一致的次序处理拓扑改变通知。

具体实施方式

链路状态协议扩散机制可用于在诸如网际协议(IP)或链路状态协议控制的以太网之类的网络上添加和删除连接。扩散机制允许定义连接的约束被扩散，以使得网络上的每个节点能够独立地计算用于该连接的路由。

本发明的实施例可用在多种不同类型的网络中，尽管下文针对链路状态协议控制的以太网描述了一种实施方式的实例，但是本发明并不限于在该种性质网络中实施。更确切地，以下描述意在提供一种特定实施方式的实例。还可针对其它网络实施本发明。例如，可在基于分组的网络(诸如基于网际协议(IP)的网络)中实施本发明的实施例。

根据本发明的一个实施例，链路状态协议扩散机制被用于扩散与连接相关联的约束，诸如入口/出口节点对、连接所需的带宽量、以及连接优先级。网络上的节点使用这些约束来独立地计算用于连接的路由，并且如果它们处于用于连接的路由上，则会为连接安装转发状态。因为节点知道与连接相关联的约束，所以在网络上发生故障时，节点都可独立地为连接计算恢复路径而无需在发生故障时使用扩散机制来重建连接。因而，节点能够自动重建连接而无需在网络上重新告知连接。因为约束信息包括连接的优先级，所以每个节点具有所有连接的列表，并且知道每个连接的优先级。这使得每个节点能够在为连接计算恢复路径时以优先级次序处理连接，借此能够在恢复后对连接进行全网络范围的优先化。

图1示出了示例性网络，该网络例如可被实现为链路状态协议控制的网络10，网络10包括通过链路14互连的多个节点12。在图1中，已经通过节点A、B、C、D和E建立了从客户I到客户J的连接(深黑线)。该连接具有与其相关联的约束，诸如入口节点A和出口节点E。此外，该连接可指定应被保留的带宽量、服务质量、以及指定将由连接提供的服务类型的其它类型的约束。该连接还被分配了优先级别。当节点A从客户I处接收到连接请求时，其会确定与该请求相关联的约束，并将链路状态通告中的约束扩散至链路状态协议控制的网络10。节点会使用这些约束来独立计算对于连接的完全相同的路由，并安装转发状态以在网络上建立连接。

图2示出了示例性网络单元，该单元可用于实现图1的网络中的节点12。如图2中所示，节点包括控制平面70和数据平面72。数据平面被配置为处理网络上的数据，并且包括网络处理单元74，网络处理单元74包含由数据平面安装到转发平面中的转发状态76。交换结构78将网络处理器互连起来，以使得在与一个网络处理单元74相关联的一个端口75处所接收到的数据能够在连接至相同网络处理单元或连接至不同网络处理器单元的另一端口处被输出。

控制平面70包括一个或多个处理器82，处理器82包含控制逻辑84。控制平面还包含存储器86，存储器86包含可被加载到处理器82的控制逻辑84中以配置处理器来执行此处所描述的操作的数据和指令。例如，存储器86可包含链路状态路由软件88以使节点能够发送并接收路由协议控制分组。存储器86还可包含连接管理软件89。

诸如ISIS之类的链路状态路由协议使用控制分组，该控制分组的格式可包含特定类型长度值(TLV)。TLV指定控制分组的字段和格式，以使得在节点接收控制分组时，该节点能够识别控制分组中包含什么信息。如本说明书中更为详细地讨论的那样，根据本发明的实施例，网络上的节点扩散与将在网络上建立的连接相关联的约束信息。为使节点能够从控制分组中提取约束信息，可创建新的TLV，该新的TLV指定可以被节点用来交换此种类型信息的字段。TLV中可指定的特定字段取决于待扩散的约束信息类型，并且可包括例如连接ID、带宽、起始节点、结束节点、优先级、以及在节点为连接计算路由时有助于节点的其它任意信息。

链路状态路由协议的两个实例包括开放式最短路径优先(OSPF)和中间系统至中间系统(IS-IS)，但是也可使用其它链路状态路由协议。例如在ISO 10589和IETF RFC 1195中描述了IS-IS，ISO 10589和IETF RFC 1195的每个内容在此引用以供参考。尽管存在该协议的当前版本，但是标准随着时间而演进，并且随着标准的发展，本说明书中所描述的概念可被调整对未来版本的标准起作用。与之类似，本发明并不限于结合了这些特定协议之一而操作的实施方式，原因是还可使用其它协议来交换路由信息。

当数据和指令被从存储器加载到处理器中时，处理器会执行链路状态路由过程90以使节点能够参与网络上正常的链路状态路由交换并接收关于将在网络上建立的连接的约束信息。处理器还可执行连接计算过程92，该过程可以与路由过程分开或者可以与路由过程集成在一起。正如本说明书所更为详述的那样，连接计算过程执行与计算用于连接的受限路由以及保存连接数据库相关联的功能。

图2所示的节点包括一个或多个数据库，后者存储供路由过程和/或连接计算过程使用的信息。例如，节点可以包括拓扑数据库94，后者包含当前拓扑数据库和一个或多个在前版本的拓扑数据库。例如，图13示出了示例性节点12，后者已存储多于一个拓扑数据库(基础拓扑和当前拓扑)。节点还可包括连接数据库96，后者可以是独立于拓扑数据库的数据库、或者被形成为拓扑数据库的一部分。节点可选地可包含转发数据库，后者包含已被作为转发状态76编程到数据平面72中的转发状态的映像(image)。还可使用其它节点配置，并且图2中所示出的节点配置仅意在提供可以如何构造节点的示例性功能性描述。

因为将在网络上创建连接，所以与该连接相关联的约束会被扩散至所有节点。节点会在其连接数据库中存储约束，并计算用于该连接的路由。如果网络上的节点处于用于该连接的路由上，则它们会为该连接安装转发状态。如果节点不在该路由上，则其不会安装转发状态。

因为多个连接会为有限的资源而竞争，所以每个连接会被排位并且被给予优先级值。每个节点根据连接的优先级来对连接进行排位，以使得网络上的所有节点会对给定的连接集进行一致的排位。如果两个或更多连接具有相同的优先级，则应用平局决胜负(tie-breaking)规则来确定哪个连接应具有优先级。例如，连接上的首端节点的MAC地址可用于对连接进行优先化。在相同首端节点扩散具有相同优先级的两个连接的情况下，创建的次序或在扩散消息中的次序可用于确定连接的相对优先级。节点保存优先级信息，以使得网络上的所有节点以相同的方式来对连接进行排位。

在网络中发生故障时，网络上的节点会为连接计算恢复路径。节点会确定哪些连接受到故障影响并且以优先级次序来处理这些连接。这允许网络上的节点在处理其它较低优先级的连接之前、先为较高优先级的连接计算路由。因为节点根据优先级来处理连接，所以在全网络范围的基础上对恢复进行优先化。与之形成对照，在首端节点计算路由并在网络上告知路由的情况下，全网络范围的恢复优先化不可用，原因是首端节点只能进行最好的本地(节点)优先化而不能进行全局(全网络范围)优先化。

在稳态运行时，每个节点对网络拓扑具有一致的视图，并且对网络上已建立的连接具有一致的视图。节点还会始终如一地对连接进行优先化。当将要建立新连接时，与该连接相关联的约束会被扩散至网络上的节点。每个节点会基于当前拓扑和连接约束来为该连接计算路由。如果路由上的节点确定它们处于用于该连接的路由上，则它们此后会安装转发状态。因为每个节点正在根据相同的起始数据执行相同的计算，所以每个节点会为该连接计算出相同的路由，以使得对于连接而言路由将跨越网络而端到端地联系起来。节点还会确定连接的优先级并在其连接数据库中存储该连接。

在网络上发生故障时，故障通知会在网络上被扩散。每个节点会确定哪些连接受到故障影响并把与受影响的连接相关联的带宽返回到拓扑数据库。对于每个受影响的连接而言，从最高优先级连接开始，节点此后会基于其对网络拓扑的当前视图来计算新的恢复路径。如果节点处于恢复路由上，则节点会为该连接卸载所有现有转发状态，并且此后为该连接安装必要的转发状态。如果节点不在恢复路由上，则节点会为该连接卸载所有现有转发状态。因为所有节点对网络拓扑具有一致的视图并且对连接进行一致地排位，所以所有节点会计算出相同的恢复路由集。因而，在网络上发生故障时，没有必要扩散恢复路由。

图3-8示出了这在示例性网络中可能如何被实现的实例。正如图3中所示，为了解释，假设示例性网络具有5个节点12，标以节点A-E。这些节点由链路14互连起来。

每个节点12具有拓扑数据库94，拓扑数据库94包含网络拓扑的同步视图。例如，参见节点D的拓扑数据库20，该拓扑数据库包含描述每个节点12的条目(entry)30。与之类似，拓扑数据库还包括描述每个链路14的拓扑条目32。与拓扑条目相关联的两个数字描述了链路代价以及该链路上剩余可用带宽量。因而，链路条目1、5将指示链路的代价为1，并且该链路上的可用带宽为5。类似地，链路条目3、10将指示链路的代价为3，并且该链路上的可用带宽为10。当链路被添加时，可用带宽量被调整成反映链路上的更新的可用带宽。

网络上的节点A-E均包含连接至链路14的端口16。与之类似，拓扑数据库包含描述哪个端口连接哪个链路的条目34。在所阐释的实例中，拓扑数据库已被示为网络图。在运行时，拓扑数据库包含描述信息的条目。因而，网络单元实际上可能不包含网络的缩小的图形表示，而是包含描述网络的信息的数据库。申请人已经以图形方式示出拓扑数据库以帮助解释当网络上发生事件时数据库中的条目部分如何随时间改变以反映更新的网络状态。然而，在运行时，真实网络单元会包括传统数据库，后者具有用于在本说明书中所描述的和在图3的拓扑数据库94的图中示出的网络各方面的数据条目。

节点A-E还包括连接数据库96。连接数据库可以是拓扑数据库的一部分或者可以是与拓扑数据库分开的。当连接将被添加至网络时，与每个连接相关联的约束会被扩散至网络上的节点。每个节点会在连接数据库中存储约束，并且还会将优先级附于连接。该优先级也会被节点存储在连接数据库中。可选地，连接被存储在连接数据库中的次序可用于识别连接的相对优先级。

根据这些约束(诸如入口/出口节点和所需带宽)，网络上的每个节点会为连接计算路由。因为每个节点对网络拓扑具有一致的视图，并且对网络上已建立的其它连接具有一致的视图，所以节点会为该连接计算出相同的路由。此后这些节点会把用于该连接的路由信息存储在其连接数据库中。

在图3中所示的实例中，连接数据库包括路由条目40。每个路由条目包含路由标识符，即红色(Red)、蓝色(Blue)，节点/端口列表，以及被请求/保留用于路由的带宽量。因而，诸如红色＝{A，P2，P2，B，P1，P1，C}，7之类的路由条目将指示红色路由起始于节点A，在端口P2处离开节点A，在节点B处的端口P2处被接收，经由端口P1离开节点B，并且在端口P1上到达节点C。该条目还指示该连接已请求/保留7个单位带宽。图3示出了发生故障前示例性网络的状态。

图4示出了发生故障时网络的初始状态。假设在该实例中，链路故障发生在节点B和C之间的链路上。当感测到故障时，节点B和C中每一个都会向网络中其余部分发出故障通知。节点B和节点C这二者都会扩散故障通知。由于下文中将会更为详细讨论的原因，每个节点会为故障通知加上时间戳。当节点接收到故障通知时，它们会以时间戳所指示的次序来应用故障通知，以使得每个节点以相同的次序应用故障通知。在图4所示的实例中，假设故障为双向故障。在故障仅发生在一个方向上的情况下，仅节点B和C中的一个节点会发出故障通知。

图5示出了网络上的节点在故障之后如何更新它们的拓扑数据库。在图5所示的实例中，节点B和C已经检测到故障并且已经更新其相应的拓扑数据库。网络上的其它节点还未接收到由节点B和C所扩散的故障通知。因而，图5中的节点A、D和E的拓扑数据库与图3和4中相同。

如图5中所示，当节点B和节点C检测到故障时，它们会将连接节点B和C的可用链路带宽变为0。具体地，因为节点B与C之间的链路已发生故障，所以该链路无法用于承载业务。因而，用于该链路的可用带宽条目50已被设为0。这些节点还会确定哪些连接受到链路故障的影响。在该实例中，节点B和C会确定红色连接受到影响，并且会从连接数据库中删除用于红色连接52的路由信息。在识别出受影响的连接之后，节点还会释放由受影响的连接所占用的带宽，并且将该带宽返回至拓扑数据库。在图5中所示的实例中，红色连接之前是在节点A和B之间的链路上被路由的。因而，拓扑数据库中用于该链路的条目54会被更新为包括从红色连接中所释放的带宽。因为红色连接占用7个单位带宽，所以用于该链路的可用带宽已从3增加至10。

一旦节点已经删除用于受影响连接的旧路由信息并向拓扑数据库返回与受影响连接相关联的带宽，节点就会开始为受影响连接计算恢复路由。在图6所示的实例中，为红色连接所计算出的恢复路径是从A到E、然后到C。用于红色连接的连接条目52会被修改为包括该新路由信息。例如如图6所示，用于红色连接52的新路由已被计算为{A，P3，P3，E，P4，P4，C}。节点B和C这二者都已为红色连接计算出相同路由，并将该路由包括在它们的连接数据库中。

当已为连接计算出路由时，该连接所占用的带宽会反映在拓扑数据库中。因而，如图6所示，因为红色连接需要7个单位带宽，所以在图6中，用于从节点A到节点E的链路56和从节点E到节点C的链路58上的可用带宽的条目已减少了7个单位。

此后节点将前进到卸载转发状态，或者安装转发状态，这取决于它们是否处于恢复路由上。在图6中，节点B处于用于红色连接的原始路由上，但是恢复路由并不包括节点B。因而，节点B会除去用于红色连接的转发状态。与之对照，节点C处于原始路由上，同时也处于恢复路由上。尽管如此，恢复路由在节点C上的不同端口上通过。因而，节点C或者将从转发信息库中删除旧连接并安装新的转发状态，或者将改变用于红色连接的现有转发状态以反映新的转发状态62。

如上提到的那样，靠近故障的节点会检测到故障并向网络上的其它节点扩散故障通知。靠近故障的节点此后会进行上文中结合图3-6所描述的过程，以更新其拓扑数据库和连接数据库，以除去用于受影响连接的路由信息并安装用于受影响连接的恢复路径的路由信息。

在接收到由节点B和C扩散的故障通知时，网络上的其它节点会进行该相同过程。因为故障通知会花费有限的时间量用来在整个网络范围内传播，所以不同节点会在不同时间进行该过程，并且在发生处理时相互之间会略微不同步。为防止其在网络上造成环路，可执行诸如反向路径转发检查(RPFC)之类的过程，以防止在意外端口到达的分组在网络上被转发。

图7示出了节点A、D和E在收到故障通知后所进行的过程。在图7所示的实例中，已经假设在节点B和C已完成更新其拓扑数据库等等时，节点A、D和E将仅接收故障通知。如图7中所示，节点C已安装用于红色连接的转发状态以在端口P4上向端口E输出用于红色连接的数据。尽管如此，节点E没有安装用于红色连接的转发状态。因此，节点E会丢弃在红色连接上从节点C接收的分组。节点E还可实施RPFC以确定其是否正在正确的端口上接收红色分组。因为其需要有限时间量来在网络上扩散通知，并且在计算路由时需要每个节点使用网络的一致视图，所以下文将更为详细地描述使用时间戳来说明这些处理延迟并说明不同故障通知在不同时刻到达的潜在性。

图7示出了节点A、D和E在收到故障通知时的状态。如图7中所示，节点会首先确定哪些连接受到故障影响，并从连接数据库中除去用于那些连接的路由信息。与该连接相关联的带宽还会被返回到拓扑数据库，以使得当节点为受影响的路由计算恢复路径时，其是可用的。

图8示出了该过程的下一部分，其中，节点为每个受影响的连接计算恢复路由，更新拓扑数据库以反映分配给恢复路由的带宽，并且更新转发状态以使得节点能够处理恢复路由上的业务。

具体地，如图8中所示，节点A、D和E中的每个节点都会将用于红色连接的新路由计算为红色＝{A，P3，P3，E，P4，P4，C}，并把该路由存储在它们的连接数据库中。这些节点还会更新其拓扑数据库以更新红色连接已被路由于其上的链路上的可用带宽。因而，节点A-E之间以及节点E-C之间的链路上的可用带宽量已经减少，减少量为分配给红色连接的带宽量。

最后，节点会安装转发状态，以使得能在网络上实施恢复路由。在节点之前安装了用于原始连接的转发状态的情况下，转发状态在必要时将被删除或修改以反映用于该连接的恢复路由。

如上所述，当要在网络上建立连接时，发起节点会将与连接相关联的约束扩散到网络上。这允许如果节点处于用于该连接的路由上则每个节点都为连接计算路由并选择性地安装转发状态，以使得该连接跨越网络而端到端地联系起来。在检测到故障时，需发生的唯一的扩散是以下扩散：向网络单元通知故障的发生。这些节点可以将故障通知扩散与被存储在其连接数据库中的连接信息一起使用来确定哪些连接受到影响并为每个受影响的连接重新计算恢复路由。再一次，如果这些节点都利用对网络拓扑的一致视图和对连接的一致视图来进行操作，则每个节点会以相同次序执行同一组计算，以便对于受到故障影响的连接而言达到相同的恢复路由集。因而，类似于原始路由，恢复路由会跨越网络而端到端地联系起来。因而，可以恢复连接而不需要在网络上扩散新连接路由。

此外，因为恢复是通过以优先级次序处理连接来实现的，所以不会出现竞争性连接之间的冲突，所述冲突在恢复路径由首端节点计算并在网络上扩散的情况下是可能的。此外，通过使得节点根据优先级次序来针对计算确定恢复路径，实现了全网络范围的恢复优先化。

如结合图3-8所示的那样，拓扑改变通知花费有限的时间量来在网络上传播。在网络上发生单个故障的情况下，如图3-8所阐释的那样，将被应用的拓扑改变通知的数目不会很大。尽管如此，在条件迅速恶化并且正发生多个故障的情况下，若干拓扑改变通知可能被快速发出。此外，拓扑改变通知可涉及恢复以及网络上的故障。此外，当网络上正发生一个或多个故障和/或恢复时，可发生连接添加和/或删除。因而，被接收和处理的拓扑改变通知的次序可影响网络上的节点计算用于连接的路由的方式。

根据本发明的一个实施例，每个拓扑改变通知由生成拓扑改变通知的网络节点加上时间戳。网络上的节点根据时间戳按时间次序应用拓扑改变。因为每个节点以相同的次序应用相同的拓扑改变通知，所以它们以什么次序被该节点接收，是无关紧要的。换句话说，每个节点根据时间戳重新安排拓扑改变通知，以使得节点能按时间次序应用这些通知。

根据本发明的一个实施例，所有事件都被加上时间戳以使得在节点对照拓扑数据库、连接数据库和转发状态来处理这些事件之前，节点可对这些事件进行排序。这些事件包括链路故障、链路复原(recovery)、连接添加、连接删除以及影响网络拓扑的其它事件。为该事件发起扩散的节点对每个此类事件都加上时间戳。

为使节点能够确保它们以正确次序应用拓扑更新(故障通知和复原通知)以及连接请求和删除，节点为其拓扑保存时间戳。当具有其时间戳为Ti的拓扑的节点知悉具有时间戳Tj的事件(这指示该事件在更晚的时间点j＞i上发生)时，节点会应用时间戳为Tj的事件，并且将拓扑时间戳更新为Tj。该节点还存储事件Tj的副本。

当具有拓扑时间戳Tk的节点知悉时间戳为Tj的事件(该事件发生在其当前拓扑的时间戳之前，k＞j)时，其会回复到先前拓扑，对这些事件进行重新排序以包括新接收到的时间，并重新应用自先前拓扑的时间戳以来已经发生的所有事件。在图9-11上显示这可以如何被实施的实例。

图9示出了当按次序接收到事件时节点将如何处理拓扑改变。如图9所示，节点会具有基础拓扑，该基础拓扑被选择成处于一个向后足够远的时间点，以使得在统计上将不可能接收到在时间上先于基础拓扑的时间戳的后续事件通知。例如，如果其用最多N个时间单位向网络上的所有节点散布事件，则基础拓扑会在至少N个时间单位之前反映网络拓扑。

在图9所示的示例性序列中，节点此后接收到时间戳为T1的事件。该事件将被处理以更新该节点的拓扑。该节点的新拓扑将会被加上时间T1的时间戳，以与最近应用的事件的时间戳相一致。

如图9所示，如果节点随后接收到时间戳为T2的另一事件(这指示该事件发生在节点拓扑的时间戳T1之后的时间点)，则节点会知悉，时间戳T1处的拓扑相对于时间戳为T2的事件而言是最新的，并且节点此后会直接应用事件T2以更新其拓扑。用于该拓扑的新的时间戳将被更新为T2。只要事件是以时间次序被接收的，则当事件被接收到时，该过程会以节点应用事件而继续进行。

尽管如此，在所接收到的事件的时间戳在时间上早于与节点拓扑相关联的时间戳的情况下，节点将需要回到先前拓扑，应用新接收到的事件，并继续应用其它事件，以使得以时间戳次序应用事件。图10和11显示了两种实现其的可能方式。

例如，如图10和11的每个图所示，假设节点最初接收与以上结合图9所讨论的相同序列的事件。具体地，节点首先接收到时间戳为T1的事件，并应用该事件以创建具有时间戳T1的拓扑数据库。接着，该节点接收到时间戳为T2的事件，并更新其拓扑数据库以反映此第二事件。因而，在该时间点，节点具有时间戳为T2的拓扑。

现在假设后续接收到具有在当前拓扑的时间戳之前的时间戳T3的新事件。具体地，T3＜T2。在图10所示的实施例中，节点可回复到具有在时间上早于与新事件相关联的时间戳的时间戳T1的中间拓扑，并且此后重新应用所有自从该时间点以来已经发生的事件。在图10中，这是通过使节点回复到时间戳为T1的拓扑、应用新接收到的事件(事件T3)、并且此后应用之前所接收到的事件(事件T2)来阐释的。

替代地，如图11中所示，节点可回复到基础拓扑并以时间戳的次序应用所有事件。因而，例如在图11中，节点会获取(retrieve)其基础拓扑，丢弃它已存储的任何其它拓扑，并以时间戳的次序将所有之前所接收到的事件与新接收到的事件一起重新应用，以创建新拓扑。

如结合图9-11所讨论的那样，在事件可能被无序地接收的情况下，节点需要能够回到先前版本的拓扑数据库，以确保在事件被应用到拓扑数据库之前所有事件能够被正确排序。这确保了网络上的所有节点以相同次序应用事件，并且因此，在为网络上的连接计算路由时，所有节点都利用对网络拓扑的相同视图来操作。

因为给定节点可在网络上操作达延长的时间段，从存储器/存储装置角度看，保存无限数量版本的拓扑数据库可能变得很困难。为缓和这一困难，可能需要网络节点仅存储被有理由认为在稍后时间点上必要的那些版本的拓扑数据库，以使得网络节点在统计上不可能接收到时间戳早于其拓扑数据库的时间戳的事件。

在典型网络中，对扩散遍及全网络所需的时间量存在限制。例如，如果节点知悉事件并且生成在网络上扩散的通知，则网络上所有可达到的节点会在特定时间段内接收到扩散。将假设该扩散限制为N个时间单位，例如，可以是若干秒或更短。因为N表示每个节点接收到来自于任何其它节点的扩散将花费的理论上最大时间量，所以节点可预测其不会接收到任何需要其回复到所加时间戳为多于N个时间单位之前的拓扑的事件。

因而，如图12所示，节点可实施滑窗，以使得其基础拓扑是在时间上至少早于其当前拓扑N个单位时所计算出的拓扑，或者是在时间上至少早于其最新事件通知N个时间单位时所计算出的拓扑。取决于实施方式，节点可保存每个中间拓扑(图10)或者可仅保存基础拓扑和当前拓扑(图11)。每个节点还会保存自与基础拓扑相关联的时间以来已发生的事件的有序列表。如果后来有必要将另一事件插入该有序列表，则节点会回到基础拓扑(或回到中间拓扑)并且重新应用包括新插入的事件在内的事件，以便根据事件的新序列来重新计算新拓扑。基础拓扑可被更新以使得基础拓扑被选择成先于当前拓扑至少N个时间单位的最新拓扑。如果在N个时间单位中没有知悉事件，则当前拓扑变成基础拓扑，并且可从存储器中删除在前的拓扑。此外，能够从存储器中删除所存储的至少N个时间单位那么久的所有事件。

图14是可由节点在接收到诸如故障通知之类的事件时，用来更新其拓扑数据库和转发状态的过程的流程图。如图14所示，当节点接收到故障通知(100)时，其会删除用于受故障通知影响的所有连接的路由信息(102)。节点还会将连接所占用的任何带宽沿路由返回至拓扑数据库中(104)。在完成这些过程时，节点准备好为受影响的连接计算新路由。因而，节点会继续以优先级次序为每个受影响的连接计算恢复路由(106)。通过首先为较高优先级的连接计算恢复路径，可在网络上实现全网络范围的连接优先级恢复过程。如果用于该连接的新路由并未通过该节点，则该节点会除去用于该连接的、任何所安装的转发状态(108)。尽管如此，如果用于该连接的新路由确实通过了该节点，则该节点或者安装用于该连接的转发状态或者修改任何现有转发状态，以便与用于该连接的新计算的转发状态相一致(110)。

图15是可由节点用于把事件序列应用到拓扑数据库的过程的流程图。如图15所示，当节点接收事件(120)时，它会将事件的时间戳与其当前拓扑的时间戳进行比较(122)。如果事件的时间戳在当前拓扑的时间戳之后，则节点无需回复到先前拓扑，并且因此只是会将事件应用至当前拓扑(124)。例如，在事件为故障通知的情况下，该节点可使用结合图14所描述的过程来应用事件。在该事件是其它类型的事件(诸如连接添加)的情况下，该节点会继续为连接确定路由并且在必要时安装转发状态。对于连接删除，节点可只是更新拓扑数据库以显示最新可用的带宽，并删除用于该连接的任何转发状态。

如果该事件的时间戳指示其发生在节点的当前拓扑的时间戳之前的时间点上，则节点将需要回到先前保存的拓扑数据库版本。因而，节点会选择其时间戳在该事件的时间戳之前的拓扑(126)。所选择的拓扑可以是基础拓扑或者介入式(intervening)拓扑，在介入式拓扑中，节点已经存储了多于一个在前拓扑。在选择拓扑之后，节点将从事件记录中获取事件列表(128)，把新事件插入到列表中的适当的按时间排序的位置处，并且此后把来自事件记录的事件和当前事件以正确的时间次序应用到所获取的在前拓扑(130)。

一旦已将事件应用到拓扑，节点就会用已经被应用到拓扑的最新事件的时间戳来更新当前拓扑的时间戳。新接收到的事件也将被添加至事件记录中(134)。

因为首要目标是使所有节点以相同的次序应用拓扑改变，所以网络上的节点的同步并不重要。相反，如果节点之一与其它节点不同步，则其会生成有些不正确的时间戳。因此，其它节点可能会以与真实时间次序不同的次序(即次序颠倒)应用从该节点接收的更新，所述真实时间次序是网络上事件实际发生的次序。这是可以容许的，原因是主要目标是使所有节点以相同次序来应用事件，而不考虑所用次序是否为事件发生的实际次序。换句话说，只要节点都以相同方式来应用事件，则节点以不正确的次序来应用事件是没有问题的。

优选地，节点应该几乎相互同步，以使得当实际发生更新时，可在时间上紧密应用更新。当节点相互之间严重不同步时，节点用来选择基础拓扑的时间段N(见图12)应被增加至计及非同步。

上述功能可被实施为程序指令集，该程序指令集被存储在计算机可读介质中并在计算机平台上的一个或多个处理器上执行。尽管如此，对于本领域内的技术人员而言很显然的是，能够使用分立元件、集成电路、诸如专用集成电路(ASIC)、结合可编程逻辑器件(诸如现场可编程门阵列(FPGA))使用的可编程逻辑、或微处理器、状态机、或包括上述各项的任意组合在内的任何其他器件来实现本说明书中所描述的所有逻辑。可编程逻辑可临时或永久固定在有形介质(诸如只读存储器芯片、计算机存储器、磁盘或其它存储介质)中。所有这些实施例意在落入本发明的范围之内。

应当理解，在本发明的精神和范围内，可对附图中所示出的以及本说明书中所描述的实施例进行各种改变和修改。因而，本说明书意在以阐释性而非限制性方式来解释上述描述中所包含的以及附图中所示出的所有内容。本发明仅由所附权利要求及其等价物来限定。

Claims (23)

1.一种在网络中进行分布式连接建立的方法，所述方法包括以下步骤：

由在链路状态协议控制的以太网上的节点保存对网络拓扑的一致视图；

当将在网络上建立新连接时，通告与新连接相关联的约束；

由在链路状态协议控制的以太网上的每个节点基于所述约束来为新连接计算路由；以及

由所计算的路由上的节点选择性地为新连接安装转发状态。

2.根据权利要求1所述的方法，其中所述网络是链路状态协议控制的以太网。

3.根据权利要求1所述的方法，其中所述节点保存连接数据库，所述连接数据库包含定义网络上已建立的连接和用于那些连接的路由的条目。

4.根据权利要求1所述的方法，其中所述约束至少包括网络上的首端节点、网络上的目的节点、对与连接相关联的带宽的指示以及对连接的优先级指示。

5.根据权利要求4所述的方法，还包括按优先级次序为连接计算路由的步骤。

6.根据权利要求5所述的方法，还包括：如果节点处于所计算的用于连接的路由上，则由节点选择性地为连接安装转发状态。

7.根据权利要求1所述的方法，其中网络上的每个节点既保存具有第一时间戳的网络拓扑的当前视图、具有第二时间戳的网络拓扑的先前视图，又保存在与网络拓扑的先前视图相关联的时间和与网络拓扑的当前视图相关联的时间之间已发生的加时间戳的事件的列表。

8.根据权利要求7所述的方法，还包括接收包含第三时间戳的事件通知的步骤。

9.根据权利要求8所述的方法，其中所述事件通知涉及以下项中至少之一：在网络上添加新节点或链路、在网络上删除节点或链路、连接添加、连接删除、网络上的节点或链路故障、以及网络上先前故障的节点或链路的复原。

10.根据权利要求8所述的方法，还包括将事件通知的第三时间戳与网络拓扑的当前视图的第一时间戳进行比较的步骤。

11.根据权利要求10所述的方法，还包括以下步骤：如果事件通知的第三时间戳在网络拓扑的当前视图的第一时间戳之后，则将事件通知应用于当前拓扑。

12.根据权利要求10所述的方法，还包括以下步骤：如果事件通知的第三时间戳在网络拓扑的当前视图的第一时间戳之前，则回复到网络拓扑的先前视图，并且把来自于加时间戳的事件的列表的事件与事件通知一起重新应用。

13.一种在链路状态协议控制的以太网中实施基于全网络范围优先级的连接恢复的方法，所述方法包括以下步骤：

由网络上的节点存储与网络上已建立的连接相关联的约束和路由信息，所述约束包含与网络上已建立的连接相关联的优先级信息；

接收与网络上的故障相关联的故障通知，所述故障影响网络上已建立的连接子集；

由网络上的节点根据优先级信息为受故障影响的连接子集计算恢复路由，所述节点根据约束信息来计算所述恢复路由。

14.根据权利要求13所述的方法，其中所述节点根据优先级信息来为连接计算恢复路由，以在为较低优先级的连接计算路由之前，为较高优先级的连接计算恢复路由。

15.根据权利要求14所述的方法，还包括：如果节点处于所计算的用于连接的路由上，则由节点选择性地为连接安装转发状态。

16.一种由在链路状态协议控制的以太网上的首端节点建立新连接的方法，所述方法包括：

由首端节点扩散链路状态协议控制消息，该消息包含与将在链路状态协议控制的以太网上建立的新连接相关联的约束，所述约束至少包括与新连接相关联的链路状态协议控制的以太网上的目的节点、与新连接相关联的带宽、以及新连接的优先级。

17.一种由在链路状态协议控制的以太网上的节点选择性地安装转发状态的方法，所述方法包括以下步骤：

接收链路状态协议控制消息，该消息包含与将在链路状态协议控制的以太网上建立的新连接相关联的约束信息；

基于所述约束和链路状态协议控制的以太网的拓扑的视图，为新连接计算路由；

更新网络拓扑的视图，以反映所计算的路由上的新连接；以及

如果节点处于所计算的用于新连接的路由上，则由节点选择性地为新连接安装转发状态。

18.根据权利要求17所述的方法，还包括以下步骤：

由节点保存连接数据库，所述连接数据库包含与网络上已建立的连接相关联的条目，所述条目至少包含与连接相关联的约束信息。

19.根据权利要求17所述的方法，其中所述连接数据库以优先级次序保存连接。

20.根据权利要求17所述的方法，还包括以下步骤：

接收指示网络上发生故障的故障通知；

更新网络拓扑的视图以反映故障；

根据连接数据库来确定哪些连接受到故障影响；以及

以优先级次序为受影响的连接计算恢复路由。

21.根据权利要求20所述的方法，其中为受影响的连接计算恢复路由的步骤包括：获取与连接相关联的约束，并对照网络拓扑的视图来处理所述约束以便为所述连接确定恢复路由。

22.根据权利要求21所述的方法，其中为受影响的连接计算恢复路由的步骤包括：

将与受影响的连接相关联的带宽返回到网络拓扑数据库；

选择最高优先级连接；

为最高优先级连接确定恢复路由；

为来自于拓扑数据库的最高优先级的连接分配带宽；以及

如果节点处于用于最高优先级连接的恢复路由上，则由节点选择性地安装转发状态；

以优先级次序为剩余连接重复选择、确定、分配和选择性安装的步骤。

23.一种在链路状态协议控制的以太网上的节点，所述节点包括：

具有第一时间戳的第一拓扑数据库；以及

具有第二时间戳的第二拓扑数据库；

其中第一和第二拓扑数据库表示在两个不同时间点上链路状态协议控制的以太网的拓扑的视图。

Images